[development][dpdk][hugepage] 大页内存的挂载
参考:
[development][dpdk][hugepage] 为不同的结点分配不同大小的大页内存
完成了以上内容之后, 下一步需要做的是挂载, 大页内存只有被挂载了之后,才能被应用程序使用.
挂载方法如下: 参考dpdk文档: http://dpdk.org/doc/guides/linux_gsg/sys_reqs.html
mkdir /mnt/huge
mount -t hugetlbfs nodev /mnt/huge
如果是有1G的大页, 需要给定默认参数 pagesize=1G, 否则将使用默认的大小.
nodev /mnt/huge_1GB hugetlbfs pagesize=1GB
参考: https://www.kernel.org/doc/Documentation/vm/hugetlbpage.txt
CentOS 7 里面, 有一个service : dev-hugepages.mount 默认将会对大页内存进行挂载:
[root@dpdk crisp]# mount -l |grep huge
hugetlbfs on /dev/hugepages type hugetlbfs (rw,relatime)
参考: https://www.freedesktop.org/wiki/Software/systemd/APIFileSystems/
引用一段话:
So you are seeing all kinds of weird file systems in the output of mount() that are not listed in /etc/fstab, and you wonder what those are, how you can get rid of them, or at least change their mount options.
上文提到, 如过想增加这个参数, 可以在 /etc/fstab 中进行挂载.
同时禁用掉dev-hugepages.mount ???
systemctl mask dev-hugepages.mount
当然还有一招, 文中没提, 但是我莫名的, 天然喜欢后者:
把dev-hugepages.mount 改一下.
/etc/fstab 也是被 systemd管理的, 实际上, /etc/fstab 和 mount.mount 最终是被统一管理的, 以挂载点, 即目录名, 作为唯一识别的标识.
优先顺序由前到后依次为: /etc下的mount.mount > /etc/fstab > /usr下的mount.mount
摘自: https://www.freedesktop.org/software/systemd/man/systemd.mount.html#
If a mount point is configured in both /etc/fstab and a unit file that is stored below /usr, the former will take precedence. If the unit file is stored below /etc, it will take precedence.
This means: native unit files take precedence over traditional configuration files, but this is superseded by the rule that configuration in /etc will always take precedence over configuration in /usr.
基于以上:
可以选择在/etc/fstab中增加一个/dev/hugepages 挂载点, 来覆盖 dev-hugepages.mount
[root@dpdk ~]# cat /etc/fstab |grep huge
nodev /dev/hugepages hugetlbfs defaults,nofail,pagesize=1G
[root@dpdk ~]#
[root@dpdk ~]# mount -l |grep hugetlbfs
nodev on /dev/hugepages type hugetlbfs (rw,relatime,pagesize=1G)
或写个增加了选项的 /etc/systemd/system/dev-hugepages.mount 文件, 来覆盖默认参数.
参数的具体写法: https://www.freedesktop.org/software/systemd/man/systemd.mount.html#Options
[root@dpdk ~]# cp /usr/lib/systemd/system/dev-hugepages.mount /etc/systemd/system/
[root@dpdk ~]# diff /usr/lib/systemd/system/dev-hugepages.mount /etc/systemd/system/dev-hugepages.mount
20a21
> Options=pagesize=1G
[root@dpdk ~]#
[root@dpdk ~]# mount -l |grep hugepages
hugetlbfs on /dev/hugepages type hugetlbfs (rw,relatime,pagesize=1G)
[root@dpdk ~]#
这个时候只是做了基本的系统准备工作, 实际上, 还没有配置使用大页内存:
[root@dpdk ~]# numastat -m |grep Huge
AnonHugePages 8.00 0.00 8.00
HugePages_Total 0.00 0.00 0.00
HugePages_Free 0.00 0.00 0.00
HugePages_Surp 0.00 0.00 0.00
[root@dpdk ~]#
手工方法:
[root@dpdk ~]# echo > /sys/devices/system/node/node1/hugepages/hugepages-1048576kB/nr_hugepages
[root@dpdk ~]# numastat -m |grep Huge
AnonHugePages 8.00 0.00 8.00
HugePages_Total 0.00 2048.00 2048.00
HugePages_Free 0.00 2048.00 2048.00
HugePages_Surp 0.00 0.00 0.00
[root@dpdk ~]#
这样, 只在node1上分配好了大页内存, 而node0上没有.
自动方法: 写一个service, 如下:
╰─>$ cat hugetlb-gigantic-pages.service
[Unit]
Description=HugeTLB Gigantic Pages Reservation
DefaultDependencies=no
Before=dev-hugepages.mount
ConditionPathExists=/sys/devices/system/node
ConditionKernelCommandLine=hugepagesz=1G [Service]
Type=oneshot
RemainAfterExit=yes
ExecStart=/sbin/hugetlb-reserve-pages [Install]
WantedBy=sysinit.target
╰─>$ cat hugetlb-reserve-pages
#! /bin/bash nodes_path=/sys/devices/system/node/
if [ ! -d $nodes_path ]; then
echo "ERROR: $nodes_path does not exist"
exit
fi reserve_pages()
{
echo $ > $nodes_path/$/hugepages/hugepages-1048576kB/nr_hugepages
} # This example reserves 1G pages on node0 and 1G page on node1. You
# can modify it to your needs or add more lines to reserve memory in
# other nodes. Don't forget to uncomment the lines, otherwise then won't
# be executed. reserve_pages node0
reserve_pages node1
然后, 启用并重启
systemctl enable hugetlb-gigantic-pages.service
[development][dpdk][hugepage] 大页内存的挂载的更多相关文章
- Linux 之 hugepage 大页内存理论
HugePages是通过使用大页内存来取代传统的4kb内存页面,使得管理虚拟地址数变少,加快了从虚拟地址到物理地址的映射以及通过摒弃内存页面的换入换出以提高内存的整体性能.尤其是对于8GB以上的内存以 ...
- [development][dpdk][hugepage] 为不同的结点分配不同大小的大页内存
这个事来自dpdk, 所以, 先参考. http://dpdk.org/doc/guides/linux_gsg/sys_reqs.html 当前, 假设你已经读过上边内容, 知道大页内存时候, dp ...
- OpenStack 高性能虚拟机之大页内存
目录 文章目录 目录 前文列表 虚拟存储器系统 页式虚拟存储器 大页内存 Linux 的大页内存 大页的实现原理 大页内存配置 透明巨型页 THP 大页面对内存的影响 Nova 虚拟机的大页内存设置 ...
- 大页内存(HugePages)在通用程序优化中的应用
今天给大家介绍一种比较新奇的程序性能优化方法-大页内存(HugePages),简单来说就是通过增大操作系统页的大小来减小页表,从而避免快表缺失.这方面的资料比较贫乏,而且网上绝大多数资料都是介绍它在O ...
- 大页内存(HugePages)
原文转载自:http://blog.csdn.net/yutianzuijin/article/details/41912871 今天给大家介绍一种比较新奇的程序性能优化方法—大页内存(HugePag ...
- Linux大页内存管理等---菜鸟初学
1. 查看linux的内存情况: free -m 2. 查看是否开启大页的方法: cat /proc/meminfo |grep -i HugePage AnonHugePages: 276480 k ...
- UIO,大页内存,CPU亲和性,NUMA机制等
Linux环境下的UIO(Userspace I/O) UIO 用户空间下驱动程序的支持机制.DPDK使用UIO机制使网卡驱动程序运行在用户态,并采用轮询和零拷贝方式从网卡收取报文,提高收发报文的性能 ...
- Linux内存大页设置
实际环境中,遇到3次由于内存大页设置参数不合理或者错误,导致系统内存不足,或者数据库内存不足的问题. 按照如下方式,推荐设置大页参考下发设置! 参考HugePages on Oracle Linux ...
- LINUX下为ORACLE数据库设置大页--hugepage
在Linux中配置hugepage可以提高oracle的性能,减少oracle sga的页交换,类似于aix中的lagepage. 为什么 使用大页? LINUX内存的默认块大小是4K如果SGA为:1 ...
随机推荐
- Spring Boot 2.0 利用 Spring Security 实现简单的OAuth2.0认证方式2
0.前言 经过前面一小节已经基本配置好了基于SpringBoot+SpringSecurity+OAuth2.0的环境.这一小节主要对一些写固定InMemory的User和Client进行扩展.实现动 ...
- 【IOS】java 与oc之间的比较
Cocoa是什么,Cocoa是使用OC语言编写的工具包,里面有大量的类库.结构体,其实就相当于java中的标准API.C++中的标准库.OC中没有命名空间的概念,所以使用加前缀来防止命名冲突,因此你会 ...
- PHP可变参数
0x00 缘起 在laravel的源码里经常可以看到下面的函数形式 $func(...$args) 0x01 可变参数旧写法 这表示$func支持可变参数,在php5.6之前则是在函数体内调用 fun ...
- java框架篇---Struts2 本地化/国际化(i18n)
国际化(i18n)是规划和实施的产品和服务,使他们能很容易地适应特定的本地语言和文化的过程中,这个过程被称为本地化.国际化的过程有时也被称为翻译或本地化启用.国际化是缩写i18n,因为我和两端用n字打 ...
- Unity5 AssetBundle系列——资源加载卸载以及AssetBundleManifest的使用
下面代码列出了对于assetbundle资源的常用操作,其中有针对bundle.asset.gameobject三种类型对象的操作,实际使用中尽量保证成对使用. 这一块的操作比较繁琐,但只要使用正确, ...
- maven 如何引入本地jar包
比如我下载了 一.怎么添加jar到本地仓库呢?步骤:1.cmd命令进入该jar包所在路径2.执行命令:mvn install:install-file -Dfile=lucene-queryparse ...
- java获取视频的第一帧
//------------maven配置文件--------------- <dependency> <groupId>org.bytedeco</groupId> ...
- php中json_decode及foreach使用总结
<?php $arr=array(); //例子1 $json_str= '{"ret":"OK","questions":{ &qu ...
- java 全组合 与全排列
一.全组合 public static void Combination( ) { /*基本思路:求全组合,则假设原有元素n个,则最终组合结果是2^n个.原因是: * 用位操作方法:假设元素原本有:a ...
- [PyData] 03 - Data Representation
Ref: http://blog.csdn.net/u013534498/article/details/51399035 如何在Python中实现这五类强大的概率分布 考虑下在mgrid上画二维概率 ...