学习 Linux 中的大内存页hugepage。理解什么是“大内存页”,如何进行配置,如何查看当前状态以及如何禁用它。

本文中我们会详细介绍大内存页huge page,让你能够回答:Linux 中的“大内存页”是什么?在 RHEL6、RHEL7、Ubuntu 等 Linux 中,如何启用/禁用“大内存页”?如何查看“大内存页”的当前值?

首先让我们从“大内存页”的基础知识开始讲起。

Linux 中的“大内存页”是个什么玩意?

“大内存页”有助于 Linux 系统进行虚拟内存管理。顾名思义,除了标准的 4KB 大小的页面外,它们还能帮助管理内存中的巨大的页面。使用“大内存页”,你***可以定义 1GB 的页面大小。

在系统启动期间,你能用“大内存页”为应用程序预留一部分内存。这部分内存,即被“大内存页”占用的这些存储器永远不会被交换出内存。它会一直保留其中,除非你修改了配置。这会极大地提高像 Oracle 数据库这样的需要海量内存的应用程序的性能。

为什么使用“大内存页”?

在虚拟内存管理中,内核维护一个将虚拟内存地址映射到物理地址的表,对于每个页面操作,内核都需要加载相关的映射。如果你的内存页很小,那么你需要加载的页就会很多,导致内核会加载更多的映射表。而这会降低性能。

使用“大内存页”,意味着所需要的页变少了。从而大大减少由内核加载的映射表的数量。这提高了内核级别的性能最终有利于应用程序的性能。

简而言之,通过启用“大内存页”,系统具只需要处理较少的页面映射表,从而减少访问/维护它们的开销!

如何配置“大内存页”?

运行下面命令来查看当前“大内存页”的详细内容。

root@kerneltalks#grepHuge/proc/meminfo

AnonHugePages:0kB

HugePages_Total:0

HugePages_Free:0

HugePages_Rsvd:0

HugePages_Surp:0

Hugepagesize:2048kB

从上面输出可以看到,每个页的大小为 2MB(Hugepagesize),并且系统中目前有 0 个“大内存页”(HugePages_Total)。这里“大内存页”的大小可以从 2MB 增加到 1GB。

运行下面的脚本可以知道系统当前需要多少个巨大页。该脚本取之于 Oracle。

#!/bin/bash

#

#hugepages_settings.sh

#

#Linuxbashscriptto compute valuesforthe

#recommendedHugePages/HugeTLBconfiguration

#

#Note:Thisscriptdoes calculationforall shared memory

#segments availablewhenthescriptisrun,nomatter it

#isanOracleRDBMS shared memory segmentornot.

#Checkforthe kernel version

KERN=`uname -r | awk -F. '{ printf("%d.%d\n",$1,$2); }'`

#Findout theHugePagesize

HPG_SZ=`grep Hugepagesize /proc/meminfo | awk {'print $2'}`

#Startfrom1pages to be on the safe sideandguarantee1freeHugePage

NUM_PG=1

#Cumulativenumber of pages required to handle the running shared memory segments

forSEG_BYTESin`ipcs -m | awk {'print $5'} | grep "[0-9][0-9]*"`

do

MIN_PG=`echo "$SEG_BYTES/($HPG_SZ*1024)" | bc -q`

if[$MIN_PG-gt0];then

NUM_PG=`echo "$NUM_PG+$MIN_PG+1" | bc -q`

fi

done

#Finishwithresults

case$KERNin

'2.4')HUGETLB_POOL=`echo "$NUM_PG*$HPG_SZ/1024" | bc -q`;

echo"Recommended setting: vm.hugetlb_pool = $HUGETLB_POOL";;

'2.6'|'3.8'|'3.10'|'4.1')echo"Recommended setting: vm.nr_hugepages = $NUM_PG";;

*)echo"Unrecognized kernel version $KERN. Exiting.";;

esac

#End

将它以 hugepages_settings.sh 为名保存到 /tmp 中,然后运行之:

root@kerneltalks#sh/tmp/hugepages_settings.sh

Recommendedsetting:vm.nr_hugepages=124

你的输出类似如上结果,只是数字会有一些出入。

这意味着,你系统需要 124 个每个 2MB 的“大内存页”!若你设置页面大小为 4MB,则结果就变成了 62。你明白了吧?

配置内核中的“大内存页”

本文***一部分内容是配置上面提到的 内核参数 ,然后重新加载。将下面内容添加到 /etc/sysctl.conf 中,然后输入 sysctl -p 命令重新加载配置。

vm.nr_hugepages=126

注意我们这里多加了两个额外的页,因为我们希望在实际需要的页面数量之外多一些额外的空闲页。

现在,内核已经配置好了,但是要让应用能够使用这些“大内存页”还需要提高内存的使用阀值。新的内存阀值应该为 126 个页 x 每个页 2 MB = 252 MB,也就是 258048 KB。

你需要编辑 /etc/security/limits.conf 中的如下配置:

soft memlock258048

hard memlock258048

某些情况下,这些设置是在指定应用的文件中配置的,比如 Oracle DB 就是在 /etc/security/limits.d/99-grid-oracle-limits.conf 中配置的。

这就完成了!你可能还需要重启应用来让应用来使用这些新的巨大页。

如何禁用“大内存页”?

“大内存页”默认是开启的。使用下面命令来查看“大内存页”的当前状态。

root@kerneltalks#cat/sys/kernel/mm/transparent_hugepage/enabled

[always]madvise never

输出中的 [always] 标志说明系统启用了“大内存页”。

若使用的是基于 RedHat 的系统,则应该要查看的文件路径为 /sys/kernel/mm/redhat_transparent_hugepage/enabled。

若想禁用“大内存页”,则在 /etc/grub.conf 中的 kernel 行后面加上 transparent_hugepage=never,然后重启系统。

【编辑推荐】

【责任编辑:庞桂玉 TEL:(010)68476606】

点赞 0

Linux一个内存大页多大,Linux中的“大内存页”(hugepage)是个什么?相关推荐

  1. linux pmap 内存泄露,pmap学习:系统测试中怎么确定内存泄露(memory leak)

    性能测试的一项重要工作就是检查有没有内存泄露.linux下通过top/free/pmap/ps,会提供许多关于内存分配的信息,如top里面的VIRT,RSS,SWAP,VSZ,RES,SHR等等,到底 ...

  2. 螺旋图形Linux,一个实例带你熟练使用UG中的螺旋线,新手必备!

    原标题:一个实例带你熟练使用UG中的螺旋线,新手必备! 今天咱们来一个稍微难一点点的花纹缸体,要用到咱们UG中的螺旋线哦! 图形分析:该缸体主体为圆柱体,可以采用圆柱体和凸台完成,根据图形标注特点需要 ...

  3. 法国大数据:智慧城市中的大数据

    1.推进力量 2013年2月,法国政府发布<数字化路线图>,列出5项将会大力支持的战略性高新技术,其中一项就是大数据.法国政府将以新兴企业.软件制造商.工程师.信息系统设计师等为目标,开展 ...

  4. 在计算机使用过程中内存出现,电脑在使用过程中提示电脑内存不足怎么办?

    在使用电脑的过程中可能会出现系统死机或蓝屏现象.导致电脑系统死机的因素有很多,其中电脑内存问题导致系统死机就是比较常见的.如果在使用过程中发现电脑提示内存不足怎么办?小编给大家分享一篇电脑内存不足的解 ...

  5. linux java的启动内存溢出,java - Java的R代码可在Linux上运行,但不能在Windows中运行 - 堆栈内存溢出...

    我在做什么? 我正在用Java编写一个数据分析程序,该程序依赖R的arulesViz库来挖掘关联规则. 我想要什么? 我的目的是将规则存储在Java中的String变量中,以便以后进行处理. 它是如何 ...

  6. 65页PPT|数字化转型中的大数据治理如何落地

    推荐阅读: 世界的真实格局分析,地球人类社会底层运行原理 不是你需要中台,而是一名合格的架构师(附各大厂中台建设PPT)企业IT技术架构规划方案论数字化转型--转什么,如何转?华为干部与人才发展手册( ...

  7. Rocky Linux一个可用于生成环境的Linux

    2020年12 月份,CentOS 官网正式宣布,将停止维护 CentOS Linux,并将更多资金和人力投入到 CentOS Stream中.而 Rocky Linux 是红帽宣布放弃 CentOS ...

  8. pands 画图 调整大小_胜负盘和大小盘盘赔组合中的大球模式

    笔者之前给大家介绍过一种如何通过胜负盘和大小球盘综合判断深盘爆冷的方法,其实那只是胜负盘和大小盘盘赔组合的冰山一角,今天笔者将为大家带来另一种盘赔组合的看盘技巧,由于方法有点复杂,因此还是通过案例来为 ...

  9. python程序内存分析_python 如何测量运行中的程序内存 -- Valgrind

    介绍 通常我们可以用python profiler去分析应用程序中哪个模块被多次调用和那个程序部分运行的速度较为缓慢,但是并不能够准确给出我们应用程序在运行中在内存中占用的大小. 比如说在金融数据中会 ...

  10. 计算机内存存取时间和存储周期,在计算机中什么是内存存取时间和存储周期?...

    存取时间,指的是CPU读或写内存内数据的过程时间. 以读取为例,从CPU发出指令给内存时,便会要求内存取用特定地址的数据,内存响应CPU后便会将CPU所需要的数据送给CPU,一直到CPU收到数据为止, ...

最新文章

  1. 用json来组织数据,用IGame导出模型
  2. Ubuntu install of ROS Melodic
  3. 北邮OJ 102. 最远距离 北邮2012网研院复试上机题
  4. 作为IT面试官,我如何考核计算机专业毕业生?作为培训班老师,我又如何提升他们?...
  5. 教你怎么在vi和vim上查找字符串
  6. java程序打包为jar_将Java应用程序打包为一个(或胖)JAR
  7. CentOS6.8 下MySQL5.6.29主从复制架构配置
  8. 杭电ACM--2004成绩转换
  9. 练打字-测试看图说话(AD安装)
  10. Java IO学习笔记(五):内存操作流
  11. Kepware软件使用手册
  12. 备考进行时!2020年中级通信工程师传输与接入(无线)考试大纲
  13. matlab图像加椒盐噪声,用matlab给图像加高斯噪声和椒盐噪声(不调用imnoise函数)...
  14. SAP中采购协议价格条件导致的物料成本核算取价问题实例
  15. 用于视觉识别的深度卷积网络空间金字塔池化方法
  16. 如何使用Android Studio将网站转换为Android App
  17. PHP面试-复习知识点整理
  18. 【简书交友】阿群1986: 一个专注于修电脑做系统的青岛小哥
  19. 四种色彩模式ARGB_8888、ARGB_4444、 RGB_565、 ALPHA_8的区别
  20. VM安装VMTool工具

热门文章

  1. unity 播放网络MP3的多种方法
  2. ijkplayer android 内存,IjkPlayer
  3. ijkplayer 参数说明文档 --个人使用
  4. 分享一些自己的学习过程和学习方法(来自daimajia)
  5. 专访CSW:我忙着改变世界,没空理你
  6. 使用Python+OpenCV+Dlib实现人脸检测与人脸特征关键点识别
  7. 今天会用了正则表达式
  8. 企业为什么会陷入财务危机?财务危机案例启示录
  9. linux下服务器监控软件
  10. echarts折线图堆叠怎么设置_ECharts折线图堆叠设置为不堆叠的方法