《Linux内核精髓：精通Linux内核必会的75个绝技》一HACK #12 使用Memory Cgroup限制内存使用量

HACK #12　使用Memory Cgroup限制内存使用量

Memory Cgroup是Cgroup的资源限制功能之一，可以控制特定进程可以使用的内存量。
Memory Cgroup
Memory Cgroup是Cgroup（参考Hack #7）之一，用来控制进程所使用的内存（LRU管理的缓存）数量。
其用法有很多种，例如，可以用来避免因一时处理较大文件或大量文件，而导致无用的页面缓存增大，内存资源紧张的情况。另外，还可以在多用户环境中限制各用户可以使用的内存量。
用法
Memory Cgroup是Cgroup的一种，因此使用前必须挂载cgroup文件系统。启用Memory Cgroup时，可以为挂载命令指定memory选项，也可以不指定选项以启用Cgroup的所有功能。
本节使用下列方式挂载到/cgroup。

# mount -t cgroup -o memory memcg /cgroup

挂载cgroup后，通过在/cgroup下创建新目录来创建新的分组。Memory Cgroup可以通过对该目录下的文件设置参数，来控制内存使用量。
另外，能否通过Cgroup文件系统控制以及特殊文件的种类多少，会根据内核版本和内核config的不同有所差异。
Cgroup文件系统中关于Memory Cgroup配置的主要特殊文件如表2-3所示。
表2-3　关于Memory Cgroup的主要文件

限制内存使用量
内存使用量可以使用memory.limit_in_bytes进行限制。这里创建一个名称为GroupA的分组，尝试将内存使用量限制为10MB。可以通过如下命令行实现。

# mkdir /cgroup/GroupA
# echo 10M > /cgroup/GroupA/memory.limit_in_bytes
# echo $$ > /cgroup/GroupA/tasks

下面看一下Memory Cgroup限制内存使用量的效果。
1.获取较大的文件
首先，看一下不对内存使用量进行限制时的结果。

# free
             total       used       free     shared    buffers     cached
Mem:       1021532     415728     605804          0      24260     141764
-/+ buffers/cache:     249704     771828
Swap:      2064376          0    2064376

# wget http://ftp.yz.yamagata-u.ac.jp/pub/linux/centos/5.6/isos/x86_64/CentOS-5.6-x86_64-LiveCD.iso
--2011-04-19 00:35:27--  http://ftp.yz.yamagata-u.ac.jp/pub/linux/centos/5.6/isos/x86_64/CentOS-5.6-x86_64-LiveCD.iso
Resolving ftp.yz.yamagata-u.ac.jp... 133.24.255.153, 133.24.255.161
Connecting to ftp.yz.yamagata-u.ac.jp|133.24.255.153|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 733669376 (700M) [application/x-iso9660-image]
Saving to: "CentOS-5.6-x86_64-LiveCD.iso"

100%[======================================>] 733,669,376  496K/s   in 22m 44s 

2011-04-19 00:58:11 (525 KB/s) - "CentOS-5.6-x86_64-LiveCD.iso" saved [733669376/733669376]

# free
             total       used       free     shared    buffers     cached
Mem:       1021532     957288      64244          0      12944     676844
-/+ buffers/cache:     267500     754032
Swap:      2064376          0    2064376

从free来看，原本有约600MB的空闲内存减少到约60MB。而cached的值大幅增加，可以看出对wget命令获取的约700MB的文件进行缓存时使用了空闲内存。
下面看一下将内存使用量限制为10MB时的结果。

# free
             total       used       free     shared    buffers     cached
Mem:       1021532     419988     601544          0      23280     154960
-/+ buffers/cache:     241748     779784
Swap:      2064376          0    2064376

# wget http://ftp.yz.yamagata-u.ac.jp/pub/linux/centos/5.6/isos/x86_64/CentOS-5.6-x86_64-LiveCD.iso
--2011-04-19 23:04:47--  http://ftp.yz.yamagata-u.ac.jp/pub/linux/centos/5.6/isos/x86_64/CentOS-5.6-x86_64-LiveCD.iso
Resolving ftp.yz.yamagata-u.ac.jp... 133.24.255.153, 133.24.255.161
Connecting to ftp.yz.yamagata-u.ac.jp|133.24.255.153|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 733669376 (700M) [application/x-iso9660-image]
Saving to: "CentOS-5.6-x86_64-LiveCD.iso"

100%[======================================>] 733,669,376  579K/s   in 24m 4s  

2011-04-19 23:28:51 (496 KB/s) - "CentOS-5.6-x86_64-LiveCD.iso" saved [733669376/733669376]

# free
             total       used       free     shared    buffers     cached
Mem:       1021532     432732     588800          0      25744     164656
-/+ buffers/cache:     242332     779200
Swap:      2064376          0    2064376

从free命令中cached的差别可以看出内存使用量限制在约10MB。
2.备份处理
在通过tar命令创建数据库时也可以使用。以Linux内核源代码数据库为例进行说明。
不限制内存使用量时：

# free; tar cf linux.tar linux; free
             total       used       free     shared    buffers     cached
Mem:       1021532     286136     735396          0      20144     110392
-/+ buffers/cache:     155600     865932
Swap:      2064376          0    2064376
             total       used       free     shared    buffers     cached
Mem:       1021532     949472      72060          0      20644     718776
-/+ buffers/cache:     210052     811480
Swap:      2064376          0    2064376

内存使用量限制为10MB时：

# free; tar cf linux.tar linux; free
             total       used       free     shared    buffers     cached
Mem:       1021532     288760     732772          0      20204     110372
-/+ buffers/cache:     158184     863348
Swap:      2064376          0    2064376
             total       used       free     shared    buffers     cached
Mem:       1021532     340476     681056          0      21732     118752
-/+ buffers/cache:     199992     821540
Swap:      2064376          0    2064376

可以发现内存同样限制为10MB。
层次结构
通过Memory Cgroup控制的分组可以采用层次结构。可以在memory.use_hierarchy中写入1，启用分组的层次结构。

# echo 1 > /cgroup/memory.use_hierarchy

例如，通过执行下列命令审校者注1，可以创建如图2-1所示的分组结构。

# mkdir /cgroup/A
# echo 100M > /cgroup/A/memory.limit_in_bytes
# mkdir /cgroup/A/{B1,B2}
# echo 70M > /cgroup/A/B1/memory.limit_in_bytes
# echo 30M > /cgroup/A/B2/memory.limit_in_bytes
# mkdir /cgroup/A/B1/{C11,C12}
# echo 40M > /cgroup/A/B1/C11/memory.limit_in_bytes
# echo 30M > /cgroup/A/B1/C12/memory.limit_in_bytes
# mkdir /cgroup/A/B2/{C21,C22}
# echo 20M > /cgroup/A/B2/C21/memory.limit_in_bytes
# echo 10M > /cgroup/A/B2/C22/memory.limit_in_bytes

图2-1　创建的分组结构
显示统计信息
关于各分组内存使用量的统计信息可以从memory.stat文件中读取（见表2-4）。
表2-4　内存使用量的统计信息

下列内容在使用层次结构时有效，将显示层次结构中处于上层的分组所限制的值（见表2-5）。
表2-5　使用层次结构时的分组限制值

表2-6所示为层次结构中分组的合计，在本分组下创建的所有分组的合计值。
表2-6　层次结构中分组下的合计值

小结
本节介绍了Memory Cgroup。使用Memory Cgroup设置内存使用量的上限，就可以避免产生多余的页面缓存，减少对其他处理的影响。
参考文献
Documentation/cgroup/memory.txt
—Hiroshi Shimamoto