KSM: Kernel SamePage Merging 内核同页合并

简介

KSM允许内核在两个或多个进程(包括虚拟客户机)之间共享完全相同的内存页.

KSM让内核扫描检查正在运行中的程序,并比较他们的内存,如果发现他们有内存区域或内存页是完全相同的,就将多个相同的内存合并为一个单一的内存页,并将其标识为写时复制.这就可以起到节省系统内存使用量的作用.如果之后有进程需要修改被标识为"写时复制"的合并内存页时,就为该进程复制出一个新的内存页供其使用.

写时复制:在Linux中,当使用fork函数创建一个进程时,子进程与其父进程共享全部的内存,而当子进程或父进程试图修改他们的共享内存区域时,内核会分配一块新的内存区域,并将即将被修改的共享内存区域复制到新的内存区域上,然后让进程去修改复制的内存.这就是著名的写时复制.

优点

  1. 提高了缓存命中率,直接导致了操作系统/应用程序的运行速度

在KSM的帮助下,相同的内存页被合并了,减少了客户机的内存使用量,一方面,内存中的内容更容易被保存到到CPU的缓存当中;另一方面,有更多的内存可用于缓存一些磁盘中的数据。因此不管是内存的缓存命中率还磁盘数据的缓存命中率都会提高,从而提高了KVM客户机中操作系统或应用程序的运行速度.

  1. 通过降低客户机的内存用量,提高了虚拟化客户机部署的密度,提高了物理资源的利用效率

缺点

KSM必须有1个或多个进程去检测和找出哪些内存页是完全相同可以用于合并的,并且需要找到那些不会经常更新的可合并的内存页,这样的页才是最适合合并的.由于"可合并内存检测进程"的运行,使CPU使用率有一定程度提高,可能会带来隐蔽的性能问题.

优化及数据

客户机操作系统类型 & 客户机上应用类型

KSM节省的内存大小,与客户机操作系统类型以及其上运行的应用类型有关.

如果宿主机上的客户机操作系统全部相同,其上的应用程序也类似,节省内存的效果就会很显著,甚至节省超过50%的内存也有可能.

反之,如果客户机操作系统不尽相同,运行的应用程序也类型繁多,KSM节省效率就会不好,可能连5%也不会达到,这部分节省的内存,与由于可合并内存检测进程运行导致的CPU使用率升高,孰轻孰重难以衡量.

交换空间

使用KSM时最好保证宿主机的交换空间(SWAP SPACE)够大,因为KSM将不同客户机的相同内存页合并从而减少了内存使用量,但与此同时,客户机可能由于需要修改被KSM合并的内存页,使这些被修改的内存被重新复制出来占用内存空间,可能会导致系统内存的不足,因此需要足够的交换空间保证宿主机系统的正常运行.

参考资料

《KVM虚拟化技术实战与原理解析》

KSM概念学习的更多相关文章

  1. OutputCache概念学习

    目录 OutputCache概念学习 OutputCache属性详解(一) OutputCache属性详解(二) OutputCache属性详解(三) OutputCache属性详解(四)— SqlD ...

  2. 虚拟机NUMA和内存KSM

    KSM技术可以合并相同的内存页,即使是不同的NUMA节点,如果需要关闭跨NUMA节点的内存合并,设置/sys/kernel/mm/ksm/merge_across_nodes参数为0.或者可以关闭特定 ...

  3. 概念学习(Concept Learning)

    从特殊的训练样例中归纳出一般函数是机器学习的核心问题.一般函数是对理想目标函数的函数逼近(function approximation).简而言之,从特殊到普通.与此对应的是演绎推理(deductiv ...

  4. KSM剖析——Linux 内核中的内存去耦合

    简介: 作为一个系统管理程序(hypervisor),Linux® 有几个创新,2.6.32 内核中一个有趣的变化是 KSM(Kernel Samepage Merging)  允许这个系统管理程序通 ...

  5. 操作系统概念学习笔记 10 CPU调度

    操作系统概念学习笔记 10 CPU调度 多道程序操作系统的基础.通过在进程之间切换CPU.操作系统能够提高计算机的吞吐率. 对于单处理器系统.每次仅仅同意一个进程执行:不论什么其它进程必须等待,直到C ...

  6. 概念学习 - JNDI, JDBC, ODBC, DataSource

    layout: post title: 概念学习 - JNDI, JDBC, ODBC, DataSource --- 最近在学习Java Hibernate,对数据库资源访问这块好多概念模糊,所以在 ...

  7. SSH深度历险(十一) AOP原理及相关概念学习+xml配置实例(对比注解方式的优缺点)

    接上一篇 SSH深度历险(十) AOP原理及相关概念学习+AspectJ注解方式配置spring AOP,本篇我们主要是来学习使用配置XML实现AOP 本文采用强制的CGLB代理方式 Security ...

  8. SSH深度历险(十) AOP原理及相关概念学习+AspectJ注解方式配置spring AOP

    AOP(Aspect Oriented Programming),是面向切面编程的技术.AOP基于IoC基础,是对OOP的有益补充. AOP之所以能得到广泛应用,主要是因为它将应用系统拆分分了2个部分 ...

  9. Linux内存管理 (17)KSM

    专题:Linux内存管理专题 关键词:KSM.匿名页面.COW.madvise .MERGEABLE.UNMERGEABLE. KSM是Kernel Samepage Merging的意思,用于合并内 ...

随机推荐

  1. Spring Boot配置,读取配置文件

    Spring Boot配置,读取配置文件 一.配置Spring Boot 1.1 服务器配置 1.2 使用其他Web服务器 1.3 配置启动信息 1.4 配置浏览器显示ico 1.5 Yaml语法 1 ...

  2. linux 用户、用户组及相关命令(useradd 、passwd、userdel 、groupadd 、groupdel、usermod 、gpasswd 、 id、su)

    linux是一个多用户系统,用于权限管理(权限最小化); 相关命令: 7 8 9 10 11 12 13 14 15 useradd passwd userdel groupadd groupdel ...

  3. 第2层交换和生成树协议(STP)__散知识点

    1.交换式服务 网桥是基于软件的,而交换机使用专用集成电路(ASIC)来创建并维护其过滤表.2层交换机和网桥转发数据的速度比路由器快一些,因为它们不查看网络层报头的信息,不对数据包做任何修改.相反,在 ...

  4. 答疑解惑之ExecutorService——shutdown方法和awaitTermination方法使用

    ExecutorService的关闭 shutdown和awaitTermination为接口ExecutorService定义的两个方法,一般情况配合使用来关闭线程池. shutdownnow和它的 ...

  5. Java初体验

    参考书籍「Java语言程序设计基础篇」 比特与字节 计算机中只有0和1,二进制,即比特(bit,二进制数): 字节(byte)是最小的存储单元,每个字节有8个比特组成 即:1byte=8bit 各种数 ...

  6. Codeforces Round #668 (Div. 2) B. Array Cancellation (思维,贪心)

    题意:有一个长度为\(n\)并且所有元素和为\(0\)的序列,你可以使\(a_{i}-1\)并且\(a_{j}+1\),如果\(i<j\),那么这步操作就是免费的,否则需要花费一次操作,问最少操 ...

  7. 说说Golang goroutine并发那些事儿

    摘要:今天我们一起盘点一下Golang并发那些事儿. Golang.Golang.Golang 真的够浪,今天我们一起盘点一下Golang并发那些事儿,准确来说是goroutine,关于多线程并发,咱 ...

  8. Shell 编程练习

    将后缀名为 .txt 的文件改成 .log [root@k8s-master test]# touch localhost_2020-01-{02..26}.txt [root@k8s-master ...

  9. CGI & FastCGI 协议

    目录 CGI 是什么 CGI 特点 CGI 的流程 FastCGI 是什么 CGI & FastCGI(转载) 推荐Blog: CGI是什么,FastCGI是什么 CGI 是什么 公共网关接口 ...

  10. Kubernetes部署Prometheus+Grafana(非存储持久化方式部署)

    1.在master节点处新建一个文件夹,用于保存下载prometheus+granfana的yaml文件 mkdir /root/prometheus cd /root/prometheus git ...