SQL Server 内存和Paging
一,内存term
VAS:Virtual Address Space,是App能够申请访问的最大地址空间。
Physical Memory:对SQL Server 来说,频繁访问的数据对象长时间驻留在Physical Memory中,才能达到最优的性能。
Reserved Memory:申请将VAS的一段地址空间Reserve。保留的只是VAS上的一段地址,而不是真正的Physical memory。
Committed Memory:对Reserved的部分 Memory Page 进行Commit,Commit 操作是建立VAS 和 Physical memory 之间的映射,因此Committed Memory将隐射到实际的Physical Memory中。即App正式在物理内存中申请一段空间。
- VAS中存储的数据不一定存储在Physical Memory中,Windows 根据App的使用情况,决定存放在 physical memory 或 page file。如果存储在Page file中,App在访问时,必须进行一个Disk IO动作,称作 Paging In/Out(换进或换出)。
- 分两步来Reserve 和 Commit 内存,通过推迟页面的提交来减少物理内存的使用。
Workset 是 Committed Memory的一部分,是Process在运行时使用的物理内存。
Page Fault:App访问一个处于Reserved Memory中的Page,但是该page不存在于Workset,就会发生一次Page Fault。如果目标Page 存在于Page File(Disk File),那么OS会进行一次IO,将目标Page从Disk读取到Workset中,称作Hard falut;如果目标Page存在于committed memory,那么只需要将目标Page重定向到Workset中,称作Soft Fault,Soft Fault对性能的影响微乎其微。
手绘一张图:SQL Server 是预先 Reserved 一块大的内存,在使用的时候,一块一块的提交Commit,而committed Memory 在访问时转换为物理中,可以理解,committed memory 是SQL Server使用的物理内存,能够向物理内存Page中写入数据和读取数据。
二,当SQL Server出现内存压力时,需要关注OS的Committed Memroy, Available Memory和 Hard Fault。
1, Commit memory是将reserverd memory(virtual memory) 转换为 physical memory,是app真正使用的物理内存。
OS 能够Commit的最大内存空间是所有Physical memory+ Page File(缓存文件),如果Committed Memroy接近最大内存空间,那么说明系统的内存使用已经接近极限。如果Page File不能自动增长,系统将不能提供更多的内存空间。
2, Page File 是文件缓存,OS用于临时存储内存中Page的Disk File。如果内存不足,那么 OS会将部分page 存储在Page File中,产生一次Disk File的Write 操作;如果App需要用到Page File中的Page,那么OS会将目标Page从Page File中读取到内存中,产生一次Disk File的Read操作。如果Page File的%Uage高,说明App实际需要的内存和committed memory的差距较大,App需要频繁的将Page存储到Disk File中。
Page Fault:Hard Page Fault是指OS将目标Page从Page File读取到物理内存中,由于会产生一次Disk IO,对App的性能影响较大。Soft Page Fault 是指目标Page存在于物理内存中,只是需要重定向到Workset中,对App的性能影响微乎其微。
对于一个性能良好的SQL Server 系统来说,Hard Page Fault 应该保持在一个较小的数值,Disk 的 Paging 动作越少越好。系统存在足够的内存,会使目标Page能够长时间的驻留在物理内存中,而不需要频繁的进行Disk的Paging动作。
如果内存不足,OS和 SQL Server 会在物理内存和文件缓存之间做大量的Paging 动作(Page的换进和换出),这会导致大量的Disk IO,使得Disk IO比较繁忙;OS要做Paging 动作,所带来的Disk IO的动作必须运行在核心态下,所以会核心态的CPU时间会升高,而用户态的CPU时间反而不会很高。一般情况下,用户态的CPU时间很高说明SQL Server 正在全力工作。
SQL Server 内存和Paging的更多相关文章
- Sql Server 内存相关计数器以及内存压力诊断
在数据库服务器中,内存是数据库对外提供服务最重要的资源之一, 不仅仅是Sql Server,包括其他数据库,比如Oracle,MySQL等,都是一类非常喜欢内存的应用. 在Sql Server服务器中 ...
- SQL SERVER 内存分配及常见内存问题 简介
一.问题: 1.SQL Server 所占用内存数量从启动以后就不断地增加: 首先,作为成熟的产品,内存溢出的机会微乎其微.对此要了解SQL SERVER与windows是如何协调.共享内存.并且SQ ...
- SQL Server内存性能分析
内存概念: Working Set = Private Bytes + Shared Memory Working Set:某个进程的地址空间中,存放在物理内存的那一部分 Private Bytes: ...
- SQL SERVER 内存分配及常见内存问题(1)——简介
原文:SQL SERVER 内存分配及常见内存问题(1)--简介 一.问题: 1.SQL Server 所占用内存数量从启动以后就不断地增加: 首先,作为成熟的产品,内存溢出的机会微乎其微.对此要了解 ...
- SQL Server内存遭遇操作系统进程压榨案例
场景: 最近一台DB服务器偶尔出现CPU报警,我的邮件报警阈(请读yù)值设置的是15%,开始时没当回事,以为是有什么统计类的查询,后来越来越频繁. 探索: 我决定来查一下,究竟是什么在作怪,我排查的 ...
- SQL SERVER 内存学习系列(二)-DMV查看内存信息
内存管理在SQL Server中有一个三级结构.底部是内存节点,这是最低级的分配器,用于SQL Server的内存.第二个层次是由内存Clerk组成,这是用来访问内存节点和缓存存储,缓存存储则用于缓存 ...
- SQL SERVER 内存学习系列(一)
最近帮客户解决发布订阅的问题时,突然遇到这样一个问题发布订阅中报下面的错误,另外执行alter table 操作时也会报错 : 问题很奇怪发布订阅和CLR有什么关系?memtoleave内存是个啥?回 ...
- 人人都是 DBA(IV)SQL Server 内存管理
SQL Server 的内存管理是一个庞大的主题,涉及特别多的概念和技术,例如常见的 Plan Cache.Buffer Pool.Memory Clerks 等.本文仅是管中窥豹,描述常见的内存管理 ...
- SQL Server内存理解的误区
SQL Server内存理解 内存的读写速度要远远大于磁盘,对于数据库而言,会充分利用内存的这种优势,将数据尽可能多地从磁盘缓存到内存中,从而使数据库可以直接从内存中读写数据,减少对机械磁盘的IO请求 ...
随机推荐
- C# DataGridView绑定数据源
第一种: DataSet ds=new DataSet (); ]; 第二种: DataTable dt=new DataTable(); this.dataGridView1.DataSource= ...
- 【转】npm publish 发布
<h3 class="catListTitle">一.npm包结构(编写)</h3> npm包实际是一个存档文件,即一个目录直接打包为.zip或tar.gz ...
- Git小记
Git简~介 Git是一个分布式版本控制系统,其他的版本控制系统我只用过SVN,但用的时间不长.大家都知道,分布式的好处多多,而且分布式已经包含了集中式的几乎所有功能.Linus创造Git的传奇经历就 ...
- iOS 与 惯性滚动
注:以下所有例子均 只 在 iOS 的微信中测试过,但对于饿了么APP的内置浏览器同样适用(两者使用相同内核) 引题 工作中常常有需要显示大量信息的情况,列表超出一屏就涉及到滚动的问题.例如 - va ...
- bing的简单英文字典工具
今天看到园友心白水撰写的<简单翻译工具--必应字典第三方API使用方法>,感觉很不错,所以用Python也写了一个.源码如下: import urllib.request import j ...
- 用ShareSDK 进行第三方分享
1.首先要先注册自己的appkey在shareSDK官网里面 2.下载shareSDK 文档,可以根据需要下载自己需要的 如图 3.将下载好的shareSDK 解压后加入工程里面 4.添加依赖库 // ...
- 【逆向篇】分析一段简单的ShellCode——从TEB到函数地址获取
其实分在逆向篇不太合适,因为并没有逆向什么程序. 在http://www.exploit-db.com/exploits/28996/上看到这么一段最简单的ShellCode,其中的技术也是比较常见的 ...
- #研发解决方案#分布式并行计算调度和管理系统Summoner
郑昀 创建于2015/11/10 最后更新于2015/11/12 关键词:佣金计算.定时任务.数据抽取.数据清洗.数据计算.Java.Redis.MySQL.Zookeeper.azkaban2.oo ...
- HashMap实现缓存
package com.cache; import java.util.Map; import java.util.concurrent.ConcurrentHashMap; import org.a ...
- *HDU 1392 计算几何
Surround the Trees Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 65536/32768 K (Java/Other ...