mysql 记录一次内存清理
摘自:https://blog.csdn.net/wyzxg/article/details/7279986/
摘要:Linux对内存的管理与Windows不同,free小并不是说内存不够用了,应该看的是free的第二行最后一个值:"-/+ buffers/cache: 58 191" 这才是系统可用的内存大小。
记录一次维护记录
在放假回来后,发现服务器内存没有剩余空间了,并且使用了swap分区。
维护目标:释放内存,关闭SWAP分区的使用。
分析原因:
疑点1:
https://blog.csdn.net/dc666/article/details/78901341
按上文的思路,发现有疑点,有长期运行的SQL,
mysql> show full processlist;
*************************** 3. row ***************************
Id: 143
User: slave
Host: 192.168.101.103:3306
db: NULL
Command: Binlog Dump
Time: 3557004
State: Master has sent all binlog to slave; waiting for more updates
Info: NULL
*************************** 4. row ***************************
疑点2:
mysql> show engine innodb status\G;
BUFFER POOL AND MEMORY
----------------------
Total large memory allocated 120937512960
Dictionary memory allocated 34511769
Buffer pool size 7208520
Free buffers 8196
Database pages 7199134
Old database pages 2657328
Modified db pages 1531
引擎的已经没有可用空间,应该是innodb_buffer_pool满了;怀疑是被执行计划占用满了。
处理:通过杀掉进程,flush tables等操作,问题依旧没有解决,所以也没搞清楚问题出在哪。但不清楚出问题的具体原因,也一样能解决问题。
mysql的体系结构,与oracle的不同,很重要的一点,对mysql对内存的管理上,是通过系统OS层实现的,通过清理释放系统内存,一样能达到目的。
清理之前的内存使用情况:
[root@~]# sync
[root@~]# cat /proc/sys/vm/drop_caches [root@~]# echo > /proc/sys/vm/drop_caches
清理之后的状态:
通过 echo 3 > /proc/sys/vm/drop_caches,释放了大约28G内存。
当在Linux下频繁存取文件后,物理内存会很快被用光,当程序结束后,内存不会被正常释放,而是一直作为caching。
linux 文件系统的 cache 分为2种:page cache 和 buffer cache, page cache 是用于文件,inode 等操作的 cache,而 buffer cache 是用于块设备的操作。
将/proc/sys/vm/drop_caches设置为1、2、3的作用:
To free pagecache:
# echo 1 > /proc/sys/vm/drop_caches
To free dentries and inodes:
# echo 2 > /proc/sys/vm/drop_caches
To free pagecache, dentries and inodes:
echo 3 > /proc/sys/vm/drop_caches
关闭SWAP分区
通过free -m,可以查得SWAP使用情况,当前已经使用了约10G,
释放SWAP分区
通过实际记录,释放约10G的交换文件,用时达4小时,而释放约20G内存,耗时不过10秒左右,这由硬件I/O性能决定。
验证结果
没有内容返回,说明当前SWAP分区已经禁用。
对于SWAP分区的使用,当服务器的内存容量,并不能完全满足使用要求时,有限的开启SWAP使用,是有益的,vm.swappiness参数的作用,
是设定使用SWAP的优先级,数字越大,优先级越高,可以适当降低SWAP的优先级,来避免SWAP被过多使用。
[root@~]# sysctl -q vm.swappiness #查询当前SWAP优先级
vm.swappiness =
[root@~]# sudo sysctl vm.swappiness= #修改
vm.swappiness =
[root@ ~]# sysctl -q vm.swappiness #验证
vm.swappiness =
欢迎大佬指正。。
mysql 记录一次内存清理的更多相关文章
- 【mysql】关于IO/内存方面的一些优化
这里使用的是mysql Ver 14.14 Distrib 5.6.19, for Linux (i686) using EditLine wrapper 一.mysql目录文件 ibdata1: ...
- MySQL学习笔记-数据库内存
数据库内存 InnoDB存储引擎内存由以下几个部分组成:缓冲池(buffer pool).重做日志缓冲池(redo log buffer)以及额外的内存池(additional memory pool ...
- 提高mysql memory(heap) engine内存性能的开源补丁_XMPP Jabber即时通讯开发实践_百度空间
提高mysql memory(heap) engine内存性能的开源补丁_XMPP Jabber即时通讯开发实践_百度空间 提高mysql memory(heap) engine内存性能的开源补丁
- ngx-push-stream模块源码学习(五)——内存清理
1.定时器 采用nginx自身的定时器管理机制,具体细节待学习过nginx源码后加以补充 2.channel的生成周期 (0).初始(诞生) 发布.订阅均有可能产生ch ...
- linux memory release commands内存清理/释放命令
linux 内存清理/释放命令 You could find reference from here: http://jingyan.baidu.com/article/597a06436a687f3 ...
- wing带你玩转自定义view系列(1) 仿360内存清理效果
本篇是接自 手把手带你做自定义view系列 宗旨都是一样,带大家一起来研究自定义view的实现,与其不同的是本系列省去了简单的坐标之类的讲解,重点在实现思路,用简洁明了的文章,来与大家一同一步步学习. ...
- scala 可变集合与内存清理的关系
留坑待填 使用scala.collection.mutable._期间,发现了当程序运行内存开销较多时,使用系统工具进行内存清理,然后程序报出了变量找不到.内存无法访问.数组访问越界,堆栈溢出等多种错 ...
- Go:内存管理与内存清理
Illustration created for "A Journey With Go", made from the original Go Gopher, created by ...
- MySQL记录锁、间隙锁、临键锁小案例演示
生成间隙(gap)锁.临键(next-key)锁的前提条件 是在 RR 隔离级别下. 有关Mysql记录锁.间隙(gap)锁.临键锁(next-key)锁的一些理论知识之前有写过,详细内容可以看这篇文 ...
随机推荐
- linux下安装MariaDB数据库
搜素某个文件:find / -name '文件名(或文件夹名)' 1.编辑yum源:vi /etc/yum.repos.d/MariaDB.repo 2.编辑文件时用到的vi命令: vi 打开一个不存 ...
- Spring Boot 单元测试示例
Spring 框架提供了一个专门的测试模块(spring-test),用于应用程序的单元测试. 在 Spring Boot 中,你可以通过spring-boot-starter-test启动器快速开启 ...
- IntelliJ IDEA使用说明
1.IntelliJ IDEA简介: IDEA 全称 IntelliJ IDEA,是java语言开发的集成环境,IntelliJ在业界被公认为最好的java开发工具之一,尤其在智能代码助手.代码自动提 ...
- 从头学pytorch(九):模型构造
模型构造 nn.Module nn.Module是pytorch中提供的一个类,是所有神经网络模块的基类.我们自定义的模块要继承这个基类. import torch from torch import ...
- $bzoj3872\ [Poi2014]\ Ant\ colony$ 二分+$dp$
正解:二分+$dp$ 解题报告: 传送门$QwQ$ 一年过去了依然没有头绪,,,$gql$的$NOIp$必将惨败了$kk$. 考虑倒推,因为知道知道除数和答案,所以可以推出被除数的范围,然后一路推到叶 ...
- 「UVA1185」Big Number 解题报告
UVA1185 Big Number In many applications very large integers numbers are required. Some of these appl ...
- bat无法识别命令、无法识别运算符、结果不符合预期等问题
1.无法识别的命令等可能为中文字符编码等问题,破坏了bat文件格式,建议去掉中文,加上引号或者重新创建文件.例如:@echo off%~d0cd /d %~dp0title epoch时间转换(%cd ...
- k8s(1.14.0)+etcd(3.3.10)+flanneld(0.10)
K8s(1.14) 几张比较不错的图 1.kubernetes 组件图 kubernetes 架构图 2.kubernetes 网络架构图 数据从源容器中发出后,经由所在主机的docker0虚拟网卡转 ...
- 《图解机器学习-杉山将著》读书笔记---CH3
CH3 最小二乘学习法 重点提炼 提出最小二乘学习法的缘故: 最小二乘学习法公式 对不同模型进行最小二乘法学习,得到最小二乘公式中的参数theta: 1.线性模型 代入3.1公式,对参数求偏导,偏 ...
- 低副瓣阵列天线综合2 matlab HFSS
接着继续研究阵列天线设计,得到了电流幅度分布或功率分布之后,就可以进行阵列设计或馈电网络设计了,之前利用HFSS仿真过单列的串馈天线,后面会继续复习熟悉一下,本次我找了一篇硕士论文利用威尔金森功分器来 ...