糟糕,CPU100%了!!!
前言
cpu使用率100%
问题,是一个让人非常头疼的问题。因为出现这类问题的原因千奇百怪,最关键的是它不是必现的,有可能是系统运行了一段时间之后,在突然的某个时间点出现问题。
今天特地把我和同事,之前遇到过的cpu使用率100%的问题,总结了一下,给有需要的朋友一个参数。
1 一次性获取的数据太多
我之前参与过餐饮相关的业务系统开发,当时我所在的团队是菜品的下游业务。
当时菜品系统有菜品的更新,会发kafka
消息,我们系统订阅该topic
,就能获取到最近更新的菜品数据。
同步菜品数据的功能,上线了一年多的时候,没有出现过什么问题。
但在某一天下午,我们收到了大量CPU100%的报警邮件。
追查原因之后发现,菜品系统出现了bug,我们每次获取到的都是全量的菜品数据,并非增量的数据。
一次性获取的数据太多。
菜品修改还是比较频繁的,也就是说我们系统,会频繁的读取和解析大量的数据,导致CPU不断飙升。
其根本原因是频繁的full gc
。
2 kafka自动确认
之前我们的餐饮子系统中间,是通过消息中间件:kafka
进行通信的。
上游系统中产生了数据,写入db之后,然后把相关业务单据的id,通过kafka消息发送到broker上。
下游系统订阅相关topic的消息,获取业务单据的id,然后调用上游系统的业务查询接口,获取相关业务数据。
刚开始为了方便,我们消费订单消息时,kafka的确认机制,使用的是自动确认
(可以少写点代码)。
刚开始问题不大。
随着业务的发展,用户量越来越多,每天产生的kafka消息也越来越多。
终于开始爆出了cpu使用率100%的问题。
后来,我们把kafka的consumer,消费消息后改成手动确认,cpu使用率100%的问题就被解决了。
3 死循环
在实际工作中,可能每个开发都写过死循环
的代码。
死循环有两种:
- 在while、for、forEach循环中的死循环。
- 无限递归。
这两种情况,程序会不停的运行,使用寄存器
保存循环次数
或者递归深度
,一直占用cpu,导致cpu使用率飙升。
在使用JDK1.7时,还有些死循环比如多线程的环境下,往HashMap中put数据,可能会导致链表
出现死循环
。
就会导致cpu不断飙高。
4 多线程导数据
之前我们组有位同事做了一个供应商excel数据导入功能。
该功能上线之后发现excel中数据只要稍微多一点,导入的耗时时间就会很长。
因为导入供应商相关的业务逻辑有些复杂,涉及了多张表,而且是单线程中一条条按顺序导入的。
那位同事为了提升导入数据的性能,将单线程
导入,改成了使用线程池的多线程
导入。
这样改造之后,excel数据导入的速度确实提升了很多。
但上线之后,却带来另外一个问题,即:CPU使用率一路飙升。
多线程导入数据,如果线程数量比较多,会存在大量线程上下文切换
的过程,这个过程非常消耗CPU资源。
最近就业形式比较困难,为了感谢各位小伙伴对苏三一直以来的支持,我特地创建了一些工作内推群, 看看能不能帮助到大家。
你可以在群里发布招聘信息,也可以内推工作,也可以在群里投递简历找工作,也可以在群里交流面试或者工作的话题。
进群方式
添加苏三的私人微信:su_san_java,备注:博客园+所在城市,即可加入。
5 同步大量文件
我之前参与过游戏平台的开发。
游戏厂商的游戏接入我们平台,我们帮他们推广,赚了钱进行分成。
每一款游戏都有一个定制化的官网,域名、图片和样式都不一样。
当时出于性能考虑,我们当时使用了FreeMarker
模板引擎,为每一款游戏都生成专门的html
的静态官网。
当时提供了十几个不同的模板,可以给游戏的运营同学选择。
原本是没啥问题的。
但有一次节日活动,为了增加一些喜庆的元素,在每一个模板文件中都加了一些样式。
这就需要把所有游戏的官网,用新的模板重新生成一次了。
生成完毕之后,需要把所有的html文件,一次性同步到web服务器的指定目录下。
由于涉及到了大量文件的同步,导致存放文件的那台应用服务器CPU飙升的很高。
6 死锁
为了防止并发场景中,多个线程修改公共资源,导致的数据异常问题。
很多时候我们会在代码中使用synchronized
或者Lock
加锁。
这样多个线程进入临界方法或者代码段时,需要竞争某个对象或者类的锁,只有抢到相应的锁,才能访问临界资源。其他的线程,则需要等待,拥有锁的线程释放锁,下一次可以继续竞争那把锁。
有些业务场景中,某段代码需要线程获取多把锁,才能完成业务逻辑。
但由于代码的bug,或者释放锁的顺序不正确,可能会引起死锁
的问题。
例如:
"pool-4-thread-1" prio=10 tid=0x00007f27bc11a000 nid=0x2ae9 waiting on condition [0x00007f2768ef9000]
java.lang.Thread.State: WAITING (parking)
at sun.misc.Unsafe.park(Native Method)
- parking to wait for <0x0000000090e1d048> (a java.util.concurrent.locks.ReentrantLock$FairSync)
at java.util.concurrent.locks.LockSupport.park(LockSupport.java:186)
比如线程a拥有锁c,需要获取锁d,才能完成业务逻辑。
而刚好此时线程b拥有锁d,需要获取锁c,也能完成业务逻辑。
线程a等待线程b释放锁,而线程b等待线程a释放锁,两个线程都持有对方需要的锁,无法主动释放,就会出现死锁问题。
死锁会导致CPU使用率飙升。
7 正则匹配
不知道你使用过正则表达式没有?
有时候我们为了验证用户输入的手机号、邮箱、身份证号、网页地址是否合法。
通常情况下,会使用正则表达式,例如:
^([hH][tT]{2}[pP]://|[hH][tT]{2}[pP][sS]://)(([A-Za-z0-9-~]+).)+([A-Za-z0-9-~/])+$
这个正则表达式可以分为三个部分:
- 第一部分匹配 http 和 https 协议。
- 第二部分匹配 www. 字符。
- 第三部分匹配许多字符。
一个写的不好的正则表达式,就可以导致cpu使用率一下子飚升。
其实这里导致 CPU 使用率高的关键原因就是:Java 正则表达式使用的引擎实现是NFA自动机
,这种正则表达式引擎在进行字符匹配时会发生回溯
。
而一旦发生回溯,那其消耗的时间就会变得很长,有可能是几分钟,也有可能是几个小时,时间长短取决于回溯的次数和复杂度。
我们写的正则表达式,要尽量减少回溯。
最近就业形式比较困难,为了感谢各位小伙伴对苏三一直以来的支持,我特地创建了一些工作内推群, 看看能不能帮助到大家。
你可以在群里发布招聘信息,也可以内推工作,也可以在群里投递简历找工作,也可以在群里交流面试或者工作的话题。
进群方式
添加苏三的私人微信:su_san_java,备注:博客园+所在城市,即可加入。
8 耗时计算
有时候,我们的业务系统需要实时计算数据,比如:电商系统中需要实时计算优惠后的最终价格。
或者需要在代码中,从一堆数据中,统计汇总出我们所需要的数据。
如果这个实时计算或者实时统计的场景,是一个非常耗时的操作,并且该场景的请求并发量还不小。
就可能会导致cpu飙高。
因为实时计算需要消耗cpu资源,如果一直计算,就会一直消耗cpu资源。
最后说一句(求关注,别白嫖我)
如果这篇文章对您有所帮助,或者有所启发的话,帮忙扫描下发二维码关注一下,您的支持是我坚持写作最大的动力。
求一键三连:点赞、转发、在看。
关注公众号:【苏三说技术】,在公众号中回复:面试、代码神器、开发手册、时间管理有超赞的粉丝福利,另外回复:加群,可以跟很多BAT大厂的前辈交流和学习。
糟糕,CPU100%了!!!的更多相关文章
- Linus:C++是一种糟糕的语言
本文内容摘自http://blog.csdn.net/turingbook/article/details/1775488 C++是一种糟糕的(horrible)语言.而且因为有大量不够标准的程序员在 ...
- 使用Google产品以来遇到的最糟糕、最霸道、最让人抓狂的设计
很久没有登录cnblogs@gmail.com这个邮箱,今天通过gmail.com登录了一下,登录后出现一个对话框要求设置性别与出生日期,而且必须要设置,不设置不让登录. 这个邮箱是我们网站用的是邮箱 ...
- 利用windbg查找dictionary导致IIS占CPU100%案例分析(一)
一.背景 先说下windbg使用场景.各位coder在工作中或多或少都会遇到下面四种情况 1.本地代码好好的,放服务器上运行一段时间后,IIS服务突然占用 w3wp.exe CPU突然100% ,不得 ...
- 超越线程池:Java并发并没有你想的那么糟糕
转载: 超越线程池:Java并发并没有你想的那么糟糕
- [引用]SQLServer占CPU100%
程序猿是如何解决SQLServer占CPU100%的 文章目录 遇到的问题 使用SQLServer Profiler监控数据库 SQL1:查找最新的30条告警事件 SQL2:获取当前的总报警记录数 ...
- 一个糟糕的Erlang练习题
好吧,用的语法很糟糕...但是至少是做了练习. 题目 %The sequence of triangle numbers is generated by adding the natural numb ...
- 【转】为什么我说 Android 很糟糕
http://zhuanlan.zhihu.com/wooyun/19879016 Android 的安全问题一直被吐槽,包括不安全的APP市场.上次的远程命令执行漏洞.还有它的权限机制,总之一团糟, ...
- 项目管理系统 SQL2005数据库查询CPU100%问题研究
[一篮饭特稀原创,转载请注明出自http://www.cnblogs.com/wanghafan/p/4595084.html] 在项目管理系统中出现查询工程明细出现CPU100%卡死症状: 1.打 ...
- 关于js当中一些糟糕的特性
首先,不可否认,js是一门具有许多优秀特性的弱类型语言,但是这门语言在设计之初就投入了工程实践,没有经历严格的实验室测试,以致力于它是如此的粗糙,在相当长的一段时间很不受开发者待见,被视为一门玩具性的 ...
- 构建ASP.NET MVC4+EF5+EasyUI+Unity2.x注入的后台管理系统(5)-EF增删改查by糟糕的代码
原文:构建ASP.NET MVC4+EF5+EasyUI+Unity2.x注入的后台管理系统(5)-EF增删改查by糟糕的代码 上一讲我们创建了一系列的解决方案,我们通过一个例子来看看层与层之间的关系 ...
随机推荐
- [转帖]Mysql 常用命令行,持续补充
https://www.cnblogs.com/wzj1223/p/13152446.html 1.常用命令行 # 登录Mysql mysql -uroot -proot # 查看所有数据库 show ...
- [转帖]Linux常用的一些命令,看你知道多少?
https://zhuanlan.zhihu.com/p/115279009 Linux中命令有很多,而Linux系统中使用命令也是它的一大特点.在Linux系统中使用命令处理问题灵活,高效,所以熟知 ...
- [转帖]人大金仓和PG的关系
作者:山抹微云链接:https://www.zhihu.com/question/582960448/answer/2997151260来源:知乎著作权归作者所有.商业转载请联系作者获得授权,非商业转 ...
- [转帖]KingbaseES 事务总结
目录 1. 什么是事务? 2. 事务的属性-ACID 3. 数据库事务的操作方式 3.1. SET TRANSACTION 3.2. BEGIN 3.3. COMMIT 3.4. ROLLBACK 3 ...
- Rsync的一个高级应用
Rsync的一个高级应用 背景 2019年刚开始接触linux时. 有一个很恶心的场景. 很多人为了简单起见, 提交数据库的修改(数据结果和预制数据) 都不是增量处理, 都是全量提交过来. 所以会造成 ...
- [转帖]一文入门前景广阔的 eBPF
https://zhuanlan.zhihu.com/p/567375673 [摘要]eBPF带来的最大的好处即是可以对内核进行编程性处理,实现对内核中不灵活的部分,实现自定义的处理.这种灵活性使得对 ...
- [转帖]JVM NativeMemoryTracking ;jcmd process_id VM.native_memory;Native memory tracking is not enabled
目录 一.Native Memory Tracking (NMT) 是Hotspot VM用来分析VM内部内存使用情况的一个功能.我们可以利用jcmd(jdk自带)这个工具来访问NMT的数据. 1.N ...
- echarts给每个柱状图配置不同的颜色
<!DOCTYPE html> <html> <head> <meta charset="utf-8"> <title> ...
- TypeScript类的修饰符 public private protected的详细讲解
简单介绍一下public private protected public:当一个类的成员变量没有修饰的时候,默认的就是 public 进行修饰.外部是可以进行访问的. private属性只能够在父类 ...
- 乌班图安装docker
目录 一.前言 二.安装 2.1 设置仓库 2.3 安装 Docker Engine 2.4 安装特定版本的 Docker Engine: 2.5 测试 三.配置非 root 用户运行 Docker ...