golang使用pprof检查goroutine泄露

有一段时间,我们的推送服务socket占用非常不正常,我们自己统计的同一时候在线就10w的用户,可是占用的socket居然达到30w,然后查看goroutine的数量,发现已经60w+. 每一个用户占用一个socket,而一个socket,有read和write两个goroutine,简化的代码例如以下: c, _ := listerner.Accept() go c.run() func (c *conn) run() { go c.onWrite() c.onRead() } func (c…

如何让xcode自动检查内存泄露

在project-setting中找到 “Run Static Analyzer” 键,然后把值修改为“YES”.这样在编码的时候,xcode就可以自动为我们检查内存泄露了. 原图片:http://blog.csdn.net/shijiucdy/article/details/8185968 xcode 5中按如下设置:…

iOS-如何让xcode自动检查内存泄露

在project-setting中找到 “Run Static Analyzer” 键,然后把值修改为“YES”.这样在编码的时候,xcode就可以自动为我们检查内存泄露了.…

pprof 查看goroutine

package main import ( "net/http" "runtime/pprof" ) var quit chan struct{} = make(chan struct{}) func f() { <-quit } func handler(w http.ResponseWriter, r *http.Request) { w.Header().Set("Content-Type", "text/plain&quo…

Go 笔记之如何防止 goroutine 泄露

今天来简单谈谈,Go 如何防止 goroutine 泄露. 概述 Go 的并发模型与其他语言不同,虽说它简化了并发程序的开发难度,但如果不了解使用方法,常常会遇到 goroutine 泄露的问题.虽然 goroutine 是轻量级的线程,占用资源很少,但如果一直得不到释放并且还在不断创建新协程,毫无疑问是有问题的,并且是要在程序运行几天,甚至更长的时间才能发现的问题. 对于上面描述的问题,我觉得可以从两方面入手解决,如下: 一是预防,要做到预防,我们就需要了解什么样的代码会产生泄露,以及了解如何…

Golang使用pprof和qcachegrind进行性能监控

Golang为我们提供了非常方便的性能测试工具pprof,使用pprof可以非常方便地对Go程序的运行效率进行监测.本文讲述如何使用pprof对Go程序进行性能测试,并使用qcachegrind查看性能测试的输出文件. 载入pprof模块想要对一个Go程序进行pprof监测,第一步是在main函数所在的模块中添加 net/http/pprof 模块.import后面的“_”是一定要加上的. import _ "net/http/pprof" 运行HTTP服务器如果你的程序不是一个W…

golang 使用pprof和go-torch做性能分析

软件开发过程中,项目上线并不是终点.上线后,还要对程序的取样分析运行情况,并重构现有的功能,让程序执行更高效更稳写. golang的工具包内自带pprof功能,使找出程序中占内存和CPU较多的部分功能方便了不少.加上uber的火焰图,可视化显示,让我们在分析程序时更简单明了. pprof有两个包用来分析程序一个是net/http/pprof另一个是runtime/pprof,net/http/pprof只是对runtime/pprof包进行封装并用http暴露出来,如下图源码所示: 使用net/…

Golang（三）Goroutine原理

前言最近用到了一些 Golang 异步编程的地方,感觉 Golang 相对于其他语言(如 Java)对多线程编程的支持非常大,使用起来也非常方便.于是决定了解一下 Goroutine 的底层原理. Goroutine 本质是协程,是实现并行计算的核心.只需要在对应的函数前加上 Go 关键词即可异步执行: go func() { }() 基本概念并发:一段时间内执行多个程序,即在一个 cpu 上切换着执行多项任务,宏观上是同时的,微观上是顺序执行并行:同时执行多个程序,即在多个 cpu 上同…

在Blade中结合gperftools检查内存泄露

Blade是我们开发的大规模C++项目构建工具. gperftools是google开发的性能工具,由高效内存分配器,CPU性能分析器,堆分析器,堆检查器等工具组成. 和其他构建工具不同,结合gtest,Blade直接集成了对测试的支持,使得你可以像构建代码一样运行测试. 为了进一步提高测试的效果,我们还在测试中集成了gperftools的heapchecker,能够发现如下问题: new和delete不匹配,比如new[]分配的用delete而不是delete[]释放.或者用free释放. 堆…

[Go] golang原子函数实现goroutine同步

启动了两个goroutine,并完成一些工作.在各自循环的每次迭代之后,在goroutine 会使用LoadInt64 来检查shutdown 变量的值.这个函数会安全地返回shutdown 变量的一个副本.如果这个副本的值为1,goroutine 就会跳出循环并终止. package main import ( "fmt" "sync" "sync/atomic" "time" ) var ( //通知正在执行的gorout…

golang 性能测试pprof

golang 性能测试包是位于 net/http 包下的 pprof,其相关介绍可以参看具体的官方文档有关 golang 性能测试使用特别简单,在 main 包中的引包位置直接引入: import _ "net/http/pprof" 之后,在 main 函数中增加以下代码行即可: go func() { log.Println(http.ListenAndServe("0.0.0.0:6060", nil)) }() 至此,通过以上两步操作就完成了 pprof…

一个Golang例子：for + goroutine + channel

Rob Pike 在 Google I/O 2012 - Go Concurrency Patterns 里演示了一个例子(daisy chain). 视频地址:https://www.youtube.com/watch?v=f6kdp27TYZs 这个例子抽象于“传话游戏”,几个人站成一队,第一个人跟第二个人悄悄说一句话,依次传到最后一个人,看看最后一个人听到的和第一个人说的差别有多大. 代码如下: package main import "fmt" func pass(left,…

Golang学习笔记：goroutine

1.goroutine goroutine是go语言的并发体.在go语言里面能使用go关键字来实现并发. go func() 1.1 概念介绍 goroutine本质上是协程,我刚刚学习的时候就粗略地认为goroutine是线程,直到最近才开始搞明白goroutine的基本概念. 并发在很久以前,人们希望一个计算机(一个cpu)上能同时执行多项任务,让cpu在某段时间内进行分片,在某段很短时间内执行程序a,然后又迅速得切换到程序b去执行,让人们看起来就像是两个程序在同时进行,这就是并发. 进程…

golang 使用pprof进行性能调优

package main import "fmt" func lengthOfNonRepeatingSubStr(s string) int { lastOccurred := make(map[rune]int) start := 0 maxLength := 0 for i, ch := range []rune(s) { if lastI, ok := lastOccurred[ch]; ok && lastI >= start { start = las…

go使用context包避免goroutine泄露问题

go是带内存自动回收的特性,因此内存一般不会泄漏.但是Goroutine确存在泄漏的情况,同时泄漏的Goroutine引用的内存同样无法被回收. 下面的程序中后台Goroutine向管道输入自然数序列,main函数中输出序列.但是当break跳出for循环的时候,后台Goroutine就处于无法被回收的状态了. func main() { ch := func() <-chan int { ch := make(chan int) go func() { for i := 0; ; i++ {…

vs 2010中如何检查内存泄露

首先,在文件头添加下面的内容: #ifdef _DEBUG#define DEBUG_CLIENTBLOCK new( _CLIENT_BLOCK, __FILE__, __LINE__)#else#define DEBUG_CLIENTBLOCK#endif#define _CRTDBG_MAP_ALLOC#include <stdlib.h>#include <crtdbg.h>#ifdef _DEBUG#define new DEBUG_CLIENTBLOCK#endif 然…

erlang中检查内存泄露

最近项目内存占用过多,检查一下erlang的内存使用情况. 1. 通过etop可以很方便得出erlang内存使用的情况 spawn(fun() -> etop:start([{output, text}, {interval, 5}, {lines, 20}, {sort, memory}]) end). 可以定义显示的时间.行数.按照内存使用的大小排列. 2.一般情况etop都能很稳定地工作,但个别极端情况下,etop会使用不了.这个情况下,只能上命令: RawList = [{Pid, el…

Android Monkey 脚本编写与检查内存泄露

一.Monkey脚本编写 1.Monkey脚本格式脚本优势: 简单快捷,不需要接触任何工具,只需要一个记事本文件脚本缺点: 实现坐标.按键等基本操作的相应步骤,顺序脚本无逻辑性脚本源码: \development\cmds\monkey\src\com\android\commands\monkey\MonkeySourceScrip.java #头文件.控制monkey发送消息的参数 type=raw events count= speed=1.0 #以下为monkey命令 start…

golang select 退出结束goroutine

开启了多个协程其中一个协程满足条件后终止select, 原以为其他的协程会在后台系统中继续悄悄运行直到主进程关闭而关闭 . 做一实验发现select 监听退出会关闭所有监听的goroutine package main import ( "fmt" "time" ) var stop bool = false func main() { ch := make(chan ) ch2 := make(chan ) defer func() { close(ch)…

[Golang] http.Post导致goroutine泄漏

记录一个用http.Post的问题 if _, err := http.Post("http://127.0.0.1:8080", "", nil); nil != err { panic(err) }// 会导致goroutine泄漏 if resp, err := http.Post("http://127.0.0.1:8080", "", nil); nil != err { panic(err) } else { de…

visual studio如何检查内存泄露？

Visual Studio有专门的插件叫做Visual Leak Detector (VLD)Visual Leak Detector for Visual C++ 2008/2010/2012/2013安装之后,他会给你加入几个头文件和lib,原理可以参考这里Visual Leak Detector使用方法非常简单,只需要在你的检测cpp加上这样一句话 #include <vld.h> 然后使用debug模式运行,如果有内存泄露,会在Output窗口打出详细的泄露的堆栈,双击堆栈就可以定位到…

golang中如何退出goroutine

package main import ( "fmt" "runtime" "time" ) func main() { // 用goroutine创建承载一个形参为空,返回值为空的一个函数 go func() { defer fmt.Println("A.defer") func() { defer fmt.Println("B.defer") // 退出当前的goroutine runtime.Goex…

win平台检查内存泄露

int main() { _CrtSetDbgFlag(_CrtSetDbgFlag(_CRTDBG_REPORT_FLAG) | _CRTDBG_LEAK_CHECK_DF); _CrtSetBreakAlloc(0); new int(10); } 编译运行,vs的output里会打出Detect memory leak,后面会跟一个obj id比方是532435,然后再按照下面修改程序. int main() { _CrtSetDbgFlag(_CrtSetDbgFlag(_CRTDBG_…