我的编程空间,编程开发者的网络收藏夹
学习永远不晚

go pprof 的使用操作代码

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

go pprof 的使用操作代码

背景

最近合作开发一个项目,项目部署发现了才跑了没多久,就直接宕机了,查看服务器信息发现在某个时间端内存猛的暴涨了非常多,由于是合作开发的项目,我仔细的检查了自己的拿块代码,都没啥问题,另一个开发也说自己的代码没啥问题。

这没理没据的争论也不是个事,突然想起还有 pprof 这么个东西,正好能用上了。一顿操作下来,总算是找到了问题的根源。

pprof 是什么

pprofgo 中进行性能分析的工具,可以提供可视化数据查看。

pprof 的采样方式

  • runtime/pprof
  • net/http/pprof
  • test

这里举例采样内存信息。

package main
import (
	"os"
	"runtime/pprof"
)

func main() {
	var buf = make([][1024 * 1024]byte, 0)
	for i := 0; i < 100; i++ {
		buf = append(buf, [1024 * 1024]byte{})
	}
	f, err := os.OpenFile("heapProfile", os.O_CREATE|os.O_TRUNC|os.O_RDWR, os.ModePerm)
	if err != nil {
		return 
	}
	err = pprof.WriteHeapProfile(f)
	if err != nil {
		return 
	}
	println("结束")
}

程序跑完之后会在本地生成 heapProfile 文件,命令行执行 go tool pprof heapProfile 可进入终端交互,可以输入 top 等命令查看:

这里可以输入 web 查看可视化界面,如果遇到 Could not execute dot; may need to install graphviz. 错误,需要自行安装,网上教程很多,本篇不提了。

顺带提一下 runtime.MemStats 结构体字段解释

Alloc uint64 //golang语言框架堆空间分配的字节数
TotalAlloc uint64 //从服务开始运行至今分配器为分配的堆空间总 和,只有增加,释放的时候不减少
Sys uint64 //服务现在系统使用的内存
Lookups uint64 //被runtime监视的指针数
Mallocs uint64 //服务分配内存对象的次数
Frees uint64 //服务回收内存对象的次数
HeapAlloc uint64 //服务分配的堆内存字节数
HeapSys uint64 //系统分配的作为运行栈的内存
HeapIdle uint64 //申请但是未分配的堆内存或者回收了的堆内存(空闲)字节数
HeapInuse uint64 //正在使用的堆内存字节数
HeapReleased uint64 //返回给OS的堆内存,类似C/C++中的free。
HeapObjects uint64 //堆内存块申请的量
StackInuse uint64 //正在使用的栈字节数
StackSys uint64 //系统分配的作为运行栈的内存
MSpanInuse uint64 //用于测试用的结构体使用的字节数
MSpanSys uint64 //系统为测试用的结构体分配的字节数
MCacheInuse uint64 //mcache结构体申请的字节数(不会被视为垃圾回收)
MCacheSys uint64 //操作系统申请的堆空间用于mcache的字节数
BuckHashSys uint64 //用于剖析桶散列表的堆空间
GCSys uint64 //垃圾回收标记元信息使用的内存
OtherSys uint64 //golang系统架构占用的额外空间
NextGC uint64 //垃圾回收器检视的内存大小
LastGC uint64 // 垃圾回收器最后一次执行时间。
PauseTotalNs uint64 // 垃圾回收或者其他信息收集导致服务暂停的次数。
PauseNs [256]uint64 //一个循环队列,记录最近垃圾回收系统中断的时间
PauseEnd [256]uint64 //一个循环队列,记录最近垃圾回收系统中断的时间开始点。
NumForcedGC uint32 //服务调用runtime.GC()强制使用垃圾回收的次数。
GCCPUFraction float64 //垃圾回收占用服务CPU工作的时间总和。如果有100个goroutine,垃圾回收的时间为1S,那么就占用了100S。
BySize //内存分配器使用情况

net/http/pprof

需要引入 net/http/pprof

package main
import (
	"net/http"
	_ "net/http/pprof"
)

func main() {
	_ = http.ListenAndServe("0.0.0.0:6060", nil)
}

然后访问服务地址 http://127.0.0.1:6060/debug/pprof 即可看到如下图所示的调试界面:

  • allocs:查看过去所有内存分配的样本。
  • block:查看导致阻塞同步的堆栈跟踪。
  • cmdline: 当前程序的命令行的完整调用路径。
  • goroutine:查看当前所有运行的 goroutines 堆栈跟踪。
  • heap:查看活动对象的内存分配情况。
  • mutex:查看导致互斥锁的竞争持有者的堆栈跟踪。
  • profile: 默认进行 30s 的 CPU Profiling,得到一个分析用的 profile 文件。
  • threadcreate:查看创建新 OS 线程的堆栈跟踪。
  • trace:略,trace可以单独写一篇文章来介绍。

这里需要注意,如果需要对 blockmutex 的信息进行追踪,需要在代码中显式加上以下代码:

	runtime.SetBlockProfileRate(1) // 开启对阻塞操作的跟踪,block  
	runtime.SetMutexProfileFraction(1) // 开启对锁调用的跟踪,mutex

gin 框架使用 pprof

gingo 社区中使用较为广泛的一个 http 服务框架,其使用 pprof 进行性能分析,也有现成的轮子可以使用,引入 github.com/gin-contrib/pprof 即可,其实就是对于 net/http/pprof 的一个包装。

package main
import (
	"github.com/gin-contrib/pprof"
	"github.com/gin-gonic/gin"
)

func main() {
	engine := gin.Default()
	pprof.Register(engine)
}

test

 	-bench=.
         进行性能测试,“.”是正则匹配,匹配了所有的测试函数

    -benchmem
        打印出申请内存的次数。一般用于简单的性能测试,不会导出数据文件。

    -blockprofile block.out
        将协程的阻塞数据写入特定的文件(block.out)。如果-c,则写成二进制文件。

    -cpuprofile cpu.out
        将协程的CPU使用数据写入特定的文件(cpu.out)。如果-c,则写成二进制文件。

    -memprofile mem.out
        将协程的内存申请数据写入特定的文件(mem.out)。如果-c,则写成二进制文件。

    -mutexprofile mutex.out
        将协程的互斥数据写入特定的文件(mutex.out)。如果-c,则写成二进制文件。

    -trace trace.out
        将执行调用链写入特定文件(trace.out)。

test 导出的数据也需要通过 go tool pprof 来分析。

火焰图

安装

go get -u github.com/google/pprof

启动

pprof -http=:8080 heapProfile

访问 http://localhost:8080 可以得到下图:

每个块都是可点击的,可以进行深度分析。

总结

pprofgo 中做性能分析的很强大的一个工具,支持内存,cpu,锁,goroutine 等数据采集,本篇主要是做个简单介绍,真正进行分析的时候,需要耐心了解各种图,数据展示的含义,一般来说还是比较好理解的。

pprof 性能分析是个很大的知识点,本篇仅做了简单的介绍,最好自己深入理解学习一下。

参考

golang pprof 实战-CPU,heap,alloc,goroutine,mutex,block

Go 语言编程之旅-pprof篇

实用go pprof使用指南

到此这篇关于go pprof 的使用的文章就介绍到这了,更多相关go pprof 使用内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

go pprof 的使用操作代码

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Node.JS使用Sequelize操作MySQL的示例代码

Node.JS提供了操作数据库的基础接口,我们可以通过mysql模块的query方法进行操作,但是需要编写SQL语句,对于SQL语句并不精通的人来说有一定的难度,而且在代码中保留SQL语句也有一定的危险性。为了方便进行数据库操作,ORM框架
2022-06-04

Go语言操作数据库及其常规操作的示例代码

Go操作MySQL安装: go get -u github.com/go-sql-driver/mysql GO语言的操作数据库的驱动原生支持连接池, 并且是并发安全的 标准库没有具体的实现 只是列出了一些需要的第三方库实现的具体内容//第
2022-06-07

如何使用js操作符优化代码

这篇文章主要介绍“如何使用js操作符优化代码”,在日常操作中,相信很多人在如何使用js操作符优化代码问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”如何使用js操作符优化代码”的疑惑有所帮助!接下来,请跟着小编
2023-06-27

Python操作使用MySQL数据库的实例代码

Python 操作 MySQL配置win_64Ubuntu14.04Python3.xpip安装pymysql模块 直接使用pip安装 pip install pymysqlwin64上直接在cmd中执行 连接本地数据库 使用模块pymys
2022-06-04

使用C#操作ftp服务器的示例代码

本篇文章提供了使用C#操作FTP服务器的示例代码。该代码演示了如何连接到服务器、列出目录、检索和上传文件,以及删除文件。此外,还提供了其他注意事项,包括高级功能和第三方库的使用。通过阅读这篇文章,开发者可以了解如何使用System.Net.FtpClient类与FTP服务器进行交互。
使用C#操作ftp服务器的示例代码
2024-04-02

使用Python编写B+树的删除操作代码

B+树删除操作需要先找到删除节点的位置,然后判断节点的键数。如果节点中的键数量超过了最小数量,直接删除即可。如下图,删除“40”:如果节点中有确切的最小键数,删除就需要从兄弟节点那里借用,将兄弟节点的中间键添加到父节点。如下图,删除“
使用Python编写B+树的删除操作代码
2024-01-22

python 与GO中操作slice,list的方式实例代码

python 与GO中操作slice,list的方式实例代码 GO代码中遍历slice,寻找某个slice,统计个数。type Element interface{}func main() {a := []int{1, 2, 3, 4, 1
2022-06-04

go性能分析工具pprof的用途及使用详解

刚开始接触go就遇到了一个内存问题,在进行内存分析的时候发现了一下比较好的工具,在此留下记录,下面这篇文章主要给大家介绍了关于go性能分析工具pprof的用途及使用的相关资料,需要的朋友可以参考下
2023-01-06

Springboot使用RestTemplate调用第三方接口的操作代码

这篇文章主要介绍了Springboot使用RestTemplate调用第三方接口,我只演示了最常使用的请求方式get、post的简单使用方法,当然RestTemplate的功能还有很多,感兴趣的朋友可以参考RestTemplate源码
2022-12-08

使用Python对Csv文件操作实例代码

csv是Comma-Separated Values的缩写,是用文本文件形式储存的表格数据,比如如下的表格:就可以存储为csv文件,文件内容是:No.,Name,Age,Score 1,mayi,18,99 2,jack,21,89 3,t
2022-06-04

Java使用Jedis操作Redis服务器的实例代码

这几天Java项目中需要用到Redis,于是学习了一下使用Jedis来操作Redis服务器的相关知识,下面为具体的配置和代码。1、Maven中配置Jedis在maven项目的pom.xml中添加依赖
2023-05-31

JAVA中的字符串常量池使用操作代码

Java中的字符串常量池是Java堆中的一块特殊存储区域,用于存储字符串。它的实现是为了提高字符串操作的性能并节省内存,这篇文章主要介绍了JAVA中的字符串常量池,需要的朋友可以参考下
2022-12-27

使用go连接clickhouse的实战操作

这篇文章主要给大家介绍了关于使用go连接clickhouse的实战操作,文中通过实例代码介绍的非常详细,对大家学习或者使用go具有一定的参考学习价值,需要的朋友可以参考下
2023-03-19

编程热搜

  • Python 学习之路 - Python
    一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
    Python 学习之路 - Python
  • chatgpt的中文全称是什么
    chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
    chatgpt的中文全称是什么
  • C/C++中extern函数使用详解
  • C/C++可变参数的使用
    可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
    C/C++可变参数的使用
  • css样式文件该放在哪里
  • php中数组下标必须是连续的吗
  • Python 3 教程
    Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
    Python 3 教程
  • Python pip包管理
    一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
    Python pip包管理
  • ubuntu如何重新编译内核
  • 改善Java代码之慎用java动态编译

目录