当前位置: 首页 > article >正文

Go oom分析(一)——使用pprof线上分析

1. 启用 pprof

pprof 是 Go 自带的性能分析工具,用于检查内存使用、CPU 时间和 Goroutines 数量。

(1)在程序中启用 pprof

确保在程序中加入以下代码,不一定要使用init方法,也可以在任意位置添加如下代码,在需要的时候运行即可。

import (
    _ "net/http/pprof"
    "log"
    "net/http"
)

func init() {
    go func() {
        log.Println(http.ListenAndServe("localhost:6060", nil))
    }()
}
(2)捕获内存剖析数据

运行程序后,访问以下 URL:

  • 当前堆内存http://localhost:6060/debug/pprof/heap
  • 历史分配对象http://localhost:6060/debug/pprof/allocs
  • Goroutines 数量http://localhost:6060/debug/pprof/goroutine?debug=2

使用 go tool pprof 对程序的内存情况进行分析:

go tool pprof http://localhost:6060/debug/pprof/heap

在交互模式下:

  • top:查看内存占用最多的函数。
  • web:生成调用图(需要安装 Graphviz)。

2. 监控运行时内存状态

通过 runtime 包动态打印内存使用情况:

package main

import (
    "fmt"
    "runtime"
    "time"
)

func printMemStats() {
    var m runtime.MemStats
    runtime.ReadMemStats(&m)
    fmt.Printf("HeapAlloc = %v MiB", m.HeapAlloc/1024/1024)
    fmt.Printf("\tTotalAlloc = %v MiB", m.TotalAlloc/1024/1024)
    fmt.Printf("\tSys = %v MiB", m.Sys/1024/1024)
    fmt.Printf("\tNumGC = %v\n", m.NumGC)
}

func main() {
    for {
        printMemStats()
        time.Sleep(5 * time.Second)
    }
}

三、定位高内存占用原因

1. 检查 Goroutine 泄漏

使用 pprof 检查 Goroutines 的数量:

curl http://localhost:6060/debug/pprof/goroutine?debug=2

如果数量持续增加,可能存在 Goroutine 泄漏问题。重点检查:

  • 未退出的协程(如 select 未处理退出信号)。
  • HTTP 请求未正确关闭。

2. 检查内存分配

通过 pprof/heap,查看哪些函数分配了最多的内存。可能的原因包括:

  • 切片或 map 容量分配过大。
  • 循环中频繁创建临时对象。
  • 缓存未及时释放(如大数据存储在全局变量)。

3. 大对象问题

Go 对大对象的分配较为敏感,常见问题:

  • 切片扩容频率高。
  • 单个字符串或 JSON 对象过大。

优化措施:

  • 使用 bytes.Buffersync.Pool
  • 控制切片初始容量,避免频繁扩容。

五、常见问题与解决

1. Goroutine 泄漏

  • 原因:未退出的 Goroutine 占用内存。
  • 解决:确保所有 Goroutine 有退出条件,例如:
ctx, cancel := context.WithCancel(context.Background())
go func() {
    <-ctx.Done()
    return
}()
cancel()

2. 切片无限增长

  • 原因:切片在循环中不断扩容。
  • 解决:预分配容量,避免不必要的扩容。

3. 长生命周期对象

  • 原因:全局变量或缓存未释放。
  • 解决:定期清理缓存,或使用弱引用(如 sync.Pool)。

4. 垃圾回收(GC)问题

  • 现象:GC 频率过低或过高导致内存耗尽。
  • 优化:调整 GC 百分比:
debug.SetGCPercent(50) // 提高 GC 频率


http://www.kler.cn/a/503410.html

相关文章:

  • Python----Python高级(函数基础,形参和实参,参数传递,全局变量和局部变量,匿名函数,递归函数,eval()函数,LEGB规则)
  • 网络基础知识指南|1-20个
  • Centos9-SSH免密登录配置-修改22端口-关闭密码登录-提高安全性
  • docker实际应用记录
  • CSS 盒模型
  • 【UE5 C++课程系列笔记】29——在UE中使用第三方库的流程
  • element ui前端小数计算精度丢失的问题如何解决?
  • 计算机视觉与深度学习 | 使用深度学习来训练基于视觉的车辆检测器(matlab源码-faster RCNN)
  • 算法-贪心算法简单介绍
  • 设计一个流程来生成测试模型安全性的问题以及验证模型是否安全
  • 【Uniapp-Vue3】onUnload页面卸载和onPageScroll页面监听滚动
  • PySpark用sort-merge join解决数据倾斜的完整案例
  • B3DM转换成FBX
  • Pgsql存储占用分析
  • AR 在高校实验室安全教育中的应用
  • 基于PHP的校园兼职系统设计和开发
  • 【Vue】Vue组件--上
  • [读书日志]从零开始学习Chisel 第十三篇:Scala的隐式参数与隐式转换(敏捷硬件开发语言Chisel与数字系统设计)
  • OLED显示字符
  • 八 rk3568 android11 AP6256 蓝牙调试
  • 网络安全之sql注入
  • 渐变头像合成网站PHP源码
  • YOLOv11实战行人跌倒识别
  • 学习笔记-Kotlin
  • ExplaineR:集成K-means聚类算法的SHAP可解释性分析 | 可视化混淆矩阵、决策曲线、模型评估与各类SHAP图
  • 【机器学习】实战:天池工业蒸汽量项目(一)数据探索