go 服务器内存偶尔会飙升，有什么办法可以把内存 dump 下来？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 1609 天前的主题，其中的信息可能已经有所发展或是发生改变。

最近生产服务器内存偶尔会飙升导致监控报警，不知道有没有什么办法把内存 dump 下来看里面具体有哪些对象，就像 java 中的 jmap -heap 一样

试过 pprof，这个据我了解只能看到采样期间的内存分配情况，还有就是累计的分配情况，不能看到内存中对象分布

内存

dump

飙升

Heap

11 条回复 • 2020-07-01 19:45:25 +08:00

richzhu

2020-06-29 10:23:43 +08:00

同问，有的时候真的是莫名其妙

janxin

2020-06-29 10:31:30 +08:00

https://golang.google.cn/pkg/runtime/debug/#WriteHeapDump

reus

2020-06-29 10:37:03 +08:00

如果你用的是 1.12 或者更新的版本，那 RSS 会一直增长，只在系统内存不够用的时候，内核才会回收这些内存。如果你的监控指标是 RSS，那可以用 GODEBUG=madvdontneed=1 这个环境变量切换回旧的回收方式。

petelin

2020-06-29 12:19:55 +08:00 via iPhone

pprof 里有 heap debug=1 会有全部的内存分配
gcore 配合 viewcore 就是对比 linux core

Lonenso

2020-06-29 17:20:49 +08:00

https://rakyll.org/coredumps/ 看看这个?

pabno

2020-06-30 13:50:41 +08:00

@janxin 这个 dump 出来没找到有什么工具可以分析

pabno

2020-06-30 13:55:43 +08:00

@Lonenso 这个好像可以，感谢

pabno

2020-06-30 13:56:23 +08:00

@reus 我们暂时用的还是 1.10 版本，所以应该不存在 rss 一直增长的问题

janxin

2020-06-30 17:11:04 +08:00

@pabno golang.org/x/debug/cmd/viewcore

pabno

2020-07-01 18:18:44 +08:00

@janxin 这个尝试了一下，在 linux 上跑 viewcore 会报：invalid memory address or nil pointer dereference 的错误。我现在是使用 gcore 把进程的 coredump 文件 dump 下来再使用编译后的 viewcore 分析就会报错，但是如果使用 dlv 分析是正常的。可惜 dlv 没法查看内存分布。使用的 go 版本是 1.13

@Lonenso 这个尝试了下，还是没法得到想要的功能

Lonenso

2020-07-01 19:45:25 +08:00

因为你要解决内存飙升, 也有很多种情况, 我目前遇到过自己写的 goroutine 泄露导致的内存飙升. 我觉得你可以深入使用 pprof.