线上问题排查之golang使用json进行对象copy
更新时间：2022年06月20日 08:43:46 作者： whoops本尊
这篇文章主要介绍了线上问题排查之golang使用json进行对象copy，文章围绕golang使用json进行对象copy的内存溢出问题排查展开详细内容需要的小伙伴可以参考一下
前言：
记一次golang使用json进行对象copy的内存溢出问题排查
问题现象:新增的功能,灰度部署在k8s集群的服务,发现机器老是被打崩,因为是灰度,且控制了qps在100多,但是机器却崩溃。通过对灰度机器的监控。发现是内存太高导致机器挂掉。此次回顾一下排查历程。
增加GC次数,从而可以通过pprof去抓取内存使用情况：
将程序的GOGC由原先的2000改为200,从而增加GC次数,然后去抓取内存消耗情况
- 第一步操作完成,经验证机器可以正常运行,借助gops导出cpu运行图和内存消耗情况
- ①将编译好的linux版本的gops导入到目标机器上
- ②执行命令 gops 查看正在运行的程序的pid
- ③执行命令获取cpu运行状态 gops pprof-cpu 27
- ④执行命令获取内存消耗情况 gops pprof-heap 27
执行上述两个命令后,其会生成文件在tmp目录下 ：
//⑤将生成的文档下载到本地后,分别执行 go tool pprof -http=:8080 cpu_profile* go tool pprof -http=:8081 heap_profile* //在本地生成可视化
内存的火焰图如下 ：
cpu的火焰图如下：
通过对火焰图的分析,可以明显的看到json.Marshal 和 json.Unmarshal 有明显的占用问题。跟着火焰图去找寻调用此处的该方法,定位到
此处就不列出runtime.Context对象的具体情况了,你可以理解为里面多处指针,多处切片。反正就是结构体很大 【PS:改天针对大结构体出个压测结果】
发现问题后更换如下代码进行对象copy,注意此拷贝结构体不能有小写字母开头。另外建议尽量少进行对象copy,尽可能的细化到需要copy的地方
/**
* @Description:深拷贝数据 (慎用--结构体不能有小写字母开头)
*/
func DeepCopy(dst, src interface{}) error {
var buf bytes.Buffer
if err := gob.NewEncoder(&buf).Encode(src); err != nil {
return err
}
return gob.NewDecoder(bytes.NewBuffer(buf.Bytes())).Decode(dst)
}到此这篇关于线上问题排查之golang使用json进行对象copy的文章就介绍到这了,更多相关 golang copy内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要为大家介绍了Go语言MySQLCURD数据库操作示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-12-12
下面小编就为大家带来一篇使用dep 配置golang 开发环境的操作方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-09-09
go语言中有一个非常神奇的函数init,它可以在所有程序执行开始前被执行,并且每个package下面可以存在多个init函数,这篇文章主要给大家介绍了关于Go语言中init函数特点、用途和注意事项的相关资料,需要的朋友可以参考下2023-07-07
本文介绍了Go语言原子操作的使用方法,原子操作是一种无锁的技术,可通过CPU指令实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧2024-10-10
这篇文章主要为大家介绍了uber go zap 日志框架支持异步日志输出示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-01-01
go语言题解LeetCode1299将每个元素替换为右侧最大元素
这篇文章主要为大家介绍了go语言LeetCode刷题1299将每个元素替换为右侧最大元素示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-01-01
Go语言入门教程之Arrays、Slices、Maps、Range操作简明总结
这篇文章主要介绍了Go语言入门教程之Arrays、Slices、Maps、Range操作简明总结,本文直接给出操作代码,同时对代码加上了详细注释,需要的朋友可以参考下2014-11-11
这篇文章主要介绍了Golang文件读写操作详情，文件是数据源(保存数据的地方)的一种,文件最主要的作用就是保存数据，文件在程序中是以流的形式来操作的，更多详细内容需要的朋友可以参考一下2022-07-07
这篇文章主要介绍了Go语言获取文件的名称、前缀、后缀，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2021-05-05
这篇文章主要为大家介绍了go基础语法50问及方法详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-01-01
最新评论