python 内存泄漏分析工具_记一次调试python内存泄露的问题
这两天由于公司需要, 自己编写了一个用于接收dicom文件(医学图像文件)的server. 经过各种coding-debuging-coding-debuging之后, 终于上线了, 上线后心里美滋滋的, 一切正常.
第二天一上班, 负责人和我说接收太慢了, 卡的要死. 我想难道是python本身的问题?(程序员本征思维)我好奇的打开了终端输入
ps -aux | grep python
找到进程id即 21610
我这里还没传几张图片就到78m了, 看来是内存问题. 其实生产环境占用更多, 因为生产环境保密所以只能在测试环境测试比较少的数据, 生产环境曾一度上升到3.7g的内存占用.
这样果断不行啊. 我发现有新的文件上传之后内存占用就会增大, 初步断定是dicom文件相关对象占用的内存. 现在的首要工作就是找到一个能进行内存泄露的调试工具了.
说道这里可能大家会有疑问, python作为动态类型语言同时拥有垃圾回收机怎么会有内存泄露? 其实也有可能出现内存泄露的情况, 有如下几种:对象一直被全局变量所引用, 全局变量生命周期长.
垃圾回收机被禁用或者设置成debug状态, 垃圾回收的内存不会被释放.
也是非常罕见的内存泄露的方式就是今天遇到的问题, 我周旋这个问题两天才debug出来, 现在分享给大家.客官请您继续往下看
说到查看python内存泄露的工具, 其实有挺多, 现在简短介绍一下gc: python 内置模块, 函数少功能基本, 使用简单, 作为python开发者里边的内容必须过一遍
objgraph: 可以绘制对象引用图, 对于对象种类较少, 结构比较简单的程序适用, 我这个一个库套一个库, 内存还用的这么多,
guppy: 可以对堆里边的对象进行统计, 算是比较实用
pympler: 可以统计内存里边各种类型的使用, 获取对象的大小
上边这些虽然有用但是总是搞不到点子上, 上边这些都需要改我的源程序, 比较费劲, 线上的代码不是说改就能改的, 而且他们功能也都比较弱, 后来发现两个强大的工具:tracemalloc: 究极强, 可以直接看到哪个(哪些)对象占用了最大的空间, 这些对象是谁, 调用栈是啥样的, python3直接内置, python2如果安装的话需要编译
pyrasite: 牛逼的第三方库, 可以渗透进入正在运行的python进程动态修改里边的数据和代码(其实修改代码就是通过修改数据实现)
我开始的时候非常想用tracemalloc, 可是对python2特别不友好, 需要重新编译python, 而且只能用python2.7.8编译, 编译好了也不容易嵌入到虚拟环境中, 头大, 果断换第二个.注: pyrasite使用之前需要在root用户下运行命令 echo 0 > /proc/sys/kernel/yama/ptrace_scope后才能正常使用
pyrasite里边有一个工具叫pyrasite-memory-viewer, 功能和guppy差不多, 不过可以对内存使用统计和对象之间的引用关系进行快照保存, 很易用也很强大.运行
pyrasite-memory-viewer
可以看到占用内存最多的是DicomFileLike这种类型的对象.已经达到上万个, 这是不能忍受的.
就目前来看可能会有上边说的两种内存泄露原因导致不能回收这个对象.打开pyrasite-shell
pyrasite-shell
我先通过
gc.isenabled()
判断gc是否在工作, 结果发现是True, 也就是正常工作的, 而且使用gc.setdebug(gc.STATUS)设置gc为debug模式, 然后gc.collect()进行垃圾回收发现并没有更多内存释放,则否认了第二种泄露的可能.
现在来看gc.garbage中不能被释放的对象, 让我来检查一下是否有全局变量指向它们(这里极有可能是一个列表或者是一个字典)
gc.garbage 可以看到被塞满了各种DicomFileLike对象
所以我们的目的就是先找到一个对象然后一级一级的向上寻找相互的引用.
>>> d = gc.garbage[-1] # 随便找一个DicomFileLike对象
>>> d
>>> objs = gc.get_referrers(d)
>>> len(objs)
8
>>> objs.remove(gc.garbage)
>>> objs.remove(locals())
>>> objs[0]
# 这里的输出是一个大字典, 包括了builtins, 应该是下的locals().
>>> objs[1]
>
>>> objs[2]
>
>>> objs[3]
>
>>> objs[4]
>
>>> objs[5]
>
到这里发现其实没有更多的全局变量指向这个d了, 而且发现所以有的方法的对象地址和d是相同的, 说明了这个对象其实是自循环引用的.
那么python不可能不支持循环引用对象的回收吧? 跟着这个问题我查了一下stackoverflow
这个问题的第一个回答介绍的很清楚了, 如果用户不自定类的__del__方法, gc可以回收带有自引用的对象, 但是你自己实现了__del__方法就不行了.
这就是python内存泄露的第三个可能.
回头看DicomFileLike的源码, 果然在__init__函数上方定义了一个__del__函数, 我这里使用了一个猴子补丁删除了这个方法, 内存泄露的问题就得以解决了.
def monkey_patch_dicom():
"""
修正dicom中DicomFileLike对象不释放内存问题
"""
del dicom.filebase.DicomIO.__del__
总结
到这里整个调试过程就结束了, 然而实际上过程中做了很多曲折的工作, 在pyrasite中会找到几个引用DicomFileLike对象的object, 比较不容易辨别, 最开始我以为是某个全局的对象引用的DicomFileLike, 比如是列表什么的, 后来发现其实是locals()和globals()字典, 如果使用pyrasite-memory-viewer保存下来的数据会发现有一个大列表指向所有没有回收的DicomFileLike对象, 捯饬半天发现其实是gc.garbage, 好囧, 曾让我一度怀疑是第一种泄露方式, 但是怎么找这个对象都没有找到. 其中还有几次看到线程达到140+, 后来发现其实和线程一点关系没有, 线程维持在这个数目上边很稳定.
在这个过程中用到的其他几个hack的技巧有:查看 进程的线程数量
ps -o nlwp 根据对象的id/address动态获取对象
import ctypes
obj = ctypes.cast(, ctypes.py_object).value查看垃圾回收的日志
gc.set_debug(...)
你想更深入了解学习Python知识体系,你可以看一下我们花费了一个多月整理了上百小时的几百个知识点体系内容:
python 内存泄漏分析工具_记一次调试python内存泄露的问题相关推荐
- android分析内存工具,Android Studio内存泄漏分析工具汇总
Android Studio内存泄漏分析工具汇总 时间:2017-04-25 来源:Android开发学习网 在Android开发过程中,让人头疼的就是内存泄露问题了,很小的一个错误都会引起内 ...
- tMemMonitor (TMM) ----- 100%正确的内存泄漏分析工具
C/C++由于灵活.高效的优点一直以来都是主流的程序设计语言之一,但是其内存的分配与释放均由程序员自己管理,当由于疏忽或错误造成程序未能释放不再使用的内存时就会造成内存泄漏.在大型.复杂的应用程序中, ...
- 内存泄漏分析工具tMemMonitor (TMM)使用简介
内存泄漏分析工具tMemMonitor (TMM)使用简介 C/C++由于灵活.高效的优点一直以来都是主流的程序设计语言之一,但是其内存的分配与释放均由程序员自己管理,当由于疏忽或错误造成程序未能释放 ...
- android 内存泄漏分析工具,Android内存泄漏终极解决篇(上)
一.概述 在Android的开发中,经常听到"内存泄漏"这个词."内存泄漏"就是一个对象已经不需要再使用了,但是因为其它的对象持有该对象的引用,导致它的内存不能 ...
- new arraylist内存_Java内存泄漏分析工具Memory Analyzer Tool
阅读文本大概需要3分钟. 一个大型的Java项目也许从开发到测试结束并可能不能未发现一些重大的问题,但是在生产环境中还是会出现一些非常棘手的问题,如内存泄漏直接导致服务宕机,遇到这样的问题对于一个经验 ...
- eclipse占用内存过大_Java内存泄漏分析工具Memory Analyzer Tool
一个大型的Java项目也许从开发到测试结束并可能不能未发现一些重大的问题,但是在生产环境中还是会出现一些非常棘手的问题,如内存泄漏直接导致服务宕机,遇到这样的问题对于一个经验尚浅的开发人员来说难度非常 ...
- java分析内存泄露工具_Eclipse Memory Analyzer(Java内存泄漏分析工具)
概述 一个大型的Java项目也许从开发到测试结束并未发现一些大的问题,但是在生产环境中还是会出现一些非常棘手的问题,如内存泄漏,遇到这样的问题对于一个经验尚浅的开发人员来说难度非常大,好的一点是JVM ...
- chrome内存泄露(一)、内存泄漏分析工具
内存分析使用的工具包括chrome任务管理器.chrome时间轴(低版本是Timeline,高版本对应performance).chrome memory(低版本是chrome profiles,主要 ...
- python pdb查看变量值_使用pdb模块调试Python
在Python中,我们需要debug时,有三种方式: 加log语句.最简单的方式是添加print()语句来输出我们想要获知的状态或者变量,好处是简单容易操作,坏处是debug完了之后,还需要将prin ...
最新文章
- 编写高质量代码 Web前端开发修炼之道 读书笔记
- dataframe按行按列选择方法
- 给其他账户访问mysql的权限,将postgresql数据库的权限授予其他用户
- LeetCode MySQL 1336. 每次访问的交易次数
- vim上下左右键输出A B
- 注册flash.ocx inno setup (转)
- android UI进阶之布局的优化
- 【游戏开发实战】Unity调用谷歌Google免费翻译API(https接口),年轻人不讲武德,用多个国家语言怎么讲
- Python歌词解析
- 飞信死了,运营商也快死了
- Android客户端与服务器通信
- python求奇偶数和_用Python返回偶数和奇数
- 黎曼Zeta函数,人类文明黎曼Zeta函数,人类文明永恒的的纪念
- 微信小程序注册入口和注册流程(完整版图文教程)
- 《进击的虫师》爬取豆瓣电影海报Top250(2020年10月23日更新)
- 南方电网两栖机器人_南方电网首个作业级水下机器人落户海南 为海底电缆“护驾”...
- 诛仙服务器技能修改,诛仙玩家浅析诛仙3技能修改所带来的轰动
- Jugglefest
- 红米note10和红米note9哪个值得买
- 博士申请 | 香港中文大学(深圳)濮实老师招收分布式优化与机器学习全奖博士生...
热门文章
- python将数字转字符串_python中如何将数字转字符串
- sts 快捷键 /Eclipse 快捷键(sts基本也一样)
- 基于SSM的蔬菜水果超市网站
- 什么是限流?为什么会限流呢?常见的限流算法【固定窗口限流、滑动窗口限流、漏桶限流、令牌桶限流】是什么呢?
- 微型计算机数值,微型计算机的实用数值方法-生活阅读.pdf
- 国标GH5188高温合金
- POWER BI:关于ssas模型更新
- 顺丰品牌研究http://www.kiees.cn/sf/express/brand.htm
- 【轻快图片管理系统】- 开源图床系统
- js 日期格式化和函数