python2执行程序内存溢出导致被killed的问题因果分析
发布日期:2021-05-06 21:43:56 浏览次数:21 分类:技术文章

本文共 528 字,大约阅读时间需要 1 分钟。

问题来源:

执行一段程序,对某个函数重复执行,当执行到一半时,就显示被killed,重复几次均如此。为什么会这样呢?

第一步、定位被killed的根本原图;

       使用vi /var/log/messages查看日志。日志显示,是由于内存溢出导致的。

第二步、定位内存溢出的原因:

在主要的函数的前面加入@profile,用于显示每行代码的内存使用情况。

通过输出显示,该函数的内存一直在增长。

第三、第一种假设,会不会是某某变量没有释放导致内存一直在增加。

深入分析发现,并不存在这种情况。因为没有使用到全局变量。

这个函数一进来,他的内存就是上次执行的最后使用内存。能确定的是字典内存肯定没有释放。

第四步、加入del与gc.collect命令释放内存

在函数内部加入del与gc.collect命令仍然无法释放内存。其结果仍然是被killed;

使用profile可以发现内存并没有得到释放,至少在运行的时候没有立马释放。

第五步、寻找立马释放的方法

网卡搜索此方法有效,如下所示

del lst[:]

del lst

gc.collect

实验中发现使用del lst[:]能立马有效。

最终的结论就是要删除真正储存内存的东西,才能真正释放当下释放内存。

 

上一篇:dict格式转字符串两种方法的区别
下一篇:AC自动机的使用案例

发表评论

最新留言

哈哈,博客排版真的漂亮呢~
[***.90.31.176]2025年03月17日 10时54分47秒