用python记录运行pid,并在需要时kill掉它们的实例
更新时间：2017年01月16日 09:00:06 投稿：jingxian
下面小编就为大家带来一篇用python记录运行pid,并在需要时kill掉它们的实例。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
我在跑爬虫程序的时候，由于爬虫程序的等待目标服务器返回数据的时间很长，而cpu占用很低，所以经常挂着代理一跑就跑好几百个。但是爬虫程序通常是写了死循环，或直到分配给该进程的任务都跑完才退出的。如果我们想中途结束掉这些任务，是没办法手工一个一个kill掉的。那么该如何结束这些进程呢？
我的方法就是在运行爬虫进程时，记录该进程的Pid，然后在需要手动结束时，再用语句kill掉它们。
for i in {1..100}
do
nohup python NetEase_comms_proxy.py > hehe.dat 2>&1 & echo $! >> run.pid
sleep 10
done
上述语句完成了将脚本在后台运行100便，并且将pid append到run.pid文件中。其中nohup 是 no hang up的缩写命令。do…done之间是被循环的语句。
接下来就是kill掉它们的语句了，我用的python
import os
if __name__ == '__main__':
fin = open('run.pid', 'r')
pids = []
for line in fin:
pids.append(line.strip())
for pid in pids:
cmd = 'kill ' + pid
os.system(cmd)
这样就把记录下来的pid全部kill掉了。
但需要注意的一点时，如果在任务运行期间，有的进程由于完成任务或者出错而退出。其他的程序可能会share这些进程的Pid,这样如果在运行kill脚本的时候，可能附带就把这些进程也给Kill掉了，造成不必要的麻烦。
以上这篇用python记录运行pid,并在需要时kill掉它们的实例就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
今天小编就为大家分享一篇Python求正态分布曲线下面积实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-11-11
这篇文章介绍了Python中的数据可视化matplotlib与绘图库模块，文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-05-05
这篇文章主要介绍了pycharm如何为函数插入文档注释，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-02-02
这篇文章主要介绍了关于pandas.DataFrame的类SQL操作方式,具有很好的参考价值,希望对大家有所帮助,2023-08-08
大家好，本篇文章主要讲的是Python中安装库的常用方法介绍，感兴趣的同学赶快来看一看吧，对你有帮助的话记得收藏一下，方便下次浏览2022-01-01
这篇文章主要为大家介绍了python从gbff文件中直接提取cds序列示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2022-07-07
这篇文章主要介绍了Python and、or以及and-or语法总结,本文分别给出实例讲解它们的使用方法,需要的朋友可以参考下2015-04-04
python 对任意数据和曲线进行拟合并求出函数表达式的三种解决方案
这篇文章主要介绍了python 对任意数据和曲线进行拟合并求出函数表达式的三种解决方案,本文通过实例代码给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下2020-02-02
字符串是python中最常见的数据类型,创建字符串只需用引号括起来分配给一个变量即可,这篇文章主要给大家介绍了关于Python字符串的基本操作方法的相关资料,文中通过图文介绍的非常详细,需要的朋友可以参考下2023-11-11
这篇文章主要为大家详细介绍了python实现烟花小程序，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2019-01-01
最新评论