Python 从subprocess运行的子进程中实时获取输出的例子
有些时候，我们需要将某些程序放到子进程中去运行，以达到整合系统的目的。在Python中，一个非常好的选择就是使用subprocess模块，本模块为开辟子进程去执行子程序提供了统一的接口，更加便于学习和使用。
同时，对于在子进程里的程序，我们希望能够实时获取其输出，以在主进程中打印相关信息，使我们能够了解当前子程序的执行进度。对此，subprocess模块也提供了相应的参数，能够将子程序的标准输出和标准错误输出返回给主程序。
下面，我们就通过一个例子来说明这个功能。首先，我们需要一个用于模拟标准输出和标准错误输出的“子程序”——subprogram.py：
import sys
import time
for i in range(5):
sys.stdout.write('Processing {}\n'.format(i))
time.sleep(1)
for i in range(5):
sys.stderr.write('Error {}\n'.format(i))
time.sleep(1)
可以看到这个程序非常简单，分别向标准输出和标准错误写入了5条信息，并且输出之间有1秒的间隔。下面是驱动这个“子程序”运行的“主程序”——main.py：
import shlex
import subprocess
if __name__ == '__main__':
shell_cmd = 'python3 subprogram.py'
cmd = shlex.split(shell_cmd)
p = subprocess.Popen(cmd, shell=False, stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
while p.poll() is None:
line = p.stdout.readline()
line = line.strip()
if line:
print('Subprogram output: [{}]'.format(line))
if p.returncode == 0:
print('Subprogram success')
else:
print('Subprogram failed')
可以看到，我们通过指定stderr=subprocess.STDOUT，将子程序的标准错误输出重定向到了标准输出，以使我们可以直接从标准输出中同时获取标准输出和标准错误的信息。运行这个程序，我们会期待main.py会每秒输出一次信息到控制台，但是事实上，我们直到等了10秒之后才一次性看到所有的10条输出。
产生这种现象的原因也非常简单，就是标准输出和标准错误有一个缓存的概念，它不会立即将程序的标准输出内容返回，而是会做一定的缓存，直到缓存满或者程序结束强制清空缓存时才输出。了解到问题的原因，解决问题的方法也就一目了然了，我们只需要在子程序中，每次输出后去手动清空一下缓存即可，以下是修改过的subprogram.py：
import sys
import time
for i in range(5):
sys.stdout.write('Processing {}\n'.format(i))
sys.stdout.flush()
time.sleep(1)
for i in range(5):
sys.stderr.write('Error {}\n'.format(i))
sys.stderr.flush()
time.sleep(1)
经过上述的修改之后，再次运行main.py程序，我们会看到，每秒会输出一条信息，达到了我们在主程序中，去追踪子程序执行过程的目的。
PS：测试环境是Python3.6.1 Mac版。
以上这篇Python 从subprocess运行的子进程中实时获取输出的例子就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
这篇文章主要介绍了pyftplib中文乱码问题解决方案,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-01-01
在软件开发和数据科学领域,自动运行代码是提高效率和确保一致性的关键,本文将深入探讨如何使用Python实现自动运行代码的各种方法,希望对大家有所帮助2023-12-12
这篇文章主要介绍了Python线性方程组求解运算,涉及Python使用scipy.linalg.solve进行方程组求解运算的相关操作技巧,需要的朋友可以参考下2018-01-01
这篇文章主要介绍了Python使用Pandas库实现MySQL数据库的读写 ,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2019-07-07
详解pytest分布式执行插件 pytest-xdist 的高级用法
这篇文章主要介绍了pytest分布式执行插件 pytest-xdist 的高级用法,本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-08-08
下面小编就为大家带来一篇python3.0 模拟用户登录,三次错误锁定的实例。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-11-11
这篇文章主要介绍了python中for语句简单遍历数据的方法,以一个简单实例形式分析了Python中for语句遍历数据的技巧,具有一定参考借鉴价值,需要的朋友可以参考下2015-05-05
本文主要介绍了Python中私有属性“_“下划线和“__“双下划线区别，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-03-03
本篇文章给大家介绍python中字符串拼接的多种方法，非常不错，具有一定的参考借鉴价值，需要的朋友参考下吧2018-07-07
Python语法定义了用于在 Python 编程中创建句子的所有规则集。如果想更深入地研究 Python 词法结构，需要了解构成语句的句法元素，即构成 Python 程序的基本单元，涵盖控制结构，在不同代码组之间引导程序流的构造，快跟随小编一起学习一下吧2022-04-04
最新评论