python子进程的输出不可见 python子进程没有连接怎么办
论文详细介绍了如何利用Python的pexpect库与logging模块，实现在Unix环境下运行任何子进程命令时，实时捕获其输出，并为每行自动添加精确的时间。通过这种方法，开发者可以有效地对长时间运行的命令进行实时监控和日志记录，大大提升了调试和中断的便利性，确保输出信息的可追溯性和进度内容。
在python中执行外部命令并捕获输出是常见的需求，尤其是在自动化脚本或系统管理任务中。然而，当需要地处理这些输出，并且为每个输出添加额外的信息（如时钟）时，标准的子流程模块可能不够严格，特别是需要对于交互或持续输出的命令。传统的管道操作虽然在shell中安装，但将其无缝集成到python的子流程实时中并实现逐行处理和时钟添加，则需要更精细的方法。 pexpect 和日志记录 实现实时带定时器的输出
为了解决上述问题，我们可以结合使用pexpect库和Python内置的logging模块。pexpect库提供了一种强大的方式来控制和方便自动化与子进程的交互，能够像用户一样“期望”的某个输出，并“发送”。这使得它非常适合捕获子进程的实时输出。而logging模块天然支持时间，可以将带定时器的日志信息输出到文件或控制台。核心原理pexpect.spawn()：启动一个子进程允许进程，并返回一个pexpect对象。该对象提供了与子进程通信的接口，包括读取其标准输出和标准错误。逐行读取：pexpect对象我们逐行读取子进程的输出，这用于实时处理关键。logging模块：配置日志模块，发出在记录每条消息时自动包含当前时间。将子进程的每行输出作为一条日志消息进行记录。
示例代码
以下是一个实现该功能的Python脚本示例：#! /usr/bin/env pythonimportloggingimport pexpectimport sys#配置日志# filename='ts.log'：将日志输出到名为'ts.log'的文件#encoding='utf-8'：指定日志文件的编码#format='(asctime)s (levelname)-8s (message)s'：定义日志的格式# (asctime)s：记录日志# (levelname)-8s：记录日志级别（左宽度，宽度8个字符）# (message)s：记录日志内容# level=logging.DEBUG：设置日志的最高级别为DEBUG，即所有级别的消息都会被记录logging.basicConfig( filename='ts.log'，encoding='utf-8'，format='(asctime)s (levelname)-8s (message)s'，level=logging.DEBUG)#也可以同时输出到控制台（如果需要）# console_handler =logging.StreamHandler(sys.stdout)# console_handler.setFormatter(logging.Formatter('(asctime)s (message)s'))#logging.getLogger().addHandler(console_handler)def run_command_with_timestamp_logging(cmd： str)： quot；quot；quot；运行指定的命令，把其输出实时记录到日志中，每行带时间。 Args： cmd (str)：要执行的命令字符串。
quot；quot；quot；logging.info(fquot；执行命令： '{cmd}'quot；) # 记录命令本身 try： # 使用 pexpect.spawn 启动命令 #encoding=quot；utf-8quot；：确保正确处理子进程的输出编码 p = pexpect.spawn(cmd，encoding=quot；utf-8quot；) # 循环读取子进程的每一行输出 # 'l ：= p.readline()' 是 Python 3.8 属性表达式（walrus operator） # 它在读取行的同时将其赋给变量 l while l ：= p.readline()： # 记录子进程的输出符行，完成完成的换行logging.info(l.strip()) # 等待子进程结束并获取其退出状态 p.wait()logging.info(fquot；Command '{cmd}' finish with exit status：{p.exitstatus}quot；) except pexpect.exceptions.EOF：logging.error(fquot；命令'{cmd}' 意外终止或达到 EOF。quot；) logging.error(fquot；EOF 之前： {p.before}quot；) # 记录 EOF 前捕获到的内容 except pexpect.exceptions.TIMEOUT： logging.error(fquot；命令 '{cmd}' 超时。quot；) except Exception as e： logging.critical(fquot；发生意外错误： {e}quot；)# 示例用法 if __name__ == quot；__main__quot；： print(quot；运行 'ls -l' 并将输出记录到 ts.log...quot；) run_command_with_timestamp_logging(quot；ls -lquot；) print(quot；\n运行 'docker build .' (示例，用实际命令替换) 并将输出记录到 ts.log...quot；) # 注意：如果 docker build .需要交互或特定环境，可能需要进一步配置 pexpect # 例如：run_command_with_timestamp_logging(quot；docker build .quot；) # 为了演示，这里使用一个会持续输出的简单命令 run
_command_with_timestamp_logging(quot；bash -c 'for i in {1..5}；do echo \quot；Line $i from bash\quot；；sleep 1；done'quot；) print(quot；\n检查 ts.log 的输出。quot；)登录后复制代码解析logging.basicConfig(...)：这是Python日志模块的基本配置。我们指定了日志文件的名称 (ts.log)、编码(utf-8)、日志消息的格式以及最低记录级别 (DEBUG)。(asctime)s 是格式字符串中的关键部分，它会自动插入当前时间。pexpect.spawn(cmd，encoding="utf-8")：这是启动子进程并建立通信的关键。cmd 参数是要执行的命令字符串（例如 "ls -l" 或 "docker build .")。encoding="utf-8"参数确保pexpect正确解码子进程的输出。while l ：= p.readline()：： 这是一个循环，持续从子进程的标准输出中读取数据，子进程结束或不再有输出。p.readline() 方法会阻塞直到读取到一行数据以（换将行符结束），或者直到文件结束（EOF）。Python 3.8 的赋值表达式直到 (：=) 使代码更简洁。logging.info(l.strip())：读取到每行输出作为一条信息级别的日志记录下来。l.strip()用于删除行尾的换行符，日志中出现多余的空行码。错误：try... except块用于捕获pexpect可能引发的异常，如EOF（子进程意外终止）或TIMEOUT（命令执行超时），这增强了脚本的健壮性。p.wait()：在读取完所有输出后，调用p.wait()等待子进程真正退出，并可以获取其退出状态项(p.exitstatus)。注意安装pexpect：pexpect不是Python标准库的部分，需要单独安装。可以通过pip进行安装：pip install pexpect。命令的复杂性： 对于交互输入（如密码提示）的命令，pexpect提供了expect()和sendline()等方法来用户模拟交互。本教程主要集中于输出捕获。日志输出目标：logging.basic默认配置日志输出到文件。如果希望同时添加输出到控制台，可以需要一个StreamHandler到根logger，如代码注释中所示。编码问题：确保pexpect.spawn中的编码参数与子进程实际输出的编码一致，通常utf-8是一个好的默认选择。资源管理：pexpect会管理子进程的生命周期。通常，当pexpect对象被垃圾回收时，子进程同样被关闭。但明确调用p.close()或等待其退出是更好的实践。与子进程的区别： subprocess.Popen主要用于启动进程并获取其输出（通常是批量获取所有输出或通过communicate()阻塞），而pexpect更关注于进程通信，可以并实时处理逐行输出，这在需要监控实时进度或处理命令时占据优势。
总结
通过pexpect和logging，我们能够优雅地解决Python子进程输出实时添加结合定时器的问题。这种方法不仅提供了强大的实时输出捕获能力，还利用了Python标准模块库的日志功能，使得输出管理更加专业和高效。无论是用还是用对于长时间运行的构建过程、系统监控脚本或者复杂的自动化任务，这种技术极大地提升了日志的针对性和问题排查的效率。
以上就是如何为Python子进程记录输出添加时间并进行日志的详细内容，更多请关注乐哥常识网其他相关文章！