python - 写入错误 : Broken pipe

Question

我必须在大约 300 个目录上运行一个工具。每次运行大约需要 1 分钟到 30 分钟，甚至更长。因此，我编写了一个带有循环的 python 脚本，以在所有目录上一个接一个地运行该工具。

我的 python 脚本有类似的代码:

for directory in directories:
  os.popen('runtool_exec ' + directory)

但是当我运行 python 脚本时，我反复收到以下错误消息:

..
tail: write error: Broken pipe
date: write error: Broken pipe
..

我所做的就是使用 ssh 登录远程服务器，其中保留了工具、python 脚本和主题目录。当我使用如下命令从命令提示符单独运行该工具时:

runtool_exec directory

它工作正常。 “破管”错误仅在我使用 python 脚本运行时出现。任何想法，解决方法？

Answer 1

您看到的错误是因为您正在使用 os.popen() 来运行命令，这意味着管道已打开并连接到命令的 stdout。每当命令(或它在不重定向 stdout 的情况下执行的任何操作)想要写入 stdout 时，它都会尝试写入管道。但是你没有保留管道，因为你没有在任何地方分配 os.popen() 的结果，所以它被 Python 清理并关闭。因此，尝试写入它的进程遇到了损坏的管道，并产生了您看到的错误。 (os.popen() 不 将 stderr 重定向到管道，因此您仍然会看到错误。)

您的 os.popen() 调用中的另一个问题是您没有检查以确保 directory 不包含您的 shell 的任何特殊字符。例如，如果目录包含引号或 *，可能会发生奇怪的事情。像这样使用 os.popen() 非常糟糕。

您应该改用 subprocess.Popen()，并明确告诉它您想对进程的输出(stdout 和 stderr)做什么。您传递 subprocess.Popen() 一个参数列表(包括你想要开始的东西)而不是一个字符串，它完全避免了 shell —— 不需要对你的字符串进行完整性检查。如果你真的想忽略输出，你会用类似的东西来做:

devnull = open(os.devnull, 'w')
for directory in directories:
    subprocess.Popen(['runtool_exec', directory], stdout=devnull)

尽管我强烈建议至少对 subprocess.Popen 的结果进行一些基本检查，以查看该进程是否未过早执行或是否有错误代码。