python - 在 Linux 中从 Python 启动一个 c 程序，将一个大文本字符串作为参数传递给 c 程序

Question

在 Linux 中。我有一个 c 程序，它读取一个 2048 字节的文本文件作为输入。我想从 Python 脚本启动 c 程序。我希望 Python 脚本将文本字符串作为参数传递给 c 程序，而不是将文本字符串写入文件供 c 程序读取。

一个 Python 程序如何启动一个 c 程序并向它传递一个 ~2K(文本)数据结构？

另请注意，我不能使用“subprocess.check_output()”。我必须使用“os.system()”。那是因为后者允许我的 c 程序直接访问终端输入/输出。前者没有。

Answer 1

您可以将其作为参数传递，只需……将其作为参数传递即可。大概您想引用它而不是将其作为需要转义的任意数量的参数传递等等，但这很容易 shlex.quote .例如:

with open('bigfile.txt', 'rb') as infile:
    biginput = infile.read(2048)
os.system('cprogram {}'.format(shlex.quote(biginput)))

---

如果您收到有关参数的错误或命令行对于 shell 而言太长……那么您将无法执行此操作。 Python 不能让 shell 做它不能做的事情，而你拒绝绕过 shell(我认为是因为误解，但我们暂时忽略它)。因此，您将需要一些其他方式来传递数据。

但这并不意味着您必须将其存储在文件中。您可以使用来自 subprocess 的 shell就像来自 os.system 一样容易，这意味着您可以将其传递给子进程的标准输入:

with subprocess.Popen('cprogram {}'.format(shlex.quote(biginput)),
                      shell=True, stdin=subprocess.PIPE) as p:
    p.communicate(biginput)

由于您使用的是 shell=True , 而不是替换 stdout或 stderr , 它将获得与 os.system 完全相同的终端.所以，例如，如果它正在做，比如说，isatty(fileno(stdout)) ，如果您的 Python 脚本在 tty 中运行，则为 true，否则为 false。

---

作为旁注，将其存储在 tempfile.NamedTemporaryFile 中可能不会花费您预期的那么多。特别是，子进程可能能够直接从内存磁盘缓存中读取您写入的数据，而不是等待它被刷新到磁盘(并且它可能永远不会被刷新到磁盘)。

---

我怀疑你认为你不能使用 subprocess 的原因是你用的是check_output当你想要的时候check_call .

如果您使用 check_output (或者如果您将 stdout=PIPE 显式传递给大多数其他 subprocess 函数)，子进程的标准输出是您正在读取的管道，因此它显然不是 tty。

这是有道理的:要么你想捕获输出，在这种情况下 C 程序不能输出到 tty，要么你想让 C 程序输出到 tty，在这种情况下你不能捕获it.* 所以，只要不捕获输出，一切都会好起来的。

---

如果我是对的，这意味着您一开始就没有理由使用 shell，这让一切都变得简单多了。当然，您的数据可能仍然大于最大系统参数大小** 或资源限制***，即使没有 shell。在大多数现代系统上，您至少可以指望 64KB，所以一定要先尝试一下:

subprocess.check_call(['cprogram', biginput])

但是如果你得到一个E2BIG错误:

with subprocess.Popen(['cprogram', biginput], stdin=subprocess.PIPE) as p:
    p.communicate(biginput)

---

* 当然，除非您想为您的子进程伪造 tty，在这种情况下您需要查看 os.forkpty 和相关功能，或 pty 模块。

** 在大多数 *BSD 和相关系统上，sysctl kern.argmax和/或 getconf ARG_MAX会给你系统限制，或者sysconf(_SC_ARG_MAX)来自 C。可能还有一个常量 ARG_MAX通过 <limits.h> 访问.在 Linux 上，事情有点复杂，因为有许多不同的限制(其中大部分非常非常高)，而不是只有一个限制。查看您平台的联机帮助页以获取 execve了解详情。

*** 在一些平台上，包括最近的 linux，RLIMIT_STACK影响您可以传递的最大参数大小。再次，查看您平台的 execve联机帮助页。