- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有一个接受命令行参数的Python脚本job.py
。该脚本使用Python包subprocess
来运行一些外部程序。脚本和外部程序都是顺序的(即没有 MPI、openMP 等)。我想运行这个脚本 4 次,每次使用不同的命令行参数。我的处理器有 4 个核心,因此我想同时运行所有 4 个实例。如果我打开 4 个终端并在单独的终端中运行脚本的每个实例,它就会完美地工作,并且我得到了我想要的结果。
现在我想让自己更轻松地启动 4 个实例,这样我就可以从单个终端使用单个命令来完成所有这些操作。为此,我使用 bash 脚本 batch.sh
:
python job.py 4 0 &
python job.py 4 1 &
python job.py 4 2 &
python job.py 4 3 &
这不起作用。事实证明 subprocess
是这里的罪魁祸首。所有Python代码都完美运行,直到它到达subprocess.call
,然后我得到:
[1]+ Stopped python job.py 4 0
所以我的看法是,我试图在后台运行 job.py
而 job.py
本身尝试通过以下方式在后台运行其他内容子进程
。由于我不明白的原因,这显然不起作用。
有没有办法在不需要多个终端的情况下多次运行 job.py
?
编辑#1
根据建议,我尝试了multiprocessing
、thread
和threading
包。在最好的情况下,只有一个实例运行正常。我尝试了一个丑陋的解决方法,但确实有效。我制作了一个 bash 脚本,它在新终端中启动每个实例:
konsole -e python job.py 4 0
konsole -e python job.py 4 1
konsole -e python job.py 4 2
konsole -e python job.py 4 3
编辑#2
这里是使用 subprocess.call
的实际函数(注意:subprocess
被导入为 sp
)。
def run_case(path):
case = path['case']
os.chdir(case)
cmd = '{foam}; {solver} >log.{solver} 2>&1'.format(foam=CONFIG['FOAM'],
solver=CONFIG['SOLVER'])
sp.call(['/bin/bash', '-i', '-c', cmd])
让我来填补空白:
CONFIG
是全局定义的字典。CONFIG['FOAM'] = 'of40'
这是我的 .bashrc 中的别名,用于获取属于我正在运行的二进制文件的文件。CONFIG['SOLVER'] = 'simpleFoam'
这是我正在运行的二进制文件。编辑#3
我终于让它可以用了
def run_case():
case = CONFIG['PATH']['case']
os.chdir(case)
cmd = 'source {foam}; {solver} >log.simpleFoam 2>&1'.format(foam=CONFIG['FOAM'],
solver=CONFIG['SOLVER'])
sp.call([cmd], shell=True, executable='/bin/bash')
解决方案是设置 shell=True
和 executable='/bin/bash'
而不是在中包含 /bin/bash
要传递给 shell 的实际命令行。注意:foam
现在是文件路径,而不是别名。
最佳答案
您可以在 Python 中进行并行化:
import multiprocessing
import subprocess
def run_job(spec):
...
if spec ...:
subprocess.call(...)
def run_all_jobs(specs):
pool = multiprocessing.Pool()
pool.map(run_job, specs)
它的优点是可以让您监视/记录/调试并行化。
关于python - 如何运行使用 subprocess.call 的同一 Python 脚本的多个实例,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42979271/
我在这里看到这个帖子很多次了;但未能从命令中捕获故意错误。迄今为止我找到的最好的部分工作.. from Tkinter import * import os import Image, ImageTk
我正在尝试使用 Python 在我的服务器上进行一些基本的模块设置。这有点困难,因为我无法访问互联网。 这是我的代码 import sys import os from subprocess impo
这个问题在这里已经有了答案: Why does passing variables to subprocess.Popen not work despite passing a list of ar
按照目前的情况,这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持,但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the
使用 subprocess.call 时,输出符合预期。 result = subprocess.call([securefx, '/NoPrompt', '/Q', '/RetryCount', r
当我使用 subprocess.Popen 或 subprocess.call 执行生成大量输出的命令行时,python 脚本挂起,但奇怪的是,等待一段时间后,脚本处于挂起状态,发现cmd命令的作业已
我是 subprocess 模块的新手,文档让我想知道 subprocess.popen 和 subprocess.run 之间有什么区别.命令的作用有区别吗?一个只是更新吗?哪个更好用? 最佳答案
我需要限制使用 subprocess.call 从 python 进程生成的外部命令行应用程序占用的时间和 CPU,主要是因为有时生成的进程会卡住并将 CPU 固定在 99%。 nice 和 ulim
我一直在使用 subprocess.check_output()有一段时间从子进程捕获输出,但在某些情况下遇到了一些性能问题。我在 RHEL6 机器上运行它。 调用 Python 环境是 linux
我想从 python 运行一个程序并找到它的内存使用情况。为此,我正在使用: l=['./a.out','','out.txt'] p=subprocess.Popen(l,shell=False,s
我正在使用 Python 2.7 我正在尝试从 Python 运行 StatTransfer 程序。 当我尝试时: tempname = os.path.abspath('./text.txt') T
我想执行以下操作: 使用 subprocess.check_call 从 Python 外壳到另一个可执行文件 捕获子进程的 stderr(如果有) 将 stderr 输出添加到父进程的 Called
我编写了一个程序(myProg.py),它使用subprocess模块通过run函数运行其他python程序。我注意到这些其他 python 程序中的 input(arg) 语句中的 arg 没有
我有这个小脚本可以让您的无线设备进入监控模式。它执行 airodump 扫描,然后在终止扫描后将输出转储到 file.txt 或变量,这样我就可以抓取 BSSID 和我可能需要的任何其他信息。 我觉得
我最近在 Python 中注意到 subprocess.Popen() 有一个参数: stdout=None(default) 我还看到有人使用 stdout=subprocess.PIPE。 有什么
我已经查看了它们的文档。 这个问题是由 J.F. 在这里的评论提示的:Retrieving the output of subprocess.call() subprocess.call() 的当前
我一直在尝试了解 subprocess.call 和 subprocess.run 之间的区别。我知道最后一个是 Python 3.5 上的新版本,两者都基于 subprocess.Popen,但我还
我无法得到它与 bash 相关或 python 子进程,但结果不同: >>> subprocess.Popen("echo $HOME", shell=True, stdout=subprocess.
我正在编写一个需要在 Linux 和 Windows 上运行并使用路径中存在的可执行文件(带参数)的程序。 (假设) 目前,我在使用 Subprocess.Call 和 Subprocess.Pope
当我的脚本有 .pyw扩展,函数 subprocess.Popen不起作用,但如果我使用 .py扩展,它的工作原理。其实扩展并不是那么重要,关键是我是否使用终端来运行脚本,如果我不使用它我有问题,否则
我是一名优秀的程序员,十分优秀!