- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我这里有一个奇怪的问题。
我有一个 python 程序,它执行保存在单独的 .py 文件中的代码,这些代码被设计为依次执行,一个接一个。这些代码工作正常,但运行时间太长。我的计划是使用 multiprocessing.pool.map_async(function,arguments) 将 execfile() 作为函数,文件名作为参数,在 4 个处理器之间分割处理每个 .py 文件。
所以无论如何,当我运行代码时,绝对没有任何反应,甚至没有错误。
看看你是否可以帮助我,我在 SeqFile.runner(SeqFile.file) 中运行该文件。
class FileRunner:
def __init__(self, file):
self.file = file
def runner(self, file):
self.run = pool.map_async(execfile, file)
SeqFile = FileRunner("/Users/haysb/Dropbox/Stuart/Sample_proteins/Code/SVS_CodeParts/SequencePickler.py")
VolFile = FileRunner("/Users/haysb/Dropbox/Stuart/Sample_proteins/Code/SVS_CodeParts/VolumePickler.py")
CWFile = FileRunner("/Users/haysb/Dropbox/Stuart/Sample_proteins/Code/SVS_CodeParts/Combine_and_Write.py")
(SeqFile.runner(SeqFile.file))
最佳答案
您在这里遇到了几个问题 - 我猜您以前从未使用过多处理
。
您的问题之一是您触发了异步操作但从未等待它结束。如果您确实等待它结束,您将获得更多信息。例如,添加:
result = SeqFile.run.get()
这样做,您将看到子进程中引发的异常:您将 execfile
映射到绑定(bind)到 file
的字符串>,因此 execfile
一次只能看到一个字符。 execfile
当它尝试做的第一件事(实际上)是:
execfile("/")
apply_async()
会更有意义,或者 map_async()
传递您想要运行的所有文件的列表。
等等 - 这会变得乏味;-)
让我们去掉这里不相关的废话,并展示一个完整的可执行程序。我有三个文件 a.py
、b.py
和 c.py
。这是a.py
:
print "I'm A!"
另外两个是明显的变化。
这是我的整个驱动程序:
if __name__ == "__main__":
import multiprocessing as mp
files = ["a.py", "b.py", "c.py"]
pool = mp.Pool(2)
pool.imap_unordered(execfile, files)
pool.close()
pool.join()
这就是所需要的,并打印(一些排列):
I'm A!
I'm B!
I'm C!
imap_unordered()
将文件列表在工作进程之间拆分,并且不关心(“无序”)它们运行的顺序。这是最高效率的。请注意,我将工作进程的数量限制为 2 个,只是为了表明即使文件 (3) 多于工作进程 (2),它也能正常工作。
您可以让任何Pool
函数以类似方式工作。例如,如果您有;-)要使用map_async()
,请将imap_unordered()
调用替换为:
async = pool.map_async(execfile, files)
async.get()
或者:
asyncs = [pool.apply_async(execfile, (fn,)) for fn in files]
for a in asyncs:
a.get()
更清楚了吗?一开始就尽可能简单。
关于Python:非响应式 multiprocessing.pool.map_async() 函数,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19614210/
我刚刚更新了 Ruby,现在我在尝试启动 compass 时遇到以下错误: Encoding::CompatibilityError on line ["28"] of /usr/local/Cell
关闭。这个问题不符合Stack Overflow guidelines .它目前不接受答案。 我们不允许提问寻求书籍、工具、软件库等的推荐。您可以编辑问题,以便用事实和引用来回答。 关闭 6 年前。
关闭。这个问题需要debugging details .它目前不接受答案。 编辑问题以包含 desired behavior, a specific problem or error, and th
按照目前的情况,这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持,但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the
我正在尝试在我的 iOS 应用程序中开发可折叠/ Accordion 式的功能。这将是您可以在网站上找到的典型 FAQ 类型功能。我想点击标题,然后显示详细信息。 因为这是帮助部分,只有几个项目,我认
我正在尝试设计一个基于 REST 的 Web 服务来与我正在开发的农场动物管理系统进行交互。 为了详细说明问题,我收藏了动物 属于一个农场。每只动物都有自己的信息——例如姓名、身份证号、品种年龄等。因
我有 3 种不同的表单,其中复选框数量不同,每个部分基本上代表一个表单,因此当用户选择该部分中的复选框时,它会显示他们在该部分的总金额中 checkout 了多少 HTML
我有一份 32 页的 PDF 版家谱。与其将家谱全部放在一个非常大的 PDF 页面上(这是我想要的),不如将其格式化为一组 8 个单独的美国信纸大小的页面应该在整个宽度上缝合; 4 行这样就完成了树。
指SASS implementation for Java? : 在 Maven 目标编译包中自动编译 compass-style.org 样式表的最佳方法是什么? 我不想发送太多的自编译库,也不想通
鉴于以下 XAML... 我正在寻找一种绑定(bind) ComboBox、Button 和 Command 的方法,以便当 ComboBox 的值更改时,在 Command 上调用 CanExe
在玩具应用程序中,我有一个显示所有帖子标题的“帖子”模板。当您单击每个标题时,我不想直接进入“显示” View ,而是直接内联展开该帖子的其余内容。 我考虑过让 postRoute 重用 postsR
我需要一些使用 Twitter Bootstrap 或其他响应式框架的自定义 Swagger-UI 实现。需要在我的移动设备上使用这样的 UI 测试我的 API,但 swagger-ui 不能很好地扩
我正在做一个项目,我真的在尝试编写面向对象的 JavaScript 代码。我刚刚开始阅读Douglas Crockford's JavaScript: The Good Parts我很快开始意识到用
在 C# 中,我通过执行以下操作来加密文本数据(请注意我正在以 block ( block )的形式加密数据): public string EncryptData(string pu
我正在构建一个社交网站,该网站将向全世界公开 REST API (WCF WebAPI),以便任何开发人员都能够为该网站创建客户端应用程序、将其与其他服务集成等。 我想为 API 实现 Faceboo
我是一名优秀的程序员,十分优秀!