个人中心
文章发布
退出
作者热门文章
- mongodb - 在 MongoDB mapreduce 中，如何展平值对象？
- javascript - 对象传播与 Object.assign
- html - 输入类型 ="submit"Vs 按钮标签它们可以互换吗？
- sql - 使用 MongoDB 而不是 MS SQL Server 的优缺点
24
4
我想并行化我的 Python 程序，以便它可以在运行它的机器上使用多个处理器。我的并行化非常简单，因为程序的所有并行“线程”都是独立的，并将它们的输出写入单独的文件。我不需要线程来交换信息，但我必须知道线程何时完成，因为我的管道的某些步骤取决于它们的输出。
可移植性很重要，因为我希望它可以在 Mac、Linux 和 Windows 上的任何 Python 版本上运行。鉴于这些限制，哪个是最适合实现这一点的 Python 模块？我试图在线程、子进程和多处理之间做出决定，它们似乎都提供了相关的功能。
对此有何想法？我想要最简单的可移植解决方案。
最佳答案
multiprocessing是一种很棒的瑞士军刀式模块。它比线程更通用，因为您甚至可以执行远程计算。因此，这是我建议您使用的模块。subprocess模块还允许您启动多个进程，但我发现它不如新的多处理模块方便使用。
线程是出了名的微妙，并且，对于 CPython，您通常仅限于一个核心和它们(尽管如其中一条评论所述，全局解释器锁 (GIL) 可以在从 Python 代码调用的 C 代码中释放) .
我相信您引用的三个模块的大部分功能都可以以独立于平台的方式使用。在便携性方面，请注意 multiprocessing自 Python 2.6 以来才成为标准(不过，确实存在某些旧版 Python 的版本)。但它是一个很棒的模块!
关于python - 在 Python 中决定子进程、多处理和线程？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/2629680/
24
4
0
这是一道函数依赖题。 我知道当 x->yz 然后 x->y 和 x->z 时。但是上面的依赖关系可能吗？ 最佳答案 If xy determines z can x determine z and y
我有一个奇怪的问题。 Line 61: $this->_currentRoute = Default_Model_Routes::getInstance()->getCurrentRoute(); .
我正在开发一种工具来比较两个波形文件的波形相似性。例如，我有一个持续时间为 1 分钟的波形文件，我使用第一个波形文件制作了另一个波形文件，但每 5 秒生成一次数据，间隔为 5 秒至 0。 现在我的软件
我遇到了一个奇怪的问题，尽管我打赌有一个巧妙的方法可以解决它。 情况是我有一个具有三列排序状态的表:完全未排序，在这种情况下我不希望出现任何图标，按升序排序，在这种情况下我想要一个向上箭头，以及按降序
Java 语言规范提供了criteria用于确定(格式良好的)执行是否满足“Java 内存模型的因果关系要求”。让我们假设执行是有限的。我试图了解是否存在多项式时间算法来证明或反驳这种情况。 真的，我
Java 语言规范提供了criteria用于确定(格式良好的)执行是否满足“Java 内存模型的因果关系要求”。让我们假设执行是有限的。我试图了解是否存在多项式时间算法来证明或反驳这种情况。 真的，我
我正在编写一个简单的Bank类，其中包含Account。我希望人员能够开设一个新的受密码保护的银行帐户，并从其帐户中提取和存入资金。账户设在银行内。银行和帐户类应提供哪些服务？ 假设 p 已在银行 b
我的标题概括了这一点。我有一个将要开发的简单业务线应用程序，并且很好奇如何确定我应该针对哪个 .NET 版本。支持 Win XP SP3 会很好，但不是必需的。它将用于索引多页 tiff，因此导入一批
已锁定。这个问题及其答案是locked因为这个问题是题外话，但却具有历史意义。目前不接受新的答案或互动。 你是否真的“尝试过”(意味着在其中编程，而不仅仅是阅读有关它的文章)Erlang并决定在项目中
我正在尝试使用 ExceptionFilterAttribute 为 Web Api 实现异常处理。我已经继承了ExceptionFilterAttribute 类并覆盖了onException 方法
前一段时间在一次编程比赛中我遇到了一个令人费解的问题，此后一直困扰着我。虽然我没有逐字记住，但我会尽力重现: Jack starts at 0 on the number line and jumps
我有什么: 我有一个主要内容区域，后面跟着两个旁白: #primary,#secondary,#tertiary{float:left; width:33%;} Primary
我无法正确操作键盘。 整个 View 充满了文本字段。 当我使用通知将 View 向上移动时，上方的文本框不再可见: override func viewDidLoad() { super.v
已结束。此问题正在寻求书籍、工具、软件库等的推荐。它不满足Stack Overflow guidelines 。目前不接受答案。 我们不允许提出寻求书籍、工具、软件库等推荐的问题。您可以编辑问题，以便
我在尝试获取父对象来过滤子事件时遇到问题。 在下面的示例中，我在旋转框上设置了一个事件过滤器。事件过滤器检测旋转框上的鼠标按下事件。然后，我希望父对象根据某些标准接受或忽略该事件。 问题是它似乎接受了
我使用从 std::system_error 继承的类进行错误处理，我想控制调用 what() 时返回的内容。原因:标准(C++11 和 C++1y CD 草案 - N3690，下面的 § 引用是后者
我正在用 Swift 构建一个 iOS 应用程序，它的起始页有 6 个按钮。这些按钮中的每一个都将连接到一个 TableView Controller ，其数据由 NSFetchedResultsCo
我想构建这样的东西 数据存储| mycode.py | RESTful API | mywebapp.py(Django 或 Tornado) 我检查了 Django 的 Piston，但似乎这样我就
究竟如何更改 RichTextBox 中的字体？ 环顾四周给了我似乎不再有效的旧答案。我认为这就像执行 richtextbox1.Font = Font.Bold; 或类似操作一样简单。原来不是，所以
关闭。这个问题需要更多focused .它目前不接受答案。 想改进这个问题吗？ 更新问题，使其只关注一个问题 editing this post . 关闭 7 年前。 Improve this qu
我是一名优秀的程序员,十分优秀！