python - 并行计算

Question

我有一个二维表(矩阵)我需要独立于其他矩阵处理该矩阵中的每一行。每一行的过程都是耗时的。我想在我们大学使用并行计算资源(加拿大网格什么的)

我可以就如何开始提供一些建议吗？我以前从未使用过并行计算。

谢谢:)

Answer 1

从这里开始:http://docs.python.org/library/multiprocessing.html

请务必阅读:http://docs.python.org/library/multiprocessing.html#examples

这可能会有帮助:http://www.slideshare.net/pvergain/multiprocessing-with-python-presentation .

虽然出色，但它包括线程和多处理，尽管多处理通常远远优于尝试多线程。

对于网格计算，多线程基本上没有用。

此外，您可能还想阅读 celery .