gpt4 book ai didi

python - multiprocessing.Process(使用 spawn 方法): which objects are inherited?

转载 作者:太空狗 更新时间:2023-10-29 21:05:39 26 4
gpt4 key购买 nike

文档 (python 3.4) 解释说,使用 spawn,“子进程将仅继承运行进程对象的 run() 方法所需的那些资源”。

但是哪些对象是“必要的”?我阅读它的方式向我表明,可以从 run() 内部访问的所有对象都是“必需的”,包括作为 args 传递给 Process 的参数.__init__,以及存储在全局变量中的任何内容,以及在全局范围内定义的类、函数及其属性。但是,这是不正确的;以下代码确认存储在全局变量中的对象没有被继承:

# running under python 3.4 / Windows
# but behaves the same under Unix
import multiprocessing as mp

x = 0
class A:
y = 0

def f():
print(x) # 0
print(A.y) # 0

def g(x, A):
print(x) # 1
print(A.y) # 0; really, not even args are inherited?

def main():
global x
x = 1
A.y = 1
p = mp.Process(target = f)
p.start()
q = mp.Process(target = g, args = (x, A))
q.start()


if __name__=="__main__":
mp.set_start_method('spawn')
main()

是否有明确的规则说明哪些对象是继承的?

编辑:

确认:在 Ubuntu 上运行它会产生相同的输出。 (感谢@mata 澄清我忘记将 global x 添加到 main()。这个遗漏让我的示例变得困惑;如果我切换它也会影响结果'spawn' 到 Ubuntu 下的 'fork'。我现在将 global x 添加到上面的代码中。)

最佳答案

这与将类发送到派生进程时 pickle 的方式有关。一个类的 pickled 版本并不真正包含它的内部状态,而只包含模块和类的名称:

class A:
y = 0

pickle.dumps(A)
# b'\x80\x03c__main__\nA\nq\x00.'

这里没有关于y的信息,相当于类的引用。

当作为参数传递给 g 时,该类将在生成的进程中被解封,如果需要,它将导入其模块(此处为 __main__)并返回对类,因此在 main 函数中对其所做的更改不会影响它,因为 if __name__ == "__main__" block 不会在子进程中执行。 f直接使用其模块中的类,所以效果基本相同。

x 显示不同值的原因有点不同。您的 f 函数将从模块打印 global 变量 x。在你的 main() 函数中你有另一个 local 变量 x,所以在这里设置 x = 1 不会在两个进程中都不会影响模块级别 x。它作为参数传递给 g,因此在这种情况下,它的本地值将是 1。

关于python - multiprocessing.Process(使用 spawn 方法): which objects are inherited?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/29199004/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com