gpt4 book ai didi

python - celery从不同计算机读取文件

转载 作者:太空宇宙 更新时间:2023-11-03 18:55:44 27 4
gpt4 key购买 nike

我有一个程序输出文件。我使用 celery 通过两台并行计算机输出文件,因此输出文件将分布在两台计算机上。我怎样才能编写一个程序从这两台计算机读取文件?

最佳答案

这个问题缺乏细节。

我想您需要分布式文件系统,您的两台计算机都可以使用该系统。有很多解决方案:MongoDB 中的 GridFS、Hadoop 中的 HDFS。您还可以尝试更简单的解决方案,例如 SSHFS。在这种情况下,您的一台服务器将连接到另一台服务器的文件系统。如果您不担心一致性,rsync可以克隆远程目录。

关于python - celery从不同计算机读取文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/17309279/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com