Skip to main content
 首页 » 编程设计

python之任务 worker 持久变量

2025年04月02日13jirigala

有没有一种方法可以让 dask 拥有一个可以从一个任务检索到另一个任务的变量。我的意思是一个变量,我可以锁定在 worker 中,然后在我执行另一个任务时在同一个 worker 中检索。

请您参考如下方法:

worker 本身只是 Python 进程,因此您可以使用 globals() 进行一些技巧。

但是,发出值并在任务之间传递这些值可能更清洁。 Dask 保留重新运行功能并在不同机器上运行它们的权利,因此依赖于全局状态或特定于 worker 的状态很容易让您陷入困境。