Skip to main content
 首页 » 编程设计

python之如何用 Python joblib 填充全局变量

2025年01月19日10cmt

我想并行运行一些代码并用 Python 中的结果填充一个全局变量。我已经编写了一个示例代码来检查 joblib 的行为,但我不知道如何取回结果。示例代码为:

import numpy as np 
import multiprocessing 
from joblib import Parallel, delayed 
 
global_var = np.zeros(10) 
 
def populate(idx): 
   print('I am core',idx,'\') 
   global_var[idx] = idx 
 
num_cores = multiprocessing.cpu_count() 
Parallel(n_jobs=num_cores)(delayed(populate)(idx) for idx in range(len(global_var))` 

如果我在运行任何其他东西之前检查 global_var,它是一个零数组;当我运行代码时,数组中充满了“无”值。

如何从函数返回值并填充全局数组?

非常感谢您! =)

请您参考如下方法:

我知道这是一个旧话题,但其他人可能会对这是可能的感兴趣!

将 require='sharedmem' 添加到并行初始化。 你可以阅读this link有关并行化循环的更多示例。


所以在你的例子中:

import numpy as np 
import multiprocessing 
from joblib import Parallel, delayed 
 
global_var = np.zeros(10) 
 
def populate(idx): 
   print('I am core',idx,'\'') 
   global_var[idx] = idx 
 
num_cores = multiprocessing.cpu_count() 
Parallel(n_jobs=num_cores, require='sharedmem')(delayed(populate)(idx) for idx in range(len(global_var))) 
 
print(global_var) 

[0. 1. 2. 3. 4. 5. 6. 7. 8. 9.]