我想并行运行一些代码并用 Python 中的结果填充一个全局变量。我已经编写了一个示例代码来检查 joblib 的行为,但我不知道如何取回结果。示例代码为:
import numpy as np
import multiprocessing
from joblib import Parallel, delayed
global_var = np.zeros(10)
def populate(idx):
print('I am core',idx,'\')
global_var[idx] = idx
num_cores = multiprocessing.cpu_count()
Parallel(n_jobs=num_cores)(delayed(populate)(idx) for idx in range(len(global_var))`
如果我在运行任何其他东西之前检查 global_var,它是一个零数组;当我运行代码时,数组中充满了“无”值。
如何从函数返回值并填充全局数组?
非常感谢您! =)
请您参考如下方法:
我知道这是一个旧话题,但其他人可能会对这是可能的感兴趣!
将 require='sharedmem' 添加到并行初始化。 你可以阅读this link有关并行化循环的更多示例。
所以在你的例子中:
import numpy as np
import multiprocessing
from joblib import Parallel, delayed
global_var = np.zeros(10)
def populate(idx):
print('I am core',idx,'\'')
global_var[idx] = idx
num_cores = multiprocessing.cpu_count()
Parallel(n_jobs=num_cores, require='sharedmem')(delayed(populate)(idx) for idx in range(len(global_var)))
print(global_var)
[0. 1. 2. 3. 4. 5. 6. 7. 8. 9.]
