Skip to main content
 首页 » 编程设计

python之使用多个 CPU 进行 Scikit-learn 机器学习模型训练

2024年12月31日8softidea

我想通过使用高端 EC2 实例来减少模型的训练时间。因此,我尝试了具有 2 个 CPU 的 c5.18xlarge 实例,并使用参数 n_jobs=-1 运行了几个模型,但我注意到只使用了一个 CPU:

我能否以某种方式让 Scikit-learn 使用所有 CPU?

请您参考如下方法:

尝试添加:

import multiprocessing 
multiprocessing.set_start_method('forkserver') 

在代码的顶部,在运行或导入任何东西之前。这是 python 中多处理的一个众所周知的问题。