有lots用于线程/并行化 python 的不同模块。 Dispy和 pp/ParallelPython显得特别受欢迎。看起来这些都是为具有许多内核/处理器的单个界面(例如桌面)设计的。是否有一个模块适用于由队列系统运行的大规模并行架构(特别是:SLURM)?
请您参考如下方法:
用于科学/技术应用的大型计算集群上最常用的并行框架是 MPI . Python 包的名称是 MPI4py , 这是 SciPy 的一部分.
MPI 提供了一个高级 API,用于使用消息在网络上进行通信来创建并行软件;远程进程创建、数据分散/收集、缩减等。如果存在,所有实现都能够利用快速和低延迟的网络。它与所有集群管理器完全集成,包括 Slurm .
