Skip to main content
 首页 » 编程设计

python之在开发 Spark 应用程序时使用多种语言

2025年04月02日38虾米姐

<分区>

我正在和另一个人一起做一个项目。我的项目部分涉及使用 Spark 的机器学习进行分析,而我的队友正在使用 Spark Streaming 将数据从源管道传输到程序,再输出到界面。

我打算使用 Scala,因为它对 Spark 的支持最好。但是,我的队友没有任何 Scala 经验,可能更喜欢使用 Python。

鉴于我们的程序部分正在做两件不同的事情,让他的 Python 脚本调用我的 Scala 可执行文件对我们来说是个好主意吗?或者使用不同的语言会在以后引起并发症吗?