Skip to main content
 首页 » 编程设计

python之带有 pip 安装的 Apache Spark 无法正常工作

2025年02月15日35zfyouxi

我正在尝试使用 Python 安装 Apache Spark,并在 7 月 11 日的版本中使用了 pip install python 命令。然而,虽然这成功安装并且我可以运行

from pyspark import SparkContext 

在 python shell 中,我无法通过运行访问 pyspark shell

pyspark 

或 Spark 提交,用

spark-submit. 

两者的错误都是“找不到指定的路径”。我在 Windows 上,怀疑我缺少 spark 的 JAR 文件。 pip 安装不应该解决这个问题吗?

请您参考如下方法:

pyspark和 spark-submit您的路径中缺少位置(应为 <spark install directory>\bin)。

您可以通过完全指定它们的位置、导航到它们的安装位置并运行 pyspark 来运行它们或将它们添加到您的系统路径。