Skip to main content
 首页 » 编程设计

python之是否有任何 python 或 scala 工具来连接 spark/shark

2025年05月04日29daizhj

我想用python或者scala来连接shark服务器。但是我没有找到任何工具来做到这一点。 是否有任何库(python 或 scala/java)。 感谢先进。

请您参考如下方法:

如果您想使用 Shark 运行 SQL 查询,Shark 的 sharkserver行为类似于常规的 Hive Thrift 服务器,因此您应该能够重用现有的 Python 方法来连接到 Hive,例如

Shark Server 还支持 Hive 的 JDBC interface ,因此您可以使用它从 Scala 或 Java 运行查询;只需使用 Shark 服务器的地址代替 Hive 服务器地址即可。