是否有connecto星火-SQL與SQLAlchemy的

Question

的方式是否有火花SQL和SQLAlchemy的 連接方式，我有一個使用SQLAlchemy的 我怎麼能使其使用火花-SQL，遺留代碼我可以讓SQLAlchemy的作爲翻譯層spark-sql？

Answer 1

是， 看看這個項目 https://github.com/dropbox/PyHive

有一些調整。你需要做的 幸運SQLAlchemy的是構建該

Answer 2

簡答：不！這與將PostgreSQL與Spark-SQL結合使用是一回事。 Spark-SQL有自己的SQL方言，並遵循more Hive style。您應該將您的sqlalchemy代碼轉換爲符合Spark-SQL。