在ThriftServer中註冊臨時表

我是Spark新手，想了解如何（如果有的話）在Spark節點服務器中將數據框註冊爲臨時表。要澄清一下，這就是我想要做的事：在ThriftServer中註冊臨時表

到目前爲止，我還沒有成功 - Spark ThriftServer在Spark master上運行，但我無法實際註冊任何臨時表。

這可能嗎？我知道我可以使用HiveThriftServer2.startWithContext通過JDBC提供數據幀，但這需要應用程序永遠運行+它需要我啓動其他應用程序。

檢查[此鏈接]（https://stackoverflow.com/a/45037532/1592191）。在你的情況下，而不是火花外殼假定它爲火花作業（piont 1） – mrsrinivas

[給火花節儉服務器的倉庫目錄路徑]的可能重複（https://stackoverflow.com/questions/45032770/giving-spark-thrift -server-的路徑到倉庫目錄） – mrsrinivas

關鍵的想法是在Spark作業中註冊所有臨時表並最終從該作業啓動SparkThriftServer。它將保持您的工作運行，直到您終止節儉服務器。你也可以通過JDBC查詢SparkThriftServer的所有臨時表。 Here it is described with example

2017-09-12 12:47:01

回答