如何使用sqoop從MySQL數據庫導入到Datastax DSE Hive？

Question

我花了下午的時間試圖圍繞我如何利用dse sqoop從MySQL將表導入到Hive/Shark。就我而言，我並不是真的有興趣將表格導入Cassandra persé。蜂巢/鯊魚會做。

AFAIK，這應該是可能的給出dse sqoop import help給我選項來創建一個Hive表。我一直試圖執行一些非常類似於http://www.datastax.com/documentation/datastax_enterprise/4.5/datastax_enterprise/ana/anaSqpImport.html的事情，除非我似乎無法獲得Cassandra用戶名/密碼憑據才能工作。

這應該可能嗎？怎麼樣？我必須通過一個CQL表嗎？

我正在運行DSE 4.5。

Answer 1

聽起來你正在試圖做類似的事情在這個甲板滑47： http://www.slideshare.net/planetcassandra/escape-from-hadoop

戰略羅素採用有使用mysql的火花驅動程序，無需處理Sqoop。您必須將依賴項添加到您的spark類路徑才能使用。無需通過CQL表格。

然後您可以加入c *數據，將數據寫入c *等。