sqoop

12熱度

1回答

我已經安裝了hadoop和hbase cdh3u2。在hadoop我有一個文件在路徑/home/file.txt。它有像這樣的數據 one,1 two,2 three,3 我想將這個文件導入hbase。在那裏，第一個字段應該被解析爲String，第二個字段被解析爲整數，然後它應該被推入到hbase中。幫我在dvance做到這一點 aThanks ....

0熱度

1回答

將HBase數據導出到RDBMS

我使用HBase存儲數據，但後來滿足我的要求我想將數據從HBase導出到RDBM（如mysql或postgres）。我知道我們有Sqoop作爲選項，但它從MySQL導入並將其放入HBase中，並將保存的HDFS數據導出到RDBMS，並且無法直接從HBase導入數據。是否有任何工具將數據從HBase表導出到RDBMS表？

1熱度

2回答

我在哪裏可以在ubuntu上安裝jdbc驅動程序？

我想在Ubuntu上安裝MS SQL JDBC驅動程序，以便與sqoop for Hadoop一起使用。我對java和linux完全陌生，所以我不確定在哪裏提取所有內容。

0熱度

3回答

Sqoop命令--hive-import失敗

我嘗試從mysql導入數據庫到Hive with Hadoop，並自動創建表並使用Sqoop中的「--hive-import」命令加載數據。我使用下面的命令，當我執行此命令錯誤發生這樣的 8/11 23:02:49 INFO hive.HiveImport: Exception in thread "main" java.lang.NoSuchMethodError: org.apache.ha

0熱度

2回答

使用Sqoop創建表時出錯

我想使用「sqoop create-hive-table」在Hive中創建表模式。我的數據庫是Oracle數據庫10g企業版10.2.0.4.0，我使用sqoop-1.2.0-cdh3u0和hive-0.7.0-cdh3u0。之後在Hive表上加載的數據已經存在於HDFS上，我寧願讓表元數據由sqoop & hive自動創建，而不是手動創建它，然後加載數據。這裏是我執行命令： $ sqoop c

1熱度

7回答

sqoop進口完成，但蜂巢節目表不能見表

安裝Hadoop的，蜂巢（CDH版本）之後，我執行 ./sqoop import -connect jdbc:mysql://10.164.11.204/server -username root -password password -table user -hive-import --hive-home /opt/hive/ 一切順利的罰款，但是當我進入蜂巢命令行和執行show表，有什麼也

0熱度

1回答

如何使用Hadoop，Hive和Sqoop從MS SQL Server中檢索和分析數據？

我想分析數據庫中的數據（MS SQL Server）。那麼，如何在Sqoop/Hive的幫助下將數據帶入HDFS？ Hive/Sqoop有可能嗎？請給我建議我們該怎麼做。謝謝。

2熱度

2回答

如何使HDFS上的平面文件與大型數據庫表保持同步？

保持HDFS平面文件與可能有行更新的大型數據庫表同步的最佳方式是什麼？像sqoop這樣的工具看起來很有用，因爲它們允許從表中增加新行的提取，但是我看不到處理行更新的簡單方法。我們可以用什麼技術以有效的方式處理行更新？每晚傾倒整個桌子是我們寧願避免的。

7熱度

1回答

在Hive中導入表格後顯示錯誤的計數

我從MS SQL Server的Hive中導入了大約10個表格附近。但是，當我嘗試交叉檢查Hive中的記錄時，我在運行查詢（從tblName選擇count（*）時發現了更多記錄）。然後我放棄了那張表，然後再將它導入到Hive中。我在控制檯日誌中觀察到（檢索到203條記錄）。然後我再次嘗試（從tblName選擇計數（*）;），我得到了298計數。我不明白這是爲什麼發生這種情況。查詢中有任何錯