使用Sqoop將數據加載到HDFS

我正在尋找將數據移動到HDFS系統的方法，想知道Apache Sqoop是否可用於從外部REST服務中提取/提取數據？使用Sqoop將數據加載到HDFS

2014-09-30 RC_DS

Sqoop是被設計爲Hadoop和關係數據庫之間傳輸數據的一種工具。您可以使用Sqoop將關係數據庫管理系統（RDBMS）（如MySQL或Oracle）的數據導入Hadoop分佈式文件系統（HDFS），轉換Hadoop MapReduce中的數據，然後將數據導出回RDBMS。

因此它不支持從REST服務導入數據。

2014-11-05 14:35:23 FengWang

我最喜歡的方式，從REST服務提取數據：

捲曲的http：// | hdfs -put -/my/hdfs/directory

2014-11-06 00:59:13

回答