0
在我的服務器每小時生成一個文件,通常是250到300 MB 我想下載這些文件並放在hadoop下。 如果有人有任何想法,請回復怎麼做。如何下載存儲在服務器中的文件並保存到hadoop
在我的服務器每小時生成一個文件,通常是250到300 MB 我想下載這些文件並放在hadoop下。 如果有人有任何想法,請回復怎麼做。如何下載存儲在服務器中的文件並保存到hadoop
Apache Hadoop附帶了強大且有用的一組命令行。看看:Hadoop FileSystem Shell。
特別地,copyFromLocal
和put
命令。使用常規Shell命令,如果需要,可以將Hadoop命令行與SSH結合使用。
+1將命令放入cron作業(如果cron在您的環境中可用)(Windows的任務計劃程序),以便hadoop命令以您需要的時間間隔運行。 – 2014-11-05 17:10:26