通過Java使用Spark來連接和從Oracle獲取數據

Question

我想從Oracle檢索數據&將數據轉儲到Amazon S3 ...我想使用Apache Spark來完成。我也知道我可以使用簡單的Java編程來做同樣的事情......我應該選擇哪一個？這兩種方法各自的優點是什麼？

Answer 1

Apache spark對此是一個矯枉過正。

阿帕奇星火™是大規模數據處理的速度快，一般發動機

Apache的火花不進行數據遷移的目的建造的。你仍然可以用它來達到目的，但它是一種矯枉過正。

你可以編寫一個bash腳本或Java程序來做同樣的事情。

Answer 2

您可以使用此腳本：http://alexbuz.github.io/Oracle_To_S3_Data_Uploader/。 但它僅適用於Windows。