構建用於Hadoop框架上的報告和分析的應用程序

Question

我有一個SAS應用程序，用於從Oracle提取數據並使用Base SAS和SAS宏生成報告。現在問題是我的數據庫日益龐大，從Oracle獲取數據需要更多時間，因此我的工作運行緩慢。

所以我希望我的應用程序能夠構建在Hadoop上進行報告和分析。有人可以建議我任何方法，我需要使用什麼工具。

Answer 1

簡短的回答是：這取決於。

卸載從Oracle數據我會建議你使用Sqoop（http://sqoop.apache.org/），它是專爲這個特定的使用情況，甚至可以做增量負載，可以卸載的數據

當數據創建蜂巢表卸載後，您可以使用Impala構建您所需的報告。 Impala本身可以與Hive表一起工作，所以唱歌非常簡單。當然，您必須將您的SAS代碼重寫爲一組可以在Impala上運行的SQL語句。

接下來，如果你需要的可視化工具，在它上面運行，你可以嘗試這樣的Tableau或任何其他工具，它能夠利用ODBC/JDBC來連接黑斑羚

最後，我認爲Hadoop的+ Sqoop + Impala將覆蓋您的需求。但我建議你也看看MPP數據庫，因爲使用SAS意味着你有相當結構化的數據，MPP數據庫將更適合這種情況。