0
如何在Bluemix下爲Spark服務創建批處理作業。如何在Bluemix下爲Spark服務創建批處理作業
我需要在文本文件中處理十億條記錄,每條記錄需要通過Java API進行處理。我希望通過在集羣上分發工作來執行此操作。
如何在Bluemix下爲Spark服務創建批處理作業。如何在Bluemix下爲Spark服務創建批處理作業
我需要在文本文件中處理十億條記錄,每條記錄需要通過Java API進行處理。我希望通過在集羣上分發工作來執行此操作。
敬請期待,應該可以在測試期間在Bluemix Apache Spark服務上運行批處理作業。還沒有。
Randy,是否有可能提供一些更多的見解,我可以期待的服務的當前狀態,是否只有基於交互式火花外殼的腳本才能完成? – Gaurav
對不起Gaurav!你應該期望做批處理和交互。 –
感謝Randy的回覆,由於某種原因,我無法理解如何去批處理,我才知道最近Spark服務已經對GA做出了,可能我需要看看它,以防萬一能夠幫助我。 – Gaurav