2017-02-27 107 views
0

我正在嘗試使用計劃的lambda函數來定期啓動和拆卸EMR羣集。我想通過CloudFormation來做這件事,也許使用lambda啓動一個EMR集羣。我在網上找到的所有材料都使用CloudFormation來啓動lambda函數,但我想用其他方法。有人有一些想法,或可以指向我一些正確的資源?非常感謝你。使用Lambda啓動和關閉羣集

回答

1

我工作過一個類似的用例,我想根據s3put事件創建一個集羣,Hive查詢將數據加載回s3並拆除集羣。

  1. 創建lambda函數。您可以指定實例組,角色和應用程序等。
  2. 創建存儲桶並設置事件通知以將觸發器發送到lambda函數。 3.一旦在桶中創建了一個s3對象,就會創建一個EMR集羣。登錄到AWS EMR控制檯以檢查進度。

我有一個blog上述細節,如果你有興趣