如何在沒有Amazon GUI的情況下在Elastic MapReduce上自動運行豬批處理作業？

Question

我在.pig文件中有一些豬批處理作業，我希望每小時左右自動運行一次EMR。我找到了一個教程來做這個here，但是這需要使用亞馬遜的GUI來完成我設置的每一項工作，我真的不想這麼做。使用Whirr有沒有一種好方法？或者Ruby Elastic-mapreduce客戶端？我有我的所有文件在S3中，以及我需要使用的功能的幾個豬罐子。

Answer 1

雖然我不知道怎麼跟你提到的工具來運行腳本豬，我知道的兩種可能的方式：

1. 在本地運行的文件：您可以使用cron
2. 要運行的文件在集羣上：你可以使用OOZIE

也就是說，大多數帶有GUI的工具都可以通過命令行進行控制。 （儘管如果您有可用的GUI，設置可能更容易）。