Maven倉庫

Question

是否AWS EMR對EMR的Hadoop /星火/其他類似的

1. HDP [http://repo.hortonworks.com/content/repositories/releases/]
2. CDH [https://repository.cloudera.com/artifactory/cloudera-repos]

自己的Maven倉庫問題：

• 如果是這樣，它的網址是什麼？

• 如果不是這種情況，社區會建議如何構建一個在EMR實例上執行的spark jar？

在此先感謝。

Answer 1

我也找不到AWS的修補Hadoop代碼的官方Maven倉庫。但只要我明白，aws應用的補丁對本地使用來說不是必需的。

我推薦的是使用官方apache hadoop存儲庫http://mvnrepository.com/artifact/org.apache.hadoop與emr在其環境中使用的相同版本。

http://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/emr-hadoop.html

Answer 2

無，目前EMR沒有它的Hadoop發行版向公衆開放。