AWS EMR中的強制減速器

Question

如何確保EMR流式作業中只有減速器？當我創建新的Jobflow時，是否有任何方法可以從Web前端執行此操作？

Answer 1

您可以使用--arg標誌在引導操作中配置Hadoop。具體到您的問題，您可以將mapred.tasktracker.reduce.tasks.maximum設置爲1.

elastic-mapreduce --create --alive \ 
     --name "Configure Jobflow" \ 
     --bootstrap-actions s3://elasticmapreduce/bootstrap-actions/configure-hadoop 
     --arg mapred.tasktracker.reduce.tasks.maximum=2