0
你怎麼確定 只有4地圖和2減少有 因爲當我使用1大實例 它有時會給我6地圖2減少 隨機沒有。 我試圖把mapred.map.tasks = 4 在額外的參數,而settingup工作 也didn`t工作我在AWS中只需要4個映射器和2個reducer,但這不會發生?
你怎麼確定 只有4地圖和2減少有 因爲當我使用1大實例 它有時會給我6地圖2減少 隨機沒有。 我試圖把mapred.map.tasks = 4 在額外的參數,而settingup工作 也didn`t工作我在AWS中只需要4個映射器和2個reducer,但這不會發生?
嘗試設置減速映射器的數量和引導作用。
elastic-mapreduce --create \
--name "cluster_name" \
--bootstrap-action s3://elasticmapreduce/bootstrap-actions/configure-hadoop --args -m,mapred.map.tasks=4,-m,mapred.reduce.tasks=2,-m,mapred.tasktracker.map.tasks.maximum=4,-m,mapred.tasktracker.reduce.tasks.maximum=2