我該怎麼做在hadoop中放置地圖？

我想在hadoop中做Map放置。這意味着我想選擇在哪臺機器上處理哪部分數據？我怎麼能做到這一點？由於我該怎麼做在hadoop中放置地圖？

2017-01-03 saeednasehi

有你看着[FairScheduler]（https://hadoop.apache.org/docs/r2.7.3/hadoop-yarn/hadoop-yarn-site /FairScheduler.html#Automatically_placing_applications_in_queues）？您可以爲每種數據類型創建小應用程序，並通過FairScheduler創建隊列來處理這些應用程序。同時看看[hazelcast]（https://hazelcast.org/） –

你可以嘗試使用節點標籤： https://hadoop.apache.org/docs/r2.7.3/hadoop-yarn/hadoop-yarn-site/NodeLabel.html

來源

2017-01-03 08:58:24 facha

謝謝，但我認爲這不能幫助我，因爲我想做地圖放置。這意味着我希望例如機器1上的第一個64 MB被預裝，機器3上的第二個64 MB被處理，機器2上的第三個64 MB被處理。 – saeednasehi

我該怎麼做在hadoop中放置地圖？

回答

相關問題