我有下面的程序來計算日誌文件中的「錯誤」的計數。最後，它的值被打印在控制檯中。當紗線客戶端程序運行時，它將在控制檯中顯示累加器正確值509，但當它在紗線簇模式下運行時，不會顯示此值。如何以紗線叢集模式打印？ object ErrorLogsCount{
def main(args:Array[String]){
val sc = new SparkContext();
我在一個項目中有多個文件夾，每個文件夾都有自己的yarn.lock。當在Gitlab亞軍運行，通過紗線安裝所有節點模塊正在即使我使用yarn config set cache-folder很長一段時間： yarn config set cache-folder .yarn-cache
# For each folder with a yarn.lock file:
yarn install
我的基於mapreduce的hive sql在Yarn上運行，hadoop版本是2.7.2。我想要的，它限制映射器任務或減速器任務同時運行當一些配置單元sql是真的很大。我曾嘗試下面的參數，但實際上他們是不是我想要的： mapreduce.tasktracker.reduce.tasks.maximum: The maximum number of reduce tasks that will b