2
我想使用Cloudera Manager在我的CDH 5.2.0羣集上啓動一個YARN NodeManager。在所有系統中的其他活動節點開始精細與Cloudera的管理器配置,但一個節點拒絕啓動,並拋出啓動時此異常:爲什麼啓動YARN NodeManager會拋出KosmosFileSystem FileSystem異常?
2015-01-09 04:12:17,619 ERROR org.apache.hadoop.yarn.server.nodemanager.NodeManager: Error starting NodeManager
java.lang.UnsupportedOperationException: Not implemented by the KosmosFileSystem FileSystem implementation
at org.apache.hadoop.fs.FileSystem.getScheme(FileSystem.java:216)
at org.apache.hadoop.fs.FileSystem.loadFileSystems(FileSystem.java:2564)
at org.apache.hadoop.fs.FileSystem.getFileSystemClass(FileSystem.java:2574)
at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:2591)
at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:91)
at org.apache.hadoop.fs.FileSystem$Cache.getInternal(FileSystem.java:2630)
at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:2612)
at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:370)
at org.apache.hadoop.fs.FileSystem.getLocal(FileSystem.java:341)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.initAndStartRecoveryStore(NodeManager.java:140)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.serviceInit(NodeManager.java:190)
at org.apache.hadoop.service.AbstractService.init(AbstractService.java:163)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.initAndStartNodeManager(NodeManager.java:445)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.main(NodeManager.java:492)
這沒有任何意義,我在所有:爲什麼要嘗試初始化這個聞所未聞的文件系統,更不用說在啓動時對其執行操作?它看起來像是在NodeManager恢復期間(initAndStartRecoveryStore
),所以我試圖刪除該節點上的yarn.nodemanager.recovery.dir
,以查看它是否會有所作爲,但事實並非如此。
感謝您給我的任何幫助!
我不認爲這就是我的問題來實現。在任何作業被它接受之前,NodeManager啓動期間會發生這個問題,更不用說MapReduce 1作業了,我沒有在YARN上運行:)感謝您的鏈接! – hornairs