使用YourKit分析Spark應用程序

我擁有Cloudera 5.10的羣集。對於剖析我正在與參數火花提交：使用YourKit分析Spark應用程序

--conf "spark.driver.extraJavaOptions= -agentpath:/root/yjp-2017.02/bin/linux-x86-64/libyjpagent.so=sampling" 
--conf "spark.executor.extraJavaOptions= -agentpath:/root/yjp-2017.02/bin/linux-x86-64/libyjpagent.so=sampling"

而且它僅適用於驅動程序的工作好。當我爲執行者使用此選項時，我得到了異常

Stack trace: ExitCodeException exitCode=1: 
     at org.apache.hadoop.util.Shell.runCommand(Shell.java:601) 
     at org.apache.hadoop.util.Shell.run(Shell.java:504) 
     at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:786) 
     at org.apache.hadoop.yarn.server.nodemanager.DefaultContainerExecutor.launchContainer(DefaultContainerExecutor.java:213) 
     at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:302) 
     at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:82) 
     at java.util.concurrent.FutureTask.run(FutureTask.java:266) 
     at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) 
     at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617) 
     at java.lang.Thread.run(Thread.java:748)

我找不到任何有用的日誌和我在每個節點上遇到的相同異常。同樣的，如果我'使用本手冊enter link description here

而且，如果我離開只是配置驅動程序，一切工作正常，我可以使用YourKit連接到驅動可以採取什麼問題嗎？

來源

2017-06-12 Cecchini Barnaba

固定。這是/ root文件夾的權限問題 –

可能是執行程序啓動32位JVM嗎？那麼應該指定32位YourKit代理的路徑？

來源

2017-06-26 15:55:58

使用YourKit分析Spark應用程序

回答

相關問題