1
A
回答
2
您可以隨時使用Spark
和Java/scala
做Remote Debugging
。如果你想檢查與dataset
與localmode
然後你可以使用步調試器。看看Java Debugger
以及它是如何工作的。
,如果你想使用Spark
具體調試在Remotemode
然後檢查該鏈接已與循序漸進的過程非常好的例子。
爲了調試驅動,你可以添加以下到您命令。然後將遠程調試器設置爲連接到您啓動驅動程序的節點。
--driver-java-options -agentlib:jdwp=transport=dt_socket,server=y,suspend=y,address=5005
您可以根據自己的需要定製port
。 在這種情況下,請在偵聽模式下啓動您的調試器,然後啓動您的Spark程序並等待執行程序附加到您的調試器。將執行程序的數量設置爲1或多個執行程序都將嘗試連接到您的debugger
,這可能會導致問題,這一點很重要。檢查上面的例子獲取更多細節。
如果您正在使用jetbrains那麼你可以用這個例子中,你要調試手段Spark remote debugging
+1
感謝Indrajit,** - driver-java-options -agentlib:jdwp = transport = dt_socket,server = y,suspend = y,addr ess = 5005 **爲我工作。 – Vawani
相關問題
- 1. eclipse遠程調試
- 2. 遠程調試和eclipse
- 3. Glassfish 3.1遠程調試Eclipse
- 4. 從Eclipse遠程調試Bluemix
- 5. 使用Eclipse遠程調試
- 6. Eclipse/Intellij遠程調試
- 7. Eclipse遠程調試失敗
- 8. Eclipse的遠程調試
- 9. eclipse調試遠程web應用程序
- 10. 在eclipse中的遠程調試問題
- 11. Eclipse和GlassFish:遠程部署和調試
- 12. 與Maven的Tomcat遠程調試和eclipse
- 13. 在eclipse中遠程調試python項目
- 14. 從eclipse調試遠程野蠻實例
- 15. Eclipse遠程調試預啓動腳本?
- 16. 使用Eclipse進行遠程C調試
- 17. Eclipse遠程調試 - 未找到源
- 18. 在eclipse中遠程調試tomcat
- 19. xlwings - 在pydev eclipse中遠程調試udf
- 20. 在eclipse中遠程調試Hadoop
- 21. PHP,Eclipse中,遠程調試,CentOS的,57%
- 22. 從Eclipse Indigo遠程調試JBoss AS 7.1
- 23. eclipse遠程調試超時問題
- 24. 遠程調試使用Eclipse的PHP
- 25. Eclipse使用jboss遠程調試
- 26. Eclipse的PDT和XDebug遠程調試
- 27. 玩激活器調試終止試圖從eclipse遠程調試
- 28. 遠程調試Eclipse:無法連接到遠程VM
- 29. 使用Eclipse遠程調試「eclipse RCP應用程序」
- 30. 從Eclipse + Javascript調試遠程Tomcat服務器上的JSP調試
?你想一步步檢查流程嗎? –
我想用eclipse做一個遠程DEBUG – Vawani