-2
我有一個POJO值的RDD。我需要遍歷RDD的值。但由於數據量巨大，我不想使用收集。在不使用collect的情況下在apache spark中迭代RDD
是否有任何替代方法來迭代RDD值而不使用collect。
A
回答
0
相關問題
- 1. Spark迭代RDD按鍵分組
- 2. 在不使用迭代器的情況下過濾列表
- 3. 在不使用遞歸的情況下迭代父節點PHP
- 4. Apache Spark Rdd持續存在
- 5. 迭代代碼與長沿襲RDD在Apache Spark中導致stackoverflow錯誤
- 6. 在Spark中，如何在沒有RDD的情況下在Hadoop上編寫文件？
- 7. 在Apache Spark中迭代一個元組
- 8. 如何在不使用迭代器的情況下在Golang中循環？
- 9. 在不使用FindFirstFile的情況下在目錄中迭代文件
- 10. 在不使用迭代的情況下在Python中查找單元格
- 11. Apache Spark RDD拆分「|」
- 12. 在apache-spark RDD中處理多個'行'
- 13. 在Apache Spark中添加RDD值（總和）
- 14. RDD collect（）失敗
- 15. 如何在不知道對象是否可迭代的情況下迭代
- 16. 在不使用Spring的情況下在Web應用程序中使用Apache Camel？
- 17. Spark：在每次迭代中缺少RDD條目
- 18. 在不使用VB代碼的情況下在Excel中排序
- 19. 如何在不使用指針或引用的情況下迭代二叉樹？
- 20. Apache Spark RDD不同 - 奇怪的行爲
- 21. 在應用程序崩潰的情況下使用RDD.checkpoint恢復rdd
- 22. 如何在不使用exec的情況下在每次迭代中對for循環使用不同的函數？
- 23. 如何在不使用迭代器或集的情況下遍歷映射？
- 24. Apache Spark RDD工作流程
- 25. Apache Spark RDD值查找
- 26. 比較RDD對象-Apache Spark
- 27. Apache Spark DataFrame無RDD分區
- 28. 是Apache Spark中的CPU使用情況嗎？
- 29. async.each/forEachOf在不調用回調的情況下進入下一個迭代
- 30. Apache Spark：從Spark Cluster讀取RDD
什麼是你想實現什麼？什麼是最終目標？大多數RDD操作以某種方式「迭代」RDD。最基本的是'map'，它爲每個元素應用一個函數，並返回一個帶有變換元素的新RDD。 – puhlen
如果您嘗試將POJO的RDD保存在持久性存儲中，那麼您也可以使用'map'功能。在這種情況下，您不必收集所有數據。但是，如果你能告訴你想要達到的目標會更好。 – himanshuIIITian