1
當org.apache.spark.sql.Dataset#persist()被調用時，spark是否實際緩存了Dataset？或者當某個終端操作（如count）將在Dataset上被調用時，它將被緩存。數據集＃持久（）終端操作？
A
回答
2
因爲Spark Dataset.persist中的所有緩存操作都是惰性的，並且只會標記給定的緩存對象，所以如果它被評估過。
與RDDs相比，主要區別在於評估難以推理。請參閱開發人員名單上的相關討論：Will .count() always trigger an evaluation of each row?
相關問題
- 1. 持久性終端輸出
- 2. 持久GPU功能/操作
- 3. 服務器端的持久數據
- 4. 數據集操作
- 5. 數據集操作
- 6. 持久性php數據集合
- 7. SignalR和Memcached的持久集團數據
- 8. OneToOne單向收集不持久數據
- 9. Java流與終端操作
- 10. linux終端文本操作
- 11. osx 10.7.5終端操作rmdir
- 12. 在持久化實體之前操作表單數據 - Symfony 2.6
- 13. 創建與數據操作使用NetBeans Java持久性
- 14. 使用拖放操作後更新MySQL中的持久數據
- 15. 操作系統更新後BlackBerry持久存儲數據丟失
- 16. 使用持久關聯創建非持久記錄的操作？
- 17. 如果數據庫最終依賴於操作系統，數據庫如何保證持久性？
- 18. 數據持久性
- 19. 持久性數據
- 20. 在NHibernate持久化刪除操作
- 21. 永久數據集
- 22. 持久數據的Web工作者
- 23. 使用ngstorage作爲持久數據
- 24. Windows工作流持久性數據庫？
- 25. 操作數據集列hadoop
- 26. 如何操作數據集
- 27. ASP.net操作數據集中的數據
- 28. 終止亞馬遜EC2 - 持久數據會發生什麼
- 29. 終極版存儲一般的數據，非持久
- 30. 持久的Firebase數據庫