我想將df保存爲分區拼塊,因爲記錄插入記錄需要時間。任何人都可以幫助我如何保存它並指向配置單元表。保存分區拼塊
Q
保存分區拼塊
0
A
回答
0
df.write.parquet("/parquet/file/path")
然後,您可以創建指向鑲木地板文件位置的Hive external table
。
+0
實際上,它不斷地獲取數據,我將使用動態分區,而不是直接插入我想要保存的數據,因爲拼花地板被一列分區。 –
+0
@HEMANTHKUMAR:你的意思是由一列分隔的木地板?你的意思是Hive表分區? – Shankar
+0
是的,我已經劃分了配置單元表 –
相關問題
- 1. 分區拼花文件
- 2. 保存到鑲子分區
- 3. 保存照片拼貼
- 4. 誰保留區塊?
- 5. 創建文本表分區表拼花
- 6. 不區分大小寫拼寫檢查?
- 7. 保存到分區後刷新集合
- 8. 將mongodb保存到不同的分區
- 9. 激活摘要不保存到分區
- 10. Plinq的範圍分區與塊分區?
- 11. Spark Redshift保存爲s3拼圖
- 12. Datapicker保存選區
- 13. 區分模塊和包
- 14. 模塊算術 - 分區
- 15. 分區內核模塊
- 16. JSR 352分區塊處理
- 17. 如何區分保存的細分和替代?
- 18. 星火1.6負載特定的分區在數據幀保存分區字段
- 19. 在區塊鏈中存儲
- 20. 如何區分CRM 2011中的手動保存和編程保存JScript
- 21. CakePHP的提交圖像類型區分的保存,打印和保存
- 22. 區分保存和自動保存Microsoft Excel中的事件添加
- 23. 代碼::塊不保存工作區項目結構
- 24. 保存分頁
- 25. 區分內存.intel_syntax
- 26. TrustZone內存分區
- 27. 分區ASP.NET緩存
- 28. 彩色滑塊拼圖
- 29. 滑塊拼圖問題
- 30. 最後一塊拼圖
Actualy我一直收到數據增量,我將使用動態分區,而不是插入我想直接保存的數據,因爲parquet被一列分區。 –