我有一個http端點,根據請求進入這個端點,我需要創建一個巨大的數據庫(超過百萬條記錄)轉儲並生成一個單獨的xml文件。我打算寫一個組件,它將用分頁查詢,然後寫入文件?我是新來的騾子。我可以將組件中的數據流式傳輸到文件連接器中嗎?如果是的話該怎麼辦?如何使用mule將大數據從數據庫導出到文件?
2
A
回答
1
一個Http端點將默認流式傳輸,除非它是匿名發佈。如果您使用全部處理器,則可以執行這兩項操作。對於XML,您可以使用數據映射器(啓用流),爲JDBC,你可以只發送有效載荷的JDBC出站,它會做批量插入如果有效載荷是類型列表的
0
通常對於巨大的數據集批量操作有Mule中的批量模塊。 它批量處理消息,並且在批量處理大量數據或數據庫操作時非常有用。你可以考慮使用批量作業
ref: - https://developer.mulesoft.com/docs/display/current/Batch+Processing
相關問題
- 1. 使用php將數據從數據庫導出到csv文件
- 2. 如何將數據從csv文件導出到mysql數據庫?
- 3. 如何使用linq將數據從數據庫導出到文本文件
- 4. 如何將數據庫結構從數據庫導出到遷移文件中?
- 5. 如何將數據從數據庫導出到xml根據XSD
- 6. java-如何將數據從java數據庫導出到文本文件
- 7. 如何將大型數據從sql server導出到excel文件
- 8. 將MySql數據庫導出到文件
- 9. 從Oracle數據庫導出大數據
- 10. 如何將iPhone的數據庫文件從iPhone導出到MAC?
- 11. 如何將數據從Hadoop導出到MySQL /任何數據庫?
- 12. 使用ClosedXML將數據從excel導出到數據庫表
- 13. Wordpress使用$ wpdb將數據從數據庫導出到csv
- 14. 如何將數據從我的數據庫導出到csv文件?
- 15. 如何將數據從SQL數據庫導出到MS Excel中
- 16. 如何導入從文本文件數據到MySQL數據庫
- 17. 如何將大數據導出到Excel
- 18. 如何從硬盤導出MySQL數據庫(數據文件夾)?
- 19. 如何從excel文件導出數據並導入到sql數據庫?
- 20. 如何將數據從數據框導出到文件數據塊
- 21. 如何使用spring MVC將數據從數據庫導出到excel表單?
- 22. 如何將數據庫的備份導出到文本文件
- 23. 從數據庫導出數據到HTML?
- 24. 如何將數據從CSV文件導入數據庫
- 25. 從文件到數據庫使用java的巨大數據?
- 26. 使用java從JSON文件導入數據到MySQL數據庫
- 27. 將整個數據庫數據(db2)導出到csv文件
- 28. 將數據庫中的數據導出到XML文件
- 29. 將數據導出到sqlite3數據庫文件
- 30. 將大Csv文件導入數據庫