1
我需要分割由另一個豬腳本生成的輸出部分文件，並生成每個包含1000行的組。這些組將被髮布到web服務以供進一步處理。數據之間沒有關係，所以我無法將數據分組到特定字段。豬：將大文件分割成多個小文件
我該如何在豬身上做到這一點？
A
回答
4
如果拆分與數據無關，爲什麼甚至使用Pig或MapReduce呢？作爲替代方案，如果我沒有誤解，則可以使用標準拆分程序拆分數據。例如：
cat part-* | split -d -l 1000 - result-
相關問題
- 1. 將一個文件分割成多個小文件的優化
- 2. 將一個巨大的excel文件分割成多個文件
- 3. 動態地將文件分割成多個較小的文件
- 4. 如何將大文本文件分割成更小的文件？
- 5. 將tmux.conf分割成多個文件？
- 6. BASH shell腳本來一個大的XML文件分割成多個小文件
- 7. 將配置文件切割成大小
- 8. PHP腳本將大文本文件分割爲多個文件
- 9. 分割文件分割成多個文件/陣列 - perl的
- 10. 分割文件分割成多個文件
- 11. 將一個大的javascript文件分割成幾個較小的文件
- 12. 將文本文件分割成多個文件
- 13. React Native：如何將一個文件分割成多個文件
- 14. 如何將多個文件分割成一個gb文件夾？
- 15. 根據文件大小將一個PDF文件分割爲多個
- 16. 如何將某個特定點的大文件分割成更小的文件？
- 17. Shell命令將大文件分割成10個較小的文件
- 18. Python將大文件分割爲多個文件
- 19. 如何將大文件分割爲多個文件？
- 20. 將龐大的供應商分割成多個文件
- 21. 將大文件分割爲小文件，條件爲
- 22. cmake文件結構，如何將CMakeLists.txt分割成多個文件？
- 23. 將大文本文檔分割爲多個較小的文本文件
- 24. 將大文件讀取和分割爲多個小文件的最佳方法
- 25. 如何在GO lang中將大型csv文件分割成多個文件？
- 26. 如何將大型MySQL備份文件分割成多個文件？
- 27. 分裂大文件分成小文件
- 28. JSON分割成多個文件
- 29. 將音頻文件分割成任意大小的片段
- 30. 將大型XML文件分割成小塊