0
我正在讀取來自Kafka的數據並沉入HDFS。 Flume有什麼方法可以壓縮數據並存儲在HDFS中。 （數據未在卡夫卡壓縮）在Apache Flume中壓縮數據
A
回答
0
嘗試在水槽配置設置這兩個參數：
hdfs.codeC= one of following -> gzip, bzip2, lzo, lzop, snappy hdfs.fileType=CompressedStream
更多信息可在flume user guide
可用相關問題
- 1. Apache Hadoop：將壓縮數據插入HDFS
- 2. 使用Flume壓縮文件攝取
- 3. 在Firebase中壓縮數據
- 4. 在Erlang中解壓壓縮的數據
- 5. 壓縮數據
- 6. 壓縮數據
- 7. 數據壓縮
- 8. Apache Nifi解壓縮
- 9. Apache gzip解壓縮
- 10. 如何壓縮在asp.net數據，並在JavaScript中解壓縮
- 11. 客戶端數據壓縮/解壓縮？
- 12. JavaScript：數據流壓縮/解壓縮
- 13. 數據壓縮和解壓縮
- 14. 數據壓縮Http 1.1
- 15. ZipFile的構造函數在Java/Apache Commons中壓縮zip64文件壓縮
- 16. 在Apache中讀取壓縮文件（.xz）
- 17. 如何在Apache中實現Brotli壓縮？
- 18. 如何在Apache中啓用HTTP壓縮？
- 19. 在java中的字符串數據的壓縮和解壓縮
- 20. GWT中的數據壓縮
- 21. 壓縮數據和解壓在javascript
- 22. LZW數據壓縮
- 23. mysql數據壓縮
- 24. 壓縮數據庫
- 25. 壓縮PCM數據
- 26. 數據壓縮3
- 27. .NET使用壓縮和非壓縮數據壓縮文件
- 28. WebSocket數據壓縮
- 29. 如何解壓縮字節數組中的壓縮數據？
- 30. Apache Flume的好處