將日誌文件kafka移動到hadoop

Question

我想將日誌文件從kafka移動到hdfs文件系統。 這個過程使用哪些工具？我嘗試了Confluent，但是我無法用融合來成功完成這個過程。我試圖找到另一種工具。

Answer 1

我想將日誌文件從kafka移動到hdfs文件系統。這個過程使用哪些工具

HDFS connector for Kafka Connect工作得很好，並廣泛使用，取得了巨大的成功。

我不能成功，這個過程與融合

可能是最好的，如果你描述你所面臨的實際問題。如果你遇到了一種經過驗證的技術的問題，換用另一種技術並不一定能幫到你。