Airflow和Nifi是否在工作流程上執行相同的工作?每個人的親/愛是什麼? 我需要閱讀一些json文件,向它添加更多的自定義元數據並將其放入要處理的卡夫卡隊列中。我能夠在Nifi中做到這一點。我仍在研究Airflow。我正在嘗試爲我的項目 選擇最佳的工作流引擎謝謝!Airbnb Airflow vs Apache Nifi
8
A
回答
7
對於氣流和Apache NiFi結帳這個reddit的帖子了很好的概述:https://www.reddit.com/r/bigdata/comments/51mgk6/comparing_airbnb_airflow_and_apache_nifi/
對於攝取JSON檔案,豐富它們,並將它們路由到卡夫卡的具體使用情況,我相信NiFi對於正確的工具工作。一對夫婦的處理器,你可以潛在地使用,以及文檔的每個,低於:
JoltTransformJSON:https://nifi.apache.org/docs/nifi-docs/components/org.apache.nifi.processors.standard.JoltTransformJSON/index.html
PublishKafka(或PublishKafka_0_10取決於您的版本):https://nifi.apache.org/docs/nifi-docs/components/org.apache.nifi.processors.kafka.pubsub.PublishKafka/index.html
相關問題
- 1. Airbnb Airflow安裝錯誤
- 2. Airbnb Airflow:無需pip安裝氣流
- 3. Apache Airflow多租戶
- 4. Apache AirFlow如何實現可擴展性?
- 5. Apache Nifi GetTwitter
- 6. 使用所有系統資源的Airbnb Airflow
- 7. apache airflow scheduler not scheduling jobs
- 8. 安裝Apache Airflow後出錯
- 9. Apache NiFi無法連接到「localhost:8080/nifi」
- 10. Apache NIFI雙向TCP
- 11. Apache Nifi解壓縮
- 12. Apache nifi未啓動
- 13. Apache Nifi RouteHL7問題
- 14. QNX上的Apache Nifi
- 15. apache nifi總執行時間
- 16. Apache nifi Rest Api問題
- 17. Apache NiFi優化問題
- 18. Apache NiFi LDAPS配置問題
- 19. PutHDFS on Apache NiFi錯誤
- 20. Apache Nifi ExecuteSQL處理器
- 21. Apache Nifi SOCKS代理設置
- 22. Apache NIFI「執行處理器」
- 23. 關於Apache的nifi - Distrubuted Cache
- 24. 針對ETL的Apache NIFI
- 25. Apache Nifi Twitter連接問題
- 26. Apache Nifi追加函數
- 27. Apache Airflow - 自定義日誌格式
- 28. Apache Airflow芹菜Redis解碼錯誤
- 29. BashOperator不運行bash文件apache airflow
- 30. systemd的氣流:`airflow.pid` vs`airflow-monitor.pid`