0
我必須從網絡上抓取一些數據並執行一些分析。對於爬網，我決定使用Apache Nutch 2.3.1並進行分析，我決定使用Apache Spark。現在我該如何整合Nutch和solr。根據Nutch website，我已經知道它可以支持spark 1.4.1。有人可以確認我的設計desicion是正確的，第二我沒有找到這兩個整合的教程。可以soneone指導我該如何使用Apache Spark和Apache Nutch
A
回答
1
查看Sparkler，我們正在努力將其作爲Nutch on Spark的原型，http://github.com/USCDataScience/sparkler.git
相關問題
- 1. 如何與Apache Nutch的2.2.1
- 2. Talend和Apache Spark？
- 3. Apache Nutch REST api
- 4. Apache Spark vs Apache Spark 2
- 5. Apache Nutch和Solr集成
- 6. 如何在Linux上集成apache nutch和apache solr？
- 7. 使用Apache Spark/Apache Flink擴展
- 8. Apache Spark與Apache Storm
- 9. Apache Spark vs Apache Ignite
- 10. django apache問題，我該如何使用apache運行django項目？
- 11. Apache Spark Stderr和Stdout
- 12. 的Apache Sqoop和Spark
- 13. Windows上的Apache Nutch
- 14. 與Apache的Nutch 2.2.1
- 15. 運行apache Nutch 2.2.1
- 16. 如何在Apache Spark中使用Stanford NER
- 17. 如何使用Gradle構建Apache Spark？
- 18. 如何使用Hadoop InputFormats在Apache Spark中？
- 19. Apache Spark和Apache Arrow有什麼區別？
- 20. 關於用apache Solr和apache Nutch配置Drupal 7
- 21. 在決定使用Apache還是不使用Apache Spark時應該考慮什麼？
- 22. Kickstart @ Apache Spark使用java
- 23. 使用yum安裝Apache Spark
- 24. 使用Scala和Apache Spark進行過濾
- 25. 在Amazon EC2上使用HDFS和Apache Spark
- 26. 我該如何解釋Apache Spark RDD Lineage Graph？
- 27. 解析並存儲使用Apache Nutch
- 28. 如何擴展apache spark api？
- 29. 使用Apache Spark/Spark SQL加入文件
- 30. 如何讓Apache Nutch的抓取永遠