0
我想集成Spark Streaming和獨立Solr。我在沒有Zookeeper配置的Windows上使用Spark 1.6.1和Solr 5.2獨立版。通過傳遞Zookeeper配置,我能夠找到一些解決方案,從火花連接到Solr。 如何將我的火花程序連接到獨立的Solr?如何將Spark Streaming連接到Windows上的獨立Solr?
我想集成Spark Streaming和獨立Solr。我在沒有Zookeeper配置的Windows上使用Spark 1.6.1和Solr 5.2獨立版。通過傳遞Zookeeper配置,我能夠找到一些解決方案,從火花連接到Solr。 如何將我的火花程序連接到獨立的Solr?如何將Spark Streaming連接到Windows上的獨立Solr?
請看看這個例子是有幫助的http://spark.apache.org/docs/latest/streaming-programming-guide.html#design-patterns-for-using-foreachrdd
從例子中,你需要寫一個包裝的HttpSolrClient或ConcurrentUpdateSolrClient對象自己的Connection類。你還需要編寫你自己的ConnectionPool類,它將實現你自己的Connection對象池(或者如果它的線程安全,只返回相同的單例對象)。