5
A
回答
2
這篇文章有關連接星火隨着HBase的應該是有幫助的:http://www.vidyasource.com/blog/Programming/Scala/Java/Data/Hadoop/Analytics/2014/01/25/lighting-a-spark-with-hbase
Do I just add the hbase address into spark classpath?
號其實,你應該把HBase的configuraion文件火花類路徑。如果沒有,你應該在你的代碼中設置它們,例如:
Configuration hConf = HBaseConfiguration.create(conf);
hConf.set("hbase.zookeeper.quorum", "PDHadoop1.corp.CompanyName.com,PDHadoop2.corp.CompanyName.com");
hConf.setInt("hbase.zookeeper.property.clientPort", 10000);
相關問題
- 1. 如何保存火花MatrixFactorizationModel recommendedProductsForUsers到Hbase
- 2. 火花流HBase的錯誤
- 3. 火花執行配置
- 4. 火花R的Hadoop配置
- 5. 火花配置優先
- 6. 如何在火花
- 7. 使用火花閱讀hbase表
- 8. 失敗incrementColumnValue HBASE火花斯卡拉
- 9. 如何火花
- 10. 火花:如何從火花外殼運行火花文件
- 11. 日誌記錄火花配置屬性
- 12. 火花階讀取配置文件
- 13. 配置火花視圖引擎!
- 14. 在Hue中配置Hbase
- 15. 如何將火花模型從一個火花裝置移動到另一個火花裝置?
- 16. 如何在HA模式下配置HBase?
- 17. 如何與火花
- 18. 飛艇 - 如何連接到火花UI時,在本地模式下配置的火花解釋
- 19. 如何配置火花sql節儉服務器
- 20. 如何使用火花訪問配置單元數據
- 21. 在火花集羣中配置主節點
- 22. 如何在火花中使用jni?
- 23. 如何在火花中分發任務
- 24. 無法設置在配置火花提交
- 25. 火花流微配料
- 26. 火花2到火花1.6
- 27. 如何在Scala中使用流浪盒火花裝置?
- 28. 如何在Flex中控制火花Datagrid的滾動條位置?
- 29. 如何在Intellij中使用scala設置H2O火花?
- 30. 火花java.util.logging.Logger中
你能告訴我如何將hbase配置文件放在spark類路徑上嗎?是這樣的 - 出口SPARK_CLASSPATH = /路徑/到/ hbase/conf? – RisJi 2014-09-04 14:00:43
是的。但它只用於驅動程序。你可以閱讀上面的帖子。它在代碼中讀取hbase-site.xml。 – zsxwing 2014-09-04 14:25:23
謝謝!但是現在我得到一個錯誤:java.lang.NoSuchMethodError:org.apache.hadoop.net.NetUtils.getInputStream(Ljava/net/Socket;)Ljava/io/InputStream; \t at org.apache.hadoop.hbase.ipc.HBaseClient $ Connection.setupIOstreams(HBaseClient.java:437) – RisJi 2014-09-09 20:59:43