4
我有一個java程序作爲服務運行，該程序必須向cassandra集羣插入50k行/秒（1行有25列）。Cassandra批量插入解決方案
我的集羣包含3個節點，1個節點有4個cpu核心（核心i5 2.4 ghz），4 gb ram。
我使用了Hector api，多線程，批量插入，但性能過低（約25k行/秒）。
任何人都建議另一種解決方案。是否有cassandra支持內部批量插入（不使用Thrift）。
A
回答
1
Astyanax是Apache Cassandra的高級Java客戶端。 Apache Cassandra是一個高度可用的列式數據庫。 Astyanax目前正在Netflix上使用。通常情況下，問題的解決速度與經常發佈的版本一樣快。
1
我有好運氣創建sstables並直接加載它們。有一個包含在發行版中的工具以及一個JMX接口。您可以使用SSTableSimpleUnsortedWriter類創建sstables。
詳情here。
1
向卡桑德拉批量插入數據的最快方法是sstableloader Cassandra在0.8以後提供的實用程序。對於您必須首先創建sstables這是可能的SSTableSimpleUnsortedWriter更多關於這被描述here
另一種更快的方式是唱衰BulkoutputFormat爲hadoop.With這一點，我們可以編寫Hadoop的工作將數據加載到cassandra.See更多這bulkload to cassandra with hadoo
+0
感謝您的幫助！我現在試試看：D：D –
相關問題
- 1. 批量插入Cassandra
- 2. Phantom Cassandra批量插入
- 3. PHP批量處理解決方案
- 4. 批量生成VS2008解決方案
- 5. 插入MULTILINESTRING的任何解決方案？
- 6. Cassandra批量插入操作，在內部
- 7. C＃批量插入40000行到Cassandra DB
- 8. 解決方案常量
- 9. 大規模MVC解決方案融入個人解決方案
- 10. 在導入解決方案
- 11. 注入解決方案
- 12. MySQL注入解決方案
- 13. 在MongoDB中批量FindAndModify的解決方案
- 14. 批量升級VS2005的解決方案，VS2008
- 15. 將VS 2008解決方案/項目批量遷移到VS 2010？
- 16. Cassandra驗證批量導入
- 17. 批量數據導入有沒有比ActiveRecord更好的解決方案？
- 18. Rails搜索插件和解決方案
- 19. 使用gwt的插件解決方案
- 20. VS 2010解決方案取決於另一個解決方案
- 21. 批量/批量插入R
- 22. ASP.NET MaskedEditExtender＆TextBox：無法輸入零，解決方法？解決方案？
- 23. MSBuild解決方案
- 24. Mathematica解決方案？
- 25. Qt：QStackedWidget解決方案
- 26. codechef解決方案
- 27. 解決方案2011
- 28. 與解決方案
- 29. Python解決方案
- 30. google.appengine.runtime.DeadlineExceededError解決方案？
感謝您的幫助！我現在試試看：D：D –