節儉的卡桑德拉插入/ batch_mutate增加一個循環

Question

我有一個Java應用程序，讀取數據從一個分區Oracle表（一對夫婦列的實際，圍繞100G大致大小）的所謂穩定時，並加載到一個卡桑德拉集羣使用線程數等於分區數。監視進程的線程顯示每個線程（插入@ ?? ms/rec的行）的進度，如下所示：

問題是，無論我使用哪種API方法（insert/batch_mutate） ，等待時間在穩步增加。正如你所看到的，它始於小於10ms /記錄並且穩定持續地上升。任何猜測可能是什麼原因？

PS：由於某些原因我選擇了原始的客戶端，除非是唯一可用的解決方案，否則我無法訪問更高級別的客戶端。無論如何，我對這種奇怪的行爲感到好奇。從監控線程

樣本輸出：

24@0 ms/rec, 135323@485 ms/rec, 131821@513 ms/rec, 155841@339 ms/rec, 243@0 ms/rec,        226146@538 ms/rec, 0, 0, . 
24@0 ms/rec, 135431@523 ms/rec, 131939@427 ms/rec, 156008@316 ms/rec, 243@0 ms/rec, 226247@553 ms/rec, 0, 0, . 
24@0 ms/rec, 135534@535 ms/rec, 132052@506 ms/rec, 156172@345 ms/rec, 243@0 ms/rec, 226355@472 ms/rec, 0, 0, . 
24@0 ms/rec, 135643@519 ms/rec, 132171@455 ms/rec, 156323@387 ms/rec, 243@0 ms/rec, 226464@492 ms/rec, 0, 0, . 
24@0 ms/rec, 135735@498 ms/rec, 132273@514 ms/rec, 156466@355 ms/rec, 243@0 ms/rec, 226561@508 ms/rec, 0, 0, . 
24@0 ms/rec, 135858@474 ms/rec, 132404@455 ms/rec, 156630@330 ms/rec, 243@0 ms/rec, 226676@533 ms/rec, 0, 0, . 

Answer 1

你爲什麼不建立在循環中的所有刀片和嘗試後，「batch_mutate」？ 我猜測，性能會更好，你不需要赫克託使用「batch_mutate」（以節儉也是可用的，較低的水平實現）。 也許這可能是由於Hector的實施。