如何在cassandra中禁用壓縮並在結束時再次啓動？

Question

我將數十億條記錄同時插入cassandra。所以，爲了利用資源，我需要在插入過程中禁用壓縮。一旦插入完成，我應該能夠手動啓動壓實。我使用hector-core-1.0-5作爲API連接到cassandra。任何人都可以幫助我如何做到這一點。

Answer 1

您可以通過管理控制檯（JMX）控制列族的壓縮。加載前可以禁用，然後在加載數據後強制進行主要壓縮。

Answer 2

我使用的方法是使用cassandra-cli更新列族壓縮選項。

打開

use myks; 
update column family mycf with compression_options={sstable_compression:SnappyCompressor, chunk_length_kb:64}; 

，然後關閉：

use myks; 
update column family mycf with compression_options=null; 

您必須強制使用nodetool（磨砂），如果你馬上要更新，否則此更新後重建sstables的可能會發生意外。

我只在測試中做了這個，來比較壓縮列和非壓縮列的大小。但是我發現最好是啓用壓縮，然後進行批量加載，否則sstable重建將永遠消失。