如何驗證從密鑰空間的一個表複製到Cassandra中不同密鑰空間中的表的數據？

Question

我們正在將數據從密鑰空間中的列族複製到同一數據中心中的另一個密鑰空間。我們想驗證cf大小還是不。複製的記錄與源cf相同。 有沒有什麼方法可以衡量整個集羣中cf的大小？

Answer 1

AFAIK Cassandra不維護每個表/每個集羣的行數。一般取決於您的數據集大小：

• 小數據集：運行select count(*) from <table> limit <max_number_of_rows>。
• 大型數據集：使用該掃描通的所有表（分頁）卡桑德拉司機寫一個腳本，計算所有行
• 大型數據集，第二個辦法：用cqlsh copy轉儲表到CSV文件，再算上線。
• 非常大的數據集：使用Spark + Cassandra連接器在整個集羣中分配負載。