卡桑德拉：如何將整個表到我的卡珊德拉的另一個密鑰空間

Question

版本信息：

[cqlsh 5.0.1 | Cassandra 2.2.5 | CQL規範3.3.1 |本機協議v4]

我想將一些巨大的表（數百萬行）移動到另一個鍵空間。除了「COPY csv，COPY COPY」之外，還有更好的解決方案嗎？

Answer 1

好吧，我設法讓它在運行2.2.8的單節點集羣上運行。

我嘗試將我的holidays表從我的presentation鍵空間移動到我的stackoverflow鍵空間。

下面是我所採取的步驟：

創建新的密鑰空間裏面的表格。

此步驟很重要，因爲每個表都有一個唯一標識符的UUID，存儲在cf_id列的system.schema_columnfamilies表中。此ID附加到保存數據的目錄名稱。通過將模式從一個密鑰空間複製/粘貼到另一個密鑰空間，您將確保使用相同的列名稱，但會生成新的唯一標識符。

注意：在3.x中，標識符存儲在system_schema.tables表中。

aploetz@cqlsh:stackoverflow> CREATE TABLE holidays (
type text, 
eventtime timestamp, 
beginend text, 
name text, 
PRIMARY KEY (type, eventtime, beginend) 
) WITH CLUSTERING ORDER BY (eventtime DESC, beginend DESC); 

aploetz@cqlsh:stackoverflow> SELECT * FROM stackoverflow.holidays ; 

type | eventtime | beginend | name 
------+-----------+----------+------ 

(0 rows) 

停止您的節點（S）正常（DISABLEGOSSIP，漏殺/停止等）。

現在，發現新舊錶在磁盤上的位置，以及複製/文件移動到新位置（從原來的位置）：

$ ls -al /var/lib/cassandra/data22/stackoverflow/holidays-77a767e0a5f111e6a2bebd9d201c4c8f/ 
total 12 
drwxrwxr-x 3 aploetz aploetz 4096 Nov 8 14:25 . 
drwxrwxr-x 17 aploetz aploetz 4096 Nov 8 14:25 .. 
drwxrwxr-x 2 aploetz aploetz 4096 Nov 8 14:25 backups 
$ cp /var/lib/cassandra/data22/presentation/holidays-74bcfde0139011e6a67c2575e6398503/la* /var/lib/cassandra/data22/stackoverflow/holidays-77a767e0a5f111e6a2bebd9d201c4c8f/ 

$ ls -al /var/lib/cassandra/data22/stackoverflow/holidays-77a767e0a5f111e6a2bebd9d201c4c8f/ 
drwxrwxr-x 3 aploetz aploetz 4096 Nov 8 14:26 . 
drwxrwxr-x 17 aploetz aploetz 4096 Nov 8 14:25 .. 
drwxrwxr-x 2 aploetz aploetz 4096 Nov 8 14:25 backups 
-rw-rw-r-- 1 aploetz aploetz 43 Nov 8 14:26 la-1-big-CompressionInfo.db 
-rw-rw-r-- 1 aploetz aploetz 628 Nov 8 14:26 la-1-big-Data.db 
-rw-rw-r-- 1 aploetz aploetz 9 Nov 8 14:26 la-1-big-Digest.adler32 
-rw-rw-r-- 1 aploetz aploetz 16 Nov 8 14:26 la-1-big-Filter.db 
-rw-rw-r-- 1 aploetz aploetz 57 Nov 8 14:26 la-1-big-Index.db 
-rw-rw-r-- 1 aploetz aploetz 4468 Nov 8 14:26 la-1-big-Statistics.db 
-rw-rw-r-- 1 aploetz aploetz 94 Nov 8 14:26 la-1-big-Summary.db 
-rw-rw-r-- 1 aploetz aploetz 94 Nov 8 14:26 la-1-big-TOC.txt 
-rw-rw-r-- 1 aploetz aploetz 43 Nov 8 14:26 la-2-big-CompressionInfo.db 
-rw-rw-r-- 1 aploetz aploetz 164 Nov 8 14:26 la-2-big-Data.db 
-rw-rw-r-- 1 aploetz aploetz 10 Nov 8 14:26 la-2-big-Digest.adler32 
-rw-rw-r-- 1 aploetz aploetz 16 Nov 8 14:26 la-2-big-Filter.db 
-rw-rw-r-- 1 aploetz aploetz 26 Nov 8 14:26 la-2-big-Index.db 
-rw-rw-r-- 1 aploetz aploetz 4460 Nov 8 14:26 la-2-big-Statistics.db 
-rw-rw-r-- 1 aploetz aploetz 108 Nov 8 14:26 la-2-big-Summary.db 
-rw-rw-r-- 1 aploetz aploetz 94 Nov 8 14:26 la-2-big-TOC.txt 

重新啓動節點（ S）。通過cqlsh

查詢：

Connected to SnakesAndArrows at 127.0.0.1:9042. 
[cqlsh 5.0.1 | Cassandra 2.2.8 | CQL spec 3.3.1 | Native protocol v4] 
Use HELP for help. 
aploetz@cqlsh> SELECT * FROM stackoverflow.holidays ; 

type   | eventtime    | beginend | name 
--------------+--------------------------+----------+------------------------ 
    Religious | 2016-12-26 05:59:59+0000 |  E |    Christmas 
    Religious | 2016-12-25 06:00:00+0000 |  B |    Christmas 
    Religious | 2016-03-28 04:59:59+0000 |  E |     Easter 
    Religious | 2016-03-27 05:00:00+0000 |  B |     Easter 
presentation | 2016-05-06 20:40:08+0000 |  B |  my presentation 
presentation | 2016-05-06 20:40:03+0000 |  B |  my presentation 
presentation | 2016-05-06 20:39:15+0000 |  B |  my presentation 
presentation | 2016-05-06 20:38:10+0000 |  B |  my presentation 
      US | 2016-07-05 04:59:59+0000 |  E |   4th of July 
      US | 2016-07-04 05:00:00+0000 |  B |   4th of July 
      US | 2016-05-09 04:59:59+0000 |  E |   Mothers Day 
      US | 2016-05-08 05:00:00+0000 |  B |   Mothers Day 
     Nerd | 2016-12-22 05:59:59+0000 |  E |    2112 Day 
     Nerd | 2016-12-21 06:00:00+0000 |  B |    2112 Day 
     Nerd | 2016-09-26 04:59:59+0000 |  E |    Hobbit Day 
     Nerd | 2016-09-25 05:00:00+0000 |  B |    Hobbit Day 
     Nerd | 2016-09-20 04:59:59+0000 |  E | Talk Like a Pirate Day 
     Nerd | 2016-09-19 05:00:00+0000 |  B | Talk Like a Pirate Day 
     Nerd | 2016-05-07 04:59:59+0000 |  E |   Star Wars Week 
     Nerd | 2016-05-04 05:00:00+0000 |  B |   Star Wars Week 
     Nerd | 2016-03-14 05:00:00+0000 |  E |     Pi Day 
     Nerd | 2016-03-14 05:00:00+0000 |  B |     Pi Day 

(22 rows) 

這種方法的問題是，您將需要停止集羣，並在每個節點上移動文件。而cqlsh COPY將允許您在單個節點上導入和導出，而羣集仍在運行。

而且我知道COPY這個名聲限制了小數據集。但是2.2.x有一些選項可以幫助節制COPY以防止在大型數據集上超時。我最近在沒有超時的情況下導出/導入了3.7億行。