我們有一個hbase-0.94
集羣,其中hadoop-1.0.1
。我們不希望有這種集羣停機時間,同時升級到hbase-0.98
與hadoop-2.5.1
如何將hbase表從hbase-0.94集羣複製到hbase-0.98集羣
我已經置備用Hadoop-2.5.1的另一個HBase的-0.98集羣,要複製的HBase-0.94表,HBase的-0.98。 Hbase
CopyTable
似乎不適用於此目的。
請建議一種方法來執行上述任務。
我們有一個hbase-0.94
集羣,其中hadoop-1.0.1
。我們不希望有這種集羣停機時間,同時升級到hbase-0.98
與hadoop-2.5.1
如何將hbase表從hbase-0.94集羣複製到hbase-0.98集羣
我已經置備用Hadoop-2.5.1的另一個HBase的-0.98集羣,要複製的HBase-0.94表,HBase的-0.98。 Hbase
CopyTable
似乎不適用於此目的。
請建議一種方法來執行上述任務。
這些是可用選項,您可以從中選擇。
org.apache.hadoop.hbase.mapreduce.Export
工具 導出表到HDFS,然後你可以用hadoop distcp
將數據移動到另一個 集羣。當數據放置在第二個羣集上時,可以使用 org.apache.hadoop.hbase.mapreduce.Import
工具導入表。 請看http://hbase.apache.org/book.html#export。第二個選項是我們CopyTable
工具,請查看: http://hbase.apache.org/book.html#copytable 看一看pivotal
第三個選項是讓HBase的快照,創建表 快照,然後用ExportSnapshot
工具來移動它們到第二集羣。當快照位於第二個羣集上時,您可以從快照中克隆表。請看:http://hbase.apache.org/book.html#ops.snapshots
HBase的快照允許你把一個表的快照不會對地區服務器也 太大影響。快照,克隆和恢復操作 不涉及數據複製。此外,
我用的是1和3在我的情況下移動集羣和我之間的數據3 是更好的解決方案導出快照到另一個 羣集沒有對地區服務器的影響。
你的建議是好的,但如果不同的羣集安裝Hadoop和基地的兼容版本,它纔有效。在我的情況下,版本不兼容:hadoop-1.0.1到hadoop-2.5.1和hbase-0.94.1到hbase-0.98。我已經嘗試過選項1和2,但它不起作用。 –