從Cloudera遷移到Hortonworks

Question

由於某種原因，我們的客戶計劃將Hadoop環境從Cloudera遷移到HortonWorks。

如果有任何標準文檔指定需要照顧這種遷移的步驟，是否有人可以提供給我？

在其他工作中，我們可以使用hadoop distcp命令將hdfs數據從Cloudera環境複製到Hortonworks。

Answer 1

是的，你可以使用distcp。

您也可以根據您要遷移的CDH版本以及您正在遷移的HDP版本進行遷移。它還將取決於您在hadoop中使用的服務以及這些模式的版本。例如，如果您在Cloudera中使用Hive的X.3版本，並且您正在Hortonworks中遷移到X.2，則模式會出現問題。雖然理論上可行，但移植到位看起來確實有風險和麻煩。

我建議使用distcp路徑，這樣您可以在停用之前驗證Cloudera集羣中新Hortonworks集羣中的數據。