从 Cloudera 迁移到 Hortonworks

Posted 2023-02-16

【中文标题】从 Cloudera 迁移到 Hortonworks

【英文标题】：Migration from Cloudera to Hortonworks

【发布时间】：2016-06-10 01:02:56

【问题描述】：

由于某种原因，我们的客户正计划将 hadoop 环境从 Cloudera 迁移到 HortonWorks。

如果有任何可用的标准文档指定此类迁移需要注意的步骤，有人可以提供给我吗？

在其他工作中我们可以使用hadoop distcp命令将hdfs数据从Cloudera环境复制到Hortonworks。

【参考方案1】：

是的，您可以使用 distcp。

您还可以根据要从中迁移的 CDH 版本和要迁移的 HDP 版本进行适当的迁移。它还取决于您在 hadoop 中使用的服务以及这些模式的版本。例如，如果您在 Cloudera 中使用 Hive 的 X.3 版本，并且在 Hortonworks 中迁移到 X.2，那么架构将会出现问题。尽管理论上可行，但在原地迁移似乎真的很冒险和混乱。

我建议使用 distcp 路线，这样您就可以在停用新的 Hortonworks 集群之前对照 Cloudera 集群验证数据。