Cloudera Replication Manager(以下简称为 RM,旧版本的CM中简称为BDR)为数据迁移提供了一个集成式的易用管理解决方案,通过界面化的方式可以非常便捷的定义不同集群之间的数据复制操作 ,本文主要介绍如何配置及使用RM进行HDFS和Hive 复制
-
测试环境
源集群版本:CDH5.16.2、CM 5.16.2、已启用Kerberos
目标集群版本:CDH7.1.5、CM7.2.4、已启用Kerberos
-
前置条件
1. 源集群和目标集群节点之间必须网络互通
2. 源集群和目标集群都有企业版 License
3. 源 CDH 集群版本要求分成三种情况:
• 不需要做 Sentry to Ranger acl 迁移 – CDH5.13.0+ – CM5.14.0+
• 需要做 Sentry to Ranger acl 迁移 – CDH5.13.0+ – CM6.3.1+
• 需要使用 HDFS snapshot diff 功能 – CDH5.13.3+,5.14.2+,5.15.0+ – CM5.15.0+,CM6.1.0+
2.RM简介
RM 属于 Cloudera Manager 上的一个功能模块,提供了以下能力:



