HBase不同集群间数据迁移
【摘要】 本文介绍不通HBase集群之前的数据迁移方法
前提
两个集群相同vpc和安全组
操作步骤
一、查看源端集群HDFS NameNode IP和port
1. 查看NameNode IP，获取对应的name转换成IP
hdfs getconf -namenodes
2. 查看port：MRS Manager搜索dfs.namenode.rpc.port配置
3. 目的端集群连接源端集群HDFS。
hadoop fs -ls hdfs://192.168.1.88:9820/hbase/data/default
二、 进行HDFS数据迁移，目的端集群omm用户执行hadoop的distcp，目的端的表名地址不存在会自动创建。
hadoop distcp hdfs://192.168.1.217:9820/hbase/data/default/ahbenchtest-read hdfs:///hbase/data/default/ahbenchtest-read/
三、 数据迁移完成后，恢复HBase的元数据。
1. MRS Manager停止HBase服务
2. 执行元数据修复
hbase org.apache.hadoop.hbase.util.hbck.OfflineMetaRepair
3. MRS Manager启动HBase服务
4. hbase shell中执行list，scan命令查看表是否正常。
【版权声明】本文为华为云社区用户原创内容，转载时必须标注文章的来源（华为云社区）、文章链接、文章作者等基本信息， 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容，欢迎发送邮件进行举报，并提供相关证据，一经查实，本社区将立刻删除涉嫌侵权内容，举报邮箱：
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论（0）