hbase hbck 单表状态异常终极修复法
【摘要】 问题背景与现象表状态异常后使用hbck命令无法修复。解决办法移动表目录至临时目录下:hdfs dfs -mv /hbase/data/NAMESPACE/TABLENAME /tmp/对临时目录下的表数据打快照:hdfs dfsadmin -allowSnapshot /tmp/TABLENAMEhdfs dfs -createSnapshot /tmp/TABLENAME TABLENAM...
问题背景与现象
表状态异常后使用hbck命令无法修复。
解决办法
-
移动表目录至临时目录下:
hdfs dfs -mv /hbase/data/NAMESPACE/TABLENAME /tmp/
-
对临时目录下的表数据打快照:
hdfs dfsadmin -allowSnapshot /tmp/TABLENAME
hdfs dfs -createSnapshot /tmp/TABLENAME TABLENAME_snap
-
删除zk上表信息,修复元数据:
deleteall /hbase/table/TABLENAME
deleteall /hbase/table-lock/TABLENAME
hbase hbck -fixMeta >$LOG_LOGFILE
-
重新创建同名同结构表
-
获取临时路径下表所有region目录:
hdfs dfs -ls /tmp/TABLENAME/ |awk -F '/' '{if($0 ~/^d/ && $NF!="hbase") print $NF}'| egrep -v "(.tmp|.tabledesc)" > /tmp/region.txt
-
重新将移走的数据bulkload至表中:
cat /tmp/region.txt | while read line;do hbase org.apache.hadoop.hbase.mapreduce.LoadIncrementalHFiles /tmp/TABLENAME/$line TABLENAME;done;
-
数据恢复完成后删除hdf上的快照:
hdfs dfs -deleteSnapshot /tmp/TABLENAME TABLENAME_snap
【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)