作者小头像 Lv.1
更多个人资料
50 成长值
0 关注
0 粉丝
+ 关注 私信

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据
个人勋章
TA还没获得勋章~
成长雷达
50
0
0
0
0

个人资料

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
Metastore启动故障，报failed to initizlize master key
适用版本6.5.x。问题现象重启Metastore成功，但是Metastore一直处于故障状态。原因分析查看Metastore运行日志，发现Metastore能够正常启动，日志一直在打印："Failed to initizlize master key""could not create "increment"/"table" value-generation container seque...
作者小头像 yd_225577686 2022-12-27 14:13:19
2084
0
0
2022-12-27 14:13:19
999+
0
0
Metastore启动故障，报user hive does not belong to hive
适用版本6.5.x。问题现象重启Metastore成功，但是Metastore一直处于故障状态。原因分析查看Metastore运行日志，发现Metastore能够正常启动，日志一直在打印“can not create filepath: /user/hive/warehouseUser hive does not belong to hive”。caused by :MetaExceptio...
Hive
作者小头像 yd_225577686 2022-12-27 14:12:34
4283
0
0
2022-12-27 14:12:34
999+
0
0
HiveServer启动成功，但页面显示状态故障
适用版本6.5.x。问题现象重启HiveServer成功，但是HiveServer一直处于故障状态。原因分析查看HiveServer运行日志，发现HiveServer能够正常启动，但启动后，未出现异常，又收到停止的命令导致实例停止。2019-05-13 16:17:11,993 | INFO | Thread-11 | Shutting down HiveServer2 | org.apa...
作者小头像 yd_225577686 2022-12-27 11:49:54
1977
0
0
2022-12-27 11:49:54
999+
0
0
Hive sql写法问题导致异常合集（二）
1.设置自定义参数出现递归调用 2.insert into table values形式插入大量数据 3.多表关联过滤条件中 按in的子查询进行过滤  4.string类型字段过滤不加引号  5.并发插入同表或同分区
Hive SQL
作者小头像 yd_225577686 2022-12-27 10:26:36
1718
0
0
2022-12-27 10:26:36
999+
0
0
Hive sql写法问题导致结果异常合集（一）
1.扫描分区过多，元数据中拼接查询报错 2.cascade级联修改表字段 3.alter table drop partition 删除大量分区 4.大分区表查询不带分区 5.sparksql嵌套过多、大量case when 6.sparksql 没有group by 情况下使用Having 
Hive SQL
作者小头像 yd_225577686 2022-12-27 10:22:51
4059
0
0
2022-12-27 10:22:51
999+
0
0
Hive sql写法问题导致运行慢问题合集（三）
12.视图存在全表扫或者大量分区查询 13.大量使用with as 并在sql中多处调用
Hive SQL
作者小头像 yd_225577686 2022-12-27 10:09:36
1868
0
0
2022-12-27 10:09:36
999+
0
0
Hive sql写法问题导致运行慢问题合集（二）
7.join on中加判断现象：mr任务慢原因：on条件中存在if或case when判断，在mapjoin时，会拿大表数据一条一条与小表比对同时一条一条做判断导致慢例如：Select * From tba t1Join tbb t2On t1.id=Case where t1.type=’qwr’ THEN t2.type ELSE null END;解决方法：将sql拆分8.join o...
Hive SQL
作者小头像 yd_225577686 2022-12-27 10:05:47
4268
0
0
2022-12-27 10:05:47
999+
0
0
Hive sql写法问题导致运行慢问题合集（一）
1.     over(partition by order by)语法partition by和order by后字段一致现象:mr任务运行缓慢原因：partition by order by 语法含义为分组后排序组内数据其中的排序算法使用的为快速排序，partition by和order by字段一致会导致分区内全为相同数据，排序性能恶化严重，且p 与o字段相同排序无意义解决方法：1.p...
Hive SQL
作者小头像 yd_225577686 2022-12-27 09:58:26
4256
0
0
2022-12-27 09:58:26
999+
0
0
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注