Lv.1
养猪技术专家
更多个人资料
30
成长值
2
关注
3
粉丝
+ 关注
私信
个人介绍
养猪技术专家
感兴趣或擅长的领域
大数据、数据库、微服务架构、云计算
个人勋章
TA还没获得勋章~
成长雷达
30
0
0
0
0
个人资料
个人介绍
养猪技术专家
感兴趣或擅长的领域
大数据、数据库、微服务架构、云计算
达成规则
以上满足
项可达成此勋章
博客
关注
粉丝
论坛
全部时间
全部时间
最近三天
最近一周
最近一月
全部
暂无专栏分类
Hadoop NameNode的ZKFC机制
NameNode的HA可以个人认为简单分为共享editLog机制和ZKFC对NameNode状态的控制在此之前,我先提几个问题:一般导致NameNode切换的原因ZKFC的作用是什么?如何判断一个NN是否健康NameNode HA是如何实现的?NameNode因为断电导致不能切换的原理,怎样进行恢复一般导致NameNode切换的原因随着集群规模的变大和任务量变多,NameNode的压力会越来...
EI企业智能
养猪技术专家
2020-07-13 11:02:27
4336
1
0
2020-07-13 11:02:27
999+
1
0
用Carbondata做CDC
所谓CDC,即Change Data Capture,变化数据的摄取,本质是根据数据变化对原始表做数据更新/插入/删除。Apache CarbonData是一种通过索引对大数据快速分析的列式数据格式,由华为开源贡献给Apache社区,并且在华为云的MRS等服务上集成,可以通过MRS服务使用Carbondata或者使用开源版本的Carbondata。本文旨在叙述Carbon CDC使用和原理。
EI企业智能
养猪技术专家
2020-07-13 11:01:36
7750
2
1
2020-07-13 11:01:36
999+
2
1
使用async-profiler工具分析spark executor性能
Async-profiler可以观测运行程序中每一段代码所占用的cpu的时间和比例,从而可以分析并找到项目中占用cpu时间最长的代码片段,优化热点代码,达到优化内存的效果。它具有特定于HotSpot的API,以收集堆栈跟踪并跟踪内存分配,探查器可与基于HotSpot JVM的OpenJDK,Oracle JDK和其他Java运行时一起使用。
async
spark
养猪技术专家
2020-05-19 17:40:36
10641
1
2
2020-05-19 17:40:36
999+
1
2
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
+ 关注