作者小头像 Lv.1
更多个人资料
30 成长值
2 关注
3 粉丝
+ 关注 私信

个人介绍

养猪技术专家

感兴趣或擅长的领域

大数据、数据库、微服务架构、云计算
个人勋章
TA还没获得勋章~
成长雷达
30
0
0
0
0

个人资料

个人介绍

养猪技术专家

感兴趣或擅长的领域

大数据、数据库、微服务架构、云计算

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
Hadoop NameNode的ZKFC机制
NameNode的HA可以个人认为简单分为共享editLog机制和ZKFC对NameNode状态的控制在此之前，我先提几个问题：一般导致NameNode切换的原因ZKFC的作用是什么？如何判断一个NN是否健康NameNode HA是如何实现的？NameNode因为断电导致不能切换的原理，怎样进行恢复一般导致NameNode切换的原因随着集群规模的变大和任务量变多，NameNode的压力会越来...
EI企业智能
作者小头像 养猪技术专家 2020-07-13 11:02:27
5662
1
0
2020-07-13 11:02:27
999+
1
0
用Carbondata做CDC
所谓CDC，即Change Data Capture，变化数据的摄取，本质是根据数据变化对原始表做数据更新/插入/删除。Apache CarbonData是一种通过索引对大数据快速分析的列式数据格式，由华为开源贡献给Apache社区，并且在华为云的MRS等服务上集成，可以通过MRS服务使用Carbondata或者使用开源版本的Carbondata。本文旨在叙述Carbon CDC使用和原理。
EI企业智能
作者小头像 养猪技术专家 2020-07-13 11:01:36
9009
2
1
2020-07-13 11:01:36
999+
2
1
使用async-profiler工具分析spark executor性能
Async-profiler可以观测运行程序中每一段代码所占用的cpu的时间和比例,从而可以分析并找到项目中占用cpu时间最长的代码片段，优化热点代码，达到优化内存的效果。它具有特定于HotSpot的API，以收集堆栈跟踪并跟踪内存分配，探查器可与基于HotSpot JVM的OpenJDK，Oracle JDK和其他Java运行时一起使用。
async spark
作者小头像 养猪技术专家 2020-05-19 17:40:36
12476
1
2
2020-05-19 17:40:36
999+
1
2
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注