Lv.2
pappy
更多个人资料
90
成长值
0
关注
5
粉丝
+ 关注
个人介绍
这个人很懒,什么都没有留下
感兴趣或擅长的领域
暂无数据
个人勋章
TA还没获得勋章~
成长雷达
90
0
0
0
0
个人资料
个人介绍
这个人很懒,什么都没有留下
感兴趣或擅长的领域
暂无数据
达成规则
以上满足
项可达成此勋章
博客
关注
粉丝
论坛
全部时间
全部时间
最近三天
最近一周
最近一月
全部
暂无专栏分类
【Free Style】ZooKeeper总结材料分享(三)
3.4 使用ACL的访问权限ZooKeeper使用ACL控制对节点的访问。ACL的实现同Unix文件访问权限非常相似:采用权限位来定义允许/禁止的各种节点操作,以及位应用的范围。与标准Unix权限不同的是,ZooKeeper节点不由用户(文件所有者)、组和其他这三个标准范围来限制。ZooKeeper没有节点所有者的概念。取而代之的是,ACL指定一个ID集合,以及与这些ID相关联的权
ZooKeeper
pappy
2017-11-08 09:17:45
8274
0
0
2017-11-08 09:17:45
999+
0
0
【Free Style】ZooKeeper总结材料分享(四)
5.1.4 共享锁共享锁在同一个进程中很容易实现,但是在跨进程或者在不同 Server 之间就不好实现了。Zookeeper 却很容易实现这个功能,实现方式也是需要获得锁的 Server 创建一个 EPHEMERAL_SEQUENTIAL 目录节点,然后调用 getChildren方法获取当前的目录节点列表中最小的目录节点是不是就是自己创建的目录节点,如果正是自己创建的,那么它就获得
JVM
ZooKeeper
pappy
2017-11-08 09:17:15
7617
0
0
2017-11-08 09:17:15
999+
0
0
【Free Style】ZooKeeper总结材料分享(二)
会话过期由ZooKeeper集群,而不是客户端来管理。客户端与集群建立会话时会提供上面讨论的超时值。集群使用这个值来确定客户端会话何时过期。集群在指定的超时时间内没有得到客户端的消息时发生会话过期。会话过期时集群将删除会话的所有临时节点,立即通知所有(观察节点的)客户端。此时已过期会话的客户端还是同集群断开连接的,不会被通知会话已经过期,直到(除非)客户端重新建立到集群的连接,这时候已过期会话的观
ZooKeeper
pappy
2017-11-08 09:09:57
8008
1
0
2017-11-08 09:09:57
999+
1
0
【Free Style】ZooKeeper总结材料分享(一)
1 概述ZooKeeper是一个开源的的分布式服务框架,它是Apache Hadoop项目的一个子项目,主要用来解决分布式应用场景中存在的一些问题,如:统一命名服务、状态同步服务、集群管理、分布式应用配置管理等,它支持Standalone模式和分布式模式,在分布式模式下,能够为分布式应用提供高性能和可靠地协调服务,而且使用ZooKeeper可以大大简化分布式协调服务的实现,为开发分布式应
ZooKeeper
pappy
2017-11-06 17:49:43
4726
0
1
2017-11-06 17:49:43
999+
0
1
【Free Style】Hadoop-Yarn之Resource Manager源码分析(二)
接上文:Hadoop-Yarn之Resource Manager源码分析(一)https://portal.huaweicloud.com/blogs/bc5a914ebfb111e7b8317ca23e93a891 3 YARN RM模块分析3.1 事件及服务YARN采用了服务模型,它将各种对象服务化,以便于统一管理(统一启动、关闭等)。YARN中将服务分为两种:单一服务和组
Hadoop
pappy
2017-11-03 18:11:41
5813
0
0
2017-11-03 18:11:41
999+
0
0
【Free Style】Hadoop-Yarn之Resource Manager源码分析(三)
接上篇:【Free Style】Hadoop-Yarn之Resource Manager源码分析(二)https://portal.huaweicloud.com/blogs/4abcd5ebc04811e7b8317ca23e93a891 addTransition的四个参数分别表示:当前状态preState,后续状态postStates,触发事件eventType,状态迁移操作接口hook。其
Hadoop
pappy
2017-11-03 18:09:43
5411
0
0
2017-11-03 18:09:43
999+
0
0
【Free Style】Hadoop-Yarn之Resource Manager源码分析(四)
接上篇:【Free Style】Hadoop-Yarn之Resource Manager源码分析(三)https://portal.huaweicloud.com/blogs/45e07b16c07311e7b8317ca23e93a891 4 算法介绍Yarn的调度器的作用主要是回答了如何选择一堆队列,在队列上如何选择一个应用的问题。Yarn Scheduler支持的调度机制包括:a)
Hadoop
pappy
2017-11-03 18:09:10
5910
0
0
2017-11-03 18:09:10
999+
0
0
【Free Style】Hadoop-Yarn之Resource Manager源码分析(一)
1 简介1.1 背景介绍带有MapReduce的Apache Hadoop是分布式数据处理的骨干力量,借助其独特的横向扩展物理集群架构和由 Google 最初开发的精细处理框架,Hadoop 在大数据处理的全新领域迎来了爆炸式增长。此外,Hadoop 还开发了一个丰富多样的应用程序生态系统,包括 Apache Pig(一种强大的脚本语言)和 Apache Hive(一个具有类似
Hadoop
pappy
2017-11-03 15:54:47
5958
0
0
2017-11-03 15:54:47
999+
0
0
【Free Style】Mesos 容错调研分享
1 ZooKeeper容错(选主组件)mesos框架中,如果master节点失效,执行器中的当前现有任务将继续执行,但是framework无法获取新的资源,从而导致新的任务因没有资源而得不到执行。为了解决这种情况,需要采用了多master模式,即选取其中一个master作为有效的leader,其它master作为follower来避免master的故障。master的选主是通过ZooKe
ZooKeeper
pappy
2017-11-03 11:01:07
8013
0
0
2017-11-03 11:01:07
999+
0
0
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
+ 关注