hdfs执行balance均衡时间预估计算

举报
骑蜗牛追大象 发表于 2022/02/18 14:36:50 2022/02/18
【摘要】 hdfs执行balance均衡时间预估假设原有10个节点数据量347T;现扩容3节点3.7T数据大约要迁移170T数据出去假设带宽设置20M一直不变170*1024*1024=178257920M数据量/(带宽*节点数),节点数按照新老节点较小值计算数据迁移的时间为178257920M/20/3/60/60约等于825小时

hdfs执行balance均衡时间预估

假设原有10个节点数据量347T;现扩容3节点3.7T数据

大约要迁移170T数据出去

假设带宽设置20M一直不变

170*1024*1024=178257920M

数据量/(带宽*节点数),节点数按照新老节点较小值计算

数据迁移的时间为178257920M/20/3/60/60约等于825小时

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。