Python实现一个最简单的MapReduce编程模型WordCount
【摘要】 MapReduce编程模型:
Map:映射过程Reduce:合并过程
import operator
from functools import reduce
# 需要处理的数据
lst = [ "Tom", "Jack", "Mimi", "Jiji", "GoodMan"
]
# map过程:对每个数据进行处理,映射为字符串长度
lst = map(len...
MapReduce编程模型:
- Map:映射过程
- Reduce:合并过程
import operator
from functools import reduce
# 需要处理的数据
lst = [ "Tom", "Jack", "Mimi", "Jiji", "GoodMan"
]
# map过程:对每个数据进行处理,映射为字符串长度
lst = map(len, lst)
print(lst) # <map object at 0x101b43c18>
# reduce过程:对所有map处理过的数据进行汇总
result = reduce(operator.add, lst)
print(result) # 22
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10
- 11
- 12
- 13
- 14
- 15
- 16
- 17
- 18
- 19
- 20
- 21
- 22
- 23
文章来源: pengshiyu.blog.csdn.net,作者:彭世瑜,版权归原作者所有,如需转载,请联系作者。
原文链接:pengshiyu.blog.csdn.net/article/details/84641171
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)