用 MapReduce 服务提交一个练习作业
【摘要】 用 MapReduce 服务提交一个练习作业大数据练习可以从一个最小作业开始。MapReduce 服务适合先完成「有集群、能提交、能看到结果」,不必先做复杂数据。 1. 先定这三项区域选好后不要中途换作业名写成 lab-mr-日期输出目录单独命名,例如 output-日期示例数据用几行虚构文本即可,不放账号和手机号。 2. 提交并查看进入 MapReduce 服务,确认练习集群可用。按模板...
用 MapReduce 服务提交一个练习作业
大数据练习可以从一个最小作业开始。MapReduce 服务适合先完成「有集群、能提交、能看到结果」,不必先做复杂数据。
1. 先定这三项
- 区域选好后不要中途换
- 作业名写成
lab-mr-日期 - 输出目录单独命名,例如
output-日期
示例数据用几行虚构文本即可,不放账号和手机号。
2. 提交并查看
- 进入 MapReduce 服务,确认练习集群可用。
- 按模板准备一个最小作业。
- 提交作业,等待状态变为完成。
- 到输出目录查看结果文件。
- 把作业名和结果行数记进笔记。
输出目录里有结果,这条路径就通了。
3. 笔记里留什么
- 区域和集群名
- 作业名
- 输出目录
- 完成时间
截图打码项目名和账号。
4. 用完怎么收
笔记保存后,删除练习输出。集群如果只为这次练习创建,确认没有其他作业后再释放。
5. 小结
提交一个最小作业,并在输出目录看到结果。
确认集群 → 提交作业 → 查看输出 → 把名称记下来。走完一遍,以后换数据就是在同一套流程上改。
【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)