Windows 7搭建Hadoop测试环境

举报
穆生生 发表于 2021/01/31 00:11:53 2021/01/31
【摘要】 如何在windows7系统上面运行Hadoop
  • 下载Hadoop软件:

http://archive.apache.org/dist/hadoop/core/

根据自己需要的版本下载,我这里下载2.7.7,具体使用版本要考虑生产环境的业务,或者学习的时候使用的Spark版本等。

  • 下载后解压(目录建议不要出现空格等特殊字符),D:\myenv\hadoop-2.7.7


  • 下载winutils和hadoop.dll

https://github.com/cdarlint/winutils

根据Hadoop平台下载对应的压缩包,解压后覆盖D:\myenv\hadoop-2.7.7\bin里面的内容。

 

  • 安装Java,并配置JAVA_HOME

  • 添加Hadoop环境变量

修改Path值,在最后添加%HADOOP_HOME%\bin

 

  • 修改D:\myenv\hadoop-2.7.7\etc\hadoop\hadoop-env.cmd

如果后面无法启动,可以修改JAVA_HOME为绝对路径

 

  • 修改D:\myenv\hadoop-2.7.7\etc\hadoop\hdfs-site.xml


D:\myenv\hadoop-2.7.7目录下 添加tmp文件夹
D:\myenv\hadoop-2.7.7添加datanamenodedatanode子文件夹

 

  • 修改D:\myenv\hadoop-2.7.7\etc\hadoop\core-site.xml


 

  • 初始化namenode

hdfs namenode -format

出现Successful可以认为初始化成功

 

  • 启动hadoop

D:\myenv\hadoop-2.7.7\sbin

到此,Hadoop启动成功

【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。