《从零开始学Hadoop大数据分析(视频教学版)》 —3.3 Hadoop中HDFS的常用命令

举报
华章计算机 发表于 2019/12/14 23:02:59 2019/12/14
【摘要】 本节书摘来自华章计算机《从零开始学Hadoop大数据分析(视频教学版)》 一书中第3章,第3.3.1节,作者是温春水 毕洁馨 。

3.3  Hadoop中HDFS的常用命令

  我们已经知道HDFS是分布式存储,可以存放大批量的文件,如果要对文件进行操作,可以通过下面的命令来完成,如读取文件、上传文件、删除文件和建立目录等。

3.3.1  对文件的操作

  HDFS的命令都在Hadoop的bin目录下,如果已经设置好Hadoop的环境变量,可以直接输入HDFS命令行,常见的相关命令如下。

  1.列出HDFS下的文件

hdfs -ls [-d] [-h] [-R] [<path> ...]

 

* -d:显示目录。

* -h:以易读的方式显示文件的大小。

* -r:递归列出目录的内容。

  2.上传文件

hdfs -put [-f] [-p] <localsrc> ... <dst>

 

* -p:保留访问和修改时间、所有权和模式。

* -f:如果文件已存在,可以覆盖。

  3.文件被复制到本地系统中

  当复制多个文件时,目标必须是一个目录。代码如下:

 

hdfs -get [-p] [-ignoreCrc] [-crc] <src> ... <localdst>

 

* -p:保留访问和修改时间、所有权和模式。

  4.删除文档

hdfs -rm [-f] [-r|-R] [-skipTrash] <src> ...

 

* -f:如果该文件不存在,则不显示诊断消息或修改退出状态以反映错误。

* -r:递归列出目录的内容。

  5.查看文件

hdfs -cat [-ignoreCrc] <src> ...

  6.建立目录

hdfs -rmdir [--ignore-fail-on-non-empty] <dir> ...

  7.复制文件

hdfs -copyFromLocal [-f] [-p] <localsrc> ... <dst>

 

* -p:保留访问和修改时间、所有权和模式。

* -f:如果文件已存在,可以覆盖。


【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。