HDFS的常用命令有哪些
短信预约 -IT技能 免费直播动态提醒
本文小编为大家详细介绍“HDFS的常用命令有哪些”,内容详细,步骤清晰,细节处理妥当,希望这篇“HDFS的常用命令有哪些”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。
既然HDFS是存取数据的分布式文件系统,那么对HDFS的操作,就是文件系统的基本操作,比如文件的创建、修改、删除、修改权限等,文件夹的创建、删除、重命名等。对HDFS的操作命令类似于Linux的shell对文件的操作,如ls、mkdir、rm等。
一、基本操作
创建目录
hadoop fs -mkdir /hdfs #在根目录下创建hdfs文件夹
查看目录
>hadoop fs -ls / #列出跟目录下的文件列表drwxr-xr-x - root supergroup 0 2016-03-05 00:06 /hdfs
级联创建目录
>hadoop fs -mkdir -p /hdfs/d1/d2
级联列出目录
>hadoop fs -ls -R /drwxr-xr-x - root supergroup 0 2016-03-05 00:10 /hdfsdrwxr-xr-x - root supergroup 0 2016-03-05 00:10 /hdfs/d1drwxr-xr-x - root supergroup 0 2016-03-05 00:10 /hdfs/d1/d2
上传本地文件到HDFS
>echo "hello hdfs" >>local.txt>hadoop fs -put local.txt /hdfs/d1/d2
查看HDFS中文件的内容
>hadoop fs -cat /hdfs/d1/d2/local.txthello hdfs
下载hdfs上文件的内容
>hadoop fs -get /hdfs/d1/d2/local.txt
删除hdfs文件
>hadoop fs -rm /hdfs/d1/d2/local.txtDeleted /hdfs/d1/d2/local.txt
删除hdfs中目录
>hadoop fs -rmdir /hdfs/d1/d2
修改文件的权限
>hadoop fs -ls /hdfsdrwxr-xr-x - root supergroup 0 2016-03-05 00:21 /hdfs/d1 #注意文件的权限>hadoop fs -chmod 777 /hdfs/d1drwxrwxrwx - root supergroup 0 2016-03-05 00:21 /hdfs/d1 #修改后
修改文件所属的用户
>hadoop fs -chown admin /hdfs/d1 #修改文件所属用户为admin>hadoop fs -ls /hdfsdrwxrwxrwx - admin supergroup 0 2016-03-05 00:21 /hdfs/d1
修改文件的用户组
>hadoop fs -chgrp admin /hdfs/d1>hadoop fs -ls /hdfsdrwxrwxrwx - admin admin 0 2016-03-05 00:21 /hdfs/d1
由于hdfs的操作的命令很多,我们目前就以上比较常见的操作进行讲解。
二、HDFS文件操作的所有命令
查看方式 hadoop fs
[root@iZ28csbxcf3Z ~]# hadoop fsUsage: hadoop fs [generic options][-appendToFile ... ][-cat [-ignoreCrc] ...][-checksum ...][-chgrp [-R] GROUP PATH...][-chmod [-R] PATH...][-chown [-R] [OWNER][:[GROUP]] PATH...][-copyFromLocal [-f] [-p] [-l] ... ][-copyToLocal [-p] [-ignoreCrc] [-crc] ... ][-count [-q] [-h] ...][-cp [-f] [-p | -p[topax]] ... ][-createSnapshot []][-deleteSnapshot ][-df [-h] [ ...]][-du [-s] [-h] ...][-expunge][-get [-p] [-ignoreCrc] [-crc] ... ][-getfacl [-R] ][-getfattr [-R] {-n name | -d} [-e en] ][-getmerge [-nl] ][-help [cmd ...]][-ls [-d] [-h] [-R] [ ...]][-mkdir [-p] ...][-moveFromLocal ... ][-moveToLocal ][-mv ... ][-put [-f] [-p] [-l] ... ][-renameSnapshot ][-rm [-f] [-r|-R] [-skipTrash] ...][-rmdir [--ignore-fail-on-non-empty] ...][-setfacl [-R] [{-b|-k} {-m|-x } ]|[--set ]][-setfattr {-n name [-v value] | -x name} ][-setrep [-R] [-w] ...][-stat [format] ...][-tail [-f] ][-test -[defsz] ][-text [-ignoreCrc] ...][-touchz ...][-usage [cmd ...]]
读到这里,这篇“HDFS的常用命令有哪些”文章已经介绍完毕,想要掌握这篇文章的知识点还需要大家自己动手实践使用过才能领会,如果想了解更多相关内容的文章,欢迎关注编程网行业资讯频道。
免责声明:
① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。
② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341