Hadoop教程:命令手册

栏目: 服务器 · 发布时间: 6年前

内容简介:与这里演示的相比,所有操作的表如下所示。参数使用以下约定:所有其他文件和路径名都引用HDFS中的对象。

与这里演示的相比, “$HADOOP_HOME/bin/hadoop fs” 中有更多的命令,尽管这些基本操作可以帮助您入门。不带附加参数运行 ./bin/hadoop dfs 将列出所有可以与 FsShell 系统一起运行的命令。此外,如果遇到问题, $HADOOP_HOME/bin/hadoop fs -help 命令名将显示有关操作的简短使用摘要。

所有操作的表如下所示。参数使用以下约定:

"<path>" means any file or directory name. 
"<path>..." means one or more file or directory names. 
"<file>" means any filename. 
"<src>" and "<dest>" are path names in a directed operation. 
"<localSrc>" and "<localDest>" are paths as above, but on the local file system.

所有其他文件和路径名都引用HDFS中的对象。

序号 命令
1. ls 列出路径指定的目录的内容,显示每个条目的名称、权限、所有者、大小和修改日期。
2. lsr
行为类似于-ls,但是递归地显示path的所有子目录中的条目。
3. du
显示与路径匹配的所有文件的磁盘使用情况(以字节为单位);使用完整的HDFS协议前缀报告文件名。
4. dus
与-du类似,但打印路径中所有文件/目录的磁盘使用情况摘要。
5. mv
将src指示的文件或目录移动到HDFS内的dest。
6. cp
在HDFS中将src标识的文件或目录复制到dest。
7. rm
删除路径标识的文件或空目录。
8. rmr
删除路径标识的文件或目录。递归地删除任何子条目 (i.e., files or subdirectories of path).
9. put
将由localSrc标识的本地文件系统中的文件或目录复制到DFS中的dest。
10. copyFromLocal
-put相同
11. moveFromLocal
将由localSrc标识的本地文件系统中的文件或目录复制到HDFS中的dest,然后成功删除本地副本。
12. get [-crc]
将src标识的HDFS中的文件或目录复制到localDest标识的本地文件系统路径。
13. getmerge
检索与HDFS中的路径src匹配的所有文件,并将它们复制到localDest标识的本地文件系统中合并的单个文件。
14. cat
在标准输出上显示文件名的内容。
15. copyToLocal
与 -get相同
16. moveToLocal
类似于-get,但成功时删除HDFS副本。
17. mkdir
在HDFS中创建一个名为path的目录。
在路径中创建缺少的任何父目录(e.g., mkdir -p in Linux).
18. setrep [-R][-w] rep
为通过路径到rep标识的文件设置目标复制因子(随着时间的推移,实际复制因子将向目标移动)
19. touchz
在包含当前时间作为时间戳的路径上创建一个文件。如果文件在路径上已经存在,则失败,除非文件的大小已经为0。
20. test -[ezd]
如果路径存在,返回1;长度为零;或者是目录,或者是0。
21. stat [format]
打印关于路径的信息。Format是一个字符串,它接受块大小(%b)、文件名(%n)、块大小(%o)、复制(%r)和修改日期(%y, %y)。
22. tail [-f]
显示stdout上文件的最后1KB。
23. chmod [-R] mode,mode,…
与一个或多个相关联的文件权限对象的更改了路径….使用r模式递归执行更改是3位八进制模式,或{augo}+/-{rwxX}。假设没有指定范围且不应用umask。
24. chown [-R][owner][:[group]]
集拥有用户和/或组的文件或目录被路径….如果指定-R,则递归设置所有者。
25. chgrp [-R] group
设置拥有小组确认的文件或目录路径….如果指定-R,则递归地设置组。
26. help
返回上述命令之一的使用信息。你必须省略cmd中的“-”字符。

原文链接: https://www.tutorialspoint.com/…


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

深入浅出强化学习:原理入门

深入浅出强化学习:原理入门

郭宪、方勇纯 / 电子工业出版社 / 2018-1 / 79

《深入浅出强化学习:原理入门》用通俗易懂的语言深入浅出地介绍了强化学习的基本原理,覆盖了传统的强化学习基本方法和当前炙手可热的深度强化学习方法。开篇从最基本的马尔科夫决策过程入手,将强化学习问题纳入到严谨的数学框架中,接着阐述了解决此类问题最基本的方法——动态规划方法,并从中总结出解决强化学习问题的基本思路:交互迭代策略评估和策略改善。基于这个思路,分别介绍了基于值函数的强化学习方法和基于直接策略......一起来看看 《深入浅出强化学习:原理入门》 这本书的介绍吧!

HTML 编码/解码
HTML 编码/解码

HTML 编码/解码

SHA 加密
SHA 加密

SHA 加密工具

Markdown 在线编辑器
Markdown 在线编辑器

Markdown 在线编辑器