Hadoop用于和Map Reduce作业交互的命令

偷瓜的贼

　　用法：hadoop job [GENERIC_OPTIONS] [-submit <job-file>] | [-status <job-id>] | [-counter <job-id> <group-name> <counter-name>] | [-kill <job-id>] | [-events <job-id> <from-event-#> <#-of-events>] | [-history [all] <jobOutputDir>] | [-list [all]] | [-kill-task <task-id>] | [-fail-task <task-id>]
命令选项                                                          描述
-submit <job-file>                                          提交作业
-status <job-id>                                          打印map和reduce完成百分比和所有计数器。
-counter <job-id> <group-name> <counter-name>  打印计数器的值。
-kill <job-id>                                                       杀死指定作业。
-events <job-id> <from-event-#> <#-of-events>            打印给定范围内jobtracker接收到的事件细节。
-history [all] <jobOutputDir>     -history <jobOutputDir> 打印作业的细节、失败及被杀死原因的细节。更多的关于一个作业的细节比如:成功的任务，做过的任务尝试等信息可以通过指定[all]选项查看。
-list [all]     -list all                              显示所有作业。-list只显示将要完成的作业。
-kill-task <task-id>                                  杀死任务。被杀死的任务不会不利于失败尝试。
-fail-task <task-id>                                  使任务失败。被失败的任务会对失败尝试不利。
　　基本命令：
　　1、列出所有Hadoop Shell支持的命令
  $ bin/hadoop fs -help
2、显示关于某个命令的详细信息
  $ bin/hadoop fs -help command-name
　　3、递归地拷贝文件或目录
  $ hadoop distcp <srcurl> <desturl>
                        srcurl      源Url
                        desturl     目标Url
4、运行HDFS文件系统检查工具(fsck tools)
用法：hadoop fsck [GENERIC_OPTIONS] <path> [-move | -delete | -openforwrite] [-files [-blocks [-locations | -racks]]]
命令选项                  描述
<path>              检查的起始目录。
-move                移动受损文件到/lost+found
-delete               删除受损文件。
-openforwrite     打印出写打开的文件。
-files                 打印出正被检查的文件。
-blocks              打印出块信息报告。
-locations          打印出每个块的位置信息。
-racks               打印出data-node的网络拓扑结构