hadoop命令 job相关

cheng029

　　hadoop命令行 与job相关的：
　　命令行工具
　　1.查看 Job 信息：
　　hadoop job -list
　　2.杀掉 Job：
　　hadoop  job –kill  job_id
　　3.指定路径下查看历史日志汇总：
　　hadoop job -history output-dir
　　4.作业的更多细节：
　　hadoop job -history all output-dir
　　5.打印map和reduce完成百分比和所有计数器：
　　hadoop job –status job_id
　　6.杀死任务。被杀死的任务不会不利于失败尝试：
　　hadoop jab -kill-task
　　7.使任务失败。被失败的任务会对失败尝试不利：
　　hadoop job  -fail-task
　　* 文件操作
　　* 查看目录文件
　　* $ hadoop dfs -ls /user/cl
　　*
　　* 创建文件目录
　　* $ hadoop dfs -mkdir /user/cl/temp
　　*
　　* 删除文件
　　* $ hadoop dfs -rm /user/cl/temp/a.txt
　　*
　　* 删除目录与目录下所有文件
　　* $ hadoop dfs -rmr /user/cl/temp
　　*
　　* 上传文件
　　* 上传一个本机/home/cl/local.txt到hdfs中/user/cl/temp目录下
　　* $ hadoop dfs -put /home/cl/local.txt /user/cl/temp
　　*
　　* 下载文件
　　* 下载hdfs中/user/cl/temp目录下的hdfs.txt文件到本机/home/cl/中
　　* $ hadoop dfs -get /user/cl/temp/hdfs.txt /home/cl
　　*
　　* 查看文件
　　* $ hadoop dfs –cat /home/cl/hdfs.txt
　　*
　　* Job操作
　　* 提交MapReduce Job, Hadoop所有的MapReduce Job都是一个jar包
　　* $ hadoop jar   
　　* $ hadoop jar sandbox-mapred-0.0.20.jar sandbox.mapred.WordCountJob /user/cl/input.dat /user/cl/outputdir
　　*
　　* 杀死某个正在运行的Job
　　* 假设Job_Id为：job_201207121738_0001
　　* $ hadoop job -kill job_201207121738_0001