hadoop常用命令（随时更新）

红太狼 2022-07-12 06:47 160阅读 0赞

[ \* 文件操作  
 \* 查看目录文件  
 \* $ hadoop dfs -ls /user/cl  
 \*  
 \* 创建文件目录  
 \* $ hadoop dfs -mkdir /user/cl/temp  
 \*  
 \* 删除文件  
 \* $ hadoop dfs -rm /user/cl/temp/a.txt  
 \*  
 \* 删除目录与目录下所有文件  
 \* $ hadoop dfs -rmr /user/cl/temp  
 \*  
 \* 上传文件  
 \* 上传一个本机/home/cl/local.txt到hdfs中/user/cl/temp目录下  
 \* $ hadoop dfs -put /home/cl/local.txt /user/cl/temp  
 \*  
 \* 下载文件  
 \* 下载hdfs中/user/cl/temp目录下的hdfs.txt文件到本机/home/cl/中  
 \* $ hadoop dfs -get /user/cl/temp/hdfs.txt /home/cl  
 \*  
 \* 查看文件  
 \* $ hadoop dfs –cat /home/cl/hdfs.txt  
 \*  
 \* Job操作  
][_ _ _ _ _ hadoop dfs -ls _user_cl _ _ _ _ _ hadoop dfs -mkdir _user_cl_temp _ _ _ _ _ hadoop dfs -rm _user_cl_temp_a.txt _ _ _ _ _ hadoop dfs -rmr _user_cl_temp _ _ _ _ _home_cl_local.txt_hdfs_user_cl_temp_ _ _ hadoop dfs -put _home_cl_local.txt _user_cl_temp _ _ _ _ _hdfs_user_cl_temp_hdfs.txt_home_cl_ _ _ hadoop dfs -get _user_cl_temp_hdfs.txt _home_cl _ _ _ _ _ hadoop dfs _cat _home_cl_hdfs.txt _ _ Job_]

\* 提交MapReduce Job, [Hadoop][]所有的MapReduce Job都是一个jar包

\* $ hadoop jar <local-jar-file> <[Java][]\-class> <hdfs-input-file> <hdfs-output-dir>

\* $ hadoop jar sandbox-mapred-0.0.20.jar sandbox.mapred.WordCountJob /user/cl/input.dat /user/cl/outputdir  
 \*  
 \* 杀死某个正在运行的Job  
 \* 假设Job\_Id为：job\_201207121738\_0001

\* $ hadoop job -kill job\_201207121738\_0001

本文转载自[Hadoop 文件命令 kill job][Hadoop _ kill job]

[_ _ _ _ _ hadoop dfs -ls _user_cl _ _ _ _ _ hadoop dfs -mkdir _user_cl_temp _ _ _ _ _ hadoop dfs -rm _user_cl_temp_a.txt _ _ _ _ _ hadoop dfs -rmr _user_cl_temp _ _ _ _ _home_cl_local.txt_hdfs_user_cl_temp_ _ _ hadoop dfs -put _home_cl_local.txt _user_cl_temp _ _ _ _ _hdfs_user_cl_temp_hdfs.txt_home_cl_ _ _ hadoop dfs -get _user_cl_temp_hdfs.txt _home_cl _ _ _ _ _ hadoop dfs _cat _home_cl_hdfs.txt _ _ Job_]: http://blog.csdn.net/cheungmine/article/details/7744487
[Hadoop]: http://lib.csdn.net/base/hadoop
[Java]: http://lib.csdn.net/base/javase
[Hadoop _ kill job]: http://blog.csdn.net/zhaoyue007101/article/details/8638241