操作hadoop常用的命令

素颜马尾好姑娘i 2022-04-10 13:16 258阅读 0赞

1.查看hdfs某一文件夹的大小： hadoop fs  -du  -h  /路径

![20190107144018582.png][]

2.查看文本的前十行、后十行.......

随机返回指定行数的样本数据  
hadoop fs -cat /test/gonganbu/scene\_analysis\_suggestion/\* | shuf -n 5

返回前几行的样本数据  
hadoop fs -cat /test/gonganbu/scene\_analysis\_suggestion/\* | head -100

返回最后几行的样本数据  
hadoop fs -cat /test/gonganbu/scene\_analysis\_suggestion/\* | tail -5

查看文本行数  
hadoop fs -cat hdfs://172.16.0.226:8020/test/sys\_dict/sysdict\_case\_type.csv |wc -l

查看文件大小(单位byte)  
hadoop fs -du hdfs://172.16.0.226:8020/test/sys\_dict/\*

hadoop fs -count hdfs://172.16.0.226:8020/test/sys\_dict/\*

3.kill -s 9 端口号 （安全删除）

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MTgwNDA0OQ_size_16_color_FFFFFF_t_70][]

[20190107144018582.png]: /images/20220330/a147a133c5094b84940d5fdc23505db9.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MTgwNDA0OQ_size_16_color_FFFFFF_t_70]: /images/20220330/910e9bf2aa234f459ac047e8188637c2.png

发表评论取消回复

表情：

评论列表（有 0 条评论，258人围观）

还没有评论，来说两句吧...

相关阅读

相关常用的 Linux 操作命令

1. 查看端口号是否被占用 lsof -i:【端口号】 ![20200208224649313.png][] 2. 查看所有被占用着的端口

水深无声/ 2023年07月04日 06:19/ 0 赞/ 3 阅读

相关 Linux的学习-常用的命令操作

1.Linux概述特点 1. 多用户，多任务： Linux支持多用户，各个用户对于自己的文件设备有自己特殊的权力，保证了各用户之间互不影响，Linux可

爱被打了一巴掌/ 2022年11月30日 04:04/ 0 赞/ 133 阅读

相关 LINUX最常用的基本操作命令

LINUX最常用的基本操作命令整理：Ackarlix 首先介绍一个名词“控制台（console）”，它就是我们通常见到的使用字符操作界面的人机接口，例如dos。我们说控制

「爱情、让人受尽委屈。」/ 2022年09月19日 12:28/ 0 赞/ 243 阅读

相关 HDFS常用的文件操作命令

HDFS常用的文件操作命令文件操作查看文件命令 ls 命令查看hdfs根目录 hdfs dfs -ls / 查

迷南。/ 2022年05月29日 10:40/ 0 赞/ 360 阅读

相关 Linux常用的操作及其命令

常用Linux命令（1）切换到上一层目录：cd ../ (2）切换到系统根目录：cd / （1）列出文件列表：ls （2）列出文件列表及文件详细信息：ll （3

以你之姓@/ 2022年04月22日 05:40/ 0 赞/ 180 阅读

相关操作hadoop常用的命令

1.查看hdfs某一文件夹的大小： hadoop fs -du -h /路径 ![20190107144018582.png][] 2.查看文本的前十行、后十行..

素颜马尾好姑娘i/ 2022年04月10日 13:16/ 0 赞/ 259 阅读

相关常用的Linux操作命令

目录操作命令：cd、mkdir、ls Linux 的目录结构与Windows操作系统不同，Windows中最上面是盘符。在Linux中没有盘符概念，最顶层是根

柔光的暖阳◎/ 2022年02月13日 16:47/ 0 赞/ 504 阅读

相关 linux系统常用的简单操作命令

简介 1. linux系统是程序猿经常会接触的系统，特别是实施、运维工程师等职位，都需要对linux操作要求比较高，但也有很多新入门的工程师并不懂得如何操作一些常用的简单

柔光的暖阳◎/ 2022年02月02日 11:21/ 0 赞/ 298 阅读

相关 Hadoop操作HDFS命令

Hadoop操作HDFS命令如下所示： hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目录及文件信息

缺乏、安全感/ 2021年12月15日 11:43/ 0 赞/ 364 阅读

相关 Git操作常用的命令

创建仓库 git init 在当前目录执行，会生成 .git目录文件，这个和SVN一致。提交到仓库 git commit -m "first commit" \-m

迷南。/ 2021年11月23日 08:54/ 0 赞/ 342 阅读