Linux下命令分析，分割，日志统计的一些工具

「爱情、让人受尽委屈。」 2022-02-18 15:29 200阅读 0赞

#### awk 处理行列 ####

cat /etc/passwd | cut -d: -f1
    cat /etc/passwd | awk -F: '{print $1}'
    cat /etc/passwd | awk -F: '{print "username:" $1 "=> uid:" $3 }'
    #默认是以空格分隔
    cat /etc/passwd | head -5 |awk -F: '{print "username:" $1 "=> uid:" $3 }'
    #获取磁盘占有率，NR表示当前行号
    df | awk '{if(NR==4){print int($5)}}'
    #获取总行数
    df | awk 'END{print NR}'
    #获取总列数
    df | awk 'END{print NF}'
    #第一行匹配192.168.100.1的行输出
    cat file | awk '$1~/192.168.100.1/{print $0}'

#### sed 处理行 ####

#显示行号查看文件
    nl file
    #查看第5行的数据
    cat file | sed -n '5'p
    #查看3-6行数据
    cat file | sed -n '3,6'p
    #去掉3-6行
    cat test | sed '3,6'd
    #查找包含bash的行
    cat /etc/passwd | sed -n '/bash/'p
    #查找1-包含sync内容的行
    cat /etc/passwd | sed -n '1,/sync/'p 
    #查找包含ssh内容的行到最后一行
    cat /etc/passwd | sed -n '/sshd/,$'p

#### uniq 统计 ####

#统计文件里面紧挨着的相同行出现的次数，统计网站ip访问次数等
    uniq -c file
    #上面的优化方案
    cat file2 | sort | uniq c
    #上面的优化方案,-r反排序统计
    cat file2 | sort -r | uniq c
    #上面的优化方案,-r反排序统计,-k1根据第一列排序，针对多列情况
    cat file2 | sort -k1 -r | uniq c

#### 文件分割 ####

#将file2按照每5行分割为一个文件
    split -5 file2 spt

#### 统计apache访问记录 ####

cat access.log | awk '{print $1}' | sort | uniq -c

发表评论取消回复

表情：

评论列表（有 0 条评论，200人围观）

还没有评论，来说两句吧...

相关阅读

相关 linux下日志查看命令

参考博客：https://blog.csdn.net/zzw\_awen/article/details/68945708 1、 alias: 查看命令 cat .

╰+攻爆jí腚メ/ 2024年03月31日 11:34/ 0 赞/ 80 阅读

相关 Linux进阶（日志分割工具logrotate）

一、工具介绍 logrotate是一个linux系统日志的管理工具。可以对单个日志文件或者某个目录下的文件按时间/大小进行切割，压缩操作；指定日志保存数量；还可以在切割之

青旅半醒/ 2024年03月26日 18:11/ 0 赞/ 73 阅读

相关 php分析 nginx日志,Nginx Log日志统计分析常用命令

用shell实现统计nginx日志中出现次数最多的前k个ip? 答 awk '\{print $1\}' logfile | sort | uniq -c | sort -

落日映苍穹つ/ 2023年01月17日 10:52/ 0 赞/ 233 阅读

相关 Linux下mysql的命令_linux下mysql常用的一些命令

环境：Centos 7.3，MySQL 5.7 日志地址 /var/log/mysqld.log 配置文件地址 /etc/my.cnf 查看状态： ps -ef |

一时失言乱红尘/ 2022年11月05日 00:55/ 0 赞/ 229 阅读

相关 Linux logrotate 命令教程日志分割

Linux使用某些软件的时候会产生日志文件，而这些软件本身对日志不进行分割或者压缩处理，久而久之会导致日志文件异常巨大，影响机器性能，配置不高的VPS上尤为严重。而logrot

桃扇骨/ 2022年09月04日 11:47/ 0 赞/ 273 阅读

相关 linux下一些常用命令

1：mysql 操作 1.启动：/etc/init.d/mysqld start 2.停止：/etc/init.d/mysqld stop 3.重启：/etc/ini

骑猪看日落/ 2022年08月10日 12:49/ 0 赞/ 255 阅读

相关 linux下一些命令

1. Linux命令 2. :20 跳转到20行 3. :/abc 往后查找abc 4. :?abc 往前查找abc 5.

谁借莪１个温暖的怀抱￠/ 2022年07月15日 11:18/ 0 赞/ 175 阅读

相关 Linux下的一些命令及Vim编辑器的一些命令

一些linux命令 sudo apt install 安装xx包 ls命令及参数 · ls 查看当前目录下的的所有内容 ls

喜欢ヅ旅行/ 2022年06月01日 04:45/ 0 赞/ 272 阅读

相关 Linux下命令分析，分割，日志统计的一些工具

awk 处理行列 cat /etc/passwd | cut -d: -f1 cat /etc/passwd | awk -F: '{print $1}'

「爱情、让人受尽委屈。」/ 2022年02月18日 15:29/ 0 赞/ 201 阅读

相关 Nginx Log日志统计分析常用命令

1. 统计IP访问量（独立ip访问数量） awk '{print $1}' access.log | sort -n | uniq | wc -l 1. 查看某

旧城等待，/ 2022年01月16日 00:03/ 0 赞/ 274 阅读