了解 sort 和 uniq 命令 (包括 uniq 的 -u 和 -d 选项)

柔光的暖阳◎ 2022-02-25 11:04 178阅读 0赞

cat a b | sort | uniq > c   # c is a union b 并集
     
    cat a b | sort | uniq -d > c   # c is a intersect b 交集
     
    cat a b b | sort | uniq -u > c   # c is set difference a - b 差集
    查看a b文件内容
    [root@hadoop luanshoushen]# cat a b
    LUAN
    SHOU
    SHEN
    LUAN
    SHOU
    SHEN
    1111
    2222
    3333
    LUAN
    KEVIN
    1234
    1111
    使用-c
    cat a b |sort|uniq -c
          2 1111
          1 1234
          1 2222
          1 3333
          1 KEVIN
          3 LUAN
          2 SHEN
          2 SHOU
    cat a b |sort|uniq //并集
    1111
    1234
    2222
    3333
    KEVIN
    LUAN
    SHEN
    SHOU
     cat a b |sort|uniq -d //交集
    1111
    LUAN
    SHEN
    SHOU
     cat a b |sort|uniq  -u //差集
    1234
    2222
    3333
    KEVIN
    
    --查找当前目录下比较大的文件，并且按文件第一列排序
    du ./* |sort -t " " -n -k1|awk -F' ' '{if($1>100000) print $0}' 
    sort -t ' '  -n -k1  -r 
     -t, --field-separator=SEP  use SEP instead of non-blank to blank transition
     -k, --key=POS1[,POS2]     start a key at POS1 (origin 1), end it at POS2
                                (default end of line)
     -r, --reverse               reverse the result of comparisons

发表评论取消回复

表情：

评论列表（有 0 条评论，178人围观）

还没有评论，来说两句吧...

相关阅读

相关 Linux命令: awk/uniq/sort

awk 强大的文本分析工具 https://www.runoob.com/linux/linux-comm-awk.html 每行按空格或TAB分割，输出

朱雀/ 2023年05月29日 05:05/ 0 赞/ 243 阅读

相关 [Linux] grep、sort、uniq、tr、paste

@grep命令 grep \[-ivnc\] '需要匹配的字符' 文件名 \-i不区分大小写 \-c统计包含匹配的行数 \-n输出行号 \-v反向匹配

r囧r小猫/ 2022年12月30日 15:51/ 0 赞/ 109 阅读

相关 linux sort,uniq,cut,wc命令详解收录

sort sort 命令对 File 参数指定的文件中的行排序，并将结果写到标准输出。如果 File 参数指定多个文件，那么 sort 命令将这些文件连接起来，并当作一个

深碍√TFBOYSˉ_/ 2022年10月02日 02:50/ 0 赞/ 149 阅读

相关 shell之sort和uniq 及wc 的使用

文本排序：sort -n：数值排序 -r: 降序 -t: 字段分隔符 -k: 以哪个字段为关键字进行排序

谁践踏了优雅/ 2022年05月25日 23:04/ 0 赞/ 104 阅读

相关了解 sort 和 uniq 命令 (包括 uniq 的 -u 和 -d 选项)

cat a b | sort | uniq > c c is a union b 并集 cat a b | sort | uniq -d >

柔光的暖阳◎/ 2022年02月25日 11:04/ 0 赞/ 179 阅读

相关 Linux系统之shell命令（diff，cut，sort，uniq）

[Shell 脚本常用命令][Shell] Shell 是一个用 C 语言编写的程序，它是用户使用 Linux 的桥梁。Shell 既是一种命令语言，又是一种程序设计语言

梦里梦外;/ 2022年01月20日 23:05/ 0 赞/ 494 阅读

相关 Shell命令-文件及内容处理之sort、uniq

文件及内容处理 - sort、unip 1. sort：对文件的文本内容排序 > sort命令的功能说明 > > > `sort` 命令用于将文本文件内容加以排序

亦凉/ 2022年01月17日 13:13/ 0 赞/ 181 阅读

相关 Linux基础：uniq命令总结

> 本文只总结一些常用的用法，更详细的说明见`man uniq`和 `uniq --help`。 uniq命令 uniq命令主要用于去重。 > 需要注意的是，不相邻的

素颜马尾好姑娘i/ 2021年12月03日 07:43/ 0 赞/ 196 阅读

相关 sort -u和uniq区别

1、uniq所谓的重复是连续出现的相同记录。而sort -u是全局的。 $ cat test jason jason jason fffff jason 1：sor

迈不过友情╰/ 2021年06月24日 15:56/ 0 赞/ 385 阅读

相关 Linux uniq 命令

Linux uniq 命令用于检查及删除文本文件中重复出现的行列，一般与 sort 命令结合使用。 uniq 可检查文本文件中重复出现的行列。

灰太狼/ 2020年05月26日 14:04/ 0 赞/ 529 阅读