良许Linux教程网 Linux命令大全 Linux常用命令—uniq命令

Linux常用命令—uniq命令

Linux常用命令uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用,uniq 可检查文本文件中重复出现的行列,下面良许教程网为大家分享一下Linux常用命令—uniq命令具体使用方法。

Linux常用命令—uniq命令

uniq

显示或忽略重复的行。

概要

 uniq [OPTION]... [INPUT [OUTPUT]]

主要用途

  • 将输入文件(或标准输入)中邻近的重复行写入到输出文件(或标准输出)中。

  • 当没有选项时,邻近的重复行将合并为一个。

选项

 -c, --count                在每行开头增加重复次数。
 -d, --repeated             所有邻近的重复行只被打印一次。
 -D                         所有邻近的重复行将全部打印。
 --all-repeated[=METHOD]    类似于 -D,但允许每组之间以空行分割。METHOD取值范围{none(默认),prepend,separate}。
 -f, --skip-fields=N        跳过对前N个列的比较。
 --group[=METHOD]           显示所有行,允许每组之间以空行分割。METHOD取值范围:{separate(默认),prepend,append,both}。
 -i, --ignore-case          忽略大小写的差异。
 -s, --skip-chars=N         跳过对前N个字符的比较。
 -u, --unique               只打印非邻近的重复行。
 -z, --zero-terminated      设置行终止符为NUL(空),而不是换行符。
 -w, --check-chars=N        只对每行前N个字符进行比较。
 --help                     显示帮助信息并退出。
 --version                  显示版本信息并退出。

参数

INPUT(可选):输入文件,不提供时为标准输入。

OUTPUT(可选):输出文件,不提供时为标准输出。

返回值

返回0表示成功,返回非0值表示失败。

例子

注意:命令2和命令3结果一样,命令1仅作了相邻行的去重。

 uniq file.txt
 sort file.txt | uniq
 sort -u file.txt

只显示单一行,区别在于是否执行排序:

 uniq -u file.txt
 sort file.txt | uniq -u

统计各行在文件中出现的次数:

 sort file.txt | uniq -c

在文件中找出重复的行:

 sort file.txt | uniq -d

注意

  1. uniq只检测邻近的行是否重复,sort -u将输入文件先排序然后再处理重复行。

  2. 该命令是GNU coreutils包中的命令,相关的帮助信息请查看man -s 1 uniqinfo coreutils 'uniq invocation'

总结

至此关于Linux常用命令uniq命令的使用方法分享结束,大家如果对uniq命令的使用方法还有问题可以通过评论区将问题提交我们。

以上就是良许教程网为各位朋友分享的Linux系统相关内容。想要了解更多Linux相关知识记得关注公众号“良许Linux”,或扫描下方二维码进行关注,更多干货等着你!

本文由 良许Linux教程网 发布,可自由转载、引用,但需署名作者且注明文章出处。如转载至微信公众号,请在文末添加作者公众号二维码。
良许

作者: 良许

良许,世界500强企业Linux开发工程师,公众号【良许Linux】的作者,全网拥有超30W粉丝。个人标签:创业者,CSDN学院讲师,副业达人,流量玩家,摄影爱好者。
上一篇
下一篇

发表评论

联系我们

联系我们

公众号:良许Linux

在线咨询: QQ交谈

邮箱: yychuyu@163.com

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部