Linux中怎么使用uniq命令
这篇文章主要讲解了“Linux中怎么使用uniq命令”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Linux中怎么使用uniq命令”吧!
uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用,uniq 可检查文本文件中重复出现的行列。
首先,让我们创建一个带有一些重复行的文件:
viostechnix.txtwelcometoostechnixwelcometoostechnixLinusisthecreatorofLinux.LinuxissecurebydefaultLinusisthecreatorofLinux.Top500supercomputersarepoweredbyLinux
正如你在上面的文件中看到的,我们有一些重复的行(第一行和第二行,第三行和第五行是重复的)。
1、 使用 uniq 命令删除文件中的连续重复行如果你在不使用任何参数的情况下使用 uniq 命令,它将删除所有连续的重复行,只显示唯一的行。
uniqostechnix.txt
示例输出:
如你所见, uniq 命令删除了给定文件中的所有连续重复行。你可能还注意到,上面的输出仍然有第二行和第四行重复了。这是因为 uniq 命令只有在相邻的情况下才会删除重复的行,当然,我们也可以删除非连续的重复行。请看下面的第二个例子。
2、 删除所有重复的行sortostechnix.txt|uniq
示例输出:
看到了吗?没有重复的行。换句话说,上面的命令将显示在 ostechnix.txt 中只出现一次的行。我们使用 sort 命令与 uniq 命令结合,因为,就像我提到的,除非重复行是相邻的,否则 uniq 不会删除它们。
3、 只显示文件中唯一的一行为了只显示文件中唯一的一行,可以这样做:
sortostechnix.txt|uniq-u
示例输出:
LinuxissecurebydefaultTop500supercomputersarepoweredbyLinux
如你所见,在给定的文件中只有两行是唯一的。
4、 只显示重复的行同样的,我们也可以显示文件中重复的行,就像下面这样:
sortostechnix.txt|uniq-d
示例输出:
LinusisthecreatorofLinux.welcometoostechnix
这两行在 ostechnix.txt 文件中是重复的行。请注意 -d(小写 d) 将会只打印重复的行,每组显示一个。打印所有重复的行,使用 -D(大写 D),如下所示:
sortostechnix.txt|uniq-D
在下面的截图中看两个选项的区别:
5、 显示文件中每一行的出现次数由于某种原因,你可能想要检查给定文件中每一行重复出现的次数。要做到这一点,使用 -c 选项,如下所示:
sortostechnix.txt|uniq-c
示例输出:
LinusisthecreatorofLinux.LinuxissecurebydefaultTop500supercomputersarepoweredbyLinuxwelcometoostechnix
我们还可以按照每一行的出现次数进行排序,然后显示,如下所示:
sortostechnix.txt|uniq-c|sort-nr
示例输出:
welcometoostechnixLinusisthecreatorofLinux.Top500supercomputersarepoweredbyLinuxLinuxissecurebydefault6、 将比较限制为 N 个字符
我们可以使用 -w 选项来限制对文件中特定数量字符的比较。例如,让我们比较文件中的前四个字符,并显示重复行,如下所示:
uniq-d-w4ostechnix.txt7、 忽略比较指定的 N 个字符
像对文件中行的前 N 个字符进行限制比较一样,我们也可以使用 -s 选项来忽略比较前 N 个字符。
下面的命令将忽略在文件中每行的前四个字符进行比较:
uniq-d-s4ostechnix.txt
为了忽略比较前 N 个字段(LCTT 译注:即前几列)而不是字符,在上面的命令中使用 -f 选项。
欲了解更多详情,请参考帮助部分:
uniq--help
也可以使用 man 命令查看:
manuniq
感谢各位的阅读,以上就是“Linux中怎么使用uniq命令”的内容了,经过本文的学习后,相信大家对Linux中怎么使用uniq命令这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是亿速云,小编将为大家推送更多相关知识点的文章,欢迎关注!
声明:本站所有文章资源内容,如无特殊说明或标注,均为采集网络资源。如若本站内容侵犯了原著者的合法权益,可联系本站删除。