当前所在位置: 首页 > 数码科技

uniq命令 - 去除文件中的重复内容行

2024-01-09 本站作者 【 字体:

uniq命令来自英文单词unique的缩写,中文译为独特的、唯一的,其功能是用于去除文件中的重复内容行。uni

uniq命令来自英文单词unique的缩写,中文译为独特的、唯一的,其功能是用于去除文件中的重复内容行。uniq命令能够去除掉文件中相邻的重复内容行,如果两端相同内容中间夹杂了其他文本行,则需要先使用sort命令进行排序后再去重复,这样保留下来的内容就都是唯一的了。

语法格式:uniq [参数] 文件名

常用参数:

-c 显示每行在文本中重复出现的次数
-d 设置每个重复纪录只出现一次
-D 显示所有相邻的重复行
-f 跳过对前N个列的比较
-i 忽略大小写
-s 跳过对前N个字符的比较
-u 仅显示没有重复的纪录
-w 仅对前N个字符进行比较
-z 设置终止符(默认为换行符)
--help 显示帮助信息
--version 显示版本信息

参考示例

对指定的文件进行去重操作:

[root@linuxcool ~]# cat File
test 30
test 30
test 30
Hello 95
Hello 95
Hello 95
Hello 95
Linux 85
Linux 85
[root@linuxcool ~]# uniq File
test 30
Hello 95
Linux 85

统计相同内容行在文件中重复出现的次数:

[root@linuxcool ~]# uniq -c File
3 test 30
4 Hello 95
2 Linux 85

仅显示指定文件中存在一摸一样内容行的信息:

[root@linuxcool ~]# uniq -d File
test 30
Hello 95
Linux 85

仅显示指定文件中没有存在一摸一样内容行的信息:

[root@linuxcool ~]# uniq -u File
[root@linuxcool ~]# 

与该功能相关的Linux命令:

  • rm命令 – 删除文件或目录
  • head命令 – 显示文件开头的内容
  • nano命令 – 字符终端文本编辑器
  • column命令 – 格式化内容为多列格式
  • rgrep命令 – 查找文件里符合条件的字符串
  • mkvcdfs命令 – 制作vcd文件
  • echo命令 – 输出字符串或提取后的变量值
  • cdrdao命令 – 刻录影像到光盘
  • ed命令 – 文本编辑
  • genisoimage命令 – 创建ISO镜像文件
阅读全文
id_1广告位-300*300
相关推荐

华为哪款手机玩游戏性能最好

华为哪款手机玩游戏性能最好
随着手机游戏的日益普及,智能手机的性能对于玩家来说变得尤为重要。作为领先的智能手...

扩音器什么品牌音质最好(哪个品牌的扩音器音质最佳?)

扩音器什么品牌音质最好(哪个品牌的扩音器音质最佳?)
在音响领域,扬声器作为一种重要的扩音设备,广泛应用于演讲、演出、会议等场合。市场...

铠侠固态硬盘怎么样(铠侠固态硬盘的表现如何?)

铠侠固态硬盘怎么样(铠侠固态硬盘的表现如何?)
固态硬盘作为一种计算机存储设备,近年来因其在性能和速度上的突破而受到广泛关注。作...

公认最静音的电风扇(国内10大电风扇品牌排行)

公认最静音的电风扇(国内10大电风扇品牌排行)
本文将对国内10大电风扇品牌进行排名,并深入分析各品牌的产品优势。公认最安静的电...

光信号闪红灯会自己好吗(路由器闪红灯是怎么回事)

光信号闪红灯会自己好吗(路由器闪红灯是怎么回事)
路由器断网是一件很头疼的事情。路由器闪烁红灯,无法连接到网络。路由器上闪烁的红灯...

联想k29为什么是神机(联想k29怎么样)

联想k29为什么是神机(联想k29怎么样)
在现代科技发展的浪潮中,智能手机已经成为人们生活的必需品。在众多手机品牌中,联想...

国内冰箱排名前十的品牌(质量最好的10大冰箱品牌)

国内冰箱排名前十的品牌(质量最好的10大冰箱品牌)
中国冰箱行业是全球最大的冰箱生产和消费市场之一。今天小编介绍2023年中国十大冰...

凯夫拉手机壳怎么样(凯夫拉手机壳的表现如何?)

凯夫拉手机壳怎么样(凯夫拉手机壳的表现如何?)
手机已经成为我们日常生活中不可或缺的一部分,因此保护手机免受损害成为一项重要的任...

键盘突然没反应是怎么回事

键盘突然没反应是怎么回事
随着现代科学技术的飞速发展,计算机已经成为我们生活中不可缺少的一部分。但是在电脑...

垃圾处理器有必要买吗(垃圾处理器值得买吗)

垃圾处理器有必要买吗(垃圾处理器值得买吗)
现代社会,科技的不断进步,消费方式的改变,让我们面临越来越多的选择。作为一种新型...