简介
uniq 命令用于检查及删除文本文件中重复出现的行列。注意: uniq 只能检测相邻的重复行，因此通常需要先排序（使用 sort）。
语法
1 | uniq [选项] [输入文件] [输出文件] |
常用选项
| 选项 | 说明 |
|---|---|
-c 或 --count | 在每列旁边显示该行重复出现的次数 |
-d 或 --repeated | 仅显示重复出现的行列 |
-u 或 --unique | 仅显示出现一次的行列 |
-f <栏位> 或 --skip-fields=<栏位> | 忽略比较指定的栏位 |
-s <字符位置> 或 --skip-chars=<字符位置> | 忽略比较指定的字符 |
-w <字符位置> 或 --check-chars=<字符位置> | 指定要比较的字符 |
--help | 显示帮助信息 |
--version | 显示版本信息 |
参数说明
[输入文件]：指定已排序好的文本文件。如果不指定此项，则从标准输入读取数据[输出文件]：指定输出的文件。如果不指定此选项，则将内容显示到标准输出设备（终端）
本博客所有文章除特别声明外，均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 小五的个人杂货铺！
微信- 支付宝
相关推荐
2026-03-23
Shell (Bash) 学习记录
Shell 脚本脚本以 #!/bin/bash 开头。 输出 Hello World ! 到 /usr/test.txt（如果输入文本中带引号和 $，需要用 \ 进行转义）： 12#!/bin/bashecho "\"Hello World\" !" > /usr/test.txt 删除日志的一份 Shell 脚本，当前路径在 s 下，然后要删除 a、b、c 下的 log： 1/s/a /s/b /s/c 12345678910111213141516171819202122232425#!/bin/bash# 定义变量folders# ()是数组folders=(a,b,c)# 使用${folders}引用变量# 逻辑循环for file in ${folders[*]}do cd ${file} for subfile in ./* do # test -d:检测是否是文件 (shell-test命令参考: https://www.cnblo...
2026-03-23
awk 命令用法
基本语法awk 的基本语法格式为 awk '{[pattern] action}' {filenames}，注意只能使用单引号。 12# 每行按空格或 TAB 分割，输出文本中的第 1、4 列awk '{print $1,$4}' log.txt 常用选项-F 指定分隔符-F 选项用于指定字段分隔符，相当于内置变量 FS。 12# 使用逗号分割awk -F, '{print $1,$2}' log.txt -v 设置变量1awk -va=1 '{print $1,$1+a}' log.txt -f 使用脚本文件1awk -f cal.awk log.txt 常用技巧取倒数第 N 列使用 $(NF-(n-1)) 可以取倒数第 N 列。其中 $NF 表示倒数第 1 列，$(NF-1) 表示倒数第 2 列。 12# 取第 2 列、倒数第 1、倒数第 2、倒数第 4 列（以冒号为分隔符）awk -F&quo...
2026-03-23
crontab 的用法及纠错
在线工具crontab 在线网站: https://tooltt.com/crontab/c/56.html 在线 cron 表达式生成: https://cron.qqe2.com/ 安装 cronCentOS 默认自带，如需安装： 1234yum -y install vixie-cron# 验证info crontab 基本使用命令12345678crontab -u # 设定某个用户的 cron 服务，一般 root 用户在执行这个命令的时候需要此参数crontab -l # 列出某个用户 cron 服务的详细内容crontab -r # 删除某个用户的 cron 服务crontab -e # 编辑某个用户的 cron 服务# 示例：crontab -u root -l # root 查看自己的 cron 设置crontab -u fred -r # root 想删除 fred 的 cron 设置 查看日志12345# 查看执行日志tail -f /var/log/cron# 查看任务执行日志（排错用，root 替换为对应用户名）t...