shell之常用小工具（sort、uniq、tr、cut）

最新推荐文章于 2025-06-11 18:12:04 发布
原创 最新推荐文章于 2025-06-11 18:12:04 发布 · 1k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#运维 #linux

本文详细介绍了Linux shell中四个常用的命令工具：sort用于排序，uniq用于去除重复行，tr用于字符转换或删除，cut用于列截取。通过实例演示了各工具的基本用法及其在实际操作中的应用，如指定分隔符排序、统计文件内容出现次数等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

目录

一、sort 排序

1、格式

2、常用选项

3、sort 例子

1、不加任何选项 如：sort /etc/passwd

2、 去重 （sort -u）

3、 指定分隔符（-t），指定排序的列（-k），升序排列

4、指定分隔符，指定排序的列，降序排列（-r）

 二、去重工具 （uniq）

1、格式及功能

2、常用选项

3、uniq 举例

1、uniq 不加任何选项

2、统计文件内容出现的次数 uniq -c

3、 uniq -u 只显示出现1次的行

4、uniq -d 只显示有连续重复的行

5、 统计历史登录过系统的用户

三、tr  转换或删除文件中的字符

1、tr功能及格式

2、tr 的常用选项

3、tr 例子

四、cut 列截取工具（切片）

1、cut概述

2、常用选项

3、cut 例子

4、paste 粘贴

五、找出访问量最高的10个ip

六、总结

一、sort 排序

1、格式

sort 选项 文件

2、常用选项

选项 功能
-t 指定分隔符，默认使用 [Tab] 键或空格分隔
-k 指定排序区域，哪个区间排序
-n 按照数字进行排序，默认是以字母形式排序
-r 反向排序，默认升序，
-u 等同于uniq，表示相同的数据仅显示一行，注意：如果行尾有空格去重就不成功
-o 将排序的结果转存至指定文件

3、sort 例子

1、不加任何选项 如：sort /etc/passwd

#默认以字符排序（a b c d），如果第一个字母相同，比较第二个，以此类推

2、 去重 （sort -u）

去掉重复的内容并按顺序进行排序

3、 指定分隔符（-t），指定排序的列（-k），升序排列

以第3列数字进行排序

4、指定分隔符，指定排序的列，降序排列（-r）

 二、去重工具 （uniq）

1、格式及功能

uniq 选项 文件路径

主要用于去除连续的重复行

2、常用选项

最低0.47元/天 解锁文章

200万优质内容无限畅学
芒地狠
关注
常用Shell脚本小工具
saviour的博客
09-18 360
日期循环 #!/bin/sh end="20201010" st="20200901" while [ $st -le $end ]; do st_format=`date -d ${st} +%F` echo $st_format # 逻辑代码 echo $st let st=`date -d "${st} + 1days" +%Y%m%d` done
一款非常好用的shell工具
10-27
一款非常好用的shell工具，通过ssh连接远程服务器，也可以直接通过该shell工具实现linux系统对文件进行上传与下载，而不需要在linux上面配置tfp
shell之常用工具（cut、sort、uniq、tr）
种一颗树最好的时间是十年前，其次是现在！
07-11 2049
cut命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。如果不指定file 参数，cut命令将读取标准输入。必须指定 -b(字节) 、-c(字符) 或 -f(第几列) 标志之一。字符和字节的区别 选项 功能 -b 按字节截取 -c 按字符截取，常用于中文 -d 指定以什么为分割符截取，默认为制表符 -f 通常和-d一起使用（表示截取第几列） 3、案例演示 案例1：截取/etc/passwd 文件的中root用户的第7列（-d -f）案例2：
Shell编程小工具
最新发布
a1464498695的博客
06-11 1535
本文主要接上一篇的shell基础篇，记录和介绍一些常见的shell工具.文中包含具体用法示例和运维场景应用，如分析登录失败IP、日志合并等，并特别强调sort+uniq组合实现全局去重的技巧。所有工具操作均不影响原文件，需配合重定向保存结果。
Shell工具
mrye的博客
04-02 338
1cut（剪） 基本用法：cut [选项参数] filename 选项参数 功能 -f 列号，提取第几列 -d 分隔符，按照指定分隔符分割列 案例：选取系统PATH变量值，第2个“：”开始后的所有路径： [yege@hadoop101 datas]$ echo...
shell常用工具
潇潇雨歇
06-14 2491
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、sort工具1.1语法格式1.2常用选项1.3工具用法实例二、unig工具2.1命令格式2.2常用选项1.引入库2.读入数据总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、sort工具 依据不同的数据类型进行排序 字符排序 数字排序 1.1语法
shell-------sort、uniq、tr、cut和数组排序最最新方法
认真学习
05-24 890
目录一、sort命令----以行为单位对文件内容进行排序，也可以根据不同的数据类型来排序二、uniq命令----用于报告或者忽略文件中连续的重复行，常与sort命令结合使用三、tr命令----常用来对来自标准输入的字符进行替换、压缩和删除==参数==删除空行四、cut命令----显示行中的指定部分，删除文件中指定字段五、数组排序（新） 一、sort命令----以行为单位对文件内容进行排序，也可以根据不同的数据类型来排序 以行为单位对文件内容进行排序，也可以根据不同的数据类型来排序 语法格式 sort [选项
shell脚本——常见的管道命令（sort、uniq、tr、cut）
橘子的博客
04-19 2481
文章目录一、sort命令1、格式2、常用选项二、uniq命令1、格式2、常用选项三、tr命令1、格式2、常用选项3、参数四、cut命令1、格式2、常用选项 一、sort命令 1、格式 sort命令可针对文本文件的内容，以行为单位来排序。 格式： sort [选项] 参数 cat file | sort 选项 2、常用选项 选项 说明 -f 忽略大小写，会将小写字母都转换为大写字母来进行比较 -b 忽略每行前面的空格 -n 按照数字进行排序 -r 反向排序 -u 等同于u
正则表达式 awk sed grep 及小工具cun sort uniq tr paste
m0_62948770的博客
08-04 2060
正则表达式
shell中常用的基础命令(diff、patch、cut、sort、uniq、tr、test、&& ||)
S_K15的博客
11-22 854
shell常用的基础命令一、diff 一、diff 作用：比较不同 用法： diff [options] file|dir file|dir ##比较文件与文件的不同，或者目录与目录的不同 输出信息： [num1,num2] [a|c|d] [num3,num4] 其意为第一个文件中的行添加、更改、删除相应内容即可与第二个文件一致 num1,num2 第一个文件中的行 a 添加 c 更改 d 删除 < 第一个文件中的内容 > 第二个文件中的内容
(一）shell编程之小工具
weixin_45787652的博客
11-01 515
shell编程之小工具 # 本节目标 了解shell中的通配符 熟悉grep、cut、sort等小工具和shell中的通配符的使用 #一、文本处理工具 ##1. grep工具 grep是**行**过滤工具；用于根据关键字进行行过滤 语法和选项 语法： # grep [选项] '关键字' 文件名 常见选项： OPTIONS: -i: 不区分大小写 -v: 查找不包含指定内容的行,反向选择 -w: 按单词搜索 -o: 打印匹配关键字 -c: 统计匹配到的行数
好用的shell操作工具
01-30
给大家分享一个shell操作工具，支持很全面，谁用谁知道
shell之常用工具
joker_Kang的博客
08-18 2657
可以修改对应的字符，按照字符对应一一修改，如果有重复的字符，它会按照最后一个字符对应的修改字符进行替换，如果对应的字符不够时，它会将修改的最后一个字符进替换。注意： 是连续的行。还可以选择按照哪一列进行排序，需要先定义分割符（-t），然后根据分割符去选取对应的列（-k），最后进行排序。还可以进行去重（-s），但是去重的字符必须是连续在一起的两个字符（会保留其中一个），不然无法去重成功。可以按照字符（-c）按照字节（-b）或者根据分割符（-d）来选取要截取的列（-f）。
shell小脚本工具合集
weixin_34194087的博客
12-06 188
1.将指定内容写入文件 echo "hello world" &gt; file.txt echo "hello world" &gt;&gt; file.txt //上面那个是覆盖,这个是追加 2.读取文件内容 写法一： ---------------------------------------------------------------------------- #!/bin/b...
shell——工具
zhuboke3344的博客
07-18 741
sort 1、原则：sort以文件一行为一个单位，依次按ASCII码值从首字符向后进行比较，最后将他们按升序输出。                 sort默认的排序方式为升序 2、常见选项 -r：按降序输出 -u：在输出行去除重复行 -n：以数值来进行排序 -t：设定间隔符 -k：在设定间隔符后，用来指定列数进行排序 -f：忽略大小写进行比较 -c：检查文件是否已排好序，若没...
SHELL工具推荐
热门推荐
qq_42674140的博客
11-08 1万+
随着个人使用还会继续更新，目前就只有两款。 1.Xshell 业界较常见的一款经典的shell命令行软件。 界面比较简洁，命令好像全是单色。有开源的免费版本可以下载。 2.MobaXterm 界面易读性高很多，对于warning、fail、no等告警会有红色提示。不同类别的数据也会有颜色区分，视觉真心很友好。 但是ftp其慢，大约是win10系统cmd命令行的1/3的速度，而且容易死机无响应。 ...
shell学习☞shell工具
Rewon_duang的博客
11-22 1444
一、shell工具 1、cut[选项参数] filename：从文件的每一行剪切字解、字符和字段并将这些字节、字符和字段输 选项参数： -f：列号，提取第几列 -d：分隔符（默认是制表符），按照指定的分隔符分割列 ...
Linux shell字符处理：管道、grep、sort和uniq实战
这些工具在shell环境下用于高效地处理和分析文本数据。" 在Linux环境中，字符处理是日常工作中不可或缺的一部分，尤其是在shell脚本编程中。以下是对各个知识点的详细说明： 1. **管道(Pipeline)** 管道是Linux ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值