【基础】每天掌握一个Linux命令

【基础】每天掌握一个Linux命令 - sed

你是否曾为在Linux系统中处理文本而烦恼？想要批量替换文件中的字符串，或是提取特定行、删除不需要的内容？sed命令就能轻松解决这些问题。它是一种流编辑器，能够对文本进行高效的处理和转换，让你的文本操作变得快捷又简单。

sed命令工具介绍

工具概述

sed（Stream Editor）是一种流编辑器，用于对文本进行过滤和转换。它是Linux和Unix系统中常用的文本处理工具，可以对输入的文本进行逐行处理，执行如替换、删除、插入等操作，而无需人工干预。sed通常用于自动化脚本、文本处理和数据转换等场景。

安装方式

sed是大多数Linux发行版的标准组件，通常已经预装。如果你的系统上没有安装，可以使用包管理器进行安装：

Debian/Ubuntu：sudo apt-get install sed
CentOS/RHEL：sudo yum install sed
macOS：sed已预装，但如果需要GNU版本（功能更强大），可以使用Homebrew安装：brew install gnu-sed

核心功能

功能	描述
替换文本	使用`s`命令替换匹配的文本
删除行	使用`d`命令删除匹配的行
插入行	使用`i`或`a`命令在指定位置插入行
打印行	使用`p`命令打印匹配的行
编辑文件	直接编辑文件内容（使用`-i`选项）
多行处理	支持处理多行文本
正则表达式	使用正则表达式进行模式匹配

基础用法

sed的基本语法格式：

sed [选项] '命令' 文件

以下是一些常用的选项及其说明：

选项	描述
`-n`	只打印经过sed处理的行，而不打印未处理的行
`-e`	允许在同一命令行中执行多个sed命令
`-f 脚本文件`	从脚本文件中读取sed命令
`-i`	直接修改输入文件，而不是输出到标准输出
`-r`	使用扩展正则表达式（默认使用基本正则表达式）
`-i.bak`	在修改文件前先创建备份文件（扩展名为.bak）

进阶操作

替换操作

替换命令的基本格式：

sed 's/原字符串/替换字符串/标志' 文件

常用标志：

g：全局替换（默认只替换每行的第一个匹配项）
数字：替换第几个匹配项
p：打印替换后的行
w 文件名：将替换后的行写入文件

示例：

# 将文件中的所有"apple"替换为"orange"
sed 's/apple/orange/g' fruits.txt

# 只替换每行的第二个"apple"为"orange"
sed 's/apple/orange/2' fruits.txt

# 替换并打印修改后的行（需配合-n选项）
sed -n 's/apple/orange/gp' fruits.txt

# 将替换结果保存到新文件
sed 's/apple/orange/g' fruits.txt > new_fruits.txt

# 直接修改原文件
sed -i 's/apple/orange/g' fruits.txt

# 修改前创建备份文件
sed -i.bak 's/apple/orange/g' fruits.txt

删除操作

删除命令的基本格式：

sed '行号/模式d' 文件

示例：

# 删除第5行
sed '5d' data.txt

# 删除第2到第8行
sed '2,8d' data.txt

# 删除包含"error"的行
sed '/error/d' log.txt

# 删除空行
sed '/^$/d' text.txt

# 删除所有以#开头的行（注释行）
sed '/^#/d' config.ini

插入和追加操作

插入命令的基本格式：

sed '行号i\插入的文本' 文件

追加命令的基本格式：

sed '行号a\追加的文本' 文件

示例：

# 在第3行前插入一行文本
sed '3i\这是插入的新行' file.txt

# 在文件末尾追加一行文本
sed '$a\这是追加到末尾的行' file.txt

# 在包含"section"的行后追加文本
sed '/section/a\这是追加的内容' config.ini

打印操作

打印命令的基本格式：

sed -n '行号/模式p' 文件

示例：

# 打印第10行
sed -n '10p' large_file.txt

# 打印包含"keyword"的行
sed -n '/keyword/p' data.txt

# 打印第5行到第15行
sed -n '5,15p' file.txt

# 打印所有以"INFO"开头的行
sed -n '/^INFO/p' log.txt

实战案例

面试题案例

题目：如何使用sed命令提取出/etc/passwd文件中所有用户的用户名？

解答：

sed 's/:.*//' /etc/passwd

解释：使用替换命令s将每行中第一个冒号及其后面的所有内容替换为空，从而只保留用户名。

题目：如何使用sed命令统计一个文件中包含特定单词的行数？

解答：

sed -n '/特定单词/=' filename | wc -l

解释：/特定单词/=命令会打印出包含"特定单词"的行的行号，然后通过wc -l统计行号的数量，即得到包含特定单词的行数。

生产场景案例

场景1：批量修改配置文件中的IP地址

假设需要将所有配置文件中的旧IP地址192.168.1.1替换为新IP地址192.168.1.2：

sed -i 's/192.168.1.1/192.168.1.2/g' /etc/*.conf

场景2：删除日志文件中3天前的记录

假设日志文件中的时间格式为YYYY-MM-DD，需要删除3天前的记录：

# 获取3天前的日期
three_days_ago=$(date -d "3 days ago" +%Y-%m-%d)

# 删除早于该日期的记录
sed -i "/^$three_days_ago/d" app.log

场景3：提取HTML文件中的所有链接

sed -n 's/.*href="\([^"]*\)".*/\1/p' index.html

解释：使用正则表达式匹配所有href属性的值，并提取出来。

注意事项

备份文件：使用-i选项直接修改文件时，建议先备份文件，或使用-i.bak自动创建备份。
正则表达式差异：sed默认使用基本正则表达式（BRE），某些元字符（如+、?、|）需要转义。如果需要使用扩展正则表达式（ERE），可以使用-r选项。
多行处理：sed默认逐行处理文本，对于需要跨多行匹配的情况，需要使用特殊的多行模式（如N、D、P命令）。
特殊字符：如果替换文本中包含特殊字符（如/、&），需要进行转义。例如，将文本中的/替换为//：
```
sed 's/\//\/\/ /g' file.txt
```
性能考虑：对于大文件处理，sed通常比交互式编辑器（如vi）更高效，但对于复杂的处理任务，可能需要考虑使用awk或Python等更强大的工具。
测试命令：在使用sed修改重要文件之前，建议先不使用-i选项进行测试，确认命令的输出符合预期后再应用到实际文件。