运维人员不仅要熟悉操作系统、服务器、网络等只是,甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。这里我将结合自身工作,持续给大家更新运维工作所需要接触到的知识点,希望大家喜欢。
今天我们要讲的是 Sed 命令。
一、简介
Sed 全名为 Stream Editor(流编辑器),是 Linux 下一款功能强大的非交互流式文本编辑器,可以对文本文件进行增、删、改、查等操作,支持按行、按字段、按正则匹配文本内容,灵活方便,特别适合于大文件的编辑。它主要依赖于正则表达式。本文主要介绍 sed 的一些基本用法和使用实例。
1.1. Sed 的工作流程
- Read:SED 从输入流(文件、管道或标准输入)中读取一行并将其存储在其内部缓冲区中,称为pattern buffer.
- Execute:所有 SED 命令都按顺序应用于模式缓冲区。默认情况下,除非指定了行寻址,否则 SED 命令将应用于所有行(全局)。
- Display:将(修改后的)内容发送到输出流。发送数据后,模式缓冲区将为空。
- 重复上述过程,直到文件用完。
二、基本用法
$ sed [选项] command [文件]
参数说明:
参数 | 说明 | 示例 |
-r, -E | 使用扩展正则表达式 | sed -E 's/[0-9]+//g' input-file |
-e | 执行多个 sed 命令 | sed -e 'command1' -e 'command2' input-file |
-f | 执行 sed 脚本文件 | sed -f script.sed config.conf |
-i | 直接对内容进行修改,不加-i时默认只是预览,不会对文件做实际修改 | sed -i 's/On/Off/' php.ini |
-n | 取消默认输出,sed默认会输出所有文本内容,使用-n参数后只显示处理过的行 | sed -n '3 p' config.conf |
2.1. Sed 中的编辑命令
命令 | 示例 | 描述 |
p | sed -n '1,4 p' input.txt | 打印第 1-4 行 |
p | sed -n -e '1,4 p' -e '6,7 p' input.txt | 打印第 1-4 行和第 6-7 行 |
d | sed '1,4 d' input.txt | 打印除 1-4 之外的行 |
w | sed -n '1,4 w output.txt' input.txt | 将模式空间写入文件 |
a | sed '2 a new-line' input.txt | 在后面追加一行 |
i | sed '2 i new-line' input.txt | 在前面插入行 |
2.2. Sed 中的循环命令
参数 | 描述 |
b label | 分支到标签(用于循环) |
t label | 仅在成功替换时分支到标签(用于循环) |
:label | b 和 t 命令的标签(用于循环) |
N | 将下一行追加到模式空间 |
P | 多行打印第一行 |
D | 删除多行中的第一行 |
2.3. Sed 中的杂项标志
参数 | 描述 |
/ | ^ @ ! # | 替换分隔符可以是任何字符 |
& | 获取匹配的模式 |
( ) \1 \2 \3 | 使用 ( 和 ) 进行分组 使用 \1、\2 替换来引用组 |
2.4. Sed 中替换的结尾标志
$ sed 's/old/new/[flags]' [input-file]
上述 [flag] 的参数释义:
参数 | 描述 |
g | 全球替代 |
1,2... | 替换第 n 次出现 |
p | 仅打印替换的行 |
w | 仅将替换的行写入文件 |
I | 搜索时忽略大小写 |
e | 在命令行中替换并执行 |
三、Sed 实例
3.1. 替换文本
$ sed 's/old/new/g' file.txt # 替换所有出现的字符串
$ sed 's/old/new/2' file.txt # 仅替换第 n 次出现的字符串
$ sed '5 s/old/new/' file.txt # 仅在第 5 行替换替换字符串
$ sed '/hello/s/world/universe/' file.txt # 将“world”替换为“universe”,但前提是该行以“hello”开头
$ sed 's/\\$//' file.txt # 从每行的末尾删除“\”
$ sed 's/^\s*//' file.txt # 删除每行开头的所有空格
$ sed 's/#.*$//' file.txt # 删除评论。 即使是那些在行尾的
3.2. 搜索文本
$ sed -n '/hello/p' file.txt # 搜索字符串并仅打印匹配的行
$ sed -n '/hello/Ip' file.txt # 不区分大小写的搜索
$ sed -n '/hello/!p' file.txt # 搜索字符串,但仅输出不匹配的行
3.3. 追加行
$ sed '2a Text after line 2' file.txt # 在第 2 行之后追加一行
$ sed '$a THE END!' file.txt # 在文件末尾追加一行
$ sed '3~3a Some text' file.txt # 从第 3 行开始,每 3 行后追加一行
$ sed '5i line number five' file.txt # 在第 5 行之前插入文本
$ sed '/hello/i Example: ' file.txt # 在包含“hello”的每一行之前插入“Example:”
3.4. 删除行
$ sed '5,7d' file.txt # 删除文件中的第 5-7 行
$ sed '3~2d' file.txt # 删除从第 3 行开始的每 2 行
$ sed '$d' file.txt # 删除文件的最后一行
$ sed '/^Hello/d' file.txt # 删除以“Hello”开头的行
$ sed '/^$/d' file.txt # 删除所有空行
$ sed '/^#/d' file.txt # 删除以“#”开头的行
3.5. 文件格式调整
$ sed G # 双倍行距
$ sed '/^$/d;G' # 删除所有空行和双空格
$ sed 'G;G' # 三倍空间文件
$ sed 'n;d' # 撤消双倍行距
$ sed '/regex/{x;p;x;}' # 在匹配“正则表达式”的行上方插入一个空行
$ sed '/regex/G' # 在匹配“正则表达式”的行下方插入一个空行
$ sed '/regex/{x;p;x;G;}' # 在匹配“正则表达式”的行周围插入一个空行
3.6. Sed 编号
$ sed = file.txt | sed 'N;s/\n/\t/' # 文件的数字行(简单的左对齐)
$ sed = file.txt | sed 'N; s/^/ /; s/ *\(.\{6,\}\)\n/\1 /' # 文件的数字行(数字在左,右对齐)
$ sed '/./=' file.txt | sed '/./N; s/\n/ /' # 文件的数字行,但如果行不为空,则仅打印数字
$ sed -n '$=' # 计算行数(模拟“wc -l”)
注意:在 sed 命令里引用 shell 变量要使用双引号。