sed 是 Linux 环境下使用频率极高、也极容易让人学会但用不熟的命令之一。很多人对它的印象停留在sed s/旧文本/新文本/g这种替换用法但真到了要批量改配置、按范围删除日志、把多行文本重组成一行的时候又开始挠头。这篇博文不打算做成简单的手册式罗列而是按我实际工作中使用 sed 的经验把地址定界、模式空间、替换标志、多行处理这些核心机制拆开讲透再用一组可以抄作业的实战案例收尾。无论你是刚接触 Linux 命令行的新手还是已经写了几年脚本但偶尔被 sed 报错卡住的老手这篇内容都值得花二十分钟完整看一遍。1. 为什么非要用 sed 处理文本1.1 sed 到底是什么sed 的全称是 Stream Editor流编辑器。它的设计初衷是逐行读取、逐行处理、逐行输出整个操作像一条流水线不会一次性把整个文件加载进内存所以哪怕处理几个 GB 的日志文件也不至于把机器内存打满。这一点和 vim 这类交互式编辑器有本质区别vim 需要把文件内容读入编辑缓冲区再让你手动操作而 sed 适合在脚本里、命令行管道里对文本做自动化、批量化的改造。举一个最直观的场景你需要把部署配置文件里所有的8080端口改成9090同时只注释掉prod环境下的某一行数据库连接地址。用 vim 打开文件手动改当然可以但如果你是批量操作几十台服务器或者把步骤写进部署脚本那就必须用 sed 这类非交互式工具。sed 搭配-i参数可以原地修改文件配合find或grep还能做跨目录的批量替换这是交互式编辑器完全做不到的效率。1.2 sed 与 grep、awk 的分工边界很多初学者容易把 grep、sed、awk 混为一谈其实它们在文本处理链条上各司其职grep 负责筛从输入中挑出匹配的行它不会修改内容。sed 负责改按地址和规则对行的内容做增、删、改、替换。awk 负责算把每行拆成字段做格式化输出、统计求和、条件判断。在真实场景里这三者经常配合使用。比如先用 grep 找出包含error的日志行管道丢给 sed 把时间戳格式统一再交给 awk 取出 IP 字段做排序统计。理解了这个分工你就知道什么时候该选择 sed什么时候该去翻 awk 的文档而不是拿到文本就盲目地堆命令。2. sed 的运行机制与三条底层规则2.1 语法结构三要素缺一不可sed 的标准语法是sed [选项] 寻址命令 输入文件新手刚接触时最容易被单引号里那一长串内容搞晕。其实里面只有两类东西一是你要锁定的行叫地址定界二是你要对锁定行执行的操作叫命令。地址定界是可选的如果什么地址都不写sed 就是逐行处理整个文件命令就是s替换、d删除、p打印、a追加、i插入这些动作。我习惯把这条命令拆成口语来理解在哪些行做什么动作用什么内容去操作。比如sed -n 3,8p file.txt就是在第 3 行到第 8 行这个范围执行打印动作sed /^#/d config.conf就是在匹配以井号开头的行执行删除动作。把语法拆成这个思路背命令的负担会小很多。2.2 模式空间sed 能记住的东西其实很有限sed 的底层处理逻辑是每读取一行把这一行内容放进一块临时缓冲区这块缓冲区叫模式空间pattern space。sed 的所有命令都是针对模式空间里的当前行内容执行处理完就输出除非用-n关闭默认输出然后清空模式空间读取下一行。理解模式空间对排查问题非常关键。比如为什么sed s/foo/bar/ file.txt只替换了每行的第一个 foo因为模式空间里只有当前这一行而且s命令默认只对每行第一次匹配生效。再比如为什么sed /abc/,/def/d能删除从包含 abc 的行到包含 def 的行因为 sed 通过地址范围告诉命令哪些行需要进入处理区间本质上还是逐个处理每一行只是命令的执行条件变了。记住一个核心认知sed 是逐行处理没有全局上下文的概念。凡是看起来像跨行操作的功能其实都是通过地址范围、保持空间hold space或者管道技巧模拟出来的。搞懂模式空间你就不会再对 sed 的行为感到莫名其妙。3. sed 核心操作实战拆解3.1 替换操作s 命令的完整用法s/旧文本/新文本/是 sed 里最常用的命令但它的完整形态包含四个部分s/目标/替换/标志。很多人忽略了最后的标志位导致替换结果不符合预期。最常用的标志是g表示全局替换即替换该行内所有匹配目标而不只是第一个。示例echo a,b,a,c,a | sed s/a/X/ # 输出 X,b,a,c,a echo a,b,a,c,a | sed s/a/X/g # 输出 X,b,X,c,X另一个高频标志是I大写 i表示忽略大小写。比如把文件里所有Error、ERROR、error统一替换成WARNINGsed -i s/error/WARNING/I app.log-i是 sed 的原地修改参数后面可以直接跟备份后缀比如-i.bak会在修改前生成一个.bak备份文件。这是生产环境里非常重要的习惯先备份再改动改完对比确认最后再清理备份。替换内容里还有个容易被转义绕晕的地方如果需要匹配/字符可以直接在s命令中换用#或|作为分隔符。比如替换文件路径sed -i s#/usr/local/old#/opt/new#g paths.txt这样就不用把每一条/都写成\/命令可读性会好很多。实测下来凡是处理路径、URL 这类内容我都默认改用#分隔符。3.2 按范围删除与打印用地址定界精准锁定行删除命令d和打印命令p必须依赖地址定界才能发挥真正威力否则很容易把整个文件删光或者重复打印内容。按行号范围删除# 删除第 2 到第 5 行 sed 2,5d input.txt # 删除第 3 行到文件末尾$ 表示最后一行 sed 3,$d input.txt按正则匹配范围删除# 删除从包含 BEGIN 的行开始到包含 END 的行结束 sed /BEGIN/,/END/d config.conf按正则匹配范围打印这种场景在日志分析里很常见。比如你想查看某个请求从开始到结束之间的全部日志可以# 打印从 START 到 FINISH 之间的日志行并输出行号 sed -n /START/,/FINISH/ request.log注意这里我用的是命令它可以输出当前行的行号和p配合在调试时极其好用。比如sed -n 3,8{;p} file.txt会交替输出行号和行内容一眼就能确认你锁定的范围是否正确。3.3 追加、插入与修改行不只是替换文本sed 不止能改行内内容还能往文件里按条件插入或追加整行文本。三个命令是a在指定行后面追加内容i在指定行前面插入内容c将指定行整体替换为新内容最经典的场景是在配置文件指定行后追加配置项# 在第 5 行后面追加一行 sed 5a timeout 30; nginx.conf # 在所有匹配到 server_name 的行后面追加一行 sed /server_name/a root /var/www/html; nginx.conf如果追加的内容包含多行可以在单引号内用反斜杠换行sed /server_name/a\root /var/www/html;\nindex index.html; nginx.conf从实践角度来说追加和插入最怕的是缩进和空格问题。建议先在测试文件里跑一遍不带-i的命令确认追加行的格式、缩进都正确后再加-i落地。如果直接把命令写进生产变更脚本一旦追加内容少了空格配置解析失败排查成本就不止这几分钟了。4. 进阶技巧与高频坑点记录4.1 分组引用用 和 \1 复用匹配内容替换命令里有一个非常实用的能力通过分组捕获匹配到的内容然后在替换部分引用它。表示整个匹配到的内容\1表示第一个括号分组捕获的内容\2表示第二个以此类推。举个例子假设有一堆形如keyvalue的配置你想把它们改成key:value的形式echo namezhangsan | sed s/\(.*\)\(.*\)/\1:\2/ # 输出 name:zhangsan如果你的 sed 版本支持扩展正则GNU sed 加-E命令会更清爽echo namezhangsan | sed -E s/(.*)(.*)/\1:\2/再比如给日志里的所有端口号加方括号echo listen 8080 | sed -E s/[0-9]{2,5}/[]/ # 输出 listen [8080]这里直接引用了匹配到的数字串免去了多写一组括号的麻烦。这是我在处理监控告警模板时最常用的技巧把动态数值统一包上标记符号后续解析就省事很多。4.2 -i 参数在不同系统中的差异-i原地修改是最常用的选项但这里藏着一个大坑GNU sed大多数 Linux 发行版自带和 BSD sedmacOS 自带对-i的语法要求不同。Linux 上可以写sed -i s/a/b/g filemacOS 上如果这么写系统会报invalid option -- i因为 BSD sed 要求-i必须紧跟一个备份后缀参数即sed -i s/a/b/g file其中空字符串表示不生成备份这个差异坑过不少人。我现在写脚本时一般会做个兼容处理if [[ $(uname) Darwin ]]; then sed -i s/old/new/g file.txt else sed -i s/old/new/g file.txt fi或者用 perl 替代因为 perl 的-i语法在两个系统上表现一致perl -pi -e s/old/new/g file.txt。如果你是跨平台运维建议统一用 perl 这种方式省掉环境差异的烦恼。4.3 多文件批量处理与管道结合sed 接受多个输入文件并且会逐个处理不会自动在文件之间加分隔行。批量替换时经常和find一起用# 将当前目录下所有 .conf 文件中的 8080 替换为 9090不备份 find . -name *.conf -exec sed -i s/8080/9090/g {} \;你还可以用通配符直接处理一批文件sed -i s/old/new/g *.txt注意通配符展开的前提是匹配到的文件数量不要超过命令行长度的限制通常几万个文件以内没问题再多就得配合 xargs 了find . -name *.log -print0 | xargs -0 sed -i s/ERROR/ERR/g管道场景下sed 也是完美的中间处理器。比如把命令输出里的时间戳格式统一df -h | sed s/^/当前分区信息: /这条命令给 df 输出的每一行前面加上前缀非常适合写巡检脚本时让日志更易读。5. 实战场景从配置批量改到日志清洗5.1 批量修改 Nginx 配置真实工作里最常遇到的需求是把一组 Nginx 配置文件里的 server_name 批量换掉。比如把old.example.com全部改成new.example.com同时保留其他配置不动sed -i s/old\.example\.com/new.example.com/g /etc/nginx/sites-available/*这里有一个容易出错的细节sed 的正则里点号是通配符匹配任意字符。如果你不做转义old.example.com会匹配到oldXexampleXcom这类意外内容。所以我建议在替换域名、IP 这类含点号的内容时一定要把点号写为\.确保是字面量匹配。改完配置后别急着 reload先跑一遍 nginx 配置测试nginx -t确认没有语法错误后再执行systemctl reload nginx。这个习惯能帮你避免因为一个错误的替换导致线上服务短暂中断。5.2 日志文件的时间范围截取排查故障时经常需要从那个几个 GB 的大日志文件里截取某一段时间的记录。如果你知道大致的起始关键字可以这样# 从 2025-01-15 10:00:00 开始到 2025-01-15 12:00:00 结束 sed -n /2025-01-15 10:00:00/,/2025-01-15 12:00:00/p app.log segment.log这是 sed 范围寻址的经典用法。它的原理是一旦匹配到起始行就持续打印直到匹配到结束行才停止。更精细的做法是在截取后用wc -l检查行数是否符合预期wc -l segment.log如果输出行数为 0大概率是日志时间格式里有空格、TAB 和你想的不一样或者起始关键字在文件里根本没出现。先用 grep 确认关键字存在再执行 sed 截取效率会高很多。5.3 应急排查时快速定位异常配置如果怀疑某台服务器被植入了异常定时任务crontab或者配置文件里混入了可疑内容可以用 sed 快速做清洗式排查。比如查看 crontab 里非注释、非空行的全部内容crontab -l | sed -n /^#/!p | sed /^$/d这条命令做了两件事先用sed -n /^#/!p打印所有不以#开头的行!p是不匹配时打印的取反写法再用sed /^$/d删除空行。输出结果就是一份干干净净的实际生效任务清单。同理排查 SSH 配置里被改动的关键项grep -E ^(PermitRootLogin|PasswordAuthentication|Port) /etc/ssh/sshd_config | sed s/^/检测到配置: /这类命令不修改文件只用于快速审计非常适合应急响应的第一步信息收集阶段。安全排查的核心原则是先只读、后修改sed 的默认输出模式天然适合做这个。5.4 面试与考试中常见的 sed 题目在 Linux 相关面试题里sed 几乎是必考点。从我接触过的题目来看经常出现这么几类第一类是删除文件中的空行和注释行。如果文件内容为# config timeout30 host127.0.0.1可以用sed -i /^#/d;/^$/d file.txt第二类是将文件中所有foo替换为bar并保留备份sed -i.bak s/foo/bar/g file.txt第三类是只查看第 10 行到第 20 行之间的内容sed -n 10,20p file.txt这三类题看似简单但考察的正是地址定界、替换标志、原地修改备份这三个最核心的点。面试官问 sed通常不是要考你背了多少参数而是看你有没有在生产环境里真正用它处理过问题。所以建议你在准备面试时不仅要背命令还要理解每一条命令执行后发生什么。6. 常见问题排查与避坑心得6.1 我整理的 sed 问题速查表现象原因解决方案替换没生效忘记加g标志只替换每行第一个匹配项sed s/old/new/g报错invalid option -- imacOS 的 BSD sed 要求-i后带后缀使用sed -i s/old/new/g替换内容里的被展开在替换部分表示整个匹配内容需要转义才能输出字面写成\只想看匹配行却连其他行一起输出未加-nsed 默认打印所有行使用sed -n /pattern/p正则不生效某些字符如()在基础正则里是字面量需要转义或用-E加-E启用扩展正则文件被改坏了未加备份后缀替换内容有误且无法回滚提前使用-i.bak备份先在无-i模式验证匹配范围与预期不符地址定界的正则太宽泛匹配到了一处以上用命令输出行号核对范围或收紧正则空行保留但被误删模式写成了/^$/想删空行但命令执行顺序有误用分号拆分多个命令如sed /^#/d;/^$/d这张表是我现查现总结的全部来自真实使用中的报错和现场排查。如果你遇到的是其他问题建议把命令在测试文件上逐步运行打开sed -n 看行号思路会清晰很多。6.2 四个我踩过坑后总结的习惯第一个习惯永远先在无-i的情况下跑一遍。这是铁律。我早期写过一条sed -i s/foo/bar/结果替换内容里有个未转义的特殊字符几百行配置直接乱掉幸好当时留了备份。现在无论多简单的替换我都先跑sed s/foo/bar/ file | head -20看看效果确认无误再加-i。第二个习惯修改重要文件前用-i.bak保留备份。备份文件体积几乎可以忽略不计但关键时刻能救命。批量替换完用diff对比一下原文件和备份文件diff file.txt.bak file.txt这个 diff 输出会告诉你每一处改动是否都符合预期比起肉眼扫屏幕可靠得多。第三个习惯把复杂 sed 命令写进脚本时加上注释并拆开写。比如这样# 1. 去掉注释行 # 2. 去掉空行 # 3. 统一缩进为 4 空格 sed -e /^#/d -e /^$/d -e s/^/ / input.conf用-e连接多条命令每条命令单独占一行可读性远高于把所有逻辑堆在一行单引号里。脚本维护起来你自己看明白别人也看得懂。第四个习惯处理含特殊字符的文本时优先用#作为分隔符。路径、URL、时间戳这些文本里到处都是/如果还用/分隔命令会变成\/满天飞读起来极其痛苦。换成#之后一眼就能看出替换的边界在哪里。6.3 保持空间处理多行场景的另一个武器如果遇到真正需要跨行合并的场景sed 还有一个保持空间hold space机制。它和模式空间的区别在于模式空间是当前行的临时工作区保持空间则是可以跨行保留数据的暂存区。最典型的例子是把两行合并成一行paste -sd file.txt但如果你想用 sed 实现把第 3 行拼接到第 2 行后面可以这样sed -n 2{h;n;G;p} file.txt解释一下这条命令2{h;n;G;p}的意思是当处理到第 2 行时先把第 2 行内容放入保持空间h然后读取下一行到模式空间n再把保持空间内容追加到当前模式空间行尾G最后打印拼接结果p。这个技巧日常用得不多但在某些特定文本处理中非常出彩比如处理 SQL 导出脚本里被拆成多行的 INSERT 语句。保持空间和模式空间的配合是 sed 里最接近编程的部分理解它能帮你打开新思路当一条命令解决不了问题时想想能不能用暂存-合并-输出的模式来解决。7. 从 sed 出发的文本处理扩展思考sed 单独使用能解决很多问题但一旦你的需求变得复杂——比如需要按列统计、需要做多条件判断、需要把文本重新按字段格式化——awk 会是更合适的工具。我的通用原则是简单替换、按范围删除、批量改配置用 sed涉及字段拆分、求和、去重、复杂条件判断用 awk只是筛选用 grep。举个例子从 access.log 中统计每个 IP 的访问次数这就是 awk 的主场awk {count[$1]} END {for (ip in count) print ip, count[ip]} access.log | sort -k2 -rn | head -20而如果你在 awk 之前需要先对时间戳格式做统一就可以用 sed 做预处理sed -E s/\[(.*)\]/[\1]/ access.log | awk {...}把工具组合起来比强求用一个命令解决所有问题要高效得多。这也是为什么我一直强调学习 sed 不仅要记命令更要理解它适合处理什么类型的问题。它的定位是流式文本修改器一旦你把它当成万能工具就容易在复杂需求上绕远路。如果你想把 sed 练得更熟我建议从这几个方向做针对性练习一是把所有标志位g、I、p、w都实际跑一遍观察输出的差异二是用、l这类辅助命令去调试你写的复杂地址定界三是刻意用 sed 去解决生活中遇到的小需求比如批量重命名文件、给 markdown 文档批量加标题编号。熟能生巧是真的sed 这类工具只有多写多踩坑才能真正内化成你自己的技能。最后分享一个我今天还在用的实用小技巧当你想给某个 Markdown 文件里的所有二级标题重新编号时用 sed 加一个简单的计数器环境变量就能实现awk /^## /{count; sub(/^## /, ## count . )} {print} note.md new_note.md这虽然不是用 sed 实现的但这种组合工具处理文本的思路恰恰是高效使用 Linux 命令行的精髓。把 sed 放在你的工具箱里和 grep、awk 配合起来它就会成为你日常处理文本最顺手的那把刀。