Shell 三剑客:grep、sed、awk 超全实战教程

发布时间:2026/11/19 0:36:18

Shell 三剑客:grep、sed、awk 超全实战教程 前言从事 Linux 运维、SRE 工作日常离不开日志分析、文本过滤、数据处理。grep、sed、awk被称为 Shell 三剑客分工明确grep文本查找过滤擅长检索匹配行sed流编辑器擅长文本替换、行处理awk文本格式化、列处理小型编程语言一、grep —— 文本搜索工具核心作用根据正则表达式匹配筛选出符合条件的文本行。常用参数# -i 忽略大小写 # -n 显示行号 # -v 反向匹配不匹配 # -E 使用扩展正则等价egrep # -r 递归搜索目录文件 # -o 只输出匹配到的内容实战示例# 匹配包含error的行 grep error app.log # 忽略大小写显示行号 grep -in error app.log # 过滤注释行和空行 grep -vE ^#|^$ nginx.conf # 递归查找目录下包含timeout的文件 grep -r timeout /etc/nginx/ # 只打印匹配字段 grep -o [0-9]\\.[0-9]\\.[0-9]\\.[0-9]\ access.log二、sed —— 流式文本编辑器核心作用逐行处理文本擅长增删改查、字符串替换不修改原文件如需修改加-i 语法sed [参数] 寻址动作 file常用动作s/旧/新/替换p打印d删除a追加行i插入行常用参数# -i 直接修改原文件推荐测试先用 -i.bak 自动备份 # -n 只输出匹配行 # -E 扩展正则实战示例# 替换所有hello为world仅输出不改文件 sed s/hello/world/g test.txt # 直接修改文件同时生成备份 test.txt.bak sed -i.bak s/hello/world/g test.txt # 删除空行 sed /^$/d test.txt # 打印第5~10行 sed -n 5,10p test.txt # 在第3行后面追加内容 sed 3a new line content test.txt # 在第3行前面插入内容 sed 3i insert content test.txt⚠️ 注意sed -i操作文件前建议先不加 - i 预览结果防止误删配置三、awk —— 文本格式化语言最强核心作用按列处理文本分割字段、统计、格式化输出支持变量、判断、循环。 默认分隔符空格 / Tab 语法awk 条件{执行动作} file内置常用变量$0整行内容$1,$2...第 1 列、第 2 列NF当前行总列数NR行号FS输入分隔符OFS输出分隔符实战示例# 打印第一列和第三列 awk {print $1,$3} test.txt # 指定逗号为分隔符 awk -F , {print $2} data.csv # 打印行号、最后一列 awk {print NR,$NF} test.txt # 筛选第3列大于100的数据 awk $3 100 {print $0} test.txt # 多条件匹配 awk $1root $30 /etc/passwd # BEGIN 初始化处理文本前执行 awk BEGIN{FS:;print 用户名}{print $1} /etc/passwd四、三剑客场景区分重点工具定位适用场景grep查找只需要筛选、检索行单纯过滤sed行处理、替换整行删除、字符串全局替换、插入行awk列处理、计算截取字段、数值运算、格式化输出组合使用经典案例# 日志过滤找出error日志提取IP去重统计 grep error access.log | awk {print $1} | sort | uniq -c # 过滤配置文件去掉注释空行替换端口号 grep -vE ^#|^$ nginx.conf | sed s/80/8080/g五、常见踩坑总结grep 不加-E部分正则符号需要转义sed-i直接修改文件生产环境优先备份awk 默认分隔符是连续空格不是单个空格尽量组合使用先 grep 筛选sed 替换awk 解析字段
延伸阅读

更多相关文章

2026/11/18 15:58:26

深入解析802.11协议栈:从PHY/MAC到MLME/PLME/SME的无线网络核心架构

1. 无线网络通信的基石:从标题看802.11协议栈的核心看到“802.11 MAC子层&PHY子层 、MLME&PLME、SME”这个标题,很多刚接触Wi-Fi协议开发或网络优化的朋友可能会觉得这是一堆枯燥的缩写。但在我看来,这恰恰是理解任何无线网络设备——…

2026/11/17 14:41:25

QQ邮箱集成mail.ru邮件:IMAP/POP3协议选择与长期管理策略

你有没有遇到过这样的场景:一个重要的项目通知、一份关键的学术投稿确认信,或者一封来自海外合作伙伴的邮件,静静地躺在你的 mail.ru 邮箱里。你每天要登录好几个邮箱,来回切换,总担心错过什么。你心想,要…

2026/11/6 20:36:03

Windows Server管理员密码恢复实战指南:从原理到应急操作

1. 项目概述:当服务器大门紧闭时在IT运维和系统管理的日常里,最让人心头一紧的场景之一,莫过于面对一台无法登录的Windows Server。无论是用于承载关键业务应用的物理服务器,还是云端托管的虚拟机,一旦忘记了管理员密码…

2026/11/19 0:35:14

电工证查询电子证书怎么查?官方报名入口在哪?

电工证查询电子证书怎么查?官方报名入口在哪? 你是不是也担心不知道去哪报名,怕被中介坑?电工证查询电子证书已经在全国范围内普及,但很多人仍然不清楚具体的办理流程、报名入口和查询方式。今天就来带你一步步了解电工证查询电子证书的全过程,还有官方…

2026/11/19 0:35:14

电工证查询电子证书多少钱 被中介坑的你该知道这些

电工证查询电子证书多少钱 被中介坑的你该知道这些 你是不是正愁不知道去哪报名考电工证,又怕被中介坑了钱还拿不到证?其实现在考电工证比以前简单多了,特别是 电工证查询电子证书 ,越来越多的工地和企业开始认可电子版证书,但你得先搞清楚 多少钱…

2026/11/19 0:35:14

什么是电工作业操作证模拟考试题库

外省电工证能不能转过来?良心建议看完少走三年弯路 之前考的证在外省能不能转过来?这个问题,我听得太多了。其实,很多电工兄弟都经历过,早年在外省考的证,回老家工作后才发现“没用”“不能用”“要重考”,搞得整个人都不好了。今天就从【什么是电工作…

2026/11/19 0:30:14

电工证顺义怎么报名别怕考不过白交培训费

电工证顺义怎么报名别怕考不过白交培训费 怕考不过白交培训费?电工证顺义怎么报名不踩坑?在顺义地区,不少建筑工地、工厂的电工都遇到过类似的烦恼。特别是像郑州金水区这样的工程从业者,很多人在项目上被要求持证上岗,但又担心自己考不过,白花培训费。…

2026/11/18 21:12:58

电工证考试口诉怎么准备值不值得考

电工证考试口诉怎么准备值不值得考 实操考试心里没底怕挂科,这是大多数准备考电工证的人心里最真实的感受。尤其是面对【电工证考试口诉】环节,很多人不知道该怎么准备,甚至担心自己说不好就被淘汰。其实,只要掌握方法, 值不值得考…

2026/11/18 21:55:23

桑植县考电工证千万别踩坑!报名全流程教你避坑

桑植县考电工证千万别踩坑!报名全流程教你避坑 你是不是也遇到过这种情况:想考个电工证,但不知道从哪儿下手,怕被中介坑,怕花冤枉钱,更怕考了证还不能用?别急,这正是你该看这篇文章的原因。在桑植县考电工证,确实有很多人被坑过,但只要你知道流程、…

2026/11/19 0:04:42

深圳电工证培训考场模拟考试题库:郑州报考避坑指南

深圳电工证培训考场模拟考试题库:郑州报考避坑指南 证书过期了不知道怎么复审延期,很多人在遇到这个问题的时候才意识到特种作业证的重要性。其实,不管是电工证、焊工证还是高处作业证,这些证书不仅是上岗的“通行证”,更是法律对安全操作的硬性要求。尤…

2026/11/19 0:04:42

天津电工证查询入口多少钱能报上名

天津电工证查询入口多少钱能报上名 学历不高怕报不上名?别急,天津电工证查询入口其实没你想的那么难。今天咱们就来聊聊,怎么用最低的门槛、最少的钱,把电工证拿下来,还能查得到、用得上。 电工证到底值不值?先搞清楚它的作用…

2026/11/18 12:37:05

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

在智慧养宠时代,基于视觉的宠物身份识别技术正逐步从实验室走向家庭应用。然而,与配合度高的人类不同,宠物是典型的“非合作生物识别对象”——它们不会主动配合摄像头调整姿态,更无法控制光照环境。实际应用中,我们常…

2026/11/18 1:15:04

SSM电子书店源码全解析:结构、原理、部署与排错实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

还想了解更多?直接咨询顾问

免费诊断 + 免费方案 + 透明报价。

全国咨询热线400-8866-253
免费获取方案
☎咨询二维码 ☎ ↑