grep与awk:日志查错的实用组合
Linux系统
2026-11-11 16:42
6
用真实场景串起 grep 与 awk 的常用写法,覆盖九成日志查错需求。下面按“先判断、再动手、最后验证”的顺序展开,每一步都给出可核对的检查点。
涉及 grep用法、awk用法、日志分析 的关键动作都写成了具体命令或配置项,可以照着走,也可以当检查表用。
grep 常用
-E 扩展正则、-v 反选、-c 计数、-B2 -A5 带上下文,加 -r 递归查目录。
awk 列处理
按空格分列取字段,$NF 取最后一列,统计用数组加 END 输出。
组合场景
先 grep 圈出错误行,再 awk 按小时聚合出分布,一条管道出结论。
性能注意
大日志用 grep 先缩小范围再交给 awk,别让 awk 直接吃几个 G 的文件。
习惯
把常用的组合存成脚本与别名,查错的效率差十倍。
速查表
| 环节 | 关键动作 |
|---|---|
| grep 常用 | -E 扩展正则、-v 反选、-c 计数、-B2 -A5 带上下文,加 -r 递归查目录 |
| awk 列处理 | 按空格分列取字段,$NF 取最后一列,统计用数组加 END 输出 |
| 组合场景 | 先 grep 圈出错误行,再 awk 按小时聚合出分布,一条管道出结论 |
| 性能注意 | 大日志用 grep 先缩小范围再交给 awk,别让 awk 直接吃几个 G 的文件 |
常见问题
Q:按文中写法改完,怎么确认真的生效?
不要只看配置文件,用对应的验证命令或从外部视角复测一次;改完先小流量观察一段,再全量推进,出问题能马上回退。
Q:按文中的步骤做完,还需要注意什么?
把处理过程和最终生效的参数记下来。同类问题再出现时直接对照记录,比重查一遍快得多。
Q:业务规模小,也要按这套标准来吗?
不需要一次到位。先把影响最大的两项做到位,剩余的随着业务增长逐步补齐,比一开始就追求完美更容易落地。
小结
回到这篇的 5 个环节:grep 常用、awk 列处理、组合场景、性能注意、习惯。把这几个动作写进检查表,下次遇到同类问题按顺序过一遍,比凭经验跳步骤稳。
相关阅读:Swap设置:内存不足时的缓冲策略、screen、tmux与supervisor:后台进程管理、fail2ban自动封禁实战。
延伸阅读:Nginx日志分析与正则统计、Linux常用命令速查:文件、进程、网络、日志切割与清理:logrotate实战。