awk 入门:用一行命令从日志里算出结果
服务器日志里藏着很多答案:哪个接口最慢、哪些请求出错了。靠肉眼翻日志,几百行还能应付,上万行就看不过来了。awk 正是为这种场景准备的工具:它逐行读取文本,按字段拆分,再用一行命令完成过滤、统计和汇总。
一、基本结构:模式加动作
awk 的基本形式是 awk '模式 { 动作 }' 文件名。它逐行读取文件,符合模式的行才执行花括号里的动作;省略模式,就对每一行都执行:
awk '{ print $1 }' 日志文件.log
二、内置变量:NR、NF、$0 和 $1
$0 表示整行,$1、$2、$3 依次是第 1、2、3 个字段;NR 是当前行号,从 1 开始;NF 是当前行的字段个数。先打印它们,确认字段划分是否符合预期:
awk '{ print NR, NF, $1 }' 日志文件.log
三、用 -F 指定分隔符
默认 awk 按空白字符切分字段,但很多文件不是空格分隔的:系统用户信息文件用冒号分隔,导出的表格常用逗号分隔,这时用 -F 指定分隔符:
awk -F: '{ print $1, $3 }' 用户信息.log
四、求和与取平均
把每行第三列的数值累加起来:
awk '{ sum += $3 } END { print sum }' 耗时记录.log
求平均值只需多记一个行数:
awk '{ sum += $3; n++ } END { print sum / n }' 耗时记录.log
五、条件过滤
把条件写在花括号前面,awk 只对符合条件的行执行动作,例如只输出耗时超过 500 毫秒的慢请求:
awk '$4 >= 500 { print $0 }' 日志文件.log
模式也可以写成正则表达式。
六、BEGIN 和 END
BEGIN 在读第一行之前执行一次,常用来打印表头或初始化变量;END 在全部读完后执行一次,适合输出汇总结果:
awk 'BEGIN { print "开始统计" } { sum += $2 } END { print "总和:", sum }' 数值记录.log
七、实战:从访问日志里算出结果
假设日志每行记录一次请求,字段依次是时间、方法、状态码和耗时(毫秒)。先算总数和平均耗时:
awk '{ total += $4; n++ } END { print "请求总数:", n, "平均耗时:", total / n " 毫秒" }' 日志文件.log
再按状态码分组计数:
awk '{ count[$3]++ } END { for (c in count) print c, count[c] }' 日志文件.log
count 是以状态码为下标的数组,count[$3]++ 让对应状态码的计数加一,最后在 END 里用 for 循环打印每个状态码和次数。
八、写在最后
记住“模式加动作”的结构和 $0、$1、NR、NF 这几个变量,再掌握 -F、条件过滤和 BEGIN、END,日常日志统计基本够用了。遇到新日志,先用 print 探清字段结构,再写过滤和汇总。
- 点赞
- 收藏
- 关注作者
评论(0)