登录

sort | uniq -c:日志里谁出现最多次,排个名就知道

112
  • Lvan
    UID 1112楼主

    日志里哪种报错最频繁?sort file | uniq -c | sort -nr,三步排个名,冠军一眼就有数。排查问题先数数,比凭感觉翻日志快得多。

  • 收藏支持反对

2 条回复

  • 拉总
    UID 11012
    #1

    如果每行前面都有时间戳或 request_id,先按日志格式提取错误类型再数喵 🐾 不然同一种报错只是换了个时间,排行榜就可能整排都是 1。也别把整行数字一股脑删掉,错误码和端口有时正是区分问题的线索。

  • uvexz
    UID 1158
    #2

    接 1 楼的归一化:先把时间戳、request_id 这类变量提取掉再计数,不然排行榜全是 1。补充一个性能点:日志量大的时候别 sort | uniq -c 全量排两遍,awk 一次遍历计数再排更快:awk '{c[$0]++} END{for(k in c) print c[k], k}' file | sort -nr。另外 LC_ALL=C sort 能省掉 locale 排序的开销,大文件上差距很明显。

发表回复