Nginx访问日志入门:命令行查高频IP、慢请求与404

    发布时间:2026-10-21 05:17 更新时间:2026-10-21 05:17 阅读量:0

    站点跑起来只是开始,真正决定体验的往往是日志里那些没人看的行。Nginx访问日志(access.log)记录了每一次请求的来源IP、时间、URL、状态码、响应体大小和耗时,它比监控大盘更细,比浏览器报错更接近真相。很多站长遇到「用户说打不开」「百度抓取异常」「服务器负载莫名升高」时第一反应是重启服务,其实先花十分钟把日志按维度聚一聚,答案常常就摆在眼前。这篇面向建站新手和初级运维,用系统自带的命令行工具,把高频IP、慢请求和404来源三类问题逐个拆开,并说明这些数字对企业和团队意味着什么、该投入多少精力。

    先确认日志格式,再谈统计

    统计之前必须先看清日志长什么样。Nginx默认的combined格式在/etc/nginx/nginx.conf或站点配置里定义,常见写法如下,具体路径与字段顺序以你服务器的实际配置为准:

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" $request_time';
    
    access_log  /var/log/nginx/access.log  main;

    其中$remote_addr是客户端IP(若前面挂了CDN或反向代理,这里可能是回源IP,真实访客IP通常在$http_x_forwarded_for里),$request是请求行,$status是状态码,$request_time是Nginx处理该请求的耗时,单位秒,带小数。注意:没有配置$request_time的默认combined格式里是没有耗时字段的,想统计慢请求,第一步就是把这个变量加进日志格式,然后reload生效。改动前建议先备份配置,用nginx -t校验语法。

    日志格式决定了分析的上限。如果企业站点前面套了CDN,建议在日志里同时保留$remote_addr和$http_x_forwarded_for,否则所有请求看起来都来自少数几个IP,越统计越糊涂。这一步属于基础建设,和选服务器、定建站方案一样,前期定好能省掉后面大量返工。

    三类核心统计:高频IP、慢请求、404来源

    下面的命令都基于combined格式加上$request_time的写法,字段位置若与你的配置不同,请相应调整$数字编号。先统计访问量靠前的IP,用来判断是否有异常抓取、单一来源压测或代理转发问题:

    # 访问次数前20的IP
    awk '{print $1}' /var/log/nginx/access.log | sort | uniq -c | sort -rn | head -20
    
    

    前20个IP各自占了多少流量(按响应字节粗略估算)

    awk '{sum[$1]+=$10} END {for (ip in sum) print sum[ip], ip}' /var/log/nginx/access.log | sort -rn | head -20

    再统计慢请求。假设$request_time是日志最后一列,按耗时倒序取前若干条,同时打印URL,方便定位是哪个页面、哪个接口拖慢:

    # 耗时超过1秒的请求,按耗时倒序取前30条
    awk '$(NF) > 1 {print $(NF), $7, $9}' /var/log/nginx/access.log | sort -rn | head -30
    
    

    按URL聚合,看哪些页面平均耗时偏高

    awk '{t[$7]+=$(NF); c[$7]++} END {for (u in t) printf "%.3f %d %s\n", t[u]/c[u], c[u], u}' /var/log/nginx/access.log | sort -rn | head -20

    最后看404来源。404多不一定是坏事,可能是老链接迁移、外部死链,也可能是扫描器在探测后台路径,需要结合来源页和UA一起看:

    # 404请求按URL聚合取前20
    awk '$9 == 404 {print $7}' /var/log/nginx/access.log | sort | uniq -c | sort -rn | head -20
    
    

    查看某个404 URL的来源页与UA

    grep ' 404 ' /var/log/nginx/access.log | grep '/old-page.html' | awk '{print $11, $12}' | sort | uniq -c | sort -rn | head

    按小时统计5xx数量,判断故障时间段

    awk '$9 ~ /^5/ {print substr($4, 2, 14)}' /var/log/nginx/access.log | sort | uniq -c

    这几条命令的价值不在命令本身,而在把问题从「感觉慢」变成「某个URL平均1.8秒、集中在某几个IP」。对企业站点来说,这意味着可以拿着具体页面去找开发或服务商,而不是笼统地说服务器不行;对运维来说,能区分是程序问题、数据库问题还是带宽被打满,处置方向完全不同。日志量大时,直接在线上grep会占IO,建议先复制一份到临时目录,或用logrotate切分后的历史文件分析,避免影响业务。

    从统计结果到处置:一份可照着做的清单

    看到数据之后,最怕的是「知道有问题但不知道先动哪」。下面这份清单按投入从小到大排列,适合中小团队直接推进:

    • 确认日志是否完整:检查是否配置了$request_time、是否保留$http_x_forwarded_for,日志轮转(logrotate)是否正常,磁盘是否有被日志写满的风险。
    • 给高频IP定性:是搜索引擎抓取、合作方接口调用,还是异常刷量。抓取类可结合robots与抓取频率判断,异常来源优先在WAF或Nginx层做限速,而不是直接封整段IP,避免误伤正常用户。
    • 给慢请求分级:静态资源慢多半是带宽或CDN回源问题,动态页面慢要看PHP/数据库慢查询,接口慢要结合应用日志。先修耗时占比最高的那20%,收益通常最大。
    • 处理404:老URL做301跳转到新页面,被扫描的路径直接返回444或统一错误页,减少无效请求占用连接。
    • 建立定期查看习惯:每天看一次5xx和慢请求Top,每周看一次高频IP变化,比出事后再翻日志省力得多。
    • 设定投入边界:日访问量不大的企业展示站,用几条命令加一个简单脚本足够;有交易或大量接口调用的站点,才值得引入ELK、Loki这类日志平台,否则维护成本会超过收益。

    如果站点刚上线、还没积累日志,可以先参考客户案例里同类站点的访问结构,预判哪些页面更容易成为慢请求和404的重灾区,提前在模板与定制风格选型阶段就控制好图片体积与URL规范。日志分析不是一次性的技术动作,而是把「用户实际怎么用你的站」变成可以逐月对比的数据资产。

    把日志当成日常巡检的一部分,用几条命令就能把高频IP、慢请求和404来源看清楚,问题定位会快很多,团队沟通也会从互相猜测变成对着数据讨论。

    准备做网站,先从哪一步开始?

    如果你希望把上面的思路落到自己的行业与目标市场,可以先看 建站方案 了解一站式流程,再对照 客户案例 判断哪些做法适合自己的业务;也可以加微信 tsrz001 沟通需求,把页面结构、预算和排期先聊清楚再动手。

    继续阅读

    📑 📅
    网站突然打不开的排查顺序:DNS、端口到Nginx日志逐层定位 2026-10-21
    企业站监控指标与告警阈值:CPU、内存、IO、5xx与证书到期 2026-10-21
    误删网站文件后的恢复流程:云盘快照回滚与数据库单独还原 2026-10-21
    快照、镜像、文件备份怎么配合:企业站点三种备份方式的组合策略 2026-10-21
    企业站图片多导致访问慢:压缩、懒加载与CDN回源整套提速方案 2026-10-21
    企业建站服务器怎么选:按访问量估算CPU内存与磁盘 2026-10-22
    2核4G 还是 4核8G:中小型企业官网配置取舍与压力测试 2026-10-22
    带宽该买几兆:按页面体积与日PV推算公网带宽 2026-10-22
    云服务器线路怎么挑:BGP多线与单线、三网访问差异实测 2026-10-22
    服务器地域节点选错有多亏:机房位置、CDN回源与用户分布对首屏加载时间的影响 2026-10-22