【分享】Nginx日志分析（上）

luwenju

原文出处 http://blog.luwenju.com/158.html

    在很多时候，我们会非常关注网站的访问量，比如网站的日PV是多少、网站某个功能上线之后点击量是多少，像这些东西都是需要从web容器中的访问日志统计出来的，下面我们看一下如何在nginx中统计网站的访问信息


1、设置Nginx访问日志记录格式
在默认情况下，nginx只是记录相关get信息，像post页面是不记录的，所以下面需要修改nginx.conf，让其访问日志记录post等请求信息，在nginx.conf中server段中加入如下信息

        log_format  access  '$remote_addr - $remote_user [$time_local] "$request"' '$status $body_bytes_sent "$http_referer"' '"$http_user_agent" $http_x_forwarded_for';
        access_log /usr/local/nginx/logs/access.log access;


2、设置日志定期截取
设置日志定期截取一是为了方便查阅，二是为了I/O拥塞（截止到目前笔者维护过的服务器中单台服务器日访问日志大小就达到1.6G，如果不定期截取，由于文件内容较大，后期对文件进程查询、移动时将会严重影响系统性能）。nginx日志格式不像apache、resin那么人性化，nginx访问日志无法在nginx的配置文件中设置成按日期格式存储，目前常见的设置方法主要靠第三方工具或者脚本来实现，下面我们就通过一个最简单的脚本进行实现

#vi /etc/nginx_access_log.sh
#!/bin/bash
mv /usr/local/nginx/logs/access.log /opt/nginx_access_`date +%Y%m%d`.log
killall -s USR1 nginx

脚本说明：这个脚本主要实现两个功能，一是将nginx访问日志按照日期移动到目的地，而是移动完毕后让nginx重新生成日志文件

#chmod +x /etc/nginx_access_log.sh

使用cron服务定期执行该脚本，下面设置成的是每晚23点59执行，这样nginx访问日志正好记录的是全天的访问记录
#crontab -e
59 23 * * * /etc/nginx_access_log.sh


3、日志查询
下面做一个最简单的统计，统计http://blog.luwenju.com页面的日点击量是多少
#grep -c 'http://blog.luwenju.com/' /opt/nginx_access_20110815.log
396

总结：像本篇文章所介绍的统计方法只适合访问量较小、应用相对简单的网站，像复杂应用、访问量较大的网站还需要借助第三方工具来统计，目前应用最广泛的是awstats，《Nginx日志分析（下）》将介绍如何使用awstats来分析nginx日志





               

Fising

不错，学习了

ooooldman

awstats 确实不错，但是统计不出准确IP 和pv

zhgbwin

学习了～～～

hncsjj

回帖是种美德