使用shell脚本分析网站日志统计PV、404、500等数据

更新时间：2014年05月27日 09:50:28 作者：

这篇文章主要介绍了使用shell脚本分析网站日志统计PV（浏览量）、404、500等数据,用一个脚本来实现,需要的朋友可以参考下

下面的脚本能统计出网站的总访问量，以及404,500出现的次数。统计出来后，我们可以结合监控宝来进行记录，进而可以看出网站访问量是否异常，是否存在攻击，一目了然。还可以根据查看500出现的次数，进而判断网站程序是否出现异常。

#!/bin/bash
#purpose:count nginx or apache or other webserver status code using jiankongbao
#how to:run the script every 5 minutes with crontab

log_path="/var/log/nginx/www.jb51.net/access.log"
becur=`date -d "5 minute ago" +%H%M%S`
code=(`tac $log_path  | awk  -v a="$becur" -v total=0 -F [' ':] '{
t=$5$6$7
if (t>=a){
code[$12]++
total++
}
else {
exit;
}
}END{
print code[404]?code[404]:0,code[500]?code[500]:0,total
}'
`)
c404=${code[0]}
c500=${code[1]}
total=${code[2]}
echo -e "<pre>\nc404:${c404}\nc500:${c500}\ntotal:${total}\n</pre>" > /data/www/status/www.jb51.net.html

脚本最后一行是以:

复制代码代码如下:

<pre>
c404:1102
c500:545
total:55463
</pre>

的格式写入到一个www.jb51.net html文件，再结合监控宝的自定义监控来收集这些信息。非常的方便，监控宝会自动出图表。

您可能感兴趣的文章:

Linux中搭建FTP服务器的方法
这篇文章主要介绍了Linux中搭建FTP服务器的方法的相关资料,需要的朋友可以参考下
2015-09-09
shell脚本实现本地文件与服务器文件同步
这篇文章主要介绍了本地文件与服务器文件同步shell脚本的方法，然后在文章给大家补充介绍了shell脚本备份本地服务器的文件到远程服务器的实例代码,需要的朋友可以参考下
2017-11-11
用于检测进程的shell脚本代码小结
本文介绍一段shell脚本，它可以检测某进程或某服务是否正在运行，然后以邮件通知。有需要的朋友参考下
2013-11-11
写一个shell脚本实现视频处理
Linux和Unix都拥有很多能够处理图像和视频文件的应用程序和工具,下面这篇文章主要给大家介绍了关于如何写一个shell脚本来实现视频处理的相关资料,需要的朋友可以参考下
2022-07-07
linux shell 编程之函数使用详解
使用linux的shell编程，可以说函数是非常重要的内容，也是在编写各类shell脚本的时候经常用到的，这篇文章主要介绍了linux shell 编程之函数使用,需要的朋友可以参考下
2022-10-10
很实用的Linux 系统运维常用命令及常识(超实用)
作为Linux运维，需要了解Linux操作系统的基本使用和管理知识，下面脚本之家小编给大家介绍下Linux运维需要掌握的命令，想成为Linux运维的朋友可以来学习一下
2016-10-10
Shell编程中的特殊变量之位置变量介绍
这篇文章主要介绍了Shell编程中的特殊变量之位置变量介绍,本文讲解了$0、$n、$*、$#这4个特殊变量,需要的朋友可以参考下
2014-12-12
Vim命令合集
这篇文章主要介绍了Vim命令合集的相关知识，非常不错，具有参考借鉴价值,需要的朋友可以参考下
2017-10-10
Linux命令之lz4命令使用示例
lz4是一种非常快速的无损压缩算法，基于字节对齐LZ77系列压缩方案，它的特点是极快的解码器，每核速度可达多GB/s，通常在多核系统上达到RAM速度限制项目，这篇文章主要介绍了Linux命令之lz4命令,需要的朋友可以参考下
2023-03-03
关于vi和vim的区别及命令详解
下面小编就就为大家带来一篇关于vi和vim的区别及命令详解。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
2017-01-01