AWStats 强大的日志分析系统
需求
在日常web服务器的运行中,记录了大量的客户机访问的信息,而如何快捷地知道此刻web服务器的访问及运行情况,如每天的访问IP数量、点击量最大的页面、每日的访问高峰时间段等信息呢?
解决方案
将通过使用强大的日志分析系统AWStats对其进行自动化的日志分析与统计工作。
AWStats介绍
AWStats是使用Perl语言开发的一款开源日志分析系统,它不仅可用来分析Apache网站服务器的访问日志,也可以用来分析Samba、Vsftpd、IIS等服务的日志信息。结合crond等计划任务服务,可以对不断增长的日志内容定期进行分析。
Awstats 是一个免费的、非常简洁而且强大的网站日志分析系统,它可以帮助我们统计网站的如下信息:
- 访问量、访问次数、独特访客人数;
- 访问时间和上次访问;
- 每周的高峰时间(页数,点击率,每小时和一周的千字节);
- 域名/国家的主机访客(页数,点击率,字节,269域名/国家检测, geoip 检测);
- 主机名单,最近访问和未解析的 IP 地址名单;
- 访问者看过的进出页面,档案类型;
- 网站压缩统计表(mod_gzip 或者 mod_deflate);
- 使用的操作系统 (每个操作系统的页数,点击率 ,字节, 35 OS detected),使用的浏览器;
- 机器人访问(检测 319 个机器人);
- 蠕虫××× (5 个蠕虫家族);
- 搜索引擎,利用关键词检索找到你的地址;
- HTTP 协议错误(最近查阅没有找到的页面);
- 其他基于 URL 的个性报导,链接参数, 涉及综合行销领域目的;
- 网站被加入"最喜爱的书签".次数;
- 浏览器的支持比例: Java, Flash, RealG2 reader, Quicktime reader, WMA reader, PDF reader;
- 负载平衡服务器比率集群报告;
环境:
- rhel6.5操作系统
- 服务器IP地址:192.168.100.5
- rhel6.5的镜像光盘挂载至/mnt/cdrom/
- 已经部署好Apache 2.2 服务器
- AWStats 7.6.tar.gz 百度网盘 密码:zcko
- 已经做好DNS正向解析,通过www.test.com可以正常访问到该服务器(请参考:DNS域名解析服务(正向解析、反向解析、主从服务器)第一部分 正向解析部分)
目标:
为WEB站点www.test.com添加AWStates日志分析系统
部署服务:
1. 解压并安装AWStates软件包
tar zxvf awstats-7.6.tar.gz -C /opt/ //解压至/opt目录下 mv /opt/awstats-7.6 /usr/local/awstats //移动文件至/usr/local/awstats目录下 cd /usr/local/awstats/tools //进入awstats的tools目录下
2. 为www.test.com站点新建站点统计配置文件,借助AWStates系统提供的awstats_configure.pl脚本进行创建,过程如下:
./awstats_configure.pl
----- AWStats awstats_configure 1.0 (build 20140126) (c) Laurent Destailleur -----
This tool will help you to configure AWStats to analyze statistics for
one web server. You can try to use it to let it do all that is possible
in AWStats setup, however following the step by step manual setup
documentation (docs/index.html) is often a better idea. Above all if:
- You are not an administrator user,
- You want to analyze downloaded log files without web server,
- You want to analyze mail or ftp log files instead of web log files,
- You need to analyze load balanced servers log files,
- You want to 'understand' all possible ways to use AWStats...
Read the AWStats documentation (docs/index.html).-----> Running OS detected: Linux, BSD or Unix
-----> Check for web server install
Enter full config file path of your Web server.
Example: /etc/httpd/httpd.conf
Example: /usr/local/apache2/conf/httpd.conf
Example: c:\Program files\apache group\apache\conf\httpd.conf
Config file path ('none' to skip web server setup):
/etc/httpd/conf/httpd.conf #输入Apache的配置文件绝对路径-----> Check and complete web server config file '/etc/httpd/conf/httpd.conf'
Add 'Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"'
Add 'Alias /awstatscss "/usr/local/awstats/wwwroot/css/"'
Add 'Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"'
Add 'ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"'
Add '<Directory>' directive
AWStats directives added to Apache config file.-----> Update model config file '/usr/local/awstats/wwwroot/cgi-bin/awstats.model.conf'
File awstats.model.conf updated.-----> Need to create a new config file ?
Do you want me to build a new AWStats config/profile
file (required if first install) [y/N] ? y #输入y,生成新的配置文件-----> Define config file name to create
What is the name of your web site or profile analysis ?
Example: www.mysite.com
Example: demo
Your web site, virtual server or profile name:
www.test.com #输入网站域名:www.test.com-----> Define config file path
In which directory do you plan to store your config file(s) ?
Default: /etc/awstats
Directory path to store config file(s) (Enter for default):
#直接 “回车键”-----> Create config file '/etc/awstats/awstats.www.test.com.conf'
Config file /etc/awstats/awstats.www.test.com.conf created.-----> Restart Web server with '/sbin/service httpd restart'
Stopping httpd: [ OK ]
Starting httpd: [ OK ]-----> Add update process inside a scheduler
Sorry, configure.pl does not support automatic add to cron yet.
You can do it manually by adding the following command to your cron:
/usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.test.com
Or if you have several config files and prefer having only one command:
/usr/local/awstats/tools/awstats_updateall.pl now
Press ENTER to continue...A SIMPLE config file has been created: /etc/awstats/awstats.www.test.com.conf
You should have a look inside to check and change manually main parameters.
You can then manually update your statistics for 'www.test.com' with command:
perl awstats.pl -update -config=www.test.com
You can also read your statistics for 'www.test.com' with URL:
http://localhost/awstats/awstats.pl?config=www.test.comPress ENTER to finish... #直接“回车键”退出
3. 检查httpd.conf文件尾部是否含有以下信息
vim /etc/httpd/conf/httpd.conf
<Directory "/usr/local/awstats/wwwroot">
Options None
AllowOverride None
Order Allow,deny
Allow from all
</Directory>
或如下图所示,即可
4. 修改站点统计配置文件
vim /etc/awstats/awstats.www.test.com.conf
......
LogFile="/var/log/httpd/access_log" //50行,修改web日志文件位置
DirData="/var/lib/awstats" //220行,数据目录,awstats 默认不存在(需要创建)
......
创建/var/lib/awstats目录
mkdir -p /var/lib/awstats
5. 重启httpd服务
service httpd stop service httpd start
6. 使用AWStates提供的awstats_updateall.pl脚本更新所有站点的日志统计数据
./awstats_updateall.pl now //更新站点数据
7. 由于Web日志文件的内容是不断在更新的,为了及时反馈网站访问的情况,日志分析工作也需要定期、自动地执行。可以通过crond服务设置计划性任务
添加计划性任务
crontab -e
/1 * /usr/local/awstats/tools/awstats_updateall.pl now //每分钟更新一次数据
启动crond服务
service crond start
通过以下网站进行访问awstats日志分析系统:http://www.test.com/awstats/awstats.pl?config=www.test.com
8. 为了便于访问awstats日志分析系统进行以下优化
cd /usr/local/apache/htdocs //进入web站点目录下
vim awb.html //创建awb.html网页文件,并写入以下文件
<html>
<head>
<meta http-equiv=refresh content="0;url=http://www.test.com/awstats/awstats.pl?config=www.test.com">;
</head>
<body></body>
</html>
以后直接通过如下网址便可以进行访问: http://www.test.com/awb.html

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
分布式之数据库和缓存双写一致性方案解析
引言 为什么写这篇文章? 首先,缓存由于其高并发和高性能的特性,已经在项目中被广泛使用。在读取缓存方面,大家没啥疑问,都是按照下图的流程来进行业务操作。但是在更新缓存方面,对于更新完数据库,是更新缓存呢,还是删除缓存。又或者是先删除缓存,再更新数据库,其实大家存在很大的争议。目前没有一篇全面的博客,对这几种方案进行解析。于是博主战战兢兢,顶着被大家喷的风险,写了这篇文章。 文章结构 本文由以下三个部分组成1、讲解缓存更新策略2、对每种策略进行缺点分析3、针对缺点给出改进方案 正文 先做一个说明,从理论上来说,给缓存设置过期时间,是保证最终一致性的解决方案。这种方案下,我们可以对存入缓存的数据设置过期时间,所有的写操作以数据库为准,对缓存操作只是尽最大努力即可。也就是说如果数据库写成功,缓存更新失败,那么只要到达过期时间,则后面的读请求自然会从数据库中读取新值然后回填缓存。因此,接下来讨论的思路不依赖于给缓存设置过期时间这个方案。在这里,我们讨论三种更新策略: 先更新数据库,再更新缓存 先删除缓存,再更新数据库 先更新数据库,再删除缓存 应该没人问我,为什么没有先更新缓存,再更新数据库这...
- 下一篇
Pod定义与ConfigMap
Pod的作用 在k8s中pod是最小的管理单位,在一个pod中通常会包含一个或多个容器。在每一个Pod中都有一个特殊的Pause容器和一个或多个业务容器,Pause来源于pause-amd64镜像,Pause容器在Pod中具有非常重要的作用: Pause容器作为Pod容器的根容器,其本地于业务容器无关,它的状态代表了整个pod的状态。 Pod里的多个业务容器共享Pause容器的IP,每个Pod被分配一个独立的IP地址,Pod中的每个容器共享网络命名空间,包括IP地址和网络端口。Pod内的容器可以使用localhost相互通信。k8s支持底层网络集群内任意两个Pod之间进行通信。 Pod中的所有容器都可以访问共享volumes,允许这些容器共享数据。volumes还用于Pod中的数据持久化,以防其中一个容器需要重新启动而丢失数据。 kubernetes 的对象定义一般都用YAML或JSON格式的文件,可以使用这个网址验证yaml语法:https://codebeautify.org/yaml-validator Pod的定义 Kubernetes中所有的资源对象都可以采用YAML或者JS...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- MySQL8.0.19开启GTID主从同步CentOS8
- CentOS6,CentOS7官方镜像安装Oracle11G
- Mario游戏-低调大师作品
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- CentOS关闭SELinux安全模块
- SpringBoot2更换Tomcat为Jetty,小型站点的福音
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果