阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

如何用CentOS上的SARG日志分析器来分析Squid日志

171次阅读
没有评论

共计 3200 个字符,预计需要花费 8 分钟才能阅读完成。

在上一节教程中,我们展示了如何在 CentOS 上使用 Squid 配置透明代理。Squid 提供了很多有用的特性,但是分析一个原始 Squid 日志文件并不直接。比如,你如何分析下面 Squid 日志中的时间戳和数字?

  1. 1404788984.4291162172.17.1.23 TCP_MISS/302436 GET http://facebook.com/ – DIRECT/173.252.110.27 text/html
  2. 1404788985.04612416172.17.1.23 TCP_MISS/2004169 CONNECT stats.pusher.com:443 DIRECT/173.255.223.127
  3. 1404788986.124174172.17.1.23 TCP_MISS/200955 POST http://ocsp.digicert.com/ – DIRECT/117.18.237.29 application/ocsp-response
  4. 1404788989.738342172.17.1.23 TCP_MISS/2003890 CONNECT www.google.com:443 DIRECT/74.125.200.106
  5. 1404788989.757226172.17.1.23 TCP_MISS/200942 POST http://clients1.google.com/ocsp – DIRECT/74.125.200.113 application/ocsp-response
  6. 1404788990.8393939172.17.1.23 TCP_MISS/20078944 CONNECT fbstatica.akamaihd.net:443 DIRECT/184.26.162.35
  7. 1404788990.8462148172.17.1.23 TCP_MISS/200118947 CONNECT fbstatica.akamaihd.net:443 DIRECT/184.26.162.35
  8. 1404788990.8492151172.17.1.23 TCP_MISS/20076809 CONNECT fbstatica.akamaihd.net:443 DIRECT/184.26.162.35
  9. 1404788991.140611172.17.1.23 TCP_MISS/200110073 CONNECT fbstatica.akamaihd.net:443 DIRECT/184.26.162.35

我们使用 yum 来安装安装必要的依赖。

  1. # yum install gcc make wget httpd crond

在启动时加载必要的服务

  1. # service httpd start; service crond start
  2. # chkconfig httpd on; chkconfig crond on

现在我们下载并解压 SARG

  1. # wget http://downloads.sourceforge.net/project/sarg/sarg/sarg-2.3.8/sarg-2.3.8.tar.gz?
  2. # tar zxvf sarg-2.3.8.tar.gz
  3. # cd sarg-2.3.8

注意 : 对于 64 位的 Linux,log.c 的源代码需要用下面的文件打补丁。

  1. 1506c1506
  2. <if(fprintf(ufile->file,“%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,ip,url,nbytes,code,elap_time,smartfilter)<=0){
  3. >if(fprintf(ufile->file,“%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,ip,url,(int64_t)nbytes,code,elap_time,smartfilter)<=0){
  4. 1513c1513
  5. < fprintf(fp_log,“%s\t%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,user,ip,url,nbytes,code,elap_time,smartfilter);
  6. > fprintf(fp_log,“%s\t%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,user,ip,url,(int64_t)nbytes,code,elap_time,smartfilter);
  7. 1564c1564
  8. < printf(“LEN=\t%”PRIi64“\n”,nbytes);
  9. > printf(“LEN=\t%”PRIi64“\n”,(int64_t)nbytes);

如下继续并编译 / 安装 SARG

  1. # ./configure
  2. # make
  3. # make install

SARG 安装之后,配置文件可以按你的要求修改。下面是一个 SARG 配置的例子。

  1. # vim /usr/local/etc/sarg.conf

  1. access_log /var/log/squid/access.log
  2. temporary_dir /tmp
  3. output_dir /var/www/html/squidreports
  4. date_format e ## We use Europian DD-MM-YYYY format here ##
  5. ## we don’t want multiple reports for single day/week/month ##
  6. overwrite_report yes

现在是时候测试运行了,我们用调试模式运行 sarg 来查看是否存在错误。

  1. # sarg -x

如果 i 一切正常,sarg 会根系 Squid 日志,并在 /var/www/html/squid-reports 下创建报告。报告也可以在浏览器中通过地址 http://< 服务器 IP>/squid-reports/ 访问。

如何用 CentOS 上的 SARG 日志分析器来分析 Squid 日志

如何用 CentOS 上的 SARG 日志分析器来分析 Squid 日志

、SARG 可以用于创建日、周、月度报告。时间范围用“-d”参数来指定,值的形式很可能为 day-n、week-n 或者 month-n,n 的值为向前推移的天 / 周 / 月的数量。比如,使用 week-1,SARG 会生成之前一星期的报告。使用 day-2,SARG 会生成之前两天的报告。

Squid

作为演示,我们会准备一个计划任务来每天运行 SARG。

  1. # vim /etc/cron.daily/sarg

  1. #!/bin/sh
  2. /usr/local/bin/sarg d day1

文件需要可执行权限。

  1. # chmod 755 /usr/local/bin/sarg

现在 SARG 应该会每天准备关于 Squid 管理的流量报告。这些报告可以很容易地通过 SARG 网络接口访问。

总结一下,SARG 一款基于网络的工具,它可以分析 Squid 日志,并以更详细的方式展示分析。系统管理员可以利用 SARG 来监视哪些网站被访问了,并跟踪访问量最大的网站和用户。本教程包含了 SARG 配置工作。你可以进一步自定义配置来满足自己的要求。

希望这篇教程对您有帮助。


Sarmed Rahman

  • Twitter 地址
  • LinkedIn 地址

Sarmed Rahman 是一名孟加拉国的 IT 专业人士。他坚持时不时地写作技术文章,并坚信技术可以通过分享而提高。在空闲时间里,他喜欢打游戏,喜欢和朋友一起度过。

Squid 的详细介绍 :请点这里
Squid 的下载地址 :请点这里


via: http://xmodulo.com/2014/07/analyze-squid-logs-sarg-log-analyzer-centos.html

译者:geekpi 校对:Caroline

本文由 LCTT 原创翻译,Linux 中国 荣誉推出

更多 CentOS 相关信息见 CentOS 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=14

正文完
星哥说事-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-20发表,共计3200字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中