>>分享SPSS,Hadoop等大数据处理技术,以及分布式架构以及集群系统的构建 书籍支持  卫琴直播  品书摘要  在线测试  资源下载  联系我们
发表一个新主题 开启一个新投票 回复文章 您是本文章第 21430 个阅读者 刷新本主题
 * 贴子主题:  Apacheの日志分割 回复文章 点赞(0)  收藏  
作者:flybird    发表时间:2020-01-27 14:37:42     消息  查看  搜索  好友  邮件  复制  引用

    为什么我们要进行日志分割呢

      随着网站的访问量越来越大,web服务器产生的日志文件也会越来越大,如果不对其进行分割管理,单个日志文件会变得异常庞大,不利于对日志进行综合分析、监控等。另外,当服务器遇到故障时,运维人员就要打开日志文件进行分析,打开的过程必然会消耗很长时间,也势必会增加处理故障的时间。因此管理好海量的日志文件对管理网站是有重大意义的。

  这篇博客就简单的介绍日志分割的两种办法。首先使用yum -y install httpd安装Apache的软件包。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后修改主配置文件,/etc/httpd/conf/httpd.conf,把这里的主机名换成一个测试的域名。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后找到日志文件的那一行,后面的路径换成ErrorLog "| /usr/sbin/rotatelogs -l /var/log/httpd/www.demo.com.error_%Y%m%dlog 86400",这是固定写法。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    错误日志修改完成后,我们要修改正常的访问日志。把原来配置语句注释掉,然后在下面添加新的语句CustomLog "| /usr/sbin/rotatelogs -l logs/demo.com.access_%Y%m%dlog 86400" combined即可,完后保存退出启动服务就可以了。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后这本以日期分割的日志文件就出现了。然后这边把系统日期更改一下然后看看日志文件能不能生成,现在系统时间2019年10月10号,这边把系统时间改成2019年10月20号,然后重启一下服务。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后以2019年10月20号为分割的日志文件就出现了。这是以Apache自带的工具实现日志分割,这边还有一个第三方软件也可以进行日志分割就是cronolog。最后会附上下载连接。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    首先我们把这个软件包推送到Linux系统的mnt目录当中。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后使用rpm -ivh cronolog-1.6.2-14.el7.x86_64.rpm 命令安装该软件包,然后查看这个命令的路径。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后修改Apache的配置文件。ErrorLog "| /usr/sbin/cronolog /var/log/httpd/abc.com.error_%Y%m%dlog"这是错误日志的写法,CustomLog "| /usr/sbin/cronolog /var/log/httpd/abc.com.access_%Y%m%dlog" combined这是访问日志的写法,注意当中的域名要修改为自己的域名。

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

    然后删除日志路径下的所有文件,重启服务。最后童谣日志的分割文件也出来,两种工具都能达到同样的效果。

     点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小 .

点击在新窗口中浏览原图
CTRL+鼠标滚轮放大或缩小

                      

----------------------------
原文链接:https://blog.51cto.com/14451009/2445325

程序猿的技术大观园:www.javathinker.net



[这个贴子最后由 flybird 在 2020-01-28 17:46:50 重新编辑]
  Java面向对象编程-->操作符
  JavaWeb开发-->JSP中使用JavaBean(Ⅰ)
  JSP与Hibernate开发-->Spring、JPA与Hibernate的整合
  Java网络编程-->XML数据处理
  精通Spring-->绑定CSS样式
  Vue3开发-->通过Vuex进行状态管理
  实时统计每天pv,uv的sparkStreaming结合redis结果存入mysql供...
  kubernetes之Ingress部署
  playbook自动安装kafka集群
  合并两套环境的FastDFS数据
  MySQL 每秒 570000 的写入,如何实现
  大数据分布式平台Hadoop2.7.7 + Spark2.2.2搭建
  快速部署DBus体验实时数据流计算
  Spark高级排序与TopN问题揭密
  Hive 企业级调优
  大数据项目之仿天猫数据分析
  00-Spark介绍
  Hadoop是否过时?
  浅谈 Spark 应用程序的性能调优
  SQL Hadoop核心结束揭秘
  Hive基础教程
  更多...
 IPIP: 已设置保密
楼主      
1页 0条记录 当前第1
发表一个新主题 开启一个新投票 回复文章


中文版权所有: JavaThinker技术网站 Copyright 2016-2026 沪ICP备16029593号-2
荟萃Java程序员智慧的结晶,分享交流Java前沿技术。  联系我们
如有技术文章涉及侵权,请与本站管理员联系。