首页 > 其他 > 详细

日志收集系统

时间:2019-06-18 09:06:13      阅读:98      评论:0      收藏:0      [点我收藏+]

一、项目背景

a.每个系统都有日志,当系统出现问题时,需要通过日志解决问题
b.当系统机器比较少时,登陆到服务器上查看即可满足 
c.当系统机器规模巨大,登陆到机器上查看几乎不现实

二、解决方案

a.把机器上的日志实时收集,统一的存储到中心系统
b.然后再对这些日志建立索引,通过搜索即可以找到对应日志 
c.通过提供界面友好的web界面,通过web即可以完成日志搜索

三、面临的问题

a.实时日志量非常大,每天几十亿条
b.日志准实时收集,延迟控制在分钟级别 
c.能够水平可扩展

四、业界方案ELK

技术分享图片

五、elk方案问题

a.运维成本高,每增加一个日志收集,都需要手动修改配置
b.监控缺失,无法准确获取logstash的状态 
c.无法做定制化开发以及维护

六、日志收集系统设计

技术分享图片

日志收集系统

原文:https://www.cnblogs.com/xcx-bwt/p/11042841.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!