首页 > 其他 > 详细

logstash关于date时间处理的几种方式总结

时间:2019-03-19 15:53:05      阅读:1452      评论:0      收藏:0      [点我收藏+]

1、第一种,直接在配置文件中自定义时间格式

技术分享图片

这是tomcat配置文件中的一段日志时间配置,按照这样的配置,那么输出的日志是这样子的:

技术分享图片

然后你继续在logstash中这样子配置

技术分享图片

此时logstash就不会报"_dateparsefailed"错误了。

这种形式在nginx、apache等web服务器中配置是最好的,也比较方便分析。

2、第二种,带有中括号的(其实跟上面是一回事)

日志本身输出是这样子的

[07/Feb/2018:16:24:19 +0800]

带有一对中括号

那么在grok插件中这样子定义就行:

\[%{HTTPDATE:timestamp}\]

date插件可以直接转换,如下:

技术分享图片

最后的效果是这样子的

技术分享图片

这样子也不会报错

3、ISO8601形式

在日志文件中原生日志是这样子的:

2019-03-19 13:08:07.782

重点是后面的”.782“,后面附加以毫秒为单位的。

 那么grok插件中可以这样子定义匹配的规则:

技术分享图片

此时date插件可以这样子定义:

 date {
                match => [ "access_time","MMM  d HH:mm:ss", "MMM dd HH:mm:ss", "ISO8601"]
        }

上面的形式没有写错,直接复制粘贴到配置文件即可

最后匹配如下:

技术分享图片

这样子也不会报”_dateparsefailed“错误。

最后附加一张时间匹配规则表,平时可做参考

技术分享图片

 

 遇到其他的继续总结: 

logstash关于date时间处理的几种方式总结

原文:https://www.cnblogs.com/FengGeBlog/p/10559034.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!