logstash使用date處理時間有幾種方式？

logstash使用date處理時間有幾種方式？針對這個問題，今天小編總結了這篇文章，希望能幫助更多想解決這個問題的朋友找到更加簡單易行的辦法。

1、第一種，直接在配置文件中自定義時間格式

這是tomcat配置文件中的一段日志時間配置，按照這樣的配置，那么輸出的日志是這樣子的：

然后你繼續(xù)在logstash中這樣子配置

此時logstash就不會報"_dateparsefailed"錯誤了。

這種形式在nginx、apache等web服務器中配置是最好的，也比較方便分析。

2、第二種，帶有中括號的（其實跟上面是一回事）

日志本身輸出是這樣子的

[07/Feb/2018:16:24:19 +0800]

帶有一對中括號

那么在grok插件中這樣子定義就行：

\[%{HTTPDATE:timestamp}\]

date插件可以直接轉換，如下：

最后的效果是這樣子的

這樣子也不會報錯

3、ISO8601形式

在日志文件中原生日志是這樣子的：

2019-03-19 13:08:07.782

重點是后面的”.782“，后面附加以毫秒為單位的。

 那么grok插件中可以這樣子定義匹配的規(guī)則：

此時date插件可以這樣子定義：

 date {
                match => [ "access_time","MMM  d HH:mm:ss", "MMM dd HH:mm:ss", "ISO8601"]
        }

上面的形式?jīng)]有寫錯，直接復制粘貼到配置文件即可

最后匹配如下：

這樣子也不會報”_dateparsefailed“錯誤。

最后附加一張時間匹配規(guī)則表，平時可做參考

4、根據(jù)時間戳來轉換數(shù)據(jù)。

在mysql的慢查詢?nèi)罩局惺占瘯r，由于某些情況下只能根據(jù)時間戳來確定時間，那么我們就必須使用轉換的方案了。主要是將時間戳轉換成UNIX風格的時間，比如：

mysql慢查詢?nèi)罩镜臅r間是這樣子的：

那么我們在logstash的配置文件中使用的date插件這樣子來寫：

這樣子就可以匹配成功了。

上面的“timestamp_mysql”是我在grok插件中的匹配后的時間賦值，比如：

%{NUMBER:timestamp_mysql};

4、ISO8601形式

時間日志：

2018-02-09T10:57:42+08:00

此時在grok中可以這么寫：

grok {
        match => { "message" ; "{TIMESTAMP_ISO8601:localtime}
}

而在時間轉存到@timestamp有兩種寫法可以供使用

date {
        match => ["localtime", "yyyy-MM-dd'T'HH:mm:ssZZ"]
        target => "@timestamp"
}

或者是

date {
        match => ["localtime", "ISO8601"]
    }

都可以實現(xiàn)ISO8601時間的匹配格式

 看完上述內(nèi)容，你們掌握logstash使用date處理時間的方法了嗎？如果還想學到更多技能或想了解更多相關內(nèi)容，歡迎關注億速云行業(yè)資訊頻道，感謝各位的閱讀！