欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

使用filebeat收集并解析springboot日志過程示例

 更新時間：2023年08月06日 08:36:18   作者：codecraft  
這篇文章主要為大家介紹了使用filebeat收集并解析springboot日志實現(xiàn)過程示例,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪

序

本文主要研究一下如何使用filebeat收集并解析springboot日志

安裝

在官網(wǎng)的下載頁面filebeat/downloads提供了一些特定平臺的安裝包，不過對應(yīng)linux最為省事的安裝方式就是直接下載x86_64壓縮包，然后解壓即可

wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-8.9.0-linux-x86_64.tar.gz

解析

filebat.yml主要有input和output組成

json

比如對于json格式的日志，其input示例如下

filebeat.inputs:
  - type: log
    paths:
      - "/data/logs/*/error.log"
    document_type: json
    json.message_key: log
    json.keys.under_root: true
    json.overwrite_keys: true
    fields:
      logType: errJson
    fields_under_root: true

 對于json類型的指定document_type為json，其中json.message_key用于指定json中哪個字段為message

logback

springboot logback默認的file pattern為
org/springframework/boot/spring-boot/2.7.14/spring-boot-2.7.14.jar!/org/springframework/boot/logging/logback/defaults.xml

<property name="FILE_LOG_PATTERN" value="${FILE_LOG_PATTERN:-%d{${LOG_DATEFORMAT_PATTERN:-yyyy-MM-dd HH:mm:ss.SSS}} ${LOG_LEVEL_PATTERN:-%5p} ${PID:- } --- [%t] %-40.40logger{39} : %m%n${LOG_EXCEPTION_CONVERSION_WORD:-%wEx}}"/>

 打印出來的示例如下

2023-08-05 20:47:11.069  INFO 3396 --- [           main] org.example.Main                         : Started Main in 1.662 seconds (JVM running for 2.228)

針對這個，可以用filebeat的dissect來解析，如下

filebeat.inputs:
- type: stdin
  processors:
    - dissect:
        tokenizer: "%{logDate} %{logTime}  %{logLevel} %{pid} --- [%{thread}] %{logger} : %{message}"
        field: "message"
output.console:
  enabled: true
  pretty: true

解析出來的json如下

{
  "@timestamp": "2023-08-05T12:53:28.738Z",
  "@metadata": {
    "beat": "filebeat",
    "type": "_doc",
    "version": "8.9.0"
  },
  "log": {
    "offset": 0,
    "file": {
      "path": ""
    }
  },
  "message": "2023-08-05 20:47:11.069  INFO 3396 --- [           main] org.example.Main                         : Started Main in 1.662 seconds (JVM running for 2.228)",
  "input": {
    "type": "stdin"
  },
  "dissect": {
    "logTime": "20:47:11.069",
    "logLevel": "INFO",
    "pid": "3396",
    "thread": "           main",
    "logger": "org.example.Main                        ",
    "message": "Started Main in 1.662 seconds (JVM running for 2.228)",
    "logDate": "2023-08-05"
  },
  "agent": {
    "name": "dembp",
    "type": "filebeat",
    "version": "8.9.0",
    "ephemeral_id": "4e4a9ee3-4682-41ab-ad9b-f4821543d991",
    "id": "597a1a87-8165-492b-a9e8-d6530376b179"
  },
  "ecs": {
    "version": "8.0.0"
  },
  "host": {
    "name": "dembp"
  }
}

處理換行

上面給的例子其實沒有處理換行的情況，這個時候可以使用filebeat的multiline來指定，比如

filebeat.inputs:
- type: stdin
  multiline:
    pattern: '^\d{4}-\d{2}-\d{2}'
    negate: true
    match: after

 這里指定用^\d{4}-\d{2}-\d{2}來匹配日期開頭的日志，匹配上了就是一條日志；negate為true表示沒有匹配上的那一行歸屬上面一條日志，而match的after代表合并到上一行的末尾，before代表合并到下一行的開頭

輸出

對于大型的應(yīng)用，一般filebeat做輕量級的收集，不做解析，解析交給logstash或者elasticsearch pipeline或者其他中間服務(wù)；而對于一些小型規(guī)模的或者是非生產(chǎn)環(huán)境，在多部署一個logstash顯得有點繁瑣，可以用dissect替代logstash的grok進行日志解析，然后就可以直接output到目標服務(wù)，比如elasticsearch

logstash

output:
  logstash:
    hosts: ["192.168.99.100:5044"]

elasticsearch

output.elasticsearch:
  hosts: ["192.168.99.100:9200"]
  username: "xxxx"
  password: "xxxx"

小結(jié)

filebeat提供了processor能力，其中dissect替代logstash的grok進行日志解析，非常便捷。

doc  dissect

以上就是使用filebeat收集并解析springboot日志的詳細內(nèi)容，更多關(guān)于使用filebeat收集并解析springboot日志的資料請關(guān)注腳本之家其它相關(guān)文章！

相關(guān)文章

  • Java接入通義千問的簡單方法示例

    Java接入通義千問的簡單方法示例

    ? 通義千問是阿里云開發(fā)的大語言模型(Large language Model )LLM,旨在提供廣泛的知識和普適性,可以理解和回答各領(lǐng)域中的問題,這篇文章主要給大家介紹了關(guān)于Java接入通義千問的簡單方法,需要的朋友可以參考下
    2024-02-02
  • Java多線程之簡單模擬售票功能

    Java多線程之簡單模擬售票功能

    這篇文章主要介紹了Java多線程之簡單模擬售票功能,文中有非常詳細的代碼示例,對正在學(xué)習(xí)java的小伙伴們有很好地幫助,需要的朋友可以參考下
    2021-04-04
  • Android中Parcelable的作用實例解析

    Android中Parcelable的作用實例解析

    這篇文章主要介紹了Android中Parcelable的作用,對于Android初學(xué)者有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下
    2014-08-08
  • Java實現(xiàn)游戲飛機大戰(zhàn)-III的示例代碼

    Java實現(xiàn)游戲飛機大戰(zhàn)-III的示例代碼

    這篇文章主要為大家介紹了如何利用Java實現(xiàn)經(jīng)典的游戲之飛機大戰(zhàn)，文中采用了swing技術(shù)進行了界面化處理，感興趣的小伙伴可以動手試一試
    2022-02-02
  • SchedulingConfigurer實現(xiàn)動態(tài)定時,導(dǎo)致ApplicationRunner無效解決

    SchedulingConfigurer實現(xiàn)動態(tài)定時,導(dǎo)致ApplicationRunner無效解決

    這篇文章主要介紹了SchedulingConfigurer實現(xiàn)動態(tài)定時,導(dǎo)致ApplicationRunner無效的解決方案，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教
    2023-05-05
  • Java?泛型考古?泛型擦除?包裝類詳細解析

    Java?泛型考古?泛型擦除?包裝類詳細解析

    泛型是在Java?SE?1.5引入的的新特性，本質(zhì)是參數(shù)化類型，也就是說所操作的數(shù)據(jù)類型被指定為一個參數(shù)。這種參數(shù)類型可以用在類、接口和方法的創(chuàng)建中，分別稱為泛型類、泛型接口、泛型方法，本篇我們一起來學(xué)習(xí)泛型考古、泛型擦除、包裝類
    2022-03-03
  • Java中this關(guān)鍵字的用法詳解

    Java中this關(guān)鍵字的用法詳解

    我知道很多朋友都和我一樣,在JAVA程序中似乎經(jīng)常見到this,自己也偶爾用到它,但是到底this該怎么用,卻心中無數(shù),下面這篇文章主要給大家介紹了關(guān)于Java中this關(guān)鍵字用法的相關(guān)資料,需要的朋友可以參考下
    2023-05-05
  • java優(yōu)化if-else的11種方案

    java優(yōu)化if-else的11種方案

    If-Else結(jié)構(gòu)是一種常見的條件判斷語句,通過優(yōu)化If-Else結(jié)構(gòu),可以提高代碼的可讀性和執(zhí)行效率,本文主要介紹了java優(yōu)化if-else的11種方案,感興趣的可以了解一下
    2024-08-08
  • Java Process與Runtime()的使用及調(diào)用cmd命令阻塞的解決方案

    Java Process與Runtime()的使用及調(diào)用cmd命令阻塞的解決方案

    這篇文章主要介紹了Java Process與Runtime()的使用及調(diào)用cmd命令阻塞的解決方案，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教
    2021-06-06
  • 深入了解Java虛擬機棧以及內(nèi)存模型

    深入了解Java虛擬機棧以及內(nèi)存模型

    這篇文章主要介紹了深入了解Java虛擬機棧以及內(nèi)存模型,文中有非常詳細的代碼示例,對正在學(xué)習(xí)java的小伙伴們有很大的幫助,需要的朋友可以參考下
    2021-04-04

最新評論