使用docker compose搭建一個elk系統(tǒng)的方法
找了不少使用 docker-elk 搭建的博客, 英文的閱讀吃力不說, 鏡像源也是慢的讓人頭皮發(fā)麻, 因此重新編排了一個docker-compose,源都是從 https://hub.docker.com/ 上找的, 即使拉的國內(nèi)鏡像源應(yīng)該也能很好的支持了吧?
環(huán)境
- Docker 18.06.0-ce
- docker-compose 1.22.0
給每個容器最少分配 1G 的內(nèi)存
軟件版本
- logstash: 5.*
- elasticsearch: 5.*
- kibana: 5.*
啟動前的配置
在各個目錄下都有對應(yīng)的 config 配置, 根據(jù)各自的情況自行處理
拿默認的 logstash/confg/test.conf 中的配置舉例:
input {
file {
#這里的路徑指的是 logstash 容器中的路徑, 外部接入需要使用 volume 進行目錄映射
path => "/logs/input/*"
}
# 在 logstash 容器中的輸入
stdin {}
# 因為做了本地5000端口和容器5000端口進行綁定, 所以可以用 nc 工具測試一下
# echo "Test Logstash TCP Input Plugin" | nc localhost 5000
tcp {
type => "tcp"
port => 5000
mode => "server"
}
}
output {
file {
#這里的路徑指的是 logstash 容器中的路徑, 外部接入需要使用 volume 進行目錄映射
path => "/logs/output/%{+yyyy-MM-dd-HH}/%{host}.log"
}
stdout {
codec => rubydebug
}
elasticsearch {
hosts => "elasticsearch:9200"
# 這里設(shè)置的 index 在 kibana 中會用到
index => "file-log-%{+YYYY.MM}"
}
}
啟動容器
執(zhí)行
git clone https://github.com/gaopengfei123123/docker-elk.git && cd docker-elk docker-compose up -d --build
等一會看到執(zhí)行成功的提示
Creating docker-elk_elasticsearch_1 ... done Creating docker-elk_logstash_1 ... done Creating docker-elk_kibana_1 ... done
在本地瀏覽器輸入 http://localhost:5601/ 進入 kibana 界面
注意, 第一次啟動時有可能會出現(xiàn)提示 elasticsearch not found 這類的問題, 可以先等個一兩分鐘刷新一下就好了, 如果還是不行就谷歌或者提 issue 解決一下
同目錄下輸入
docker-compose stop
則停止所有服務(wù)
測試一下
在 logs/input/ 目錄下新增個 test.log 文件, 然后輸入點東西驗證一下, 或者命令行執(zhí)行echo "Test Logstash TCP Input Plugin" | nc localhost 5000 通過 tcp 發(fā)送日志
docker-compose logs -f
查看各容器日志輸出
TODO
- 引入 kafka 做緩沖
- 搭建 es 集群
以上就是本文的全部內(nèi)容，希望對大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
這篇文章主要給大家介紹了關(guān)于Docker?desktop中文設(shè)置的方法步驟,Docker Desktop默認使用英文界面,要設(shè)置為中文界面,請按照以下步驟操作,需要的朋友可以參考下2024-03-03
這篇文章主要給大家介紹了關(guān)于docker中run命令30個常用參數(shù)的相關(guān)資料,docker?run命令是Docker中最常用的命令之一,用于創(chuàng)建并啟動一個新的容器實例,文中通過代碼介紹的非常詳細,需要的朋友可以參考下2024-01-01
Docker容器默認將日志寫入同一文件,可能導(dǎo)致磁盤滿,解決方案包括修改全局docker.service配置或針對特定容器修改hostconfig.json,下面給大家介紹Docker設(shè)置日志滾動的解決方案,感興趣的朋友跟隨小編一起看看吧2024-10-10
當(dāng)docker運行nginx鏡像時,設(shè)置端口映射,則只有該映射端口起作用,nginx配置的其他端口無效,接下來本文將給大家介紹docker運行nginx不生效的解決辦法,文中有相關(guān)的代碼示例供大家參考,需要的朋友可以參考下2024-01-01
upload-labs是一個使用php語言編寫的,專門收集滲透測試和CTF中遇到的各種上傳漏洞的靶場,旨在幫助大家對上傳漏洞有一個全面的了解,本文給大家介紹使用 Docker 搭建 upload-labs 的步驟,感興趣的朋友一起看看吧2024-03-03
Docker 是一個開源的應(yīng)用容器引擎，基于Go語言并遵從Apache2.0協(xié)議開源。這篇文章主要給大家介紹CentOS7.3中Docker的安裝教程，非常不錯，具有參考借鑒價值，感興趣的朋友一起學(xué)習(xí)吧2017-04-04
詳解ASP.NET Core 網(wǎng)站在Docker中運行
本篇文章主要介紹了詳解ASP.NET Core 網(wǎng)站在Docker中運行，非常具有實用價值，需要的朋友可以參考下2017-05-05
Docker搭建并啟動Logstash的實現(xiàn)方式
這篇文章主要介紹了Docker搭建并啟動Logstash的實現(xiàn)方式,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2023-08-08
Docker?部署?Minio?對象存儲服務(wù)器的過程詳解
Minio是一個輕量級的應(yīng)用程序,可以在各種環(huán)境中運行,包括公共云、私有云和混合云,這篇文章主要介紹了Docker?部署?Minio?對象存儲服務(wù)器的過程詳解,需要的朋友可以參考下2024-07-07
Docker環(huán)境搭建Jenkins在構(gòu)建任務(wù)時控制臺日志出現(xiàn)中文亂碼的問題
這篇文章主要介紹了Docker環(huán)境搭建Jenkins在構(gòu)建任務(wù)時控制臺日志出現(xiàn)中文亂碼的問題,本文通過圖文并茂的形式給大家介紹的非常詳細，具有一定的參考借鑒價值，需要的朋友可以參考下2020-02-02