淺談Docker consul的容器服務(wù)更新與發(fā)現(xiàn)
一、什么是服務(wù)注冊(cè)與發(fā)現(xiàn)
服務(wù)注冊(cè)與發(fā)現(xiàn)是微服務(wù)架構(gòu)中不可或缺的重要組件。起初服務(wù)都是單節(jié)點(diǎn)的,不保障高可用性,也不考慮服務(wù)的壓力承載,服務(wù)之間調(diào)用單純的通過(guò)接口訪(fǎng)問(wèn)。直到后來(lái)出現(xiàn)了多個(gè)節(jié)點(diǎn)的分布式架構(gòu),起初的解決手段是在服務(wù)前端負(fù)載均衡,這樣前端必須要知道所有后端服務(wù)的網(wǎng)絡(luò)位置,并配置在配置文件中。這里就會(huì)有幾個(gè)問(wèn)題:
如果需要調(diào)用后端服務(wù)A-N,就需要配置N個(gè)服務(wù)的網(wǎng)絡(luò)位置,配置很麻煩后端服務(wù)的網(wǎng)絡(luò)位置變化,都需要改變每個(gè)調(diào)用者的配置
既然有這些問(wèn)題,那么服務(wù)注冊(cè)與發(fā)現(xiàn)就是解決這些問(wèn)題的。后端服務(wù)A-N可以把當(dāng)前自己的網(wǎng)絡(luò)位置注冊(cè)到服務(wù)發(fā)現(xiàn)模塊,服務(wù)發(fā)現(xiàn)就以K-V的方式記錄下來(lái),K一般是服務(wù)名,V就是IP:PORT。服務(wù)發(fā)現(xiàn)模塊定時(shí)的進(jìn)行健康檢查,輪詢(xún)查看這些后端服務(wù)能不能訪(fǎng)問(wèn)的了。前端在調(diào)用后端服務(wù)A-N的時(shí)候,就跑去服務(wù)發(fā)現(xiàn)模塊問(wèn)下它們的網(wǎng)絡(luò)位置,然后再調(diào)用它們的服務(wù)。這樣的方式就可以解決上面的問(wèn)題了,前端完全不需要記錄這些后端服務(wù)的網(wǎng)絡(luò)位置,前端和后端完全解耦!
二、什么是consul
consul是google開(kāi)源的一個(gè)使用go語(yǔ)言開(kāi)發(fā)的服務(wù)管理軟件。支持多數(shù)據(jù)中心、分布式高可用的、服務(wù)發(fā)現(xiàn)和配置共享。采用Raft算法,用來(lái)保證服務(wù)的高可用。內(nèi)置了服務(wù)注冊(cè)與發(fā)現(xiàn)框架、分布一致性協(xié)議實(shí)現(xiàn)、健康檢查、Key/Value存儲(chǔ)、多數(shù)據(jù)中心方案,不再需要依賴(lài)其他工具(比如ZooKeeper等)。服務(wù)部署簡(jiǎn)單,只有一個(gè)可運(yùn)行的二進(jìn)制的包。每個(gè)節(jié)點(diǎn)都需要運(yùn)行agent,他有兩種運(yùn)行模式server 和 client。 每個(gè)數(shù)據(jù)中心官方建議需要3或5個(gè)server節(jié)點(diǎn)以保證數(shù)據(jù)安全,同時(shí)保證server-leader的選舉能夠正確的進(jìn)行。
在client模式下,所有注冊(cè)到當(dāng)前節(jié)點(diǎn)的服務(wù)會(huì)被轉(zhuǎn)發(fā)到server節(jié)點(diǎn),本身是不持久化這些信息。
在server模式下,功能和client模式相似,唯一不同的是,它會(huì)把所有的信息持久化到本地,這樣遇到故障,信息是可以被保留的。
server-leader是所有server節(jié)點(diǎn)的老大,它和其它server節(jié)點(diǎn)不同的是,它需要負(fù)責(zé)同步注冊(cè)的信息給其它的server節(jié)點(diǎn),同時(shí)也要負(fù)責(zé)各個(gè)節(jié)點(diǎn)的健康監(jiān)測(cè)。
consul提供的一些關(guān)鍵特性:
- 服務(wù)注冊(cè)與發(fā)現(xiàn):consul通過(guò)DNS或者HTTP接口使服務(wù)注冊(cè)和服務(wù)發(fā)現(xiàn)變的很容易,一些外部服務(wù),例如saas提供的也可以一樣注冊(cè)。
- 健康檢查:健康檢測(cè)使consul可以快速的告警在集群中的操作。和服務(wù)發(fā)現(xiàn)的集成,可以防止服務(wù)轉(zhuǎn)發(fā)到故障的服務(wù)上面。
- Key/Value存儲(chǔ):一個(gè)用來(lái)存儲(chǔ)動(dòng)態(tài)配置的系統(tǒng)。提供簡(jiǎn)單的HTTP接口,可以在任何地方操作。
- 多數(shù)據(jù)中心:無(wú)需復(fù)雜的配置,即可支持任意數(shù)量的區(qū)域。
安裝consul是用于服務(wù)注冊(cè),也就是容器本身的一些信息注冊(cè)到consul里面,其他程序可以通過(guò)consul獲取注冊(cè)的相關(guān)服務(wù)信息,這就是服務(wù)注冊(cè)與發(fā)現(xiàn)。
三、consul 部署
環(huán)境準(zhǔn)備
consul服務(wù)器 192.168.154.11 運(yùn)行consul服務(wù)、nginx服務(wù)、consul-template守護(hù)進(jìn)程
registrator服務(wù)器 192.168.154.10 運(yùn)行registrator容器、運(yùn)行nginx容器
1. 建立 Consul 服務(wù)(consul服務(wù)器)
mkdir /opt/consul cp consul_0.9.2_linux_amd64.zip /opt/consul cd /opt/consul unzip consul_0.9.2_linux_amd64.zip mv consul /usr/local/bin/ #設(shè)置代理,在后臺(tái)啟動(dòng) consul 服務(wù)端 consul agent \ -server \ -bootstrap \ -ui \ -data-dir=/var/lib/consul-data \ -bind=192.168.154.11 \ -client=0.0.0.0 \ -node=consul-server01 &> /var/log/consul.log &
- -server: 以server身份啟動(dòng)。默認(rèn)是client。
- -bootstrap :用來(lái)控制一個(gè)server是否在bootstrap模式,在一個(gè)數(shù)據(jù)中心中只能有一個(gè)server處于bootstrap模式,當(dāng)一個(gè)server處于 bootstrap模式時(shí),可以自己選舉為 server-leader。
- -bootstrap-expect=2 :集群要求的最少server數(shù)量,當(dāng)?shù)陀谶@個(gè)數(shù)量,集群即失效。
- -ui :指定開(kāi)啟 UI 界面,這樣可以通過(guò) http://localhost:8500/ui 這樣的地址訪(fǎng)問(wèn) consul 自帶的 web UI 界面。
- -data-dir :指定數(shù)據(jù)存儲(chǔ)目錄。
- -bind :指定用來(lái)在集群內(nèi)部的通訊地址,集群內(nèi)的所有節(jié)點(diǎn)到此地址都必須是可達(dá)的,默認(rèn)是0.0.0.0。
- -client :指定 consul 綁定在哪個(gè) client 地址上,這個(gè)地址提供 HTTP、DNS、RPC 等服務(wù),默認(rèn)是 127.0.0.1。
- -node :節(jié)點(diǎn)在集群中的名稱(chēng),在一個(gè)集群中必須是唯一的,默認(rèn)是該節(jié)點(diǎn)的主機(jī)名。
- -datacenter :指定數(shù)據(jù)中心名稱(chēng),默認(rèn)是dc1。
netstat -lntp | grep consul
啟動(dòng)consul后默認(rèn)會(huì)監(jiān)聽(tīng)5個(gè)端口:
- 8300:replication、leade r farwarding的端口,集群內(nèi)數(shù)據(jù)的讀寫(xiě)和復(fù)制
- 8301:lan cossip的端口,單個(gè)數(shù)據(jù)中心gossip協(xié)議通訊
- 8302:wan gossip的端口,跨數(shù)據(jù)中心gossip協(xié)議通訊
- 8500:web ui界面的端口,提供獲取服務(wù)列表、注冊(cè)服務(wù)、注銷(xiāo)服務(wù)等HTTP接口;提供UI服務(wù)
- 8600:使用dns協(xié)議查看節(jié)點(diǎn)信息的端口,采用DNS協(xié)議提供服務(wù)發(fā)現(xiàn)功能
2. 查看集群信息
#查看members狀態(tài) consul members Node Address Status Type Build Protocol DC consul-server01 192.168.154.11:8301 alive server 0.9.2 2 dc1 #查看集群狀態(tài) consul operator raft list-peers Node ID Address State Voter RaftProtocol consul-server01 192.168.154.11:8300 192.168.154.11:8300 leader true 2
consul info | grep leader leader = true leader_addr = 192.168.154.11:8300
3. 通過(guò) http api 獲取集群信息
curl 127.0.0.1:8500/v1/status/peers #查看集群server成員 curl 127.0.0.1:8500/v1/status/leader #集群 server-leader curl 127.0.0.1:8500/v1/catalog/services #注冊(cè)的所有服務(wù) curl 127.0.0.1:8500/v1/catalog/nginx #查看 nginx 服務(wù)信息 curl 127.0.0.1:8500/v1/catalog/nodes #集群節(jié)點(diǎn)詳細(xì)信息
4. 部署registrator服務(wù)器
容器服務(wù)自動(dòng)加入 Nginx 集群
1. 安裝 Gliderlabs/Registrator
Gliderlabs/Registrator 可檢查容器運(yùn)行狀態(tài)自動(dòng)注冊(cè),還可注銷(xiāo) docker 容器的服務(wù)到服務(wù)配置中心。目前支持 Consul、Etcd 和 SkyDNS2。
#確保docker服務(wù)運(yùn)行 systemctl status docker
docker pull gliderlabs/registrator
docker run -d \ --name=registrator \ --net=host \ -v /var/run/docker.sock:/tmp/docker.sock \ --restart=always \ gliderlabs/registrator:latest \ --ip=192.168.154.10 \ consul://192.168.154.11:8500
- –net=host :把運(yùn)行的docker容器設(shè)定為host網(wǎng)絡(luò)模式。
- -v /var/run/docker.sock:/tmp/docker.sock :把宿主機(jī)的Docker守護(hù)進(jìn)程(Docker daemon)默認(rèn)監(jiān)聽(tīng)的Unix域套接字掛載到容器中。
- –restart=always :設(shè)置在容器退出時(shí)總是重啟容器。
- –ip :剛才把network指定了host模式,所以我們指定ip為宿主機(jī)的ip。
- consul :指定consul服務(wù)器的IP和端口。
用瀏覽器訪(fǎng)問(wèn) http://192.168.154.11:8500
創(chuàng)建兩個(gè)nginx的容器
docker run -itd --name c1 -p 1314:80 nginx:1.14 docker run -itd --name c1 -p 1315:80 nginx:1.14 docker ps -a
刪除c2的nginx容器
docker rm -f c2
5. 配置consul-template
Consul-Template是基于Consul的自動(dòng)替換配置文件的應(yīng)用。Consul-Template是一個(gè)守護(hù)進(jìn)程,用于實(shí)時(shí)查詢(xún)Consul集群信息,并更新文件系統(tǒng)上任意數(shù)量的指定模板,生成配置文件。更新完成以后,可以選擇運(yùn)行 shell 命令執(zhí)行更新操作,重新加載 Nginx。
Consul-Template可以查詢(xún)Consul中的服務(wù)目錄、Key、Key-values 等。這種強(qiáng)大的抽象功能和查詢(xún)語(yǔ)言模板可以使 Consul-Template 特別適合動(dòng)態(tài)的創(chuàng)建配置文件。例如:創(chuàng)建Apache/Nginx Proxy Balancers 、 Haproxy Backends等。
部署環(huán)境
docker run -itd --name c2 -p 1315:80 nginx:1.14 docker run -itd --name c3 -p 1316:80 nginx:1.14 docker run -itd --name c4 -p 1317:80 nginx:1.14
也可以在 consul 服務(wù)器上查看注冊(cè)了哪些應(yīng)用
curl 127.0.0.1:8500/v1/catalog/services
再到 registrator 服務(wù)器注冊(cè)兩個(gè)容器
docker run -itd --name myapp01 -p 2324:80 nginx:1.14 docker run -itd --name myapp02 -p 2325:80 nginx:1.14
6. 準(zhǔn)備 template nginx 模板文件
開(kāi)啟一臺(tái)Nginx服務(wù)器,修改配置文件
cd /etc/nginx/ vim nginx.conf ... include /etc/nginx/consul/*.conf; ... nginx -t mkdir /etc/nginx/consul systemctl restart nginx
#準(zhǔn)備 template nginx 模板文件 cd /opt mkdir consul cd consul/ vim nginx.ctmpl stream { upstream backend { {{range service "nginx"}} server {{.Address}}:{{.Port}}; {{end}} } server { listen 8080; proxy_pass backend; } }
配置并啟動(dòng) template
consul-template --consul-addr 192.168.154.11:8500 --template "/opt/consul/nginx.ctmpl:/etc/nginx/consul/consul_nginx.conf:/usr/sbin/nginx -s reload" --log-level info
- –consul-addr 指定consul服務(wù)端地址
- –template 指定格式,第一個(gè)字段是編輯模板文件的所在位置,第二個(gè)字段要把模板文件生成的temp文件存放在哪個(gè)目錄的位置并命名,第三個(gè)字段nginx加載
- –log-level 日志級(jí)別 info打印 &前臺(tái)運(yùn)行
在另外開(kāi)啟Nginx服務(wù)器的進(jìn)程查看生成配置文件
cd /etc/nginx/consul/ cat consul_nginx.conf
驗(yàn)證Consul-Template效果,先到 registrator 服務(wù)器刪除節(jié)點(diǎn),查看是否實(shí)現(xiàn)自動(dòng)更新
docker ps -a docker rm -f c4 docker rm -f c3
瀏覽器訪(fǎng)問(wèn) http://192.168.154.11:8500
再到nginx服務(wù)器查看生成的temp文件的內(nèi)容
實(shí)現(xiàn)了自動(dòng)更新
到 registrator 服務(wù)器增加節(jié)點(diǎn),查看是否實(shí)現(xiàn)自動(dòng)更新
docker run -itd --name c3 -p 5520:80 nginx:1.14 docker run -itd --name c4 -p 5521:80 nginx:1.14
** registrator 服務(wù)器到c1、c2、c3、c4容器里創(chuàng)建網(wǎng)頁(yè)文件**
docker exec -it c1 bash cd /usr/share/nginx/html/ echo '<h1>this is c1 test web</h1>' > index.html exit docker exec -it c2 bash cd /usr/share/nginx/html/ echo '<h1>this is c2 test web</h1>' > index.html exit docker exec -it c3 bash cd /usr/share/nginx/html/ echo '<h1>this is c3 test web</h1>' > index.html exit docker exec -it c4 bash cd /usr/share/nginx/html/ echo '<h1>this is c4 test web</h1>' > index.html exit
實(shí)現(xiàn)了負(fù)載均衡
7. consul 多節(jié)點(diǎn)
添加一臺(tái)已有docker環(huán)境的服務(wù)器192.168.154.10/24及192.168.154.12/24加入已有的群集192.168.154.11/24中
192.168.154.10及192.168.154.12部署consul 服務(wù)
#192.168.154.10 consul agent \ -server \ -ui \ -data-dir=/var/lib/consul-data \ -bind=192.168.154.10 \ -client=0.0.0.0 \ -node=consul-server02 \ -enable-script-checks=true \ -datacenter=dc1 \ -join 192.168.154.11 &> /var/log/consul.log &
#192.168.154.12 consul agent \ -server \ -ui \ -data-dir=/var/lib/consul-data \ -bind=192.168.154.12 \ -client=0.0.0.0 \ -node=consul-server03 \ -enable-script-checks=true \ -datacenter=dc1 \ -join 192.168.154.11 &> /var/log/consul.log &
- -enable-script-checks=true :設(shè)置檢查服務(wù)為可用
- -datacenter : 數(shù)據(jù)中心名稱(chēng)
- -join :加入到已有的集群中
#consul服務(wù)器192.168.154.11 consul members consul operator raft list-peers
關(guān)閉consul
#192.168.154.10consul leave
consul服務(wù)器192.168.154.11查看群集
consul operator raft list-peers
到此這篇關(guān)于淺談Docker consul的容器服務(wù)更新與發(fā)現(xiàn)的文章就介紹到這了,更多相關(guān)Docker consul服務(wù)更新與發(fā)現(xiàn)內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
PVE下擴(kuò)展openwrt?for?x86分區(qū)大小方式
本文介紹了在PVE環(huán)境下如何對(duì)OpenWRT虛擬機(jī)的分區(qū)進(jìn)行擴(kuò)容,包括磁盤(pán)調(diào)整、軟件安裝、分區(qū)配置和系統(tǒng)引導(dǎo)等步驟,操作前需做好備份,以防數(shù)據(jù)丟失2024-10-10centos7安裝/升級(jí)docker和docker compose方式
文章總結(jié)了在升級(jí)Docker和安裝Docker Compose時(shí)遇到的問(wèn)題,包括舊版安裝和新版安裝的差異、docker-compose的安裝問(wèn)題以及卸載前的注意事項(xiàng)2024-12-12Docker系列compose?ymal文件解析學(xué)習(xí)
這篇文章主要介紹了Docker系列之compose?ymal文件解析學(xué)習(xí),有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-10-10docker-compose管理容器network與ip問(wèn)題
這篇文章主要介紹了docker-compose管理容器network與ip問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-01-01MacOS?Docker?安裝的實(shí)現(xiàn)步驟
本文主要介紹了MacOS?Docker?安裝的實(shí)現(xiàn)步驟,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-06-06Mac下部署springBoot項(xiàng)目到Docker中(demo)
本文通過(guò)一個(gè)簡(jiǎn)單的demo給大家分享Mac下部署springBoot項(xiàng)目到Docker的方法,感興趣的朋友一起看看吧2018-01-01基于Docker的PHP調(diào)用基于Docker的Mysql數(shù)據(jù)庫(kù)
Docker 是一個(gè)開(kāi)源的應(yīng)用容器引擎,自從接觸docker以來(lái),一直想建立基于Docker的PHP調(diào)用基于Docker的Mysql數(shù)據(jù)庫(kù),下面通過(guò)本文給大家介紹下,感興趣的朋友參考下2016-11-11