Docker?compose部署minio服務(wù)
介紹
最近才知道m(xù)inio這個(gè)對(duì)象存儲(chǔ)服務(wù)中間件,簡(jiǎn)直相見(jiàn)恨晚,只怪我見(jiàn)識(shí)太短淺(哭泣臉)。
說(shuō)得通俗易懂點(diǎn),minio的作用就是用來(lái)存儲(chǔ)文件的,比如圖片、視頻、音頻等各種類(lèi)型的文件。
那么問(wèn)題來(lái)了,java本身就可以直接把文件寫(xiě)到磁盤(pán)里面,為什么還要用minio呢?
- minio有完善的文件管理功能,包括針對(duì)文件的上傳,下載,刪除等
- minio有強(qiáng)大的糾刪功能,即便磁盤(pán)損壞,在一定程度上時(shí)可以避免丟失文件的
- minio有完善的權(quán)限管理功能,它可以針對(duì)不同的業(yè)務(wù)角色,分配不同的操作權(quán)限
- 天然的分布式存儲(chǔ)功能
- 高性能;在標(biāo)準(zhǔn)硬件上,對(duì)象存儲(chǔ)的讀/寫(xiě)速度最高可以高達(dá)183 GB/s和171 GB/s
- 文檔全面,簡(jiǎn)單易用
所以綜上所述,相較于其他的文件存儲(chǔ)方案,minio的競(jìng)爭(zhēng)力還是很大的。下面附上官網(wǎng)鏈接。
單機(jī)版部署
一般為了簡(jiǎn)單集成minio client,我們會(huì)自己部署一個(gè)單機(jī)版的先用用?,F(xiàn)在我們開(kāi)始,講解一下如何快速部署一個(gè)單機(jī)版minio服務(wù):
version: "3.7" services: minio: ? image: "quay.io/minio/minio:RELEASE.2022-08-02T23-59-16Z" ? ports: ? ? - "9000:9000" ? ? - "9001:9001" ? volumes: ? ? - "./minio/data1:/data1" ? ? - "./minio/data2:/data2" ? command: server --console-address ":9001" http://minio/data{1...2} ? environment: ? ? - MINIO_ROOT_USER=admin ? ? - MINIO_ROOT_PASSWORD=12345678 ? ? ?#- MINIO_ACCESS_KEY=AKIAIOSFODNN7EXAMPLE ? ? ?#- MINIO_SECRET_KEY=wJalrXUtnFEMI/K7MDENG/bPxRfiCYEXAMPLEKEY ? healthcheck: ? ? test: ["CMD", "curl", "-f", "http://localhost:9000/minio/health/live"] ? ? interval: 30s ? ? timeout: 20s ? ? retries: 3
以上需要注意的幾個(gè)點(diǎn):
- 需要暴露的端口有兩個(gè),一個(gè)是API暴露端口9000,一個(gè)是服務(wù)管理頁(yè)面暴露端口9001。啟動(dòng)成功后,訪(fǎng)問(wèn)9001端口即可進(jìn)入管理頁(yè)面。
- 單機(jī)版部署也可掛載多個(gè)磁盤(pán),單個(gè)服務(wù)掛載超過(guò)(等于)4個(gè)磁盤(pán),自動(dòng)啟動(dòng)糾刪碼模式,可以預(yù)防磁盤(pán)損壞的情況下,導(dǎo)致文件丟失。
- 最新版本里面已經(jīng)不使用MINIO_ACCESS_KEY和MINIO_SECRET_KEY兩個(gè)環(huán)境變量了,改由MINIO_ROOT_USER和MINIO_ROOT_PASSWORD替換。
- 啟動(dòng)命令中
--console-address
代表指定服務(wù)管理頁(yè)面暴露的端口,http://minio/data{1...2}
代表指定的minio服務(wù)下面掛載的目標(biāo)磁盤(pán)為/data1和/data2,否則磁盤(pán)掛載不起作用。API暴露端口可通過(guò)參數(shù)--address指定。
糾刪碼模式部署
為了啟動(dòng)糾刪碼模式,我們需要在部署的服務(wù)上掛載至少4塊磁盤(pán):
version: "3.7" services: minio: ? image: "quay.io/minio/minio:RELEASE.2022-08-02T23-59-16Z" ? ports: ? ? - "9000:9000" ? ? - "9001:9001" ? volumes: ? ? - "./minio/data1:/data1" ? ? - "./minio/data2:/data2" ? ? - "./minio/data3:/data3" ? ? - "./minio/data4:/data4" ? command: server --console-address ":9001" http://minio/data{1...4} ? environment: ? ? - MINIO_ROOT_USER=admin ? ? - MINIO_ROOT_PASSWORD=12345678 ? healthcheck: ? ? test: ["CMD", "curl", "-f", "http://localhost:9000/minio/health/live"] ? ? interval: 30s ? ? timeout: 20s ? ? retries: 3
在單機(jī)模式部署的情況下,調(diào)整為糾刪碼模式,我們需要修改兩個(gè)地方:
- 掛載的磁盤(pán)增加到四個(gè)
- 啟動(dòng)命令里面補(bǔ)上對(duì)應(yīng)的掛載磁盤(pán)
該模式運(yùn)行其中某個(gè)磁盤(pán)出現(xiàn)損壞的情況,在磁盤(pán)損壞后也能保證文件不會(huì)丟失。
分布式部署
在單機(jī)上部署糾刪碼模式只能保證磁盤(pán)損壞的情況下,文件不丟失;并不能解決單點(diǎn)故障的問(wèn)題,所以我們下面為了避免單點(diǎn)故障導(dǎo)致服務(wù)不可用,把minio服務(wù)改成分布式部署。
我們就部署四個(gè)機(jī)器,每個(gè)機(jī)器掛載四個(gè)磁盤(pán),這樣的話(huà),我們就形成了分布式糾刪碼模式了,這樣的話(huà),我們文件存儲(chǔ)服務(wù)的可靠性就大大地增強(qiáng)了。
- 首先準(zhǔn)備四臺(tái)主機(jī),ip地址分別為192.168.2.231,192.168.2.232,192.168.2.233,192.168.2.234;
- 其次,我們分別在四臺(tái)機(jī)器上部署一個(gè)minio服務(wù)實(shí)例,參考以下docker-compose.yml:
version: "3.7" services: minio: ? image: "quay.io/minio/minio:RELEASE.2022-08-02T23-59-16Z" ? ports: ? ? - "9000:9000" ? ? - "9001:9001" ? volumes: ? ? - "./minio/data1:/data1" ? ? - "./minio/data2:/data2" ? ? - "./minio/data3:/data3" ? ? - "./minio/data4:/data4" ? command: server --console-address ":9001" http://192.168.2.231:9000/data{1...4} http://192.168.2.232:9000/data{1...4} http://192.168.2.233:9000/data{1...4} http://192.168.2.234:9000/data{1...4} ? environment: ? ? - MINIO_ROOT_USER=admin ? ? - MINIO_ROOT_PASSWORD=12345678 ? healthcheck: ? ? test: ["CMD", "curl", "-f", "http://localhost:9000/minio/health/live"] ? ? interval: 30s ? ? timeout: 20s ? ? retries: 3
在啟動(dòng)命令中,我們需要把集群中所有的服務(wù)ip都寫(xiě)進(jìn)去,這樣的話(huà),minio分布式服務(wù)才能正常通信。
- 部署負(fù)載均衡服務(wù)nginx
當(dāng)四臺(tái)機(jī)器上的服務(wù)全部起來(lái)后,我們需要提供一個(gè)負(fù)載均衡服務(wù)作為訪(fǎng)問(wèn)minio分布式服務(wù)的統(tǒng)一的入口,首當(dāng)其沖我們就想到了nginx,所以我們?cè)谑褂胐ocker compose部署一個(gè)nginx服務(wù):
version: '3.7' services: nginx: ? image: nginx:1.19.2-alpine ? hostname: nginx ? volumes: ? ? - ./nginx.conf:/etc/nginx/nginx.conf:ro ? ports: ? ? - "9000:9000" ? ? - "9001:9001"
下面是nginx配置文件:
user nginx; worker_processes auto; error_log /var/log/nginx/error.log warn; pid ? ? ? /var/run/nginx.pid; ? events { ? ?worker_connections 4096; } ? http { ? ?include ? ? ? /etc/nginx/mime.types; ? ?default_type application/octet-stream; ? ? ?log_format ?main ?'$remote_addr - $remote_user [$time_local] "$request" ' ? ? ? ? ? ? ? ? ? ? ?'$status $body_bytes_sent "$http_referer" ' ? ? ? ? ? ? ? ? ? ? ?'"$http_user_agent" "$http_x_forwarded_for"'; ? ? ?access_log /var/log/nginx/access.log main; ? ?sendfile ? ? ? on; ? ?keepalive_timeout 65; ? ? ?# include /etc/nginx/conf.d/*.conf; ? ? ?upstream minio { ? ? ? ?server 192.168.2.231:9000; ? ? ? ?server 192.168.2.232:9000; ? ? ? ?server 192.168.2.233:9000; ? ? ? ?server 192.168.2.234:9000; ? } ? ? ?upstream console { ? ? ? ?ip_hash; ? ? ? ?server 192.168.2.231:9001; ? ? ? ?server 192.168.2.232:9001; ? ? ? ?server 192.168.2.233:9001; ? ? ? ?server 192.168.2.234:9001; ? } ? ?server { ? ? ? ?listen ? ? ? 9000; ? ? ? ?listen [::]:9000; ? ? ? ?server_name localhost; ? ? ? ? ?# To allow special characters in headers ? ? ? ?ignore_invalid_headers off; ? ? ? ?# Allow any size file to be uploaded. ? ? ? ?# Set to a value such as 1000m; to restrict file size to a specific value ? ? ? ?client_max_body_size 0; ? ? ? ?# To disable buffering ? ? ? ?proxy_buffering off; ? ? ? ?proxy_request_buffering off; ? ? ? ? ?location / { ? ? ? ? ? ?proxy_set_header Host $http_host; ? ? ? ? ? ?proxy_set_header X-Real-IP $remote_addr; ? ? ? ? ? ?proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; ? ? ? ? ? ?proxy_set_header X-Forwarded-Proto $scheme; ? ? ? ? ? ? ?proxy_connect_timeout 300; ? ? ? ? ? ?# Default is HTTP/1, keepalive is only enabled in HTTP/1.1 ? ? ? ? ? ?proxy_http_version 1.1; ? ? ? ? ? ?proxy_set_header Connection ""; ? ? ? ? ? ?chunked_transfer_encoding off; ? ? ? ? ? ? ?proxy_pass http://minio; ? ? ? } ? }? ? ?server { ? ? ? ?listen ? ? ? 9001; ? ? ? ?listen [::]:9001; ? ? ? ?server_name localhost; ? ? ? ? ?# To allow special characters in headers ? ? ? ?ignore_invalid_headers off; ? ? ? ?# Allow any size file to be uploaded. ? ? ? ?# Set to a value such as 1000m; to restrict file size to a specific value ? ? ? ?client_max_body_size 0; ? ? ? ?# To disable buffering ? ? ? ?proxy_buffering off; ? ? ? ?proxy_request_buffering off; ? ? ? ? ?location / { ? ? ? ? ? ?proxy_set_header Host $http_host; ? ? ? ? ? ?proxy_set_header X-Real-IP $remote_addr; ? ? ? ? ? ?proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; ? ? ? ? ? ?proxy_set_header X-Forwarded-Proto $scheme; ? ? ? ? ? ?proxy_set_header X-NginX-Proxy true; ? ? ? ? ? ? ?# This is necessary to pass the correct IP to be hashed ? ? ? ? ? ?real_ip_header X-Real-IP; ? ? ? ? ? ? ?proxy_connect_timeout 300; ? ? ? ? ? ? ? ? ? ? ? ?# To support websocket ? ? ? ? ? ?proxy_http_version 1.1; ? ? ? ? ? ?proxy_set_header Upgrade $http_upgrade; ? ? ? ? ? ?proxy_set_header Connection "upgrade"; ? ? ? ? ? ? ? ? ? ? ? ?chunked_transfer_encoding off; ? ? ? ? ? ? ?proxy_pass http://console; ? ? ? } ? } }
啟動(dòng)nginx服務(wù),這樣所有的請(qǐng)求都通過(guò)nginx負(fù)載均衡到minio服務(wù)上。
這樣完成了minio服務(wù)的三種docker compose部署方式,逐次遞進(jìn)地講解了每種方式的優(yōu)勢(shì)。如果我們只是為了集成minio到我們的應(yīng)用程序中,只需要搭建一個(gè)單機(jī)版的服務(wù)即可。更多相關(guān)Docker compose內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- Docker部署MinIO鏡像的方法(保姆級(jí)教程)
- Docker?部署?Minio?對(duì)象存儲(chǔ)服務(wù)器的過(guò)程詳解
- Docker下部署MinIO存儲(chǔ)服務(wù)通過(guò)Buckets實(shí)現(xiàn)文件的遠(yuǎn)程上傳功能
- Docker部署Minio的實(shí)現(xiàn)方法
- Docker部署MinIO對(duì)象存儲(chǔ)服務(wù)器結(jié)合Cpolar實(shí)現(xiàn)遠(yuǎn)程訪(fǎng)問(wèn)的操作方法
- Docker快速部署MinIO對(duì)象存儲(chǔ)服務(wù)的最新實(shí)戰(zhàn)指南
相關(guān)文章
Docker安裝Jenkins-2.249.3-1.1的詳細(xì)過(guò)程
這篇文章主要介紹了Docker安裝Jenkins-2.249.3-1.1,通過(guò)編寫(xiě)docke安裝腳本來(lái)實(shí)現(xiàn)安裝目的,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-10-10Docker出現(xiàn)tag顯示none鏡像的處理方案
本文介紹了Docker中出現(xiàn)REPOSITORY和TAG都顯示為<none>的鏡像,即懸掛鏡像的原因,并提供了解決方法,包括查找和刪除懸掛鏡像,以及為它們指定新的標(biāo)簽2025-02-02基于alpine用dockerfile創(chuàng)建的爬蟲(chóng)Scrapy鏡像的實(shí)現(xiàn)
這篇文章主要介紹了基于alpine用dockerfile創(chuàng)建的爬蟲(chóng)Scrapy鏡像的實(shí)現(xiàn),小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-12-12docker-compose部署eureka服務(wù)端、客戶(hù)端的案例代碼
這篇文章主要介紹了docker-compose部署eureka服務(wù)端、客戶(hù)端,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-03-03