使用Docker?Compose搭建部署ElasticSearch的配置過程
什么是 Elasticsearch?
Elasticsearch 是一個分布式的開源搜索和分析引擎,適用于所有類型的數(shù)據(jù),包括文本、數(shù)字、地理空間、結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。Elasticsearch 在Apache Lucene 的基礎(chǔ)上開發(fā)而成,由 Elasticsearch N.V.(即現(xiàn)在的 Elastic)于 2010 年首次發(fā)布。Elasticsearch 以其簡單的 REST 風(fēng)格 API、分布式特性、速度和可擴展性而聞名,是 Elastic Stack 的核心組件;Elastic Stack 是適用于數(shù)據(jù)采集、充實、存儲、分析和可視化的一組開源工具。人們通常將Elastic Stack 稱為 ELK Stack(代指 Elasticsearch、Logstash 和 Kibana),目前 Elastic Stack 包括一系列豐富的輕量型數(shù)據(jù)采集代理,這些代理統(tǒng)稱為Beats,可用來向 Elasticsearch 發(fā)送數(shù)據(jù)。
Elasticsearch 的用途是什么?
Elasticsearch 在速度和可擴展性方面都表現(xiàn)出色,而且還能夠索引多種類型的內(nèi)容,這意味著其可用于多種用例:
- 應(yīng)用程序搜索
- 網(wǎng)站搜索
- 企業(yè)搜索
- 日志處理和分析
- 基礎(chǔ)設(shè)施指標(biāo)和容器監(jiān)測
- 應(yīng)用程序性能監(jiān)測
- 地理空間數(shù)據(jù)分析和可視化
- 安全分析
- 業(yè)務(wù)分析
Elasticsearch 的工作原理是什么?
原始數(shù)據(jù)會從多個來源(包括日志、系統(tǒng)指標(biāo)和網(wǎng)絡(luò)應(yīng)用程序)輸入到 Elasticsearch 中。數(shù)據(jù)采集指在 Elasticsearch 中進行索引之前解析、標(biāo)準(zhǔn)化并充實這些原始數(shù)據(jù)的過程。這些數(shù)據(jù)在 Elasticsearch 中索引完成之后,用戶便可針對他們的數(shù)據(jù)運行復(fù)雜的查詢,并使用聚合來檢索自身數(shù)據(jù)的復(fù)雜匯總。在 Kibana 中,用戶可以基于自己的數(shù)據(jù)創(chuàng)建強大的可視化,分享儀表板,并對 Elastic Stack 進行管理。
Elasticsearch 索引是什么?
Elasticsearch 索引指相互關(guān)聯(lián)的文檔集合。Elasticsearch 會以 JSON 文檔的形式存儲數(shù)據(jù)。每個文檔都會在一組鍵(字段或?qū)傩缘拿Q)和它們對應(yīng)的值(字符串、數(shù)字、布爾值、日期、數(shù)值組、地理位置或其他類型的數(shù)據(jù))之間建立聯(lián)系。
Elasticsearch 使用的是一種名為倒排索引的數(shù)據(jù)結(jié)構(gòu),這一結(jié)構(gòu)的設(shè)計可以允許十分快速地進行全文本搜索。倒排索引會列出在所有文檔中出現(xiàn)的每個特有詞匯,并且可以找到包含每個詞匯的全部文檔。
在索引過程中,Elasticsearch 會存儲文檔并構(gòu)建倒排索引,這樣用戶便可以近實時地對文檔數(shù)據(jù)進行搜索。索引過程是在索引 API 中啟動的,通過此API 您既可向特定索引中添加 JSON 文檔,也可更改特定索引中的 JSON 文檔。
說明
由于我本機配置較低,無法開啟多臺虛擬機,ES的集群需要用到不同的ip,故而只搭建單機,不做集群。
一、目錄準(zhǔn)備
mkdir /docker/es mkdir /docker/es/data mkdir /docker/es/config mkdir /docker/es/plugins
二、es配置準(zhǔn)備
cd /docker/es vi elasticsearch.yml
使用以下配置:
# 集群名稱 cluster.name: elasticsearch-cluster # 節(jié)點名稱 node.name: es-node-1 # 綁定host,0.0.0.0代表當(dāng)前節(jié)點的ip network.host: 0.0.0.0 # 設(shè)置其它節(jié)點和該節(jié)點交互的ip地址,如果不設(shè)置它會自動判斷,值必須是個真實的ip地址(本機ip) network.publish_host: 192.168.200.135 # 設(shè)置對外服務(wù)的http端口,默認為9200 http.port: 9200 # 設(shè)置節(jié)點間交互的tcp端口,默認是9300 transport.tcp.port: 9300 # 是否支持跨域,默認為false http.cors.enabled: true # 當(dāng)設(shè)置允許跨域,默認為*,表示支持所有域名,如果我們只是允許某些網(wǎng)站能訪問,那么可以使用正則表達式。比如只允許本地地址。 /https?:\/\/localhost(:[0-9]+)?/ http.cors.allow-origin: "*" # 表示這個節(jié)點是否可以充當(dāng)主節(jié)點 node.master: true # 是否充當(dāng)數(shù)據(jù)節(jié)點 node.data: true # 所有主從節(jié)點ip:port #discovery.seed_hosts: ["192.168.200.135:9300"] #本地只有一個節(jié)點,無法正常啟動,先注釋 # 這個參數(shù)決定了在選主過程中需要 有多少個節(jié)點通信 預(yù)防腦裂 N/2+1 discovery.zen.minimum_master_nodes: 1 #初始化主節(jié)點 #cluster.initial_master_nodes: ["es-node-1"] #本地只有一個節(jié)點,無法正常啟動,先注釋
三、準(zhǔn)備docker-compose.yml
vi docker-compose.yml
內(nèi)容如下:
version: '3' services: elasticsearch: image: elasticsearch:6.8.13 restart: always hostname: es1 container_name: es-single volumes: - /docker/es/data:/usr/share/elasticsearch/data - /docker/es/plugins:/usr/share/elasticsearch/plugins - /docker/es/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml environment: - "ES_JAVA_OPTS=-Xms512m -Xmx512m" - discovery.type=single-node ports: - '9200:9200' #java、集群通信端口 - '9300:9300' #http通信端口 privileged: true #環(huán)境變量
四、啟動容器
docker-compose up -d
五、查看
docker-compose ps
如果啟動是吧,可以使用docker container logs 容器id/es-single logs
查看啟動日志
參考:
docker部署redis/mongodb/rabbitmq中的es小節(jié)
如果出現(xiàn)啟動日志中出現(xiàn)java.nio.file.AccessDeniedException: /usr/share/elasticsearch/data/nodes
,需要給data目錄設(shè)置權(quán)限 chmod 777 /docker/es/data
到此這篇關(guān)于使用DockerCompose搭建部署ElasticSearch的文章就介紹到這了,更多相關(guān)DockerCompose部署ElasticSearch內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
利用Docker搭建本地https環(huán)境的完整步驟
這篇文章主要給大家介紹了關(guān)于如何利用Docker搭建本地https環(huán)境的完整步驟,文中通過示例代碼將實現(xiàn)的步驟介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2018-04-04群暉NAS利用Docker容器搭建KMS激活服務(wù)器實現(xiàn)激活windows系統(tǒng)和office(操作步驟)
本文跟大家分享一下如何利用群暉NAS的Docker容器套件搭建KMS服務(wù)器,并演示如何利用我們自己的KMS服務(wù)器激活Windows操作系統(tǒng)與Microsoft Office,感興趣的朋友跟隨小編一起看看吧2021-05-05docker image tag為什么出現(xiàn)none的原因及解決
當(dāng)我們使用docker加載新的鏡像時,有時候會發(fā)現(xiàn)Repository和Tag名稱都為none的情況,這通常是由于沒有指定正確的標(biāo)簽名稱或者倉庫名稱所導(dǎo)致的,本文主要介紹了docker image tag為什么出現(xiàn)none的原因及解決,感興趣的可以了解一下2023-10-10