一文詳解Elasticsearch和MySQL之間的數(shù)據(jù)同步問題
Elasticsearch中的數(shù)據(jù)是來自于Mysql數(shù)據(jù)庫的,因此當數(shù)據(jù)庫中的數(shù)據(jù)進行增刪改后,Elasticsearch中的數(shù)據(jù),索引也必須跟著做出改變。而對于管理服務(wù)(MySQL)和搜索服務(wù)(Elasticsearch)往往會在不同的微服務(wù)上。
可以通過微服務(wù)之間的同步調(diào)用來解決數(shù)據(jù)同步問題,雖然實現(xiàn)起來比較簡單,但是在搜索服務(wù)中引入管理服務(wù)時,業(yè)務(wù)的耦合度相對來說是比較高的。因此可以通過消息隊列的形式來異步通知管理服務(wù)的改變。這樣做的有優(yōu)點是耦合度較低,但是依賴于消息隊列的耦合度。
下面根據(jù)一個例子來介紹使用RabbitMQ來解決Elasticsearch和MySQL之間的數(shù)據(jù)同步問題。當酒店數(shù)據(jù)庫中發(fā)送增刪改時,Elasticsearch中的數(shù)據(jù)也同時發(fā)生對應(yīng)的改變。
首先在兩塊微服務(wù)中引入RabbitMQ的依賴:
引入依賴
<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency>
創(chuàng)建常量類,將交換機和隊列名稱設(shè)置為常量,使用時方便取名。
public class MqConstants { /** * 交換機名稱 */ public final static String HOTEL_EXCHANGE = "hotel.topic"; /** * 監(jiān)聽新增和修改的隊列 */ public final static String HOTEL_INSERT_QUEUE = "hotel.insert.queue"; /** * 監(jiān)聽刪除的隊列 */ public final static String HOTEL_DELETE_QUEUE = "hotel.delete.queue"; /** * 新增或修改的路由鍵 */ public final static String HOTEL_INSERT_KEY = "hotel.insert"; /** * 刪除的路由鍵 */ public final static String HOTEL_DELETE_KEY = "hotel.delete"; }
創(chuàng)建配置類,聲明交換機,并將路由鍵,隊列與交換機之間互相綁定:
@Configuration public class MqConfig { @Bean public TopicExchange topicExchange(){ return new TopicExchange(MqConstants.HOTEL_EXCHANGE,true,false); } @Bean public Queue insertQueue(){ return new Queue(MqConstants.HOTEL_INSERT_QUEUE,true); } @Bean public Queue deleteQueue(){ return new Queue(MqConstants.HOTEL_DELETE_QUEUE,true); } @Bean public Binding insertQueueBinding(){ return BindingBuilder.bind(insertQueue()).to(topicExchange()).with(MqConstants.HOTEL_INSERT_KEY); } @Bean public Binding deleteQueueBinding(){ return BindingBuilder.bind(deleteQueue()).to(topicExchange()).with(MqConstants.HOTEL_DELETE_KEY); } }
編寫controller層,將酒店數(shù)據(jù)保存到數(shù)據(jù)庫中,并將消息發(fā)送到消息隊列里:
@Autowired private IHotelService hotelService; @Autowired private RabbitTemplate rabbitTemplate; @PutMapping public void save(@RequestBody Hotel hotel){ hotelService.save(hotel); rabbitTemplate.convertAndSend(MqConstants.HOTEL_EXCHANGE,MqConstants.HOTEL_INSERT_KEY,hotel.getId()); } @DeleteMapping("/{id}") public void deleteById(@PathVariable("id") Long id){ hotelService.removeById(id); rabbitTemplate.convertAndSend(MqConstants.HOTEL_EXCHANGE,MqConstants.HOTEL_DELETE_KEY,id); }
在service中加入兩個方法,根據(jù)id增加和根據(jù)id刪除:
void insertById(Long id); void deleteById(Long id);
利用Ctrl+Alt+B的快捷鍵,在service的實現(xiàn)類里面重寫方法進行實現(xiàn):
@Override public void insertById(Long id) { try { Hotel hotel = getById(id); HotelDoc hotelDoc = new HotelDoc(hotel); // 1.準備Request IndexRequest request = new IndexRequest("hotel").id(hotelDoc.getId().toString()); // 2.準備請求參數(shù)DSL,其實就是文檔的JSON字符串 request.source(JSON.toJSONString(hotelDoc), XContentType.JSON); // 3.發(fā)送請求 client.index(request, RequestOptions.DEFAULT); } catch (IOException e) { throw new RuntimeException(e); } } @Override public void deleteById(Long id) { try { DeleteRequest request = new DeleteRequest("hotel", id.toString()); // 2.發(fā)送請求 client.delete(request, RequestOptions.DEFAULT); } catch (IOException e) { throw new RuntimeException(e); } }
這樣即可完成Elasticsearch和MySQL之間的數(shù)據(jù)同步。
到此這篇關(guān)于一文詳解Elasticsearch和MySQL之間的數(shù)據(jù)同步問題的文章就介紹到這了,更多相關(guān)Elasticsearch MySQL數(shù)據(jù)同步內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
使用vue3.x+vite+element-ui+vue-router+vuex+axios搭建項目
因為vue3出了一段時間了,element也出了基于vue3.x版本的element-plus,這篇文章就拿他們搭建一個項目,希望能給你帶來幫助2021-08-08JDK動態(tài)代理提高代碼可維護性和復(fù)用性利器
這篇文章主要為大家介紹了JDK動態(tài)代理提高代碼可維護性和復(fù)用性利器,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-10-10Apache?Commons?Imaging處理圖像實例深究
這篇文章主要為大家介紹了Apache?Commons?Imaging處理圖像的實例探索深究,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-12-12Springboot視圖解析器ViewResolver使用實例
這篇文章主要介紹了Springboot視圖解析器ViewResolver使用實例,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習或者工作具有一定的參考學(xué)習價值,需要的朋友可以參考下2020-04-04利用SpringBoot實現(xiàn)多數(shù)據(jù)源的兩種方式總結(jié)
關(guān)于動態(tài)數(shù)據(jù)源的切換的方案有很多,核心只有兩種,一種是構(gòu)建多套環(huán)境,另一種是基于spring原生的AbstractRoutingDataSource切換,這篇文章主要給大家介紹了關(guān)于利用SpringBoot實現(xiàn)多數(shù)據(jù)源的兩種方式,需要的朋友可以參考下2021-10-10獲取Java的MyBatis框架項目中的SqlSession的方法
SqlSession中包括已經(jīng)映射好的SQL語句,這樣對象實例就可以直接拿過來用了,那么這里就來講解獲取Java的MyBatis框架項目中的SqlSession的方法2016-06-06Java Agent入門學(xué)習之動態(tài)修改代碼
這篇文章主要給大家分享了Java Agent入門學(xué)習之動態(tài)修改代碼的相關(guān)資料,文中介紹的非常詳細,對大家具有一定的參考學(xué)習價值,需要的朋友們下面來一起看看吧。2017-07-07詳解Java synchronized關(guān)鍵字的用法
在多線程編程中常常使用鎖機制來確保同一時刻只有一個線程能夠修改共享內(nèi)存,在Java中一般是使用synchronized作為鎖機制,下面就讓我們來學(xué)習一下如何使用synchronized實現(xiàn)線程安全吧2023-08-08