MySQL跨實(shí)例進(jìn)行數(shù)據(jù)查詢(xún)的項(xiàng)目實(shí)踐
前言:
在實(shí)際工作中,我們可能會(huì)遇到需要操作其他數(shù)據(jù)庫(kù)實(shí)例的部分表,但又不想系統(tǒng)連接多庫(kù)。此時(shí)我們就需要用到數(shù)據(jù)表映射。如同Oracle中的DBlink一般,使用過(guò)Oracle DBlink數(shù)據(jù)庫(kù)鏈接的人都知道可以跨實(shí)例來(lái)進(jìn)行數(shù)據(jù)查詢(xún),同樣的,Mysql自帶的FEDERATED引擎完美的幫我們解決了該問(wèn)題。本篇文章介紹FEDERATED引擎的開(kāi)啟和使用。
1.開(kāi)啟FEDERATED引擎
若需要?jiǎng)?chuàng)建FEDERATED引擎表,則目標(biāo)端實(shí)例要開(kāi)啟FEDERATED引擎。從MySQL5.5開(kāi)始FEDERATED引擎默認(rèn)安裝 只是沒(méi)有啟用,進(jìn)入命令行輸入 show engines; FEDERATED行狀態(tài)為NO。
mysql> show engines; +--------------------+---------+----------------------------------------------------------------+--------------+------+------------+ | Engine | Support | Comment | Transactions | XA | Savepoints | +--------------------+---------+----------------------------------------------------------------+--------------+------+------------+ | PERFORMANCE_SCHEMA | YES | Performance Schema | NO | NO | NO | | MRG_MYISAM | YES | Collection of identical MyISAM tables | NO | NO | NO | | CSV | YES | CSV storage engine | NO | NO | NO | | BLACKHOLE | YES | /dev/null storage engine (anything you write to it disappears) | NO | NO | NO | | MyISAM | YES | MyISAM storage engine | NO | NO | NO | | InnoDB | DEFAULT | Supports transactions, row-level locking, and foreign keys | YES | YES | YES | | ARCHIVE | YES | Archive storage engine | NO | NO | NO | | MEMORY | YES | Hash based, stored in memory, useful for temporary tables | NO | NO | NO | | FEDERATED | NO | Federated MySQL storage engine | NULL | NULL | NULL | +--------------------+---------+----------------------------------------------------------------+--------------+------+------------+ 9 rows in set (0.00 sec)
在配置文件[mysqld]中加入一行:federated,
然后重啟數(shù)據(jù)庫(kù),F(xiàn)EDERATED引擎就開(kāi)啟了。
mysql> show engines; +--------------------+---------+----------------------------------------------------------------+--------------+------+------------+ | Engine | Support | Comment | Transactions | XA | Savepoints | +--------------------+---------+----------------------------------------------------------------+--------------+------+------------+ | CSV | YES | CSV storage engine | NO | NO | NO | | MRG_MYISAM | YES | Collection of identical MyISAM tables | NO | NO | NO | | MyISAM | YES | MyISAM storage engine | NO | NO | NO | | BLACKHOLE | YES | /dev/null storage engine (anything you write to it disappears) | NO | NO | NO | | PERFORMANCE_SCHEMA | YES | Performance Schema | NO | NO | NO | | MEMORY | YES | Hash based, stored in memory, useful for temporary tables | NO | NO | NO | | ARCHIVE | YES | Archive storage engine | NO | NO | NO | | InnoDB | DEFAULT | Supports transactions, row-level locking, and foreign keys | YES | YES | YES | | FEDERATED | YES | Federated MySQL storage engine | NO | NO | NO | +--------------------+---------+----------------------------------------------------------------+--------------+------+------------+ 9 rows in set (0.00 sec)
2.使用CONNECTION創(chuàng)建FEDERATED表
使用CONNECTION創(chuàng)建FEDERATED引擎表通用模型:
CREATE TABLE (......) ENGINE =FEDERATED CONNECTION='mysql://username:password@hostname:port/database/tablename'
簡(jiǎn)單創(chuàng)建測(cè)試:
# 源端表結(jié)構(gòu)及數(shù)據(jù) mysql> show create table test_table\G *************************** 1. row *************************** Table: test_table Create Table: CREATE TABLE `test_table` ( `increment_id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵', `stu_id` int(11) NOT NULL COMMENT '學(xué)號(hào)', `stu_name` varchar(20) DEFAULT NULL COMMENT '學(xué)生姓名', `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創(chuàng)建時(shí)間', `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '修改時(shí)間', PRIMARY KEY (`increment_id`), UNIQUE KEY `uk_stu_id` (`stu_id`) ) ENGINE=InnoDB AUTO_INCREMENT=7 DEFAULT CHARSET=utf8 COMMENT='學(xué)生表' 1 row in set (0.00 sec) mysql> select * from test_table; +--------------+--------+----------+---------------------+---------------------+ | increment_id | stu_id | stu_name | create_time | update_time | +--------------+--------+----------+---------------------+---------------------+ | 1 | 1001 | wang | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 2 | 1002 | dfsfd | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 3 | 1003 | fdgfg | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 4 | 1004 | sdfsdf | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 5 | 1005 | dsfsdg | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 6 | 1006 | fgd | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | +--------------+--------+----------+---------------------+---------------------+ 6 rows in set (0.00 sec) # 目標(biāo)端建表及查詢(xún) # 注意ENGINE=FEDERATED CONNECTION后為源端地址 避免使用帶@的密碼 mysql> CREATE TABLE `test_table` ( -> `increment_id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵', -> `stu_id` int(11) NOT NULL COMMENT '學(xué)號(hào)', -> `stu_name` varchar(20) DEFAULT NULL COMMENT '學(xué)生姓名', -> `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創(chuàng)建時(shí)間', -> `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '修改時(shí)間', -> PRIMARY KEY (`increment_id`), -> UNIQUE KEY `uk_stu_id` (`stu_id`) -> ) ENGINE=FEDERATED DEFAULT CHARSET=utf8 COMMENT='學(xué)生表' CONNECTION='mysql://root:root@10.50.60.212:3306/source/test_table'; Query OK, 0 rows affected (0.01 sec) mysql> select * from test_table; +--------------+--------+----------+---------------------+---------------------+ | increment_id | stu_id | stu_name | create_time | update_time | +--------------+--------+----------+---------------------+---------------------+ | 1 | 1001 | wang | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 2 | 1002 | dfsfd | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 3 | 1003 | fdgfg | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 4 | 1004 | sdfsdf | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 5 | 1005 | dsfsdg | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | | 6 | 1006 | fgd | 2019-06-21 10:52:03 | 2019-06-21 10:52:03 | +--------------+--------+----------+---------------------+---------------------+ 6 rows in set (0.00 sec)
3.使用CREATE SERVER創(chuàng)建FEDERATED表
如果要在同一服務(wù)器上創(chuàng)建多個(gè)FEDERATED表,或者想簡(jiǎn)化創(chuàng)建FEDERATED表的過(guò)程,則可以使用該CREATE SERVER語(yǔ)句定義服務(wù)器連接參數(shù),這樣多個(gè)表可以使用同一個(gè)server。
CREATE SERVER創(chuàng)建的格式是:
CREATE SERVER fedlink FOREIGN DATA WRAPPER mysql OPTIONS (USER 'fed_user', PASSWORD '123456', HOST 'remote_host', PORT 3306, DATABASE 'federated');
之后創(chuàng)建FEDERATED表可采用如下格式:
CREATE TABLE (......) ENGINE =FEDERATED CONNECTION='test_link/tablename'
示例演示:
# 目標(biāo)端創(chuàng)建指向源端的server mysql> CREATE SERVER test_link -> FOREIGN DATA WRAPPER mysql -> OPTIONS (USER 'root', PASSWORD 'root',HOST '10.50.60.212',PORT 3306,DATABASE 'source'); Query OK, 1 row affected (0.00 sec) mysql> select * from mysql.servers\G *************************** 1. row *************************** Server_name: test_link Host: 10.50.60.212 Db: source Username: root Password: root Port: 3306 Socket: Wrapper: mysql Owner: 1 row in set (0.00 sec) # 目標(biāo)端創(chuàng)建FEDERATED表 mysql> CREATE TABLE `s1` ( -> `increment_id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵', -> `stu_id` int(11) NOT NULL COMMENT '學(xué)號(hào)', -> `stu_name` varchar(20) DEFAULT NULL COMMENT '學(xué)生姓名', -> `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創(chuàng)建時(shí)間', -> `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '修改時(shí)間', -> PRIMARY KEY (`increment_id`), -> UNIQUE KEY `uk_stu_id` (`stu_id`) -> ) ENGINE=FEDERATED DEFAULT CHARSET=utf8 COMMENT='學(xué)生表' CONNECTION='test_link/s1'; Query OK, 0 rows affected (0.01 sec) mysql> CREATE TABLE `s2` ( -> `increment_id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵', -> `stu_id` int(11) NOT NULL COMMENT '學(xué)號(hào)', -> `stu_name` varchar(20) DEFAULT NULL COMMENT '學(xué)生姓名', -> `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創(chuàng)建時(shí)間', -> `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '修改時(shí)間', -> PRIMARY KEY (`increment_id`), -> UNIQUE KEY `uk_stu_id` (`stu_id`) -> ) ENGINE=FEDERATED DEFAULT CHARSET=utf8 COMMENT='學(xué)生表' CONNECTION='test_link/s2'; Query OK, 0 rows affected (0.01 sec)
4.FEDERATED使用總結(jié)
基于MySQL5.7.23版本,筆者在源端及目標(biāo)端實(shí)驗(yàn)了多種DDL及DML,現(xiàn)簡(jiǎn)單總結(jié)如下,有興趣的同學(xué)可以試試看。
- 目標(biāo)端建表結(jié)構(gòu)可以與源端不一樣 推薦與源端結(jié)構(gòu)一致
- 源端DDL語(yǔ)句更改表結(jié)構(gòu) 目標(biāo)端不會(huì)變化
- 源端DML語(yǔ)句目標(biāo)端查詢(xún)會(huì)同步
- 源端drop表 目標(biāo)端結(jié)構(gòu)還在但無(wú)法查詢(xún)
- 目標(biāo)端不能執(zhí)行DDL語(yǔ)句
- 目標(biāo)端執(zhí)行DML語(yǔ)句 源端數(shù)據(jù)也會(huì)變化
- 目標(biāo)端truncate表 源端表數(shù)據(jù)也會(huì)被清空
- 目標(biāo)端drop表對(duì)源端無(wú)影響
5.FEDERATED引擎最佳實(shí)踐
目前FEDERATED引擎使用范圍還不多,若確實(shí)有跨實(shí)例訪(fǎng)問(wèn)的需求,建議做好規(guī)范,個(gè)人總結(jié)最佳實(shí)踐如下:
- 源端專(zhuān)門(mén)創(chuàng)建只讀權(quán)限的用戶(hù)來(lái)供目標(biāo)端使用。
- 目標(biāo)端建議用CREATE SERVER方式創(chuàng)建FEDERATED表。
- FEDERATED表不宜太多,遷移時(shí)要特別注意。
- 目標(biāo)端應(yīng)該只做查詢(xún)使用,禁止在目標(biāo)端更改FEDERATED表。
- 建議目標(biāo)端表名及結(jié)構(gòu)和源端保持一致。
- 源端表結(jié)構(gòu)變更后 目標(biāo)端要及時(shí)刪除重建。
參考:
https://dev.mysql.com/doc/refman/5.7/en/federated-create.html
https://dev.mysql.com/doc/refman/5.7/en/create-server.html
到此這篇關(guān)于MySQL跨實(shí)例進(jìn)行數(shù)據(jù)查詢(xún)的文章就介紹到這了,更多相關(guān)MySQL跨實(shí)例進(jìn)行數(shù)據(jù)查詢(xún)內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
MySQL order by實(shí)現(xiàn)原理分析和Filesort優(yōu)化方式
這篇文章主要介紹了MySQL order by實(shí)現(xiàn)原理分析和Filesort優(yōu)化方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-12-12深入解析mysql中order by與group by的順序問(wèn)題
本篇文章是對(duì)mysql中order by與group by的順序問(wèn)題進(jìn)行了詳細(xì)的分析介紹,需要的朋友參考下2013-06-06MySQL事務(wù)的ACID特性以及并發(fā)問(wèn)題方案
這篇文章主要介紹了MySQL事務(wù)的ACID特性以及并發(fā)問(wèn)題方案,文章圍繞主題展開(kāi)詳細(xì)的內(nèi)容介紹,具有一定的參考價(jià)值,需要的小伙伴可以參考一下2022-07-07MySQL使用外鍵實(shí)現(xiàn)級(jí)聯(lián)刪除與更新的方法
這篇文章主要介紹了MySQL使用外鍵實(shí)現(xiàn)級(jí)聯(lián)刪除與更新的方法,詳細(xì)分析了mysql數(shù)據(jù)庫(kù)與表的創(chuàng)建、數(shù)據(jù)插入、查詢(xún)以及外鏈的使用與級(jí)聯(lián)操作相關(guān)技巧,需要的朋友可以參考下2016-07-07MySQL中數(shù)據(jù)類(lèi)型相關(guān)的優(yōu)化辦法
這篇文章主要介紹了MySQL中數(shù)據(jù)類(lèi)型相關(guān)的優(yōu)化辦法,包括使用多列索引等相關(guān)的優(yōu)化方法,需要的朋友可以參考下2015-07-07mysqldump數(shù)據(jù)庫(kù)備份參數(shù)詳解
這篇文章主要介紹了mysqldump數(shù)據(jù)庫(kù)備份參數(shù)詳解,需要的朋友可以參考下2014-05-05深入解析mysql.sock不見(jiàn)的問(wèn)題
本篇文章是對(duì)mysql.sock不見(jiàn)的問(wèn)題進(jìn)行了詳細(xì)的分析介紹,需要的朋友參考下2013-06-06一文帶你學(xué)會(huì)MySQL的select語(yǔ)句
在MySQL中可以使用SELECT語(yǔ)句來(lái)查詢(xún)數(shù)據(jù),查詢(xún)數(shù)據(jù)是指從數(shù)據(jù)庫(kù)中根據(jù)需求,使用不同的查詢(xún)方式來(lái)獲取不同的數(shù)據(jù),是使用頻率最高、最重要的操作,下面這篇文章主要給大家介紹了關(guān)于MySQL中select語(yǔ)句的相關(guān)資料,需要的朋友可以參考下2022-11-11