MySQL中表的復制以及大型數(shù)據(jù)表的備份教程
表復制
mysql拷貝表操作我們會常常用到,下面就為您詳細介紹幾種mysql拷貝表的方式,希望對您學習mysql拷貝表方面能夠有所幫助。
假如我們有以下這樣一個表:
id username password ----------------------------------- 1 admin ************* 2 sameer ************* 3 stewart *************
CREATE TABLE IF NOT EXISTS `admin` ( `id` int(6) unsigned NOT NULL auto_increment, `username` varchar(50) NOT NULL default '', `password` varchar(100) default NULL, PRIMARY KEY (`id`) ) ENGINE=MyISAM DEFAULT CHARSET=latin1 AUTO_INCREMENT=4 ;
1. 下面這個語句會拷貝表結構到新表newadmin中。 (不會拷貝表中的數(shù)據(jù))
CREATE TABLE newadmin LIKE admin
2. 下面這個語句會拷貝數(shù)據(jù)到新表中。 注意:這個語句其實只是把select語句的結果建一個表。所以newadmin這個表不會有主鍵,索引。
CREATE TABLE newadmin AS ( SELECT * FROM admin )
3. 如果你要真正的復制一個表??梢杂孟旅娴恼Z句。
CREATE TABLE newadmin LIKE admin; INSERT INTO newadmin SELECT * FROM admin;
4. 我們可以操作不同的數(shù)據(jù)庫。
CREATE TABLE newadmin LIKE shop.admin; CREATE TABLE newshop.newadmin LIKE shop.admin;
5. 我們也可以拷貝一個表中其中的一些字段。
CREATE TABLE newadmin AS ( SELECT username, password FROM admin )
6. 我們也可以講新建的表的字段改名。
CREATE TABLE newadmin AS ( SELECT id, username AS uname, password AS pass FROM admin )
7. 我們也可以拷貝一部分數(shù)據(jù)。
CREATE TABLE newadmin AS ( SELECT * FROM admin WHERE LEFT(username,1) = 's' )
8. 我們也可以在創(chuàng)建表的同時定義表中的字段信息。
CREATE TABLE newadmin ( id INTEGER NOT NULL AUTO_INCREMENT PRIMARY KEY ) AS ( SELECT * FROM admin )
MySQL大表備份
這里所說的大表是超過4G以上的表,我目前見到過最大為60多G的單表,對于這種表每天一個全備可以說是一件很痛苦的事。
那么有沒有辦法,可以實現(xiàn)一個全備加增量的備份呢。
答案當然是有的。
在常規(guī)環(huán)境直可以用全備加binlog一同保存。
這種環(huán)境大多可以用一個Slave上進行備份操作。
思路:
先停止Slave的同步,刷新buffer,對于Innodb 如果想直接拷貝還需要把innodb_max_dirty_pages_pct這個值置為零,然后在執(zhí)行一次flush tables;
就可以cp了。如果是Dump出來可以這這樣做。
這個方案目前來看也是比較完美的,但一個并發(fā)力度大的應用一天的Binlog有可能能達到50G-60G,這樣的系統(tǒng)開Binlog可以說是對系統(tǒng)的IO性能及整體性能都有早影響。
另一種方案就是基于表的上數(shù)據(jù)的羅輯變化進行備份。
主體思想:全備加邏輯備份。
邏輯備份:當有數(shù)據(jù)插入時,利用觸發(fā)器同時寫入另一個表,當數(shù)據(jù)更新時,我們同時記錄一下,更新后的數(shù)據(jù)情況到另一個表。
當有刪除操作時,只需要記錄一下,刪除的主建ID就行。
例子:
要備份的表:
CREATE TABLE `wubx` ( `id` int(11) NOT NULL auto_increment, `user_id` int(11) NOT NULL default '0', `friend_id` int(11) NOT NULL default '0', `dir_id` int(11) NOT NULL default '0', `created` int(11) NOT NULL default '0', UNIQUE KEY `id` (`id`)) ENGINE=InnoDB DEFAULT CHARSET=utf8;
對于這個表我們需要建一個記錄有新數(shù)據(jù)變化的表為:
mysql> create table wubx_ii like wubx; Query OK, 0 rows affected (0.00 sec) mysql> create table wubx_uu like wubx; Query OK, 0 rows affected (0.00 sec) mysql> create table wubx_dd ( id int(11)); Query OK, 0 rows affected (0.00 sec)
建立相應的觸發(fā)程器
記錄insert的操作:
delimiter // create trigger wubx_ii after insert on wubx for each row begin insert into wubx_ii set id=new.id,user_id=new.user_id,friend_id=new.friend_id,dir_id=new.dir_id,created=new.created; end//
記錄update的操作:
create trigger wubx_uu after update on wubx for each row begin replace into wubx_uu set id=new.id,user_id=new.user_id,friend_id=new.friend_id,dir_id=new.dir_id,created=new.created; end//
記錄刪除的操作:
create trigger wubx_dd after delete on wubx for each row begin insert into wubx_dd values(old.id); end// delimiter ;
操作:
先備份原始表wubx里的數(shù)據(jù):
進行:
insert into wubx values(”,1,10,1,1198464252); insert into wubx values(”,1,11,1,1198464252); insert into wubx values(”,1,2,1,1198464252); insert into wubx values(”,2,10,1,1198464252); insert into wubx values(”,2,12,1,1198464252); insert into wubx values(”,3,12,1,1198464252); update wubx set dir_id=5 where user_id=3; update wubx set dir_id=4 where user_id=3; delete from wubx where user_id=2 and friend_id=12;
現(xiàn)在要實現(xiàn)增量備份:
取出insert的操作:
mysql -e ” select concat(‘replace into wubx set id=',id,',user_id=',user_id,',friend_id=',friend_id,',dir_id=',dir_id,',created=',created,';') from wubx_ii;”>>backup_ii.sql
取出update的操作:
mysql -e ” select concat(‘update wubx set user_id=',user_id,',friend_id=',friend_id,',dir_id=',dir_id,',created=',created,' where id=',id,';') from wubx_uu;”>>backup_uu.sql
取出delete的操作:
mysql -e “select concat(‘delete from wubx where id=',id,';') from wubx_dd”>>backup_dd.sql
這樣利用這些邏輯的備份加是完畢備份恢復到當前恢復點就很容易了。這里不演示。
這個操作最好用一個程序完成,當取完羅輯備份后,做一個標記點去清楚備份完的數(shù)據(jù),以保證,邏輯記錄表里的數(shù)據(jù)量比較少是正確的。
- MySQL中復制表結構及其數(shù)據(jù)的5種方式
- mysql 復制記錄實現(xiàn)代碼
- mysql大表復制的具體實現(xiàn)
- mysql復制表的幾種常用方式
- MySQL復制表常用的四種方式小結
- MySQL級聯(lián)復制下如何進行大表的字段擴容
- mysql復制表的幾種常用方式總結
- mysql?中的備份恢復,分區(qū)分表,主從復制,讀寫分離
- MySQL 復制表的方法
- MySQL復制表的三種方式(小結)
- Mysql復制表三種實現(xiàn)方法及grant解析
- Mysql將一個表中的某一列數(shù)據(jù)復制到另一個表中某一列里的方法
- MySQL不同表之前的字段復制
- Mysql數(shù)據(jù)表中的蠕蟲復制使用方法
- MySQL 復制表詳解及實例代碼
- MySQL查詢結果復制到新表的方法(更新、插入)
- mysql 復制表結構和數(shù)據(jù)實例代碼
- MySQL中復制數(shù)據(jù)表中的數(shù)據(jù)到新表中的操作教程
- mysql數(shù)據(jù)庫批量復制單條數(shù)據(jù)記錄
相關文章
Django restframework 框架認證、權限、限流用法示例
這篇文章主要介紹了Django restframework 框架認證、權限、限流用法,結合實例形式詳細分析了Djangorestframework 框架認證、權限、限流的具體使用方法及相關操作注意事項,需要的朋友可以參考下2019-12-12python安裝oracle擴展及數(shù)據(jù)庫連接方法
這篇文章主要介紹了python安裝oracle擴展及數(shù)據(jù)庫連接方法,較為詳細的分析了Python下載oracle擴展及Windows、Linux環(huán)境下的安裝步驟、操作技巧及注意事項,需要的朋友可以參考下2017-02-02Python?Pandas實現(xiàn)將字符串格式轉(zhuǎn)為日期時間格式
日期和時間數(shù)據(jù)在數(shù)據(jù)分析和處理中起著關鍵作用,本文將詳細介紹如何使用Pandas將字符串格式的日期時間數(shù)據(jù)轉(zhuǎn)換為日期時間格式,需要的可以參考下2024-01-01python?數(shù)據(jù)保存為npy和npz格式并讀取的完整代碼
這篇文章主要介紹了python?數(shù)據(jù)保存為npy和npz格式并讀取,本文通過實例代碼給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-07-07python 實現(xiàn)讀取csv數(shù)據(jù),分類求和 再寫進 csv
這篇文章主要介紹了python 實現(xiàn)讀取csv數(shù)據(jù),分類求和 再寫進 csv,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-05-05python進程池Pool中apply方法與apply_async方法的區(qū)別
這篇文章主要介紹了python進程池Pool中apply方法與apply_async方法的區(qū)別及說明,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2024-02-02