mysql導(dǎo)入sql文件慢、錯(cuò)等問(wèn)題

在服務(wù)開(kāi)發(fā)過(guò)程經(jīng)常有數(shù)據(jù)遷移、備份、sql導(dǎo)入需求，而在mysql導(dǎo)入sql文件過(guò)程中經(jīng)常出現(xiàn)慢、錯(cuò)等問(wèn)題，尤其是通過(guò)mysql客戶端（比如Nacivat）導(dǎo)入速度更慢。

今天我們選用一個(gè)新的導(dǎo)入方案，用MySQL自帶的source導(dǎo)入，進(jìn)行部分自定義操作，速度更快、統(tǒng)一提交；原理：減少網(wǎng)絡(luò)請(qǐng)求、關(guān)閉日志打印、關(guān)閉自動(dòng)提交（開(kāi)啟手動(dòng)提交），目的是均是為了提高導(dǎo)入效率。

廢話少說(shuō)，現(xiàn)在開(kāi)始吧。

1、命令行登錄數(shù)據(jù)庫(kù)

mysql -uroot -p

2、創(chuàng)建數(shù)據(jù)庫(kù)

如果數(shù)據(jù)庫(kù)還沒(méi)有創(chuàng)建的話

create database demo;

3、設(shè)置參數(shù)

#臨時(shí)關(guān)閉二進(jìn)制日志
set sql_log_bin=off;

#臨時(shí)關(guān)閉事務(wù)自動(dòng)提交
set autocommit=0;

4、使用某個(gè)數(shù)據(jù)庫(kù)

use demo;

5、手動(dòng)開(kāi)啟事務(wù)

start transaction;

6、執(zhí)行source導(dǎo)入sql文件

• 1）linux環(huán)境

source .../test.sql

• 2）win環(huán)境

source D:\...\test.sql

或者

source D:/.../test.sql

7、手動(dòng)提交事務(wù)請(qǐng)求

commit;

8、還原最初的配置

#恢復(fù)二進(jìn)制日志
set sql_log_bin=on;
#恢復(fù)事務(wù)自動(dòng)提交
set autocommit=1;

理想情況下數(shù)據(jù)一次性成功導(dǎo)入。

9、注意事項(xiàng)

1）表的最大容量問(wèn)題 max_allowed_packet

show variables like '%max_allowed_packet%';
select @@max_allowed_packet;

查詢：

手動(dòng)設(shè)置

set global max_allowed_packet = 102410141024;

重啟mysq才能生效

2） 表的大小寫(xiě)問(wèn)題

有些業(yè)務(wù)有大寫(xiě)和小寫(xiě)的表，設(shè)置不區(qū)分，比如linux環(huán)境mysql默認(rèn)區(qū)分；

但是win環(huán)境默認(rèn)不區(qū)分；

因此必須保持一致

show variables like "%case%";

結(jié)果

原理

• lower_case_table_names = 0 區(qū)分大小寫(xiě)，默認(rèn)是這種設(shè)置
• lower_case_table_names = 1 不區(qū)分大小寫(xiě)

當(dāng)然，需要在配置文件中修改ini或者cnf 文件里添加。

原理可以參考

3）導(dǎo)入數(shù)據(jù)時(shí)字符集設(shè)置問(wèn)題

報(bào)錯(cuò)：mysql數(shù)據(jù)庫(kù)導(dǎo)入出錯(cuò)

ERROR:Unknown command ‘\’

核對(duì)此數(shù)據(jù)的字符集和腳本文件里的字符集是否一直，核對(duì)后你就會(huì)恍然大悟！

這樣核對(duì)！

除此之外、還有其他類似的設(shè)置問(wèn)題，當(dāng)然要舉一反三！

總結(jié)

以上為個(gè)人經(jīng)驗(yàn)，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。

最新評(píng)論