欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

MySQL高效導(dǎo)入多個.sql文件方法詳解

 更新時間:2018年10月11日 15:16:06   投稿:wdc  
MySQL有多種方法導(dǎo)入多個.sql文件,常用的有兩個命令:mysql和source,如何提高導(dǎo)入速度,在導(dǎo)入大的sql文件時,建議使用mysql命令

MySQL有多種方法導(dǎo)入多個.sql文件(里面是sql語句),常用的有兩個命令:mysql和source。

但是這兩個命令的導(dǎo)入效率差別很大,具體請看最后的比較。

(還有sqlimport和LOAD DATA INFILE等導(dǎo)入方法,不過它們主要用于導(dǎo)入.csv或.xml文件數(shù)據(jù),不是.sql文件)

假設(shè)我們有一個 users.sql 大文件,為方便我們將其拆分成:user1.sql、user2.sql、user3.sql 三個獨立的小sql文件。

1、mysql命令導(dǎo)入

mysql命令導(dǎo)入多個sql文件方法:

$ for SQL in *.sql; do mysql -uroot -p"123456" mydb < $SQL; done

2、source命令導(dǎo)入

source命令需要首先進(jìn)入MySQL命令行:

$ mysql -uroot -p"123456"

導(dǎo)入多個sql文件需要先創(chuàng)建一個額外的文件,名字隨意,這里我們?nèi)。篴ll.sql,內(nèi)容:

source user1.sql
source user2.sql
source user3.sql

注意,這里每行一條,必須以source命令開頭。

然后用source命令執(zhí)行該文件:

mysql > use mydb;
mysql > source /home/gary/all.sql

3、如何提高導(dǎo)入速度?

對于百M級以上文件,如果光這樣導(dǎo)入,速度是極其緩慢的,

根據(jù)MySQL官方建議,我們有幾個措施可以極大提高導(dǎo)入的速度,如下:

對于MyISAM,調(diào)整系統(tǒng)參數(shù):bulk_insert_buffer_size(至少單個文件大小的2倍以上)

對于InnoDB,調(diào)整系統(tǒng)參數(shù):innodb_log_buffer_size(至少單個文件大小的2倍以上,導(dǎo)入完成后可以改回默認(rèn)的8M,注意不是innodb_buffer_pool_size。)

除主鍵外,刪除其他索引,導(dǎo)入完成后重建索引。

關(guān)閉自動提交:autocommit=0。(請勿用set global autocommit=1;命令來關(guān)閉,否則整個MySQL系統(tǒng)都會停止自動commit,innodb log buffer很快就會爆滿,5和6項也請僅在會話中有效,正確做法請往下看)

關(guān)閉唯一索引檢查:unique_checks=0。(關(guān)閉了這一項會影響on duplicate key update的效果)

關(guān)閉外鍵檢查:foreign_key_checks=0。

insert值寫在一條語句內(nèi),如:INSERT INTO yourtable VALUES (1,2), (5,5), ...;

有自增列的,設(shè)置:innodb_autoinc_lock_mode的值為2,

其中,第1-2、8條在修改my.cnf文件,然后重啟MySQL:

bulk_insert_buffer_size=2G;
innodb_log_buffer_size=2G;
innodb_autoinc_lock_mode=2;

第3條用到的命令:

#刪除索引
DROP INDEX index_name ON talbe_name
ALTER TABLE table_name DROP INDEX index_name
ALTER TABLE table_name DROP PRIMARY KEY

?!√砑铀饕?
ALTER TABLE table_name ADD INDEX index_name (column_list)
ALTER TABLE table_name ADD UNIQUE (column_list)
ALTER TABLE table_name ADD PRIMARY KEY (column_list)

第4-6條寫在.sql中,批量bash腳本如下:

for SQL in *.sql;
do
  echo $SQL;
  sed -i '1i\SET autocommit=0;\nSET unique_checks=0;\nSET foreign_key_checks=0;' $SQL
  sed -i '$a\COMMIT;\nSET autocommit=1;\nSET unique_checks=1;\nSET foreign_key_checks=1;' $SQL
done

按照以上幾個步驟調(diào)整后,插入速度必會有大幅度的提高。

4、mysql和source效率比較

在sql文件較小的情況下,source速度比mysql高,

在實際測試導(dǎo)入時,5個合計25M的sql文件,mysql命令的速度比source要快2秒(我自己的測試,不代表普遍的結(jié)果),

可以粗略得出,在導(dǎo)入大的sql文件時,建議使用mysql命令。

以上既是MySQL高效導(dǎo)入多個.sql文件的方法,希望能幫助到大家

相關(guān)文章

  • MySQL之存儲過程按月創(chuàng)建表的方法步驟

    MySQL之存儲過程按月創(chuàng)建表的方法步驟

    這篇文章主要介紹了MySQL之存儲過程按月創(chuàng)建表的方法步驟,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2020-09-09
  • MySQL延遲問題和數(shù)據(jù)刷盤策略流程分析

    MySQL延遲問題和數(shù)據(jù)刷盤策略流程分析

    這篇文章主要介紹了MySQL延遲問題和數(shù)據(jù)刷盤策略流程分析,本文要給大家提到了mysql復(fù)制流程,需要的朋友可以參考下
    2020-02-02
  • MySQL聯(lián)合索引功能與用法實例分析

    MySQL聯(lián)合索引功能與用法實例分析

    這篇文章主要介紹了MySQL聯(lián)合索引功能與用法,結(jié)合具體實例形式分析了聯(lián)合索引的概念、功能、具體使用方法與相關(guān)注意事項,需要的朋友可以參考下
    2017-09-09
  • JDBC連接MySQL出現(xiàn)的問題

    JDBC連接MySQL出現(xiàn)的問題

    采用JDBC連接MySQL數(shù)據(jù)庫,JDBC驅(qū)動已經(jīng)添加到eclipse的項目構(gòu)建路徑里了,按理來說應(yīng)該一切正常。運(yùn)行項目后提示“無法加載驅(qū)動”。
    2010-12-12
  • 基于mysql 默認(rèn)排序規(guī)則的坑

    基于mysql 默認(rèn)排序規(guī)則的坑

    這篇文章主要介紹了解決mysql 默認(rèn)排序規(guī)則的坑,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看不看
    2021-02-02
  • MySQL數(shù)據(jù)入庫時特殊字符處理詳解

    MySQL數(shù)據(jù)入庫時特殊字符處理詳解

    本文是對MySQL數(shù)據(jù)入庫時特殊字符的處理進(jìn)行了詳細(xì)的介紹,需要的朋友可以過來參考下,希望對大家有所幫助
    2013-11-11
  • MySQL流程函數(shù)常見用法實例分析

    MySQL流程函數(shù)常見用法實例分析

    這篇文章主要介紹了MySQL流程函數(shù)常見用法,結(jié)合實例形式分析了mysql流程函數(shù)功能、常見使用方法與操作注意事項,需要的朋友可以參考下
    2019-12-12
  • 對MySQL日志操作的一些基本命令總結(jié)

    對MySQL日志操作的一些基本命令總結(jié)

    這篇文章主要介紹了對MySQL日志操作的一些基本命令總結(jié),其中重點講述了二進(jìn)制日志文件的相關(guān)方面,需要的朋友可以參考下
    2015-11-11
  • mysql中insert?into...select語句優(yōu)化方式

    mysql中insert?into...select語句優(yōu)化方式

    這篇文章主要介紹了mysql中insert?into...select語句優(yōu)化方式,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教<BR>
    2024-04-04
  • MySQL安裝與配置:手工配置MySQL(windows環(huán)境)過程

    MySQL安裝與配置:手工配置MySQL(windows環(huán)境)過程

    這篇文章主要介紹了MySQL安裝與配置:手工配置MySQL(windows環(huán)境)過程,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2023-12-12

最新評論