欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

提高MySQL中數(shù)據(jù)裝載效率

 更新時間:2009年11月02日 16:59:10   作者:  
很多時候關心的是優(yōu)化SELECT 查詢,因為它們是最常用的查詢,而且確定怎樣優(yōu)化它們并不總是直截了當。
相對來說,將數(shù)據(jù)裝入數(shù)據(jù)庫是直截了當?shù)?。然而,也存在可用來改善?shù)據(jù)裝載操作效率的策略,其基本原理如下:

成批裝載較單行裝載更快,因為在裝載每個記錄后,不需要刷新索引高速緩存;可在成批記錄裝入后才刷新。

在表無索引時裝載比索引后裝載更快。如果有索引,不僅必須增加記錄到數(shù)據(jù)文件,而且還要修改每個索引以反映增加了的新記錄。

較短的SQL 語句比較長的SQL 語句要快,因為它們涉及服務器方的分析較少,而且還因為將它們通過網(wǎng)絡從客戶機發(fā)送到服務器更快。這些因素中有一些似乎微不足道(特別是最后一個因素),但如果要裝載大量的數(shù)據(jù),即使是很小的因素也會產(chǎn)生很大的不同結果。我們可以利用上述的一般原理推導出幾個關于如何最快地裝載數(shù)據(jù)的實際結論:

LOAD DATA(包括其所有形式)比INSERT 效率高,因為其成批裝載行。索引刷新較少,并且服務器只需分析和解釋一條語句而不是幾條語句。

LOAD DATA 比LOAD DATA LOCAL 效率更高。利用LOAD DATA,文件必須定位在服務器上,而且必須具有FILE 權限,但服務器可從磁盤直接讀取文件。利用LOAD DATA LOCAL,客戶機讀取文件并將其通過網(wǎng)絡發(fā)送給服務器,這樣做很慢。

如果必須使用INSERT,應該利用允許在單個語句中指定多行的形式,例如:

可在語句中指定的行越多越好。這樣會減少所需的語句數(shù)目,降低索引刷新量。如果使用mysqldump 生成數(shù)據(jù)庫備份文件,應該使用--extended-insert 選項,使轉儲文件包含多行INSERT 語句。還可以使用- - o p t(優(yōu)化) ,它啟用--extended-insert 選項。反之,應該避免使用mysqldump 的--complete-insert 選項;此選項會導致INSERT 語句為單行,執(zhí)行時間更長,比不用--complete-insert 選項生成的語句需要更多的分析。

使用壓縮了的客戶機/服務器協(xié)議以減少網(wǎng)絡數(shù)據(jù)流量。對于大多數(shù)MySQL客戶機,可以用--compress 命令行選項來指定。它一般只用于較慢的網(wǎng)絡,因為壓縮需要占用大量的處理器時間。

讓MySQL插入缺省值;不要在INSERT 語句中指定將以任意方式賦予缺省值的列。平均來說,這樣做語句會更短,能減少通過網(wǎng)絡傳送給服務器的字符數(shù)。此外,語句包含的值較少,服務器所進行的分析和轉換就會較少。

如果表是索引的,則可利用批量插入( LOAD DATA 或多行的INSERT 語句)來減少索引的開銷。這樣會最小化索引更新的影響,因為索引只需要在所有行處理過時才進行刷新,而不是在每行處理后就刷新。

如果需要將大量數(shù)據(jù)裝入一個新表,應該創(chuàng)建該表且在未索引時裝載,裝載數(shù)據(jù)后才創(chuàng)建索引,這樣做較快。一次創(chuàng)建索引(而不是每行修改一次索引)較快。

如果在裝載之前刪除或禁用索引,裝入數(shù)據(jù)后再重新創(chuàng)建或啟用索引可能使裝載更快。如果想對數(shù)據(jù)裝載使用刪除或禁用策略,一定要做一些實驗,看這樣做是否值得(如果將少量數(shù)據(jù)裝入一個大表中,重建和索引所花費的時間可能比裝載數(shù)據(jù)的時間還要長)。

可用DROP INDEX 和CREATE INDEX 來刪除和重建索引。另一種可供選擇的方法是利用myisamchk 或isamchk 禁用和啟用索引。這需要在MySQL服務器主機上有一個帳戶,并對表文件有寫入權。為了禁用表索引,可進入相應的數(shù)據(jù)庫目錄,執(zhí)行下列命令之一:

對具有.MYI 擴展名的索引文件的MyISAM 表使用myisamchk,對具有.ISM 擴展名的索引文件的ISAM 表使用isamchk。在向表中裝入數(shù)據(jù)后,按如下激活索引:

如果決定使用索引禁用和激活,應該使用第13章中介紹的表修復鎖定協(xié)議以阻止服務器同時更改鎖(雖然此時不對表進行修復,但要對它像表修復過程一樣進行修改,因此需要使用相同的鎖定協(xié)議)。

上述數(shù)據(jù)裝載原理也適用于與需要執(zhí)行不同操作的客戶機有關的固定查詢。例如,一般希望避免在頻繁更新的表上長時間運行SELECT 查詢。長時間運行SELECT 查詢會產(chǎn)生大量爭用,并降低寫入程序的性能。一種可能的解決方法為,如果執(zhí)行寫入的主要是INSERT 操作,那么先將記錄存入一個臨時表,然后定期地將這些記錄加入主表中。如果需要立即訪問新記錄,這不是一個可行的方法。但只要能在一個較短的時間內(nèi)不訪問它們,就可以使用這個方法。使用臨時表有兩個方面的好處。首先,它減少了與主表上SELECT 查詢語句的爭用,因此,執(zhí)行更快。其次,從臨時表將記錄裝入主表的總時間較分別裝載記錄的總時間少;相應的索引高速緩存只需在每個批量裝載結束時進行刷新,而不是在每行裝載后刷新。這個策略的一個應用是進入Web 服務器的Web 頁訪問MySQL數(shù)據(jù)庫。在此情形下,可能沒有保證記錄立即進入主表的較高權限。

如果數(shù)據(jù)并不完全是那種在系統(tǒng)非正常關閉事件中插入的單個記錄,那么減少索引刷新的另一策略是使用MyISAM 表的DELAYED_KEY_WRITE 表創(chuàng)建選項(如果將MySQL用于某些數(shù)據(jù)錄入工作時可能會出現(xiàn)這種情況)。此選項使索引高速緩存只偶爾刷新,而不是在每次插入后都要刷新。

如果希望在服務器范圍內(nèi)利用延遲索引刷新,只要利用--delayed-key-write 選項啟動mysqld 即可。在此情形下,索引塊寫操作延遲到必須刷新塊以便為其他索引值騰出空間為止,或延遲到執(zhí)行了一個flush-tables 命令后,或延遲到該索引表關閉。

相關文章

  • 獲取MySQL的表中每個userid最后一條記錄的方法

    獲取MySQL的表中每個userid最后一條記錄的方法

    這篇文章主要介紹了獲取MySQL的表中每個userid最后一條記錄的方法,并且針對userid不唯一的情況,需要的朋友可以參考下
    2015-05-05
  • mysql ON DUPLICATE KEY UPDATE語句示例

    mysql ON DUPLICATE KEY UPDATE語句示例

    本文介紹一下關于mysql中INSERT INTO… ON DUPLICATE KEY UPDATE用法
    2013-11-11
  • MySQL中正則表達式(REGEXP)使用詳解

    MySQL中正則表達式(REGEXP)使用詳解

    正則表達式常用來檢索和替換那些符合魔種模式的文本,下面這篇文章主要給大家介紹了關于MySQL中正則表達式(REGEXP)使用的相關資料,文中通過示例代碼介紹的非常詳細,需要的朋友可以參考下
    2022-07-07
  • Mysql在線回收undo表空間實戰(zhàn)記錄

    Mysql在線回收undo表空間實戰(zhàn)記錄

    這篇文章主要給大家介紹了關于Mysql在線回收undo表空間的相關資料,文中通過示例代碼介紹的非常詳細,對大家學習或者使用Mysql具有一定的參考學習價值,需要的朋友們下面來一起學習學習吧
    2019-09-09
  • mysql 8.0 安裝配置方法教程

    mysql 8.0 安裝配置方法教程

    這篇文章主要為大家分享了mysql 8.0安裝配置方法圖文教程,感興趣的朋友可以參考一下
    2016-11-11
  • MySQL學習第二天 安裝和配置mysql winx64

    MySQL學習第二天 安裝和配置mysql winx64

    MySQL學習第二天,主要為大家詳細介紹了在Windows 64位操作系統(tǒng)下安裝和配置MySQL的具體步驟,整理一份mysql winx64安裝配置方法教程,感興趣的小伙伴們可以參考一下
    2016-05-05
  • mysql創(chuàng)建觸發(fā)器時報1064錯誤問題及解決

    mysql創(chuàng)建觸發(fā)器時報1064錯誤問題及解決

    這篇文章主要介紹了mysql創(chuàng)建觸發(fā)器時報1064錯誤問題及解決方案,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2023-08-08
  • MySQL 常見的數(shù)據(jù)表設計誤區(qū)匯總

    MySQL 常見的數(shù)據(jù)表設計誤區(qū)匯總

    雖然會有一些常規(guī)意義上的數(shù)據(jù)表錯誤設計和優(yōu)秀設計原則,但是同樣也會有 MySQL 特定的一些情況,這會導致我們犯一些 MySQL 特定的錯誤。本篇討論常見的設計誤區(qū)。
    2021-06-06
  • 一文搞懂mysql如何處理json格式的字段(解析json數(shù)據(jù))

    一文搞懂mysql如何處理json格式的字段(解析json數(shù)據(jù))

    這篇文章主要給大家介紹了關于mysql如何處理json格式的字段的相關資料,MySQL中的JSON類型是一種數(shù)據(jù)類型,用于存儲和處理JSON(JavaScript Object Notation)格式的數(shù)據(jù),需要的朋友可以參考下
    2023-12-12
  • navicat連接mysql報錯10060的解決辦法

    navicat連接mysql報錯10060的解決辦法

    最近在學習中遇到了個小問題,現(xiàn)在將解決的辦法分享給同樣遇到這個問題的同學,這篇文章主要給大家介紹了關于navicat連接mysql報錯10060的解決辦法,需要的朋友可以參考下
    2023-03-03

最新評論