欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

mysql千萬級數(shù)據(jù)量根據(jù)索引優(yōu)化查詢速度的實現(xiàn)

 更新時間:2021年03月15日 14:27:33   作者:李秀才  
這篇文章主要介紹了mysql千萬級數(shù)據(jù)量根據(jù)索引優(yōu)化查詢速度的實現(xiàn),文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧

(一)索引的作用

索引通俗來講就相當于書的目錄,當我們根據(jù)條件查詢的時候,沒有索引,便需要全表掃描,數(shù)據(jù)量少還可以,一旦數(shù)據(jù)量超過百萬甚至千萬,一條查詢sql執(zhí)行往往需要幾十秒甚至更多,5秒以上就已經(jīng)讓人難以忍受了。

能在軟件上解決的,就不在硬件上解決,畢竟硬件提升代碼昂貴,性價比太低。代價小且行之有效的解決方法就是合理的加索引。索引使用得當,能使查詢速度提升上千倍,效果驚人。

(二)mysql的索引類型:

mysql的索引有5種:主鍵索引、普通索引、唯一索引、全文索引、聚合索引(多列索引)。

唯一索引和全文索引用的很少,我們主要關注主鍵索引、普通索引和聚合索引。

1)主鍵索引:主鍵索引是加在主鍵上的索引,設置主鍵(primary key)的時候,mysql會自動創(chuàng)建主鍵索引;

2)普通索引:創(chuàng)建在非主鍵列上的索引;

3)聚合索引:創(chuàng)建在多列上的索引。

(三)索引的語法:

查看某張表的索引:show index from 表名;

創(chuàng)建普通索引:alter table 表名 add index  索引名 (加索引的列) 

創(chuàng)建聚合索引:alter table 表名 add index  索引名 (加索引的列1,加索引的列2) 

刪除某張表的索引:drop index 索引名 on 表名;

(四)性能測試

測試環(huán)境:博主工作用臺式機

處理器為Intel Core i5-4460 3.2GHz;

內(nèi)存8G;

64位windows。

1:創(chuàng)建一張測試表

DROP TABLE IF EXISTS `test_user`;
CREATE TABLE `test_user` (
 `id` bigint(20) PRIMARY key not null AUTO_INCREMENT,
 `username` varchar(11) DEFAULT NULL,
 `gender` varchar(2) DEFAULT NULL,
 `password` varchar(100) DEFAULT NULL
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

存儲引擎使用MyISAM是因為此引擎沒有事務,插入速度極快,方便我們快速插入千萬條測試數(shù)據(jù),等我們插完數(shù)據(jù),再把存儲類型修改為InnoDB。

2:使用存儲過程插入1千萬條數(shù)據(jù)

create procedure myproc() 
begin 
declare num int; 
set num=1; 
while num <= 10000000 do 
insert into test_user(username,gender,password) values(num,'保密',PASSWORD(num)); 
set num=num+1;
end while;
 end
call myproc();

由于使用的MyISAM引擎,插入1千萬條數(shù)據(jù),僅耗時246秒,若是InnoDB引擎,就要花費數(shù)小時了。

然后將存儲引擎修改回InnDB。使用如下命令:  alter table test_user engine=InnoDB;此命令執(zhí)行時間大約耗時5分鐘,耐心等待。

tips:這里是測試,生產(chǎn)環(huán)境中不要隨意修改存儲引擎,還有alter table 操作,會鎖整張表,慎用。其次:myisam引擎沒有事務,且只是將數(shù)據(jù)寫到內(nèi)存中,然后定期將數(shù)據(jù)刷出到磁盤上,因此突然斷電的情況下,會導致數(shù)據(jù)丟失。而InnDB引擎,是將數(shù)據(jù)寫入日志中,然后定期刷出到磁盤上,所以不怕突然斷電等情況。因此在實際生產(chǎn)中能用InnDB則用。

3:sql測試

select id,username,gender,password from test_user where id=999999

耗時:0.114s。

因為我們建表的時候,將id設成了主鍵,所以執(zhí)行此sql的時候,走了主鍵索引,查詢速度才會如此之快。

我們再執(zhí)行select id,username,gender,password from test_user where username='9000000'
耗時:4.613s。

我們給username列加上普通索引。

ALTER TABLE `test_user` ADD INDEX index_name(username) ;

此過程大約耗時 54.028s,建索引的過程會全表掃描,逐條建索引,當然慢了。

再來執(zhí)行:selectid,username,gender,password from test_user where username='9000000'
耗時:0.043s。

再用username和password來聯(lián)合查詢

select id,username,gender,password from test_user where username='9000000' and `password`='*3A70E147E88D99888804E4D472410EFD9CD890AE'

此時雖然我們隊username加了索引,但是password列未加索引,索引執(zhí)行password篩選的時候,還是會全表掃描,因此此時

查詢速度立馬降了下來。

耗時:4.492s。

當我們的sql有多個列的篩選條件的時候,就需要對查詢的多個列都加索引組成聚合索引:

加上聚合索引:ALTER TABLE `test_user` ADD INDEX index_union_name_password(username,password)
再來執(zhí)行:

耗時:0.001s。

開篇也說過軟件層面的優(yōu)化一是合理加索引;二是優(yōu)化執(zhí)行慢的sql。此二者相輔相成,缺一不可,如果加了索引,還是查詢很慢,這時候就要考慮是sql的問題了,優(yōu)化sql。

Tips:

1:加了索引,依然全表掃描的可能情況有:

索引列為字符串,而沒帶引號;

索引列沒出現(xiàn)在where條件后面;

索引列出現(xiàn)的位置沒在前面。

2:關聯(lián)查詢不走索引的可能情況有:

關聯(lián)的多張表的字符集不一樣;

關聯(lián)的字段的字符集不一樣;

存儲引擎不一樣;

字段的長度不一樣。

到此這篇關于mysql千萬級數(shù)據(jù)量根據(jù)索引優(yōu)化查詢速度的實現(xiàn)的文章就介紹到這了,更多相關mysql千萬級索引優(yōu)化查詢內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!

相關文章

  • 探究MySQL中索引和提交頻率對InnoDB表寫入速度的影響

    探究MySQL中索引和提交頻率對InnoDB表寫入速度的影響

    這篇文章主要介紹了MySQL中索引和提交頻率對InnoDB表寫入速度的影響,作者通過實際測試運行時間的對比來驗證,需要的朋友可以參考下
    2015-05-05
  • mysql數(shù)據(jù)庫如何實現(xiàn)億級數(shù)據(jù)快速清理

    mysql數(shù)據(jù)庫如何實現(xiàn)億級數(shù)據(jù)快速清理

    這篇文章主要介紹了mysql數(shù)據(jù)庫實現(xiàn)億級數(shù)據(jù)快速清理的方法,非常不錯,具有參考借鑒價值,需要的朋友參考下吧
    2018-04-04
  • mysql對binlog的處理說明

    mysql對binlog的處理說明

    Mysql和其它開源數(shù)據(jù)庫相比,具有更好的擴展性。其主要原因是它提供了存儲引擎的開放接口。喜歡自己折騰數(shù)據(jù)庫的程序員可以從這個接口起步,打造有個性的數(shù)據(jù)庫。
    2011-07-07
  • DBeaver連接本地MySQL并創(chuàng)建數(shù)據(jù)庫/表的基礎操作教程

    DBeaver連接本地MySQL并創(chuàng)建數(shù)據(jù)庫/表的基礎操作教程

    DBeaver是一款功能強大的數(shù)據(jù)庫管理工具,支持創(chuàng)建多種數(shù)據(jù)庫,包括達夢數(shù)據(jù)庫,這篇文章主要給大家介紹了關于DBeaver連接本地MySQL并創(chuàng)建數(shù)據(jù)庫/表的基礎操作教程,需要的朋友可以參考下
    2024-02-02
  • mysql中not?in隱含陷阱詳解

    mysql中not?in隱含陷阱詳解

    NOT?IN?的作用和?IN?恰好相反,NOT?IN?用來判斷表達式的值是否不存在于給出的列表中;如果不是,返回值為?1,否則返回值為?0,下面這篇文章主要給大家介紹了關于mysql中not?in隱含陷阱的相關資料,需要的朋友可以參考下
    2022-04-04
  • MySQL中的主鍵以及設置其自增的用法教程

    MySQL中的主鍵以及設置其自增的用法教程

    這篇文章主要介紹了MySQL中的主鍵以及設置其自增的用法教程,是MySQL入門學習中的基礎知識,需要的朋友可以參考下
    2015-11-11
  • 一文教會你在MySQL中使用DateTime

    一文教會你在MySQL中使用DateTime

    mysql數(shù)據(jù)庫在我們的工作中經(jīng)常需要使用,經(jīng)常在表中需要使用時間,下面這篇文章主要給大家介紹了關于在MySQL中使用DateTime的相關資料,文中通過實例代碼介紹的非常詳細,需要的朋友可以參考下
    2022-09-09
  • SQL實現(xiàn)LeetCode(181.員工掙得比經(jīng)理多)

    SQL實現(xiàn)LeetCode(181.員工掙得比經(jīng)理多)

    這篇文章主要介紹了SQL實現(xiàn)LeetCode(181.員工掙得比經(jīng)理多),本篇文章通過簡要的案例,講解了該項技術(shù)的了解與使用,以下就是詳細內(nèi)容,需要的朋友可以參考下
    2021-08-08
  • Mysql GTID Mha配置方法

    Mysql GTID Mha配置方法

    下面小編就為大家?guī)硪黄狹ysql GTID Mha配置方法。小編覺的挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2017-03-03
  • SQL Server數(shù)據(jù)庫錯誤5123解決方案

    SQL Server數(shù)據(jù)庫錯誤5123解決方案

    這篇文章主要介紹了SQL Server數(shù)據(jù)庫錯誤5123解決方案,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下
    2020-06-06

最新評論