數(shù)據(jù)庫性能優(yōu)化三:程序操作優(yōu)化提升性能
更新時間:2013年01月02日 10:10:12 作者:
程序訪問優(yōu)化也可以認(rèn)為是訪問SQL語句的優(yōu)化,一個好的SQL語句是可以減少非常多的程序性能的,下面列出常用錯誤習(xí)慣,并且提出相應(yīng)的解決方案
數(shù)據(jù)庫優(yōu)化包含以下三部分,數(shù)據(jù)庫自身的優(yōu)化,數(shù)據(jù)庫表優(yōu)化,程序操作優(yōu)化.此文為第三部分
概述:程序訪問優(yōu)化也可以認(rèn)為是訪問SQL語句的優(yōu)化,一個好的SQL語句是可以減少非常多的程序性能的,下面列出常用錯誤習(xí)慣,并且提出相應(yīng)的解決方案
一、操作符優(yōu)化
1. IN、NOT IN 操作符
IN和EXISTS 性能有外表和內(nèi)表區(qū)分的,但是在大數(shù)據(jù)量的表中推薦用EXISTS 代替IN 。
Not IN 不走索引的是絕對不能用的,可以用NOT EXISTS 代替
2. IS NULL 或IS NOT NULL操作
索引是不索引空值的,所以這樣的操作不能使用索引,可以用其他的辦法處理,例如:數(shù)字類型,判斷大于0,字符串類型設(shè)置一個默認(rèn)值,判斷是否等于默認(rèn)值即可
3. <> 操作符(不等于)
不等于操作符是永遠(yuǎn)不會用到索引的,因此對它的處理只會產(chǎn)生全表掃描。 用其它相同功能的操作運算代替,如 a<>0 改為 a>0 or a<0a<>'' 改為 a>''
4. 用全文搜索搜索文本數(shù)據(jù),取代like搜索
全文搜索始終優(yōu)于like搜索:
(1)全文搜索讓你可以實現(xiàn)like不能完成的復(fù)雜搜索,如搜索一個單詞或一個短語,搜索一個與另一個單詞或短語相近的單詞或短語,或者是搜索同義詞;
(2)實現(xiàn)全文搜索比實現(xiàn)like搜索更容易(特別是復(fù)雜的搜索);
二、SQL語句優(yōu)化
1、在查詢中不要使用select *
為什么不能使用,地球人都知道,但是很多人都習(xí)慣這樣用,要明白能省就省,而且這樣查詢數(shù)據(jù)庫不能利用“覆蓋索引”了
2. 盡量寫WHERE子句
盡量不要寫沒有WHERE的SQL語句
3. 注意SELECT INTO后的WHERE子句
因為SELECT INTO把數(shù)據(jù)插入到臨時表,這個過程會鎖定一些系統(tǒng)表,如果這個WHERE子句返回的數(shù)據(jù)過多或者速度太慢,會造成系統(tǒng)表長期鎖定,諸塞其他進(jìn)程。
4.對于聚合查詢,可以用HAVING子句進(jìn)一步限定返回的行
5. 避免使用臨時表
(1)除非卻有需要,否則應(yīng)盡量避免使用臨時表,相反,可以使用表變量代替;
(2)大多數(shù)時候(99%),表變量駐扎在內(nèi)存中,因此速度比臨時表更快,臨時表駐扎在TempDb數(shù)據(jù)庫中,因此臨時表上的操作需要跨數(shù)據(jù)庫通信,速度自然慢。
6.減少訪問數(shù)據(jù)庫的次數(shù):
程序設(shè)計中最好將一些常用的全局變量表放在內(nèi)存中或者用其他的方式減少數(shù)據(jù)庫的訪問次數(shù)
7.盡量少做重復(fù)的工作
盡量減少無效工作,但是這一點的側(cè)重點在客戶端程序,需要注意的如下:
A、 控制同一語句的多次執(zhí)行,特別是一些基礎(chǔ)數(shù)據(jù)的多次執(zhí)行是很多程序員很少注意的
B、減少多次的數(shù)據(jù)轉(zhuǎn)換,也許需要數(shù)據(jù)轉(zhuǎn)換是設(shè)計的問題,但是減少次數(shù)是程序員可以做到的。
C、杜絕不必要的子查詢和連接表,子查詢在執(zhí)行計劃一般解釋成外連接,多余的連接表帶來額外的開銷。
D、合并對同一表同一條件的多次UPDATE,比如
UPDATE EMPLOYEE SET FNAME='HAIWER' WHERE EMP_ID=' VPA30890F'
UPDATE EMPLOYEE SET LNAME='YANG' WHERE EMP_ID=' VPA30890F'
這兩個語句應(yīng)該合并成以下一個語句
UPDATE EMPLOYEE SET FNAME='HAIWER',LNAME='YANG'
WHERE EMP_ID=' VPA30890F'
E、UPDATE操作不要拆成DELETE操作+INSERT操作的形式,雖然功能相同,但是性能差別是很大的。
F、不要寫一些沒有意義的查詢,比如
SELECT * FROM EMPLOYEE WHERE 1=2
三、where使用原則
1)在下面兩條select語句中:
select * from table1 where field1<=10000 and field1>=0;
select * from table1 where field1>=0 and field1<=10000;
如果數(shù)據(jù)表中的數(shù)據(jù)field1都>=0,則第一條select語句要比第二條select語句效率高的多,因為第二條select語句的第一個條件耗費了大量的系統(tǒng)資源。
第一個原則:在where子句中應(yīng)把最具限制性的條件放在最前面。
2)在下面的select語句中:
select * from tab where a=… and b=… and c=…;
若有索引index(a,b,c),則where子句中字段的順序應(yīng)和索引中字段順序一致。
第二個原則:where子句中字段的順序應(yīng)和索引中字段順序一致。
以下假設(shè)在field1上有唯一索引I1,在field2上有非唯一索引I2。
3) select field3,field4 from tb where field1='sdf' 快
select * from tb where field1='sdf' 慢,
因為后者在索引掃描后要多一步ROWID表訪問。
select field3,field4 from tb where field1>='sdf' 快
select field3,field4 from tb where field1>'sdf' 慢
因為前者可以迅速定位索引。
select field3,field4 from tb where field2 like 'R%' 快
select field3,field4 from tb where field2 like '%R' 慢,
因為后者不使用索引。
4) 使用函數(shù)如:
select field3,field4 from tb where upper(field2)='RMN'不使用索引。
如果一個表有兩萬條記錄,建議不使用函數(shù);如果一個表有五萬條以上記錄,嚴(yán)格禁止使用函數(shù)!兩萬條記錄以下沒有限制。
概述:程序訪問優(yōu)化也可以認(rèn)為是訪問SQL語句的優(yōu)化,一個好的SQL語句是可以減少非常多的程序性能的,下面列出常用錯誤習(xí)慣,并且提出相應(yīng)的解決方案
一、操作符優(yōu)化
1. IN、NOT IN 操作符
IN和EXISTS 性能有外表和內(nèi)表區(qū)分的,但是在大數(shù)據(jù)量的表中推薦用EXISTS 代替IN 。
Not IN 不走索引的是絕對不能用的,可以用NOT EXISTS 代替
2. IS NULL 或IS NOT NULL操作
索引是不索引空值的,所以這樣的操作不能使用索引,可以用其他的辦法處理,例如:數(shù)字類型,判斷大于0,字符串類型設(shè)置一個默認(rèn)值,判斷是否等于默認(rèn)值即可
3. <> 操作符(不等于)
不等于操作符是永遠(yuǎn)不會用到索引的,因此對它的處理只會產(chǎn)生全表掃描。 用其它相同功能的操作運算代替,如 a<>0 改為 a>0 or a<0a<>'' 改為 a>''
4. 用全文搜索搜索文本數(shù)據(jù),取代like搜索
全文搜索始終優(yōu)于like搜索:
(1)全文搜索讓你可以實現(xiàn)like不能完成的復(fù)雜搜索,如搜索一個單詞或一個短語,搜索一個與另一個單詞或短語相近的單詞或短語,或者是搜索同義詞;
(2)實現(xiàn)全文搜索比實現(xiàn)like搜索更容易(特別是復(fù)雜的搜索);
二、SQL語句優(yōu)化
1、在查詢中不要使用select *
為什么不能使用,地球人都知道,但是很多人都習(xí)慣這樣用,要明白能省就省,而且這樣查詢數(shù)據(jù)庫不能利用“覆蓋索引”了
2. 盡量寫WHERE子句
盡量不要寫沒有WHERE的SQL語句
3. 注意SELECT INTO后的WHERE子句
因為SELECT INTO把數(shù)據(jù)插入到臨時表,這個過程會鎖定一些系統(tǒng)表,如果這個WHERE子句返回的數(shù)據(jù)過多或者速度太慢,會造成系統(tǒng)表長期鎖定,諸塞其他進(jìn)程。
4.對于聚合查詢,可以用HAVING子句進(jìn)一步限定返回的行
5. 避免使用臨時表
(1)除非卻有需要,否則應(yīng)盡量避免使用臨時表,相反,可以使用表變量代替;
(2)大多數(shù)時候(99%),表變量駐扎在內(nèi)存中,因此速度比臨時表更快,臨時表駐扎在TempDb數(shù)據(jù)庫中,因此臨時表上的操作需要跨數(shù)據(jù)庫通信,速度自然慢。
6.減少訪問數(shù)據(jù)庫的次數(shù):
程序設(shè)計中最好將一些常用的全局變量表放在內(nèi)存中或者用其他的方式減少數(shù)據(jù)庫的訪問次數(shù)
7.盡量少做重復(fù)的工作
盡量減少無效工作,但是這一點的側(cè)重點在客戶端程序,需要注意的如下:
A、 控制同一語句的多次執(zhí)行,特別是一些基礎(chǔ)數(shù)據(jù)的多次執(zhí)行是很多程序員很少注意的
B、減少多次的數(shù)據(jù)轉(zhuǎn)換,也許需要數(shù)據(jù)轉(zhuǎn)換是設(shè)計的問題,但是減少次數(shù)是程序員可以做到的。
C、杜絕不必要的子查詢和連接表,子查詢在執(zhí)行計劃一般解釋成外連接,多余的連接表帶來額外的開銷。
D、合并對同一表同一條件的多次UPDATE,比如
UPDATE EMPLOYEE SET FNAME='HAIWER' WHERE EMP_ID=' VPA30890F'
UPDATE EMPLOYEE SET LNAME='YANG' WHERE EMP_ID=' VPA30890F'
這兩個語句應(yīng)該合并成以下一個語句
UPDATE EMPLOYEE SET FNAME='HAIWER',LNAME='YANG'
WHERE EMP_ID=' VPA30890F'
E、UPDATE操作不要拆成DELETE操作+INSERT操作的形式,雖然功能相同,但是性能差別是很大的。
F、不要寫一些沒有意義的查詢,比如
SELECT * FROM EMPLOYEE WHERE 1=2
三、where使用原則
1)在下面兩條select語句中:
select * from table1 where field1<=10000 and field1>=0;
select * from table1 where field1>=0 and field1<=10000;
如果數(shù)據(jù)表中的數(shù)據(jù)field1都>=0,則第一條select語句要比第二條select語句效率高的多,因為第二條select語句的第一個條件耗費了大量的系統(tǒng)資源。
第一個原則:在where子句中應(yīng)把最具限制性的條件放在最前面。
2)在下面的select語句中:
select * from tab where a=… and b=… and c=…;
若有索引index(a,b,c),則where子句中字段的順序應(yīng)和索引中字段順序一致。
第二個原則:where子句中字段的順序應(yīng)和索引中字段順序一致。
以下假設(shè)在field1上有唯一索引I1,在field2上有非唯一索引I2。
3) select field3,field4 from tb where field1='sdf' 快
select * from tb where field1='sdf' 慢,
因為后者在索引掃描后要多一步ROWID表訪問。
select field3,field4 from tb where field1>='sdf' 快
select field3,field4 from tb where field1>'sdf' 慢
因為前者可以迅速定位索引。
select field3,field4 from tb where field2 like 'R%' 快
select field3,field4 from tb where field2 like '%R' 慢,
因為后者不使用索引。
4) 使用函數(shù)如:
select field3,field4 from tb where upper(field2)='RMN'不使用索引。
如果一個表有兩萬條記錄,建議不使用函數(shù);如果一個表有五萬條以上記錄,嚴(yán)格禁止使用函數(shù)!兩萬條記錄以下沒有限制。
您可能感興趣的文章:
- Oracle數(shù)據(jù)庫性能優(yōu)化技術(shù)開發(fā)者網(wǎng)絡(luò)Oracle
- SQL Server數(shù)據(jù)庫性能優(yōu)化技術(shù)
- SQL Server數(shù)據(jù)庫的高性能優(yōu)化經(jīng)驗總結(jié)
- 數(shù)據(jù)庫中identity字段不必是系統(tǒng)產(chǎn)生的唯一值 性能優(yōu)化方法(新招)
- 數(shù)據(jù)庫性能優(yōu)化二:數(shù)據(jù)庫表優(yōu)化提升性能
- 數(shù)據(jù)庫性能優(yōu)化一:數(shù)據(jù)庫自身優(yōu)化提升性能
- MySQL性能優(yōu)化的一些技巧幫助你的數(shù)據(jù)庫
- 解析MySQL數(shù)據(jù)庫性能優(yōu)化的六大技巧
- 數(shù)據(jù)庫訪問性能優(yōu)化
相關(guān)文章
sqlserver 用戶權(quán)限管理,LINQ去除它的重復(fù)菜單項
事情是這樣的,我有三張表,用戶_角色關(guān)系表User_Role,角色_菜單關(guān)系表Role_Menu和菜單表2011-08-08sqlserver清空service broker中的隊列的語句分享
在我們開發(fā)service broker應(yīng)用時候,可能用于測試或者客戶端沒有配置正確等導(dǎo)致服務(wù)端隊列存在很多垃圾隊列,不便于我們排查錯誤,我們可以使用SQL腳本來清空服務(wù)端這些垃圾數(shù)據(jù)2011-08-08sql server利用不同語種語言顯示報錯錯誤消息的方法示例
這篇文章主要給大家介紹了關(guān)于sql server利用不同語種語言顯示報錯錯誤消息的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用sql server具有一定的參考學(xué)習(xí)價值,需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2020-05-05SQL SERVER 的SQL語句優(yōu)化方式小結(jié)
千辛萬苦,終于把數(shù)據(jù)庫服務(wù)器的CPU從超過50%(開5個程序線程)乃至100%(開10個程序線程)降低到了5%。摸索到了一些門道,總結(jié)一下2009-08-08SQLSERVER對索引的利用及非SARG運算符認(rèn)識
SQL對篩選條件簡稱:SARG(search argument/SARG)當(dāng)然這里不是說SQLSERVER的where子句,是說SQLSERVER對索引的利用,感興趣的朋友可以了解下,或許本文的知識點對你有所幫助哈2013-02-02SQLserver存儲過程寫法與設(shè)置定時執(zhí)行存儲過程方法詳解
一直都很想了解如何寫存儲過程,對于不熟悉的東西,總是覺得很神秘,下面這篇文章主要給大家介紹了關(guān)于SQLserver存儲過程寫法與設(shè)置定時執(zhí)行存儲過程方法的相關(guān)資料,需要的朋友可以參考下2023-03-03Sql存儲過程游標(biāo)循環(huán)的用法及sql如何使用cursor寫一個簡單的循環(huán)
這篇文章主要介紹了循環(huán)和游標(biāo)在Sql存儲過程中使用及sql如何使用cursor寫一個簡單的循環(huán)的相關(guān)資料,需要的朋友可以參考下2015-11-11