mysql中索引與FROM_UNIXTIME的問題
零、背景
這周四收到很多告警,找DBA看了看,發(fā)現(xiàn)有個(gè)慢查詢。
簡(jiǎn)單收集一些信息后,發(fā)現(xiàn)這個(gè)慢查詢問題隱藏的很深,問了好多人包括DBA都不知道原因。
一、問題
有一個(gè)DB, 有一個(gè)字段, 定義如下.
MySQL [d_union_stat]> desc t_local_cache_log_meta; +----------------+--------------+------+-----+---------------------+ | Field | Type | Null | Key | Default | +----------------+--------------+------+-----+---------------------+ | c_id | int(11) | NO | PRI | NULL | | c_key | varchar(128) | NO | MUL | | | c_time | int(11) | NO | MUL | 0 | | c_mtime | varchar(45) | NO | MUL | 0000-00-00 00:00:00 | +----------------+--------------+------+-----+---------------------+ 17 rows in set (0.01 sec)
索引如下:
MySQL [d_union_stat]> show index from t_local_cache_log_meta \G
*************************** 1. row ***************************
Table: t_local_cache_log_meta
Non_unique: 0
Key_name: PRIMARY
Column_name: c_id
Collation: A
Cardinality: 6517096
Index_type: BTREE
*************************** 2. row ***************************
.
.
.
*************************** 6. row ***************************
Table: t_local_cache_log_meta
Non_unique: 1
Key_name: index_mtime
Column_name: c_mtime
Collation: A
Cardinality: 592463
Index_type: BTREE
6 rows in set (0.02 sec)
然后我寫了一個(gè)SQL如下:
SELECT count(*) FROM d_union_stat.t_local_cache_log_meta where `c_mtime` < FROM_UNIXTIME(1494485402);
終于有一天DBA過來了, 扔給我一個(gè)流水,說這個(gè)SQL是慢SQL。
# Time: 170518 11:31:14 # Query_time: 12.312329 Lock_time: 0.000061 Rows_sent: 0 Rows_examined: 5809647 SET timestamp=1495078274; DELETE FROM `t_local_cache_log_meta` WHERE `c_mtime`< FROM_UNIXTIME(1494473461) limit 1000;
我頓時(shí)無語了,我的DB都是加了索引,SQL都是精心優(yōu)化了的,怎么是慢SQL呢?
問為什么是慢SQL,DBA答不上來, 問了周圍的同事也都答不上來。
我心里暗想遇到一個(gè)隱藏很深的知識(shí)點(diǎn)了。
令人懷疑的地方有兩個(gè):1.有6個(gè)索引。 2. 右值是 FROM_UNIXTIME 函數(shù)。
于是查詢MYSQL官方文檔,發(fā)現(xiàn)6個(gè)不是問題。
All storage engines support at least 16 indexes per table and a total index length of at least 256 bytes.
Most storage engines have higher limits.
于是懷疑問題是 FROM_UNIXTIME 函數(shù)了。
然后看看MYSQL的INDEX小節(jié),找到一點(diǎn)蛛絲馬跡。
1.To find the rows matching a WHERE clause quickly.
2. To eliminate rows from consideration.
If there is a choice between multiple indexes, MySQL normally uses the index that finds the smallest number of rows.
3.If the table has a multiple-column index, any leftmost prefix of the index can be used by the optimizer to look up rows.
4. MySQL can use indexes on columns more efficiently if they are declared as the same type and size.
Comparison of dissimilar columns (comparing a string column to a temporal or numeric column, for example) may prevent use of indexes if values cannot be compared directly without conversion.
看到第4條的時(shí)候,提到不同類型可能導(dǎo)致不走索引,難道 FROM_UNIXTIME 的返回值不能轉(zhuǎn)化為字符串類型?
于是查詢 FROM_UNIXTIME 函數(shù)的返回值。
MySQL FROM_UNIXTIME() returns a date /datetime from a version of unix_timestamp.
返回的是一個(gè)時(shí)間類型,那強(qiáng)制轉(zhuǎn)化為字符串類型呢?
MySQL [d_union_stat]> explain SELECT
-> *
-> FROM
-> t_local_cache_log_meta
-> where
-> `c_mtime` = CONCAT(FROM_UNIXTIME(1494485402)) \G
*************************** 1. row ***************************
id: 1
select_type: SIMPLE
table: t_local_cache_log_meta
type: ref
possible_keys: index_mtime
key: index_mtime
key_len: 137
ref: const
rows: 1
Extra: Using where
1 row in set (0.01 sec)
這次可以看到, 使用了索引,只掃描了一個(gè)數(shù)據(jù)。
二、結(jié)論
這次對(duì) FROM_UNIXTIME 的返回值強(qiáng)制轉(zhuǎn)化一下就可以利用上索引了。
所以這個(gè)SQL不能利用上索引是右值與左值的類型不一致導(dǎo)致的。 。
好了,不多說了, 這篇文章算是一個(gè)插曲,后面繼續(xù)介紹算法吧。
相關(guān)文章
關(guān)于Mysql如何設(shè)計(jì)高性能的數(shù)據(jù)庫
這篇文章主要介紹了關(guān)于Mysql如何設(shè)計(jì)高性能的數(shù)據(jù)庫,mysql支持的數(shù)據(jù)類型非常多,選擇正確的數(shù)據(jù)類型對(duì)于獲得高性能至關(guān)重要,本文就來詳細(xì)說明如何設(shè)計(jì)出高性能的數(shù)據(jù)庫,需要的朋友可以參考下2023-07-07
MySQL連接時(shí)出現(xiàn)2003錯(cuò)誤的實(shí)現(xiàn)
本文主要介紹了MySQL連接時(shí)出現(xiàn)2003錯(cuò)誤的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2022-05-05
mysql load data infile 的用法(40w數(shù)據(jù) 用了
測(cè)試數(shù)據(jù)的時(shí)候,生成txt文件應(yīng)該快點(diǎn),再用這種方式導(dǎo)入到mysql 速度上快點(diǎn),40w數(shù)據(jù) 用了3-5秒導(dǎo)進(jìn)mysql2013-01-01

