Mysql數(shù)據(jù)表分區(qū)技術PARTITION淺析
在這一章節(jié)里, 我們來了解下 Mysql 中的分區(qū)技術 (RANGE, LIST, HASH)
Mysql 的分區(qū)技術與水平分表有點類似, 但是它是在邏輯層進行的水平分表, 對于應用而言它還是一張表, 換句話說: 分區(qū)不是實際真正的對一張表進行拆分,分區(qū)之后表還是一個表,它是把存儲文件進行拆分。
在 Mysql 5.1(后) 有了幾種分區(qū)類型:
RANGE分區(qū): 基于屬于一個給定連續(xù)區(qū)間的列值, 把多行分配給分區(qū)
LIST分區(qū): 類似于按 RANGE 分區(qū), 區(qū)別在于 LIST 分區(qū)是基于列值匹配一個離散值集合中的某個值來進行選擇
HASH分區(qū): 基于用戶定義的表達式的返回值來進行選擇分區(qū), 該表達式使用將要插入到表中的這些行的列值進行計算, 這個函數(shù)可以包含 Mysql 中有效的、產(chǎn)生非負整數(shù)值的任何表達式
KEY分區(qū): 累世于按 HASH 分區(qū), 區(qū)別在于 KEY 分區(qū)只支持計算一列或多列, 且 Mysql 服務器提供其自身的哈希函數(shù)
分區(qū)應該注意的事項:
1、 做分區(qū)時,要么不定義主鍵,要么把分區(qū)字段加入到主鍵中
2、 分區(qū)字段不能為NULL,要不然怎么確定分區(qū)范圍呢,所以盡量 NOT NULL
首先你可以查看下你的 Mysql 版本是否支持 PARTITION
mysql> show plugins;
| partition | ACTIVE | STORAGE ENGINE | NULL | GPL |
或者:
mysql> show variables like "%part%";
+-------------------+-------+
| Variable_name | Value |
+-------------------+-------+
| have_partitioning | YES |
+-------------------+-------+
RANGE 分區(qū)
假定你創(chuàng)建了一個如下的表, 該表保存有20家音像店的職員記錄, 這20家音像店的編號從1到20。 如果你想將其分成4個小分區(qū), 那么你可以采用RANGE分區(qū), 創(chuàng)建的數(shù)據(jù)庫表如下:
mysql-> CREATE TABLE employees (
-> id INT NOT NULL,
-> fname VARCHAR(30),
-> lname VARCHAR(30),
-> hired DATE NOT NULL DEFAULT '1970-01-01',
-> separated DATE NOT NULL DEFAULT '9999-12-31',
-> job_code INT NOT NULL,
-> store_id INT NOT NULL
-> ) ENGINE=Myisam DEFAULT CHARSET=utf8
-> PARTITION BY RANGE (store_id) (
-> PARTITION P0 VALUES LESS THAN (6),
-> PARTITION P1 VALUES LESS THAN (11),
-> PARTITION P2 VALUES LESS THAN (16),
-> PARTITION P3 VALUES LESS THAN (21)
-> );
如果你想把不同時期離職的員工進行分別存儲, 那么你可以將日期字段 separated (即離職時間) 作為一個 key, 創(chuàng)建的 SQL 語句如下:
mysql-> CREATE TABLE employees (
-> id INT NOT NULL,
-> fname VARCHAR(30),
-> lname VARCHAR(30),
-> hired DATE NOT NULL DEFAULT '1970-01-01',
-> separated DATE NOT NULL DEFAULT '9999-12-31',
-> job_code INT NOT NULL,
-> store_id INT NOT NULL
-> ) ENGINE=Myisam DEFAULT CHARSET=utf8
-> PARTITION BY RANGE (YEAR(separated)) (
-> PARTITION P0 VALUES LESS THAN (2001),
-> PARTITION P1 VALUES LESS THAN (2011),
-> PARTITION P2 VALUES LESS THAN (2021),
-> PARTITION P3 VALUES LESS THAN MAXVALUE
-> );
List 分區(qū)
同樣的例子, 如果這20家影像店分布在4個有經(jīng)銷權的地區(qū),
+------------------+--------------------------------------+
| 地區(qū) | 音像店 ID 號 |
+------------------+--------------------------------------+
| 北區(qū) | 3, 5, 6, 9, 17 |
| 東區(qū) | 1, 2, 10, 11, 19, 20 |
| 西區(qū) | 4, 12, 13, 14, 18 |
| 中心區(qū) | 7, 8, 15, 16 |
+------------------+--------------------------------------+
mysql-> CREATE TABLE employees (
-> id INT NOT NULL,
-> fname VARCHAR(30),
-> lname VARCHAR(30),
-> hired DATE NOT NULL DEFAULT '1970-01-01',
-> separated DATE NOT NULL DEFAULT '9999-12-31',
-> job_code INT NOT NULL,
-> store_id INT NOT NULL
-> ) ENGINE=Myisam DEFAULT CHARSET=utf8
-> PARTITION BY LIST (store_id) (
-> PARTITION pNorth VALUES IN (3, 5, 6, 9, 17),
-> PARTITION pEast VALUES IN (1, 2, 10, 11, 19, 20),
-> PARTITION pWest VALUES IN (4, 12, 13, 14, 18),
-> PARTITION pCentral VALUES IN (7, 8, 15, 16)
-> );
當你創(chuàng)建完之后, 你可以進入 Mysql 數(shù)據(jù)儲存文件, 該文件夾位置定義在 Mysql 配置文件中
shawn@Shawn:~$ sudo vi /etc/mysql/my.cnf;
[mysqld]
datadir = /var/lib/mysql
shawn@Shawn:~$ cd /var/lib/mysql/dbName
shawn@Shawn:/var/lib/mysql/dbName$ ll
顯示如下:
8768 Jun 7 22:01 employees.frm
48 Jun 7 22:01 employees.par
0 Jun 7 22:01 employees#P#pCentral.MYD
1024 Jun 7 22:01 employees#P#pCentral.MYI
0 Jun 7 22:01 employees#P#pEast.MYD
1024 Jun 7 22:01 employees#P#pEast.MYI
0 Jun 7 22:01 employees#P#pNorth.MYD
1024 Jun 7 22:01 employees#P#pNorth.MYI
0 Jun 7 22:01 employees#P#pWest.MYD
1024 Jun 7 22:01 employees#P#pWest.MYI
從這里可以看出, 它是把存儲文件根據(jù)我們的定義進行了拆分
employees.frm = 表結構
employees.par = partition, 申明是一個分區(qū)表
.MYD = 數(shù)據(jù)文件
.MYI = 索引文件
HASH 分區(qū)
HASH 分區(qū)主要用來確保數(shù)據(jù)在預先確定數(shù)目的分區(qū)中平均分布
如果你想把不同時期加入的員工進行分別存儲, 那么你可以將日期字段 hired 作為一個 key
mysql-> CREATE TABLE employees (
-> id INT NOT NULL,
-> fname VARCHAR(30),
-> lname VARCHAR(30),
-> hired DATE NOT NULL DEFAULT '1970-01-01',
-> separated DATE NOT NULL DEFAULT '9999-12-31',
-> job_code INT NOT NULL,
-> store_id INT NOT NULL
-> ) ENGINE=Myisam DEFAULT CHARSET=utf8
-> PARTITION BY HASH (YEAR(hired)) (
-> PARTITIONS 4
-> );
#這里注意的是 PARTITIONS, 多了一個 s
這里要提一下的就是, 如上的例子都是使用的是 Myisam 存儲引擎,它默認使用獨立表空間, 所以你可以在上面的磁盤空間里看到不同的分區(qū)
而 InnoDB 引擎則默認使用共享表空間, 此時就算你對 InnoDB 表進行分區(qū), 你查看下會發(fā)現(xiàn), 它并沒有像 Myisam 那么樣進行物理上的分區(qū), 所以你需要修改下 Mysql 配置文件:
shawn@Shawn:~$ sudo vi /etc/mysql/my.cnf;
#添加:
innodb_file_per_table=1
#重啟 mysql
shawn@Shawn:~$ sudo /etc/init.d/mysql restart
此時你再對 InooDB 進行分區(qū), 則會有如下效果:
8768 Jun 7 22:54 employees.frm
48 Jun 7 22:54 employees.par
98304 Jun 7 22:54 employees#P#pCentral.ibd
98304 Jun 7 22:54 employees#P#pEast.ibd
98304 Jun 7 22:54 employees#P#pNorth.ibd
98304 Jun 7 22:54 employees#P#pWest.ibd
分區(qū)管理
刪除分區(qū)
mysql> alter table employees drop partition pWest;
新增分區(qū)
#range添加新分區(qū)
mysql> alter table employees add partition ( partition p4 values less than (26) );
#list添加新分區(qū)
mysql> alter table employees add partition( partition pSouth values in (21, 22, 23) );
#hash重新分區(qū)
mysql> alter table employees add partition partitions 5;
相關文章
SQL行列轉(zhuǎn)置以及非常規(guī)的行列轉(zhuǎn)置示例代碼
轉(zhuǎn)置即旋轉(zhuǎn)數(shù)據(jù)表的橫縱方向,常用來改變數(shù)據(jù)布局,以便用新的角度觀察,下面這篇文章主要給大家介紹了關于SQL行列轉(zhuǎn)置以及非常規(guī)行列轉(zhuǎn)置的相關資料,文中通過代碼介紹的非常詳細,需要的朋友可以參考下2024-08-08MySQL 大數(shù)據(jù)量快速插入方法和語句優(yōu)化分享
對于事務表,應使用BEGIN和COMMIT代替LOCK TABLES來加快插入2012-04-04MySQL數(shù)據(jù)庫查看數(shù)據(jù)表占用空間大小和記錄數(shù)的方法
這篇文章主要介紹了MySQL數(shù)據(jù)庫查看數(shù)據(jù)表占用空間大小和記錄數(shù)的方法,如果想知道MySQL數(shù)據(jù)庫中每個表占用的空間、表記錄的行數(shù)的話,可以打開MySQL的information_schema 數(shù)據(jù)庫查詢,本文就講解查詢方法,需要的朋友可以參考下2015-04-04MAC下MYSQL數(shù)據(jù)庫密碼忘記的解決辦法
這篇文章主要介紹了Mac操作系統(tǒng)下MYSQL數(shù)據(jù)庫密碼忘記的快速解決辦法,教大家重置MYSQ密碼,具有一定的參考價值,感興趣的小伙伴們可以參考一下2017-11-11