PostgreSQL之分區(qū)表(partitioning)
PostgreSQL有一項(xiàng)非常有用的功能,分區(qū)表,或者partitioning。當(dāng)某個(gè)TABLE的記錄非常的多,千萬(wàn)甚至更多的時(shí)候,我們其實(shí)需要將他分割成子表。一個(gè)龐大的TABLE,就像水果倉(cāng)庫(kù)雜亂無(wú)章地堆放著無(wú)數(shù)的蘋果桃子和桔子,查找不方便,性能降低,比較合理的做法是將倉(cāng)庫(kù)分成三個(gè)子區(qū)域,分表放蘋果桃子和桔子。一張大表就變成了三個(gè)小表的集合。
通過(guò)合理的設(shè)計(jì),可以將選擇一定的規(guī)則,將大表切分多個(gè)不重不漏的子表,這就是傳說(shuō)中的partitioning。比如,我們可以按時(shí)間切分,每天一張子表,比如我們可以按照某其他字段分割,總之了就是化整為零,提高查詢的效能。
怎么實(shí)現(xiàn)這個(gè)分區(qū)表的功能呢?
1 建立大表。
2 創(chuàng)建分區(qū)繼承
3 定義Rule或者Trigger?
下面根據(jù)一個(gè)簡(jiǎn)單的例子,描述這個(gè)過(guò)程。我們將學(xué)生按照低于60分和不低于60分切分成兩張子表。
1 建立大表
CREATE TABLE student (student_id bigserial, name varchar(32), score smallint)
2 創(chuàng)建分區(qū)繼承。
CREATE TABLE student_qualified (CHECK (score >= 60 )) INHERITS (student) ; CREATE TABLE student_nqualified (CHECK (score < 60)) INHERITS (student) ;
創(chuàng)建了兩個(gè)分區(qū)表,student_qualified和student_nqualified,繼承了大表student的一切字段,同時(shí)設(shè)定了約束,即CHECK條件。
3 定義Rule或者Trigger。
雖然我們定義了CHECK條件,但是往student插入數(shù)據(jù)時(shí),PostgreSQL并不能根據(jù)score是否低于60插入的正確的子表,原因是,你并沒(méi)有定義這種規(guī)則,來(lái)告訴數(shù)據(jù)這么做。我們需要定義Rule或者Trigger,將數(shù)據(jù)插入到正確的分區(qū)表。
先看下Rule的定義:
CREATE OR REPLACE RULE insert_student_qualified AS ON INSERT TO student WHERE score >= 60 DO INSTEAD INSERT INTO student_qualified VALUES(NEW.*); CREATE OR REPLACE RULE insert_student_nqualified AS ON INSERT TO student WHERE score < 60 DO INSTEAD INSERT INTO student_nqualified VALUES(NEW.*);
這兩個(gè)Rule告訴了PostgreSQL,當(dāng)往總表插數(shù)據(jù)的時(shí)候,如果是score< 60,則插入student_nqualified,如果score>=60,則插入student_qualified.注意了,這個(gè)分割一定要不重不漏,如果我們不小心將>=60條件的“=”丟掉,等于60分的記錄將會(huì)錄入大表student,不在任何一個(gè)分區(qū)表中。
我們插入一些記錄:
INSERT INTO student (name,score) VALUES('Jim',77); INSERT INTO student (name,score) VALUES('Frank',56); INSERT INTO student (name,score) VALUES('Bean',88); INSERT INTO student (name,score) VALUES('John',47); INSERT INTO student (name,score) VALUES('Albert','87'); INSERT INTO student (name,score) VALUES('Joey','60');
我們看下數(shù)據(jù)分布情況,是否分布到了正確的的分區(qū)表:
SELECT p.relname,c.tableoid,c.* FROM student c, pg_class p WHERE c.tableoid = p.oid
輸出如下:
我們看到,雖然我們插入的是大表,但是數(shù)據(jù)卻存在了對(duì)應(yīng)的分區(qū)子表。符合我們的期望。同時(shí)還不影響查詢。
Rule是一個(gè)分流的辦法,還有TRIGGER也能做到讓正確的數(shù)據(jù)流向正確的分區(qū)子表。
首先我們定義個(gè)function。
CREATE OR REPLACE FUNCTION student_insert_trigger() RETURNS TRIGGER AS $$ BEGIN IF(NEW.score >= 60) THEN INSERT INTO student_qualified VALUES (NEW.*); ELSE INSERT INTO student_nqualified VALUES (NEW.*); END IF; RETURN NULL; END; $$ LANGUAGE plpgsql ;
然后定義TRIGGER,當(dāng)插入到student之前,就會(huì)觸發(fā)trigger:
CREATE TRIGGER insert_student BEFORE INSERT ON student FOR EACH row EXECUTE PROCEDURE student_insert_trigger() ;
我們首先通過(guò)刪除TABLE student,測(cè)試下trigger方式。
DROP TABLE STUDENT CASCADE CREATE TABLE student (student_id bigserial, name varchar(32), score smallint) ; CREATE TABLE student_qualified (CHECK (score >= 60 )) INHERITS (student) ; CREATE TABLE student_nqualified (CHECK (score < 60)) INHERITS (student) ;
然后執(zhí)行定義FUNCTION和定義TRIGGER的語(yǔ)句。就可以查看了。
為了確認(rèn)我們的觸發(fā)器的確觸發(fā)了,我們打開(kāi)存儲(chǔ)過(guò)程的統(tǒng)計(jì)開(kāi)關(guān):
在postgresql.conf中,找到track_functions,改成all
track_functions = all
插入之前先看下function student_insert_trigger的統(tǒng)計(jì)信息:
執(zhí)行插入:
INSERT INTO student (name,score) VALUES('Jim',77); INSERT INTO student (name,score) VALUES('Frank',56); INSERT INTO student (name,score) VALUES('Bean',88); INSERT INTO student (name,score) VALUES('John',47); INSERT INTO student (name,score) VALUES('Albert','87'); INSERT INTO student (name,score) VALUES('Joey','60');
插入后,看下function student_insert_trigger的統(tǒng)計(jì)信息
我們看到trigger觸發(fā)了6次。
執(zhí)行下查詢:
SELECT p.relname,c.tableoid,c.* FROM student c, pg_class p WHERE c.tableoid = p.oid
輸出如下:
參考文獻(xiàn)
相關(guān)文章
PostgreSQL:string_agg?多列值聚合成一列的操作示例
PostgreSQL中的STRING_AGG()函數(shù)是一個(gè)聚合函數(shù),用于連接字符串列表并在字符串之間放置分隔符,這篇文章主要介紹了PostgreSQL:string_agg多列值聚合成一列,需要的朋友可以參考下2023-08-08PostgreSQL圖(graph)的遞歸查詢實(shí)例
這篇文章主要給大家介紹了關(guān)于PostgreSQL圖(graph)的遞歸查詢的相關(guān)資料,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家學(xué)習(xí)或者使用PostgreSQL具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-12-12postgresql 中position函數(shù)的性能詳解
這篇文章主要介紹了postgresql 中position函數(shù)的性能詳解,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2021-02-02postgresql兼容MySQL on update current_timestamp
這篇文章主要介紹了postgresql兼容MySQL on update current_timestamp問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-03-03PostgreSQL數(shù)據(jù)庫(kù)中跨庫(kù)訪問(wèn)解決方案
這篇文章主要介紹了PostgreSQL數(shù)據(jù)庫(kù)中跨庫(kù)訪問(wèn)解決方案,需要的朋友可以參考下2017-05-0515個(gè)postgresql數(shù)據(jù)庫(kù)實(shí)用命令分享
這篇文章主要介紹了15個(gè)實(shí)用的postgresql數(shù)據(jù)庫(kù)命令分享,都是一些技巧性的postgresql命令,需要的朋友可以參考下2014-07-07postgresql查詢自動(dòng)將大寫的名稱轉(zhuǎn)換為小寫的案例
這篇文章主要介紹了postgresql查詢自動(dòng)將大寫的名稱轉(zhuǎn)換為小寫的案例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2021-01-01使用psql操作PostgreSQL數(shù)據(jù)庫(kù)命令詳解
這篇文章主要為大家介紹了使用psql操作PostgreSQL數(shù)據(jù)庫(kù)命令詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-08-08postgresql synchronous_commit參數(shù)的用法介紹
這篇文章主要介紹了postgresql synchronous_commit參數(shù)的用法介紹,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-12-12