postgresql數據庫 timescaledb 時序庫 把大數據量表轉換爲超表
文章目錄
前言
這幾天工作的時候發現在 timescaledb 時序庫 中有部分大數據量的表不是超表，估計是當時建庫的時候沒有改 影響插入，查詢效率 ，因此需要改成超表
因工作原因 部分內容做保密處理了
一 創建新表
首先因爲在 timescaledb 時序庫 中創建超表必須是要沒有數據的表
因此第一步是 創建一張跟原表一模一樣的表（表名後面加個_cs） 你可以直接copy建表語句，也可以直接用工具複製表結構
二 把新表改爲超表
把新建的表改爲超表，7天一分區
--我是7天一分區
SELECT create_hypertable('表名_cs', 'alarm_time', chunk_time_interval => INTERVAL '7 day');
-- 加個索引
CREATE INDEX "表名_cs_create_time_idx" ON "hrmw"."表名_cs" USING btree (
"create_time" "code"."列名" DESC NULLS FIRST
);
三 插入數據
1.數據量不大的情況可以直接插入
INSERT into 表名_cs SELECT * from 表名;
2.如果數據量比較大 可以採取 一天一天 插入 或者一個月 或者幾個月一起插入
INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-9-1';
INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-10-1' and alarm_time < '2020-11-1' ;
3.運用函數（儲存過程）
對於表數據量太大，一天一天的插入的話 可以運用儲存過程（postgresql 數據庫叫函數）
下面是我寫的函數。大家可以借鑑
CREATE
OR REPLACE PROCEDURE "hrmw"."sp_into_表名_pt" ( ) AS $BODY$ BEGIN
-- 一般按照表名來建函數
DECLARE --我聲明的變量有點多 按實際的來
target_text TEXT;
sqltext TEXT;
sqltext1 TEXT;
sqltext2 TEXT;
rd record;
nloop INT;
isexist TEXT;
datestr TEXT;
begindate TEXT;
n INT;
BEGIN
--查詢最早一天的時間
sqltext := 'select to_char(min(alarm_time),''yyyy-mm-dd'') datestr from tb_hrmw_moni_target';
EXECUTE sqltext INTO begindate;
n := date_part( 'day', now( ) - begindate :: DATE );
--enddate:=(to_char(now(),'yyyy-mm-dd'))::text;
FOR nloop IN 0..n
LOOP
datestr := ( begindate :: DATE + nloop ) :: TEXT;
sqltext2 := '
insert into 表名_cs
select
列名1,
code,
列名2,
alarm_time,
列名3,
列名4
from 表名
where alarm_time >= ''' || datestr || ' 00:00:00''
and alarm_time <= ''' || datestr || ' 23:59:59''
';
EXECUTE sqltext2;
COMMIT;
END loop;
RETURN;
END;
END $BODY$ LANGUAGE plpgsql
四 查看效果
模式 _timescaledb_internal下面的就是分區
