技術標籤：TimescaleDBpostgresql資料庫postgresql

postgresql資料庫 timescaledb 時序庫 把大資料量表轉換為超表

文章目錄

• postgresql資料庫 timescaledb 時序庫 把大資料量表轉換為超表
• • 一 建立新表
  • 二 把新表改為超表
  • 三 插入資料
  • • 1.資料量不大的情況可以直接插入
    • 2.如果資料量比較大 可以採取 一天一天 插入 或者一個月 或者幾個月一起插入
    • 3.運用函式（儲存過程）
  • 四 檢視效果

前言
這幾天工作的時候發現在 timescaledb 時序庫 中有部分大資料量的表不是超表，估計是當時建庫的時候沒有改 影響插入，查詢效率 ，因此需要改成超表

一 建立新表

首先因為在 timescaledb 時序庫 中建立超表必須是要沒有資料的表
因此第一步是 建立一張跟原表一模一樣的表（表名後面加個_cs） 你可以直接copy建表語句，也可以直接用工具複製表結構

二 把新表改為超表

把新建的表改為超表，7天一分割槽

--我是7天一分割槽
SELECT create_hypertable('表名_cs', 'alarm_time', chunk_time_interval => INTERVAL '7 day');
-- 加個索引
CREATE INDEX "表名_cs_create_time_idx"
 
 ON "hrmw"."表名_cs" USING btree (
  "create_time" "code"."列名" DESC NULLS FIRST
);

三 插入資料

1.資料量不大的情況可以直接插入

INSERT into 表名_cs SELECT * from 表名;

2.如果資料量比較大 可以採取 一天一天 插入 或者一個月 或者幾個月一起插入

INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-9-1';
 

INSERT into 表名_cs SELECT * from 表名 where alarm_time >= '2020-10-1' and  alarm_time < '2020-11-1'   ;

3.運用函式（儲存過程）

對於表資料量太大，一天一天的插入的話 可以運用儲存過程（postgresql 資料庫叫函式）

下面是我寫的函式。大家可以借鑑

CREATE 
	OR REPLACE PROCEDURE "hrmw"."sp_into_表名_pt" ( ) AS $BODY$ BEGIN
	-- 一般按照表名來建函式
	DECLARE --我宣告的變數有點多 按實際的來
		target_text TEXT;
	sqltext TEXT;
	sqltext1 TEXT;
	sqltext2 TEXT;
	rd record;
	nloop INT;
	isexist TEXT;
	datestr TEXT;
	begindate TEXT;
	n INT;
	BEGIN
			--查詢最早一天的時間
			sqltext := 'select to_char(min(alarm_time),''yyyy-mm-dd'') datestr from tb_hrmw_moni_target';       
		EXECUTE sqltext INTO begindate;
		n := date_part( 'day', now( ) - begindate :: DATE );
--enddate:=(to_char(now(),'yyyy-mm-dd'))::text;
		FOR nloop IN 0..n
		LOOP
		datestr := ( begindate :: DATE + nloop ) :: TEXT;
		sqltext2 := '
		insert into 表名_cs 
		select
		列名1,
		code,
		列名2,
		alarm_time,
		列名3,
		列名4
		from 表名
		where alarm_time >= ''' || datestr || ' 00:00:00''
		and alarm_time <= ''' || datestr || ' 23:59:59''
		'; 
		EXECUTE sqltext2;
		COMMIT;
		
	END loop;
RETURN;

END;

END $BODY$ LANGUAGE plpgsql

四 檢視效果

模式 _timescaledb_internal下面的就是分割槽