Windows 環境搭建 PostgreSQL 邏輯複製高可用架構資料庫服務

2022-10-26 15:04:57

本文主要介紹 Windows 環境下搭建 PostgreSQL 的主從邏輯複製,關於 PostgreSQl 的相關運維文章,網路上大多都是 Linux 環境下的操作,鮮有在 Windows 環境下設定的教學,所以本文采用 Windows 環境作為演示系統來進行 PostgreSQL 高可用資料庫服務的搭建。

關於 Windows 系統 PostgreSQL 的安裝方法可以直接看之前的部落格 https://www.cnblogs.com/berkerdong/p/16645493.html

在Windows 環境執行 PostgreSQL 在連線數的設定需要注意以下這個知識點:

由於PostgreSQL所依賴的一些庫依賴於user32.dll,後者從記憶體中一塊稱為桌面堆(Desktop Heap)的區域中分配記憶體。桌面堆被分配給了每一個登入的對談,在 Windows 10 以上的作業系統通常一個非互動的對談將會分配給768KB。每個互動登入對談將會分配給20MB的桌面堆,每個postgres程序典型的桌面堆消耗是3.2KB。

  • 當作為Windows服務執行時,因為每個非互動對談將會分配768KBMB的桌面堆,所以大約可以支撐 200-220個連線。
  • 當在命令列方式執行時,因為每個互動登入對談將會分配20MB的桌面堆,所以大約可以支撐 5000-6000個連線。

以上說的值是作業系統預設的值,這個堆分配大小可以通過調整登入檔來進行修改,但是此操作需要非常小心,一旦指定的值過大,系統將無法啟動,所以不推薦去手動修改這個值。如果想要了解更多這個知識點可以看 微軟官方的這個說明:
https://learn.microsoft.com/zh-CN/troubleshoot/windows/win32/user32-kernel32-not-initialize

結合上面的知識點,所以我們在Windows環境下設定 PostgreSQL 的最大連線數時,如果採用 Windows 服務模式執行則設定最大連線數為200比較好,如果需要200個以上的並行連線,則最好採用控制檯形式啟動執行PostgreSQL,同時結合計算機的可以記憶體去綜合考慮一般100個連線數會消耗 1G記憶體,所以假設我們電腦記憶體為8G,考慮到系統本身執行需要2G記憶體,所以這是 PostgreSQL 的最大連線數設定為500 左右即可。

PostgreSQL控制檯執行,啟動和停止命令如下:

啟動 pg_ctl.exe -D "D:\Software\PostgreSQL\data" start
停止 pg_ctl.exe -D "D:\Software\PostgreSQL\data" stop

-D 的引數 "D:\Software\PostgreSQL\data" 是 PostgreSQL 的資料範例位置


今天我們採用邏輯同步複製來實現主從資料庫的設定,首選在主資料庫上調整 postgresql.conf 組態檔啟用邏輯複製功能
wal_level = logical

設定調整之後需要重新啟動主資料庫範例。

然後在主資料庫對我們需要設定的資料庫執行邏輯釋出
CREATE PUBLICATION p FOR ALL TABLES WITH (publish = 'insert, update, delete, truncate', publish_via_partition_root = false);
其中 p 為這個釋出設定的名稱,也可以自定義為其它。

然後在從資料庫範例上選擇我們要用來訂閱主範例的資料庫,然後執行建立邏輯訂閱

CREATE SUBSCRIPTION s
    CONNECTION 'host=127.0.0.1 port=5432 user=postgres dbname=xxxxx connect_timeout=10 password=xxxxxx'
    PUBLICATION p
    WITH (connect = true, enabled = true, copy_data = true, create_slot = true, synchronous_commit = 'remote_apply');

其中 s 為這個訂閱設定的名稱 'host=127.0.0.1 port=5432 user=postgres dbname=xxxxx connect_timeout=10 password=xxxxxx' 為主庫的連線資訊

這樣我們就完成本地 localhost 的 PostgreSQL 範例中 csapp 資料庫和 遠端伺服器上 caspp 資料庫的主從設定。

這裡要注意的一點是 PostgreSQL 的 邏輯訂閱並不會同步DDL操作 ,所以對於資料庫的建表等操作是不會進行主從同步的,我們需要手動維護 主從範例資料庫上的表結構使其保持一致。
當在主和從資料庫都建立完成表之後需要在從庫上執行以下重新整理訂閱的 SQL,每次主庫新增或者刪除了表,從庫都需要執行這個操作。

ALTER SUBSCRIPTION s
    REFRESH PUBLICATION WITH (copy_data = true);

然後我們在主庫的資料庫表中進行資料操作,所有的操作就會被同步到 從庫的資料表中。

下面介紹如果想要刪除釋出設定和訂閱設定的操作
在主庫執行
SELECT * FROM pg_publication 可以查詢當前主庫的所有釋出資訊

DROP PUBLICATION p 刪除名字為 p 的釋出資訊

在從庫執行:
SELECT * FROM pg_subscription 可以查詢當前從庫的所有訂閱資訊

DROP SUBSCRIPTION s 刪除名字為 s 的訂閱資訊

至此 Windows 環境搭建 PostgreSQL 邏輯複製高可用架構資料庫服務 就講解完了,有任何不明白的,可以在文章下面評論或者私信我,歡迎大家積極的討論交流,有興趣的朋友可以關注我目前在維護的一個 .NET 基礎框架專案,專案地址如下
https://github.com/berkerdong/NetEngine.git
https://gitee.com/berkerdong/NetEngine.git