文件

發佈事件到 PostgreSQL

MinIO 支援將儲存桶通知事件發佈到PostgreSQL。MinIO *僅* 支援 PostgreSQL 9.5 及更高版本。

將 PostgreSQL 端點新增到 MinIO 部署

以下程序會新增一個新的 PostgreSQL 服務端點,以支援 MinIO 部署中的儲存桶通知

先決條件

PostgreSQL 9.5 及更高版本

MinIO 依賴 PostgreSQL 9.5 中引入的功能。

MinIO mc 命令列工具

此程序使用 mc 命令列工具執行某些動作。如需安裝說明,請參閱 mc 快速入門

1) 將 PostgreSQL 端點新增到 MinIO

您可以使用環境變數*或*設定執行階段組態設定來設定新的 PostgreSQL 服務端點。

MinIO 支援使用環境變數來指定 PostgreSQL 服務端點和相關的組態設定。minio server 程序會在下次啟動時套用指定的設定。

以下範例程式碼設定了所有與配置 PostgreSQL 服務端點相關的環境變數。最少必要的變數為:

set MINIO_NOTIFY_POSTGRES_ENABLE_<IDENTIFIER>="on"
set MINIO_NOTIFY_POSTGRES_CONNECTION_STRING_<IDENTIFIER>="host=postgresql-endpoint.example.net port=4222"
set MINIO_NOTIFY_POSTGRES_TABLE_<IDENTIFIER>="minioevents"
set MINIO_NOTIFY_POSTGRES_FORMAT_<IDENTIFIER>="namespace|access"
set MINIO_NOTIFY_POSTGRES_MAX_OPEN_CONNECTIONS_<IDENTIFIER>="2"
set MINIO_NOTIFY_POSTGRES_QUEUE_DIR_<IDENTIFIER>="/opt/minio/events"
set MINIO_NOTIFY_POSTGRES_QUEUE_LIMIT_<IDENTIFIER>="100000"
set MINIO_NOTIFY_POSTGRES_COMMENT_<IDENTIFIER>="PostgreSQL Notification Event Logging for MinIO"
  • <IDENTIFIER> 替換為 PostgreSQL 服務端點的唯一描述性字串。對於與新目標服務端點相關的所有環境變數,請使用相同的 <IDENTIFIER> 值。以下範例假設識別符為 PRIMARY

    如果指定的 <IDENTIFIER> 與 MinIO 部署中現有的 PostgreSQL 服務端點相符,則新設定會覆寫該端點的任何現有設定。使用mc admin config get notify_postgres 來檢閱 MinIO 部署上目前已配置的 PostgreSQL 端點。

  • <ENDPOINT> 替換為 PostgreSQL 服務端點的PostgreSQL 連線字串。MinIO 支援連線字串的 key=value 格式。例如:

    "host=https://postgresql.example.com port=5432 ..."

    如需有關支援的 PostgreSQL 連線字串參數的更完整文件,請參閱PostgreSQL 連線字串

請參閱用於儲存貯體通知的 PostgreSQL 服務,以取得每個環境變數的完整文件。

MinIO 支援使用 mc admin config set 命令和 notify_postgres 組態金鑰,在執行中的 minio server 程序上新增或更新 PostgreSQL 端點。您必須重新啟動 minio server 程序,才能套用任何新的或更新的組態設定。

以下範例程式碼設定了所有與配置 PostgreSQL 服務端點相關的設定。最少必要的設定為:

mc admin config set ALIAS/ notify_postgres:IDENTIFIER \
   connection_string="ENDPOINT" \
   table="<string>" \
   format="<string>" \
   max_open_connections="<string>" \
   queue_dir="<string>" \
   queue_limit="<string>" \
   comment="<string>"
  • IDENTIFIER 替換為 PostgreSQL 服務端點的唯一描述性字串。此程序中的以下範例假設識別符為 PRIMARY

    如果指定的 IDENTIFIER 與 MinIO 部署中現有的 PostgreSQL 服務端點相符,則新設定會覆寫該端點的任何現有設定。使用 mc admin config get notify_postgres 來檢閱 MinIO 部署上目前已配置的 PostgreSQL 端點。

  • <ENDPOINT> 替換為 PostgreSQL 服務端點的PostgreSQL URI 連線字串。MinIO 支援 PostgreSQL 連線字串的 key=value 格式。例如:

    "host=https://postgresql.example.com port=5432 ..."

    如需有關支援的 PostgreSQL 連線字串參數的更完整文件,請參閱PostgreSQL 連線字串

請參閱PostgreSQL 儲存貯體通知組態設定,以取得每個設定的完整文件。

2) 重新啟動 MinIO 部署

您必須重新啟動 MinIO 部署,才能套用組態變更。使用 mc admin service restart 命令重新啟動部署。

mc admin service restart ALIAS

ALIAS 替換為要重新啟動的部署的別名

minio server 程序會在啟動時為每個已配置的 PostgreSQL 目標印出一行,類似如下:

SQS ARNs: arn:minio:sqs::primary:postgresql

當使用關聯的 PostgreSQL 部署作為目標來配置儲存貯體通知時,您必須指定 ARN 資源。

識別儲存貯體通知的 ARN

您在先前建立端點時,定義了要指派給儲存貯體通知的目標 ARN 的 <IDENTIFIER>。以下步驟會傳回在部署上配置的 ARN。尋找您指定的 <IDENTIFIER> 來識別先前建立的 ARN。

檢閱 JSON 輸出

  1. 複製並執行以下命令,將 ALIAS 替換為部署的別名

    mc admin info --json ALIAS
    
  2. 在 JSON 輸出中,尋找金鑰 info.sqsARN

    您需要的 ARN 是符合您指定的 <IDENTIFIER> 的金鑰值。

    例如,arn:minio:sqs::primary:postgresql

使用 jq 來剖析 JSON 的值

  1. 安裝 jq

  2. 複製並執行以下命令,將 ALIAS 替換為部署的別名

    mc admin info --json ALIAS | jq  .info.sqsARN
    

    這會傳回用於通知的 ARN,例如 arn:minio:sqs::primary:postgresql

3) 使用 PostgreSQL 端點作為目標來配置儲存貯體通知

使用 mc event add 命令,以配置的 PostgreSQL 服務為目標,新增儲存貯體通知事件

mc event add ALIAS/BUCKET arn:minio:sqs::primary:postgresql \
  --event EVENTS
  • ALIAS 替換為 MinIO 部署的別名

  • BUCKET 替換為要配置事件的儲存貯體名稱。

  • EVENTS 替換為以逗號分隔的事件清單,MinIO 會針對這些事件觸發通知。

使用 mc event ls 來檢視指定通知目標的所有已配置儲存貯體事件。

mc event ls ALIAS/BUCKET arn:minio:sqs::primary:postgresql

4) 驗證已配置的事件

在您配置新事件的儲存貯體上執行動作,並檢查 PostgreSQL 服務的通知資料。所需的動作取決於配置儲存貯體通知時指定的events

例如,如果儲存貯體通知組態包含 s3:ObjectCreated:Put 事件,您可以使用 mc cp 命令在儲存貯體中建立新物件並觸發通知。

mc cp ~/data/new-object.txt ALIAS/BUCKET

更新 MinIO 部署中的 PostgreSQL 端點

以下程序會更新現有的 PostgreSQL 服務端點,以支援 MinIO 部署中的儲存貯體通知

先決條件

PostgreSQL 9.5 及更新版本

MinIO 依賴 PostgreSQL 9.5 中引入的功能。

MinIO mc 命令列工具

此程序使用 mc 命令列工具執行某些動作。如需安裝說明,請參閱 mc 快速入門

1) 列出部署中已配置的 PostgreSQL 端點

使用 mc admin config get 命令列出部署中目前設定的 PostgreSQL 服務端點。

mc admin config get ALIAS/ notify_postgres

ALIAS 替換為 MinIO 部署的 別名

命令輸出結果類似如下:

notify_postgres:primary queue_dir="" connection_string="postgresql://" queue_limit="0"  table="" format="namespace"
notify_postgres:secondary queue_dir="" connection_string="" queue_limit="0"  table="" format="namespace"

notify_postgres 鍵是 PostgreSQL 通知設定 的頂層組態鍵。connection_string 鍵指定給定 notify_postgres 鍵的 PostgreSQL 服務端點。notify_postgres:<IDENTIFIER> 後綴描述該 PostgreSQL 服務端點的唯一識別碼。

記下您想在下一步更新的 PostgreSQL 服務端點的識別碼。

2) 更新 PostgreSQL 端點

使用 mc admin config set 命令設定 PostgreSQL 服務端點的新組態。

mc admin config set ALIAS/ notify_postgres:IDENTIFIER \
   connection_string="ENDPOINT" \
   table="<string>" \
   format="<string>" \
   max_open_connections="<string>" \
   queue_dir="<string>" \
   queue_limit="<string>" \
   comment="<string>"

以下組態設定是 PostgreSQL 服務端點所需的最低要求:

所有其他組態設定都是選用的。如需 PostgreSQL 組態設定的完整清單,請參閱 PostgreSQL 通知設定

3) 重新啟動 MinIO 部署

您必須重新啟動 MinIO 部署,才能套用組態變更。使用 mc admin service restart 命令重新啟動部署。

mc admin service restart ALIAS

ALIAS 替換為要重新啟動的部署的別名

minio server 程序會在啟動時為每個已配置的 PostgreSQL 目標印出一行,類似如下:

SQS ARNs: arn:minio:sqs::primary:postgresql

4) 驗證變更

對使用更新的 PostgreSQL 服務端點的事件組態的儲存桶執行動作,並檢查 PostgreSQL 服務中的通知資料。所需的動作取決於在設定儲存桶通知時指定的 events

例如,如果儲存貯體通知組態包含 s3:ObjectCreated:Put 事件,您可以使用 mc cp 命令在儲存貯體中建立新物件並觸發通知。

mc cp ~/data/new-object.txt ALIAS/BUCKET