發布事件至 PostgreSQL
MinIO 支援將 儲存桶通知 事件發布至 PostgreSQL。MinIO *僅*支援 PostgreSQL 9.5 及更高版本。
將 PostgreSQL 端點新增至 MinIO 部署
以下程序會新增一個新的 PostgreSQL 服務端點,以支援 MinIO 部署中的 儲存桶通知。
先決條件
PostgreSQL 9.5 及更高版本
MinIO 依賴 PostgreSQL 9.5 中引入的功能。
MinIO mc
命令列工具
1) 將 PostgreSQL 端點新增至 MinIO
您可以使用環境變數 *或* 設定執行階段組態設定來設定新的 PostgreSQL 服務端點。
MinIO 支援使用 環境變數 來指定 PostgreSQL 服務端點和相關的組態設定。minio server
程序會在下次啟動時套用指定的設定。
以下程式碼範例會設定所有與設定 PostgreSQL 服務端點相關的環境變數。最*基本*的*必要*變數為
set MINIO_NOTIFY_POSTGRES_ENABLE_<IDENTIFIER>="on"
set MINIO_NOTIFY_POSTGRES_CONNECTION_STRING_<IDENTIFIER>="host=postgresql-endpoint.example.net port=4222"
set MINIO_NOTIFY_POSTGRES_TABLE_<IDENTIFIER>="minioevents"
set MINIO_NOTIFY_POSTGRES_FORMAT_<IDENTIFIER>="namespace|access"
set MINIO_NOTIFY_POSTGRES_MAX_OPEN_CONNECTIONS_<IDENTIFIER>="2"
set MINIO_NOTIFY_POSTGRES_QUEUE_DIR_<IDENTIFIER>="/opt/minio/events"
set MINIO_NOTIFY_POSTGRES_QUEUE_LIMIT_<IDENTIFIER>="100000"
set MINIO_NOTIFY_POSTGRES_COMMENT_<IDENTIFIER>="PostgreSQL Notification Event Logging for MinIO"
將
<IDENTIFIER>
取代為 PostgreSQL 服務端點的唯一描述性字串。對所有與新目標服務端點相關的環境變數使用相同的<IDENTIFIER>
值。以下範例假設識別碼為PRIMARY
。如果指定的
<IDENTIFIER>
符合 MinIO 部署上現有的 PostgreSQL 服務端點,則新設定會*覆寫*該端點的任何現有設定。使用mc admin config get notify_postgres
來檢閱 MinIO 部署上目前設定的 PostgreSQL 端點。將
<ENDPOINT>
取代為 PostgreSQL 服務端點的 PostgreSQL 連線字串。MinIO 支援連線字串的key=value
格式。例如"host=https://postgresql.example.com port=5432 ..."
如需關於支援的 PostgreSQL 連線字串參數的更完整文件,請參閱 PostgreSQL 連線字串。
請參閱 用於儲存桶通知的 PostgreSQL 服務,以取得每個環境變數的完整文件。
MinIO 支援在執行中的 minio server
程序上新增或更新 PostgreSQL 端點,方法是使用 mc admin config set
命令和 notify_postgres
組態金鑰。您必須重新啟動 minio server
程序,以套用任何新的或更新的組態設定。
下列範例程式碼設定與組態 PostgreSQL 服務端點相關的所有設定。最低必要設定為
mc admin config set ALIAS/ notify_postgres:IDENTIFIER \
connection_string="ENDPOINT" \
table="<string>" \
format="<string>" \
max_open_connections="<string>" \
queue_dir="<string>" \
queue_limit="<string>" \
comment="<string>"
將
IDENTIFIER
取代為 PostgreSQL 服務端點的唯一描述性字串。此程序中的下列範例假設識別碼為PRIMARY
。如果指定的
IDENTIFIER
符合 MinIO 部署中現有的 PostgreSQL 服務端點,則新的設定會覆寫該端點的任何現有設定。使用mc admin config get notify_postgres
來檢閱 MinIO 部署中目前已組態的 PostgreSQL 端點。將
<ENDPOINT>
取代為 PostgreSQL 服務端點的 PostgreSQL URI 連接字串。MinIO 支援 PostgreSQL 連接字串的key=value
格式。例如"host=https://postgresql.example.com port=5432 ..."
如需關於支援的 PostgreSQL 連線字串參數的更完整文件,請參閱 PostgreSQL 連線字串。
請參閱 PostgreSQL 儲存桶通知組態設定,以取得每個設定的完整文件。
2) 重新啟動 MinIO 部署
您必須重新啟動 MinIO 部署才能套用組態變更。使用 mc admin service restart
命令來重新啟動部署。
mc admin service restart ALIAS
將 ALIAS
取代為要重新啟動的部署的 別名。
minio server
程序會在啟動時針對每個已組態的 PostgreSQL 目標列印一行,類似於下列內容
SQS ARNs: arn:minio:sqs::primary:postgresql
當使用關聯的 PostgreSQL 部署作為目標來組態儲存桶通知時,您必須指定 ARN 資源。
識別您的儲存桶通知的 ARN
您在先前建立端點時,定義了 <IDENTIFIER>
來指派給儲存桶通知的目標 ARN。以下步驟會傳回在部署上組態的 ARN。尋找您指定的 <IDENTIFIER>
來識別先前建立的 ARN。
檢閱 JSON 輸出
複製並執行下列命令,將
ALIAS
取代為部署的 別名。mc admin info --json ALIAS
在 JSON 輸出中,尋找金鑰
info.sqsARN
。您需要的 ARN 是符合您指定的
<IDENTIFIER>
的該金鑰的值。例如,
arn:minio:sqs::primary:postgresql
。
使用 jq 來剖析 JSON 的值
3) 使用 PostgreSQL 端點作為目標組態儲存桶通知
使用 mc event add
命令來新增以已組態的 PostgreSQL 服務作為目標的新儲存桶通知事件
mc event add ALIAS/BUCKET arn:minio:sqs::primary:postgresql \
--event EVENTS
使用 mc event ls
來檢視指定通知目標的所有已組態儲存桶事件
mc event ls ALIAS/BUCKET arn:minio:sqs::primary:postgresql
4) 驗證已組態的事件
在您組態新事件的儲存桶上執行動作,並檢查 PostgreSQL 服務的通知資料。所需的動作取決於組態儲存桶通知時指定的 events
。
例如,如果儲存桶通知組態包含 s3:ObjectCreated:Put
事件,則您可以使用 mc cp
命令在儲存桶中建立新物件並觸發通知。
mc cp ~/data/new-object.txt ALIAS/BUCKET
更新 MinIO 部署中的 PostgreSQL 端點
下列程序會更新現有的 PostgreSQL 服務端點,以支援 MinIO 部署中的 儲存桶通知。
先決條件
PostgreSQL 9.5 及更新版本
MinIO 依賴 PostgreSQL 9.5 中引入的功能。
MinIO mc
命令列工具
1) 列出部署中已組態的 PostgreSQL 端點
使用 mc admin config get
命令來列出部署中目前已組態的 PostgreSQL 服務端點
mc admin config get ALIAS/ notify_postgres
將 ALIAS
取代為 MinIO 部署的 別名。
命令輸出類似於下列內容
notify_postgres:primary queue_dir="" connection_string="postgresql://" queue_limit="0" table="" format="namespace"
notify_postgres:secondary queue_dir="" connection_string="" queue_limit="0" table="" format="namespace"
notify_postgres
金鑰是 PostgreSQL 通知設定的頂層組態金鑰。connection_string
金鑰會指定指定 notify_postgres 金鑰的 PostgreSQL 服務端點。notify_postgres:<IDENTIFIER>
後置字元會描述該 PostgreSQL 服務端點的唯一識別碼。
請注意您要針對下一步更新的 PostgreSQL 服務端點的識別碼。
2) 更新 PostgreSQL 端點
使用 mc admin config set
命令來設定 PostgreSQL 服務端點的新組態
mc admin config set ALIAS/ notify_postgres:IDENTIFIER \
connection_string="ENDPOINT" \
table="<string>" \
format="<string>" \
max_open_connections="<string>" \
queue_dir="<string>" \
queue_limit="<string>" \
comment="<string>"
下列組態設定是 PostgreSQL 服務端點的最低要求
所有其他組態設定都是選用的。請參閱 PostgreSQL 通知設定,以取得 PostgreSQL 組態設定的完整清單。
3) 重新啟動 MinIO 部署
您必須重新啟動 MinIO 部署才能套用組態變更。使用 mc admin service restart
命令來重新啟動部署。
mc admin service restart ALIAS
將 ALIAS
取代為要重新啟動的部署的 別名。
minio server
程序會在啟動時針對每個已組態的 PostgreSQL 目標列印一行,類似於下列內容
SQS ARNs: arn:minio:sqs::primary:postgresql
4) 驗證變更
在已使用更新的 PostgreSQL 服務端點的事件組態的儲存桶上執行動作,並檢查 PostgreSQL 服務的通知資料。所需的動作取決於組態儲存桶通知時指定的 events
。
例如,如果儲存桶通知組態包含 s3:ObjectCreated:Put
事件,則您可以使用 mc cp
命令在儲存桶中建立新物件並觸發通知。
mc cp ~/data/new-object.txt ALIAS/BUCKET