文件

將事件發佈至 MySQL

MinIO 支援將儲存桶通知事件發佈至MySQL服務端點。MinIO 支援 MySQL 5.7.8 及更高版本。

將 MySQL 端點新增至 MinIO 部署

以下程序會新增一個新的 MySQL 服務端點,以支援 MinIO 部署中的儲存桶通知

先決條件

MySQL 5.7.8 及更高版本

MinIO 依賴 MySQL 5.7.8 中引入的功能。

MinIO mc 命令列工具

此程序使用mc命令列工具進行某些動作。請參閱mc快速入門以取得安裝說明。

1) 將 MySQL 端點新增至 MinIO

您可以使用環境變數設定執行階段組態設定來設定新的 MySQL 服務端點。

MinIO 支援使用環境變數來指定 MySQL 服務端點和相關的組態設定。minio server程序會在下次啟動時套用指定的設定。

以下範例程式碼會設定與設定 MySQL 服務端點相關的所有環境變數。最少需要的變數是

set MINIO_NOTIFY_MYSQL_ENABLE_<IDENTIFIER>="on"
set MINIO_NOTIFY_MYSQL_DSN_STRING_<IDENTIFIER>="user:password@tcp(hostname:port)/database"
set MINIO_NOTIFY_MYSQL_TABLE_<IDENTIFIER>="minio-events"
set MINIO_NOTIFY_MYSQL_FORMAT_<IDENTIFIER>="namespace|access"
set MINIO_NOTIFY_MYSQL_MAX_OPEN_CONNECTIONS_<IDENTIFIER>="2"
set MINIO_NOTIFY_MYSQL_QUEUE_DIR_<IDENTIFIER>="/opt/minio/events"
set MINIO_NOTIFY_MYSQL_QUEUE_LIMIT_<IDENTIFIER>="100000"
set MINIO_NOTIFY_MYSQL_COMMENT_<IDENTIFIER>="MySQL Event Notification Logging for MinIO"
  • <IDENTIFIER> 替換為 MySQL 服務端點的唯一描述性字串。對於與新目標服務端點相關的所有環境變數,使用相同的 <IDENTIFIER> 值。以下範例假設識別碼為 PRIMARY

    如果指定的 <IDENTIFIER> 與 MinIO 部署上現有的 MySQL 服務端點相符,則新設定會覆寫該端點的任何現有設定。使用mc admin config get notify_mysql以檢閱 MinIO 部署上目前已設定的 MySQL 端點。

  • <ENDPOINT> 替換為 MySQL 服務端點的 DSN。MinIO 預期以下格式

    <使用者>:<密碼>@tcp(<主機>:<連接埠>)/<資料庫>

    例如

    "username:password@tcp(mysql.example.com:3306)/miniodb"

請參閱用於儲存桶通知的 MySQL 服務,以取得每個環境變數的完整文件。

MinIO 支援使用 mc admin config set 命令和 notify_mysql 組態金鑰,在執行中的 minio server 程序上新增或更新 MySQL 端點。您必須重新啟動 minio server 程序,以套用任何新的或更新的組態設定。

以下範例程式碼設定與設定 MySQL 服務端點相關的所有設定。必須的最低設定為

mc admin config set ALIAS/ notify_mysql:IDENTIFIER \
   dsn_string="<ENDPOINT>" \
   table="<string>" \
   format="<string>" \
   max_open_connections="<string>" \
   queue_dir="<string>" \
   queue_limit="<string>" \
   comment="<string>"
  • IDENTIFIER 取代為 MySQL 服務端點的唯一描述性字串。此程序中的以下範例假設識別碼為 PRIMARY

    如果指定的 IDENTIFIER 符合 MinIO 部署上現有的 MySQL 服務端點,則新的設定會覆寫該端點的任何現有設定。使用 mc admin config get notify_mysql 來檢閱 MinIO 部署上目前設定的 MySQL 端點。

  • <ENDPOINT> 替換為 MySQL 服務端點的 DSN。MinIO 預期以下格式

    <使用者>:<密碼>@tcp(<主機>:<連接埠>)/<資料庫>

    例如

    "username:password@tcp(mysql.example.com:3306)/miniodb"

請參閱MySQL 儲存桶通知組態設定,以取得每個設定的完整文件。

2) 重新啟動 MinIO 部署

您必須重新啟動 MinIO 部署才能套用組態變更。使用 mc admin service restart 命令來重新啟動部署。

mc admin service restart ALIAS

ALIAS 取代為要重新啟動的部署的別名

minio server 程序會在啟動時針對每個已設定的 MySQL 目標列印類似以下的行

SQS ARNs: arn:minio:sqs::primary:mysql

當使用相關聯的 MySQL 部署作為目標來設定儲存桶通知時,您必須指定 ARN 資源。

識別儲存桶通知的 ARN

您在先前建立端點時,定義了要指派給儲存桶通知目標 ARN 的 <IDENTIFIER>。以下步驟會傳回部署上設定的 ARN。透過尋找您指定的 <IDENTIFIER> 來識別先前建立的 ARN。

檢閱 JSON 輸出

  1. 複製並執行以下命令,將 ALIAS 取代為部署的別名

    mc admin info --json ALIAS
    
  2. 在 JSON 輸出中,尋找金鑰 info.sqsARN

    您需要的 ARN 是符合您指定的 <IDENTIFIER> 的金鑰值。

    例如,arn:minio:sqs::primary:mysql

使用 jq 來剖析 JSON 以取得值

  1. 安裝 jq

  2. 複製並執行以下命令,將 ALIAS 取代為部署的別名

    mc admin info --json ALIAS | jq  .info.sqsARN
    

    這會傳回用於通知的 ARN,例如 arn:minio:sqs::primary:mysql

3) 使用 MySQL 端點作為目標來設定儲存桶通知

使用 mc event add 命令來新增以設定的 MySQL 服務作為目標的新儲存桶通知事件

mc event add ALIAS/BUCKET arn:minio:sqs::primary:mysql \
  --event EVENTS
  • ALIAS 取代為 MinIO 部署的別名

  • BUCKET 取代為要設定事件的儲存桶名稱。

  • EVENTS 取代為以逗號分隔的 事件清單,MinIO 會針對這些事件觸發通知。

使用 mc event ls 來檢視指定通知目標的所有已設定儲存桶事件

mc event ls ALIAS/BUCKET arn:minio:sqs::primary:mysql

4) 驗證已設定的事件

對您設定新事件的儲存桶執行動作,並檢查 MySQL 服務以取得通知資料。所需的動作取決於設定儲存桶通知時指定的 events

例如,如果儲存桶通知組態包含 s3:ObjectCreated:Put 事件,您可以使用 mc cp 命令在儲存桶中建立新物件並觸發通知。

mc cp ~/data/new-object.txt ALIAS/BUCKET

更新 MinIO 部署中的 MySQL 端點

以下程序會更新現有的 MySQL 服務端點,以支援 MinIO 部署中的儲存桶通知

先決條件

MySQL 5.7.8 及更高版本

MinIO 依賴 MySQL 5.7.8 中引入的功能。

MinIO mc 命令列工具

此程序使用mc命令列工具進行某些動作。請參閱mc快速入門以取得安裝說明。

1) 列出部署中已設定的 MySQL 端點

使用 mc admin config get 命令來列出部署中目前已設定的 MySQL 服務端點

mc admin config get ALIAS/ notify_mysql

ALIAS 取代為 MinIO 部署的別名

命令輸出類似如下

notify_mysql:primary format="namespace" table="minio_images" dsn_string="user:pass@tcp(mysql.example.com:3306)/miniodb"
notify_mysql:secondary format="namespace" table="minio_images" dsn_string="user:pass@tcp(mysql.example.com:3306)/miniodb"

notify_mysql 金鑰是MySQL 通知設定的頂層組態金鑰。dsn_string 金鑰指定給定 notify_mysql 金鑰的 MySQL 服務端點。notify_mysql:<IDENTIFIER> 字尾描述該 MySQL 服務端點的唯一識別碼。

請注意您想要更新的 MySQL 服務端點的識別碼以進行下一步。

2) 更新 MySQL 端點

使用 mc admin config set 命令來設定 MySQL 服務端點的新組態

mc admin config set ALIAS/ notify_mysql:IDENTIFIER \
   dsn_string="<ENDPOINT>" \
   table="<string>" \
   format="<string>" \
   max_open_connections="<string>" \
   queue_dir="<string>" \
   queue_limit="<string>" \
   comment="<string>"

以下組態設定是 MySQL 服務端點的最低要求

所有其他組態設定都是選用的。請參閱MySQL 通知設定以取得 MySQL 組態設定的完整清單。

3) 重新啟動 MinIO 部署

您必須重新啟動 MinIO 部署才能套用組態變更。使用 mc admin service restart 命令來重新啟動部署。

mc admin service restart ALIAS

ALIAS 取代為要重新啟動的部署的別名

minio server 程序會在啟動時針對每個已設定的 MySQL 目標列印類似以下的行

SQS ARNs: arn:minio:sqs::primary:mysql

4) 驗證變更

對使用已更新的 MySQL 服務端點進行事件設定的儲存桶執行動作,並檢查 MySQL 服務以取得通知資料。所需的動作取決於設定儲存桶通知時指定的 events

例如,如果儲存桶通知組態包含 s3:ObjectCreated:Put 事件,您可以使用 mc cp 命令在儲存桶中建立新物件並觸發通知。

mc cp ~/data/new-object.txt ALIAS/BUCKET