文件

發佈事件至 NSQ

MinIO 支援將 儲存桶通知 事件發佈到 NSQ 服務端點。

在 MinIO 部署中新增 NSQ 端點

以下程序會新增一個新的 NSQ 服務端點,以支援 MinIO 部署中的 儲存桶通知

先決條件

MinIO mc 命令列工具

此程序使用 mc 命令列工具執行特定動作。請參閱 mc 快速入門 以取得安裝指示。

1) 將 NSQ 端點新增至 MinIO

您可以使用環境變數設定執行階段組態設定來設定新的 NSQ 服務端點。

MinIO 支援使用 環境變數 指定 NSQ 服務端點和相關組態設定。minio server 處理程序會在下次啟動時套用指定的設定。

以下範例程式碼設定與設定 NSQ 服務端點相關的所有環境變數。最少需要的變數為 MINIO_NOTIFY_NSQ_NSQD_ADDRESSMINIO_NOTIFY_NSQ_TOPIC

set MINIO_NOTIFY_NSQ_ENABLE_<IDENTIFIER>="on"
set MINIO_NOTIFY_NSQ_NSQD_ADDRESS_<IDENTIFIER>="<ENDPOINT>"
set MINIO_NOTIFY_NSQ_TOPIC_<IDENTIFIER>="<string>"
set MINIO_NOTIFY_NSQ_TLS_<IDENTIFIER>="<string>"
set MINIO_NOTIFY_NSQ_TLS_SKIP_VERIFY_<IDENTIFIER>="<string>"
set MINIO_NOTIFY_NSQ_QUEUE_DIR_<IDENTIFIER>="<string>"
set MINIO_NOTIFY_NSQ_QUEUE_LIMIT_<IDENTIFIER>="<string>"
set MINIO_NOTIFY_NSQ_COMMENT_<IDENTIFIER>="<string>"
  • <IDENTIFIER> 取代為 TARGET 服務端點的唯一描述性字串。對於與新目標服務端點相關的所有環境變數,請使用相同的 <IDENTIFIER> 值。以下範例假設識別碼為 PRIMARY

    如果指定的 <IDENTIFIER> 與 MinIO 部署上現有的 NSQ 服務端點相符,則新設定會覆寫該端點的任何現有設定。使用 mc admin config get notify_nsq 檢閱 MinIO 部署上目前已設定的 NSQ 端點。

  • <ENDPOINT> 替換為 NSQ 服務端點的 URL。例如,https://nsq-service.example.com:4150

請參閱 用於 Bucket 通知的 NSQ 服務,以取得每個環境變數的完整文件。

MinIO 支援在執行中的 minio server 處理程序上新增或更新 NSQ 端點,方法是使用 mc admin config set 命令和 notify_nsq 組態金鑰。您必須重新啟動 minio server 處理程序,以套用任何新的或更新的組態設定。

以下範例程式碼會設定與組態 NSQ 服務端點相關的所有設定。最基本必要的設定是 notify_nsq nsqd_addressnotify_nsq topic

mc admin config set ALIAS/ notify_nsq:IDENTIFIER \
  nsqd_address="ENDPOINT" \
  topic="<string>" \
  tls="<string>" \
  tls_skip_verify="<string>" \
  queue_dir="<string>" \
  queue_limit="<string>" \
  comment="<string>"
  • IDENTIFIER 替換為 NSQ 服務端點的唯一描述性字串。此程序中的以下範例假設識別碼為 PRIMARY

    如果指定的 IDENTIFIER 與 MinIO 部署上現有的 NSQ 服務端點相符,則新設定會覆寫該端點的任何現有設定。使用 mc admin config get notify_nsq 來檢閱 MinIO 部署上目前已組態的 NSQ 端點。

  • ENDPOINT 替換為 NSQ 服務端點的 URL。例如

    NSQ://user:password@hostname:port

請參閱 NSQ Bucket 通知組態設定,以取得每個設定的完整文件。

2) 重新啟動 MinIO 部署

您必須重新啟動 MinIO 部署,才能套用組態變更。使用 mc admin service restart 命令來重新啟動部署。

mc admin service restart ALIAS

ALIAS 替換為要重新啟動的部署的別名

minio server 處理程序會在啟動時針對每個已組態的 NSQ 目標印出一行,類似如下

SQS ARNs: |ARN|

將關聯的 NSQ 部署組態為目標時,您必須指定 ARN 資源。

識別您的 Bucket 通知的 ARN

您先前在建立端點時定義了 <IDENTIFIER>,以指派給您的 Bucket 通知的目標 ARN。以下步驟會傳回在部署上組態的 ARN。尋找您指定的 <IDENTIFIER> 來識別先前建立的 ARN。

檢閱 JSON 輸出

  1. 複製並執行以下命令,將 ALIAS 替換為部署的 別名

    mc admin info --json ALIAS
    
  2. 在 JSON 輸出中,尋找金鑰 info.sqsARN

    您需要的 ARN 是符合您指定的 <IDENTIFIER> 的該金鑰值。

    例如,arn:minio:sqs::primary:nsq

使用 jq 來剖析 JSON 的值

  1. 安裝 jq

  2. 複製並執行以下命令,將 ALIAS 替換為部署的 別名

    mc admin info --json ALIAS | jq  .info.sqsARN
    

    這會傳回用於通知的 ARN,例如 arn:minio:sqs::primary:nsq

3) 使用 NSQ 端點組態 Bucket 通知作為目標

使用 mc event add 命令,以使用已組態的 NSQ 服務作為目標,新增新的 Bucket 通知事件

mc event add ALIAS/BUCKET arn:minio:sqs::primary:nsq \
  --event EVENTS
  • ALIAS 替換為 MinIO 部署的 別名

  • BUCKET 替換為要在其中組態事件的 Bucket 名稱。

  • EVENTS 替換為以逗號分隔的 事件 清單,MinIO 會針對這些事件觸發通知。

使用 mc event ls 來檢視指定通知目標的所有已組態 Bucket 事件

mc event ls ALIAS/BUCKET arn:minio:sqs::primary:nsq

4) 驗證已組態的事件

在您組態新事件的 Bucket 上執行動作,並檢查 NSQ 服務中的通知資料。所需的動作取決於組態 Bucket 通知時指定的 事件

例如,如果 Bucket 通知組態包含 s3:ObjectCreated:Put 事件,您可以使用 mc cp 命令在 Bucket 中建立新物件,並觸發通知。

mc cp ~/data/new-object.txt ALIAS/BUCKET

在 MinIO 部署中更新 NSQ 端點

以下程序會更新現有的 NSQ 服務端點,以支援 MinIO 部署中的Bucket 通知

必要條件

MinIO mc 命令列工具

此程序使用 mc 命令列工具執行特定動作。請參閱 mc 快速入門 以取得安裝指示。

1) 列出部署中已組態的 NSQ 端點

使用 mc admin config get 命令,以列出部署中目前已組態的 NSQ 服務端點

mc admin config get ALIAS/ notify_nsq

ALIAS 替換為 MinIO 部署的 別名

命令輸出類似如下

notify_nsq:primary nsqd_address="https://nsq.example.com" queue_dir="" queue_limit="0"  tls="off" tls_skip_verify="off" topic=""
notify_nsq:secondary nsqd_address="https://nsq.example.com" queue_dir="" queue_limit="0"  tls="off" tls_skip_verify="off" topic=""

請記下您想在下一步更新的 NSQ 服務端點的識別碼。

2) 更新 NSQ 端點

使用

mc admin config set ALIAS/ notify_nsq:<IDENTIFIER> \
   nsqd_address="NSQ://user:password@hostname:port" \
   topic="<string>" \
   tls="<string>" \
   tls_skip_verify="<string>" \
   queue_dir="<string>" \
   queue_limit="<string>" \
   comment="<string>"

3) 重新啟動 MinIO 部署

您必須重新啟動 MinIO 部署,才能套用組態變更。使用 mc admin service restart 命令來重新啟動部署。

mc admin service restart ALIAS

ALIAS 替換為要重新啟動的部署的別名

minio server 處理程序會在啟動時針對每個已組態的 NSQ 目標印出一行,類似如下

SQS ARNs: arn:minio:sqs::primary:NSQ

4) 驗證變更

在具有使用已更新 NSQ 服務端點的事件組態的儲存桶上執行動作,並檢查 NSQ 服務中的通知資料。所需的動作取決於在設定儲存桶通知時指定的

例如,如果 Bucket 通知組態包含 s3:ObjectCreated:Put 事件,您可以使用 mc cp 命令在 Bucket 中建立新物件,並觸發通知。

mc cp ~/data/new-object.txt ALIAS/BUCKET