文件

從遠端複本重新同步儲存貯體

此頁面上的程序會使用健全的複寫遠端來重新同步 MinIO 儲存貯體的內容。重新同步支援在複本組態中,MinIO 部署上的資料部分或全部遺失後進行復原。

例如,考慮類似於以下的 MinIO 主動-主動複寫組態

Active-Active Replication synchronizes data between two remote deployments.

重新同步允許使用參與的 MinIO 部署之一上的健全資料作為重建另一個部署的來源。

重新同步是每個儲存貯體的程序。您必須對遠端上遭受部分或全部資料遺失的每個儲存貯體重複重新同步。

BC/DR 操作期間的專業支援

MinIO SUBNET 使用者可以登入並建立與重新同步相關的新問題。透過 SUBNET 與 MinIO 工程部門協調可以確保成功重新同步和恢復正常操作,包括效能測試和健全狀況診斷。

社群使用者可以在MinIO 社群 Slack 上尋求支援。社群支援僅盡力而為,沒有關於回應速度的 SLA。

需求

MinIO 部署必須在線上

重新同步需要來源和目標部署都處於線上狀態,並且能夠接受讀取和寫入操作。來源必須具有與遠端的完整網路連線。

遠端部署可能「不健全」,因為它遭受了部分或全部資料遺失。只要來源和目的地都保持連線,重新同步就可以解決資料遺失問題。

重新同步需要現有的複寫組態

重新同步需要健全的來源部署具有不健全目標儲存貯體的現有複寫組態。此外,重新同步僅適用於使用現有物件複寫選項建立的那些複寫規則。

使用mc replicate ls來檢查健全來源儲存貯體的已設定複寫規則和目標。

複寫需要符合的物件加密設定

MinIO 支援使用SSE-KMSSSE-S3加密的物件複寫

  • 對於使用 SSE-KMS 加密的物件,MinIO 需要目標儲存貯體使用與用於加密來源儲存貯體上物件的相同金鑰名稱來支援物件的 SSE-KMS 加密。

  • 對於使用 SSE-S3 加密的物件,MinIO 要求 目標儲存桶也必須支援物件的 SSE-S3 加密,無論金鑰名稱為何。

在複製過程中,MinIO 會先將來源儲存桶上的物件解密,然後透過網路傳輸未加密的物件。目標 MinIO 部署會使用目標儲存桶的加密設定重新加密物件。因此,MinIO 強烈建議 在來源和目標部署上都啟用 TLS,以確保物件在傳輸過程中的安全。

MinIO 支援複製用戶端加密物件 (SSE-C)。

複製功能需要 MinIO 部署

MinIO 伺服器端複製功能僅適用於 MinIO 部署之間。來源和目標部署必須執行版本相符的 MinIO 伺服器。

若要設定任意 S3 相容服務之間的複製,請使用 mc mirror

複製功能需要版本控制

MinIO 依賴 版本控制 提供的不可變保護來支援複製和重新同步。

使用 mc version info 來驗證來源和遠端儲存桶的版本控制狀態。使用 mc version enable 命令來啟用必要的版本控制。

如果您在來源儲存桶中排除前綴或資料夾的版本控制,MinIO 將無法複製該資料夾或前綴中的物件。

複製功能需要物件鎖定狀態相符

MinIO 支援複製在 WORM 鎖定 下保留的物件。兩個複製儲存桶都必須啟用物件鎖定,MinIO 才能複製鎖定的物件。對於主動-主動配置,MinIO 建議在兩個儲存桶上使用相同的保留規則,以確保跨站點的一致行為。

您必須根據 S3 行為,在建立儲存桶時啟用物件鎖定。然後,您可以隨時設定物件保留規則。在開始此程序之前,請先在狀況不佳的目標儲存桶上設定必要的規則。

考量事項

重新同步需要時間

重新同步是一個背景程序,會持續檢查來源 MinIO 儲存桶中的物件,並在需要時將其複製到遠端。完成複製所需的時間可能會因物件的數量和大小、到遠端 MinIO 部署的輸送量以及來源 MinIO 部署上的負載而異。由於這些變數,完成的總時間通常是無法預測的。

MinIO 建議設定負載平衡器或 Proxy,以在同步完成之前僅將流量導向狀況良好的叢集。以下命令可以提供有關重新同步狀態的資訊

  • 在來源上使用 mc replicate resync status 來追蹤重新同步的進度。

  • 在來源和遠端上使用 mc replicate status 來追蹤正常的複製資料。

  • 針對來源和遠端執行 mc ls -r --versions ALIAS/BUCKET | wc -l,以驗證每個儲存桶上的物件和物件版本總數。

在資料遺失後重新同步物件

此程序使用現有的 MinIO 複製配置,將遺失的資料還原到參與該配置的其中一個 MinIO 部署。具體來說,狀況良好的 MinIO 部署 ( SOURCE ) 會將其現有資料同步到狀況不佳的 MinIO 部署 ( TARGET )。

此程序假設 SOURCE 具有現有的 別名,該別名具有設定複製的必要權限

您可以針對每個需要重新同步的儲存桶重複此程序。每個儲存桶最多只能執行一個複製作業。

1) 列出狀況良好的來源上已設定的複製目標

執行 mc replicate ls 命令,以列出狀況良好的 SOURCE 部署上需要重新同步的 BUCKET 的已設定遠端目標。

mc replicate ls SOURCE/BUCKET --json
  • SOURCE 替換為來源 MinIO 部署的 別名

  • BUCKET 替換為要用作重新同步來源的儲存桶名稱。

輸出結果如下所示

{
   "op": "",
   "status": "success",
   "url": "",
   "rule": {
      "ID": "cer1tuk9a3p5j68crk60",
      "Status": "Enabled",
      "Priority": 0,
      "DeleteMarkerReplication": {
         "Status": "Enabled"
      },
      "DeleteReplication": {
         "Status": "Enabled"
      },
      "Destination": {
         "Bucket": "arn:minio:replication::UUID:BUCKET"
      },
      "Filter": {
         "And": {},
         "Tag": {}
      },
      "SourceSelectionCriteria": {
         "ReplicaModifications": {
            "Status": "Enabled"
         }
      },
      "ExistingObjectReplication": {
         "Status": "Enabled"
      }
   }
}

輸出中的每個文件代表一個已設定的複製規則。 Destination.Bucket 欄位指定儲存桶上給定規則的 ARN。找出您要從中重新同步物件的儲存桶的正確 ARN。

2) 開始重新同步程序

執行 mc replicate resync start 命令,開始重新同步程序

mc replicate resync start --remote-bucket "arn:minio:replication::UUID:BUCKET" SOURCE/BUCKET
  • --remote-bucket 值替換為 TARGET MinIO 部署上狀況不佳的 BUCKET 的 ARN。

  • SOURCE 替換為來源 MinIO 部署的 別名

  • BUCKET 替換為狀況良好的 SOURCE MinIO 部署上儲存桶的名稱。

該命令會傳回重新同步作業 ID,表示該程序已開始。

3) 監控重新同步

在來源部署上使用 mc replicate resync status 命令來追蹤接收到的複製資料

mc replicate resync status ALIAS/BUCKET

輸出結果如下所示

mc replicate resync status /data
Resync status summary:
● arn:minio:replication::6593d572-4dc3-4bb9-8d90-7f79cc612f01:data
   Status: Ongoing
   Replication Status | Size (Bytes)    | Count
   Replicated         | 2.3 GiB         | 18
   Failed             | 0 B             | 0

當重新同步程序完成後, 狀態 會更新為 Completed

4) 後續步驟

  • 如果 TARGET 儲存桶損壞延伸到複製規則,您必須重新建立這些規則以符合先前的複製配置。有關其他指南,請參閱 啟用雙向伺服器端儲存桶複製

  • 執行基本驗證,確保複製配置中的所有儲存桶在執行 mc lsmc stat 等命令時顯示相似的結果。

  • 在還原所有複寫規則並驗證站點之間的複寫後,您可以設定反向代理、負載平衡器或其他網路控制平面,以管理連線並恢復將流量傳送到重新同步的部署。