儲存桶版本控制
概觀
MinIO 支援在單一儲存桶中保留物件的多個「版本」。
啟用後,版本控制允許 MinIO 保留同一物件的多個迭代。通常會覆寫現有物件的寫入操作,反而會導致建立新的已版本化的物件。MinIO 版本控制可防止意外覆寫和刪除,同時提供對「取消」寫入操作的支援。儲存桶版本控制是設定物件鎖定和保留規則的先決條件。
對於已版本化的儲存桶,變更物件的寫入操作會導致建立具有唯一版本 ID 的物件新版本。MinIO 會將用戶端預設擷取的物件「最新」版本標記起來。然後,用戶端可以明確選擇列出、擷取或移除特定的物件版本。
定義物件到期規則以移除不再需要的物件版本,例如依版本數量或版本日期。
對已版本化物件的讀取操作
檢閱此系列中的四個影像,以了解 MinIO 如何在已版本化的儲存桶中擷取物件。使用影像兩側的箭頭,從一個導覽到下一個。
在 MinIO 版本中變更:伺服器 RELEASE.2023-05-04T21-44-30Z
MinIO 不會針對明確目錄物件(「前置詞」)的建立、變更或刪除建立版本。在該明確目錄物件中建立的物件會保留正常的版本控制行為。
MinIO 會從物件路徑隱含判斷前置詞。明確前置詞建立通常只發生在 Spark 和類似工作負載中,這些工作負載在 S3 環境中應用舊版的 POSIX/HDFS 目錄建立行為。
版本控制是每個命名空間的
MinIO 將每個物件的完整命名空間(儲存桶和物件路徑)用作判斷物件唯一性的一部分。例如,以下所有命名空間都是「唯一」物件,其中每個物件的變更都會導致在該命名空間中建立新的物件版本
databucket/object.blob
databucket/blobs/object.blob
blobbucket/object.blob
blobbucket/blobs/object.blob
雖然 object.blob
在所有命名空間中可能具有相同的二進位內容,但 MinIO 僅在特定命名空間中強制執行版本控制,因此將上述每個 object.blob
視為不同且唯一。
版本控制與儲存容量
MinIO 不執行增量或差異類型的版本控制。對於變動頻繁的工作負載,這可能會導致較舊或過期的物件版本佔用大量的磁碟空間。
例如,考慮一個包含日誌資料的 1GB 物件。應用程式將 100MB 的資料附加到日誌中並上傳到 MinIO。然後,MinIO 將包含該物件的 1GB 和 1.1GB 版本。如果應用程式每天重複此過程 10 天,則儲存桶最終將包含超過 14GB 的與單一物件相關的資料。
MinIO 支援設定物件生命週期管理規則,以自動過期或轉換過期的物件版本並釋放儲存容量。例如,您可以設定一個規則,使物件版本在不再是最新版本(即不再是該物件的「最新」版本)的 90 天後自動過期。有關更多資訊,請參閱MinIO 物件過期。
或者,您可以使用以下命令手動移除物件版本
mc rm --versions
- 移除物件的所有版本。mc rm --versions --older-than
-移除早於指定日期物件的所有版本。
新版本於 RELEASE.2024-04-18T19-09-19Z:如果任何單一物件的版本累計大小超過 1TiB,MinIO 會發出警告。
版本 ID 產生
MinIO 為每個版本化的物件產生一個獨特且不可變的識別碼,作為寫入操作的一部分。每個物件版本 ID 由一個 128 位元固定大小的UUIDv4組成。UUID 產生具有足夠的隨機性,可確保任何環境下都有很高的唯一性可能性,在計算上難以猜測,並且不需要集中的註冊過程和授權來保證唯一性。
MinIO 不支援用戶端管理的版本 ID 分配。所有版本 ID 的產生都由 MinIO 伺服器程序處理。
對於在停用或暫停版本控制時建立的物件,MinIO 使用 null
版本 ID。您可以透過在 S3 操作中指定 null
作為版本 ID 來存取或移除這些物件。
版本化的刪除操作
對版本化的物件執行 DELETE
操作會建立一個 0 位元組的 DeleteMarker
作為該物件的最新版本。對於最新版本是 DeleteMarker
的物件,用戶端必須指定版本控制旗標或識別碼,才能對該物件的先前版本執行 GET/HEAD/LIST/DELETE
操作。預設的伺服器行為會將 DeleteMarker
物件從未版本化操作的考量中排除。
MinIO 可以利用生命週期管理過期規則來自動永久移除版本化的物件。否則,請使用手動 DELETE
操作來永久移除非當前版本化的物件或 DeleteMarker
物件。
MinIO 實作等冪刪除標記
版本變更於 RELEASE.2022-08-22T23-53-06Z。
標準 S3 實作可以在處理沒有版本識別碼的簡單 DeleteObject
請求時,為同一個物件建立多個循序刪除標記。有關管理刪除標記的詳細資訊,請參閱 S3 文件。
MinIO 與標準 S3 實作不同,它避免了這種潛在的刪除標記重複。在處理沒有版本識別碼的 Delete
請求時,MinIO 最多只會為指定的物件建立一個刪除標記。MinIO **不**與 S3 共享建立多個循序刪除標記的行為。
要永久刪除物件版本,請執行 DELETE
操作並指定要刪除物件的版本 ID。版本化的刪除操作是**不可逆的**。
以下 mc
命令對 DeleteMarkers
或版本化的物件執行操作
使用
mc ls --versions
來檢視物件的所有版本,包括刪除標記。使用
mc cp --version-id=UUID ...
來檢索與匹配的UUID
「已刪除」物件的版本。使用
mc rm --version-id=UUID ...
來刪除與匹配的UUID
物件的版本。使用
mc rm --versions
來刪除物件的*所有*版本。
教學課程
啟用儲存桶版本控制
您可以使用 MinIO 主控台、MinIO mc
CLI,或使用與 S3 相容的 SDK 來啟用版本控制。
選取 MinIO 主控台的 儲存桶部分,以存取儲存桶建立和管理功能。您可以使用 搜尋列來篩選清單。

每個儲存桶列都有一個 管理按鈕,可開啟該儲存桶的管理視圖。

切換 版本控制欄位以在儲存桶上啟用版本控制。
MinIO 主控台也支援在建立儲存桶時啟用版本控制。有關使用 MinIO 主控台進行儲存桶管理的更多資訊,請參閱儲存桶。
使用 mc version enable
命令來啟用現有儲存桶的版本控制
mc version ALIAS/BUCKET
在啟用版本控制之前建立的物件具有 null
版本 ID。
從版本控制中排除前綴
您可以使用 MinIO Client,將特定的前綴從版本控制中排除。這對於 Spark/Hadoop 工作負載或其他最初使用臨時前綴建立物件的情況很有用。
使用帶有
--excluded-prefixes
選項的mc version enable
mc version enable --excluded-prefixes "prefix1, prefix2" ALIAS/BUCKET
--excluded-prefixes
前綴清單會比對所有在其前綴或名稱中包含指定字串的物件,類似於 prefix*
形式的正規表示式。若要僅按前綴比對物件,請使用 prefix/*
。
例如,以下命令會將任何在其前綴或名稱中包含 _test
或 _temp
的物件排除在版本控制之外。
mc version enable --excluded-prefixes "_test, _temp" local/my-bucket
每個儲存桶最多可以排除 10 個前綴。若要新增或移除前綴,請使用更新的清單重複執行 mc version enable
命令。新的前綴清單會取代先前的前綴清單。
若要檢視目前排除的前綴,請使用帶有 --json
選項的 mc version info
mc version info ALIAS/BUCKET --json
命令輸出類似如下,其中排除的前綴清單位於 ExcludedPrefixes
屬性中
$ mc version info local/my-bucket --json
{
"Op": "info",
"status": "success",
"url": "local/my-bucket",
"versioning": {
"status": "Enabled",
"MFADelete": "",
"ExcludedPrefixes": [
"prefix1, prefix2"
]
}
}
若要停用前綴排除並恢復所有前綴的版本控制,請重複執行不帶 --excluded-prefixes
的 mc version enable
命令
mc version enable ALIAS/BUCKET
從版本控制中排除資料夾
您可以使用 MinIO Client,將資料夾從版本控制中排除。
物件鎖定
啟用物件鎖定的儲存桶需要版本控制,且不支援排除資料夾。
使用帶有
--exclude-folders
選項的mc version enable
,以排除名稱結尾為/
的物件的版本控制mc version enable --exclude-folders ALIAS/BUCKET
若要檢查是否對儲存桶中的資料夾進行版本控制,請使用帶有 --json
選項的 mc version enable
命令。如果 ExcludeFolders
屬性為 true
,則該儲存桶中的資料夾不會進行版本控制。
mc version enable --excluded-prefixes ALIAS/BUCKET --json
命令輸出類似如下
$ mc version info local/my-bucket --json
{
"Op": "info",
"status": "success",
"url": "local/my-bucket",
"versioning": {
"status": "Enabled",
"MFADelete": "",
"ExcludeFolders": true
}
}
若要停用資料夾排除並恢復所有資料夾的版本控制,請重複執行不帶 --exclude-folders
的 mc version enable
命令
mc version enable ALIAS/BUCKET
暫停儲存桶版本控制
您可以隨時使用 MinIO 主控台、MinIO mc
CLI 或使用相容於 S3 的 SDK 來暫停儲存桶版本控制。
選取 MinIO 主控台的 儲存桶部分,以存取儲存桶建立和管理功能。您可以使用 搜尋列來篩選清單。

每個儲存桶列都有一個 管理按鈕,可開啟該儲存桶的管理視圖。

選取版本控制欄位,並按照指示在儲存桶中暫停版本控制。
請參閱儲存桶以取得有關使用 MinIO 主控台進行儲存桶管理的詳細資訊。
使用 mc version suspend
命令,以在現有的儲存桶上啟用版本控制
mc version suspend ALIAS/BUCKET
在暫停版本控制時建立的物件會被指派 null
版本 ID。在暫停版本控制時對物件進行的任何變更都會導致覆寫該 null
版本物件。MinIO 不會移除或以其他方式變更現有的版本控制物件作為暫停版本控制的一部分。用戶端可以繼續與儲存桶中的任何現有物件版本互動。