批次到期
MinIO 新版本:RELEASE.2023-12-02T10-51-33Z
MinIO 批次架構允許您使用 YAML 格式的工作定義檔案(「批次檔案」)建立、管理、監控和執行工作。批次工作直接在 MinIO 部署上執行,以利用伺服器端處理能力,而不會受到您執行 MinIO 用戶端 的本機電腦的限制。
expire
批次工作將 自動物件到期 行為套用至單一儲存貯體。該工作根據提供的組態判斷到期資格,而獨立於任何已設定的到期規則。
行為
物件立即到期
與 基於被動掃描器的到期規則應用程式 相比,批次到期會立即發生,作為批次工作的一部分。具體而言,批次到期不會讓步於應用程式 I/O,並可能會影響部署上常規讀/寫操作的效能。
在批次執行時決定到期資格
批次到期以每個儲存貯體為單位運作,並執行一次以完成。工作會在工作執行時判斷到期資格,並且不會定期重新掃描或重新檢查是否有新物件。
若要擷取任何符合到期資格的新物件,請重新執行批次工作。
到期規則僅檢查最新物件
批次到期工作僅會根據每個批次到期規則檢查每個物件的最新或「目前」版本。
到期批次工作參考
欄位 |
說明 |
|
必要 到期工作類型的最上層欄位。 |
|
必要 設定為 |
|
必要 指定執行工作的儲存貯體名稱。 |
|
選用 指定執行工作的儲存貯體前置詞。 |
|
必要 要套用至指定 |
|
必要 支援下列兩個值之一
請參閱物件刪除,以取得關於版本化儲存桶中 |
|
選用 指定用於篩選物件的匹配字串。 支援 glob 樣式萬用字元 ( |
|
選用 指定用於篩選物件的物件存在時間。此規則僅適用於比指定時間單位更舊的物件。 例如, |
|
選用 指定用於篩選物件的 ISO-8601 時間戳記。 此規則僅適用於在指定時間戳記之前建立的物件。 |
|
選用 指定用於篩選物件的物件標籤鍵值對陣列。 例如,以下會將規則篩選為僅包含匹配標籤的物件 tags:
- key: archive
value: True
此鍵與 |
|
選用 指定用於篩選物件的物件中繼資料鍵值對陣列。 例如,以下會將規則篩選為僅包含匹配中繼資料的物件 metadata:
- key: content-type
value: image/*
此鍵與 |
|
選用 指定用於篩選物件的物件大小範圍。
|
|
選用 指定在套用過期時要保留的物件版本數量。 預設值為 |
|
選用 用於傳送通知事件的預定義端點。 |
|
選用 用於存取 |
|
選用 在放棄之前完成批次作業的嘗試次數。 |
|
選用 每次嘗試之間等待的時間量 ( |
用於 expire
工作類型的範例 YAML 描述
使用 mc batch generate
建立基本的 expire
批次作業,以便進一步自訂。
expire:
apiVersion: v1
bucket: mybucket # Bucket where this job will expire matching objects from
prefix: myprefix # (Optional) Prefix under which this job will expire objects matching the rules below.
rules:
- type: object # objects with zero ore more older versions
name: NAME # match object names that satisfy the wildcard expression.
olderThan: 70h # match objects older than this value
createdBefore: "2006-01-02T15:04:05.00Z" # match objects created before "date"
tags:
- key: name
value: pick* # match objects with tag 'name', all values starting with 'pick'
metadata:
- key: content-type
value: image/* # match objects with 'content-type', all values starting with 'image/'
size:
lessThan: 10MiB # match objects with size less than this value (e.g. 10MiB)
greaterThan: 1MiB # match objects with size greater than this value (e.g. 1MiB)
purge:
# retainVersions: 0 # (default) delete all versions of the object. This option is the fastest.
# retainVersions: 5 # keep the latest 5 versions of the object.
- type: deleted # objects with delete marker as their latest version
name: NAME # match object names that satisfy the wildcard expression.
olderThan: 10h # match objects older than this value (e.g. 7d10h31s)
createdBefore: "2006-01-02T15:04:05.00Z" # match objects created before "date"
purge:
# retainVersions: 0 # (default) delete all versions of the object. This option is the fastest.
# retainVersions: 5 # keep the latest 5 versions of the object including delete markers.
notify:
endpoint: https://notify.endpoint # notification endpoint to receive job completion status
token: Bearer xxxxx # optional authentication token for the notification endpoint
retry:
attempts: 10 # number of retries for the job before giving up
delay: 500ms # least amount of delay between each retry