批次過期
MinIO 版本新增:RELEASE.2023-12-02T10-51-33Z
MinIO 批次架構允許您使用 YAML 格式的工作定義檔案(「批次檔案」)建立、管理、監控和執行工作。批次工作直接在 MinIO 部署上執行,以利用伺服器端處理能力,而不會受到執行 MinIO 用戶端 的本機電腦的限制。
expire
批次工作將 自動物件過期 行為應用於單一儲存桶。此工作會根據提供的組態決定過期資格,而與任何已組態的過期規則無關。
行為
物件立即過期
批次過期會立即發生,作為批次工作的一部分,相較於 基於被動掃描器的過期規則應用。具體而言,批次過期不會讓位於應用程式 I/O,並可能影響部署上常規讀/寫操作的效能。
在批次執行時決定過期資格
批次過期按儲存桶運作,並執行一次以完成。此工作會在工作執行時決定過期資格,並且不會定期重新掃描或重新檢查是否有新物件。
若要捕獲任何符合過期資格的新物件,請重新執行批次工作。
過期規則僅檢查最新物件
批次過期作業只會針對每個物件的最新或「當前」版本,檢查每個批次過期規則。
過期批次作業參考
欄位 |
描述 |
|
必要 過期作業類型的頂層欄位。 |
|
必要 設定為 |
|
必要 指定執行作業的儲存桶名稱。 |
|
選填 指定執行作業的儲存桶前綴。 |
|
必要 要套用至指定 |
|
必要 支援以下兩個值之一
有關版本化儲存桶中 |
|
選填 指定用於篩選物件的匹配字串。 支援 glob 風格的萬用字元 ( |
|
選填 指定用於篩選物件的物件存在時間。該規則僅適用於比指定時間單位舊的物件。 例如, |
|
選填 指定用於篩選物件的 ISO-8601 時間戳記。 該規則僅適用於早於指定時間戳記建立的物件。 |
|
選填 指定用於篩選物件的物件標籤鍵值對陣列。 例如,以下範例將規則篩選為僅具有符合標籤的物件 tags:
- key: archive
value: True
此鍵與 |
|
選填 指定用於篩選物件的物件中繼資料鍵值對陣列。 例如,以下範例將規則篩選為僅具有符合中繼資料的物件 metadata:
- key: content-type
value: image/*
此鍵與 |
|
選填 指定用於篩選物件的物件大小範圍。
|
|
選填 指定套用過期時要保留的物件版本數量。 預設為 |
|
選填 用於傳送通知事件的預定義端點。 |
|
選填 用於存取 |
|
選填 放棄之前完成批次作業的嘗試次數。 |
|
選填 每次嘗試之間要等待的時間量 ( |
expire
作業類型的範例 YAML 描述
使用 mc batch generate
建立基本的 expire
批次作業,以便進一步自訂。
expire:
apiVersion: v1
bucket: mybucket # Bucket where this job will expire matching objects from
prefix: myprefix # (Optional) Prefix under which this job will expire objects matching the rules below.
rules:
- type: object # objects with zero ore more older versions
name: NAME # match object names that satisfy the wildcard expression.
olderThan: 70h # match objects older than this value
createdBefore: "2006-01-02T15:04:05.00Z" # match objects created before "date"
tags:
- key: name
value: pick* # match objects with tag 'name', all values starting with 'pick'
metadata:
- key: content-type
value: image/* # match objects with 'content-type', all values starting with 'image/'
size:
lessThan: 10MiB # match objects with size less than this value (e.g. 10MiB)
greaterThan: 1MiB # match objects with size greater than this value (e.g. 1MiB)
purge:
# retainVersions: 0 # (default) delete all versions of the object. This option is the fastest.
# retainVersions: 5 # keep the latest 5 versions of the object.
- type: deleted # objects with delete marker as their latest version
name: NAME # match object names that satisfy the wildcard expression.
olderThan: 10h # match objects older than this value (e.g. 7d10h31s)
createdBefore: "2006-01-02T15:04:05.00Z" # match objects created before "date"
purge:
# retainVersions: 0 # (default) delete all versions of the object. This option is the fastest.
# retainVersions: 5 # keep the latest 5 versions of the object including delete markers.
notify:
endpoint: https://notify.endpoint # notification endpoint to receive job completion status
token: Bearer xxxxx # optional authentication token for the notification endpoint
retry:
attempts: 10 # number of retries for the job before giving up
delay: 500ms # least amount of delay between each retry