物件掃描器

總覽

MinIO 使用內建的掃描器來檢查物件是否需要修復，並採取任何排程的物件動作。此類動作可能包括

計算磁碟上的資料使用量
評估和套用已設定的生命週期管理或物件保留規則
執行儲存區或站點複寫
檢查物件是否遺失或損毀的資料或同位分片，並執行修復

掃描器在兩個層級執行這些功能：叢集和儲存區。在叢集層級，掃描器會將所有儲存區分割成群組，並一次掃描一個群組的儲存區。掃描器從上次掃描以來新增的任何新儲存區開始，然後隨機掃描其他儲存區。掃描器會完成所有儲存區群組的檢查，然後重新開始一組新的掃描。

在儲存區層級，掃描器會將儲存區中的項目分組，並掃描該儲存區中的選定項目。掃描器根據物件名稱的雜湊值選擇要掃描的物件。在 16 次掃描中，MinIO 會檢查命名空間中的每個物件。MinIO 會完全掃描自上次掃描以來已知為新的任何字首。

掃描長度

多個因素會影響掃描完成所需的時間。

其中一些因素包括

提供給 MinIO 的磁碟機類型
可用的輸送量和iops
物件的數量和大小
MinIO 伺服器上的其他活動

例如，依預設，MinIO 會暫停掃描器，以使 I/O 作業可用于讀取和寫入請求。這會延長掃描完成所需的時間。

MinIO 會在每次掃描之間等待，等待的時間是每次掃描作業完成所需時間的倍數。依預設，此因子的值為 10.0，這表示 MinIO 在一次掃描完成後，等待作業長度的 10 倍時間，然後才開始下一次掃描。此因子的值會根據設定的掃描器速度設定而變更。

掃描器效能

許多因素會影響掃描器效能。其中一些因素包括

可用的節點資源
叢集的大小
與磁碟機數量相比的糾刪集數量
儲存區階層的複雜性 (物件和字首)。

例如，一個以 100TB 資料開始，然後增長到 200TB 資料的叢集，在相同的硬體和工作負載下，可能需要更多時間來掃描整個儲存區和物件的命名空間。同樣地，由 16 個磁碟機組成的單一糾刪集，掃描時間會比相同數量的磁碟機分割成兩個各 8 個磁碟機的糾刪集要長。

MinIO 將掃描器視為背景工作，並暫停它，以便優先完成叢集上的讀取和寫入請求。隨著叢集或工作負載的增加，掃描器效能會降低，因為它會更頻繁地讓步，以確保正常 S3 作業的優先順序。

您可以使用 MINIO_SCANNER_SPEED 環境變數或 scanner speed 設定來調整 MinIO 如何平衡掃描器效能與讀取/寫入作業。

掃描器指標

MinIO 提供了許多與掃描器相關的指標。

使用 mc admin scanner info 來查看掃描器的目前狀態以及上次完整掃描以來的時間。這有助於了解掃描器操作提供的指標。

掃描器指標，包括使用率指標，反映了上次完成的掃描。PUT 或 DELETE 操作自上次掃描以來，在下次掃描受影響的儲存桶之前，不會更新使用率。

輸出類似於以下內容

Overall Statistics
------------------
Last full scan time:   0d0h14m; Estimated 2885.28/month
Current cycle:         70464; Started: 2024-04-19 20:02:34.568479139 +0000 UTC
Active drives:         2

Last Minute Statistics
----------------------
Objects Scanned:       620 objects; Avg: 124.929µs; Rate: 892800/day
Versions Scanned:      620 versions; Avg: 2.801µs; Rate: 892800/day
Versions Heal Checked: 0 versions; Avg: 0ms
Read Metadata:         621 objects; Avg: 88.416µs, Size:
ILM checks:            656 versions; Avg: 663ns
Check Replication:     656 versions; Avg: 1.061µs
Verify Deleted:        0 folders; Avg: 0ms
Yield:                 3.086s total; Avg: 4.705ms/obj