文件

硬體檢查清單

在規劃生產環境、分散式 MinIO 部署的硬體設定時,請使用以下檢查清單。

考量事項

在為您的 MinIO 實作選擇硬體時,請考慮以下因素

  • 啟動時要儲存的資料預期數量 (以 Tebibyte 為單位)

  • 至少未來兩年內資料大小的預期增長

  • 按平均物件大小計算的物件數量

  • 資料的平均保留時間 (以年為單位)

  • 要部署的站點數量

  • 預期的儲存貯體數量

生產環境硬體建議

以下檢查清單遵循 MinIO 的建議設定,用於生產部署。提供的指南旨在作為基準,無法取代 MinIO SUBNET 效能診斷、架構檢閱和直接工程支援。

與任何分散式系統一樣,MinIO 受益於針對給定伺服器集區中所有節點選擇相同的組態。確保集區節點之間一致地選擇硬體(CPU、記憶體、主機板、儲存配接器)和軟體(作業系統、核心設定、系統服務)。

如果節點具有不同的硬體或軟體組態,部署可能會出現無法預測的效能。從在較低成本硬體上儲存過時資料中受益的工作負載應改為部署專用的「暖」或「冷」MinIO 部署,並將資料轉換到該層級。

MinIO 不提供託管服務或硬體銷售

請參閱我們的參考硬體頁面,了解我們硬體合作夥伴提供的精選伺服器和儲存組件。

描述

最低

建議

專門為 MinIO 租戶提供服務的 Kubernetes 工作節點。

每個租戶 4 個工作節點

每個租戶 8 個以上的工作節點

MinIO 租戶的專用持續性磁碟區.

每個 MinIO 伺服器 Pod 4 個 PV

每個 MinIO 伺服器 Pod 8 個以上的 PV

高速網路基礎架構.

25GbE

100GbE

支援現代 SIMD 指令 (AVX-512) 的伺服器級 CPU,例如 Intel® Xeon® Scalable 或更高版本。

每個 MinIO Pod 4 個 vCPU

每個 MinIO Pod 8 個以上的 vCPU

足夠的可用記憶體以滿足或超過每個伺服器的使用量,並有合理的緩衝空間。

每個工作節點的可用記憶體為 32GB

每個工作節點的可用記憶體為 128GB 以上

重要

以下區域對 MinIO 效能的影響最大,並按重要性順序列出

網路基礎設施

吞吐量不足或受限會限制效能

儲存控制器

舊韌體、吞吐量受限或硬體故障會限制效能並影響可靠性

儲存裝置(硬碟)

舊韌體,或速度慢/老舊/故障的硬體會限制效能並影響可靠性

在關注其他硬體資源(例如與運算相關的限制)之前,請優先確保這些區域的必要組件。

上述最低建議反映了 MinIO 在協助企業客戶於各種 IT 基礎架構上部署,同時維持所需 SLA/SLO 的經驗。雖然 MinIO 可能可以在低於最低建議的拓樸上執行,但任何潛在的成本節省都會伴隨著降低可靠性、效能或整體功能的風險。

網路

MinIO 建議使用高速網路,以支援連接儲存裝置(聚合硬碟、儲存控制器和 PCIe 匯流排)的最大可能吞吐量。下表提供特定實體或虛擬網路介面所支援的最大儲存吞吐量的一般指南。此表假設所有網路基礎架構組件(例如路由器、交換器和實體纜線)也支援 NIC 頻寬。

NIC 頻寬 (Gbps)

預估聚合儲存吞吐量 (GBps)

10Gbps

1.25GBps

25Gbps

3.125GBps

50Gbps

6.25GBps

100Gbps

12.5GBps

網路對 MinIO 效能的影響最大,其中每個主機的低頻寬會人為地限制儲存裝置的潛在效能。以下網路吞吐量限制的範例假設旋轉硬碟的持續 I/O 約為 100MB/秒

  • 1GbE 網路連結最多可支援 125MB/秒,或一個旋轉硬碟

  • 10GbE 網路大約可支援 1.25GB/秒,可能支援 10-12 個旋轉硬碟

  • 25GbE 網路大約可支援 3.125GB/秒,可能支援約 30 個旋轉硬碟

記憶體

記憶體主要限制每個節點的同時連線數。

您可以使用此公式計算每個節點的最大同時請求數

\(總記憶體 / 每個請求的記憶體\)

若要計算每個請求使用的記憶體量,請使用此公式

\(((2MiB + 128KiB) * 硬碟數量) + (2 * 10MiB) + (2 * 1 MiB)\)

10MiB 是預設的 v1 糾刪區塊大小。1 MiB 是預設的 v2 糾刪區塊大小。

下表列出節點上基於主機硬碟數量和 *可用* 系統記憶體的最大同時請求數

硬碟數量

32 GiB 記憶體

64 GiB 記憶體

128 GiB 記憶體

256 GiB 記憶體

512 GiB 記憶體

4 個硬碟

1,074

2,149

4,297

8,595

17,190

8 個硬碟

840

1,680

3,361

6,722

13,443

16 個硬碟

585

1,170

2.341

4,681

9,362

下表提供根據節點上的本機儲存總量,為 MinIO 分配記憶體的一般指南

主機儲存總量

建議的主機記憶體

最多 1 Tebibyte (Ti)

8GiB

最多 10 Tebibyte (Ti)

16GiB

最多 100 Tebibyte (Ti)

32GiB

最多 1 Pebibyte (Pi)

64GiB

超過 1 Pebibyte (Pi)

128GiB

重要

RELEASE.2024-01-28T22-35-53Z 開始,MinIO 在分散式設定中為每個節點預先配置 2GiB 記憶體,並為單一節點設定預先配置 1GiB 記憶體。

儲存裝置

對硬碟的獨佔存取權

MinIO **要求** 對於提供物件儲存的硬碟或磁碟區具有 *獨佔* 存取權。其他程序、軟體、腳本或人員不應直接對提供給 MinIO 的硬碟或磁碟區,或 MinIO 放置在其中的物件或檔案執行 *任何* 操作。

除非 MinIO 工程部門指示,否則請勿使用腳本或工具直接修改、刪除或移動所提供硬碟上的任何資料分片、同位分片或中繼資料檔案,包括從一個硬碟或節點移動到另一個硬碟或節點。此類操作很可能會導致廣泛的損壞和資料遺失,超出 MinIO 的修復能力。

MinIO 建議為每個 MinIO 租戶佈建一個儲存類別,以滿足該租戶的效能目標。

在可能的情況下,請將儲存類別、CSI 或其他 PV 的基礎佈建器設定為將磁碟區格式化為 XFS,以確保最佳效能。

確保租戶中佈建的所有 PV 都有一致的底層儲存類型(NVMe、SSD、HDD)。

確保每個租戶中所有節點的每個 PV 都具有相同的呈現容量伺服器池。MinIO 會將每個 PV 的最大可用大小限制為池中最小的 PV。例如,如果池中有 15 個 10TB PV 和 1 個 1TB PV,則 MinIO 會將每個 PV 的容量限制為 1TB。