データセンターにおけるPCIe 5.0 SSD：単なるマーケティングか、それとも真のパフォーマンス向上か？

PCIe 5.0、NVMe、およびSSDを分離する

信頼性の高い評価を行うためには、3つのレベルを区別する必要がある： PCIe ホストとデバイス間の通信バス、その上に構築された不揮発性メモリ用プロトコルであるNVMe、そしてコントローラ、NANDフラッシュ、ファームウェアを備えた具体的なドライブであるSSDです。したがって、高速なPCIe接続は、あくまで接続の可能性を示すに過ぎず、SSDの内部処理やアプリケーションのパフォーマンスを定義するものではありません。.

PCIe 5.0はレーンあたり32.0 GT/sで動作するのに対し、PCIe 4.0はレーンあたり16.0 GT/sを達成します。 これにより、レーンあたりの信号伝送レートが2倍となり、結果としてGen4と比較して理論上のリンク帯域幅も2倍になります。ただし、この記述は伝送経路に関するものであり、データベースのクエリ、仮想マシン、あるいはAIジョブの処理速度も同様に2倍になることを保証するものではありません。.

典型的な場合、 x4接続 その規模は、PCI-SIGの仕様から推測できます。PCI-SIGによると、PCIe 5.0 x32リンクは、一方向あたり128 GB/sの実効粗帯域幅を提供します。 4レーンは32レーンの8分の1にあたるため、計算上、PCIe 5.0 x4では片方向あたり約16 GB/sとなります。 これはリンクの仕様であり、SSDが実際に達成できるスループットではありません。その他のプロトコルオーバーヘッドや、コントローラ、NAND、ファームウェアなどの要因により、利用可能な性能は低下または制限されます。.

さらに、SSDコントローラ、NANDチップの数と配置、ファームウェアのアルゴリズム、そして具体的な読み取り・書き込みパターンもパフォーマンスを制限する要因となります。 キューの深さが浅い場合や、小規模で混合したアクセスがある場合、理論的にはPCIeリンクにまだ余裕があるにもかかわらず、アプリケーションのパフォーマンスが低下することがあります。逆に、並列かつ順次的なデータストリームであれば、より高速なホスト接続を有効に活用できますが、これが普遍的なパフォーマンスの法則となるわけではありません。.

～の調達については サーバーストレージ したがって、決定的な問いは単に「Gen4かGen5か？」というだけではありません。 むしろ、既存のPCIeパス、SSD自体、そして実際のI/Oワークロードが、同じボトルネックを形成しているかどうかを検証する必要があります。これらの要素がすべて一致して初めて、PCIe 5.0による追加の転送レートが、そのアプリケーションにとって実質的な意義を持つようになるのです。.

エンタープライズ向けSSDの評価基準が異なる理由

A エンタープライズ向けSSD 選択の基準は、単にシーケンシャルMB/sの数値だけではありません。 データセンターでは、性能に加え、何よりも計画可能な連続稼働、運用監視、およびサーバープラットフォームへの統合が重要となります。コンシューマー向けモデルは、個別のタスクに対しては技術的に適している場合もありますが、本番環境における可用性、メンテナンス、保護メカニズム、および適切なファームウェアのパスの要件を自動的に満たすわけではありません。.

フォームファクタには明らかな違いがあります。エンタープライズ向けドライブは、例えばU.2、E1.S、E3.Sなどの規格で提供されており、ホットスワップベイ、高密度なサーバーレイアウト、および規定の冷却環境での導入が想定されています。 例えば、Solidigm D7 PS1010シリーズは、U.2、E1.S、E3.Sの各フォームファクタで提供されています。したがって、フォームファクタは、バックプレーン、気流、容量密度、および将来の交換可能性を決定する要因の一つとなります。.

仝 エンデュランスクラス 書き込みプロファイルに適合している必要があります。高い転送速度は、適切な書き込み耐久性に代わるものではありません。ロギング、ストリーミング、データベースへの書き込みは、主に読み取りを行うアナリティクス・ワークロードとは異なる負荷をもたらします。 Solidigmは、D7-PS1010を標準耐久性モデル、D7-PS1030を中耐久性モデルとして位置付けています。したがって、容量、性能、許容書き込み負荷は、個別に評価すべき選定基準となります。.

また、以下のことも重要である。 停電保護 およびテレメトリ。停電時の保護機能により、すでに開始された書き込み処理を制御して適切に処理することが可能になります。また、テレメトリデータは、状態、温度、摩耗の監視に役立ちます。 環境によっては、暗号化機能、安全な消去手順、および追跡可能なファームウェアサポートも調達要件に含まれます。ただし、これらの具体的な利用可否については、常にモデルおよび構成ごとに確認する必要があります。.

もう1つのエンタープライズ向け機能として、デュアルポート動作が挙げられます。サムスンのPM1743は、この機能を備えたPCIe 5.0エンタープライズSSDとして位置づけられており、特定の高可用性アーキテクチャにおいて重要となる可能性があります。 とはいえ、すべてのGen5 SSDがデュアルポート対応であるとか、この機能がすべてのサーバーに必須であるということにはなりません。むしろこの例は、データシートとプラットフォーム要件を併せて確認する必要がある理由を示しているのです。.

製品名だけでは、技術的な検証の代わりにはなりません。Micron 9550シリーズは、高い性能値や規定のテストプロファイルなどを記載していますが、そこからあらゆるラックへの汎用的な適合性を導き出すことはできません。 適切な選択を行うには、具体的なドライブの特性と、稼働継続目標、サービスコンセプト、フォームファクター、セキュリティ要件、および実際に導入されているサーバーアーキテクチャを総合的に考慮する必要があります。.

プラットフォームが許容リンクレートを決定する

PCIe 5.0 SSDが理論上のリンク速度を発揮できるのは、パス全体がGen5に対応している場合に限られます。これには、CPUプラットフォームおよびルートポート、マザーボード、ライザーまたはケーブル、バックプレーン、必要に応じてPCIeスイッチ、ドライブベイ、および関連コンポーネントのファームウェアが含まれます。 Gen5対応のコンポーネントが1つあるだけでは不十分です。なぜなら、接続は関連するコンポーネント間で、共通してサポートされている速度と帯域幅に基づいて動作するからです。.

PCIe 5.0は、以前の世代のPCIeと下位互換性があります。したがって、Gen5対応のドライブをGen4のみ対応のパスに接続した場合、原則として動作はしますが、その構成でサポートされているリンクレートでのみ動作します。 その場合、SSDはGen5接続を利用できませんが、フォームファクタ、ファームウェア、およびサーバーの認証要件が一致していれば、後でプラットフォームを変更する際にも引き続き使用できる可能性があります。.

特に注意を要するものは、 PCIeトポロジー. 複数のドライブが、スイッチまたは共通のアップリンク接続を介してプロセッサに接続されている場合があります。その場合、SSDの単一リンクが必ずしもボトルネックになるとは限りません。並列負荷がかかると、共通のアップリンクの方が先に容量限界に達する可能性があります。 追加のアクセラレータ、ネットワークカード、その他の拡張カードが同じレーン予算から供給される場合にも、同様のことが言えます。.

利用可能な レーン・バジェット したがって、これは単なるデータシートの記載事項ではなく、設計上の重要な要素となります。4台のx4 SSDは、デバイスリンク上で合計16レーンを必要としますが、それらの合計帯域幅は、これらのリンクがルートポートやスイッチのアップリンクにどのように接続されているかによって異なります。 高い総スループットを実現するには、単一のデバイスを交換するよりも、複数のドライブを並列に接続するアーキテクチャの方が有効である場合があります。.

購入前には、サーバーのマニュアルや互換性リストを、具体的な構成と照らし合わせて確認する必要があります。 重要なのは、サポートされている世代やスロットあたりの幅、フル搭載時の制限、バックプレーンおよびライザーのバリエーション、そして利用可能なファームウェアのバージョンです。この確認を行って初めて、理論上高速なエンタープライズSSDと、実稼働中のサーバーにおいて実際にGen5接続を実現できる構成とを区別することができるのです。.

メーカー公表値を正しく読み取り、比較する

データシートの数値は、明確に定義された測定条件に基づくものであり、必ずしもサーバーワークロードにおける性能を反映するものではありません。 Micron 9550について、メーカーはシーケンシャル読み取りで最大14,000 MB/s、書き込みで10,000 MB/s、および4 KiB読み取りIOPSで最大330万を公表しています。 これらの数値はそれぞれ異なる側面を表しています。MB/sは大規模かつ連続的な転送量を評価する指標であり、IOPSは単位時間あたりの小規模な入出力の回数を表します。.

重要なのは測定パラメータです。前述のシーケンシャル値は、キュー深度32での128 KiB転送に基づいており、ランダムな4 KiB値は、キュー深度512および定義された定常状態に基づいています。 そのため、同時クエリ数が少ないデータベースでは、高速なSSDを使用しても、IOPSが著しく低くなる可能性があります。また、読み取り／書き込みの比率、容量バリエーション、使用率によっても状況は異なります。.

PCI-SIGは、帯域幅の数値をリンクの「実効粗帯域幅」として定義しています。SSDの実際のスループットを算出するには、プロトコルによるオーバーヘッドや実装上の制限も考慮する必要があります。 したがって、リンク世代間の比較は利用可能な転送余力を示すものですが、個々のドライブのデータシートや、想定されるワークロードを用いた測定に代わるものではありません。.

信頼性の高い製品比較を行うためには、メーカーは転送サイズ、キューの深さ、アクセスパターン、試験方法、および動作状態を明示すべきである。その SNIA エンタープライズ PTS このため、エンタープライズ向けSSDの性能測定結果の理解を容易にする手順を定義しています。これは独自の負荷分析に代わるものではありませんが、異なるテストプロファイルにおけるピーク値を、誤って直接比較可能なものとして扱ってしまうことを防ぐのに役立ちます。.

Gen5の恩恵を実際に受けられるワークロードとは

AIデータパイプラインやHPCにおいて、大規模なローカルデータセットが計算処理を遅延させる場合、Gen5の導入が有効となる可能性があります。GPUDirect Storageにより、CPUのメモリをバウンスバッファとして介在させることなく、ストレージとGPUメモリ間の直接DMA転送が可能になります。 NVIDIAは、計算パイプラインを完全にGPUに移行することを、適したユースケースとして挙げています。つまり、ストレージとGPUの間で移動されるデータへの最初のアクセスと最後のアクセスは、GPUが担当します。これはメリットの一例を示すものであり、普遍的な厳格な機能要件ではありません。 GDSが有効かどうかは、実際のデータパス、使用されるAPI、およびストレージのボトルネック状況によって異なります。.

OLTPでは、通常、以下のものが含まれます テールレイテンシ また、負荷下での書き込み挙動は、シーケンシャルなピークレートよりも顕著に現れます。キャッシュヒット率が高いと、多くの読み取りアクセスはSSDに到達することさえありません。また、ドライブを交換しても、CPUに制約されるクエリは依然としてCPUに制約されたままとなります。 したがって、スループットだけではなく、P95およびP99レイテンシ、コミットレイテンシ、I/O待機時間、およびキューの深さを測定すべきである。.

多くの仮想マシン（VM）が同時にランダムI/Oを発生させ、ストレージのレイテンシが統合を制限している場合、仮想化環境は高速なSSDの恩恵を受けることができます。この仮定は、 計画ヒューリスティック 一般的なGen5の結果としてではなく、個別のケースとして扱うべきである。CPUの待機時間、RAMへの負荷、共有PCIeアップリンク、および分散型ストレージシステムは、単一のドライブよりも、同じワークロードに対してより大きな制約となる可能性がある。.

アナリティクス、ETL、バックアップ、アーカイブにおいても、購入の決定は測定されたボトルネックに基づいて行われます。 大規模な並列ローカル転送では、より高いリンク帯域幅を活用できますが、ネットワーク、圧縮、またはターゲットシステムがバックアップタスクにおけるその効果を制限する可能性があります。したがって、シーケンシャルSSDのピーク値から直接アプリケーションのパフォーマンスを推測するのではなく、ジョブの実行時間全体とエンドツーエンドのスループットを比較してください。.

書き込み負荷の高いパイプラインには、さらに適切な耐久性クラスも必要となります。Solidigmは、D7-PS1010を標準耐久性モデル、D7-PS1030を中程度耐久性モデルとして位置付けています。 これによって、製品選びの普遍的なルールが導き出されるわけではありませんが、計画立案における指針となります。すなわち、パフォーマンス、容量、許容書き込み負荷はそれぞれ独立した基準であり、実際の書き込みプロファイルに合致していなければなりません。.

サーバーストレージの調達前の評価計画

調達作業は、合成のピークベンチマークから始めるのではなく、本番環境に近い運用からの初期データから始めましょう。そのために、データベーストランザクション、VMの起動ピーク、ETLの実行など、代表的な負荷シナリオをいくつか定義します。コールドスタートを 定常状態; キャッシュが満杯の状態や、長時間にわたる書き込み負荷は、根本的に異なる結果をもたらす可能性があります。同じ方法論の原則については、以下の記事で解説されています WordPressのアップデート後のパフォーマンスを正しく測定する方法 キャッシュに依存するホスティング負荷を例に挙げて。.

各負荷ケースごとのP95/P99レイテンシ、コミットレイテンシ、I/O待機時間、キュー使用率、キャッシュヒット率の値をまとめて表示します。 SSDの使用率が低いにもかかわらずキューが長くなっている場合は、上位のボトルネックを示唆している可能性があります。一方、キャッシュヒット率が高い場合は、より高速なSSDの効果がほとんど現れない理由を説明しています。また、ストレージを安易に原因と決めつけないよう、CPU、RAM、ネットワークのメトリクスも併せて検討してください。.

パフォーマンス評価を行う前には、システムがどのデバイスを認識しているかを確認してください。nvme-cli がインストールされた Linux サーバーでは、 nvme list 現状把握：プロジェクトのドキュメントによると、このコマンドは sysfs ツリー内を検索して NVMe デバイスを検出し、それらのデバイスノードおよび関連情報を出力します。したがって、パフォーマンス値を比較する前に、まず検出されたデバイスの一覧を記述してください。.

nvme list

PCIeの診断を行う際の出発点として、以前のRed HatによるOpenStack Platform 10のガイドから以下の例を挙げます： LnkCap そこでは、最大リンク速度と LnkSta 現在のリンク状態を評価します。これは最新のGen5プラットフォームの有効化ではありません。例示されているアドレスを、お使いのデバイスのPCIアドレスに置き換えてください。また、構文、完全な出力内容、および意味については、ローカルにインストールされているpciutilsのドキュメントおよびサーバーマニュアルと照らし合わせて確認してください。.

lspci -s 81:00.0 -vv | grep LnkCap
lspci -s 81:00.0 -vv | grep LnkSta

健康データに関しては、引用されたnvme-cli-Masterのドキュメントでは次のように説明されています smart-log の旧エイリアスとして log smart; このエイリアスは古いスクリプト用であり、新しいスクリプトでは新しい形式を使用する必要があります。ただし、「Master」は開発段階を表すものであり、安定版のディストリビューションのコマンド範囲を自動的に示すものではありません。 したがって、まずインストール済みのパッケージのバージョンと、そのヘルプまたはマニュアルページを確認してください。以下では、そこに記載されているコマンド形式のみを使用し、例示されているデバイスパスはご自身のシステムに合わせて置き換えてください。ここからは、一律のバージョン制限は導き出されません。.

# Nur die lokal dokumentierte Befehlsform verwenden:
nvme log smart /dev/nvme0

# Alternative, wenn lokal dokumentiert:
nvme smart-log /dev/nvme0

一般的な破壊的ベンチマークは、本番環境のシステムには適していません。データを上書きしたり、キャッシュに影響を与えたり、あるいは通常とは異なるキュー深度によって、実態を反映しない結果を生み出す可能性があるからです。 その代わりに、計画されたハードウェア交換の前後で、同じアプリケーションの負荷シナリオを比較してください。後で差異を追跡できるように、ファームウェアのバージョン、容量、充填率、温度、トポロジーを記録しておいてください。.

冷却、耐久性、および持続出力の計画

データシートに記載されているピーク値は、定義されたテストプロファイルに基づくものであり、必ずしも負荷がかかったサーバーの連続稼働状況を反映しているわけではありません。負荷が高まるにつれて、書き込み操作が混在する場合や、 ガベージコレクション SSDはデータを再配置する必要があります。そのため、NANDの管理や具体的な書き込みパターンによって、スループット、とりわけレイテンシが、短時間の空のテスト実行時とは異なる結果となる可能性があります。運用プロファイルと定常状態が考慮されて初めて、数値の比較が可能になります。.

温度も性能計画の一部です。 D7-PS1010ファミリーには、U.2、E1.S、E3.Sが含まれます。Solidigm社は、E1.Sについて、空冷モデルと、片面コールドプレートを備えた直接液体冷却用モデルを区別しています。したがって、E1.Sという表記だけでは、必ずしも液体冷却を意味するわけではありません。 実際に注文したモデルと高さ、およびサーバー、スロット、必要に応じてコールドプレートとの互換性を確認してください。空冷モデルの場合、プラットフォーム検証には、承認済みの消費電力、気流、スロット間隔、および吸気温度を含める必要があります。.

仝 エンデュランスクラス インターフェース世代とは別に選択する必要があります。 継続的なログの取り込みや書き込みキャッシュの場合、読み取り速度が同等であっても、標準耐久性（Standard Endurance）向けに設計されたモデルよりも、中耐久性（Mid-Endurance）のモデルの方が適している場合があります。容量はコストや設置スペースに影響を与えるだけでなく、モデルによっては耐久性やパフォーマンスプロファイルにも変化をもたらす可能性があります。.

Gen5でよく見られる不具合を体系的に絞り込む

トラブルシューティングは、SSDの交換から始めるのではなく、交渉済みのリンクから始めてください。速度の低下は、現時点では診断結果に過ぎず、まだ明確な原因とは言えません。測定計画で説明されている情報を比較してください。 LnkSta そして LnkCap 現地のツールに関するドキュメントに従ってください。引用された以前のOpenStackマニュアルにはこの基本的な確認手順が記載されていますが、最新のサーバードキュメントに代わるものではありません。その後、スロットの割り当て、ライザー、バックプレーン、スイッチパス、およびファームウェアのバージョンを、プラットフォームの仕様と照らし合わせて確認してください。.

リンクが正しければ、その後に以下が続きます キューの挙動 アプリケーションによるものです。キューの深さが浅い状態でIOPSが低いからといって、SSDに不具合があるとは限りません。同様に、共有アップリンクが満杯になると、複数のドライブのパフォーマンスが制限されることもあります。 したがって、I/O待機時間、キュー使用率、読み取り/書き込みの比率、レイテンシのパーセンタイルを、CPU、メモリ、ネットワークのメトリクスと併せて確認してください。相関関係を分析して初めて、ストレージがクリティカルパス上にあるかどうかが判明します。.

GPUに近いデータパスにおいては、理論上の直接的なPCIeパスだけでは不十分です。GPUDirect Storageを利用するには、適切なハードウェアおよびソフトウェア構成が必要です。トポロジーによっては、ACSやIOMMUがCPUのルートポートを経由してデータを転送する場合があります。 これらの機能への変更は、分離、セキュリティ、および仮想化に影響を及ぼします。したがって、これらの変更は、アーキテクチャ検証と文書化されたリスク評価を経て行わなければならず、単なるパフォーマンス向上のための安易な手段として行ってはなりません。.

負荷がかかった状態でパフォーマンスが不安定な場合は、次に温度、ヘルスデータ、およびアプリケーションの負荷を確認してください。インストールされているパッケージのバージョンとそのマニュアルページに基づいて、SMARTコマンドを選択してください。引用されたマスタードキュメントでは、次のように推奨されています。 nvme log smart そして、次のように導く nvme smart-log これは旧式の別名であり、すべての安定版ディストリビューションの範囲を網羅しているわけではありません。コールドスタートとステディステートを別々に比較し、測定条件を明確に記録しておくことが重要です。単一の異常値から不具合があると結論づけるのは避けてください。.

Gen5をいつ購入すべきか、Gen4をいつ使い続けるべきか

測定データにより、ストレージまたはホストリンクのボトルネックが確認され、プラットフォーム全体が実際にGen5に対応している場合、PCIe 5.0 SSDの導入は正当化されます。 関連する兆候としては、代表的な負荷条件下で、キュー使用率の高止まり、スループットの不足、あるいは問題となるレイテンシが繰り返し発生することが挙げられます。PCIe 5.0はPCIe 4.0と比較して、レーンあたりのサポートビットレートを2倍にしますが、それだけでアプリケーションの処理速度が自動的に向上するわけではありません。.

既存のドライブがフル稼働しておらず、サーバープラットフォームがGen4のみに対応している場合、あるいはCPU、メモリ、ネットワークがサービスのボトルネックとなっている場合は、Gen4を引き続き運用することが適切です。 並列処理度が低い場合やキャッシュヒット率が高い場合でも、アプリケーションにおけるパフォーマンスの差は小さいままとなる可能性があります。その場合、節約された予算を、必要に応じて、容量の増強、冗長性の確保、メモリの増設、あるいは特定されたボトルネックの解消に、より効果的に活用することができます。.

Gen5ドライブを1台だけ使うことが、必ずしもGen4デバイスを複数台使うことより優れているわけではありません。高い総転送速度を実現するには、並列パス数が重要であり、 レーン・バジェット およびスイッチやルートポートからのアップリンク。 GPUに近いローカルストレージパスについては、NVIDIAは、x16 PCIeリンクを最大限に活用するには、複数のx4 NVMeデバイスと並列転送が必要になる場合があると説明しています。これはGDSトポロジーに関する記述であり、サーバーの一般的な台数に関するルールではありません。.

一方、NVMe over Fabrics やディスアグレゲート・ストレージは、ホスト間で容量を柔軟に共有したい場合に有効な選択肢となります。この場合、NIC、ネットワークスイッチ、プロトコルパス、および運用モデルも、達成可能なパフォーマンスを左右する要因となります。 ローカルNVMe SSDはホストに近いデータパスを優先しますが、集中型システムは共有利用や独立したスケーリングを可能にします。どちらのアプローチも、レイテンシ、可用性、運用に関する要件と照らし合わせて検討する必要があります。.

導入に先立ち、ワークロードと測定ウィンドウを確定し、リンクレートとトポロジーを確認するとともに、容量、耐久性、冷却、ファームウェアのサポート、および保護機能について、確実に照合しておく必要があります。さらに、インフラストラクチャの決定にあたっては、電源、ラック環境、およびスケーリングの選択肢も考慮に入れる必要があります。 その具体的な基準については、本記事で解説しています。 適切なデータセンターを選定するための基準. したがって、購入の決定は、単一のピーク値ではなく、実証されたボトルネックに基づいて行われる。.