...

ホスティングにおけるLinuxのHugePages:MariaDB、Redis、PHP-FPMのパフォーマンス向上

Linuxのhugepagesが、ホスティングスタックにおけるMariaDB、Redis、PHP-FPMをどのように促進し、どこでパフォーマンスを低下させているのか、そして私がどのように的確に設定しているかを具体的に説明します。これにより、私は レイテンシー, TLBミスを減らし、 メモリー管理 予測可能だ。

中心点

以下の要点では、主な操作手順と効果をまとめています。.

  • THPモード 意識的に選択する:「madvise」は幅広いワークロード向け、「never」はRedisのような機密性の高いサービス向け。.
  • 静的HugePages 大規模なMariaDBバッファプールに対応できるよう計画を立て、レイテンシとTLBミスを低減する。.
  • レディス レイテンシの急増を防ぐ:THPを無効化し、フォークコストを抑制する。.
  • ピーエッチピーエフピーエム カーネルのオーバーヘッドが軽減され、バックエンドの処理速度が向上することで、間接的な恩恵を受ける。.
  • ベンチマーキング 本番稼働前にモニタリングを実施し、その効果を定量的に測定できるようにする。.

HugePagesとTHPの簡単な解説

私はこうしている。 巨大ページ, 、より大きなメモリページを有効にして、管理すべきページ数を減らすためです。通常のページサイズは4 KBですが、大きなページは通常 2 MB 大きい。これにより、TLBミスが大幅に減少し、CPUがメモリ管理に費やす時間が短縮され、RAMへのアクセスが多いサービスはより高速に反応するようになる。Transparent Huge Pages (THP) これは自動的に試みられ、アプリ側の調整なしでも機能する可能性があります。実運用レポートによると、ワークロードと設定が適切に組み合わさった場合、20~40 % ほど処理速度が向上することがよく報告されています。.

THPモードの適切な選択とテスト

私は「」というモードを明確に区別しています。„常に“「„, “madvise„ および “never„ は、ワークロードに与える影響が異なるためです。“always„ は、サービスがフォークを行う際に、予想以上に多くのRAMを占有し、コピー処理の負荷を生じさせる可能性があります。“madvise„ なら制御が可能です。アプリが明示的に指定したメモリのみが、大きなページを使用します。 「never」は、特にRedisのようなフォークが頻繁に行われるサービスにおいて、最大限の予測可能性を提供します。さらに詳しく知りたい方は、その利点と落とし穴に関する背景情報をこちらでご確認ください: THP:助けになるか、それとも問題か. 各モードを実際の負荷下でテストし、レイテンシ、CPU時間、RSSを測定した上で、事実に基づいて判断を下します。.

ホスト上での実用的な設定

サービスを切り替える前に、再現可能なホストのデフォルト設定と、安全なフォールバック策を確保しておく。.

THPを適切に設定する(ブートパラメータまたはsystemd)

  • カーネルブート時:GRUB で「transparent_hugepage=madvise」または「transparent_hugepage=never」を追加し、再起動する。.
  • sysfs 経由で常時実行 – テストや systemd ユニットでの使用に最適:
# のステータスを確認する
cat /sys/kernel/mm/transparent_hugepage/enabled
cat /sys/kernel/mm/transparent_hugepage/defrag

# madvise への切り替え(例)
echo madvise > /sys/kernel/mm/transparent_hugepage/enabled
echo never   > /sys/kernel/mm/transparent_hugepage/defrag

再起動しても設定が失われないように、これらのコマンドを小さな systemd ユニットにまとめています。.

静的なHugePagesを予約する

HugeTLB側の予約については、保守的に、かつ余裕を持って計画しています(以下のチェックリストを参照):

# サイズとカウントを確認する
grep -i huge /proc/meminfo

# 32 GB を予約する(2 MB ページ → 16384)
sysctl -w vm.nr_hugepages=16384
echo "vm.nr_hugepages=16384" > /etc/sysctl.d/90-hugepages.conf

# オプション: hugetlbfs のマウントポイント(診断に有用)
mkdir -p /dev/hugepages
echo "hugetlbfs /dev/hugepages hugetlbfs defaults,pagesize=2M 0 0" >> /etc/fstab
mount -a

サービスがHugeTLBを利用する場合、通常はMEMLOCK権限が必要となります。そのため、各systemdユニットでリミットとキャパビリティを設定しています:

[サービス]
LimitMEMLOCK=infinity
CapabilityBoundingSet=CAP_IPC_LOCK
AmbientCapabilities=CAP_IPC_LOCK

確認:プロセスではページサイズが大きいものがありますか?

各プロセスについて、実際の使用状況を検証しています:

# プロセスごとのAnonHugePagesの合計
grep -i 'AnonHugePages' /proc/$PID/smaps | awk '{s+=$2} END {print s " kB"}'

# システム全体の指標
grep -i huge /proc/meminfo

MariaDB:静的HugePagesによるメリット

MariaDBはInnoDBに支えられている――バッファプール そして、RAMの使用量を計画的に管理できる点です。本番環境のデータベースでは、THPを通常「„決して“、あるいは特定のテストを行う場合は「madvise」に設定します。理由:フォーク時や書き込み負荷が高い場合、2MBのページはコピー・オン・ライトのコストを高くし、これによりクエリの速度が低下し、MariaDBのパフォーマンスが低下します。 大規模で、主に読み取り中心のバッファプールには静的なHugePagesを使用することで、レイテンシが安定し、管理オーバーヘッドが削減されます。さらに、カーネルがバッファを不必要にスワップしないよう、vm.swappinessとI/Oスケジューラも調整しています。.

MariaDB、NUMA、およびI/Oの設定

  • 負荷に応じたバッファプール: innodb_buffer_pool_size 主レバーとして、, innodb_buffer_pool_instances 並列化について。.
  • 大サイズページを有効にする(そのバージョンでサポートされている場合): innodb_use_large_pages=ON あるいは、テストを経て初めて厳密に「FORCE」となる。.
  • I/Oパスの平滑化: innodb_flush_method=O_DIRECT, 、明確なWrite-Amp戦略、適切に管理されたチェックポイント。.
  • NUMAトラップを回避する:mysqld via numactl --interleave=all ノードの不均衡が生じそうな場合に起動する。.
  • システム制限:MEMLOCKについては前述の通り。起動に失敗しないよう、あらかじめ十分な量のHugePagesを確保しておくこと。.

実際には、バッファプールを適切な段階(例:8 → 16 → 32 GB)で段階的に増やし、ページフォールト率を観察しながら、99pレイテンシを比較しています。 読み取り中心のワークロードでは最も大きな効果が得られますが、書き込み負荷が高い場合は、CoWのコストとfsyncサイクルを特に慎重に評価します。.

Redis:レイテンシの急上昇を防ぐ

Redisは、以下の状況におけるメモリ使用状況やフォークのコストに対して非常に敏感です。 スナップ写真 およびAOFリライト。THPが有効な場合、システムはコピー時に4 KBではなく2 MBを移動させる必要があり、これは512倍の単位となるため、レイテンシの急上昇を引き起こします。そのため、私は通常、THPを「„決して“「これにより、Redisのメモリ使用量がより予測しやすくなります。」 主に読み取り操作が中心となる大規模なキーバリューセットについては、「madvise」をテストすることは可能ですが、厳格なベンチマークの下でのみ行います。さらに、vm.overcommit_memory=1 に設定し、Redisのデフラグを調整して、断片化を適切に管理するようにしています。.

フォークコストを低く抑えるための構成モジュール

  • THP:ホスト全体で「never」を設定し、フォーク負荷を平準化する。.
  • AOF/スナップショット: no-appendfsync-on-rewrite yes, aof-rewrite-incremental-fsync yes, 、交通量の少ない時間帯に設定する。.
  • デフラグ: activedefrag yes, 枕木の微調整(active-defrag-threshold-lower, サイクル制御)。.
  • オーバーコミット: vm.overcommit_memory=1, 、フォークがブロックされないようにするためです。.
  • アロケーター:断片化を抑えるために、jemalloc を使用して Redis を運用する。.

組み込みのRedisレイテンシ監視機能を使って効果を測定し、ピーク値をBGSAVEやAOFイベントと照合しています。99.9パーセンタイルのレイテンシが安定して低下すれば、その設定を本番環境に適用します。.

PHP-FPM:Webスタックにおける間接的な推進力

PHP-FPM自体は、大量のRAMを消費することはめったにありませんが、RAMが少なければ少ないほど カーネルのオーバーヘッド そして、より高速なバックエンド。MariaDBとRedisの応答が速くなれば、TTFBやリクエストごとの応答時間が短縮されます。私は、負荷曲線に合わせてFPMのワーカー数、max_children、およびプロセスマネージャー(dynamicまたはstatic)を調整しています。 このようにして、手探り状態になるリスクを冒すことなく、システム全体でHugePagesのメリットを最大限に活用しています。このテーマに関する実用的な入門ガイドをこちらで紹介しています: サーバーのHugePagesを正しく活用する.

実践:プロセスサイズ、Opcache、およびサイジング

  • pm.max_children は次のように計算します:(PHP 用 RAM)÷(ワーカー 1 人あたりの平均 RSS)、さらに 10~20 % の予備を確保します。.
  • オペコードキャッシュの安定性を維持する:十分な opcache.memory_consumption そして opcache.interned_strings_buffer, 、再コンパイルを避けるために。.
  • アロケーターの一貫性:コンポーネント間で同じC言語用アロケーターファミリー(glibc/jemalloc)を使用することで、予期せぬ断片化を回避できる。.
  • ホスト上のTHP「madvise」は、フォークのコストを膨らませることなく、共有ライブラリの処理を適度に支援します。.

設定:手順ごとの解説と概要表

私は、どのような変更を行う際も、まずクリーンな状態から始めます。 インベントリー: RAM、書き込み・読み取り速度、フォークの挙動、ピーク負荷。その後、Nリクエスト/秒以下の条件下でレイテンシを一定に保つことや、カーネル内のCPU時間を削減することなど、目標を定義します。 サービスに応じてTHPを設定し、実環境に近い条件でテストを行います。その後、結果を記録し、変更を段階的に適用していきます。以下の表は、実運用で検証済みの初期設定をまとめたものであり、これを基に微調整を行います:

サービス THPモード 静的HugePages ヒント
マリアデータベース マドヴァイズ あるいは never はい、バッファプールに合わせて 読書中心の大型プールはメリットがあるが、執筆の負担は慎重に検証する必要がある。.
レディス 決して どちらかといえば「いいえ」 フォークのコストを回避し、デフラグを常に有効にしておく。.
ピーエッチピーエフピーエム マドヴァイズ めったに必要ない メリットは、主にバックエンドの高速化を通じて間接的にもたらされます。.

ホスティング環境:選択がパフォーマンスを左右する

私が持続的に達成できるのは、その場合のみです 不変 プロバイダーがカーネルやデフォルト設定を適切に設定している場合です。これには、最新のカーネル、適切なTHPの初期設定、十分なRAMの余裕、そしてチューニングの経験を持つサポート体制などが含まれます。 ホスティングサービスの比較を行う際、私はMariaDB、Redis、PHP-FPMのチューニングに関する明確な説明があるかどうかに注目しています。HugeTLBとTHPの違いを理解したい方には、この簡潔な入門記事が参考になるでしょう: HugeTLB 対 THP の比較. テストの結果、webhoster.de はその信頼性の高い構成により、データ処理量の多いプロジェクトにおいて有力な候補であることが明らかになった。.

コンテナ、Cgroups、Kubernetes

コンテナ環境では、設定の多くがホスト全体に適用され、PodやDockerコンテナごとに変更できないため、計画の立て方を少し変えています:

  • THPはホスト側の設定です。私はこれをコンテナ内ではなく、ノード上に設定します。.
  • HugeTLB には、ホスト上の予約済みページが必要です。オーケストレーションでは、リソースを明示的に割り当て(ノードあたり 2Mi/1Gi タイプ)、そこにポッドをスケジュールしています。.
  • Cgroups:私が注意している点 メモリ.max/スワップ制限を設定し、予期せぬOOMによるプロセス強制終了によって測定データが破壊されないようにする。.
  • イメージの一貫性:断片化が不意にずれることがないように、関連するすべてのコンテナで同じアロケーターのバージョンを使用する。.

ノードレベルで同一のカーネルパラメータを使用してテストを行い、負荷の偏りやキャッシュの冷え込みを防ぐため、デプロイメントをローテーション方式で順次切り替えています。.

ベンチマーキング、モニタリング、およびキャパシティ計画

私は感覚に頼らず、測定する 硬い. 変更の前後で、同一の負荷プロファイルを使用し、レイテンシ、スループット、ユーザー空間およびカーネル空間のCPU時間、ならびにRSSを計測します。また、平均値だけでなくピーク値も確認し、外れ値を早期に検知できるようにしています。 計画立案にあたっては、成長がすぐに限界に達しないようバッファを設けています。これにより、数週間にわたってパフォーマンスを一定に保ち、余力を適切に配分しています。.

測定項目と高速試験コマンド

  • THPの状態: cat /sys/kernel/mm/transparent_hugepage/enabled, .../defrag.
  • HugeTLB: grep -i huge /proc/meminfo, cat /proc/sys/vm/nr_hugepages.
  • プロセス側: /proc/$PID/smaps への AnonHugePages 検索する。.
  • メジャー/マイナー・フォールトとTLBインジケータ: perf stat -p $PID -e cycles,task-clock,minor-faults,major-faults,dTLB-load-misses,iTLB-load-misses.
  • Redisのレイテンシ:組み込みのレイテンシ測定ツール、BGSAVE/AOFとの相関関係。.
  • MariaDB: グローバルステータスを表示 および、バッファヒット率、InnoDBのチェックポイント動作に関するパフォーマンススキーマ。.

測定キャンペーンの一貫性が重要です。データセットが同じで、テスト期間も同じ、バックグラウンド負荷も同じでなければなりません。そうでなければ、リンゴとナシを比べることになってしまいます。.

エラーパターンと迅速な対処法

THPスイッチの切り替え後に応答時間が長くなった場合は、直ちに確認します フォーク-イベントとコピー・オン・ライトの挙動。MariaDBで「スロークエリ」が頻発する場合は、書き込み量を減らし、THPの設定を保守的に調整し、I/Oパスを評価します。 Redisで散発的なレイテンシの急上昇が報告された場合は、THPを「never」に設定し、スナップショットのタイミングを確認します。 CPU負荷が急上昇した場合は、Perf指標を通じてTLBミスを間接的に監視し、静的HugePageの数を減らします。再発時に迅速に対応できるよう、すべての修正内容を記録しています。.

ロールバック戦略

  • THPの設定を以前のモードに戻し、必要な場合のみ再起動する。.
  • 静的HugePagesを段階的に削減する (vm.nr_hugepages)、急に電源を切らないでください。.
  • サービス固有のフラグを元に戻す (innodb_use_large_pages, デフラグ設定)、その後、再度測定してください。.
  • 次の反復処理を効率化できるよう、変更前後の値を記録しておいてください。.

チェックリストとサイズ計算

静的解析の計算については 巨大ページ ここでは簡単な計算式を使います:必要数=目標サイズ(バイト)÷ページサイズ(2 MB)。例えば、32 GBのInnoDBバッファプールを計画する場合、2 MBのページが約16384ページ必要になります。 わずかな変動によってボトルネックが発生しないよう、5~10 %分の予備を足します。その後、起動時にインスタンスが実際に大きなページにアクセスしているかどうかを確認します。測定結果が期待通りであれば、その設定を他のノードにも展開します。.

1 GBのHugePagesに関する注意事項

非常に大規模で安定したバッファプールでは、1 GBのページ(HugeTLB, (CPU/カーネルに依存)により、TLBへの負荷を軽減します。 私は、メモリ需要が長期的に一定であり、十分に大きく、連続した空き領域が確保されている場合にのみ、これを使用しています。設定方法は2 MBの場合と同じパターンに従いますが、断片化や起動時の挙動がより敏感になるため、より綿密な計画とテストが必要となります。.

簡単にまとめると

をセットした。 リナックス hugepagesを適切に導入しています。具体的には、Webスタックには通常「madvise」、Redisには「never」、そして読み取り中心の大規模なMariaDBプールを持つ静的ページには「static」を設定しています。これにより、TLBミスを低減し、レイテンシを一定に保ち、メモリ関連の予期せぬ問題を未然に防いでいます。 データベースとキャッシュの応答が高速化されるため、PHP-FPMも間接的な恩恵を受けます。適切なベンチマークとモニタリングにより、その効果を実証し、変更内容を確実に定着させます。最新のカーネルデフォルト設定と適切なサポートを提供するプロバイダーと組み合わせることで、負荷がかかっている状況でもスタックは信頼性の高い高速性を維持します。.

現在の記事

Redisのメモリ断片化率を可視化したサーバーラック
データベース

Redisのメモリ断片化率を正しく解釈し、最適化する

Redisのメモリ断片化率を正しく解釈し、正常な範囲と危険な範囲を見極め、的を絞ったRedisのチューニングによってRedisのメモリを効率的かつ安定的に維持する方法を学びましょう。.

データセンター内の、MariaDBおよびRedis向けにHugePages設定が最適化されたLinuxサーバー
サーバーと仮想マシン

ホスティングにおけるLinuxのHugePages:MariaDB、Redis、PHP-FPMのパフォーマンス向上

ホスティング環境において、LinuxのHugePagesがMariaDB、Redis、PHP-FPMの高速化と安定化にどのように役立つかをご紹介します。LinuxのHugePagesに焦点を当て、THPの設定、カーネルのチューニング、メモリ最適化されたセットアップに関する実践的なヒントをお届けします。.