• クラウドソリューション
  • テクノロジー
  • 技術検証

既存サーバを活用したProxmox VE + Ceph統合ストレージ基盤の構築【トゥモロー・ネット 技術ブログ】

はじめに

古いサーバを生かし、仮想マシンと共有ファイルを支えるストレージ基盤へ

情シスで使われていたサーバを活用し、社内LAB向けにProxmox VE*とCephの統合ストレージ基盤を構成しました。仮想マシン用ストレージとファイル共有を、ひとつのCeph基盤から提供する構成です。

本記事では、Cephストレージ基盤の構成と、仮想マシン用ストレージとNFS/SMBファイル共有を古いサーバーで提供可能か検証内容を解説します。

*Proxmoxは仮想マシンとコンテナを Web ベースの GUI から一元管理できる、OSS の仮想化プラットフォームです。

検証の概要と構成

今回の検証には実際に当社の情シスが使用していた、旧型のサーバを使用しました。
構築した基盤の全体像
Cephノード:6台
データ用SSD:各ノードに8台(合計48台)
CPU:各ノードともIntel Xeon Silver 4215(16論理CPU)
メモリ:約62 GiB
Cephバージョン:19.2.3 Squid

Proxmox VEは別の3台で運用し、ストレージクラスタと役割を分けています。

データの保護には、同じデータを複数のコピーとして保存する複製方式と、データを分割して復元用情報とともに保存する方式を使っています。CephFSには両方の保存領域があり、用途に合わせて使い分ける構成です。

Proxmox VEではRBD*とCephFSの両ストレージが利用可能な状態で登録されています。共有ゲートウェイでもCephFSをマウントし、仮想化基盤とは別の経路から同じストレージ基盤につなぎます。ブロック領域とファイル領域をひとつのCephクラスタから提供しています。
ファイル共有ゲートウェイは3台です。CephFS上の同じ共有ディレクトリを、NFSとSMBの両方で公開する構成にしています。NFSとSMBはそれぞれ仮想IPを接続先にし、クライアント側では必要なプロトコルを選んで利用できます。

*RBDは仮想化基盤から扱うブロックストレージ、CephFSは複数のクライアントで共有できるファイルシステムです。

構築後の状態と利用状況

クラスタ全体の容量表示は、合計約92 TiB、使用約30 TiB、利用可能約63 TiBです。データの保護に使う領域があるため、クラスタ全体の容量と、利用者が実際に保存できる容量は異なります。

実際の稼働状況を確認してみると、Cephクラスタは正常な状態で、6台のCephノードに計48台のデータ用SSDを配置されています。CephFSのメタデータ管理サービスは2系統が稼働し、予備が1系統待機しており、安定運用で来ていることが確認できます。

まとめ

今回の検証では、情シスで使われていた既存サーバ6台をCephストレージクラスタとして構築し、1つのCephクラスタから、仮想マシン用ストレージ(RBD)とファイル共有領域(CephFS)の両方を提供する構成にすることで、冗長性を備えた大容量の統合ストレージ基盤とすることが確認できました。

検証した基盤では、Proxmox VE 3台の仮想マシン用ストレージと、ゲートウェイ3台によるNFS/SMBのファイル共有を同時に支えています。

さらに、CephのストレージクラスタをProxmox VEホストと分離したことで、役割が明確で運用しやすく、仮想マシン基盤とファイルサーバを別々に用意している環境でも、Cephでストレージを1つに統合すれば運用をシンプルにできる可能性があります。古いサーバの再活用を検討している方の参考になれば幸いです。

トゥモロー・ネットでは、ストレージやインフラ基盤に関する製品・サービス情報と技術記事を公開しています。詳しくは公式サイトをご覧ください。
ご興味がある方は、ぜひお問い合わせください。

お問合せ先

関連ページ

VMwareの代替はある?仮想化基盤を比較 | 企業に最適な選び方と新しい選択肢
Hammerspace Anvilによる未使用NVMeの有効利用
GVD VMS 4.0 検証してみた|デモ環境で分かった使い方・操作感・注意点

この記事を書いた人

株式会社トゥモロー・ネット

トゥモロー・ネットは、AI基盤向けインフラの設計・構築・運用を支援しています。GPUサーバーの導入実績1,200台以上、 保守実績66,000台以上の知見をもとに、システム全体の性能や運用性を考慮した提案を行っています。
NVIDIAの最上位パートナープログラム「NVIDIA Elite Partner」に認定され、Supermicro正規一次代理店として10年以上にわたりAIインフラ分野を支援しています。
本サイトのコンテンツは、NVIDIA認定技術者および専門エンジニアを含む技術チームが執筆・監修しています。

会社概要ページ