Lustreを使用したファイル・ストレージの概要

Oracle Cloud Infrastructure(OCI)File Storage with Lustreは、AI/MLのトレーニングと推論、およびハイパフォーマンス・コンピューティングのニーズを満たすように設計されたフルマネージド・ストレージ・サービスです。

File Storage with Lustreは、オープンソースのLustreの導入、スケーリング、メンテナンスのタスクを自動化し、Lustreインフラストラクチャ管理ではなくアプリケーションに集中できるようにします。OCIは、メタデータ・サーバー、管理サーバー、ストレージ・サーバーなど、すべてのLustreサーバー・コンポーネントをデプロイおよび保守します。

オープン・ソースLustreの詳細は、Lustreの概要を参照してください。

機能

Lustreを使用したファイル・ストレージの主な機能は次のとおりです。

パラレル分散アーキテクチャ
File Storage with Lustreは、並列分散アーキテクチャ上に構築されており、大量のデータ・ロードを効率的に処理できます。ファイル・システムは、高速なデータ処理と高スループットを実現し、高速な集計速度を実現できます。
完全マネージド・サービス
導入とスケーリングの自動化により、ユーザーの管理が簡素化され、Lustreインフラストラクチャ・コンポーネントの設定とメンテナンスに従来関係していた複雑さが解消されます。
AIとMLに対応した本番環境
File Storage with Lustreは、大量のデータを処理できるため、ビッグ・データ分析と高度なAIモデルの活用を検討している組織にとって理想的な選択肢となります。

概念

パフォーマンス

Lustreを使用したFile Storageには、4つのパフォーマンス層があります。

  1. プロビジョニングされたTB当たり125 MBps (1Gbps)
  2. プロビジョニングされたTB当たり250 MBps (2Gbps)
  3. プロビジョニングされたTB当たり500 MBps (4Gbps)
  4. プロビジョニングされたTB当たり1000 MBps (8Gbps)

管理者は、クライアント側のパフォーマンスの最適化を担当します。Lustre lfsユーティリティは、ファイル・ストライプ化やプログレッシブ・ファイル・レイアウト(PFL)などのパフォーマンス最適化機能に使用できます。

Lustreクライアント

管理者は、ファイル・システムにアクセスする必要があるGPUホストまたは他のコンピュート・ホストにLustreクライアントをデプロイします。

Lustreを使用したファイル・ストレージでは、Lustreバージョン2.15.5が使用され、次のOSに2.15.5クライアントを使用できます。

  • Ubuntu 22.04 (5.15.xカーネルを使用)
  • 4.8 Red Hat Compatible Kernel (RHCK)を使用したOracle Linux 8
  • 5.14 Red Hat Compatible Kernel (RHCK)を使用したOracle Linux 9

詳細は、Lustre File Systemのマウントおよびアクセスを参照してください。Lustreクライアントのサポートが必要な場合は、サポートに連絡してください

可用性

Oracleは、そのOCIサービスをリージョンおよび可用性ドメインでホストします。リージョンとは限定された地理的領域で、可用性ドメインとはそのリージョン内の1つ以上のデータ・センターです。OCI File Storage with Lustreは、次のリージョンでホストされています。

リージョン名 リージョン識別子 リージョン・キー
オーストラリア南東部(メルボルン) ap-melbourne-1 MEL
日本中央部(大阪) ap-osaka-1 KIX
ドイツ中央部(フランクフルト) eu-frankfurt-1 FRA
英国南部(ロンドン) uk-london-1 LHR
米国東部(アッシュバーン) us-ashburn-1 IAD
米国西部(フェニックス) us-phoenix-1 PHX
米国西部(サンノゼ) us-sanjose-1 SJC
重要

一部のリージョンでは、Lustreを使用したファイル・ストレージが提供されません。

使用可能なOCIリージョンの完全なリストと、関連する場所、リージョン識別子、リージョン・キーおよび可用性ドメインは、リージョンおよび可用性ドメインについてを参照してください。

認証と認可

Oracle Cloud Infrastructureの各サービスは、すべてのインタフェース(コンソール、SDKまたはCLI、およびREST API)で、OCIリソースを管理するための認証および認可のためにIAMと統合されます。

組織の管理者は、グループ、コンパートメントおよびポリシーを設定して、どのユーザーがどのサービスおよびリソースにアクセスできるかと、そのアクセス権のタイプを制御する必要があります。たとえば、ポリシーは、ユーザー、グループおよびコンパートメントを作成できるユーザー、または仮想デプロイメントを作成および管理できるユーザーを制御します。

Oracle Cloud Infrastructureへのアクセス方法

File Storageには、コンソール(ブラウザベースのインタフェース)、Oracle Cloud Infrastructure CLIまたはREST APIを使用して、Lustreリソースを使用してアクセスできます。コンソールにアクセスするには、サポートされているブラウザを使用する必要があります。

このガイドでは、3つすべての方法の手順について説明します。