本文へスキップ
AWS DAILY
重要度:通常新機能対応不要

Amazon FSx for Lustre の Intelligent-Tiering でメタデータ IOPS が最大 192,000 に向上(従来比 16 倍)

Amazon FSx for Lustre
公開
更新

概要

Amazon FSx for Lustre の Intelligent-Tiering ストレージクラスで、メタデータ I/O 操作数が従来の最大 12,000 IOPS から最大 192,000 IOPS へと 16 倍に拡張されました。機械学習研究や HPC などメタデータ集約型ワークロードの高速化とコスト最適化に貢献します。

変更内容

  • Intelligent-Tiering ストレージクラスのメタデータ IOPS 上限が 12,000 から 192,000 へ 16 倍に引き上げられました。
  • 新規作成する FSx for Lustre Intelligent-Tiering ファイルシステムで高いメタデータ IOPS を利用できます。
  • Intelligent-Tiering ストレージクラスが提供されているすべての AWS リージョンで利用可能です。

公式発表で確認できる事実

  • Amazon FSx for Lustre の Intelligent-Tiering ストレージクラスで、メタデータ IOPS の上限が従来の 12,000 IOPS から最大 192,000 IOPS へ拡張されました(16 倍)。
  • メタデータ IOPS はファイルやディレクトリの作成・一覧取得・読み取り・削除を毎秒何件処理できるかを決定する指標です。
  • Intelligent-Tiering ストレージクラスはホットデータとコールドデータが混在するワークロード向けに設計されており、クラウド上で最もコストが低く、完全にエラスティックな Lustre ファイルストレージとして位置づけられています。
  • 今回の向上により、メタデータ集約型の機械学習研究や HPC ワークロードでの性能スケールアップ、結果到達時間の短縮、ストレージコストの最適化が可能になります。
  • 高いメタデータ IOPS は、Intelligent-Tiering ストレージクラスが利用可能なすべての AWS リージョンで、新規作成する FSx for Lustre Intelligent-Tiering ファイルシステムに対して提供されます。
  • 詳細は Amazon FSx for Lustre User Guide を参照してください。

当サイトの考察

16 倍という大幅な上限引き上げは、小規模ファイルを大量に扱う機械学習のデータ前処理やゲノム解析など、メタデータ操作がボトルネックになりやすいワークロードに特に有効です。Intelligent-Tiering のコスト効率を維持しながら性能要件を満たせるケースが広がるため、従来は SSD ベースのストレージクラスを選択せざるを得なかったユースケースの見直しが検討できます。ただし、恩恵を受けるには既存ファイルシステムの移行ではなく新規作成が必要な点に注意が必要です。

確認できていない事項

  • 東京リージョン(ap-northeast-1)および大阪リージョン(ap-northeast-3)での提供有無は資料から確認できません。
  • 既存の Intelligent-Tiering ファイルシステムを新しい上限に移行する方法や手順は資料に記載がありません。
  • 追加料金の有無および料金体系の詳細は資料から確認できません。
  • 正確な提供開始日は資料から確認できません。
  • 東京(ap-northeast-1)と大阪(ap-northeast-3)での提供は、公式記事からは確認できていません。

この記事は、AWS 公式の発表をもとに AI が作成し、自動で公開しています。

既存環境への影響

メタデータ集約型の機械学習研究や HPC ワークロードで、ファイルやディレクトリの作成・一覧取得・読み取り・削除を毎秒より多く処理できるようになります。スケールアップ時の性能ボトルネックが緩和され、結果到達までの時間を短縮できます。Intelligent-Tiering のコスト効率はそのままに、より高い性能が必要なユースケースにも対応できます。

対応の必要性

対応不要

既存のファイルシステムへの強制的な変更はありません。高いメタデータ IOPS を活用するには新規ファイルシステムを作成する必要があります。

利用可能リージョン

東京(ap-northeast-1)
未確認
大阪(ap-northeast-3)
未確認

公式記事に東京(ap-northeast-1)と大阪(ap-northeast-3)の記載がないため、未確認としています。

AWS 公式情報

当サイトの記事は公式情報をもとに編集したものです。正確な内容は必ず AWS 公式情報をご確認ください。