Amazon FSx Intelligent-Tiering: A new, fully elastic file storage class

セッション概要

• タイトル：Amazon FSx Intelligent-Tiering: A new, fully elastic file storage classBackup
• 日付：2024年12月2日(月)
• Venue： Mandalay Bay | Level 3 South | Jasmine F
• スピーカー：
  • Alex Bleakley（Product Manager、AWS）
  • Mark Roper（Principal Engineer、Amazon）
• 概要：このセッションでは、新しいAmazon FSx Intelligent-Tiering ストレージクラスが、従来のNAS機能とインテリジェントに階層化された完全にスケーラブルなストレージを組み合わせることで、コストを最大85%削減する方法をご紹介します。アプリケーションを変更することなく、ストレージ計画の手間を軽減し、インテリジェントなデータ階層化を活用し、NASワークロードをクラウドに移行する方法をご紹介します。アプリケーションに依存する豊富な機能を維持しながら、ストレージコストを最適化するメリットと事例をご紹介します。

はじめに

もともとStorageに関心が多く、実際に扱うことはできませんでしたが、間接的にFSx Storageについてどのようなさまざまな機能があるのか気になり、セッションに参加しました。セッションのタイトル通り、AWSがFSxに対してIntelligent-Tiering機能をどのような目的で顧客のニーズを満たすために機能をリリースしたのか、さらにFSxについて詳しく知ることができる機会になると思い、セッションに参加しました。

FSxの特徴について

今日、EFSを含むさまざまなAWSストレージを使用していますが、今回のセッションでFSxについて詳しく知る時間があり、これを配信したいと思います。 

FSxとは何ですか？ FSxはクラウド環境で完全に管理されたネットワークファイルストレージを提供し、オンプレミスのNASファイルシステムと同じ機能を提供します。これにより、アプリケーションの再構成やWorkFlowの再設計を必要とせずに、データをAWSに移行できます。下の図からさまざまなケースを確認できます。

FSxはまた、「Amazon EFx Intelligent-Tiering storage class」を通じて以下のように3つの特徴を示しています。

1. 完全に弾力性があるため、保存するデータの量に応じて、ファイルシステムが自動的に拡張および縮小されます。
2. アクセスパターンに応じてデータを階層化して自動的にコストを最適化するため、データを長期的に費用対効果に保つことができ、必要に応じてそのデータにアクセスできます。できます。
3. FSx SSDよりも最大85％低コスト、HDDベースのNAS展開よりも20％低コストです。

FSx for Open ZFSとは

先ほど、FSxについて簡単に見てみました。

FSX for OpenZFSの主な目的は、OpenZFSベースのファイルシステムからの移行をサポートすることでした。 

しかし、実際には、顧客はさまざまなオープンソースNASファイルシステムと商用NASソリューションに保存されているデータセットのターゲットプラットフォームとしてもこのサービスを選択しています。

1. OpenZFSはさまざまなNAS機能を提供しているため、オンプレミスで他のソリューションを使用していたお客様は、以前に行ったことをすべてFSX for OpenZFSでも実行できます。 
2. FSX for OpenZFSのSSDベースのファイルシステムとOpenZFSは独自に高性能のために設計されているため、高性能が必要な一部の顧客のニーズを満たすことができます。
3. FSx for OpenZFSにはライセンス料がなく、商用ライセンスを必要とするソリューションと比較して30％以上の改善された価格対パフォーマンスを提供します。

私は上記の部分から、顧客はなぜFSX for OpenZFSをさまざまなユースケースや業界で積極的に活用できるのかを知りました。

講演者は、別の例として、半導体電子設計オートメーション（EDA）などのパフォーマンス集約的なワークロードにFSX for OpenZFSを使用すると、サブミリ秒の遅延時間、高スループット、および高レベルのIO操作でシミュレーションを迅速に完了できます。できるようにと説明します。

これにより、NAS機能が必要でありながら高い性能を要求するお客様に適していることが再びわかりました。

FSxの直面する問題

上記のFSx部分は、機能の紹介と利点についてのみ説明していました。ただし、提供する機能が多い場合は、解決すべき問題も明確に発生します。下の写真でその部分を説明します。

1. データセットの成長は予測不可能であるため、容量測定は困難です。
2. NASデータセットは最近、AIの動向により急速に成長しています。 
3. ペタバイト規模のデータセットをHDDまたはハイブリッドSSD-HDD展開としてオンプレミスに保存する場合は、費用がかかります。

講演者は、上記の3つの課題を念頭に置いて、顧客にすでに提供していたことを再び見て、大規模な成長データセットを解決するためにさらに提供しなければならない機能を考慮したとします。これにより、「FSX for OpenZFS – Intelligent Tiering」をリリースしました。

FSX for OpenZFS – Intelligent Tieringをリリース

この新しいストレージクラスにより、FSx for OpenZFSはネットワーク接続ストレージの機能を完全に柔軟でインテリジェントに階層化された低コストストレージと組み合わせることができます。

Amazon S3と同様に、新しいストレージクラスはデータの追加と削除に応じて自動的に拡張および縮小され、ストレージ容量を管理する必要がなく、未使用のストレージに支払う必要がなくなります。

さらに、S3のIntelligent Tieringストレージクラスと同様に、この新しいFSxストレージクラスはデータをストレージレイヤ間で自動的に移動し、コストを最適化し、非アクティブデータの保存をより長く維持しながらコストを削減します。

S3と同様に、Intelligent Tieringはデータが30日または90日間アクセスされないと自動的にアクセスが頻繁ではないアーカイブ階層に移動し、すべてのデータは階層に関係なくミリ秒単位の遅延時間で常に即座に検索可能です。

各階層のストレージは完全に弾力性があるため、ファイルシステムのサイズを選択したりストレージ使用率を調整したりする必要はなく、実際に保存するデータ量に対してのみ支払います。

また、最近アクセスされたデータをすばやく読み取るために、オプションでSSD読み取りキャッシュをプロビジョニングできます。

これは、遅延時間が敏感であるか、IOPS集約的なワークロードに役立ちます。

簡単に説明すると、データセットの一部がアクティブに使用され、残りのデータが通常コールド状態の場合、アクティブデータはキャッシュに格納されるため、すべての書き込み操作とほとんどの読み取り操作はSSD遅延時間として処理されますが、ほとんどのデータはIntelligent Tieringの最も安価な階層に保存され、全体的に低コストを維持できます。これにより、高性能とIntelligent Tieringの低コストを同時に享受できます。

これにより、FSxと特徴と利点、直面する問題に対処するためにAWSで多くの悩みを抱え、FSX for OpenZFSの新しいIntelligent Tieringストレージクラスをリリースするにつれて、お客様のニーズを改善するために多くの努力をしたことがわかりました。

まとめ

FSX for OpenZFSのIntelligent Tieringストレージクラスは、高いパフォーマンスとコスト効率を同時に提供し、大規模なNASデータセットをクラウドに移行したいお客様にとって理想的なソリューションであると説明しています.

今回のセッションを通じて、コスト負担を減らし、長期間データを保持できるなど簡単に見えますが、AWSではこのような問題を解決するためにコストやパフォーマンス的にも多くの悩みをしていた部分がわかりました。

やや不慣れなFSx for OpenZFSについて覗く時間はありませんでしたが、今回のセッションで少しでも知ることができた良い機会だったようです。

記事 │MEGAZONECLOUD　Managed & Support Center (MSC)　クㇰッチス マネージャー