Amazon FSx for Lustreは、分散学習ワークロード向けに設計された高性能並列ファイルシステムで、GBps単位のスループットとサブミリ秒レイテンシーを提供します。S3データリポジトリリンク機能により、S3バケット内のファイルを自動的にキャッシュして複数のGPUインスタンスに高速配信できるため、データ読み込み待ちを解消しGPU使用率を大幅に向上させられます。
SageMaker Training JobはFSx for LustreをNFSマウントとして参照でき、追加コーディングなしに既存の学習スクリプトをそのまま活用できます。
選択肢AのS3 Transfer Accelerationは、インターネット経由の遠距離転送を高速化するもので、同一リージョン内のSageMakerインスタンスからのS3アクセス改善には効果がありません。
選択肢CのPipe Modeは、RecordIO形式でのストリーミング読み込みに対応しますが、DICOM等の任意フォーマットのサポートが限定的で、複数ノードへの高速並列I/Oには不向きです。
選択肢DのAmazon EFSは汎用分散ファイルシステムですが、FSx for Lustreと比較してスループットが劣り（数Gbps以下）、大規模GPUクラスターの高速データ供給には不十分です。