解説

SageMaker Pipe modeは、S3のデータをトレーニングコンテナに名前付きパイプ（FIFO）としてストリーミング配信する入力モードです。File modeのように事前に全データをローカルにコピーする工程を省き、トレーニング開始と同時にデータが逐次供給されます。 これにより： ①ジョブ起動直後から学習を開始でき25分の事前コピー待ちが不要になる ②インスタンスのローカルストレージ容量に依存しない大規模データセットへの対応が可能 ③反復実験のターンアラウンドを大幅に短縮できる 選択肢AのS3 Transfer Accelerationは転送速度を向上させるがFile modeのコピー処理自体は残るため事前コピー時間の根本排除にはならない。 選択肢DのAmazon FSx for Lustreは高スループットだがS3リポジトリ連携では初回アクセス時のデータ取り込みが発生しPipe modeのような真のストリーミングとは異なる。 選択肢BのAmazon EFSは複数ジョブ間でのデータ共有に有効だが初回セットアップにS3からのデータ移行が必要で事前コピー排除の要件を満たさない。