【NetApp CVO + Amazon SageMaker】NFS/S3でボリュームに同時アクセスできるData Dualityを試してみる【機械学習】機械学習NetAppSageMaker ONTAP 9.12からの新機能であるData Duality(単一のストレージボリュームに、S3とNFSの2つのプロトコルで同時アクセスできる機能)をAmazon SageMakerと組み合わせて活用してみました 機械学習ワークロードでData Dualityの活用する際は、各プロトコルをこんな感じで使い分けると良いと思います S3: データ収集のフェーズで、多数のデバイスから学習用データを収集する際に使用 NFS: モデルのトレーニングのフェーズで、学習ノードから集めた学習用データに高速アクセス S3バケットから学習ノードにデータセットをダウンロードしてくる時間と手間を省けるので、重たいデータセ
![【NetApp CVO + Amazon SageMaker】NFS/S3でボリュームに同時アクセスできるData Dualityを試してみる【機械学習】 - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/a41a970f953bc7cba1d777e24d764d8a595fc5dc/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JUUzJTgwJTkwTmV0QXBwJTIwQ1ZPJTIwJTJCJTIwQW1hem9uJTIwU2FnZU1ha2VyJUUzJTgwJTkxTkZTJTJGUzMlRTMlODElQTclRTMlODMlOUMlRTMlODMlQUElRTMlODMlQTUlRTMlODMlQkMlRTMlODMlQTAlRTMlODElQUIlRTUlOTAlOEMlRTYlOTklODIlRTMlODIlQTIlRTMlODIlQUYlRTMlODIlQkIlRTMlODIlQjklRTMlODElQTclRTMlODElOEQlRTMlODIlOEJEYXRhJTIwRHVhbGl0eSVFMyU4MiU5MiVFOCVBOSVBNiVFMyU4MSU5NyVFMyU4MSVBNiVFMyU4MSVCRiVFMyU4MiU4QiVFMyU4MCU5MCVFNiVBOSU5RiVFMiU4MCVBNiZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9N2Q2NWFlMWQwMzhlZGExMTAxZDUyMDI0OGIxNGU0OGY%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTcxNiZ0eHQ9JTQweXNoaW1penUyMiUyMGluJTIwJUUzJTgzJThEJUUzJTgzJTgzJUUzJTgzJTg4JUUzJTgyJUEyJUUzJTgzJTgzJUUzJTgzJTk3JUU1JTkwJTg4JUU1JTkwJThDJUU0JUJDJTlBJUU3JUE0JUJFJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9MzImdHh0LWFsaWduPWxlZnQlMkN0b3Amcz0yMWQ3M2EwMzMwZDg1ZTNjOGQwZDk0YzgzNGI3YThjNQ%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D07ae70e5a4d58e6584837c87a7a31d9d)