はてなブックマーク

機械学習に使うデータをS3にまとめて保存しておき、インスタンスのストレージを使わない様にしたかったので、S3をマウントして使う事にしました。 安定性を考えてs3fsを使っていますが、goofysの方が早いらしいです。 条件 Ubuntu 16.04 s3fs-fuseを利用（goofysは安定性が微妙らしいため） IAM Role を利用（Key情報をEC2インスタンス内に保持する必要がないため） ※Roleを使用すればEC2 インスタンス起動時に IAM Role 選択するのみ 手順 １．S3 Bucket の準備 ２．IAMロールの準備 ３．s3fs-fuse のインストールと設定 ４．マウントの自動化 ※ １と２はAWSコンソール画面での操作 ※ ３と４はインスタンスにSSH接続してから操作 １．S3 bucketの準備 バケット名：s3-bucket1-gpu リージョン：米国東部