タグ

S3に関するcms-kekatoのブックマーク (4)

  • S3バケット内の全オブジェクトを他のバケットにコピーする | iret.media

    cloudpack の ヤマグチです。 表題のスクリプトを作ってみました。 y13i/bucket2bucket bucket2bucket.rb 概要 S3バケット間でオブジェクトをまとめてコピーする。 必要なもの 最近のRuby aws-sdk 使い方 Usage: bucket2bucket.rb [options] -s, --src-bucket BUCKET_NAME # コピー元バケットの名前 -S, --src-prefix PATH # コピー元オブジェクトの接頭辞。"foo/"と指定したらfooフォルダ以下のオブジェクトしかコピーされない。デフォルトは全オブジェクト -r, --src-region REGION # コピー元のリージョン。デフォルトは東京 -d, --dest-bucket BUCKET_NAME # コピー先バケットの名前 -D, --dest-pr

    S3バケット内の全オブジェクトを他のバケットにコピーする | iret.media
  • はじめてのEMR/fluentdでS3にアップロードしたログをElastic MapReduceで検索・集計する | DevelopersIO

    今回解決したい課題 こんにちは植木和樹です。日の課題はタイトルの通り「fluentdでS3のバケットにアップロードしたログを検索・集計する」です。EC2でサーバを構築した場合、インスタンスがTerminateした後もログが参照できるようfluentdを使ってS3にファイルをアップロードしておくのがAWSのベストプラクティスです。 「Amazon Recommends Fluentd as “Best Practice for Data Collection” over Flume and Scribe」 しかしS3にアップロードしたログファイルはツールを用いなければアクセスすることができず、このままでは容易に検索できません。EC2からS3をs3fsでマウントしてgrepという方法はありますが、遅すぎて実用的とはいえません。s3cmdでいったんローカルにファイルをダウンロードしてから検索す

    はじめてのEMR/fluentdでS3にアップロードしたログをElastic MapReduceで検索・集計する | DevelopersIO
  • Qiitaの画像アップロード機能も簡単に実装できる。そう、S3ならね。 - Qiita

    QiitaとKobitoで画像アップロードができるようになりました。 その後ろ側をちょっぴり公開します。 件名からも分かるように、背後ではAWSのS3を画像ストレージに採用しています。 画像アップロード機能をリリースしました - The Official Qiita Blog Kobito v1.6.1リリース: ドラッグ&ドロップやスクリーンショット撮影で簡単に画像を添付できるようになりました! - The Official Qiita Blog 用語統一 サーバ はQiitaのサーバのことを指すことにします。(つまり、S3ではない、ということ) また クライアント は各ユーザのブラウザのことを指します。 要件 画像アップロード機能を実装するにあたっていくつかの要求がありました。 成りすましを防げる アップロードされたファイルを管理できる 自分達のサーバに負荷をかけたくない 変な画像のア

    Qiitaの画像アップロード機能も簡単に実装できる。そう、S3ならね。 - Qiita
  • Amazon S3 – Cross Origin Resource Sharing Support | Amazon Web Services

    AWS News Blog Amazon S3 – Cross Origin Resource Sharing Support In order to keep your content safe, your web browser implements something called the same origin policy. The default policy ensures that scripts and other active content loaded from one site or domain cannot interfere or interact with content from another location without an explicit indication that this is the desired behavior. In ce

    Amazon S3 – Cross Origin Resource Sharing Support | Amazon Web Services
    cms-kekato
    cms-kekato 2012/09/01
    これは結構、大きいな。
  • 1