EMRってなんじゃ？（ImpalaでCloudfrontの爆速ログ集計）
EMRがImpalaをサポートするようになりました。ImpalaはClouderaが提供するオープンソースのクエリエンジンで、Hiveより断然速いそうです。 例として、Cloudfrontのログを、タイムスタンプをJSTに直して１時間ごとのアクセス数の集計をしてみます。 ログバケットの確認 まずCloudFrontのログが以下のS3にたまっているとします。 s3://memorycraft-impala-input/cf/logs EMRクラスタの起動 次に、EMRクラスタを起動します。 EMRのダッシュボードで「Create Cluster」をクリックし、新規クラスタ作成画面を表示します。 Cluster Configuration Cluster nameに適当なクラスタ名を入力します。また、今回はEMRのログは出力しないのでLoggingのチェックはOFFなんかにしておきます。起動し
Amazon ElastiCacheってなんじゃ？
Amazon ElastiCacheというあたらしいサービスがbeta公開されました。 これはいわゆるAmazonが提供するmemcacheサーバーで、サーバークラスタとして動作し、EC2のネットワーク上からアクセスが可能です。 今回は、簡単にElastiCacheを試してみます。 まず、ElastiCacheのページにアクセスし、右ペインにある"Sign Up Now"のボタンからElastiCacheの利用登録をします。 すると、AWSのコンソールで"ElastiCache"のタブが追加されるので、選択します。 左ペインを見ると、このサービスがまだUS-Eastでしか提供されていないことがわかります。 また、メニューツリーに、いくつか機能がならんでいるのがわかります。 まず、その中から"Cache Security Groups"を選択して、"Create Cache Security
S3ってなんじゃ？（ダウンロードだけを特定のIPに制限する）
{ "Version": "2008-10-17", "Id": "Policy1360868462747", "Statement": [ { "Sid": "Stmt1360868457064", "Effect": "Deny", "Principal": { "AWS": "*" }, "Action": "s3:GetObject", "Resource": "arn:aws:s3:::myfirst-bucket/img/*", "Condition": { "NotIpAddress": { "aws:SourceIp": "xxx.xxx.xxx.xxx/32" } } } ] }
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
DynamoDBってなんじゃ？（AWSコンソール編）
