はてなブックマーク

pythonでS3を使ったプログラムを書く際に使用するライブラリとしてbotoが有名だと思う． 使い方は以下のサイトとかを参考にしたらいいと思う． [Python] botoを使ってS3にファイルを保存する boto でさくらのBASE Storageを弄る « 不定期な記録 botoのサンプルプログラム すごく簡単なサンプルはこんな感じ． ホームディレクトリに.botoを置いてあげなきゃいけない [Credentials] aws_access_key_id = <your access key> aws_secret_access_key = <your secret key> motoを使ってテストする プログラムを書いたらテストをしなきゃないけない． しかし，テストのたびにS3にファイルを作られても困る． あと，CIサーバには認証情報を置きたくない． そんな時にはmotoを使うと良

Ansible勉強会に行って来たので，感想とかをつらつらと． connpassで参加登録した時は補欠100番目とかでしたが，イベント開始の2時間前とかに繰り上がりの連絡がきて急いで行ってきました！ 急なお願いにもかかわらず早退をさせてくれた会社に感謝です． とりあえず @tagomoris さんの話は圧巻でした．規模はやはり違いますね． お話されていた，Dynamic Inventoryは有効活用していきたいと思いました．むしろ，使わなかったら，大規模化で死亡する気が．．． zabbixのプラグインもあるらしいので連携がんばってみようと思いました． 発表者の方の中で割りと言われていたのは，公式のBest Practiceに素直に従うと，やりにくいということでした．一部ディレクト構成をかえたり，ペライチのPlaybookで管理するようにしているらしいです． @saito_hideki さんが

MongoDBのマイグレーションとかしてたら，MongoDBのObjectIdって本当にユニークだっけ？っていう疑問がわいた． 確かいろいろな要素を使って，ユニークになるようにできてたよなぁ．．．と思って，ちゃんと調べてみた． とりあえず公式のObjectIdの説明．ObjectId - MongoDB Manual 2.4.9 4バイトの，Unixエポックからの経過秒数(Unix時間) 3バイトのマシンID 2バイトのプロセスID 3バイトのカウンタ(開始番号はランダム) からできているらしい． ↑がんばって書いた． 実験！ 同じマシンで生成してみる． 以下の２つのObjectIdは同じマシン上で生成したObjectId. 52fcf106 0af12b af9e 8d5bba 52fcf108 0af12b af9e 8d5bbb 確かに最初のUnix時間は2秒ずれていることがわかる．

nginxからltsvでログはいてtd-agentでltsvで受けようとしたら， error="argument out of range” というエラーがでた． 2013-11-15 00:28:05 +0900 [warn]: "time:15/Nov/2013:00:28:05 +0900\thost:xxx.xxx.xxx.xxx\tforwardedfor:-\treq:GET /foo/bar HTTP/1.1\tstatus:304\tsize:0\treferer:http://xxx.xxx.xxx.xxx/foo/bar\tua:Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/31.0.1650.48 Safari/537.36\tr

nginxとかsupervisorとかDBのログをfluentdで一括管理したいなぁとおもったので，とりあえず 参考 にしたがって，nginxのログをltsv形式にしてみようとしたわけです． 環境は ubuntu server 12.04 LTS nginx 1.4.3 怒られる nginx.confのログの部分をこんな感じにしてみました． log_format ltsv "time:$time_local" "\thost:$remote_addr" "\tforwardedfor:$http_x_forwarded_for" "\treq:$request" "\tstatus:$status" "\tsize:$body_bytes_sent" "\treferer:$http_referer" "\tua:$http_user_agent" "\treqtime:$request_

ある日，Macで $vagrant up しようとしたら，こんなエラーがでた． dyld: Symbol not found: __cg_jpeg_resync_to_restart Referenced from: /System/Library/Frameworks/ImageIO.framework/Versions/A/Resources/libTIFF.dylib Expected in: /usr/local/lib/libJPEG.dylib in /System/Library/Frameworks/ImageIO.framework/Versions/A/Resources/libTIFF.dylib その他色々触ってたら， $ open -a hogehoge しても同じエラーがでた． 原因 libJPEG.dylibの__cg_jpeg_resync_to_resta

9/2~9/30までmixiでインターンをしてきました． Dive into mixi すごく貴重な体験だったので，ブログに残しとこうと思います． ※いろいろと書いちゃいけないことも多そうなのでふんわりと． 今年のmixiのインターンは あなたの好きな仕事をミクシィで経験できるインターンシップです。 ミクシィに飛び込み、"現場"を体験してみたい方のエントリーをお待ちしています。 ということで，IT企業の中で働いてみたいと考えていた僕は飛び込んでみました． あと，せっかく上京するので比較的長くインターンできるのも理由でした． インターンで応募可能な部署はたくさんありましたが，応募したのはたんぽぽグループ 「刺身の上にタンポポをのせる仕事」 のような単純作業の仕事から社内開発者を解放しよう、というミッションの元、たんぽぽグループは技術をベースとした様々な仕事や課題解決に携わります。 できる自信