https://varnish-cache.org/ Varnishを使ってWordPressをキャッシュする方法です。 Varnish port 80 -> nginx port 8080 -> php-fpm -> WordPress という構成にします。 Varnishは、いままで使ったことがなかったので、導入だけでも触っておこうと考えて、よくありそうなユースケースとして、ウェブメディアの前段にキャッシュを置く、という使い方をしてみました。 ほかに、外部サービスのAPIが不安定だったりする場合、間にVarnishを挟んで、可用性とパフォーマンスを確保する使い方もあるようです。 External API Caching with Varnish & Nginx http://blog.runnable.com/post/144975295096/external-api-caching

無料でSSL証明書を自動発行するサービス Let's Encrypt を利用して、nginxにSSL証明書を組み込む手順を紹介します。 通常、Let's Encryptの証明書を発行するには、Pythonやモジュールをインストールして、Lets's Encrypt Clientを使えるようにする必要がありますが、これらの環境構築を簡素化するためにDockerを利用します。 以下導入手順です。OSはCentOS 6を使用しています。 Dockerをインストール # yum install docker-io # service docker start # service docker status docker (pid 2257) is running... ※ もし。Dockerが起動できず。以下のようなメッセージが出るときは、カーネルのバージョンを上げる必要があります。 # cat

Mitigating DDoS Attacks nginx + ngx_mruby + http-dos-detector https://github.com/matsumoto-r/http-dos-detector Detect Huge Number of HTTP Requests on Apache and nginx using mruby code. http-dos-detector use same Ruby code between Apache(mod_mruby) and nginx(ngx_mruby). It seems, programmable DDoS firewall by mruby on nginx. This solution provides regulating the incoming HTTP/S traffic and controll

nginxでDDoS対策をするための方法を調べてみました。 いくつか方法が見つかったので、リンクをまとめてみました。あとで、色々試してみようと思います。 nginxをプロキシサーバとして利用して、バックエンドにアプリサーバを配置するような構成で使うので、外部から来たDDoSをnginxでブロックしてアプリサーバを守る。といったような用途になるかと思います。 もちろん、nginxが応答できるHTTPリクエストの範疇に収まらない攻撃は、その前段階でブロックしたり、他のサーバにアクセスを逃したりする必要があります。 DDoS攻撃に対するシンプルな戦略 | ツチノコブログ(http://tsuchinoko.dmmlabs.com/?p=611) さらに、こちらで紹介されているように、完璧に防ごうとすると青天井のコストが見えてしまったりするので、”どれくらいDDoSからの保護をするのか”を明確にル

https://h2o.examp1e.net/ H2O is known as HTTP(HTTP/2) Server of new era. This is simple install log for H2O with php-fpm. Build Environment: Amazon Linux AMI 2015.09 (HVM), SSD Volume Type - ami-9a2fb89a c4.xlarge + EBS (General Purpose SSD) 100GB Install some librarys # yum -y groupinstall "Development Tools" # yum -y install libyaml-devel openssl-devel cmake httpd-tools php56-fpm php56-opcache I

動画や音声をエンコードしてくれるソフトである FFmpeg（https://www.ffmpeg.org/）をCentOS6で扱えるようにします。 ついでに、ImageMagickも使ってアニメーションGIFを作ってみます。 この動画を。 アニメーションGIFに変換します。 動画ファイル -> １コマづつのPNGファイル生成 -> アニメーションGIF という流れです。以下、作業ログです。 yumライブラリをインストール # yum -y install autoconf automake make gcc gcc-c++ pkgconfig wget libtool zlib-devel # yum -y install git # yum -y install http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.

ネストされたJSONデータ（https://cloud.google.com/bigquery/docs/personsData.json）を、fluentdを使ってGoogle BigQueryに投入します。 BigQueryは、こういった構造化されたデータに対応する WITHIN、FLATTEN といったSQL関数が準備されています。 これらを利用したSQLクエリを構築してデータを取り出してみます。 プロジェクトを作成 https://console.developers.google.com/project Google Developers Consoleを開き、プロジェクトを作成して、『プロジェクト ID』『メールアドレス』をメモしておいてください。 また、P12キーファイルを保存しておいてください。 認証で必要になります。 サーバ AMI: CentOS 6 (x86_64)

Amazon EC2 + EBS を使ったとき、I/Oバリアのオン・オフでパフォーマンスが変わるか測ってみました。 => 結果、変わらないことがわかりました。 また、CentOSを使ったときは、カーネルのバージョンを最新にすることによってパフォーマンスが改善することがわかりました。 以下、スループットを測ったときのメモです。 インスタンスとスペック CentOS 6 (x86_64) - with Updates HVM Instance type: c4.2xlarge Disc: 300GB Provisioned IOPS (SSD) 1000 IOPS EC2のCentOS6 HVMでresize2fs "Nothing to do!"と言われたとき http://takeshiyako.blogspot.jp/2014/12/ec2centos6-hvmresize2fs-not

https://github.com/takeshiyako2/nagios-check_mysql_innodb_row_operations MySQLのInnoDB Row Operationsを監視するNagiosプラグインを書きました。 SHOW /*!50000 ENGINE*/ INNODB STATUSの結果を保存しておき、差分を経過時間で除算してRow Operations/secを算出します。 この数値にしきい値をもうけてアラートをすることができます。 以下、設定方法です。 あらかじめ、Rubyを用意しておいてください。 プラグインをgit cloneして、mysql2ライブラリをインストール。 $ git clone git@github.com:takeshiyako2/nagios-check_mysql_innodb_row_operations.git $ c

特に何も設定していないPostfixから、Gmailなどにメールを送信するとスパム扱いをされてリジェクトされることがよくあります。 例えば以下の様なエラーを返してくることがあります。 Our system has detected 550-5.7.1 that this message is likely unsolicited mail. To reduce the amount of 550-5.7.1 spam sent to Gmail, this message has been blocked. Please visit 550-5.7.1 http://support.google.com/mail/bin/answer.py?hl=en&answer=188131 for 550 5.7.1 more information. これを回避するために、PostfixからGma

https://github.com/takeshiyako2/basecamp_to_slack BasecampのアップデートをSlackに投稿するスクリプトを書きました。 以下のように通知してくれます。 もともと、Zapier（https://zapier.com/）というサービスで、BasecampとSlackを接続していたのですが、すぐにAccount Usageがフルになり使えなくなってしまいました。 調べたところ、BasecampにはAPIが提供されていたので、それを使ってみました。 https://github.com/birarda/logan こちらのGemライブラリを利用しています。 Enjoy!

Gemfileに以下を書き込み。 gem 'capistrano-slackify' bundleを実行。 $ bundle Capfileに以下を書き込み。 require 'capistrano/slackify' あとは、config/deploy.rb に以下の記述を書き込むだけです。 set :slack_url, '<Webhook URL>' set :slack_channel, '#random' set :slack_emoji, ':surfer:' 簡単ですね！

Amazon EC2は立ち上げるインスタンスによって微妙なパフォーマンス差が出ると言われていて、複数回、インスタンスを立ち上げたり、捨てたりして、良いインスタンスを得ることを”Amazon EC2インスタンスガチャと”呼ばれています。 そのパフォーマンス差は、どれくらいなのか？気になったので測ってみました。 検証環境はこんな感じです。 AMI ID: CentOS 7 x86_64 (2014_09_29) EBS HVM-b7ee8a69-ee97-4a49-9e68-afaee216db2e-ami-d2a117ba.2 (ami-89634988) Instance Type: c3.xlarge １）Magnetic(standard) ２）Magnetic(standard) + EBS-Optimized ３）General Purpose (SSD) + EBS-Optimi

『CloudFront、RedshiftなどAWSが支える動画広告の舞台裏～インフラのイノベーションがもたらす動画広告のイノベーション～』 と題して、セッションを行わせて頂きました。 Media & Entertainment セッションということで、全体的に”ビジネス寄りの話に厚みを持たせ、技術寄りの細かい話は、なるべくスーツの人にもわかりやすく”という内容でお話をさせて頂きました。 会場は、500人部屋で、満員御礼。 ビジネスの部は、CCI工藤さんと、上野くんで進めて頂きました。 場馴れしている感がありましたね。さすがです。 私のところに回ってきた時には、とにかくドモらないように、滑舌よく喋る。ということを意識してやりました。 ２週間ほど、毎晩、妻の前で練習した成果もあって（付き合ってくれてありがとう！）、頭が真っ白になったりとか最悪の事態にはなりませんでしたが、途中、何回かつっかえて

さくらのクラウドでロードバランサを設定する方法です。 最初、公式の説明（http://cloud-news.sakura.ad.jp/load-balancer/）を見ていたのですが、スイッチとルータの説明が省かれていて良く分らなかったんですよね・・・ スイッチとルータの設定を補完して、自分なりにまとめてみました。 サーバにsshログインしてファイルを編集する能力があれば、誰でも簡単に設定できると思います。 スイッチの追加 [ネットワーク]->[追加]->スイッチ作成画面 スイッチの名前を記入して、ルータ「はい」を選択。 プリフィックスと帯域はお好みで設定します。 右下の「作成」をクリックして、スイッチ + ルータを作成します。 スイッチの確認

『OpenSSLの重大バグが発覚。インターネットの大部分に影響の可能性』 http://jp.techcrunch.com/2014/04/08/20140407massive-security-bug-in-openssl-could-effect-a-huge-chunk-of-the-internet/ 本日こちらの記事が話題になりました。 CentOSの対応状況については、本家のフォーラムが参考になります。 『heartbleed openssl bug, need 1.0.1g openssl version』 https://www.centos.org/forums/viewtopic.php?f=9&t=45814 日本語の情報だと、こちらが詳しいです。 『 CVE-2014-0160 OpenSSL Heartbleed 脆弱性まとめ』 http://d.hatena.n

言わずと知れた、Redisのフェイルオーバーツール、Redis Sentinel（http://redis.io/topics/sentinel）をお手軽に使う方法を紹介します。 フェイルオーバー時に、アプリサーバからRedisへの接続先を変更する方法として、”アプリサーバへ /etc/hosts を rsync で配布する” といった方法をとります。 いままでは、RedisサーバのIPアドレスの付け替えや、HAProxyの設定変更を自動で行う、などといった方法がありましたが、これは、敷居低めで実装できるのが嬉しいです。 動作イメージは下のようになります。 redis1が壊れたとき、redis2が自動でマスタに昇格してサービスを継続します。 詳しく説明します。 app1、app2の /etc/hosts には、Redisマスタのホスト名 redis-master.myservice.com

Plaggerをインストールします。(2014年版) 環境は、Windows8 + Vagrantに立てたCentOS 6.4です。 RSSを取得して、csvにするところまでやります。 参考URL Windows8にVagrantをインストールしてCentOSを入れる http://d.hatena.ne.jp/fitflavor/20131020/1382250424 CentOS6.3にperlbrew,Perl 5.16, cpanmを一気にインストールする方法 http://dqn.sakusakutto.jp/2012/08/centos63_perlbrew_perl_cpanm.html yumライブラリをインストール # yum -y install openssl-devel expat-devel db4-devel libxml2-devel perl gcc mak