メルカリにおける、継続的なアプリケーション改善を支える技術 #retty_tech_cafe // Speaker Deckメルカリにおける、継続的なアプリケーション改善を支える技術 - Retty Tech Cafe #5 2016/03/12
nginx-omniauth-adapterのGolangポート作った
「nginx で omniauth を利用してアクセス制御を行う」という記事で、 ngx_http_auth_request_moduleの存在を知ったので、 Golangでnginx_omniauth_adapterと似たようなものを作ってみました。 shogo82148/go-nginx-oauth2-adapter 背景 typester/gateは単体でも動くようになっていますが、 例えばIP制限などちょっと高度なことをしたい場合には結局nginxを前段に置く必要があります。 nginxとgateの設定を同時にいじる必要があって煩雑だと感じていました。 そんな中「nginx で omniauth を利用してアクセス制御を行う」という記事で、 ngx_http_auth_request_moduleの存在を知りました。 gateが認証＋Proxyをやってしまうのに対して、認証だけRu
nginx実践入門を見た - futoase
見たという表現とは nginx実践入門 (WEB+DB PRESS plus) 作者: 久保達彦,道井俊介出版社/メーカー: 技術評論社発売日: 2016/01/16メディア: 単行本（ソフトカバー）この商品を含むブログ (1件) を見る 読んだのだけど、ざっくりと見た。 全体的に設定ファイルと、静的ファイル配信、 ロードバランシング、Openrestyを使ったLuaによる処理、 Fluentd + Norika + GrowthForecastを使ったメトリクス。 SSLの設定(TLSのみしか有効にしない)など基本的な設定など。 常備本だなと見てて感じた。 nginxのドキュメントは体系的なものは少なく(英語だろうが日本語だろうが)、 なんとなく散見された情報、パラメータごとの設定ぐらい(nginxのwikiなどですら)で、 どれとどれが必要で、最低限の設定は何をしておけば...とか そ
「ディスクの信頼性を下げてよい」 GoogleがHDD業界にクラウド時代の提案 - クラウド Watch
ニュース 「ディスクの信頼性を下げてよい」 GoogleがHDD業界にクラウド時代の提案 （2016/3/7 09:41） 次へ 需要爆発でコストが膨らむ 1 2 3 「データ損失の可能性が高くなってもよいので、キャパシティとシステムの性能にフォーカスしたディスクを」。巨大なデータセンターを世界で運用するGoogleが、こんな要望をブログに綴った。クラウド時代に合う新しいアプローチが必要というが、いったいどんなものか？ この変わった要望にハードウェアベンダーは応じられるのだろうか？ ディスクをグループ化してパフォーマンス改善 「Googleはデータセンター向けの新しいディスクを求める」。Googleのクラウド事業「Google Cloud Platform」の公式ブログが2月23日付で、こう題したエントリーを公開した。同時期に開催されていたイベント「2016 USENIX conferen
3oku.net
This domain name expired on 2021-06-20 11:00:27 Click here to renew it. 3oku.net Related Searches: Top Smart Phones Contact Lens All Inclusive Vacation Packages song lyrics Online classifieds Healthy Weight Loss Anti Wrinkle Creams Related Searches: Top Smart Phones Contact Lens All Inclusive Vacation Packages Privacy Policy
個人的に思う、Golang1.5におけるVendor管理のベストプラクティス
では、1.5になってやっと公式サポートされたvendoring機能（参照のみ）の使い方を書きましたが、開発現場では参照だけではなくfetchしたりupdateしたりと依存するものを取得するという行動が発生する為、このままでは不便なままです。。ホント
Using NGINX as a Database Load Balancer for Galera Cluster
Published: November 12, 2015 Last Updated: May 4, 2022 Nginx is well-known for its ability to act as a reverse-proxy with small memory footprint. It usually sits in the front-end web tier to redirect connections to available backend services, provided these passed some health checks. Using a reverse-proxy is common when you are running a critical application or service that requires high availabil
モンストを支えるインフラの今とこれから
dots. Conference Spring 2016 ゲーム開発の裏側 http://eventdots.jp/event/580344
Goのバイナリサイズを削減する — そこはかとなく書くよん。 ドキュメント
あれ、 "-s"では変わってないですね…darwin環境ではでないのかななld周りのなにかだと思うのでそれはあとで追うとして、元々が26MBだったのが、5.2MBまで減りました。 圧縮に upx -9 を使った場合、かかった時間は15.70秒でそこそこ時間がかかりますね。3回ほど実行してだいたい同じぐらいでした。伸長時は0.10秒ほどでした。もちろんメモリなどにも依存しますので、この結果は鵜呑みには出来ませんが、あくまで目安として。 さらにいうと、 upx -1 で圧縮した場合は 0.78秒しかかかりません。それでいて、6.4MBと充分な圧縮効率となりました。この辺りはターゲットとする環境に合わせて決めればいいと思いますが、 -1 で十分な気もします。 まとめ¶ Goのバイナリが大きい問題は、ldflagsとUPXを使うことである程度解決できるのではないか、という話でした。 UPX知らなか
最も重要なプロダクション・コードにLuaを使う : PythonからLuaへの移行 | POSTD
Distelli Agentは今、実行ファイルを1つダウンロードするだけで簡単にインストールできます。この実行ファイルを使うと、適切な管理プロセスを持つエージェントをインストールしたり、新規にリリースしたものをアップロードしたりできるようになります。また、このエージェントはプラットフォームを問わず利用可能で、わずかな容量のCPUやメモリフットプリント（1パーセント未満のCPU使用率、10メガバイト以下のメモリ）で動作します。 私たちは、上記のパフォーマンスをある程度信用した上で、PythonからLuaに移行することにしました。 Pythonで挑む 私がDistelliに入社したのは、2014年の12月のことです。当時、Distelli Agentやコマンドラインツールは、システムで標準となっているバージョンのPython（サポートバージョンは2.4から2.7）を使う数個のターボールとして実
ロードバランサのアーキテクチャいろいろ - yunazuno.log
少し前に，Facebookのロードバランサが話題になっていた． blog.stanaka.org このエントリを読んで，各種Webサービス事業者がどういったロードバランスアーキテクチャを採用しているのか気になったので調べてみた． ざっくり検索した限りだと，Microsoft, CloudFlareの事例が見つかったので，Facebookの例も併せてまとめてみた． アーキテクチャ部分に注目してまとめたので，マネジメント方法や実装方法，ロードバランス以外の機能や最適化手法といった部分の詳細には触れないことにする． 事例1: Microsoft Azure 'Ananta' MicrosoftのAzureで採用されている(いた？)ロードバランサのアーキテクチャは，下記の論文が詳しい． Parveen Patel et al., Ananta: cloud scale load balancing
Debian パッケージングチュートリアル
2. このチュートリアルについて 目的: Debianのパッケージ作成について、知る必要のあることの提供 既存パッケージの修正 自作パッケージの作成 Debian コミュニティとのやりとり Debian のパワーユーザーになる 最も重要な点を押さえているが不完全 詳細なドキュメントを参照 ほとんどの内容は Debian 派生ディストリビューションにも適用可能 Ubuntu を含む Debian パッケージングチュートリアル 2 / 88 3. アウトライン 1 はじめに 2 ソースパッケージの作成 3 パッケージの構築とテスト 4 練習問題 1: grep パッケージの変更 5 高度なパッケージングの話題 6 Debian でのパッケージメンテナンス 7 まとめ 8 練習問題 2: GNUjump のパッケージング 9 練習問題 3: Java ライブラリーのパッケージング 10 練習問題
Fluentdのin_forwardに流れているレコードをtcpdumpで見る - ryotarai's blog
本番環境で動いているFluentdのin_forwardに何が流れているのかを知りたい、けど設定を触りたくない…みたいな場合に流れているタグやレコードを見る方法です。特にFluentdに限った話ではないですが、備忘録として書いておきます。 1. tcpdumpでキャプチャ 調べたいサーバ上で、tcpdumpを使ってパケットキャプチャを取ります。in_forwardのポート番号などを指定してキャプチャします。 $ sudo tcpdump -i eth0 -w fluentd.pcap port 24224 and tcp 2. tcptraceでTCPストリームのデータだけ吐き出す tcptraceは-eオプションを渡すと、TCPストリームごとのデータをファイルに吐いてくれるのでこれを利用します。なお、tcptraceはHomebrewやaptで入ると思います。 $ tcptrace -e
Update: Using Free Let’s Encrypt SSL/TLS Certificates with NGINX
Editor – The blog post detailing the original procedure for using Let’s Encrypt with NGINX (from February 2016) redirects here. The instructions in that post are deprecated. This post has been updated to eliminate reliance on certbot‑auto, which the Electronic Frontier Federation (EFF) deprecated in Certbot 1.10.0 for Debian and Ubuntu and in Certbot 1.11.0 for all other operating systems. For add
デブサミ2016で「Webエンジニアのための並行／非同期プログラミングの実際とこれから」というパネルディスカッションをしました - たけぞう瀕死ブログ
先日のデブサミ2016でピクシブの川田さんによるモデレートでGolang（メルカリのbokkoさん） × node.js（古川会長） × Scala（わたくし）という謎の組み合わせでパネルディスカッションをさせていただきました。 event.shoeisha.jp ユーザ層や適用領域が異なる言語ということもあり、噛み合うのか若干不安があったのですが、いい感じにまとまったのではないかと思いますw パネルディスカッションのまとめ 総論としては ハードウェアのリソースを使い切るために並行処理がますます重要になっていく ただし、アプリケーションのレイヤではなるべくそれを意識させないことが重要 という当たり前といえば当たり前の話だったのではないかと思います。ECMAScript7のAsync/Awaitは記述は同期的だけどブロックはしないという意味で理想に近いかもしれません。 普通にWebアプリを書
Goらしいコードの書き方(ミニ)
Goらしいコードの書き方(ミニ) Go 1.6 Release Party 17 February 2016 鵜飼文敏 Fumitoshi Ukai Google Software Engineer - Chrome Infra team 巻末付録「Goらしいコードの書き方」を書きました。 Ebook is now available! 2 Go 1.6 言語仕様の変更 -> なし! Goらしいコードの書き方は基本的にかわっていない。 golang.org/doc/effective_go.html github.com/golang/go/wiki/CodeReviewComments 3 Effective Go Go is a new language. Although it borrows ideas from existing languages, it has unusual
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
nginxのことをよく知りたくて、『「nginx実践入門」出版記念！執筆者らが語る nginx Tech Talks』に参加しました！
Slackboardを試してみた
Maglev: A Fast and Reliable Software Network Load Balancer – Google AI
Widebullet - Proxying RESTful APIs with JSON-RPC in Go
