server-timing.md Navigation and Resource Timing provides timing data for the fetch, but currently there is no interoperable way for the server to communicate own timing information to the client. For example: What steps were taken to generate the resource, and how long each took. Many sites already embed this type of information via HTML comments - e.g. wordpress emits <!--Page generated in X.X se

どうも、かっぱ（@inokara）です。 こうするそうです ctrl+p → ctrl+q これでアタッチアンドデタッチを繰り返すことが出来るようになりました。 参考 How do you attach and detach from Docker’s process? 元記事は、こちらです。 「docker attach した後で再 detach はどうするの？」

どうも、かっぱ（@inokara）です。 はじめに Graphite を一台で動かすのはそれほど難しくないけど…メトリクス収集台数が増えてくると 1 台では CPU や I/O が辛くなる可能性があるのでクラスタを組んでみましょうってことでクラスタ構成を検証してみます。 あくまでも検証なので結果については設定等によって変わる点とまだ必要な設定が含まれていない可能性がありますので、あくまでも参考程度にご覧頂ければ幸いです。 戦略（という程でもないけど） carbon-relay の relay-method を consistent-hashing でメトリクスデータの保存を分散させる バックエンドには当然 carbon-cache を配置する データベースは今回は whisper graphite-web からは CARBONLINK_HOSTS で各ノードを指定することで分散させたメトリ

ほとんどの開発者は、自動のガベージコレクション（GC）を当たり前のように使っています。これは、私たちの仕事を容易にするために言語ランタイムが提供する素晴らしい機能の1つです。 しかし、最新のガベージコレクタの中をのぞいてみれば、実際の仕組みは非常に理解しづらいことが分かります。実装の詳細が無数にあるため、それが何をしようとしているのか、また、それがとんでもなく間違った事態を引き起こしかねないことについて十分理解していない限り、すっかり混乱してしまうでしょう。 そこで、5種類のガベージコレクションアルゴリズムを持つおもちゃを作ってみました。小さいアニメーションはランタイムの動作から作成しました。もっと大きいアニメーションとそれを作成するコードは github.com/kenfox/gc-viz で見ることができます。単純なアニメーションによってこうした重要なアルゴリズムを明らかにできることは

DB Tech Showcase 2014 東京の発表スライド

Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...

Netflix has very diverse data needs. Those needs fall anywhere between rock-solid durable datastores, like Apache Cassandra and lossy in-memory stores, such as the current incarnation of Dynomite. Somewhere in that spectrum is the need to store, index, and search documents. This is where Elasticsearch has found a niche in Netflix. Elasticsearch usage, at Netflix, has proliferated over the past yea

IT健保（関東ITソフトウェア健康保険組合）最大の福利厚生と言っても過言では無い、鮨 一新。銀座の「かねさか（ミシュラン2ツ星）」の隠れ支店なわけですが、そのクオリティがどんどん向上している気がするのは僕だけでしょうか。 ということで、海外から帰国したゲスト！も連れて三度訪問してまいりました。 新メニュー「一新特選コース」を頼んだ はい、もうこちらは高ければ高いほどお得だというのがわかっておりますので、今回は一番高いコースを頼みました。 鮨一新では朝仕入れ時におすすめ食材を厳選し、ネタの仕込み方法や調理法にひと手間を加え、最高の鮨を追求した「一新特選コース」を平成26年4月1日より期間限定で開設します。 被保険者・被扶養者：7,560円 同伴者：11,880円 ※料金は税込価格。 ＞メニュー紹介 | ［ITS］関東ITソフトウェア健康保険組合 http://www.its-kenpo.or

http://www.cloudera.co.jp/jpevents/cwt2014/ http://connpass.com/event/9031/Read less

第 11 回のテーマは High Performance Browser Networking です。今回は High Performance Browser Networking の著者であり、 Google の Developer Advocate である @igrigorik さんをお迎えして開催した、この書籍のちょっと遅れた出版記念イベントである HPBN-meetup で実施したインタビュー形式の公開収録の模様を配信します。今回は Google さんに通訳をつけて頂きましたので、その分ラグや lost in translation がありますが、ご了承ください。HPBN は、複雑化し、知らなくてはならい知識が飛躍的に増えた Web のネットワークに関わる知識について、幅広く詳細に解説した Web エンジニア必携の一冊です。インタビューでは Ilya はいったいどういうエンジニアで

鈴木：先のセッションで権限があったから入れましたという話が挙がっていましたが、インフラエンジニアだから入れられるというのは結構あると思います。 道井：インフラエンジニアは基本どこのサーバでもSSHログインできるため、勝手にFluentdを入れて、勝手にログをもってくることができます。 伊藤：待って、この話はあまり一般的でないと思う（会場：笑） 吉田：僕の会社も同じような感じです。2、3年前に、ログ解析やクエリログの収集をしたくなり、トレジャーデータのFluentdが良さそうだというのが分かりました。木曜にメールをして、翌月曜には全台にデプロイが完了していました。 伊藤：それはインフラエンジニアとしての業務にあたっていたんですか？ 吉田：趣味です。 伊藤：なぜ、皆さん趣味でやってるんですか（苦笑） 鈴木：僕はもともとはサーバサイドエンジニアで、インフラエンジニアの人にFluentdを入れるか

鈴木：先のセッションで権限があったから入れましたという話が挙がっていましたが、インフラエンジニアだから入れられるというのは結構あると思います。 道井：インフラエンジニアは基本どこのサーバでもSSHログインできるため、勝手にFluentdを入れて、勝手にログをもってくることができます。 伊藤：待って、この話はあまり一般的でないと思う（会場：笑） 吉田：僕の会社も同じような感じです。2、3年前に、ログ解析やクエリログの収集をしたくなり、トレジャーデータのFluentdが良さそうだというのが分かりました。木曜にメールをして、翌月曜には全台にデプロイが完了していました。 伊藤：それはインフラエンジニアとしての業務にあたっていたんですか？ 吉田：趣味です。 伊藤：なぜ、皆さん趣味でやってるんですか（苦笑） 鈴木：僕はもともとはサーバサイドエンジニアで、インフラエンジニアの人にFluentdを入れるか

Register as a new user and use Qiita more conveniently You get articles that match your needsYou can efficiently read back useful informationYou can use dark themeWhat you can do with signing up

.tmux.conf .tmux.confとは、tmux起動時に呼び出される設定ファイルです。 ~/.tmux.confに記述します。 .tmux.confの例 # prefixキーをC-qに変更 set -g prefix C-q # C-bのキーバインドを解除 unbind C-b # vimのキーバインドでペインを移動する bind h select-pane -L bind j select-pane -D bind k select-pane -U bind l select-pane -R # vimのキーバインドでペインをリサイズする bind -r H resize-pane -L 5 bind -r J resize-pane -D 5 bind -r K resize-pane -U 5 bind -r L resize-pane -R 5 # | でペインを縦分割する

ども、大瀧です。 今朝かた、RDS for PostgreSQLでリードレプリカがサポートされました。早速試してみたので、レポートします。 リードレプリカとは RDSのリードレプリカは、マスターとなるDBインスタンスとは別に読み取り専用のインスタンスを追加します。マスターへの負荷を分散させるための手法として、従来からRDS for MySQLでサポートされている機能です。今回、RDS for PostgreSQLが対応しました！ ただ、MySQLのリードレプリカとはレプリケーション方式が異なるとドキュメントに記載があるので、MySQLのリードレプリカをご存知の方は注意が必要です。設計/運用面では以下3点を押さえておきましょう。 リードレプリカからマスターへの昇格はできない リードレプリカの多段化はできない 同一リージョン内のみ(異AZはOK) 要件 リードレプリカの元となるDBインスタンス

結果発表 にある通り、 KLab から参加した3チームは、 2チームが8000点前後の過密地帯で、 lily white だけがほんの少し飛び出て5位でした。 1位、2位が Cache-Control 勢、 3, 4 位が Public/Private ネットワーク束ねた勢だと思われますが、 lily white は API は public, 動画は private と使い分けたため、 片側の帯域を使い切った 過密地帯から少し上に出ることができて5位でした。 以下、時系列でどんな事をやっていたのかを残していきます。 前日: 休み、モニタリング環境準備 実は ISUCON 本戦への参加をカンファレンスでの講演と同じ休出扱いにしてもらって、 前日は振替休日として家族サービスと休息に割り当てました。 おかげで去年や予選時と違って途中で集中力を切らさず最後まで頑張れました。 一応モニタリングツー

結果発表 にある通り、 KLab から参加した3チームは、 2チームが8000点前後の過密地帯で、 lily white だけがほんの少し飛び出て5位でした。 1位、2位が Cache-Control 勢、 3, 4 位が Public/Private ネットワーク束ねた勢だと思われますが、 lily white は API は public, 動画は private と使い分けたため、 片側の帯域を使い切った 過密地帯から少し上に出ることができて5位でした。 以下、時系列でどんな事をやっていたのかを残していきます。 前日: 休み、モニタリング環境準備 実は ISUCON 本戦への参加をカンファレンスでの講演と同じ休出扱いにしてもらって、 前日は振替休日として家族サービスと休息に割り当てました。 おかげで去年や予選時と違って途中で集中力を切らさず最後まで頑張れました。 一応モニタリングツー

最近、bigqueryの評価を行っている。本番向けのデータではよくあることだが、本来データが入る場所にnullが入っていたり、要素が無かったり、逆に要素が多かったりする。 bigqueryはTreasureDataの様にスキーマレスではなくきちんとスキーマを定義しなければならない。 bigqueryでは、スキーマの定義にjsonを使い、データのロードにもjsonを使うため、要素にミスマッチが発生する場合が考えられる。 スキーマとjsonで要素のミスマッチがあった場合は、データにnullが入っていた場合のbigqueryの挙動に関してまとめた。 最初に結果だけ書き、後半に実際にデータロードで試したサンプルを乗せる。 データロード時のBigQueryスキーマと、jsonの対応 送信jsonにスキーマがある。 送信jsonにスキーマが無い

Show Your Support: Did you know that the hundreds of articles written on Phoronix each month are mostly authored by one individual? Phoronix.com doesn't have a whole news room with unlimited resources and relies upon people reading our content without blocking ads and alternatively by people subscribing to Phoronix Premium for our ad-free service with other extra features. Limba: Experimental Linu

という入門記事を書こうと思いましたが、最高の記事があったのでやめました。 こちらを参照すると良いです。 ちなみにこういうスクリプトをピッと書いたらデータが送れてることが確認出来ました。 use strict; use warnings; use Fluent::Logger; my $logger = Fluent::Logger->new( host => '127.0.0.1', port => 24224, ); $logger->post("access.log", { uri => "http://google.com", request => { addr => "test-addr", ua => "test-ua", referrer => "test-referrer", }, }); 触った感じ便利そうなので、なんかやりたい。 これも面白い感じがします。

00-README.md CoreOS とその関連技術に関するここ半年間の私の活動まとめ はじめに 最近、社内で私が「何者で何をしているのか見えないので可視化して欲しい」という案件が出ているらしいので、ヘコヘコと徒然なるままに書いていきたいと思うのであります。 社内向けというだけでなく社外の人にも発信出来る内容に、との仕様も要求され、社外向けには出来るだけ旬なネタで、かつ、社内向けにはそれを理解する上で必要な関連する技術を個々に触れながら基礎知識が無くても理解出来るように、との追加仕様も提示されております。 で、何をネタにしてどのように書けばいいのか迷った訳ですが、自分が実際にやって来た内容である CoreOS であればそこそこ旬であるし、それをおさらいしつつ、関連技術も Docker、Omaha、systemd、BtrFS、Golang、etcd、Kubernetes 等々多岐にわたるの

50回目のYokohama.rb 50回目のYokohama.rbを2014/11/8（土）に開催しました。 普段は20名も入ればいっぱいな神奈川地区センターの和室でやるのですが、今回は50回という記念すべき会ということもあって、 @1syo さんによる発案でLT大会をやることになりました。 自分を変えた一冊 LT大会のテーマは自分を変えた一冊。というわけで、このエントリーでは上がった本を記していきます。私が読んだ本については一言コメントを。 ソフトウェア開発者採用ガイド 作者: Joel Spolsky,青木靖出版社/メーカー: 翔泳社発売日: 2008/03/20メディア: 単行本（ソフトカバー）購入: 8人 クリック: 121回この商品を含むブログ (56件) を見る Webにあるゲリラ的雇用面接のすすめを読んでもいいかな。このJoel on Softwareは読み始めると時間があっ

You may use stream-oriented systems to parallel process real-time, time-sensitive data. You might also use data stream processing for bulk operations with time-insensitive operations, like data analysis and persistence operations. At Conductor, we use Kangaroo for bulk data stream processing, and we’re open sourcing it for you to use. Why Data Stream Processing with Kafka Wasn’t WorkingLast year,

初めてのHadoopパッチ投稿 / How to Contribute to Hadoop　（Cloudera World Tokyo 2014 LT講演資料）

こんにちは、ISUCONのために2ヶ月ほどgoをみっちり書いてた@edvakfです。練習した甲斐あって2位になることができました。 バグフィックスデーについて pixivではPHPのアプリケーションのエラーはすべてfluentd経由でMongoDBに入れていて、管理画面からスタックトレースなどを見られるようにしています。 デプロイ直後などに見たことのないエラーが出ていないかをここで確認したりします。もちろん自分の入れたバグやクリティカルなものであればすぐに直します。 たまにこのチェックをすり抜けて、クリティカルではないけれども１日数個ぐらい出てるようなものが溜まってしまうことがあります。 pixivでは１ヶ月に１回程度、こういう類のバグを潰す日として「バグフィックスデー」というのを実施しています。 流れ 参加者は普段pixivのサーバーサイドを書いているエンジニア6〜8名程度で、その日ター

[Updated1] I have a shell which will change TCP kernel parameters in some functions, but now I need to make this shell run in Docker container, that means, the shell need to know it is running inside a container and stop configuring the kernel. Now I'm not sure how to achieve that, here is the contents of /proc/self/cgroup inside the container: 9:hugetlb:/ 8:perf_event:/ 7:blkio:/ 6:freezer:/ 5:de

tl;dr Motivation Required Tools to Install Docker Fig boot2docker Fig Project Setup DNS Server Configure Your Computer’s DNS Load Balancer Fig.yml File to Put it All Together Example Project Output Take Aways tl;dr This setup lets you route through a running fig project to an app you start on your machine outside of docker Motivation When developing locally you frequently need to run dependencies

こんにちは。システムエンジニアのリョータです。 前回に引き続き、今回はmysqldumpのお話です。 オプションの一覧 mysqldumpを使っていて、CREATE TABLE文だけほしいときや、データをファイルで分けてほしいことがありました。 オプションの一覧がMySQLの本サイトやhelpで出てくるものでは、いちいち調べるのが不便だったので一覧を作成してみました。 順番やグルーピングは個人的につけたものです。 また、デフォルトで有効になっているものには「初期」の欄に「○」をつけました。 オプション 短縮 値 初期 説明 基本