Elasticsearch in hatena bookmark
Elasticsearch has been used as the search engine for Hatena Bookmark since 2014. It powers several key features including tag/title/content/URL search, related entries, issues, topics, and bookmark counting. Elasticsearch allows Hatena to provide powerful and flexible search across the social bookmarking platform.Read less
「実現したいことを計算機の問題に置き換えることが『技術力』」、伊藤CTOが“はてな流”大規模データ処理の極意を語る
MySQLの運用 はてなブックマークでは、MySQLを一般的なマスター／スレーブ構成で運用している。つまり、参照系はスレーブにアクセスし、更新はマスターにアクセスするという構成だ。 このとき更新は1か所で行うため、負荷分散が難しい。Webアプリでは99％が参照クエリなので問題になることは少ないが、マスター負荷を分散する必要が出てくれば、データベースを分割して凌ぐのが現状のセオリーだ。ただし、運用が複雑になり、故障確率も上がるので、できるだけメモリ増設で対応し、データベース分割は「最後の切り札」にした方がよいと伊藤氏は言う。 データベースの分割を前提とした際のはてなブックマークの運用で特徴的なことは、SQL文でJOINを使わないこと。「RDB屋さんには叱られるだろうが」と前置きしつつ、最近の大規模Webアプリでは、ほとんどがMySQLを「高速なソート機能つきキーバリューストレージ」として使っ
はてなはなぜ潰れないのか？ - 萌え理論ブログ
はてなはなぜ潰れないのか はてなの本社京都移転関係で、はてダや増田で的外れな分析がたくさんありますが、FUDだと思うので、そろそろ一言言っておきます。 そもそも、今回の京都移転は、事業拡大です。オフィスも広くなるし、広くするのは人を増やす予定があるわけです。語られるイメージとは逆に、はてなは増収増益を続け、右肩上がりに成長し続けています。 確かに資本金は少ないのですが、上場してないんだから、そんなむやみに増やす必要はなく、代わりに内部留保を分厚くしているようです。また、ベンチャーキャピタルに頼らない、健全黒字経営志向です。 要するに、キャッシュがあるので、社長がアメリカに行った位では全然傾かない。それにしても、何がどのように儲かるのか、詳しく見てみましょう。 はてなはなぜ儲かるのか はてなは意外と「変な会社」ではなくて、収益構造が分かりやすいし、美味しいビジネスモデルだと言えます。はてなは
[ThinkIT] 第4回：Backend Evolution（後編） (1/2)
前回は「リバースproxyとは」と「Webサーバーのメモリ使用率」について解説しました。今回は前回の続きとして、「HTTPのKeepAlive」と「リバースproxyの構築」について解説していきます。 話は変わって、KeepAliveです。 1つのWebページをブラウザーが表示するにあたっては、htmlに加えてページ中に配置された複数の画像やスクリプトファイル、つまり複数のドキュメントをサーバーからダウンロードする必要があります。 この複数のリクエストを取得するのに、サーバーとクライアントの間で複数のコネクションを張ってやりとりするのは効率が良くありません。 サーバー側でKeepAlive設定が有効になっている場合、クライアントは、1つ目のドキュメントのダウンロードが完了したあとも接続を維持します。これにより必要なコンテンツを1つのコネクションで取得できるようになり、クライアントから見ても
HatenaをXHTML+CSSで組みなおす
授業中、生徒は課題制作で忙しく僕は用無し。ってことで、○○○をXHTML+CSSで組みなおすシリーズ(?)第二段を勝手にこっそり作ってた。 なるべく皆が知ってるサイトで、コーディングが楽しそうなサイトを探してたのだけど、なかなか決まらず、結局、生徒のリクエストでhatenaのトップページを組みなおす事にしました。 hatenaは一部レイアウトにテーブルを使っているものの、基本はCSSでの段組がされているので、mixiを組みなおすような大きな軽量化は出来そうにない。なので、楽しみ方としては、いかに無駄なマークアップを減らしてシンプルなXHTMLで同じ見栄えを再現するかだ。 これがまた、パズルで遊んでいるときの感覚に似ていてとっても楽しい。近い将来、CSSで１つの要素に複数の背景画像がおけるようになったとき、このパズル感が失われてしまうと思うと残念でならない。(半分ホンキ) で、帰ってきて手直
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
はてな技術発表会日記 - 1月19日の技術勉強会
naoyaのはてなダイアリー - ライブドアのテクノロジーセミナーでしゃべってきました。
組み込み型全文検索エンジン Senna : NDO::Weblog