クックパッドの検索の裏側 - クックパッド開発者ブログ
初めまして、インフラストラクチャー部の加藤 (@EugeneK) です。 クックパッドでは現在178万ものレシピが公開されていますが、目的のレシピを探すために検索機能を提供しています。 今回は検索機能の裏側の仕組みについて、インフラストラクチャーの観点からお話ししようと思います。 全ての検索機能を支えるSolrと周辺のアーキテクチャ クックパッドにはレシピの検索だけでなく様々な検索機能がありますが、その全てはSolrを活用して実装されています。 以前はMySQL Tritonnによる全文検索機能を使用していましたが、2011年頃からSolrに切り替わりました。 クックパッドではSolrをマスタ - スレーブ構成にすることで冗長性と負荷分散を実現しています。以下の構成図をご覧ください。 マスタとスレーブの間には、リピータと呼ばれる検索インデックスを中継するためだけの役割のサーバがいます。この
Oktavia Search Engine - pyconjp2014
- Yoshiki Shibukawa presented on search engines and his new Python module Oktavia at PyConJP. - Oktavia uses the FM-index algorithm as a backend which is better for eastern Asian languages compared to traditional inverted indexes. - It provides APIs for creating search features in applications and includes metadata support to enrich search results. - The module was recently published on PyPI and t
IIJ、社内共有文書の全文検索/プレビューソフト
インターネットイニシアティブ(IIJ)は、PDFやPowerPointなどのドキュメントを全文検索し、オンラインプレビューで確認、ダウンロードできるソフトウェア「SlicePoint(スライス・ポイント)」を開発し、2月18日より販売を開始すると発表した。オンプレミスやプライベートクラウド、IIJ GIOサービスなどIaaSでの利用ができる。 SlicePointは、タグや作成者・登録者などの属性検索に加えて、ドキュメントの中身を全文検索。検索でヒットしたドキュメントは、オンラインで全ページプレビューが可能。ダウンロードして確認する必要がないため、効率的に目的のドキュメントを探すことができる。 プレビュー表示は、リスト表示、全ページ表示、検索ワードを含むページのみを表示が選択でき、プレビューから必要なファイルを選択し、複数のファイルをまとめてダウンロードできる。さらに、選択したページのサム
Shibu's Diary: ブラウザ上で動く検索エンジンOktavia
渋日記@shibu.jp 渋川よしきの日記です。ソフトウェア開発とか、ライフハックを中心に記事を書いていきます。 HTML5アドベントカレンダー向けのエントリーです。ブラウザでできることがどんどん増えています。2013年に一部で熱狂的な話題となった本の高速文字列解析の世界 を読んで意識が高まったので、勢いにまかせてブラウザで動く検索エンジンを作ってみました。写真は著者の岡野原さんにお会いしたときにいただいたサインです。 ブラウザ上の検索エンジンと転置インデックスと東アジアの微妙な関係 全然調べていないので、歴史とかよくわからないのですが、僕が始めてブラウザ上で動く検索エンジンと出会ったのは、Sphinxです。SphinxはPythonで書かれたドキュメントツールです。ドキュメントツールというとJavaDocを始めとして各種あります。大きく、自然言語中心のもの(Texとか)と、APIリファレ
sourceforge.jp
We’re getting things ready Loading your experience… This won’t take long.
Lunr: A bit like Solr, but much smaller and not as bright
Designed to be small, yet full featured, Lunr enables you to provide a great search experience without the need for external, server-side, search services. Add powerful language processors to give more accurate results to user queries, or tweak the built-in processors to better fit your content. Lunr has no external dependencies and works in your browser or on the server with node.js
solrとelasticsearchの比較
elasticsearchの紹介です！ atnd.org/events/33718
分散リアルタイムデータベース「SenseiDB」がオープンソースで公開。LinkedInのインフラとして開発
テキストなど非構造化データのデータベース機能とサーチエンジン機能を兼ね備えた分散リアルタイムデータベース「SenseiDB」が、オープンソースとして公開されています。 SenseiDBとは先生DBの意味らしく、「Sensei (先生) means teacher or professor in Japanese」と説明があり、ロゴにも「師」の文字が使われています。なぜ先生なのか、その意味について以下のように説明があるのですが…… This name indicates that the system can be used in place of Oracle database in many applications. この名前が示しているのは、このシステムが多くのアプリケーションにおいてOracleデータベースで使われているところで利用可能だということです。 TeacherやProfe
sourceforge.jp
We’re getting things ready Loading your experience… This won’t take long.
sourceforge.jp
We’re getting things ready Loading your experience… This won’t take long.
Elastic — The Search AI Company
Elastic Cloud Hosted is now FedRAMP® High AuthorizedElastic deepens its commitment to the highest levels of security for US federal agencies. Elastic Workflows: Native automation, no SOAR requiredEnd the automation tax. Elastic Security's built-in scripted playbooks and AI reasoning shut down threats faster. Elastic Security XDR: #1 rated, zero endpoint feesAnalyze critical context and stop attack
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Elasticsearch入門 pyfes 201207
サービス終了のお知らせ