Elasticsearch の勉強会を社内で行なった話 - まっしろけっけ
最近圧倒的インプットによって、圧倒的にアウトプットが減っている僕です。 ということでリハビリがてら 4 月の初めに Elasticsearch の勉強会を社内でやったのでそのことについて書いてみます。 そこまで技術的に深い話はないので期待しないでください。 勉強会の開催経緯 今のプロジェクトで検索に関してあれこれ頑張っていく中で Elasticsearch を使用することになり、 index の設計とか Rails から Elasticsearch 使うとことか作ったわけですが チームメンバーから知見を共有してくれ！という要望があったのと自分自信も自分だけわかっても後々辛い感じになるだろうという感じだった + 弊社はいるだけで成長出来るらしいのでみんなを成長させようではないかという思いから、 やるぞ！ってなったのが 2 月末です。 で開催したのが 4 月初め...だいぶ遅い...(反省はし
Elasticsearch のクラスタについてしゃべった - 復刊 ボルシチは食べ物です。
仕事のチーム + アルファなメンバーを対象に Elasticsearch のクラスタについて基本的なところをしゃべった。 Elasticsearch については、オフィスでも何冊も見かける「高速スケーラブル検索エンジン ElasticSearch Server」という定番書籍がありますが、クラスタまわりについてはほとんど触れられていないのでそのあたりを補足する狙いです。 資料を公開しておきます。 Elasticsearch クラスタ概説 この資料に沿ってしゃべりつつ、 Mac 上に構築したクラスタを触りながら進める流れ。このクラスタは Vagrant と Itamae で簡単に構築できるようにしてあり、こちらも公開してあります。 GitHub - yano3/elasticsearch-cluster-sandbox: Running Elasticsearch cluster on Va
elasticsearch勉強会で発表してきました - Advanced Technology Lab
皆様はじめまして．リクルートテクノロジーズでエンジニアをしている相野谷と申します． 先週開催された第3回Elasticsearch勉強会で「Elasticsearch+DynamoDB+Node.jsで作る全社基盤」というタイトルで，独自開発したシステムでのElasticsearchの利用例を紹介させていただきました． 発表スライド自体は既にupされていますが，それだけでは初見の人に分かりづらいと思いますので，解説記事を上げさせていただきます． スマホアプリのためのプッシュ通知基盤 今回開発したシステムは，「リクルートグループが開発するスマホ用のアプリでプッシュ通知を送るための基盤」です．このプッシュ通知基盤が提供する条件指定プッシュという機能のために，Elasticsearchを使用しています． システム構成 本システムはリクルートで開発される全アプリから利用されることを想定しているため
Elasticsearchで日本語全文検索をするために、最近見てるもの使ってるもの - mosowave
最近仕事でElasticsearchと戯れています。 Kibanaでログ解析とかする人が多いとおもうのですが、 コンテンツの日本語全文検索用だったりします。 ログ解析の資料は多い（と思う）んですが、 日本語全文検索の文献がすくない＞＜ analyzerチェックのために使うpluginって、inquisitorが王道な感じがするのですが、 個人的にはkopfが神でした。github.com blog.johtani.info 機能が多くてリッチなのもよいのですが、 analyzeAPIを叩いて単語が分割された結果が見れるというのがとてもよい。 (kuromojiをつかっているなら、kuromoji demo - japanese morphological analyzer に入力すれば品詞がわかるので、stoptagsの選定をしたりしました） あとは、参考にさせていただきまくってるブログな
第8回Elasticsearch勉強会を開催しました。#elasticsearchjp
第8回Elsticsearch勉強会を開催しました。 スタッフの皆さん、スピーカーの皆さん、開場提供していただいたリクルートテクノロジーズさん、ありがとうございました！ 次回もよろしくお願いします！参加していただき盛り上げていただいた参加者の皆さんもありがとうございました。 今回は出足が好調で、早々に180人の枠を超えるという嬉しい事態でしたが、 キャンセル待ちが残っているにもかからわらず、来られていない方が67名もいるということで、キャンセル待ちの方には申し訳なかったです。 もうすこし、キャンセルをしてもらえると嬉しいんですが。。。 今回はメールを当日に1度しか打ってないからかなぁ。 さて、いつもの通り簡単なメモです。 本当に簡単にですが。 「Elasticsearch導入チェックリスト？」 Elasticsearch株式会社 Jun Ohtani @johtani スライド：Elast
Solr、ElasticsearchをはじめとするHTTP APIのレスポンスキャッシュ方針 - Qiita
Webサービスでは、Solr、Elasticsearchをはじめとする検索エンジンの結果をキャッシュしたいことは比較的よくあるはなしではないだろうか。ユーザー向けに提供している検索では、人気のワードで検索されやすく、それ相応の負荷になる。また、コンテンツに付加されているタグをクリックすると同じタグが付けられているコンテンツが検索される事例など、おなじようなクエリが投げられやすい状況は容易に推測できる。 さて、このような場合検索エンジンにおいてはどのようなキャッシュ戦略をとれば良いか。 1. Solr、Elasticsearchなどの検索エンジンに内蔵されているキャッシュ機能を利用する ElasticsearchではFilterCache、SolrではさらにFilterCache、QueryResultCache、documentCacheなどより細かなキャッシュ機能を利用できる。これらのキ
「niconicoの検索を支えるElasticsearch」と題して、第7回Elasticsearch勉強会で発表しました：dwango エンジニア ブロマガ
こんにちは。 エンジニアの伊藤です。 11/18に開催された第7回Elasticsearch勉強会にて「niconicoの検索を支えるElasticsearch」と題して、niconicoでのElasticsearchの運用事例について発表してきました。 発表の機会を与えてくださった@johtaniさん、スタッフの皆さん、ありがとうございました。 (この投稿は報告が遅くなっただけで、アドベントカレンダーネタではありません...) 使用したスライドがコチラになります。 https://speakerdeck.com/shoito/niconico-elasticsearch 講演では、まずElasticsearchを使った検索基盤を作った背景、 次に、なぜElasticsearchを使うことにしたのか？ そして、どう使っているのか？どう運用しているのか？ 最後に、良く参考にしているElast
第7回Elasticsearch勉強会を開催しました。#elasticsearchjp
Posted by johtani on Wednesday, November 19, 2014 第7回Elsticsearch勉強会を開催しました。 スタッフの皆さん、スピーカーの皆さん、開場提供していただいたリクルートテクノロジーズさん、ありがとうございました！ 次回もよろしくお願いします！参加していただき盛り上げていただいた参加者の皆さんもありがとうございました。 昨日も紹介しましたが、Elasticsearch Advent Calendar 2014を用意してみました。まだ、空きがありますので、登録お待ちしております！ 今回は出足が好調で、早々に180人の枠を超えるという嬉しい事態でした。 最終的な参加人数は130名程度で、懇親会参加者が50名弱といったところです。 「Kibana4」 Elasticsearch Inc. Jun Ohtani @johtani スライド：Ki
Elasticsearch at CrowdWorks
第7回 Elasticsearch勉強会(http://elasticsearch.doorkeeper.jp/events/16837)の登壇資料です。 http://engineer.crowdworks.jp/Read less
Introduction_analysis_and_query_dsl_for_print.key
! 2014/04/21 @johtani Twitter @johtani lucene-gosen elasticsearch-extended-analyze http://blog.johtani.info ElasticSearch Server 0.90.x Kibana Kuromoji Kindle BOOKWALKER Doorkeeper Doorkeeper http://elasticsearch.doorkeeper.jp ! Google Groups https://groups.google.com/forum/#!forum/elasticsearch-jp Analyzer = CharFilter Tokenizer TokenFilter DSL elasticsearch-extended-analyze 1 2 1 2 1 2 1 2 Term
elasticsearch-extended-analyzeを公開？
どーも。以前の記事で開発中としていたプラグインですが、とりあえず、pluginコマンドでインストール出来る形にしてみました。 インストールなどについては、READMEに記載したのでそちらを参照してもらうことにして、試行錯誤した話をメモとして残しておきます。 プラグインの開発はしいてたのですが、やっぱりpluginコマンドでインストール出来ないと使ってもらえないよなということで、勉強会も終わったのでちょっと調べてました。 プラグインコマンド コマンドが用意されてますが、実態はJavaで実装されてて、通常はこんなかんじでプラグインをインストールします。 ./bin/plugin -i elasticsearch/elasticsearch-analysis-kuromoji/1.6.0 この「elasticsearch/elasticsearch-analysis-kuromoji/1.6.0
elasticsearch-extended-analyzeプラグインを開発中
お久しぶりです。 気づいたらまた、結構ブログを書いてなかったです。。。 今回は、今開発しているElasticsearchのプラグインに関するお話です。 いやぁ、名前決めるの難しいですね。これで英語的に合ってるか不安ですが、elasticsearch-extended-analyzeというプラグインを作っています。 どんなもの？ Solrの管理画面のanalysisに相当する機能が欲しくて作り始めました。 Elasticsearchにはanalyze APIというAPI（名前あってるのかなぁ?）が存在します。 これは、文字列を投げると、指定したアナライザやトークナイザでどのようなトークンに分割されるかを調べることができるAPIです。 例えば、elasticsearch-analysis-kuromojiをインストールしたElasticsearchに対して、以下のcurlコマンドを実行します。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
babyshark.info
Loading...
http://blog.inouetakuya.info/entry/2014/12/11/180106
http://blog.inouetakuya.info/entry/2014/11/24/203210
Elasticsearch Server, 2nd Edition
Elasticsearch as a NoSQL database
niconicoの検索を支えるElasticsearch // Speaker Deck
http://blog.yoslab.com/entry/2014/11/18/203159
