[B! elasticsearch] ichi_Sのブックマーク

Collecting and Analyzing Ruby on Rails Logs | Fluentd

Scenario You have an application written in Rails and want to collect data into Mongo DB, HDFS, Elasticsearch, et. al. for analytics/search. Logging directly into Mongo DB/HDFS/Elasticsearch is not highly recommended since synchronous logging is slow/potentially hazardous for the backend. You can build asynchronous logging into your application, but Fluentd can sit between your application and backe

ichi_S 2016/10/14

リンク

自分流Elasticsearch入門 - $shibayu36->blog;

【2016/09/10追記】勉強しなおして、Elasticsearchの知識についてさらにまとめた記事を書いたので、そちらを参照してもらうと良さそうです。 blog.shibayu36.org 最近Elasticsearchの勉強をした。ただ、入門のためどのような資料が適しているかを知るのが大変だった。そこでどのように勉強したかについてメモをしておく。少しまとめエントリー的なノリになりそう。 Elasticsearchの概念を知る全文検索技術の基本を知る Elasticsearchのドキュメントのたどり方を知るの順に学習を進めていった。 Elasticsearchの概念を知る Elasticsearchの学習を始めようとした時に、まずは基本からということで以下の本を読んでいた。高速スケーラブル検索エンジン　ElasticSearch Server (アスキー書籍) 作者:Ｒａｆａｌ

ichi_S 2015/08/31

elasticsearch

リンク

「関連する○○」機能を手軽に実現できる。そう、Elasticsearch ならね。 - クックパッド開発者ブログ

セコン (id:secondlife, @hotchpotch) です。ウェブサービスにはよく「このエントリーに関連するブログ記事」や「このレシピに関連するレシピ」という機能が実現されてますよね。さて、この機能はどのように実現すれば良いでしょうか。例えば tf-idf で単語の類似度を求め…といった実装が必要になり、いささか面倒です。しかしながら Elasticsearch や Solr *1を使うと手軽に実現できます。例えば、クックパッドニュースの記事では Solr を使い「この記事を読んだ人におすすめ」の機能に、最近クックパッドにジョインしたインドネシアの会社の DapurMasak では Elasticsearch を使い「Resep serupa(関連レシピ)」の機能で利用しています。クックパッドニュースでのこの記事を読んだ人におすすめ DapurMasak での関連レシピ使

ichi_S 2014/09/24

elasticsearch

リンク

Kibana: Explore, Visualize, Discover Data | Elastic

Discover, iterate, and resolve with ES|QL on Kibana Run data analytics at speed and scale for observability, security, and search with Kibana. Powerful analysis on any data from any source, from threat intelligence to search analytics, logs to application monitoring, and much more.

ichi_S 2014/05/28

リンク

elasticsearch-extended-analyzeプラグインを開発中

お久しぶりです。気づいたらまた、結構ブログを書いてなかったです。。。今回は、今開発しているElasticsearchのプラグインに関するお話です。いやぁ、名前決めるの難しいですね。これで英語的に合ってるか不安ですが、elasticsearch-extended-analyzeというプラグインを作っています。どんなもの？ Solrの管理画面のanalysisに相当する機能が欲しくて作り始めました。 Elasticsearchにはanalyze APIというAPI（名前あってるのかなぁ?）が存在します。これは、文字列を投げると、指定したアナライザやトークナイザでどのようなトークンに分割されるかを調べることができるAPIです。例えば、elasticsearch-analysis-kuromojiをインストールしたElasticsearchに対して、以下のcurlコマンドを実行します。