はじめまして。キナリノとキナリノモールのサーバーサイドエンジニアをしている加藤です。 キナリノとキナリノモールは自分らしい暮らしを楽しむ人へ、「これが好き」、「これが心地よい」と感じてもらえるお買いもの体験と情報を提供しているサービスです。 そんなサービスなので、情報を提供する記事だったりアイテムの検索が重要になります。今回は新卒2年目の時にトレーナー兼キナリノモール側の導入経験者の先輩社員からサポートを受けつつ私がキナリノの記事検索にElasticsearchを導入した話を紹介していきます。 (2023年9月時点で新卒4年目) 導入の背景 もともとキナリノの記事検索の機能はあったのですが、検索対象が記事タイトルのみだったため、タイトルには使われていなく本文だけで使用されている単語で検索するとヒットしない実装でした。また、既存検索では検索ワードでのわかち書きを行なわないため「北欧 雑貨」と

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

Search and analytics, data ingestion, and visualization – all at your fingertips.

諸事情でElasticSearchの事ばっかり書いてますが、Solrの方が好きです。 ElasticSearchのインデクシングを高速化するためにやった事を残しておきます。 基本的には↓に書いてあることばかりです。 Performance Considerations for Elasticsearch Indexing | Elastic データ投入方法 データの投入にはBulk APIを使います。 なお、公式では1つのbulk Importのサイズは5~15MBにすることを推奨しています。 curl -XPOST http://localhost:9200/_bulk --data-binary @databatch.json >/dev/null メモリ関係 ES_HEAP_SIZEに実メモリの半分程度を割り当て、mlockall:trueでElasticSearchのメモリがスワッ

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

ここではcurlではなくrubyのgemであるelasticsearch-railsを利用した場合の更新方法をメモ代わりに記載します。 マッピングの追加は単純に以下を行えばできると思います。 ただしマッピングを変更する場合、例えば既存のindexに項目を追加する際に上記コマンドを打つと400エラーになることがあります。 解決方法は二つ 解決方法1（おすすめしない） 単純にindexを削除して、作り直せばOKです。 ただ、Elasticsearchを使用している場合、大量にデータをindexingしている場合が多く、時間がかかってしまう場合があり、おすすめできません。 ユーザ影響も出るのでシステム停止も必要になります。 ローカルや開発環境ではこの方法でも良いかもしれません。 解決方法2 マッピングを更新します。 Elasticsearchにはマッピングを更新するクエリがあるので、それを利用し

Today, we are proud to announce the release of Elasticsearch 7.0.0 GA, based on Lucene 8.0.0. This is the latest stable release and is already available for deployment via our Elasticsearch Service on Elastic Cloud. A big thank you goes out to all the Elastic Pioneers who tested early versions and opened bug reports, and so helped to make this release as good as it is. Go and download it today! Do

Elastic再入門 Jun Ohtani, Kosho Owa 2019/03/20 @Elastic どのくらい再入門？ Elasticsearch (Es) 0.90系から触ってない人？ Kibana 3系 Es1.x系から触ってない人？ Kibana 3系 5 Es2.x系から触ってない人？ Kibana 4系 7 5.x系から触ってない人？ Kibana 5系 9 6.2系から触ってない人？ 11 Elastic Stackとは？ !12 Elastic Stack Kibana 可視化、管理 Elasticsearch 保存、検索、分析 Beats Logstash インジェスト Application Search Metrics Elastic Stack Site Search APM Enterprise Search Logging Business Analytic

Elasticsearch のデータタイプには Object datatype と Nested datatype というものがある。 Object datatype | Elasticsearch Reference [6.6] | Elastic Nested datatype | Elasticsearch Reference [6.6] | Elastic これを説明する前にオブジェクト指向な考え方について知っておかなければいけないが、これを書いている人間はつい最近まで「オブジェクト指向とはなんぞや？」という人間だったため詳しい人からすると誤った考え方をしているかもしれないのでその辺をご容赦いただいた上で読んでもらいたい。 オブジェクト指向的なデータの作り方 非オブジェクト指向的な考え方の場合、データを下記のような構造で作成すると思う。こういうデータ構造が出来ないわけではないし間違

multipart/form-dataの省メモリパース / Go Conference 2024 Pre Party #gocon24_preparty

“技術的負債多すぎ問題”を解決するためにやったこと 「タップル誕生」におけるサービス改善の舞台裏 タップル誕生における、事業成長に合わせた継続的なシステム改善について 2018年12月6日、株式会社リンクアンドモチベーションのイベントスペースにて、エンジニア向けの勉強会に特化した書き起こしメディア「ログミーTech」が主催するイベント「ログミーTech Live #2」が開催されました。第2回となる今回のテーマは「レガシーシステムのリニューアル」。長期間運用され、設計が古くなってしまった「レガシーシステム」のリニューアルを行った3社が一堂に会し、システムリニューアルにおける知見と新システムへの移行について語ります。プレゼンテーション「タップル誕生における、事業成長に合わせた継続的なシステム改善について 」に登場したのは、株式会社マッチングエージェント、タップル誕生サーバーサイドエンジニアの

オブザーバビリティも、セキュリティも、検索ソリューションも、Elasticsearchプラットフォームならすべて実現できます。

Jun Ohtani @johtani 今年一発目の外で講演はもちろん、いつものEs勉強会です。来週水曜日を予定してまーす。/ 第28回Elasticsearch勉強会「6.5機能紹介」2019.01 #elasticsearchjp | Meetup - meetup.com/ja-JP/Tokyo-El… 2019-01-08 11:24:07 Jun Ohtani @johtani NTTテクノクロスの山下さんのタイトルなどを追加しましたー。来週水曜日でーす。/ 第28回Elasticsearch勉強会「6.5機能紹介」2019.01 #elasticsearchjp | Meetup - meetup.com/ja-JP/Tokyo-El… 2019-01-09 12:31:08

この記事は NTTテクノクロス Advent Calendar 2018の11日目の記事です 。 こんにちは、NTTテクノクロスの畠中です。 IoTデータ分析チームに所属し、現在は農業ベンチャーである株式会社デザミスと連携して牛の行動モニタリングサービスU-motion®の開発に携わっています。 今日の記事では、運用監視機能として障害の発生状況を可視化する仕組みをEFKスタック（Elasticsearch, fluentd, Kibana）で構築した内容についてご紹介します。 はじめに U-motion®のサービス概要はこちらの動画をご覧ください。 概要としては牛にセンサータグを装着し、行動を常時モニタリングすることで発情や疾病など生産性に影響を与える事象をアラートとして検出し、農家の生産性向上に貢献していくサービスとなります。 常時モニタリングするためにシステムが安定して稼働することが非

Jun Ohtani @johtani ちなみに、今年の日本でのコミュニティイベントは、来週の忘年会が最後でーす。ご参加お待ちしておりまーす。 / 第27回Elasticsearch勉強会「LT&忘年会」2018.12 #elasticsearchjp | Meetup - meetup.com/ja-JP/Tokyo-El… 2018-12-11 14:32:50 kaiba @kaiba 第27回Elasticsearch勉強会「LT&忘年会」2018.12 #elasticsearchjp meetup.com/ja-JP/Tokyo-El… #Meetup LTをします〜。「検索だけじゃないElasticsearch入門」、通称エラ本の物理本の販売します。(もちろん許可を得ていますのでご安心ください)。 2018-12-12 00:03:13 Jun Ohtani @johtani

オブザーバビリティも、セキュリティも、検索ソリューションも、Elasticsearchプラットフォームならすべて実現できます。

Elastic{ON} Tour Tokyo 参加報告 Elastic{ON} Tour Tokyo参加レポートをお届けします！ 当日の会場の様子やセッション内容を載せていますので、イベントの空気を少しでも感じていただければ幸いです。