[B! elasticsearch] decoy2004のブックマーク

『サイバーエージェント新卒エンジニア技術研修2016』

みなさんこんにちは。技術組織戦略G & 技術内閣の板敷です。普段はAmebaのシステム障害の火消し → 障害対策ならびにエンジニアの育成評価等をしています。今回は、先日終了したサイバーエージェント新卒エンジニア技術研修について紹介したいと思います。研修概要従来の研修内容を一新、内製での技術研修に挑戦これまでの新卒技術研修は委託先講師の話を新卒全員が聞くという、いわゆる「座学中心」の研修でしたが、ここ数年の技術的進歩、組織内でのエンジニアに対する期待の変化を反映するため、内製での研修へとゼロから再設計しました。研修のコンセプトと概要ベースとなる研修のコンセプトは以下2点からなります。全体のアーキテクチャを俯瞰して設計、技術選定をする自分の頭で考え、動くこれらのコンセプトを実現するために今回の研修では、2つの某有名サービスを自分たちで設計、実装するという形をとりました。研修

decoy2004 2016/06/03

リンク

Elasticsearchを使うときの注意点を社内で発表しました。 - Taste of Tech Topics

こんにちは、fujiiです。最近、社内でもElasticsearchを使う機会も増えてきてました。インストールも簡単ですし、ちょっと設定するだけでログの解析も手軽にできるので、便利だと思って使い始めるのですが、・必要以上に負荷のかかる設定になっている。・システムダウンしたときの復旧を考慮していなかった。・初期構築などで大量にデータを入れようとしたら、一部データが入っていなかった。と、後から反省することも多くあります。（私も最初は知らないことが多く、反省点ばかりでした）そのため、Elasticsearchを初めて使うときの注意点をまとめ、社内で講習会を開きました。以下に公開しました。実際に案件で利用しようと思った時にパフォーマンスなどで迷うこともありますので、そんな時の一つの参考になればと思います。 Elasticsearchを使うときの注意点公開用スライド f

decoy2004 2016/01/29

elasticsearch

リンク

Configuring Elasticsearch | Elasticsearch Reference [6.4] | Elastic

Self Managed Elasticsearch ships with good defaults and requires very little configuration. Most settings can be changed on a running cluster using the Cluster update settings API. The configuration files should contain settings which are node-specific (such as node.name and paths), or settings which a node requires in order to be able to join a cluster, such as cluster.name and network.host. This

decoy2004 2014/09/10

『Elasticsearch Disable swap 』

リンク

Elasticsearchのインデキシングに関するパフォーマンス検討

Elasticsearchのインデキシングに関するパフォーマンス検討原文：performance considerations for elasticsearch indexing Elasticsearchユーザは様々な楽しいユースケースを持っています。小さなログを追加することから、Webスケールの大きなドキュメントの集合をインデキシングするようなことまでです。また、インデキシングのスループットを最大化することが重要で一般的な目標となります。「典型的な」アプリケーションに対して良いデフォルト値を設定するようにしていますが、次のちょっとした簡単なベストプラクティスによってインデキシングのパフォーマンスをすぐに改善することができます。それらについて記述します。第一に、制御できないならば、巨大なJavaヒープを使用しない：必要なサイズ（マシンの持つRAMの半分以下）のheapだけを設定し