labunixのブックマーク - はてなブックマーク

有料版GeoIP Cityの料金体系や、無料版GeoLite Cityとの精度の違いについて調べてみた - Y-Ken Studio
IPアドレスを元に位置情報を返すデータベース、GeoIPがあります。こちらの料金体系や精度について調査したので、まとめました。利用例 GeoIPデータベースは、次のような用途があります。アクセス元の地域を判定し、最寄りのローカル情報を提供するログのIPアドレスから計算した付加情報として付与し、解析に役立てる但し前者についてはスマホが普及したことにより、GPSを用いた正確な位置情報が使えるようになりました。 GeoIPを使うか、そのHTML5のGeolocation APIを使うかはケースバイケースで考慮しましょう。構成例次のような組み合わせでGeoIPを使うことが出来ます。 Apache に mod_geoip を入れて、環境変数に位置情報を付与する http://dev.maxmind.com/geoip/legacy/mod_geoip2/ fluent-plugin-g
labunix 2016/03/07
リンク
elasticsearchを全文検索サーバとして活用するなら読んでおきたい、6つのブログ記事をピックアップ（追記あり） - Y-Ken Studio
LuceneベースのNoSQL全文検索サーバ、elasticsearchはログ解析の収集先として取り上げられることが多いですが、優れたNoSQL全文検索サーバでもあります。日本でも2013年末頃から続々とブログ記事や利用事例が増えている注目の技術でもあります。今回は、その中で全文検索サーバとしての切り口で分かりやすく解説された6つの記事を紹介します。（追記）Hello! Elasticsearch. — Medium ナレッジワークス株式会社のKunihiko Kidoさんによるとても分かりやすい記事です。 https://medium.com/hello-elasticsearch 2014年4月に入ってから怒濤の勢いでこれらのステキな記事が追加されています。 Elasticsearch Features — 主にシステムを中心とした特徴まとめ Elasticsearch Quic
labunix 2014/04/06
リンク
IPアドレスを元に位置情報をリアルタイムに付与する fluent-plugin-geoip v0.0.1をリリースしました #fluentd - Y-Ken Studio
FluentdのレコードにあるIPアドレスを元に位置情報を付与するプラグインをリリースしました！これを使えば、Maxmind社の提供するGeoIPというデータベースを利用してリアルタイムに位置情報を付与できます。パフォーマンスを重視するため、BufferedOutputをベースに、GeoIPのC拡張を利用した設計としました。 y-ken/fluent-plugin-geoip https://github.com/y-ken/fluent-plugin-geoip http://rubygems.org/gems/fluent-plugin-geoip それでは早速使い方の紹介を行います。使い方インストール方法 # fluentdをシステム側に入れている場合 $ gem install fluent-plugin-geoip # td-agentを使っている場合 $ sudo /u
labunix 2013/08/11
リンク
GrowthForecastをinit.dを用いて自動起動する方法 - Y-Ken Studio
グラフツールであるGrowthForecastはFluentdと組み合わせた利用で一躍有名となり、自分にとっても欠かせない存在となりつつあります。ところがOS起動時の自動起動としたくても、公式サイトには以下の記述のみでした。起動コマンド $ growthforecast.pl --data-dir /home/user/growthforecast http://kazeburo.github.io/GrowthForecast/ なんというか、ストイックすぎる・・・！もちろん、start-growthforecast.sh的な起動スクリプトを作成し、/etc/rc.d/rc.localあたりから呼び出せば動きはしますが、自分以外の人が触るサーバだったりすると運用が引き継ぎづらいですよね。そんな事がきっかけに、GrowthForecastのinitsciprtを作りましたレポートを
labunix 2013/04/27
リンク
自在にタグを書き換える fluent-plugin-rewrite-tag-filter でログ解析が捗るお話 #fluentd - Y-Ken Studio
皆様、ログ解析を行っていますか？ GoogleAnalyticsも便利ですが、表で取れないデータの解析も行いたいですよね。そんな時にfluentdが便利です。内部の生ログからの解析が捗る、fluent-plugin-rewrite-tag-filter が安定版となりましたので、設定例を交えつつ紹介したいと思います。このプラグインは100台規模の本番環境で1ヶ月少々、特にトラブルもなく稼働しているものです。はじめに Amazonでは応答速度が0.1秒遅くなると売り上げが1％減ると言われているように、Webアプリケーションの応答速度はとても重要なものです。機能追加による性能劣化は良くある話で、応答速度等の見える化を行う事で迅速な対応が取れば売り上げ等への影響も軽微です。パフォーマンス改善等の指標として利用する場合のユースケースを紹介したいと思います。 fluentdとはリアルタ
labunix 2012/07/02
リンク
1