Fluentdで始めるリアルタイムでのログ有効活用
はじめに Fluentdは、ログを収集し格納するためのログ収集基盤ソフトウェアです。Fluentdにインプットされた、すべてのログをJSONに変換し、アウトプットします。インプットとアウトプットはモジュール化されており、モジュールを追加することでインプット元とアウトプット先を追加できるようになっています。 Fluentdは急速に知名度を高め、多くのWebサービス会社で実際に使用されるようになりました。従来のログが抱えていた問題も、Fluentdが適切な解決策となっていると認知され、かつ簡単に導入・スモールスタートできるミドルウェアであったことが大きかったと思います。 本稿では、Fluentdの簡単な仕組みと導入方法、シンプルな動作事例について紹介します。 対象読者 システム管理者 データサイエンティスト 必要な環境 UNIX系OS Ruby 1.9 ログを出力する理由 システム運用を始める
Yahoo! API の「校正支援」と「かな漢字変換」のサンプルプログラムを作ったよ
Yahoo! API の「校正支援」と「かな漢字変換」のサンプルプログラムを作ったよ 2008-07-11-1 [Programming][NLP] Yahoo!デベロッパーネットワークの「テキスト解析」のシリーズで、 最近、校正支援APIと仮名漢字変換APIが出ました。 それを使った簡単なサンプルプログラムを作ってみました。 明日のプレゼン[2008-07-07-1]で使うかも使わないかも。 ■校正支援Webサービス http://developer.yahoo.co.jp/jlp/KouseiService/V1/kousei.html 日本語文の校正作業を支援します。文字の入力ミスや言葉の誤用がないか、 わかりにくい表記や不適切な表現が使われていないかなどをチェックします。 入力テキストの校正箇所を黄色くハイライトし、 そこにマウスカーソルののせると解説がポップアップされるというデモ
ベクトル空間モデルで類似記事を探して表示するブログパーツ「シムエントリ」
ベクトル空間モデルで類似記事を探して表示するブログパーツ「シムエントリ」 2008-02-22-3 [WebTool][NLP] 類似記事を表示してくれるブログパーツが公開されています。 - 【シムエントリ】記事同士でブログをむすぶブログパーツ http://se.koemu.com/ - こえむの編集後記 > ブログを記事で結ぶブログパーツ『シムエントリ』をリリース http://www.koemu.com/blog/2008/02/21/sim-entries/ ベクトル空間モデル (Vector Space Model) で、 類似文書を検索。単語の重み (term weight) は TF-IDF。 JSON API もあり。 登録したブログの RSS に含まれるエントリのみが表示対象だそうです。 まだサービス開始から間もないので、 しばらくは偏ったブログのエントリしか出てこないか
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
