Webstemmer（クローラーツール）
日本語サイトでは、具体的な性能は測定していませんが、 以下のようなサイトで正しく動くことがわかっています: アサヒ・コム Nikkei NET Mainichi INTERACTIVE Yomiuri On-line IT media 東京新聞 日刊スポーツ 信濃毎日新聞 livedoor ニュース 使いかた Webstemmer をつかったテキスト抽出は以下のようなステップになります: まず、特定のニュースサイトから種となる HTML ページを多数取得する。 取得したページのレイアウトを学習する。 別の日に、同一のニュースサイトから新しい HTML ページを取得する。 2. で学習した結果をつかって、新しい HTML ページから本文を抽出する。 1. および 2. のステップが必要なのは最初の 1回だけです。 ひとたびサイトのレイアウトを学習してしまえば、 あとはレイアウトが大きく変更さ
mixi Engineers’ Blog » mixi日記キーワードランキングの秘密
皆さん、先月の半ば頃からmixiのトップページの3列目に「日記キーワードランキング」というコーナーが登場していたのをご存じでしょうか。手前味噌ながら、これはとても面白い機能で、毎日ランキングが更新される度に素敵なランキングが作られていて悦に入っているmikioです。今回は日記キーワードランキングの秘密についてお話します。 日記キーワードランキングとは、日記に書かれた言葉の使用頻度を統計的に処理して、今話題になっている度合を算出し、その上位をランキング形式で表示する機能です。トップページには5位までが表示されるので、それをチェックするだけで最新の流行を把握することができます。さらに「30位までを読む」に進むと30位までのキーワードとその関連日記が表示されます。詳細を知りたい場合はキーワードをクリックすると、そのキーワードで日記検索をした結果を見ることができます。一通り見るのに10分くらいでし
peacepact : はてなブックマークで自分のブックマークをお気に入りにしているユーザを知る方法 - HBM Quick Hack
現在日本発では最大規模 (?) のソーシャルブックマークサービス，はてなブックマークですが，お気に入りという機能があって他のユーザのブックマークをクリッピングしてはてなブックマークの自分のお気に入りページに表示させる機能があるんです。 逆に自分がブックマークされた場合には，人数だけは表示されるのだが ID は表示されない＝誰がブックマークしたのが不明なわけなんです。誰がブックマークしたか知りたいという要望は割と出てるのですが，(下のはてなアイデア) そんな機能実装しなくても半数くらいは知ることができます。全数とまではいかないようですが。(だってプライベート機能があるし，拾い損ねもあるしなあ。それに万能じゃないと思うし。最善はシステム側でこういう機能を用意すればいいんだけど。) はてなアイデア - はてなブックマークをお気に入りに登録しているユーザーがどなたか知りたい、ユーザー同士のつながり
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
はてなブログ | 無料ブログを作成しよう
静岡大学キャンパス・キャラクターの名前は”しずっぴー”に決定