Google先生の検索結果リンクが予想以上に作り込まれていた件 - Y's note
Index 検索結果のリンクは単なるRedirectorでは無かった 検索結果のhttps化 httpsからhttpページへの遷移ではブラウザはRefererを送らない Google先生はRerererを送る仕組みを実装してくれた Refererが送信される処理の流れを追う httpsからhttpsページへの遷移はどうなるか Google Analyticsで検索Queryが「not provided」となる本当の理由 まとめ 検索結果のリンクは単なるRedirectorでは無かった 知らなかったのが僕だけだったら凄い恥ずかしい内容なんですが、今までGoogle先生の検索結果として表示されるリンクのURLはGoogle内部でClick集計するためのRedirector機能だと思っていました。カウントアップの集計を記録したら本来のURLに遷移させるような。当然そのClick数を集計する機能も
新語 造語 未知語 の検出手法 : 研究開発
自然言語処理において、 辞書は単語の文法的意味の情報源として必要不可欠であり、辞書に登録されていない単語を減少させるため、 辞書の語彙を増強する努力がなされている。 新語や専門用語は絶えず増え続けているため、 辞書作成の作業は多大な労力を要するのみならず、 各解析段階での未知語との遭遇は避けられず、大きな問題の一つとなっている。 ※当然ですが 形態素解析が必要な言語のみの研究です。 これができていないと 妙な箇所で形態素分割することになります。 ヒューリスティックな検出は色々ありますが、ヒューリスティックではない統計的方法です。 概して、単語（と見なせるかもしれない記号列）の前後情報から最も尤もらしいモデルを推定します。 出現頻度と連接頻度に基づく専門用語抽出 湯本紘彰 森辰則 横浜国立大学 中川裕志 東京大学 情報処理学会研究報告. 自然言語処理研究会報告 2001(86) ターム性
30分で理解する自然言語処理 まとめ - プログラマでありたい
今まで何本か日本語処理のエントリーを書いてきました。後で振り返り易いように、ここらで一覧にまとめておきます。 wikipediaのダウンロード&データベースにインポート コーパスとして、wikipediaの存在はありがたいです。まずはここから始めるのが良いですね。併せて紹介しているxml2sqlも秀逸です。 特徴語抽出のあれこれ あれこれと言いつつ形態素解析とYahoo APIを使った特徴語抽出のみを紹介しています。手軽に出来るのが魅力です。 ベイジアンフィルター Perlで作りたい人に教えてあげたいちょっとしたこと Algorithm::NaiveBayesの使い方を簡単なサンプルで紹介いたしました。割と好評です。ベイジアンフィルターの人気の高さを垣間みれますね。 TermExtract Perlで出来る特徴語抽出 TermExtractという専門語抽出モジュールの紹介です。TermEx
Yahoo！検索語データを無償提供 研究プロジェクト向けに
国立情報学研究所（NII）は2月28日、Yahoo！JAPANの検索語データを研究用に無償提供することでヤフーと合意したと発表した。大規模な検索語データの研究利用は国内初としており、新しい検索技術の研究が進むと期待している。 文部科学省が補助するプロジェクト「情報爆発時代に向けた新しいIT基盤技術の研究」（代表・喜連川優東京大教授）に参加する研究者に、NIIを通じて4月から提供する。 Yahoo！検索の検索語から、実際に検索された上位1万件の検索語と検索回数を抽出して提供する。NIIは「現実の検索エンジンに投入される検索語の特徴の分析が進めば、新しい検索手法の研究への大きなインパクトが期待できる」としている。 3月3日に東京・秋葉原で説明会を開く。試作システムのデモなども行う。
gooキーワードストリーム - goo ヘルプ
gooキーワードストリーム 「gooキーワードストリーム」は、Microsoft® Windows Vistaに標準搭載されるWindowsサイドバー(*)に、「goo」のウェブ検索サービスでユーザが「今」検索している様々なキーワードをRSS配信し、パソコンのデスクトップにリアルタイムでストリーム表示します。 画面内に流れているキーワードをクリックするとブラウザが自動的に起動し、当該キーワードでの「goo」ウェブ検索結果を表示します。また、検索窓にキーワードを入力してウェブ検索結果を表示させることも可能です。 インターネットで飛び交う情報は日々変化することから、それら情報を手に入れるための適切な検索キーワードをみつけるのはより難しくなっています。「gooキーワードストリーム」は、他のユーザの関心事について検索キーワードを通じてリアルタイムに知ることができるので、最新の情報や動向
言葉の可視化
最近、様々なスピーチをタグクラウド化するというのが流行っていましたが（参考：タグクラウドの意外な使い方、Microsoft の進化が分かるタグクラウド）、以下のツールもそんな「言葉を可視化する」手法の1つでしょう。New York Times に、ブッシュ米大統領が就任から現在まで（2001年～2007年）に行った就任演説と一般教書演説（State of Union Address）を分析できるツールというものが掲載されていました： ■ The 2007 State of Union Address (New York Times) アクセスすると、以下のような画面が表示されます： 画面左上からキーワードを入力できるようになっていて、何らかの単語を入れて実行すると、結果がその下に表示されます。左側にある列は、一本一本が毎年の演説を示していて、その年に検索キーワードが使われていれば赤いドット
“話題のキーワード”は真実を語る？
いざなぎ超え呼ばれる好景気の中、各企業が取り組むWebマーケティング。その中で注目されている1つが、ブログで語られるキーワードをリアルタイムに集計し、活用するという手法だ。 “話題のキーワード”を知っているだろうか。 さまざまな呼び方をすることがあるが、ここで言う“話題のキーワード”とは、現在、ブログで語られている文章をキーワード化して集計、そしてランキング化するというものである。キーワードの上位に入る話題が、より多くのブログで語られていると結びつけられるものだ。今回は、この“話題のキーワード”が実際のマーケティングに役立っているのか？ そしてキーワードは市場動向の真実を語っているのかの点について論じてみようと思う。 これまでも、上記のようなランキング判定は、週間や月間などといった単位でネットや雑誌などで発表されていた。しかし、すさまじい勢いで情報が行き交う現代、一般ユーザーならいざ知らず
はてなダイアリーキーワードふりがなリストを公開しました - はてなダイアリー日記
本日、キーワード名とふりがなが対になっている、はてなダイアリーキーワードふりがなリストを公開しました。ユーザー様が独自に作成されている辞書などで、名詞の読み仮名などでご活用いただくと便利かと思います。 以下のURLを右クリックでファイルに保存してご覧ください。 http://d.hatena.ne.jp/images/keyword/keywordlist_furigana.csv http://d.hatena.ne.jp/images/keyword/keywordlist_furigana_with_kid.csv (キーワードID つき) ※タブ区切りの csv 形式、文字エンコードは EUC で改行コードは LF となっております。 ※ファイルサイズが本日現在 4M 強ほどあります。ブラウザで開く際はご注意下さい。 このリストをは定期的に最新情報に更新しています。どうぞご利用下さ
はてなキーワードAPIからはてなキーワード一覧を取得する - odz buffer
technical note - はてなダイアリーキーワードと辞書 こうですか？良くわかりません。 % wget http://d.hatena.ne.jp/images/keyword/keywordlist % python extractkeyword.py keywordlist > keywordlist.extracted % grep java keywordlist.extracted | head -n 10 10688:java 10689:java community process 10690:java computing 10691:java desktop system 10692:java ee 10693:java press 10694:java se 10695:java server faces 10696:java studio 10697:java
[を] 検索キーワードリストRSSいろいろ
検索キーワードリストRSSいろいろ 2006-04-28-2 検索キーワードリストをRSSとして提供しているサイト（調査中）： キーワードランキング - goo ランキング http://ranking.goo.ne.jp/keyword/ gooウェブ検索 急上昇ランキング (総合) http://ranking.goo.ne.jp/ranking/001/keyrank_all1/ http://ranking.goo.ne.jp/rss/keyword/keyrank_all1/index.rdf @nifty:@search:瞬！ワード (ref. [2003-06-20-1]) http://www.nifty.com/search/shun/shun_head.htm http://www.nifty.com/shun/rss/index.rdf lived
livedoor キーワード、ブログでの使用頻度を視覚化した「流行解析」
ライブドアは18日、「livedoor キーワード」ベータ版に流行解析機能を追加したと発表した。各キーワードがブログで使われている頻度をグラフと数値で把握できる。 流行解析はキーワードに付与したタグごとに表示され、タグが付与されたキーワードがブログで利用された割合を数値とグラフで表示する。「韓国俳優」というタグの場合、タグが付与された「ヨン様」「チェ・ジウ」「クォン・サンウ」のようなキーワードの使用率を、「韓国俳優の28％はヨン様で出来ています」といった流行成分として表示する。 livedoor キーワードはlivedoor 検索と連動しており、livedoor Blog以外のブログサービスで使われたキーワードも対象に含まれる。なお、流行成分の対象はブログで使用されたキーワードのため、タグが付与されたキーワードがブログで使用されていない場合には流行成分が表示されない。
livedoor
1【170枚】お も し ろ 画 像 で 笑 っ た ら も う 寝 な さ ...不思議.net 2【速報】卓球の伊藤美誠さん、とんでもない偉業を達成！！！！...NEWSまとめもりー｜... 3監督・稲葉篤紀（アジア大会優勝、プレミア12優勝、オリンピッ...なんじぇいスタジア... 4最近私が夜10時に寝れるようになった理由まめきちまめこニー... 5トヨタさん、金メダルかじり名古屋市長にマジのガチでブチギレ...オレ的ゲーム速報＠... 6五輪組織委員会「かんだメダルは交換対象外」 河村たかし市長...痛いニュース(ﾉ∀`... 7嫁に離婚してと宣告されたハムスター速報 8【悲報】ピクセルリマスター版『FF3』開発者の余計なメッセー...はちま起稿 9国「900兆円も借金あるわ...」←銀行に命令して刷ればいいじゃ...【2ch】ニュー速ク... 10【やべっ】前の車が「青信号」に
2ch各板不徹底図解
2ちゃんねらーのグズども、おはようございます。 今回は、2chの板から気になる単語を抽出して、 図解するプログラムを作ったので、おまえら見てください。 ある板の上のほうにある100スレを取って、形態素解析し、単語を抽出して、 その単語が出現するスレとリンクを張って表示しました。 例を示しましょう。ゲームのネタでも比較的わかりやすそうな、 家庭用ゲーム こんな感じ。抽出された単語と、その単語が出現したスレが書いてある。 単語とスレの間の線は、どの単語がどのスレに出現したかを示す。 単語の緑枠の大きさは、総出現数とだいたい対応している。 かまいたち発売直後だからか、中心にはサウンドノベルとチュンソフト。 そのちょっと下にはいまだにゼノギアスがいる。 シルバーガンとかジルオール、ルーマニア、イコなどの 微妙な良作マイナーゲーが外周に配置されている。 まあまあうまく抽出できてると思う。 ノイズだら
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.yasuhisa.com/could/entries/001098.php
タグ検索de【くつろぐ】 web2.0
GREE Engineering
KEYWALKER 『BlogSphere（ブログスフィア）』とは？
http://www.blogmill.jp/
http://pocari.org/tools/ajax/opensearch/
はてなダイアリーキーワード連想語APIとは はてなの人気・最新記事を集めました - はてな
