Twitter、リアルタイム検索をLuceneで構築。50倍高速に！
Twitterのリアルタイム検索機能が、オープンソースのLuceneベースになったと、Twitter Engineeringブログへのエントリ「Twitter's New Search Architecture」で紹介されています。 これまでTwitterはリアルタイム検索にMySQLベースの独自システムを利用してきましたが、規模の拡大が難しくなってきたため、6カ月前に新システムの構築を決定。オープンソースの検索エンジンであるLuceneを選択したとのことです。 従来の50倍も高速に！ 検索エンジンに対する要件は以下のように非常に厳しいものでした。 Our demands on the new system are immense: With over 1,000 TPS (Tweets/sec) and 12,000 QPS (queries/sec) = over 1 billion
グーグル、画像検索の新技術「VisualRank」の詳細を公開
文：Jonathan Skillings（CNET News.com） 翻訳校正：佐藤卓、矢倉美登里、高森郁哉2008年05月07日 14時24分 Googleが、現在進めている画像検索用の実用的なツールの作成に関して、より具体的な内容を明らかにし始めた。 Googleは米国時間5月1日、「Google Research Blog」の記事で、画像に関連付けられたテキストよりも視覚的な手がかりを利用して画像を分類する「VisualRank」システムについて手短に紹介した。また、その詳細を「PageRank for Product Image Search」と題する長めの資料（PDFファイル）に掲載した。これは、2008年4月下旬に北京で開かれたWeb技術に関する会議でGoogleの2人の研究者が披露した資料だ。 VisualRankシステムはまだ稼動しておらず、Googleは、この画像検索技
グーグル、ヤフーの存在は「鉄壁ではない」--最後発で日本の検索市場に挑む百度
GoogleやYahoo!も参入する中国で、圧倒的なシェアを獲得する検索サービス「百度（バイドゥ）」。2007年春に日本上陸を果たしたものの、これまではどちらかというと消極的な姿勢だったが、2008年に入ると積極展開に一転した。 日本でもGoogleとYahoo!が検索サービスのシェアの多くを握っている中、どのような戦略をとるのか？ 日本法人取締役の舛田淳氏に聞いた。 --中国でのシェアは7割以上と聞きますが、次の展開としてなぜ日本を選択したのでしょうか。 我々は2000年から8年間、中国のユーザーにサービスを展開していき、現在のシェアを獲得しました。そしてこの実績で、技術や資本といったものがある程度のレベルに達したと判断しました。 そこで海外展開となったですが、われわれは2バイト文字による検索のノウハウを持つので、2バイト文字を使用する地域でのサービス展開をしたいという思いがありました。
タグに頼らない画像検索に挑む北海道発のプロジェクト「Viewサーチ北海道」
北海道の風景画像を直感的なインターフェイスで検索できる「Viewサーチ北海道」が1月31日、実証実験サイトを公開した。 Viewサーチ北海道は、経済産業省が次世代検索技術の開発・実用化を目指して2007年度から開始した「情報大航海プロジェクト」の採択事業として、北海道大学と札幌に本社を構える5社（ソフトフロント、データクラフト、JR北海道、北海道新聞社、インテリジェント・リンク）がコンソーシアムを構成。文字に頼らない次世代画像検索技術「ビジュアル・コンテクスト・サーチ」を応用したサービスの開発・実用化を目指している。 今回の実証実験の目的について、コンソーシアムに参加する、ソフトフロントの村田利文氏とデータクラフトの鵜川久氏に話を伺った。 ● 類似画像をうまく並べれば、人間は瞬時に大量の画像を一覧できる Viewサーチ北海道で利用しているビジュアル・コンテクスト・サーチという技術は、北海道
BaiduがGoogleを抜く方法 - 池田信夫 blog
きょう世界第3位の検索エンジン、Baidu（百度）の日本語サイトの運用が始まり、それに合わせて中国本社のCEO、Robin Li氏が来日した。そのミーティングにまねかれたので行ってみたら、記者会見ではなく、佐々木俊尚氏やDan氏など、おなじみのブロガーばかり10人ほど。ブログから1次情報の出る日が来たのかもしれない。 気の毒な大手メディアのために、とりあえず第一報を提供しておくと、Li氏は39歳。NY州立大学で修士号をとった、絵に描いたようにハンサムな中国の新世代エリートだ。Baiduの中国内シェアは70％、世界市場シェアは5％で、Google、Yahoo!に次ぐ。日本での戦略は、Yahoo!などに対抗するのではなく、「セカンド・サーチエンジン」をねらうという。特徴は「遊ぶ」検索サービスで、動画検索や画像検索に力を入れる。漢字文化圏どうしの強みを生かして、検索精度も上げる。 ただし「キ
グーグル、新たな検索インターフェースを実験中--検索結果を好みで変更可能に:マーケティング - CNET Japan
Googleは、表示されたウェブ検索結果を好みに応じて変更できる新しいインターフェースをテストしている。 Google Experimental Labsのこの機能について解説したページによると、検索結果の各項目の右側にある青い上向き矢印のアイコンをクリックすると、その項目がページのトップに移動する。オレンジ色の星マークのアイコンをクリックすると、項目にマークが付きひと目で識別できるようになる。さらに、青い「X」のアイコンをクリックすると、その項目は削除され、以後同じキーワードで検索しても表示されなくなる。 検索結果をカスタマイズする方法は他にもある。検索結果を表示するページの下部では、入力したキーワードに関連するサイトのURLを指定することができ、次回同じキーワードで検索を実行すると、そのサイトがオレンジの星のアイコンとともに最上位に表示される。 Googleのある関係者は、この機能の実
フランスの検索市場でGoogleが90％を占める--世界をGoogleが支配する日は来るか
Read/WriteWebのネットワークのブログであるAltSearchEnginesは、フランスの検索市場の約90％（正確には89.98％）をGoogleが占めていると報じた。2位はYahoo！（3.17％）で、それにMSN（2.33％）が続く。2006年8月から2007年8月にかけての1年間で、Googleのシェアは3.76ポイント上昇している。次のグラフ（出典）からわかるとおり、Googleの競合4社はすべて同期間にシェアを落としている。 Microsoftが2000年代はじめのピーク時にIE6で90％の市場シェアを取り、今でもシェアが75％を超えていることを考えると、Google検索が世界で同じような優位性を得ることがあるのではないかと思える。すでにGoogleは、ソーシャルネットワークについてもFacebook以外の主要なプレイヤーを「OpenSocial」と呼ばれる同社のAPI
Microsoft，無償検索ソフト「Search Server 2008 Express」のリリース候補版を公開
Microsoft，無償検索ソフト「Search Server 2008 Express」のリリース候補版を公開 米Microsoftは米国時間11月6日，企業向けの無償検索ソフトウエア「Microsoft Search Server 2008 Express」を発表した。同社のWebサイトでリリース候補版（RC）をダウンロードできる。またMicrosoftは有償版の「Microsoft Search Server 2008」も提供する予定。 Search Server 2008 Expressは，企業向けポータル・サーバー「Microsoft Office SharePoint Server 2007」をベースとする企業向け検索サーバー・ソフトウエア。インストールできるサーバーの台数を1台に限定することで無償版とした。 導入/設定が容易で，Microsoftは「ダウンロードしてから30分
「初音ミク」画像、Googleに復帰
初音ミクのGoogle画像検索結果。「ぼく、オタリーマン。」表紙など関係ないとみられる画像も上位に残っている GoogleとYahoo！JAPANで「初音ミク」で画像検索した際、適切な結果が出ないことが10月17日ごろから騒動になっていたが、10月23日夜、Googleの画像検索におなじみの初音ミク画像が復帰した。Yahoo！JAPANでも検索結果が表示され始めている。 10月17日時点で、Googleでは関係ない画像が大量にヒットし、Yahoo！JAPANは検索結果ゼロ件という状態だったが、Googleの画像検索では10月23日午後9時までに、おなじみの初音ミクの画像が表示されるようになった。ただ検索上位に、初音ミクとは関係ないとみられる画像も多数残っている。
ヤフー、携帯電話向けにパーソナライズド検索を投入へ--2008年度中と明言
ヤフーは10月22日、携帯電話向けの検索サービスを強化する意向を明らかにした。ユーザーの嗜好や行動履歴から最適な検索結果を表示する「パーソナライズド検索」を2008年度中に実装する。また、10月22日からは一部の検索結果において、サイトへのリンクだけでなく求められている情報をそのまま掲載するサービスを開始する。 ヤフーはモバイル検索サービスにおいて、ユーザーが求めている情報を一目で得られるようにするというコンセプトを掲げ、これを「oneSearch」と呼んだ。具体的には、ユーザーの属性や検索履歴、行動履歴、利用する時間帯やエリアなどの情報をもとにユーザーが求める情報を推測し、検索結果の表示順位に反映する計画だ。 10月22日からはその第一弾として、ソフトバンクモバイルのポータルサイト「Yahoo!ケータイ」において検索結果の画面を変更した。地図やレシピなどが検索された場合には、検索結果の一
“消えた初音ミク”問題 ヤフーとGoogle「原因を調査中」 - ITmedia News
Yahoo！JAPANとGoogleの画像検索で「初音ミク」を検索した際、適切な検索結果が表示されないという事態が、10月18日午後3時まで続いている。グーグル、ヤフーとも「原因は調査中。早急に対策したい」としている。 Yahoo！JAPANで「初音ミク」を画像検索すると「次の条件に一致する情報は見つかりませんでした。検索キーワード：初音ミク」と表示される。これについてヤフーは「検索キーワードに対して適切な結果を出せておらず、当社の画像検索に対する大きな課題と受け取めている。原因を調査し、早急に対策したい」とコメントした。 Googleで画像検索すると、おなじみの初音ミクイラストは見当たらず、無関係な画像が多数表示される。グーグルは「何らかのバグではないかと考えている。『初音ミク』だけでなく、他キーワードでも同じような問題が起きている可能性がある。イメージ検索チームが対策に当たっている」と
⊂⌒⊃｡Д｡)⊃カジ速≡≡≡⊂⌒つﾟДﾟ)つFull Auto | 【圧力？】「初音ミク」でイメージ検索かけてもヒットせず。さらにwikipediaからも削除【TBS？】
This domain may be for sale!
グーグル、検索の「利き酒」コンテストを実施
検索の「利き酒」コンテストで、GoogleがMicrosoftやYahooよりも好まれているという結果が出た。 Google Operating Systemブログは先だって、3つの検索エンジンの名前を伏せたまま、ユーザーに使ってもらい、どの検索結果が最も良かったかを投票してもらった。2000人以上が投票した結果、Googleが51％の票を獲得し第1位となった。MicrosoftのLive Searchは35％、Yahooは30％の票を獲得した（編集部注：本調査では、ユーザーが複数の検索エンジンの検索結果を気に入った場合、複数のエンジンに投票することができた）。このブログ投稿に対して、MicrosoftがYahooより上位になったことを驚くコメントがユーザーから寄せられているが、同時にGoogleの割合がさほど高くなかったことに驚くコメントも見られる。 本調査では、ユーザーが自分の興味のあ
Googleキラー始動？ 自然言語検索のPowersetが限定公開 - ITmedia News
かねてから「Googleキラー」と噂されていた米Powersetが9月17日、テストサイト「Powerset Labs」を限定公開した。 Powersetは独自技術とPARC（XEROXパロアルト研究所）からライセンスを受けた技術を組み合わせて、単語やフレーズではなく文章でWebを検索する自然言語検索エンジンを開発している。同社の技術は現行の検索エンジンとは異なり、「Webページのすべての文章を読んで、その意味を抽出し、セマンティックインデックスを構築する」という。 同社はこれまで技術を公開していなかったが、このほどユーザーが同社技術を利用して、フィードバックを提供できるコミュニティーとしてPowerset Labsを立ち上げた。現在は招待制となっており、電子メールアドレスを登録して待つ必要がある。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Sony BMGなど3社、百度を著作権侵害で提訴
「死にたい」で検索した人に自殺予防ページへのリンク、Yahoo!が自殺対策
Google検索でスパム送信、演算子と「I'm Feeling Lucky」を逆用
「初音ミク」画像検索問題で、検索エンジンの“違い”に再び注目が
属性別の急上昇検索キーワードが一目瞭然、BIGLOBEが検索分析強化
人工知能サーチエンジン「Powerset」、一部技術を初めて一般公開