開発メモ: IndexDB: 転置インデックスのためのDB
大震災の時分に何だが、Kyoto Cabinetベースで検索エンジンの核となる転置インデックスを作るのに適したDBを実装したという話。 転置インデックスとappend操作 多くの検索エンジンの核となる転置インデックスとは、検索語に一致する表現がどこに出てきたかという位置情報のリストを保持するものであり、検索語をキーとして位置情報リストを値とする連想配列である（転置インデックスを使わない検索エンジンもあるが）。この位置情報リストをposting listとか呼んだりするらしい。転置インデックスにもいくつか流儀があり、検索語をどのように切り分けるかで単語（分かち書き）方式とか文字N-gram方式とか呼ばれるものがあったりするが、いずれにせよ、小さいキーと、非常にでかい値を保持する連想配列を作ることには変わりない。 で、素朴に転置インデックスを作ろうとすると、検索対象の文書を解析しながら、得られ
Google 検索を暗号通信で安全に使う方法 - WebOS Goodies
WebOS Goodies へようこそ！ WebOS はインターネットの未来形。あらゆる Web サイトが繋がり、共有し、協力して創り上げる、ひとつの巨大な情報システムです。そこでは、あらゆる情報がネットワーク上に蓄積され、我々はいつでも、どこからでも、多彩なデバイスを使ってそれらにアクセスできます。 WebOS Goodies は、さまざまな情報提供やツール開発を通して、そんな世界の実現に少しでも貢献するべく活動していきます。 Google 検索はどんどんパーソナライズが進んでいますが、それに伴ってプライバシーへの懸念も大きくなっています。検索キーワードはそれ自身がプライベートな情報ですし、履歴やスターの情報なども含めれば、漏れた時のダメージは Amazon おすすめ商品の比ではありません（笑）。 そのような状況に対応するため、 Google が試験的に SSL で暗号化された Goog
Wolfram|Alpha: Making the world’s knowledge computable
Compute expert-level answers using Wolfram’s breakthrough algorithms, knowledgebase and AI technology Mathematics ›Step-by-Step SolutionsElementary MathAlgebraPlotting & GraphicsCalculus & AnalysisGeometryDifferential EquationsStatisticsMore Topics »Science & Technology ›Units & MeasuresPhysicsChemistryEngineeringComputational SciencesEarth SciencesMaterialsTransportationMore Topics »Society & Cul
Jeffrey Dean
I joined Google in mid-1999, and I'm currently Google's Chief Scientist, focusing on AI advances for Google DeepMind and Google Research. My areas of focus include machine learning and AI and applications of AI to problems that help billions of people in societally beneficial ways. I have a broad variety of interests, including machine learning, large-scale distributed systems, computer systems pe
Google WSDM'09講演翻訳：大規模な情報検索システム構築における課題（１） - llameradaの日記
GoogleのFellowであるJeffrey Dean氏のWSDM'09における講演"Challenges in Building Large-Scale Information Retrieval Systems"のスライドを翻訳してみました。Googleの検索システムの10年間の進化の軌跡が紹介されており、興味深い話が満載です。個人的にはディスクの外周部と内周部を使い分けている話がツボでした。なお、イタリック体で一部解説・感想をいれています。翻訳は素人なので詳しくは元の資料を参照してください。 スライドの入手元：Jeffrey Dean – Google AI 検索システムに取り組む理由 チャレンジングなサイエンスとエンジリアニングのブレンド 多くの魅力的な未解決な問題が存在する。 CS（コンピュータサイエンス）の多数の領域にまたがる。 アーキテクチャ、分散システム、アルゴリズム、圧
SEO TOOLS
NEW! 2020/04/07 「SEO一括見積もり」のサービスを終了致しました。 これまでのご利用、誠にありがとうございました。 2017/10/31 提供サービスの整理に伴い、「おしえて！SEOTOOLS」のサービスを終了致しました。 これまでのご利用、誠にありがとうございました。 2016/06/20 17日より発生しておりましたツールの解析スピードの低下を修正いたしました。ユーザの皆様にはご迷惑をおかけしてしまい、申し訳ございませんでした。 2016年04月 ツールの利便性アップのため、「SEOアクセス解析ツール」と「VERSUS」において、以下の項目を削除しました。 ・Yahoo!関連情報 ・トラフィックランキング ・カテゴリ登録状況 ・PRサービス利用状況 よりシンプルに洗練されたSEOアクセス解析ツールをご活用下さい。 2016/04/21 15日～18日の間で、サービス
chromeのOpenSearchサポート « ku
chromeはopensearchをサポートしていて(ref. 独自のサイトでの検索を Google Chromeの検索オプションに含めるにはどうすればよいですか？)、アドレスバーにOpenSearchの名前を入れると候補として出てくるようになっています。ここでTABを押すと直接そのサイトの検索機能を利用することができます。 仕様では<link type="application/opensearchdescription+xml" />をいれておけば自動的に収集してくれるらしいけどやってみるとちゃんと認識してくれません(chromium 0.3.115.0)。 Google ChromeがOpenSearchを自動検出してくれない - Hello, world! - s21gにアドレスバーを右クリックして「検索エンジンを編集」から、検索エンジンを追加することで、同様のことが実現できそ
ウノウラボ Unoh Labs: Tips for HyperEstraier
先月、VX Revolution VX-Rを購入して、その使い心地の良さに素直に感動しているbokkoです。 HyperEstraier HyperEstraierは平林幹雄さんが開発されている全文検索エンジンです。全文検索エンジンとして使えるのはもちろん、全文検索のためのライブラリとして使うこともできます。ウノウではHyperEstraier(以下HE)をフォト蔵の写真検索に利用しています。 今回はHEの活用や運用に関するTipsについて紹介します。 インデックスの作成 HEのインデックスを作成する方法はいくつかありますが、単にデータが空のインデックスを作るのであれば以下で十分です。 $ estcmd create idx 実際には想定されるインデックスのサイズなどに応じてオプションを追加するといったことが必要になるでしょう。ファイルやディレクトリ(内のファイル)をインデックスに追加する
Hyper Estraier: a full-text search system for communities
Our team of highly trained cybersecurity professionals provides expertise in compliance, tool assessments, threat hunting, incident response and more. Critical Start is leading the way in Managed Detection and Response (MDR) services. With a unique approach that treats every security alert as equal, Critical Start's proprietary Trusted Behavior Registry allows security analysts to resolve every al
BaiduがGoogleを抜く方法 - 池田信夫 blog
きょう世界第3位の検索エンジン、Baidu（百度）の日本語サイトの運用が始まり、それに合わせて中国本社のCEO、Robin Li氏が来日した。そのミーティングにまねかれたので行ってみたら、記者会見ではなく、佐々木俊尚氏やDan氏など、おなじみのブロガーばかり10人ほど。ブログから1次情報の出る日が来たのかもしれない。 気の毒な大手メディアのために、とりあえず第一報を提供しておくと、Li氏は39歳。NY州立大学で修士号をとった、絵に描いたようにハンサムな中国の新世代エリートだ。Baiduの中国内シェアは70％、世界市場シェアは5％で、Google、Yahoo!に次ぐ。日本での戦略は、Yahoo!などに対抗するのではなく、「セカンド・サーチエンジン」をねらうという。特徴は「遊ぶ」検索サービスで、動画検索や画像検索に力を入れる。漢字文化圏どうしの強みを生かして、検索精度も上げる。 ただし「キ
∞Eyes - グーグル八分発見システム
グーグル八分発見システム（通称、∞Eyes）は、検索エンジンを安心・安全に利用できる環境を、利用者自ら構築するためのプロジェクトです。現在、Googleをはじめとする検索エンジンでは、検索エンジン運営会社の利益的な都合により、検索結果の「検閲」または「情報操作」が日常的に行われています。何者かにとって不都合な真実は隠され、検索結果の偽装が行われていることが、様々な調査によって明らかになっています。日本では、検閲によって検索から外されることを、村八分をもじって「グーグル八分」と呼んだりします。 ∞Eyesは、「グーグル八分」を見つけだすとともに検索結果の「検証」を行い、検索を必要とする全ての人に正しい情報を届けることを目標としています。 本システムで見つけたグーグル八分一覧(仮) グーグル八分一覧は、多数の要望により実験的に公開しているものです。リンク先に不適切な画像や情報などが含まれている
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
WebサービスAPI を通してWolfram|Alphaの知識にアクセスする
Wolfram|Alpha - Webservice API Reference
Google Code Archive - Long-term storage for Google Code Project Hosting.
Bing Search APIs | Microsoft Bing
Search Goes Real-Time With Scoopler. Twitter Dominates Results. | TechCrunch
Twitter Moving To Make Real-Time Search More Central | TechCrunch
Making Red Hat bugzilla indexable by Google | Field Commander Wieers
株式会社プリファードインフラストラクチャー