Pythonでつくる検索エンジン(Webクローラ, Mecab, MongoDB, Flask) - c-bata web
検索エンジン自作入門 ~手を動かしながら見渡す検索の舞台裏 作者:山田 浩之,末永 匡発売日: 2014/09/25メディア: 単行本（ソフトカバー） (この記事で紹介しているのはTF-IDFとかの計算もない簡素なものです。) はじめに Webサービスのプログラミングに必要なことのだいたいは、スクレイピングに学んだ - Line 1: Error: Invalid Blog('by Esehara' ) この前↑の記事をみかけました。クローリングやスクレイピングは、色々と応用が効きそうなのでしっかり勉強したい。 PythonではScrapyという有名なクローリング・スクレイピング用のライブラリがありますが、今回は勉強としてScrapyを使わずに実装してみる。流れとしては以下のとおり Webクローラの構築 Mecabで日本語の形態素解析 検索エンジンの構築 データをMongoDBに格納 Fl
検索エンジン相関図 2008年1月版｜αSEO(アルファSEO)
検索エンジン相関図 2008年1月版。検索連動型広告の掲載パートナー、ロボット型検索エンジンの主要な提携先等をまとめています。今月からPCとモバイルのコンテンツ連動型広告相関図を追加しました。 PC 検索エンジン 主な動き 今回はロボット型、ディレクトリ型、検索連動型ともに大きな変更はありません。ただし、ウェブ検索の2強、Yahoo!とGoogleは検索利用者の意図を汲んだ機能の改良を行っています。 Yahoo!は検索キーワードがYahoo!ニュース内の記事と合致し、かつユーザーがリアルタイム情報を求めていると判断される場合にウェブ検索結果にニュース記事へのリンクを表示するようになっています。また、Googleは地域系キーワードと組み合わせて検索した時に、ウェブ検索結果上に地図と地域情報、口コミへのリンクを表示しています。特にGoogleはユーザーの意図に適したデジタルコンテンツを表示する
Googleキラーとも言われる「Mahalo」を徹底的に使ってみた: SNS,ソーシャルネットワーキング.jp
●Googleキラーとも言われる「Mahalo」を徹底的に使ってみた RWWなどで、検索エンジン「mahalo」が注目されていました。そこで色々調べてみました。 参考：Hitwise Intelligence - Heather Hopkins - US: Wikia Launch & Mahalo Growth 参考：Believe it or not, Mahalo is Growing - ReadWriteWeb 参考：人力が加わった検索エンジン「Mahalo」 ：ソーシャルメディア.jp（自己言及） このmahaloというのは「Googleキラーか」と騒がれたこともある検索エンジン。最近、ユーザ数が増えているそうで。賛否両論のAlexaで調べてみると確かに増えているようです。トラフィックランクは3,449位。 » mahalo.com（Alexa） そこで個人的に思うに、Maha
Googleでうまく検索できないときに、役立つかもしれない検索エンジン８つ | Google Mania - グーグルの便利な使い方
Googleでうまく検索できないときに、役立つかもしれない検索エンジン８つ 管理人 @ 12月 3日 10:26am 検索Tips, 検索エンジン Googleはとても優れた検索エンジンですが、そのGoogleを駆使しても、自分の欲しい検索結果を得られないことがあるかもしれません。そのような時に、試してみる価値のある代替検索エンジンをWeb Worker Daily の記事よりご紹介します。 EVERYZING オーディオや動画の情報を検索するときに便利。ポッドキャストやビデオキャスト内での言葉をテキストにして検索対象になっているので、メディアの内容から検索することができる。筆者が試したところ、日本語の検索に関しては、微妙。でも動画の中身まで検索するというのは、需要はありそうですね。タイトルだけすごくて、中身はおもしろくない動画もありますから。 Blinx 様々な動画共有サイトから１８００
これだけは覚えておきたい１０の検索Tips | お父さんのためのGoogle活用講座 その１ | Google Mania - グーグルの便利な使い方
これだけは覚えておきたい１０の検索Tips | お父さんのためのGoogle活用講座 その１ 管理人 @ 12月 1日 06:58am 検索Tips Google検索はとても便利です。世の中のほとんどの情報から検索できます。 でもその情報が多すぎて、本当に欲しい検索結果を導きだせない人も多いのではないでしょうか。 ちょっとしたテクニックを覚えておくと、欲しい情報が簡単に見つかって、時間も労力も、そして、質のいい情報を手にすることができます。 このコーナーは、『お父さんのためのGooge活用講座』と題して、インターネット初心者向けに、役立つ情報をお届けします。 第一回は、検索するときに覚えておいたら便利な検索Tipsをご紹介します。 I’m Feeling Lucky！ボタンで一発検索 ちなみに、「I’m Feeling Lucky」ボタンはGoogleにとって年間120億円の損失のようです
次世代検索はグーグルの上に構築 ― ＠IT
「インターネットの検索において、Webページ検索というのは、そろそろピークを過ぎるのではないか。人物や商品などドメインを区切ったバーチカルサーチや、Webページではなく知識そのものを検索できるようなナレッジサーチなどが今後の研究テーマになってくる」。2007年11月27日から2日間の予定で開催されている「データベースとWeb情報システムに関するシンポジウム」（DBWeb 2007）において「情報爆発に対処できる次世代サーチ技術」と題した講演を行った京都大学大学院情報学研究科の田中克己教授は、今後のネット検索技術の動向をそう総括する。 既存の検索サービスを使ってできることはまだまだある 田中氏は、2005年から5年間の予定で文部科学省が研究補助金を出すプロジェクト「情報爆発時代に向けた新しいIT基盤技術の研究」において「情報爆発に対応するコンテンツ融合と操作環境融合に関する研究」という研究テ
ネット上で売れる商品を見つけだすための4つのポイント
『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day
監視用ウェブカメラ：普及の陰で、「覗き見」やハッキングも | WIRED VISION
監視用ウェブカメラ：普及の陰で、「覗き見」やハッキングも 2007年10月 4日 IT コメント： トラックバック (0) Ryan Singel 2007年10月04日 この20年の間に、銀行強盗がテーマのハリウッド映画を見たことがある人にとっては、監視カメラの映像を差し替えて警備員を欺く手法はもうおなじみだろう。 技術に明るい犯罪者は、監視カメラシステムのライブ映像を偽の映像に切り替えて、哀れな警備員が何事も起こらないループ映像を見続けている間に、銀行の金庫を空っぽにしてしまうのだ。 最近、ホワイトハット(善玉)・ハッカーらが、この映像差し替えを巧みに行なうテクニックを実証した。 ロンドンに拠点を置くセキュリティー企業ProCheckUp社の調査員であるAmir Azam氏とAdrian Pastor氏は、スウェーデンAxis Communications社製の監視カメラ『AXIS 2
検索エンジンが順位を決める53の要因（39人のSEOプロが評価した重要度とコメント付き） | Web担当者Forum
この文書は自然検索に対する最適化のリーダー39人の英知を結集したものだ。彼らは、Googleの順位決定アルゴリズム（検索エンジンが検索結果を並べる順番を決める方法）を構成するさまざまな要因について投票した。その結果、この上なく価値の高い情報ができあがった。もちろん、200種類以上あるといわれる要因のすべてが含まれているわけではないが、私見では、Googleのアルゴリズムに関して必要な90％～95％の知識がここにふくまれるはずだ。 順位決定の要因に加え、Googleの順位決定に関してパネリストに尋ねた4つの質問への回答がこの文書の最後に示してある。これだけ優秀な人たちに協力してもらったのだから、貴重な回答をもう少し得られずにはいられなかったのだ。 ※注：この文書は、Googleのアルゴリズムをリバースエンジニアリングすることを試みるものでなければ、ウェブ開発者やウェブマーケターにサイトの最適
3分LifeHacking：Googleで最新記事を探す - ITmedia Biz.ID
最新のコンテンツを探したいときはブログ検索？ いやGoogleでも「3週間以内に登場したコンテンツ」を対象として検索することが可能だ。 Google検索は便利だが、「○○についての最新の記事を探したい」という時には、ブログ検索など別の検索エンジンを使う人が多いだろう。 しかし実は「過去1日以内」「過去1週間以内」に登場したページから検索──ということがGoogleでも可能だ。最も容易なのは、Googleの「検索オプション」から、日付オプションを選ぶ方法。 24時間以内／1週間以内／1カ月以内／過去2カ月／過去3カ月／過去6カ月／1年以内、から選択すれば、その期間内に初めてクロールされたWebページから結果を表示してくれる。正確にはGoogleのクロールロボットが巡回したタイミングなので必ずしもコンテンツが掲載されたタイミングではないが、指標としてはある程度の参考になる。 この“日付”オプシ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://viim.jp/