wikipediaのダウンロード&データベースにインポート - プログラマでありたい
ダウンロード Wikipedia:データベースダウンロード ウィキペディア日本語版: jawiki-latest-pages-meta-current.xml.bz2 xml2sqlでmysqldump形式に変換 wikipediaのコンテンツは、600MB以上ある。それなりに時間が掛かるので、落としている間にデータベースへのインポートの準備。データの提供形態はxmlなので、データベースに入れるにはそれなりの工夫が必要である。幸いwikipedia自体が２種類の方法を提供してくれている。MediaWikiに付属しているimportDump.phpを使うか、xml2sqlというツールをインストールするかが選べる。 他でも使えそうなので、xml2sqlを使うことにした。 xml2sql $wget ftp://ftp.tietew.jp/pub/wikipedia/xml2sql-0.5.ta
史上最強か、ウィキペディアのキーワードアドバイスツール – Wikipedia article traffic statistics | 海外SEO情報ブログ・メルマガ
すごいキーワードアドバイスツールを見つけてしまいました。 これです。 何がすごいかというと、キャプチャ画像のタイトルの「Wikipedia」です。 そう、このグラフはWikipedia日本で先月２月の、「バラック・オバマ」の日々の検索数を表しています。 ※画像のリンク先ページで「ALL SIZES」ボタンをクリックすると、拡大表示が見られます。縦軸の数値の「k」は、「kilo」で「1,000」のことです。 ツールの名称は、「Wikipedia article traffic statistics」と言います。 Wikipediaのアクセス数は１，２を争うレベルのはずです。 古いデータしか見つかりませんでしたが、Wikipediaの2006年の推定ユニーク訪問者数は、「1851万人」だったそうです。 利用者の数から考えると、気になるキーワードの検索数を知るのには、いまだかつてないほどの信憑性
全自動百科事典『オートペディア（Auto☆pedia）』
全自動百科事典へようこそ！ 全自動百科事典『オートペディア（Auto☆pedia）』は自動生成の百科事典っぽいものです。 基本方針に賛同していただけるなら、誰でも記事を閲覧したり新しく生成したりできます。 現在、全自動百科事典日本語版（注1）には無限の本数の記事があります（注1：英語版はありません）。 記事の生成方法 ページ上部の入力欄に名前を入力して［検索］ボタンを押して下さい。 一般の方に関する記事を閲覧する際は、「一般人」の欄に、姓と名を入力して検索して下さい。 有名人に関する記事を閲覧する際は、「有名人」の欄に名前を入力して検索して下さい。 その他の内容に関する記事を閲覧する際は、「物品」の欄に名前を入力して下さい。 基本方針 本ページは、大人のためのジョーク・ページです。 記事の内容は正確ではなく「それっぽさ」を楽しむことが目的です。 本ページの内容は、検索エンジンの検索結果を元
Wikia開発者がLuceneメーリングリストに投稿したメール | 関口宏司のLuceneブログ
一定期間更新がないため広告を表示しています
Wikipedia:一覧の一覧 - Wikipedia
このページでは、日本語版における各分野の主要な一覧記事を列挙しています。記事の分類は日本十進分類法 (NDC) に基づいています。 このページではウィキペディア日本語版における主要な一覧記事を分野別に整理し、一覧の総目次として機能するように作成されたものであり、ウィキペディア日本語版に存在する全ての一覧記事を網羅したもの（総索引）ではありません。なお、ウィキペディアにある全ての一覧記事は、Category:一覧以下のカテゴリから参照できます。 その他、いずれも一覧記事ではありませんが、同名の人物・事物を羅列した記事（曖昧さ回避）の一覧はCategory:曖昧さ回避以下から、年代順の一覧である年表の体裁をもつ記事の一覧はCategory:年表以下から、各々参照可能です。 お探しの一覧記事がどこに分類されているかわからないときは、お使いのブラウザのページ内検索機能をご活用下さい。
Wikipedia:データベースダウンロード - Wikipedia
ウィキペディアのコンテンツなどのデータは、再配布や再利用のために利用できる一元化されたデータベース・ダンプでの提供が行われています。クローラを用いてコンテンツを収集しないでください。このデータベース・ダンプの生成は不定期に行われています。 ウィキペディアのコンテンツは Creative Commons Attribution-ShareAlike 4.0 International License (CC BY-SA 4.0) および GNU Free Documentation License (GFDL) の下にライセンスされています（Wikipedia:著作権と利用規約を参照）。画像などのメディアファイルは異なるライセンスで提供されることもあり、ファイルページで明記されています。 より詳しい解説はmeta:Data dumps（英語）を参照してください。 全プロジェクトのダンプ：du
Wikipediaのキーワードリンクを使って関連語データを作ってみた
Wikipediaのキーワードリンクを使って関連語データを作ってみた 2007-06-09-3 [NLP][Programming][Algorithm] Wikipedia のキーワードリンクを使って関連語データ（関連キーワード集） を作ってみた。 Wikipedia のデータはダウンロードページからbz2形式のを取ってきた。 日本のウィキペディアのXMLデータね。 (see Wikipedia:データベースダウンロード) で、Perlスクリプトで以下の関連語データ作成処理を行った。 （スクリプトはこの記事の末尾に載せておく） (1) 各キーワードページに含まれているキーワード（リンク）を取り出す。 例えばキーワードAのページにB,C,Dが含まれていたら、A => B,C,D というデータを蓄積。 またキーワードAが他のキーワードのページ（例えばX）に含まれていたら、それも蓄積。その場合
TAKESAKO @ Yet another Cybozu Labs IE6でja.wikipedia.orgが遅い件をHTTPキャプチャしてみる
最速インターフェース研究会 :: 最近IE6でWikipedia日本語版の表示が異常に遅いのはKeepAliveのせい 2月初めぐらいからか、キャッシュが空の状態で日本語版のWikipediaを表示すると、IE6が1分間ほど固まる、という不具合があるそうだ。 で、Proxomitronでレスポンスとか調べてみてたりしたのだけれど、プロキシ経由だと問題なく表示される。 これ、私が普段仕事で使っているIE6でも再現していたので、HTTP Debugging Proxy - Fiddlerを使ってブラウザのHTTP通信をキャプチャして調べてみました。 （※2007/02/13追記：upload.wikimedia.orgで対策され、既に本現象は解消されています） どうやら画像ファイルhttp://upload.wikimedia.org/wikipedia/ja/b/bc/Wiki.pngの読み
N01ランキング マネーのヒント - Home
今すぐお金が必要！でも他社で審査に落ちてしまった、そんな時におすすめの審査が柔軟なキャッシングサービスをご紹介します。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
wikipediaの実例でわかるマシンフレンドリーなコーディング | Webデザインのタネ