WikipediaのデータをOracleにインポート - KNOPP’s blog
全文検索を試したいなーと思いつつ、テストデータの準備が大変なので、 Wikipedia日本語版のダウンロードデータを試すことにしました。 ダウンロードしたデータは後々、 Oracle TextやSolrのdataimport使うことを前提にOracleへ突っ込むことにします。 ダウンロードするデータ http://dumps.wikimedia.org/jawiki/latest/jawiki-latest-pages-articles.xml.bz2 解凍すると6GB程のXMLファイルなんですが、xml2sqlというツールを使うと、 MySQLやPostgreSQL形式のデータインポート形式のファイルを作成することができます。 xml2sqlは最近のWikipediaダウンロードデータに対応してないので、 以下のページを参考に、PostgreSQL形式のインポートデータを作ります。 ht
xml2sql - おなかすいたWiki！
patch for recent versions of mw (>=1.10) because the revision table contains two new datasets since 1.10 (rev_len, rev_parent_id) the xml slightly changed. apply this patch to make it work again: --- xml2sql-0.5/xml2sql.c 2008-01-16 15:32:28.000000000 +0100 +++ xml2sql-0.5 (2)/xml2sql.c 2008-02-17 15:06:34.000000000 +0100 @@ -741,6 +741,10 @@ putcolumnf(&rev_tbl, "%d", revision.minor); /* rev_dele
業界最大級のライブチャットDXLIVE
9月14日（水）午前5時～5時30分(日本時間)に、サイトのメンテナンスを行ないます。その間は、一時的にチャットが中断される場合がございます。メンテナンス期間は、作業状況により多少前後することもございます。ご利用の皆様にはご迷惑をおかけ致しますが、ご理解ならびにご協力の程、何卒宜しくお願い申し上げます。 日本時間午後10時30分頃から午前零時頃までの間、チャットに繋がりにくい状態がありましたが、現在は解決しています。ご利用されている皆様には大変ご迷惑おかけいたしましたことをお詫び致します。 9月6日（水）午前4時30分(日本時間)より約1時間、サイトのメンテナンスを行ないます。その間は、一時的にチャットが中断される場合がございます。メンテナンス期間は、作業状況により多少前後することもございます。ご利用の皆様にはご迷惑をおかけ致しますが、ご理解ならびにご協力の程、何卒宜しくお願い申し上げます
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
