みんなのケータイブログ -携帯マーケティング/携帯SEO/最新携帯サイト情報- wikipedia のdata情報をダウンロードして利用する方法
wikipedia のdata情報をダウンロードして利用する方法 wikipedia の情報は無料で配布されています。 ■wikipediaの情報のダウンロード方法 Wikipedia:データベースダウンロード 日本語のサイトから、データをダウンロードしてきます。 日本語版：wikipedia latest(最新)ディレクトリ内の jawiki-latest-pages-meta-current.xml.bz2 をダウンロードする。だいたい1.2Gほど。 wget http://download.wikimedia.org/jawiki/latest/jawiki-latest-pages-meta-current.xml.bz2 WikipediaのXMLファイルをMySQLデータベースにインポートするには、MediaWiki配布物に含まれるimportDump.phpスクリプトを使用し
Tokyo O life - ずばぴたテック » WikipediaのダンプデータをDBに投入する
最近、Wikipediaのデータを引用して表示するサービスが良くある。どうやって、実現しているのか？ Wikipediaには、収録データをHTMLではなくXMLで返してくれるモードもあるが、これはWebブラウザ向けのサービスで、PHPなどでアクセスして取得しようとすると、403のエラーで拒否される。また、「サーバーに負担がかかるので、クローリングしないでください」と明記されている。 その代わり、Wikipediaの全データをXML形式でダンプしたものが自由にダウンロードできるようになっている。これを読み込んで、自分のデータベースサーバに投入して使えばいいのだ。データベースはMySQLやPostgreSQLに対応し、投入用のツールも用意されている。 Wikipediaのシステムである、MediaWikiのソースコードも提供されていて、これに含まれているimportDump.phpを使う例が上
Wikipedia API（検索＆パース）を作りました | Tokyo O life
最近、Wikipediaのデータを活用したサービスが増えている。 ただし、先日WikipediaのダンプデータをDBに投入する で紹介したように、Wikipediaはサーバから叩けるAPIを提供していない。不定期にダンプデータが提供されているので、それを自分のサーバのデータベースに投入して使うことは可能なのだが、収録されているデータは、Wikiのマークアップがついたままの生テキストなので、使い勝手がよくない。 以前から提供されているSimpleAPI「Wikipedia」は、たぶんこのダンプデータを使って、独自に検索APIを提供しているのだと思うが、 複数の検索結果を一度に返してくる。 簡易な要約文しか提供されない。 という制約があって、Wikipediaに収録されている豊富なデータを活用するには、ちょっと足りない感じがする。 そこで、Wikipediaのマークアップを解釈して、XMLに変
杉浦とホームページ製作～MovableTypeを制覇する「いわゆる Blogger API とその拡張」
目次 実はイロイロある マニュアルの見方 XML-RPC リクエストの基本 実はイロイロある で、MovableType がサポートする XML-RPC の話になるわけだが、実はコレがいろいろある。要するに「XML-RPC で投稿とか出来たらイイな」というのはどのブログ作者も考えることで、「じゃどのブログでも機能を共通化しようじゃん」ということになって、一応共通規格みたいなものがあるわけだが、「いやウチは独自にコレも出来る」というのを独自実装したりもするわけである...まあ、混沌としちゃってるな。 どんなものがあるかの説明は、付いて来るマニュアルにある。mt-static/docs/mtmanual_programmatic.html#xmlrpc_api がソレだ。一応コイツを見てやってくれ。 で、古くからあるのが「Blogger API」というヤツだ。このカテゴリーのものは、 blog
[Perl] XML::FeedPP - RSS・RDF・Atomフィードの解析・生成・変換・結合
Kawa.netxp [Perl] XML::FeedPP - RSS・RDF・Atomフィードの解析・生成・変換・結合 XML::FeedPP モジュールは、 RSS 2.0、RSS 1.0 (RDF)、Atom 0.3（および1.0）フィードの XML ファイルを解析・生成・変換・結合するための Perl モジュールです。 RSS ベースの1種類の共通 API で RSS・RDF・Atom の各フォーマットの処理に対応しているため、 手軽に扱えます。 フィードの読み出し・書き込みはもちろん、 RSSからRDFへ、RDFからAtomへといった各フォーマット間の相互変換も可能です。 他サイトからダウンロードした複数のファイルを結合して、 まとめて1つのファイルとして出力することもできます。 公開版アーカイブ： XML-FeedPP-0.43.tar.gz TARGZ CPAN ←通常パッケ
XML-RPC§更新Pingの送信 - isnot.jp/wiki
更新Pingとは、ブログ（Weblog）などを更新したときに、公開されているPingサーバーに対してそのことを通知することをいいます。Pingサーバーはたくさん送られてくる更新Pingを元に、更新情報を時間順並べて公開したり、収集したデータ（メタデータ）を再配信したりします。メッセージはXML-PRCで、「weblogUpdates.ping」というAPIで決められた形式で送ります。一部の公開Pingサーバーでは、weblogUpdates.pingを拡張した（追加のパラメータを付加した）メッセージを受け付けるようです。 更新Pingというほかにも、「Update Ping」などといわれることもあるようです。 ※トラックバック（Trackback Ping）と混同されることがあります。技術的には異なるものです。 examples. weblogUpdates.ping (weblognam
yohei-y:weblog: REST 入門
日本語の REST のリソース集を以前作ったのだが、 日本語では一般人向けの解説がない。 sheepman 氏の REST のページはすばらしいんだけど、多少わかっている人向けだ。 市山氏のプレゼン資料は RoyF の論文を詳しく解説していてよいのだけれど、いかんせんアカデミックすぎる。 技術的な要素も抑えつつ、入門者にもわかりやすい解説はないものかと探していたのだが、みつからない。 英語の文書を訳すことも考えたんだけど、あまりよいものが見つからない。 で、結局自分で書くことにした。 最初はひとつのポストで済ませるつもりだったんだけど、書き始めたら長くなってしまったので、複数のポストに分けることにした。 えらそうなことを書いたが、内容は「ないよりマシ」といったレベルだろう。 前書きが長くなったけど(ここから始まりです。ですます調なのは入門記事だから)、 この記事(から始まる一連のポスト)は
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
naoya.dyndns.org is offline
Amazon.co.jp: Perl & XML: Erik T.Ray (著), Jason McIntosh (著), 財井一彰 (翻訳): 本
Amazon.co.jp: 改訂版 標準XML完全解説(下): 中山幹敏, 奥井康弘, 日本ユニテック: 本