Home
Grand Theft Auto (GTA) 6 might actually be the most anticipated game ever created. The follow up to the incredibly successful GTA 5 has been something most, if not all gamers have been chomping at the bit for, seeking any shred of information. Here, we’ll reveal all the details we have on the latest iteration…
Web 3.0：ウェブサイトがウェブサービスになるとき
標準化されたURL--APIのないAPI 直接の（データベースへの）APIがあるわけではないにもかかわらず、多くの企業はdel.icio.usに蓄えられている情報を活用している。次のような例がある。 Delexaは、del.icio.usを使ってAlexaのサイトをカテゴリ分けする、面白くて便利なマッシュアップだ。例えば、「book」という単語でタグ付けされた有名なサイトを下にまとめてみた。 別の例はsimilicio.usと呼ばれるサイトで、del.icio.usを使って類似サイトを推薦する。例えば、同サイトによれば、Read/WriteWebに似ているのは次に示すようなサイトだ。 APIがないのにこれらのサービスはどうやってこういうことを実現しているのだろうか。答えは、標準化されたURLの活用と、ウェブスクレイピングと呼ばれる技術だ。これがどうやって動いているかを見てみよう。del.i
スクレイピングはもっと簡単にならなければいけない - bits and bytes
スクレイピングをやったことがあるひとならばわかると思うけど、スクレイピングはとてもつまらない作業だ。 HTMLの中から抜き出したい部分を見つけて、その周辺にある特徴的な部分に着目して正規表現を書いたりして抜き出す。あるいはHTMLからDOMを生成して特定のクラスがついているエレメントを抜き出したりする。HTMLをXHTMLに整形、変換してXPathで抜き出す方法もある。どの方法もやることは単純で簡単なことだけれど、極めてめんどくさい。 そういうものだと思って数年間過ごしてきたけれど、去年の夏に出てきた Dapper: The Data Mapper は、そんな退屈な常識をモダーンなajaxでもって吹き飛ばした。もしDapperがどんなのなのか知らなかったら、ちょっと長くてはじめ退屈なんだけど デモムービー を見てみてください。 Dapperが教えてくれたことは、スクレイピングなんて、欲し
Dapper --データを抽出するサービス - オンライン快適仕事術
またまた面白いものを見つけてしまった。8月18日の日本語版「TechCrunch」に紹介されていた、Dapper というサイトだ。 一般的にWebサイトはいずれも情報の宝庫だが、必ずしも RSS やXML などの規格化された形式で情報を発信してくれているわけではない。こんなサイトが発信しているデータを再利用しようとすると、ひとつひとつ手作業でデータを整理し、編集しなければならない。 だが、これではあまりに時間がかかるうえに、データの更新に対応しきれないのだ。こんな悩みを解決してくれるのが Dapper だ。他のサイトからデータを抽出したり、監視したりして、それらを再編成し、付加価値を与え、新たなデータとして提供する。 Dapper はとてもわかりやすいインターフェースを提供している。サイトのあるパーツをクリックするだけで、いかなる種類のデータでも抽出できるのだ。データは XML、HTML、
Feedmedia: Dapper - あらゆるウェブサイトを構造化して再利用できるようにするサービス
2007/03/27 Dapper - あらゆるウェブサイトを構造化して再利用できるようにするサービス Dapper: The Data Mapperというサービスがあります。 サイトで公開されているデモ映像を見る限り、Dapperはウェブページをスクレイピング(HTMLソースを取得して解析し、目的のデータを抽出すること)して構造化したデータを作成し、そのデータを誰でも自由に再利用できるようにするサービスのようです。 Dapperで作られたデータは“Dapp”と呼ばれ、誰でも利用できるようになっています。たとえばこのDappを見れば分かるように、出力フォーマットが15種類用意されています。XML, HTML, RSS, JSON, YAML, Google Map, Google Gadget, Netvibes Moduleなどなど。 また、ウェブページを閲覧中にDipperでスクレイピ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
TechCrunch Japanese アーカイブ » Dapper利用で自分のNetvibesモジュールを作ろう
TechCrunch Japanese アーカイブ » ミックス、リップ、マッシュ―５つのデータ処理サービスを比較する
TechCrunch Japanese アーカイブ » Dapper利用でどんなサイトのAPIも自在にクリエート