クローラを作る技術と設計 (毎週のハンズオン勉強会資料)
3. XPathXML や HTML の任意の位置を取得するための式XPathエンジンがあれば、 XPathを指定して HTML 上の値を簡単に持ってこれる 4. XPath<?php$url = 'http://www.nicovideo.jp/';libxml_use_internal_errors(true);$doc = new DOMDocument();$doc->loadHTML(file_get_contents($url));libxml_clear_errors();$xpath = new DOMXPath($doc);foreach ($xpath->query('//a') as $node) { echo $node->textContent . "";}
スパイダリング(Spidering)の基礎
スパイダリング(Spidering)の基礎 宮崎 真, 廣安 知之, 三木 光範 ISDL Report No. 20050813008 2005年 9月 19日 Abstract スパイダ(spider)とは，インターネットから様々な情報を自動的に取得するプログラム のことである．スパイダを用いることによって，例えば複数のサイトにまたがって存在する情報を 組み合わせて，データ蓄積やファイル保存，独自の検索システムを構築，など様々なサービス が可能となる． 本報告では，このスパイダリングについての概要および注意点を述べる． 1 はじめに 現在，Webサイトの肥沃化が進んでおり，実に30億以上ものページがWeb上に存在している． 多くの情報がオンライン化され，Webは従来に比べずっと閲覧しやすく，検索しやすく， 便利になったのである．しかしながら，この巨大なWebに対し，Webユ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
