phpでクローラー作成は可能なのかを思案してみる。 - phpをどうにかやってみたい僕の日々
よく自分の技術（phpだけ）でクローラーって作れるのか？ って思うんだけど、ちょっとした光を発見！ Webスクレイピングを可能にするPHPライブラリ・htmlSQL Webスクレイピングっていうのは、部分的にHTMLを取得・抽出することらしい。 んで、htmlSQLっていうPHPライブラリを用いる事で容易に取得できるみたいなのだ☆ これ使ってデータベースと連携すればクローラー作れるんじゃねぇ？ って昨日、思った。 まあ、cronで取得を自動化させたり サーバーへの負担はまるで考えてないんだけど… たしかGoogle様はPythonでクローラーを作成していたって聞いたことあるけど phpだけでいつかクローラーを作成してみたいと考えるのでした。 でもphpもバージョンアップしたりしたらもっとサーバーとかに優しいプログラムに 変化していくだろうし… やってみる価値はあるかもね。 でも、簡易でもク
Webスクレイピングを可能にするPHPライブラリ・htmlSQL
htmlSQLはWebスクレイピング（部分的にHTML抽出）を可能にするPHPライブラリです。ソースが公開されていたのでご紹介します。 ※先日、お知らせさせて頂きましたように、この記事は僕が管理していた別のブログの過去記事を移行したもので正確性に欠ける可能性があります。何卒ご了承願います。 HTML内を部分的に取り出し、表示する事で、それを容易にするスクリプトがhtmlSQLというPHPライブラリです。DOM解析をSQL風に指示するらしい。 デモがありますのでご体感下さい。→htmlSQL – live example 以下のコードを使うようです。 <?php /* ** htmlSQL - Example 1 ** ** Shows a simple query */ include_once("../snoopy.class.php"); include_once("../htmlsq
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
