htmlSQLを使ってみた - 130単位
jonasjohn.de: htmlSQL - a PHP class to query the web by an SQL like language http://www.jonasjohn.de/lab/htmlsql.htm htmlをSQLっぽい記述でスクレイピングできるPHPのライブラリです。更新は2006年で止まっているみたいですが、最新バージョン(0.5)は問題なくダウンロードできました。BSDライセンスです。 利用手順 必要なファイルをインクルード <?php include_once("snoopy.class.php"); include_once("htmlsql.class.php"); インスタンス化 <?php $wsql = new htmlsql(); URLにアクセス <?php $wsql->connect('url', 'http://example
RedLine Magazine : htmlSQL すごかった。感動した。
htmlSQL すごかった。感動した。 PHPでtitleタグの中身を取り出すのにfile_get_contentsで全部htmlソース取得する方法以外に何かいい方法ないのかなみたいな事を書いたら、コメントにて「htmlSQLというモジュールが便利です。」とお教え頂いたのでさっそく試した。 >>jonasjohn.de: htmlSQL - a PHP class to query the web by an SQL like language >>htmlSQL - live example (デモ) すごいぞ。すごい細かい事まで指定できるぞ。 SQL文ちっくな書き方で抜き出したいものを指定してゲット。素人にも分かりやすい使い方で安心。ダウンロードするとデモが十数種同梱されてたので観察。titleの中身だけ欲しい時は「SELECT * FROM title」とか「SELECT text
htmlSQLを使ってmixiボイスを引っこ抜く - atelier:mitsuba
htmlSQLっていう便利なものをこの前見つけました。 なので以前のボイスのソース引っこ抜いたを使って http://d.hatena.ne.jp/c-mitsuba/20090930#1254237048 TLを引っこ抜いてみました。 <?php function MixiLogin($data) { $data = http_build_query($data + array('next_url' => 'home.pl'), '', '&'); $context = stream_context_create(array( 'http' => array( 'method' => 'POST', 'header' => implode("\r\n", array( 'Content-Type: application/x-www-form-urlencoded', 'Content-
[ htmlSQL ] SQL みたいな文法で HTML を抽出する PHP のライブラリ
SQL みたいな文法で HTML を抽出する [ [htmlSQL](http://www.jonasjohn.de/lab/htmlsql.htm) ] と言う PHP のライブラリを使ってみました。 簡単な流れのサンプル ———————————————————————- [ htmlSQL ] の簡単な流れは次の通り。 connect(‘file’, ‘./test.html’)){ print ‘Error while connecting: ‘ . $htsql->error; exit; } // SQL 文を書く if (!$htsql->query(‘SELECT * FROM a ‘)){ // a 要素の全ての情報を取得する print “エラー！取得できません！” . $htsql->error; exit; } // 結果を表示する foreach($htsql->f
![[ htmlSQL ] SQL みたいな文法で HTML を抽出する PHP のライブラリ](https://cdn-ak-scissors.b.st-hatena.com/image/square/19691f3db719fc116cbcdd5e767c89ee15487f3e/height=288;version=1;width=512/https%3A%2F%2Fbowz.info%2Fwp-content%2Fuploads%2F2018%2F09%2Fudon-1.jpg)
HTMLScrapingかhtmlSQLか、それが問題 - [Mi]みたいなもの
正規表現ぶんまわしでのスクレイピングは、やっていて鬱々としてきます（試行錯誤が多すぎ）。 一段落したのを機に、ライブラリ等を使って処理をパターン化することにします。 ▽[php]スクレイピングならHTMLScraping→SimpleXML→xpath (うえちょこ＠ぼろぐ) http://labs.uechoco.com/blog/2009/01/php-%E3%82%B9%E3%82%AF%E3%83%AC%E3%82%A4%E3%83%94%E3%83%B3%E3%82%B0-htmlscraping-simplexml-xpath.html あたりを読みながら、手段を検討しました。 Tidy関数は、今のレンタルサーバに入っていないこと、他のレンタルサーバに移動する可能性もあるもののおそらく以前のように専用サーバを借りてごりごりやることは考えにくいことから使える可能性の方が低いので使
![HTMLScrapingかhtmlSQLか、それが問題 - [Mi]みたいなもの](https://cdn-ak-scissors.b.st-hatena.com/image/square/028ce4425e95fa4670684ca1bb75bbabd9636be2/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F17680117127156572702%2F17680117127156594256%2F1558483565)
htmlSQLの基本的な使い方
WebスクレイピングのライブラリhtmlSQLの使い方メモ。 スクレイピングの準備 //Snoopyをinclude include_once("../snoopy.class.php"); //htmlSQLをinclude include_once("../htmlsql.class.php"); //インスタンス生成（Exampleで使われている"$wsql"という変数名は、昔はWebSQLという名前だった名残り） $wsql = new htmlsql(); Webページからスクレイピング if (!$wsql->connect('url', 'http://codedump.jonasjohn.de/')){ print 'Error while connecting: ' . $wsql->error; exit; } ローカルにあるファイルからスクレイピング if (!$ws
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
htmlsql - 戯言