pywebkitgtkとjswebkitでJavaScriptを実行してJavaScript実行済みのドキュメントを得る - ラシウラ
GoogleはJavaScriptで隠匿したメールアドレスを読み取り、検索結果に表示している？ | スラド ITを見て、こんなのはWebKitを使えば余裕だろ、ということでやってみました。 Cで記述してもよいのですが、ビルド設定が面倒なのでpythonでやってみます(追記: C言語でも実装しました)。 ubuntuにはpython-webkitがあるのですが、しかしこれにはまだWebKitのJavaScriptCoreへアクセスするコードが入っていません。 探したところ、pywebkitgtk(python-webit)のサイトのissue trackerにアップされてたjswebkitというJavaScriptCoreアクセスライブラリを利用することで、JavaScriptを呼ぶことができました。 http://code.google.com/p/pywebkitgtk/issues/d
twill でWebサイトをオートパイロット (+ easy_installのススメ) - 玉虫色に染まれ!!
今日は、個人的な理由で、Webサイトを自動巡回するためのソフトを作る……ための前準備として、 twill をインストールしましたので、その紹介とインストール方法のメモです。 Pythonモジュールのインストールには easy_install を使いました。easy_install は、たまに野良のPythonパッケージをインストールする機会がある人は、覚えておいて損のないモジュールです。 twill とは twill は、コマンドラインインターフェースでWebサイトをクロールするための簡易言語です。 言語の利用例は 公式サイト の examples を見ていただければわかるかと思いますが、例えば「特定のサイトを開くと表示されるフォームにユーザーIDとパスワードを入れてログインボタンを押し、次の画面の検索フォームに特定のキーワードを入れて検索ボタンを押した結果表示されるリンクの1番目をクリッ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
