タグ

Perlと2chに関するclownboy-zuzuのブックマーク (3)

  • YappoLogs: WWW::2chを正式リリース

    WWW::2chを正式リリース 2ちゃんねるのスレッドを簡単に取り扱うWWW::2chをCPANにageました。 WWW-2ch-0.04 ・ローカルにあるdatをパースするメソッドの追加 ・キャッシュされているdatを取り出すメソッドの追加 ・各プラグインで利用するサイトのencodeの取得 ・Jbbsのサポート などが追加されています。他にも痒いとこに手が届きそうなものも追加してます。 上2つはサーバに接続をせずに手元のデータだけを使用しているので 一度取得したdat等を後でデータマイニングしたい場合に有効になります。 ただしhttp://www.2ch.net/ 2ちゃんねるのデータの利用に関して、原則的に自由ですが、 2ちゃんねるのデータ自体を利用して対価を取る行為はご遠慮下さいには注意してくださいです。 各種データをサーバから取ってくるときも極力余計な通信を発生させないように注意

  • YappoLogs: WWW::2ch updated

    WWW::2ch updated さっそくフィードバックを頂けた(thnksです!)ので変な所をfixしました。 WWW-2ch-0.06としてCPANにあげました。今はインデックス待ちです。 hikarin.jp: MY_memo[2] Can't "sage" without writing *jbbsをread.cgi経由で正規表現で解析しているようだが、 rawmode.cgiを経由すれば普通のdatと扱うようにすることが出来る。Jbbsではrawmode.cgiを利用するようにしました。 Jbbのdatの取り方がもIf-Modified-SinceやRangeヘッダを吐くものを使っていたので、普通のGETをするようにしました。 これに伴いIwashiのbaseもJbbsに変更されました。 なぜなら全ての板がマイクロ秒表示に 対応しているとは限らないからです。マイクロ秒が無いどころ

  • WWW-2ch-0.07 - scraping of a popular bbs of Japan. - metacpan.org

    The Perl Toolchain Summit needs more sponsors. If your company depends on Perl, please support this very important event.

    clownboy-zuzu
    clownboy-zuzu 2009/08/20
    いつか使う
  • 1