UbuntuでPlaggerやるならこれでいけ！〜VirtualBoxからcronまで〜 - As a Futurist...
インストールがむずかしいことで評判の「Plagger」ですが，その評判通り 使える様になるまでが大変です．一般的には，CPAN から Plagger を入れれば いいのですが，依存関係が複雑なのと make しながらになるのでやたらと 時間もかかり，一発で入らなかったりと，面倒なことだらけです． この度，さくっと入れる方法が確立できたのでここにメモしておきます． Ubuntu 環境ないよという人のために，Virtualbox という仮想環境に Ubuntu を 入れるところからスタートします．Ubuntu 持ってる人は飛ばして下さい． そして，何よりパッケージを作ってくれた半袖さんには ちょー感謝＞＜！ VirtualBox に Ubuntu 入れる VirtualBox とは Sun が提供してるフリーの仮想環境ソフト．これで仮想マシン （こちらをゲストと呼びます）を作ってそこに Ubu
YapraでFastladderのクローラを書いてみた : As Sloth As Possible
LDR&Fastladderの中の人から「これ面白そうだから、OpenFLで使ってみようよ。ていうか作ってよ」と大変無茶振りをされたのでYet Another PraggerでFastladderのクローラを書いてみた。 YapraかわいいよYapra 使ってみた感想としては良い感じ。Class-basedなプラグインなところが本家PRaggerより好みだし、でもlegacyなプラグインも読み込める互換性が使い勝手がいい。あと「実行時に使うプラグインだけ読み込む」ってことをしてくれるのも素敵。 肝心のFastladderのクローラは iDiskに置いといたので興味のある方は持ってってください。展開したら中身をlib-plugin/yapra/plugin以下あたりに配置すると使えると思います。YapraはYuanyingさんのところから。ちなみにconfig.yamlのサンプルはこんな感じ
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
Plaggerで詰まる。 - ティータイムにプログラミング。 - Hatena::Group::Perl
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
:-): 朝ッ, ちょわわわーん ちょわわ, 麻生太郎の原点 祖父・吉田茂の流儀, ドトールついったー, おひる, 仕事, 処女信仰とかんなぎが云々, NHK スペシャル デジタルネイティブ, 英会話レッスン Line Up 10A, Plagg.. - ヨタの日々(2008-11-11)
_ 処女信仰とかんなぎが云々 太古の昔に %ＣＶ で「ギャラクシーエンジェル隊のうち誰が非処女か」という話をしていたことを思い出した。なお、「かんなぎ」の原作は読んでいないがアニメは見ており下記のエントリーはネタバレが含まれているらしいので冒頭だけ読んだ。 ref. 処女信仰と『かんなぎ』祭りについてのまとめ（一応完成版） - 羊肉うまうま＠ついったー部 - はてなグループ::ついったー部 _ NHK スペシャル デジタルネイティブ 昨日放送してた番組です。番組宣伝に はてな が見えたので釣られて見てみました。 うーん。私がインターネットを 使い始める前 の 10 年前に見たら新鮮だったかもしれないなあ。全体的には「なにをいまさら」という内容であり私の知人/友人たちが見たら「普通だよね」と思うだろう。「大人の知らないところで( インターネットを使った )活動が始まっている」といったようなこ
本を読む P::P::Filter::RegexpTitle
s_nobuの日記 - 長いタイトルがついたEntryをF::BreakEntriesToFeedsして送る時にGmailでデコードに失敗するのを避けるパッチ http://d.hatena.ne.jp/s_nobu/20061222/1166748650 例えばこのEntoryの様に長いタイトルがついてる時にF::BreakEntriesToFeedsでuse_entry_title: 1すると、送信者の名前が長くなりすぎてGmailで受信するとデコードしてくれない。 ということで、適当にカットする。40という数字は適当。 Filterでやったほうが使い回しが効いていいような気がします。 package Plagger::Plugin::Filter::RegexpTitle; use strict; use base qw( Plagger::Plugin ); use Encode;
フィードを配信していないサイト それPla - /home/h3x/
以前書いた日記で WizardBibleのサイトのRSSを作成するスクリプトを載せましたが，Plaggerで簡単に出来るんですね。 Plaggerで 1. Wizard Bibleのフィードを生成 2. Gmailに送信 を行う為の設定ファイルです。 # base.yaml global: plugin_path: - /path/to/Plugin assets_path: /path/to/assets timezone: Asia/Tokyo log: level: info cache: base: /path/to/cache # wizardbible2gmail.yaml include: - /path/to/base.yaml plugins: - module: Subscription::Config config: feed: - url: http://wizar
Plaggerをインストール...、できませんでした。 - suztomoのはてなダイアリー
ソースはsvnでとってこれたのですが、モジュールの依存関係が激しいようで SUZSERV /home/suzuki/plagger/plagger% perl plagger Can't locate XML/Parser.pm in @INC (@INC contains: /h..... XML::Parserモジュールが足りないらしいですね。モジュールをインストールするのにCPANという対話式のPerlモジュールインストーラを使いました。ちょっとだけ覚えました。 SUZSERV /home/suzuki/plagger/plagger% cpan Terminal does not support AddHistory. cpan shell -- CPAN exploration and modules installation (v1.7602) ReadLine support
Big Sky :: XML::Feed 0.22でAtomフィードが複数のsubjectを返せる様になった
以前、「はてなブックマークをPlaggerで同期する際の注意点」という記事で書いたXML::Feed::Atomが複数のsubjectを返せない件で、送ったパッチが取り込まれました。厳密にはちょっと変えられてますが。 はてなブックマークのRSSフィードにはblockquote引用文が含まれており、Atomを使った方が良いという記事でしたが難点としてPlaggerで使用しているXML::Feed::Atomには複数のsubjectつまりタグを返せる仕組みがなかった為、別のソーシャルブックマークへポストした際にタグが削られてしまう事になっていました。 簡単な例で言うと use strict; use warnings; use XML::Feed; my $feed = XML::Feed->parse(URI->new('http://b.hatena.ne.jp/mattn/atomfee
Ubuntu Server に Plagger 入れた。 - 宇宙行きたい
基本は id:miyagawa の記事を参考 http://subtech.g.hatena.ne.jp/miyagawa/20060812/1155341964 make が入ってなかったので CPAN がうまく動かずに嵌った。 $ sudo aptitude install make あと、Debian系 は必要そうな物が一発で入れれるように出来るので /etc/apt/sources.list に ## Plagger deb http://debian.hansode.org/ ./を追記 $ sudo aptitude update $ sudo aptitude install libplagger-perlしてからインストール開始。 あとは上記記事どおりやれば動くようになりまする。
plaggerでエラーが出てgmailに転送されない - Plaggerインストール後のテストがうまくいきません。どなたかエラーの... - Yahoo!知恵袋
plaggerでエラーが出てgmailに転送されない Plaggerインストール後のテストがうまくいきません。 どなたかエラーの解決法をご存知の方、お願いいたします。 Plaggerのインストールが終了し、バージョンも無事表示されるところまでは何とかいきつけました。 まずテストをしようと考え、 C:\Perl\bin\cofig.yaml C:\Perl\site\lib\Plagger\assets\plugins\Filter-EntryFullText 上記２つのファイルを、下記URLにあるものをコピペして設定しました。 http://itati.vox.com/library/posts/tags/plagger/ プロンプトから C:\>plagger として実行をしてみると、YAMLをちゃんと読み、読売のニュースヘッダも十種類ほど表示されるのですが、 それをgmailに送信しよ
Plaggerなどのスクレイピングツールで、ブログやニュースを取得することのメリットとデメリットを考える - Hatena::Diary::infohack
メリット 本文すべて取得しGmailに送信することで、あとから全文検索ができる。 ローカルのメーラーで読むのは、環境次第ではとても速い。 MySQLなどのDBに放り込んで、自分でつくったソフトで読むのもいいね。というかそれもやっている。 ある時間軸にそってフィードを読むことができる。 たとえば「今日の15時の時点」でのフィードを読む、といったふうに。 時間軸ごとの優先付けが出来る。 たとえば「今日の10時以前の分は後回しにしてそれ以降のフィードから先に読む」など。 ブログやニュースの元の記事が消えても、手元に記事が残る。 アーカイブして永久保管。記憶の補助、ナレッジベース、思い出作り、証拠作りといった目的に使える。 すでに消えたはずの記事の内容も全文検索の対象になる。 ソーシャルブックマークやWeb魚拓が消えても手元には記事が残る。 デメリット Web型のフィードリーダーと比較すると未読管
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
Google Readerでstarを付けたすべてのエントリをはてなブックマークに登録する - ヒビノキロク
Google Readerを使い始めて最初のうちは、 Google Readerでフィードを読みながら気になったエントリにstarを付ける starredを読み返して個別にはてなブックマークに登録する という手順を踏んでいたんだけど、フィードの数が膨大になってくるに従って手順2が完全にボトルネックになって効率的に未読を消化できなくなってしまい、ここしばらくは手順2を省略していた。でもGoogle Readerには検索機能が（まだ）ないので、あとからエントリを探すのが大変（自分はGoogle Readerのタグ機能は使っていない）。その点はてなブックマークには検索機能があるのでやっぱりはてなブックマークが使いたい。というわけで、starを付けたエントリ（starred）を自動的にはてなブックマークにも登録するようにしてみた。前置きが長くなったが、こんなときPlaggerを使えば以下のような設
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
人生迷い箸 » Blog Archive » Plagger::Plugin::Filter::AutoTaggingをアップデート
Plagger::Plugin::Filter::AutoTagging を少し改変しました。 → AutoTagging.pm 変更内容は以下の通り。 otsune さんの diff を適用&ちょっと修正 (db省略時処理とMeCab用Encode処理のパフォーマンス改善） < otsune さんThx! sub init を plugin.init ハンドラに変更しました。（他のプラグインの初期化処理もそのようになっているようなので……) 実は otsune さんに書いて頂いたdiff をそのまま適用したところうまく動きませんでした。というのも、「db 省略時に id_safe を使ってファイル名を生成するように」とコードを追加されておられるのですが、Plagger::Util::filename_for で $feed が参照できないために動きませんでした。 で、これ自体は単純なミス
Greenbear Diary - PlaggerでCVSのコミットログをIRCに通知する
■ [Plagger] PlaggerでCVSのコミットログをIRCに通知する さて、SVNが出来たらCVSもやりたくなるのが人の常。というか、サークル内のプロジェクトでまだCVS使ってるものも結構あるので。 ところが、CustomFeed::CVSLogってのは今のところ存在しないようだ。CPANならCVSを扱うライブラリくらいあるんじゃないの？ と思ったが、なんと $cvs->log() だけ実装されていない。がーん。 仕方が無いので、cvs rlog の出力結果からフィードを生成することにする。 PlaggerのプラグインはPerlで書く人が圧倒的だったけど、Rubyで書かせてもらいます。サイレントマジョリティ(ry ダウンロード : customfeed-cvslog.rb リポジトリのアドレスを渡すと、コミットログをyaml形式(utf-8)で標準出力に出力します。 Plagge
Life on the Kernel | WedataのAutoPagerizeを使おうと思ったら…。
WedataにあるLDR Full Feedのsiteinfoを使ってフィードを全文入りにupgradeする 上記エントリを参考に、一つのエントリを複数のページに渡って記載しているサイト (例えば MSN 産経ニュース のこのページとか)のために、Wedata の AutoPagerize を利用する PPF::EntryFullText::AutoPagerize とかを作っていたんだが、 ブログとかで前後のエントリへのリンクを nextLink に指定してあるものとかがあって (例えばこれ)、 ブログの全エントリを舐めはじめて吹いた。 うーん、せっかく作ったのに、これじゃ使えないなぁ。 別にデータベースを作成するか、config.yaml で個別に指定するしかないかな。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Plagger用プラグイン Publish::Slmameをcodereposにコミットした - あたらしものずきっ！
404 エラー - PoWer Station