Scrapy, はてなブックマークAPIで件数やコメントを一括取得 | note.nkmk.me
はてなブックマークAPIを使うと、特定のURLのブックマーク数や詳細情報（ブックマークした日時やユーザー、コメントなどの一覧）をシンプルなGETリクエストで取得できる。 はてな API一覧 - Hatena Developer Center 指定したURLとそれ以下のパスのURL（＝指定したサイト内のURL）のブックマークの詳細情報はScrapyと組み合わせると一括で取得できる。ブックマークの合計数はAPIで取得可能。 以下の内容について説明する。 はてなブックマークAPIの種類と使い方 はてなブックマーク件数取得API はてなブックマークエントリー情報取得API はてなブックマークWebページで取得できる情報 Scrapyでクローリング・スクレイピング サイト内のURLのブックマーク数を一括取得 サイト内のURLのブックマーク日時・コメントなどを一括取得 pandasによる分析 なお、サ
はてなブックマークのRSS feedをフィルタリングする - Qiita
結論 inoreaderにフィードのフィルタ機能があったので、移行しました 以下は、そこにいたるまでの紆余曲折になります。 動機 ホッテントリって便利だけどフィルタリングとかしたいよね、ということでやり始めました。 PC/スマホから見るので、サーバ側でフィルタリングをかけたいという個人的な需要がありました。 feedlyから移行するのが面倒だったので、移行せずに何とかする方向で考えていました。 当初やろうとしていたこと feedにアクセスが来るたびにホッテントリのRSS feedを取得し、タイトルとドメインでフィルタリングして表示する仕組みをflaskで書いていました。 が、諸々問題がありお蔵入りになりました。 https://github.com/tetosuna/hatebu_with_ng 問題点 自前で公開したfeedがfeedlyに登録できない。 DNS名がついてないとfeed登
■PyQt4で作るRSSリーダー 【VISH+サイトマスター.jp Blog 】
RSSの解析には以下のスクリプトを使用しました。 http://www.mnot.net/python/RSS.py これ、そのままではWindows上で動かない。 signalモジュールが引っかかってしまうのだけど、 今回はあえなくコメントアウトに。 30行目付近でsignalを使っている部分をコメントアウト #signal.signal(signal.SIGALRM, self._timeout) #signal.alarm(timeout) #try: p.parse(str(url)) # URIs are ascii #finally: #signal.alarm(0) return dh RSSリーダーはやっぱ3ペインだよねーということで、 リストモデルも作ってしまった。 Qt4からは、ModelViewフレームワークがあるので、 結構楽チン。 from PyQt4 impor
mnot: Python bits
Name Description Cabinet.py convenience class for shelves Conf.py simple configuration file parser Email.py e-mail sending class HtmlDom.py generate a DOM from arbitrary (X)Html RSS.py library for working with RSS UserInt.py user-defined wrapper for integers WebLog/ Web logfile parsing XopParser.py XOP parsing library cacheability cacheability engine cgi_buffer script buffering library http/ isod
Free online photo editor with printing and slideshows
CIPIT88 SLOT If something goes wrong with your order, you'll get a full refund. Here's what's eligible: Your order doesn't match the item description or photos Your item arrived damaged Your item arrived after the estimated arrival window Your item didn't arrive or was lost in the mail View programme terms
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
hatebu_with_ng/bin at master · tetosuna/hatebu_with_ng · GitHub
Under Construnction
