もうやらないかも、と言ってからダラダラ1年続けちゃってる感じのこれ。 把握したブックマーカー: 28720 退会、もしくはプライベートモードなブックマーカー: 578 お気に入りを使っていないブックマーカー: 10717 のべお気に入り数: 250783 ちなみに取得には41時間くらいかかりました。 先月id:kyo_ju さんに faved_listが200人弱までしか出ないようになってるみたい。 http://b.hatena.ne.jp/kyo_ju/20091107#bookmark-17190162 て指摘されたのだけど、おそらくはてなの方でお気に入られリストを200人までに絞ったのかしら、なんてことを思いつつ全く調べていません。 もしそれが当たりなら、お気に入りリストを逆にたどれば(つまり昔のやり方に戻せば)、おそらく解決するはずなのですが、まあそのうちということにさせてくださ

取得にかかった時間は50時間、つまり丸2日くらいでした。 把握したブックマーカー: 27730 退会・もしくはプライベートモードのブックマーカー: 550 お気に入りを使っていないブックマーカー: 10316 のべお気に入り人数: 239537 ファイルはこちらのほうにおいてあります。

取得は1日と12時間弱。けっこう早く終わりました。 把握したブックマーカー: 26334人 退会した、もしくはプライベートモードの人: 530人 お気に入りを使っていないブックマーカー: 9601 のべお気に入り人数: 227604 ということで、こちらに詳細データを公開しています。

取得に3日と18時間くらいかかりました。 なんか退会者*1が減っていますけど、この間お気に入られ数が減ったのが関係しているのかしら。よくわかりませんが。 把握したブックマーカー: 25413 退会、もしくはプライベートモードのブックマーカー: 521 お気に入りを使っていないブックマーカー: 9192 のべお気に入り数: 216619 ということで、こちらに詳細データを公開しています。 *1:お気に入りに入れた人がその後退会した、という場合にお気に入り一覧には名前が残るのだけど、その人数

把握した利用者: 25828 退会、もしくはプライベートモードの利用者: 1730 お気に入りを使っていない利用者: 8843 のべお気に入り人数: 214712 ということで、こちらに詳細データを公開しています。

とても忙しいです。 ふだん忙しくしていないだけに、けっこう疲れます。 で、出来ているのに、公開するのを忘れてました、これ。 把握した利用者: 24961 退会・プライベートモードの利用者: 1669 お気に入りを使っていない利用者: 8556 のべお気に入り人数: 204400 こんな感じです。 さて、また続きをやらないと。

ここのところ、はてブ、サーバの負荷の問題なのか新システム導入の影響だかわかりませんが、なんか不安定ですよね。 正直今月も先月同様やばいことになるかな、と思ったのですが、そんなこともなく 把握したブックマーカー: 23800 引退、もしくはプライベートモードなブックマーカー: 1642 お気に入りを使っていないブックマーカー: 8159 のべお気に入り人数: 193178 という感じなので、まあこのまま公開しようかと思います。 例によって、退会者を可視化するBookmarklet用のデータの方も更新してます。 なんかあったらブクマコメントかこのエントリのコメントでご指摘ください。 なお、取得にかかった時間は約29時間でした。

id:kyo_ju にいろんなところで心配されてしまった、「お気に入られリストのトラブル」ですが、大したことじゃないです。 5月1日に取得したリストがどうも小さい、というか、退会者が1万人以上になっている、という。 把握したブックマーカー: 20325 退会、あるいはプライベートなブックマーカー: 11623 お気に入りを使っていないブックマーカー: 1842 のべお気に入り人数: 160077 いくらなんでも数字が違うので、5月7日に再度取得しました。その結果が、 把握したブックマーカー: 22926 退会、あるいはプライベートなブックマーカー: 1537 お気に入りを使っていないブックマーカー: 7891 のべお気に入り人数: 184024 ということで、まあたぶんこちらの方が正しいのだろうなと。 そんなわけで、データは5月7日のデータの方にのみリンクを張っておきます。 5月1日のデー

今回は25時間ほど。こんなもんでいけばいいなあと思います。 把握したブックマーカー: 21544 退会した、もしくはプライベートモードにしたブックマーカー: 1454 お気に入りを使っていないブックマーカー: 7427 のべお気に入り人数: 167783 退会者を可視化するブックマークレットを公開した割には退会ブックマーカー数が減らないなあ、という気はしますが、まあこの辺の退会したブックマーカーをわざわざお気に入りに入れている人、という存在もわかりましたし、退会者をリストから外そうにも、全員がお気に入りから外さないとその人が把握リストから外れることはないので、こんなものかもしれません。 ということで、データはこちらです。 なお、上記退会者を可視化するブックマークレットに使用するデータも、今回のリスト更新に伴ってアップデートしました。どうぞご利用ください。

昨日の話の続き。 お気に入りに入れたものの、入れたお気に入りのユーザーがはてなをやめてしまうことがあります。また、お気に入りユーザーが公開をプライベートモードに変更して不可視化することもあります。 これらユーザーは、お気に入りには残ってはいるものの、お気に入りとして使う意味はあまりないことが多そうです。 そのため、削除したいのだが、消すのが大変なことが多いようです。 退会者一覧がほしい。 上記リンク先にもあるとおり、自分のお気に入りユーザー一覧は、http://b.hatena.ne.jp/(ユーザー名)/follow で確認することが出来ます。ただ、ここから退会ユーザー、プライベートユーザー*1を探すのはそこそこ難しいです。 というわけで、退会していないユーザーを消して、退会したユーザ、プライベートユーザをあぶり出すbookmarkletを作ってみました。 bookmarklet とはい

いつものやつです。今回は19時間ほどで取得できてました。軽くなったのか、日曜日の午前中ということでアクセスが少なかったのか、どちらかなのか、両方なのか、他に原因があるのか詳しいことはわかりません。 ブックマーカー総数: 20206 非公開、もしくは退会したブックマーカー: 1400 お気に入りを使っていないブックマーカー: 6960 のべお気に入り人数: 151618 前回予告したとおり、今回からのデータについてはJSON形式でのデータの同梱をやめました。データ容量が圧迫したら過去のzipからもJSON抜いていくかもしれません。 データはこちらです。 あと、なんか非公開にしたり退会したりした人に関して、http://b.hatena.ne.jp/(ユーザー名)/follow ページがどうたら、みたいな話があるようなので、謎のJSONデータを置いておきます*1。クロススクリプト関連でちょっと

やめようかな、といいつつ辞めずに3度目です。そりゃはてブクラスタにも入るわな。 取得は22時間程度かかっています。速くなったの?よくわかりません。 把握したブックマーカー: 19341 引退したブックマーカー: 1345 お気に入りを使っていないブックマーカー: 6583 のべお気に入り人数: 140928 ブックマーカーの増加よりものべお気に入り人数の増加が多い、というのはまあお気に入りそのものの特性*1があるのを考慮しても多い感じがします。リニューアルの効果なのかな。 あと、ここ1ヶ月同梱のJSONデータに関する反応がなかったので、たぶん次回からJSONデータは同梱やめます。どうせYAMLデータも使われてなくて、ランキングしか見られていないような気がするし。 データはこちらからダウンロードしてください。 *1:相互に増やせば倍になるし、ネットワーク的には2乗に比例しそう

あけましておめでとうございます。 うーん。 まあ三が日くらいはゆったりと暮らそう、と思ってスクリプトの結果を取り出すのを放置していましたが、こりゃ大変だわ。 1月1日の2時過ぎから動かしたスクリプトで結果取得完了するまで、約26時間。 何が起こっていたんでしょうか。 把握したブックマーカー: 18145 たぶん引退したブックマーカー: 1288 お気に入りを使っていないブックマーカー: 6162 のべお気に入り人数: 125780 こちらのほうに結果を置いておきます。 それにしても、ファイルがずいぶん大きくなっちゃったなあ。 JSONデータとか同梱するのやめようかなあ。

12月2日付でリストを作り直していました。 えーと、昨日のエントリにも追記したとおり、fav_count(お気に入り人数)とfaved_count(お気に入られ人数)を取得する際に、,(コンマ)が含まれていると正規表現マッチに失敗していました。その人のブックマーク数を取るときには,を考慮して取得していたんだけどなあ、ということでその辺を急ぎ修正で直してアップし直したんですが、まあ誤差があるのも何だよな、というのと、もう一つ気になることがありまして、昨日の夕方から取得し直していました。 気になること、というのは。 ええ、気になるのは「お気に入りを使っていない人」が少なすぎる、ということですね。それまで数千人単位でいたのに、2人まで減るなんてあり得ないじゃないですか。 そんなわけで、スクリプトとはてブのソースを見て。 これをスクレイピングするとそうなるのね。 新しいはてブでは、お気に入り一覧を

えー、もともとこれは「お気に入られリスト」なので、各人自分のお気に入られが見られるようになった今、別に作る必要はなくなったものなのです。 ランキングとか別に作るつもりで作ってるやつじゃないのです。ということで前回で最終回にしようかと思っていたのですが、一応リニューアル後に取得するとどんな感じになるかな?というのは見ておいた方がいいかな、と思って、スクリプトを少し変更した上でリストを作成してみました。*1 しかし、時間がかかったなあ。followerページも取得するようにしたので、1人あたりの取得ページが2から3に変わっているのもあるでしょうけど、それにしても取得に29時間とかあり得ないというか。 これ、単純にHTML部分だけ取りに行くだけだから、faviconとか、Javascriptとか、はてなスターとか、取りに行かないんですよね。それでこの遅さ。頑張ってサーバ増強、なんてことになればい

もしかしたら最終回になるかもしれない今回です。 最終回かもなので11月は毎週とか10日おきにやろうかとも思いましたが、たぶんやらないだろうなあ。 把握したブックマーカー: 11156 そのうちプライベート、もしくは退会したブックマーカー: 452 お気に入りを使っていないブックマーカー: 5298 のべお気に入り数: 69079 ちなみに取得には12時間くらいかかりました。かかったなあ。 一覧はこちらからどうぞ。

今回は時間がそこそこかかったなあ。10時間ほどかかっています。 把握したブックマーカー: 10904 非公開・退会したブックマーカー: 432 お気に入りを使っていないブックマーカー: 5168 のべお気に入り人数: 66773 こちらに今月分があります。 はてブリニューアルが11月下旬、ということで、リニューアルの内容によっては次回が最終回になるかもしれませんね。さてどうなることやら。

すいません。アップするの忘れてました。 リストそのものは6時間くらいで出来上がっています。 把握したブックマーカー: 10319 プライベートモードか退会したブックマーカー: 409 お気に入りを使っていないブックマーカー: 4832 のべお気に入り人数: 63151 ま、そんな感じで。

タイトルは実際には"はてブお気に入られリスト2008年8月分"です。本当にありがとうございました。 把握したブックマーカー: 10515 引退したブックマーカー: 406 お気に入りを使ってない人: 4931 のべお気に入り人数: 64166 リストはここでダウンロードできます。 で、今まで中のYAMLデータについて詳しく解説していなかったので、この機会に紹介しておこうかと。特に解説はしませんが、同梱のJSONデータも基本的には同じですので解析、検索等に使えるはずです。 YAMLデータにある項目について。 まあ、どのくらいの数のはてブオタがそういう彼女をゲットできるかは別にして、(略だってば)、ヲタの都合のいい妄想の中に出てきそうな彼女に、お気に入られリストのことを紹介するために知るべき10項目を選んでみたいのだけれど。 あくまで「入口」なので、見た目的に過大な負担を伴うJSONの解説は避

今回は取得に約5時間かかりました。 把握したブックマーカー: 10256 非公開、もしくは引退したブックマーカー: 394 お気に入りを使っていないブックマーカー: 4790 のべお気に入り人数: 62625 こちらのzipファイルがそれです。