naoyaのはてなダイアリー - さくらインターネット移行記#3 はてなブックマーク移転
さて、移行記も #3 となりました。今回は先日作業を終えたはてなブックマークの移転について。 旧サーバールームからさくらインターネットのiDCへのサーバー移転作業にもだいぶ慣れて来たこのごろ。これまでは比較的はてな内の他サービスとの連携が疎になっていたり、負荷がそこまで高くないものであったりと移行しやすいものから持っていってましたが、そろそろ難しいところ手を付ける時期に来まして、はてなブックマークの移転です。 以前に書いた はてなブックマークの裏側その後 - naoyaのはてなダイアリー では 2006年10月時点で ユーザー: 60,000 人 ブックマーク数: 787万件 サーバー: 30台 となっていました。移転したこのごろはというと ユーザー: 80,000 人 ブックマーク数: 1,182万件 サーバー: 移転前約45台 (移転後 約25台) という具合になっていました。順調に伸
Forkが気になりつつthread - tetsunosukeのnotebook
id:ablaboさんがParallel::ForkManager使ってなんかやってるんで、自分はthreads使ってみた。*1 いろいろあってオリジナルとおなじじゃなかったりちょいダサだったりしますが気にしないで。 use strict; use threads; use threads::shared; use Data::Dumper; use LWP::UserAgent; my @global_status; share(@global_status); #これポイント my @urls = qw(http://blog.livedoor.jp/dankogai/ http://d.hatena.ne.jp/ablabo/ http://d.hatena.ne.jp/onishi/); my @threads; my $id = 0; for my $url (@urls) {
perlthrtut - Perlにおけるスレッドのチュートリアル - perldoc.jp
名前¶ perlthrtut - Perlにおけるスレッドのチュートリアル 説明¶ NOTE: this tutorial describes the new Perl threading flavour introduced in Perl 5.6.0 called interpreter threads, or ithreads for short. In this model each thread runs in its own Perl interpreter, and any data sharing between threads must be explicit. 注意：このチュートリアルは、インタプリタスレッド(interpreter threads)、 あるいは短くiスレッド(ithreads)と呼ばれる、Perl 5.6.0において 導入された新しいPerlスレッドの
perldoc - Pod 形式の Perl ドキュメントの検索
perldoc - Pod 形式の Perl ドキュメントの検索 perldoc - Look up Perl documentation in Pod format. 名前 NAME perldoc - Pod 形式の Perl ドキュメントの検索 perldoc - Look up Perl documentation in Pod format. 概要 SYNOPSIS perldoc [-h] [-v] [-t] [-u] [-m] [-l] [-F] [-i] [-V] [-T] [-r] [-d出力先ファイル] [-oフォーマット名] [-Mフォーマッタクラス名] [-wフォーマッタオプション:値] [-nnroffの代替] [-X] ページ名|モジュール名|プログラム名 perldoc [-h] [-v] [-t] [-u] [-m] [-l] [-F] [-i] [-V]
Amazon倉庫はニートでも出来る簡単なお仕事らしい : オーニソプターズ
作業内容 ルンバみたいな自動で送られてくる棚に商品をバーコードでスキャンして入れるだけ ノルマは１日3000件 拘束時間11時間(勤務時間10時間プラス休憩1時間) 時給1050円 なんj民にオススメ
Xangoのサンプルスクリプト - odz buffer
昨日のエントリに軽くブックマークが付いているようなので、サンプルスクリプトをさらしておく。 サンプルの割りに依存ライブラリが多いとか、やたら長いとかはまぁ勘弁。とりあえず Xango::Broker::Push のほうを。 #!/usr/bin/env perl #sub Xango::DEBUG { 1 } package MyHandler; use strict; use warnings; use POE; use Readonly; use HTML::LinkExtractor; use Encode; require Encode::Detect; Readonly::Scalar my $MAX_DEPTH => 5; Readonly::Scalar my $MAX_REDIRECT => 5; sub spawn { my $class = shift; my $sel
)
Perlメモ-モジュールのインストール(CPAN) - Walrus, Digit.
いくつか、分かっていることとわかっていないことがあります。 以下に分かっている範囲でのポイントを挙げます。 Timeout for inactivity during Makefile.PL? [0]では0(デフォルト)にする ここでTimeoutを指定してしまうと、完了またはタイムアウトの通知にalarm関数を使います。 alarm関数はActivePerlでは実装されていないため、エラーになります。 makeは、perl -V:makeが返すものを使う makefile.plはperl -V:makeが返すmakeプログラムにあったmakefileを作るようです。 perl -V:makeがnmakeを返す場合、dmakeを使うとエラーが発生します。 これ以外の設定は、実施者の任意で構いません。 私が意識して行った設定は以下のものです。 Select as many URLs as y
携帯からPlaggerしてみる - たら風呂
さくらのメールはmaildropというの使ってるらしいんですが、 そいつにはメールの着信をトリガーにして自作のスクリプトを動かせる機能があるようです。 参考：さくらのレンタルサーバ非公式FAQ ということは携帯からconfig.yamlのメール送ってPlagger起動できるんじゃね？ と思ったのでさっそくやってみました。 まずはコンパネからメールアドレスをひとつ作成。 すると/home/username/Mailbox/にそのアドレスのディレクトリが作られます。 plagger@username.sakura.ne.jpなら/home/username/Mailbox/plagger/な感じです。 その中に.mailfilterというファイルがあるので、 こいつに設定を書き込みます。 PERL5LIB="/home/username/local/lib/perl5:/home/userna
YappoLogs: Xangoというクロウラーフレームワークを使ってみる
Xangoというクロウラーフレームワークを使ってみる Xango XangoはPerlで書かれた汎用クローラーフレームワークです。 イベント型フレームワークPOEを使用することにより高速なクローリングが可能です。 実装にもよりますが、単一プロセス内でインデックシングや文字コードの変換等の処理を 同時に行うアプリケーションでも１秒に５～８ URL、１時間で 18000 ~ 22000 URLの処理が行えます。 ドキュメントはperldocのみっぽいので、日本語の情報を残す意味で使い方のメモをば。 相当端折って書いてます。 Xangoを使ったクロウラーを書くには、制御用のにPOEセッションを作る必要があります。 Xangoを制御するためのモジュールを適当な名前で作っておくのがスマートかと思います。 とりあえずセッション作成を行う処理を書きます sub spawn { my $class = s
個人的に常用中の Firefox 拡張機能 20個 | WWW WATCH
いたるところに同じようなエントリーは数あれど、懲りずに私が個人的に日常利用している Firefox 拡張機能を挙げてみました。 色々インストールしてはあまり使わないので削除したりを繰り返していますが、ここに挙げた 20個はその中で定着したもの。 All-in-one Sidebar Clippings Copy URL + Firebug FireFTP Google Toolbar for Firefox Greasemonkey IE View Link Alert Nightly Tester Tools no-referrer QuickNote ScrapBook Screen grab! Search Station Tab Catalog Tab Mix Plus Tab URL Copier User Agent Switcher Web Developer All-in-
お風呂場の鏡に水アカがついて困る
いまの部屋に引っ越ししてからもうすぐ１年半。 こまめに掃除をしているので結構綺麗な部屋を保っていますが、ちょこちょこと汚くなってしまっている箇所もあります。 そんな中で一番残念な箇所がお風呂場の鏡。 ウチの鏡は横幅2mくらいあるのですが、全面に渡ってうろこ状の水アカがびっしりとついてしまって、もはや鏡としての役割を放棄してしまったかのようです。 これではいかんと、バスマジックリンを吹きかけてタワシで一生懸命こすってみたものの、ほとんど改善せず。 要は磨けば良いんだろ？ってことで歯磨き粉をつけたタワシで一生懸命こすってみたものの、やっぱり改善せず。 Googleさんに聞いてみた所、水アカの原因はカルシウムとマグネシウムらしいので、酢を吹きかけて擦ってみたものの、あまり改善せず。 なんかもう疲れてしまいました。 そんなときに出会ったのがこれ。 まさにワタシにぴったりの商品名だったのでちょっと高
ITmedia Biz.ID：“なめて”しまったねじを何とか回すグッズ
大きさの合わないドライバーでねじをむりやり回していると、ねじの溝が潰れ、いわゆる“ねじをなめた”状態になってしまう。しかし、なめてしまったねじを回すためのドライバーや、ねじの溝の摩擦力を増やす液が販売されている。 ある日、筆者は会社で使っているPCのメモリを増設することにした。使っているThinkPadの裏ぶたを外すために本体をひっくり返し、ドライバーでねじを回したが、なかなかうまく回ってくれない。力をこめて回しているうちに、3つのねじ頭にある溝がドライバーで削られ、つぶれてしまった。 このようにねじの溝を潰してしまった状態は「ねじをなめた」と呼ばれる。ドライバーの大きさが合っていないのに無理やり回してしまった場合に起こりやすい。こうなってしまうと、そのままねじを回すことは難しい。 しかし、あきらめるのはまだ早い。こんな場合に役立つグッズが各社から発売されている。 ねじに溝を作るドライバー
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
はてなブログ ヘルプ
http://tasuku.suenaga.name/archives/2005/08/xangobrokerperl.html
http://d.hatena.ne.jp/lestrrat/20070328