How to crawl a quarter billion webpages in 40 hours – DDI
More precisely, I crawled 250,113,669 pages for just under 580 dollars in 39 hours and 25 minutes, using 20 Amazon EC2 machine instances. I carried out this project because (among several other reasons) I wanted to understand what resources are required to crawl a small but non-trivial fraction of the web. In this post I describe some details of what I did. Of course, there’s nothing especially ne
[python]楽に条件分岐を行う方法 - Fomalhaut of Piscis Australis
Joel Spolsky: Joel on Software ソフト開発の方法論はいくつも提唱されているが、それが何で大切なのか、実施しないとなぜダメなのかがいまいちわからない。そして何よりつまらない。この本は、先の疑問に答えてくれるし、読んでいて面白い。いまだに根性論を唱えているBossにぜひとも読んでいただきたい本だ。 (★★★★★) PaulGraham/川合史郎: ハッカーと画家 プログラマの考えや行動は一般の人から見ると、奇妙で理解しがたく映るらしい。彼らはなぜそう考えそう動くのか、なぜ「常識で動く」ことをしないのか。 プログラマも、そうでない方も一度は読んでほしい。 (★★★★★) Tom DeMarco: Slack ゆとりの法則 ゆとりをなく ( 過度に最適化 ) してしまえば、組織は環境適応能力をなくしてしまい、長期的に見ると衰退する。それだけじゃなく、ゆとりをなくしてし
![[python]楽に条件分岐を行う方法 - Fomalhaut of Piscis Australis](https://cdn-ak-scissors.b.st-hatena.com/image/square/19d1fc6f454ca2b962084db44a484614756937d6/height=288;version=1;width=512/http%3A%2F%2Ffoma-zakki.cocolog-nifty.com%2F.shared-cocolog%2Fnifty_managed%2Fimages%2Fweb%2Fogp%2Fdefault.png)
対話シェルをもう少し使いやすくしてみる - Djangoへの片思い日記
Djangoへの片思い日記 - 準備で出てきた 「対話シェル」 どうやらこれを使いこなすと便利そうです。 「このコードこうやって書けば（期待通りに）動くのかな？」 と言うときや 「これ、ちょっと調べたい＞＜」 なんていうときに凄く便利そうです。 そんな対話シェルくんともう少し俺は仲良くなってみようと思いました。 readline は必須＞＜ まずはおもむろに「python」と打ってみます。 そして対話シェルが起動したらおもむろに 「ctrl+p」を押してみましょう。 >>> ^Pと表示されたらおめでとうございます。 readlineモジュールが入っていません＞＜ MacPorts でインストールしている場合は >sudo port install py25-readline と打ち込めば大丈夫です。 もっと仲良くなろうぜ！！ さて、仲良くなるのはこれからです。 まずは自分のホームディレクト
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
A-Liaison BLOG: Pythonで変数の型をチェックする方法（Javaでいうinstanceofが使いたい）
kndb.jp
