phpによるスクレイピング処理入門
1. はじめに このサイトは php を利用したスクレイピング処理の具体的手法について記載されたサイトにしようと思っています。なので、あまり面白いサイトではありません。内容も偏重していることと思いますが、ご質問などがございましたら、りょーちまでご連絡ください。 1.1. スクレイピングとは スクレイピングの話しを始める前に、現在のWebサービスについて幾つか言及しておきます。 現在様々な会社が様々なWebサービスを展開しています。かなり昔、今よりWebサイトそのものが少ない頃の時代は、HTMLファイルを手動で作成することが殆どでした。しかし、現在はバックグラウンドにデータベースが存在し、データベースの内容を動的に表示し、ページを作成するようなサイトがかなり多くなっています。 さて、データベースを利用するメリットは何でしょうか？ 幾つかの視点が挙げられると思います。 最も重要な点は、ひとつひ
未だに原理、仕組み、名前のわからないもの : 暇人＼(^o^)／速報
未だに原理、仕組み、名前のわからないもの Tweet 1 名前：以下、名無しにかわりましてVIPがお送りします[sage] 投稿日：2009/11/24(火) 19:31:41.88 ID:HiITGPde0 瞬間接着剤で引っ付く仕組み 溶かしてるの？ ■一年はなぜ年々速くなるのか 12 名前：以下、名無しにかわりましてVIPがお送りします[sage] 投稿日：2009/11/24(火) 19:46:49.22 ID:VR3kXkeY0 >>1 尿素樹脂 水分に反応する 【目指せ「クイズマスター」！！】（QMA好き必見！今すぐに出来るやりこみ要素満載のオンラインクイズゲームです） 4 名前：以下、名無しにかわりましてVIPがお送りします[sage] 投稿日：2009/11/24(火) 19:33:56.38 ID:iqIZwd0l0 アンプで音が良くなる事 音を大きくする物なんだろ？ 13
沈黙を破ったホリエモン，ITを語る - インタビュー：ITpro
証券取引法違反の疑いで係争中の元ライブドア社長，堀江貴文氏は2008年9月8日，ITproとの単独取材に応じた。堀江氏は8月7日からサイバーエージェントが運営するブログ・サービス「Ameba」で個人ブログ「六本木で働いていた元社長のアメブロ」を開設。「思ったことを素直に書きます」と，最高裁判決を前に情報を発信していくことを宣言した。沈黙を破り，約1年半ぶりにメディアの対面取材に応じた堀江氏が，ITを語る。 これまでの沈黙から一転してブログを始めたのはなぜですか。 それは暇なのと，ストレス解消と，メディアに対するけん制ですね。継続中の裁判で一審と二審はあまり目立たないようにということで，2年くらい一方的にメディアに殴られている状況が続いていました。しかし，結局はこういう結果（一審，二審も実刑判決）です。だったら，悪い情報や間違った情報などが流れていたら，ブログできちんと反論していこうかなと。
叶紙器 - Wikipedia
叶 紙器（かのう しき、1965年 -）は、日本の推理作家。2009年10月、第2回ばらのまち福山ミステリー文学新人賞で長編ミステリ『伽羅の橋』が大賞を受賞した。受賞時のペンネームは糸冬了（より とおる）。 1965年、大阪府大阪市にて生まれた[1]。2000年代より、大阪市にて会社員として働きながら、作家を目指し小説の執筆に取り組んだ。休日など空き時間を利用してミステリー小説を執筆し、3年がかりで「伽羅の橋」を完成させた[2]。文学賞に投稿した経験は一度もなかったが[3]、初めて「ばらのまち福山ミステリー文学新人賞」に同作を応募したところ、審査した島田荘司より「巨大なスケールと優れた着想を備えた10年に1度の作品」[4] との評価を得て、同賞を受賞した[2][3][4]。
[ニュース] はてななどの各社担当者が自作サーバーのノウハウを紹介
はてなやサイバーエージェントなど、5社の担当者が自作サーバーに関するメリットやデメリット、ノウハウなどを紹介する「自作サーバカンファレンス」が11月25日に開催された。 自作サーバーのメリットといえば、コストダウンがもっともわかりやすいメリットだったが、最近ではベンダー製サーバーの価格低下やクラウドサービスも充実し、コスト面では以前ほどの価格差はなくなってきている。しかし、「まだまだ自作サーバーの可能性は豊富にある」ということで、はてななど自作サーバーを利用するITベンチャー5社が自社の導入例をもとにメリット・デメリット、ノウハウなどを紹介するカンファレンスを開催した。 カンファレンス冒頭に登壇した、株式会社はてなで執行役員を務める田中慎司氏は「はてなでは設立当初から自作のサーバーを使ってきているが、ここ最近を見ると他社でも自作サーバーを使用するケースが出てきている」とコメントした。 また
Google Chrome OSに欠けているもの
割と長らく待った末に、GoogleはついにChrome OSで何をやろうとしているのかを明らかにした。Netbook向けに設計された同OSは既に、Googleの優れた成果の1つとして歓迎されている。登場まであと1年あるというのに、一部の人は今後の展開を楽しみにしている。 だがChrome OSのすべてが祝福されるわけではないだろう。このOSには幾つかの重要な要素が欠けている。すべてのニーズを十分に満たすことはなさそうだ。最悪なのは、消費者、開発者、企業を満足させられるかどうか分からないことだ。現時点では、同OSの価値は未知数だ。 それを踏まえた上で、今のところChrome OSに欠けている10の要素を見てみよう。 1. 企業向けではない Googleが11月19日にChrome OSを披露したとき、同OSが法人ニーズを満たすのかどうか知りたがっていた企業には、大した希望は残されなかった。C
＠IT：Ubuntuで始めるクラウドコンピューティング（1/3）
～Amazonとユーカリ、コアラが好きなのはどっち？～ Ubuntuで始めるクラウドコンピューティング Ubuntu 9.10には、EucalyptusをベースにしたAmazon EC2/S3互換の仮想化環境構築ソフトウェア「Ubuntu Enterprise Cloud」（UEC）が含まれています。早速試してみませんか（編集部） Ubuntu Japanese Team／株式会社創夢 吉田 史 2009/11/25 EucalyptusとUEC 10月29日にリリースされたLinuxディストリビューション「Ubuntu 9.10」（開発コードネーム“Karmic Koala”）には、「Ubuntu Enterprise Cloud」（UEC）という、Amazon EC2/S3互換の仮想化環境構築ソフトウェアセットが含まれています。 UECはUbuntu 9.10の主要機能の1つとして開発
dat落ちした2ちゃんねるのスレを読めるようにする、ログのP2P共有ツール「o2on」 - SourceForge.JP Magazine
2ちゃんねるのスレッドは、書き込みの数が1000件を超えたり、しばらく書き込みがなかったりすると閲覧できなくなる。いわゆる「dat落ち」と呼ばれる状態だ。dat落ちしたスレッドは2ちゃんねるが運営しているサービスか、ウェブ上の過去ログ保存サイトを利用すると読むことができる。だが、2ちゃんねるのサービスは有償であり、過去ログ保存サイトでは読めないスレッドも多い。そこで役に立つのが「o2on」である。 o2onは2ちゃんねるの過去ログをP2Pで共有するファイル共有ソフトだ。ファイル共有ソフトというとWinnyやBitTorrentを想像するかもしれないが、o2onが共有するのは2ちゃんねるのログファイルのみなので、著作権を侵害する恐れはない。またo2onは独自のネットワークを利用し、プレーンテキストのログファイル以外を転送しないため、個人情報流出につながるウイルスをダウンロードしてしまう危険も
美人の元カノに再会した
先日、偶然、本当に偶然元カノに会った。 別れてからだいぶ時間も経っていたし、別れ方もさっぱりしていたので、 久々に会った友人感覚で話が盛り上がってしまい、 後日夕食を食べに行く流れになった。 で、この前の連休、一緒に食事をした。 もともと美人だったんけど、化粧も上手くなっていて、髪型も好みで、余計美人になっていた。 モテるんだろうな～と思いつつ、聞いてみたら、意外にも付き合っている人はいないらしい。 俺も今は独り身だけど、もうこの人とは一度別れた関係なので、特に何も期待はしていなかった。 そういう話にも踏み込んだけど、彼女ももう俺には恋愛感情はないと言った。 その後、場所を喫茶店にうつし、付き合っていた頃の話などで盛り上がった。 付き合っていた頃にはしにくかった話（結婚観の話とか）もした。 互いに変わった所、変わってない所があって、とても楽しかった。 遅くなってしまったので、喫茶店から彼女
人工無脳を作るのに必要なものを調べ中 - hellkite 日記と雑記とメモ。
人工無脳･･･というか、botを作るのに何が必要なのか調べている最中なのでメモ。 のつもりだったけど、途中からグダグダになったので(･ω･｀) 形態素解析エンジン 恋するプログラムでは、ChaSenって形態素解析エンジンを使っていたけど、調べてみると今はMecabって形態素解析エンジンの方が一般的みたい。 Googleで検索してみると、Mecabの方がヒット数が多い。 mecabで検索? -> 4,550,000 chasenで検索 -> 3,670,000 ただ、サーバで稼働させた場合、自宅サーバでやるならどれを使うか自由に選べるけど、レンタルサーバだとこれらが使えるかどうかはわからない。多分無理だろう。 そうすると、Yahooが提供しているWeb APIが第一候補になりそう。 Yahoo!デベロッパーネットワーク テキスト解析の中に形態素解析エンジンが含まれています。 利用制限があるけ
自作サーバカンファレンス「はてなの自作サーバの実際」＋他セッション講演メモ - RX-7乗りの適当な日々
本日の自作サーバカンファレンス、申し込みして楽しみにしていたのですが、体調がよろしくなかったので泣く泣く不参加・・・にしようとしていたところ、なんと！Ust(USTREAM)配信されているようだったので、そっちで視聴しました。感謝！！ 1つ目のトークの"はてな"の自作サーバ事情の話、他各トークセッションのメモ書きを今後の自分のために残しておきます。 田中さん(id:stanaka)のオープニングセッション 自作サーバは安い早いうまい 必要十分な仕様 部品単位で調達・組立 独自のカスタマイズ(SSD使いたい、など) はてなでは1年くらいSSD使っている！ 安い Core2Quad + 8GB + SSD X25-M 80GB \100,000 + 5,000/month (1A) \160,000/year Amazon EC2と比べても、1年でもとが取れて、SSDも付いてくる 自作サーバの
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
はてなブックマーク件数取得APIとは はてなの人気・最新記事を集めました - はてな
スクレイピング - Google 検索