サイトを37倍に高速化した7つの手法 - オールアバウトTech Blog
今回はオールアバウトのnnmrが弊社サイトAll About Japanの速度を高速化した経緯についてまとめます。 All About Japanとは そもそもAll About Japan（以下AAJ）とは何かといいますと、弊社が提供している訪日外国人向けの日本紹介サイトです。 外国人向けサイトで、英語、中国語（繁体字）、中国語（簡体字）、タイ語、韓国語の5か国語に対応しております。 「Anime」「Izakaya」「Ninja」といったような特集や、実際に観光する人向けのモデルルート記事が特色です。 ■ 特集 (url : http://allabout-japan.com/en/tag/sushi/ ) ■ モデルルート記事 (url : http://allabout-japan.com/en/article/222/ ) 技術的な紹介 LAMP環境です。 （サーバー構成は後に記述
ウェブサイトの情報を調べたいときに便利なオンラインサービス14 | ライフハッカー・ジャパン
Digital Inspiration：ウェブサイトのオーナーとコンタクトするには？ このウェブサイトはどこでホストされている？ 同じサーバーで運営されているその他のサイトは？ このサイトはWordPressやDrupalを使っている？ このサイトがマネタイズに使っている広告ネットワークはどれ？ このサイトは中国からアクセスできる？ 今回は、こうした疑問を解決できるオンラインサービスを紹介します。ウェブサイトについてのさまざまな情報を調べられますよ。 just-ping.com Just Pingは、そのウェブサイトが諸外国からアクセス可能かを調べてくれます。ほかのPing送信サービスがせいぜい2～3カ国からしかPingを送ってくれないのに対して、このサービスはトルコ、エジプト、中国などを含む、30カ国以上の国からPingを送信します。ある国からのPingの結果が「100% Packet
Rubyとか使ってクローリングやスクレイピングするノウハウを公開してみる！ - 病みつきエンジニアブログ
今まで何度もスクレイピングとかクローリングをしてきたので、マエショリストの端くれとしてコツを公開すべきかなあ、と思い、公開します。 今日の題材は、CNET Newsです。私はウェブ文書にタグ付けをするという研究をしているのですが、そのための教師データとしてクローリングをします。 photo by Sean MacEntee 要件定義 CNET Newsから全ニュースを保存し、その本文をデータベースに保存します。これは、次のようなフローに書き下すことができます。 全URLを取得し、データベースに保存 データベースにある全URLをダウンロードする 保存した全ページを解析して、本文をデータベースに保存する という流れです。これらは独立していますから、それぞれどの言語で解析しても構いません。しかし後述しますが、「あとから追いやすくする」「適材適所」といったあたりを気をつけて、言語選択をするべきだと
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
