[B! 負荷分散] sumegeのブックマーク

日本Hadoopユーザー会

日本Hadoopユーザー会主催イベント『Hadoop / Spark Conference Japan 2019 』を3月14日に東京・品川区内で開催しました。盛況のうちに終了しました。多くの皆様にご来場頂き、ありがとうございました。イベントWebサイト： https://hcj2019.eventbrite.com/ ▲懇親会での集合写真イベントの様子は下記でも取りあげていただいています Hadoopは終わらない ―3年ぶり開催「Hadoop / Spark Conference Japan 2019」で日本人開発者が語ったこと　(gihyo.jp) 今回は、Apache Hadoopの主要開発者であるArpit Agarwal氏(Cloudera)とApache Sparkの主要開発者である Xiao Li 氏（Databricks）をお招きして、それぞれHadoopの新機能の

sumege 2017/01/20

リンク

WEBサイト負荷テストツール7選 | さぶみっと！JAPAN

WEBサイトに情報を入力するだけで負荷テストができるLoad Impact、GUIから操作できるApache JMeterや、コマンドラインから使うcurl-loader・httperf・Siege・Pylot・abを簡単な使い方と共に紹介していきます。 Load Impact http://loadimpact.com/ Load ImpactはスゥエーデンのGatorhole AB社が管理している、フォームに必要な情報を入力するだけで負荷テストをしてくれるWEBサイトです。ツールをインストールしたりする必要が有りませんので、非常に楽です。毎月5回まで無料で負荷テストができます。それ以上は10回/$30のクレジットを購入する事になります。トップページのフォームにURLを入れて「Run free test」をクリックすると、世界各地のいずれかのAmazon EC2サーバから負荷テス

sumege 2012/03/07

あとで試してみる

リンク

DBサーバーの負荷分散

MySQLアクセスを負荷分散するユーザーからのアクセス数が非常に多いWebサイトにおいて、MySQLのSLAVEサーバーを複数台並べて負荷分散させるということがよく行われています。ただ、Webアクセスの負荷分散は一般的なテーマなのでいろいろなところで語られているのに対し、DBアクセスの負荷分散というテーマは一般的でないのかあまり語られていないように感じます。 DBアクセスを負荷分散するにあたって一番荒っぽい方法は、Webサーバー上のプログラムの中でどのSLAVEサーバーに接続するかをランダムで決める方法です。ランダムと言っても長時間アクセスしているとほぼ接続先が均等化されるので、一見この方法でも問題ないように見えます。しかしこの方法だと、接続しに行こうとしたSLAVEサーバーが高負荷もしくはサービス停止中であっても構わず接続しに行ってしまうという問題があります。このような問題を解決する

sumege 2011/07/22

リンク

０円の広域負荷分散システムCloudFlareが素晴らしい件 | fladdict

fladdictの非公式プロジェクト（いわゆる裏dicct）に、posemaniacs.com というサービスがある。絵のデッサン素材を無料配信するサイトだけど、いつのまにやら老舗サイトに。気がついたら1日の転送量が30〜40GBまで膨れ上がっていた。あまりの負荷にホスト元のhetemlさんでアクセス規制、あわや閉鎖の危機の大ピンチ。わりと本気で、Pixivとか星海社とかマール社にサービス譲渡とかしようか悩んだ今日この頃でした。そんな折、@ku_suke さんのご了解で導入してみた、CloudFlareというサービスが、全ての危機を救ってくれた。マジ多謝です。どういうサービス？ CloudFlareはCDN（広域負荷分散システム）。世界5カ所にデータセンターを有し、データをキャッシュして各地に配信するこで負荷分散してくれる。いわゆるAkamaiの同類だけど、ものすごい特徴が１つある。