Webアプリケーションにおける Job Queue システムの構成例と Worker を作る際に気をつけること - blog.nomadscafe.jp
Webアプリケーション内で処理を直列に実行せずにJob Queueに回して非同期に実行することが多くなって来て久しいと思いますが、そのおすすめ構成と気をつけることについてつらつらと。 1) 既存のデータベースをキューとして使う構成例 １つ目はMySQLなどのデータベースをキューとして用いる例。既にアプリケーションで利用しているデータベースにキュー用のテーブルを作成して利用します。データベースを利用したキュー管理の仕組みとしてJonk、Qudo、TheSchwartzなどがPerlでは有名どころです。 依存するミドルウェアが増えないので最もシンプルな構成になると思います。 上記の図ではWorkerはアプリケーション内で実行することで冗長性を確保しますが、キューを格納するデータベースはSPOFになります。しかし、、データベースに障害があった場合キューだけでなくすべてのサービスが停止すると思われ
The Node Beginner Book
The perfect introduction plus its comprehensive follow-up now in one bundle! Leanpub.com currently offers the final version of The Node Beginner Book plus its follow-up The Node Craftsman Book for $9 only! (limited offer - regular price is $29.99) 224 pages in total PDF, ePub & MOBI Free lifetime updates Unconditional 45 days money back guarantee A Node.js tutorial by Manuel Kiessling About The ai
CommonJS Spec Wiki
Welcome to CommonJS, a group with a goal of building up the JavaScript ecosystem for web servers, desktop and command line apps and in the browser. This wiki is a starting point for collecting up ideas, any draft API suggestions for the CommonJS group. Discussions occur on that mailing list and on IRC (#commonjs on freenode). Meta Introduction FAQ Process Target Platforms Coding Standards Current
ゆーすけべー日記
サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一本吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。 お礼に料理を作るとはいえ、サキの家には食材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい食材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ
Case study: When you’re as successful as Groupon, app performance is always top of mind - New Relic Blog
Growing by Leaps and Bounds Launched in November 2008, Groupon features a daily deal on the best stuff to do, see, eat, and buy in a variety of cities in over 31 countries. People looking for great deals can get Facebook or Twitter feeds, email notifications or visit the Groupon site, customized for their city, to find promotions that match their interests. And as the company name implies, daily d
自宅サーバのインフラ設計書を公開します - @int128
自宅サーバのインフラ設計書を公開します。 Design paper of the home server（抜粋） 昨夜にTwitterで公開したら予想外に反響があったので、ちゃんとエントリに残すことにしました。クラックされるおそれがあるので、細かい部分は公開できないことをご了承ください。 内容はこんな感じ。 要件概要 機器仕様 ネットワーク設計 ソフトウェアスタック設計 共通基盤設計 サーバ詳細設計 上記にバックアップ設計や運用管理まわり*1を加えれば、インフラの設計書はだいたいこんな感じではないかと思います。 インフラの要件定義は難しい 一方で、インフラの要件定義は十分に標準化が進んでおらず、会社やチームによって文化がかなり違います。特に受託開発（SI）の場合は、お客様の中にインフラに詳しい人がいなくて調整に苦労することも多いと思います。費用と可用性のトレードオフの部分はなかなか伝わりづ
ウノウラボ Unoh Labs: VMWare ESXi4 で開発サーバを仮想化しよう
こんにちは、ryosukeです。 現在ウノウでは開発環境にVMware vSphere Hypervisor (ESXi4.1) を使ってプロジェクト単位で仮想サーバを構築しています(たぶん)。 私はインフラチームに関わってないので、実際のところ会社の開発サーバがどうなってるか詳細までは知らないのですが、今回は自宅の開発サーバでVMWare ESXi4を利用して仮想マシン作ってコピーで増やして開発サーバが沢山作れたよ、というところまで順を追っていこうと思います。 物理的に必要なものはサーバとして稼働するマシンと、クライアント(ハイパーバイザを操作するクライアント)として使うwindowsマシンと、DVDブランクメディアが1枚です。 内容は簡単ですが、ステップ数が多いので可能な限り箇条書きにします。 インストール VMWare社のサイトでVMware vSphere Hypervisor
プロのサーバ管理者がApacheのStartServers, (Min|Max)SpareServers, MaxClientsを同じにする理由 - blog.nomadscafe.jp
kazuhoさんが「プロのサーバ管理者の間では存在価値が疑問視されて久しい (Min|Max)SpareServers だと思う」と書いたり、hirose31さんが去年のYAPC::Asiaで{Start,{Min,Max}Spare}Servers,MaxClientsは同じにしているよと発表したり、実際前職のサーバはそのように設定されていたのですが、自分でうまく説明ができてなかったので、調べながら書いてみた。 本当はイントラブログ用に書いていたものですが、がんばったので転載。 前提として、CPUの使用率におけるsystemとfork Re: クラウドがネットワークゲーム開発者にもたらしてくれたもの - blog.nomadscafe.jpでも書いている通りforkってのはサーバにとって重い部類の処理になります。つまり負荷の高いときにforkを大量に行うのはしてはならないことの１つです。
動的にswfファイルを出力したFlashLiteによる携帯サイト作成 by swfmill(インストール編) - 適当な日々
フリーランスでwebの仕事をしながらwebサービスとかを作ったり作らなかったり、成長と挫折の記録・・・かもしれないphp & mingのインストール編はこちら 昨日phpとmingを使って動的にFlashを生成しようとインストールしていじってみたのだけれど、swfファイルをphpに変換するswftophpがどうもうまく動かない。 なのでming&phpという選択肢は保留にして、swfmillを使って動的swfファイル生成にチャレンジ。 swfmillはswfファイルとxmlファイルの相互変換ソフト。 swf⇒xml xml⇒swf の両方ができる。 なので、やりたいこととしては、 普通にFlashを作る swfmillでswfファイルをxmlに変換。 出力されたxmlを書き換え（多分phpで） 書き換えたxmlをswfに変換 これで動的にswfが生成できるぽい まずは、インストール
サイト高速化でコンバージョンは上がる！ 高速化したサイトの実証実験結果公開！
『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day
CLOSE_WAITのセッションを早く消す方法 - つれづれなる・・・
原因はおそらくwebサーバ〜DBサーバ間のセッションがネットワーク的に不安定だったからだと思うけど、DBサーバで netstat -an すると 大量の CLOSE_WAIT のセッションが残ってしまって、MySQL の最大コネクション数にまで達してしまってwebの表示が出来なかった。CLOSE_WAIT をいきなり消すことは出来ないので、早めに消えるようにしたいときは tcp_keepalive_time TCPセッションが確立されて検査が実施されるまでの時間 時間になると tcp_keepalive_intvl と tcp_keepalive_probes の値にしたがって検査を実施する tcp_keepalive_intvl 次の検査を実行するときの待ち時間 tcp_keepalive_probes 検査の回数のそれぞれの値を小さくしてあげればよい。変更方法は vi で :wq する
Ubuntuはchkconfigではなくsysv-rc-confを使うべし « ガンガンの自由帳
Xfceにしても重い時もあるので，Apacheなど自動的起動するようにしていたサービスを起動させないようにしようと思ってchkconfigコマンドで確認しようと思った． $ chkconfig –list プログラム ‘chkconfig’ はまだインストールされていません。 次のように入力することでインストールできます: sudo apt-get install chkconfig bash: chkconfig: command not found なんとびっくりデフォルトではインストールされないのだ． 今頃気づいた自分にもびっくりだが(笑) そこで，Ubuntu8.04にchkconfigをインストールした! apt-getでインストール． $ sudo apt-get install chkconfig Apacheのランレベルを確認． $ chkconfig –list
Infrastructure/Fedorahosted-retirement - Fedora Project Wiki
This page was last edited on 24 February 2021, at 21:09. fedorahosted.org retirement Summary fedorahosted.org was retired on March 1st, 2017. If you are viewing this page, odds are it's after that date and you have been redirected here by attempting to go to some project on fedorahosted.org. If you are a user of a project formerly hosted at fedorahosted.org, please search for the new home the proj
第3回 Amazon EC2でサーバを立てよう | gihyo.jp
Amazon EC2でサーバを立てよう S3の環境も整ったことですし、次はEC2を使ってみましょう。 Amazon EC2 Command-Line Toolsの導入 EC2の操作にも専用のツールが必要です。 「Amazon Web Services Developer Connection」のEC2のリソースページから、「Developer Tools」→「Amazon EC2 Command-Line Tools」→「Download the Amazon EC2 Command-Line Tools」と辿り、ec2-api-tools.zipをダウンロードし、適当なところに解凍してください。 そして、環境変数EC2_HOMEに解凍したディレクトリを設定し、EC2_HOMEのbinディレクトリにパスを通します。同時に、X.509証明書のPrivate Keyファイルのパス
ウノウラボ Unoh Labs: 快適なsshクライアント生活
はじめまして、HIROKIです。 大規模コンテンツの開発に携わっていると数多くのサーバにsshでログインすることになります。その手間を軽減するために $HOME/.ssh/config を設定してみます。 sshコマンドを簡略化 例えば dev01.labs.unoh.netというサーバにsshでログインするのであれば、 $ ssh -i ~/.ssh/id_rsa.unoh hiroki@dev01.labs.unoh.net という感じのコマンドでログインしているかと思います。 これを $ ssh dev01 でログインできるように設定してみましょう。 Host dev01 User hiroki HostName dev01.labs.unoh.net IdentityFile ~/.ssh/id_rsa.unoh 秘密鍵を複数使いわけている人はIdentityFileを指定すると便
インフラエンジニアになろう！ | Carpe Diem
おそらくこんなインターネットの端っこにあるブログで発してもあまり効果はないと思うけれど、個人的に感じるインフラエンジニアの魅力を書いてみたいと思います。 最近、このブログがほぼインフラに関する内容なのは、僕はインフラエンジニアだからだ。 僕は前職ではとある工場のようなところで働いていていわゆる普通に組み込み系のエンジニアだった。Win32 アプリケーションから Java アプリケーションから Structs を使った Java Web アプリケーションからファームウェアまで一通りの仕事をしたことがある。 そんな環境から一転して、今はとあるコンシューマサービスのインフラエンジニアをやっている。インフラエンジニアをやっている理由は、特に上から指示されたのではなく、まともなスキルもないのに自分で志願してやっている。 僕がどうしてインフラエンジニアをやっているかというと理由は、次のとおり。 おそら
Infrastructure/Fedorahosted-retirement - Fedora Project Wiki
This page was last edited on 24 February 2021, at 21:09. fedorahosted.org retirement Summary fedorahosted.org was retired on March 1st, 2017. If you are viewing this page, odds are it's after that date and you have been redirected here by attempting to go to some project on fedorahosted.org. If you are a user of a project formerly hosted at fedorahosted.org, please search for the new home the proj
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ModSecurity (mod_security) - Open Source Web Application Firewall
x.com
クックパッドのLVSについて - クックパッド開発者ブログ
