第4回 大規模データ処理におけるCPUの2大ボトルネックとは | gihyo.jp
「特定CPUコアでのボトルネック」と「リソースの奪い合い」が2大ボトルネック 第2回、第3回ではディスクI/Oボトルネックについて説明しました。レスポンスとスループットの関係を正しく理解し、I/Oスループットを最大化するようチューニングすれば、ほとんどの大規模処理は速くなります。ユーザもハッピー、皆さんもハッピー、さて家に帰りましょう。 ……しかし、次はだれかからこう聞かれることでしょう。 「CPUの使用率が異様に低いままなんだけど……？」 「CPUの使用率がずっと100％で張り付いているんだけど……？」 どっちやねん！と思うでしょうが、どちらも大規模データを処理するときに特に起こりえる問題です。 ボトルネックは、1つが解消すると、新たなポイントが明らかになるものです。そして多くのケースにおいて、ディスクI/Oボトルネックが解消した場合、次に詰まるのはCPUなのです。 CPUボトルネックは
サーバーレスの勉強方法を聞いてみた。- builders.flash☆ - 変化を求めるデベロッパーを応援するウェブマガジン | AWS
西村「はじめまして、テクニカルトレーナー/マネージャーの西村です。よろしくお願いします。」 下川「はじめまして、シニア サーバーレススペシャリスト ソリューションアーキテクトの下川です。よろしくお願いします。」 西村「早速ですが、私が実施しているトレーニングの場で聞かれる質問に関していくつか質問させてください。細かい話なのですが、“サーバレス” と “サーバーレス” のどちらの記載が一般的でしょうか ? “バ” の後を伸ばすべきかが地味に気になっています。」 下川「“サーバレス” よりも “サーバーレス” の方が、AWS ドキュメント検索時のヒット率が上がるので、“サーバーレス”と私は書きますね。」 西村「ちょっと得する話ですね、ありがとうございます。抽象的なお話ですが、サーバーレスとは何でしょう ? と聞かれたらどう応えるべきでしょうか。サーバーレスとは、サーバーがレスという表現だとシッ
nginx 移行を通じて学んだ Fastly のはじめかた - Retty Tech Blog
今年もはじまりました Retty Advent Calendar 2021 ! 初日を担当いたします技術部の西村です。 ※ 2021/12/03 更新 共通関数の設定 にて戻り値が設定できない旨記載してましたが、実はできるようになったとのご連絡をいただきましたので修正しております。 Subroutines | Fastly Developer Hub 今年はパート 2 までありますので、みなさまぜひご覧くださいませ。 Retty Part1 Advent Calendar 2021 Retty Part2 Advent Calendar 2021 今年の内容は「nginx 移行を通じて学んだ Fastly のはじめかた」ということで記事を書かせていただきます。 掲題の通り Fastly に関してはこれからはじめようと思っている方向けに記載しております。 弊社は昔から画像変換サービスやアセッ
2015年Webサーバアーキテクチャ序論 - ゆううきブログ
2023年03月31日追記：この記事を基に、@sadnessOjisanさんより、コードレベルにより踏み込んだ、かつ、グリーンスレッドベースの新しいWebサーバアーキテクチャも含めて整理された記事 Webサーバーアーキテクチャ進化論2023 | blog.ojisan.io が公開されました。 主に新卒のWebエンジニア向けに、古典的なWebサーバアーキテクチャを学ぶ道のりと代表的な実装モデルの概要を紹介します。 この辺りの話題がWeb界隈で流行っていたのは数年以上前というイメージですが、Webサービスは相変わらずWebサーバの上で動いているので、流行り廃り関係なく学ぶべき内容だと思っています。 また、HTTP/2がいよいよRFC化し、既にh2oやtrusterdなどのHTTP/2のサーバ実装があり、今後Webサーバアーキテクチャを再訪することが増えるような気がしています。 ところが、We
インフラエンジニアじゃなくても押さえておきたいSSHの基礎知識 - Qiita
最近はクラウド上のサーバーを利用する事も多くなってきた。 サーバーの用意やネットワーク周りの設定はインフラ部門がやってくれるけど、アプリのデプロイ／設定は開発者がする事が多いので、開発メインでやってるエンジニアでも最低限SSHの知識は必要になる。 また、Vagrant等でローカル環境にVMを作成する事もあるので、ローカル環境内でSSHを使用するケースも増えてきた。 というわけでインフラエンジニアじゃなくてもSSHクライアントの知識は必須になってきているので、改めてSSHの再学習をしてみることにした。 SSHとは 暗号や認証の技術を利用して、安全にリモートコンピュータと通信するためのプロトコル。 SSHでは以下の点で従来のTelnetより安全な通信が行える。1 パスワードやデータを暗号化して通信する。 クライアントがサーバーに接続する時に、接続先が意図しないサーバーに誘導されていないか厳密に
【小ネタ】踏み台サーバー経由でSSH接続する際の.ssh/config設定 | DevelopersIO
踏み台サーバーを経由してSSH接続する際、~/.ssh/config に設定を追記して接続したかったので、方法をまとめておきます。 わかっちゃえば「そりゃそうだ」という感じでした。 設定方法 例として、下記のようなSSHコマンドがあるとします。 $ ssh -i ~/.ssh/hoge.pem -o "ProxyCommand=nc -x fuga.foo.com:1080 %h %p" root@zzz.zzz.zzz.zzz このコマンドを ~/.ssh/config に設定する場合、下記のようになります。 Host sample Hostname zzz.zzz.zzz.zzz User root Port 22 # 指定がない場合はデフォルトの22 ProxyCommand nc -x fuga.foo.com:1080 %h %p IdentityFile ~/.ssh/hoge
インフラエンジニアのスキルチェックリストを書き出してみたよ - はてな村定点観測所
インフラエンジニアの仕事とは？ 最近、「インフラエンジニアってどんな仕事をするのですか？」と聞かれる機会がありました。インフラエンジニアという職業が最近確立したこともあって、巷では「サーバーの構築や設定をする人」という理解も根強いです。 インフラエンジニアにはどんなスキルがあるのか、私が携わってきた業務を中心にインフラエンジニアのスキルをチェックリスト形式で書き出してみました。「インフラエンジニアって何ができる人？」「インフラエンジニアを評価すれば良いの？」などのケースでお役に立てば幸いです。 インフラエンジニアのスキル DB設計 要件からDB定義を作成できる ER図を作成できる 第３正規化まで正規化できる パフォーマンスを意識したインデックス設定ができる パッケージ管理 RPMビルド環境がつくれる specファイルが書ける 独自YUMレポジトリを構築できる debパッケージも作成できる
Ansible と Terraform の違い - Qiita
はじめに Terraformを触るにあたり、Ansibleと機能的に何が違うのか混乱していたので調べてみたメモです それぞれの特徴 メイン：クラウドインフラストラクチャオーケストレーション サブとして構成管理もできる サーバー自体をプロビジョニングするように設計されている 厳密に宣言的(コードで最終状態を指定する) マルチクラウドを効率的に管理する 新しいサーバに対してhogehogeする クラウドリソース(サーバ、LB、DNS)の管理に優れている メイン：構成管理 サブとしてオーケストレーションタスクも実行できる 既存のサーバにソフトウェアをインストールして管理する 手続き型(最終状態を達成する方法を指定する) サーバーとサービスを目的の状態にする為のツール プロビジョニングもできる 既存のサーバに対してhogehogeする ソフトウェアの管理に優れている パッケージのインストール、アプ
REST API のコツ
Mercari JPのモノリスサービスをKubernetesに移行した話 PHP Conference 2022 9/24Shin Ohno
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
サーバー構築と設定 ～初心者にも分かりやすく解説～ - サーバーの構築方法や設定手順、ミドルウェアのインストール手順・トラブル対応などをコマンド付きで詳しく解説します。
system-design-primer/README-ja.md at master · donnemartin/system-design-primer