[B! cluster] defiantのブックマーク

クラウドのノイジーネイバー問題を解決する動的スケジューラー - Pepabo Tech Portal

こんにちは。3球目攻撃を仕掛けるときは、ボールが戻ってくることを考えずにフルスイングします、 P山です。今日はGMOペパボでOpenStackを利用したプライベートクラウドを運用する中で発生した、ノイジーネイバー問題と、それをいかに解決したのかを紹介します。ノイジーネイバー問題昨今のクラウドサービスで起動するVMやコンテナは一つの物理サーバーを共用して起動されることが多く、物理サーバーのCPUやメモリはハイパーバイザー、OSのスケジューラーなどのプロセスが、それぞれのVMやコンテナにリソースを配分しています。その際に、例えばある物理サーバーに同居しているVM AとVM Bが存在するとして、どちらかのVMが大量にCPUリソースを消費した場合に、VM同士でCPUリソースの競合が発生してしまい、それぞれのVMに対して十分なCPUリソースを割り当て出来ない状態が発生します。このように、一つの

defiant 2022/04/18

リンク

ニフクラ上でCluster APIによるKubernetesクラスタ構築ができるツールをリリースしました - ニフクラブログ

こんにちは、富士通クラウドテクノロジーズでアルバイトをしている巨畠です。おもに「Kubernetes」周辺のツール開発のお手伝いをさせていただいています。このたび、私がお手伝いといいながらがっつり入り込んで開発を進めていた cluster-api-provider-nifcloud がOSSとしてリリースされました！現段階では実験的な取り組みとしてお試しいただくためにリリースしたものであり、本番用途には不向きですが、Cluster APIと呼ばれる仕組みを使ってニフクラ上でKubernetesクラスタを構築することができるツールです。 Kubernetesとは Cluster APIとは cluster-api-provider-nifcloud 利用方法 Managementクラスタの構築・設定マニフェストを用いてニフクラ上にリソースの作成今後の展望最後に Kubernete

defiant 2020/06/04

リンク

カーネル読書会番外編：Ganeti: An Opensource Project at Google - おがさわらなるひこのオープンソースとかプログラミングとか印刷技術とか

Google で社内システム運用をやってる Iustin Pop 氏*1によるセミナー。クラスタリング環境における仮想環境管理システム Ganeti について、「カーネル読書会番外編」として行われたので行ってきた。システム管理なんてまったく自分の専門外だし、知識もないし、行っていいのかな、と思ったけど、行かずに後悔するよか行って後悔するほうがいいよなってことで行ってきたのです。結論から言えば、非常に面白くかつ刺激的でした。当たり前だけど知らないことを知るから勉強会なわけで、そりゃある程度ドメインナレッジがあればもっといろんなことを知ったり、自分で考えたりできるんだろうけど、フリーで行っても、やっぱり新しいことを知ることそのものが楽しいんだな、と思ったんでありました。急遽開催されたイベントだけど、アレンジしてくれた関根さん、アナウンスしてくれたよしおかさんに感謝です。以下メモ書き

defiant 2009/02/26

リンク

Hadoopを用いたクラスタコンピューティング環境の構築 - SourceForge.JP Magazine : オープンソースの話題満載

ペタバイト規模のデータを格納させる分散コンピューティング用プラットフォームを探しているのであれば、そのフレームワークとして Hadoop の使用を検討すべきだろう。HadoopはJavaベースで作成されているため、Linux、Windows、Solaris、BSD、Mac OS Xにて使用できる。こうしたHadoopを実際に採用している組織に共通するのは、安価（特殊なハードウェアが不要）かつ効率的でスケーラビリティと信頼性を兼ね備えたプラットフォームによる、膨大な量のデータ処理を必要としているという点だ。 Hadoopでは、こうした膨大な量のデータを格納するために、Hadoop Distributed File System（HDFS）を採用している。実際、HDFSのマスタ/スレーブアーキテクチャは、Hadoopのクラスタ機能の中核を成している。ここでサポートされているのは、ファイルシステ

defiant 2008/10/27

リンク

Sun，クラスタリング・ソフト「Solaris Cluster」を「Open HA Cluster」としてOSS化

Sun，クラスタリング・ソフト「Solaris Cluster」を「Open HA Cluster」としてOSS化米Sun Microsystemsは，クラスタリング・ソフトウエア「Solaris Cluster」をオープンソース・ソフトウエア（OSS）の「Open High Availability（HA）Cluster」として公開する。Sunが米国時間6月27日に明らかにしたもの。同OSSは，オープンソース・コミュニティOpenSolarisのWebサイトで6月末より3段階に分け，18カ月かけて順次公開していく。 Open HA Cluster公開の第1段階では，クラスタ対応アプリケーションを動かすエージェントのソースコードを提供する。用意するエージェントは「Solaris Containers」用のほか，BEA WeblogicやPostgreSQL用。Open HA Cluste

defiant 2007/06/29

cluster
ha

リンク

FrontPage - ClusterBuild

クラスタ構築のKnowHowをすこしずつ書きためてゆきます。 2007-2 さらに15台(Core2Duo x 12, Athlon64X2 x 3)追加、いくつかの古いマシンを撤去。 2005-10-21 さらに39台が追加されました。 2005-04-01現在、78台構成のOpenMosixクラスタを運用しています。アドバイス、質問などありましたら雑談掲示板へお願いします。 []相互接続実験 OpenMosixクラスタをインターネットで相互接続する実験の相手を募集します。稼働状況クラスタノードごとの、openMosix loadの値をグラフ化して示します。通常のUnixのloadとは値の意味が違いますが、高いほど高負荷であることを意味します。なお、このグラフは頻繁には更新されません。

defiant 2006/07/12

リンク