Linux Kernel Tuning - GlusterDocumentation
Linux kernel tuning for GlusterFS Every now and then, questions come up here internally and with many enthusiasts on what Gluster has to say about kernel tuning, if anything. The rarity of kernel tuning is on account of the Linux kernel doing a pretty good job on most workloads. But there is a flip side to this design. The Linux kernel historically has eagerly eaten up a lot of RAM, provided ther
株式会社HPCソリューションズ ～ 技術情報 並列ファイルシステムについて Lustre GPFS Panasas GlusterFS Ceph OrangeFS
並列ファイルシステム、或いは分散ファイルシステムと呼ばれるものが最近のPCクラスタでは標準となっています。 これらは複数のサーバ、複数のストレージデバイスを仮想的に１ボリューム化し、更に共有ファイルシステムとしてサービスすることが出来ます。 並列ファイルシステムは大規模システムのものと思いがちですが、計算ノードが数十台以下の小さなシステムでも大きなサイズのファイルを扱うプログラムでは絶大な効果を発揮します。 最近では選択肢が増えたこともあり、規模が小さければそれに合わせた低コストの並列ファイルシステムを作ることも容易になりました。 この解説では並列ファイルシステムの代表的なものとしてLustre、GPFS、GlusterFS、Panasas ActiveStorを紹介したいと思います。（※Panasas ActiveStorはサーバなどハードウェアを含むアプライアンス製品ですが、独自の並列
Linuxにおけるファイル同期とクラスタリングファイルシステム
Linux環境でファイル同期を実現するのに、数多ある手法からいくつか雑感と共にまとめてみた。 今後、それぞれ検証してみる。 プロダクト名 incon + Unison lsyncd + rsyncd GlusterFS DRBD Lustre OCFS2 GFS2 ストレージ ディレクトリ,ファイル ディレクトリ,ファイル ディレクトリ(Fuse) ブロックデバイス ブロックデバイス ブロックデバイス ブロックデバイス プロトコル inotify + rsync? inotify + rsync 独自 独自 独自 独自 独自 C/S構成 C x N + S x N C x N + S x N C x N + S x Y C + S, (C + S) + C MetaData (1 ~ 2) + C x N + S x Y (C + S) x N (C + S) x N レプリケーション 1
サービス
NRIネットコムは、異なる専門性を持った4つの事業領域により、 デジタル戦略の実現を全方位でサポートし、お客さまのビジネスの継続的な発展に貢献します。 Webソリューション事業Web Solution先端のテクノロジーやサービスで お客さまのビジネスを支えますさまざまな業種のお客さまに対してWebシステムを構築・運用する事業です。クラウド、モバイル、モダン開発などの技術を組み合わせ顧客課題の解決に導きます。 Webシステム設計・開発・運用会員サービス向けシステム開発業務システム開発AWSなどクラウド導入支援モバイルアプリの企画・開発 Webクリエイティブ事業Web Creativeお客さまの「伝えたい」を表現し、 成果につなげるクリエイティブをお客さまの課題解決に向けたクリエイティブ制作を行う事業です。現状の分析から戦略立案、UX/UIデザイン、各種ビジュアル制作、Webサイト構築までトー
Red Hat Storage (RHS) Performance
Red Hat Storage (RHS) Performance Ben England Performance Engineer, Red Hat 06.29.12 9:45 AM Scope of presentation – part 1) What is Gluster? RHS? part 2) Value added by Red Hat part 3) What the consumer needs to know Resources ● Visit the Red Hat Customer Portal for content ● See slides from prior talks listed below ● Wed 10:40 - A Deep Dive into Red Hat Storage ● Wed 2:30 – Distributed File Sys
Ceph のストローアルゴリズム(straw algorithm) - NAKAMURA Minoru's Diary
2002 | 10 | 11 | 12 2003 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 2004 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 2005 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 2006 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 2007 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 2008 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 2009 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 1
分散ファイルシステム glusterfs を試してみた - うまいぼうぶろぐ
http://www.gluster.org/download/ http://www.gluster.org/wp-content/uploads/2012/05/Gluster_File_System-3.3.0-Administration_Guide-en-US.pdf レッドハットに買収されたとかで、RHEVやovirtとも絡んできそうなので試してみた。実験用に仮想化環境で動かしたので真面目にパフォーマンスは調べてないけど、簡単に設定できる割にちゃんと動くので良い感じだと思いました。 drbdと適当に比較すると、drbdは2台のサーバでのnetwork raid1 で基本的にprimary側のサーバでしかmountできないのに対して、glusterfs は複数台のサーバでのnetwork raid(volume次第でraid0 , raid1, raid10, raid5 or
10年効く分散ファイルシステム技術 GlusterFS & Red Hat Storage
1. オープンクラウド・キャンパス 10年効く分散ストレージ技術 GlusterFS & Red Hat Storage Ver1.1 2012/07/02 中井悦司 (Twitter @enakai00) 2. 10年効く分散ファイルシステム技術 GlusterFS&Red Hat Storage 自己紹介 中井悦司（なかいえつじ） – Twitter @enakai00 日々の仕事 – Senior Solution Architect and Cloud Evangelist at Red Hat K.K. 好評発売中 企業システムでオープンソースの活用を希望される お客様を全力でご支援させていただきます。 昔とった杵柄 – 素粒子論の研究（超弦理論とか） – 予備校講師（物理担当） – インフラエンジニア（Unix/Linux専門） Open Cloud Campus
RHELonEC2でGlusterFSを利用してみる - めもめも
はじめに Amazon EC2では、Red Hat Enterprise Linux 6(RHEL6)のAMIを時間課金で利用することができます。（利用者は、Red Hatからサブスクリプションを購入する必要はありません。） AWS環境専用のyumリポジトリが用意されているので、yumコマンドで最新のアップデートパッケージも適用可能です。現在、提供されているAMIは、RHEL6.1ですが、yum updateするとRHEL6.2になります。 RHEL6では、EPELリポジトリからGlusterFSが簡単に導入できるので、これを使って、RHELonEC2でGlusterFSを利用してみます。 （参考）GlusterFSの気になるあれこれ 事前準備 TCP 22, 111, 24007-24020をオープンしたセキュリティグループ「GlusterFS」を作成します。 RHEL6.1のインスタン
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
分散ファイルシステム比較 | Hadoop Times
Rubyによるお手軽分散処理
夏サミ2013 Hadoopを使わない独自の分散処理環境の構築とその運用
Fluentdでログを集めてGlusterFSに保存してMapReduceで集計
Linux Kernel Tuning for GlusterFS
AWSではじめるGlusterFS