LogDevice · Distributed storage for sequential data
Distributed storage for sequential dataLogDevice is a scalable distributed log storage system that offers durability, high availability, and total order of records under failures. It is designed for a variety of workloads including event streaming, replication pipelines, transaction logs, and deferred work journals.
ストレージI/O高速化への取り組み：Linux BLK-MQ/SCSI-MQ - Blog
Linux関連のコア開発者から聞くところによると、ストレージのI/Oアーキテクチャはネットワークに比べ、１０年くらい遅れていたらしい。長らくハードディスクという相当に遅いデバイスが相手だったので、それほど気にしなくても済んでいたという。 ところが、最近のフラッシュメモリ等々の急速な広まりで、ソフトウェア部分も強化が進んでいるようだ。１つの論理デバイスに対してCPUのマルチコアを活用するというネットワークでは今や当然となっている仕組みがストレージにもようやく搭載されつつある。Multi-Queue(マルチキュー)と呼ばれている。 Linuxの仕組みとしては、BLK-MQ(Multi-Queue)とSCSI-MQである。Linux以外のOSでは良く分からないが(きっとあると思います)、少なくともLinuxではシングル論理デバイス(LUN)当たり1M IOPS(100万IOPS)を実現すべく、搭
ビットアイル総合研究所
This page has found a new home ビットアイル総合研究所 Blogger 301 Redirect Plugin
AWS News Blog
AWS Chatbot Now Integrates With Microsoft Teams I am pleased to announce that, starting today, you can use AWS Chatbot to troubleshoot and operate your AWS resources from Microsoft Teams. Communicating and collaborating on IT operation tasks through chat channels is known as ChatOps. It allows you to centralize the management of infrastructure and applications, as well as to automate and streamlin
~nabeken/diary/ : Debian (squeeze) + KVM + libvirt + iSCSIへ移行した
UPDATE: 初稿 (Sun, 20 Mar 2011 19:56:08 +0900) LVMのsnapshotを取るとカーネル・パニック！ squeezeのXenカーネルでLVM snapshotを何度もcreate && destroyしていると以下のカーネルパニックが発生します。数回すると確実に再現できます。 [ 1500.617898] ------------[ cut here ]------------ [ 1500.617951] kernel BUG at /build/buildd-linux-2.6_2.6.32-30-amd64-d4MbNM/linux-2.6-2.6.32/debian/build/source_amd64_xen/arch/x86/xen/mmu.c:1649! [ 1500.618021] invalid opcode: 0000 [#1]
これからの10年は「ユニファイドスケールアウトストレージ」に照準――ネットアップの新戦略を聞く | IT Leaders
2011/11/14 12:26最近、ストレージベンダー各社がユニファイドストレージへの注力度合いを高め、この製品領域で先行するネットアップへの追撃の手を強めている。そうした動きがあるなかでネットアップは、ユニファイドストレージの進化を促すことで新たな市場を切り拓いていく準備を着実に進めてきた。1つのストレージシステムでSAN（Storage Area Network）とNAS（Network Attached Storage）の両方の形態に対応するユニファイドストレージが活況を呈している。特に今年に入ってから、この製品領域で主要ストレージベンダーの動きが活発化しており、各社が相次いで新製品をリリースしている状況だ。 その動きを振り返ってみると、2月にEMCが新シリーズ「EMC VNX」を国内で発表。従来のSANストレージ「EMC CLARiX」とユニファイドストレージ「EMC Celer
Sheepdog（1） - ネットワーク管理者の憂鬱な日常
とある大学でネットワーク管理に携わる傍ら、関連分野の教育研究に携わる40代。ネットワーク応用、ネットワークセキュリティや異常発見支援あたりに取り組んでます。博士(工学)、ツウキニスト。 分散ストレージのSheepdogを入れてみる． KVMな環境で共有ストレージを用意しないといけないのだが，iSCSIで作るののもありきたりなのでｗ ちなみに，これまでの経緯はこれ（1）とか，これ（2）とか，これ（3）を参照されたし． で，構成としてはこんな感じ（再掲）． これらのKVMホスト（sv1〜sv4）にSheepdog入れて，ストレージとしてはNSPOFな環境とする． とはいえ，当然ながら先人の知恵がこちらにまとめられているので，この流れに沿ってインストール（苦笑）． sv1〜sv4に下記パッケージを導入（gcc makeは既に導入済みの前提）． # aptitude -y insta
Linux 3.2 の Thin Provisioning (2) - TenForward
Linux 3.2 の Thin Provisioning (1) の続編． とりあえず前回でファイルシステムを作成して，実際より大きな領域が見えるようになりましたので，少し使ってみました． 100MB の領域でしたので，とりあえず 80MB のファイルを作ってみます．root@plamo64:/mnt# dd if=/dev/zero of=testfile bs=1M count=80 80+0 records in 80+0 records out 83886080 bytes (84 MB) copied, 0.244967 s, 342 MB/s root@plamo64:/mnt# df -h Filesystem Size Used Avail Use% Mounted on /dev/vda1 8.0G 6.9G 728M 91% / none 501M 132K 501M
Linux 3.2 の Thin Provisioning (1) - TenForward
Linux 3.2 で入った Thin Provisioning を試してみました．Device Mapper 経由で使います． kernel 付属文書には dmsetup を使った例が載っていますが，そこにも実際は LVM2 とかのツールを使うことになるよ，みたいなことは書かれていますので，見てみたところ，LVM2 でも既に実装されているようでしたので，そちらで試しています．と思っていたら，2012/01/30 付けで LVM2 2.02.89 がリリースされていますね． 以下は kernel 3.2 に更新した Plamo64-1.0 (on kvm) で試しています． LVM2 の cvs 先端を取得．インストール．今なら前述の通り 2.02.89 のソースを取得して make します．(この後も改良が続きそうですから ChangeLog で確認してリポジトリから取得した方が良いかも
GlusterFS 技術と動向 2of2
1. 第4回クラウドストレージ研究会 GlusterFS 技術と動向 2of2 2011/12/8 (株)NTTPCコミュニケーションズ Copyright （C） 2011, NTTPC Communications, Inc. All Rights Reserved. 1 2. 発表者の紹介 高橋 敬祐 (TAKAHASHI Keisuke) (個人用)Twitter ID : @keithseahus • NTTPCコミュニケーションズ在籍 (2006年〜) – Webマイニング系開発 – 分散FS特にGlusterFSの調査，研究，それを利用した開発及びOSS活動 – 宇宙航空関連実証実験及び開発 – その他先端技術調査 • 出入りしている勉強会 – VIOPS • この界隈で特に関係の深い人 – クラウドネットワーク研究会 – 伊藤氏 ( @tha
GlusterFS 技術と動向 1of2
1. 第4回クラウドストレージ研究会 GlusterFS 技術と動向 1of2 2011/12/8 (株)NTTPCコミュニケーションズ Copyright （C） 2011, NTTPC Communications, Inc. All Rights Reserved. 1 2. 発表者の紹介 高橋 敬祐 (TAKAHASHI Keisuke) (個人用)Twitter ID : @keithseahus • NTTPCコミュニケーションズ在籍 (2006年〜) – Webマイニング系開発 – 分散FS特にGlusterFSの調査，研究，それを利用した開発及びOSS活動 – 宇宙航空関連実証実験及び開発 – その他先端技術調査 • 出入りしている勉強会 – VIOPS • この界隈で特に関係の深い人 – クラウドネットワーク研究会 – 伊藤氏 ( @tha
OSC 2011 Tokyo/Fall 自宅SAN友の会 （Infinibandお試し編）
2. 島崎聡史（twitter: @smzksts） - 自宅SAN友の会 主宰 メーカー系研修ベンダーの講師 とある仮想化、クラウド、 - サーバ仮想化＆ストレージ研修を担当 - VMware Certified Instructor （VCI） シンクライアントベンダー - Xen, KVM, Solaris Containers のSE - プライベートクラウド（Eucalyptus） - XenServer - デスクトップ仮想化 - Cloudstack - XenDesktop, XenApp インフラ系流行りモノ担当 便利屋さん。 #jitakusan #osc11tk Page 2
Linux の iostat の出力結果を銀行のATMに例えて説明してみる - ablog
vmstat の"r"列とマクドナルドのレジカウンター - ablog の iostat 版です。 以前、iostat の見方 - ablog というエントリを書きましたが、 絵で見てわかるOS/ストレージ/ネットワーク~データベースはこう使っている (DB Magazine Selection) 作者: 小田圭二出版社/メーカー: 翔泳社発売日: 2008/04/22メディア: 単行本（ソフトカバー）購入: 22人 クリック: 303回この商品を含むブログ (36件) を見るP.176 LIST 1 Linuxのiostat -x 30の出力結果を分析 を元に説明してみます。 $ iostat -x 30 avg-cpu: %user %nice %sys %iowait %idle 15.46 0.23 3.70 45.05 35.55 Device: rrqm/s wrqm/s r/
glusterfsで仮想化サーバの余っているローカルハードディスクを分散共有ストレージにする at nkjmkzk.net
Virtualization, Operating System, Storage, Cloud Computing仮想化サーバが数台あると共有ストレージをつないで仮想マシンを全仮想化サーバで共有したくなります。 そうすることによって仮想マシンはリソースが空いていればどの仮想化サーバ上で起動させることができ、起動後もLive Migrationで別の仮想化サーバ上に移動させることさえできます。なのである程度の規模になると仮想化サーバ数台 + 共有ストレージという構成が一般的となります。 こうなってくると仮想化サーバのローカルハードディスクはほとんど使われません。サーバの故障率を下げるためにSANブートにしたりするとさらにローカルハードディスクは全く使わないことになります。それはそれですっきりしいると言えばそうなのですが、せっかくのローカルハードディスクが無駄になっている気もします。もし、共
CentOS/5.2/11.iSCSIターゲット - moji-moji wiki
Prev CentOS/5.2 概要 ; CentOS 5.2 サーバを、iSCSIターゲットとして使用する場合の設定。 iSCSIターゲット環境を構築するソフトウェアとして「scsi-target-utils」を使用する。 ここでは、CentOSでDRBDを使いネットワークミラーリングを実装で設定した、DRBDデバイスをiSCSIターゲットとすることを想定して設定した。 インストール ; yum でインストールする。 # yum install scsi-target-utils.i386 サービスの起動 ; # /etc/init.d/tgtd start 自動起動の設定 ; # chkconfig --add tgtd # chkconfig tgtd on iSCSIターゲットの作成 ; tgtadm コマンドを使用して、iSCSIターゲットを作成する。 --op new を
RAIDレベルの話: 1+0と6はどっちが安全か？ - たごもりすメモ
仕事でちょっくら12台のHDDを使ったRAIDアレイを組むんだけど、その折にちょうどTwitterで「RAID-1+0にしないとRAID-6とか怖くて使えませんよ！」というウソ八百な内容のWebページのURLを見掛けたので、いいかげんそのような迷信が消え去ってもよかろうと思って書くことにした。 1重ミラー設定のRAID-1+0は安全性においてRAID-6に劣る。ただし、正しく運用されている場合に限る。*1 知っている人はずっと前から知っている事実ではあるんだけど、某巨大SIerなんかでも高い方が安全に決まってる的な残念な脳味噌の持ち主がいっぱいいて「いやあデータの安全性を考えるとRAID-1+0」とか考えもなしにクチにし、そっちの方がディスクがいっぱい売れて嬉しいストレージベンダーもニコニコしながら否定せず売りつけて去っていくといううわなにをす(ry まあそんな感じで。ちなみに正しくない運
データセンターにまたがる巨大な仮想ストレージを実現する。EMCの「VPLEX」
ストレージベンダのEMCは、ボストンで開催中のイベント「EMC WORLD BOSTON 2010」で、同社のプライベートクラウド戦略を明らかにすると共に、その要となる製品「VPLEX」を発表しました。 EMCは、将来のプライベートクラウドが「数千の仮想マシンを、距離を超えて世界中どこへでも移動できる」「世界中に散らばるデータセンターを、1つのリソースとして管理できる」という2つの能力を備えるようになる、というビジョンを描いています。 このビジョンの実現のためには、サーバが仮想化技術によって複数のサーバをまとめてリソースプールになるのと同様に、複数のストレージをまとめることでストレージプールを実現することが求められます。サーバもストレージもフェデレーションとすることが重要であり、プライベートクラウドへの道筋だというのです。 EMCの戦略は、プライベートクラウド、それも世界中に分散したデータ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Bitbucket | The Git solution for professional teams
213921 – SAN file systems becoming read-only
562871 – [Emulex 5.5 bug] Update lpfc driver to 8.2.0.63 FC/FCoE [rhel-5.4.z]