RoCE(RDMA over Converged Ethernet) - Blog
RoCEは、「アールオーシーイー」または「ロッキー」と発音する。 Ethernet上でRDMA転送を行うことができるネットワークプロトコル 下位レイヤのネットワークヘッダはEthernetヘッダであり、上位レイヤのネットワークヘッダ（データ部分を含む）はInfiniBandのヘッダである。 標準的なEthernet環境（ロスレス機能が備わったスイッチ）でRDMA転送を行うことを可能であり、NICがRoCEをサポートしている必要がある。 RoCEフレームフォーマット 出典： IBTA Supplement to InfiniBandArchitecture Specification Volume 1 Release 1.2.1 - Annex A16:RDMA over ConvergedEthernet (RoCE) RoCEとInfiniBandとの比較 RoCEの最下位レイヤのフレー
RoCEv2アップデート - Blog
RoCEv2 IBTA標準化完了(2014年9月16日) 以前、当ブログでも紹介したRoCEv2(Ethernet上で動作するRDMA規格のIPルーティングできる新しい規格)が、先週2014年9月16日、InfiniBand関連規格団体であるIBTA(InfiniBand Trade Association)での標準化が完了した。 Press Release: IBTA - InfiniBand Trade Association InfiniBand Trade Association Releases Updated Specification for Remote Direct Memory Access over Converged Ethernet (RoCE) New specification enables RoCE routing capabilities for the
SSDに対するBlock Discard/TRIMをSystemTapで可視化する - SH2の日記
パソコンを買いました。 CPU：Intel Core i5-2400S Motherboard：ASUS P8H67-M EVO Memory：Patriot PSD38G1333KH 4GB×2 2個 SSD：Intel X25-M G2 120GB HDD：HGST Deskstar 5K3000 2TB Power Supply：Owltech Xseries SS-650KM 今回はOLIOSPECさんのMicro Monster H67 Super Silentをカスタマイズして注文しました。デスクトップ機をリプレイスするのは実に9年ぶりなのですが、最近のパソコンはすごく良いですね。速くて静かで低消費電力です。本日はこのパソコンを使って、近年のLinuxにおけるSSD事情を確認していきたいと思います。 TRIMとは 近頃では定番SSDの座をすっかりCrucial RealSSD
モニカジ京都に参加して、SensuとGraphiteの話をしました #monitoringcasual - ゆううきブログ
Monitoring Casual Talk in Kyoto on Zusaar 先週のことだけど、モニカジ京都に参加した。 というか、主催者のid:shoichimasuharaさんとかいう人に雑に主催者に入れられた。 といってもなにもしてなくて、ただインターネットで暇そうな人間を勧誘しただけだった。 @moznion http://t.co/ssAvvYgjD1— ゆううき (@y_uuk1) 2013, 11月 2 当日のだいたいの雰囲気は モニカジin京都を開催しました #monitoringcasual - 桝原翔市的博客 に書いている通り。 shoichiさんが無限に営業活動して、人が集まってきてた。 フルスタックっぽいなと思った。 おつかれさまでした。 次回もよろしくおねがいいたします。 自分の発表 当日僕は、SensuとGraphiteの話をしつつ、ひたすら異常な努力をし
Linuxでmdadmを使ったソフトウェアRAIDの構築・管理メモ - nabeの雑記帳
Linux（Ubuntu 10.04 LTS Server）で mdadm を使用してソフトウェアRAIDを構築・管理する方法について述べます。特に既に稼働中のLinuxにHDDを追加してあとからRAID1を構築する方法を述べます。 概念 デバイスの作成 RAIDの作成 GRUBの設定（Ubuntu/Debianの場合） mdadm.confとinitramfsの設定 RAIDの管理 参考になるサイト 概念 LinuxのソフトウェアRAIDは、複数の実体デバイス(/dev/sda?等)をまとめあげて、１つの仮想デバイス(/dev/md?)として見せる仕組みです。 /dev/sda? 等の実体デバイスは、パーティーションタイプを0xfd(Linux raid 自動検出)にする。 パーティーションを単位としてRAID化するため、極端な話、同一デバイス内でもRAIDにできる。*1 デバイスの作成
dstat : 電子の密林を開拓する
今回は、(CloudWatchではなくて) ふつーの Linux 的な方法で 負荷原因となっているプロセスを特定するための方法について調べます。 ・前提 複数のプログラムが動作している状況で、いずれかのプログラムがHDDを高頻度に利用し、サーバ負荷を高めている。この負荷原因となっているプログラムとプロセスを特定したい。 ここでは、「負荷試験用にEC2ラージインスタンスを用意し、sysbench を使ってソコソコ以上の HDD 負荷を発生させる」という状況を作っておきます。 今回は負荷試験が目的なので、負荷試験中でも快適な(?)操作が出来るように性能の高いEC2インスタンスにしてみました。 ・EC2インスタンス作成と準備 まずは EC2インスタンスを作成します。 HDDの負荷試験を行うので、EBSタイプでなく InstanceStore (ローカルの EphemeralDisk を使用する)
ファイルシステムのベンチマーク集
作成日：2012.05.02 UNIX 系 OS のファイルシステムの計測を行うベンチマーク。 x86-64/Linux で動作することを検証している。 更新履歴 (2012.05.02) 作成 プリミティブ計測型のベンチマーク IOZone Flexible IO Tester (fio) Bonnie++ AIO-Stress Threaded I/O Tester ワークロード計測型のベンチマーク Filebench FS-Mark PostMark DBENCH SysBench Flexible Filesystem Benchmark (FFSB) Iometer SPECsfs2008 一般的なテクニック ディスクキャッシュの開放 マウントオプション SSD の初期化 CPU のバインド ファイルベンチマークがまとめられているサイト コメント プリミティブ計測型のベンチマーク
Ceph の覚え書きのインデックス
ここでは分散ファイルシステム Cephファイルのインストール方法や解説を行う。 Ceph は Linux 上で動作する分散ファイルシステム(Distributed File System; DFS)の一つ。 UCSC の Sage Weil の博士論文が元となり、ペタバイト級の高性能な DFS を実現することを目標としている。 オープンソースとして開発されており、Linux カーネル 2.6.34 から取り込まれている。 リスト Ceph を使ってみる … Ceph のインストール方法と cephfs の基本的な使い方 Rados Block Device(RBD) を使ってみる … RBD の基本的な使いかた CRUSH マップの書き方 … Ceph の CRUSHマップの書き方を解説 RADOS の概略 (RADOS と CRUSH と Placement Group の関係) … 論
Ceph を使ってみる
このページでは ceph のインストール方法と基本的な使い方を解説する。 以下は関連ページ。 Ceph の覚え書きのインデックス Rados Block Device(RBD) を使ってみる Ceph の CRUSH マップの書き方 RADOS の概略 更新履歴 (2011.12.26) Linux の configuration の変更方法を追加。 (2012.02.10) レプリケーション数の変更を追加。 (2012.03.07) 「モニタサーバとメタデータサーバの名前」と「OSD サーバを内部ネットワークにと外部ネットワークに別々につなげる」を追加。 目次 1. Ceph とは 2. インストール 2.1 OS のインストール 2.2 OS インストール後の設定 2.3 ceph のインストール 3. ファイルシステムの作成とマウント 3.1 構成の設計 3.2 ファイルシステムの作
CentOSでソフトウェアRAIDの構築 - maruko2 Note.
CentOSでソフトウェアRAIDの構築 提供：maruko2 Note. 移動： 案内, 検索 目次 1 ディスクに RAID 用パーティションを作成 1.1 fdisk コマンドで RAID 用パーティションを作成 2 mdadm コマンドで RAID アレイを作成 2.1 RAID の状態を表示する 3 /etc/mdadm.conf を作成 4 RAID アレイにファイルシステムを作成しマウントする 5 RAID アレイを監視する 6 RAID アレイを解除する 7 関連ページ 8 脚注 CentOS では mdadm コマンドを使い、ソフトウェア RAID (Linux Software RAID) を構築することができる。 RAID レベルとして RAID0/1/4/5/6/10 がサポートされている。 大まかな手順は次のようになる。 RAID を構成するディスクに RAID
「シン・プロビジョニング」というストレージの新常識
「シン・プロビジョニング」というストレージの新常識 ストレージの稼働率を一気に高め，コスト削減と省電力に貢献 ストレージは「仮想化」と親和性が高い。サーバー機などが個々のコンピュータとして扱われてきたのとは異なり，ストレージはそもそもがコンピュータから「論理的なビュー」として扱われてきた。現実の製品実装において，ストレージとはディスク・ドライブの集合体であり，ユーザーやOS/アプリケーションから見たストレージ領域（ボリューム容量）は，「使っているディスク・ドライブは何か？」「そのディスク・ドライブの中の，どの記憶領域を使っているのか？」といった物理的な構成とは独立している。 このようにストレージは，歴史的に見て古くから「論理ビュー」と「物理実装」を分離する仮想化の考え方を採用してきた製品分野である。物理実装はブラックボックスであり，論理ビュー，すなわちボリュームだけを見ていれば，それでよか
アプリ屋がつくった分散ストレージソフトウェア「Scality RING」が普通でない理由
スケールアウトストレージソフトウェア「Scality RING」を開発・提供する米スキャリティは3月5日、日本法人スキャリティ・ジャパンを設立した。この製品は他とどう違うのかを、米本社COOに聞いた。 米Scalityは3月5日、日本法人スキャリティ・ジャパンを設立、日本での本格的な事業展開を開始した。国内大手携帯キャリア3社のうち2社が電子メール用ストレージとして採用するなど、すでに国内における販売実績もある。日本法人社長に就任した江尾浩昌氏は、最優先事項として技術サポート体制の充実を挙げている。 ペタバイトレベルのデータがある組織のためのストレージ Scality RINGは、汎用サーバーを用い、大規模なオブジェクト／ファイルストレージを構築できるソフトウェア。200TB以上のストレージニーズを持つ組織が利用の目安だが、1PBを超えるあたりから同製品の優位性が明確化してくるという。同社
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
RoCE カテゴリーの記事一覧 - Blog
https://ci.spdk.io/download/events/2017-summit/03_-_Day_1_-_Liu_and_Pelplinski_-_SPDK_Vhost_v8_ww16.pptx.pdf
NVMe over Fabrics Overview
Visualize Netfilter accounting in Graphite – To Linux and beyond !
PDF DRBDとPacemakerによるLinux-HA環境
Debian GNU/LinuxでRAID6してみました
そなーブログ » Blog Archive » mdadmでRAID6構築
Supported products | SUSE Documentation
