タグ

storageに関するcvyanのブックマーク (82)

  • Web storageのlocalStorageの実体を調べる - 記憶は人なり

    WebAudioを使ったスクリプトを書いていたのですが、パラメータを保存したいと思いました。で、HTML5と共にlocalStorage(を含むWeb storage)が実装されていたような気がしたので、使ってみることにしました。 ところで、世の中的にはどんな用途でlocalStorageを使っているのか、自分のPCに格納されているlocalStorageの実体を調べてみました。 Web storageとは Web storageには永続的なlocalStorageと、セッション内でのみ有効なsessionStorageの2種類あります。一般的なcookieと異なり、localStorageを使えば永続的にデータを保持することが可能になります。 そういえば、冒頭にも書いたようにHTML5の一部だと思っていたのですが、米Wikipediaによれば現在ではHTML5とは切り離された仕様として定

    Web storageのlocalStorageの実体を調べる - 記憶は人なり
  • [速報]顧客のデータセンターに大型トラックで乗り付け、100PBのデータを吸い上げる「AWS Snowmobile」発表。AWS re:Invent 2016

    [速報]顧客のデータセンターに大型トラックで乗り付け、100PBのデータを吸い上げる「AWS Snowmobile」発表。AWS re:Invent 2016 AWSは大容量のデータを顧客のデータセンターからAWSのクラウドへ物理ストレージを利用して効率よく転送するために「Amazon Snowball」を2015年に発表しました。 今回のAWS re:Invent 2016では、このAmazon Snowballの進化形として「AWS Snowball Edge」が発表されました。 Snowball Edgeは100TBの頑丈なストレージにコンピュート機能などを内蔵したことで、処理中のサーバに接続し、ストレージとして直接データを受け取るといったことが可能になります。 しかし「企業が保存しているデータがエクサバイトだったらどうだろう?」と、AWS CEOのAndy Jassy氏。「エクサバ

    [速報]顧客のデータセンターに大型トラックで乗り付け、100PBのデータを吸い上げる「AWS Snowmobile」発表。AWS re:Invent 2016
  • CentOS7

    ホーム CentOS7 VulsRepoのインストール CentOS7 Vulsのインストール CentOS7 OpenVAS(GVM)のインストール CentOS7 Webminのインストール CentOS7 Userminのインストール CentOS7 Cockpitのインストール CentOS7 Nginxでリダイレクト処理 CentOS7 NginxCGI(Perl) CentOS7 NginxPHP CentOS7 NginxSSL証明書の設定(SNI含む) CentOS7 Nginxでバーチャルホスト CentOS7 Nginxのアクセス制限 CentOS7 Nginxの基インストール CentOS7 ディスク容量チェック CentOS7 WordPressのインストール CentOS7 RainLoopのインストール CentOS7 PHPListのインストール Ce

    CentOS7
  • WalB v1.0 リリース - Cybozu Inside Out | サイボウズエンジニアのブログ

    更新情報 2017年6月現在、WalB のプロジェクトページはhttps://walb-linux.github.io/です。 こんにちは.サイボウズ・ラボの星野です. 今日は,効率的なバックアップと非同期レプリケーションを目的とした Linux カーネルドライバ WalB についての簡単な紹介と,そのバージョン 1.0 のリリース告知をさせて頂きます. WalB って何? WalB は「ワルビー」と発音します.名前の由来は Block-level WAL です.WAL は Write-Ahead Logging (ログ先行書き込み) のことで,データベースの一貫性制御等に用いられます. WalB を使うと,オンライン状態のブロックデバイスにおいて,アプリケーションやファイルシステムによるデータ書き込みによって生じる差分データを,ブロックデバイスをフルスキャンすることなく効率的に取得出来る

    WalB v1.0 リリース - Cybozu Inside Out | サイボウズエンジニアのブログ
  • Fusion-io ioDrive の“非公式”標準価格/販売価格表

    Fusion-io ioDrive製品の標準価格/販売価格を知りたい時、Web上には公式・非公式を問わずほとんど情報が無いのが現状です。(2012年5月現在) とは言え、システム基盤周りの仕事をしていると、「とにかく早急に超ザックリな価格感を把握したい!」という事態にもなる訳で、そういう場合に参考情報として参照して頂ける“非公式な”価格表をまとめてみました。 種明かしをすると、ioDriveの標準価格に関する情報源は、OEM製品を提供されているサーバーメーカー様の“公式な”Web直販価格です。ioDriveの販売価格に関しては、OEM製品の型番を元にkakaku.com等で調査しました。ioDrive2の販売価格に関しては、東京大学生協の 「おすすめ情報」(2012年3-4月号) 等が情報源です。なお、これらの価格には標準的な保守サポートの費用が含まれているので、厳密な意味での製品価格では

  • 最新のSSD5機種とRAIDカードのパフォーマンス検証 - 元RX-7乗りの適当な日々

    少し時間が経ってしまったのですが、今年の夏頃に書いた検証レポートを公開します。 最新の機種と書きつつ、昨年のモデルのSSDが1つ混じっていたりなど、突っ込みどころはあるのですが、何かの参考になれば幸いです。 はじめに 昨今、記憶媒体装置の1つであるSSD(Solid State Drive)は、コンシューマー/エンタープライズを問わず、かなり普及してきている。 価格対容量のコストパフォーマンスや容量そのものに関しては、ハードディスクにかなわないものの、SSDの高いI/O性能(特にランダムアクセス)は非常に魅力的であることと、特に、低容量のもの(120GB以下等)であれば1万円以下で購入できる時代となってきており、コスト面に関しても手を出しやすくなってきている。 ところで、弊社のサービスで利用されているディスクの多くは、SATA/SASのハードディスクを利用しているケースが多い。 中には、F

    最新のSSD5機種とRAIDカードのパフォーマンス検証 - 元RX-7乗りの適当な日々
  • RAIDレベルの話: 1+0と6はどっちが安全か? - たごもりすメモ

    仕事でちょっくら12台のHDDを使ったRAIDアレイを組むんだけど、その折にちょうどTwitterで「RAID-1+0にしないとRAID-6とか怖くて使えませんよ!」というウソ八百な内容のWebページのURLを見掛けたので、いいかげんそのような迷信が消え去ってもよかろうと思って書くことにした。 1重ミラー設定のRAID-1+0は安全性においてRAID-6に劣る。ただし、正しく運用されている場合に限る。*1 知っている人はずっと前から知っている事実ではあるんだけど、某巨大SIerなんかでも高い方が安全に決まってる的な残念な脳味噌の持ち主がいっぱいいて「いやあデータの安全性を考えるとRAID-1+0」とか考えもなしにクチにし、そっちの方がディスクがいっぱい売れて嬉しいストレージベンダーもニコニコしながら否定せず売りつけて去っていくといううわなにをす(ry まあそんな感じで。ちなみに正しくない運

    RAIDレベルの話: 1+0と6はどっちが安全か? - たごもりすメモ
  • /storage/end_od_parity_raid is redirect to whitepapers/

    非構造化データの爆発的増加、4TBのHDDが販売される様になった現在、分散型、クラスタ型、オブジェクト型クラウド対応ストレージが注目されつつあります。ここに、小型HDDを集団化して論理的ボリュームを定義する Parity RAID すわなち、RAID5, RAID6 はその役割について再考が求められつつあります。ネットワーク上に分散するストレージリソースのクラスタ化、統合を求められる場合、従来の単純RAIDでは、役割をはたせず、また、オブジェクトストレージの世界では役割が終焉を迎えています。

  • RAID基本性能テスト

    テスト環境 Platform: HPC-ProServer DPeR300 (PowerEdge R300) CPU: X5460 Quad Core Xeon 3.16GHz/FSB1333/2x6MBcache 1CPU 4core Memory: DDR2-667 8GB OS: LinuxOS 4.6 (EM64T) Kernel: kernel 2.6.9-67.0.15.plus.c4largesmp x86_64 RAID I/F: PERC6/E 512MBcache HDD (RAID): SATA 750GB/7,200rpm x15 Filesystem: XFS (摘要) RAID10は処理が単純なため、単純なシーケンシャルファイルの読み書きでは非常に高い性能が出ています。この性能の高さは、より現実的で複雑なファイルI/Oにより性能低下が起こっても極

  • WordPress.com

    The address storage-talk.wordpress.com cannot be registered. Site names can only contain lowercase letters (a-z) and numbers. But you can sign up and choose another one.

  • nakanote blog  UbuntuでDrobo風なNASを作る

    前書き 前のエントリでは、FreeNASでDroboFS風なNASストレージを作りましたが、 Linuxのmd+LVMのほうがより柔軟で簡単に作れるので、Linuxでやり直しました。 繰り返しになりますが、目指すのはこんな条件のNASストレージです: 異なる容量のHDDを集約して、ひとつの仮想ディスクを作る 小容量HDDを大容量のものに挿し換えることで、データを保持したまま仮想ディスクの容量を増やせる 準備するもの HDD 3以上: 異なる容量でOK。USB,PATA,SATAなどインターフェースが違っても大丈夫。 今回は80GB,160GB,500GBのディスクを準備しました。 PCサーバ:当然、準備したHDDがすべて挿せる構成である必要があります。 私は前エントリに引き続き、Proliant MicroServerを使用します。こいつは4 ディスクをさすことができます。 Linux

  • グリーの大規模分散ストレージ戦略(nanofs) Vol.2 | GREE Engineering

    はじめに グリー株式会社でエンジニアをしておりますkgwsと申します。 今回は、前回に引き続き分散ストレージ(nanofs)のHTTPメソッド毎の処理を紹介させていただければと思います。 nanofsは5つのHTTPメソッド(GET、PUT、DELETE、HEAD、MKCOL)をサポートしております。今回は主なGET、PUT、DELETEの3つについてご説明させていただきます。 まずは構成のおさらい nanofsは、主に3つのプロセスで構成されております。 nanofsd(dispatcher) アプリケーションサーバからリクエストを受け取り実際に保存されているnanofsnに振り分ける 5つのHTTPメソッドをサポートしている(GET、PUT、DELETE、HEAD、MKCOL) データベース(KVS)に保存したデータの情報を送る queueに処理の指示を送る nanofsw(worke

    グリーの大規模分散ストレージ戦略(nanofs) Vol.2 | GREE Engineering
  • SSD耐久テスト - 第4回 東芝製SSDは壊れる前にリードオンリーになるのか

    実際に壊れるまでSSDに書き込み続けて、SSDの限界を調べてみよう。 仕様 SSD耐久テストのプログラムについて 第1回 MLCの書き込み回数はどれぐらいなのか テスト結果 第2回 空き容量はウェアレベリングに影響するのか テスト結果 第3回 Win7のTrimコマンドは寿命を延ばすのか 最新記事 第4回 東芝製SSDは壊れる前にリードオンリーになるのか テスト結果 第4回 東芝製SSDは壊れる前にリードオンリーになるのか 2010.4.7 東芝製SSDは物理的に壊れるのを防いでくれるらしい。書き込み続けることで徐々に予備領域が失われていくが、これがSSDの実容量に影響を与える前にリードオンリーにして(以降の書き込みを禁止して)、ファイルが破壊されるのを防ぐ仕組みだ。 右側2列が予備領域。これがあるからといって、SSDの実容量を超えて保存できるわけではなく、ウェアレベリン

  • クラウドストレージの解説と、はてなの少し変わった使いかた - はてなニュース

    2010年9月にはてなの最高技術責任者(CTO)に就任した田中慎司です。はてな技術全般を見ていく仕事をしています。現在の筆者が注目する技術の一つがクラウドで、はてなのサービスでも利用を始めています。クラウドの技術というと、アプリケーションの実行環境が取り上げられがちです。筆者も2010年3月にセミナーで講演したり、クラウドについてのエントリーを書いたりしました。今回は、クラウドの利用で見逃せないもう一つの部分、クラウドのストレージサービスを、クラウドの利用を検討するエンジニア向けに解説します。 ■ クラウドのストレージサービスとは はてなのようなWebサービスを実現するには、ざっくりいって2種類の環境を用意する必要があります。一つは、サービスを動かすためのアプリケーションを実行するサーバ環境で、もう一つがユーザからアップロードされる多数のコンテンツを保存するストレージ環境です。Micro

    クラウドストレージの解説と、はてなの少し変わった使いかた - はてなニュース
  • OpenSolaris自作ストレージサーバでシン・プロビジョニングを試す - tokuhy’s fraction

    OpenSolarisのiSCSIストレージの自作にあたって、シン・プロビジョニングについて調べてみました。今回の社内案件ではシン・プロビジョニングの必要がない案件ではあるんですが、将来的にサーバのストレージで使う上で必要になります。 というか現在のエンタープライズ向けの仮想化のiSCSIストレージなら当たり前にもっている機能です。 シン・プロビジョニング(Thin Provisioning)については以下の記事がわかりやすいと思います。 「シン・プロビジョニング」というストレージの新常識 - 完全理解!仮想化テクノロジ:ITpro というわけで実際に試してみたのでその記録です。iSCSIで検証しています。 ついでにファイルでプールを作ってみる HDDで作ることもできる環境ですが、手軽にZFSを試す例も兼ねてファイルを使ったプールで実験してみます。 100MBのサイズのファイルを作成します

    OpenSolaris自作ストレージサーバでシン・プロビジョニングを試す - tokuhy’s fraction
  • グリーの大規模分散ストレージ戦略(nanofs) | GREE Engineering

    はじめに はじめまして、グリー株式会社でエンジニアをしておりますkgwsと申します。今回は、グリー内で写真データの保存を行っている分散ストレージ(nanofs)を紹介させていただければと思います。 背景 弊社で運営させていただいている "GREE" ではユーザの写真や動画データを保存することができます。1億ユーザを目指すグリーは、ユーザの増加とともに写真や動画データは上限なしに増加していきます。またユーザの皆様の大切なデータを失うことは許されませんし、サービスを止めることも許されません。そんな状況の中、様々な技術や仕組みを使いサービスを運営してまいりました。 グリーのストレージの歴史は大きく分けて3世代がありました。 第一世代 第一世代ではアプリケーションサーバからNFSサーバをマウントし画像データを保存しておりました。簡単に導入できることと高価なサーバを使用すれば信頼性や安定性も保たれる

    グリーの大規模分散ストレージ戦略(nanofs) | GREE Engineering
  • サーバ仮想化環境でのお薦めストレージ構成 at nkjmkzk.net

    A Place to discuss Oracle VM, Linux and Other Great Software.サーバ仮想化環境では「リソースプール」という概念を実現するために共有ストレージ構成が多く採用されます。しかし、そもそも現在のCPU性能とDISK I/O性能を鑑みれば、そもそもDISK I/O性能はCPU性能の進化に追いついておらず、共有ストレージ構成とすれば追い打ちをかけるようにそこがボトルネックとなります。多くの環境ではサーバ仮想化環境では「共有ストレージ型前提。しかしこれまでの何倍ものI/O性能が必要」という要件に対応するため、ミドル〜ハイエンドのストレージ装置を採用するという選択を行っています。その結果初期導入費用が高価なのはもちろんですが、そのあとも莫大な保守費を支払うことになります。そして拡張できるものの、拡張するためのパーツがまた高価、というスパイラルに陥

  • はてなにおける SSD の実績 - mura日記 (halfrack)

    社内で SSD の寿命について話題に上がったので、ちょろっと X25-M G1 の運用実績に関する日記を書いてみよう。 プロダクション環境にある MySQL が動いているホストから、比較的 I/O が激しいものをチョイスして smartctl を叩いた結果がこんな感じ。 # smartctl -d ata -a /dev/sda smartctl version 5.36 [x86_64-redhat-linux-gnu] Copyright (C) 2002-6 Bruce Allen Home page is http://smartmontools.sourceforge.net/ === START OF INFORMATION SECTION === Device Model: INTEL SSDSA2MH080G1GC Serial Number: xxxxxxxxxxxxxx

    はてなにおける SSD の実績 - mura日記 (halfrack)
  • 64bitファイルシステム XFSの実装

    XFSの利用方法 最後に、XFSを使う方法を紹介する。例では、Fedora Core 1環境でカーネル2.6.7を使用した。 まず、カーネルがXFSをサポートしているかどうかを確認する。サポートしていない場合は、カーネルのコンフィグレーション時に「XFS filesystem support」を有効にして、カーネルの再構築を行う。 また、XFSを使用するには、3つのシステムユーティリティを下記バージョン以降にアップデートしておく必要がある。 modutils-2.4.0 autoconf-2.13 e2fsprogs-devel-1.18 XFSコマンドツールのインストール カーネルのXFSサポートを有効にしたら、XFSコマンドツールをインストールする。XFSコマンドツールには、以下のようなものがある。 xfsdump xfsdumpパッケージは、xfsdumpやxfsrestore、XF

    64bitファイルシステム XFSの実装
  • 『CentOS5.xでNTFSパーティションを読み書きするための覚書き』

    鯖管Changelog。--アメブロ支店主に地方のサーバ管理者の日常と管理記録、トラブルサポート事例、趣味PC自作に関する情報、ほか雑談などを、気の向いたときに好きなように、勝手気ままに書きなぐるブログです。 主に会社のRedhatLinux9やRHEL/CentOS、その他Solarisなど管理しています。 パッケージインストール前にgccとkernel-develをインストール # yum install gcc kernel-devel ↑実は事前にやらなくても、fuse等をyum installする際に依存性チェックでインストールされます。 必要なパッケージ fuse dkms dkms-fuse fuse-ntfs-3g パッケージはrpmforgeのRHEL5用から入手可能。 rpmforgeのyum repositoryを追加すれば上記のパッケージ群はyum install