分散データベース「HBase」の安定運用を目指して - Preferred Networks Research & Development
1年経ってiPhone4の電池がヘタってきた、太田です。 指数関数的にエントリ数が少なくなってきた本ブログですがw、景気付けのためにエントリを投稿したいと思います！本日はHBaseについてです。 Linux と Hadoop と HBase と ZooKeeper に詳しいあなた！あなたがターゲットです。 HBaseとは? HBaseとは、HDFS (Hadoop Distributed File System)上に構築された分散データベースです。大量の非常に細かいデータをリアルタイムに読み書き出来るのが特徴です。最近ではFacebook Messageの基盤技術として使用された事で注目を集めています。 HBase公式サイト Apache HBase ブック 保存されたデータはHDFS上に保存され、HDFSの仕組みによってレプリケーションされるため安全にデータを保持することが出来ます。 ま
Real SSD C400 512GB を早速分解した - mura日記 (halfrack)
オフィスに C400 が届いたので条件反射で分解した。ついカッっとなってとか言う早さではない。 ネジを 4本外して蓋を開ける。黒いプラスティックのスペーサーを取り外して 9.5mm から 7.5mm にすることが出来るためか、封印シールは無い。 裏拡大。裏にも DRAM が乗っているのは 512GB モデルだけで、 256GB 以下の裏側は未実装だったりするのだろうか？誰かバラして教えて！ 上の方にデバッグ用と思われる端子がある。 基板を外して反対側を見る。 表側を拡大。コントローラチップは 88SS9174-BLD2 と書いてある。 C300 は 88SS9174-BJP2 で、 Intel 510 シリーズは 88SS9174-BKK2 なのだが、それらと大きく変更がありそうな雰囲気は感じない。 汎用的な SoC のファームウェアとかチョロッと手直ししているだけとか推測できるが、 88
- このブログは非公開に設定されています。
ブログ このブログは非公開に設定されています。 (Access forbidden) 他のブログを探す ブログランキング（共通のジャンル） 1 マブい女画像集 女優・モデル・アイドル 2 裏ピク 3 エロ画像まとめ えっちなお姉さん。 4 AV女優2chまとめ 5 お～い！お宝 ヘルプ インフォメーション リクエスト 利用規約 障害情報 FC2ブログについて FC２の豊富な機能 スマホからもブログ投稿 有料プラン アルバム機能 おすすめブログ テンプレート一覧 マガブロ マガブロとは？ マガブロランキング マガブロの書き方 マガブロアフィリエイト サポート ヘルプ インフォメーション リクエスト 利用規約 障害情報 アプリでもブログ投稿 FC2トップ お問い合わせ 会社概要 プライバシーポリシー 著作権ガイドライン 広告掲載 Copyright(c)1999 FC2, Inc. All R
まるで魔法のようなストレージエンジン？？VP for MySQLによる驚愕のテーブル操作テクニック。
先日、SPIDERストレージエンジンについて2度に渡り本ブログで紹介した（その１：Not Only NoSQL!! 驚異的なまでにWRITE性能をスケールさせるSPIDERストレージエンジン、その２：快適スケールアウト生活への第一歩。SPIDERストレージエンジンを使ってみよう！）が、SPIDERの作者である斯波氏は、実はもう一つ驚くべきストレージエンジンを開発している。その名も、VPストレージエンジンだ。ちょっと地味な名前だが、VPとは、Vertical Partitioning（垂直パーティショニング）の略で、複数のテーブルの上にVPストレージエンジンを被せて、垂直パーティショニング（カラムごとにデータを格納する領域を分ける）を実現するというものだ。他のテーブルの上に被せるアーキテクチャをとっているという点では、VPとSPIDERの発想は同じである。以下は、VPストレージエンジンの動作
60個のソースが無料でダウンロードできるFlash 3Dの学習サンプル集 | ClockMaker Blog
当ブログではFlashの3Dに関する記事を数多く書いていますが、この度それらの記事をこの1ページにまとめてみました。系統別にまとめたので、目的とする解説やサンプルが探しやすくなったのではないかと思います。それぞれの記事でソースファイルをダウンロードできますので、学習の理解にお役立てください。 Flashの3Dエンジンで最もメジャーな「Papervision3D」を中心にブログ記事を書いています。 Papervision3D – チュートリアル クリックで再生できます フレームア クションで覚える PV3D チュートリアル Vol.01 フ レームアクションで覚える PV3D チュートリアル Vol.01 (補足) フ レームアクションで覚える PV3D Vol.02 : Primitiveを理解する フ レームアクションで覚える PV3D Vol.03 : Materialを理解する フ
最近知ったLinux/UNIXの小技 - harry’s memorandum
最近知って結構ショックを受けた。 touch hoge.txt と似たような機能。*1 $ > hoge.txt $ ls -l hoge.txt -rw-r--r-- 1 root root 0 Jul 10 03:15 hoge.txt lessでtail -f ができる。 $ sudo less +F /var/log/messages SSHでリモートサーバに対して色々 リモート先のファイルをsortして比較。パスフレーズなしにするか、ssh-agentを使用するかしてください。 $ diff <(sort /home/user/.bashrc) <(ssh user@hostname "sort /home/user/.bashrc") リモートサーバのファイルを編集 $ vim scp://user@hostname//home/user/.bashrc sambaのコマンドで
Ruby で高速に OAuth で認証して アクセス する方法 - Candy
結論から言うと、強力な CPU と大容量のメモリを用意して Thread を大量に作るのが一番速い。 ださいことこの上無いが、これが速いんだから仕方ない。 def self.post tokens = [] User.all.each do |u| tokens << OAuth::AccessToken.new(consumer, u.token, u.secret_token) end tokens.each do |a| @t = Thread.start do res = a.post('/statuses/update.json', {:status => "なるほど四時じゃねーの"}) rescue nil end end @t.join end こんなの。本当にださいのだけど、これで十分なのだからしょうがない。というか Ruby でやる限りこれが一番速い。うちのそれなりのサー
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
カラムナデータベース（列指向データベース）とデータベースの圧縮機能について、マイケル・ストーンブレイカー氏が語っていること
カラムナデータベース（列指向データベース）とデータベースの圧縮機能について、マイケル・ストーンブレイカー氏が語っていること データベースの高速化技術の1つに、データの圧縮があります。データを圧縮して扱うことでディスクアクセスとI/Oが減少し、データへのアクセス速度が向上するのです。最近のCPUコア数の増大やメモリ単価の下落はデータ圧縮と伸長にかかるオーバーヘッドのコストを相対的に小さくしており、それもこの技術に有利に働いています。 Ingresの開発者であり、InformixのCTOなどデータベースベンダの要職を歴任、データベース研究者として大御所ともいえるマイケル・ストーンブレイカー氏が、データベースにおけるこのデータ圧縮と伸長処理について、ブログ「The Database Column」のエントリ「"Just in Time" Decompression in Analytic Dat
C++: 編集距離を求めるアルゴリズム
編集距離(edit distance)とは二つの文字列がどの程度異なっているかを示す数値であり、レーベンシュタイン距離(Levenshtein distance)を指すことが多い。文字の挿入、削除、置換それぞれを一つの操作として必要な操作の最小数を求めるものだ。例えば、kittenとsittingの編集距離を求める場合、下記のように3回の操作でkittenをsittingに変更できるので編集距離は3となる。 1. sitten (k を s に置換） 2. sittin (e を i に置換） 3. sitting (g を挿入) そこで今回は編集距離を求める複数のアルゴリズムについてC++で実装してみた。 動的計画法 編集距離を求めるもっとも一般的なアルゴリズムは、動的計画法(dynamic programming)だろう。計算時間はO(mn)であり、手軽だ。C++で書いたコードを下に示
アスキーアートのアレンジ手法 - アスキーアート・エッセイ（廃墟）
元絵があるAAを作るときは、だいたい手作業によるトレースで出来ていくわけですが、大きさや角度で難易度が変化するのは、以下の記事でもお伝えしたとおりです。 関連リンク： 角度とか。 - アスキーアート・エッセイ（廃墟） アスキーアートのサイズ - アスキーアート・エッセイ（廃墟） それ以外にも作るうえでいろいろなアレンジ*1を加える必要を考慮すると、小綺麗なAAが完成するかもです。私が作業する項目は以下のとおりです。 1.元絵を補完する 絵によっては一部分が欠けていたりして見映えが悪い場合があります。割り切ってしまうのも手ですが、やっぱりAAでも（輪郭が）閉じていたほうがいいよねーとこだわりたい人は「補完」をしましょう。あらかじめ元絵の周囲に余白を追加して、描かれていない部分を自分で追加します。なぁに、そう細かく描く必要はありません。大雑把に輪郭だけでいいんです。絵心が心許ない人は(´д｀)
UbuntuからWindowsXPをLAN環境で遠隔操作する | 我が心のあれこれ
2008-06-24 Category： ネットワーク関連 Comments： 2件 我が家では自分の部屋（？）に２台のマシン（デスクトップがWindows、ノートがUbuntu）を並べて置いてある。この環境だと遠隔操作を必要とする機会はないかもしれない。しかし、強引な設定だが(^-^;)、例えば、リビングでテレビを見ながらWindowsマシンも操作しなければならない状況になった時、ノートをリビングに持って行って、そこから自分の部屋にあるWindowsを遠隔操作できるのだ。LAN配線は既設してあるので問題なし。３カ月ほど前に運動不足解消のためにとWiiとWii Fitを購入した際、長すぎるとは思ったが１５メートルのLANケーブルを自分の部屋からリビングに向けて隅を這わすように配線した。確かにケーブルは長かったが、遠隔操作する機会が訪れた時にそれは功を奏するだろう、と思う･･･。 Win
Google Chrome 2.0 で使える(自作の) User Scripts - 0x集積蔵
やけにあっさりと Google Chrome 2.0 がリリースされました。 というわけで、Greasemetal, GreaseKit で使える UserJavaScript (自作中心) - 0xFFのGoogle Chrome 2.0版(今回は自作のみ)です。 最初に、GreasemetalはGoogle Chrome 2にGreasemonkey相当の機能が実装されたため、開発を終了しています。ので、以下はChromeに搭載されたUser Scriptsを対象とします。(ちなみに、User Scriptsを書いてみようという方は、Google Chrome 2.0のUserScriptsはGreasemonkey互換のようで、そうではない - 0xFFをチェックしておくと良いかもしれません) User Scripts の導入 起動時に --enable-user-scripts オ
YouTubeはアカウントを作成した方がなにかと便利に使えて楽しい*二十歳街道まっしぐら（FC2ブログ時代）
みなさん、日ごろから動画共有サイト「YouTube」を利用していると思います。 何気なく利用しているYouTubeですが、アカウントを作成していますでしょうか。 YouTubeはアカウントを作成するといろんなコンテンツを利用することができるようになります。 アカウントを作成しなくても動画は見れますが、作成するとYouTubeがもっと使いやすくなります！ 以下にアカウントを作成したらできることをまとめて紹介します。 頻繁にYouTubeはアップデートされており、いろんなコンテンツが楽しめるようになっています。 実はYouTubeアカウントはGoogleアカウントを同じものを利用します。 ですので、GmailなどGoogleサービスを利用している方はそのままそのアカウントをYouTube用として利用できます。 また、昔はYouTubeとGoogleは別のアカウントを作成する仕様でしたが、最近に
JSONの可能性がグンと拡がるぞ！ JSONスキーマ - 檜山正幸のキマイラ飼育記 (はてなBlog)
JSON（http://www.json.org/）データはけっこうよく使うので、何度か話題にしたことがあります（例えば「もう一度、ちゃんとJSON入門」）。でも、JSONには型情報／メタ情報が付けられないのがとても不満で、JSON改なんてもんを考えたこともありました。（後でXIONに改名） JSONデータに対するスキーマ定義の仕様がかたまりつつあることを、ごく最近になって知りました。 http://json-schema.org/ JSON本体はRFC 4627になっていますが、JSONスキーマの標準化のステータスは、あまりハッキリとは分かりません（僕には）。http://groups.google.com/group/json-schema?pli=1 を覗き見した感じでは、現状ワーキングドラフトという位置付けらしいです。 なかなか面白いし役に立ちそうなので紹介します。ただし、僕にとっ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
HTML5 Canvas Cheat Sheet
http://www.isthatclear.com/jquery/canimate/
Chrome Extensions | Chrome for Developers
Windowsのシャットダウンを途中で中止する方法 | ライフハッカー・ジャパン
a5j.biz