原文: http://blog.cloudera.com/blog/2016/10/how-to-use-the-new-hdfs-intra-datanode-disk-balancer-in-apache-hadoop/ 現在、HDFSにはノードでデータを移動するための包括的なストレージ容量管理アプローチが含まれています (CDH 5.8.2以降)。 HDFSでは、DataNodeはhdfs-site.xmlのdfs.datanode.data.dirを用いて指定できるローカルのファイルシステムディレクトリにデータブロックを分配します。HDFSの用語でボリュームと呼ばれる各ディレクトリは、一般的なインストールでは別のデバイス(たとえば、別のHDDやSSD)上にあります。 新しいブロックをHDFSに書き込む際、DataNodeはボリューム選択ポリシー(volume-choosing po
GuardでPerlのテストを実行するときに使えるguard-tapというGemを書いた. t/以下のファイルが変更されたら実行するとか,lib/以下のファイルが実行されたら,名前が似てるテストファイルを推測して実行,とかできる. GitHub - hitode909/guard-tap: Guard gem for Test Anything Protocol guard-tap | RubyGems.org | your community gem host 実行結果のTAP形式の文字列をパースしていて,テスト結果や,失敗したときのエラーメッセージなどをGrowlに表示できる. TAPは単なる文字列のプロトコルで,実装すれば言語によらず使えるので,Perl以外でも使いたい人いたらguard-tapとつなげて使える.いないと思うけど. Test Anything Protocol - W
2008年11月01日23:15 Perl perl版autotestを作ってみた 先日、rubyのautotestが素晴らしいという記事を書きました。 それで、perlでも同じようなのがないかな〜と思って調べてみたら、Test::Continuousというのを見つけました。 これがほぼ仕様を満たしているんですけど、Mac::Growlってモジュールが必須みたいでインストールが出来ない・・・。あと、出来ればAutotest::screenみたいに結果をscreenにバシっと表示させたい ってことで、自分で作りましたよ.。゚+.(・∀・)゚+.゚ こんな感じ。 autotest.pl #!/usr/bin/perl use strict; use warnings; use Cwd; use File::Modified; use Getopt::Long; my $color = { bl
まとめました JJUG CCC 2017 Springの発表資料(スライド)を纏めました。 現在非公開になっているものは見つけ次第、追記していこうと思います。 また、漏れてたり間違ってたり追加があったり後に非公開になったりした場合は @ryoichi_obara までお知らせ頂ければと思います。 スライドが無くて、Togetterがあるものはそちらにリンク貼っていたりします。 A0 日本Javaユーザーグループ 年次総会 日本Javaグループ2017年定期総会 #jjug from 日本Javaユーザーグループ www.slideshare.net ABCD1 JJUG CCC 20th fireside chat 未公開 E1 ふつうのJavaコーディング F1 Hipsterで学ぶ!Springによるサーバサイド開発手法 GH1 非機能要件とSpring Boot ABCD2 Java
先日公開された『Amazon Aurora: Design Considerations for High Throughput Cloud-Native Relational Databases』を読みました。 興味深かった部分や疑問に思った(あんまりわかってない)部分をまとめておきます。 AWS は詳しくないので、ところどころ間違っているかもしれません。 Amazon Aurora とは Amazon Aurora のアーキテクチャ全体像 quorum 10GBに分割されたストレージ redo ログのみを転送 感想 Amazon Aurora とは Amazon Aurora は Amazon Web Service が提供する、マネージドリレーショナルデータベースサービスです。 Amazon Aurora (MySQL 互換のリレーショナルデータベース) | AWS Amazon A
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く