This domain may be for sale!
Announcing Amazon Managed Service for Apache Flink Renamed from Amazon Kinesis Data Analytics Today we are announcing the rename of Amazon Kinesis Data Analytics to Amazon Managed Service for Apache Flink, a fully managed and serverless service for you to build and run real-time streaming applications using Apache Flink. We continue to deliver the same experience in your Flink applications without
HW障害か何かでノードがぶっ壊れて、置き換え用の新しいノードを故障したノードと同じIP/同じname(vm.argsの-name)で構築するようなケース。 新しいノードにRiakインストール 新しいノードに、バックアップからデータ、リング、コンフィグ(/var/lib/riak/bitcask(lebeldb), /etc/riak/*, /var/lib/riak/ring)を戻す。 新しいノードのRiak起動。 で、おk。 2.2 別のノードにデータを移す場合 別に用意したサーバにデータを移したいケース。もしくはぶっこわれたノードを置き換えるときに、事情があって同じIPにすることができないようなケース(DHCPでIP振ってるときとか)。 新しいノードにRiakインストール 新しいノードに、バックアップからデータ、リング、コンフィグ(/var/lib/riak/bitcask(lebel
ハードウェア層 OS層 クラスタの留意点 負荷分散 ベンチマーク BitcaskとLevelDB コンフィグファイル スケールアウトとスケールアップの手順 運用上の注意点 64ビットCPUアーキテクチャ 最低4GBのメモリ。メモリは最も重要。局所性を活かせるのであれば多くメモリを必要としない。 RAID0、SSDを考慮すると良い。IOバウンドになりがちなので。 ミラーリング(RAID1)は考えなくて良い。 RAID(RAID1?)はやめちゃいな(クラスタ組んでるしいいんじゃない?的な?)。 ディスクサイズ重要。 ギガビットイーサも考慮にいれて。ネットワークも使うよ。 仮想マシンを使う場合は一番良いインスタンスを使う。同じデータセンタ/リージョンに配置するようにする。 クラスタ全体で必要なディスクサイズは次のように計算できる。 オブジェクト数 * 平均オブジェクトサイズ * n_val 50
ちなみに、もしデフォルトの「riak@127.0.0.1」で起動してしまった場合は、vm.argsを編集した上で次のコマンドを叩いて、リネームした旨をクラスタに通知してやらなアカンらしい。このreplaceコマンドは、ノード置き換えのときなどにも使うっぽい。 # リネーム /usr/sbin/riak-admin cluster replace riak@127.0.0.1 riak@xxx.xxx.xxx.xxx # 確認(このフェーズは省略できない) /usr/sbin/riak-admin cluster plan # 実行 /usr/sbin/riak-admin cluster commit
一部の人が愛してやまない(らしい)、Riak CS がオープンソース化されました。 id:kuenishi が【緊急】 Riak Cloud Storage が OSS になりました【速報】なんて記事を書いて、 インストール方法を説明していますが、手順が多すぎてなにいってんだかぜんぜんわかりません。 こんなに複雑な手順なのに、手順番号も振ってないし、クロスチェック用のチェック欄もありません。 手順書としては考えられない構成になっています。 しかたがないので、シンプルな手順で Riak CS が利用できるよう、chef でインストールすることにしましょう。 本家 Basho サイトを見ると Riak CS Using Chef という素敵な記事があります。 どうやら Basho では chef のレシピを提供してくれているようです。 Cheffile を作る いつもどおり、librarian
BashoのRiak CSがオープンソースになり、さらに、同時に Riak CS 1.3.0 がリリースされました。Riak CSの日本語の紹介もあります。概要を知りたいというひとは第五回クラスト研の僕の発表スライドもよいかと思います。 今まではトライアル版と申しこめば無料で使えていましたが、これからはバグを見つけたりすると自分で直してPull Requestすることができるようになります。素晴らしいですね。Bashoジャパンで開発した機能もいくつか入っているらしいですよ。 ドキュメントにあまり時間をかけられなかったらしく(他人ごと)、公式のドキュメントもなかなかなので、ヒジョーにニッチなQuickStartをここに書いておきます。もう開発者向けといっていいレベル。Tarballも配布されると思うので特に心配はしていません。基本的には公式のQuickStartと同じですが、ちょいと長いので
Amazon S3互換分散オブジェクトストレージのBashoが国内本格展開。CEOとアーキテクトに聞く 分散キーバリューストアのRiakや、Amazon S3互換の分散オブジェクトストレージのRiak CSなどを提供するBashoが、国内での販売活動の本格展開を、代理店の東京エレクトロンデバイスとともに発表しました。東京エレクトロンデバイスはBashoへの投資も行い、国内で事実上の販売窓口となります。 同社CEOのGreg Collins氏とPrincipal ArchitectのAndy Gross氏に、同社製品の展開について聞きました。 Bashoはスタック全体をコントロールしている ──── オブジェクトストアとしてRiak CSが優れているところはどこですか? グロス氏 私たちは(基盤となるキーバリュー型ストアからオブジェクトストレージに渡る)ソフトウェア全体のスタックをコントロー
分散データストアって悩ましい問題がいろいろありますよね、特にスケールとパフォーマンス。 クライアント側で Consistent Hashing する、いわゆる Memcached プロトコル互換のプロダクトはいっぱいありますが、そういうものだとスケールするときにいろいろと大変です。 いわゆる「引越し先から読んで、なかったら引越し元から読み、引越し先に書く」みたいな対応が必要になってしまいます。 例えば5台を7台に広げたい場合、運用中の5台とは別に7台用意する必要があって面倒です。 そういうのを解決するプロダクトとして最近いくつか注目されているものがありますが、何処からか聞こえてきた「Riakいいみたいだよ」という一声から、検証のため Test::riak を書きました。 とは言え自分は Riak はもちろんのこと Erlang にはぜんぜん造詣がないので、なかなかドロ仕事をしているモジュー
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く