Elasticsearchのデータを簡単にimport/exportする - (ﾟ∀ﾟ)o彡 sasata299's blog
2013年12月04日16:03 JavaScript Elasticsearchのデータを簡単にimport/exportする 最近、Kibana と Elasticsearch と Fluentd の組み合わせでログを可視化するの見かけたので僕も試してみました。とても簡単に可視化できて素晴らしいですね〜 :D ただ、開発環境で Elasticsearch のデータを作るのはメンドクサイです。うーん、何か良い方法は無いものかと探していたら、elasticsearch-knapsack (ナップサック!!!1) という Elasticsearch のデータを import/export してくれる gem を見つけました。これは便利そう！！ これを使って、本番環境のデータをちょろっと手元にコピーしてみました。 まずエクスポートから。github で書かれている通り、エクスポートさせたいサー
「Hadoopファーストガイド」を執筆しました - (ﾟ∀ﾟ)o彡 sasata299's blog
2012年09月21日19:23 Hadoop 執筆 「Hadoopファーストガイド」を執筆しました あれから1年半の月日が流れました。なんかあっという間でしたね。。 「NoSQLデータベースファーストガイド」を執筆しました そ、そしてなんと！！ 2冊目の執筆が終わりました！！！１ その名も「Hadoopファーストガイド」です。ででーん。 ファーストガイドシリーズです ( ｰ`дｰ´)ｷﾘｯ 前回のと並べるとそっくりですねｗ ファーストガイドなのでHadoopの名前は知っているけど使ったことないな〜くらいのエンジニアが対象です。普段からがしがしHadoopを使ってる人が見ても面白くないと思いますｗ こんな感じ。本書では基本的にAWSのEMR（Elastic Map Reduce）を利用してます。 近年、データサイズは増加傾向にあり、Webサイトを運営しているエンジニアやプログラマーにとって
git-svnしようとしたらSVN::Coreが無い・・ - (ﾟ∀ﾟ)o彡 sasata299's blog
2009年02月14日18:50 Git git-svnしようとしたらSVN::Coreが無い・・ ちょっとSVN::Coreのインストールが大変だったのでまとめておきます。 最近git（ギット）が流行っています。svnとかのバージョン管理の一つで、svnが単一リポジトリなのに対して、gitは分散リポジトリなのが一番の違いです。 先日のデブサミのレポートを見る限り、はてなでは既に社内リポジトリとして結構使っているようですね。さすがです。これからgitが流行ってくるのはほぼ間違いないので、私sasata299も最近ちょこちょこgitを使い始めています。（ ´,_ゝ｀） それで今回、git-svnっていうのを試してみようと思いました。 これは、「既存のsvnリポジトリを使いつつ、ローカルではgitとして扱う」みたいなものです。gitでいう大本のリポジトリがsvnになっているイメージ。これなら今
Hadoopの罠 - 今動いてるジョブって本当にそれだけですか？ - (ﾟ∀ﾟ)o彡 sasata299's blog
2010年02月04日13:18 Hadoop Hadoopの罠 - 今動いてるジョブって本当にそれだけですか？ こんにちは (*･ω･)ﾉ 日々 Hadoop の扱いに悪戦苦闘しているささたつです。 今日は Hadoop を扱う上でのちょっとした注意点です。あ、僕は Hadoop Streaming を使っているのでひょっとすると Hadoop Streaming 固有の問題かもしれません。 例えば、Hadoop を使って何かしらのジョブを行ったとします。でも何か問題があって処理を途中で止めることってありますよね？そのような場合は Ctrl + C で終了させると思いますがここで注意が必要です。 あなたが殺したと思っていたジョブは実は裏で生きてます。 そしてマシンのリソースを食ってます ((((；ﾟДﾟ)))ｶﾞｸｶﾞｸﾌﾞﾙﾌﾞﾙ " これは困ります（ほんとに！！）。 今現在、Hado
「NoSQLデータベースファーストガイド」を執筆しました - (ﾟ∀ﾟ)o彡 sasata299's blog
2011年04月28日19:00 NoSQL 執筆 「NoSQLデータベースファーストガイド」を執筆しました 最近あまりブログを書けていなかったわけですが、実は初めて本の執筆をしていました。こちらです！でで〜ん！！(＊ﾟ∀ﾟ)っ NoSQLデータベースファーストガイド NoSQLデータベースについて書かれた 国内初 の入門書です！（多分） 最近では NoSQL というキーワードがバズワードになりつつあり、「いったい NoSQL って何だろう？」とか「リレーショナルデータベースとどう違うの？」と疑問に思われている方も多いのではないかと思います。が、勉強しようにも最初の一歩を踏み出すのってなかなか大変ですよね。何かいっぱい種類があるし。そこで、本書をきっかけとしていただけたら、、＞＜ NoSQLデータベースは細かいチューニングを行い「リレーショナルデータベースでは扱えないような大規模な処理を扱
10分で理解するMongoDBのパフォーマンス - (ﾟ∀ﾟ)o彡 sasata299's blog
2010年04月25日00:16 NoSQL MySQL 10分で理解するMongoDBのパフォーマンス MongoDBってスキーマレスなDBで、カラムが決められないような場合に使うと効果的なんだと思うんですが、「そういうデータはハッシュにして、JSON 形式で MySQL に保存すれば良いのでは？」という意見をいただいたので、その場合とのバフォーマンス比較をしてみました。 ※最初は MySQL として innodb でしか評価していなかったため、myisam の結果についても追記しました。(2010/04/25追記) ベンチマーク環境の準備 試した環境としては、MySQL 5.1.45, MongoDB 1.2.4 です。MySQL側はこんな感じ。 mysql> desc blogs; +------------+--------------+------+-----+---------
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
