こんにちは。古橋です。 先日の*1 データ転送ミドルウェア勉強会で、新しいオープンソースツール Embulk をリリースしました。 Embulk, an open-source plugin-based parallel bulk data loader from Sadayuki Furuhashi Embulk は、リアルタイムなログ収集では常識となった fluentd のバッチ版のようなツールで、ファイルやデータベースからデータを吸い出し、別のストレージやデータベースにロードするためのコンパクトなツールです。 fluentd と同様にプラグイン型のアーキテクチャを採用 しているため、RubyやJavaで簡単なコードを書くことで、様々なファイルフォーマットやストレージに対応することができます。一方で fluentd とは異なり、高速性やトランザクション制御、スキーマを使ったデータのバリ
はじめに トレジャーデータはクラウドでデータマネージメントサービスを提供しています。 2015年1月,Fluentd のコミッター(弊社エンジニア)が中心となった「Embulk」というOSSが公開されました。このツールは大規模なデータセットのバルクインポートを行えるデータ収集ツールの1つに大別されるものです。 ↑ メインコミッターである当社エンジニア:古橋は Fluentd や MessagePack といったOSSを生み出してきました。そして,トレジャーデータのプラットフォームの根幹を作り上げたのも彼なのです。 Embulk とは何か? Embulkとはどのようなものなのでしょうか? バルクインポートを行うためのツールは,はるか以前からたくさん存在しますが,その中においてEmbulk の位置付けはどこにあるのでしょうか? 少しずつ紐といていきましょう。 「簡単に言うとFluentdのバッ
やっと生活がもとに戻った。 この二週間、初めて育児で「詰んだ」。 何となく頭が回らないなと思いながら日常生活を送っていたが、ふとした瞬間に熱を計ってみると40度を超えていた。もともと熱には耐性があるのか、熱が高いだけではそれなりに動けていたのだが、改めて体温計のスクリーンに40度の文字を見ると、急に寒気がした。 いま、妻が第三子を妊娠しており、つわりの状態がこれまで以上によくないため、起床から保育園の送りまでと、保育園の迎えから寝かせつけ、その他の家事を基本的にすべて引き受けている。もともと育児、家事は夫婦のどちらがということがないため、すべてのタスクをこなすことはできるが、10週~12週あたりの妻の状態は本当に病気のレベルだった。 僕の体調に異変があってすぐ、第一子が嘔吐した。熱を計ってみると40度あり、すぐに病院へ。診断名はインフルエンザ。幸い、予防注射をしていたので病状は軽かったが、
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く