msyktのブックマーク / 2013年12月16日

msykt id:msykt

2013年12月16日のブックマーク (3件)

Apache Drill ではクエリ処理はこんな風に行われる（Hadoop アドベントカレンダー 2013 16日目） - nagix
この記事は Hadoop アドベントカレンダー 2013の16日目の記事です。 Apache Drill 概要 Apache Drill は Google Dremel に触発されて開発されたオープンソースプロジェクトで、2012年8月に Apache Incubator として提案されました。大規模データに対し、バッチ処理ではなく、インタラクティブなクエリの実行を可能にするという意味では、ImpalaやStinger、Presto といったプロジェクトと同様の大きな目的を持っていますが、SQL 2003 完全準拠、パーサや処理実行部分を Pluggable にして幅広いクエリ言語やデータソースに対応、JSON/Avro のようなネストデータに対応、スキーマはオプショナルでスキーマレスなデータに対応、といったところなど、より柔軟で拡張性の高いフレームワークを目指しているのが他のプロジェクト
msykt 2013/12/16
Drillについて。これはもうブログってカンジじゃないですね…素晴らしすぎる

drill
リンク
serfとDockerでクラスタを組んでみる - $shibayu36->blog;
最近Serfというツールも気になっていたので、とりあえずクラスタを組んでイベントハンドラの設定をしてみるところまでやってみました。 Serfとは http://www.serfdom.io/ https://github.com/hashicorp/serf Serf is a decentralized solution for service discovery and orchestration that is lightweight, highly available, and fault tolerant. Orchestrationという層を支援する軽いツールみたいですね。これをうまく使うことで、クラスタにjoinしたweb serverを自動的に配下に加えるHAProxyとかを実装したり出来ます。参考: Serf+HAProxyで作るAutomatic Load Balanc
msykt 2013/12/16
dockerはこういったクラスタのミドルウェアをちょっと試してみたい時や、自分でオーケストレーションツール作ってテストする時に便利

docker
リンク
AWS News Blog
AWS Weekly Roundup – AWS Dedicated Local Zones, Events and More – August 28, 2023 This week, I will meet our customers and partners at the AWS Summit Mexico. If you are around, please come say hi at the community lounge and at the F1 Game Day where I will spend most of my time. I would love to discuss your developer experience on AWS and listen to your stories […] AWS Weekly Roundup – AWS AppSync,
msykt 2013/12/16
これちょっと意外だった。それだけImpalaの需要があるってことなのかな。何にせよEMRによってImpalaが身近になったので、使ってみたいなぁ

emr

impala
リンク
- 2013年12月17日
- 2013年12月16日
- 2013年12月15日