HBase on Flash
HBase on Flash Presentation Transcript Fusion-io Confidential—Copyright © 2013 Fusion-io, Inc. All rights reserved.Fusion-io Confidential—Copyright © 2013 Fusion-io, Inc. All rights reserved.HBase on FlashMatt KennedyHBaseCon June 13, 2013 Switch your database to flashnow. Or you’re doing it wrong.Brian Bulkowski, Aerospike CTO and co-founderJune 10, 2013 2http://highscalability.com/blog/2012/12/1
HBase is down due to Java Leap Second bug « Socorro Status Blog
A problem with Java’s handling of the Leap Second today caused our HBase clusters to crash. Currently we are accepting but not processing crashes. You will also be unable to view individual crash reports until the problem is resolved. Tracking in https://bugzilla.mozilla.org/show_bug.cgi?id=769972 I’ll update when the problem is fixed. Update: As of 11.25pm EDT, Socorro is functioning normally.
Cloudera Blog
Enterprises see embracing AI as a strategic imperative that will enable them to stay relevant in increasingly competitive markets. However, it remains difficult to quickly build these capabilities given the challenges with finding readily available talent and resources to get started rapidly on the AI journey. Cloudera recently signed a strategic collaboration agreement with Amazon […] Read blog p
storage infrastructure behind facebook messages
Storage Infrastructure Behind Facebook Messages HBase/HDFS/ZK/MapReduce Kannan Muthukkaruppan Software Engineer, Facebook Big Data Experiences & Scars, HPTS 2011 Oct 24th, 2011 The New Facebook Messages Emails Chats SMS Messages Why we chose HBase ▪ High write throughput ▪ Good random read performance ▪ Horizontal scalability ▪ Automatic Failover ▪ Strong consistency ▪ Benefits of HDFS ▪ Fault tol
Why we run our HBase on EC2 | WhyNosql
Key HBase community members advise people not to host their HBase cluster on EC2. And they have good reasons for advising so. But in this post I am going to explain why we decided to host our HBase cluster on EC2 and why we continue to host it on EC2. When we began experimenting with HBase in July of 2009, HBase was fairly new and we were experimenting with Hadoop and HBase to learn how these tech
FacebookがHBaseを大規模リアルタイム処理に利用している理由（前編）
Facebookは大規模なデータ処理の基盤としてHBaseを利用しています。なぜFacebookはHBaseを用いているのか、どのように利用しているのでしょうか？ 7月1日に都内で行われた勉強会で、Facebookのソフトウェアエンジニアであるジョナサン・グレイ（Jonathan Gray）氏による解説が行われました。 解説はほぼスライドの内容そのままでした。当日使われた日本語訳されたスライドが公開されているので、ポイントとなるページを紹介しましょう。 Realtime Apache Hadoop at Facebook なぜリアルタイムデータの分析に、Hadoop/HBaseを使うのか？ MySQLは安定しているが、分散システムとして設計されておらず、サイズにも上限がある。一方、Hadoopはスケーラブルだがプログラミングが難しく、ランダムな書き込みや読み込みに向いていない。 Faceb
HbaseとPigで遊んでみる。その2 - ここにタイトルを入力|
http://d.hatena.ne.jp/goth_wrist_cut/20110529/1306695210 前回の続きでする。 前回までのあらすじ。 EasyMode上等 OpenJDKではなく、OracleJDK conf-pseudo便利 .outではなく.logをつかうべし ディレクトリは勝手に作らせるが吉 Webインターフェースが素敵 円周率はおよそ3.6。 今回はHBaseの導入と起動、そんでshellで遊ぶ。 実際にTwitterのTLをいれよう、とか思ったのだけど、思った以上に長くなったのでここまで。 次回はTwitterからデータを入れてみます。 起動 インストールは前回でまとめてやってしまったので特にやることは無し。 設定に関しても疑似分散モードなら無設定で動きます。 完全分散モードの場合には、完全分散で動かすよ！という指定やらデータの保存先(HDFSのnameno
HbaseとPigで遊んでみる。その1 - ここにタイトルを入力|
そんなわけでもうそろそろ6月ですが、3月のに行ったインターンで学んだこととか思い出すためにHadoopで遊んでみました。 方針的にはHBaseを中心に、適当にTwitter検索的なものを作ってみたり、あとはPigとかいじれればいいなぁ、と考えてます。 あと、基本的には「Hadoop徹底入門」をベースに経験をプラス、といったところです。 あまり有用な情報があるかは分かりませんが、メモ程度に。 兎にも角にもとりあえず準備から。 準備 手頃なマシンもないし、最初はEC2とか使ってみようかなー、とか思ったのですが、諸般の都合でVMWare上でやってます。 OSは適当にCentOS。Gentooとかも考えたんだけど、めんどそうなので一番簡単そうなせんとくんで。 HadoopはClouderaのをyumで。一番簡単そうｎ(ry ついでにいえば、一番簡単そうな疑似分散モードで遊ぼうと思ってます。 気が向
Mapreduce & Hadoop Algorithms in Academic Papers (4th update – May 2011) | atbrox
Mapreduce & Hadoop Algorithms in Academic Papers (4th update – May 2011) Follow @atbrox It’s been a year since I updated the mapreduce algorithms posting last time, and it has been truly an excellent year for mapreduce and hadoop – the number of commercial vendors supporting it has multiplied, e.g. with 5 announcements at EMC World only last week (Greenplum, Mellanox, Datastax, NetApp, and Snaplog
Realtime Hadoop usage at Facebook -- Part 1
Facebook recently deployed Facebook Messages, its first ever user-facing application built on the Apache Hadoop platform. It uses HDFS and HBase as core technologies for this solution. Since then, there are many more applications that have started to used HBase. We have gained some experience in deploying and operating HDFS and HBase at peta-byte scale for realtime-workloads and decided to write a
GitHub - sematext/HBaseWD: HBase Writes Distributor
HBaseWD: --------- http://github.com/sematext/HBaseWD Released under Apache License 2.0. Description: ------------ HBaseWD stands for Distributing (sequential) Writes. It was inspired by discussions on HBase mailing lists around the problem of choosing between: * writing records with sequential row keys (e.g. time-series data with row key built based on ts) * using random unique IDs for records Fi
Riak and Cassandra and HBase, oh my! « Blog of Data
We are marching along in our integration of HBase with the Socorro Crash Stats project, but I wanted to take a minute away from that to talk about a separate project the Metrics team has also been involved with. Mozilla Labs Test Pilot is a project to experiment and analyze data from real world Firefox users to discover quantifiable ways to improve our user experience. I was very interested and e
分散データベース「HBase」の安定運用を目指して - Preferred Networks Research & Development
1年経ってiPhone4の電池がヘタってきた、太田です。 指数関数的にエントリ数が少なくなってきた本ブログですがw、景気付けのためにエントリを投稿したいと思います！本日はHBaseについてです。 Linux と Hadoop と HBase と ZooKeeper に詳しいあなた！あなたがターゲットです。 HBaseとは? HBaseとは、HDFS (Hadoop Distributed File System)上に構築された分散データベースです。大量の非常に細かいデータをリアルタイムに読み書き出来るのが特徴です。最近ではFacebook Messageの基盤技術として使用された事で注目を集めています。 HBase公式サイト Apache HBase ブック 保存されたデータはHDFS上に保存され、HDFSの仕組みによってレプリケーションされるため安全にデータを保持することが出来ます。 ま
Hive/HBaseIntegration - Hadoop Wiki
Introduction This page documents the Hive/HBase integration support originally introduced in HIVE-705. This feature allows Hive QL statements to access HBase tables for both read (SELECT) and write (INSERT). It is even possible to combine access to HBase tables with native Hive tables via joins and unions. A presentation is available from the HBase HUG10 Meetup This feature is a work in progress,
Caching and Processing 2TB Mozilla Crash Reports in memory with Hazelcast - High Scalability -
« Sponsored Post: Gazillion, Edmunds, OPOWER, ClearStone, deviantART, ScaleOut, aiCache, WAPT, Karmasphere, Kabam, Newrelic, Cloudkick, Membase, Joyent, CloudSigma, ManageEngine, Site24x7 | Main | Stuff The Internet Says On Scalability For April 8, 2011 » Mozilla processes TB's of Firefox crash reports daily using HBase, Hadoop, Python and Thrift protocol. The project is called Socorro, a system f
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Nicolas Spiegelberg - Multi-tenant HBase Solutions at Facebook on Vimeo
HBase and Accumulo | Washington DC Hadoop User Group
HBaseSearchPresentation.pdf - Google ドライブ
JVM u24 segfault in clearerr on Jaunty
http://www.cs.ucsb.edu/~sudipto/papers/md-hbase.pdf