Cloudera Blog
It’s hard to believe it’s been 15 years since the global financial crisis of 2007/2008. While this might be a blast from the past we’d rather leave in the proverbial rear-view mirror, in March of 2023 we were back to the future with the collapse of Silicon Valley Bank (SVB), the largest US bank to […] Read blog post
スマートフォン×Cassandraによるハイパフォーマンス基盤の構築事例
1. スマートフォン×Cassandraによる ハイパフォーマンスサービス基盤の 構築事例 株式会社コスモルート クラウドR&D グループ terurou Cassandra Conference in Tokyo（2011/10/05） 1 All Rights Reserved,Copyright © 株式会社コスモルート 2011 2. 今から話すこと • 自己紹介＋会社紹介 • 事例紹介 – GeQuuとは – リリースに至るまでのサービス基盤の変遷 • どのように技術的な難題を解決してきたか？ • まとめ 2 All Rights Reserved,Copyright © 株式会社コスモルート 2011
Twitter with Java
Imports import java.net.URL; import org.apache.commons.io.IOUtils; import org.apache.commons.io.output.ByteArrayOutputStream; import org.json.JSONArray; import org.json.JSONObject; Code String username = "google"; // update // get tweets as JSON URL url = new URL("https://twitter.com/statuses/user_timeline/" + username + ".json"); ByteArrayOutputStream urlOutputStream = new ByteArrayOutputStream()
How to upgrade from CDH3 to CDH4 for Debian | 外道父の匠
イベント２つを経て、何から書くか迷うところですが、先に @tagomoris との約束を果たすためにCDH3からCDH4への具体的なアップグレード手順を紹介します。 この約束を果たすと、@ryu_kobayashi が Huahin Framework をCDH4対応してくれるというパーフェクトフローになっておりますが、JobTrackerがResourceManagerになってるので大変そうですね！ はじめに 公式 CDH4 Installation Upgrading from CDH3 to CDH4 Deprecated Properties 過去記事 Upgrade CDH3 to CDH4 注意点その１ Upgrade CDH3 to CDH4 注意点その２ OSについて Debian Squeeze です。LennyにはCDH4は存在しませんし、無理矢理もほぼ不可能です。 C
色気のあるターミナルをつくろう - しばそんノート
今までターミナル環境のカスタマイズにあまり興味を向けてこなかった私ですが、さすがに最近「白背景に黒文字」の味気ない画面に物足りなさを感じるようになってきました。 だいたい下の画像みたいなかんじです。ほぼデフォルト配色のPoderosaに、同じくデフォルト配色のVim。 気分よく作業するには、もう少し色気が欲しいよなぁ…ってことで、色々入れ替えてみました。せっかくなので、そのメモを残しておこうと思います。 なお、クライアントOSはWindows 7 Professional 64bit、サーバOSはCentOS 5.5 64bitとなっています。 色気のある画面とは まずは、どの辺の要素が満たされていれば「色気のある画面」と言えるのかを考えてみたいと思います。 完全に個人的な意見ですが、ざっと次のようなところでしょうか。 綺麗なフォント 基本ですね。個人的には角張ったものより柔らかな印象を与
BigDataをリアルタイム処理させるDrill - ウィリアムのいたずらの、まちあるき、たべあるき
ウィリアムのいたずらが、街歩き、食べ物、音楽等の個人的見解を主に書くブログです（たま～にコンピューター関係も） Hadoopはビッグデータをバッチ処理させるには向いてるけど、 ビッグデータは、リアルタイム処理するのは向いてない... っていわれてたんだけど、それをやっちゃおうっていうのが、 （インタラクティブ処理）Ｄｒｅｍｅｌで・・・ ってことは、ＮＨＮカンファレンスで、最後の最後に言っていたけど、 そのDremelベース(って下の記事には書いてあるけど、さらにその下のサイトには、インスパイヤされたと書いてある）のアドホックな検索システムにApache Drillというのがあるらしい。 その話が載っていたので、メモメモ New Apache project will Drill big data in near real time http://www.itworld.com/big-da
What is big data analytics? Fast answers from diverse data sets
Analyzing large volumes of data is only part of what makes big data analytics different from traditional data analytics There’s data, and then there’s big data. So, what’s the difference? Big data defined A clear big data definition can be difficult to pin down because big data can cover a multitude of use cases. But in general the term refers to sets of data that are so large in volume and so com
シマンテック、最大16PBのデータを処理するHadoop向けソリューション
シマンテックは、企業の既存インフラを活用したビッグデータ分析を可能にする、Veritas Storage Foundation Cluster File System向けアドオンソリューション「Symantec Enterprise Solution for Hadoop」を発表した。Hortonworks Data Platform (HDP) 1.0 と Apache Hadoop 1.0.2 に対応しており、Veritas Storage Foundation Cluster File Systemを利用中であれば無料で利用できる。 同ソリューションは、ビッグデータの管理負荷を削減し、Apache Hadoopの企業導入を可能にするための、拡張性と耐障害性を備えたデータ管理ソリューション。 既存のインフラを用い、構造化データおよび非構造化データを含む最大16PBのデータを処理し、スト
Hadoop and Vertica: The Data Analytics Platform at Twitter
The document discusses Twitter's data analytics platform, including Hadoop and Vertica. It outlines Twitter's data flow, which ingests 400 million tweets daily into HDFS, then uses various tools like Crane, Oink, and Rasvelg to run jobs on the main Hadoop cluster before loading analytics into Vertica and MySQL for web tools and analysts. It also describes Twitter's heterogeneous technology stack a
Ambari -
Introduction The Apache Ambari project is aimed at making Hadoop management simpler by developing software for provisioning, managing, and monitoring Apache Hadoop clusters. Ambari provides an intuitive, easy-to-use Hadoop management web UI backed by its RESTful APIs. Ambari enables System Administrators to: Provision a Hadoop Cluster Ambari provides a step-by-step wizard for installing Hadoop ser
ドキュメンテーションを加速するストレスフリーの作図ツール『blockdiag』 jus2011年6月勉強会
システム開発や保守、運用の現場においてドキュメントは必須のものです。 しかし、ドキュメントの作成・維持には多くのパワーがかかるため、ドキュ メントが存在しない、資料が古いままになっているなどといった現状を多く 耳にします。 本勉強会ではこれらのドキュメントでよく利用される「図」にフォーカスし、 みるみるうちに図を作成できる「blockdiag」をご紹介します。 「blockdiag」はシンプルなテキスト記述からブロック図、ネットワーク図などの 画像ファイルを出力可能なオープンソースの画像生成ツールです。書き やすさ、メンテナンスしやすさを中心にデザインされており、図を作るのに 配置や並べ替えに苦労する必要はありません。 blockdiagのサンプルはこちら このような特徴を持つ「blockdiag」と、シンプルな記述でドキュメントを作成 するツール「Sphinx」を組み合わせることによって
Amazon EMR 2.x and 3.x AMI versions - Amazon EMR
AWS is updating the TLS configuration for all AWS API endpoints to a minimum version of TLS 1.2. Amazon EMR releases 3.10 and lower only support TLS 1.0/1.1 connections. After December 4, 2023, you won't be able to create clusters with Amazon EMR 3.10 and lower. If you use Amazon EMR 3.10 or lower, we recommend that you immediately test and migrate your workloads to the latest Amazon EMR release.
Amazon EMR 2.x and 3.x AMI versions - Amazon EMR
AWS is updating the TLS configuration for all AWS API endpoints to a minimum version of TLS 1.2. Amazon EMR releases 3.10 and lower only support TLS 1.0/1.1 connections. After December 4, 2023, you won't be able to create clusters with Amazon EMR 3.10 and lower. If you use Amazon EMR 3.10 or lower, we recommend that you immediately test and migrate your workloads to the latest Amazon EMR release.
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
The “in-mapper combining” design pattern for Map/Reduce programming in Java
[FLUME-1015] S3 sink on flumeNG - ASF JIRA
Photoshop VIP ☞ Photoshopマジック、すごすぎる写真加工、レタッチ術チュートリアル20個まとめ
simplereach/node-flume · GitHub
ApacheがGoogleのリアルタイムビッグデータツールDremelのオープンソースクローンDrillを （TechCrunch Japan） - Yahoo!ニュース
ApacheがGoogleのリアルタイムビッグデータツールDremelのオープンソースクローンDrillを
ビッグデータガバナンスとメタデータ管理を成功させるためのTalendの5本の柱 - Talend Real-Time Open Source Data Integration Software
