インテック、Hadoopを使ったシステムの構築・運用サービスを開始
インテックは2011年2月9日、オープンソースソフトウエア（OSS）の分散バッチ処理ソフト「Hadoop」を使ったシステムの構築・運用サービスを開始すると発表した。同社のデータセンターでHadoopクラスターを運用し、顧客企業がHadoopで構築したシステムをサービスとして利用できるようにする。 今回発表したHadoopを使ったサービスは、同社のエンタープライズ向けクラウドサービス「EINS/SPS」の一つという位置付けである。Hadoopはバッチ処理を複数台のサーバーに分散させる仕組み。そのため大規模なPCサーバークラスターが必要となるが、顧客企業が大規模なクラスターを自社で運用するのは難しいと考え、システム構築だけでなく運用も含めたサービスを開始した。 ウルシステムズが同日OSS化した、Hadoopを使った基幹バッチ処理用ソフトウエアフレームワークである「Asakusa Framewo
Twitter opens MySQL migration tool » Linux Magazine
At last week's Hadoop Summit, Twitter Analytics Lead Kevin Weil announced that it would open source Crane, its data migration tool used to move MySQL data into Hadoop. Hadoop is used by Twitter to examine collected analytics as well as data crunching for live tools such as name search. Weil said that Twitter uses Scribe to log data into Hadoop and Crane to manage tabular data. Crane moves MySQL da
Hadoopで構築したストレージサービス、アイネットが2011年2月に開始
アイネットは2010年12月14日、企業向けのファイル共有・ストレージサービス「Cloudstor」を、2011年2月1日から提供開始すると発表した。パソコンのほかスマートフォンやタブレットPCなど、様々な機器から、ネット上に保存したファイルにアクセスできる。開発にはオープンソースの分散処理ソフト「Hadoop」を活用した。 Hadoopと安価なLinuxサーバーやストレージ機器を組み合わせて、Cloudstorのストレージ基盤システムを開発した。Cloudstorの料金は、1ユーザー当たり月額2400円（ストレージ容量は2Gバイト）から。追加料金を支払うことでストレージ容量を増やすことができ、100Gバイトの料金は約5000円になるという。 同社によれば、Cloudstorのストレージ基盤システム構築にかかった費用は、1Tバイト当たり約10万円。同社の田口勉 常務取締役は「国内の競合他社
Hadoop導入事例 in クックパッド
1. Hadoop is a framework for distributed processing of large datasets across clusters of computers. 2. Hadoop can be used to perform tasks like large-scale sorting and data analysis faster than with traditional databases like MySQL. 3. Example applications of Hadoop include processing web server logs, managing user profiles for a large website, and performing machine learning on massive datasets.R
News
The global leader in press release distribution and regulatory disclosure. Public relations and investor relations professionals rely on Business Wire for broad-based and targeted market reach.
グーグル発「Hadoop」、日本企業も利用へ
Hadoopは、グーグルが検索エンジン用に開発したバッチ処理システムを基に開発された、オープンソースソフトだ。グーグルが開発した分散ファイルシステム「Google File System（GFS）」を模した「Hadoop Distributed File System（HD FS）」と、データ処理機構「MapReduce」を模した「Hadoop MapReduce」で構成する。 米国では米VISAや米JPモルガン・チェースのような大手金融機関が、バッチ処理にHadoopを使用する。 そのHadoopがいよいよ、日本企業でも使われ始めた。例えば楽天は、ある商品に対するお薦め商品をリストアップする「レコメンド処理」にHadoopを使用する。NTTデータは、全国の渋滞情報をリアルタイムに可視化するシステムの構築にHadoopを採用した。三菱UFJインフォメーションテクノロジーもHadoopを使っ
Apache Hive
Apache Hive The Apache Hive ™ is a distributed, fault-tolerant data warehouse system that enables analytics at a massive scale and facilitates reading, writing, and managing petabytes of data residing in distributed storage using SQL. Github Mail Docker Community Apache Hive is a distributed, fault-tolerant data warehouse system that enables analytics at a massive scale. Hive Metastore(HMS) provid
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Talend Press - Talend tackles big data with Apache Hadoop
Hadoop＋Hive検証環境を構築してみる