第1回 Amazon Elastic MapReduceを使う準備をする | gihyo.jp
Amazon Elastic MapReduceとは 昨今、バッチ処理にHadoopを活用する事例が話題になっています。その中でも特筆すべきなのは、分散処理技術であるMapReduceです。しかし、MapReduceを実際に使うには、数台から数100台のサーバを用意し、Hadoopのセットアップもしなければなりません。そのようなサーバ構築・管理、セットアップの手間を無くし、すぐ使えるのがAmazon Web Service（AWS）のElastic MapReduce（EMR）です。 図1 Amazon Elastic MapReduce AWS、MapReduceの説明は多くの書籍、ブログなどを参照してください。また、EMRを使用するには、まずAWSのアカウントを作っておく必要がありますが、その手順も割愛させていただきます。本連載ではEMRの使い方、気をつけなければいけない点などを重点的
s3cmdを使う。 - 設計と実装の狭間で。
s3cmd Ubuntu 10.04.2 でs3cmdを使うます。10.10じゃない理由は、AWSのUbuntuが10.04だからです。 sudo apt-get -y install s3cmd s3cmdな理由は、id:shot6がs3fsを使っていたからです。 Access KeyとSecret Keyをゲトしておきます。そうしておいて、 s3cmd --configure 新しいバケットを作ります。 s3cmd mb s3://mybacket バケットにファイルを送ります。 touch test.txt s3cmd put test.txt s3://mybacket バケットのファイルを上書きします。 s3cmd put test.txt s3://mybacket/test.txt バケットのファイル一覧を取ります。 s3cmd ls s3://mybacket バケットとロ
韓国 「教科書に竹島って書いてあるから募金するのやめるわ」
1：名無しさん＠涙目です(チベット自治区)：2011/03/31(木) 13:04:01.06 ID:88E77wVt0● 日本の「教科書問題」発覚後、被災地向け募金が減少傾向―韓国 韓国ではこのほど、日本が公表した2010年度の教科書検定に合格した教科書のうち、 中学生が来春から使用する地理、公民の教科書に、竹島を日本固有の領土だとする記載があったことで、 日本への反発を強めている。 韓国における「教科書問題」への反発は、東北関東大震災の被災地に向けた募金活動にも影響を及ぼしている。中国では環球網が報じた。 韓国聨合ニュースによると、韓国で慈善活動を展開し、東北関東大震災の被災地向けの 募金活動にも取り組んでいる「世界宣明会」（Ｗｏｒｌｄ Ｖｉｓｉｏｎ）は、28日までに義援金総額、 約19億5000万ウォン（約1億4700万円）を集めたが、15－21日までの義援金総額が約16．3億ウォン
システムエンジニア日記 - 新説オブジェクト思考
トップページ 2011年1月11日 新説オブジェクト思考 いろいろなブログでオブジェクト指向技術について解説しているが、なかなかわかりいやすい説明って難しいみたいですね。犬や猫のたとえが悪いといいながら、ピンとこない用語が羅列していて、やっぱりわかりにくい解説が多いです。私 はSEですからソフトウェアの専門家とは言えませんが、私なりに理解しているオブジェクト指向について解説してみましょう。 [直球勝負のオブジェクト指向] もう何かの例えとか、哲学的な前置きなんてしません。 ● クラスは単にプログラム全体のサブプログラムと考えればよい ● クラスはメンバー変数とメンバー関数（メソッド）により構成される。メンバー変数はクラス内に限定されたスコープでのグローバル変数である ● メンバー変数やメンバー関数をパブリック宣言することにより、他のクラスからメンバー変数に値の受け渡しができたり、メンバー関
Google Experimental Search
Google is always experimenting with new features aimed at improving the search experience. Take one for a spin and let us know what you think. Join an experiment and you'll see that feature whenever you do a Google search. Your selected experiment: You have joined the experiment. Your current experiment is no longer available. Try out a different one below. Note that you can only join ONE experi
TechCrunch | Startup and Technology News
Live Nation says its Ticketmaster subsidiary was hacked. A hacker claims to be selling 560 million customer records. An autonomous pod. A solid-state battery-powered sports car. An electric pickup truck. A convertible grand tourer EV with up to 600 miles of range. A “fully connected mobility device” for young urban innovators to be built by Foxconn and priced under $30,000. The next Popemobile. Ov
ロシア・チェルノブイリ原発事故 １９８６年
事故当時、爆発した4号炉は操業休止中であり、原子炉が止まった際に備えた実験を行っていた。この実験中に制御不能に陥り、炉心が融解、爆発したとされる。爆発により、原子炉内の放射性物質[1]が大気中に大量に（推定10t前後）放出された。これは、広島に投下された原子爆弾（リトルボーイ）による放出量の500倍とも言われている。
東京電力に責任があることを無視していたのは誰だ？ - シートン俗物記
こんなエントリーが出ているのに気付いた。 東京電力に責任があることになったら笑う人は誰だ？ - 常夏島日記 http://d.hatena.ne.jp/potato_gnocchi/20110327/p1 相変わらず、都会に住む人間、というヤツは、自分に見えない犠牲というものに冷淡なのだな、と愕然とする。 今回の震災で問題と思っているものに、原子力災害の他、交通が挙げられる。被災地での燃料不足は、車中での一酸化炭素中毒死を招く事態となっているが、結局のところ、田舎というものを自動車無しには生活が困難な状況にしてきた、という問題だ、と云えるだろう。震災を予想していた訳では無かったが、自動車を中心とした交通政策や交通インフラを構築する事は、とりわけ交通弱者へのしわ寄せを招き、結果、誰にとっても暮らしにくい地域になる、という事を説いてきた。この震災では、その状況があぶり出されたと云って良いんじゃ
ビッグデータにこれから起きること11の予想
ビッグデータの登場とその分析は、いまのIT業界の大きなトピックの1つです。Hadoopのような大規模分散ソフトウェアに注目が集まり、オラクルのExadataなどデータウェアハウス専用ハードウェアが次々に登場し、またIBMによるNetezzaの買収、EMCによるGreenplumの買収、ヒューレット・パッカードによるVerticaの買収などはすべて、ビッグデータをめぐる動きだといってよいでしょう。 11 Big-Data Analytics Predictions for 2011 -- TDWI - The Data Warehousing Institute そのビッグデータの分野で2011年になにが起きるのか？ Ingres CorporationのシニアバイスプレジデントKetan Karia氏がThe Data Warehouse Instituteに掲載された記事「11 Big-
石原都知事がTwitterで工作活動をしていたことが発覚して拡散祭りに
■編集元：ニュース速報板より「【証拠あり】石原都知事がTwitterで工作活動をしていたことが発覚して拡散祭りに」 1 名無しさん＠涙目です。(チベット自治区) :2011/03/30(水) 20:08:50.48 ID:+AMHiRkS0● ?2BP 名無しさん＠涙目です。(東京都) :2011/03/30(水) 20:11:28.34 ID:ihE0x2lb0 何これ恐い 31 名無しさん＠涙目です。(千葉県) :2011/03/30(水) 20:12:40.09 ID:++47tuX90 botだな 38 名無しさん＠涙目です。(catv?) :2011/03/30(水) 20:13:06.09 ID:pVBcjGH+0 これはひどい 86 名無しさん＠涙目です。(東京都) :2011/03/30(水) 20:16:36.24 ID:rC+4pyaT0 ネットの宣伝
こんなアイテムも好きかも？を実装するためのレコメンドエンジンのオープンソースまとめ:phpspot開発日誌
こんなアイテムも好きかも？を実装するためのレコメンドエンジンのオープンソースまとめ 2011年03月30日- こんなアイテムも好きかも？を実装するためのレコメンドエンジンのオープンソースまとめ。 amazonや色々なCGMサイトが導入していますが、何かのアイテムを見ているとき、関連したアイテムを出してあげるという仕組みをまとめてみました。 協調フィルタリングともいいますが、CGM的なサイトなんかを作る際には覚えておくと利用者満足度やPV増に繋がりますね。 それでは以下にまとめます。 cicindela Perl+MySQL5で動作。WEB API 形式で呼ぶことが出来るため、PHP等の他の言語から呼び出すことも容易です。 vogoo PHPのソースからrequireして使うタイプのPHPライブラリ。MySQL利用。PHPソースから直接利用したい場合に使えます OpenSlopeOne こち
Apache CassandraとApache Hadoopを一体化した「Brisk」発表 | OSDN Magazine
「Apache Cassandra」の商用サービスを提供する米DataStaxは3月22日（米国時間）、Cassandraと「Apache Hadoop」を組み合わせたディストリビューション「Brisk」を発表した。1カ月半後のリリースに向け、ユーザー登録を開始している。 Apache CassandraとApache Hadoopはともに非営利団体Apache Software Foundation（ASF）のオープンソースプロジェクト。Apache Cassandraは元々は米Facebookで開発された技術。オープンソースの分散データベース管理システムで、大規模データ用の拡張性などを特徴とする。一方、Apache Hadoopは米Yahoo!がASFに寄贈した技術で、大規模データ用の分散コンピューティング用ソフトウェアとなる。 DataStaxが発表したBriskは、HadoopとH
石原慎太郎 「認知症ゼロ・寝たきりゼロ・孤独死ゼロのトリプル・ゼロ社会を「東京ルール」で実現します」
風のハルキゲニア @hkazano 孤独死ゼロはともかくあとのふたつは無理ですよね。都外へ移すとかでなければ。RT @chocolatechnica: 石原の「認知症ゼロ・寝たきりゼロ・孤独死ゼロのトリプルゼロ社会」が意味するところがマジでわからない。 2011-03-30 10:30:49
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Press Enter■
ジャーナリングで信頼性が向上した MongoDB 1.8