タグ

2010年1月27日のブックマーク (7件)

  • Hadoopを使いこなす(1)

    まず、 1 の入力ファイルを分割する方法は、InputFormatクラスの、getSplits関数を上書きすることで、カスタマイズできます。 また、 3 のInputSplitから、KeyとValueを抽出する処理も、InputFormatクラスを通じてカスタマイズできます。 InputFormatのgetRecordReader関数を通じて、RecordReaderクラスを生成するのですが、これに任意のRecordReaderクラスを指定すればOKです。 2 のMap処理ですが、ユーザが指定したMapperクラスの処理を実行します。 Mapperクラスは、MapRunnerクラスを通じて、初期化処理、map関数を繰り返す過程、終了処理といった一連の流れを実行します。 MapRunnerクラスをカスタマイズすれば、こうした流れを制御することができます。 0.20.0からの新しいMapRed

    Hadoopを使いこなす(1)
  • kumofsはなぜスケールするか - Blog by Sadayuki Furuhashi

    先日、分散Key-valueストア kumofs を公開しました。 多く方から反響とフィードバックをいただいています。ありがとうございます。 今回は、kumofs はなぜスケールするのか、なぜスケールすると言えるのかーということについて紹介したいと思います。 ところでスケーラビリティとは何か? スケーラビリティとは、利用者や仕事の増大に適応できる能力・度合い とされています(端的!)*1 。Scalability を日語にすると、拡張性 と訳されるようです。 ただ一口でスケーラビリティと言っても、様々な側面があります。ITシステムでは主には処理性能と運用に関することを指す場合が多いと思いますが*2、その中にも様々な側面があります。 なぜスケーラビリティが必要か スケーラビリティは システムなどが持つべき望ましい特性 であって、高いに越したことはありません。しかし、高いスケーラビリティはタ

    kumofsはなぜスケールするか - Blog by Sadayuki Furuhashi
    rx7
    rx7 2010/01/27
  • 「なんでこんなことやってんだろ」って思った時に考えて欲しいこと - GoTheDistance

    人間だもの、そんな時もありますよね。 僕は転職してから自分で自分のミッションを探さなくてはならないため、昔よりも「なんでこんなことやってんだろ」って思うことが増えました。そんな時に、感じたことをまとめておきます。 手馴れたものに安住していないか 僕が最初に感じたのがこれです。 転職して新しい職場に来れば、当然自分の持っている武器を活用して行こうと思うわけです。僕の場合は業務システムの構築に関する能力でしたが、いきなり社長に言われたのがFLASHを作ってくれ、でした。「ええええ、なんだそりゃあ」って喉元まで出かけましたが、「それが必要なんだから、できるところまでやれ」の一言でパシーン。そういうのが一番苦手なのにな・・・って思いました。 その話は立ち消えになったのもあり結局大した成果は出せませんでしたが、手馴れたものばっかりやっても仕方ないしココに来なければこんなことやる機会も無かったし、ま

    「なんでこんなことやってんだろ」って思った時に考えて欲しいこと - GoTheDistance
  • ニフティがクラウドサービス参入、本日開始! サーバ準備5分、国内だから低レイテンシ、SaaSの提供も

    ニフティは1月26日、自身のサービス基盤を活用したクラウドサービス「ニフティクラウド」の提供を27日15時から開始すると発表しました。 特徴は、国内のデータセンターを利用するため低レイテンシであること、サーバ準備は5分で行え、1時間単位で課金できるなどAmazon EC2のように迅速で柔軟なインスタンスの展開が可能なこと、管理のためにグラフィカルなオンラインダッシュボードが用意されていることなどです。 すでに国内のメディアでも報道されています。 ニフティがAmazon EC2風クラウドサービス開始へ - @IT ニフティがクラウドサービスを開始、1時間当たり12.6円から利用可能 - ニュース:ITpro 利用できるインスタンスの種類は、Mini、Small、Medium、Largeの4種類が選べ、OSもCentOS、RedHat LinuxWindows Server 2008の3種類

    ニフティがクラウドサービス参入、本日開始! サーバ準備5分、国内だから低レイテンシ、SaaSの提供も
  • Amazonクラウドに「キャパシティの限界を超えているのでは?」との疑い

    Amazonクラウドの性能低下を経験したユーザーが、Amazonクラウドはデータセンターのキャパシティを超えて利用者と契約しているのではないか? との疑いを投げかけています。 クラウドは一度使い始めると、現在のところ容易にほかへ乗り換えることはできません。そしてそのクラウドがトラブルに見舞われた場合、利用者自身が問題を解決できる余地はほとんどありません。以下で紹介するのは、実際のトラブルはどうあれ、そうしたクラウドに依存せざるを得ない利用者の立場を浮かび上がらせる話です。 インスタンス性能の低下からネットワークの遅延へ 発端は、Alan Williamson氏による1月12日付けのブログのエントリ「Has Amazon EC2 become over subscribed?」。3年前からAmazonクラウドを利用し続けてきたWilliamson氏は、「Amazonクラウドはまさに限界点を超

    Amazonクラウドに「キャパシティの限界を超えているのでは?」との疑い
  • ニフティがAmazon EC2風クラウドサービス開始へ - @IT

    2010/01/26 ニフティは1月26日、自社のサービス基盤を活用したクラウドサービス「ニフティクラウド」の提供を開始すると発表した。27日15時にサービスインする。仮想化を利用して、1CPU(1GHz相当)、512MBのメモリ、30GBのハードディスクといた構成の仮想サーバが1時間12.6円から利用できる。ストレージは100GB単位で追加できる。このほかデータ転送量が1GBあたり15.75円かかる。待機系サーバとしての需要に応えるため、サーバ停止状態で1時間当たり5.25円の料金も用意する。 利用できるOSはCentOS 5.2(32/64ビット)で、Red HatやWindows Server 2008R2も4月に提供予定。OSイメージを選択したり自前で用意して起動できる点で異なるが、約5分とオンデマンドでサーバを起動できて1時間単位の課金である点など、Amazon Web Serv

  • 特価blog919!! : Amazon.comから輸入した商品が届いたゾ!

    ふるさと納税】 ■ふるなび ■ふるさと舗 ■さとふる ■ふるラボ ■ふるプレ ■ANAふるさと納税JALふるさと納税 【旅】 ■じゃらん ┣全施設OKクーポン ┣全国各地クーポン ┣クーポンフェス ┣レンタカークーポン ┣じゃらんパッククーポン ┣宿クーポン ■るるぶトラベル ┣割引クーポン ┗県内旅行クーポン ■ゆこゆこ ┗自治体クーポン ■Yahoo!トラベル ┗割引クーポン ■一休.com ┣割引クーポン ┗タイムセール 【PC・家電】 ■エレコム ┣エレコムアウトレット ┣エレコム楽天アウトレット ┗エレコムわけありショップ ■ロジテックダイレクト ┗アウトレット ■レノボアウトレット ┣ノートPC ┣タブレット ┣デスクトップ ┗スマホ ■HP ┣アウトレット ┣旧製品セール ┣週末セール ┗HP楽天SALE ■HUAWEI ┗クーポン ■富士通 ┣ワケありPC ┣アウト

    rx7
    rx7 2010/01/27