Hadoop Conference Japanに参加しました #hcj2011 - nokunoの日記
というわけでHadoop Conference Japanに参加しました。Hadoop Conference Japan 2011会場は豊洲のNTTデータ本社で、初めて来たのですが駅前の広場が楽天のある品川シーサイドと全く同じでびっくりしました。 『Hadoop on クラウド / Amazon Elastic MapReduceの真価』（Amazon Web Services, Jeff Barr） Introduction AWS: 2002-Twitter: @jeffbarr What is Big Data Doesn't refer just to volume Big Data Tool EMR Overview Hadoop Hosting Framework Launch and monitor job flows: Web, CUI, REST Upload data
東京大学公開講座 | 東京大学
東京大学創設140周年記念事業の一環として行ってきました東京大学中央食堂の全面リニューアル工事が完成し、4月2日にいよいよオープンします。 これまでご支援いただきました関係の皆様に感謝申し上げます。また2017年12月末までに3万円以上のご寄付をいただいた方々の銘板も完成しておりますので、中央食堂にお越しいただき、ご覧いただければ幸いです。 なお、中央食堂リニューアル事業へのご支援のお願いは、2018年9月まで継続しておりますので、引き続きよろしくお願いいたします。 ... 続きを読む 国際高等研究所 カブリ数物連携宇宙研究機構 准教授 John David Silverman（ジョン・デイビッド・シルバーマン） 科学をアートする心を大切に。 シルバーマン家の父は、材料科学や計算生物学などのさまざまな分野に貢献したIBMの理論物理学者だった。一方、自らクラリネットやピアノなども演奏する、音
日本の教育システムに関する今の私の考え - 発声練習
まとめ サービス産業が最大の雇用先 飯の種は、新しいサービスを始めるか、機械化が難しいことをサービスとするのかのどちらか。この基盤となるのは、知識と技術。 高校までに教えられることは、全サービス産業で共通の事柄だけ。高校と企業、高校と社会のギャップを埋める教育機関が必要 以下の4つの目的の教育機関が必要 高校と企業の間のギャップを埋める知識・技術を教育する機関 高校と社会の間のギャップを埋める知識・技術を教育する機関 高校までに学び損ねた知識・技術を教育する機関 科学や技術自体の発展を主たる目的とする学術機関 高校と社会のギャップを埋めること、高校までに学び損ねたことを再教育することが良い社会の維持にとって必要不可欠。でも、今の高等教育の主題は高校と企業のギャップを埋めることと科学や技術自体の発展させることの二つのみ。 はじめに この週末に社会における大学の位置づけに関するエントリーをいく
PR：「かわいさへの理解が重要」――月間60億PVをさばき切るエンジニアの日常
DECOLOGは、10代～20代の女性がメインユーザーのブログサービスだ。その規模は月間60億PV、モバイルブログサービスの中でも最大規模を誇る。エンジニアは、ユーザーが求める「かわいさ」と「莫大なトラフィックをいかに効率的にさばくか」を考えて、日々仕事をこなしている。 ミツバチワークスが運営するモバイルブログサービス「DECOLOG」は、10代後半から20代前半の女性を主な対象ユーザーとするユニークなサービスだ。 「月間60億PV」と、日本のモバイルブログサイトの中でも最大の規模を持つ。1日2億PVの膨大なトラフィックを約450台のサーバでさばく。その開発・運用を担当するエンジニアに、どのような日常を送っているのかを聞いた。
AWKのススメ - クックパッド開発者ブログ
はじめまして。インフラチームの菅原といいます。 今年の7月に入社してから、コンソールとにらめっこする毎日を過ごしています。クックパッドのようにアクセスの多いサイトのサーバを扱うことが今まで無かったので、いろいろと勉強になることが多いです。 さて、インフラチームではサーバの状況をモニタリングして、サーバに問題がないかを常に把握するようにしています。そのため日常的にtailでログを追いかけているのですが、そんなときはAWKが非常に便利なことに気付き、最近はかなりAWKにハマっています。 今回は絶賛マイブーム中のAWKの活用例をご紹介したいと思います。 なぜAWKなのか？ 残念ながらAWKの知名度はあまり高くないようで、社内でも「なぜRubyでやらないのか？」と聞かれることがありました。僕も入社するまではcutの代わりぐらいにしか使っていなかったのですが、あるときログ出力の整形に使って以来、AW
node.js+socket.ioを使ったライブコーディングwebアプリを作ってる - すぎゃーんメモ
かれこれ2ヶ月くらい、ちまちまと作り続けていたのがようやく動くようになったかなーという状態になったので公開してみる。 http://www1216u.sakura.ne.jp/livecoder/ 公開停止しました 手元のMacでChrome, Safari, Firefoxでは動いていた。IEは知らない。 ソースはGithubに。 https://github.com/sugyan/live-coder 使い方 Twitterでsignin。 /edit のエディタ上でテキストを編集すると、 /view/ でリアルタイムに編集が反映される(こちらはread only)。 同じユーザのページを見ているユーザ同士でのテキストチャットが可能。 構成 Server node.js v0.4.1 ライブラリはnpmにて socket.io, express, ejs, oauth, configを
生活メモ: アメリカ上陸と今後の豊富
ついにやって来ましたアメリカ合衆国。仕事の出張で来たのだが、これから3ヶ月弱の間、この地で生活することになった。実はアメリカ本土は初めてである。アメリカ横断ウルトラクイズを見て育った世代なので、この地を踏めたということだけで、宝くじに当たったようなウキウキ気分である。この空気を吸いながら目をつぶると、あのゴキゲンなBGMが心に流れてくるわけですよ。遊びに来たわけじゃないので浮かれてばかりもいられないが、いろいろ楽しみだ。 現地についたら早速レンタカーを借りて、同僚に運転してもらって本社のキャンパスやアパートメントの下見をしてきた。今日はワシントンの誕生日で祝日らしく、ほとんど人がいなかった。それでもやたら広い敷地を徘徊していたら、警備員の人に呼び止められたけども、「新入社員です」と言ってバッジを見せたらニコッと笑って親指を立てつつ「come in」と言ってくれて何だか嬉しかった。調子に乗っ
なぬ...新発表が秒読みの｢MacBook Pro｣に驚きの新情報！ SSDとHDDのコンボドライブ仕様との噂も
なぬ...新発表が秒読みの｢MacBook Pro｣に驚きの新情報！ SSDとHDDのコンボドライブ仕様との噂も2011.02.22 12:30 超高速起動と大容量ドライブを両実現か！ いよいよ大刷新される｢MacBook Pro｣の発売に向けてファイナルカウントダウンがスタートしているのかもしれませんが、その気になるスペック回りの新情報が明らかになってきましたよ。ちょっと予想外の噂まで飛び出してきてますね... アップル関係者が情報源という今回の噂の中で特に驚きなのは、なんと新MacBook Proが基本的にSSDとHDDのコンボドライブ仕様になるという点です。高速起動を実現すべくMac OS X専用に8～16GBのSSDを用意しつつ、他のソフトウェアアプリケーションやデータ保存には大容量のHDDを備えるという構成がリークされていますよ。もちろんSSDのみのモデルも選択できるみたいですけ
YouTube - Introducing Word Lens
NEW: Word lens has now been integrated to the Google Translate app and is not available anymore as a standalone app. Download the Google Translate app: - Android: https://play.google.com/store/apps/details?id=com.google.android.apps.translate - iOS: https://itunes.apple.com/us/app/google-translate/id414706506?mt=8
18億レコードをエクセルで！？膨大なデータ分析に挑む｜【Tech総研】
2009年、藤村匠氏（32歳）はある特異なシミュレーションソフトを開発した。 何万パターンものシミュレーション条件を絶妙に、臨機応変に変更でき、膨大に蓄積された株価データから自動で分析、条件設定から結果判定までシームレスに実現する。それまで技術者が手作りのシミュレーション方法を使って一つ一つ分析し、何日もかかって結果を得ていたものが、すべて自動でかつ数時間で行えるようになった。 藤村氏はわずか2カ月余りでシミュレーションソフトの基本部分を開発。その後10カ月程度かけておよそ18億レコード（4万パターン）にも及ぶ膨大な株価のデータ分析に取り組んだ末、それまで世界中のどの研究機関でも実現しえなかった『市場転換点分析』ソフトを完成、リリースすることに成功した。 シミュレーションというと、プログラムが複雑で難しそうなイメージがあるが、意外にも一般的に使われる表計算ソフト「エクセル」を使って完成させ
はてなブログ | 無料ブログを作成しよう
うめぇヨーグルトソースでもいかがですか。個人差にもよりますが。もしよろしければ。 お久しぶりです。 最近うんめぇ〜と思ってるヨーグルトソースがあるので、書いていこうと思います。 ヨーグルトとハーブ類をもりもり使うので、そういうのが食べられない方にはうんめぇソースではないです。ごめんなさい…。もしよろしければお茶だけも…旦~ 【用意する…
東大生タレントが「彼氏のためにチョコ作るの面倒くさくて祖母に作らせた」と暴露し大炎上 – ロケットニュース24（β）
2011年2月22日 つい先日、立教大の男子学生が失言をして大炎上したばかりだが、またもやTwitterでの発言が大炎上をおこし、物議をかもしている。東大生タレントの岡本麻希（おかもとまき）さんが、かつて彼氏にプレゼントするチョコレートを作るのが面倒くさく、祖母にチョコレートを作らせて彼氏に渡していた事が判明した。それ...つい先日、立教大の男子学生が失言をして大炎上したばかりだが、またもやTwitterでの発言が大炎上をおこし、物議をかもしている。 東大生タレントの岡本麻希（おかもとまき）さんが、かつて彼氏にプレゼントするチョコレートを作るのが面倒くさく、祖母にチョコレートを作らせて彼氏に渡していた事が判明した。それが原因なのかどうかは不明だが、そのあと彼氏はインフルエンザにかかってしまったという。 これは岡本さんがインターネットコミュニケーションサービスTwitterで暴露したために判
これはひどい！中国のスーパーで売る『卵』がおせち並に酷い | 秒刊SUNDAY
見本と全く異なり、詐欺としか言いようのない『おせち』が届いたことで問題になった事件は記憶に新しいのだが、中国のスーパーに売られている卵の詐欺レベルも日本のおせち問題に匹敵するレベル。一見何ら変哲もない卵なのだが、蓋を開けてみると、これはヒドイ！なんと中から驚くべき卵がでてきたのだ 蓋をあける前 蓋をあける前の状態がこちら。 立派な卵が沢山並んでおります。 誰しもそう感じるはず。だがふたを開けてみると 蓋をあけると・・・ なんということだ、真ん中にとてつもなく小さな卵が置かれている。 きっと成熟しきっていない出来そこないの卵を、 蓋のシールで見えないことをいいことにコッソリ仕込んだに違いない。 日本のおせち問題に相通ずるものがある。 しかしこの消費者、怒りが収まらなかったのか、ネタとして もう少し面白くしたいのか、こんな比較対象までつくってしまった。 拡大比較 ウズラの卵と拡大比較を行ってい
ハチヨン限定イベント「HERSEEEY’Z」が盛大に開催されました / ハチヨンイズム
ハチヨン限定イベント「HERSEEEY’Z」開催！ オーディエンス、アーティスト、オーガナイザーその全てを繋ぐキーワード、 ”ハチヨン” そんなハチヨンのハチヨンによるハチヨンのためのイベント、 「HERSEEEY’Z」が、先日2月15日に、渋谷で開催されました！ HERSEEEY’Z公式サイト 当日の様子を、大量の写真と併せて、レポートしたいと思います。 また、イベントの詳細などは、 ハチヨン世代による盛大な遊び場「HERSEEEY’Z」を開催します！ をご覧ください。 いよいよ始まる！ 会場は渋谷のamate-raxi （アマテラグジイ） イベント会場のキャパも、200〜300人入るであろうクラブで、 始まる前は、いったいどれだけの人（ハチヨン）が来るのか、準備をしつつ、今か今かと楽しみにしていました。 DJブースなどの準備もばっちり！ 運営スタッフは、スタッフを準備してばちっとキメま
連鎖するハッキングとしての歴史 - アンカテ
本当に「"つぶやき"では革命は起こせない」のか？ - Future Insight ここで、id:gamellaさんは、マルコム・グラッドウェルの「"つぶやき"では革命は起こせない」という記事を紹介して、最後に軽く異議をとなえている。 これは、社会を見る二つの見方を象徴していると思う。それは、「抽象化」と「ハッキング」だ。 グラッドウェルは、FacebookやTwitterの細かい所にこだわらないで、「弱い絆」という概念で抽象化して、それを論じている。具体的な個別のサイトを直接論じるのではなく、ソーシャルメディア一般の機能として抽象化して考えることで、その限界を明らかにしている。 社会というのは複雑な現象だから、「抽象化」は大きな武器だ。 しかし、おもしろいのはここからで、「弱い絆」には「弱い絆」に非常に適した形の活用方法が多数存在する。例えば、骨髄移植の適格者が現れなかった場合、「○○を
就職浪人してから10年が経った - nagaimichikoの日記
本当は2001年3月に卒業するはずだった。 1999年の秋頃から少しずつ就職活動を始めて、 何社くらいエントリーしただろう。 ちょうどインターネットで説明会を予約したり、エントリーシートを提出するのが始まった頃で、説明会なんてすぐ枠が埋まっちゃうからとりあえず興味ないとこでも手当たりしだい受けた。 履歴書はやっぱり手書きだった。 何がしたいのかと聞かれても、それまでは何となく大学院に進むつもりで、 でもとりあえず就職活動もして、 4年生になったら大学院の授業も取れるから聴講してみて、 なんとかく大学院に進んでもできる範囲のことが見えてしまって、 じゃあ就職しかないかな、ってそんな感じ。 何がしたいって聞かれても、 そんな未来のことなんてよくわからないし、 そもそも会社に入ったら何をさせてもらえるのか、どんな仕事があるのか、 それすらもなんだかよく分からないままだった。 多分クリックして応募
薄さ7.7mm世界最薄のスマートフォンが、もうすぐ日本から出ますよ～！
薄さ7.7mm世界最薄のスマートフォンが、もうすぐ日本から出ますよ～！2011.02.22 10:30 ブッチギリの超薄！ 薄さ7.7mmのスマートフォンがもうすぐ出るそうですよ。キャリアはNTTドコモ、メーカーはNECカシオモバイル、製品名はMEDIAS N-04C。 リークされた情報を元にスペックをまとめると... 大きさ： 127mm × 62mm × 7.7mm（最厚部 8.7mm？） 重さ： 約105g OS： Android 2.2（Froyo） 液晶： 4インチ フルワイドVGA（854×480） カメラ： 510万画素、720p HD動画対応 通信機能： Wi-Fi 802.11 b/g/n、Bluetooth 2.1 EDR その他： おサイフケータイ、赤外線通信、ワンセグ、ATOKプリインストール、Flash Player 10.1対応 正式発表前なので、どこまで正しい
〜基本的なポリシーを公開〜 スポーツ選手がソーシャルメディアを活用する際に意識すべきこと【後編】：SS the WORLD：オルタナティブ・ブログ
スポーツ選手がソーシャルメディアを活用する際に意識すべきこと【後編】 まず「スポーツ選手がソーシャルメディアを活用する際に意識すべきこと【前編】」を簡単におさらいします。 ソーシャルメディアを活用するスポーツ選手やチームが増えてきていますが、 これに伴い、ソーシャルメディア上で様々な事件が起きているという現状があります。 例えば、サッカー・イングランドプレミアリーグのバベル選手の炎上事例や、 アメリカのNFLでのハーフタイムでの戦術暴露事件などがありました。 これらの事件の発生を防ぐ為に、NFLでは、リーグ単位で選手やコーチなど 関係者のソーシャルメディア活用のポリシーを策定しています。 前編では、上記を踏まえて、リーグとしてポリシーを策定していなくても、スポーツ選手はしっかりと自身のポリシーを持つ必要性があるのではないか？という示唆をしました。 今回はそれではどういったポリシーを持つべき
スポーツ選手がソーシャルメディアを使う際に意識すべきこと【前編】：SS the WORLD：オルタナティブ・ブログ
スポーツ選手がソーシャルメディアを使う際に意識すべきこと【前編】 みなさん、こんばんわ。 Looops北野です。 前回のJリーグのソーシャルメディア活用の記事は、みなさんからとても好評を頂きまして、本当にこのような取り組みをして、嬉しいと感じています。ありがとうございます。 さて、今年初投稿です。 今回は前編、後編2回に分けて、スポーツ選手がソーシャルメディアを活用する上で意識すべきことに関しての記事を書きたいと思います。 日本でスポーツ選手のソーシャルメディアアカウントで注目しているのは、なんといってもプロ野球のダルビッシュ有選手ですね。 【ダルビッシュ有選手・Twitterアカウント（@faridyu）】 • 2,266ツイート • 65フォロー • 203,888フォロワー • 10,269リスト と、日本スポーツ界では最も知られているアカウントの一つでしょう
S4だけど意外に重要なバグ
性能関係情報（特にベンチマーク結果に影響がありそうなもの）です。 以前から、ベンチマーク中のInnoDBのIOに多少の違和感（引っかかり？）を感じていたのですが、そんなに影響も大きくないので私は放っていたのですが（優先順位の問題です^^;）、多分 FaceBook の Mark Callaghan が発見したこれが原因かも知れません。流石 Mark Callaghan。 Auto-extension of InnoDB files (blocks the other IO) とりあえずそこに修正案を投稿しておきました。(fix_suggestion_56433.patch) これで、InnoDB の IO はよりスムーズになるはずです。file_per_table が有効でINSERTが多い場合は結構影響が大きかったはず。
フェイスブックって古くない？ 次々と誕生する新種ソーシャルメディア：日経ビジネスオンライン
「フェイスブック元年」 日本ではそう言われているらしいが、こちらニューヨークでは、もう完全な「インフラ」になってしまった。 初対面の人と会って、「また連絡を取りたい！」と思ったら、メールアドレスを聞くのではなくて、まずフェイスブックにアカウントがあるのか確認する。 マンハッタンの地下鉄や、スタンドで売っている雑誌の企業広告でも、企業が記載しているのは、もう自社のウェブサイトではなく、フェイスブックのファンページだ。 フェイスブック追撃の新メディア続々 最近では送受信するメールの数がめっきり減ってしまった。逆に、フェイスブックのメッセージは増え続けている。人を集めてパーティー！と思ったら、マスメール送信なんてやらない。フェイスブックでシェアした方が、よっぽど効果的に人が動員できる。 ニューヨーカーは「インフラ化」したフェイスブックが当たり前の存在となって、飽きてきている。 「次に面白いものは
マジっ？夕張市長に羽柴秀吉当確 職員まっ青「覚悟できた…」 - 速報：@niftyニュース
全国唯一の財政再建団体、北海道夕張市のトップを選ぶ市長選（４月２４日投開票）で、驚くべきドラマが進行しつつある。全国各地の選挙に出馬してきた青森県の実業家、羽柴秀吉氏（６１）＝本名・三上誠三＝が、何と「最有力候補」と目されているというのだ。北の大地で、統一地方選屈指の“仰天合戦”が繰り広げられている。 「お前は戦国武将・豊臣秀吉の生まれ変わりだ」と親しい住職に言われて以来、現在の名前を名乗っている羽柴氏。建設業や観光業など数十社を束ねる羽柴グループの総帥で、資産は数百億円ともいわれる。 これまで、大阪府知事選や衆院選など通算１４回の選挙に出馬するなど「戦（＝選挙）好き」で知られるが、４年前の夕張市長選では、当選した藤倉肇市長にわずか３４２票差まで迫った。 今回の市長選、羽柴氏は、天然ガス開発や砂金採掘に加え、炭鉱で栄えた夕張ににぎわいを取り戻すためには「石炭の露天掘りしかない」などと
Node.jsについてのよくある誤解 - 自分の感受性くらい
Node.jsは普及しそうに無い: ニュースの社会科学的な裏側 http://anlyznews.blogspot.com/2011/02/nodejs.html という記事があったので、もしかしたらいい感じにNode.jsについてのよくある誤解がここに網羅されてるんじゃないかと思ってエントリを書きます。決して顔真っ赤にして反論してるわけじゃないよ！ で、まず 理由は簡単で、Googleがリリースしたアプリケーション・サーバーであるnode.jsが、JavaScriptとその実行エンジンを基本とした構成となっており、その性能が高いからだ。 とありますが、Node.jsはGoogle製ではありません。Node.jsがベースとしているJavaScriptのV8エンジンはGoogle製（のオープンソース）ですが、Node.js自身はJoyentという会社のサポートによって作られています。メインコ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
HugeDomains.com
MetaMoJiの「7notes」を試す
gist: 838334 - アクセスログをtailしてstatus codeが500だったら赤色にするawk- GitHub
http://via.pulsene.ws/121N6
「不況下の結婚観」―結婚で「死にたい」が「楽しい」に変わった男の告白 | 非モテタイムズ @himotetimez
大規模分散システムにおけるストレージの集約