AIとAWSで現世から離れる試み-仕事がちょっと大変な時もあったりするから�俺のかわりにAIにシステム作ってもらえるシステム作った話.pptxJun Suzuki
![hbstudy25 劇的ビフォーアフター](https://cdn-ak-scissors.b.st-hatena.com/image/square/50e8c99b949c975fc59b4fa3739d3490f9904b67/height=288;version=1;width=512/https%3A%2F%2Fcdn.slidesharecdn.com%2Fss_thumbnails%2Fhbstudy25-110723040644-phpapp02-thumbnail.jpg%3Fwidth%3D640%26height%3D640%26fit%3Dbounds)
Fusion-io, proudly part of SanDisk Discover SanDisk Data Center Solutions
はじめに 初めまして、(株)ミクシィの中野和貴です。私はシステム本部運用部インフラグループネットワークチームという部署で働いており、ほかのメンバーと共にmixiのネットワーク部分全般に関して設計・保守・運用を行っています。ここでは『WEB+DB Press』Vol.50~55にて連載されていた「大規模Webサービスの裏側」で紹介しきれなかったエピソードや、その後のインフラ事情を紹介していきます。 日々大量のトラフィックが流れるmixiのネットワークですが、大きくなってくるとやはりいろいろな問題も出てきます。今回はそれらの問題の中で普段運用しているとなかなか気付きにくいバーストトラフィックに起因する問題事例を紹介します。 ミクシィのネットワーク構成と問題の発覚 mixiでは主要なネットワーク機材にはお金をかけていますが、サービス規模からどうしてもラック数が多くなってしまうため、エッジスイッ
April 21, 201123:55 カテゴリ組織とyou 社会人の常識!正しい退職届の書き方 転職が決まったので退職届けを出しました。 ↑これに署名捺印したものを出したのだけど、誰も書き直せとも言ってこないので、どうやら無事受理された模様。 ■ というわけで、すでに何度か退職イベントをクリアして経験値を積んだ僕による、正しい退職届の書き方講座をお送りします。人間一度は必ず転職するのですから、知っておいて損はないと思います。 1.「一身上の都合」とかの定型文から脱却しよう 理由を書くんならはっきり書く、書かないなら書かない。「一身上の都合」などと何やら含みのあるような事言われても後味悪いですし、お前が辞めてからプライベートで家業を継ごうが、東南アジアに自分探しの旅に出ようが、会社の知ったことではありません。円満退社なら「じゃ俺次行くわ!」だけで十分です。いっぽう円満退社でない場合には「一
先進国の中で乳児死亡率がもっとも高い国は米国だ。生まれてから1カ月以内に乳児が死亡する確率は、日本の3倍。新生児集中治療室と専門家の数が、世界で最も充実している国であるにもかかわらずだ。 その米国で、帝王切開で子供が生まれる率が史上最高となった。全体の32%、つまり3人に1人は帝王切開で出産していることになる。今や、全国の病院で行われる手術のトップは帝王切開となった。 産婦人科の医師らによると、これは異常な数字だという。WHO(世界保健機関)は、米国の医療水準だと、全出産の15%ほどというのが妥当だという。 なぜ米国では毎年帝王切開の率が高くなっているのであろうか。 自然分娩を知らない国民 ここ数年、女優や歌手などの著名人や、都市部、特にマンハッタンやロサンゼルスなどに住む女性はこぞって「セレブ出産(Designer Birth)」を選ぶのがステータスとなってきた。 日にちを決め、その日に
2010/12/21 (2013/11/7更新 編集部注:小俣泰明氏はクルーズ株式会社を退職済み) 軽い茶髪にモヘアのカーディガン。腰よりも低く首から長く垂れ下がった柄物のストール。取材相手の男性は、デルのラップトップを片手に「ゆらり」と静かに会議室に現れた。 独特のスタイルに面食らう。 モバイル系ベンチャー企業とはいえ「取締役 技術統括担当執行役員」の肩書きから想像できないスタイル。小俣泰明さんの存在感は強烈だった。 驚くことに、小俣さんは、もともとは大手ICT企業のNTTコミュニケーションズに勤務していたこともあるという。MCSE(Microsoft Certified System Engineer)の肩書きまで持つエンタープライズ系のエンジニアだった。一緒に取材に応えてくれた技術統括部の池田朋大さんも、伊藤忠テクノソリューションズ(CTC)に在籍していたサーバ運用技術者だったという
普段、視点や環境を変えなければまったく気づかないこともあります。 しかも、その日常に慣れきっていればいるほど、そこに驚きがあるなどとは誰も予想もしていません。 もう何百回も繰り返している、そんな日常の作業の中で、予想もしない感動に出会う。 今日、Facebookを使って日々の業務をこなそうとしていたところ、そんな出来事に遭遇しましたので、皆様と共有させていただきたいと思います。 大げさですみません、しかし、個人的には少し感動しすぎてしまったものですから。。。 事の発端は、こんな事から始まりました。 実は、出張先の韓国のソウルよりSeesmic Desktop Proというアプリケーションで、Facebookアカウントの認証を行おうとしたら、こんなエラーメッセージが表示されたのです。 ここまでは、セキュリティ対策としてはよくあるパターンですので特に何とも思いません。 普段アクセスしているIP
Twitterの大規模システム運用技術、あるいはクジラの腹の中(後編)~Twitterのサブシステム「Unicorn」「Kestrel」「Flock DB」 米サンタクララで行われていたWebサイトのパフォーマンスと運用に関するオライリーのイベント「Velocity 2010」の、Twitterのシステム運用について説明するセッション「In the Belly of the Whale: Operations at Twitter」(クジラの腹の中:Twitterでの運用)を紹介をしています。 この記事は「「Twitterの大規模システム運用技術、あるいはクジラの腹の中(前編)~ログの科学的な分析と、Twitterの「ダークモード」」の続きです。 Twitterのサブシステム「loony」「Murder」「memcached」 ここからはTwitterのサブシステムについて紹介しよう。 T
Twitterの大規模システム運用技術、あるいはクジラの腹の中(前編)~ログの科学的な分析と、Twitterの「ダークモード」 先週の6月22日から、米サンタクララで行われていたWebサイトのパフォーマンスと運用に関するオライリーのイベント「Velocity 2010」が開催されていました。 その中で、TwitterのJohn Adams氏がTwitterのシステム運用について説明するセッション「In the Belly of the Whale: Operations at Twitter」(クジラの腹の中:Twitterでの運用)が行われています。Twitterのような大規模かつリアルタイムなWebサイトの運用とはどういうものなのでしょうか? 公開されているセッションの内容を基に概要を記事で紹介しましょう。システム管理者の新たな役割、Railsの性能の評価、Bittorrentを使った
営業「こちらが今年リリースした弊社の新製品です」 顧客「これってクラウドに対応しているのか?」 営業「クラウドに対応って具体的にどういう機能ですか?」 顧客「それはよくわからないのだけどね」 営業「......」 まるで笑い話のようだが、私は少なからず驚きと落胆を同時に感じた。 クラウドコンピューティングという単語は2006年11月16日、英The Economist誌の特別号The World in 2007の「Don't bet against the internet」という記事の中で米Google社のEric Schmidt氏によって初めて使われた。その後2007年には北米を中心としてクラウドコンピューティング議論が活発化し、ついで2008年初頭から日本もその潮流の渦の中に巻き込まれていくのである。 筆者がクラウドコンピューティング関連に関わり始めたのは2008年の中
ヤフーが日本独自の検索関連サービスの開発で、オープンソースの分散処理ソフトである「Hadoop」の活用を進めている。Hadoopを使うことで、従来は6時間以上かかった処理がわずか5分半で済むようになった例もある。2009年秋には組織を整備し、適用範囲を全社に広げている。 Hadoopは、米グーグルが開発した分散処理ソフト「Google File System(GFS)」と「MapReduce」を模したオープンソースソフトである(図)。GFSとMapReduceは、グーグルのクラウドを支える基盤技術。Hadoopを使うと、複数台の安価なPCサーバーを連携させ、数十テラ~数ペタバイトに及ぶデ ータを高速に処理できる。 Hadoopを日本国内で最も積極的に利用している企業はヤフーだ。2008年ごろから部署単位でHadoopの導入を進め、Hadoopを使う事例が10件を超えるようになった(表)。
Facebookが大規模スケーラビリティへの挑戦で学んだこと(後編)~キャッシュが抱えるスケーラビリティの問題とデータセンターにまたがる一貫性 全世界で3億人を超える会員を抱え、世界最大のSNSとなったFacebook。同社の技術担当バイスプレジデント Jeff Rothschild氏が、10月8日に米カリフォルニア大学サンディエゴ校で行ったセミナー「High Performance at Massive Scale-Lessons learned at Facebook」の内容を再構成して紹介します。 (この記事は「Facebookが大規模なスケーラビリティへの挑戦で学んだこと(前編)~800億枚の写真データとPHPのスケーラビリティ問題」の続きです) キャッシュがスケーラビリティに大きな役割を果たしている Facebookの主な役割は、ユーザーが簡単に(友人たちの)情報を集めることがで
携帯向けサイト「モバゲータウン」の勢いが止まらない。2010年3月の会員数は約1800万人、月間ページビュー(PV)600億という"モンスターSNS"に成長している。意外なことに、これだけのアクセスをさばくのに、memcachedをはじめとするKVS(Key-Value Store)系のインフラ・ソフトはあまり使っておらず、MySQLで十分だという。モバゲータウンのインフラ担当者に話を聞いた。 モバゲータウンを運営するDeNA(ディー・エヌ・エー)は、もともと1999年に開始したオークションサイト「ビッダーズ」で知られている。その後、オークションに加えてECサイトを開始し、auとの提携により「auショッピングモール」などで急速に成長した。 ビッダーズだけでも、数千万PV規模の大規模サービスだが、最近はモバゲータウンの成長が著しい。 「特に2009年9月から順次リリースした自社製のソーシャル
Facebookの事例を紹介した同社Vice President of TechnologyのJeff Rothschild氏 従来は、Webサーバから直接MySQLに対して接続し、読み書きを行なうことが一般的だった。大多数のWebアプリケーションでは読み取りの方が書き込みよりも圧倒的に多い(8:2かそれ以上)ので、読み取りはスレーブに、書き込みとリアルタイム性の求められる読み取りはマスターに対して行う構成になった(MySQLのレプリケーションは非同期)。 しかし、この構成には非効率な点がある。特に大きいのは、キャッシュを有効活用できていないという点だろう。同じユーザが更新しないで同じ結果セットを繰り返し取るようなことは頻繁に起こりうるので、SQL文をいちいち実行するようなことなく、即座に結果を返せるようなキャッシュ領域がほしいところである。MySQLではクエリキャッシュという仕組みがある
携帯電話向けポータル・サイト「モバゲータウン」などを提供するディー・エヌ・エー(DeNA)は2009年7月,全社の情報共有基盤となるグループウエア・システムを刷新,本格稼働させた。日本IBMの「Lotus Notes」とネオジャパンの「desknet's」を使ったシステムから,サイボウズが提供する「サイボウズ ガルーン 2」に移行し,グループ全体の1000ユーザーが利用する。 DeNAでは,2000年ごろからLotus Notesを導入し,社員名簿や業務処理依頼などの申請書の管理,簡単なワークフロー処理などに利用してきた。また2005年からは,社員間でスケジュールを共有するための仕組みとして,desknet'sを導入して活用してきた。今回,Lotus Notesとdesknet'sを,ガルーン 2に置き換える。システム刷新に当たっては,業務拡大に伴う人員増加に対応するため,全社ポータル機能
サイバーエージェントは7月11日,同社が提供しているブログ・サービス「Amebaブログ(アメブロ)」の新システムを稼働した。新システムは,アメブロの利用者同士でメッセージをやり取りするサービス「Amebaメッセージ」を提供するためのもの。 新システムの特徴は,オープンソースのRDBMS「MySQL」を使い,1サーバー当たり毎秒6000SQLを処理できるという高性能を確保したこと。MySQLが稼働するサーバーは,動作周波数3GHzのXeonプロセッサ2個と4GBのメモリーを搭載している。このサーバーを2台使い,サービスを提供する。 開発を担当した佐藤真人氏(同社CAネットワーク新規開発局エンジニアG システムアーキテクト)は「商用のRDBMSを同様のサーバー環境で動かしてもせいぜい毎秒1000~2000SQLの処理が限度。MySQLが持つ処理上の特徴を踏まえて,MySQLの使い方やアプリケー
「モバゲータウン」などのネットワーク基盤に Brocade(Foundry Networks)を採用 1200万名を超える会員に対して、安定的なサービスを提供 ネット事業を展開する企業にとって、サービスの信頼性・安定性確保は重要な課題。「モバ ゲータウン」「モバオク」「ビッダーズ」などのサービスを展開する株式会社ディー・エヌ・ エー(以下、DeNA)様でも、ユーザー数の急速な増加に伴ってネットワーク基盤の強化が 課題になりました。そこで同社が選んだのが、ネットワールドが提供するBrocade Communications Systems製品群( 導入当時はFoundry Networks)です。 「FastIron」「ServerIron」などのプロダクトを活用することで、サービスの信頼性・ 安定性向上を実現。また、将来に向けた拡張性も確保しています。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く