https://www.facebook.com/photo.php?v=10151697364230687&set=vb.9445547199&type=2&theater TwitterのAnalyticsインフラチームが、データ分析基盤の改善に取り組んできた事例を紹介しています。 1) 背景 4億tweet/日を発信 & 消費しているユーザのアクティビティを、Twitter社内の多くのチームがそれぞれの観点 & 様々な利用形態で分析データを必要とするため、量およびデータの依存関係が、相当大きく複雑なものになっている。Analyticsインフラは、1000ノードあるHadoopのクラスタをいくつかもつ規模。 ストレージフットプリント & I/Oを減らすだけでなく、他の方法でプロセススピードをあげることに取り組んでいる。 2) Parquet (「Hadoop用のカラムナストレージフォー
サービス終了のお知らせ NAVERまとめは2020年9月30日をもちましてサービス終了いたしました。 約11年間、NAVERまとめをご利用・ご愛顧いただき誠にありがとうございました。
現場で使えるソフトウェアテスト Java編を読んだので要点をまとめ。 Step1 テストとは ソフトウェア開発では、様々な問題が発生するが、そのなかでよくあるのが動かない、誤動作、パフォーマンス問題人が作る上でミスは起こるのでテストが必要 テストの流れ 品質目標を立てる テスト密度(目標、上限、下限値)、バク密度(目標、上限、下限値) テスト計画 ソフトウェアテストの全体計画作成 実施スケジュール、予算、体制、環境構築手順、必要ツール利用手順、成果物の様式、バージョン管理、設計書の準備 テスト作成 期待動作、パターンの洗い出し、テスト環境構築、テストデータの作成、テストケース作成、レビュー テスト実施 作成したテストケースの実行 テスト検証 結果の確認、テスト関係者以外の利害関係者との調整(設計書管理、仕様管理、修正管理)、テスト実施者の作業管理、テスト報告のとりまとめ、テスト全体報告、再
本シリーズは、WebブラウザをUIとして利用した業務システムやアプリケーション(以下、Webシステム、Webアプリケーション)のテストをテーマとして、Webブラウザを使ったテストを自動化するOSSのツール「Selenium2」を紹介します。業務システム開発の現場で適用してきたノウハウを元に、これまでSelenium2について知らなかった人から以前使った経験がある人まで、より実践的な「使える」内容を盛り込んでいきたいと思います。 本シリーズのスコープと対象読者 本シリーズはWebシステム・Webアプリケーションのテストの中でも「Webブラウザを操作して実施するテスト」をスコープにしています。開発工程としては、1モジュールとして単体テストに位置付けられる場合もあれば、複数のモジュールやシステムと連携して結合テストや総合テストに位置付けられる場合もあるでしょう。これらのテストのことを、本シリーズ
2013年 プログラマの為の数学勉強会 資料 第1回:イントロダクション 第2回:浮動小数点数・極限・微分 第3回:微分法の応用・多変数関数の微分法 第4回:微分法の応用(続き)・方程式の数値解法 第5回:微分方程式の数値解法・積分法 第6回:数値積分法・積分法の応用 第7回:行列・ベクトル・ガウス消去法 第8回:行列式・逆行列・連立一次方程式の直接解法 第9回:線型空間・線型写像・固有値固有ベクトル(その1) 第10回:線型変換・固有値固有ベクトル(その2)・内積空間 第11回:連立一次方程式の反復解法・二次形式・多変数関数の極値・重積分 第12回:確率論入門 第13回:情報量・エントロピー・重要な確率分布・大数の法則・中心極限定理 第14回:擬似乱数の生成法・推定 第15回:検定 第16回:検定の続き, 回帰分析 第17回:回帰分析の続き 第18回:ベイズ統計
おそらく世界でもっとも大規模にMySQLのクラスタを展開し、運用しているのがFacebookでしょう。複数のデータセンターにまたがり何千台ものMySQLサーバを運用するために、自動化の仕組みは欠かせません。 その自動化がどのような仕組みになっているのか。FacebookのデータベースエンジニアであるShlomo Priymak氏が、Under the hood: MySQL Pool Scanner (MPS)という記事をFacebookで公開しています。 かなり長い記事なので、ここではそのポイントをまとめて解説してみました。詳細はぜひ原文をあたってみてください。 MPSのおもな3つの機能 Facebookで稼働しているMySQLは、つねに1つのマスターとそこからレプリケーションされた複数のスレーブによるレプリカセットを構成しています。このレプリカセットの構造を維持し続けることで、可用性と
こんにちは、Hazama チームの萩原(@hagifoo)です。 ハードウェアは故障し、ソフトウェアにはバグがあり、運用ではミスがおきるもの。もちろん、障害が発生しないのが理想ですが人間が作ったものに完璧はありません。そこで、障害の前兆や発生を捉え、その詳細を運用チームに知らせるための監視システムが必要となります。cybozu.com でも以下のようにありとあらゆるものを監視するシステムを構築し日夜監視を行なっています。 今回は、そんな cybozu.com の監視(モニタリング)システムについてお話しします。 cybozu.com と障害 監視システムの設計 3つの監視 外形監視 症状監視・リソース監視 ログ監視 その他の監視 モニタリングフレームワーク 誰が監視者を監視するのか? まとめ cybozu.com と障害 まずは、監視対象である cybzou.com について説明します。
楽天株式会社が開催する恒例の技術カンファレンス、Rakuten Technology Conference 2013に参加しました。「電車で行ける海外カンファレンス」というような呼ばれ方もしているように全てのセッションや進行が英語で進められるというイベントです。イベントの中で印象に残った点をいくつかご紹介させて頂きます。 会場で撮影した写真アルバム(Facebook) #rakutentech Rakuten Technology Conference 2013 基調講演 "Aiming the Moving Target" https://www.youtube.com/watch?v=obiljftVy0g おなじみのまつもとゆきひろさんによる基調講演。この基調講演はもともと、予定されていたものですが諸事情により時間に余裕ができた形で実施されました。内容はRubyのエピソードもところ
概要 Yak Shaving (ヤクの毛刈り) とは「ある問題を解決しようとすると別の問題が発生し、それを解決しようとするとさらに別の問題が発生し…」ということが延々と続くことで使われます。システムの構築・運用を行う上でも、このYak Shavingが多々見受けられます。 イノベーションが求められるこの時代に、Yak Shavingに時間やコストや労力を使うことは無駄以外のなにものでもありません。今こそシステム基盤の構築・運用作業ゼロをPaaSで実現させましょう。 数あるPaaSベンダーの中でも、ひときわ商用に設計されたPaaS提供するEngine Yardが、IaaSを利用する場合と比較しながらPaaSを利用するメリットをご紹介します。 このセミナーでは、Engine Yard Cloudのデモもご覧いただきます。ハンズオンセミナーではないため、パソコンはお持ちいただかなくても構いません
-@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31 -@logout 1999/12/31
いつも、毎年のように発表し発売される芸能人のヌードには一体どれだけの価値があるのだろう。 正直な所、旬を過ぎて当たって砕けろというには、いささか遅すぎるのではないかと感じる。 まして、若く綺麗で瑞々しい裸体なんてのは、プレイボーイなどのアダルト誌でも充分に味わえるんじゃないか。 それに印刷物の価格が年々減少しているし、また発行部数も前年比から見ても全体的に衰退気味だ。 にも拘らず、毎年のように元清純派とかアイドルだった人がヌードに挑戦し、高額のギャラを貰えている状況も異常であるし、 ただでさえ衰退気味の書籍で、それも強気で発売する意義にも疑問を感じる。 一体、30歳超えてヌードに挑戦する女性タレントの皆さんは、自分にまだ需要があるのだと何故自信を持ってしまうのだろうか。 分からない。 そもそもそのような需要は若かりし頃に存分に発揮されるものなんじゃないか。 そして若かりし頃に我が物顔で猛威
会社で役員やってる。 といっても、全部で社員20人くらいの家族経営だけど。 そんなうちの会社には、ひとり、うちみたいなところに似合わんレベルの高学歴くんがいる。 この子が最初全然仕事頑張らなかった。 で、なんでかって聞いたら、「こんなインセンティブ制じゃ頑張る気にならん」ということらしかった。 うちでは基本給とは別に、まぁちょびっとだけ営業成績に応じてちょびっとだけインセンティブを付けてる。 社長の考えでは、まぁちょっとしたはげみになってくれれば、という考えでよかれと思って始めたのだが 高学歴くんは、このインセンティブが気に入らないと言う。 こんな仕組みだと、営業成績に関すること以外は頑張る気にならない、という。 じゃあ、どういうインセンティブなら頑張れるのかと聞いてみたら、 「お客さんのパフォーマンスの改善率とかもっと自分の目の前の仕事に直接関係があって手応えがあるものがいい。 もっとい
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く