タグ

2018年7月24日のブックマーク (2件)

  • Apache Hadoop YARNとマルチテナントにおけるリソース管理

    Apache Hadoop YARNとマルチテナントにおけるリソース管理 1. Apache Hadoop YARNと マルチテナントにおけるリソース管理 2. 2 © Cloudera, Inc. All rights reserved. • YARN概要 • YARNアプリケーションの動作の仕組み • YARNにおけるリソース管理の基礎知識 • フェアスケジューラ • フェアスケジューラの設定の基 • キュー配置ポリシー • プリエンプション • ケーススタディ • tips 目次 3. © Cloudera, Inc. All rights reserved. YARN概要 4. 4 © Cloudera, Inc. All rights reserved. • YARN: Yet Another Resource Negotiator • Apache Hadoopエコシステムの

    Apache Hadoop YARNとマルチテナントにおけるリソース管理
    shiumachi
    shiumachi 2018/07/24
    強力な機能だけど複雑すぎて使いこなすのが難しい、YARNのスケジューラ機能についてのスライドを書きました
  • Community Blog - 『仕事ではじめる機械学習』&『前処理大全』著者対談(Part 4)

    4回にわたって続いてきた連載もいよいよ今回で最後。機械学習分野で問題になり始めている倫理について、またエンジニアとしてのスキルやキャリアについて、お二人の経験を踏まえた話をしていただいています。 これまでの対談はこちら:第1回、第2回、第3回 データの倫理、モデルの倫理 橋: 宣伝みたいなんですけれど、僕は一度事業側へいきたいという思いがあって、いまデジタル医療のスタートアップにいるという面もあります。 今やっていることのひとつが、治療用のアプリを作ることなんです。実際、欧米にはもうあるんですよ。薬剤に依存せず手軽に治療できることも良いのですが、さらにデジタル化することによってデータが蓄積できるようになり、そのデータに基づいてさらに改善できるという利点があります。あと、いま力を入れているのが臨床試験や治験のためのプラットフォーム作りですね。臨床試験とか治験ってわかりますかね?薬とかの効果

    shiumachi
    shiumachi 2018/07/24
    “「すごく精度がいいけど差別的な要素が入っているモデルと、そういった差別的な情報は入ってないけど精度がそれよりは劣るものがあったときにどっちを使うか?」…ethicsを考えた時には後者を選ぶ方がいいでしょ”