タグ

prestoとserverに関するyassのブックマーク (2)

  • Hardware requirements for Presto

    Most people are running Trino (formerly PrestoSQL) on the Hadoop nodes they already have. At Facebook we typically run Presto on a few nodes within the Hadoop cluster to spread out the network load. Generally, I'd go with the industry standard ratios for a new cluster: 2 cores and 2-4 gig of memory for each disk, with 10 gigabit networking if you can afford it. After you have a few machines (4+),

    Hardware requirements for Presto
    yass
    yass 2014/01/24
    " At Facebook / We run our JVMs with a 16 gigabyte heap to leave most memory available for OS buffers / On the machines we run Presto we don't run MapReduce tasks / Most of the Presto machines we are on have 16 real cores and we use processor affinity to limit Presto to 12 cores "
  • 『Amebaのログ解析基盤にCloudera ImpalaとPrestoを導入しました』

    (この記事は、Hadoop Advent Calender 2013 の12日目の記事です) こんにちは、Amebaのログ解析基盤Patriotの運用をしている、鈴木(@brfrn169)と柿島大貴です。 Patriotについては以下をご覧ください。 http://ameblo.jp/principia-ca/entry-10635727790.html http://www.slideshare.net/cyberagent/cloudera-world-tokyo-2013 今回、Amebaのログ解析基盤PatriotにCloudera ImpalaとPrestoを導入しました。 Cloudera ImpalaとPrestoのインストール方法や詳細ついては、下記URLをご覧ください。 Cloudera Impala http://www.cloudera.com/content/clo

    『Amebaのログ解析基盤にCloudera ImpalaとPrestoを導入しました』
    yass
    yass 2013/12/13
    " CPU Xeon E5-2650L 0 @ 1.80GHz * 2 / ディスク SATA 3TB × 12本(JBOD), SAS300GB * 2 (RAID1) / メモリ 96GB( メモリの内訳は DataNode 4GB, TaskTracker 1.5GB, RegionServer 8GB, Cloudera Impala 5GB, Presto 5GB, その他 MapReduceのスロット用、OS用)"
  • 1