タグ

ブックマーク / nobusue.hatenablog.com (2)

  • CDH5対応のSparkをビルドする方法 - nobusueの日記

    このエントリはSpark, SQL on Hadoop etc. Advent Calendar 2014 - Qiitaの12/6担当分です。 CDH5対応のSparkバイナリはどこに? Sparkアプリケーションの開発を行っていると「Hadoopクラスタに接続してxxする」というケースがあると思います。いちいちアプリケーションのJARをアップロードするのは面倒なので、できれば「手元のマシン(Macとか)からリモートのHadoopクラスタに接続してxx」したいところです。 しかし、Hadoopエコシステムのプロダクトはライブラリの依存関係がシビアなため、バージョンやディストリビューションが異なると接続できないことが多いです。(しかも状況によって発生するエラーが異なるので原因究明が大変です。特に、自分のようにHadoopの経験が浅い人間は素直にディストリビューションの標準構成に従っておいた

    CDH5対応のSparkをビルドする方法 - nobusueの日記
    kasumani
    kasumani 2014/12/06
    CDH5対応のSparkをビルドする方法 スターをつけました このエントリはSpark, SQL on Hadoop etc. Tags: feedly, ifttt, recently read, saved for later from Pocket December 06, 2014 at 12:38PM via IFTTT
  • nobusueの日記

    2018/10/10(日時間では10/11未明)にOpenShift 3.11がリリースされました。 4.0に向けて着々と新機能が投入されていますが、特に注目すべきはPrometheusのGAとOperator Frameworkです。Operator FrameworkはOpenShift内部だけでなく、Red HatのプロダクトやISV製品の基盤となる仕組みなので要注目です。 元情報 OpenShift Container Platform 3.11 Release Notes https://docs.openshift.com/container-platform/3.11/release_notes/ocp_3_11_release_notes.html このリリースについて このリリースはKubernetes1.11を含むOKD3.11をベースにしている。 RHEL7.4およ

    nobusueの日記
    kasumani
    kasumani 2014/05/01
    Jjug 20140430 gradle_intro Presentation Transcript 2014.04.30 須江信洋(@nobusue) http://on.fb.me/1i0qRS8. Tags: feedly, ifttt, recently read, saved for later from Pocket http://slidesha.re/1i0qRS7 May 01, 2014 at 07:52PM via IFTTT
  • 1