タグ

ブックマーク / qiita.com/keigodasu (4)

  • あの日見たYARNのお仕事を僕達はまだ知らない。 - Qiita

    あなたが実行したジョブのこと考えてない間、ずっとYARNがジョブのこと考えててくれてたんだ みなさんはYARNの存在をどれだけ気づいてあげられているだろうか。 よくSparkと一緒にYARNって単語はよくみるよねー 知ってる知ってる、よく図とかでMapReduceとかの下にいるやつだよね? クラスタのリソースを管理してるんでしょ、たしか? いや、間違ってはいないし、やっていることをあたっているんだけど、実はいつも頑張ってくれているYARNのことをもっと理解してあげてもいいじゃないか! ただ、 いざ調べてみると日語の情報が少ない なんかざっくりリソース管理を行うぐらいしか書いてない もしくはいきなり細かい話から始まってよくわからない というのがちまたの現状なので、聖なる夜に暇を持て余した私が、いつも頑張ってるYARNのお仕事を紹介しようと思います。 YARNの素晴らしさを熱く語りたいところ

    あの日見たYARNのお仕事を僕達はまだ知らない。 - Qiita
  • なんとなくじゃ嫌なんだ!!文化系エンジニアに送る、しっかり始める機械学習!! - Qiita

    機械学習始めるぞー!と思ったやさき・・・ 最近はもうあちこちで機械学習機械学習って盛り上がってますよね! そして「 乗るしかない!このビッグウェーブに! 」と思い立ち意気揚々と書店に行って、機械学習の入門書を手にとりますね。 そして数式の羅列にただただ唖然とするわけです。 でもって次に専用ソフトやコーディングを通じて学べる系のに手を出してみるものの、今度は数式が少ない代わりに、 ここに数値を入れて、ボタンを押せば…ほらこんな感じで結果が出力されます! このライブラリをインポートして、このメソッドの引数に数値を渡すと…ほらこんな感じ! といった具合で、どうしてもブラックボックス感が出てしまって、ちょっとモヤモヤ… 上記のような経験をしたことがある方はきっと少なくないはずです… かくいう私もまさに上記のような感じで、勉強したくてもとっつきにくい印象のままでした。 そこで私なりに見つけたオス

    なんとなくじゃ嫌なんだ!!文化系エンジニアに送る、しっかり始める機械学習!! - Qiita
  • confdでちいさく始めるインフラ構築の自動化 - Qiita

    はじめに 最近ではInfrastracutre as codeやImmutable Infrastructreの考え方によるインフラ管理が浸透してきました。 ChefやAnsibl、最近ではItamaeといったプロビジョニングツールの選択肢が増えてきとはいえ、未だに敷居の高さを感じ導入に踏み切れていない方も多いのではないでしょうか。 そこで今回はお手軽に始められるインフラ構築ツールとしてconfdについてまとめてみました。 confdとは goで書かれた設定ファイル管理ツールです。 kelseyhightower/confd 主要機能は設定ファイルのテンプレートエンジンなのですが、設定ファイルの生成前後で外部コマンドを実行することが可能です。 そのため 設定反映のための前処理 設定ファイルの自動生成 設定反映のためプロセス再起動 といった一連の作業を担わせることができます。 また、構成もシ

    confdでちいさく始めるインフラ構築の自動化 - Qiita
  • 新米エンジニア(アプリ・インフラエンジニア問わず)に知っておいてほしいトラブルシューティング入門 実践編 - Qiita

    ※前回記事にてトラブルシューティング実施にあたって準備しておきたいこと(作業ログの取得方法など)を記載しておりますので、記事では割愛します。 はじめに 前回の記事の続きとなります。 新米エンジニア(アプリ・インフラエンジニア問わず)に知っておいてほしいトラブルシューティング入門 はじめの一歩編 前回に記事を書いたあと、現場でも意外と基礎を押さえた切り分けができない人が多いのではと思い、よりいろんな方に読んでいただきたくタイトルをかえてみました。 前回の記事では、トラブルシューティングの前に実施しておきたい事や心構えについて記載しました。 今回はそれを受けて実際にトラブルが起きた際の簡易的な切り分け方法についてまとめてみます。 記事の対象と扱う範囲 前回記事と同様に、初めてエンジニアとして働くことになった方々向けです。 記事のゴールが「○○できないですのですが、、」といった事象に対して

    新米エンジニア(アプリ・インフラエンジニア問わず)に知っておいてほしいトラブルシューティング入門 実践編 - Qiita
  • 1