タグ

2016年12月27日のブックマーク (3件)

  • 5年間コードを書き続けたエンジニアが、新人に読んでもらいたい11冊+αを紹介する|ハイクラス転職・求人情報サイト AMBI(アンビ)

    5年間コードを書き続けたエンジニアが、新人に読んでもらいたい11冊+αを紹介する 新人エンジニアのうちに読んでおくと役立つ名著やおすすめのを紹介。開発全般やコーディングなどの作法を学ぼう。 某社でサーバサイドエンジニアをしている @ikenyal と申します。開発言語は主にPHP。新卒入社から5年、エンジニアとして働いています。学生時代にもプログラミング、サーバ・ネットワーク構築や運用を経験しました。 これまで、社内外で新卒からベテランまで多くのエンジニアを見てきました。その中で、新人のうちに身につけておいた方が良いだろうと思うものは「お作法」と「基礎知識」です。 プログラミング言語やシステムの専門的な知識は後からでも勉強できます。一方で、さまざまな自己流の癖は時間が経つと身に染みついてしまい、指摘されても直すのが難しくなってしまいます。そのため、新人のときに良いお作法を勉強しておくこと

    5年間コードを書き続けたエンジニアが、新人に読んでもらいたい11冊+αを紹介する|ハイクラス転職・求人情報サイト AMBI(アンビ)
    kimutansk
    kimutansk 2016/12/27
    こういうの、如何に読んだ結果の本質を若者に伝えて、未来がより発展するよう動くのが年寄りの役割だと思うんですけどね。
  • 24/7 Spark Streaming on YARN in Production - inovex GmbH

    Spark Streaming Use Case Spark Streaming is used for a variety of use cases at the mentioned client. This blog post focusses on one streaming application, which processes about 70 mio. transactions per day on weekdays. The transactions arrive in batched messages, where each message contains about 200 transactions. During opening hours of the retail stores, about 1700 transactions per second are pr

    24/7 Spark Streaming on YARN in Production - inovex GmbH
    kimutansk
    kimutansk 2016/12/27
    spark.locality.waitによるTaskスケジューリング(localityの遷移)の話やBackpressureの適用遷移とか面白いですね。
  • Sparkのクエリ処理系と周辺の話題

    3. 3Copyright©2016 NTT corp. All Rights Reserved. • MapReduceを⼀一般化した処理理モデルを基にした分散並 列列処理理のためのフレームワーク • DataFrame/Dataset  API上に様々なワークロード向 けのライブラリを提供(Unified  Engine) Sparkとは? (クエリ最適化を担当) (クエリ実行を担当) 4. 4Copyright©2016 NTT corp. All Rights Reserved. • 不不変で並列列実⾏行行可能な分散コレクションで,Sparkにお ける唯⼀一のデータ操作のためのAPIを実装 Spark  RDD  -‐‑‒  Resilient  Distributed  Dataset val data = Array(1, 2, 3, 4, 5)     // Scalaのローカ

    Sparkのクエリ処理系と周辺の話題
    kimutansk
    kimutansk 2016/12/27
    コード生成の次のステップは・・この手のが実際に導入される?テンプレートベースの課題は確かに言わずもがな。