Apache Spark 1.6 Dataset APIをいち早く試してみる - Qiita
Apache Spark 1.6から新しく追加されたDataset APIを試してみる。 2015/12/14現在まだリリースされてないが、年内中にはリリースされるはず。 背景 RDDはLow Level APIで、としてフレキシブルだが、最適化が難しい （Spark 1.3から登場した）DataFrameはHigh Level APIでオプティマイザーが最適化してくれるが、フレキシブルさがない。特にUDFの使い勝手が不便なところや型チェックに弱い Dataset API 登場 上記の問題を解決するためにSpark 1.6から実験的（Experimental）に登場したのがDataset APIである RDDとDataFrameの良いところを併せ持つAPIとして開発されています。つまり、早くて使い勝手のよいAPIだと言えます。 画像はhttp://technicaltidbit.blogs
海外で働くことになった技術者達へ
シャープの件もあり、[日本のものつくりが終わった]、などとよく目にするようになりました。 しかし、ものつくりの今後うんぬんの議論よりも、我々は目先のお金を稼がなければなりません。 私は、10年前から海外で技術者として仕事をしています。私自身はもう結構な歳になるのですが、 今後数年、本格的に海外（＊）で働く技術者が増え始めると思い、海外で働くうえで必要なことを書いてみます。 （＊）ちなみに日本ではありがちな、海外＝シリコンバレーという意味ではなく、ここでは全世界を指します。 台湾・韓国・中国はもちろん、ドイツ、イスラエルなど技術力の高い企業・研究機関がある世界中の国へ 今後日本人技術者は流れていくだろうと、私は考えています。 結論を言うと、海外に適応して働いていくためには 1.現地語を覚える。 2.批判、愚痴を言わない。 3.不快なことをされても気にしない です。 技術というと、専門の経験年
来月頭より、ベルリンでエンジニアとして働くことになりました。 - zakisan's blog
https://www.flickr.com/photos/ntrinkhaus/14593212964 お久しぶりです。 突然のご報告ですが、来月頭よりベルリンでエンジニアとして働くことになりました。この場を使って、働くことになった経緯と今後の展望を書きます。 これから海外でウェブ系のエンジニアとして働く人の参考になれば幸いです。 まず私の属性ですが、31歳、文系出身、主にRuby（Rails）でウェブアプリを書いています。エンジニア歴五年くらいです。 プログラミングを始める前は、大学時代に友達と始めた会社でゲームをつくっていました（会社は存続していて、今年で8年目です）。 こんなゲームをつくっていました。 主に日本のスタートアップ企業で働いてきました。DB設計/インフラ構築含め、一からウェブサービスを開発することもあれば、既存サービスの登録者数を2ヶ月で倍増させる施策に携わることもあり
Railsの教科書
プログラミング初学者へ向けたRailsを使ったWebアプリづくりの教科書。簡単なサンプルアプリを題材に、その動作と仕組みを解説し、他の書籍や資料では省かれがちなRailsおよびWebアプリの基礎の部分を丁寧に説明していきます。基礎力を付け理解を助ける、最初の1冊に。Rails 7.0対応。 関連サイト本書の関連ページが用意されています。 githubレポジトリ内容紹介プログラミング初学者へ向けたRailsを使ったWebアプリづくりの教科書。簡単なサンプルアプリを用意し、その動作と仕組みを解説し、他の書籍や資料では省かれがちなRailsおよびWebアプリの基礎の部分を丁寧に説明していきます。Railsの世界を歩くための基礎力を付け理解を助ける、最初の1冊に。 本書は2012年から2年間、一橋大学で筆者が行ったRubyとRailsの講義で使われた資料を書籍の形式にまとめ、最新のRails 7.
GitHub - tanmaykm/Parquet.jl: Julia implementation of parquet columnar file format reader and writer
Windows で Ubuntu バイナリ（bash）が動作することの概略 - 蒼の王座・裏口
マイクロソフトのハンセルマンのBlog： Developers can run Bash Shell and user-mode Ubuntu Linux binaries on Windows 10 Ubuntuの中の人のBlog： Ubuntu on Windows — The Ubuntu Userspace for Windows Developers この2つのBlogで実態が明確になったのでまとめてみます。 使用可能になるOSまもなくリリースされる予定のWindows 10 ”Anniversary” アップデートで使用可能になります。このアップデートで、開発者向けの機能として追加されます。 機能の追加で、Windowsの設定で開発者モードを有効にすると使用できるようになります。これでネイティブなユーザー モードのLinuxシェルが使えるようになり、bashを起動するとWind
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - jcrobak/parquet-python: python implementation of the parquet columnar file format.
Posit
API Reference (Bing, Version 2)
LINEヤフー株式会社