汎用抽象化に伴うレイヤを取り払い変数をレジスタに収める／命令固定で対象カラム複数行を投入する流れにすることで実行最適化。そのコードを生成するのでSpark as a Compilerと。

kimutansk のブックマーク 2016/05/24 10:30

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/288109071/comment/kimutansk" data-user-id="kimutansk" data-entry-url="https://b.hatena.ne.jp/entry/s/www.databricks.com/blog/2016/05/23/apache-spark-as-a-compiler-joining-a-billion-rows-per-second-on-a-laptop.html" data-original-href="https://www.databricks.com/blog/2016/05/23/apache-spark-as-a-compiler-joining-a-billion-rows-per-second-on-a-laptop.html" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fwww.databricks.com%2Fblog%2F2016%2F05%2F23%2Fapache-spark-as-a-compiler-joining-a-billion-rows-per-second-on-a-laptop.html" data-user-icon="/users/kimutansk/profile.png">Apache Spark as a Compiler: Joining a Billion Rows per Second on a Laptop</a><ul class="comment-tag" style="list-style: none; margin: 0px;"><li style="float: left">[<a href="https://b.hatena.ne.jp/q/spark">spark</a>]</li><li style="float: left">[<a href="https://b.hatena.ne.jp/q/CPU">CPU</a>]</li><li style="float: left">[<a href="https://b.hatena.ne.jp/q/performance">performance</a>]</li></ul><br><p style="clear: left">汎用抽象化に伴うレイヤを取り払い変数をレジスタに収める／命令固定で対象カラム複数行を投入する流れにすることで実行最適化。そのコードを生成するのでSpark as a Compilerと。</p><a class="datetime" href="https://b.hatena.ne.jp/kimutansk/20160524#bookmark-288109071"><span class="datetime-body">2016/05/24 10:30</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！