"RDB(RDS含む)の場合は Glueのウィザードがソレっぽいコードをdyfで自動生成してくれるが、それで対応できるのはせいぜい1000万件レコード以下です。それ以上の場合はdfでsparkの機能でやるとよい"

sh19910711 のブックマーク 2020/01/04 14:57

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4679606128868598882/comment/sh19910711" data-user-id="sh19910711" data-entry-url="https://b.hatena.ne.jp/entry/s/qiita.com/h-imaoka/items/57e100f25ecb43835166" data-original-href="https://qiita.com/h-imaoka/items/57e100f25ecb43835166" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fqiita.com%2Fh-imaoka%2Fitems%2F57e100f25ecb43835166" data-user-icon="/users/sh19910711/profile.png">AWS Glue で 億超えレコードなテーブルからETLする - Qiita</a><ul class="comment-tag" style="list-style: none; margin: 0px;"><li style="float: left">[<a href="https://b.hatena.ne.jp/q/%2Adata">*data</a>]</li><li style="float: left">[<a href="https://b.hatena.ne.jp/q/aws">aws</a>]</li><li style="float: left">[<a href="https://b.hatena.ne.jp/q/bigdata">bigdata</a>]</li></ul><br><p style="clear: left"> &quot;RDB(RDS含む)の場合は Glueのウィザードがソレっぽいコードをdyfで自動生成してくれるが、それで対応できるのはせいぜい1000万件レコード以下です。それ以上の場合はdfでsparkの機能でやるとよい&quot;</p><a class="datetime" href="https://b.hatena.ne.jp/sh19910711/20200104#bookmark-4679606128868598882"><span class="datetime-body">2020/01/04 14:57</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！