Private Presentation

Private content!This content has been marked as private by the uploader.

[sonots]

まだまだ今後に期待ということで把握しました

[yamitzky]

パーティションの認識はまじで終わらないｗ　 けど、一度のクエリで複数のパーティション追加できるので、パーティション分回す必要はなかったり

[tofu-kun]

この規模だと限界が見える感じか。これからに期待。

[tkmoteki]

今と状況大分違うけどメモブクマ

[u1tnk]

まだまだ厳しそうという事はわかった

[Nyoho]

わしの中の聖闘士星矢が反応して名場面ばかり脳裏に浮かび、内容が入ってこん! なんでじゃ

[tmatsuu]

良い知見。ありがたい

[miragestlike]

これから読むけど、自己紹介のJSONが新しいと思いました

[msykt]

目的が生データの一次加工なのにparquetに流れ着いた過程が分からなかった…。AthenaではなくEMRで一次加工すれば良かった？それとは別にAthenaでparquetを使う為の仕組みは欲しい。その辺をAWS Glueでやれると良いのだが

[cloud-research]

parquet(列指向)行く前に、検証終了。あと、athenaからparquetフォーマット作りたいけど、やっぱ現状無理(EMRとか必要)。athenaは、やっぱまだまだこれからって感じですね。

[joker1007]

まだ色々と制約があるんだな。これから限定解除されていくと良いのだが。

[masutaka26]

Tokyo Region の S3 にクエリを発行すると、Data Transfer が結構かかるので注意ね。数十GB程度のデータを BigQuery のようにカジュアルに使ったら、1 時間で $200 消えました...

[sonota88]

100万パーティション

[masui_chiaki3]

30TBとは想像できませんね

[rinotakabe]

まさに桁違い

[kazutomo]

まだまだBigQueryの代わりとして使うのは厳しさありそう

[bottomzlife]

けっきょくなにがやりたかったんだ･･･30TBに対してAthenaが使えるか確かめたかったのか、行動分析がしたかったのか･･･前者は要件定義が足りなくて実用上意味ないし、後者はなんのノウハウも出てないし･･･orz

[yumu19]

へー。（Athena、、、また知らないサービスが、、、）

[somemo]

冒険はまだ始まったばかり感なので期待

[todesking]

たいへんそう……

[katzchang]

厳しいとのこと

[koyancya]

ELT に使おうとしても厳しいということかな

[tagomoris]

まだ熟成はこれからという感じか / AthenaはそもそもPresto(標準SQL志向)なのでHiveQLの機能は使えませんね

[kimutansk]

Athenaは現時点では使い込むにはまだまだ厳しい状況みたいですねぇ。納得がいく制約もありますが。