[B! hive] juno_cのブックマーク

[Hive]rankを使ってカテゴリごとに上位数件を抽出するクエリ - zuqqhi2 Tech Memo

hiveでタイトルのようなことを実現するクエリを紹介する。これにはrank関数という関数を利用することで実現できる。rankを利用しない場合は以下のように複数のクエリを発行する必要があり、データ量によってはかなりの時間がかかってしまう。カテゴリのリストを準備各カテゴリごとに上位数件を抽出するSELECT文(SELECT ～ FROM ～ ORDER BY ～ LIMIT n)を発行（必要であれば）結果をまとめるしかし、rank関数を利用することで１つのクエリで上記の事が達成できる。クエリのイメージは以下のようになる。 SELECT * FROM ( SELECT *, rank() over (PARTITION BY category_id ORDER BY quantity DESC) as rank FROM sample_table ) a WHERE rank &

juno_c 2017/04/21

hive

リンク

Hadoop Hive UDF Tutorial - Extending Hive with Custom Functions

Hire me to supercharge your Hadoop and Spark projects I help businesses improve their return on investment from big data projects. I do everything from software architecture to staff training. Learn More This is part 1/3 in my tutorial series for extending Apache Hive. Overview Article 1 - you’re reading it! Article 2 - Guide to Table Functions (UDTF) Article 3 - Guide to Aggregate Functions (UDAF

juno_c 2016/11/18

hive

リンク

LanguageManual UDF - Apache Hive - Apache Software Foundation

This wiki is now read only. This and new content has been migrated to a new location

juno_c 2016/09/09

リンク

SQL to Hive Cheat Sheet

International: 1.408.916.4121 www.hortonworks.com Twitter: twitter.com/hortonworks Facebook:facebook.com/hortonworks We Do Hadoop Contents Cheat Sheet Hive for SQL Users 1 Additional Resources 2 Query, Metadata 3 Current SQL Compatibility, Command Line, Hive Shell If you’re already a SQL user then working with Hadoop may be a little easier than you think, thanks to Apache Hive. Apache Hive is data