タグ

ブックマーク / qiita.com/shuhei_f (1)

  • BigQuery でランダムサンプリング - Qiita

    ストック数的に誰も見ていないと思っていたけれど、意外と参考にしたという声を現実世界で最近ちょくちょく聞いているので Medium の方にちゃんと書き直しました。 やりたいこと タイトルの通り BigQuery でランダムサンプリングをする方法を調べたり考えたりしたのでメモを残しておきます。 方法その 1 乱数生成結果を入れただけの列を追加して、その列についてソートするという作業をサブクエリで記述します。 SELECT word FROM ( SELECT word, RAND() AS rand FROM [publicdata:samples.shakespeare] ) ORDER BY rand LIMIT 100 RAND() 関数が真の乱数を生成するという仮定の下でランダムサンプリングが実現できており、最も素直で確実な方法だと思います。 欠点 ただ、この方法には 1 つ大きな欠点

    BigQuery でランダムサンプリング - Qiita
    somemo
    somemo 2017/07/02
  • 1