![](https://cdn-ak-scissors.b.st-hatena.com/image/square/010650fc054d056a29dfae1379bafa533409dfb4/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9QVBJJUUzJTgyJTkyJUU0JUJEJUJGJUUzJTgxJUEzJUUzJTgxJUE2R29vZ2xlJTIwQ2xvdWQlMjBTdG9yYWdlJUUzJTgxJUI4VXBsb2FkJUUzJTgxJTk3JUUzJTgxJUE2JUUzJTgxJUJGJUUzJTgxJTlGJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9NTYmdHh0LWNsaXA9ZWxsaXBzaXMmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz0yYjczYTM5Zjg0MmJhNTkwZTRkODUzYjUxYjM5MzIxMQ%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwSW15c2x4JnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9MzYmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz1hYWQxNGIzNmM1YzQ0YzZkZDdjYjkxYzg2OTg4NDlmNA%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D319801d7952f5b2d8fe66aedf226c35c)
エントリーの編集
![loading...](https://b.st-hatena.com/bdefb8944296a0957e54cebcfefc25c4dcff9f5f/images/v4/public/common/loading@2x.gif)
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
APIを使ってGoogle Cloud StorageへUploadしてみた - Qiita
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
![アプリのスクリーンショット](https://b.st-hatena.com/bdefb8944296a0957e54cebcfefc25c4dcff9f5f/images/v4/public/entry/app-screenshot.png)
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
APIを使ってGoogle Cloud StorageへUploadしてみた - Qiita
初めに やりたいことはすごく簡単なはずなのに、いろんなドキュメント見てもぱっと見て実装出来そうな良... 初めに やりたいことはすごく簡単なはずなのに、いろんなドキュメント見てもぱっと見て実装出来そうな良いのが無かったので書きます。 やりたいこと(背景) Hadoopに入ってるアクセスログをHiveで抽出して、Google Cloud Storage(GCS)に上げる。 それをGoogle Cloud Platform(GCP)の解析基盤に流してよしなにする。 このフローにおける前者の部分をサクッとバッチ化しました。 PHPのクライアントライブラリを利用しています。 1. 取り敢えずHiveからファイル出力する 別にHiveの話したいわけじゃないので割愛します。 こんなかんじ。 sudo -u hdfs hive -e "$query" | grep -v WARN > $filename 1.7GBくらいのファイルを走査して350MBくらいのファイルを吐きます。 30秒位で終わる。優秀!(自