タグ

ブックマーク / qiita.com/moaikids (4)

  • Docker で MySQL 起動時にデータの初期化を行う - Qiita

    Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

    Docker で MySQL 起動時にデータの初期化を行う - Qiita
  • 現場で運用する視点から見た Amazon Athena - Qiita

    個人的なプロジェクトも含め、いくつかの現場で Amazon Athena について触れる機会があったので、個人的に思うところについて記載します。 数時間で書いた雑な文章ですが、ご了承ください。 なお、先日リリースされた Amazon Athena API については以下の Qiita に first impression をまとめているので、 API 以外の話題について書きます。 Amazon Athena の API を使ってみた (2017/05) データの設計について Amazon Athena は managed な Presto 環境で、 事前に Presto サーバーの立ち上げなどリソース確保を行わなくても良い データについても、S3 にファイルをアップさえすれば、後付でいかようにでもデータの解析が出来る という手軽さを売りにされています。 これは利点としていっさい間違いではな

    現場で運用する視点から見た Amazon Athena - Qiita
    clavier
    clavier 2017/05/30
  • Amazon Athena の API を使ってみた (2017/05) - Qiita

    http://docs.aws.amazon.com/athena/latest/ug/release-notes.html#may-18-2017 2017年5月18日に Amazon Athena にて API が公開されました。 managed presto としての魅力を感じつつも API が存在しないということで original の presto を使っている人にとっては魅力が薄かったサービスですが、 API が公開されることでできることも増えました。 この記事では、 Amazon Athena の API の使い勝手について概観してみようと思います。 API で出来ること 公式ドキュメントにあるように、 API 経由で出来ることは以下になります。 http://docs.aws.amazon.com/athena/latest/APIReference/API_Operati

    Amazon Athena の API を使ってみた (2017/05) - Qiita
    clavier
    clavier 2017/05/26
  • fluentd pluginで集計処理をする(Norikra以外で) - Qiita

    はじめに 世間的には「fluentdで集計 ≒ Norikra!!!!!」という流れで、それに対して一石を投じる気のかけらも私には無いわけですが、Norikraを用いるまでもない軽微な処理を実行する場合fluentdのプラグイン単体で処理を完結したいケースもあり、そしてNorikraが若干重厚に映るケースもあります(JRuby!! Esper!!!) ということで、集計が行えるようなfluentd pluginについてまとめてみます。チョイスは僕の独断と偏見です。 ユースケース fluentdの基的なユースケースは、inputとして入力をしたデータをoutput先にrelayする、というものです。そして集計処理は、多くの場合output先のシステム内、もしくはシステムに蓄積されたデータを用いて別のシステムを用いて行う事が多いと思います。 (ex. HDFSに保存したログデータをHiveを

    fluentd pluginで集計処理をする(Norikra以外で) - Qiita
  • 1