タグ

技術に関するkikeda1104のブックマーク (2)

  • GMOメディア エンジニアブログ

    エンジニアブログは移転しましたGMOメディアエンジニアブログは移転しました! https://blog.gmo.media/ 今後はエンジニアとデザイナーで作り上げる、GMOメディアクリエイターブログとして運用していきます。 新しいクリエイターブログをよろしくお願いします! 8/20(月) Club MySQL #3に参加するはなしぬいぐるみが好きな方のDBAです。 来る 8/20(月) 、サイボウズさんのオフィス にお邪魔して Club MySQL の第3回、 yoku0825のつくりかた という話をさせていただくことになりました。 Club MySQL #3 ~ yoku0825 のつくりかた - connpass Club MySQLは割と最近始まったMySQL関連の勉強会なので、東京でよく開催されるその他のMySQL勉強会とその特徴を比較して紹介してみたいと思います。 MyNA(日

  • kikeda1104's blog

    Batchを作ることになったので、そちらを書いていきます。warningを解消する際にすでに公開していたバッチですが、コードを改善したのでまた載せていきます。 サンプルコードは参考までにしてください。 前提 Rails(4.2.x) Ruby(2.2.10) RedShift S3 検討・方針 AWS DATAPIPEを利用することも検討したけれど、テーブル毎に定義を増やさなければいけないので、管理しづらいと思いこちらは辞めた。APPにタスクを作成して、バッチ処理することで対応する。ただし、migrationに伴うテーブル定義の変更をRedShift側に伝播できる仕組みはないので、こちらは手動でsqlを回すことになる。(データコピーで利用するテーブルカラムを限定して、設計の時間を稼ぐこともできるがそれも今回はやらない) 処理の流れは、 dumpファイルの作成し1GBを超える場合は分割(up

    kikeda1104's blog
  • 1