タグ

関連タグで絞り込む (0)

  • 関連タグはありません

タグの絞り込みを解除

Embulkに関するkazuomabuoのブックマーク (3)

  • [Embulk] DBの接続情報とクエリを環境変数とLiquidを使って上手に分割する方法 - Qiita

    まとめ Liquidと環境変数を使って開発環境・番環境のデータベース接続情報を分ける。 テーブル情報(クエリ設定)とデータベースコネクション情報を別ファイルで管理する はじめに 開発環境、番環境によって接続するデータベースコネクション情報を変えたい。 何個もテーブルを読み込みするが認証情報は同じなので、共通化したい。 in: # # 開発環境と番環境で分けたいところ # type: postgresql host: 127.0.0.1 user: user password: pass database: embulk_test # # 読み出すテーブルの情報によって設定が変わるところ query: "select * from table_name"

    [Embulk] DBの接続情報とクエリを環境変数とLiquidを使って上手に分割する方法 - Qiita
  • Embulkの設定ファイルをincludeで共有化する方法 - Qiita

    まとめ Embulkの設定ファイルの中で同じ設定をしている部分を別ファイルにすることができます。 別のファイルにする設定ファイルは、_テンプレート名.yml.liquidという名前にします。 別の設定ファイルは、設定ファイルと同じディレクトリが起点ディレクトリになります。 読み込む設定ファイルは、サブディレクトリを作ることはできますが、親ディレクトリを..を使って参照することはできません。(セキュリティに関する配慮) 読み込み時に変数を設定することもできます。 include先のファイル名にハイフンは使えません。(理由は調査中) 動機 Embulkを利用する頻度が増えてくる場合、次のような問題が生じます。 同じ設定内容を、複数のYAMLファイルに記述しなければいけない。 設定ファイルが肥大化して管理するのが大変だ この問題は、Embulkに搭載されているテンプレートエンジンLiquidの機

    Embulkの設定ファイルをincludeで共有化する方法 - Qiita
  • Fluentdのバッチ版Embulk(エンバルク)のまとめ - Qiita

    Embulk(エンバルク) (2016/10/05からロゴが変わりました。変更理由) Embulkのまとめ2ndを作ってます。 Embulk v0.11 でなにが変わるのか: ユーザーの皆様へ をご一読ください。 更新時にコメントを書くようにしました。変更内容に興味のある方は編集履歴をご覧ください。 2018年1月30日リリースのembulk 0.9からgemは提供されなくなりました。gem版は0.8.39までとなっています 種類 バージョン ロゴの下のバージョンは開発版の最新バージョンを表しています。一般の方は0.9系を利用しましょう 2015年1月27日、Fluentdのメインコミッターの一人古橋さんが中心となって開発した、fluentdのバッチ版のようなツールEmbulk(エンバルク)がリリースされました。 この記事は、Embulkってなに?、どんなプラグインがあるの?、どうやって独

    Fluentdのバッチ版Embulk(エンバルク)のまとめ - Qiita
  • 1