Fluentd v0.12 には Fluentd v0.12 is Released で言及されているように、「ラベル」という機能が追加されています。本記事ではラベル機能の使い方、またラベル機能に対応するためにプラグインを改修する方法について解説します。 概説 このラベルという機能は、「内部ルーティングするのに add_tag_prefix したり remove_tag_prefix したり、タグ設計するのめんどくさい！！」という声にお答えして追加されたものです。 ラベル機能を使う事によって、タグを改変することなく、内部ルーティングすることができるようになります。 ラベル機能の導入によって、以下のような利点が生まれていると思います。 タグをいじることが(ほとんど)なくなったので、オリジナルのタグ情報を保てるようになった。 Fluentd 本体がサポートする機能なので、プラグイン作者が個別に

Fluentdの知られていない6つのこと 本当に知られていないかはわからないです。 公式にはあまり説明されていなかったり調べてもなかなか見つからないことが多いと個人的に思ったものを集めました。 機能や言葉の細かい説明は省いているのである程度使っている人が対象です。 out_copyはshallow copy Fluentdで最初に使うであろうビルドインされているout_copyプラグインですが、実はデフォルトではメッセージをdeep copyしないため意図しない結果になることがあります。 <match test> type copy <store> type record_modifier tag test.aa foo bar </store> <store> type retag tag test.bb </store> </match> <match test.{aa,bb}> ty

AWS EC2上にfluentd + fluent-plugin-twitter + elasticsearch + kibana インストールするメモAWSFluentdElasticsearchKibana AWS EC2上にfluentd + fluent-plugin-twitter + elasticsearch + kibana インストールするメモ。 0. instance立ち上げ EC2上にinstanceを立ち上げる。 とりあえず、お試しならt2.microでも良いかも。 AWS t2.micro OS: Amazon Linux AMI (HVM) ツール、データはS3上に上げておくと、外部からダウンロードするより少し早いし、お財布にも少し優しい。 1. yum update

リソース監視なら、stat系の王様「dstat」を利用しよう 「あれ？サーバが重いかも？」 そんなときは「とりあえずtopコマンド」という方も多いと思います。次はvmstatで、それでもわからなければnetstatを…。といくつもコマンドを打つのも億劫です。 そんなときには1つのコマンドでサーバ全体のリソースを監視することのできるdstatがお勧めです せっかくなので今流行りのログ収集とグラフ化を行うGrowthForecastやFluentdについても合わせて解説します。 長くなりそうなので全3回に渡って解説する予定です。 以下、最終的にグラフ化したイメージ 目次 dstatのインストール dstatの使い方 dstatのオプションの詳細と利用方法 外部プラグインの利用方法 よく使う項目をショートカット登録 dstatのインストール 環境はCentOSの6.5を想定して解説を進めます。

会員事業部の有賀(id:chezou)です。 今年一年、社内では勝手に"Jupyterの伝道師"を標榜してJupyter notebookの普及活動を展開してきました。 先日、社内でハンズオンも行ったおかげもあり、かなり社内のマシンにPython環境が構築されてきました :) Jupyter notebookとは？ ひとことで言うとブラウザで動くすごい便利なREPL*1です。 百聞は一見にしかず、見てみましょう。 このように、Rubyの対話環境であるpryを触っているようにインタラクティブにコードを書くことができます。 以降で説明をしますが、Jupyter notebookは記録・共有・再現がとても得意です。特に図表があるときにその効果を発揮します。 Jupyter notebookの良い所 過去のコードを改変、再実行できる セルと呼ばれる入力部分にはMarkdownやコードが記述できます

freeeのkakkunpakkun(略してkp)といいます。マイクロサービスおじさんです。 freeeではモバイルバーサーカーとかフロントエンド革命家など、独自の名前が多いですが、私は「分割おじさん」「認証おじさん」「rspecおじさん」などと呼ばれたりしてきました。 バーサーカーや革命家と比べてかっこ良くないのがなんだか気になる今日このごろです。 今日はおじさんらしく細かくて面倒な話をして、その対策としてfreeeで使ってるgemを公開したのでその説明をしようと思います。 パスワードはDBでハッシュ化していても簡単に見えてしまう 「パスワードが見えてしまう」というのはすごい不安になる言葉ですが、あまり考えずにサービスを開発していると簡単に起こる事象です。 ではどこでそういうことが起こりやすいのでしょうか。 DBにハッシュ化したパスワードを保存するのはかなり一般的になり、各種ライブラリも

どういうわけだか、きょうPCを立ち上げてUbuntu 14.04を起動し個人ユーザでログインしたところ、以下のような状況となった： ランチャーもツールバー（画面上部）も表示されない よってGUI操作によるアプリケーション起動もできない デスクトップの壁紙は表示されている コンテキストメニューは有効で［壁紙の変更］画面を開いたりもできる 試しに「ゲストユーザ」でログインしてみると問題はない どうやら、何らかの理由でUnityもしくはCompizの設定がおかしくなってしまったらしい。焦ってあれこれ調べたが、結果このページを参考にして以下の手順で解決できた： ログイン後 Ctrl＋Alt＋F1キー入力 でコンソール画面に遷移。 「（マシン名） login:_」という表示されるのでログインユーザ名を入力しEnter（パスワードを聞かれたら適宜入力しEnter）。 「DISPLAY=:0.0 gno

EasyRamble は、技術ネタや子育て、英語学習、アウトドアなどについて綴るブログです。Ruby on Rails や Swift などで、Webサービス/アプリを作っています。

最近初めて、Rails内だけでユーザーの管理、ログインをする機能を実装しました。簡単にネットで調べた限りでは、『devise』と『cancancan』を使う方法が一番シンプルでしっくりきました。 こういった一般的な機能を実装するときにはRailsには本当に多様なライブラリがあるのが強みだなとつくづく感じます！ (07-02 21:55) 設定の追記やlocaleファイルのダウンロードなどを追記 🎂 次試すメモ『mcasimir/devise-i18n-views』で翻訳したdeviseのviewを生成できそう。次試してみます！ 🍮 GemのインストールGemfileに次のコードを追加して、bundle installを実行。

Ruby on Rails, Web Services, Software Development, Startups コードはこちら：https://github.com/matsubo/devise_sample deviseの公式の手順書が分かりづらいので、シンプルな認証を実現するための要点を整理してみました！細かい設定とか、自分のサイトにあった設定はこれを元にオプションを変更していただければと思います。1手順ごとにコミットを分けてあるので、変更点が明確に分かるようになっています。 一部、手順が前後しても大丈夫なところがあるので間あり神経質にならなくても大丈夫です。 railsアプリケーション作成 % rails new devise_smaple scaffoldで適当なページを作る % rails generate scaffold Post name:string title:

目的 以下のようなことがやりたかったので、その実現方法のメモです。 cronで実行されるrakeタスクの実行ログを、そのバッチ専用のログファイルに出力 手動でバッチ実行したときのために、標準出力にも同じ内容を出力 予期せぬ例外が発生したときのエラー内容もログファイルに記録 1. バッチ専用のログファイルに出力 単純にRails.loggerを使うと、Controllerなどが出力するアプリケーションログもバッチのログもすべて同じファイルに出力されてしまいます（log/production.logなど）。 それらを区別してバッチの実行ログを確認しやすいようにするため、個別のログファイルに出力します。 ファイル名の指定 以下でlog/batch.logに出力されます。 logger = ActiveSupport::Logger.new(Rails.root.join("log/batch.l

「ImageMagick 遅い」などでググると下記ブログが上位に出てくる。 本当は速いImageMagick: サムネイル画像生成を10倍速くする方法 http://blog.mirakui.com/entry/20110123/1295795409 この記事内で、-define jpeg:size を指定することで 10 倍速くなるという話が出ているが、ここには落とし穴があるので注意。 それは、-define jpeg:size オプションが良い効果を発揮するには、変換元の画像サイズが十分に大きく、変換後の画像サイズが十分に小さくなければならないということ。 例えば 4000x4000 の JPEG を 200x200 にリサイズするというようなシーンなら -define jpeg:size オプションは絶大な効果を発揮する。しかし、4000x4000 を 2000x2000 にリサイズ