fluentdのexec_filter Output PluginでPythonプログラムを使う - Qiita
exec_filter Output Plugin (out_ecec_filter)は要するにフィルタ処理を任意のプログラムを使ってかませられる。例えば次の処理に不要なレコードを落したり、エラーとしてどこかに保存したり。ここでPythonプログラムを使ってみる。 設定 次の通りにしてみた。 <match hoge> type exec_filter command /path/to/python -m myapp.fluent_stream_filter time_key time in_format json out_format msgpack buffer_type file buffer_path /path/to/buffer buffer_chunk_limit 8m buffer_queue_limit 64 flush_interval 10s tag fuga </ma
パイプとフィルタ ~ソフトウェア工学における有用なアーキテクチャ~ | POSTD
パイプライン は、最近のソフトウェアエンジニアリングにおいて、非常に便利な（そして驚くほど活用されていない）アーキテクチャパターンです。ソフトウェアでデータの流れを制御するためにパイプとフィルタを用いる考え方は、最初のUNIXシェルが作られた1970年代からあります。もしターミナルエミュレータでパイプ” | ”を使ったことがあるなら、”パイプとフィルタ”を活用できていることになります。以下の例を見てみましょう。 cat /usr/share/dict/words | # Read in the system's dictionary. grep purple | # Find words containing 'purple' awk '{print length($1), $1}' | # Count the letters in each word sort -n | # Sort l
Eclipseデバッグ効率化！無駄なステップ実行を減らす「Step Filter」の設定方法
Eclipseの「Step Into」の挙動が設定によって変更できることを知っていましたか？ 今回は、「Step Into」を始めとする「Step実行」の挙動を変更する「Step Filtering」の設定方法と利用例を紹介します。使えるかも、と思ったら人は、ぜひ導入を検討してみてください。 目次 1. 「Step Into」とは2. 「そこに潜らなくてもいいのに！」3. 解決策：Step Filtering3.1. 有効化3.2. フィルタ設定3.3. その他の設定4. 使い方5. 設定例１：どうでもいい標準ライブラリのコードに飛ばないようにする5.1. 問題5.2. 対策：無視するクラスを設定する6. 設定例２：ClassLoaderへのStep Intoを回避する6.1. 問題6.2. 対策：ClassLoaderをフィルタする7. 設定例３：単純なgetter/setterを無視す
HBase FuzzyRowFilter: Alternative to Secondary Indexes - Sematext
In this post we’ll explain the usage of FuzzyRowFilter which can help in many situations where secondary indexes solutions seems to be the only choice to avoid full table scans. BackgroundWhen it comes to HBase the way you design your row key affects everything. It is a common pattern to have composite row key which consists of several parts, e.g. userId_actionId_timestamp. This allows for fast fe
DjangoのモデルのManagerクラスのメソッドをメソッドチェインさせる - PYTHONIC BOOM BOOM HEAD
※追記：django-model-utils というパッケージの PassThroughManager が同じようなことしてくれるみたいです Model Managers — django-model-utils 2.3a1 documentation 例えば下記のような、書籍名・本棚登録済みかのフラグ・出版日を持ったモデルクラスがあるとする from django.db import models class Book(models.Model): name = models.CharField(max_length=255) registered_flg = models.BooleanField(default=False) published_date = models.DateTimeField() ここで、「本棚登録済みの本のみを抽出」とか「出版済みの本のみを抽出」とかしたい場
デバッグにも便利！jQuery.tapの紹介
$('#aaa') .find('.bbb') .filter(':first') .addClass('head') .end() .end() .parents('tag') .children(':first') .addClass('head') .end() .end() .end() ;
Bloom Filters by Example
A Bloom filter is a data structure designed to tell you, rapidly and memory-efficiently, whether an element is present in a set. The price paid for this efficiency is that a Bloom filter is a probabilistic data structure: it tells us that the element either definitely is not in the set or may be in the set. The base data structure of a Bloom filter is a Bit Vector. Here's a small one we'll use to
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ブルームフィルタを利用した ランダムサブドメイン攻撃（DNS水責め）からのDNSキャッシュサーバの防御
C++14で遅延評価と関数型を実現するStreamsライブラリ
Google Code Archive - Long-term storage for Google Code Project Hosting.
Anti cross-site scripting (XSS) filter for Java web apps - Java Code Geeks
Advanced Filter Caching in Solr
How to test servlet filter POST requests with ServletTester - Blog Top Sites