(うしなわれた)Fluentd output-convert_structure

(うしなわれた)
ﬂuent-plugin-convert_structure

@todesking

2013年1月12日土曜日

ﬂuentdとかいう
構造化ロギングツール
• ログを記録するためのものミドルウェア
• (タグ, タイムスタンプ, 構造化データ
(JSON) )の組を記録する

• プラグインアーキテクチャ
• input plugin: 情報源
• output plugin: 出力先

設定(input)
# アクセスログをファイルから読んで
# 一行ずつ配信
# タグとして ‘apatch.access’を付与
<source>
type tail
format apache
path /var/log/httpd-access.log
tag apache.access
</source>

設定(output)

# タグが‘apache.’で始まるものを受信
# stdoutに出力
<match apache.**>
type stdout
</match>


課題

• inputが出すデータの形式がoutput
に適合するとは限らない

• データ形式を変換するためにplugin書
きたくない


convert_structure
plugin
<match test.**>
type convert_structure
code {‘num’=>record[‘hex’].to_i(16)}
<config>
type stdout
</config>
</match>


convert_structure
plugin
• output plugin
• データの形式を変換して下位プラグイ
ンに渡す

• Rubyのコードがかけるのであらゆる
変換が可能!!!!


オチ

既にありました


(うしなわれた)Fluentd output-convert_structure

More Related Content

Similar to (うしなわれた)Fluentd output-convert_structure (20)

(うしなわれた)Fluentd output-convert_structure