using Grafana

構成

dologger (on Application) -> ??? -> Grafana

みたいにやってみたい。
↓
Grafana難しそう。。

using Fluent

構成

dologger (on Application) -> Fluent Bit -> Elasticsearch <- Redash

Fluent Bit

• fluent-bit からimageをpull
• https://github.com/fluent/fluent-bit#input-plugins のtcpのリンク先参考に、TCPモードで起動

docker run -ti -p 5170:5170 fluent/fluent-bit:1.8 /fluent-bit/bin/fluent-bit -i tcp -o stdout

• port 5170宛にtcpでメッセージを送れば、受信したログを出力するようになる

• 出力先のフラグはここのリンク先を見れば良さそう

Elasticsearch

• docker imageで起動
  • https://www.elastic.co/guide/en/elasticsearch/reference/current/docker.html

Redash

• https://redash.io/help/open-source/dev-guide/docker
  • 上から実行する。が、ブラウザからアクセスすると↓エラーがでる。

FileNotFoundError
FileNotFoundError: [Errno 2] No such file or directory: '/app/redash/settings/../../client/dist/index.html'

↓

~/work/redash/client　配下で、

これ をやって、distディレクトリ生成してやっとちゃんとアクセスできるようになった。

TODO

• redashの起動スクリプトreadmeに追記
• redashからelasticsearchに接続してクエリ
• redashのdocker-composeで始める説明のとこ修正依頼
  • アンコメント× .env○
  • redash/client配下でnpmやらんとエラー
• bqにログのような時系列データを入れて、redashでクエリして線グラフ・棒グラフをちょっと作りたい

loggerなので、メインの機能を提供するアプリケーションの処理速度やメモリなどに負荷をかけたくない。

ベンチマークの取り方から調べて測定しやすい状態にする

• cpu
• メモリ

• level
• time
• message
• caller