12 years ago, collecting logs from different sources meant dealing with incompatible formats everywhere. How did we get from that chaos to the unified pipelines we have today?

Eduardo Silva shares Fluentd's origin story in this 🌩️ Thunder episode:
https://youtu.be/t6RxvVGvM7Q

#Fluentd #FluentBit #Logging #Observability #CloudNative

fluentdでログ監視して特定の文字列をgrepで検知したらSlackに通知する(バースト抑止付き) #Fluentd - Qiita
https://qiita.com/minamijoyo/items/1bb277383d8d2d2c7c11
/etc/passwd の変更をauditdで検知して、fluentd経由でSlack通知、なるほど
fluentdでログ監視して特定の文字列をgrepで検知したらSlackに通知する(バースト抑止付き) - Qiita

はじめに fluentdでログ監視して特定の文字列を検知したらSlackに通知するのを試してみたメモです。 背景として、以下でauditdでファイル改竄検知したらシスログに出すのを検証してました。 auditdでLinuxのファイル改竄検知を行う これをfluentd経由...

Qiita
Elasticsearch + Logstash + Kibana
15.8%
OpenSearch + Fluent Bit
5.3%
Loki + Promtail + Grafana
47.4%
something else
31.6%
Poll ended at .

[小ネタ]EC2に導入したFluentdの設定ファイルを変更し時間階層でファイルを送信してみた
https://dev.classmethod.jp/articles/ec2-fluentd-configuration-time-hierarchy-file-transfer/

#dev_classmethod #Fluentd

[小ネタ]EC2に導入したFluentdの設定ファイルを変更し時間階層でファイルを送信してみた | DevelopersIO

[小ネタ]EC2に導入したFluentdの設定ファイルを変更し時間階層でファイルを送信してみた | DevelopersIO
opentelemetry-playground/experiments/04-fluent/README.md at main · booyaa/opentelemetry-playground

A playground environment to experiment (initially) with the OpenTelemetry Collector - booyaa/opentelemetry-playground

GitHub

Are there any #fluentd experts here? I'm trying to have certain events forward to a graylog server, preferably in gelf, but I cannot for the life of me figure this out.

#sysadmin #fedihelp

Amazon Linux 2023 に Fluentd を導入してS3バケットにログを配信
https://dev.classmethod.jp/articles/al2023-fluentd-s3/

#dev_classmethod #Amazon_EC2 #Fluentd #Amazon_S3 #AWS

Amazon Linux 2023 に Fluentd を導入してS3バケットにログを配信 | DevelopersIO

Amazon Linux 2023 に Fluentd を導入してS3バケットにログを配信 | DevelopersIO

データレイクハンズオンのログ生成部分が気になったので調査してみた
https://dev.classmethod.jp/articles/insights-into-data-lake-hands-on-logging/

#dev_classmethod #Amazon_EC2 #EC2 #Fluentd #Amazon_Data_Firehose #AWS

データレイクハンズオンのログ生成部分が気になったので調査してみた | DevelopersIO

Fluentd では aws-fluent-plugin-kinesis というプラグインを導入することで、Data Firehose ストリームにログを直接配信することができます。

クラスメソッド発「やってみた」系技術メディア | DevelopersIO

New blog post: https://blog.mei-home.net/posts/some-k8s-logging-changes/

I made a couple of changes to my initial logging pipeline.

I'm also *trying* to learn to write shorter blog posts on smaller things.

#HomeLab #Blog #FluentD

Bite Sized: Some K8s Logging Changes

Because somehow, logging is complicated?

ln --help

And I did not find out I made a loop through some superior metrics and alerting - no, I just heard the fans rev up without an obvious reason. 😂

It all started with wanting to massage the cnpg postgres logs a bit. And while doing that, I saw an "issue". There was a wayward "time" field which I had no use for. And now I'm revamping my entire log setup. 🤦

#HomeLab #Fluentd