CloudTrailとFirehoseを活用したS3オブジェクトログのサーバレスなETL処理を試してみた | DevelopersIO

CloudTrailのデータイベントとFirehoseの動的パーティションを活用し、S3オブジェクトの変更ログをサーバレスかつコスト効率良く収集するETLパイプラインを試してみました

[アップデート] AWS CDK で Amazon Data Firehose の S3 出力時のタイムゾーン設定が可能になりました | DevelopersIO

リソースリンクなしでAmazon Data FirehoseからAmazon S3 Tablesへのデータ配信を試してみた | DevelopersIO

リソースリンクを作成せずにData FirehoseからS3 Tablesにデータを流せるようになっていたようです!

CDKでWAFのアクセスログをS3に保存する方法 | DevelopersIO

Amazon Data FirehoseからAmazon S3バケットへ保存したファイルの圧縮率を比較してみた | DevelopersIO

Amazon Data Firehoseのファイルの圧縮率を比較してみました。圧縮形式はGZIP, ZIP, Snappy, Hadoop互換Snappyの4つです。1~10KBという比較的小さめのデータサイズにて、最も圧縮率が高かったのはGZIPでした。

ทดลองใช้งาน Amazon Data Firehose บน Thailand Region | DevelopersIO

อัปเดตปี 2025 ของ AWS Thailand Region (ap-southeast-7) : มาลองใช้งาน Amazon Data Firehose บนรีเจี้ยนไทยดูกัน

VPCフローログをAmazon Data Firehose経由でS3 Tablesに書き込んでみた | DevelopersIO

VPCフローログをAmazon Data Firehose経由でS3 Tablesに書き込んでみた

Amazon Data FirehoseでApache Icebergテーブルに配信する際の「一意のキー設定」と「JSONQuery式（JQ式）」の違いについて | DevelopersIO

Amazon Data FirehoseでApache Icebergテーブルに配信する際の「一意のキー設定」と「JSONQuery式（JQ式）」の違いについてまとめました

[アップデート]Amazon Data Firehose から S3 Tables へ直接データ配信できるようになりました | DevelopersIO

Firehoseの設定時にリソースリンクを指定することに気づくのにめちゃくちゃ時間がかかりました

firehoseを使ってs3にparquet形式でデータを保存する | DevelopersIO

firehoseを使ってs3にparquet形式でデータを保存してみました。 IoT Core * firehose * S3 はよく使うのですが、parquet形式はやったことなかったので勉強になりました。