Cloud Composer でカスタムセンサーを実装して Storage Transfer Service のオペレーション完了を待機する
https://dev.classmethod.jp/articles/cloud-composer-custom-sensor-storage-transfer-service/
#dev_classmethod #Google_Cloud_GCP #Cloud_Composer #Storage_Transfer_Service #Apache_Airflow
Storage Transfer ServiceがS3へアクセスするときのIP範囲の変更検知方法を考えてみた
https://dev.classmethod.jp/articles/20250118-sts-aws-iprange-detect/
#dev_classmethod #Google_Cloud_GCP #Storage_Transfer_Service
Cloud Composer で Storage Transfer Service の転送ジョブのステータスを監視したい
https://dev.classmethod.jp/articles/cloud-composer-storage-transfer-service-status-sensor/
#dev_classmethod #Google_Cloud_GCP #Cloud_Composer #Storage_Transfer_Service #BigQuery #Apache_Airflow
Cloud Composer で Dataplex のデータリネージ統合を試してみた
https://dev.classmethod.jp/articles/cloud-composer-dataplex/
#dev_classmethod #Google_Cloud_GCP #Cloud_Composer #BigQuery #Google_Cloud_Storage #Storage_Transfer_Service #Apache_Airflow
Storage Transfer ServiceにAmazon S3からのデータ転送をより安くするオプションが追加されました
https://dev.classmethod.jp/articles/gcp-storage-trasnfer-service-managed-private-network/
#dev_classmethod #Google_Cloud_GCP #Storage_Transfer_Service #Google_Cloud_Storage #Amazon_S3
DevelopersIO
