Claude Codeで爆速開発!S3→BigQueryデータ転送システムを1時間で設計した話 - Qiita

はじめに 開発現場で、データ分析について、「S3のデータを定期的にBigQueryに転送したい」という要件は珍しくありません。しかし、いざ実装しようとすると、以下のような課題に直面します: インフラ設計(VPC、ECS、IAM...)が複雑 Terraformのベストプ...

Qiita
ZOZOのデータマート設計と運用の工夫 - Qiita

本エントリは「ZOZO Advent Calendar 2025」の16日目の記事です。 はじめに こんにちは、株式会社ZOZOの髙木です。データ推進ブロックでリーダーをしており、全社のデータガバナンス・データマネジメントに関連する課題解決を担当しています。 ZO...

Qiita

Tối ưu hóa xử lý dữ liệu JSON trong BigQuery với Forge - nền tảng SaaS tự động hóa ELT, giúp đội ngũ engineering và analyst quản lý dữ liệu phi cấu trúc từ MongoDB, Firestore, các API... Forge không chỉ tự động hóa mô hình dữ liệu mà còn theo dõi thay đổi schema, đảm bảo tính toàn vẹn pipeline. Giải pháp hoàn hảo cho vấn đề "last mile" trong analytics. #SaaS #BigQuery #DataEngineering #PhânTíchDữLiệu #QuảnLýDữLiệu

https://www.reddit.com/r/SaaS/comments/1pn4nhr/new_saas_product_which_automates_j

BigQueryのSQLいろいろ (5) NULL・その他の型 | Wantedly Engineer Blog by @qnighy #BigQuery https://www.wantedly.com/companies/wantedly/post_articles/1020804

今回はNULLの挙動を追いました。
気に入ったらリアクション・拡散お願いします。

BigQueryのSQLいろいろ (5) NULL・その他の型 | Wantedly Engineer Blog

BigQueryのSQLについて、ドキュメントを読んだり実験したりしながら挙動を解き明かしていこうと思います。第5回はNULLについて紹介します。ここまでで扱わなかったその他の型についても触れま...

BigQueryのSQLいろいろ (4) ARRAY型・STRUCT型 | Wantedly Engineer Blog by @qnighy #BigQuery https://www.wantedly.com/companies/wantedly/post_articles/1020507

ARRAY保存時の奇妙な制約や、STRUCTのあまり知られていない振る舞いなどについて書きました。
気に入ったらリアクション・拡散をお願いします。

BigQueryのSQLいろいろ (4) ARRAY型・STRUCT型 | Wantedly Engineer Blog

BigQueryのSQLについて、ドキュメントを読んだり実験したりしながら挙動を解き明かしていこうと思います。第4回はARRAYとSTRUCTについて紹介します。今回扱う型ARRAYSTRUCT...

#BigQuery sure hit different when it was free as a Googler. This was my bill after experimenting with it for 2 hours using a Google-provided public dataset. I guess this means I'm team #ClickHouse now?

🤯 Zero-Copy Data Sharing: What nobody told you (yet)

👉 Since #SAP Business Data Cloud arrived earlier this year we have spoken about "zero-copy" data integration endlessly. SAP data immediately accessible in #Databricks, #BigQuery, #Snowflake, #Fabric without data teams losing any sleep?

Great - but...

⚠️ Advanced access control has to be applied (again) on the consumer system side.

No deal breaker in the end as on Databricks we can easily code all necessary access control.

#Scientometrics & #Bibliometrics researchers!

Did you know the #OpenAIREGraph dataset is publicly accessible on #GoogleCloud #BigQuery, with full tutorials & use-cases available?
Ready for you to explore, analyse, and discover insights!

✅ Query millions of publications, datasets, software, projects & their relationships
✅ Build custom analytics
✅ Track research impact & collaboration networks
 
Visit https://graph.openaire.eu/docs/cloud-access/

#OpenScience #OpenData #BigQuery #ScholarlyComms #ResearchMetrics

#ITByte: Amazon #Redshift and Google #BigQuery are two of the most popular cloud #Data warehouses: two comparable fully managed petabyte-scale cloud data warehouses.

Here is a short comparison between the two.

https://knowledgezone.co.in/posts/Cloud-Datawarehouse--Amazon-RedShift-vs-Google-BigQuery-637f21808e87f5ff4977d579