🌘 「串流 vs. 批次處理」的二分法是錯誤的，而且令人困惑
➤ 重新思考資料處理方式：從二分法到互補性
✤ https://www.morling.dev/blog/streaming-vs-batch-wrong-dichotomy/
Gunnar Morling 在部落格文章中指出，將資料處理方式劃分為「串流」或「批次處理」是一種誤導，因為許多串流系統實際上也會使用批次處理來提升效能。他認為更重要的區別在於「拉取」與「推送」機制，並強調串流處理的優勢在於它能提供即時且完整的資料視圖，儘管它可能增加複雜性。作者鼓勵讀者親自嘗試串流處理，並認為其優勢一旦體驗過便難以割捨。最後，他指出拉取與推送並非互斥，而是可以互補的兩種方式。
+ 這篇文章讓我意識到我一直以來對串流處理的理解可能不夠深入，需要重新評估我的資料架構設計。
+ 作者的觀點很有意思，我同意數據的新鮮度對於某些應用場景來說至關重要，值得嘗試串流處理。
#軟體工程 #資料串流 #批次處理 #技術趨勢

🌘 Kappa 架構成為主流，取代 Lambda 架構
➤ 為什麼單一即時管線比分離批次和即時層的 Lambda 架構更適合？
https://www.kai-waehner.de/blog/2021/09/23/real-time-kappa-architecture-mainstream-replacing-batch-lambda/
本文探討為什麼單一即時管線，即 Kappa 架構，比分離批次和即時層的 Lambda 架構更適合。文章引用了迪士尼、Shopify、Uber 和 Twitter 等公司的實際案例，探討了 Kappa 架構的優點，同時也展示了批次處理如何在不需要 Lambda 的情況下積極地融入這個討論中。文章還介紹了現代企業架構的特點，包括彈性、自動化、真正的解耦和即時能力等。此外，文章還討論了 Lambda 架構的問題，並提供了兩種 Lambda 架構的實現方式。
+ 這篇文章很好地解釋了 Kappa 架構和 Lambda 架構之間的區別，並提供了實際案例來支持作
#Kappa 架構 #Lambda 架構 #即時數據處理 #批次處理 #Apache Kafka