https://yaooqinn.github.io/zh/tags/streaming/ Recent content in Streaming on Kent Yao Hugo -- 0.157.0 zh-cn Sat, 28 Mar 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/spark-declarative-pipelines/ Sat, 28 Mar 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/spark-declarative-pipelines/ Apache Spark 4.1 引入了 Spark Declarative Pipelines（SDP），一个全新的声明式数据管道框架。作为 Spark PMC 成员，我来解读这个框架的设计哲学、核心概念，以及它如何改变数据工程的开发方式。