Metrics on Kent Yao https://yaooqinn.github.io/zh/tags/metrics/ Recent content in Metrics on Kent Yao Hugo -- 0.157.0 zh-cn Thu, 02 Apr 2026 00:00:00 +0000 深入 Spark SQL Metrics（第六部分）：实战——TPC-DS q99 的 Gluten 指标全解读 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part6-in-action/ Thu, 02 Apr 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part6-in-action/ SQL Metrics 系列第六部分。以 TPC-DS q99（SF10000，Gluten/Velox）为例，逐算子解读每个指标，展示如何从指标中读懂查询执行的全貌。 深入 Spark SQL Metrics（第五部分）：Gluten 指标收集的内部机制 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part5-gluten-internals/ Thu, 02 Apr 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part5-gluten-internals/ SQL Metrics 系列第五部分。Gluten 如何将 Substrait 计划节点映射到 Velox 算子、跨管道聚合指标、遍历 MetricsUpdaterTree，以及聚合子阶段和 Shuffle 指标的内部机制。 深入 Spark SQL Metrics（第二部分）：内部机制与 AQE 的运行时决策 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part2-internals/ Wed, 01 Apr 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part2-internals/ SQL Metrics 三部曲的第二部分。指标如何从任务流向Driver，以及自适应查询执行（AQE）如何利用 Shuffle 统计信息在运行时重写查询计划。 深入 Spark SQL Metrics（第三部分）：扩展 API、UI 渲染与 REST API https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part3-extension-api/ Wed, 01 Apr 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part3-extension-api/ SQL Metrics 三部曲的第三部分。如何通过 DataSource V2 API 扩展自定义指标、UI 如何渲染指标、以及如何通过 REST API 编程查询指标。 深入 Spark SQL Metrics（第四部分）：Gluten 如何扩展指标系统 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part4-gluten/ Wed, 01 Apr 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/sql-metrics-part4-gluten/ SQL Metrics 系列的第四部分。Apache Gluten 如何将 Velox/ClickHouse 原生指标桥接回 Spark SQL Metrics 框架，添加了 60+ 个原生 Spark 没有的指标。 深入 Spark SQL Metrics（第一部分）：类型、完整参考和含义 https://yaooqinn.github.io/zh/posts/spark/understanding-sql-metrics/ Wed, 01 Apr 2026 00:00:00 +0000 https://yaooqinn.github.io/zh/posts/spark/understanding-sql-metrics/ Spark SQL Metrics 三部曲的第一部分。涵盖 5 种指标类型、100+ 指标的完整参考，以及如何正确解读 Spark UI 中的指标数字。