汀的知识碎片
Search
Search
Dark mode
Light mode
文章导航
Tag: 调度系统
6 items with this tag.
Feb 27, 2026
01 任务提交全链路：从用户代码到 RDD 动作的触发细节
Spark
调度系统
任务提交
源码分析
Feb 27, 2026
02 DAGScheduler 核心逻辑：Stage 划分算法与逻辑计划生成
Spark
调度系统
DAGScheduler
Stage
源码分析
Feb 27, 2026
03 TaskScheduler 架构解析：任务编排与调度后端的协作机制
Spark
调度系统
TaskScheduler
TaskSetManager
源码分析
Feb 27, 2026
04 调度后端（SchedulerBackend）：Spark 与资源管理器（YARN/K8s）的对接细节
Spark
调度系统
SchedulerBackend
YARN
Kubernetes
源码分析
Feb 27, 2026
06 Task 运行生命周期：从 TaskSetManager 分发到 Executor 端执行
Spark
Task
TaskSetManager
Executor
调度系统
TaskRunner
Feb 27, 2026
08 推测执行（Speculative Execution）：分布式环境下长尾任务的自动修复机制
Spark
推测执行
长尾任务
TaskSetManager
调度系统