论坛元老
- 威望
- 42
- 贡献
- 67
- 热心值
- 0
- 金币
- 10808
- 注册时间
- 2020-8-31
|
课程介绍：
本课程主要介绍Spark的架构与工作机制。课程中将对Spark的内部模块结构进行详细的阐述，同时对Spark内部调度进行讲解，完成对Spark核心工作机制的剖析。
课程背景：
Spark架构整体包含Master，Worker，Driver，Executor等组件，在集群上完成大规模数据处理。Spark通过一定的调度机制，将作业并行化运行。
核心内容：
1.Spark架构
2.Spark作业与任务
3.Spark工作机制
4.Spark Application调度
5.Spark Job调度
软件环境：Intellij，Linux，Scala
是否提供资料：是
课程等级：初级
适合人群：
数据工程师，数据分析师
课程列表：
1 Spark的架构 05:41
本课时介绍Spark的架构，对Spark架构中各个组件，例如Master，Worker等进行剖析讲解。
2 Spark的工作机制 06:37
本课时介绍Spark的工作机制。对Spark作业中的Application，Job等进行讲解，详细剖析Spark作业的运行流程。
3 Spark的调度 09:22
本课时介绍Spark的调度。 课时将会针对Spark中各种不同的调度进行深度的分析讲解。
|
|
发表于 2019-3-23 21:47
