企业级数据平台构建:架构与实现》——2.4.8 使用场景

网友投稿 458 2022-05-29

《企业级大数据平台构建:架构与实现》——2.4.8 使用场景

2.4.8 使用场景

基于YARN扩展性强、可靠性强、支持多用户和支持多应用的特点,它非常适合于支撑企业内部构建统一的资源共享型大数据平台。借助YARN我们可以真正实现通过一套资源调度系统集成所有应用组件的单一大集群架构。

1.?Spark任务调度

Spark是一款分布式内存计算框架,在下一小节会详细介绍它。Spark可以将自身的任务调度部分委托YARN进行管理,从而实现集群资源高效整合与利用。

2.?MapReduce任务调度

同样的,MapReduce任务的整个生命周期都可以借助YARN进行管理,包括任务的分配、资源的调度,等等。

数据平台 大数据

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:etcd — Overview
下一篇:【资料下载】2018中国区生态伙伴大会 - 云生态伙伴分论坛演讲材料(下)
相关文章