编辑推荐:
全球Hadoop YARN专著,资深Hadoop技术专家根据**版本撰写,ChinaHadoop和51CTO等专业技术社区联袂推荐!从应用角度系统讲解YARN的基本库和组件用法、应用程序设计方法、YARN上流行的各种计算框架,以及多个类YARN的源资源管理系统。从源代码角度深分析YARN的设计理念与基本架构、各个组件的实现原理,以及各种计算框架的实现细节。
内容简介:
本书是“Hadoop技术内幕”系列的第3本书,前面两本分别对Common、HDFS和MapReduce行了深分析和讲解,赢得了极好的口碑,Hadoop领域几乎人手一册,本书则对YARN展了深的探讨,是关于YARN的专著。仍然由资深Hadoop技术专家董西成执笔,根据*的Hadoop 2.0版本撰写,权威社区ChinaHadoop鼎力推荐。本书从应用角度系统讲解了YARN的基本库和组件用法、应用程序设计方法、YARN上流行的各种计算框架(MapReduce、Tez、Storm、Spark),以及多个类YARN的源资源管理系统(Corona和Mesos);从源代码角度深分析YARN的设计理念与基本架构、各个组件的实现原理,以及各种计算框架的实现细节。全书共四部分13章:部分(第1~2章)主要介绍了如何获取、阅读和调试Hadoop的源代码,以及YARN的设计思想、基本架构和工作流程;第二部分(第3~7章)结合源代码详细剖析和讲解了YARN的第三方源库、底层通信库、服务库、事件库的基本使用和实现细节,详细讲解了YARN的应用程序设计方法,深讲解和分析了ResourceManager、资源调度器、NodeManager等组件的实现细节;第三篇(第8~10章)则对离线计算框架MapReduce、DAG计算框架Tez、实时计算框架Storm和内存计算框架Spark行了详细的讲解;第四部分(第11~13章)首先对Facebook Corona和Apache Mesos行了深讲解,然后对YARN的发展趋势行了展望。附录部分收录了YARN安装指南、YARN配置参数以及Hadoop Shell命令等非常有用的资料。
作者简介:
董西成 资深Hadoop技术实践者和研究者,对Hadoop技术有非常深刻的认识和理解,有着丰富的实践经验。曾经参与了商用Hadoop原型的研发,以及人民搜索的分布式日志系统、全网图片搜索引擎、Hadoop调度器等多个项目的设计与研发,实践经验非常丰富。对Hadoop的源代码有深的研究,能通过修改Hadoop的源代码来完成二次发和解决各种复杂的问题。热衷于分享,撰写了大量关于Hadoop的技术文章并分享在自己的博客上,由于文章技术含量高,所以非常受欢迎,这使得他在Hadoop技术圈内颇具知名度和影响力。出版有Hadoop领域负有盛名的专著:《Hadoop技术内幕:深解析MapReduce架构设计与实现原理》。