曙海教学优势
本课程面向企事业项目实际需要,秉承二十一年积累的教学品质,Hadoop技术内幕:深入解析MapReduce架构设计与实现原理培训课程以项目实现为导向,老师将会与您分享设计的全流程以及工具的综合使用技巧、经验。线上/线下/上门皆可,Hadoop技术内幕:深入解析MapReduce架构设计与实现原理培训课程专家,课程可定制,热线:4008699035。
大批企业和曙海
建立了良好的合作关系,合作企业30万+。曙海的课程培养了大批受企业欢迎的工程师。曙海的课程在业内有着响亮的知名度。
Hadoop技术内幕:深入解析MapReduce架构设计与实现原理培训课程
课程大纲:
第一部分 基础篇
第1章 阅读源代码前的准备
1.1 准备源代码学习环境
1.2 获取Hadoop源代码
1.3 搭建Hadoop源代码阅读环境
1.4 Hadoop源代码组织结构
1.5 Hadoop初体验
1.5.3 Hadoop Eclipse插件介绍
1.6 编译及调试Hadoop源代码
第2章 MapReduce设计理念与基本架构
2.1 Hadoop发展史
2.2 Hadoop MapReduce设计目标
2.3 MapReduce编程模型概述
2.4 Hadoop基本架构
2.5 Hadoop MapReduce作业的生命周期
第二部分 MapReduce编程模型篇
第3章 MapReduce编程模型
3.1 MapReduce编程模型概述
3.2 MapReduce API基本概念
3.3 Java API解析
3.4 非Java API解析
3.5 Hadoop工作流
第三部分 MapReduce核心设计篇
第4章 Hadoop RPC框架解析
4.1 Hadoop RPC框架概述
4.2 Java基础知识
4.3 Hadoop RPC基本框架分析
4.4 MapReduce通信协议分析
第5章 作业提交与初始化过程分析
5.1 作业提交与初始化概述
5.2 作业提交过程详解
5.3 作业初始化过程详解
5.4 Hadoop DistributedCache原理分析
第6章 JobTracker内部实现剖析
6.1 JobTracker概述
6.2 JobTracker启动过程分析
6.3 心跳接收与应答
6.4 Job和Task运行时信息维护
6.5 容错机制
6.6 任务推测执行原理
6.7 Hadoop资源管理
第7章 TaskTracker内部实现剖析
7.1 TaskTracker概述
7.2 TaskTracker启动过程分析
7.3 心跳机制
7.4 TaskTracker行为分析
7.5 作业目录管理
7.6 启动新任务
第8章 Task运行过程分析
8.1 Task运行过程概述
8.2 基本数据结构和算法
8.3 Map Task内部实现
8.4 Reduce Task内部实现
8.5 MapReduce Task优化
第四部分 MapReduce高级篇
第9章 Hadoop性能调优
9.1 概述
9.2 从管理员角度进行调优
9.3 从用户角度进行调优
第10章 Hadoop多用户作业调度器
10.1 多用户调度器产生背景
10.2 HOD
10.3 Hadoop队列管理机制
10.4 Capacity Scheduler实现
10.5 Fair Scheduler实现
10.6 其他Hadoop调度器介绍
第11章 Hadoop安全机制
11.1 Hadoop安全机制概述
11.2 基础知识
11.3 Hadoop安全机制实现
11.4 应用场景总结
第12章 下一代MapReduce框架
12.1 第一代MapReduce框架的局限性
12.2 下一代MapReduce框架概述
12.3 Apache YARN
12.4 Facebook Corona
12.5 Apache Mesos