课程目标

1、掌握大数据平台体系的整体框架 ;
2、了解ETL任务调度平台在这当中的位置和价值 ;
3、学习调度引擎需要解决的问题和挑战;
4、熟悉常见开源调度引擎的特点和自建调度平台的出发点;
5、学习一种调度引擎的设计和实现方案 ;
6、学习基于该引擎的调度平台的设计方案要点

适用人群

Java开发人员 ;大数据平台运维人员 ; 对大数据平台技术有兴趣的开发人员

课程概述

   本系列课程没有选择一上来就看设计,上代码,而是先梳理一下大数据的整体技术栈,让大家能从宏观上了解ETL任务调度平台的定位和价值,然后用一种问题驱动的方式,逐步推进,在回答问题的过程中一步步的将ETL任务调度平台所涉及的设计、技术点逐一展开,让大家知道每一个方案的细节如此设计的原因。另一方面,我也会结合实际的应用场景为大家进行延伸和扩展,没有所谓“银弹”方案,每一个细节点都有它的适用场景,我会以自己的实践经验为基础,像大家介绍同一个问题的多种解决思路,这样一旦在实际工作中遇到类似问题,就知道如何对症下药。   

    让大家更容易掌握课程内容,课程讲师将根据自己多年实践与授课经验,解构所有知识点,将复杂的原理、调优方式、架构等知识技能,分解为一系列小的、相对独立的知识点,每知识点为一小节,用15到20分钟左右讲述,以便大家可以保持精力。并且,会为每个知识点总结学前的注意事项、以及学后的测试或练习。让大家在学前就能知道重点在哪里,以便可以集中注意力。而每个知识点的测试练习,将是大家检验和巩固学习成果的重要环节。  

    讲师建议大家在每小节课程开始前,认真阅读学前注意事项,然后带着问题开始学习,并在课后认真完成测试,这将帮助大家快速的、真正的掌握所学内容。  

   本课程是此系列课程的第一部分,包含三大块内容,平台定位、调度引擎内核设计与开发、系统架构Review 。

课程评价

课程讲师

左近
  • 课程数
    1
  • 学生数
    134
魅族大数据平台架构师,先后在多个创业团队负责数据平台体系的搭建,后进入阿里数据应用团队,负责自助分析平台等多个核心数据应用设计实现,目前已在阿里集团内多个BU广泛应用。在魅族负责ETL任务调度平台等多个平台产品的架构设计和核心研发。目前专注在大数据、云计算领域,探索二者的结合之道,从而更好的发挥数据的价值

最近学习用户 134人报名试学

  • zhaomengsen1

  • zhanhorse

  • shixiang0805