大数据Hadoop与Spark技术架构与应用实战_课程体系

根据国务院“互联网+”行动计划战略布局，为响应工业和信息化部培养云计算和大数据高端人才的号召,中国信息化教育推广中心特推出了大数据技术架构及应用实战课程培训班，通过专业的大数据Hadoop与Spark技术架构体系与业界真实案例来全面提升大数据工程师、开发设计人员的工作水平，旨在培养专业的大数据Hadoop与Spark技术架构专家，更好地服务于各个行业的大数据项目开发和落地实施。现将相关事宜通知如下：

一、培训特色

课程培训业界最流行、应用最广泛的Hadoop与Spark大数据技术体系。强化大数据平台的分布式集群架构和核心关键技术实现、大数据应用项目开发和大数据集群运维实践、以及Hadoop与Spark大数据项目全过程沙盘模拟实战。

通过一个完整的大数据开发项目及一组实际项目训练案例，完全覆盖Hadoop与Spark生态系统平台的应用开发与运维实践。课堂实践项目以项目小组的形式进行沙盘实操练习，重点强化理解Hadoop与Spark大数据项目各个阶段的工作重点，同时掌握作为大数据项目管理者的基本思维素养。

本课程的授课师资都是有着多年在一线从事Hadoop与Spark大数据项目的资深讲师，采用原理技术剖析和实战案例相结合的方式开展互动教学、强化以建立大数据项目解决方案为主体的技术讨论与咨询，在学习的同时促进讲师学员之间的交流，让每个学员都能在课程培训过程中学到实实在在的大数据技术知识，具备实际项目动手开发实践与部署运维能力。授课过程中学员可将具体工作中遇到的实际问题拿出来，讲师会根据学员的实际情况微调授课内容，并给出一定的时间让学员上台发言，由讲师带着全部学员积极讨论，现场剖析问题的症结，规划出可行的解决方案。

二、培训目标

1. 深刻理解在“互联网+”时代下大数据的产生背景、发展历程和演化趋势，洞察大数据的潜在价值，结合业界市场需求和国内外最新的大数据技术潮流，掌握大数据项目解决方案以及业界大数据应用案例，从而为企业在大数据项目中的技术选型及技术架构设计提供决策参考，帮助学员为企业在利用大数据方面体现出自身价值。

2. 全面掌握业界最流行的Hadoop与Spark大数据技术体系，掌握包括大数据采集技术、大数据分布式存储技术、NoSQL与NewSQL分布式数据库技术、大数据仓库与统计机器学习技术、大数据分析挖掘与商业智能（BI）技术、大数据离线处理技术、Storm流式大数据处理技术、基于内存计算的大数据实时处理技术，以及大数据管理技术的原理知识和应用实战。

3. 深入理解大数据平台技术架构和使用场景，能娴熟地运用Hadoop与Spark大数据技术体系规划解决方案满足实际项目需求，部署符合生产环境要求的Hadoop大数据集群，熟练地掌握基于Hadoop与Spark大数据平台进行应用程序开发、集群运维管理和性能调优技巧，并通过具体的实训项目贯穿整个课程进行实战锻炼。

三、培训师资

钟老师现任职于中科院某研究所，高级工程师，副高职称，项目组负责人，博士毕业于中国科学院计算技术研究所，获工学博士学位（计算机系统结构方向）。中培教育的大数据、云计算、移动互联网系列课程建设与教学专家。近六年来带领团队主要从事大数据与云计算技术项目的研发与IT项目管理工作，主要精通Hadoop平台技术，基于内存计算的实时处理技术（Spark），分布式文件系统技术，MapReduce与Yarn分布式并行计算技术，大数据分布式采集技术（Flume-NG），大数据分布式消息系统技术（Kafka），KVS键值存储系统技术，大数据管理与分析处理技术，NoSQL与NewSQL分布式数据库（HBase、Cassandra、MongoDB），内存数据库技术（Redis、Membase/Memcached），大数据挖掘与机器学习技术（Mahout），大数据仓库技术（HIVE），实时数据仓库技术（Shark），大数据中心集群监控与运维（HUE）技术的实现细节。钟老师有着多年的企业内训和公开课培训讲师经历，主要讲授大数据平台技术、云计算、移动互联网、电子商务、IT信息软件项目管理、企业信息化规划与管理、IT战略规划与企业架构、数据中心主机规划与IDC系统运营等企业实战类培训课程。钟老师将原理技术剖析和应用实战相结合的授课风格受到广大公开课学员和企业内训学员的欢迎，钟老师已授课的企业内训客户包括：中国人寿总部、中海油信息中心、中国移动总部和若干个省级分公司、国家电网总部以及若干下属企业、中石化信息中心、中国联通、中国邮政、徽商银行、江苏南瑞集团、北京银行、燕山石化总部信息部、航天科技某院所、航天科工某院所、中石油总部信息部与若干直属企业信息部、中电集团某所、瑞中科技等五十余家国内大型国有企事业单位和民营上市公司。钟老师还讲授过百余场云计算、大数据与移动互联网公开课培训课程。

蒋德钧清华大学博士，云计算专家熟悉主流的云计算平台，并有商业与开源云计算平台的实践经验,对云计算关键技术有深刻了解和实践经验，如分布式系统、虚拟化、分布式文件系统、云存储等，参与并领导多个大型云计算项目。对大数据关键技术有深刻了解和实践经验，如NoSQL数据库、大数据处理、Hadoop、Hive、HBase、Spark等。

钱兴会大数据专家。在电信、电力、金融行业从事Java开发和架构设计的工作；资深云计算研发工程师。作为项目的主要成员和负责人参与并领导完成了多个大型复杂项目，并成功应用于行业解决方案，如海量数据匹配系统、电力行业实时数据采集分析系统等。设计并实现了实时索引系统-云搜，成功应用与某国企知识库系统。并可应用与互联网行业的搜索等应用。完成多个云计算解决方案的架构，涉及到金融行业海量数据分析与数据处理系统、海量日志分析系统、电力用电信息统计系统等，获得业界认可。

中信教育