一、 培训时间

         2019年1月18日-12月20日  （珠海） （17日中午12点至19点报到）

二、课程费用

培训费5800元/人（含培训、教材、专家、场地、证书、学习用品费等），需要住宿学员请提前通知，可统一安排，费用自理。

注：参加相关培训并通过考试的学员，可以获得：

1.工业和信息化部颁发的《Spark大数据处理高级工程师证书》该证书可作为专业技术人员职业能力考核的证明，以及专业技术人员岗位聘用、任职、定级和晋升职务的重要依据。

注：请学员带一寸彩照2张（背面注明姓名）、身份证复印件一张。

三、课程简述

本课程基于最新的spark 2讲解，内容涵盖了企业中大数据处理的四大场景：

离线批处理、流式计算、SQL处理、机器学习。Spark是一个广泛应用的分布式内存计算模型，旨在大幅提升的迭代算法和交互低延迟数据挖掘的性能。Spark更适合于迭代运算比较多的ML和DM运算，one stack rule them all！Spark号称一个平台可以适合所有的应用，如SparkSql可以处理结构化数据，SparkStreaming旨在提供实时的计算能力，而SparkMllib则提供了丰富机器学习算法库。Spark三天课程注重原理、丰富的案例和大型互联网实战详解。

四、课程目的

1) 深入理解Spark计算原理和编程模型，掌握Spark Core和SparkSql、SparkStreaming等上层系统的结合方式

2) 深入掌握SparkCore、SparkSql使用调优技巧

3) 深入掌握SparkStreaming和SparkMllib使用和调优技巧

4) 深入掌握Spark和其他组件的结合使用

5) 了解Spark与MapReduce分布式计算模型的区别和各自适合的使用场景。

6) 能够使用java、python和scala进行spark应用开发（如果要讲解三种语言开发spark，工作量会非常大，建议只讲解一种(可以根据企业的要求来定，）

7) 熟练使用spark、spark streaming、spark SQL、spark mllib

8) 深入了解spark在大型互联网的架构和使用场景

五、培训对象

1)已经熟练掌握Sparkapi并希望深入掌握性能调优方法的开发人员

2)希望使用SparkSql进行高效结构化数据处理的开发人员

3)希望使用SparkStreaming提高数据处理实效性的开发人员

4）技术经理、架构师、产品经理

六、培训大纲（3天课程）

讲师介绍

周老师：基地金牌讲师：腾讯大数据资深专家，6年以上大数据开发经验，熟悉hadoop 以及spark 生态系统，负责大数据平台及机器学习平台的研发及运营工作，对自然语言处理、机器学习、用户画像建模、个性化推荐等技术有深厚的积累。2011年在移动互联网公司做大数据开发，负责hadoop、spark的基础平台开发。2015年加入前3的手机厂商，负责hadoop、spark运维以及相关和个性化推荐的工作。实现spark 和hbase  从无到有的过程。2016至今在腾讯从事大数据开发工作，负责平台的大数据平台研发，主导了内部核心画像系统，以及自助分析平台。

李老师：一线技术大咖，曾任职华为、腾讯大数据高级工程师，现就职于阿里巴巴，从事分布式sql技术研究和开发，具有6年以上大数据平台组件开发和调优经验，对Hadoop、Hive、Spark、Presto、Hbase、Kafka等开源系统有深度研究和开发。2010年毕业于北京航空航天大学，获信息系统专业硕士学位，随后加入华为，从事nosql技术研究，带领团队开发优化Nosql数据库内核，并从事行列混合存储的MPP系统研究和开发，并对spark内核进行优化，减少shuffle开销，随后主持华为终端数据平台部运营大数据平台建设。2016年加入腾讯数据平台部，从事基于HDFS的实时多维分析引擎开发。2018年加入阿里巴巴。

企业内训

聆听您的需求，定制属于您的专属课程

由企业客户培训负责人与我公司课程负责人对接联系

1、 需求调研——了解企业培训需求

2、 培训项目确认阶段——确定培训项目具体条款、培训交付、签订内训协议书

3、 培训需求分析阶段——制定培训计划、定制培训内容

4、 培训课程准备阶段——确认培训大纲、培训方式，安排培训相关行政事务

5、 培训课程进行阶段——与培训组织者共同对培训现场进行监督、填写培训评估表

6、 培训评估跟进阶段——课程反馈：1、参加者测试结果 2、培训效果评估报告

【关于本次主办方】

 数环云创（北京）科技有限公司是一家致力于大数据行业一体化解决方案研究和行业应用平台开发的高科技公司，也是国内IT领域最具专业的信息化培训与项目咨询、解决方案服务提供商。数环云创旨在为各行业客户提供标准化、通用化的大数据解决方案。也是国内首家IT新技术领域的领航者。专注于云计算、大数据、物网、移动互联网的培训，也是国内第一家开展Hadoop、云计算的培训机构。

 数环云创长期致力于企业信息化培训与项目咨询、解决方案服务。为客户量身定做培训计划，提供满足企业整体培训的解决方案。目前已成功举办300多次企业公开课培训，50多次企业内训。现已成为国内最大的云计算、大数据人才培养基地。

 数环云创拥有一批来自一线互联网行业（包括阿里、百度、腾讯、IBM、微软、Teradata等）知名的技术专家和管理人员组成的培训讲师团队，分别在高校、金融银行业、电信业、互联网行业、医疗、电商、**交通等领域有丰富的实战经验。是工信部权威机构的合作单位，是Hadoop、云计算大会特邀合作伙伴。