Spark实践培训-火龙果软件

求知

文章

文库

Lib

会员

成功案例

相关课程

全部课程 >大数据

Spark实践培训

6281 次浏览

90 次

时间地点： 北京上海深圳根据报名开班

课程费用：5000元/人（学生3折），详见公开课学习手册

报线下课

报直播课

企业内训：可以根据企业需求,定制内训,详见内训学习手册

认证方式：
培训前了解能力模型。
培训后进行能力评测：

在线考试

能力分析，给出学习建议

合格者颁发证书，作为职业技能资格证明

Spark是继hadoop以来的有一个大数据分析神器,它具备了hadoop的所有功能，同时具有hadoop实现不了的功能。同样的数据在Spark上面执行需要的时间是hadoop的十分之一到一百分之一。备受行业的亲睐，也是今后大数据实时分析的主流工具。本课程将结合实例深入讲解Spark的原理及应用。

培训目标：

通过本课程学习与实践，您将了解与掌握：
1）知道Spark能做什么，不能做什么。
2）hadoop和Spark的适用场景。
3）能过熟知Spark的原理、安装Spark集群。
4）能够独立使用Spark工具来分析海量数据。
5）会使用shark来分析数据。
6）会使用Spark Streaming来处理数据。
7）一个需求过来知道在Spark上面怎么实现。

培训对象：1）大数据工程师
2）对海量数据实时分析赶兴趣的人群。
3）对hadoop感兴趣的人群
4）想从事Spark工作的人员

授课方式： 定制课程 + 案例讲解 + 小组讨论，60%案例讲解，40%实践演练

培训内容：2天

第一天上午	Scala语言介绍 Scala语言安装 Scala快速入门介绍什么Spark Spark的简介 Spark的编译 Spark的安装 Spark安装成功测试
第一天下午	Spark原理 Spark的RDD 什么是RDD RDD的种类 Tranformation Action Spark的存储级别 Cache介绍 Spark的容错原理 Lineage容错 Checkpoint容错 RDD的创建案例统计单词的个数
第二天上午	Spark调度组件 RDD graph 作业与任务调度 DAG Scheduler Task Scheduler Task细节 Job的调度流程 Broadcast variables介绍 Spark的优化 Spark的生态系统 Shark Streaming Spark与hadoop的比较 Spark的使用场景介绍
第二天下午	Spark实战一：求最大值 Spark实战二：自定义RDD(define a new RDD) Spark实战三：RDD创建的种类(Scala、HDFS、localdisk and inputformat) Spark实战四：基于Spark的日志分析

报线下课

报直播课

定制内训

6281 次浏览

90 次

其他人还看了课程

Scala编程语言 5947 次浏览

基于Hadoop大数据平台数据治理 7135 次浏览

数据治理方法与实践 4518 次浏览

大数据分析设计与建模 6440 次浏览

基于模型的数据治理与数据中台建设 16743 次浏览

大数据平台规划与设计-搜索与异地容灾 6516 次浏览

	咨询服务：数据库设计与性能优化

咨询目标	对客户的数据库进行性能评价，设计优化，管理优化
咨询范围	数据库性能评价，数据库结构优化，数据访问SQL优化。
咨询方式	现有数据库调查，问题诊断，性能评价。对数据库进行逻辑结构优化，对数据库进行访问SQL优化。建立数据库运行监控平台。运行监控与优化方法指导。
成功案例	建设银行，中国农业银行，中国工商银行，中航信

详情咨询：010-62670969， zhgx@uml.net.cn

课程计划

AI智能体开发实践 9-17厦门/10-22在线

OCSMP 认证培训 9-23[在线]

企业架构方法与实践 9-15[深圳]

UAF架构体系与实践 9-22[北京]

AI系统的测试方法与工具 9-17[北京]

AI时代的软件架构师培养 9-19[上海]

AI时代的需求分析师培养 10-20[北京]