基于Hadoop大数据平台数据治理-火龙果软件-UML软件工程组织

咨询

会员

|

|

|

嵌入式学院

|

|

|

|

成功案例

中航信数据湖架构原理与应

某医疗磁数据采集与处理

某科技公大数据（Hadoo

诺基亚 Python基础

天津电子 Elasticse

中国电信数据仓库与数据挖掘

某航天科 MySQL性能优化

相关课程

并发、大容量、高性能数据库

高级数据库架构设计师

Hadoop原理与实践

HBase原理与高级应用

Oracle 数据仓库

数据仓库和数据挖掘

Oracle数据库开发与管理

全部课程 >大数据

基于Hadoop大数据平台数据治理

3101 次浏览

42 次


Gavin Liu
目前就职于国外著名的大数据公司

时间地点： 北京上海深圳根据报名开班

课程费用：5900/人

企业内训：可以根据企业需求,定制内训,详见内训学习手册

认证方式：
培训前了解能力模型。
培训后进行能力评测：

在线考试

能力分析，给出学习建议

合格者颁发证书，作为职业技能资格证明

本课程关注如何针对Hadoop大数据平台进行数据治理，以便更好地满足应用需求。

培训目标

数据治理范围

大数据在国内的运用

大数据生态系统介绍

统一元数据管理

数据生命周期管理

大数据平台安全

数据湖

数据分发系统

Think big基于Hadoop平台实战

大数据BI展现工具

互联网大数案例分享

培训对象：大数据架构师，大数据运维工程师

学员基础：了解大数据平台技术架构，最好具有一定运维经验

授课方式： 定制课程 + 案例讲解 + 小组讨论，60%案例讲解，40%实践演练

培训内容：2天

数据治理范围	数据治理面临的挑战数据的多元化数据的复杂性数据的完整性数据生命周期管理统一元数据管理数据集成方法数据安全数据湖架构基于大数据平台的数据建模 RMDBS数据的增量实时同步采集
大数据在国内的运用	大数据在国内的使用介绍离线计算框架介绍流式计算框架介绍内存计算框架介绍内存流式计算介绍大数据实时请求框架介绍大数据在证券的案例介绍大数据在银行的案例介绍
大数据生态系统介绍	分布式存储—HDFS 分布式并行计算—MapReduce 基于Hadoop的数据仓库—Hive 统一元数据管理—Hcatlog 集群管理工具—ambari 工作流工具—Oozie 数据的并行采集—Flume MapReduce脚本工具—Pig 与关系型数据库之间的数据迁移—Sqoop 资源管理平台—Yarn 数据生命周期管理—Falcon 数据挖掘算法—Mahout 分布式统一服务—Zookeeper Hadoop安全工具—Knox 流式计算框架—Storm 内存计算框架—Spark 数据挖掘框架—Mahout、Mllib和Graphx
统一元数据管理	元数据概念 Hadoop平台元数据处理面临的问题 Hcatalog介绍 Hcatlog原理和架构解析 Hive与Hcatlog关系 Hcatlog解决那些问题 Hcatlog实战元数据注册机制基于Hadoop平台元数据处理方案
数据生命周期管理	数据质量数据标准数据生命周期管理的重要性数据生命周期的概念开源Falcon解决那些问题< Falcon架构和原理 Falcon实战 Falcon+HDFS、Hive实战 Falcon+Oozie实战
大数据平台安全	Hadoop平台安全介绍 HDFS2.0的ACLS介绍 Hive安全介绍 Hbase基于namespace的安全介绍 Hadoop访问安全控制Knox Knox的架构和原理 Knox与Kerberos介绍 Ranger安全工具介绍 Knox+Ranger整合控制Hadoop平台的安全基于Hadoop平台的数据加密
数据湖	数据湖概念数据湖解决那些问题数据湖架构数据的整合数据的landing zone功能离线数据管理流式数据管理 RDBMS全量和增量数据实时采集 Databus框架介绍 Databus功能介绍 Databus解决那些问题
数据分发系统	NiFi的使用场景 NiFi架构和原理 HDFS+NiFi实战使用Nifi来跟踪数据分发
Think big基于Hadoop平台实战	怎么快速迭代在Hadoop平台开发 Hadoop平台设施的方法论 2个月快速基于Hadoop平台开发步骤 Hadoop平台开发的难点 Hadoop平台开的注意点 Hadoop平台设施的流程
大数据BI展现工具	Pentaho开源大数据BI工具介绍 Talend开源大数据BI工具介绍百度Echarts插件介绍
互联网大数案例分享	淘宝大数据平台深度解析基于大数据平台的实时营销架构淘宝大数据推荐架构介绍大数据实时分析架构

3101 次浏览

42 次

其他人还看了课程

大数据落地技术系列课程 2949 次浏览

数据治理、数据架构及数据标准 4976 次浏览

企业级Hadoop大数据处理最佳实践网络课 1836 次浏览

Hadoop架构与大数据开发应用实践 2246 次浏览

数据中台架构与建设 5563 次浏览

大数据平台搭建与高性能计算 6424 次浏览

	咨询服务：数据库设计与性能优化

咨询目标	对客户的数据库进行性能评价，设计优化，管理优化
咨询范围	数据库性能评价，数据库结构优化，数据访问SQL优化。
咨询方式	现有数据库调查，问题诊断，性能评价。对数据库进行逻辑结构优化，对数据库进行访问SQL优化。建立数据库运行监控平台。运行监控与优化方法指导。
成功案例	建设银行，中国农业银行，中国工商银行，中航信

详情咨询：010-62670969， zhgx@uml.net.cn

课程计划

SysML和EA系统设计与建模 7-26[特惠]

Python、数据分析与机器学习 8-23[特惠]

软件架构设计方法、案例实践 8-23[特惠]

嵌入式软件架构设计 8-22[线上]

Linux内核编程及设备驱动 7-25[北京]