求知 文章 文库 Lib 视频 iPerson 课程 认证 咨询 工具 讲座 Model Center   Code  
会员   
 
 
 
开班计划 | 技术学院 | 管理学院 | 嵌入式学院 | 机械 | 军工学院 | 定向培养 | 专家指导  
 电话 English
成功案例   品质保证
 
   
成功案例
中航信 数据湖架构原理与应
某医疗磁 数据采集与处理
某科技公 大数据(Hadoo
诺基亚 Python基础
天津电子 Elasticse
中国电信 数据仓库与数据挖掘
某航天科 MySQL性能优化

相关课程  
并发、大容量、高性能数据库
高级数据库架构设计师
Hadoop原理与实践
HBase原理与高级应用
Oracle 数据仓库
数据仓库和数据挖掘
Oracle数据库开发与管理
 

全部课程 >数据库与大数据  
Hadoop原理与高级实践
9989 次浏览  11 次
Jack老师
Hadoop原理与高级实践 。
 
时间地点:上海、北京、深圳 根据报名开班
课程费用:5000元/人
报线下课
企业内训:可以根据企业需求,定制内训,详见 内训学习手册


认证方式:
培训前了解能力模型。
培训后进行能力评测:
  • 在线考试
  • 能力分析,给出学习建议
  • 合格者颁发证书,作为职业技能资格证明


    培训目标:

    本次课程以实际的演练(环境部署,程序开发)为主,分享大规模Hadoop应用的一线最有效实用经验,实践与理论相结合,让学员能够对Hadoop生态系统有一个清晰明了的认识,理解Hadoop系统适用的场景,掌握MapReduce与Hive的中高级应用开发技能,快速高效搭建稳定可靠的Hadoop集群,满足生产环境的标准。
    课程内容的分为4个部分:

    1. 进入Hadoop的精彩世界,介绍Hadoop生态系统的各个组成模块与适用场景。
    2. Hadoop部署,编程与管理,讲解演示在生产环境中选用和配置服务器需要注意的事项,介绍HDFS编程的Java API使用。
    3. MapReduce编程:讲解演示MapReduce的中高级应用开发技能。
    4. Hive与HBase编程:根据实际例子讲解Hive的使用与UDF的开发,以及如何通过JAVA编写HBase应用。

    培训对象:程序员、架构师、运维工程师、数据库开发人员、后台开发人员。
    学员基础:最好了解Java编程,了解Linux基础。
    授课方式: 定制课程 + 案例讲解 + 小组讨论,60%案例讲解,40%实践演练
    培训内容:2天
    进入Hadoop的精彩世界
  • 文件存储-HDFS
  • HDFS-工作原理
  • 数据计算MapReduce
  • MapReduce工作原理
  • SQL分析-Hive
  • 海量实时读写-HBase
  • 工作流调度-Ooize
  • 分布式协调系统--Zookeeper
  • Hadoop部署与编程
  • Hadoop版本介绍与选择
  • Hadoop部署实践
    • Hadoop安装文件构成与配置体系
    • 机器硬件建议配置
    • 系统环境配置
    • 基本参数配置与说明
    • 进程分布规划与启动
  • Hadoop基本使用操作
    • HDFS
    • 权限
    • MapReduce
  • HDFS编程
    • 开发环境准备
    • 读文件
    • 写文件
  • Hadoop系统容灾策略
  • Hadoop资源调度策略
  • Hadoop安全
  • Hadoop系统监控与报警策略
  • MapReduce编程
  • MapReduce的定义与工作机制
  • MapReduce与分布式计算
  • 编程实战
    • MapReduce程序编写
    • 基于MapReduce的Sort操作
    • 基于MapReduce的Join操作
    • Hadoop多语言编程框架Streaming
  • 代码调试
    • 运行日志
  • Hive与HBase编程
  • Hive环境部署与搭建
  • Hive工作机制
  • Hive语法与实践
  • 数据压缩选择
    • gzip
    • bz2
    • lzo
    • rcfile
  • HBase编程示例
  • HBase系统架构
  • HBase性能测试
  • Hadoop系统管理
  • Hadoop系统容灾策略
  • Hadoop资源调度策略
  • Hadoop高级配置参数
  • Hadoop安全
  • Hadoop系统监控与报警策略
  •  
    9989 次浏览  11 次
    其他人还看了课程
    Excel高级数据处理  2542 次浏览
    NoSQL数据库(原理、应用、最佳实践)  4754 次浏览
    Hadoop与NoSQL最佳实践  1792 次浏览
    数据挖掘应用(电信行业)  2321 次浏览
    数据仓库多维建模方法与应用  2613 次浏览
    复杂数据库分析、设计与建模  2791 次浏览
    定制内训


    咨询服务:大数据技术平台构建与应用
    咨询目标 帮助客户设计、规划大数据架构
    帮助客户建立大数据技术平台,
    帮助客户建立大数据分析模型
    咨询范围 大数据架构:数据结构模型,存储空间,数据分析模型
    大数据技术平台:分布式存储与计算平台,采集工具,分析工具
    大数据分析应用案例:分析模型,结果报告
    咨询方式 调查分析客户当前的数据资源和使用情况。
    为客户设计大数据架构
    搭建大数据技术平台
    建立大数据分析应用示例。
    详情咨询:010-62670969, zhgx@uml.net.cn
    课程计划
    软件开发过程中的项目管理 10-17[北京]
    软件架构设计方法、案例与实践 10-19[北京]
    数据分析、AI算法与ChatGPT4 10-31[北京]
    微服务架构设计与实践 11-9[北京]
    业务建模与领域驱动设计 11-15[北京]
    基于模型的数据治理与数据中台 11-27[北京]