求知 文章 文库 Lib 视频 iProcess 课程 认证 咨询 工具 讲座 Modeler   Code  
会员   
 
 
 
开班计划 | 技术学院 | 管理学院 | 嵌入式学院 | 电子&机械 | 军工学院 | 专家指导  
 电话 English
成功案例   品质保证
 
   
成功案例
某集成电 多核体系的软件仿真
某电力能 设计模式原理及应用
南方航空 软件设计方法与实践
某跨国公 软件设计原理与实
爱立信( 软件设计
Moto 设计模式
北京 软件设计原理与实践

 
全部课程 >架构设计  
分布式存储与分布式计算
94 次浏览  1 次
Forman
曾任京东大数据技术专家。
 
地点时间: 北京12月25-26日; 上海 深圳根据报名开班
课程费用:5000元/人,详见 公开课学习手册
企业内训:可以根据企业需求,定制内训,详见 内训学习手册



认证方式:
培训前了解能力模型。
培训后进行能力评测:
  • 在线考试
  • 能力分析,给出学习建议
  • 合格者颁发证书,作为职业技能资格证明


    分布式是解决海量数据存储和高性能计算的有效机制,本课程结合实际的分布式存储引擎和分布式计算框架,讲解如何构建有效的分布式平台,并讲解分布式调度机制和分布式系统通信的消息总线。


    培训目标:
    • 分布式系统概览
    • 分布式存储架构
    • 分布式存储之HBase
    • 内存数据库:Redis
    • Redis Cluster与优化
    • 分布式计算框架
    • 分布式计算之:Spark
    • 分布式协调服务:ZooKeeper
    • 分布式消息系统Kafka
    培训对象:系统架构师,软件开发工程师
    学员基础:具有java应用开发经验,熟悉一般的数据库。
    授课方式:定制课程 + 案例讲解 + 小组讨论,60%案例讲解,40%实践演练

    培训内容:2天

    分布式系统概览 分布试系统的发展历程
    分布式系统架构框架:
    • 微服务
    • 分布式存储
    • 分布式计算
      分布式存储的需求和架构方案
      分布式计算的需求和架构方案
    分布式存储 分布式存储的特点
    分布式存储仓库模型的设计
    分布式存储需要什么功能
    分布式存储有哪些框架和实现
    分布式存储之HBase
  • HBase的底层存储架构:HDFS
  • HBase的体系架构与表结构
  • HBase的安装和配置
  • HBase的存储原理和Region分裂
  • 操作HBase
  • HBase二级索引
  • 案例分析:基于HBase的日志存储与分析
  • 内存数据库:Redis
  • 什么是Redis?Redis的功能与作用
  • 安装配置Redis与操作
  • 案例分析:Redis数据类型实战
  • Redis的消息机制与事务
  • Redis的持久化:RDB与AOF
  • Redis的主从复制与分片
  • Redis Cluster与优化
  • 什么是Redis Cluster?
  • Redis Cluster的体系架构
  • Redis Cluster安装配置
  • Redis Cluster的分布式存储原理
  • list-style-type: square;
    分布式计算 分布式计算要做的工作
    常见的分布式计算模型
    常见的分布式计算框架
    如何构建分布式计算框架。
    分布式计算之:
    Spark
  • 什么是Spark?Spark的体系架构
  • 安装与部署Spark(Standalone、Yarn)
  • 使用spark-submt和spark-shell
  • 使用Spark Core进行离线分析
  • 使用Spark Streaming进行实时分析
  • 集成Spark Streaming和Spark SQL
  • 分布式协调服务:ZooKeeper
  • 什么是ZooKeeper?及ZooKeeper的作用
  • ZooKeeper的体系架构与安装配置
  • 案例分析与实现:基于ZooKeeper的秒杀系统
  • 主从架构的单点故障问题
  • 基于ZooKeeper的HA(HBase、Spark等)
  • 分布式消息系统Kafka
  • Kafka的基本介绍
  • Kafka的原理解析
    • Kafka在ZK上的存储结构
    • Producer的处理逻辑
    • Consumer的处理逻辑
    • Broker的处理逻辑
  • Kafka的安装部署
  • Kafka的Java与Scala应用开发
  • 集成Spark与Kafka
  •  
    94 次浏览  1 次
    其他人还看了课程
    大型互联网架构设计高级实践  4270 次浏览
    EA工具和架构设计  1655 次浏览
    工作流原理与JBPM实践  1443 次浏览
    架构师之路  1503 次浏览
    软件架构设计师  57 次浏览
    大型电商分布式网站实践  1977 次浏览
    定制内训


    咨询服务:架构评估与优化
    咨询目标
    对现有的架构进行评估,发现问题,并优化
    咨询范围 业务架构,应用架构,数据架构,技术架构
    咨询方式 对现有架构进行建模,然后诊断问题,对问题进行集成分析,设计优化方案,指导团队实施优化,最终效果评估。
    成功案例 中国移动广西分公司,中国电信
    详情咨询:010-62670969, zhgx@uml.net.cn

    最新活动计划
    基于Kubernetes的DevOps实践 10-22[北京]
    需求分析管理 11-5[北京]
    软件开发过程中的质量管理实践 11-16[北京]
    人工智能,机器学习和深度学习 11-26 [北京]
    业务架构到IT架构(TOGAF9.2认证)11-28[北京]
    企业级全栈自动化测试技术 10-16 [上海]
    大数据平台架构与应用实战 11-8[上海]
    Python及数据分析 11-25 [深圳]
    某军工研究单位  嵌入式软件架构
    某银行  人工智能+Python+大数据
    中国机械集团某研究院   基于模型的系统工程(MBSE)
    航天科工某子公司  C++中级开发实战(SOUI)
    中航工业某研究所  嵌入式软件开发指南
     
     
     

     
    每天2个文档/视频
    扫描微信二维码订阅
    订阅技术月刊
    获得每月300个技术资源
     
    希望我们的资料可以帮助你学习,也欢迎投稿&提建议给我
    频道编辑:sky
    邮       件:sky@uml.net.cn

    关于我们 | 联系我们 | 京ICP备10020922号 京公海网安备110108001071号