ELK应用架构与实践方法

课程讲解大数据搜索与分布式消息解决方案（ ELK+Kafka），结合大型互联网应用案例讲解。 ELK是Elasticsearch、Logstash、Kibana三大开源框架首字母大写简称。其中Elasticsearch是一个基于Lucene、分布式、通过Restful方式进行交互的近实时搜索平台框架。Logstash是ELK的中央数据流引擎，用于从不同目标（文件/数据存储/MQ）收集的不同格式数据，经过过滤后支持输出到不同目的地（文件/MQ/redis/elasticsearch/kafka等）。Kibana可以将elasticsearch的数据通过友好的页面展示出来，提供实时分析的功能。本课程讲解ELK的应用架构构建方法、工作原理，以便能够使用ELK进行日志分析以及其它任何数据分析和收集的场景。

培训目标：

了解ELK应用架构原理
了解Elasticsearch的功能和应用方法
了解logstash的功能和应用方法
了解Kibana的功能和应用方法
使用ELK进行日志分析等案例实践。
学习Kafka数据传输

培训对象：网站架构师，运维架构师

学员基础：熟悉java编程，了解应用日志的监控

授课方式：定制课程 + 案例讲解 + 小组讨论，60%案例讲解，40%实践演练

培训内容：2天

一、elasticsearch-es	es 架构和原理 es 的安装数据的获取创建、添加和删除索引文档搜索、简单检索、DSL语句查询、短语检索
二、分布式CRUD	新建、索引和删除检索局部更新批量请求批量格式
三、搜索	空搜索多索引和类型分页查询字符串
四、映射和分析	数据类型差异倒序索引分析映射复合类型
五、索引管理	创建和删除设置配置分析器自定义分析器映射根对象元数据source、All和ID字段动态映射自定义动态映射
六、elasticsearch的高级实战	es的索引优化 es集群健康监控故障转移优化 es第三方常用插件介绍
七、logstash架构与应用	logstash架构和原理 logstash 安装 input plugin介绍 — Http插件 — log4j插件 fliter plugin介绍 output plugin介绍
八、Kibana架构与应用	Kibana架构和原理 Kibana安装 Kibana+logstash+es实战
九、Kafka数据传输	kafka概述 kafka是什么 kafka概念详解：Topics/logs、Distributitions、Producers、Consumers、Guarantees。 kafka的应用场景 kafka的体系架构与设计原理消息持久化生产者与消费者消息传输机制复制备份

报公开课

要内训

1510 次浏览

31 次

其他人还看了课程

数据治理与数据资产管理 5817 次浏览

大数据搜索框架（ElasticSearch）与应用 3358 次浏览

数据治理方法与实践 274 次浏览

深入浅出学Zookeeper 2824 次浏览

数据湖架构原理与应用 671 次浏览

Scala编程语言 1960 次浏览

	咨询服务：架构评估与优化

咨询目标	对现有的架构进行评估，发现问题，并优化
咨询范围	业务架构，应用架构，数据架构，技术架构
咨询方式	对现有架构进行建模，然后诊断问题，对问题进行集成分析，设计优化方案，指导团队实施优化，最终效果评估。
成功案例	中国移动广西分公司，中国电信

详情咨询：010-62670969， zhgx@uml.net.cn

课程计划

MBSE（基于模型的系统工程）4-18[北京]

自然语言处理（NLP） 4-25[北京]

基于 UML 和EA进行分析设计 4-29[北京]

以用户为中心的软件界面设计 5-16[北京]

DoDAF规范、模型与实例 5-23[北京]

信息架构建模（基于UML+EA）5-29[北京]