课程培训
大数据工具Flume&Kafka集成实践培训与咨询

 

培训目标:

 

1、彻底理解大数据分布式日志收集工具Flume技术;
2、深入剖析Kafka大数据分布式消息中间件;
3、培养学生整合成Flume与Kafka能力,并且进行实践操作;

大数据分布式收集工具Flume部署介绍(大数据分布式收集工具Flume部署介绍) 1、什么是Flume
2、Flume简介及使用
3、Flume逻辑架构
4、Flume部署架构
5、Flume集群部署
大数据分布式收集工具Flume技术介绍(大数据分布式收集工具Flume介绍) 1、Flume数据源类型
2、Flume收集数据2种主要工作模式
3、Flume核心概念
4、Flume特点
5、Flume数据收集
6、Flume配置
7、Flume分别配置组件属性
8、Flume多agent流
9、Flume在一个agent中添加多个数据流
10、Flume配置多个agent数据流
11、Flume复用流
12、消息发送处理过程
13、Flume扇出流
14、Flume合并
15、Flume Load Balance功能
16、Flume数据源
17、Flume Sinks
18、Flume Channels
19、Flume Channel Selectors
20、Flume Sink Processors
21、Event Serializers
22、Flume Interceptors
23、Flume Properties
24、Flume可靠性机制
25、Flume可恢复性
26、Flume插件功能
27、Flume Tools
28、Alias Conventions
29、大数据集群日志数据收集
30、大数据架构案例分享及实战演练:Flume在SaaS中的应用
分布式消息中间件Kafka剖析(深入理解Kafka的实现原理 1、Kafka诞生背景剖析
2、什么是Kafka
3、Kafka特征剖析
4、Kafka架构剖析
5、Broker
6、Producer
7、Consumers
8、Topics
9、Leader
10、Follower
11、Kafka集群部署
12、队列模式(queuing)
13、发布-订阅模式(publish-subscribe)
14、Kafka创建topic、发送消息、消费消息
15、数据传输的事务定义
16、数据的持久化
17、Kafka存储在硬盘上的消息格式
18、Kafka节点管理
19、Kafka运维管理
20、Kafka主从同步
21、Kafka的性能优化
22、Kafka的消息与日志
23、Kafka实战案例:
Kafka Shell操作实战(全面深入理解Kafka相关命令和具备Kafka的运维能力)

1、Kafka Shell介绍
2、Kafka查看日志命令
3、Kafka主从命令
4、Kafka监控命令

编写Kafka程序(深入理解Kafka的APIs并动手实践) 1、搭建Kafka开发环境
2 、Driver程序开发
3、Producer程序开发
4 、Consumer程序开发
5 、发布与运行
6 、Kafka APIs全面剖析
7 、Kafka APIs应用场景剖析及案例
8 、Kafka程序监控
9 、Kafka实战案例:Kafka整合实现数据实时数据分析处理设计与分析
Flume与Kafka集成配置实操(Flume与Kafka的集群动手实践) 1、实战案例:在Flume中数据源配置为Kafka 

 




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表下载请点击

服务优势:
丰富专家资源,精准匹配相关行业,相关项目技术精英,面向用户实际需求,针对性培训或咨询,互动式交流,案例教学,精品小班,实际工程项目经验分享,快捷高效,节省时间与金钱,少走弯路与错路。

专家力量:
中国科学院相关研究所高级研究人员
西门子,TI,vmware,MSC,Ansys,MDI,Mentor, candence,Altium,Atmel 、Freescale,达索,华为等
大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关学历背景专业,理论素养高
多年实际项目实践,大型复杂项目实战案例分享,热情,乐于技术分享
针对客户实际需要,真实案例演示,互动式沟通,学有所值
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>