从零开始讲解大数据业务及数据采集和迁移需求,以案例驱动的方式讲解基于Flume构建高容错高可靠的分布式数据采集平台。 课程亮点 1,知识体系完备,从小白到大神各阶段读者均能学有所获。 2,生动形象,化繁为简,讲解通俗易懂。 3,结合工作实践及分析应用,培养解决实际问题的能力。 4,每一块知识点, 都有配套案例, 学习不再迷茫。
适用人群 1、对大数据感兴趣的在校生及应届毕业生。 2、对目前职业有进一步提升要求,希望从事大数据行业高薪工作的在职人员。 3、对大数据行业感兴趣的相关人员。
课程内容
第一章:企业级需求 1.大数据迁移及采集问题概述 2.分布式解决方案Flume 3.Flume运行原理及架构详解 第二章:Flume一站式快速部署方案 1.Flume企业级版本选型 2.Flume部署环境选型 3.Flume快速部署方案 第三章:Flume企业级全场景业务案例 1.单日志动态监控采集方案 2.分时日志实时监控采集 3.多数据源动态采集方案 4.内存式高性能缓存方案 5.实时采集存储HDFS 6.多目标存储架构 7.Flume多层采集架构 第四章:一招解决Flume数据容错 1.Flume高级组件:SinkProcess 2.Flume故障转移 3.Flume负载均衡 第五章:半小时搞定Flume最难组件 1.拦截器功能及应用场景 2.Timestamp Interceptor 3.Host Interceptor 4.Static Interceptor 5.RegexFilter Interceptor 6.拦截器开发实战 第六章:Flume面试核心要点全讲解 1.Source功能及原理 2.Channel功能及原理 3.Sink功能及原理 4.Source开发实战 5.Sink开发实战
网盘视频截图展示: 视频下载链接已添加 回帖可获取视频下载提取码 添加播妞qq3414556270可获取本视频源码资料
|