Spark3大数据实时处理-Streaming+Structured Streaming 实战
基于Spark3,在同一项目中,学习两套实时处理的解决方案:Spark Streaming和Structured Streaming,体验完整实时处理方案的全流程,为你梳理大数据常见面试题、大厂的实时解决方案,带你跨过面试最后一公里。
课程大纲
第1章 【项目启动】项目背景及架构分析
第2章 【环境部署】基础开发环境搭建
第3章 【数据采集】构建日志服务器
第4章 【数据收集】基于Flume构建分布式日志收集
第5章 【消息队列】基于Kafka构建实时数据交换
第6章 【实时流处理】Spark Streaming核心API及编程初探
第7章 【实时流处理】应用Spark Streaming实现数据分析及调优
第8章 【实时流处理】Structured Streaming企业级应用
第9章 【实时流处理】应用Structured Streaming实现数据分析及调优
第10章 【数据可视化】使用Echarts完成数据展示
第11章 【拓展&经验分享】核心梳理及面试指导