大数据学习的第六个阶段是Spark分析课程,该阶段又分为五门课程,在该阶段将会有行业实力大神,带你走进数据处理的新未来。 大数据学习的第六个阶段是实时分析课程,该阶段又分为四门课程,可视化分析让你亲眼见证“奇迹”的诞生。 分布式流平台Kafka Kafka 引入及特性Kafka 架构、数据存储结构及新版本特性Kafka 分布式安装部署、启动及测试Kafka内部原理及高可用性基于Java的Kafka Producer API使用基于Java的Kafka High LevelKafka与Flume集成、Kafka Stream编程 SparkStreaming实时分析 流式计算引入及各个框架的比较与选型SparkStreaming内核原理及从Socket读取数据实时分析DStream创建及常用Transformatio和Output使用从Kafka读取数据及将结果存储到Redis中实时累加统计updateStateByKey项目3: 某信贷实时爬取数据存储IBase表项目: 电商广告点击流量实时统计 Storm实时分析 Storm架构原理及集群环境搭建、测试运行Topology介绍及拓扑图从Kafka读取数据实时统计存储HBase表中编码实现Storm的消息可靠性保障机制Storm中Trident及DRPC使用项目某某店双11实时订单销售额统计分析项目: 电商实时交易风控系统 Flink结构化流式计算 Flink介绍和两种执行模型Flink环境搭建及运行WordCount程序无界数据集和有界数据集基于JAVA语言编写WordCount程序从Socket和Kafka读取数据分析案例: 日志监控告警系统