老师介绍
简 介 | 本课程以爱奇艺视频实时数据产生和流向的各个环节出发,通过集成主流的分布式日志收集框架Flume、分布式消息队列Kafka、分布式列式数据库HBase、及当前最火爆的Spark Streaming打造实时流处理项目实战,一套代码让你掌握实时处理的整套处理流程,快速进去企业实战! |
---|
本教程为授权出品教程,本产品为虚拟产品,一经购买不退费,购买请注意。
本课程以爱奇艺视频实时数据产生和流向的各个环节出发,通过集成主流的分布式日志收集框架Flume、分布式消息队列Kafka、分布式列式数据库HBase、及当前最火爆的Spark Streaming打造实时流处理项目实战,一套代码让你掌握实时处理的整套处理流程,快速进去企业实战!
案例截图:
视频内容:
00-爱奇艺实时统计的一个概述
01-生成环境中日志产生的一个描述
02-项目使用的技术点以及开发对应的流程顺序
03-互联网访问日志概述
04-日志的真实数据介绍并且讲解对应的栏目的log样式
05-脚本生成Log日志方式
06通过linux自带的定时器定时生成日志
07-启动和配置flum kafka
08-开发环境搭建
09-flume和kafka和SparkStreaming联通和测试
10-数据库的介绍和选择
11-启动hdfs和zk和hbase并且创建hbase表
12-写一个操作Hbase的工具类操作HBase增加
13-项目时间工具的实现
14-根据条件对产生的实时流做数据清洗并且封装成类
15-项目中的DAO操作Hbae的增加和查询并且可以分批保存和测试
16-保存手机的数据累加到Hbase中
17-功能二的DAO增和查询的实现
18-功能二处理业务逻辑保存到hbase数据库里面
19-项目运行在真实的生成环境上面
20-项目中spark脚本的编写和运行
21-数据可视化只为什么要可视化
22-数据可视化之web页面的搭建
23-数据可视化之第一个springboot应用程序
24-数据可视化之echart的介绍和使用范围
25-数据可视化之springboot创建web应用并返回html页面
26-数据可视化之springboot继承echart的页面
27-数据可视化之springboot替换成生成中的饼图
28-数据可视化之HBase数据访问的工具类开发
29-数据可视化之DAO数据访问层开发
30-数据可视化之展示层页面逻辑处理
31-数据可视化之ajax请求数据页面展示
32-数据可视化代码运行在生成服务器中
33-项目在服务器上面运行流程与过程
* 课程提供者:北京思无限科技有限责任公司