课程分类

课程介绍
课程目录
用户评论
课程介绍
课程目录
用户评论

你将获得

  • 掌握某些知识点
  • 学会某些技巧(或思路)

教学服务

  • icon

    1v1专属答疑服务

  • icon

    BAT专家面试辅导

讲师介绍

  • 多年开发和教学经验,技术全才。十八掌教育创始人,精通Java,大数据,Python等编程语言和技术框架; 授课10年,被学生称为顶尖高手! 讲课特点: 全部干货,拒绝忽悠,拒绝废话,上来就干! 庖丁解牛,剥茧抽丝,行云流水,大彻大悟,让你听课听到兴奋!

  • 课程详情

    课程购买咨询请加QQ 613385945

    课程目录:
    第1部分
    01.业务模型说明
    02.架构描述
    03.术语解释-新增-活跃-用户等等
    04.初始化weblog收集模块-公共模块-配置模块
    05.初始化收集端模块-编程模拟上传json数据
    06.通过firefox的poster插件测试web程序
    07.创建client数据生成程序 不断发送数据给server
    08.client上传log时,将client系统时间写入request的header中
    09.编写工具类,使用内省实现属性复制
    10.处理server收到的日志

    第2部分
    01.时间修正
    02.属性复制
    03.通过GeoLite提取ip地址的真实区域
    04.工具类封装地理信息获取
    05.startuplog对象的地址设置
    06.地理信息进行缓存处理
    07.将日志信息转换成json格式发送给kafka主题
    08.准备kafka集群和zk集群并创建主题
    09.启动kakfa集群-web程序-phone程序测试数据收集
    10.分析flume收集kafka消息-分区手段
    11.自定义拦截器-添加logType和log创建时间的头信息
    12.导出flumejar文件部署到flume lib下
    13.配置flume
    14.添加自定义拦截器给配置文件
    15.使用maven命令导出工件需要的所有第三方类库
    16.联动测试-收集数据到hdfs
    17.使用json serse作为hive表的串行化处理工具

    第3部分
    01.使用当前线程类加载解决公共模块的加载问题
    02.修改flume配置文件原生类型-避免大量小文件
    03.使用脚本创建仓库表
    04.调度导入分区表数据分析
    05.时间导入数据分析
    06.使用sed编辑器处理时间问题
    07.编写exec.sh文件和exportData.sql文件
    08.使用hive命令测试导入hdfs数据到hive分区表
    09.修改手机端数据生成时间戳
    10.实现调度周期导入hdfs数据到hive分区表
    11.centos安装tomcat
    12.部署web程序到centos的tomcat下
    13.分析统计用户和新增用户数
    14.计算一天的起始和结束时间片
    15.计算指定天所在的周和月的时间线
    16.自定义UDF实现天起始和天结束时间提取
    17.注册UDF函数-测试

    第4部分
    第4天-01.DateUtil通过偏移量定位时间-统一时间访问.avi
    第4天-02.注册函数-测试函数-选定库.avi
    第4天-03.查询日新增-周新增-月新增-用户总数.avi
    第4天-04.一次性统计一周内每天的新增用户.avi
    第4天-05.通过分区查询日活-月活-周活数.avi
    第4天-06.可视化web模块初始化.avi
    第4天-07.添加hive-jdbcclient驱动到可视化模块-测试.avi
    第4天-08.测试jdbc查询hive的自定义函数.avi
    第4天-10.关闭spring管理的事务-修改mybatis映射文件中大于.avi
    第4天-09.测试SSM连接查询hive数据库.avi
    第4天-11.查询指定的app今天新增用户数.avi
    第4天-13.连接web的ui程序-测试.avi
    第4天-12.嵌套子查询-查询一周内每天新增用户.avi
    第4天-14.通过链接访问新增用户-提交job给hive-执行查询.avi
    第4天-15.dubbo概述.avi
    第4天-16.可视化web项目拆分-统计服务提供者模块初始化.avi
    第4天-17.配置dubbo服务提供方-检查zk.avi
    第4天-18.配置dubbo消费者方集成-1.avi

    第5部分:
    第5天-01.在hive使用using jar方式注册hdfs上的库函数.avi
    第5天-02.dubbo连接超时修改-消费者可视化程序测试.avi
    第5天-03.dubbo实现当前周内每天新增用户数.avi
    第5天-04.dubbo测试通过web可视化-provider.avi
    第5天-05.改造dubbo模块公共资源抽取.avi
    第5天-06.echart集成基础.avi
    第5天-07.echart使用ajax访问服务端数据-回传回调.avi
    第5天-08.echart集成json回传数据-配置web程序.avi
    第5天-09.echart集成json-pom中json配置调整.avi
    第5天-10.echart动态刷新图表-ajax访问controller方法.avi
    第5天-11.过去五周周活跃用户数-过去六月活跃用户数.avi
    第5天-12.沉默用户数.avi
    第5天-13.启动次数.avi
    第5天-14.版本分布.avi
    第5天-15.本周回流用户-1.版本分布.avi
    第5天-16.本周回流用户-2sql实现.avi
    第5天-17.连续n周活跃-忠诚用户-连续活跃用户.avi
    第5天-18.近期流失用户.avi
    第5天-19.留存用户.avi
    第5天-20.新鲜度分析.avi

     
    温馨提示
    • 请勿私下交易
      请勿在平台外交易。与机构和老师私下交易造成的任何损失及纠纷,腾讯课堂不承担任何责任
    • 听课说明

      1、电脑:访问腾讯课堂官网 ke.qq.com 查看我的课表或下载win/mac客户端听课

      2、手机/平板:下载腾讯课堂APP, 进入学习页面听课