课程分类

课程介绍
课程目录
用户评论
课程介绍
课程目录
用户评论

你将获得

  • 掌握某些知识点
  • 学会某些技巧(或思路)

教学服务

  • icon

    1v1专属答疑服务

  • icon

    BAT专家面试辅导

讲师介绍

  • 高级讲师 从事多年JavaEE、大数据及相关教育工作,熟悉javaEE、hadoop、hive、flume、kafka、storm、spark等,有丰富的大数据实战经验和研究。曾在多家公司担任项目工程师,项目经理职务,企业内训包含联通等知名公司。

  • 课程详情




    目前认购和配套资料请加QQ  2053223304 
    课程认购地址:https://swxsoft.ke.qq.com/  

    分布式集群环境搭建
    Linux 搭建 
    hadoop安装(4台机器)
    hive安装
    flume 安装
    sqoop 安装
    Azkaban安装
    php搭建

    本套大数据实战案例亮点:
    本套教程包含简历指导均在教程结尾进行描述,完全与企业真实场景规范来制作教程。
    本套教程通过一个案例把整个项目开发流程手把手带大家做出来,让大家知道大数据怎么做,只要大家按照视频和文档保证大家都能实战出来,此课程重点考虑是项目架构流程,通过数据收集,数据清洗,数据导入hive,业务分析,数据库之间的导入,调度器继承环境过程给大家进行讲解


    课程目录:
    第01节:项目的简介
    第02节:项目的背景
    第03节:项目流程演示
    第04节:讲课的内容和对应的知识点
    第05节:php展示统计分析之后的数据
    第06节:大数据架构介绍并且企业使用的测试集群环境和人员配置
    第07节:VM的安装
    第08节:centos的安装和网络配置
    第09节:通过第三方连接centos的方法
    第10节:CentOS的yum源更新已经关闭防火墙
    第11节:JAVA的安装和hadoop安装
    第12节:完全分布式搭建(上)
    第13节:完全分布式搭建(下)
    第14节:通过hadoop自带的demo运行单词统计
    第15节:写一个sh脚本,可以通过一台机器控制多台机器
    第16节:hadoop常用的命令简单介绍
    第17节:MAPREDUCE 示例编写及编程规范
    第18节:安装时间同步工具,让所有电脑进行同步
    第19节:Hive简介和工作流程
    第20节:Mysql的安装,centos7安装mysql注意点
    第21节:安装Hive,并且使用Hive做一个小案例
    第22节:把txt文件的数据导入到Hive表中
    第23节:Flume采集系统结构图
    第24节:Flume的安装部署和实战
    第25节:sqoop数据迁移和安装
    第26节:sqoop数据从hadoop里面导入到mysql里面
    第27节:sqoop数据从mysql里面导入到hadoop里面
    第28节:Azkaban介绍和安装
    第29节:Azkaban创建SSL配置和配置文件
    第30节:Azkaban实战通过5个不同场景介绍原理
    第31节:电视采集项目流程篇之通过linux日志收集数据到hdfs上面
    第32节:电视采集项目流程篇之通过MAPREDUCE 把收集数据进行清洗
    第33节:电视采集项目流程篇之清洗数据绑定到hive表中(上)
    第34节:电视采集项目流程篇之清洗数据绑定到hive表中(下)
    第35节:电视采集项目流程篇之根据hive绑定数据统计计算保存到hive表中
    第36节:电视采集项目流程篇之把hive表中数据导入到mysql中
    第37节:电视采集项目流程篇之安装php环境并且快速熟悉php语法
    第38节:电视采集项目流程篇之安装php和echarts进行结合展示图表
    第39节:电视采集项目流程篇之Azkaban调度脚本的编写
    第40节:电视采集项目流程篇之Azkaban流程调度演示,最终在php页面展示
    第41节:hadoop和hive项目怎么平滑的转到spark上面介绍
    第42节:spark的安装和使用
    第43节:Spark整体架构
    第44节:transformation和action介绍
    第45节:Spark SQL和DataFrame
    第46节:电视采集项目流程spark篇通过sparksql处理业务逻辑上
    第47节:电视采集项目流程spark篇通过sparksql处理业务逻辑下
    第48节:电视采集项目流程spark篇通过Azkaban调度spark
    第49节:项目总体总结
    第50节:简历指导
     
    温馨提示
    • 请勿私下交易
      请勿在平台外交易。与机构和老师私下交易造成的任何损失及纠纷,腾讯课堂不承担任何责任
    • 听课说明

      1、电脑:访问腾讯课堂官网 ke.qq.com 查看我的课表或下载win/mac客户端听课

      2、手机/平板:下载腾讯课堂APP, 进入学习页面听课