课程介绍
课程目录
往期学员作品
用户评论
课程介绍
课程目录
往期学员作品
用户评论
你将获得
- 掌握某些知识点
- 学会某些技巧(或思路)
教学服务
1v1专属答疑服务
BAT专家面试辅导
讲师介绍
Tom老师
高级讲师 从事多年JavaEE、大数据及相关教育工作,熟悉javaEE、hadoop、hive、flume、kafka、storm、spark等,有丰富的大数据实战经验和研究。曾在多家公司担任项目工程师,项目经理职务,企业内训包含联通等知名公司。
高级讲师 从事多年JavaEE、大数据及相关教育工作,熟悉javaEE、hadoop、hive、flume、kafka、storm、spark等,有丰富的大数据实战经验和研究。曾在多家公司担任项目工程师,项目经理职务,企业内训包含联通等知名公司。
课程详情
目前认购和配套资料请加QQ 2053223304
课程认购地址:https://swxsoft.ke.qq.com/
分布式集群环境搭建
Linux 搭建
hadoop安装(4台机器)
hive安装
flume 安装
sqoop 安装
Azkaban安装
php搭建
本套大数据实战案例亮点:
本套教程包含简历指导均在教程结尾进行描述,完全与企业真实场景规范来制作教程。
本套教程通过一个案例把整个项目开发流程手把手带大家做出来,让大家知道大数据怎么做,只要大家按照视频和文档保证大家都能实战出来,此课程重点考虑是项目架构流程,通过数据收集,数据清洗,数据导入hive,业务分析,数据库之间的导入,调度器继承环境过程给大家进行讲解
课程目录:
第01节:项目的简介
第02节:项目的背景
第03节:项目流程演示
第04节:讲课的内容和对应的知识点
第05节:php展示统计分析之后的数据
第06节:大数据架构介绍并且企业使用的测试集群环境和人员配置
第07节:VM的安装
第08节:centos的安装和网络配置
第09节:通过第三方连接centos的方法
第10节:CentOS的yum源更新已经关闭防火墙
第11节:JAVA的安装和hadoop安装
第12节:完全分布式搭建(上)
第13节:完全分布式搭建(下)
第14节:通过hadoop自带的demo运行单词统计
第15节:写一个sh脚本,可以通过一台机器控制多台机器
第16节:hadoop常用的命令简单介绍
第17节:MAPREDUCE 示例编写及编程规范
第18节:安装时间同步工具,让所有电脑进行同步
第19节:Hive简介和工作流程
第20节:Mysql的安装,centos7安装mysql注意点
第21节:安装Hive,并且使用Hive做一个小案例
第22节:把txt文件的数据导入到Hive表中
第23节:Flume采集系统结构图
第24节:Flume的安装部署和实战
第25节:sqoop数据迁移和安装
第26节:sqoop数据从hadoop里面导入到mysql里面
第27节:sqoop数据从mysql里面导入到hadoop里面
第28节:Azkaban介绍和安装
第29节:Azkaban创建SSL配置和配置文件
第30节:Azkaban实战通过5个不同场景介绍原理
第31节:电视采集项目流程篇之通过linux日志收集数据到hdfs上面
第32节:电视采集项目流程篇之通过MAPREDUCE 把收集数据进行清洗
第33节:电视采集项目流程篇之清洗数据绑定到hive表中(上)
第34节:电视采集项目流程篇之清洗数据绑定到hive表中(下)
第35节:电视采集项目流程篇之根据hive绑定数据统计计算保存到hive表中
第36节:电视采集项目流程篇之把hive表中数据导入到mysql中
第37节:电视采集项目流程篇之安装php环境并且快速熟悉php语法
第38节:电视采集项目流程篇之安装php和echarts进行结合展示图表
第39节:电视采集项目流程篇之Azkaban调度脚本的编写
第40节:电视采集项目流程篇之Azkaban流程调度演示,最终在php页面展示
第41节:hadoop和hive项目怎么平滑的转到spark上面介绍
第42节:spark的安装和使用
第43节:Spark整体架构
第44节:transformation和action介绍
第45节:Spark SQL和DataFrame
第46节:电视采集项目流程spark篇通过sparksql处理业务逻辑上
第47节:电视采集项目流程spark篇通过sparksql处理业务逻辑下
第48节:电视采集项目流程spark篇通过Azkaban调度spark
第49节:项目总体总结
第50节:简历指导
温馨提示
- 请勿私下交易请勿在平台外交易。与机构和老师私下交易造成的任何损失及纠纷,腾讯课堂不承担任何责任
- 听课说明
1、电脑:访问腾讯课堂官网 ke.qq.com 查看我的课表或下载win/mac客户端听课
2、手机/平板:下载腾讯课堂APP, 进入学习页面听课