5天大数据企业级数据实时处理平台教程

507人 购买 好评度 100%
用手机看

扫一扫继续用手机看

  • 微信扫码

  • QQ扫码

下载手机APP
收藏
  • 第一期
更多班级

第一期

支持随到随学,24年11月过期

¥866.22

本班因教学质量问题暂时不能报名。 查看详情

课程因违反平台规定暂时不能报名。

立即购买

真正的大数据实战课程 ( 共33门 )

套餐价 :¥2980.00 原价 :¥5067.00 立即购买 查看详情

课程概述

目录

评论

老师介绍

  • 黄埔课堂

    黄埔课堂

    10年软件开发经验,曾在中国联通、Motorola等先后做Javaweb开发、手机开发、大数据开发,有丰富的大数据和GO语言实战经验。 培训过的精品课程有:《大数据hadoop开发》、《大数据spark开发》、《Go语言重写大数据日志收集器》 企业内训:中石化(上海,齐鲁,北京),济南联通研究院。
简  介 实时大数据分析是指对规模巨大的数据进行分析,利用大数据技术高效的快速完成分析,达到近似实时的效果,更及时的反映数据的价值和意义。
课程咨询和资料获取请加老师QQ  1011800132    

大数据的实时流式处理问题的特点
数据源源不断的到来;
数据需要尽快的得到处理,不能产生积压;
处理之后的数据量依然巨大,仍然后TB级甚至PB级的数据量;
处理的结果能够尽快的展现;

以上四个特点可以总结为
数据的收集->数据的传输->数据的处理->数据的展现

项目简介
对于实时性要求高的应用,如用户即时详单查询,业务量监控等,需要应用实时处理架构

项目场景
对于实时要求高的应用、有对数据进行实时展示和查询需求时

项目技术
分别使用canal和kafka搭建各自针对业务数据库和用户行为数据的实时数据采集系统,使用SparkStreaming搭建高吞吐的数据实时处理模块,选用ES作为最终的实时数据处理结果的存储位置,并从中获取数据进行展示,进一步降低响应时间
 

* 课程提供者:黄埔课堂