海量日志收集系统Flume开发入门+原理+应用+面试题

61人 购买 好评度 -
用手机看

扫一扫继续用手机看

  • 微信扫码

  • QQ扫码

下载手机APP
收藏
  • 第一期
更多班级

第一期

支持随到随学,24年09月过期

¥536.22

本班因教学质量问题暂时不能报名。 查看详情

课程因违反平台规定暂时不能报名。

立即购买

大数据必生态圈必学框架和企业级案例 ( 共26门 )

套餐价 :¥1298.00 原价 :¥2981.00 立即购买 查看详情

课程概述

目录

往期学员作业()

评论

老师介绍

  • Sundy

    Sundy

    13年软件研发及项目管理经验,先后担任项目经理、项目总监等职务,并在企业内部进行项目技术培训工作;
简  介 Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。是大数据大数据开发工程师必须会的框架之一。
课程购买咨询和资料获取请加老师QQ  2020363447  

Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。是大数据大数据开发工程师必须会的框架之一。

Apache Flume的使用不仅仅局限于日志数据聚合。由于数据源是可定制的, Flume可以用于传输大量事件数据,包括但不限于网络流量数据、 社交媒体生成的数据、电子邮件消息和几乎所有可能的数据源。

Flume的优势:
可以高速采集数据,采集的数据能够以想要的文件格式及压缩方式存储在hdfs上
事务功能保证了数据在采集的过程中数据不丢失
部分Source保证了Flume挂了以后重启依旧能够继续在上一次采集点采集数据,真正做到数据零丢失

在本课程中,你将学习到,Flume架构原理、安装配置、拓扑结构、使用Flume搭建监控端口采集数据、监控本地(或HDFS)文件(或文件夹)采集数据、多数据源采集数据、多数据出口收集日志、Flume负载均衡以及对于Flume的监控Ganglia的运用。
更新:课件升级、Flume中的事务、Flume故障转移、自定义组件Source和Sink。

 

* 课程提供者:北京思无限科技有限责任公司