分布式系统基础架构Hadoop进阶教程

512人 购买 好评度 100%
用手机看

扫一扫继续用手机看

  • 微信扫码推荐

    当前为微信账号
    请扫此码

  • QQ扫码推荐

    当前为QQ账号
    请扫此码

下载手机APP
收藏
  • 第一期
更多班级

第一期

支持随到随学,25年01月过期

¥76.22

本班因教学质量问题暂时不能报名。 查看详情

课程因违反平台规定暂时不能报名。

立即购买
套餐价 :¥1998.00 原价 :¥4674.00 立即购买 查看详情
套餐价 :¥698.00 原价 :¥1714.00 立即购买 查看详情

课程概述

目录

往期学员作业()

评论

老师介绍

  • 徐培成

    徐培成

    多年开发和教学经验,技术全才。精通Java,大数据,Python等编程语言和技术框架; 授课10年,被学生称为顶尖高手! 讲课特点: 全部干货,拒绝忽悠,拒绝废话,上来就干! 庖丁解牛,剥茧抽丝,行云流水,大彻大悟,让你听课听到兴奋!
简  介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。
学习资料和技术交流请与老师QQ沟通 1586281525  

Hadoop是由java语言编写的,在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框架,其核心部件是HDFS与MapReduce。       HDFS是一个分布式文件系统:引入存放文件元数据信息的服务器Namenode和实际存放数据的服务器Datanode,对数据进行分布式储存和读取。  MapReduce是一个计算框架:MapReduce的核心思想是把计算任务分配给集群内的服务器里执行。通过对计算任务的拆分(Map计算/Reduce计算)再根据任务调度器(JobTracker)对任务进行分布式计算。

Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。       把HDFS理解为一个分布式的,有冗余备份的,可以动态扩展的用来存储大规模数据的大硬盘。       把MapReduce理解成为一个计算引擎,按照MapReduce的规则编写Map计算/Reduce计算的程序,可以完成计算任务。

 

* 课程提供者:猿课教育