利用Docker部署Spark集群教程

521人 购买 好评度 100%
用手机看

扫一扫继续用手机看

  • 微信扫码

  • QQ扫码

下载手机APP
收藏
  • 第一期
更多班级

第一期

支持随到随学,24年09月过期

¥16.22

本班因教学质量问题暂时不能报名。 查看详情

课程因违反平台规定暂时不能报名。

立即购买

大数据机器学习实战班 ( 共33门 )

套餐价 :¥2980.00 原价 :¥4167.00 立即购买 查看详情

课程概述

目录

评论

老师介绍

  • 徐老师

    徐老师

    多年开发和教学经验,技术全才。精通Java,大数据,Python等编程语言和技术框架; 授课10年,被学生称为顶尖高手! 讲课特点: 全部干货,拒绝忽悠,拒绝废话,上来就干! 庖丁解牛,剥茧抽丝,行云流水,大彻大悟,让你听课听到兴奋!
  • 张长志

    张长志

    10年软件开发经验,曾在中国联通、Motorola等先后做Javaweb开发、手机开发、大数据开发,有丰富的大数据和GO语言实战经验。 培训过的精品课程有:《大数据hadoop开发》、《大数据spark开发》、《Go语言重写大数据日志收集器》 企业内训:中石化(上海,齐鲁,北京),济南联通研究院。
简  介 大数据容器化解决方案,胜任企业级的容器化快速构建Spark独立模式的集群。
课程咨询和资料获取请加老师QQ  1011800132  

介绍
利用docker容器技术快速构建跨节点的独立模型的Spark大数据集群。Spark是时下非常热门的大数据计算引擎,现在apche官方网站已经更新至2.3.1的版本,而且热度居高不下。很多企业越来越多的倾向于使用spark进行海量数据处理,主要是源于其高效快速的架构设计。

Docker也是非常热门的虚拟化技术,而且发展趋势也是越来越强大,源于其超轻量级的部署和低资源消耗著称,对于大数据从业人群,两者组合可以说是技术发展的利器。更是大数据运维人员的渴求的技术。

目标
本次课程的主要目标就是在docker容器上部署spark集群,实验环境使用win7操作系统,安装vmware虚拟机软件,在wmare中安装2两台centos7的客户机操作系统,在每个客户机操作系统中安装docker进行二次虚拟机化,并在每台客户机的centos7操作系统中启动docker容器,分别安装部署spark,组件独立模式下的spark集群,能够实现跨节点的容器间通信,网络模式使用macvlan方式,摒弃繁琐的端口映射方式,使集群更加容易管理和扩展。

利用docker容器化技术快速构建Spark独立模式的集群课程经过多家企业的联合调研出品,可以解决市面上绝大多数的企业级的大数据容器化技术应用。

* 课程提供者:张长志

老师还为你推荐了以下几门课程