课程分类

课程介绍
课程目录
用户评论
课程介绍
课程目录
用户评论

你将获得

  • 掌握某些知识点
  • 学会某些技巧(或思路)

教学服务

  • icon

    1v1专属答疑服务

  • icon

    BAT专家面试辅导

讲师介绍

  • 大数据项目讲师, 10余年软件研发及企业培训经验,曾为多家大型企业提供企业内训。 丰富的企业应用软件开发经验、深厚的软件架构设计理论基础及实践能力。中石化,中国联通,中国移动等知名企业提供企业培训服务。

  • 课程详情

    课程购买咨询和资料获取请加老师QQ  3073865354  

    介绍
    利用docker容器技术快速构建跨节点的独立模型的Spark大数据集群。Spark是时下非常热门的大数据计算引擎,现在apche官方网站已经更新至2.3.1的版本,而且热度居高不下。很多企业越来越多的倾向于使用spark进行海量数据处理,主要是源于其高效快速的架构设计。

    docker也是非常热门的虚拟化技术,而且发展趋势也是越来越强大,源于其超轻量级的部署和低资源消耗著称,对于大数据从业人群,两者组合可以说是技术发展的利器。更是大数据运维人员的渴求的技术。

    目标
    本次课程的主要目标就是在docker容器上部署spark集群,实验环境使用win7操作系统,安装vmware虚拟机软件,在wmare中安装2两台centos7的客户机操作系统,在每个客户机操作系统中安装docker进行二次虚拟机化,并在每台客户机的centos7操作系统中启动docker容器,分别安装部署spark,组件独立模式下的spark集群,能够实现跨节点的容器间通信,网络模式使用macvlan方式,摒弃繁琐的端口映射方式,使集群更加容易管理和扩展。

    本课程所用到的技术:
    Spark
    Docker
    Centos 7

    利用docker容器化技术快速构建Spark独立模式的集群课程经过多家企业的联合调研出品,可以解决市面上绝大多数的企业级的大数据容器化技术应用。
    温馨提示
    • 请勿私下交易
      请勿在平台外交易。与机构和老师私下交易造成的任何损失及纠纷,腾讯课堂不承担任何责任
    • 听课说明

      1、电脑:访问腾讯课堂官网 ke.qq.com 查看我的课表或下载win/mac客户端听课

      2、手机/平板:下载腾讯课堂APP, 进入学习页面听课