学习资料和技术交流请与老师QQ沟通 1586281525

Spark是一个实现快速通用的集群计算平台。它是由加州大学伯克利分校AMP实验室 开发的通用内存并行计算框架，用来构建大型的、低延迟的数据分析应用程序。它扩展了广泛使用的MapReduce计算 模型。高效的支撑更多计算模式，包括交互式查询和流处理。spark的一个主要特点是能够在内存中进行计算，及时依赖磁盘进行复杂的运算，Spark依然比MapReduce更加高效。

Spark是MapReduce的替代方案，而且兼容HDFS、Hive，可融入Hadoop的生态系统，以弥补MapReduce的不足。

应用场景
Yahoo将Spark用在Audience Expansion中的应用，进行点击预测和即席查询等 淘宝技术团队使用了Spark来解决多次迭代的机器学习算法、高计算复杂度的算法等。应用于内容推荐、社区发现等 腾讯大数据精准推荐借助Spark快速迭代的优势，实现了在“数据实时采集、算法实时训练、系统实时预测”的全流程实时并行高维算法，最终成功应用于广点通pCTR投放系统上。 优酷土豆将Spark应用于视频推荐(图计算)、广告业务，主要实现机器学习、图计算等迭代计算。

课程特色：  
1.通俗易懂，最接地气的讲解将复杂的问题简单化  
2.全程手敲代码  
3.名师授课  
4.面面俱到，知识全体系覆盖 

大数据架构师系列课程
https://ke.qq.com/course/package/22463

大数据架构师学习路线图
1.27天零基础（Java、大数据）入门教程 https://ke.qq.com/course/469300
2.10天IDEA版Java高级视频教程（包含JVM、NIO、设计模式等）https://ke.qq.com/course/468486
3.2天CentOS版Linux快速学习教程https://ke.qq.com/course/468491
4.10天Hadoop2.7从入门到精通（入行必看）https://ke.qq.com/course/468497
5.4天数据仓库Hive从入门到企业实操教程https://ke.qq.com/course/468645
6.大数据串行化(Avro和PB)从入门到实操教程https://ke.qq.com/course/468658
7.2天Zookeeper从入门到企业级实操教程https://ke.qq.com/course/468636
8.7天Hbase+Phoenix从入门到企业实操教程https://ke.qq.com/course/468666
9.分布式缓存数据库Redis教程（Java、大数据通用教程）https://ke.qq.com/course/468671  
10. 分布式监控工具Ganglia视频教程https://ke.qq.com/course/468675
11.2天海量日志收集利器Flume视频教程https://ke.qq.com/course/468679
12.批量数据迁移的工具Sqoop视频教程https://ke.qq.com/course/468686
13.2天分布式发布订阅消息系统Kafka教程 https://ke.qq.com/course/468692
14.3天IDEA版SSM从入门到企业实战教程https://ke.qq.com/course/468711
15.4天多范式编程语言Scala视频教程 https://ke.qq.com/course/469008 
16.团购网站大数据实现标签生成实战项目 https://ke.qq.com/course/469346
17.真实案例：大数据实现用户画像实现项目 https://ke.qq.com/course/469339
18.8天大规模数据处理引擎Spark教程https://ke.qq.com/course/468122
19.5天Python到推荐系统​到大数据实战 https://ke.qq.com/course/469161
20.大数据分析案例：6天友盟数据平台实战项目https://ke.qq.com/course/469021
21.秒级查询的数据仓库Kudu教程 https://ke.qq.com/course/469359
22.新一代大数据计算引擎Flink教程 https://ke.qq.com/course/469375