本课程为连载课程一共25个课时，每周更新1-2节，3个月内更新完。有问题可以联系客服：wechat：17812796384/18310139238

Airflow 任务调度系统 - 实战

课程介绍

本课程⾯向的是 SRE，DevOps，⼤数据 ⼯程师； 通过本课程的学习，你将会获得如下能⼒：

• 从0到1的熟练使⽤ Airflow ⼯具和⽣态，并能充分利⽤这⼀调度利器，在⼯作中发挥重要作⽤
• airflow 基本使⽤，故障告警，排查，性能调优
• 如何基于 airflow 的 API 对其进⾏⼆次开发

1. 架构和组件介绍

架构

 

 

 

组件

 

2. 使⽤场景

1. ⼤数据⾃动化任务流
2. DevOps
3. 快速开发环境部署

• 云主机
• Docker

4.名词介绍和⽤途

 

 

 

 

5.快速⼊⻔

• 最⼩ Dag 示例
• 介绍 Dag, BashOperator
• 任务间依赖关系

6. 深⼊定时策略

1. 时区
2. linux cron和 schedule_interval
3. schedule_interval 表达式 案例演示

 

7. 全⾯学习 UI 使⽤

1. View
2. Admin
3. Doc
4. 表结构介绍

8. ⽇志和监控
架构

 

基于 Prometheus 监控⽅案

错误跟踪

9. 安全

1.RBAC 权限
2.组件权限控制
2.1.API
2.2.Webserver
2.3.Flower

10. 专题学习
1. 2.x新特性
2. 深⼊command line

 

3.深⼊ operators

 

 

 

4.深⼊ Executor

 

 

 

11. 通知
1.邮件
2.短信
3.钉钉

12. ⽣产环境 HA 部署
1.云主机
2.Kubernetes

13. 插件
1.简介
2.如何使⽤插件
3.学习开源常⻅插件

14. 项⽬

DevOps - 主机⽣命周期管理

 

 

 

⼤数据⾃动化任务流 - 性能测试和优化

 

15. 不定期加餐（后期补录的视频）

注意：可试听，一经购买不可退款。