您现在的位置是:课程

中文版 Airflow 教程(二)

2023-11-06 21:41课程 人已围观

本课程为连载课程一共25个课时,每周更新1-2节,3个月内更新完。有问题可以联系客服:wechat:17812796384/18310139238

 

课程介绍

本课程⾯向的是 SRE,DevOps,⼤数据 ⼯程师; 通过本课程的学习,你将会获得如下能⼒:

  • 从0到1的熟练使⽤ Airflow ⼯具和⽣态,并能充分利⽤这⼀调度利器,在⼯作中发挥重要作⽤
  • airflow 基本使⽤,故障告警,排查,性能调优
  • 如何基于 airflow 的 API 对其进⾏⼆次开发

1. 架构和组件介绍

架构

 

 

 

组件

 

2. 使⽤场景

  1. ⼤数据⾃动化任务流
  2. DevOps
  3. 快速开发环境部署

  • 云主机
  • Docker

4.名词介绍和⽤途

 

 

 

 

5.快速⼊⻔

  • 最⼩ Dag 示例
  • 介绍 Dag, BashOperator
  • 任务间依赖关系

6. 深⼊定时策略

  1. 时区
  2. linux cron和 schedule_interval
  3. schedule_interval 表达式 案例演示

 

7. 全⾯学习 UI 使⽤

  1. View
  2. Admin
  3. Doc
  4. 表结构介绍

8. ⽇志和监控
架构

 

基于 Prometheus 监控⽅案

错误跟踪

9. 安全

1.RBAC 权限
2.组件权限控制
2.1.API
2.2.Webserver
2.3.Flower

10. 专题学习
1. 2.x新特性
2. 深⼊command line

 

3.深⼊ operators

 

 

 

4.深⼊ Executor

 

 

 

11. 通知
1.邮件
2.短信
3.钉钉

12. ⽣产环境 HA 部署
1.云主机
2.Kubernetes

13. 插件
1.简介
2.如何使⽤插件
3.学习开源常⻅插件

14. 项⽬

DevOps - 主机⽣命周期管理

 

 

 

⼤数据⾃动化任务流 - 性能测试和优化

 

15. 不定期加餐(后期补录的视频)

注意:可试听,一经购买不可退款。

-->

站点信息

  • 文章统计篇文章