Airflow
活跃简介
Apache 出品的工作流编排平台，行业标准 ETL 方案。
核心特性
- DAG 模型 — 显式定义依赖
- 丰富 Operator — 200+ 内置
- 可扩展 — 自定义 Operator 容易
- K8s 集成 — KubernetesExecutor 原生
- 可视化 — 任务状态一目了然
适用场景
💡 为数据团队提供企业级 ETL 编排。
💡 为 LLM 工作流加调度与依赖管理。
💡 为 ML pipeline 提供模型训练与发布流程。
优势与不足
✅ 优势
- • 活跃维护，近期持续更新
- • 社区热度高（46.5k stars）
- • 开源许可证友好（Apache-2.0）
分类
快速开始
# 安装
pip install apache-airflow
# 初始化数据库
airflow db init
# 启动 webserver 与 scheduler
airflow webserver -p 8080 &
airflow scheduler