标签: #airflow
关于 GPU、LLM、MLOps、Kubernetes 以及心态的文章 · 3 篇
Airflow 2 EOL 之后 — 从 2 迁移到 3 的实际工作清单，以及走到 3.3 的 3.x 现状
Apache Airflow 2 已在 2026 年 4 月 22 日迎来 EOL，如今这个版本已经不再有安全补丁。可是从 2 到 3 的路并不是一次 pip 升级，而是一次架构转变 — worker 对元数据 DB 的直接访问消失了，executiondate 系列的上下文键被移除，就连 cron 调度的默认语义也变了。本文原文通读官方升级指南与发行说明，梳理了真正需要动手的工作 — 跑 ruff 的 AIR 规则检查、把导入迁到 a
2026-07-17 · 22 分钟阅读 #data-engineering#airflow#workflow-engine#migration数据编排 2025 完全指南：dbt、SQLMesh、Dagster、Airflow、Prefect，数据契约，CI/CD（2025）
Season 5 Ep 4。如果说引擎负责查询，那么编排器负责治理流水线。dbt 的标准化与局限、SQLMesh 的反叛、Dagster 的 asset-centric 模型、Airflow 2.x/3.0 的演进、Prefect 3.0 的重生、数据契约（Data Contracts）、流水线 CI/CD、可观测性与告警，直到韩国企业的实务技术栈选型。
2026-04-15 · 17 分钟阅读 #data-orchestration#dbt#sqlmesh#dagster#airflow数据工程与 AI 流水线完全指南：从 Spark 到 Kafka
面向 AI 的数据工程完全指南。涵盖 Apache Spark、Kafka、Airflow、dbt、Delta Lake 直至特征存储的大规模数据流水线设计与实现。
2026-03-17 · 17 分钟阅读 #data-engineering#apache-spark#kafka#airflow#dbt