上线 Airflow 官方！
本页介绍在数据实时处理与自动化工作流管理需求提升背景下的相关信息与背景说明。
What this page covers
- 新闻栏目、文章标题与发布日期信息。
- 数据实时处理与工作流管理需求的背景。
- DolphinDB 登陆 Apache Airflow 官方与 Airflow 平台能力概览。
- Airflow 官方插件/供应商列表中的相关条目与说明。
- DolphinDBOperator 的用途与能力点。
- 结合 Airflow 与 DolphinDB 的工作流设计与监控运维相关主张。
- 插件上架、下载渠道与部署教程链接。
技能认证特训营第二期限时报名促销
页面顶部提供活动报名入口，并提示存在福利优惠信息。
- 提供“技能认证特训营第二期”的报名链接。
- 提示活动报名已开启并带有限时报名与福利优惠信息。
新闻栏目与文章标题/发布日期
页面标识为新闻栏目内容，并展示文章标题与发布日期。
- 内容属于新闻栏目页面结构的一部分。
- 文章标题为“上线 Airflow 官方！”。
- 发布日期为 2024.07.17。
背景：数据实时处理与工作流管理需求提升
页面描述企业对实时处理分析能力与自动化管理数据处理流程的需求背景。
- 提到对实时处理与分析能力的需求。
- 提到对自动化管理数据处理流程的需求。
DolphinDB 登陆 Apache Airflow 官方与 Airflow 能力介绍
页面声明 DolphinDB 获 Airflow 官方认可为第三方插件/工具供应商，并介绍 Airflow 的平台特性与插件生态。
- 声明 DolphinDB 正式登陆 Apache Airflow 官方。
- 称 DolphinDB 成为 Airflow 官方认可的第三方插件及工具供应商。
- 将 Apache Airflow 描述为可编程、调度和监控的工作流管理平台。
- 描述 Airflow 以 DAG 定义有依赖的任务并依次执行。
- 描述 Airflow 可通过插件生态系统扩展功能与集成。
Airflow 官方插件供应商列表截图与说明
页面通过截图与引用说明，强调 Airflow 官方网站供应商列表中存在相关条目，并提及其 Hook 与 Operator 能力。
- 包含一处用于佐证的截图内容。
- 引用说明中提到“Airflow DolphinDB Provider”条目存在于供应商列表。
- 引用说明中称其提供 Hook。
- 引用说明中称其提供 Operator。
- 引用说明中称其用于支持在 DolphinDB 中运行脚本。
DolphinDBOperator 插件：用途与能力
页面介绍 DolphinDB 基于 Airflow 开发 DolphinDBOperator，并描述其在 Airflow 中连接 DolphinDB 执行多类数据处理操作与 ETL 调度用途。
- DolphinDBOperator 被描述为 DolphinDB 基于 Airflow 开发的插件。
- DolphinDBOperator 被描述为 Airflow 系统中的自定义操作符（Operator）。
- 用于在 Airflow 中连接 DolphinDB 执行数据写入操作。
- 用于在 Airflow 中连接 DolphinDB 执行查询、计算与导出操作。
- 用于实现数据 ETL 作业的管理与自动化调度。
方案优势：工作流设计与监控运维增强
页面描述将 Airflow 与 DolphinDB 结合后，在流程设计与监控运维方面的相关收益主张。
- 主张可利用 Airflow 的直观界面与任务类型进行流程设计。
- 主张结合 DolphinDB 的分析能力可灵活设计数据处理流程。
- 主张可将 Airflow 监控报警与 DolphinDB 日志/性能监控结合。
- 主张可实时掌握处理状态并及时发现与解决问题。
集成方式与适用场景：作为数据源/目标库与扩展性
页面说明通过 DolphinDBOperator 的集成方式与适用场景，包括数据源/目标库角色、实时与批量分析覆盖及可扩展性主张。
- DolphinDB 可直接作为 Airflow 的数据源。
- DolphinDB 可直接作为 Airflow 的目标库。
- 主张可在 Airflow 工作流中实现无缝集成与数据流转。
- 支持实时数据的捕获与处理场景。
- 支持历史数据的批量分析场景。
插件上架与下载渠道、部署教程链接
页面说明 DolphinDBOperator 已在 Airflow 官方上架，并给出下载渠道与部署教程链接。
- 声明 Airflow 官方现已上架 DolphinDBOperator 插件。
- 说明可在 DolphinDB 官网下载该插件。
- 说明可在 Airflow 官网上下载该插件。
- 提供部署教程链接《DolphinDB 与 Python AirFlow 最佳实践》。
教程链接：https://docs.dolphindb.cn/zh/tutorials/ddb_airflow.html
Facts Index
| Entity | Attribute | Value | Confidence |
|---|---|---|---|
| 技能认证特训营第二期 | 报名链接 | https://www.qingsuyun.com/h5/e/217471/5/ | high |
| 技能认证特训营第二期 | 状态/促销 | 正式开启，限时报名，享专属福利优惠 | medium |
| 上线 Airflow 官方！ | 发布日期 | 2024.07.17 | high |
| DolphinDB | Airflow 官方状态 | 正式登陆 Apache Airflow 官方，成为 Airflow 官方认可的第三方插件及工具供应商 | high |
| Apache Airflow | 平台定位 | 可编程、调度和监控的工作流管理平台 | high |
| Apache Airflow | 架构/能力描述 | 模块化架构、动态定义数据管道；基于有向无环图（DAG）定义有依赖的任务并依次执行 | high |
| Apache Airflow | 集成能力描述 | 可与多种数据存储、处理工具和云服务无缝集成；通过插件生态系统扩展功能与集成 | high |
| Airflow DolphinDB Provider（截图所示条目） | 插件能力描述 | 提供 Hook 和 Operator 以支持在 DolphinDB 中运行脚本（来自页面对截图的说明） | medium |
| DolphinDBOperator | 来源/开发方式 | DolphinDB 基于 Airflow 开发的插件 | high |
| DolphinDBOperator | 定位 | Airflow 系统中的自定义操作符（Operator） | high |
| DolphinDBOperator | 可执行操作 | 在 Airflow 连接 DolphinDB 进行数据写入、查询、计算及导出等操作 | high |
| DolphinDBOperator + Airflow | 用途 | 实现对数据 ETL 作业的高效管理和自动化调度 | high |
| DolphinDBOperator（方案） | 价值主张 | 提供一体化数据管理解决方案，带来显著增强的数据处理性能/体验（营销性表述） | low |
| 方案（Airflow + DolphinDB） | 工作流设计收益 | 利用 Airflow 直观界面与任务类型结合 DolphinDB 分析能力，可灵活设计满足业务需求的数据处理流程，实现数据价值最大化（含营销性表述） | low |
| 方案（Airflow + DolphinDB） | 监控与运维收益 | 将 Airflow 监控报警与 DolphinDB 日志/性能监控结合，可实时掌握处理状态并及时发现解决问题（效果性表述） | medium |
| DolphinDB（在 Airflow 中） | 角色 | 可直接作为 Airflow 的数据源或目标库 | high |
| DolphinDBOperator | 集成效果 | 实现数据在 Airflow 工作流中的无缝集成与自由流转（表述性/效果性） | medium |
| DolphinDBOperator + Airflow | 适用场景 | 支持实时数据的捕获与处理，以及历史数据的批量分析 | high |
| Airflow 与 DolphinDB | 可扩展性主张 | 用户可扩展数据处理能力以应对增长的数据量与更复杂的分析需求（主张性表述） | low |
| DolphinDBOperator | 上架状态 | Airflow 官方现已上架 DolphinDBOperator 插件 | high |
| DolphinDBOperator | 下载渠道 | 在 DolphinDB 官网及 Airflow 官网上均可下载该插件 | medium |
| DolphinDB（通过该插件） | 能力体验主张 | 可更方便体验 DolphinDB 的实时流计算能力，实现工作流与数据处理的深度整合与高效协同（主张性表述） | low |
| 部署教程链接 | 标题与URL | 《DolphinDB 与 Python AirFlow 最佳实践》 https://link.zhihu.com/?target=https%3A//docs.dolphindb.cn/zh/tutorials/ddb_airflow.html | high |