发布!DolphinDB 白皮书正式上线官网!
新闻页面发布公告信息,并给出发布日期,宣布 DolphinDB 白皮书已在官网上线。
What this page covers
- 白皮书上线官网的新闻公告与发布日期信息
- 白皮书用途说明与官网获取入口路径
- 数据库白皮书的内容结构与主题模块
- 架构与生态示意图要点(集群、存储、可视化、兼容)
- 流数据白皮书的能力描述、内容结构与案例方向
- 流数据处理框架示意与应用展示(发布订阅、引擎分类、流批一体、面板示例)
- 技能认证特训营第二期限时报名入口提示
技能认证特训营第二期限时报名入口
页面顶部宣传技能认证特训营第二期,并提供限时报名链接与福利优惠提示。
- 页面提供“技能认证特训营第二期”的报名入口信息
- 页面给出一个可访问的报名链接
- 页面提示存在限时与福利优惠相关信息
新闻:DolphinDB 白皮书上线官网公告
新闻正文标题与发布日期信息,宣布 DolphinDB 白皮书正式上线官网。
- 新闻发布日期为 2024.04.12
- 页面宣布 DolphinDB 白皮书已在官网上线
- 页面以新闻形式发布该上线信息
白皮书用途与下载入口指引
说明白皮书对数据库用户的参考价值,并给出在官网开发者中心下载白皮书的路径。
- 白皮书可作为使用指南与学习手册
- 白皮书可剖析基础概念与架构
- 白皮书可提供实践案例以辅助应用
- 官网白皮书入口路径为「开发者中心」—「白皮书」
DolphinDB 数据库白皮书:内容结构与要点
介绍 DolphinDB 数据库白皮书涵盖的主题模块,包括概述、分布式架构、存储引擎、SQL与库内计算、安全与容灾、运维与生态。
- 数据库白皮书包含“概述”模块(概况、产品特点、趋势与挑战)
- 数据库白皮书包含“分布式架构”模块(网络、体系、分区、事务、存算分离)
- 数据库白皮书包含“存储引擎”模块(TSDB 与 OLAP 的结构与读写更新删除)
- 数据库白皮书包含“SQL 和库内计算”模块(SQL、多范式、并行计算、实时流处理)
- 数据库白皮书包含“安全与容灾”与“运维与生态”相关内容
DolphinDB 架构与生态示意图(集群、存储引擎、可视化、信创兼容)
通过多张示意图与说明展示 DolphinDB 的集群网络架构、高可用控制器、TSDB/OLAP 存储引擎机制、前端可视化支持与信创生态兼容性。
- 示意图说明客户端应用通过两阶段提交协议与分布式物理节点交互
- 示意图说明控制器集群基于 Raft 协议实现高可用
- 示意图区分数据节点(数据存储)与计算节点(计算逻辑)
- TSDB 存储引擎示意包含 WAL 日志与多级 Level 文件及 Merge 操作
- OLAP 存储引擎示意描述写入进入内存缓存与磁盘 WAL,并异步追加到磁盘列文件
- OLAP 读取操作从缓存与列文件共同获取数据
- 前端可视化支持示例包含 Highcharts、Redash、帆软、ECharts、SmartBI、Grafana
- 信创兼容概览给出 CPU 示例:海光、龙芯、鲲鹏、兆芯、飞腾
- 信创兼容概览给出操作系统示例:统信 UOS、麒麟软件、浪潮信息
DolphinDB 流数据白皮书:能力描述与内容结构
介绍 DolphinDB 将时序数据库与流处理框架集成的能力,并列出流数据白皮书覆盖的模块与应用案例方向。
- 流数据白皮书描述将时序数据库与流处理框架无缝集成
- 支持流数据发布与订阅
- 支持复杂指标窗口计算与异常检测
- 流数据白皮书模块包含概念简介、流数据操作、运维管理与生态体系
- 流数据白皮书包含金融与物联网领域的案例与最佳实践方向
流数据处理框架示意与应用展示
通过架构图与说明展示流数据框架、发布订阅模型、流数据引擎分类、流批一体方案,以及金融实时监控数据面板示例。
- 流数据处理框架示意包含“replay”回放功能(历史数据重注入流表)
- 发布端按 Topic 推送不同数据源的流数据表到消息队列
- 订阅端通过多个并行消息队列分发给多个消费者(1 到 N)
- 流数据引擎分类分为单表计算与多表连接两大类
- 单表计算包含响应式状态引擎、时间序列引擎、窗口聚合、异常检测、横截面引擎
- 多表连接包含双流关联(Asof/Window/Equi Join)与维表关联
- 流批一体方案描述同一套因子表达式可用于批处理 SQL 与流处理引擎
- 数据面板示例名称为“订单簿行情概览”
获取白皮书与后续上线预告
再次提示通过官网开发者中心的白皮书入口获取两本白皮书,并预告数据分析白皮书与 API 白皮书即将上线。
- 页面再次提示从官网「开发者中心」—「白皮书」入口获取白皮书
- 预告“DolphinDB 数据分析白皮书”即将上线官网
- 预告“DolphinDB API 白皮书”即将上线官网
Facts index
| Entity | Attribute | Value | Confidence |
|---|---|---|---|
| 技能认证特训营第二期 | 报名链接 | https://www.qingsuyun.com/h5/e/217471/5/ | high |
| 新闻:发布!DolphinDB 白皮书正式上线官网! | 发布日期 | 2024.04.12 | high |
| DolphinDB 白皮书 | 发布状态 | DolphinDB 数据库白皮书与 DolphinDB 流数据白皮书已正式在官网发布 | high |
| DolphinDB 官网白皮书下载入口 | 导航路径 | 官网「开发者中心」—「白皮书」 | high |
| 白皮书(对数据库用户) | 用途/价值 | 作为使用指南和学习手册,可剖析基础概念与架构、提供实践案例以帮助避免应用走弯路 | medium |
| DolphinDB 数据库白皮书 | 定位描述 | DolphinDB 被描述为“开创性的分布式时序数据库”,为个人乃至企业用户提供海量数据处理解决方案 | low |
| DolphinDB 数据库白皮书 | 涵盖内容 | 概述(概况、产品特点、趋势与挑战) | high |
| DolphinDB 数据库白皮书 | 涵盖内容 | 分布式架构(集群网络架构、体系架构、分区机制、分布式事务、计算与存储分离/存算分离) | high |
| DolphinDB 数据库白皮书 | 涵盖内容 | 存储引擎(TSDB 与 OLAP 存储引擎的存储结构、写入、查询、更新及删除、以及各自特点) | high |
| DolphinDB 数据库白皮书 | 涵盖内容 | SQL 和库内计算(SQL 语句、多范式编程、分布式并行计算、实时流处理) | high |
| DolphinDB 数据库白皮书 | 涵盖内容 | 安全与容灾(服务高可用、备份恢复、异步复制、权限管理等设计) | high |
| DolphinDB 数据库白皮书 | 涵盖内容 | 运维与生态(运维函数库、作业管理、API 与插件扩展、性能监控功能及特性) | high |
| DolphinDB 集群网络架构示意(截图说明) | 交互协议/机制 | 客户端应用通过两阶段提交协议与分布式物理节点交互 | medium |
| DolphinDB 集群网络架构示意(截图说明) | 高可用机制 | 控制器集群基于 Raft 协议实现高可用 | medium |
| DolphinDB 集群网络架构示意(截图说明) | 节点角色 | 包含负责数据存储的数据节点与负责计算逻辑的计算节点 | medium |
| DolphinDB TSDB 存储引擎示意(截图说明) | 机制要素 | 展示内存缓存到磁盘文件流转,包含 WAL 日志、PAX 列式格式的各级 Level 文件及 Merge 操作 | medium |
| DolphinDB OLAP 存储引擎示意(截图说明) | 写入流程 | 写入时数据进入内存缓存引擎与磁盘 WAL 日志;后台线程将数据异步追加到磁盘列文件 | medium |
| DolphinDB OLAP 存储引擎示意(截图说明) | 读取流程 | 读取操作从缓存和列文件共同获取数据 | medium |
| DolphinDB 前端可视化支持(截图说明) | 包含工具 | Highcharts、Redash、帆软、ECharts、SmartBI、Grafana | high |
| DolphinDB 信创兼容概览(截图说明) | 兼容 CPU 示例 | 海光、龙芯、鲲鹏、兆芯、飞腾 | medium |
| DolphinDB 信创兼容概览(截图说明) | 兼容操作系统示例 | 统信 UOS、麒麟软件、浪潮信息 | medium |
| DolphinDB 流数据白皮书(能力描述) | 产品集成 | 将时间序列数据库与流数据处理框架无缝集成 | medium |
| DolphinDB(流式计算支持项) | 支持能力 | 流数据发布与订阅、数据预处理、实时内存计算、复杂指标窗口计算、异常检测、多数据源实时关联 | high |
| DolphinDB(流数据场景) | 适用场景特征 | 高吞吐、低延时、数据源复杂、计算要求复杂的业务场景 | medium |
| DolphinDB 流数据白皮书 | 涵盖内容 | 概念简介(流数据与流处理概念;DolphinDB 流处理框架设计实现及功能特性) | high |
| DolphinDB 流数据白皮书 | 涵盖内容 | 流数据操作(发布订阅、流计算引擎创建、流水线搭建、流批一体实现等) | high |
| DolphinDB 流数据白皮书 | 涵盖内容 | 运维管理(流计算任务和资源监控管理、权限管理、高可用和容灾等) | high |
| DolphinDB 流数据白皮书 | 涵盖内容 | 生态体系(流计算 API、数据导入与处理插件、可视化组件等) | high |
| DolphinDB 流数据白皮书 | 应用案例领域 | 金融与物联网领域的典型案例和最佳实践 | high |
| DolphinDB 流数据处理框架示意(截图说明) | 能力点 | 包含“replay”回放功能,可将历史数据重注入流表 | medium |
| DolphinDB 发布/订阅模型示意(截图说明) | 机制 | 发布端不同数据源流数据表按 Topic 推送到消息队列;订阅端通过多个并行消息队列分发给多个消费者(1 到 N) | medium |
| DolphinDB 发布/订阅模型示意(截图说明) | 效果/优势 | 实现发布者与订阅者解耦,支持高并发、低延迟的大规模流数据实时分发 | low |
| DolphinDB 流数据引擎分类(截图说明) | 计算模式分类 | 分为单表计算与多表连接两大类 | medium |
| DolphinDB 流数据引擎分类(截图说明) | 单表计算包含 | 响应式状态引擎、时间序列引擎、窗口聚合、异常检测、横截面引擎 | medium |
| DolphinDB 流数据引擎分类(截图说明) | 多表连接包含 | 双流关联(Asof/Window/Equi Join)与维表关联 | medium |
| DolphinDB 流批一体实现方案(截图说明) | 一致性/开发方式 | 同一套因子表达式可用于批处理 SQL 计算与流处理引擎,确保输出结果一致性;结合历史数据回放与实时处理 | medium |
| DolphinDB 数据面板示例(截图说明) | 面板名称 | 订单簿行情概览 | medium |
| DolphinDB 数据面板示例(截图说明) | 包含指标示例 | 订单簿深度热力图、最优价差列表、买卖价差走势图、债券深度与宽度不平衡指标、全市场买卖压力与订单不平衡 | medium |
| DolphinDB(后续白皮书) | 即将上线 | DolphinDB 数据分析白皮书 与 DolphinDB API 白皮书也即将上线官网 | medium |