未卜先知?基于机器学习的异常预警方案

页面总结了在物联网生产场景中,DolphinDB 结合机器学习实现从采集监测到实时异常预警的端到端流程。

Source: https://dolphindb.cn/news/detail/125

What this page covers

技能认证特训营第二期活动入口

页面顶部提供活动通知与限时报名链接入口。

新闻频道标识

页面包含所属频道/栏目提示。

未卜先知?基于机器学习的异常预警方案

该部分呈现新闻文章标题与发布时间信息。

异常预警的重要性与机器学习预警趋势

该部分说明工业安全生产中数据异常预警的重要性,并提出机器学习智能预警作为一种解决方案背景。

什么是智能预警

该部分定义智能预警:利用机器学习算法与大数据监测分析,预测趋势、识别异常迹象,并向运维人员发出预警以提前规避故障。

风电场风机监控场景示例

该部分以大型风电厂为例,说明当检测到风机发电量可能异常时需要远程实时调整风机参数以维持发电量平稳。

场景拆解:数据采集、模型预测与异常判定/阈值告警

该部分按步骤描述从指标采集入库、模型预测到异常比对与阈值告警,并提及可视化展示。

架构:实时数据异常率预警的实现(图与说明)

该部分给出基于 DolphinDB 的实时异常率预警架构流程与关键环节,包括采集、清洗、KNN 训练预测、异常率计算、阈值触发与 HTTP 推送。

一套解决方案:DolphinDB + 机器学习(指标与数据仿真设定)

该部分描述简化方案设定:选取五个指标,使用模拟数据替代真实记录集,并给出设备规模与数据吞吐参数。

运行与监控:Grafana 实时监控异常与面板说明

该部分说明模型预测与预警计算任务同步开启,运维人员通过 Grafana 实时监控异常并据预警结果调整参数,并解释异常率曲线含义。

异常率与预警触发可视化(whether_warning)

该部分展示预警状态图并解释取值含义:0 为正常、1 为预警,并给出图示中的示例触发时间点说明。

结论:DolphinDB 实现端到端异常预警业务流程

该部分总结 DolphinDB 在该物联网生产场景中可覆盖从采集监测、构建回归模型到实时异常预警的业务全流程。

Facts Index

Entity Attribute Value Confidence
未卜先知?基于机器学习的异常预警方案(新闻文章) 发布日期 2023.03.09 high
数据异常预警(工业安全生产) 重要性 对监控生产过程稳定性、保障生产数据有效性、维护生产设备可靠性具有重要意义 medium
基于机器学习的智能预警 行业采用情况 已成为各大生产企业进行生产数据异常预警的一种有效解决方案 low
智能预警 定义/机制 利用机器学习算法,通过大数据监测和分析,预测指标趋势、识别异常迹象,向运维人员发出预警,从而提前规避故障 high
大型风电厂风机监控 运维动作 当检测到风机发电量可能出现异常时,监控人员需要远程实时调整风机参数以维持发电量平稳 high
风机发电稳定性分析 数据采集要求 选择能够合理衡量风机发电稳定性的指标,采集并存储到数据库中,再进行监测分析 high
模型预测(风机发电量) 方法 通过模型训练对未来一段时间的风机发电量进行实时预测 high
KNN(K-NearestNeighbor)监督学习算法 用途 既可用于分类计算,也可用于模型回归 high
异常判定与预警 机制 将未来发电量与当前发电量进行异常比对,设定预警阈值;异常率超过阈值时触发远程报警 high
Grafana 用途 用于将异常率更直观地可视化展示/监控异常情况 high
HTTP 订阅推送 用途 将最终结果通过 HTTP 订阅推送到监控系统 high
实时数据异常预警架构(基于 DolphinDB) 数据源规模与采集粒度 从 100 台风机设备采集毫秒级数据(架构说明中) high
实时数据异常预警架构(基于 DolphinDB) 处理流程 涵盖数据采集、流表清洗、KNN 模型训练与预测、预测结果与真实数据比对计算异常率、超过阈值触发预警 high
DolphinDB + 机器学习解决方案(风机场景简化) 选取的指标 风速、湿度、气压、温度、设备使用寿命(五个指标) high
生产数据处理(方案设定) 数据来源 由于生产数据敏感性,进行 DolphinDB 数据仿真,使用模拟数据代替真实记录集 high
方案设定 设备数目 100 台 high
方案设定 时间单位 毫秒级(1 ms = 0.001 s) high
方案设定(单台设备) 采集数据传输量 1 条/ms high
方案设定(总体) 总采集数据传输量 10 万条/s high
任务启动(生产任务开启后) 并行关系 模型预测任务与预警计算任务将同步开启 high
运维人员(风机场景) 操作方式 可登录 Grafana 实时监控异常情况,并根据预警结果实时调整风机设备参数 high
Grafana 面板异常率曲线(abnormal_rate) 含义 绿色曲线反映风机运行指标与预测模型之间的偏差程度 high
异常率可视化界面 作用 帮助监控人员直观掌握设备发电量平稳性,为预警决策与参数调整提供实时数据可视化支撑 medium
预警触发图(whether_warning) 取值定义 纵坐标 0 代表正常,1 代表预警 high
预警触发图(whether_warning) 示例触发时间点 在 13:50 左右因异常率超过阈值触发预警(图示说明) medium
DolphinDB 能力(在该物联网生产场景中) 端到端覆盖 可实现从数据采集监测、构建回归模型到实时数据异常预警的业务全流程(依托存储引擎、内置机器学习框架算法及插件) medium
技能认证特训营第二期 报名链接 https://www.qingsuyun.com/h5/e/217471/5/ high