AI Event Manager
t(icon)

AI Event Manager

从现有 RTSP 摄像头视频中检测潜在危险事件,并通过 VLM 验证记录场景上下文 和判断依据,使 ORBRO OS 的 AI Event 运营更加精准。

直接使用现有 RTSP 摄像头
Detection + VLM 双阶段判断
所有判定均记录依据

“已经部署了 AI 事件检测, 为什么现场判断方式却没有改变?”

单纯的检测可以生成告警,但运营人员真正需要的是“发生了什么事情”、“为什么会被判定为事件”,以及“未来是否能够依据相同标准重新审核”。 AI Event Manager 不仅展示检测结果,还会通过候选事件检测、Detection Pipeline 和 VLM Verify 来决定是否触发告警,并将判断依据记录为运营日志。

RTSP 视频输入

连接现有摄像头视频流,将其转化为可供 AI 分析的运营数据来源。

危险事件候选检测

从现场视频中快速筛选跌倒、火灾、未佩戴防护装备等需要进一步审核的场景。

VLM 场景语境验证

对检测到的候选事件进行前后场景及空间语境复核,并记录判断依据。

基于事件记录进行运营

将验证结果关联到分析界面和事件日志,用于现场响应及事后复盘。

从检测到验证

快速发现,再次确认, 并通过记录进行复核

AI Event Manager 的优势不仅在于展示检测结果,更在于通过 VLM 验证场景语境,并将判断依据保存在日志和分析界面中。

① Detection

候选事件检测

从摄像头视频中快速筛选潜在危险事件。运营人员可以实时查看每台摄像头检测到的候选场景。

跌倒
烟雾与火灾
进入危险区域
叉车碰撞
未佩戴防护装备
t(FeatureBackground1)
t(Feature1)

② Detection Pipeline

检测流水线

整理候选事件的类型、摄像头、帧信息、置信度和处理状态,并将其传递至验证阶段。

帧提取
图像分析
置信度
t(FeatureBackground2)
t(Feature2)

③ VLM Verify

语境验证

VLM 通过分析事件前后场景及空间语境,判断是否触发告警或放行,并记录相应依据。

VLM 响应
事件判定
事件记录
t(FeatureBackground3)
t(Feature3)

可扩展的检测项目

并非固定的检测模型组合, 而是根据现场风险类型灵活配置

AI Event Manager 的检测项目可根据现场环境和运营策略进行组合配置。检测模型负责筛选候选事件,VLM 验证和事件日志则共同记录判断依据。

caption1

跌倒检测

基于作业人员姿态和动作变化筛选异常情况候选,并将其纳入验证与记录流程。

作业人员安全
caption2

火灾检测

快速检测火焰候选事件,并通过 VLM 验证场景语境,辅助初期应急响应决策。

火灾风险
caption3

未佩戴安全帽检测

检测个人防护装备佩戴状态,记录违反安全规范的候选事件,并纳入现场核查流程。

防护装备
caption4

碰撞检测

筛选人员、设备或移动载具之间可能发生剧烈接触或碰撞的场景,辅助事后核查与分析。

碰撞风险
caption5

危险区域接近检测

检测对预先定义的危险区域(如作业限制区、设备作业半径及禁入区域)的接近行为,并作为候选事件记录。

区域管理
caption6

烟雾检测

检测火灾发生前阶段的烟雾候选事件,补充火灾检测模型,提高早期预警能力。

火灾征兆
caption7

未穿戴安全反光背心检测

根据现场规定的背心颜色和样式检测防护装备佩戴情况,识别违反安全规范的候选事件。

防护装备
caption1

跌倒检测

基于作业人员姿态和动作变化筛选异常情况候选,并将其纳入验证与记录流程。

作业人员安全
caption2

火灾检测

快速检测火焰候选事件,并通过 VLM 验证场景语境,辅助初期应急响应决策。

火灾风险
caption3

未佩戴安全帽检测

检测个人防护装备佩戴状态,记录违反安全规范的候选事件,并纳入现场核查流程。

防护装备
caption4

碰撞检测

筛选人员、设备或移动载具之间可能发生剧烈接触或碰撞的场景,辅助事后核查与分析。

碰撞风险
caption5

危险区域接近检测

检测对预先定义的危险区域(如作业限制区、设备作业半径及禁入区域)的接近行为,并作为候选事件记录。

区域管理
caption6

烟雾检测

检测火灾发生前阶段的烟雾候选事件,补充火灾检测模型,提高早期预警能力。

火灾征兆
caption7

未穿戴安全反光背心检测

根据现场规定的背心颜色和样式检测防护装备佩戴情况,识别违反安全规范的候选事件。

防护装备

界面介绍

与其阅读说明, 不如直接查看产品界面。

我们没有将所有功能堆叠在同一个界面中,而是根据运营人员的职责划分了不同的工作界面。

Live Monitoring

同时展示所选摄像头的实时视频、检测流水线和检测日志。运营人员可以即时查看候选事件检测及验证进度。

Analysis

分析界面用于查看被归类为告警的检测日志,可按时间范围、摄像头、事件类型和置信度进行筛选,并结合帧图像和 VLM 说明进行复核。

AI Event Log

事件日志以表格形式展示检测记录,并支持根据日期时间、事件类型、置信度、摄像头、录像画面以及 VLM 响应进行重新审查。

Settings

设置界面用于管理摄像头输入、VLM 服务器、Access Token 以及事件类型,可在一个位置统一配置运营策略和验证联动。
image-0

系统架构图

连接 Edge 预处理与 VLM 服务器验证, 并可与 ORBRO OS 协同运行

AI Event Manager 首先在靠近现场的位置筛选候选事件,然后由 VLM 服务器验证场景语境,最后将结果传递至运营界面以及与 ORBRO OS 集成的工作流程中。

t(BackgroundImage)
t(SystemImage)

ORBRO Edge Pro 规格参数

Overview

尺寸188mm × 108mm × 27mm
接口布局1GbE RJ45 × 2, HDMI, USB-C, USB-A
应用AI Event Manager
设备形态紧凑型桌面设备
外壳材质铝合金
重量300 g
认证KC
运行环境-5 至 45°C / 10% 至 90%
视频输入RTSP 摄像头视频流
Edge 角色候选事件检测
验证VLM Verify 集成
运行功能实时监控、分析、事件日志

Performance

连接能力RTSP 摄像头(最多 4 路)
AI 加速器Halo × 2
软件AI Event Manager(内置)

Wireless Connectivity

有线连接以太网
无线连接Wi-Fi、Bluetooth

Power

电源输入USB Type-C(支持 USB PD)
功耗20 V

常见问题

快速了解产品范围、现有基础设施的利用方式,以及候选事件检测与 VLM 验证之间的区别。

咨询 ORBRO 解决方案

与专家一起部署 ORBRO 解决方案

提供世界领先的技术与丰富的实践经验。

AI Event Manager | 视频AI事件检测与VLM验证解决方案 | ORBRO