PRODUCT CAPABILITIES / XULUVISION
从接入到联动,
产品能力一表看清 。
视频从哪里来,模型如何判断,事件往哪里去。了解 XuluVision 从现场分析到业务联动的完整功能。
01 / 接入
连接现场视频
RTSP / RTMP / WHIP海康 / 大华 SDKNVR / GB28181大疆 ESDK / USB
02 / 判断
XuluVision 分析
模型协同场景规则二次判定
03 / 输出
衔接消息与业务
HTTP / MQTT企业微信 / 钉钉 / 飞书邮件 / 短信 / 电话音柱 / RS-485 / GPIO
FUNCTIONAL SPECIFICATIONS
功能规格
| 功能项目 | 功能说明 | 协议 / 方式 | 适用说明 |
|---|---|---|---|
| 01视频接入与预览连接现有视频资源,统一进入分析链路。 | |||
| 网络摄像头 | 接入已有枪机、球机、云台等网络摄像头,复用现场监控资源。 | RTSP | 边缘盒子 / AI 服务器 |
| 录像机与视频平台 | 接入 NVR 通道与第三方视频平台,也可让摄像头直接连接分析设备,录像机按项目选配。 | NVRGB28181 | 复用现有监控体系 |
| 流媒体接入与播放 | 通过 RTSP、RTMP 接入视频,支持 WHIP 推流接入;通过 WebRTC、HTTP-FLV、HLS 查看视频。4 路盒子支持 4 路推流,8 路盒子支持 8 路推流,16 路盒子支持 12 路推流,24 路盒子支持 12 路推流;服务器推流输出按项目配置。 | RTSPRTMPWHIPWebRTCHTTP-FLVHLS | 按源端与播放方式配置 |
| USB 相机与本地采集 | 接入 USB 相机与本地采集设备,让近距离作业、固定工位和本地视频进入分析链路。 | USB本地采集 | 现场视频输入 |
| 大疆无人机视频 | 通过大疆 ESDK 接入无人机视频,用于移动巡检、临时布控和地面摄像头难以覆盖的区域。 | 大疆 ESDK无人机视频 | 需匹配无人机与 ESDK 接口 |
| 厂商设备 SDK 接入 | 通过海康 SDK、大华 SDK 对接已有设备与视频资源,按现场设备接口及访问权限组织接入。 | 海康 SDK大华 SDK | 需匹配源端接口与权限 |
| 通道状态与断流恢复 | 查看视频通道在线情况,检测断流并自动尝试恢复,便于持续掌握现场视频状态。 | 在线状态断流恢复 | 视频通道运行管理 |
| 02模型分析与组合判断让识别结果进入业务规则,形成可执行的判断。 | |||
| 本地视觉分析 | XuluVision 模型在边缘盒子或服务器本地运行,视频分析不依赖中心在线。 | XuluVision本地推理 | 按设备算力与模型配置 |
| 多模型协同 | 同路视频组织多项模型任务,结合检测、识别与跟踪结果完成现场分析。4 路盒子每路推荐 6–8 种,8 路盒子每路推荐 4–6 种,16 路盒子每路推荐 4–6 种,24 路盒子每路推荐 4–6 种;AI 服务器单路摄像头推荐 10+ 种实时算法。 | 多任务并行分析 | 受算力与并发任务影响 |
| 专用识别能力 | 支持人脸识别、车牌识别、重识别与深度估计等已适配模型,按业务需要组合使用。 | 人脸车牌ReID深度估计 | 按模型与设备平台适配 |
| 组合算法流程 | 通过串行、并行和条件分支组织多个模型与规则,把单点识别组合为完整业务流程。 | 流程编排条件分支 | 面向具体业务场景 |
| 区域、时段与阈值 | 结合 ROI 区域、检测时段、置信度与持续时间等条件,限定关注范围和事件触发条件。 | ROI时段置信度时间阈值 | 按场景规则配置 |
| 身份与轨迹关联 | 将身份库匹配、目标轨迹和区域状态关联到同一流程,形成分流判断与分级事件。 | 身份匹配轨迹关联 | 需配置相应模型与业务规则 |
| 视觉二次判定 | 调用 XuluVision - 3B 对图片进行二次判定,辅助核验误报;通过公司 Key 管理调用与剩余额度。 | HTTP API公司 Key | 独立服务,按套餐次数计费 |
| 03告警输出与业务联动把重点事件送到负责人和业务系统。 | |||
| HTTP 事件回调 | 向指定业务地址推送事件信息与带检测标注的告警图像,将目标、发生时间和现场画面交给已有业务系统。 | HTTPWebhook绘制告警图像 | 需配置接收地址 |
| MQTT 消息输出 | 通过 MQTT 发布事件消息,对接消息总线、物联网平台与订阅该消息的业务系统。 | MQTT | 需配置 MQTT 服务与主题 |
| 企业微信通知 | 通过企业微信推送告警详情与带检测标注的现场图像,方便负责人查看异常目标并核验事件。 | 企业微信机器人 Webhook绘制告警图像 | 需配置企业微信机器人 |
| 钉钉告警推送 | 通过钉钉推送告警详情与绘制后的现场图像,让相关人员在工作群中查看异常与关联画面。 | 钉钉机器人 Webhook绘制告警图像 | 需配置钉钉机器人 |
| 飞书告警推送 | 通过飞书推送告警详情与绘制后的现场图像,把检测结果与事件画面送到对应业务群。 | 飞书机器人 Webhook绘制告警图像 | 需配置飞书机器人 |
| 邮件告警通知 | 将重点事件发送到指定邮箱,便于跨岗位接收通知、查阅事件信息与保留告警记录。 | 邮件收件人配置 | 需配置邮件发送服务 |
| 短信告警通知 | 通过短信通知指定联系人,在人员不方便查看工作群或平台时及时传递重点事件信息。 | 短信联系人配置 | 需配置短信服务与通知模板 |
| 电话告警通知 | 对需要及时响应的事件发起电话通知,配合现场业务规则触达指定值守人员。 | 电话语音通知 | 需配置语音呼叫服务 |
| 本地音柱报警 | 将检测事件联动到本地音柱进行声音提醒,让现场人员在告警发生位置及时获知异常。 | 本地音柱现场声音提醒 | 需连接本地音频设备 |
| 网络音柱报警 | 按事件来源与现场区域联动网络音柱,将告警声音送到对应点位,配合远程消息共同响应。 | 网络音柱点位联动 | 需配置音柱地址与访问权限 |
| RS-485 与 GPIO 信号联动 | 通过 RS-485 串口通信或 GPIO 信号输出联动外设,把视觉事件衔接到现场提示与控制设备。 | RS485GPIO外设联动 | 需匹配设备接口与外设协议 |
| 平台事件提醒 | 在平台集中查看重点事件、视频来源和发生时间,衔接后续核验与处置。 | 平台消息事件列表 | 本地或集群管理平台 |
| 事件证据与复核 | 关联告警图片、视频片段与事件信息,为现场确认、后续复核和问题追溯保留依据。 | 事件图片视频片段复核记录 | 按项目留存策略配置 |
| 04设备运行与集群管理现场独立工作,多项目统一管理。 | |||
| 单机独立运行 | 每台边缘设备在现场完成视频接入、模型分析与规则判断,断开中心不影响本地任务运行。 | 本地部署离线分析 | 外部通知仍需相应网络连接 |
| 跨地域盒子集群 | 按城市、项目与现场组织多个边缘节点,统一查看节点状态、运行任务与事件信息。 | 分布式节点集中管理 | 集群中心按项目选配 |
| 远程任务与版本管理 | 通过管理中心查看任务与模型版本,对不同项目、设备和发布批次进行统一管理。 | 远程管理版本下发 | 需连接管理中心 |
| 运行信息汇总 | 按项目汇总节点状态、运行统计、告警记录和审计日志,原始视频可以继续保留在现场。 | 状态统计日志 | 按项目数据策略配置 |
| 模型自动更新 | 检测并获取平台发布的模型新版本,按照设备适配与项目更新策略自动更新,持续适配现场任务。 | 模型版本检测自动更新 | 需配置更新策略与网络连接 |
| 系统自动更新 | 按照系统发布版本与项目更新策略获取新版本并自动更新,统一维护现场软件版本。 | 系统版本检测自动更新 | 按项目维护与发布策略执行 |
| 05专用训练与持续更新让模型持续适配项目现场。 | |||
| 项目私有训练 | 基于客户授权的数据,为不同机位、环境和业务目标训练项目模型,训练与运行可在私有环境完成。 | XuluVision私有部署 | 训练平台与项目服务 |
| 多源样本治理 | 汇总授权摄像头、边缘上报、开源数据与本地生成样本,按项目形成可追溯的数据版本。 | 授权数据现场反馈数据版本 | 仅使用具备许可的数据 |
| 复核、增强与标注 | 结合模型复核、场景增强、视觉标注与人工质检,组织正常、误报和有效事件样本。 | 模型复核样本增强人工质检 | 项目训练数据流程 |
| 自动寻优与分布式训练 | 根据数据和训练反馈调整训练策略,组织空闲算力协同训练,并验证精度、召回与误报表现。 | 自动寻优分布式训练质量验证 | 按训练资源与项目目标配置 |
| 受控发布与持续适配 | 验证通过后管理模型版本,按项目与设备分批发布,结合现场反馈持续优化模型。 | 版本管理分批发布设备更新 | 按项目更新策略与发布批次执行 |
接入协议需匹配源端能力与权限;通知渠道需配置相应服务。模型、集群与训练能力按项目配置,视觉二次判定为独立计费服务。
FROM CAPABILITY TO YOUR SCENE
把功能,落到你的现场。
查看应用场景中的算法组合,或告诉我们视频来源、关注事件与通知方式,沟通项目配置。