多源视频接入
按现场设备与协议选择接入方式，让不同来源的视频进入后续分析链路，不必为了算法更换整套摄像头。
- 网络视频流
- RTSP / RTMP / WHIP
- 国标平台
- GB28181
- 厂商接口
- 海康 SDK / 大华 SDK
- 视频设备
- NVR / USB
- 无人机接入
- 大疆 ESDK
XULUVISION / INTERACTIVE ARCHITECTURE
现场计算，管理与训练协同。
视频接入现场节点，按需部署集群管理，设备自动上报授权训练样本。
系统全景
从全局看产品
从节点懂流程
点击设备，探索内部流程每个产品都可以展开查看
视频接入现场分析节点
报警与状态上报，管理指令返回设备
设备直接上报授权样本
模型验证发布后，返回现场设备
产品与流程示意 · 实际配置按项目需求选型
运行流程说明按产品查看文字说明与流程入口
边缘盒子
视频在现场完成解码、模型分析与业务判断。按摄像头与任务配置，输出事件、告警标注图像与推流画面。
自研动态解码
不是固定间隔抽帧。自研动态解码结合模型效果反馈、设备硬件压力与算法需求，实时调整检测频率并选择分析帧，让有限算力服务于当下更需要的判断。
- 效果反馈
- 目标变化与检测结果，参与下一轮选帧
- 资源感知
- 结合硬件压力调整分析密度与任务节奏
- 任务适配
- 按算法时效与时序要求选择分析输入
多路多算法分析
不同摄像头配置不同算法。同一路画面按任务依赖，串行或并行组织三级检测：一级定位人员；二级并发分析人物特征、人脸和安全穿戴；三级仅对已检测到的安全帽识别颜色，对完整反光衣分析整洁度，再汇合业务结果。
- 一级检测
- 人员定位与目标共享
- 二级并发
- 人物特征、人脸、安全帽、反光衣、安全鞋
- 三级分析
- 帽体 → 颜色；完整反光衣 → 整洁度
组合业务判断
以渣土车联合检查为例：正斜面检查车牌、污损和车头，侧面检查车宽与轮胎，顶部检查盖板和装载外观，人员机位核验人脸。把同一车辆的分项结果关联到本次检查单，逐项汇总后输出整体结论，而不是只看某一路就完成判断。
- 四路联合检查
- 正斜面 · 侧面 · 顶部 · 人员核验
- 同车关联
- 车牌 · 检查单 · 机位触发 · 人车关系
- 汇总结果
- 视觉通过 / 需整改 / 结果待齐 / 关联待核验
事件输出与业务联动
识别异常后，可触发本地或网络音柱报警，电话、短信、邮件通知负责人，向企业微信、钉钉、飞书推送异常与告警图像，同时通过 GPIO、RS-485 控制信号连接现场设备。按配置保存并推送第三方平台记录，也可上报集群管理中心；道闸、门禁、灯光动作由相应业务条件控制。
- 现场与人员
- 音柱 / 电话 / 短信 / 邮件
- 推送与记录
- 企业微信 / 钉钉 / 飞书 / HTTP / MQTT
- 物理设备
- GPIO / RS-485 · 道闸 / 门禁 / 灯光
- 集群管理
- 可选上报中心留存与统一处理
XuluVision - 3B 二次复核
现场模型先发现候选事件，再按任务将事件图片与自然语言业务描述交给 XuluVision - 3B，帮助区分真实风险与不符合业务条件的干扰。
- 输入
- 候选事件图片与业务描述
- 方式
- 按需调用，不逐帧复核全部视频
- 结果
- 与候选事件关联的二次判定
AI 服务器
面向更多摄像头与组合算法需求，在本地服务器集中组织视频处理、模型分析和业务判断，配置随项目规模选型。
多源视频接入
按现场设备与协议选择接入方式，让不同来源的视频进入后续分析链路，不必为了算法更换整套摄像头。
- 网络视频流
- RTSP / RTMP / WHIP
- 国标平台
- GB28181
- 厂商接口
- 海康 SDK / 大华 SDK
- 视频设备
- NVR / USB
- 无人机接入
- 大疆 ESDK
自研动态解码
不是固定间隔抽帧。自研动态解码结合模型效果反馈、设备硬件压力与算法需求，实时调整检测频率并选择分析帧，让有限算力服务于当下更需要的判断。
- 效果反馈
- 目标变化与检测结果，参与下一轮选帧
- 资源感知
- 结合硬件压力调整分析密度与任务节奏
- 任务适配
- 按算法时效与时序要求选择分析输入
多路多算法分析
不同摄像头配置不同算法。同一路画面按任务依赖，串行或并行组织三级检测：一级定位人员；二级并发分析人物特征、人脸和安全穿戴；三级仅对已检测到的安全帽识别颜色，对完整反光衣分析整洁度，再汇合业务结果。
- 一级检测
- 人员定位与目标共享
- 二级并发
- 人物特征、人脸、安全帽、反光衣、安全鞋
- 三级分析
- 帽体 → 颜色；完整反光衣 → 整洁度
组合业务判断
以渣土车联合检查为例：正斜面检查车牌、污损和车头，侧面检查车宽与轮胎，顶部检查盖板和装载外观，人员机位核验人脸。把同一车辆的分项结果关联到本次检查单，逐项汇总后输出整体结论，而不是只看某一路就完成判断。
- 四路联合检查
- 正斜面 · 侧面 · 顶部 · 人员核验
- 同车关联
- 车牌 · 检查单 · 机位触发 · 人车关系
- 汇总结果
- 视觉通过 / 需整改 / 结果待齐 / 关联待核验
事件输出与业务联动
识别异常后，可触发本地或网络音柱报警，电话、短信、邮件通知负责人，向企业微信、钉钉、飞书推送异常与告警图像，同时通过 GPIO、RS-485 控制信号连接现场设备。按配置保存并推送第三方平台记录，也可上报集群管理中心；道闸、门禁、灯光动作由相应业务条件控制。
- 现场与人员
- 音柱 / 电话 / 短信 / 邮件
- 推送与记录
- 企业微信 / 钉钉 / 飞书 / HTTP / MQTT
- 物理设备
- GPIO / RS-485 · 道闸 / 门禁 / 灯光
- 集群管理
- 可选上报中心留存与统一处理
XuluVision - 3B 二次复核
现场模型先发现候选事件，再按任务将事件图片与自然语言业务描述交给 XuluVision - 3B，帮助区分真实风险与不符合业务条件的干扰。
- 输入
- 候选事件图片与业务描述
- 方式
- 按需调用，不逐帧复核全部视频
- 结果
- 与候选事件关联的二次判定
集群管理中心
在本地部署管理与存储服务器，汇集不同地点的盒子和 AI 服务器的报警信息与设备状态，统一预览画面，远程管理和控制。现场节点也可独立运行。
多个节点统一管理
在一个管理入口查看多个盒子和 AI 服务器节点，汇集设备状态，按项目统一组织设备管理。
- 对象
- 多个盒子与服务器节点
- 信息
- 设备状态与运行信息
- 方式
- 本地部署，统一管理
多个现场，统一画面预览
从现场与设备选择对应视频通道，在同一个入口预览多个机位画面，不必逐台进入不同地点的盒子或服务器。
- 选择
- 现场 → 设备 → 视频通道
- 查看
- 所选节点的多个机位画面
- 边界
- 节点在线且相应视频链路可达
报警信息集中存储
接收多个现场节点上报的报警信息与对应画面，保存在本地管理与存储服务器，方便统一查询与核查。
- 来源
- 边缘盒子与 AI 服务器
- 内容
- 报警信息与对应画面
- 部署
- 本地管理与存储服务器
远程管理与控制
通过集群管理中心远程管理和控制已接入的节点设备，减少逐台进入现场设备进行操作的工作量。
- 入口
- 集群管理中心
- 目标
- 已接入的现场节点设备
- 使用
- 按项目配置管理与控制
项目训练中心
由盒子或服务器在授权范围内自动上报现场样本与反馈，进入项目专属训练、质量验证和模型发布流程。支持客户私有环境部署。
授权样本与数据治理
盒子或服务器在授权范围内自动上报真实现场图片、困难样本和误报反馈，按项目与业务目标整理数据，形成后续训练的基础。
- 数据来源
- 客户授权画面与现场反馈
- 治理方式
- 数据清洗、分类与来源记录
- 项目边界
- 按授权范围使用项目数据
样本复核、增强与标注
围绕现场误报、困难目标和稀缺场景进行样本复核、增强与标注，并通过人工质检组织可用于训练的数据版本。
- 复核
- 确认样本内容与业务类别
- 增强
- 补充困难场景与稀缺目标
- 标注
- 组织标注并进行质量检查
XuluVision 项目专属训练
基于项目数据开展训练，结合自动训练寻优、Quality-Peak 小目标增强与分布式训练，让模型适配具体机位、环境与业务目标。
- 训练底座
- XuluVision 自研核心框架
- 训练方式
- 自动寻优、场景适配与分布式训练
- 交付目标
- 面向项目的专属模型版本
独立验证与质量评估
用独立验证数据检查识别、召回和误报表现，核对模型是否适合项目目标，验证通过后再进入发布。
- 识别表现
- 检查目标与业务结果
- 困难场景
- 核对小目标、遮挡及现场干扰
- 发布依据
- 验证通过后形成模型版本
部署优化与模型更新
将训练模型进行部署结构折叠和设备侧量化适配，验证后形成版本，按项目发布策略更新现场盒子与服务器。
- 部署优化
- 结构折叠与设备侧量化适配
- 版本发布
- 按项目受控发布
- 现场更新
- 模型自动更新，反馈进入下一轮迭代