
发布日期:2026-09-16 10:35 浏览次数:
先破一个常见误区:验收时看到的"准确率 99%",通常出自供应商的实验室样本库,不等于你现场的真实表现。同一个算法,换到你厂区、换成你的摄像头角度、换成夜班光照,指标可能就是另一回事。所以验收的关键不是听供应商报一个数字,而是约定测什么、怎么测、测到什么程度算通过。
今天讲清 AI 视频分析验收里最容易被含糊过去的 4 个指标,以及一套可落地的测试方法。

图注:验收前必须先分清的四个关键指标——准确率、正确识别、误报、漏报
准确率——所有报警中,判断正确所占的比例。这是最常被引用的数字,也是最容易被"美化"的数字。
召回率(又叫检出率)——真实发生的事件里,被系统检出的比例。这个指标才是安全场景的核心:一次真实违规没被检出,比十次误报更危险。
误报率——把正常行为判成违规的比例。误报的代价不是"多看一眼",而是告警疲劳:一天几十条无效告警,值班人员很快就不再认真看了。
漏报——真实事件没有被检出。在安全生产场景里,漏报往往对应的是事后追责,而不是"效率问题"。
一句话记住:误报伤体验,漏报伤安全。 两者不能用一个"准确率"打包带过。

图注:验收测试三步——样本集确认、现场实测、指标统计
第一步:确认样本集。 要求供应商与甲方共同确认一批测试样本,注意三点——要包含正样本(真实事件)和负样本(正常行为),要覆盖白天与夜间不同光照,要包含你现场的真实摄像头画面,而不是供应商自带的演示视频。样本数量按点位规模和识别对象复杂程度约定,必须双方书面确认。
第二步:现场实测。 在真实点位连续运行一段时间(而不是演示环境跑十分钟),记录全部告警与原视频。这一步的关键是"连续"——很多问题只在夜班、逆光、雨雾天气或人员密集时段才暴露。
第三步:指标统计。 由双方共同人工复核每一条告警记录,判定"正确 / 误报 / 漏报",据此统计四个指标。复核过程要留档,避免事后各说各话。
不要全场景套同一个数字。合理的做法是按区域风险分级:
夜间和恶劣天气单独测。 只测白天的验收结论没有意义,画面质量差异会直接反映在指标上。
把"处置成本"算进去。 一条误报背后是人工确认、现场核查、记录留痕。问清楚:误报是否支持二次过滤、是否支持分级推送。
看告警链路,不只看算法。 算法识别对了,但告警没推送到值班人手机,等于零。验收要覆盖"识别 → 推送 → 处置 → 留痕"全链路。
Q:误报率和准确率越高越好吗? 不是。两者存在权衡——把判定阈值调严,误报下降但漏报上升。所以必须结合场景风险等级定目标,而不是单看一个数。
Q:验收指标应该在合同哪个阶段约定? 建议在需求确认阶段就写进技术协议,明确样本集构成、测试时长、判定口径。事后补约定通常很难谈。
Q:供应商说算法后续能优化,验收可以先放宽吗? 建议把指标与优化周期一起写进条款,约定优化后的复测节点,而不是无条件放宽首次验收。
Q:既有摄像头画质一般,指标会不会受影响? 会有影响。画质、安装角度、光照条件都会作用于识别效果,所以在方案阶段就应做点位评估,而不是等验收才发现。
验收不是"挑刺",而是把预期对齐的过程——测什么、怎么测、多少算合格,三项写清楚,后面才不会有争议。
倍特威视在 AI 视频分析项目中提供算法测试支持与点位评估建议,支持既有摄像头接入。如果你正在准备算法验收或方案评估,欢迎联系我们获取针对性建议。