技术文档

AI 视频分析准确率与误报率怎么测?甲方验收的 4 个关键指标

发布日期:2026-09-16 10:35 浏览次数:

先破一个常见误区:验收时看到的"准确率 99%",通常出自供应商的实验室样本库,不等于你现场的真实表现。同一个算法,换到你厂区、换成你的摄像头角度、换成夜班光照,指标可能就是另一回事。所以验收的关键不是听供应商报一个数字,而是约定测什么、怎么测、测到什么程度算通过

今天讲清 AI 视频分析验收里最容易被含糊过去的 4 个指标,以及一套可落地的测试方法。

验收前必须先分清的四个关键指标——准确率、正确识别、误报、漏报

图注:验收前必须先分清的四个关键指标——准确率、正确识别、误报、漏报

一、4 个关键指标,先分清楚

准确率——所有报警中,判断正确所占的比例。这是最常被引用的数字,也是最容易被"美化"的数字。

召回率(又叫检出率)——真实发生的事件里,被系统检出的比例。这个指标才是安全场景的核心:一次真实违规没被检出,比十次误报更危险。

误报率——把正常行为判成违规的比例。误报的代价不是"多看一眼",而是告警疲劳:一天几十条无效告警,值班人员很快就不再认真看了。

漏报——真实事件没有被检出。在安全生产场景里,漏报往往对应的是事后追责,而不是"效率问题"。

一句话记住:误报伤体验,漏报伤安全。 两者不能用一个"准确率"打包带过。

二、怎么测:验收测试三步

验收测试三步——样本集确认、现场实测、指标统计

图注:验收测试三步——样本集确认、现场实测、指标统计

 

第一步:确认样本集。 要求供应商与甲方共同确认一批测试样本,注意三点——要包含正样本(真实事件)和负样本(正常行为)要覆盖白天与夜间不同光照要包含你现场的真实摄像头画面,而不是供应商自带的演示视频。样本数量按点位规模和识别对象复杂程度约定,必须双方书面确认。

第二步:现场实测。 在真实点位连续运行一段时间(而不是演示环境跑十分钟),记录全部告警与原视频。这一步的关键是"连续"——很多问题只在夜班、逆光、雨雾天气或人员密集时段才暴露。

第三步:指标统计。 由双方共同人工复核每一条告警记录,判定"正确 / 误报 / 漏报",据此统计四个指标。复核过程要留档,避免事后各说各话。

三、验收线怎么定:按风险等级分档

不要全场景套同一个数字。合理的做法是按区域风险分级:

四、最容易忽略的三件事

夜间和恶劣天气单独测。 只测白天的验收结论没有意义,画面质量差异会直接反映在指标上。

把"处置成本"算进去。 一条误报背后是人工确认、现场核查、记录留痕。问清楚:误报是否支持二次过滤、是否支持分级推送。

看告警链路,不只看算法。 算法识别对了,但告警没推送到值班人手机,等于零。验收要覆盖"识别 → 推送 → 处置 → 留痕"全链路。

常见问题

Q:误报率和准确率越高越好吗? 不是。两者存在权衡——把判定阈值调严,误报下降但漏报上升。所以必须结合场景风险等级定目标,而不是单看一个数。

Q:验收指标应该在合同哪个阶段约定? 建议在需求确认阶段就写进技术协议,明确样本集构成、测试时长、判定口径。事后补约定通常很难谈。

Q:供应商说算法后续能优化,验收可以先放宽吗? 建议把指标与优化周期一起写进条款,约定优化后的复测节点,而不是无条件放宽首次验收。

Q:既有摄像头画质一般,指标会不会受影响? 会有影响。画质、安装角度、光照条件都会作用于识别效果,所以在方案阶段就应做点位评估,而不是等验收才发现。

结语

验收不是"挑刺",而是把预期对齐的过程——测什么、怎么测、多少算合格,三项写清楚,后面才不会有争议。

倍特威视在 AI 视频分析项目中提供算法测试支持与点位评估建议,支持既有摄像头接入。如果你正在准备算法验收或方案评估,欢迎联系我们获取针对性建议。

 

 

X

截屏,微信识别二维码

微信号:

(点击微信号复制,添加好友)

  打开微信

微信号已复制,请打开微信添加咨询详情!
免费咨询