发布于 2026-11-18 · VWU.AI

DMS 数据试单怎么验收?批量生产前的计划表

在批量生产前明确 DMS 数据试单范围、样本选择、缺陷记录、返工责任和签收证据,分别验证数据规格与模型用途。

作为审核工作环境参考的背光键盘
说明用参考照片,不是微物数据交付样本或模型测试结果。 freestocks.org from Olsztyn, Poland · CC0 1.0

DMS 数据试单应回答一个采购问题:供应商能否在目标条件下交付约定的文件、可观察行为和标注?先写清楚问题与验收证据,再开始生产。好看的演示视频,或者一个模型分数,都不能代替完整验收计划。

本文提供试单记录表和决策流程,不规定适用于所有项目的样本数量、缺陷比例或模型阈值。这些条件取决于具体任务、风险、场景和可获得的证据,需要双方明确约定。

先固定有边界的试单范围

写明预测任务、相机设置、目标行为和正常反例。明确验收合格片段数量、时长范围、标注类型、输出格式以及来源记录。范围外的事项也要写清楚,例如第二个相机视角,或在当前构图下无法观察的标签。

为需求、标签规则和试单批次设置稳定编号。审核时修改规则,要保留旧版本,标出哪些样本需要重新标注。否则后面的通过率可能混用了不同定义,无法解释。

选择能够暴露问题的样本

除了普通样本,也要纳入容易出现不匹配的条件,例如局部遮挡、光照变化、片段边界附近的动作,以及外观相似但不属于目标的行为。保存样本清单与选择规则,使选择过程可以复核。精选演示可以帮助解释概念,但不能证明未展示批次的质量。

不要宣称一次小试单代表了未来所有组合。标明未检查的条件,决定是否需要第二次试单、限制交付范围,或在批量中增加相应检查。没有测试,与测试通过,必须分开记录。

用记录表明确证据和责任

审核部分应保存的证据谁作出决定
文件与打包文件列表、可读格式、时长和预期数量买方确认工具链兼容
场景内容能定位约定行为与条件的样本编号和时间点指定审核人对照需求
标注规则版本、可见参考证据、导出回读结果标注负责人处理解释争议
质量缺陷类型、受影响区间、影响及修正建议双方确认处理方式
授权与交付使用范围、来源记录和交付限制项目负责人核对许可用途

记录应让另一位审核人找到同一处证据。“感觉不对”可以是问题线索,但还不是充分的返工要求。

定义规格 → 样本试单 → 问题复核 → 验收确认
定义规格 → 样本试单 → 问题复核 → 验收确认

原创流程示意,不代表实测结果。

数据符合规格,不等于模型效果已验证

规格验收检查交付内容是否符合约定。模型用途验证检查数据是否有助于特定预测任务及合适的评估集。数据可以符合规格,却未必对某个模型有帮助;模型分数较高,也不能抵消缺文件或标签错误。

若试单包含模型实验,提前约定基线、训练配置、评估对象、指标和判断规则。相关样本不能进入相互冲突的划分。scikit-learn 分组交叉验证文档介绍了依赖样本的分组划分原则,但采用该原则本身并不证明实际部署性能。

记录缺陷,不随意规定容错比例

按项目定义问题类型,例如文件无法读取、行为不符、标签无法核实、元数据缺失。已确认缺陷与解释待定的问题应分开。每个问题保存样本编号、时间区间、预期规则、实际证据和要求的处理动作。共享审核表中不要加入个人敏感信息。

例如,一个假设样本中的动作在片段开始前已经发生。如果需求要求看见动作起点,它可能不符合范围;如果允许截断事件,则应使用约定的边界标记。同一段画面,可能因书面规则不同而得到不同结果,详见时间边界标注指南。

约定返工与是否量产的决定

开工前明确谁修复哪些问题、替换样本如何编号、修正后是否复检,以及哪些范围变更需要重新报价。保留原样本与替换样本之间的关系,不要覆盖审核历史。

试单结束时,明确记录三种结果之一:按批准规则进入量产;修改范围后重做指定检查;因不可行而停止。列明未解决的条件和批量仍需执行的检查。签收记录应包含批准人、规则版本和合格清单,而不只是一封“可以了”的邮件。

标签检查可参考标注质量清单,文件打包可参考交付完整性指南。向微物数据沟通试单范围,再决定是否扩大采购。

来源与适用范围

资料查证于 2026 年 11 月 10 日。表格与决策流程为编辑整理的采购建议,不是行业认证或效果承诺,不包含客户实验与通用验收阈值。纠错邮箱:chan@vwu.ai。

图片来源

Backlit computer keyboard (40623300100) — freestocks.org from Olsztyn, Poland. CC0 1.0.

原始图片与作者信息

照片用于说明背景,已按页面显示需要缩放与裁切,不表示作者或相关品牌认可本站。