研发方向
生成数据进入训练、评测或工程验证前,需要回答三个问题:记录是否完整,样本是否符合目标条件,关键结果是否经过专业人员检查。不同问题需要不同的检查方法,也需要在同一数据版本上形成一致结论。
终奏 NDT 数据平台连接自动质量检查、异常样本处理、专业审核和版本记录,让客户能够看到一组数据为何被保留、修订或排除,并据此判断它适合服务什么任务。
- 服务场景
- 检查生成数据是否完整、一致并适合目标任务,保留关键专业判断。
- 所需信息
- 生产数据、检测条件、质量规则、目标任务、检测证据与专家意见。
- 客户成果
- 质量检查结果、异常定位、审核记录和经过确认的数据版本。
- 产品应用
- 用于终奏 NDT 数据平台的质量检查、审核中心、数据集构建与智能分析复核。
让数据质量从抽样印象变成可检查的结果
数据生成规模扩大后,人工逐个浏览很难稳定发现字段缺失、参数冲突、信号异常和样本重复。不同人员依靠经验抽查,也容易得到不一致的质量判断。
平台先用规则与统计检查定位问题,再把需要专业判断的样本交给审核人员。自动检查提高覆盖范围,专业复核负责解释检测意义,两者共同决定一项数据是否适合继续使用。
质量结果与对应数据版本保持关联。上游场景或样本发生变化时,团队可以知道哪些检查需要重新执行,避免沿用已经失效的结论。
完整性、一致性与代表性需要分别评价
完整性检查关注对象、材料、方法、条件、原始数据和解释记录是否齐全;一致性检查关注单位、坐标、频率、通道与样本关系是否相互吻合;代表性检查关注数据分布能否覆盖目标任务中的关键变化。
这些检查不能互相替代。字段齐全的数据仍可能分布失衡,统计分布合理的数据也可能包含专业意义错误的标签或解释。平台分别记录检查结果,再由项目目标决定需要达到的质量要求。
专业人员在关键样本、异常结果和解释内容上给出复核意见,使自动检查无法回答的检测问题仍然保留清楚的判断依据。
检查维度分离
字段完整、条件一致、分布覆盖和专业正确分别评价,避免一个总分掩盖具体问题。
结果绑定版本
数据或场景发生变化时重新检查受影响部分,让质量结论始终对应实际内容。
关键样本复核
异常、低置信度或具有重要检测意义的样本由专业人员结合证据完成复核。
把自动检查、异常处理与专业复核连接起来
生产任务完成后,平台汇总条件缺失、范围异常、近重复和信号质量等检查结果。问题可以定位到具体样本与场景,用户能够补充信息、重新生成或排除数据。
需要专业判断的样本进入审核,平台保留被审版本、检测证据、意见和修订关系。审核完成后,项目人员按目标任务选择可用样本并形成稳定版本。
这一过程让质量检查成为数据生产的一部分,而不是交付前临时补做的整理工作。
- 01
对生成数据执行完整性、一致性、重复关系和异常检查。
- 02
把问题定位到具体样本、场景与数据版本。
- 03
关键样本和解释结果由专业人员结合检测证据复核。
- 04
按训练、评测或工程验证任务形成经过确认的数据版本。
按训练、评测和工程任务验证数据质量
训练数据关注标签、分布、重复关系和来源独立性;评测数据还要检查与训练数据的隔离和任务覆盖;工程验证数据则更关注条件真实性、对照依据与专业复核。
合作项目可以先选择一组代表性场景,约定质量指标和审核责任,验证问题能否被定位、样本能否被修订或重生成,以及接收方能否理解质量结论。
通过质量规则结果、异常定位、样本关系、审核意见和版本记录,检查数据是否满足对应训练、评测或工程任务。