1. 汽车行业的审核暗号:CQI-38发布到底意味着什么
我做制造业质量和过程审核也有些年头了,CQI系列对我来说一直是很熟悉的存在。CQI-9热处理、CQI-12涂装、CQI-15焊接,这些特殊过程审核手册,在汽车供应链里几乎是“标配动作”。所以当看到AIAG发布CQI-38《AI视觉检测应用与评审指南》这个消息时,我的第一反应是:AI视觉检测终于有了一份可以拿来评审的标准,这个“新生事物”在供应商体系里终于不再是无据可依的灰色地带了。
先说清楚一件事,CQI-38并不是教你怎么训练一个AI模型、怎么调参、怎么选框架。它是一份过程评审和持续改进的指南,核心是回答“怎么证明你的AI视觉检测系统是可靠的、稳定的、可追溯的”。这份指南适合三类人看:一是正在推进AI视觉检测项目的质量人,二是需要给供应商做审核的客户质量工程师,三是想在内部建立AI视觉检测体系的企业管理者。无论你是技术背景还是质量背景,把它理解成“针对AI视觉检测的特殊过程审核手册”就对了。
1.1 CQI系列为什么这么重要,CQI-38又特殊在哪
CQI系列在汽车行业里之所以被广泛接受,不是因为它规定了某个设备的品牌或者某个参数的绝对数值,而是它给了所有供应商一套统一的思考和评审逻辑。过去我们审核热处理,会去看温度曲线、淬火介质状态、炉子校准记录;审核焊接,会去看焊接参数、母材状态、人员资质。整个过程强调的是“过程受控”,不是只看结果。这套逻辑平移过来,CQI-38的意图就很明确了:AI视觉检测也不能只看演示效果,更要看“从需求定义到数据采集、模型训练、上线验证、日常监控”的整个过程是否受控。
CQI-38特殊的地方在于,它评审的对象不是传统的热处理炉、电镀槽或焊接设备,而是一套软硬件结合的人工智能系统。传统特殊过程的问题通常是物理参数衰减,而AI视觉检测的问题更隐蔽,比如数据分布变了、标注标准没统一、模型在特定缺陷样本上泛化能力不足、边缘设备上的运行环境与开发环境不一致。这些问题如果靠“现场肉眼看看”很难发现,必须通过系统化的评审项去逼着企业把流程建起来。所以CQI-38不是“又多了一张审核表”,而是补上了汽车行业AI视觉检测在体系层面的短板。
1.2 AI视觉检测和传统机器视觉,差别到底在哪
很多质量人一开始会混淆“AI视觉检测”和“传统机器视觉”。其实两者在应用上可以互补,但管理逻辑差别很大。传统机器视觉靠人工设计的特征规则,比如固定的灰度阈值、边缘检测、模板匹配,只要光照和位置稳定,它的表现非常确定。它的“评审”也相对容易,因为规则是显式的,参数有明确的物理意义。但问题在于,汽车零件的缺陷形态往往不是规则化的,比如铸件表面复杂纹理下的微小裂纹、焊缝区域的多类型气孔、喷漆件的色差和颗粒,这些场景用固定规则很容易出现大量误报。
AI视觉检测,尤其是基于深度学习的方案,不是靠人去写规则,而是靠海量标注数据让模型自己学习特征。它的优势是适应复杂背景、能识别长尾缺陷,劣势是“黑箱”、依赖数据质量、存在模型漂移。CQI-38正是要把这个“黑箱”拆解成一个个可以被审核的环节。说得直白一点:传统机器视觉审核,我们看的是参数和波形;AI视觉检测审核,我们要看的是数据、标注、验证、监控和变更记录。评审的核心从“规则有没有设对”变成了“证据链有没有闭环”。
1.3 CQI-38解决的核心矛盾:从“演示能用”到“持续可信”
我在不同项目现场见过太多AI视觉检测的“演示效果好”和“量产跑不稳”之间的落差。很多项目在实验室阶段,拿几百张缺陷图片演示,准确率看着很高,领导一高兴就决定上线。结果产线环境一变化,比如光照角度变了、零件表面油污状态不同,误报率马上飙升。更麻烦的是,没有人能说清楚模型为什么会失效,因为没有留存数据版本、没有记录训练集分布、没有定义性能回退的触发条件。
CQI-38想解决的就是这个核心矛盾。它要求企业把AI视觉检测当成一个“持续受控的过程”来管理,而不仅仅是“部署完就结束的项目”。供应商需要证明自己的数据采集依据是什么、标注标准是什么、验证集如何构建、模型更新如何走变更流程、运行监控指标如何定义。这套逻辑一旦落地,客户审核时就不需要再靠“你现场演示给我看看”来下结论,而是可以通过评审证据来判断系统是否可信。对于真正认真做项目的企业来说,这是一次把专业能力显性化的机会;对于只想“贴个AI标签”的企业来说,压力来了。
2. CQI-38核心框架拆解:到底评审AI视觉检测的哪些环节
如果说CQI-38是一个“框”,那么它框住的东西绝对不只是“模型准确率”那么简单。从行业里已经形成共识的AI视觉检测最佳实践来看,一份合格的评审框架至少要覆盖系统生命周期管理、数据管理、模型开发与验证、部署运行与监控、人员能力、变更管理和网络安全。下面我按自己理解最深的几个方向拆开聊。
2.1 生命周期视角:AI视觉检测系统不是“上线即终点”
传统设备有个概念叫“全生命周期管理”,AI视觉检测同样适用。CQI-38的隐含逻辑就是,你要对你自己的AI系统负责,从它“出生”到“退役”都要有记录。很多人以为把模型部署到工控机上就结束了,其实真正的挑战在部署之后。
生命周期大致可以分成:需求定义、数据采集、数据标注、模型训练、离线验证、现场试运行、批量部署、运行监控、模型再训练/退役。每一个阶段都要有对应的输出物。需求定义要回答“检测什么缺陷、节拍要求多少、允许的过杀率是多少”;数据采集要说明“采集了哪些产线、哪些时间段、哪些光照条件”;模型训练要记录“用了哪个版本的数据集、哪些超参数、训练环境的快照”;现场试运行要有“影子模式下的对比结果、人工复核记录”。审核的时候,如果这些阶段的历史记录缺了一大半,再漂亮的模型界面都补不回来。
我还见过一种情况,系统上线后三个月内表现稳定,然后开始慢慢变差。排查后发现,产线上换了一款背景色略有差异的料架,光源老化,相机镜头上起了雾。这些和模型本身无关,但直接导致输入数据分布变化。CQI-38式的生命周期管理要求你把这个“变化—检测—响应—修复”的链路建立起来,而不是等到客户投诉了才回头查。
2.2 数据资产是审核的第一现场,数据治理不是IT部门的事
如果只让我挑一个CQI-38审核里最容易被问倒的环节,我会选数据管理。AI视觉检测的根基是数据,数据的真实性、完整性、一致性直接决定模型性能。很多企业的问题在于,IT部门只管存储,算法工程师只管调模型,质量部门只看结果,没人对“数据资产”的整体质量负责。
数据管理至少要回答四个问题。第一,数据来源是否明确,是来自量产线、中试线还是实验室?第二,数据分布是否覆盖真实工况,包括不同缺陷类型、不同光照、不同角度、不同来料状态?第三,标注标准是否成文,标注工具是否留痕,多人标注时一致性如何衡量?第四,数据集是否有版本管理,训练集、验证集、测试集如何划分,模型训练用的是哪个版本快照?
实际审核中,“标注规范”往往是重灾区。我见过不少项目,只定义了“缺陷”和“良品”两类,但实际缺陷有划伤、脏污、缩孔、气泡、毛刺等多个子类,每个子类的判定边界靠标注员个人感觉。更离谱的情况是,同一个缺陷图片,在不同时间被标注成不同类别,模型训练时就学进了“噪声”。CQI-38对数据标注的重视,本质上就是在管理模型的“教材质量”。教材有错漏,学生学出来的东西怎么可能稳定。
2.3 模型验证与性能指标:不看演示,看证据
模型验证是另一个容易被“包装”蒙混过去的环节。很多项目喜欢用“准确率”这个单点指标讲故事,但在工业检测场景里,准确率高没有意义,真正要关注的是漏检率和误报率。漏检率意味着缺陷流出到客户端,这是质量事故;误报率意味着过杀,影响产线节拍和制造成本。CQI-38式的评审要求你把这些指标定义清楚,并且用独立的测试集给出证据。
这里有一个非常关键的实操细节:测试集必须独立于训练过程,不能拿训练时见过的图片来评估泛化能力。我第一次和算法团队讨论这个问题时,因为数据量小,对方希望把好图片混在测试集里凑数,被我拦下来了。工业现场的数据本身就贵,尤其是缺陷样本,但数据贵不能成为破坏验证规则的理由。宁可少一点样本,也要保证测试集的独立性和代表性,否则你评估出来的高准确率就是一种自欺欺人。
除了离线测试指标,CQI-38逻辑还要求你有试运行阶段的验证证据。也就是说,模型在仿真环境里跑得再好,也要在真实产线上以影子模式运行一段时间,把AI的判定结果和人工判定结果做对比,统计误报率和漏检率。这一段记录是客户审核时最有说服力的证据,因为它证明你不是“只在PPT里跑过模型”。
2.4 人员能力与组织保障:AI审核不是“IT部门的事”
在传统CQI审核里,我们很看重操作人员资格和培训记录,到了CQI-38这里,人员能力的重要性不减反增。因为AI视觉检测的链条比传统设备更长,涉及的角色更多:现场操作员、工艺工程师、质量工程师、算法工程师、IT运维人员,甚至数据标注员,都要纳入能力管理范围。
操作员要懂“模型的判定结果不能被随意修改阈值”,算法工程师要懂“现场变更要走流程,不能直接更新模型文件”,标注员要懂“标注标准如何执行、争议样本如何处理”。这些岗位要求不是靠一次培训就完成的,需要留有培训计划、考试记录、授权清单。评审时最容易暴露的问题是权限混乱,比如一个普通操作员就能通过U盘更新模型权重,或者工艺工程师为了降低误报直接调整判定置信度阈值,事后还没有记录。CQI-38要求的是角色分明、权限受控、操作留痕,这一点和IATF16949里对特殊过程人员管控的思路完全一致。
3. 落地实操:按照CQI-38的逻辑建立自己的AI视觉检测体系
很多企业听到新指南的第一反应是“又要补文档了”。我的建议是,别急着补文档,先把手上的AI视觉检测项目当成一个真正的过程来做。按照下面这套顺序推进,既有优先级,又不至于让团队崩溃。
3.1 先做差距分析,再决定投入节奏
接到CQI-38要求时,第一步不是全套照做,而是对照指南的评审范围,把现状逐条过一遍,识别出差距。我通常会把差距分成三类:完全没有的“空白项”、有但证据不完整的“半成品项”、已经在做但缺少文件化的“隐性成熟项”。
分类后你会发现自己没有想象中那么差。很多企业在数据留存、模型验证上其实有实践,只是没有写成文件。比如数据版本管理,可能算法团队已经在代码仓库里放了数据版本号,但没有形成公司级的管理规范;再比如模型上线前评估,项目组做过几次对比测试,但没有标准的性能评估报告模板。这些“隐性成熟项”其实是快速达标的抓手,不需要从零开始建体系。真正要花力气的是空白项,尤其是数据标注规范、运行监控指标、变更管理流程这三块。
3.2 建立跨职能团队并明确责任矩阵
AI视觉检测项目最大的问题是“有人管算法,没人管整个过程”。所以落地的第一步,是把跨职能团队和责任矩阵立起来。一个最基本的责任矩阵至少要覆盖:项目负责人、质量工程、工艺工程、算法工程、IT/自动化运维、生产主管。
我的经验是,必须让质量工程师在项目里拥有“一票否决权”。因为AI视觉检测最终影响的是产品质量判断,如果算法团队只追求测试集准确率,而质量工程师没有介入测试场景定义和门槛设定,这个系统上线后大概率会与质量目标脱节。另一方面,工艺工程师要负责“缺陷定义”与“工程规范”的兼容性,不能算法团队自己拍脑袋定义什么算缺陷。生产主管则要保证产线环境变化能及时反馈到项目组,比如换料架、改灯源、换相机,这些变更如果不通知,AI系统的输入分布静悄悄就变了。
3.3 数据、标注、版本管理的落地方法
数据管理落到实操层面,我建议分三步走。
第一步,建立数据采集台账。每一个批次的图片采集都要记录采集时间、产线、相机参数、光源状态、零件型号、缺陷类型。不要小看这个台账,它是判断数据分布变化的第一手依据。
第二步,形成标注规范文件。文件中要明确缺陷类别定义、样例图片、边界争议的处理规则。标注员上岗前要通过一致性测试,最好用同一组基准图片,计算标注员与标准答案的吻合度。标注完成后还要有人做抽检复核,确保没有系统性偏差。
第三步,实施数据集版本管理。简单做法是,数据集目录下放一个版本配置文件,记录数据总量、缺陷分布、采集时间段、标注版本号。训练模型时,把这个版本号写进训练日志。即便未来要复现某个历史模型,也能准确找到当时用的数据快照。这三点看起来简单,实际审核时却是“救命证据”。
3.4 验证、部署与持续监控的实操建议
离线验证阶段,我强烈建议建立三个独立的数据集:训练集、验证集、测试集。训练集用于模型学习,验证集用于调参和选模型,测试集用于最终性能评估。测试集最好单独存放,绝对不能参与训练迭代,这是底线。如果项目数据量不够,宁可先不追求超高精度,也要保证测试集足够真实和独立。
部署阶段,建议先做“影子运行”。也就是AI系统与原有检测方式并行,AI的结果先不作废,只是记录和对比。影子运行至少持续一到两周,覆盖不同班次、不同光照、不同零件批次。对比结果用于计算漏检率和误报率,同时可以积累大量“难例”,为后续模型迭代做准备。
上线后的持续监控,不要只看一张“今天运行正常”的报表。我建议至少监控四个指标:AI判定结果与人工抽检的一致性、误报率随时间的变化、输入图像的质量特征(亮度、对比度、清晰度)、模型置信度分布的漂移。任何一项指标超过警戒线,都要触发评审流程。另外,相机、光源、镜头保养记录也要纳入监控范围,因为很多“AI突然不准”的根源其实是光学系统劣化。
4. 审核中常见的坑:不符合项和高频问题实录
CQI-38如果被客户用来审核,我预判第一批不符合项会集中在几个方面。提前了解这些坑,比等到被开NCR再补救要舒服得多。
4.1 高频不符合项:数据、验证和变更管理是重灾区
结合我做传统CQI审核的经验,再加上AI视觉检测项目的特殊性,我认为最可能出现的不符合项有三类。
第一类是与数据相关的缺失:没有数据采集规范、没有标注标准、没有数据版本管理、训练数据与测试数据混用。这个问题的根源往往不是技术能力不够,而是项目推进时“先跑起来再说”,结果数据资产成了一笔糊涂账。
第二类是与验证相关的缺失:性能评估只看总准确率,不看漏检率/误报率;测试集样本量小且不具代表性;没有独立测试集;试运行阶段没有形成正式对比报告。这类不符合项直接命中“可信度”的核心,客户审核时一定会追问。
第三类是与变更管理相关的缺失:模型文件更新没有审批记录,阈值调整没有变更申请,产线光源或相机位置调整没有触发AI系统影响评估。这类问题在传统设备审核中也是高频项,放在AI系统上更加致命,因为微小的环境变化就可能让性能大幅回退。
4.2 现场审核时的提问逻辑:客户到底在找什么
作为被审核方,理解客户的提问逻辑,会比你被动应对要有效得多。客户审CQI-38时,大概率会按“证据链”思路走:你拿什么证明需求定义充分?你拿什么证明数据可靠?你拿什么证明模型验证有效?你拿什么证明运行监控在持续发生?
举个例子,客户可能不会直接问“你的准确率是多少”,而是问“你能调出三个月前那个版本模型对应的数据集版本、训练日志、验证报告吗?”。如果这个链路是断的,哪怕你现在模型跑得再好,审核结论也不会好看。反过来,如果你的证据链完整,即使模型偶尔出现过一次漏检,只要你有异常处理记录、原因分析和改进措施,审核员反而会认可你的体系能力。
所以我会建议所有项目组养成一个习惯:任何一次关键操作,都要留下“谁、什么时间、做了什么、基于什么依据、结果如何”的记录。这句话听起来像正确的废话,但执行到位的人很少。
4.3 小团队、单一产线如何分步骤达到要求
如果是小团队或者只有一条产线要上AI视觉检测,不用一上来就全套体系,那会把团队拖垮。我认为可以按三阶段推进。
第一阶段,先把数据基础打牢:形成缺陷分类表、数据采集台账、标注规范、数据集版本管理。这个阶段不需要写很多管理制度,有表单、有记录、有固定存放位置就行。
第二阶段,把验证和试运行标准化:定义性能指标,构建独立测试集,形成验证报告模板。至少每个重大模型版本更新时,都能产出一份像样的性能评估报告。
第三阶段,补上变更管理和持续监控:建立模型更新审批流程、产线变更通知机制、运行监控日报/周报。到了这个阶段,你基本就摸到了CQI-38的验收线。
小团队最大的优势是决策链路短,只要负责人有意识,一个季度就能把主要框架搭起来。真正难的不是制度数量,而是把记录习惯植入到日常流程里。
5. 对供应商、主机厂和整个行业的影响
CQI-38的发布,不只是多了一份审核表格,它会给汽车供应链带来一系列连锁变化。
5.1 统一了评审语言,减少了“暗中博弈”
过去AI视觉检测项目在客户审核时,尺度完全看审核员个人经验。有的审核员只看结果“能不能检出缺陷”,有的会追问数据分布和样本量,还有的可能直接要求展示代码。CQI-38出来以后,行业有了相对统一的语言,供应商和客户可以在同一个框架下对话,评审项、证据要求、判定逻辑都有据可依。这会大大减少因为“理解不一致”而产生的沟通成本和商务拉扯。
对供应商来说,这是一把双刃剑。一方面,体系做得扎实的企业会更显眼,别人需要花半天解释的事情,你可以直接拿出整个证据链;另一方面,过去靠“演示定制化案例”过关的做法会逐渐失效,客户会更关注系统化的过程能力。
5.2 供应商准入的新门槛:AI视觉检测会被纳入更严格的评估
可以预判,随着CQI-38被主机厂和Tier 1采纳,AI视觉检测相关方案在供应商准入评审中的地位会明显提升。以后供应商如果声称自己有AI视觉检测能力,客户很可能会要求按CQI-38的逻辑提交证明材料,而不是只看一两个成功案例。
这意味着,如果你是企业里负责供应商质量的人,现在就可以开始研究CQI-38;如果你是提供AI视觉检测解决方案的乙方,更要提早把自己的交付流程对齐到CQI-38的框架里。谁先把这个标准吃透,谁在后续投标和客户审核里就更有底气。
5.3 对其他制造行业的借鉴意义
CQI-38虽然是汽车行业标准,但它背后的方法论完全可以迁移到其他制造业。电子、半导体、医药、物流等行业同样在大量引入AI视觉检测,同样会遇到数据治理、模型漂移、变更管理这些问题。把CQI-38当作一套参考蓝本,提前建立自己的AI视觉检测评审体系,能少走不少弯路。
我对这事的个人体会是,AI视觉检测的难度从来都不只是算法,而是“如何让一个擅长处理不确定性的系统,持续稳定地满足工业生产确定性的要求”。CQI-38给出的方向是对的:不神话AI,也不拒绝AI,而是像对待热处理、焊接一样,把它纳入受控过程管理。后面谁按这个逻辑把体系建起来,谁在客户审核和现场质量表现上,都会先人一步。