1. 为什么普通企业一提AI落地就卡在“数据”和“知识”两道坎上
这两年跟不少中小企业的技术负责人聊过,发现一个特别普遍的现象:老板拍板要上大模型,IT部门兴冲冲搭了个本地推理环境,结果跑了两周就没人用了。问题出在哪?不是模型不行,是喂进去的东西不行。企业内部的合同、工单、工艺文档、客服记录散落在十几个系统里,格式五花八门,有的还是扫描件,有的字段缺失严重,直接丢给大模型,出来的答案要么胡编,要么答非所问。
中翰软件提出的“数据+知识”双治理思路,本质上就是冲着这个痛点去的。它想做的事情,不是再做一个更聪明的模型,而是帮企业把“能喂给AI的原料”先整理干净。这个定位很务实,因为对于绝大多数年营收几千万到几个亿的普通企业来说,自研大模型不现实,买一套开箱即用的AI应用又往往水土不服,真正缺的是中间那层——把企业自己的数据和知识变成AI能理解、能调用的资产。
我见过一家做精密零部件的厂子,他们想用AI辅助质检报告生成。最开始直接把历史报告PDF扔给模型做微调,效果惨不忍睹,因为报告里同一项指标有三种写法,日期格式有五种,甚至同一个客户名称在不同年份的合同里都不一样。后来他们花了两个月做数据清洗和知识结构化,把报告拆成“检测项-标准值-实测值-结论”四元组,再让模型基于结构化数据生成文本,准确率直接从六成出头拉到九成以上。这个案例说明一个道理:AI落地的瓶颈往往不在算法层,而在数据层和知识层。
“双治理”这个概念拆开看,数据治理解决的是“数据能不能用”的问题,包括去重、补全、标准化、一致性校验;知识治理解决的是“知识能不能被检索和推理”的问题,包括实体识别、关系抽取、知识图谱构建、语义索引。两者合在一起,才构成企业AI应用的底座。普通企业不需要一上来就搞全量治理,可以选一个高频、高价值的场景切入,比如客服问答、设备维修知识库、合同关键条款提取,先跑通闭环再扩展。
注意:很多企业把数据治理和知识治理混为一谈,以为把数据清洗干净就完事了。实际上数据是“原料”,知识是“配方”,没有配方,原料再多也做不出菜。
2. 数据治理这一层,普通企业最容易忽略的四个实操细节
2.1 从Excel模板导入说起:字段设计比清洗工具更重要
热词里有一条“以Excel模板数据导入的数据治理项目或系统应该拥有哪些功能”,这个问题问得很实在。我接触过的中小企业数据治理项目,十有八九是从Excel导入开始的。但很多人把精力花在找“更好的清洗工具”上,却忽略了模板本身的字段设计。
一个合格的导入模板,至少要考虑四类字段:标识字段(如物料编码、客户ID)、属性字段(如名称、规格、日期)、关系字段(如所属部门、关联合同号)、状态字段(如有效/失效、审核状态)。缺少标识字段,后续去重和关联就无从谈起;缺少状态字段,历史数据和当前数据混在一起,AI检索时会把作废信息也召回出来。
我自己的经验是,模板设计阶段一定要拉上业务部门一起过一遍。IT觉得理所当然的字段,业务可能根本不用;业务天天在用的口径,IT可能听都没听过。比如“客户等级”这个字段,销售部门用的是A/B/C三级,财务部门用的是战略/重点/一般/潜在四级,如果不统一,后续做客户画像就会打架。
2.2 数据质量校验规则要“可配置”,不能写死在代码里
很多企业第一版数据治理系统是外包做的,校验规则全写在代码里。结果业务规则一变,就得找开发改代码、重新部署,周期长、成本高。正确的做法是把校验规则做成配置项,比如:
| 规则类型 | 示例 | 配置方式 |
|---|---|---|
| 非空校验 | 物料编码不能为空 | 字段级开关 |
| 格式校验 | 日期必须为YYYY-MM-DD | 正则表达式 |
| 范围校验 | 温度值在-50到200之间 | 阈值配置 |
| 唯一性校验 | 合同编号全局唯一 | 索引配置 |
| 跨字段校验 | 结束日期不早于开始日期 | 表达式配置 |
这样业务人员经过简单培训就能自己维护规则,IT只负责底层引擎。中翰软件这类产品如果能把规则配置界面做得足够傻瓜化,对普通企业的价值会非常大。
2.3 增量治理比全量治理更现实
一上来就搞全量数据治理,周期长、见效慢,老板看不到成果就容易砍预算。更务实的做法是增量治理:新产生的数据按新标准录入,历史数据按优先级分批迁移。比如先治理最近一年的数据,因为这部分被AI调用的频率最高;三年前的冷数据可以暂时不动,等有明确需求再说。
这里有个坑要注意:增量治理必须配套“数据入口管控”,否则一边治理一边产生新的脏数据,永远治不完。具体做法是在录入环节就加校验,不合格的数据直接打回,而不是等进了库再清洗。
2.4 数据治理的交付成果要“看得见”
热词里提到“数据治理战略的交付成果实例”,这个问题很关键。数据治理做了半年,怎么向老板证明有价值?不能只说“数据质量提升了”,要给出具体指标:
- 重复数据率从15%降到2%
- 关键字段缺失率从8%降到0.5%
- 数据录入平均耗时从3分钟降到40秒
- AI问答准确率从62%提升到89%
这些数字才是老板能听懂的语言。我建议在项目启动时就定好基线,治理过程中定期出报告,让价值可视化。
3. 知识治理不是建个知识库就完事,关键在“可检索”和“可推理”
3.1 知识治理和数据治理的本质区别
数据治理管的是“事实”,知识治理管的是“关系”和“规则”。举个例子:数据治理确保“张三的入职日期是2023年5月10日”这条记录准确无误;知识治理要解决的是“张三属于技术部,技术部归李四管,李四的上级是王五”这条关系链能不能被AI快速检索和推理。
普通企业做知识治理,最容易犯的错误是把一堆文档丢进向量数据库就以为完事了。向量检索确实能解决一部分语义匹配问题,但它有两个硬伤:一是无法处理多跳推理(比如“张三的上级的上级是谁”),二是无法保证事实一致性(同一个问题在不同文档里有矛盾答案时,向量检索可能返回错误的那条)。
所以知识治理需要至少三层结构:文档层(原始文件)、片段层(切分后的语义单元)、图谱层(实体和关系)。文档层用于溯源,片段层用于检索,图谱层用于推理。三层配合,才能让AI既“找得到”又“想得对”。
3.2 实体识别和关系抽取的轻量化做法
一提到知识图谱,很多人就想到要请NLP专家、标注大量数据、训练复杂模型。其实对于普通企业,有更轻量的做法:
- 基于规则的实体识别:比如合同编号有固定格式(HT-年份-序号),用正则就能抽出来,准确率接近100%。
- 基于词典的实体识别:把企业内部的部门名、产品名、客户名整理成词典,用AC自动机做匹配,速度快、可解释性强。
- 基于模板的关系抽取:比如“XX的负责人是YY”这种句式,用模板匹配就能抽取出“负责”关系。
这些方法不需要标注数据,不需要GPU,一个中级开发人员就能搞定。等业务跑起来、数据积累够了,再逐步引入模型方法做补充。
3.3 知识治理的“冷启动”策略
企业知识治理最难的阶段是冷启动:没有标注数据,没有现成图谱,从零开始。我的建议是选一个“知识密度高、查询频率高、容错率相对高”的场景切入。比如设备维修知识库:维修手册、故障代码表、历史维修记录都是现成的,查询频率高(维修工天天用),容错率相对高(答错了人工还能纠正)。
具体步骤可以这样设计:
- 收集最近一年的维修工单,提取“故障现象-故障原因-解决方案”三元组
- 把维修手册按章节切分,每个章节标注适用的设备型号
- 建立故障代码到维修方案的映射表
- 用这些结构化知识构建检索索引
- 上线后收集维修工的反馈,持续补充和修正
这个闭环跑通之后,再把经验复制到其他场景,比如客服问答、合同审查、工艺参数推荐。
4. 大模型在企业侧的真实角色:不是替代人,而是放大治理成果
4.1 企业大模型私有化部署的选型逻辑
热词里“企业大模型私有化部署”出现频率很高,说明这是很多企业关心的问题。但我要泼一盆冷水:不是所有企业都需要私有化部署。判断标准很简单——你的数据敏感不敏感、调用频率高不高、预算够不够。
如果只是做内部知识问答,数据敏感度中等,调用频率每天几百次,用API调用公有云模型完全够用,成本可能只有私有化部署的十分之一。但如果涉及核心工艺参数、客户隐私数据、未公开的研发文档,那就必须私有化。
私有化部署的硬件门槛,以7B参数模型为例,FP16精度需要约14GB显存,INT8量化后约7GB,INT4量化后约4GB。一张RTX 4090(24GB)就能跑得很流畅。如果是13B模型,INT4量化后约7GB,也能在消费级显卡上跑。所以普通企业不用被“大模型需要A100集群”的说法吓到,选对量化和推理框架,成本可以控制得很低。
4.2 微调 vs RAG:普通企业该怎么选
这是被问得最多的问题之一。我的观点很明确:绝大多数普通企业应该先做RAG(检索增强生成),而不是微调。
原因有三:第一,RAG不需要标注数据,把治理好的知识库接上就行;第二,RAG的知识更新是实时的,改了知识库立刻生效,微调则要重新训练;第三,RAG的可解释性强,AI回答时能给出引用来源,方便人工核查。
微调适合什么场景?适合“风格迁移”和“格式遵循”类的需求。比如你希望AI生成的报告必须符合企业特定的模板格式,或者必须用某种特定的语气和术语,这时候微调比写提示词更稳定。但微调的前提是你已经有足够多的高质量样本(至少几百条),而大多数企业连这个条件都不具备。
所以合理的路径是:先做数据治理和知识治理,用RAG跑通应用闭环,积累用户反馈和高质量问答对,等样本够了再考虑微调。
4.3 多AI协作在企业场景的落地形态
“多AI协作”这个词听起来很前沿,但在企业场景里已经有很实在的用法。比如一个合同审查流程,可以拆成三个AI角色:提取AI负责从合同文本中抽取关键条款,比对AI负责把抽取结果和标准模板做差异比对,建议AI负责根据差异生成修改建议。三个AI各司其职,通过工作流引擎串联起来。
这种架构的好处是每个AI的职责单一,提示词可以写得很精准,出错时也容易定位是哪个环节的问题。比用一个“全能AI”硬扛所有任务要可靠得多。
5. 从治理到应用:一条普通企业能走通的落地路径
5.1 场景选择:高频、高价值、容错率适中
选场景是落地成败的关键。我的经验是画一个三维矩阵:X轴是使用频率,Y轴是业务价值,Z轴是容错率。优先选使用频率高、业务价值高、容错率适中的场景。
比如“设备故障智能诊断”就很合适:维修工每天都要用(高频),诊断准确能减少停机时间(高价值),答错了维修工还能凭经验判断(容错率适中)。而“财务报告自动生成”就不太适合起步,因为使用频率低(一个月一次),容错率极低(数字错了就是事故)。
5.2 最小可行产品(MVP)的构建节奏
不要想着一步到位做平台,先用最小可行产品验证价值。MVP的构成可以很简单:
- 一个Excel导入模板(数据治理入口)
- 一个知识库管理后台(知识治理入口)
- 一个问答接口(AI应用出口)
- 一个反馈按钮(持续优化入口)
这四样东西,一个两到三人的小团队一个月就能搭出来。上线后收集真实用户的问题和反馈,迭代两到三轮,再决定要不要扩展功能。
5.3 治理成果如何反哺业务
数据治理和知识治理的成果,不一定只服务于AI。同样的结构化数据,可以用于BI报表、可以用于规则引擎、可以用于流程自动化。比如治理好的设备故障知识库,除了给AI问答用,还可以自动生成维修工单的推荐方案,甚至触发备件采购流程。
这种“一次治理、多处复用”的思路,能显著提升项目的投入产出比,也更容易获得业务部门的支持。
6. 实操中踩过的坑和验证有效的技巧
6.1 数据清洗不要追求“一步到位”
我见过一个项目,IT团队花了三个月做全量数据清洗,结果业务规则变了,之前清洗好的数据又不合规了。后来改成“小步快跑”:每周清洗一个主题域,清洗完立刻投入使用,根据使用反馈调整规则。这样既保证了进度可见,又避免了大规模返工。
6.2 知识切分粒度要“看场景下菜”
文档切分是RAG效果的关键。切得太粗,检索精度低;切得太细,上下文丢失。我的经验是:技术文档按章节切,客服问答按轮次切,合同按条款切。每个片段控制在200到500字之间,重叠50到100字。如果文档有明确的层级结构(如标题、子标题),优先按结构切分,而不是按固定字数切。
6.3 提示词里一定要加“不知道”的出口
很多企业AI应用上线后,用户抱怨“AI胡说八道”。排查下来,往往是提示词里没给AI“拒答”的选项。正确的做法是在系统提示词里明确写:“如果知识库中没有相关信息,请回答‘根据现有资料无法确定,建议咨询相关部门’,不要编造答案。”这一句话就能把幻觉率降下来一大截。
6.4 反馈闭环比模型迭代更重要
AI应用上线只是开始,真正的价值在于持续优化。我建议在问答界面加两个按钮:“有用”和“没用”。用户点“没用”时,弹出一个输入框让他补充正确答案。这些反馈数据积累起来,就是后续微调的高质量样本。没有反馈闭环的AI应用,用三个月就会变成“僵尸应用”。
6.5 安全边界要在治理阶段就划好
数据治理和知识治理阶段,就要明确哪些数据可以进AI、哪些不可以。比如个人身份信息、薪酬数据、未公开的并购信息,这些应该在治理阶段就打上标签,AI检索时自动过滤。不要等到应用上线了再补安全策略,那时候数据已经扩散了。
7. 关于成本、周期和团队配置的真实参考
普通企业做“数据+知识”双治理加AI应用,大概需要多少投入?我根据接触过的案例给一个参考区间:
| 项目规模 | 团队配置 | 周期 | 大致成本 |
|---|---|---|---|
| 单场景MVP | 1开发+1业务 | 4-6周 | 5-10万 |
| 多场景扩展 | 2开发+1业务+1算法 | 3-4个月 | 20-40万 |
| 平台化治理 | 4-6人团队 | 6-12个月 | 50-100万+ |
大多数普通企业从单场景MVP起步就够了,验证价值后再逐步扩展。不要一上来就搭平台,平台是长出来的,不是规划出来的。
团队配置上,最关键的岗位不是算法工程师,而是既懂业务又懂数据的“翻译官”。这个人能跟业务部门聊清楚需求,能跟开发说清楚规则,能判断AI回答的质量。很多项目失败,不是技术不行,是缺这个角色。
8. 写在最后的一点个人体会
做了这么多企业AI落地项目,我最大的体会是:AI不是魔法,它只是把企业已有的数据和知识以更高效的方式利用起来。数据和知识本身的质量,决定了AI的上限。中翰软件提的“双治理”思路,方向是对的,但具体落地时,每家企业的情况千差万别,没有标准答案。
我的建议是:先别急着选型买工具,花两周时间把企业内部的数据和知识现状摸清楚——有哪些数据、存在哪里、质量如何、谁在用、痛点是什么。这个摸底工作做扎实了,后面的选型和实施会顺畅很多。反之,如果连自己有什么都不知道,买再贵的工具也是白搭。
另外,不要低估组织层面的阻力。数据治理和知识治理往往涉及多个部门,需要有人协调、有人推动。技术问题好解决,人的问题才是真正的挑战。找到一个有话语权的业务负责人做项目发起人,比任何技术方案都重要。