企业上 AI 前先过这 5 关

企业 AI 项目的常见结局是：会议室演示很成功，接到真实业务后乱答、越权或无人维护。立项前用五关过滤，比先选模型品牌更重要。

1）场景关：是不是高频、容错可接受

优先选答案有标准、错了成本可控的场景，例如内部制度问答、工单分类草稿、文档摘要。高风险自动决策应后置，并保留人工确认。

2）数据关：知识从哪来、能否授权

没有可授权、可更新的语料，模型只能编。先确定文档主人、更新频率与是否允许进入检索库。

3）权限关：谁能看什么

检索阶段就要按权限过滤。先召回再屏蔽，是常见的泄露路径。“不能答什么”要写成产品规则，而不是上线后靠提示词碰运气。

4）效果关：如何定义答对

准备评测集与抽检机制：引用是否正确、是否拒答该拒的问题、用户反馈如何汇总。没有指标，就无法判断是该换模型还是该补文档。

5）运维关：谁持续更新

助手的价值=答对率×文档更新速度。没有知识管理员或等效编制，就不要承诺长期减负。快递飞在试点阶段就会把监控、反馈与未回答问题队列做上，避免助手变成摆设。