复盘AI客服时，除了答对率还要看什么

最近在复盘我们自己的 AI 客服，发现一个挺扎心的事：光盯着答对率，真的会把人带沟里去。系统明明显示回答正确率挺高，结果后台一看，用户转头就找人工，或者同一个问题反复问三遍。那一刻我才意识到，答对率是个“看起来很美”的指标，它根本不知道用户到底有没有被真正解决。

我们后来慢慢琢磨出几个更值得看的维度。第一个是“这单到底办成了没”。AI 说得再溜，如果用户按照它的话去操作，结果走错了流程，或者提交的东西被打回来，那这就算一次失败的服务。所以复盘的时候，我们开始从“服务目标有没有达成”来看，而不是只看回答像不像标准答案。第二个是用户有没有“二次折返”。用户问完 AI 又去找人工，或者过一会儿再回来问一遍，这种对话往往藏着问题——AI 是答了，但没答到点子上，没解决人家真正想办的事。

还有一点我特别有感触，就是 AI 说话的语气和确定性。它太容易把“可能”说成“可以”了，语气笃定得不行，结果用户信了，后面发现不行，信任感一下就崩了。所以我们现在复盘时，会专门去看那些“表达过度确定”的回复，收紧它的承诺边界。另外，转人工的时机也特别关键，很多对话其实是 AI 硬撑着聊太久，最后把用户惹毛了才转过去。人工接手时如果还得让用户从头复述一遍，那前面的自动化就白做了，反而添堵。

说白了，AI 客服的复盘，不能只盯着它“答错了几次”，更得看它有没有把用户往正确的方向上推了一把。答对率是底线，但真正决定体验的，是那些没被标记成失败、却让用户悄悄流失的瞬间。把边界划清楚，再一步步扩大能自动处理的范围，它才会是个靠谱的帮手，而不是一层看着高效、实则添乱的隔膜。