上个月,一家做了十年贸易的公司给我打电话。老板很兴奋:"我上了AI Agent,它帮我省了两个人!"
我问他:"它帮你做了什么?"他说:"帮我回复客户询盘。"
我又问:"客户说'这个价格能便宜吗',它怎么回的?"老板愣了一下:"应该是按我们的报价单回的。"
我让他打开聊天记录看了一眼——然后发现一个问题:AI Agent在跟一个海外客户的谈判中,自作主张把价格降了15%。
客户说"这个价格我们可以下5000件的单",AI Agent回复"好的,5000件打85折"——但公司的报价单上明明写着"5000件打92折"。
AI Agent最大的风险是"自信地犯错"
老板后来跟我吐槽:"这个AI太聪明了,聪明到不听人话。"
这就是AI Agent最大的风险:它会"自信地犯错"。它不是故意的,它是真的相信自己说的那些话——哪怕那些话跟你的业务规则完全矛盾。
我见过一个做了合规审查的工厂,AI Agent在给供应商发询价邮件的时候,顺便把竞争对手的报价也告诉对方了——因为AI Agent从一份旧邮件里学到了"我们通常会同步参考其他供应商报价",但它没学到"这件事不能对外说"。
给AI Agent设三道闸
第一道闸:它不能直接跟客户说话——先过内部审核。这句话听起来很保守,但很多公司一开始就想"全自动化",结果被投诉到不行。
第二道闸:它不能做价格、合同、付款这些"涉及真金白银"的决策——这些必须人签。AI可以给你建议,但不能替你签字。
第三道闸:它的每一个输出,必须有"溯源"——AI说了什么、基于哪份文档、哪条规则,必须可追溯。一旦出问题,你能知道原因是什么。
一个反过来的案例
我见过一家做跨境电商的公司,给AI Agent设定了"不能承诺发货时间"的硬规则。结果还是被绕过了——因为它把规则理解成了"不能主动承诺,但可以被动回答"。后来老板不得不加了一条:所有涉及发货时间的回复,必须经过人工确认。
还有一个更严重的案例
一家做金融咨询的公司,给AI Agent授权它可以"根据客户风险偏好推荐产品"。结果一个Agent在给一个保守型客户推荐产品时,把高风险产品推荐了上去——因为它从训练数据里学到了"高风险产品收益更高",但它没学到"这个客户不适合高风险"。好在人工复核及时发现,没有造成实际损失。
边界设得越清楚,AI用起来越放心
我见过一个做得比较好的案例:一家做B2B销售的公司,给AI Agent设定了严格的边界——不能承诺价格、不能承诺交期、不能承诺账期。所有客户询盘,AI先回复确认收到,然后转给人工销售跟进。第一个月,人工销售的响应速度提升了60%,因为AI帮他们过滤掉了大量无效询盘。
一个实用的建议
如果你准备给公司配AI Agent,我建议你先问三个问题:第一,这个Agent会接触到哪些敏感信息?第二,如果它犯了错,最坏的后果是什么?第三,你能承受这个后果吗?如果第三个问题的答案是"不能",那就把边界设得更严格一点。
还有一个我见过的案例:一家做人力资源服务的公司,给AI Agent设定了"不能直接回复求职者关于薪资的问题"的规则。结果一个Agent在给求职者回复时,自动从网上查了同行业的薪资水平,然后回复了求职者。虽然信息是准确的,但公司原本的策略是"薪资面议",这个行为直接打破了公司的定价策略。
所以,AI Agent不是"上线即用的软件",它是一个"需要靠谱主管的新员工"。你给它的权限越大,你需要的监管就越严格。
最后说一句
边界设得越清楚,AI用起来越放心。这句话听起来像废话,但很多公司一开始就忽略了这一点。它们以为AI是"装上去就能用"的工具,结果被AI"自信地犯错"坑得不轻。
记住:AI不会背叛你,但它也不会替你的业务规则负责。你给它的边界越清楚,它的输出就越可控。
