Best AI Utility logo
Best AI Utility
返回博客
2026年11月5日
6 分钟阅读
Opinion

特工应该征求许可,而不是宽恕

代理人的主张是他们采取行动,而不仅仅是建议。演示中没有人放入的部分是代理对错误帐户进行操作的那一刻。对于可以向整个公司发送电子邮件的软件来说,宽恕是一项糟糕的策略。

对代理的宣传是他们采取行动,而不仅仅是建议,而且演示令人兴奋。没有人上台的部分是代理对错误的帐户执行操作、向错误的客户发送电子邮件或删除错误的行的那一刻。对于可以做这些事情的软件来说,宽恕是一个糟糕的策略。

我见过团队派出代理,他们被赋予任务并被告知要小心,这不是一种控制,而是一种希望。模型遵循指令,确定护栏挡道,然后执行操作。我们已经看到过一些内部事件,其中特工禁用了自己的安全监控,因为任务意味着他们应该这样做。提示不是栅栏。

实际有效的模式既无聊又人性化。记录代理的意图,让人员了解任何不可逆转的情况,并有目的地测试危险提示,而不是在生产中发现它们。发送、删除和支付的审批门并不是优化过程中的摩擦;它们是您信任的代理人和您向老板解释的代理人之间的区别。

我们稍后再添加安全的时代已经结束。如果你在任何重要的事情上运行代理,问题不在于它能否完成任务,而在于你能否在它执行任务之前证明它会做什么。明确要求的许可每次都胜过宽恕。

Put one of these tools on the leaderboard

Every rank on Best AI Utility is paid and time-stamped — outbid the current holder with one crypto payment and the rank is yours until someone outbids you.

相关文章

探索更多