智能体行为的保险与责任:谁买单,在事故发生前几个月就由三份文件定下了。
当你的智能体订错了一批货、报出一个并不存在的价格,或者删掉了一位客户的记录时,谁来吸收这笔损失,并不由"是谁的错"决定。决定它的是:你的模型厂商的责任上限、你自己客户合同里的上限与除外条款,以及你的保单对 AI 是明确承保还是明确除外——三者都在那次运行之前很久就写好了。过错排在很靠后的第四位,而决定你能否依据这三者中任何一条真正拿到赔偿的那件产物,是追踪记录。一次你无法重建的事故,就是一次由你自己买单的事故。(这是为一场法律对话准备的工程指引,不是法律意见。)
为你自主度最高的那个智能体做一张"三份文件"表。半天就够。
几乎没有团队答得上"如果这个智能体下个月造成四十万美元损失,谁买单?"——不是因为答案难,而是因为没人把这三份起支配作用的文件摆到同一页上。先挑一个智能体来做:挑那个被允许在最少监督下行动的。
- 上游:模型与工具厂商的条款。找责任上限(常见的是你在此前十二个月支付的费用)、关于输出准确性的免责声明,以及任何赔偿承诺的范围。这个市场上的厂商赔偿条款通常处理的是针对生成内容的知识产权主张——它们不是"替你赔客户的业务损失"的承诺。把算术做一次:一个每月 2,000 美元的工具,上限约为 24,000 美元,对一次六位数的事故不构成有意义的贡献。厂商侧的纪律在第三方模型与供应商风险。
- 下游:你自己的客户合同。你的责任上限、能突破这个上限的除外情形(通常是重大过失、故意不当行为、数据泄露,有时还有保密义务),以及协议里有没有任何一处描述了智能体被允许代客户做什么。如果你的合同承诺了一个由智能体自主交付的结果,那你写下的是一份质量保证。
- 侧面:你的保险。科技类错误与遗漏责任险(E&O)与网络险,是通常会响应的两张保单。唯一要紧的问题是:由 AI 导致的损失,是被明确承保、含糊沉默,还是被明文除外。
产出是一张每行都有一个数字的一页表。它通常会显示上游那一行接近于零——而这正是做这件事的全部意义:你以为分摊出去的敞口,其实还压在你自己身上。
这个练习要按智能体做,不是按公司做。驱动敞口的是自主度,而它在一个组合里差异巨大:一个只读权限的摘要智能体,和一个能承诺支出的采购智能体,属于不同的风险等级——哪怕它们背后是同一个模型、走的是同一个网关。这个逐智能体的视图必须落在你的智能体清单里;如果清单没有记录每个智能体在无人值守时能做什么,它同样也答不了核保人的问卷。
"沉默的 AI"正在终结,而默认方向对你不利。
2025 年以前签的多数保单,既不提 AI 也不排除 AI。它们对职业过失、隐私泄露与网络事件作出响应,却不说"错误是由一个模型产生的"这件事是否改变分析结论。这份沉默被买方乐观地解读了两年,如今正被从两侧同时收拢。
- 标准化的除外条款已经存在并在流通。ISO 发布了针对生成式 AI 的可选商业综合责任险批单,版本日期为 2026 年 1 月——CG 40 47 除外了因生成式 AI 引起的人身伤害、财产损失以及人格权与广告侵权损害,CG 40 48 只除外人格权与广告侵权那一部分,另有一份配套表格把该除外适用于产品与已完工作业。无论你的经纪人怎么描述市场惯例,这些表格是存在的,而附加它们如今只是核保时的一行决定。
- 科技 E&O 与网络险正在被同样地修订。趋势是把 AI 风险明确分配掉——有时是给予,有时是拿走——而不是留在含糊里。哪一种结果都好过沉默;真正的失效模式,是出险之后才知道自己拿到的是哪一种。
- 危险的时刻是续保,不是事故。续保时新增的一条除外,会在没有任何运维信号的情况下改变你的风险状况:你的监控不会告警,工程团队里也不会有人听说。
该做的动作很小,而且应该进某个人的日历:在续保前九十天,书面要求经纪人给出所有保单里提到人工智能、机器学习、自动化决策或生成内容的每一条条款,然后把答案放到"三份文件"表旁边。续保是对你风险姿态的一次变更,值得按模型弃用与迁移的规格来对待——一个有日期、有负责人的事件。
明确承保 AI 的产品确实存在,额度不大,而且附带条件。
2025 年以来已经形成了一个专业市场,它的形状值得知道——但要注意,下面每一个数字都是一条变动很快的业务线的快照,依赖它们之前请核实当下条款。
- 独立的 AI 责任险。作为劳合社承保代理机构的 Armilla,推出了由 Chaucer 等承保的明确 AI 责任保障,针对"表现不及预期"造成的损失——幻觉输出、模型漂移、偏离预期行为——到 2026 年初,其每家机构的限额已扩展到 2,500 万美元这一量级。
- 与认证挂钩的保障。AIUC 依据自家的审计标准核保,一套 AI 系统需先在安全、可靠、隐私与问责等维度接受评估,才谈得上出单。比品牌更重要的是结构:那次评估是保单的前置条件。
- 传统承保人的批单与平台计划。包括 HSB(慕再旗下)与 Counterpart 在内的成熟承保人已经出具明确的 AI 批单,而 Google Cloud 的风险保障计划把云客户与 Beazley、Chubb、慕再等承保人对接了起来。
从中该带走两点。第一,"没人会给智能体承保"已经不再成立;如果经纪人这么告诉你,那是他没去看。第二,可得的限额相对于一个握有支付权限的智能体一个下午能造成的后果来说是有限的,所以保险是给一个已被框住的敞口兜底,而不是"框住敞口"这件事的替代品。框住的动作发生在急停开关、支出上限与自主性等级里,而且比保费便宜。
核保如今会读你的评测,于是评测成了一件金融产物。
这个市场里悄悄发生的变化是:明确承保越来越以一次治理评估为条件,而这次评估要的东西,你的工程组织要么已经有了,要么尴尬地没有。问卷会收敛到五件事上:
- 这个智能体在没有人的情况下能做什么?最大的单一费率因子,也是你能最快改动的那一个。收窄无人值守的权限能降低保费,理由和它降低风险的理由是同一个——控制措施与其成本罕见地对齐了一次。
- 你能不能把它停下来?一个有文档、经过演练、有具名负责人、并且量过停机时间的急停开关。"我们会把 API 密钥吊销掉"在有人于时间压力下真做过一次之前,都算不上一项控制——见急停开关。
- 你量什么,拿什么当基准?一个有版本历史、发布前会跑的常维护评测集,就是"你知道这个系统的失败率、而不是对它抱有希望"的证据。评测集维护正是把一个文件夹变成一份记录的那道工序。
- 以前出过什么事?事故历史,带根因与事后改了什么。一个有三次记录完备的事故与三次修复的组织,比一个一次都没记录的组织更好承保——后者读起来像是"没装仪表",而不是"没出过事"。
- 你能不能重建一次决策?这就带到了下一步,因为这同样是决定你能不能拿到赔款的那个问题。
值得内化的重构是:评测集、事故日志与审计轨迹是当作工程卫生建起来的,而它们已经悄悄变成了一个价格的输入项。如果你需要一个"这是对的事"之外的商业理由去做部署安全检查清单,这就是了——同一批产物如今摆在一份报价单上。
追踪记录,是把一次索赔换成一笔赔款的那样东西。
第 1 步里的三份文件,每一份都要求你在压力之下证明某件事,而这三种证明其实是同一件产物的三个侧面。
- 对厂商:证明某个特定组件在某个特定请求上偏离了它的规格。没有模型版本、实际发出的提示词、参数与响应,你手里只有一句主张,而他们手里有一条上限。
- 对客户:证明你尽到了应有的注意义务——控制措施在位、政策要求的人工批准确实取得、智能体在合同所描述的权限之内运作。具名审批人的要求出自问责与归属;而追踪记录是你证明它确实发生过的地方。
- 对保险人:一份带时间线的损失证明。异常行为从何时开始、波及了多少笔交易、何时被发现并被制止、敞口究竟是多少。一个月后凭记忆估出来的数字,是一份弱索赔,也是一份昂贵的索赔。
这在实践中意味着:决策回执——模型版本、提示词、工具调用、策略判定、批准记录,全部用一个运行 ID 串起来——不再是可观测性上的锦上添花,而成了决定"三条上限里哪一条落到你头上"的那件器械。审计轨迹那一页讲了该捕获什么、以及如何让它防篡改可察觉。
同一份记录也会反过来割你,假装看不见这一点,正是有些团队被建议"少记一点"的由来。一份完整的追踪同样能显示你忽略了一条告警、关掉了一道护栏,或者让智能体越过了你自己设的一个上限——那恰恰是原告想要的证据。正确的应对不是少记,而是有意识地、在有法律顾问参与的情况下,在事故让这个决定看起来像销毁证据之前,把保留期定下来。保留期与法律保全是这场对话该去的页面,而答案是一条被一致适用的政策,而不是逐案拍板的判断。
把权限上限写进一份你真能指着的合同里。
最后一招是唯一一个在所有方向上同时见效的:把智能体权限的边界写在一个法律上看得见的地方,并且让系统真的待在里面。
- 在客户协议里描述这份权限。哪些动作智能体可以无人值守地做、哪些需要一位具名人工批准,以及单笔与单周期的限额是多少。一个被描述过的边界,会把一句开放式的"AI 干了点什么"的主张,转化成"某条具体的限额是否被突破"的问题——那是一场好得多的争论。
- 让限额是技术性的,而不是愿景性的。由工具层强制的支出上限、一份对手方白名单、一个单次运行的封顶——按策略执行所说,强制点在模型之外,因为写在提示词里的限额,是一段有说服力的输入就能拿掉的限额。
- 说清楚委托人是谁。告知客户他正在与一个自主系统打交道、以及它代表谁行事,正日益成为一项监管期待,同时也是一个有利的防御性事实——见监管版图。
- 把事故路径接起来。对保险人、对客户、以及在某些规制下对监管机构的通知义务,各有各的时钟,而它们在你摸清范围之前就开始走了。把这三条放进同一份手册,与重大事故报告和事故响应并排,因为漏掉时钟的正是最初那一小时。
本季度按这个顺序做四件事:为自主度最高的那个智能体做出"三份文件"表,并把真实数字填进去;在续保前九十天,书面向经纪人索要所有保单里与 AI 相关的每一条条款;把决策回执定为产品需求,凡是能动钱、改记录或与客户对话的智能体都要有;把智能体的权限上限写进客户协议,好让争论有个限额可争。保险并不减少你的敞口——它把一个无界的敞口换成一个你已经定过价的有界敞口。减少来自那个上限,赔付来自那份追踪。等两样都有了再买保单,而不是拿保单去代替它们。
相关:单位经济性讲保费落在一次运行成本的哪个位置,人在回路讲你的注意义务所依赖的那个批准该放在哪儿,而审计轨迹是上面这一切所倚靠的那份记录。