因在与人工智能聊天机器人的对话中写下涉嫌针对警方的暴力威胁,佛罗里达州李县的一名女子遭到警方上门拘留。这名女子在被拘留前,刚刚将涉及暴力的言论发送给 Anthropic 旗下的对话模型 Claude,平台随后将相关记录上报给了执法机构。
被捕的当事人名叫卡莉 · 米歇尔 · 赫勒(Carli Michelle Heller),今年 30 岁,居住在佛罗里达州邦尼塔斯普林斯。面对执法人员时,赫勒给出的解释十分朴素:她只是把大模型聊天界面当成了私密日记本使用,输入框里的文字属于个人倾诉。然而,执法部门已经根据佛罗里达州法规对她提出指控,罪名为二级重罪。
图:嫌疑人 Carli Michelle Heller 面部档案照。来源:Tampa Free Press 报道配图
这场抓捕打破了外界对生成式对话工具的私密性想象。当用户对着输入框倾诉情绪时,另一端连接的并非与世隔绝的个人笔记,而是一整套包含自动化检测与人工审核的云端安全风控体系。
2条聊天记录触发报警,屋主在自家门前被捕
赫勒与聊天机器人的互动迅速转变为警方的刑事调查流程。根据警方的逮捕报告,赫勒于 9 月 26 日在 Claude 对话中输入了一段文字,声称要向李县警长办公室开枪实施枪击(shoot up)。
在次日,赫勒又追加了一条新消息,声称自己刚刚拿到了一支新枪。两条连续输入的内容迅速改变了云端风控系统的响应级别。
李县警长办公室的情报警探接手了案件,警员随即赶赴赫勒位于邦尼塔斯普林斯的住所,并在现场将其「无冲突拘留」。赫勒随后在接受讯问时坚称,自己当时完全是把人工智能当作「日记」来使用。
佛罗里达州法规第 836.10 条对书面或电子威胁设立了法律红线:任何人通过可以被他人查看的书面或电子记录,威胁杀人、实施身体伤害、进行大规模枪击或实施恐怖行为,均可能构成二级重罪。现行法条同时明确,相关规定适用于电子记录,向他人发送、发布或传播包含上述威胁的记录均可能构成犯罪。
自动化分类器切入会话,拦截逻辑直通人工审核
许多用户习惯把聊天框当成单机工具,但大模型的推理链路始终运行在云端服务商的机房内。用户发送给 Claude 的文本内容,在系统内部有着专门的安全机制进行实时监测。
根据 Anthropic 公开的安全与信息披露政策,平台部署了用于执行使用政策的检测与监控机制。这套防护系统能够利用分类器实时监测特定类别的有害活动与潜在威胁内容。一旦文本信息被系统判定达到一定严重程度,就会从自动化处理升级至人工团队复核。
图:Anthropic 建立的安全机制结合了自动化检测与人工审核流程。来源:Yahoo News 报道配图
在赫勒的案件中,系统检测到了针对执法机构的枪击威胁与枪支提及。随后,Anthropic 的人工团队介入审核并确认了相关风险,进而主动联络了当地执法部门。
这一处理流程依靠的是服务政策中的紧急披露例外条款。Anthropic 在公开政策中说明,公司通常只有在收到有效法律程序后才会披露用户信息;但如果公司认为某种紧急情况可能导致迫在眉睫的身体伤害或死亡,且及时提供信息能够避免危险,则存在紧急披露例外。通过这套机制,线上产生的高危文本被迅速转交给了属地警方。
私人日记隐喻破灭,服务协议早写明豁免例外
公众对生成式 AI 产生私密信赖,很大程度上源于人机对话界面的拟人感。模型温和、耐心的回复风格,容易让部分用户误以为自己面对的是具备保密职业操守的树洞。
然而,现实中的法律权利完全不支持这种想象。医疗咨询受制于法定保密责任,委托律师享有保密特权,心理咨询师也有明确的从业伦理约束。而 Anthropic 在协议条款中明确指出,用户与 AI 之间的对话并不受类似律师与委托人之间的保密特权保护。
纸质日记的私密性建立在物理隔离之上,只要纸页不被公开,写在上面的字句就属于个人私密领域。但云端 AI 属于网络通信与远程服务,数据在传输、推理与存储的过程中,均处于服务商安全规则的监控之下。
佛罗里达州法律明确要求,涉案的电子通信必须处于「可以被他人查看」的状态。虽然赫勒辩称自己只是在写日记,但她的输入内容已经上传至第三方服务器并触发了人工审核。目前赫勒面临一项书面暴力威胁指控,但该指控仍属指控,案件尚未被法院定罪。
执法介入与隐私争议,法律适用仍待法院裁定
这起事件引发了围绕聊天机器人隐私边界与执法介入合理性的广泛讨论,支持方与质疑方的论据均十分鲜明。
支持执法行动的一方强调公共安全高于一切。李县警长卡迈恩 · 马尔切诺(Carmine Marceno)公开表示,AI 可能改变了威胁的产生方式,但保护李县居民安全的承诺始终不变;当有人利用 AI 实施或协助实施威胁时,警方必须认真对待。与此同时,Anthropic 设立的紧急披露政策也为平台的主动报警提供了支撑:当平台认为存在可能导致迫在眉睫的身体伤害或死亡的紧急情况时,及时向执法机构披露信息属于防范潜在现实危险的合规手段。
然而,在司法定罪层面,案件同样面临严格的法律审视。质疑声音指出,赫勒自始至终坚称自己只是把 AI 当作私人「日记」宣泄情绪,既没有付诸行动的企图,也没有向现实中的任何具体对象发送恐吓信息。更为关键的是,佛罗里达州法规第 836.10 条明确要求,构成犯罪的前提是记录须处于「可以被他人查看」的方式进行发送、发布或传播。
在技术底层,用户是向算法模型发送文本,而非直接向人类喊话。在普通用户认知中,把对话框当成日记是否等同于向外部传播威胁?Claude 对话框内的输入行为,在法律上是否确实满足第 836.10 条关于威胁记录传播的构成要件?检方能否在接下来的司法程序中证明犯罪事实?由于赫勒目前尚未被法院定罪,这些关键分歧仍有待法院在审理中作出最终裁定。
本地推理划定安全区,云端输入没有秘密
这起逮捕案件给所有把商业大模型当作情绪出口的用户上了一堂现实课。如果用户希望寻找绝对不受监控与审查的个人数字空间,在本地硬件上部署完全离线的开源模型是目前的工程解法。
本地运行的模型没有联网上报通道,输入的数据只在本地硬件显存内闭环处理,自然不存在被服务商后台扫描、人工复核乃至向执法机构通报的技术路径。但这同样意味着用户需要承担相应的硬件成本与算力门槛。
一旦用户选择享受云端前沿大模型的强大能力,就意味着必须遵守中心化商业平台的安全监管体系。商业 AI 只是一项受到严格使用政策约束的公用云端服务,并不承担保密法定义务。每一句敲进对话框里的文字,本质上都是发送到服务商服务器上的网络请求。
当警员前往赫勒位于邦尼塔斯普林斯的住所进行拘留时,人机交互的私密假象已被打破。在商业云端模型面前,最基本的技术自觉只有一条:永远不要对联网的输入框键入那些涉嫌违法或危及公共安全的言论。
参考链接:
- IT之家报道
- Gulf Coast News Now 警方通报(Yahoo News 转载)
- Tampa Free Press 报道