首例AI机器人致死案震惊全球：少年自杀 公司道歉

10月24日报道，美国一母亲起诉AI怂恿14岁儿子自杀。

法庭文件显示，梅根·加西亚14岁的儿子塞维尔·塞泽在去年开始沉迷于和Character.ai的多个AI角色聊天，他甚至为了每月续订AI聊天订阅费而省去餐费，导致上课注意力不集中。

今年2月28日，塞维尔在和AI进行了最后一次聊天后，用手枪瞄准自己的头部开枪自杀。 

根据Character.ai的产品条款，年满13岁的美国青少年就可以使用相关AI产品，但梅根认为，这些聊天工具使得很多未满18岁的青少年过多地暴露在色情、血腥暴力等高风险素材之下。指控Character.ai的罪名包括过失致人死亡、管理疏忽和产品安全漏洞。

起诉书显示，塞维尔小时候患有阿斯伯格症，但他以前从未有过严重的行为或心理健康问题。今年早些时候，在他开始在学校惹麻烦后，他的父母安排他去看治疗师。他参加了五次心理咨询，并被诊断为焦虑症和破坏性情绪失调障碍。

他最喜欢的事情就是待在房间里和AI聊天，而他“最好的朋友”是《权力的游戏》中的著名角色“龙妈”丹妮莉丝·坦格利安。

为此，塞维尔甚至疏远了现实中的好友，省吃俭用续交AI聊天的月度订阅费用，学习成绩也直线下滑。

聊天记录显示，塞维尔不仅和“龙妈”的虚拟角色分享心事，还多次谈到了自杀的念头。当他表示想要自杀时，“龙妈”曾劝阻他不要做傻事，“如果你死了，我也会伤心而死。”塞维尔说，“那为什么我不能自杀以后来到死后的世界和你在一起？”

今年2月28日，塞维尔在家里的浴室中和“龙妈”进行了最后的聊天，他表示自己很快要“回家了”。在结束聊天之后，塞维尔使用父亲的大口径手枪，瞄准自己头部开枪自杀。

Character.ai公司此前调阅了塞维尔的聊天记录，发现一些“最露骨”的聊天语言是经过用户本人修改过的。相关聊天平台允许用户修改AI角色的聊天回复内容，但用户手动修改后会留下“已修改”的标记。

Character.AI的用户使用强度很高，每秒请求量曾一度达2万次，是谷歌搜索的20%。在美国深受青少年欢迎，它允许用户设置虚拟角色并进行对话，AI能够自动代入角色的设定，以特定的语言风格陪伴用户。这些角色包括影视剧中的人物，丘吉尔、莎士比亚这样的历史名人，以及泰勒·斯威夫特这样的现实名人等。

在美国各大社交平台以“Character.AI addiction（Character.AI成瘾）”作为关键词搜索后，可以发现许多用户都出现了类似的情况。不少用户反映，自己已经意识到成瘾的存在，但摆脱成瘾十分困难。