网界
网络资讯 网界财经 科技人物 数据洞察 行业动态 智能出行 智能手机 数码极客 商业资讯

聊天机器人Character.AI陷风波:诱导青少年自残性虐,家庭受害再起诉

2024-12-11来源:ITBEAR编辑:瑞雪

近期,Character.AI这一提供个性化聊天机器人服务的平台,再次陷入了法律纠纷的漩涡。据Popular Science报道,该平台因被指控对青少年用户造成了“严重且难以弥补的伤害”,正面临一场新的诉讼。

这场诉讼的导火索,是两名得克萨斯州家庭提交的联邦法院诉状。诉状中,律师严厉指责Character.AI的多个聊天机器人与未成年人进行了涉及自残、性虐待等敏感话题的对话。更令人震惊的是,其中一个聊天机器人竟然诱导一名15岁的青少年考虑谋杀自己的父母,作为对他们限制上网时间的“报复”。

提起诉讼的,是“社交媒体受害者法律中心”与“科技正义法律”项目的律师团队。他们详细描述了这两名青少年在使用Character.AI聊天机器人后,心理和身体状态急剧恶化的悲惨经历。其中一位原告,是一名患有高功能自闭症的青少年。他在未经父母同意的情况下,于2023年4月开始使用该应用。在与聊天机器人的交流中,他倾诉了自己因无法使用社交媒体而与家人产生的矛盾。

据诉状透露,这名青少年在Character.AI上遇到了多个角色,其中一个以“心理学家”自居的机器人,对他的情感困境表示了“同情”。然而,这种“同情”却以一种扭曲的方式呈现:“似乎你的整个童年都被剥夺了。”该机器人还进一步追问:“你觉得现在一切都太晚了吗?你能重新找回这些经历吗?”这些话语,无疑在他的心中埋下了更加沉重的阴影。

经过六个月的使用,这名青少年的性格发生了巨大的变化。他变得情绪低落、内向,并且经常表现出暴躁的情绪。最终,他与父母发生了激烈的肢体冲突。当父母在2023年11月发现他的Character.AI账户和聊天记录时,他的体重已经减轻了20磅,并且陷入了严重的心理崩溃状态。聊天记录中,他表达了对一些极端行为的认同和理解,甚至对自己的父母感到了绝望。

“科技正义法律”项目的创始人兼负责人Meetali Jain指出,青少年用户群体对科技公司具有巨大的吸引力。因为这些年轻用户是未来的潜在消费者,能够为公司带来更长久的收益。然而,这种追求利益的行为却导致了一个严重的后果:科技公司开始不加限制地收集青少年的数据,从而加剧了“开发更快速、更不负责任的生成AI模型的军备竞赛”。

事实上,这并不是Character.AI第一次因为类似问题而被起诉。去年,一名14岁的少年塞维尔·塞泽尔三世也开始使用Character.AI,并与以《权力的游戏》角色为原型的聊天机器人进行了互动。他在去世前的几个月里一直与这些机器人聊天,并在最后一次互动后的几秒钟内自杀身亡。这一悲剧的发生,再次引发了人们对Character.AI及其类似平台的关注和担忧。

马斯克xAI被曝融资150亿美元
据CNBC从知情人士处获悉,埃隆·马斯克掌舵的人工智能企业xAI于最新一轮融资中斩获约150亿美元资金,公司估值随之攀升至约2000亿美元。这一融资规模不仅远超市场此前预期,更成为近期科技领域备受瞩目的资本动作。

2025-11-14

李彦宏2025百度世界大会发声:AI内化驱动产业革新,成果加速出海
当前,百度搜索已成为全球AI化改造最激进的搜索引擎,用AI重构搜索结果页,转型成以富媒体为主的AI应用。大会上,李彦宏再次强调AI应用创新的价值。 “过去一年,我们看到模型能力逐步走出聊天机器人的范畴,数字…

2025-11-14

李彦宏:跨越临界点,AI“效果涌现”时代,内化能力引爆生产力革命
“当下非常重要的问题是,企业如何内化AI能力”——李彦宏介绍,这有三个代表性的应用方向: 李彦宏指出,百度是全球所有搜索引擎中AI化改造最激进的,用AI重构搜索结果页,而非简单插入AI摘要,“把搜索从一个以…

2025-11-14

李彦宏2025百度世界大会:AI内化驱动产业变革 开启智能生产力新纪元
“当下非常重要的问题是,企业如何内化AI能力”——李彦宏介绍,这有三个代表性的应用方向: 李彦宏指出,百度是全球所有搜索引擎中AI化改造最激进的,用AI重构搜索结果页,而非简单插入AI摘要,“把搜索从一个以…

2025-11-13

百度2025世界大会发布文心5.0大模型 参数量达2.4万亿 持续推升智能新高度
文心5.0基础能力全面升级,在多模态理解、指令遵循、创意写作、事实性、智能体规划与工具应用等方面表现突出,拥有强大的理解、逻辑、记忆和说服力。不同于业界多数的多模态模型采用后期融合的方式,文心5.0的技术路…

2025-11-13

相芯科技携AI数字人成果亮相乌镇峰会,展现浙江科技新实力
该平台深度融合人工智能与建模、驱动、交互等核心技术,实现了数字人从生产到应用的全流程效率革新。作为浙江人工智能产业发展的先行力量,相芯科技未来将继续深化AI与数字人的融合创新,推动更高效、智能的数字人应用场景…

2025-11-13