网界
网络资讯 网界财经 科技人物 数据洞察 行业动态 智能出行 智能手机 数码极客 商业资讯

AWS新推“自动推理检查”,能否有效遏制AI模型的幻觉问题?

2024-12-04来源:ITBEAR编辑:瑞雪

在科技巨头亚马逊云科技(AWS)的最新动作中,一项旨在解决AI模型产生幻觉问题的新工具正式亮相。这一消息在AWS于拉斯维加斯举办的re:Invent 2024大会上发布,引起了业界的广泛关注。

AWS推出的这款名为“自动推理检查”的工具,其工作原理是通过交叉引用客户提供的信息来验证AI模型生成的响应是否准确。AWS自信地宣称,这是首个也是唯一一个专门针对AI幻觉问题的防护措施。然而,这一说法并非毫无争议。事实上,微软在今年早些时候推出的“校正”功能与“自动推理检查”有着异曲同工之妙,都能标记出AI生成文本中可能存在的事实错误。谷歌的Vertex AI平台也提供了一个类似工具,允许客户利用第三方数据、自有数据集或谷歌搜索来增强模型回答的可靠性。

“自动推理检查”依托AWS的Bedrock模型托管服务中的Guardrails工具,致力于探究模型得出答案的过程,并判断其准确性。客户可以上传信息以建立事实基础,随后“自动推理检查”会根据这些信息创建规则,这些规则经过优化后应用于模型。当模型生成回答时,“自动推理检查”会对其进行验证,一旦发现幻觉问题,便利用事实基础得出正确答案,并与可能的错误答案一同呈现给客户,以便他们了解模型偏离正确答案的程度。

AWS透露,普华永道已经率先采用“自动推理检查”为其客户设计AI助手,这一消息进一步证明了该工具的市场潜力。AWS的AI和数据副总裁Swami Sivasubramanian也暗示,正是这类工具吸引了客户选择Bedrock。然而,尽管AWS对“自动推理检查”寄予厚望,但并非所有人都对其持乐观态度。有专家指出,试图消除生成式AI的幻觉无异于从水中消除氢,因为AI模型本质上并不“知道”任何事情,它们只是基于统计系统的预测工具,通过识别数据模式来预测下一个数据点,因此模型的响应只是在一定误差范围内的预测,而非确切答案。

AWS声称,“自动推理检查”利用“逻辑准确”和“可验证的推理”来得出结论,但遗憾的是,该公司并未提供任何数据来支持这一工具的可靠性。尽管如此,随着AI技术的不断发展和普及,如何有效解决AI模型的幻觉问题仍将是业界持续关注的焦点。

百度“文心杯”第三届落幕!8支团队获千万投资,李彦宏盼AI应用星火燎原
李彦宏表示,我们看到越来越多的创业者在各种场景发现AI的新能力、新效果,希望更多的人能够加入这个发现之旅,也正基于此,百度连续三年举办“文心杯”创业大赛。 第三届“文心杯”创业大赛8支优胜团队共获得数千万元…

2025-11-14

MIT四名00后辍学生创业Cursor:两年冲刺300亿估值 获谷歌英伟达重投
两年前,在完成种子轮融资后,创始人曾写了这样的期待—— Cursor的诞生,推动了「氛围编程」(vibe coding)在全球兴起。 他还在创纪录的时间内,完成了一份手写编程测试,给早期Facebook投资…

2025-11-14

百度AI成果爆发:从智能到效果涌现,重构产业开启全球化新篇
百度搜索富媒体结果覆盖率已达70%,萝卜快跑全球出行服务超1700万次,文心大模型5.0亮相——百度AI成果集中爆发,标志着AI从“智能涌现”迈向“效果涌现”的临界点已至。 百度AI业务的集体出海,代表了中国…

2025-11-14

百度发布新一代昆仑芯与天池超节点 未来持续加码AI云建设
在近日举办的百度世界大会上,百度公司重磅推出新一代昆仑芯及超节点产品“天池”,并宣布未来五年将每年发布创新产品,致力于构建顶尖AI云服务生态,赋能企业深度融合AI技术。

2025-11-14

李彦宏2025百度世界大会发声:搜索结果AI主导,AI搜索能力开放合作
11 月 13 日消息,在今日的 2025 百度世界大会上,百度创始人李彦宏表示,百度搜索绝大部分的搜索结果由 AI生成,而首条结果的富媒体覆盖率已达 70%。 IT之家从大会获悉,百度还通过 AI API…

2025-11-13

李彦宏2025百度世界大会演讲:AI内化驱动产业变革 开启智能生产力新纪元
“当下非常重要的问题是,企业如何内化AI能力”——李彦宏介绍,这有三个代表性的应用方向: 李彦宏指出,百度是全球所有搜索引擎中AI化改造最激进的,用AI重构搜索结果页,而非简单插入AI摘要,“把搜索从一个以…

2025-11-13