网界
网络资讯 网界财经 科技人物 数据洞察 行业动态 智能出行 智能手机 数码极客 商业资讯

火山引擎豆包1.5模型升级,多模态理解与GUI Agent能力引领创新

2025-05-13来源:ITBEAR编辑:瑞雪

在近日于上海举行的FORCE LINK AI创新巡展活动中,火山引擎隆重推出了其最新的豆包1.5视觉深度思考模型(Doubao-1.5-thinking-vision-pro)。尽管该模型的激活参数仅为20B,但它展现出了卓越的多模态理解与推理能力,令人瞩目。在多达60项的公开评测基准中,豆包1.5在38项上取得了业界最佳成绩(SOTA),特别是在视频理解、视觉推理以及GUI Agent能力方面,均位列前茅。

在视频理解领域,豆包1.5引入了动态帧率采样技术,这一创新极大地提升了模型对视频时序的定位能力。结合先进的向量搜索功能,模型能够迅速且准确地找到与文本描述相匹配的视频片段,为视频内容的深度挖掘与检索提供了强有力的支持。

不仅如此,豆包1.5还具备了视频深度思考的能力。通过深度学习数万亿的多模态标记数据,模型积累了丰富的视觉知识。同时,借助强化学习技术,豆包1.5的视觉推理能力得到了显著提升。在复杂的图形推理任务中,它能够自主提出假设、进行验证,并在发现不符时不断反思与调整,直至得出正确答案,这一过程展现了其强大的思考与自我修正能力。

豆包1.5新增的GUI Agent能力同样令人印象深刻。凭借其出色的GUI定位性能,模型能够在多种不同环境,如PC端和手机端,完成复杂的交互任务。这一功能在新开发的App功能自动化检测中发挥了巨大作用,目前已在字节跳动多款App产品的开发测试中得到实际应用,大大提高了测试效率与准确性。

GUI Agent,作为一种基于多模态视觉模型驱动的人工智能系统,能够模拟人类用户的操作,如点击、输入、拖拽以及读取界面信息等,从而完成各种指定的工作任务。这一技术的引入,无疑为豆包1.5增添了更为广泛的应用场景与价值。

豆包1.5的推出也标志着火山引擎在人工智能领域迈出了坚实的一步。该模型不仅展现了火山引擎在技术创新方面的实力,更为行业内的其他参与者树立了新的标杆。

目前,豆包1.5视觉深度思考模型已在火山方舟平台正式上线,标志着这一先进技术将正式服务于更广泛的用户群体,为人工智能的应用与发展注入新的活力。

阿里通义App焕新升级更名千问 5.0.0版本携三大核心能力强势登场
今日,阿里旗下通义App今日发布更新,名称正式变更为千问App,版本号为5.0.0。 在版本 5.0.0中,千问强调其核心能力包括:“对话问答”“智能写作”“全能相机”三大模块。 据知情人士透露,阿里巴巴计…

2025-11-15

谷歌前工程师再创业!AI数据分析新锐WisdomAI获英伟达等3.55亿融资
WisdomAI面向企业客户推出了AI驱动的对话式商业智能(BI)平台,提供AI数据分析业务,用户只需用自然语言提问便可获取分析后的答案。 WisdomAI称:“过去的BI只提供被动的、静态的仪表板,而Ag…

2025-11-15

百度世界大会发布AI新成果:文心5.0、昆仑芯升级,萝卜快跑领跑全球
李彦宏在大会上表示,“我们用AI重构搜索结果页,不是简单地在搜索结果中插入AI摘要,而是把搜索从一个以文字内容和链接为主的互联网应用,转化为一个以图片视频等富媒体内容为主的AI应用。” 在李彦宏看来,AI数字…

2025-11-14

百度世界大会亮点频出:文心5.0等成果发布,AI重构业务引领生产力革新
李彦宏在大会上表示,“我们用AI重构搜索结果页,不是简单地在搜索结果中插入AI摘要,而是把搜索从一个以文字内容和链接为主的互联网应用,转化为一个以图片视频等富媒体内容为主的AI应用。” 在李彦宏看来,AI数字…

2025-11-14

乌镇峰会:前沿科技碰撞,共绘网络空间命运共同体数智新蓝图
“非洲互联网之父”、加纳科网董事长尼·奎诺表示,像乌镇峰会这样的平台为发展中国家提供了宝贵的发声机会和参与空间;世界知识产权组织总干事邓鸿森表示,乌镇峰会为我们提供全球对话与合作的契机,这种对话与合作不仅是…

2025-11-13