网界
网络资讯 网界财经 科技人物 数据洞察 行业动态 智能出行 智能手机 数码极客 商业资讯

OpenAI新推“强化微调”,能否让AI成为各领域专家?

2024-12-07来源:ITBEAR编辑:瑞雪

在近期科技界的瞩目之下,OpenAI启动了一场为期两周的盛大新品发布活动,命名为“shipmas”,旨在带来一系列革新性的功能、产品及演示。活动进入第二天,OpenAI隆重推出了强化微调(Reinforcement Fine-Tuning,简称RFT)技术,这一突破性进展为开发者和机器学习工程师在构建针对复杂特定领域任务的专家模型上开辟了新的道路。

强化微调技术通过一种创新的模型定制方法,使得开发者能够利用精选的高质量任务集对模型进行精细调整。该技术引入了参考答案来评估模型的响应,进而显著提升模型在特定领域任务中的推理能力和准确性。这一方法不仅深化了模型处理类似问题的能力,还极大提高了其在该领域特定任务上的表现精度。

OpenAI官方对强化微调技术进行了详细介绍:开发者可以运用数十至数千个高质量任务,对OpenAI的模型进行个性化定制,并通过参考答案对模型的回答进行评分。官方指出,RFT技术通过强化模型推理过程,显著提高了其在特定领域任务上的准确性。

与传统的微调方法相比,强化微调利用强化学习算法,将模型的表现从一般高水平提升至专家级水平。RFT不仅超越了标准的监督式微调,更让模型学会以一种全新的方式进行推理。通过对模型答案进行评分并强化正确的推理路径,RFT技术仅需少量示例便能显著提升模型性能。

RFT技术还允许用户利用自己的黄金数据集创建独特的模型,并将其应用于法律、金融、工程、保险等需要深厚专业知识的领域。这一技术的推出,无疑为这些领域带来了人工智能辅助的新机遇。

OpenAI此次活动特别面向研究机构、高校和企业开放申请,尤其是那些目前由专家执行一系列复杂狭窄任务,且有望从人工智能辅助中受益的机构。OpenAI表示,强化微调技术在结果具有客观“正确”答案,且大多数专家会达成一致的任务中表现出色,因此在法律、保险、医疗、金融、工程等领域具有广泛的应用前景。

参与者将有机会提前访问Alpha版的强化微调API,并在特定领域任务中进行测试。OpenAI还鼓励参与者分享数据集,共同推动OpenAI模型的改进。这一举措不仅促进了技术的开放共享,还加速了人工智能技术的迭代升级。

OpenAI预计将于2025年初公开发布强化微调功能。OpenAI首席执行官山姆·阿尔特曼对强化微调技术给予了高度评价:“强化微调的效果令人惊叹,它是我2024年最大的惊喜之一。”这一技术的推出,无疑将为人工智能技术的发展和应用开启新的篇章。

小米三款新车曝光:YU9、YU7 GT、SU7 L各展所长
近日,小米汽车在安全辅助功能领域取得重大突破,其相关测试成果引发广泛关注。雷军转发的第三方直播实测显示,小米汽车的安全辅助功能成功通过高速、城区、夜间三大场景下的全部11项严格测试,再次提醒用户辅助驾驶并非自动驾驶,驾驶过程中仍需保持高度专注。

2025-12-09

通用AI助手灵光正式上线网页版,开启多端生态
12月9日消息,全模态通用AI助手灵光正式推出网页版,补全了灵光的多端生态。用户可通过浏览器直接访问,在电脑端体验其核心的“灵光对话”和“ 灵光闪应用”功能。

2025-12-09

苹果芯片业务负责人斯鲁吉发声
近日,科技行业一则关于苹果高层的动态引发广泛关注。此前有消息称,苹果芯片业务负责人约翰尼・斯鲁吉(Johny Srouji)正认真考虑离开苹果公司,甚至已向苹果首席执行官蒂姆・库克(Tim Cook)表达了这一想法,还告知同事若离职将加入另一家公司,而非退休。

2025-12-09

苹果明年或推屏下Face ID技术,iPhone18 Pro灵动岛将“瘦身”升级
屏下Face ID将原本的面容ID组件隐藏于屏幕下方,但是换来的并非是和友商同款的居中单打孔,而是:缩小灵动岛面积,大岛变小岛。 按照行业分析师的预测,苹果将为Pro产品线先采用两年的“屏下+打孔”过渡方案,…

2025-12-09

双12小米红米K90 Pro Max降价,高配低价,入手正当时?
为了避免自己购买的手机快速降价,很多人会购买高性价比机型,但就阿维看来这种思路完全错了,虽然按理来说这类高性价比手机利润更低,价格应该会更稳定,但这几年手机行业的情况已经不一样了,不走高性价比路线的机型反而不…

2025-12-09