网界
网络资讯 网界财经 科技人物 数据洞察 行业动态 智能出行 智能手机 数码极客 商业资讯

群联aiDAPTIV+技术:以NAND闪存破解AI内存瓶颈

2025-03-19来源:ITBEAR编辑:瑞雪

近日,科技界迎来了一项可能重塑AI应用格局的技术突破。知名科技媒体NeoWin发布报道,详细介绍了群联(Phison)最新推出的aiDAPTIV+技术。这项技术旨在通过动态缓存策略,解决AI应用长期面临的内存瓶颈问题。

在现代硬件性能评估中,AI和机器学习的处理能力已成为重要指标。除了处理器的强大算力,AI任务对内存的需求同样巨大。随着AI模型参数和精度的提升,内存需求也随之激增。例如,单精度(float32)计算会消耗四倍于参数值的内存,即便是配备32GB显存的高端显卡RTX 5090,在面对80亿参数的模型时也会显得捉襟见肘。

群联的aiDAPTIV+技术通过引入动态缓存机制,并结合基于NAND闪存的“aiDAPTIVCache”缓存技术,实现了对HBM(高带宽内存)和GDDR(专为高带宽应用设计的同步动态随机存取存储器)的有效扩展。这一创新不仅提高了内存利用率,还为AI应用提供了更为充足的内存资源。

在即将举行的GTC 2025大会上,群联携手Maingear公司共同推出了应用aiDAPTIV+技术的AI PRO桌面工作站。这款工作站通过aiDAPTIVLink 3.0新版中间件,实现了SSD的NAND和GPU之间的高速数据传输。这不仅显著提升了首个Token时间(TTFT)的回调响应速度,还支持了更大规模的LLM(大型语言模型)提示上下文。

据群联提供的数据,在参数量超过130亿的模型上,aiDAPTIV+技术的表现令人瞩目。它轻松超越了Maingear未采用aiDAPTIV+技术的四路英伟达RTX 6000 Ada设置。这一成果充分展示了aiDAPTIV+技术在提升AI应用性能方面的巨大潜力。

Maingear公司介绍称,PRO AI工作站能够动态切片70B训练模型,将当前切片提供给GPU进行高速训练,同时将模型的其余部分存储在DRAM和群联AI100 SSD中。这一设计使得每个NVIDIA RTX 6000 Ada显卡在训练过程中都能以最小的停机时间发挥最佳性能。

群联的aiDAPTIV+技术不仅为AI应用提供了更为充足的内存资源,还通过优化数据传输路径和提升响应速度,显著提升了AI应用的整体性能。这一技术的推出,无疑将为AI领域的发展注入新的活力。

百度AI成果井喷:从智能涌现到效果涌现,产业结构迈向健康倒金字塔
李彦宏在大会上表示,“我们用AI重构搜索结果页,不是简单地在搜索结果中插入AI摘要,而是把搜索从一个以文字内容和链接为主的互联网应用,转化为一个以图片视频等富媒体内容为主的AI应用。” 在李彦宏看来,AI数字…

2025-11-15

百度世界大会:李彦宏携AI“军火库”全面开放,开启应用新篇章
现场演示连线数字人罗永浩环节上,出现了“翻车”这一尴尬现象时,李彦宏的情绪也并没有太多波动,而是感觉“有点遗憾”,并表示“其实我们在之前演练的过程当中觉得这个效果还是非常令人惊艳的”。 还有大模型层面上的文…

2025-11-15

百度世界大会发布AI新成果:文心5.0等亮相,李彦宏畅谈AI内化生产力变革
李彦宏在大会上表示,“我们用AI重构搜索结果页,不是简单地在搜索结果中插入AI摘要,而是把搜索从一个以文字内容和链接为主的互联网应用,转化为一个以图片视频等富媒体内容为主的AI应用。” 在李彦宏看来,AI数字…

2025-11-13

百度“文心杯”第三届落幕:8支团队获千万投资,李彦宏力推AI应用普及
李彦宏表示,我们看到越来越多的创业者在各种场景发现AI的新能力、新效果,希望更多的人能够加入这个发现之旅,也正基于此,百度连续三年举办“文心杯”创业大赛。 第三届“文心杯”创业大赛8支优胜团队共获得数千万元…

2025-11-13

2025百度世界大会聚焦AI发展:成果发布,内化能力引领新质生产力变革
本届大会以“效果涌现”为主题,聚焦国产芯片最新进展、大模型升级、AI应用创新与全球出海,呈现了百度作为中国人工智能领军企业,如何将AI技术内化为产业发展的原生动能,为加快形成新质生产力提供可落地的“百度方案”…

2025-11-13