阿里巴巴开源ZeroSearch:低成本提升大模型搜索能力

阿里巴巴近期在多个平台开源了ZeroSearch大模型搜索引擎,这是一种创新的强化学习框架,无需与真实搜索引擎交互即可激发大模型的搜索潜力。ZeroSearch充分利用大模型预训练时积累的知识,将其转化为检索模块,可根据查询生成相关内容,并动态控制生成质量。

实验数据显示,在7大问答数据集上,使用ZeroSearch后,70亿参数的监督微调模型搜索能力评分达到33.06,140亿参数模型更是达到33.97,超越谷歌搜索的32.47。此外,相比通过谷歌API进行训练,ZeroSearch在四个A100 GPU上模拟140亿参数大模型的成本仅为前者的约12%,显著降低了资源消耗。这一技术为大模型的应用提供了更高效、经济的解决方案。

Copyright © DoNews 2000-2025 All Rights Reserved
蜀ICP备2024059877号-1