ZeroSearch 大模型搜索引擎开源,搜索成本降低80%

阿里巴巴开源了ZeroSearch大模型搜索引擎,利用大模型知识库实现高效搜索,成本较传统搜索引擎降低80%,性能更强。

9效率工具大模型搜索成本降低搜索引擎阿里巴巴

ZeroSearch大模型搜索引擎开源

近日,阿里巴巴在GitHub等平台发布了ZeroSearch大模型搜索引擎。该搜索引擎通过强化学习框架,无需与真实搜索引擎交互即可提升大模型的搜索能力。

ZeroSearch基于大规模预训练的大模型知识库,能够根据搜索查询生成相关内容,并动态控制生成内容的质量,这是传统搜索引擎所不具备的功能。

阿里开源创新大模型搜索引擎 ZeroSearch,成本直降 80% 且能力更强插图

在NQ、TriviaQA、PopQA、HotpotQA等7大问答数据集上进行的评测显示,使用ZeroSearch的70亿参数模型搜索能力达到33.06,140亿参数模型达到33.97,超过了谷歌搜索的32.47。

通过SerpAPI使用谷歌搜索进行约64,000次搜索查询的训练成本约为586.70美元,而在四个A100GPU上使用140亿参数的大模型进行模拟时,成本仅为70.80美元,成本降低了87.93%以上。