UNREAL提出统一检索与长上下文推理的模型框架

Hugging Face的研究者提出了UNREAL框架，通过从冻结大语言模型的内部表示中生成检索查询，旨在用一个模型统一处理检索与长上下文推理任务。 该框架仅增加少于50万个可训练参数，在基于2100万个文本块构建的索引上进行测试，其四个变体的性能据称优于现有的检索重排序系统。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。