返回全部动态

ReLoop-UME:基于可学习检索寄存器的循环深度通用多模态嵌入

原标题:ReLoop-UME: Recurrent Depth with Learnable Retrieval Registers for Universal Multimodal Embedding

arXiv cs.CV一手来源研究质量 83

AI 摘要

arXiv 上发表了一篇关于通用多模态嵌入(UME)的论文,提出 ReLoop-UME 模型。该模型通过循环复用参数共享的检索形成块,并引入可学习的检索寄存器,在不增加 token 工作区的情况下沿模型深度扩展计算。实验表明,ReLoop-UME 在 MMEB-V2 和 MRMR 基准上持续提升检索性能,且运行速度比 UME-R1 快 44.9 倍,比 PLUME 快 1.5 倍。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

Computer Science > Computer Vision and Pattern Recognition Title:ReLoop-UME: Recurrent Depth with Learnable Retrieval Registers for Universal Multimodal Embedding View PDF HTML (experimental) Abstract:Universal multimodal embedding (UME) maps heterogeneous multimodal inputs into a shared embedding space. Existing UME models either form embeddings through single forward encoding or add computation through explicit rationale tokens and latent autoregressive states. Although token expan


发布时间:2026-08-03 12:00
抓取时间:2026-08-03 16:31
来源机构:arXiv
阅读原文arxiv.org