跳到正文
原文
HuggingFace Daily Papers(社区热门论文)·· 2026-09-01AI 评分40

SimLoss:单次解码的细粒度图像描述方法

A Glance Is All You Need: Single-Pass Fine-Grained Image Captioning with SimLoss

AI 导读

论文提出 SimLoss,一种免参考的嵌入空间训练目标,让视觉语言模型在解码前对齐隐藏状态与冻结图像嵌入,实现单次解码的细粒度图像描述,无需人工细粒度描述或多阶段伪描述。其中 SimLoss FFT 以可微方式微调,精度最高且推理比多阶段流程快约 20 倍,F1 接近多阶段方法;SimLoss GRPO 将嵌入模型作为黑盒奖励,召回率最强。

整理与数据来源:AIHOT

来源:HuggingFace Daily Papers(社区热门论文) · arxiv.org