HuggingFace Daily Papers(社区热门论文)·· 2026-09-01AI 评分40
SimLoss:单次解码的细粒度图像描述方法
A Glance Is All You Need: Single-Pass Fine-Grained Image Captioning with SimLoss
AI 导读
论文提出 SimLoss,一种免参考的嵌入空间训练目标,让视觉语言模型在解码前对齐隐藏状态与冻结图像嵌入,实现单次解码的细粒度图像描述,无需人工细粒度描述或多阶段伪描述。其中 SimLoss FFT 以可微方式微调,精度最高且推理比多阶段流程快约 20 倍,F1 接近多阶段方法;SimLoss GRPO 将嵌入模型作为黑盒奖励,召回率最强。
整理与数据来源:AIHOT
来源:HuggingFace Daily Papers(社区热门论文) · arxiv.org