跳到正文

#论文/研究

今日 0 条
9月1日周二
  1. HuggingFace Daily Papers(社区热门论文)49

    研究分析 On-Policy Distillation 机制并提出无监督方法 OPSA

    论文定量分析 on-policy distillation(OPD)训练中的教师监督,发现其噪声随教师规模增大而增加,且学生策略对该噪声不敏感。学习集中在低 log-probability token 上,用单一固定负优势即可匹配教师提供的信号,表明 OPD 主要通过抑制低概率 token 起作用而无需教师。

  2. Epoch AI:研究、数据与评测64

    Epoch AI 发布 FrontierMath Erdős 基准:用 Lean 验证的 68 道未解 Erdős 问题评测 AI 数学能力

    Epoch AI 发布 FrontierMath Erdős 基准,由 erdosproblems.com 创建者 Thomas Bloom 挑选 68 道截至 2026 年 8 月仍未解决的、兼具重要性与难度的 Erdős 问题,用 Lean 形式化验证(50 题来自 Google Formal Conjectures 项目),代码开源,每题默认推理预算 $300。

    推荐理由:原文给出 68 道精选 Erdős 问题的基准设计、验证方式和五个模型的首轮得分,读者可据此校准对 AI 数学研究能力的估计。

  3. HuggingFace Daily Papers(社区热门论文)40

    SimLoss:单次解码的细粒度图像描述方法

    论文提出 SimLoss,一种免参考的嵌入空间训练目标,让视觉语言模型在解码前对齐隐藏状态与冻结图像嵌入,实现单次解码的细粒度图像描述,无需人工细粒度描述或多阶段伪描述。其中 SimLoss FFT 以可微方式微调,精度最高且推理比多阶段流程快约 20 倍,F1 接近多阶段方法;SimLoss GRPO 将嵌入模型作为黑盒奖励,召回率最强。

  4. HuggingFace Daily Papers(社区热门论文)47

    Pixel Linguist II:像素文本表示学习的设计原则与新视觉编码器

    论文提出像素文本表示学习的四项设计原则:可变分辨率与渲染字号、自然图文对做 grounding、布局感知渲染防止像素级捷径、两阶段多语言课程。基于此训练的 Pixel Linguist II 视觉编码器在英文、跨语言和多语言 Visual STS 及 ViDoRe 上取得 SOTA,并在 80% 视觉 token 压缩下保持鲁棒。

  5. HuggingFace Daily Papers(社区热门论文)38

    CoGR:用强化学习共同进化查询与物品两侧的生成式检索器

    论文提出 CoGR 检索框架,训练 LLM 直接在查询侧和物品侧生成紧凑关键词集,经倒排索引直接匹配,兼容现有关键词检索基础设施。训练采用两阶段流程,先用监督微调对齐关键词空间,再用 GRPO 交替优化两侧生成器,双方共同优化同一 query-to-item 检索 F_1 目标。

  6. HuggingFace Daily Papers(社区热门论文)41

    Kirin:从野外视频生成动物运动并自动绑定 3D 动画

    论文提出 Kirin 框架,从野外动物视频重建 3D 运动序列,并构建 AiM3D,首个为四足动物提供对齐视频-文本-运动三元组的大规模数据集。基于该数据训练的模型可同时以文本和图像为条件生成跨物种的真实运动,并结合现成 image-to-3D 模型自动绑定 3D 网格,产出可直接渲染的动画动物。项目页:https://kirin-ani.github.io/。

  7. Rohan Paul61

    一篇论文在固定 12 个模型和 3,679 个问题的前提下,只改变提示词格式、选项顺序、打分方式等常规评测设置,结果排名大幅波动。gemma4-31b 得分在 31% 到 89% 之间,12 个模型中有 4 个至少在一种有效设置下排到第一;相邻模型平均 95.7% 的差距来自评测设置改变时会翻转答案的题目,最大不稳定来源是打分方式,即生成答案还是选最高似然选项。

  8. elvis42

    腾讯联合清华、上海 AI Lab 发布 ContextPilot 论文,训练智能体主动管理自身工作上下文,并在单次上下文编辑层面分配信用。方法在搜索、删除、摘要之外加入全局规划、长期记忆和自适应软压缩,让智能体可以卸载信息而非只能丢弃;训练上利用上下文与熵变化定位关键编辑决策,采样分支并从经过该编辑的分支轨迹估计动作级优势。

  9. elvis50

    Google 提出 SKILL.state,用显式可变执行状态替代追加式对话历史,解决长程智能体运行变慢和上下文污染问题。模型每步仅读取不可变技能规范、当前结构化状态和最新观察,中间推理在生成有效状态更新后即被丢弃,提示词不再随运行增长。在多个数据集、模型和执行环境中,任务准确率提升,累计 token 消耗下降,且该抽象与架构无关,可移植到现有技能运行时。

  10. DAIR.AI48

    Google 等机构提出 SKILL.state,用显式可变执行状态替代不断增长的对话历史,解决长程任务中智能体变慢和上下文污染问题。模型每步仅读取技能规范、当前状态和最新观测,中间推理在生成有效状态更新后即被丢弃。在多个数据集、模型和执行环境中,任务准确率提升,累计 token 消耗下降,且该抽象与架构无关,可移植到现有技能运行环境。

8月21日周五
  1. Microsoft Research36

    微软研究院发布 Skala 1.1,并推进其在 CP2K、Psi4 等 DFT 软件中的集成

    微软研究院发布深度学习交换关联泛函 Skala 1.1,训练数据量为此前公开版本的 2.5 倍,在 GMTKN55 的 55 个类别中拿下 32 项第一,加权平均误差 2.8 kcal/mol。Skala 现已在 CP2K 中可用,并正在集成进 Psi4、FHI-aims、ORCA 和 VASP。微软研究院同时推出一个持续更新的基准,用于追踪后续 Skala 版本的计算性能。

8月13日周四
  1. Microsoft Research38

    微软发布 MindTopo 基准,揭示多模态模型拓扑推理短板

    Microsoft Research 推出 MindTopo 基准,用于评估多模态大语言模型的拓扑推理能力,覆盖连通性、分离、顺序、包围与打结五类任务,并区分静态识别与交互规划两个认知层级。测试显示,当前专有与开源模型在静态推理上明显强于交互规划,且两者均远低于人类水平;失败多出现在规划阶段而非感知阶段,模型在场景变化后难以维持结构关系。图像与视频生成仅在单帧关系可见时偶有帮助,跨序列仍不可靠。

7月29日周三
  1. Berkeley AI Research60

    从 CUDA 到 MLX:K-Search 如何把内核优化经验带到 Apple Silicon

    Berkeley AI Research 与 IBM Research 将进化式内核搜索框架 K-Search 扩展到 MLX 后端,通过结构化的 CUDA 到 MLX 翻译层,把已有 CUDA 内核作为知识库迁移到 Apple Silicon。

    推荐理由:K-Search 把 CUDA 内核优化经验迁移到 Apple Silicon,给出注意力与 Mamba 两个内核的具体加速数据。

7月26日周日
6月16日周二
  1. Google DeepMind62

    Google DeepMind 发布 AI Control Roadmap,用系统级安全约束 AI 智能体

    Google DeepMind 发布 AI Control Roadmap,一套用于在 Google 内部部署和管理高级 AI 的框架,在模型对齐之外增加系统级安全层,即使对齐不完美也能提供保障。

    推荐理由:DeepMind 公开内部 AI Control Roadmap,说明如何在模型对齐之外用系统级监控约束智能体,并给出可迁移的威胁建模与分级响应思路。

5月16日周六