AI前沿：从机器人学艺到模型心智
08:10 Share

本期《TAI快报》深入探讨了五篇AI前沿论文的关键洞见，剖析了语言模型、机器人学习及神经网络优化的最新进展：

• Does Reinforcement Learning Really Incentivize Reasoning Capacity in LLMs Beyond the Base Model?强化学习真的在LLMs超越基础模型中激励推理能力吗？清华大学的研究挑战了强化学习（RLVR）能显著提升语言模型推理能力的假设，发现其主要优化采样效率，而非扩展能力边界，提示未来需探索新训练范式。
• Chain-of-Modality: Learning Manipulation Programs from Multimodal Human Videos with Vision-Language-Models模态链：利用视觉-语言模型从多模态人类视频中学习操作程序Google DeepMind提出“模态链”策略，通过序列化处理多模态人类视频（视觉、音频、肌肉信号），显著提升机器人从单次示教中学习精细操作的能力，强调非视觉模态的价值。
• Let Me Grok for You: Accelerating Grokking via Embedding Transfer from a Weaker Model让我为你理解：通过从较弱模型进行嵌入迁移加速理解研究通过从弱模型迁移数据嵌入，加速神经网络的“Grokking”过程，消除延迟泛化，揭示数据表示对训练动力学的关键影响。
• Not All Rollouts are Useful: Down-Sampling Rollouts in LLM Reinforcement Learning不是所有部署都很有用：在LLM强化学习中下采样部署PODS框架通过最大方差降采样挑选信息丰富的Rollout，解决强化学习计算不对称问题，提升训练效率和性能。
• Learning to Attribute with Attention学习使用注意力进行属性分配AT2方法学习利用注意力权重预测输入影响，实现高效的语言模型归因，优化问答任务并揭示注意力机制的解释潜力。

完整推介：https://mp.weixin.qq.com/s/LVkr9WKZD-LzZixrVKKMZg