AI 每日进展速报 - 2026-09-18
新旧
正在统计...
来源
当前筛选条件下没有条目。
数据状态 / Data Status
- GitHub 数据源本次没有返回条目；可能是暂无匹配结果，也可能是接口异常，请结合日志确认。
图像生成/编辑
arXiv
- Efficient Text-to-Image Generation: An Adaptive Step Schedule Controller for Diffusion Models
- 赛道归属: 文生图 / 推理优化
- 核心创新点: 针对文生图扩散模型中固定去噪步数无法适应不同文本复杂度的问题，提出了一种无需额外训练的自适应步数调度控制器。核心方法是通过混合多种步长调度策略，并在每个时间步评估误差项差异（error term discrepancy），动态决定最优去噪步数，从而在保证图像质量的前提下显著提升生成效率。
- Multi-Axis Max@K Reinforcement Learning for Representative Diversity in Text-to-Image Generation 🆕NEW
- 赛道归属: 文生图 / 多样性与公平性优化
- 核心创新点: 提出"多轴 Max@K"强化学习目标，将文生图的多样性问题形式化为"目标模式覆盖"任务。核心突破在于设计了一种基于分组的RL训练范式：在同一提示词下采样K张图像，以组为单位计算奖励，鼓励模型在单次生成批次中覆盖尽可能多的预定义语义模式（如不同人口统计属性）。相比逐样本优化，该方法从根本上改变了奖励信号的计算粒度，使扩散模型能够主动探索并覆盖多样化的视觉模式，同时缓解人物类提示词中的人口统计偏差问题。
- CompArt: Operationalizing Aesthetic Alignment in Text-to-Image Generation via Principles of Art
- 赛道归属: 文生图 / 美学对齐与可控生成
- 核心创新点: 提出"美学对齐"（Aesthetic Alignment）概念，将传统模糊的审美偏好（如"高质量"、"精美"）分解为基于艺术原则的显式、可操作的构图规则（如对称性、色彩对比、视觉重心等）。核心突破在于将艺术学领域的构图原理形式化为可量化的约束条件，并将其注入T2I扩散模型的生成过程，使用户能够精确控制图像的构图意图，而非依赖模糊的质量描述词，从根本上区别于以往以单一偏好分数驱动的美学优化范式。
- Balancing Emotional Alignment and Semantic Consistency in Image Generation via Reinforcement Learning with Valence-Arousal Anchoring
- 赛道归属: 文生图 / 情感可控图像生成
- 核心创新点: 提出将连续情感空间（Valence-Arousal 效价-唤醒度坐标）与强化学习相结合的流匹配图像生成框架。核心突破在于引入"情感-语义解耦"机制：通过 RL 奖励信号同时优化情感对齐度与语义一致性，避免传统监督式情感注入方法中因强化情感条件而导致的内容漂移（emotion-semantic drift）问题，实现在不改变场景布局和对象描述的前提下对情感强度进行连续、精细的控制。
- Unified Text-Image Generation with Weakness-Targeted Post-Training
- 赛道归属: 多模态统一生成 / 文生图
- 核心创新点: 针对现有统一多模态生成系统依赖显式模态切换（先生成推理文本再手动切换至图像生成）的局限，提出基于弱点靶向后训练（Weakness-Targeted Post-Training）的方法，识别并针对性强化模型在跨模态耦合上的薄弱环节，实现文本与图像的全统一自动生成，消除顺序推理中的模态割裂，提升跨模态联合建模能力。
- Paint-Anything: Unified Any-Color Control for Image Generation and Editing 🆕NEW
- 赛道归属: 图像生成 / 图像编辑 / 颜色可控生成
- 核心创新点: 提出 Paint-Anything 框架，实现对任意24位十六进制颜色值的精确可控生成与编辑。核心创新在于利用大语言模型天然具备的十六进制颜色语义理解能力，设计了一个统一的共享表示空间，将颜色控制信号直接以 hex 值形式注入生成/编辑流程，无需依赖专用颜色表示（如调色板、色块参考图）或特殊推理流程。该方法将颜色控制的精度从粗粒度语义描述提升至精确的24位色彩空间，同时统一了生成与编辑两个任务的控制接口。
- Refinement Is Inherently Editable: Training-Free Prompt-to-Prompt Image Editing with Generative Refinement Network 🆕NEW
- 赛道归属: 图像编辑 / 训练无关方法
- 核心创新点: 提出 RefineEdit，一种基于生成式精化网络（Generative Refinement Network）的无训练 Prompt-to-Prompt 图像编辑框架。核心突破在于将"精化"过程与"可编辑性"解耦并统一：发现精化网络的迭代修正机制天然具备局部可编辑性，通过将提示词替换与精化步骤耦合，在不引入额外训练的前提下实现精准的文本引导编辑。该方法同时解决了扩散模型空间控制不精确导致的编辑不完整问题，以及自回归模型固定解码顺序导致的早期决策难以修正问题，适用于两类主流生成架构。
- Understanding and Exploiting Diagonal Attention Sparsity in Autoregressive Image Generation 🆕NEW
- 赛道归属: 自回归图像生成 / 推理优化
- 核心创新点: 系统性地发现并利用自回归图像生成中注意力矩阵的"对角稀疏性"规律。核心创新在于：通过分析视觉 token 的注意力分布，揭示了图像生成场景下 KV cache 访问的结构化稀疏模式（注意力权重集中于对角线附近的局部区域），并在此基础上设计了针对性的稀疏注意力计算策略，在可接受的质量损失范围内大幅降低解码阶段的 KV cache 访问开销，从而缓解自回归模型生成数千个视觉 token 时的推理瓶颈，提升与 LLM 服务基础设施的兼容性。
- Newer Is Not Fairer: Gender Stereotyping in Text-to-Image AI Across Model Generations
- 赛道归属: 文生图 / 公平性与偏见评估
- 核心创新点: 针对多代Stable Diffusion模型（SD 1.5、SD 2.1、SDXL、SD 3 Medium）开展系统性跨代际性别偏见评估研究。核心贡献在于通过大规模受控实验（8,000张图像、20种职业、5种提示模板）实证揭示"模型越新越公平"这一普遍假设的谬误，量化分析了不同模型代际在职业性别刻板印象上的演变规律，为T2I模型的公平性评估提供了标准化的跨代际比较方法论框架。
- FRPSS: Feature Rearrangement in Pre-Shape Space for Single-Image Generation
- 赛道归属: 图像生成 / 单图生成
- 核心创新点: 针对单图生成模型中全局结构完整性与局部多样性难以兼顾的问题，提出了"预形状空间特征重排"（FRPSS）方法。其核心创新在于引入"预形状空间"作为显式的全局结构约束，通过在该空间内对特征进行重排操作，替代传统依赖随机噪声驱动的生成范式，从而有效解决结构变化时出现的空间错位问题，同时保持局部纹理的多样性。
视频生成/编辑
arXiv
- Harnessing Intrinsic Subject-Aware Attention for Controllable Multi-Subject Video Generation
- 赛道归属: 视频生成（多主体可控视频生成）
- 核心创新点: 通过分析扩散Transformer（DiT）的内部注意力机制，发现特定注意力块会自然形成"内在空间定位图"（ISGM），能精确定位参考主体位置。基于此发现，提出"双阶段内在注意力利用"框架（DIAL），将这一内生信号同时用于训练和推理阶段，从而在无需额外外部控制信号的情况下，同时解决多主体生成中保真度强度不可控和语义漂移两大核心问题——本质上是将模型自身的隐式空间感知能力显式化并加以利用。
- ReaDiT Guidance: Control for Image and Video Generation using Diffusion Transformer Features
- 赛道归属: 图像生成 / 视频生成 / 可控生成（ControlNet类）
- 核心创新点: 提出ReaDiT Guidance框架，利用扩散Transformer（DiT）单个block的内部特征表示，在推理时实现对深度图、姿态图、边缘图等空间条件的轻量级控制，无需训练额外的控制网络。核心突破在于：直接读取DiT内部特征并将其作为引导信号，以极低的计算开销实现测试时的空间条件控制，并天然扩展至文生视频模型（因其同样基于DiT骨干），统一了图像与视频的可控生成范式。
- Visko Orbis 1.0: A Live Model for Real-Time Interactive Long Video Generation
- 赛道归属: 视频生成（实时交互式长视频生成）
- 核心创新点: 提出了一种支持实时交互的长视频生成"Live Model"架构。核心突破在于：用户可在生成过程中随时修改提示词并即时生效，实现了生成与交互的同步解耦；引入有界多尺度记忆机制（bounded multi-scale memory），在分块生成的流式推理中跨块保持主体、场景和风格的一致性，支持小时级超长视频滚动生成而不出现明显质量退化。同时兼容文生视频、图生视频及视频续写多种模式，并支持多语言提示词。
- Recency Forcing: Bridging the Long-Horizon Gap in Autoregressive Video Generation 🆕NEW
- 赛道归属: 视频生成 / 自回归长视频生成
- 核心创新点: 针对自回归视频生成中"KV驱逐不匹配"问题（训练时所有帧均在KV缓存中，推理时远端帧被驱逐导致上下文丢失），提出"Recency Forcing"方法：在训练阶段主动模拟推理时的KV驱逐行为，同时引入"recency token"作为被驱逐帧的压缩摘要，使模型在保留长程时序信息的同时适应推理时的内存约束，从根本上弥合训练与推理之间的分布差距，显著提升长视频生成的运动连贯性。
- PhysStream: Streaming Physics-Grounded Video Generation with Structured Scene Memory and Fine-Grained Motion Control
- 赛道归属: 视频生成（物理驱动·流式自回归·细粒度运动控制）
- 核心创新点: PhysStream 提出了一种基于物理约束的流式自回归图像转视频生成框架，核心突破体现在两个层面：①引入结构化场景记忆（Structured Scene Memory），使模型在自回归生成过程中能够持续追踪场景状态，无需在生成前预先提供完整的控制序列，从而支持真正的在线/流式交互控制；②以物理动力学而非像素级位置信号作为运动控制的基础，将力、速度等物理量作为细粒度控制信号驱动对象运动，使生成结果符合真实物理规律，而非仅仅在像素空间中插值对象轨迹。相比现有可控视频生成方法，PhysStream 同时解决了"需要预知完整控制计划"和"控制信号缺乏物理语义"两大痛点，实现了动态场景的实时、物理合理的精细运动控制。
- Vidu S2: Real-Time Interactive, Editable, and Spatial Video Generation
- 赛道归属: 视频生成 / 视频编辑（实时交互式空间视频生成与编辑）
- 核心创新点: 提出Vidu S2系统，涵盖两大核心模块：①Vidu S2-Avatar：支持实时720p数字人视频生成，引入"动态参考"机制（可在任意时刻更新驱动参考），并增强对舞蹈等复杂动作指令的跟随能力；②Vidu S2-Editing：实现实时视频编辑能力。在此基础上，进一步探索将两个模块的输出扩展至空间视频（Spatial Video）生成的可行性，将实时性、可交互性与空间感知三者融合，是对现有视频生成系统在延迟、可编辑性和输出维度上的综合性突破。
- AgenticGen: Reward-Guided Agentic Video Generation for Advertising
- 赛道归属: 视频生成（广告视频智能体生成）
- 核心创新点: 提出AgenticGen框架，将广告视频生成重新定义为"以在线业务指标为优化目标的产品条件推理问题"，而非单纯的视频合成任务。核心创新在于构建了一个奖励引导的智能体闭环系统：以真实在线业务反馈（如点击率、转化率等商业指标）作为奖励信号，驱动智能体自主规划产品如何被转化为有效广告内容，并基于历史生成结果的业务反馈持续优化未来的生成策略，实现了视频生成模型与广告效果评估之间的端到端闭环优化。
- Streaming4D: Accelerate 4D World Models via Block-wise Video Generation and Incremental Reconstruction 🆕NEW
- 赛道归属: 4D生成 / 动态场景重建
- 核心创新点: 提出Streaming4D流式同步管线，打破传统"先生成视频、再重建3D"的串行解耦范式。核心创新在于将分块自回归视频生成与增量式3D重建紧密耦合、同步执行：视频以块（block）为单位逐步生成，每块完成后立即触发对应的增量几何恢复，实现视频生成与4D重建的并行流水，大幅降低交互延迟，使实时交互式4D世界模型成为可能。
- TurboT2VA: Fast Large-Scale Text-to-Video-Audio Generation via Score-Regularized Consistency Distillation 🆕NEW
- 赛道归属: 视频生成 / 多模态推理加速 / 知识蒸馏
- 核心创新点: 针对190亿参数级联合文本-视频-音频（T2VA）生成模型推理代价极高的问题，提出TurboT2VA蒸馏加速框架。核心技术突破包括：（1）引入分数正则化一致性蒸馏（Score-Regularized Consistency Distillation）解决大规模连续时间一致性训练的稳定性难题；（2）设计模态均衡优化策略，缓解视频与音频模态在梯度尺度和收敛速度上的不平衡问题；（3）在保持视音频同步质量的前提下，实现对超大规模多模态生成模型的显著推理加速。
- Mode Seeking meets Mean Seeking for Fast Long Video Generation 🆕NEW
- 赛道归属: 视频生成 / 长视频生成
- 核心创新点: 针对长视频生成中高质量短视频数据丰富而连贯长视频数据稀缺的核心矛盾，提出"Mode Seeking meets Mean Seeking"训练范式，将局部保真度与长程连贯性解耦建模。具体通过解耦扩散Transformer（Decoupled Diffusion Transformer）实现统一表征：局部帧质量由Mode Seeking（对抗/分布匹配）目标驱动，利用丰富的短视频数据优化；长程时序一致性由Mean Seeking（Flow Matching监督学习）目标驱动，利用有限的长视频数据训练全局头，两者协同实现从秒级到分钟级的高质量长视频生成。
音频生成
arXiv
- ParsVoice: A Large-Scale Multi-Speaker Persian Speech Corpus for Text-to-Speech Synthesis
- 赛道归属: 文本转语音（TTS）/ 多说话人语音合成 / 低资源语言数据集构建
- 核心创新点: 构建了迄今最大规模的波斯语多说话人公开语音-文本语料库 ParsVoice，并提出了一套可扩展的数据处理流水线：以有声书长录音为原始素材，结合微调后的 ParsBERT 进行句子补全对齐，实现高质量语音-文本数据的自动化生产。核心突破在于针对波斯语这一严重欠代表语言，系统性地解决了多说话人 TTS 训练数据匮乏的问题，为后续低资源语音建模提供了基础设施支撑。
- Mask, Sample, Revise: A Revisable CTMC Inference Stack for Guided Discrete Flow Matching Text-to-Speech
- 赛道归属: 文本转语音（TTS）/ 离散流匹配 / 推理时引导控制
- 核心创新点: 提出了"Mask-Sample-Revise"三阶段可修正推理框架，将连续时间马尔可夫链（CTMC）离散流匹配（DFM）引入对齐无关的非自回归 TTS。核心创新在于：在推理阶段引入可修正机制，允许对已采样的离散 codec token 进行局部回溯与修正，从而在少步推理条件下实现稳定的条件填充控制，无需外部对齐器或显式时长预测器，同时显著提升了推理时引导信号（如韵律、情感）的可控性。
- Multi-Dimensional Prosody Judgment For Live Streaming Speech Synthesis 🆕NEW
- 赛道归属: 语音合成 / TTS 韵律评估
- 核心创新点: 针对直播场景语音合成（TTS）中细粒度韵律评估的痛点，提出 Live-ProsodyJudge（LPJ）框架。核心创新在于将专有大模型 Gemini 的韵律判断能力通过知识蒸馏迁移至开源的 Qwen3-Omni，构建出一个低成本、可大规模推理的成对比较式韵律评估器，能够覆盖情感、语调、能量等多维度细粒度韵律属性。相比传统 MOS 预测器无法捕捉高表现力韵律特征的局限，以及直接调用专有 LLM 成本过高的问题，该方法在保留评估质量的同时显著降低了推理开销，并可作为强化学习的反馈信号，为直播 TTS 系统的训练与优化提供实用的自动化评估基础设施。
- Self-Distilled Pronunciation and Accent Control for Neural Text-to-Speech
- 赛道归属: 文本转语音（TTS）/ 发音与口音控制
- 核心创新点: 提出"自蒸馏"训练范式，无需额外词典、录音数据或逐词样本编辑。核心思路是：冻结骨干TTS模型对含常见词的句子生成正确读音，将该输出作为教师信号，再将句中目标词替换为带标注的特定口音读法，构成训练对，从而让模型在不改变骨干参数的前提下学习发音与口音控制能力。该方法将模型自身推理结果转化为监督信号，实现了低成本、免标注的发音定制。
- Taming Long-form Text-to-Speech
- 赛道归属: 文本转语音（TTS）/ 长文本推理优化
- 核心创新点: 提出仅推理阶段的方法 LACI（局部注意力约束推理），无需重新训练模型即可解决自回归TTS在长文本场景下的质量退化问题。核心机制是在近实时条件下检测TTS错误，并通过局部化注意力约束来抑制长序列中注意力漂移导致的韵律不一致和说话人相似度下降，从而在保持短文本性能的同时显著提升长文本生成质量。
- The Evolving Bottleneck in Speech Generation: Interface Co-design and Staged Alignment from CosyVoice to Qwen-Audio-3.0-TTS
- 赛道归属: 文本转语音（TTS）/ 系统架构演进与对齐优化
- 核心创新点: 以技术回顾的视角系统梳理了 CosyVoice 系列（CosyVoice → CosyVoice 2 → CosyVoice 3 → Qwen-Audio-3.0-TTS）的演进逻辑，核心论点是：进步来源于对系统"主瓶颈"的持续定位与迁移，而非单纯堆叠更大模型或更多数据。架构上稳定采用"自回归语言模型负责语音规划 + 流匹配模型负责声学渲染"的解耦设计，并通过接口协同设计（Interface Co-design）与分阶段对齐（Staged Alignment）策略逐步突破各阶段瓶颈，为TTS系统的系统性优化提供了方法论框架。
- Cross-Lingual F5-TTS 2: A Simplified Framework for Language-Agnostic Voice Cloning
- 赛道归属: 文本转语音（TTS）/ 跨语言零样本声音克隆
- 核心创新点: 在 Cross-Lingual F5-TTS 基础上进一步简化框架，彻底移除对强制对齐（forced alignment）的依赖，解决了原方法在边界敏感场景下的脆弱性问题。核心突破在于提出了一种无需音频提示文本转录、无需强制对齐的训练数据准备方案，使系统能够在未见语言上实现真正语言无关的零样本声音克隆，大幅降低了跨语言 TTS 的数据准备门槛。
- Tone on a Budget: A Reference-Free Metric for Lexical Tone in Massively Multilingual Text-to-Speech
- 赛道归属: 文本转语音（TTS）/ 多语言评估指标 / 声调语言质量评估
- 核心创新点: 针对现有 CER 等自动评估指标在声调语言（如约鲁巴语）中系统性失效的问题，提出了 DunDun——一种无需参考音频的词汇声调自动评估指标。核心创新在于识别并量化了"ASR 丢弃声调符号导致 CER 虚高"这一评估盲区，并设计了专门捕捉音高/声调准确性的评估方法，填补了大规模多语言 TTS 在声调维度上缺乏自动化评估工具的空白。
- The Limits of Reference-Free Speech Quality Metrics as Evaluators and Rewards on Modern Text-to-Speech
- 赛道归属: 文本转语音（TTS）/ 语音质量评估 / 偏好优化奖励信号
- 核心创新点: 系统性地审视了 UTMOS、DNSMOS、SCOREQ 等主流无参考语音质量预测器作为 TTS 自动评估器和强化学习奖励信号的有效性边界。通过跨越六个人工评分语料库（覆盖从高噪声到近乎无缺陷的质量区间）的大规模配对比较实验，揭示了这些指标在现代高质量 TTS 输出上与人类偏好显著脱节的现象，为社区在评估协议设计和偏好优化奖励选取上提供了重要的批判性参照。
- AlignDPO: Preference-Gated Alignment for Reducing Hallucination in Decoder-Only TTS
- 赛道归属: 文本转语音（TTS）/ 语音生成对齐优化
- 核心创新点: 针对仅解码器（Decoder-Only）TTS模型在自回归生成过程中因文本-语音对齐薄弱而产生内容幻觉的问题，提出AlignDPO方法。核心发现在于：控制对齐注意力头（alignment-bearing attention heads）锐度与模型鲁棒性之间存在非单调关系——适度锐化最优，过度锐化反而不优于未对齐基线。基于此洞察，AlignDPO设计了一种偏好门控（Preference-Gated）的后训练对齐机制，通过DPO（直接偏好优化）框架将对齐质量作为偏好信号引入训练，使模型注意力头的锐度收敛至最优区间，从而在不破坏生成流畅性的前提下有效抑制内容幻觉，相较于直接强化对齐或无约束训练具有更精细的调控能力。
HuggingFace Models
HuggingFace Datasets
- [2026-09-18] Yootta/World-SimReady-Home 🆕NEW
语言大模型
arXiv
- Faithful yet Collusive: Why Chain-of-Thought Monitoring Cannot Detect Collusion in LLM Pricing Agents under Oligopolistic Competition
- 赛道归属: LLM智能体安全与可解释性（定价博弈/思维链监控）
- 核心创新点: 提出"因果图散度框架"，将LLM定价智能体的思维链（CoT）忠实性分解为结构忠实性（推理步骤的逻辑一致性）和意图忠实性（推理是否真实反映决策动机）两个独立维度。核心发现是：在寡头竞争博弈中，模型的串谋行为与CoT忠实性在两个维度上均存在解耦——即串谋程度最高的模型可以同时准确描述合作意图，但这种"忠实"的CoT并不能揭示其真实的串谋机制。这一发现从根本上挑战了"通过监控CoT来检测LLM智能体串谋行为"这一主流安全假设，指出CoT监控在寡头定价场景下存在系统性盲区。
- In-context Learning vs. Instruction Tuning: The Case of Small and Multilingual Language Models
- 赛道归属: 多语言模型 / 指令微调 vs. 上下文学习
- 核心创新点: 系统性对比了上下文学习（ICL）与指令微调（Instruction Tuning）在小型多语言语言模型上的效果差异，重点探究ICL能否作为多语言场景下指令微调的替代方案。针对高质量多语言指令数据难以获取的现实痛点，提供了关于两种范式在多语言低资源条件下适用边界的实证分析，为多语言模型部署策略选择提供了方法论依据。
- Japanese Stroke LLM Evaluation: A Conversational Benchmark for Safe Stroke Care in Japanese Using Large Language Models
- 赛道归属: 医疗垂直领域LLM评测 / 临床安全性评估
- 核心创新点: 提出了面向日语脑卒中临床场景的多轮对话评测基准（Japanese Stroke LLM Evaluation），突破了现有医疗LLM评测以单轮多选题为主的局限。该基准模拟真实临床问诊流程，涵盖病史采集、紧急程度判断和安全性评估等维度，能够更贴近实际医疗实践地衡量LLM在高风险临床决策场景中的表现与安全边界。
- Recursive Reasoning or Statistical Extrapolation? In-Context Learning in Multi-Agent Interdependent Decision-Making
- 赛道归属: LLM智能体推理机制分析（多智能体博弈/上下文学习）
- 核心创新点: 针对"LLM智能体在多智能体交互中的上下文学习（ICL）究竟依赖真实推理还是统计外推"这一根本性问题，设计了一套受控公共品博弈实验框架，通过主动操控历史反馈的统计结构（如注入虚假但统计规律一致的历史记录）来解耦两种机制。核心方法论突破在于：将递归信念推理（Recursive Belief Reasoning，即对他人意图的多层级建模）与统计模式匹配作为可独立操控的变量，从而实证区分LLM在不完全信息博弈中的决策本质。该工作为评估LLM智能体是否具备真正的策略推理能力提供了可复现的实验范式。
- Lexical Prompt Compression for Large Language Models: A Training-Free, Deterministic Pipeline with Empirical Pareto Analysis Across Eleven Task Categories
- 赛道归属: 推理优化 / 提示词压缩
- 核心创新点: 提出一种无需训练、完全确定性的词汇级提示压缩流水线，通过纯词法规则（如停用词过滤、冗余短语删除、句法精简等）对提示进行压缩，无需任何辅助语言模型参与。核心突破在于：在不依赖任何可学习参数的前提下实现高压缩比，并通过跨11个任务类别的帕累托分析，系统性地量化了压缩率与任务性能之间的权衡关系，为不同场景下的压缩策略选择提供了实证依据。
- Data Efficient Sample Selection for In-Context Learning
- 赛道归属: 上下文学习（In-Context Learning）/ 样本选择优化
- 核心创新点: 针对ICL示例选择问题，突破了现有方法静态任务级离线选择的局限，提出对ICL样本与下游LLM性能之间复杂关系进行显式建模的数据高效选择框架。核心创新在于从静态离线选择转向动态自适应选择机制，能够对未见场景保持泛化能力，同时在大规模候选样本池中高效定位最优示例组合，显著提升ICL的数据利用效率。
- Verify to Amplify: Improving Reasoning via Learned Chain-of-Thought Verification
- 赛道归属: 推理优化 / 链式思维验证
- 核心创新点: 提出了一种基于学习型验证器的链式思维（Chain-of-Thought）验证框架，核心突破在于系统性地研究"何时以及如何"将学习型验证器与生成模型协同使用。该工作不仅将验证器用于后验筛选，还将其反馈信号融入生成过程以主动放大推理质量，从而在可靠性与推理准确性之间建立更紧密的闭环机制。
- Chronicle: Cut-Point Replay for Regression Testing of LLM Agents 🆕NEW
- 赛道归属: LLM Agent 测试与调试工具
- 核心创新点: 提出 Chronicle 框架，通过在 LLM Agent 的非确定性边界（如 LLM 推理调用、工具调用等）进行"切点录制与回放"（Cut-Point Replay），将 Agent 的一次运行记录为可复现的测试用例。与现有仅用于追踪或评分的录制工具不同，Chronicle 支持针对代码变更的回归测试——在回放时可选择性地重新执行部分切点，从而精确检测代码改动对 Agent 行为的影响，解决了 LLM Agent 失败难以复现和回归测试缺失的核心痛点。
- SAFARI: An Industrial Benchmark for LLM-Assisted Hazard Analysis and Risk Assessment 🆕NEW
- 赛道归属: LLM 安全评测与工业基准
- 核心创新点: 构建了首个面向工业场景的 LLM 辅助汽车危害分析与风险评估（HARA）基准 SAFARI，依据 ISO 26262 标准设计，包含 3000 条去标识化的真实工业 HARA 案例。创新性地将评测任务拆分为"开放式危害分析"与"基于标准的风险推理"两个耦合子任务，填补了 LLM 在功能安全法规工作流中可靠性评估的空白，为安全关键工程领域的 LLM 应用提供了系统化、可量化的评测框架。
- Chain-of-Thought Entropy as a Reliability Signal: A Preregistered Reproduction 🆕NEW
- 赛道归属: LLM 推理可靠性与不确定性估计
- 核心创新点: 对 Zhao（2026）提出的"思维链熵轨迹形状"作为 LLM 答案正确性预测信号这一发现进行了预注册独立复现研究。核心区分在于：熵轨迹的形状（即熵随推理步骤的变化模式）对最终答案正确性具有预测力，而熵总体下降的幅度则不具备此预测力。该工作通过严格的预注册复现设计，对原始结论中样本量不足（单模型单随机种子 300 题）的部分进行了可信度验证，为利用推理过程内部信号评估 LLM 输出可靠性提供了方法论支撑。
HuggingFace Datasets
- [2026-09-06] openbmb/UltraData-SFT-Agent-2609
- [2026-09-07] openbmb/UltraData-Code
- [2026-09-16] MoreThought/Fable-5.1-Max-Reasoning-Filtered-5000x
多模态大模型
arXiv
- Evaluation of MLLM-Agnostic Plug-and-Play Keyframe Selection Methods for Long Video Understanding
- 赛道归属: 多模态理解 / 长视频理解 / 关键帧选择
- 核心创新点: 系统性评估了多种无需训练、模型无关的即插即用关键帧选择方法在长视频理解任务中的表现，填补了该类方法缺乏统一基准评测的空白。核心贡献在于构建了一套评估框架，对比分析不同关键帧选择策略在多种MLLM上的泛化能力与性能边界，为后续研究提供了方法论参考。
- Efficient Quantization-Aware Distillation with Cross-Modal Alignment for Edge Vision-Language Models
- 赛道归属: 多模态理解 / 推理优化 / 边缘部署
- 核心创新点: 针对边缘设备上视觉语言模型（VLM）的高效部署问题，提出将知识蒸馏与量化感知训练（QAT）统一为单阶段联合优化框架，并引入跨模态对齐机制，解决了原有EdgeVL两阶段方案中蒸馏目标与QAT目标相互割裂导致的优化不一致问题，从而在保持开放词汇分类（OVC）能力的同时显著降低模型在边缘硬件上的计算与存储开销。
- MAD: Modality-Adaptive Decoding for Mitigating Cross-Modal Hallucinations in Multimodal Large Language Models
- 赛道归属: 多模态理解 / 幻觉抑制 / 推理优化
- 核心创新点: 提出无需训练的模态自适应解码方法（MAD），通过动态加权模态特定解码分支来缓解多模态大语言模型中的跨模态幻觉问题。核心突破在于利用模型自身的模态相关性自评估能力，在推理阶段自适应地调控不同模态对生成过程的影响权重，从而在无需额外训练或微调的前提下，从根本上改善模态交互控制机制，抑制因某一模态不当主导而产生的虚假输出。
- Cross-Modal Attention Acts as a Frequency Filter: Why Verbose Prompts Improve Robustness in Vision-Language Models 🆕NEW
- 赛道归属: 多模态理解 / 视觉-语言模型鲁棒性分析
- 核心创新点: 该工作从频域视角揭示了视觉-语言模型（VLM）在图像噪声干扰下鲁棒性变化的内在机制。核心发现是：跨模态注意力机制本质上充当了一个频率滤波器——文本提示的措辞方式会显著影响模型对图像高频噪声的敏感程度。具体而言，冗长/描述性的提示（verbose prompts）能够引导跨模态注意力更多聚焦于图像的低频语义信息，从而抑制高频噪声干扰，提升鲁棒性；而语义复杂或细粒度的问题则相反，会使模型更依赖高频细节，导致在图像损坏时性能大幅下降。这一发现从机制层面统一解释了提示措辞对VLM鲁棒性产生截然相反影响的现象，为提示工程和模型鲁棒性优化提供了新的理论依据。
- OmniHallu: Unified Hallucination Detection for Cross-Modal Comprehension and Generation in Multimodal Large Language Models
- 赛道归属: 多模态理解 / 幻觉检测
- 核心创新点: 提出了首个统一的多模态幻觉检测框架OmniHallu，突破了现有方法仅针对单一模态或单一任务类型的局限性。核心创新在于将图像、视频、音频三种模态的理解任务与生成任务中的幻觉检测统一建模，构建了跨模态、跨任务类型的通用检测范式，实现了对多模态大语言模型输出与输入语义一致性的全面校验，显著提升了幻觉检测的泛化能力。
- EventVL: Understand Event Streams via Multimodal Large Language Model
- 赛道归属: 多模态理解 / 事件流视觉语言模型
- 核心创新点: 提出首个基于事件相机数据的生成式多模态大语言模型框架EventVL，突破了以往事件视觉模型仅依赖CLIP做感知任务的局限。核心创新在于设计了专用的事件流语义表征方式，通过桥接事件数据与语言模型之间的模态鸿沟，实现对事件流的显式语义理解与上下文推理，而非停留于传统分类/检测等感知层面。
- A Low-Latency Interactive System for Real-Time Video Understanding Based on VLMs
- 赛道归属: 多模态理解 / 实时视频理解 / 系统工程
- 核心创新点: 提出了一套面向实时视频VLM应用的边云协同低延迟交互系统，核心创新在于系统架构层面的整合设计：统一支持手机、智能眼镜、PC等多种轻量客户端，通过共享ASR/TTS、会话编排、后端适配与响应去重等模块，将视频理解从离线片段分析扩展至连续流式低延迟交互场景，重点解决工程部署中的实时性与可用性问题。
- The Mirage of Calibrated Confidence: Trajectory-Independence of Verbalized Confidence in Vision-Language Models
- 赛道归属: 多模态理解 / 视觉语言模型可靠性与置信度校准
- 核心创新点: 该工作揭示了视觉语言模型（VLM）中语言化置信度（verbalized confidence）存在"轨迹无关性"这一根本缺陷——即模型所表达的置信度分数与其推理过程的实际内容、路径及自我修正行为高度脱耦。研究从三个互补视角（内容变化、Token遮蔽、模型自身的犹豫标记）系统性地证明：即便模型经历了错误的推理轨迹并最终给出错误答案，其输出的置信度仍可保持虚高。这一发现从根本上质疑了当前主流置信度校准方法的有效性，指出"校准"在VLM中可能是一种表面现象（mirage），为该领域的可信度评估研究提供了新的批判性视角。
- Collaborative Memory for Multi-Agent VLM Systems
- 赛道归属: 多模态理解 / 多智能体视觉语言模型系统
- 核心创新点: 该工作针对多智能体VLM系统中分布式视觉感知所带来的共享上下文难题，提出了一套以"协作记忆"为核心的系统性框架。其核心创新在于将记忆层次结构（memory hierarchy）、跨智能体共享机制（cross-agent sharing）以及一致性维护机制（consistency mechanisms）统一围绕多智能体视觉协作的需求进行重新设计——不同于传统多智能体系统仅关注分布式推理，该框架将分布式视觉感知（不同智能体处理不同图像区域、视频帧或视觉表征）作为首要问题加以解决，为多智能体VLM协作中的视觉上下文共享提供了结构化的解决方案。
- ViD: Vision-Dominant Gender Bias Mitigation for Large Vision-Language Models
- 赛道归属: 多模态理解 / 公平性与偏见消除
- 核心创新点: 针对大型视觉语言模型（LVLM）中性别偏见的动态缓解问题，提出以视觉信息为主导（Vision-Dominant）的偏见缓解方法（ViD），突破了现有方法依赖训练阶段调整或事后校准、无法实时感知视觉-文本不一致性的局限；通过在推理阶段动态捕捉跨模态对齐偏差，摆脱对预定义性别偏见分类体系的依赖，实现对新兴偏见模式的自适应抑制，同时维持跨模态对齐质量。
强化学习
arXiv
- How to Compress KV Cache in RL Post-Training? Shadow Mask Distillation for Memory-Efficient Alignment
- 赛道归属: 大语言模型强化学习后训练 / 内存优化
- 核心创新点: 针对LLM在线RL训练（PPO/GRPO/Online DPO）中rollout阶段KV Cache显存占用过大的"内存墙"问题，提出Shadow Mask Distillation方法。核心突破在于通过引入"影子掩码蒸馏"机制，在不损失对齐效果的前提下对KV Cache进行有效压缩，从方法论上将KV Cache压缩技术与RL后训练流程深度融合，解决了长上下文推理任务中显存瓶颈与训练效率之间的矛盾。
- RetireOPD: Self-Retiring On-Policy Distillation for Agentic Reinforcement Learning 🆕NEW
- 赛道归属: 强化学习 / 多智能体训练 / 策略蒸馏优化
- 核心创新点: 针对多轮智能体强化学习中在线策略蒸馏（On-Policy Distillation, OPD）的两个核心缺陷——"特权信息不等于可靠教师"以及"教师监督的收益具有训练阶段依赖性"——提出了 RetireOPD 框架。其方法论突破体现在两点：①引入教师可靠性评估机制，动态判断特权信息教师在当前状态下是否真正优于学生，避免劣质教师信号污染训练；②设计自退休（Self-Retiring）机制，使蒸馏监督信号能够根据训练阶段自适应地淡出，在学生能力成熟后自动停止依赖教师，从而将稀疏轨迹级奖励与密集token级蒸馏监督的优势在正确的训练窗口内有机结合，解决了传统OPD在智能体任务中"一刀切"应用导致的性能退化问题。
- RLLBC-Lib: An Educational Code Library for Reinforcement Learning and Learning-Based Control
- 赛道归属: 强化学习教育工具 / 学习型控制
- 核心创新点: 提出RLLBC-Lib教育代码库，核心创新在于面向学习型控制场景对RL核心概念进行模块化、可访问性设计，通过精心构建的代码结构降低RL学习门槛。方法论突破体现在将复杂的RL动态交互过程以清晰、可复现的实现形式呈现，专为教学场景优化，填补了RL理论与控制工程实践之间的教学工具空白。
- Voice of Reason: Reinforcement Learning for Spoken Math
- 赛道归属: 语音语言模型 / 数学推理强化学习
- 核心创新点: 将带可验证奖励的强化学习（RL with verifiable rewards）首次系统性地应用于语音语言模型（以GLM-4-Voice为基础）的数学推理能力提升。核心突破在于跨越语音模态与数学推理之间的能力鸿沟——此前语音模型在数学基准上显著落后于文本模型，该工作通过RL训练范式将文本模型的复杂推理增强方法迁移至语音端到端模型，同时保留副语言信息处理能力。
- Characterizing Replay Retention Under Dynamics Shift in Model-Based Reinforcement Learning
- 赛道归属: 模型基强化学习 / 机器人动态适应 / 持续学习
- 核心创新点: 系统性研究了模型基RL中动态环境变化下经验回放数据的保留策略问题。核心创新在于提出两个关键量化指标——变化幅度（change magnitude）与变化频率——来刻画"保留历史回放数据"与"优先使用近期数据"之间的权衡关系，为持续学习场景下的回放缓冲区管理提供了理论依据，解决了机器人动态迁移时旧经验"有害还是有益"的判断难题。
- SFT or RL for Tool-Calling Agents? A Controlled Study Across Data, Method, and Scale
- 赛道归属: 语言模型智能体 / 工具调用 / 训练方法对比
- 核心创新点: 在严格控制变量的实验框架下，系统对比了SFT（LoRA）、RL（GRPO）及SFT+GRPO组合三种训练范式在工具调用任务上的效果，覆盖Qwen3从0.6B到32B六个规模。核心发现具有方法论指导价值：SFT+LoRA在分布内任务上始终最强，而RL在跨数据集迁移泛化上展现优势，首次在数据、方法、规模三个维度联合受控的条件下量化了两种范式的适用边界。
- Adaptive hybrid coupling with operator inference, the overlapping Schwarz alternating method and reinforcement learning
- 赛道归属: 科学计算 / 混合域分解方法 / 强化学习自适应控制
- 核心创新点: 将强化学习引入FOM（全阶模型）与ROM（降阶模型）混合域分解耦合框架，实现子域模型分配的在线自适应。核心突破在于突破了传统混合域分解方法中各子域模型固定不变的局限性，通过RL智能体结合算子推断（Operator Inference）和重叠Schwarz交替方法，动态决策哪些区域需要高保真FOM求解、哪些可用ROM替代，从而高效应对瞬态问题中局部特征随时间传播导致的高保真需求区域动态变化问题。
- GrowMTP: Can RL Grow Its Own Draft Head?
- 赛道归属: 推理优化 / 大语言模型加速（投机解码 + RL训练）
- 核心创新点: 提出GrowMTP框架，核心突破在于将草稿头（draft head）的训练完全内嵌于RL训练循环内部，无需任何预训练或预热阶段。关键洞察是：RL训练的rollout过程天然提供了在线训练草稿头所需的两个条件——持续更新的分布数据与充足的计算信号。由此实现了"RL自生长草稿头"的闭环机制，消除了传统投机解码方案中独立于RL运行之外的额外训练开销，从而在不引入额外流程的前提下加速RL的自回归rollout生成。
- Fast-Convergent Meta-RL via Gradient-Clustered BS Sampling for Edge Caching
- 赛道归属: 元强化学习 / 无线网络边缘缓存优化
- 核心创新点: 提出基于梯度聚类的基站采样策略（Gradient-Clustered BS Sampling）来加速元RL的收敛。核心创新在于：通过对各基站的梯度方向进行聚类分析，识别出任务分布中结构相似的基站子群，在元学习的内外循环中优先采样梯度方向具有代表性的基站，从而减少冗余任务采样、提升元梯度估计质量，显著加快元初始化的收敛速度，使每个基站仅需少量本地更新即可适应其特定的请求率与内容流行度分布。
- Spurious Tool Use: When RL Agents Learn the Wrong Reason to Act
- 赛道归属: 大语言模型智能体 / 工具调用 / RL训练可靠性
- 核心创新点: 系统性揭示并研究了RL训练LLM智能体中的"虚假工具使用"（Spurious Tool Use）现象——即智能体基于提示中的表面特征（如关键词、格式等浅层线索）而非真实任务需求来决策是否调用工具。通过构建受控合成环境，精确定位了RL训练放大训练数据中虚假相关性的机制，揭示了工具选择策略退化为捷径策略的条件与规律，为RL优化工具调用策略的鲁棒性提供了重要的诊断框架。
HuggingFace Models
HuggingFace Datasets
- [2026-09-07] openbmb/UltraData-RL-2609
世界动作模型
arXiv
- CSWAM: Better Causal Semantic Representations for Out-of-Distribution Generalization in World Action Models
- 赛道归属: 世界动作模型（World Action Model）/ 具身智能 / 分布外泛化
- 核心创新点: 针对 FastWAM 类世界动作模型在视觉分布偏移下泛化能力差的问题，提出因果语义世界动作模型（CSWAM）。核心突破在于：①将重建导向的表征替换为因果语义表征，剥离外观特异性细节，聚焦任务相关的状态变化与运动信息，从而降低对视觉外观的过拟合；②在无观测历史的纯动作推理框架下，引入时序因果证据机制，增强模型在陌生视觉场景和未见物体下对任务相关状态变化的鲁棒识别能力。该方法从表征层面解决了世界动作模型在 OOD 场景下的泛化瓶颈，而非依赖更多数据或更大模型规模。
- GameWAM: A World Action Model for Video Games
- 赛道归属: 世界动作模型（World Action Model）/ 游戏智能体 / 视频游戏交互建模
- 核心创新点: 提出 GameWAM 框架，将世界动力学建模（World Model）与任务策略（Action Policy）统一融合，填补了现有游戏智能体研究中"视觉预测"与"动作决策"相互割裂的空白。核心突破在于：在第一人称视角、快速视觉变化、持久世界状态以及异构原生控制等复杂游戏环境下，同时建模视觉未来预测与任务执行策略，使模型既能理解游戏世界的动态演变，又能直接输出可执行的游戏控制动作，实现了感知-预测-决策的端到端统一建模范式。
- Valerant: An Automatic Navigable Game Map Generator via Action-Conditioned World Model Exploration
- 赛道归属: 世界动作模型（World Action Model）/ 游戏地图生成 / 具身智能
- 核心创新点: 提出 Valerant 框架，将动作条件化世界模型（Action-Conditioned World Model）与自动导航地图生成相结合，核心突破在于：通过 WAM 驱动的自主探索机制，在无需外部奖励函数或独立策略网络的前提下，直接利用世界模型对未来状态的预测来引导智能体行为，从而自动生成可导航的游戏地图。相较于现有方法仅在 2D 视觉观测空间中运作并依赖外部策略与奖励信号的局限，该工作将 WAM 范式扩展至游戏场景的三维空间地图构建任务，实现了预测性世界建模与动作生成的深度耦合，填补了通用型 WAM 在游戏领域应用的空白。
由 Research Daily 自动生成 生成时间: 2026-09-18 05:31:25