多Token预测终于补上训练漏洞

MTP 本想让模型多想几步，却混入了互相拖累的训练信号；Soft-MTP 用一行改动把它分离出来。

深度专题 FEATURES — 2

PAPER H 1

NVIDIA 把 MoE、Mamba 与 Transformer 装进同一模型，想用更少计算扛住长文本、推理和智能体任务。

PAPER H 59 · 5 信源

五项同期研究追问同一件事：自蒸馏的老师该看什么、何时介入，又该何时闭嘴。

速览 BRIEFS — 8

PAPER

CausalWAM给动作通路加上稀疏约束，试着把真正影响动作的因素从背景中分离出来。

PAPER

SelfMorph让冻结LLM按题目选择内部计算路线，把测试时扩展从“算多少”推进到“怎么算”。

H 51

PAPER

GAAC无损压缩KV缓存，减少长对话的数据搬运，并在个人设备上加快推理。

H 23

PAPER

多智能体挤满 GPU 时，CACPU 用缓存与任务调度让 CPU 接手长上下文预填充。

H 5

PAPER

GAUSS把真实请求、延迟承诺和硬件容量放进同一套模拟，不再只看吞吐量。

H 7

PAPER

给同一状态下的动作排相对功劳，帮助PPO跳出“差不多就行”的操作策略。

H 41

PAPER

同一句恶意指令，藏在 README 里可能比放进代码或数据文件更危险。

H 1

PAPER

AI 论文里的数字可能是真的，却被安在错误实验头上，审计不能只查“有没有”。

H 4