深度专题 FEATURES — 3
RL失灵处,要靠预训练来修
RL会放大底模已有能力,却难补缺口;这项工作用失败痕迹反查语料,先补课再训练。
并行语言模型:一次生成多个Token
PLM把逐字接龙改成成组提案:质量接近传统模型,推理最高加速5.7倍。
游戏世界模型,终于开始执行规则
它把游戏规则交给可执行系统,把画面交给视频模型,让隐藏状态真正改变剧情。
速览 BRIEFS — 8
PAPER
GUI智能体学会只看当前有用的信息
FocusGUI动态聚焦当前关键信息,多步操作越长,抗干扰优势越明显。
PAPER
Matrix-Game 4.0勾勒可玩世界路线图
把规则交给游戏引擎、画面交给视频模型,Matrix-Game 4.0给出可玩世界的系统路线。
PAPER
KV-Surgeon给压缩缓存补偿误差
KV-Surgeon边删边补偿,让固定长文本的缓存压缩后仍能反复使用。
PAPER
电脑智能体开始合成自己的训练世界
WildAWM合成可执行电脑环境,让智能体在安全、可重置的“练习机”里反复试错。
PAPER
Specter用量化掩护MoE专家换入换出
Specter用量化版MoE预判专家调用,提前搬运权重以缓解PCIe等待。
PAPER
MemT把长期记忆做成模型原生能力
MemT把长期记忆写进模型内部,让AI能持续积累信息,而不只靠外接检索。
PAPER
语音没说完,智能体先调用工具
Heartbeat Thinking让语音智能体边听边查,缩短用户说完后的等待
PAPER
自然语言开始直接设计功能蛋白
160亿参数Pinal把文字需求直接变成候选蛋白,并在四类任务中验证功能。