DCAI
DC AI 热点

精选

当前热点完整榜单 →
1微软发布新版Copilot超级应用:整合聊天、编程与智能体能力85 热度 ⌁2Anthropic 与 Akamai 达成 116 亿美元云算力协议,年内算力支出承诺已超 5000 亿美元82 热度 ⌁3谷歌启动Project Suncatcher:计划下周开展首个太空轨道数据中心测试81 热度 ⌁4马斯克披露AI算力布局:Colossus集群拟部署超百万张英伟达GB300芯片80 热度 ⌁5微软正式推出新版 Copilot“超级应用”,整合聊天、代码与智能体能力79 热度 ⌁
9月25日2026-09-25
arXiv 自然语言处理✦ 精选AI 评分 78/10012:00

后训练会在无关决策中留下行为阴影:新型主动无任务蒸馏方法提出

最新研究发现,大语言模型的能力可以通过与目标任务无关的文本进行传递。传统后训练通常依赖任务特定数据,而研究团队提出了一种“主动无任务蒸馏”(ATD)方法,仅需教师模型针对每个提示生成一个词即可实现能力转移。该方法揭示了后训练会在任务无关的决策中留下可被探测的“行为阴影”,突破了此前潜意识学习研究需依赖大量生成的限制,深化了对模型后训练表征变化及知识蒸馏机制的理解。

阅读原文 ↗推荐理由:该研究揭示了语言模型后训练中能力隐式转移的新机理,提出的单词蒸馏方法对模型对齐与泛化研究具有重要启发。# 大模型# 后训练# 蒸馏# 潜意识学习# 模型行为分析