Google提出LLM持续学习的睡眠框架

2026年10月28日，Google Research提出了一种受人类睡眠启发的持续学习框架，旨在让大语言模型通过交替的“清醒”和“睡眠”阶段来持续学习并避免灾难性遗忘。该框架结合了参数扩展、知识蒸馏和“梦境”自改进循环。报道称，该方法在BABILong基准上实现了对长达10M token上下文的近乎完美理解，并在SQuAD、AIME等基准上提升了事实知识整合与数学推理能力。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。