Meta - 上下文语言模型：自主语境管理 AI学会自己编辑上下文

上下文语言模型（CLMs）这一创新架构，它允许大语言模型通过将上下文视为一个可自由编辑的文件来自主管理上下文，从而打破了传统仅支持追加的限制。与依赖外部控制或固定策略的传统方法不同，CLMs 赋予了模型在多智能体系统、长周期任务以及代码编写中进行自适应编辑、压缩和检索的完全自主权。研究表明，无论是零样本应用、通过自然语言指令和文本进化进行上下文学习，还是采用成功引导效率优势的在线强化学习，CLMs 均能以更少的计算开销显著提升模型性能。此外，配合新颖的**后缀缓存复用（SCR）**技术，该系统在保证任务精度的同时，进一步大幅削减了服务器端推理所需的计算资源。