首页 > 计算机科学

ICLR2026|LightMem:把大模型「长期记忆」的成本打下来

机器学习算法与自然语言处理 2026-02-27 00:00
文章摘要
背景:大模型在长对话、多任务交互场景中面临上下文窗口有限和“lost in the middle”问题,现有外部记忆系统因频繁调用大模型、实时更新维护导致成本高昂,工程上难以承受。研究目的:提出LightMem记忆系统,旨在不牺牲准确率的前提下,通过类人记忆的分层机制,降低token消耗、API调用次数和运行时延,实现效果与效率的平衡。结论:LightMem采用三段式管线(感官记忆过滤冗余、短时记忆主题组织、长时记忆离线更新),在LongMemEval等基准测试中准确率提升最高达29.3%,同时显著降低成本(如token消耗降低最高38倍),为长对话助手等应用提供了可部署的轻量解决方案。
ICLR2026|LightMem:把大模型「长期记忆」的成本打下来
本站注明稿件来源为其他媒体的文/图等稿件均为转载稿,本站转载出于非商业性的教育和科研之目的,并不意味着赞同其观点或证实其内容的真实性。如转载稿涉及版权等问题,请作者速来电或来函联系。
最新文章
比比皆是的下一个创新点:从PromptLearning进化到SIPDO的闭环自进化
比比皆是的下一个创新点:从PromptLearning进化到SIPDO的闭环自进化
MLNLP社区是国内外知名的机器学习与自然语言处理社区,受众覆盖国内外NLP硕博生、高校老师以及企业研究人员。社区的愿景是促进国内外自然语言处理,机器学习学术界、产业界和广大爱好者之间的交流和进步,特
17小时前
V4底座浮现?DeepSeek唤醒闲置网卡,「双路径」破解长上下文I/O瓶颈
V4底座浮现?DeepSeek唤醒闲置网卡,「双路径」破解长上下文I/O瓶颈
MLNLP社区是国内外知名的机器学习与自然语言处理社区,受众覆盖国内外NLP硕博生、高校老师以及企业研究人员。社区的愿景是促进国内外自然语言处理,机器学习学术界、产业界和广大爱好者之间的交流和进步,特
17小时前
不换框架也能刷新上限!ViT-5:全面升级视觉骨干,ImageNet86.0%刷新纪录
不换框架也能刷新上限!ViT-5:全面升级视觉骨干,ImageNet86.0%刷新纪录
MLNLP社区是国内外知名的机器学习与自然语言处理社区,受众覆盖国内外NLP硕博生、高校老师以及企业研究人员。社区的愿景是促进国内外自然语言处理,机器学习学术界、产业界和广大爱好者之间的交流和进步,特
17小时前
DeepSeek深夜发论文,V4前奏来了?联手清北破GPU难题,智能体大爆炸
DeepSeek深夜发论文,V4前奏来了?联手清北破GPU难题,智能体大爆炸
MLNLP社区是国内外知名的机器学习与自然语言处理社区,受众覆盖国内外NLP硕博生、高校老师以及企业研究人员。社区的愿景是促进国内外自然语言处理,机器学习学术界、产业界和广大爱好者之间的交流和进步,特
2026-02-27
Book学术官方微信
Book学术文献互助
Book学术文献互助群
群 号:604180095
Book学术
文献互助 智能选刊 最新文献 互助须知 联系我们:info@booksci.cn
Book学术提供免费学术资源搜索服务,方便国内外学者检索中英文文献。致力于提供最便捷和优质的服务体验。
Copyright © 2023 Book学术 All rights reserved.
ghs 京公网安备 11010802042870号 京ICP备2023020795号-1