Graph structures are increasingly used in dialog memory systems, but empirical findings on their effectiveness remain inconsistent, making it unclear which design choices truly matter. We present an experimental, system-oriented analysis of long-term dialog memory architectures. We introduce a unified framework that decomposes dialog memory systems into core components and supports both graph-based and non-graph approaches. Under this framework, we conduct controlled, stage-wise experiments on LongMemEval and HaluMem, comparing common design choices in memory representation, organization, maintenance, and retrieval. Our results show that many performance differences are driven by foundational system settings rather than specific architectural innovations. Based on these findings, we identify stable and reliable strong baselines for future dialog memory research.


翻译:图结构在对话记忆系统中日益普及,但其有效性的实证研究结果仍存在矛盾,使得何种设计选择真正关键尚不明确。本文对长期对话记忆架构进行了实验性、系统导向的分析。我们提出了一个统一框架,将对话记忆系统分解为核心组件,并同时支持基于图与非图的方法。在此框架下,我们在LongMemEval和HaluMem数据集上进行了分阶段对照实验,比较了记忆表示、组织、维护与检索中常见的设计选择。结果表明,许多性能差异源于基础系统设置,而非特定的架构创新。基于这些发现,我们为未来对话记忆研究确立了稳定可靠的强基线模型。

0
下载
关闭预览

相关内容

小型语言模型综述
专知会员服务
53+阅读 · 2024年10月29日
【AAAI2024】使用大型语言模型的生成式多模态知识检索
专知会员服务
58+阅读 · 2024年1月19日
【NAACL2021】信息解缠正则化持续学习的文本分类
专知会员服务
22+阅读 · 2021年4月11日
「知识增强预训练语言模型」最新研究综述
专知
18+阅读 · 2022年11月18日
深度多模态表示学习综述论文,22页pdf
专知
33+阅读 · 2020年6月21日
论文笔记之Feature Selective Networks for Object Detection
统计学习与视觉计算组
21+阅读 · 2018年7月26日
语义分割中的深度学习方法全解:从FCN、SegNet到DeepLab
炼数成金订阅号
26+阅读 · 2017年7月10日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2014年12月31日
VIP会员
相关VIP内容
小型语言模型综述
专知会员服务
53+阅读 · 2024年10月29日
【AAAI2024】使用大型语言模型的生成式多模态知识检索
专知会员服务
58+阅读 · 2024年1月19日
【NAACL2021】信息解缠正则化持续学习的文本分类
专知会员服务
22+阅读 · 2021年4月11日
相关资讯
「知识增强预训练语言模型」最新研究综述
专知
18+阅读 · 2022年11月18日
深度多模态表示学习综述论文,22页pdf
专知
33+阅读 · 2020年6月21日
论文笔记之Feature Selective Networks for Object Detection
统计学习与视觉计算组
21+阅读 · 2018年7月26日
语义分割中的深度学习方法全解:从FCN、SegNet到DeepLab
炼数成金订阅号
26+阅读 · 2017年7月10日
相关基金
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员