Large language models demonstrate limited capability in proficiency-controlled sentence simplification, particularly when simplifying across large readability levels. We propose a framework that decomposes complex simplifications into manageable steps through dynamic path planning, semantic-aware exemplar selection, and chain-of-thought generation with conversation history for coherent reasoning. Evaluation on five languages across two benchmarks shows our approach improves simplification effectiveness while reducing computational steps by 22-42%. Human evaluation confirms the fundamental trade-off between simplification effectiveness and meaning preservation. Notably, even human annotators struggle to agree on semantic preservation judgments, highlighting the inherent complexity of this task. Our work shows that while step-by-step simplification improves control, preserving semantic fidelity during extensive simplification remains an open challenge.


翻译:大型语言模型在能力控制型句子简化任务中表现出有限性能,尤其是在跨越较大可读性级别进行简化时。本研究提出一个框架,通过动态路径规划、语义感知范例选择以及结合对话历史的思维链生成来实现连贯推理,从而将复杂简化任务分解为可管理的步骤。在跨越两个基准测试的五种语言上的评估表明,我们的方法在将计算步骤减少22-42%的同时提升了简化效果。人工评估证实了简化效果与意义保持之间存在根本性权衡。值得注意的是,即使是人类标注者在语义保持判断上也难以达成一致,这凸显了该任务固有的复杂性。我们的研究表明,虽然逐步简化能提升控制能力,但在大规模简化过程中保持语义保真度仍然是一个待解决的挑战。

0
下载
关闭预览

相关内容

【斯坦福大学Xiang Lisa Li博士论文】控制语言模型
专知会员服务
22+阅读 · 2025年6月11日
大语言模型算法演进综述
专知会员服务
81+阅读 · 2024年5月30日
一文速览大语言模型提示最新进展
专知会员服务
80+阅读 · 2023年12月24日
大语言模型简明指南
专知会员服务
143+阅读 · 2023年7月29日
《大语言模型进展》69页ppt,谷歌研究科学家Jason Wei
专知会员服务
86+阅读 · 2022年10月29日
基于句子嵌入的无监督文本摘要(附代码实现)
绝对干货!NLP预训练模型:从transformer到albert
新智元
13+阅读 · 2019年11月10日
自然语言处理中的语言模型预训练方法
PaperWeekly
14+阅读 · 2018年10月21日
半监督多任务学习:Semisupervised Multitask Learning
我爱读PAMI
18+阅读 · 2018年4月29日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
VIP会员
相关VIP内容
【斯坦福大学Xiang Lisa Li博士论文】控制语言模型
专知会员服务
22+阅读 · 2025年6月11日
大语言模型算法演进综述
专知会员服务
81+阅读 · 2024年5月30日
一文速览大语言模型提示最新进展
专知会员服务
80+阅读 · 2023年12月24日
大语言模型简明指南
专知会员服务
143+阅读 · 2023年7月29日
《大语言模型进展》69页ppt,谷歌研究科学家Jason Wei
专知会员服务
86+阅读 · 2022年10月29日
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
Top
微信扫码咨询专知VIP会员