实验室动态

[ACL 2023] Lift Yourself Up: Retrieval-augmented Text Generation with Self Memory

[ACL 2023] Lift Yourself Up: Retrieval-augmented Text Generation with Self Memory

程信将基于检索增强的模型自举框架的论文《Lift Yourself Up: Retrieval-augmented Text Generation with Self Memory》被ACL2023接收. 本文探究了一种基于自记忆信息的检索增强文本生成方法,通过结合检索增强文本生成中的主问题和对偶问题,提出了一个模型自举的框架,利用生成器和自记忆信息选择器以迭代的方式来不断利用模型自己的输出作为记忆信息来提升自己.本文提出的模型在机器翻译,文本摘要和对话生成任务上均取得了显著的提升.