大型语言模型输出的评估：话语和记忆（英文版）

英文标题：An Evaluation on Large Language Model Outputs: Discourse and Memorization中文摘要：通过对九个流行的大型语言模型的各种生成输出进行经验评估，发现输出中包含的记忆文本比例、独特文本比例和总体输出质量存在关联性，其中高质量的输出中包含的记忆文本比例较高。并提出缓解策略和质量文本的评估方法。英文摘要：We present an empirical evaluation of various outputs generated by nine ofthe most widely-available large language models (LLMs). Our analysis is donewith off-the-shelf, readily-available tools. We find a correlation betweenpercentage of memorized text, percentage of unique text, and overall outputquality, wh