Headlines You Won't Forget: Can Pronoun Insertion Increase Memorability?
作者: Selina Meyer, Magdalena Abel, Michael Roth
分类: cs.CL
发布日期: 2026-04-21
备注: To be published at the 15th edition of the Workshop on Cognitive Modeling and Computational Linguistics (CMCL 2026)
💡 一句话要点
研究人称代词插入对新闻标题记忆效果的影响，并评估LLM自动插入的质量。
🎯 匹配领域: 支柱九：具身大模型 (Embodied Foundation Models)
关键词: 新闻标题 记忆效果 人称代词 大型语言模型 认知心理学 实验研究 众包评估
📋 核心要点
- 新闻标题的记忆效果至关重要，但现有研究对语言特征的影响关注不足。
- 本研究探索人称代词插入对新闻标题记忆效果的影响，并分析其潜在影响因素。
- 实验结果表明代词插入的影响复杂，且LLM自动插入代词存在准确性和风格问题。
📝 摘要（中文）
为了使新闻标题能够影响人们的信念并驱动行动，相关信息需要被记住并能从记忆中检索。本研究借鉴认知心理学的实验设计，检验了特定语言特征（即通过第一人称和第二人称代词进行直接称谓）如何影响记忆效果，以及使用大型语言模型将此类特征有针对性地插入到现有文本中而不改变其核心含义的可行性。通过三个受控的记忆实验，共有240名参与者，产生了7680个独特的记忆判断，结果表明代词插入对记忆效果有混合影响。探索性分析表明，效果因标题主题、代词插入方式及其直接语境而异。需要更多的数据和细致的分析才能对这些中介因素得出明确的结论。我们进一步表明，LLM的自动修改并不总是合适的：众包评估发现其中许多修改缺乏内容准确性和情感保留，或导致不自然的写作风格。我们将收集的数据提供给未来的工作。
🔬 方法详解
问题定义：论文旨在研究在新闻标题中插入人称代词（第一人称和第二人称）是否能够提高标题的记忆效果。现有方法缺乏对这种特定语言特征对记忆影响的深入研究，并且没有充分探索利用大型语言模型自动进行此类修改的可行性和质量。
核心思路：核心思路是通过认知心理学的实验设计，控制实验变量，量化人称代词插入对新闻标题记忆效果的影响。同时，评估大型语言模型在自动插入人称代词方面的能力，包括其对内容准确性、情感保留和写作风格的影响。
技术框架：研究采用了三个受控的记忆实验。首先，选择一系列新闻标题作为实验材料。然后，通过人工或LLM的方式在标题中插入人称代词。接着，招募参与者进行记忆测试，记录他们的记忆判断。最后，对实验数据进行统计分析，评估代词插入对记忆效果的影响，并对LLM生成的标题进行众包评估。
关键创新：该研究的创新之处在于：1) 关注了人称代词插入这一特定的语言特征对新闻标题记忆效果的影响，这是一个相对较少被研究的领域。2) 结合了认知心理学的实验方法和自然语言处理技术，探索了利用大型语言模型自动进行新闻标题修改的可行性。3) 通过众包评估，对LLM生成标题的质量进行了细致的分析。
关键设计：实验设计包括控制组（原始标题）和实验组（插入人称代词的标题）。人称代词的插入方式和位置是重要的实验变量。记忆测试采用标准的回忆或识别任务。统计分析采用方差分析或其他适当的统计方法，以评估代词插入对记忆效果的显著性影响。众包评估采用Likert量表或其他评估指标，评估LLM生成标题的内容准确性、情感保留和写作风格。
🖼️ 关键图片
📊 实验亮点
实验结果表明，人称代词插入对记忆效果的影响是复杂的，取决于标题主题、代词插入方式和语境。众包评估发现，LLM自动插入代词的标题在内容准确性、情感保留和写作风格方面存在问题，表明LLM在新闻标题自动修改方面仍有提升空间。研究提供了包含7680个记忆判断的实验数据集。
🎯 应用场景
该研究成果可应用于新闻传播、广告营销等领域，帮助优化标题设计，提高信息传播效果。通过理解人称代词等语言特征对记忆的影响，可以设计更易于记忆和传播的新闻标题和广告语。此外，对LLM自动修改标题的评估，有助于开发更可靠的自动化内容生成工具。
📄 摘要（原文）
For news headlines to influence beliefs and drive action, relevant information needs to be retained and retrievable from memory. In this probing study we draw on experiment designs from cognitive psychology to examine how a specific linguistic feature, namely direct address through first- and second-person pronouns, affects memorability and to what extent it is feasible to use large language models for the targeted insertion of such a feature into existing text without changing its core meaning. Across three controlled memorization experiments with a total of 240 participants, yielding 7,680 unique memory judgments, we show that pronoun insertion has mixed effects on memorability. Exploratory analyses indicate that effects differ based on headline topic, how pronouns are inserted and their immediate contexts. Additional data and fine-grained analysis is needed to draw definitive conclusions on these mediating factors. We further show that automatic revisions by LLMs are not always appropriate: Crowdsourced evaluations find many of them to be lacking in content accuracy and emotion retention or resulting in unnatural writing style. We make our collected data available for future work.