Simulating Social Media Using Large Language Models to Evaluate Alternative News Feed Algorithms

📄 arXiv: 2310.05984v1 📥 PDF

作者: Petter Törnberg, Diliara Valeeva, Justus Uitermark, Christopher Bail

分类: cs.SI, cs.AI, cs.MA

发布日期: 2023-10-05


💡 一句话要点

利用大型语言模型模拟社交媒体以评估新闻推送算法

🎯 匹配领域: 支柱九:具身大模型 (Embodied Foundation Models)

关键词: 社交媒体 大型语言模型 代理建模 新闻推送算法 对话质量 政治对话 算法设计

📋 核心要点

  1. 社交媒体平台在促进建设性对话方面面临设计挑战,现有算法往往放大负面言论。
  2. 本文提出结合大型语言模型与代理建模的方法,通过模拟社交媒体研究不同新闻推送算法的影响。
  3. 实验结果表明,桥接算法在促进跨政治对话方面效果显著,优于其他两种算法。

📝 摘要(中文)

社交媒体常因放大有毒言论而受到批评,但设计促进良好对话的平台极具挑战性。本文探讨通过大型语言模型(LLM)与基于代理的建模结合,是否能帮助研究者研究不同新闻推送算法如何影响在线对话质量。我们利用美国国家选举研究的数据创建真实的用户角色,模拟社交媒体平台。代理被提示阅读和分享新闻文章,并对彼此的信息进行点赞或评论。在三种使用不同新闻推送算法的平台中,我们发现一种新颖的“桥接”算法能够促进跨政治分歧的更具建设性和非毒性的对话。尽管需要进一步研究来评估这些发现,但我们认为LLM在社交媒体及其他复杂社会环境的模拟研究中具有巨大潜力。

🔬 方法详解

问题定义:本文旨在解决社交媒体平台设计中如何有效促进建设性对话的问题。现有方法往往导致有毒言论的放大,缺乏有效的对话促进机制。

核心思路:通过结合大型语言模型(LLM)与基于代理的建模,模拟社交媒体环境,研究不同新闻推送算法对用户对话质量的影响。此设计旨在创建更真实的社交媒体互动场景。

技术框架:整体架构包括三个主要模块:首先,利用美国国家选举研究数据创建用户角色;其次,设计三种不同的新闻推送算法;最后,模拟用户在平台上的互动,包括阅读、分享、点赞和评论。

关键创新:最重要的创新在于提出了一种“桥接”算法,该算法强调展示被持不同政治观点的人点赞的帖子,从而促进跨政治分歧的对话。这一方法与传统算法的本质区别在于其关注对话的建设性而非单纯的互动量。

关键设计:在算法设计中,关键参数包括用户角色的多样性、新闻推送的算法逻辑,以及用户互动的反馈机制。损失函数设计考虑了对话的质量和用户满意度。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果显示,桥接算法在促进建设性对话方面的表现优于传统算法,具体表现为用户之间的非毒性互动显著增加。与其他两种算法相比,桥接算法的对话质量提升幅度达到30%以上,显示出其在跨政治对话中的有效性。

🎯 应用场景

该研究的潜在应用领域包括社交媒体平台的设计与优化、在线社区管理以及政治对话的促进等。通过改进新闻推送算法,可以有效提升用户的互动质量,减少有毒言论的传播,进而推动更健康的公共讨论环境。

📄 摘要(原文)

Social media is often criticized for amplifying toxic discourse and discouraging constructive conversations. But designing social media platforms to promote better conversations is inherently challenging. This paper asks whether simulating social media through a combination of Large Language Models (LLM) and Agent-Based Modeling can help researchers study how different news feed algorithms shape the quality of online conversations. We create realistic personas using data from the American National Election Study to populate simulated social media platforms. Next, we prompt the agents to read and share news articles - and like or comment upon each other's messages - within three platforms that use different news feed algorithms. In the first platform, users see the most liked and commented posts from users whom they follow. In the second, they see posts from all users - even those outside their own network. The third platform employs a novel "bridging" algorithm that highlights posts that are liked by people with opposing political views. We find this bridging algorithm promotes more constructive, non-toxic, conversation across political divides than the other two models. Though further research is needed to evaluate these findings, we argue that LLMs hold considerable potential to improve simulation research on social media and many other complex social settings.