IRL Dittos: Embodied Multimodal AI Agent Interactions in Open Spaces

📄 arXiv: 2504.21347v1 📥 PDF

作者: Seonghee Lee, Denae Ford, John Tang, Sasa Junuzovic, Asta Roseway, Ed Cutrell, Kori Inkpen

分类: cs.AI, cs.HC

发布日期: 2025-04-30

备注: 8 pages, 3 figures

💡 一句话要点

提出IRL Ditto具身智能体，增强分布式团队在共享办公空间的社交互动。

🎯 匹配领域: 支柱九：具身大模型 (Embodied Foundation Models)

关键词: 具身智能体 分布式团队 社交互动 人机交互 远程办公

📋 核心要点

  1. 现有分布式团队缺乏有效的社交互动方式，远程同事难以融入共享办公空间。
  2. IRL Ditto通过具身智能体模拟远程同事的存在，促进实时交流和社交互动。
  3. 实验表明，IRL Ditto能增强同事间的社交联系，但效果受关系基础影响。

📝 摘要（中文）

本文介绍了一种名为IRL Ditto的AI驱动的具身智能体，旨在代表远程同事出现在共享办公空间中，从而创造即使在他们缺席时也能进行实时交流的机会。IRL Ditto提供了一种独特的混合体验，允许在场的同事遇到远程队友的数字版本，并像在现实中一样发起问候、更新或闲聊。本研究旨在探讨：IRL Ditto如何影响共享办公空间中同事之间的互动和关系？通过为期四天的研究，我们评估了IRL Ditto通过模拟存在和促进不同社交熟悉程度的有意义的互动来加强社交联系的能力。研究发现，增强社交关系在很大程度上取决于参与者与IRL Ditto来源的关系基础。这项研究深入了解了具身智能体在丰富分布式团队工作场所动态中的作用。

🔬 方法详解

问题定义：论文旨在解决分布式团队成员在共享办公空间中缺乏有效社交互动的问题。现有方法，如视频会议，虽然可以进行沟通，但缺乏临场感，难以促进非正式的交流和社交联系。这可能导致远程员工的孤立感，并影响团队的凝聚力。

核心思路：论文的核心思路是利用具身智能体（Embodied Agent）来模拟远程同事在物理空间中的存在，从而创造更自然的社交互动机会。通过让在场同事与远程同事的“数字替身”互动，可以发起问候、更新或闲聊，就像在现实中一样。这种方法旨在弥合物理距离造成的社交差距，增强团队成员之间的联系。

技术框架：IRL Ditto系统的整体框架包括以下几个主要模块：1) 远程同事的身份建模，可能涉及头像创建、语音合成等；2) 具身智能体的控制系统，负责驱动智能体在物理空间中移动和执行动作；3) 交互界面，允许在场同事与智能体进行交流；4) 感知模块，用于检测在场同事的存在和行为，以便智能体能够主动发起互动。整个流程是，当在场同事接近时，智能体感知到并主动发起问候，模拟远程同事的在场。

关键创新：该论文的关键创新在于将具身智能体应用于增强分布式团队的社交互动。与传统的通信方式相比，IRL Ditto提供了一种更具临场感和自然性的交互体验。此外，该研究还关注了社交关系的基础对互动效果的影响，这为未来具身智能体的设计提供了重要的指导。

关键设计：论文中没有详细描述具体的参数设置、损失函数或网络结构等技术细节。但是，可以推测，在身份建模方面，可能需要考虑头像的逼真度、语音的自然度等因素。在控制系统方面，需要确保智能体的移动平稳、安全，并且能够根据环境变化做出适当的反应。在感知模块方面，需要采用可靠的传感器和算法，以准确检测在场同事的存在和行为。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

该研究通过为期四天的实验，评估了IRL Ditto对增强社交联系的影响。实验结果表明，IRL Ditto能够促进同事之间的互动，但增强社交关系的效果取决于参与者与IRL Ditto来源的关系基础。这意味着，在设计具身智能体时，需要充分考虑社交关系的因素，以提高互动效果。

🎯 应用场景

IRL Ditto技术可应用于各种分布式办公场景，例如远程团队协作、异地会议、虚拟展会等。通过模拟远程人员的在场，可以增强团队凝聚力，促进知识共享，提高工作效率。未来，该技术还可扩展到教育、医疗等领域，例如远程教学、远程医疗等。

📄 摘要（原文）

We introduce the In Real Life (IRL) Ditto, an AI-driven embodied agent designed to represent remote colleagues in shared office spaces, creating opportunities for real-time exchanges even in their absence. IRL Ditto offers a unique hybrid experience by allowing in-person colleagues to encounter a digital version of their remote teammates, initiating greetings, updates, or small talk as they might in person. Our research question examines: How can the IRL Ditto influence interactions and relationships among colleagues in a shared office space? Through a four-day study, we assessed IRL Ditto's ability to strengthen social ties by simulating presence and enabling meaningful interactions across different levels of social familiarity. We find that enhancing social relationships depended deeply on the foundation of the relationship participants had with the source of the IRL Ditto. This study provides insights into the role of embodied agents in enriching workplace dynamics for distributed teams.