TangibleNet: Synchronous Network Data Storytelling through Tangible Interactions in Augmented Reality
作者: Kentaro Takahira, Wong Kam-Kwai, Leni Yang, Xian Xu, Takanori Fujiwara, Huamin Qu
分类: cs.HC, cs.GR
发布日期: 2025-04-07
期刊: Proceedings of the 2025 CHI Conference on Human Factors in Computing Systems (CHI '25), April 26-May 1, 2025, Yokohama, Japan
💡 一句话要点
TangibleNet：增强现实中基于实体交互的同步网络数据叙事
🎯 匹配领域: 支柱一：机器人控制 (Robot Control)
关键词: 增强现实 人机交互 网络可视化 数据叙事 物理交互
📋 核心要点
- 现有网络数据叙事工具难以支持实时操作，限制了同步演示的效率和灵活性。
- TangibleNet利用双面磁铁作为物理交互工具，在增强现实环境中实现对节点链接图的直观控制。
- 用户评估表明，TangibleNet能够提升演示者的自主性，并促进更有效的同步网络数据叙事。
📝 摘要（中文）
同步数据驱动的网络可视化叙事面临着实时操作网络组件的复杂性挑战。现有研究主要关注异步场景，缺乏有效的实时演示工具。为了解决这个问题，我们开发了TangibleNet，一个基于投影的增强现实原型，允许演示者在实时演示期间使用双面磁铁与节点链接图进行交互。设计过程参考了对具有同步数据叙事经验的专业人士的访谈以及与14位HCI/VIS研究人员的研讨会。访谈的见解有助于确定在演示环境中集成物理对象作为交互工具的关键设计考虑因素。研讨会促成了设计空间的开发，该设计空间将用户操作映射到节点链接图的交互命令。与12名参与者的评估证实，TangibleNet支持直观的交互并增强演示者的自主性，证明了其在基于同步网络的的数据叙事中的有效性。
🔬 方法详解
问题定义：现有网络数据可视化叙事工具在同步演示场景下存在局限性。演示者难以实时操控复杂的网络结构，缺乏直观的交互方式，导致演示效率低下，无法充分表达数据背后的故事。现有方法主要关注异步场景，缺乏对实时交互的支持。
核心思路：TangibleNet的核心思路是将物理实体（双面磁铁）与增强现实技术相结合，构建一个直观、可操作的交互界面。通过磁铁的移动和组合，演示者可以直接操纵AR投影中的节点链接图，实现实时的数据探索和叙事。这种设计旨在增强演示者的自主性，并提升观众的参与度。
技术框架：TangibleNet系统主要包含以下几个模块：1) 投影仪：将节点链接图投影到桌面；2) 摄像头：捕捉磁铁的位置和状态；3) 磁铁：作为物理交互工具，用于选择、移动和连接节点；4) 计算机：处理摄像头数据，识别磁铁操作，并更新AR投影中的节点链接图。整个流程是：摄像头捕捉磁铁的物理操作 -> 计算机解析操作指令 -> AR系统更新节点链接图 -> 投影仪将更新后的图投影到桌面。
关键创新：TangibleNet的关键创新在于将物理实体交互融入到增强现实的网络数据叙事中。与传统的鼠标键盘操作相比，磁铁交互更加直观、自然，能够提供更丰富的交互体验。此外，TangibleNet的设计充分考虑了同步演示场景的需求，通过优化交互方式，提升了演示者的自主性和控制力。
关键设计：TangibleNet的关键设计包括：1) 磁铁识别算法：需要精确识别磁铁的位置、方向和组合状态，以确保交互的准确性；2) 交互映射：需要定义一套清晰的交互规则，将磁铁操作映射到节点链接图的各种操作，例如选择节点、移动节点、连接节点等；3) AR界面设计：需要设计一个清晰、易用的AR界面，方便演示者理解和操作。
🖼️ 关键图片
📊 实验亮点
对12名参与者的评估表明，TangibleNet能够支持直观的交互，并增强演示者的自主性。参与者普遍认为，使用磁铁进行交互比传统的鼠标键盘操作更加自然、流畅。此外，TangibleNet还能够提升观众的参与度，促进更有效的沟通和理解。具体的性能数据未知，但用户反馈表明该系统在同步网络数据叙事方面具有显著的优势。
🎯 应用场景
TangibleNet可应用于多种需要同步网络数据叙事的场景，例如：商业演示、学术报告、教育培训等。它可以帮助演示者更有效地传达复杂的数据信息，提升观众的理解和参与度。未来，该技术可以进一步扩展到其他类型的数据可视化，例如：地图、图表等，为数据叙事提供更丰富的交互方式。
📄 摘要（原文）
Synchronous data-driven storytelling with network visualizations presents significant challenges due to the complexity of real-time manipulation of network components. While existing research addresses asynchronous scenarios, there is a lack of effective tools for live presentations. To address this gap, we developed TangibleNet, a projector-based AR prototype that allows presenters to interact with node-link diagrams using double-sided magnets during live presentations. The design process was informed by interviews with professionals experienced in synchronous data storytelling and workshops with 14 HCI/VIS researchers. Insights from the interviews helped identify key design considerations for integrating physical objects as interactive tools in presentation contexts. The workshops contributed to the development of a design space mapping user actions to interaction commands for node-link diagrams. Evaluation with 12 participants confirmed that TangibleNet supports intuitive interactions and enhances presenter autonomy, demonstrating its effectiveness for synchronous network-based data storytelling.