MFE: A Multimodal Hand Exoskeleton with Interactive Force, Pressure and Thermo-haptic Feedback
作者: Ziyuan Tang, Yitian Guo, Chenxi Xiao
分类: cs.RO
发布日期: 2026-04-06
💡 一句话要点
MFE：一种具有交互式力、压力和热触觉反馈的多模态手部外骨骼
🎯 匹配领域: 支柱一：机器人控制 (Robot Control) 支柱九：具身大模型 (Embodied Foundation Models)
关键词: 多模态触觉反馈 手部外骨骼 力反馈 压力触觉 温度反馈 机器人遥操作 虚拟现实
📋 核心要点
- 现有触觉设备通常仅提供单模态反馈，无法充分传递力、压力和温度等多维度的感觉信息，限制了用户在虚拟现实和机器人遥操作中的沉浸感。
- MFE手部外骨骼通过集成主动力反馈、电渗压力触觉和热电热泵温度反馈，实现了多模态触觉信息的同步传递，增强了交互的真实感。
- 实验结果表明，MFE能够有效提升用户在机器人遥操作任务中的情境感知能力，例如识别可变形物体和区分不同温度的物体。
📝 摘要（中文）
本文提出了一种多模态反馈外骨骼（MFE），旨在提供混合触觉反馈。该手部外骨骼具有20个自由度，用于捕捉手部姿态。力反馈方面，MFE采用主动机制，能够在手指静止姿态下产生3.5-8.1牛顿的推拉力，从而实现与可变形物体的真实交互。指尖配备了基于电渗原理的平面致动器，提供压力和振动刺激，实现高达2.47千帕的接触压力，以呈现触觉。在热反馈方面，MFE集成了热电热泵，能够呈现10至55摄氏度的温度。通过将MFE集成到使用X-Arm 6和Inspire Hand机械手的机器人遥操作系统中，验证了其有效性。用户研究表明，参与者能够成功识别和操作可变形物体，并区分具有不同温度的远程物体。这些结果表明，MFE增强了情境感知，以及机器人遥操作系统的可用性和透明度。
🔬 方法详解
问题定义：现有触觉反馈设备通常只能提供单一模态的触觉信息，例如力反馈或振动反馈，无法同时模拟力、压力和温度等多种触觉感受。这限制了用户在虚拟现实和机器人遥操作等应用中的沉浸感和操作精度。特别是在需要与复杂环境交互的场景中，缺乏多模态触觉反馈会降低用户的操作效率和安全性。
核心思路：MFE的核心思路是将力反馈、压力触觉反馈和温度反馈三种模态集成到一个手部外骨骼中，从而实现多模态触觉信息的同步传递。通过主动力反馈模拟物体的刚度和形变，通过电渗压力触觉模拟物体的表面纹理和接触压力，通过热电热泵模拟物体的温度。这种多模态融合的设计旨在提供更真实、更全面的触觉体验。
技术框架：MFE系统主要由以下几个部分组成：1) 具有20个自由度的手部外骨骼，用于捕捉手部姿态和提供运动支持；2) 主动力反馈模块，采用电机驱动的线性致动器，用于在手指上施加推拉力；3) 电渗压力触觉模块，采用基于电渗原理的平面致动器，用于在指尖产生压力和振动；4) 热电热泵温度反馈模块，采用热电制冷片，用于控制指尖的温度；5) 控制系统，用于协调各个模块的工作，并根据虚拟环境或远程机器人的状态生成相应的触觉反馈信号。
关键创新：MFE的关键创新在于将力、压力和温度三种触觉模态集成到一个紧凑的手部外骨骼中。与传统的单模态触觉设备相比，MFE能够提供更丰富、更真实的触觉体验。此外，MFE采用的电渗压力触觉技术和热电热泵温度反馈技术具有响应速度快、控制精度高等优点，能够更好地模拟真实物体的触觉特性。
关键设计：力反馈模块采用电机驱动的线性致动器，能够提供3.5-8.1N的推拉力。电渗压力触觉模块采用基于电渗原理的平面致动器，能够产生高达2.47kPa的接触压力。热电热泵温度反馈模块采用热电制冷片，能够控制指尖温度在10-55摄氏度范围内变化。控制系统采用PID控制算法，保证各个模块的稳定性和响应速度。具体参数设置和控制算法的优化细节未知。
🖼️ 关键图片
📊 实验亮点
用户研究表明，MFE能够有效提升用户在机器人遥操作任务中的情境感知能力。参与者在使用MFE后，能够更准确地识别和操作可变形物体，并区分具有不同温度的远程物体。具体来说，参与者能够成功识别不同硬度的物体，并区分10-55摄氏度范围内的温度差异。这些结果表明，MFE能够显著提高机器人遥操作系统的可用性和透明度。
🎯 应用场景
MFE在虚拟现实、机器人遥操作、医疗康复等领域具有广泛的应用前景。在虚拟现实中，MFE可以增强用户的沉浸感和交互体验，例如在虚拟装配、虚拟手术等场景中。在机器人遥操作中，MFE可以提高操作员的控制精度和安全性，例如在危险环境下的远程操作。在医疗康复中，MFE可以帮助患者恢复手部功能，例如在脑卒中后的康复训练中。
📄 摘要（原文）
Recent advancements in virtual reality and robotic teleoperation have greatly increased the variety of haptic information that must be conveyed to users. While existing haptic devices typically provide unimodal feedback to enhance situational awareness, a gap remains in their ability to deliver rich, multimodal sensory feedback encompassing force, pressure, and thermal sensations. To address this limitation, we present the Multimodal Feedback Exoskeleton (MFE), a hand exoskeleton designed to deliver hybrid haptic feedback. The MFE features 20 degrees of freedom for capturing hand pose. For force feedback, it employs an active mechanism capable of generating 3.5-8.1 N of pushing and pulling forces at the fingers' resting pose, enabling realistic interaction with deformable objects. The fingertips are equipped with flat actuators based on the electro-osmotic principle, providing pressure and vibration stimuli and achieving up to 2.47 kPa of contact pressure to render tactile sensations. For thermal feedback, the MFE integrates thermoelectric heat pumps capable of rendering temperatures from 10 to 55 degrees Celsius. We validated the MFE by integrating it into a robotic teleoperation system using the X-Arm 6 and Inspire Hand manipulator. In user studies, participants successfully recognized and manipulated deformable objects and differentiated remote objects with varying temperatures. These results demonstrate that the MFE enhances situational awareness, as well as the usability and transparency of robotic teleoperation systems.