← 返回论文列表

DOT-Sim：具有精确实到仿物理校准的可微分光学触觉模拟
DOT-Sim: Differentiable Optical Tactile Simulation with Precise Real-to-Sim Physical Calibration

作者: Yang You, Won Kyung Do, Aiden Swann 等6人
arXiv: 2604.27367v1
分类: cs.RO, cs.CV, cs.GR
📝 论文摘要
由于光学触觉传感器具有高变形性和复杂的光学特性，对其进行仿真面临重大挑战。为解决这些问题并实现物理精确的仿真，我们提出了DOT-Sim：可微分光学触觉仿真。与依赖可变形传感器简化模型的现有仿真器不同，DOT-Sim通过使用物质点法将软体传感器建模为弹性材料，精确捕捉其物理行为。DOT-Sim可在数分钟内利用少量演示数据快速校准光学触觉传感器仿真，其速度显著优于现有方法。与当前基线相比，我们的方法支持更大尺度和非线性变形。针对光学部分，我们提出了一种新颖方法，通过学习相对于真实世界空闲状态的残差图像来模拟光学响应。通过一系列零样本仿真到现实任务，我们验证了该方法的物理和视觉真实性。实验表明，DOT-Sim能够：（1）精确复现DenseTact光学触觉传感器在真实环境中的物理动力学；（2）在接触密集场景中生成逼真的光学输出；（3）实现仿真训练分类器在真实世界中的直接部署，在具有挑战性的物体上达到85%的分类准确率，在嵌入式肿瘤类型检测中达到90%的准确率；（4）基于仿真演示训练的策略实现精确轨迹跟踪，平均误差小于0.9毫米。

📊 核心分析

🎯 研究动机
- 模拟光学触觉传感器面临巨大挑战，因其具有**高变形性(high deformability)** 和**复杂光学特性(intricate optical properties)** - 现有模拟器依赖简化模型，无法准确捕捉软传感器的物理行为，导致**真实度不足** - 需要一种物理精确的模拟方法来实现从仿真到现实(sim-to-real)的零样本迁移
🔧 核心方法
- 提出**DOT-Sim** 框架，采用**物质点法(Material Point Method, MPM)** 将软传感器建模为**弹性材料(elastic materials)**，精确模拟物理动力学 - 光学模拟方面，通过学习一个**残差图像(residual image)** 相对于真实世界的空闲状态，生成光学输出 - 支持使用少量演示数据在数分钟内快速标定物理参数，速度远超现有方法
💡 核心创新
- **首次** 将**物质点法(MPM)** 引入光学触觉传感器模拟，实现**大变形和非线性变形(non-linear deformation)** 的精确建模 - 提出**残差图像学习(residual image learning)** 方法，无需复杂光学渲染，高效模拟光学响应 - 实现**快速物理标定(rapid physical calibration)**，仅需几分钟即可完成，显著提升易用性
🏆 总体贡献
- 提供高保真的光学触觉模拟平台，在物理动力学和光学输出上均能真实复现**DenseTact** 传感器行为 - 通过零样本sim-to-real任务验证，在接触丰富场景下分类准确率达85%（挑战性物体）和90%（嵌入式肿瘤检测），轨迹跟踪误差小于0.9mm - 为基于模拟的策略学习与策略部署提供了可行的途径，降低对真实数据采集的依赖