← 返回论文列表

TransTac:基于紫外线编码透明弹性体的视觉-触觉模态转换
TransTac: Visuo-Tactile Modality Transition via Ultraviolet-Encoded Transparent Elastomers

作者: Lingyue Yang, Bin Fang
arXiv: 2606.04477
分类: cs.RO
📝 论文摘要
基于视觉的触觉传感器(VBTS)能够恢复高分辨率接触几何信息,但通常依赖于不透明弹性体层,从而阻碍了视觉透明性;而RGB-D相机可提供全局深度感知,但在近距离范围内性能显著下降。为解决这一局限,我们提出TransTac——一种透明紫外编码双目VBTS系统,它将视觉观测与基于标记点的触觉重建集成于单个紧凑装置中。该系统采用嵌入紫外反射标记的透明弹性体,并结合先验引导的Delaunay立体匹配算法实现鲁棒稀疏三角化。为可靠检测密集分布的半透明标记,我们开发了一种轻量级检测器,能够在接触和形变条件下实现稳定定位。与全局分配基线方法相比,所提出的先验引导Delaunay匹配在保持高重建精度的同时,将对应鲁棒性提升约21%。在语义评估中,TransTac在触觉图像上的零样本识别准确率最高达83.3%,超过不透明触觉基线约50个百分点。嵌入分析进一步揭示其与自然图像的跨模态对齐显著增强,类中心相似度从约0.2提升至0.77以上。受控近距实验量化了RGB-D深度可靠性的退化程度,并证明了视觉-触觉融合所实现的扩展几何覆盖范围。最终实现的紧凑原型硬件成本约为70美元。

📊 核心分析

🎯 研究动机
- 现有**视觉触觉传感器(Vision-based Tactile Sensors, VBTS)** 依赖不透明弹性体,无法同时实现视觉透明性 - **RGB-D相机** 在近距离下深度感知退化严重,无法提供精确的接触几何重建 - 需要一种集成视觉观察与触觉重建的紧凑设备,解决两者互斥的限制
🔧 核心方法
- 设计**TransTac** 系统,采用**透明紫外(UV)编码弹性体** 与**双目光学结构**,嵌入UV反射标记 - 提出**先验引导的Delaunay立体匹配(prior-guided Delaunay stereo matching)** 算法,实现鲁棒的稀疏三角化 - 开发**轻量级检测器(lightweight detector)**,稳定检测密集分布的半透明标记,即使在接触和变形条件下
💡 核心创新
- **首创透明集成设计**:首次实现透明弹性体同时支持视觉观测与触觉重建,打破VBTS不透明限制 - **先验引导匹配**:相比全局指派基线,对应鲁棒性提升约21%,同时保持高重建精度 - **跨模态对齐增强**:零样本触觉图像识别准确率达83.3%,比不透明基线高约50个百分点;类中心相似度从0.2提升至0.77以上
🏆 总体贡献
- 为**视觉-触觉融合(visuo-tactile integration)** 提供了一种低成本(约$70)、紧凑的新范式 - 在语义评估和跨模态嵌入分析上达到显著性能提升,验证了透明弹性体在触觉感知中的有效性 - 开源硬件和算法设计,促进机器人灵巧操作、医疗触觉等领域的后续研究