多模态触觉与视觉融合感知，实现灵巧的家政服务机器人

多模态触觉与视觉融合感知，实现灵巧的家政服务机器人

引用

搜狐

1.

https://m.sohu.com/a/801801701_121124378/?pvid=000115_3w_a

在机器人研究领域，将类人感知能力赋予机器人一直是研究者们努力追求的目标，旨在使机器人能够更深入地理解和感知周围世界。近年来，触觉感知以及触觉与视觉融合感知技术为这一领域带来了突破性的进展。这些创新的技术有望彻底改变机器人感知和交互的方式。然而，目前的感知技术仍无法完全满足机器人在家庭任务和环境中的需求，尤其在多模态信息整合与融合、快速响应能力和高灵敏度感知等方面仍面临巨大挑战。

据麦姆斯咨询报道，针对该领域的挑战，清华大学朱荣教授团队近期提出一种柔性触觉传感器解决方案，该触觉传感器能够利用薄膜热敏电阻实现对压力、温度、物质热性能、纹理和滑移的多模态感知。基于该触觉传感器，研究人员进一步提出一种机器人触觉-视觉融合架构，该架构巧妙地将多模态感知信息从底层传感器无缝整合到顶层决策系统，实现了全方位的信息融合。利用触觉-视觉融合架构和相应的抓取/识别策略，机器人能够灵巧准确地抓取各种日常物品，并应对日常生活中各种具有挑战性的复杂任务，充分展示了该技术在智能家政领域的巨大应用潜力。相关研究成果以“Multimodal tactile sensing fused with vision for dexterous robotic housekeeping”为题发表在Nature Communications期刊上。