Prophesee - National University of Singapore

通过将高性能的基于事件的视觉与触觉相结合,赋能智能、低能耗的机器人

新加坡国立大学协作、学习和自适应机器人(CLeAR)实验室TEE研究小组的研究人员正在利用基于事件的视觉的优势,结合触觉,建立新的视觉-触觉数据集,以开发更优的机器人学习系统。触觉和视觉的神经拟态传感器融合可以被用于帮助机器人抓取和识别物体

他们在“电子皮肤”方面的研究工作应用了Prophesee公司的Metavision基于事件的视觉传感器,将触觉和视觉结合起来,增强机器人的功能

《EETimes》报道,他们使用的新型触觉传感器NeuTouch39个t触觉像素组成,其运动由石墨烯压阻层传导;你可以把这种触觉像素想象成机器人指尖的前端。

该传感器被一层共聚酯保护层覆盖,有助于放大刺激。传感器由3d打印的“骨头”支撑。使用者可以将指尖放入到夹持器中。

Prophesee公司元视觉传感器中的独立像素从环境变化中收集数据的方式类似,NeuTouch指尖感知触觉的变化。神经拟态技术的使用带来了高性能和低功耗,使自动化系统成为可能。

(A) NeuTouch 与人类手指的比较。

(B) NeuTouch 及其构成剖面图。

(C) NeuTouch上39个接触像素点的空间分布。

这种训练被进一步应用到滑动测试中。滑动测试的目标是让机器人确定足以安全地抓住物体的最大压力大小。测试希望提高机器的反应时间,防止坠落和此类事故的造成的严重后果。

这项研究展示了传感器如何收集相关信息,以及如何组合信息,模拟人类大脑的过程。Benjamin Tee, Harold Soh和他们的同事已经将这些数据集提供给其他研究人员,以帮助开发智能节能机器人系统。

Robotic Arm
Team Photo
Robotic Arm

关于新加坡国立大学

新加坡国立大学自1905年建校以来,培养了几代人才。新加坡国立大学的17个学院分布在新加坡的3个校区和12个海外学院,为约55,000名学生和教职员工提供了一个蓬勃发展的环境,让他们共同工作、生活和学习。他们开创了创新的学术课程、有影响力的研究和有远见的企业,以改善生活并为社会做出贡献。

新加坡国立大学的协作、学习和自适应机器人实验室(CLeAR)研究了人类-人工智能/机器人团队的科学和工程。他们进行了人机交互(HRI)实验,并开发了新的机器学习(ML)方法,使机器人能够与人合作。

新加坡国立大学TEE研究小组正在开发新材料、设备和系统,以应对未来人工智能的人机交互、机器人和生物技术应用方面的挑战。

关于PROPHESEE开发者社区

自2014年以来,研究人员、初创企业和各大公司等使用 Prophesee的神经拟态视觉技术展示了令人难以置信的想象力和创新能力。

这创造了一个基于事件的视觉生态系统,开发者可以在其中分享他们的工作,想法和杰出成果,他们对 Prophesee技术的创造力也激励着我们。

我们把他们聚集在这里,激励未来的发明家,希望他们能够像这里的项目一样,一起创造出新发现,揭示帧之间的不可见信息。