科技日报记者 崔爽
机器人数据采集正经历一条“解绑本体”的演进路线，设备越来越轻，采集行为越来越简单。不过，在不断简化设备的过程中，一些关键交互信息极易随之流失。
近日，破晓智能联合天珑移动发布全身全模态数据采集系统 SeePhys Hub。整套系统由一个四目头环、两个腕部手环、三个腰腿部动作追踪器和一副触觉手套组成，可同步采集第一视角视觉（360°环视覆盖）、手部全模态数据（手部位姿追踪、高密度触觉）与全身运动信息（位姿与受力）。
据了解，该系统可在保留设备便携性的同时，补回关键的身体与接触数据。同时，配套的自研数据处理平台，将人类数据转化为面向机器人学习的多模态训练数据。
这背后，在破晓看来，补充全身运动与触觉，是为了人如何移动、调整姿态，双手在哪里接触物体、压力如何变化等关键信息。而与视觉同步采集这些信息，有望让模型更直接地学习身体运动、手部接触与环境变化之间的关系。
同时，衡量数据价值，不能只看采集了多少小时，还要看每小时能让机器人学到多少。团队希望通过更完整的操作记录，提高数据效率，让机器人用更少的数据学会真实场景中的复杂操作，为全身移动灵巧操作奠定数据基础。
网友评论
