破晓智能联合天珑移动发布SeePhys Hub全身全模态数据采集系统
原标题:破晓智能联合天珑移动发布 SeePhys Hub,推进全身全模态人类数据采集
AI 摘要
破晓智能联合天珑移动发布全身全模态数据采集系统 SeePhys Hub,由四目头环、腕部手环、腰腿部动作追踪器和触觉手套组成,可同步采集第一视角视觉、手部全模态数据与全身运动信息。该系统是团队沿 EgoTouch、TouchAnything、TouchWorld 技术路线推出的首款工程化产品,配套自研平台可将人类数据转化为机器人学习训练数据。破晓智能由哈工大(深圳)杨朔创办,目标是构建面向全身移动灵巧操作的世界模型。
正文节选
0 机器人数据采集正在经历一条“解绑本体”的演进路线:从遥操作到 UMI再到 Ego,设备越来越轻,采集行为越来越简单。 不过,在不断简化设备的过程中,一些关键交互信息也随之流失——Ego 能记录双手在做什么,却难以完整捕捉全身运动,也感知不到手接触物体时的压力变化。而这些被简化掉的交互信息,往往才是完成任务的核心。 10 月 14 日,破晓智能联合天珑移动发布全身全模态数据采集系统 SeePhys Hub。整套系统由一个四目头环、两个腕部手环、三个腰腿部动作追踪器和一副触觉手套组成,可同步采集第一视角视觉(360°环视覆盖)、手部全模态数据(手部位姿追踪、高密度触觉)与全身运动信息(位姿与受力)。 在保留 Ego 便携性的同时,补回关键的身体与接触数据。同时,配套的自研数据处理平台,可将人类数据转化为面向机器人学习的多模态训练数据。 SeePhys Hub 是团队沿着 EgoTouch、TouchAnything、TouchWorld 技术路线推出的首款工程化产品,将此前在触觉数据与模型上的研究积累,转化为一套融合视觉、双手触觉与全身运动信息的可穿戴采集系统。 采集方式由繁到简,关键