10月14日,破晓智能(PHANES AI)联合天珑移动发布全身全模态数据采集系统 SeePhys Hub。整套系统由一个四目头环、两个腕部手环、三个腰腿部动作追踪器和一副触觉手套组成,可同步采集第一视角视觉(360° 环视覆盖)、手部位姿与高密度触觉、全身运动位姿与受力信息。
硬件方面,SeePhys Hub 头环重量不超过220克,单个腕部手环不超过75克,两类设备均支持连续24小时不间断采集;头环内相机、IMU 与 UWB 的同步误差不超过0.5毫秒。配套的自研数据处理平台可将人类数据转化为面向机器人学习的多模态训练数据,并衔接场景重建、全身姿态估计、手部动作追踪与动作重定向等流程。
打开网易新闻 查看精彩图片
SeePhys Hub 是破晓智能沿 EgoTouch、TouchAnything、TouchWorld 触觉研究路线推出的首款工程化产品,将此前在触觉数据与模型上的研究积累,转化为融合视觉、双手触觉与全身运动的可穿戴采集系统。
破晓智能由哈尔滨工业大学(深圳)计算机科学与技术学院长聘教授、博士生导师杨朔创办,团队长期目标为构建面向全身移动灵巧操作的世界模型。(袁宁)