
观点网讯:近日,觅蜂科技联合西北工业大学、西安交通大学发表论文,提出第一视角运动重建框架“MEgoVista”,用以将Ego视频更精准地转化为4D数据。
第一视角(Ego)视频让数据采集从专业场地走进真实生活和工作,成为具身智能预训练的重要数据来源。但要从中提炼4D数据,系统还需准确辨认佩戴者的双手、还原手指的弯曲姿态,并测量手在空间中的移动距离。
论文实验结果显示,MEgoVista在Ego视频上具备较高的重建精度,可将无需预先布置场景的第一视角录制数据,有效转化为具有真实尺度的双手动作和头部运动轨迹。研究团队通过独立动捕系统测评和真实场景对比,检验了该框架的重建精度与跟踪表现,其中独立光学动作捕捉系统由26台摄像头组成,用于提供参考数据。
测试中,经位置、朝向和尺度对齐后,MEgoVista的手指姿态误差为4.29毫米,低于HaWoR的16.30毫米和Dyn-HaMR的49.18毫米;动作抖动指标为1.11毫米/帧²,也低于两种对比方法。
在制作奶茶、美甲和给宠物洗澡三个真实场景的画面对比中,MEgoVista整体跟踪更稳定,在美甲场景中是三者中唯一正确区分佩戴者与顾客双手的系统。
两组头部轨迹测试中,MEgoVista完整片段的平均位置误差分别为2.87毫米和0.75毫米。
免责声明:本文内容与数据由观点根据公开信息整理,不构成投资建议,使用前请核实。











