【小哈划重点:捕捉3D场景的一种方法是,在RGB-D传感器视场角内对多帧真实场景进行捕捉,每一帧中将包括色值和深度信息。接着从多次捕捉到的真实场景中选出关键帧,关键帧中提取的摄像头角度将定义3D坐标系统。】
近期,美国专利商标局公布了苹果一项与3D场景重建相关的专利,专利中指出了一种采用RGB-D摄像头传感器的方案,可用于VR/AR/MR头显,比如支持VR头显的透视功能等。
据了解,捕捉3D场景的一种方法是,在RGB-D传感器视场角内对多帧真实场景进行捕捉,每一帧中将包括色值和深度信息。接着从多次捕捉到的真实场景中选出关键帧,关键帧中提取的摄像头角度将定义3D坐标系统。
接着,设备再次捕捉真实场景的当前帧,并从中识别摄像头当前在3D坐标系统中的姿态。然后,根据当前摄像头姿态和2个或以上的关键帧,设备根据关键帧中的色值和深度信息,生成当前帧的虚拟可视化。
据悉,这份专利于2019年2月28日递交申请,其发明人是PIXMAP(曾开发小派8K VR头显)前CTOMaxime Meilland,目前为苹果法国分公司的计算机视觉工程师。
此外,专利中提到的RGB-D传感器曾被用于微软Kinect,早期时曾采用PrimeSense技术,后被苹果收购。
本文系青亭网翻译自:USPTO,Patently Apple