前沿 | 苹果AR/VR专利：基于2D视频生成具备贴图的3D模型
2020.12.14 浏览：981 资讯来源：深智联
12月11日青亭网报道，今天USPTO公布苹果公司一项专利，疑似用于AR和3D场景用途。
该专利提交于2019年1月18日，于2020年12月10日正式公布。专利名为“METHOD AND DEVICE FOR GENERATING A SYNTHESIZED REALITY RECONSTRUCTION OF FLAT VIDEO CONTENT”，简单来说就是：基于2D视频的3D/VR/AR内容重建方法。
根据专利中描述，该方法可基于2D视频直接生成可应用在VR/AR环境中的内容，例如将电视内容或直播视频中的人物、物体等，生成3D模型，并融入到AR/VR场景中。
专利提到，目前的AR/VR内容都是专门制作的。这也意味着，想要丰富的AR/VR内容就需要有大量开发者来制作对应的内容，而这个方法也可以看做是简化AR/VR内容，将传统2D视频元素制作AR/VR场景的快速方法。
其中一个重点是，部分数字化的内容可基于视频或视频相关内容实时生成。例如，2D视频中的一块蛋糕，一个人都可以直接生成对应的3D版本，这对硬件算力和算法都有极高的要求。
此前，我们报道过类似的算法，但苹果此项专利的挑战在于：2D视频中的蛋糕，放到3D场景中还需要对其平面图、侧视图，透视图结构等进行重新构建。也就是，基于2D平面图，生成3D模型，且贴图还得尽可能保证一致。