12月11日青亭网报道,今天USPTO公布苹果公司一项专利,疑似用于AR和3D场景用途。
该专利提交于2019年1月18日,于2020年12月10日正式公布。专利名为“METHOD AND DEVICE FOR GENERATING A SYNTHESIZED REALITY RECONSTRUCTION OF FLAT VIDEO CONTENT”,简单来说就是:基于2D视频的3D/VR/AR内容重建方法。
根据专利中描述,该方法可基于2D视频直接生成可应用在VR/AR环境中的内容,例如将电视内容或直播视频中的人物、物体等,生成3D模型,并融入到AR/VR场景中。
专利提到,目前的AR/VR内容都是专门制作的。这也意味着,想要丰富的AR/VR内容就需要有大量开发者来制作对应的内容,而这个方法也可以看做是简化AR/VR内容,将传统2D视频元素制作AR/VR场景的快速方法。
其中一个重点是,部分数字化的内容可基于视频或视频相关内容实时生成。例如,2D视频中的一块蛋糕,一个人都可以直接生成对应的3D版本,这对硬件算力和算法都有极高的要求。
此前,我们报道过类似的算法,但苹果此项专利的挑战在于:2D视频中的蛋糕,放到3D场景中还需要对其平面图、侧视图,透视图结构等进行重新构建。也就是,基于2D平面图,生成3D模型,且贴图还得尽可能保证一致。
合作机构
联系方式