由于头显遮挡的原因,系统一般难以映射用户完整的面部并重建被遮挡的面部区域。对于这个问题,行业一直在进行探索。实际上,如果你曾阅读《Facebook 50年征途:Codec Avatars,创造逼真虚拟角色》一文,你就会知道Facebook同样有进行相应的研究,并且已经展示了一定的成果。
日前,美国专利商标局又公布了与前面所述相关的又一份Facebook专利申请,其描述了重建遮挡面部区域的方法和系统。
Facebook描述的方法可以包括以下步骤:获取离线3D数据,所述离线3D数据是完整用户头部的3D数据;获取包含被遮挡部分的实时3D数据;根据实时3D数据,对离线3D数据的至少一部分进行3D变换,以产生重构的实时3D数据;将重构后的实时3D数据合并为实时3D数据。
具体来说,系统首先采集未穿戴头显时的完整头部/面部3D数据,然后再结合被头显遮挡的实时映射数据来产生重构的实时3D数据,从而实现完整面部实时重建的过程。
相关专利:Method And System For Reconstructing Obstructed Face Portions For Virtual Reality Environment
一直以来,我们已经看到了这一领域所取得的进步,尤其是Facebook领衔的研究。
合作机构
联系方式