近期USPTO公布了苹果公司一项关于AR/VR头显的专利，专利中描述了一种通过触控的方式，来控制AR/VR头显内的虚拟内容。

根据专利来看，其支持通过多个外设完成交互，包括：各种基于平面，例如桌子表面等，而用户只需要通过触摸桌子表面即可完成整套交互。

原理方面，专利提到苹果计划通过RGB相机捕捉外部图像，并在屏幕显示。另一还提到一种方法是，通过一个虚拟触控板，即让你看到现实桌面，你可以滑动这个区域即可进行操作。同时，专利还提到通过红外相机的代替方案。

上图2中，200B是AR/VR头显，而200A是外设，并内置摄像头、IMU。由此，基于头显中2颗摄像头结合外设中的1颗摄像头，即构成三角相机系统。

图6和图7展示了一些操作方式，图11和图12展示了头显内交互方式和操作逻辑等。

据悉，该专利于2019年三季度提交。通过本专利，我们可以预测未来苹果AR/VR头显将在交互方式上有一些突破，可以直接利用桌面等现实中的物体完成交互，这对于虚实融合类的场景有着很好的体验。