最 近,美国公司关于ar手势识别的专利之一,该专利提出了生成手指3d模型,识别手势和虚拟物体触摸的方案。公司在专利中表示,用户可以旋转手指,与ar相机前的物理环境相互作用,注册账户。那么,整个手势认识方案是如何实现的呢?首先,利用设备识别并生成用户的3d手的形状,实时追踪3d手势的变化,与ar头同步。该ar头以移动3d手势模型为基础,对不同的手势做出反应,跟随动作。
该系统同时生成与手接触物体的3d模型,分析这两个模型,提取深度数据并进行优化。它还使用icp(基于轮廓排序的算法)实时更新3d手势模型和实时手势之间的变化,识别手指接触。