编译/VR陀螺
美国专利商标局公布了苹果的一项专利申请,该申请涉及控制和/或移动光标的技术,例如通过空气手势操作未来智能眼镜、Vision Pro以及/或Mac电脑的触控板。
专利申请指出,目前与3D环境交互的一些方法和界面存在笨拙、低效且功能受限的问题。例如,部分系统不支持使用光标与虚拟对象交互,这会导致执行精确操作(如文本编辑或绘图)变得繁琐和/或低效。
此外,其他支持光标与虚拟对象交互的系统则过于复杂、繁琐且易出错,会给用户带来显著的认知负担,并削弱VR/AR环境的体验。此外,这些方法耗时过长,从而浪费计算机系统的能量。这一考虑在电池供电设备中尤为重要。
因此,需要改进的计算机系统,其方法和界面可通过光标与虚拟对象交互,以使用户与3D环境的交互更加高效和直观。此类方法和界面可选择性地补充或替代传统的3D环境交互方法。此类方法和界面通过帮助用户理解提供的输入与设备对输入的响应之间的关联,从而减少用户输入的数量、范围和/或性质,从而创建更高效的人机界面。
在某些实施例中,计算机系统是带有相关显示器的台式计算机。在某些实施例中,计算机系统是便携式设备或头戴式显示器(HMD)/智能眼镜。
计算机系统可能包含一个或多个手部追踪组件。计算机系统也可能除显示生成组件外,还包含一个或多个输出设备,这些输出设备包括一个或多个触觉输出生成器和/或一个或多个音频输出设备。
用户通过触控笔和/或手指接触及手势在触控表面上与图形用户界面(GUI)进行交互,通过用户眼睛和手在空间中相对于GUI(和/或计算机系统)或用户身体的运动(由摄像头和其他运动传感器捕获),以及通过一个或多个音频输入设备捕获的语音输入进行交互。
通过交互执行的功能可选地包括图像编辑、绘图、演示、文字处理、电子表格制作、游戏、通话、视频会议、电子邮件、即时消息、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐播放、笔记记录和/或数字视频播放。
苹果的专利图7A展示了基于检测到的手部动作控制光标的示例。设备#700实现为台式计算机,包括显示屏#706,该显示屏与一个或多个图像传感器/摄像头通信,以检测用户在空中的手势(或使用大型触控板#708)。
苹果专利图7F2展示了智能眼镜#X700的显示模块#X702上显示窗口#710和#712以及光标#726的实现方式。
在某些实现方式中,智能眼镜包含一对显示模块,为同一用户的双眼提供立体内容。在某些实施例中,第二个显示模块显示与显示模块X702略有不同的图像,以产生立体深度的错觉。
详细信息,请参阅苹果的专利申请20250199623。该专利的负责人是Eugene Krivoruchko,他是负责空间输入的人机界面设计师。
手部追踪校正模式的启发式方法
另一项专利的摘要中提到,关于手势和手部追踪的技术方案中,在某些实现方式中,该方法包括:确定虚拟内容的位置;检测用户与虚拟内容的交互;在检测到用户与虚拟内容的交互时,确定用户在与虚拟内容交互过程中手势的位置;根据手势位置相对于虚拟内容位置的距离是否在阈值范围内进行判断,若在阈值范围内,则生成与用户与虚拟内容交互相关联的校正后手部追踪数据;若在阈值范围外,则生成与用户与虚拟内容交互相关联的未校正手部追踪数据。
苹果公司的专利图5B展示了与输入追踪架构相关的示例数据结构;图6A展示了改进手部追踪的流程。详细信息,请参阅专利申请20250199620。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息