分别自***眼球帧13和场景帧15提取出***子帧35和第二子帧55。参考图1、图2、图3、图4和图5,本案的***子帧35和第二子帧55可各自单独地或组合地被运算以得到眼球估计位置(步骤6)。以单独运算***子帧35来说,是利用前一帧眼睛的二维/三维近似推估为现在帧(第二眼球帧)眼睛所在的位置,舍弃掉前一帧(***子帧35)中非眼睛影像的脸部影像33,数据量的降低有助于推估现在帧眼睛所在的位置的运算时间,同时降低运算耗电量。其次,以单独运算第二子帧55来说,重点区域影像51通常是配戴者感兴趣的位置,即是配戴者的眼睛可能注视的方向,故将包括重点区域影像51的第二子帧55利用适当的反向运算,例如反向投影矩阵的运算,可以推估配戴者的眼球在相对于眼摄像装置22的哪个位置。又,若同时依据***子帧35和第二子帧55的运算来得到眼球估计位置,可得到更精确和精细的结果,同时达到降低运算耗电量的目的。之后,眼摄像装置22可依据上述眼球估计位置撷取包括眼球影像的第二眼球帧(步骤8)。此时,此第二眼球帧57,例如近似***子帧35的范围,必包括眼球估计位置的影像58,第二眼球帧的数据量可以等于或少于***眼球帧13。虽然本发明已以实施例揭露如上,然其并非用以限定本发明。眼动追踪让虚拟现实更真实。湖南眼动追踪硬件
智能眼镜发展以来眼动追踪技术一直是一个被**AR/VR行业严重低估的技术,眼动追踪至今还没有进入主流的公众视野。大多数业内人士对眼动追踪技术的应用可能只是停留在交互技术(眨眼),或者用于做心理学(认知)分析的仪器,殊不知眼动追踪技术对于智能眼镜走向消费者有着重要的战略意义。接下来我通过眼动发展现状,中美AR/VR眼动追踪**数对比,眼动追踪应用,眼动追踪技术来进行讲解。一、眼动发展现状1.眼动追踪融资情况2014年末,三星投资了FOVE,主打眼球追踪的VR头盔;2016年10月,Google收购专注于眼球追踪的初创公司Eyefluence,布局AR交互;2017年初Facebook旗下Oculus确认收购TheEyeTribe,将眼球追踪技术改善产品;2017年6月,苹果公司收购了德国计算机视觉公司SensoMotoricInstruments(SMI),打造苹果AR眼镜。贵州人机交互眼动追踪器图片眼动追踪技术提升广告投放准确度。
本发明涉及一种眼球追踪的运算方法及其装置,特别是涉及一种降低眼球追踪运算的方法及其装置。背景技术:眼动技术是指通过测量眼睛的注视点的位置或者眼球相对头部的运动而实现对眼球运动的追踪。眼动仪是一种能够获取这两个信息的一种设备,这个获取步骤就是眼球追踪运算。目前眼动追踪有多种方法,包括:非侵入方式,例如通过视频拍摄设备来获取眼睛的位置;侵入方式,例如在眼睛中埋置眼动测定线圈或者使用微电极描记眼动电图。另,一般眼动仪会包括视线追踪模块以执行对眼球运动的追踪,以非侵入方式追踪的视线追踪模块通常配备眼摄像装置(eyecamera)和场景摄像装置(scenecamera)。眼摄像装置是撷取配戴者的眼球影像,场景摄像装置则是撷取配戴者所视的场景影像。由于眼动仪通常是放置于眼睛周围,故一般视线追踪模块应具备低功耗、小面积、低延迟等特性以符合要求。技术实现要素:本发明提供一种针对省电需求设计的降低眼球追踪运算的方法及其装置,采用部分帧减少眼球追踪的运算量,进而达到减少功耗而省电的目的。本发明提供一种针对省电需求设计的降低眼球追踪运算的方法及其装置,部分帧的数据可由眼摄像装置或场景摄像装置或上述二者提取得到。
当然除了画面渲染方面,眼球追踪技术还可以大幅度提升VR设备的交互体验。用户通过眼球转动与VR用户界面的交互可以直接用眼控控制菜单,触发操作,让人摆脱不自然的头部操作。眼球追踪技术在VR领域的重要性已经显而易见,Oculus的创始人PalmerLuckey也曾表示,眼部**技术会成为VR技术未来的一个“重要组成部分”。不*能实现注视点渲染技术,它还能用来创造一种深度传感,以创作出更好的用户界面。众所周知光线在穿透透镜过程中会产生折射,所以目前的VR显示设备视角边缘都产生畸变和色差。Oculus正使用适用的光学优势试图修复该问题,但*凭光学设计并无法完美解决,还需要在软件方面进行反畸变和色散的优化。现在已经有部分产品采用了以镜片中心为准的矫正方案,虽然有所成效,但是当人眼位置与镜片位置发生偏移时,反畸变的效果就会随之减弱。若让反畸变处理结合眼球追踪技术,将矫正方案调整为以人眼注视中心为准而不是镜片中心为准,矫正效果也会大幅提升。眼球追踪技术对于VR来说就像鼠标于windows系统一样,它会让体验更完善,使用更方便,更容易被用户接受,虽然在VR设备上成功搭载眼球追踪技术的案例并不多,但是参照目前VR显示方案的快速迭代。市场调研中,眼动追踪揭示购物者偏好。
二、眼动跟踪技术:脑部疾病的“早期预警”眼动跟踪技术在脑部疾病的诊断中,具有独特的优势。首先,它是一种非侵入性的检测方法,不会对患者造成任何伤害。其次,眼动跟踪技术能够提供实时、连续的数据,有助于医生更准确地评估患者的认知状态和病情进展。更重要的是,眼动跟踪技术能够捕捉到一些传统检测方法难以发现的细微变化。例如,在自闭症患者的早期诊断中,眼动跟踪技术能够发现患者在注视他人眼睛时的异常模式,这有助于医生更早地识别出自闭症的风险。同样,在阿尔茨海默病的筛查中,眼动跟踪技术通过分析患者对图像的认知加工速度,可以早期发现认知功能下降的迹象。三、案例分享:眼动跟踪技术的实际应用近年来,眼动跟踪技术在脑部疾病的诊断中取得了***成果。以下是一些具体的案例分享:自闭症的诊断:研究人员利用眼动跟踪技术,发现自闭症患者在观看社交场景时,对他人眼睛的注视时间明显少于正常儿童。这一发现为自闭症的早期诊断提供了重要依据。阿尔茨海默病的筛查:通过眼动跟踪技术,医生可以分析患者对图像的认知加工速度,从而早期发现认知功能下降的迹象。这一技术的应用,有助于阿尔茨海默病的早期干预和***。 眼动追踪技术可用于监测飞行员的应急反应。广西苹果 vrar眼动追踪
眼动追踪为虚拟现实技术增添了真实感。湖南眼动追踪硬件
对于虚拟现实,人们一直将眼动追踪视为一种变革性技术,因为其能够提供诸如注视点染和NPC角色眼神交流等功能。但在一定程度上,真正推动技术向前发展的是企业应用程序。集成眼动追踪技术的HTCViveProEye早前在CES2019大会进行了亮相,高通自家的参考设计845头显同样包括眼动追踪功能。VR眼动追踪的一个商业用例是采集消费者数据,而这正是埃森哲,高通和KelloggCompany推进试点解决方案的原因。利用基于高通骁龙845移动VR平台的高通VR参考设计头显,埃森哲开发了一种帮助品牌采集有关货架放置等变量数据的VR零售解决方案。结合InContextSolutions的软件和Cognitive3D的眼动追踪数据分析功能,埃森哲与Kellogg围绕其新推出的PopTartsBites进行了测试。与传统的数据收集手段不同(将新产品放在更高的货架上),VR解决方案表明更优的方法是将商品放在较低的货架上。这一发现导致品牌销售额在测试期间增加了18%。湖南眼动追踪硬件