CN114356082A - 增强现实设备的图像优化方法、装置、电子设备及系统 - Google Patents
增强现实设备的图像优化方法、装置、电子设备及系统 Download PDFInfo
- Publication number
- CN114356082A CN114356082A CN202111562281.6A CN202111562281A CN114356082A CN 114356082 A CN114356082 A CN 114356082A CN 202111562281 A CN202111562281 A CN 202111562281A CN 114356082 A CN114356082 A CN 114356082A
- Authority
- CN
- China
- Prior art keywords
- acceleration
- augmented reality
- wearer
- reality device
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 147
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000005457 optimization Methods 0.000 title claims abstract description 25
- 230000001133 acceleration Effects 0.000 claims abstract description 215
- 230000033001 locomotion Effects 0.000 claims abstract description 34
- 230000003068 static effect Effects 0.000 claims abstract description 14
- 238000006073 displacement reaction Methods 0.000 claims description 69
- 239000011521 glass Substances 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 15
- 238000003860 storage Methods 0.000 claims description 13
- 238000004364 calculation method Methods 0.000 claims description 12
- 210000003128 head Anatomy 0.000 description 31
- 238000010586 diagram Methods 0.000 description 17
- 230000001815 facial effect Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 210000001097 facial muscle Anatomy 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
Abstract
本公开涉及一种增强现实设备的图像优化方法、装置、电子设备及系统,涉及增强现实设备的图像处理技术领域,所述方法包括:获取所述增强现实设备的加速度数据;根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,其中,所述运动状态信息包括所述佩戴者处于头部转动状态或者头部静止状态;在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度;根据所述目标加速度对所述增强现实设备的待显示图像进行补偿。
Description
技术领域
本公开实施例涉及增强现实设备的图像处理技术领域,更具体地,涉及增强现实设备的图像优化方法、装置、电子设备及系统。
背景技术
近年来,增强现实(Augmented Reality,下文简称为AR)技术逐渐兴起,AR应用越来越受到大众的欢迎,相应的AR眼镜的需求与日俱增。
人们在佩戴AR眼镜的过程中也会出现一些问题,例如,当AR眼镜的佩戴者在使用的过程中与人交谈时,面部肌肉自然会出现舒张,面部肌肉的舒张又会造成AR眼镜上下抖动,从而使得AR眼镜中的图像来回晃动,严重影响了使用者的使用体验。
基于上述缺点,为了提高消费者的使用体验,解决因佩戴者的交谈带来的图像抖动是亟需解决的问题。
发明内容
本公开实施例的一个目的是提供一种增强现实设备的图像优化方法、装置、电子设备及系统的新的技术方案。
根据本公开的第一方面,提供了一种增强现实设备的图像优化方法,所述方法包括:获取所述增强现实设备的加速度数据;根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,其中,所述运动状态信息包括所述佩戴者处于头部转动状态或者头部静止状态;在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度;根据所述目标加速度对所述增强现实设备的待显示图像进行补偿。
可选地,所述根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,包括:根据所述加速度数据,得到所述增强现实设备相对于初始状态的实际位移;在所述实际位移大于等于预设值时,确定所述所述佩戴者处于头部转动状态,在所述实际位移小于预设值时,确定所述佩戴者处于静止状态。
可选地,所述在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度,包括:获取第一方向的第一加速度和第二方向上的第二加速度,所述第一加速度为所述佩戴者的头部转动产生的加速度,所述第二加速度为所述增强现实眼镜的实际运动方向的加速度;对所述第一加速度和第二加速度进行矢量计算,得到所述目标加速度。
可选地,对所述第一加速度和第二加速度进行矢量计算,得到所述目标加速度,包括:在所述第一加速度和所述第二加速度的大小相等方向相同的情况下,确定所述目标加速度为零。
可选地,在确定所述增强现实设备的佩戴者的运动状态信息之后,所述方法还包括:在所述佩戴者处于头部静止状态的情况下,确定所述增强现实设备的加速度数据为目标加速度;根据所述目标加速度对所述增强现实设备的待显示图像进行优化补偿。
可选地,所述根据所述目标加速度对所述增强现实设备的待显示图像进行补偿,包括:对所述目标加速度进行积分运算,得到所述增强现实设备的位移值,以及,根据所述目标加速度的方向信息得到所述增强现实设备的位移方向;根据所述位移值对所述待显示图像进行位移补偿,以及,根据所述位移方向对所述待显示图像进行方向补偿。
根据本公开的第二方面,还提供了一种增强现实设备的图像优化装置,所述装置包括:数据获取模块,用于获取所述增强现实设备的加速度数据;数据处理模块,用于根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,其中,所述运动状态信息包括所述佩戴者处于头部转动状态或者头部静止状态;加速度计算模块,用于在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度;补偿模块,用于根据所述目标加速度对所述增强现实设备的待显示图像进行补偿。
根据本公开的第三方面,还提供了一种电子设备,包括存储器和处理器,所述存储器用于存储计算机程序;所述处理器用于执行所述计算机程序,以实现根据第一方面中任意一项所述的方法。
根据本公开的第四方面,还提供了一种增强现实设备的图像优化系统,包括:增强现实眼镜,用于显示待显示图像;加速度传感器,所述加速度传感器与所述增强现实眼镜固定设置,所述加速度传感器用于采集所述增强现实眼镜的加速度数据;控制器,所述控制器连接所述增强现实眼镜和所述加速度传感器,用于执行第一方面中任意一项所述的方法。
根据本公开的第五方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序在被处理器执行时实现根据本公开的第一方面所述的方法。
本公开实施例的一个有益效果在于,本实施例的方法能够根据加速度数据,确定增强现实设备的佩戴者的运动状态信息,在佩戴者处于头部转动状态的情况下,获取增强现实设备的目标加速度,根据目标加速度对增强现实设备的待显示图像进行补偿,能够很好的解决由于佩戴者说话时的抖动带来的图像抖动问题,提高用户体验。
通过以下参照附图对本公开的示例性实施例的详细描述,本公开实施例的其它特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本公开的实施例,并且连同其说明一起用于解释本公开实施例的原理。
图1为本实施例提供的一种增强现实设备的图像优化方法的步骤流程图;
图2为本实施例提供的一种增强现实设备的图像优化方法的另一步骤流程图;
图3为本实施例提供的一种增强现实设备的图像优化装置的结构框图;
图4是根据一个实施例的电子设备的方框原理图;
图5是根据一个实施例的增强现实设备的图像优化系统的硬件结构示意图;
图6是根据一个实施例的计算目标加速度的矢量图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它例子可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
本公开实施例的一个应用场景为用户使用增强现实眼镜的场景。
在实现的过程中,在用户使用增强现实眼镜(以下称为AR眼镜),且正在与他人交谈的情况下,会出现因为面部肌肉的运动导致增强现实眼镜的图像显示出现抖动的问题。
针对以上实施方式存在的技术问题,发明人提出了一种增强现实设备的图像优化方法、装置、电子设备及系统,通过检测AR眼镜的加速度,确定AR眼镜相对于佩戴者的相对加速度,根据该相对加速度得到AR眼镜本身的加速度,从而得到AR眼镜的位移量,根据该位移量对图像进行补偿。
下面,参照附图描述根据本发明的各个实施例和例子。
如图1所示,本实施例的增强现实设备的图像优化方法可以包括如下步骤S110~S140:
S110、获取增强现实设备的加速度数据。
本实施例中,增强现实设备可以是增强显示头盔,或者增强显示眼镜,用于为用户提供沉浸式虚拟体验。
本实施例中,为了检测到增强现实眼镜的加速度,本实施例的增强现实眼镜设置有加速度传感器,也就是说,本实施例的加速度数据由增强现实设备的加速度传感器采集得到。
在一个例子中,加速度传感器可以是三轴加速度传感器,加速度传感器可以设置在增强现实设备的中心位置,本实施例中,以增强显示设备为AR眼镜为例,加速度传感器可以设置在AR眼镜的两镜片的中间位置,从而可以获得更加准确的加速度数据。
可以理解的是加速度是矢量,也就是加速度数据是具有大小和方向的数据,本实施例中,加速度数据可以包括多个方向的加速度值,也就是说加速度数据可以同时包括整体加速度值,也可以包括多个方向上的加速度分量。
S120、根据加速度数据,确定增强现实设备的佩戴者的运动状态信息。
在一些场景中,当佩戴者在使用AR眼镜与周围人进行交谈时,有可能处于静止状态,例如佩戴者处于原地观看图像状态;佩戴者也有可能处于移动状态,例如,佩戴者跟随AR眼镜中的虚拟场景在走动或者摇头等。
可以理解的是,当佩戴者与周围人进行交谈且处于静止状态时,增强现实设备随着佩戴者的说话而抖动,也就是增强现实设备与佩戴者之间处于相对抖动状态,加速度传感器采集到的加速度数据就是说话者的面部舒张所带来的加速度。
但是当佩戴者与周围人进行交谈且处于运动状态时,加速度传感器采集到的加速度数据就是说话者的面部舒张与自身运动所带来的加速度之和,也就是说,加速度传感器采集到的加速度数据不能直接代表增强现实设备与佩戴者之间的相对加速度。
本实施例以加速度数据为基础,进行分析计算来确定增强现实设备的佩戴者的运动状态信息,具体地,参考图2,包括:
S1201、根据加速度数据,得到增强现实设备相对于初始状态的实际位移。
在一个例子中,加速度是速度的变化率,速度又是位移的变化率。即加速度是速度的导数,速度是位移的导数,因此加速度是位移的二阶导数。那么,加速度的积分是速度,速度的积分是位移,因此对加速度进行二次积分可以得到位移,即对目标加速度进行积分运算,得到增强现实设备的实际位移值。需要说明的是,在计算增强现实设备相对于初始状态的实际位移时,是通过增强现实设备的合加速度来计算的。
S1202、在实际位移大于等于预设值时,确定佩戴者处于头部转动状态,在实际位移小于预设值时,确定佩戴者处于静止状态。
在一个例子中,考虑到面部五官结构的大小限制,说话或面部抖动所带来的增强设备的位移是有限的。因此,本实施例设置预设值,通过比较实际位移与预设值的大小来确定佩戴者的运动状态信息。该预设值可以通过系统限定,也可以是根据需求自定义设置。
本实施例中,在实际位移大于等于预设值时,说明此时的增强现实设备位移值过大,确定佩戴者处于头部转动状态。在实际位移小于预设值时,即使此时有可能是由于佩戴者轻微的转动头部带来的,但是由于此位移与佩戴者面部抖动带来的位移等同,影响较小,可以忽略,因此,此时确定佩戴者处于静止状态。
S130、在佩戴者处于头部转动状态的情况下,获取增强现实设备的目标加速度。
可以理解的是,当佩戴者转动头部且说话的情况下,其加速度的组成由多个方向的加速度合成,因此,本实施例在佩戴者处于头部转动状态的情况下,通过获取第一方向的第一加速度和第二方向上的第二加速度,来获取增强现实设备的目标加速度,具体包括:获取第一方向的第一加速度和第二方向上的第二加速度,其中,第一加速度为佩戴者的头部转动产生的加速度,第二加速度为增强现实眼镜的实际运动方向的加速度;再对第一加速度和第二加速度进行矢量计算,进而得到目标加速度,该目标加速度则为佩戴者说话或其他面部动作带来的加速度。
参考图6,图6为目标加速度的计算矢量图。考虑到加速度是包括方向和大小的矢量,将第二加速度a2与第一加速度a1进行矢量相减,即可以得到目标加速度a3=a2-a1。可以理解的是,目标加速度为佩戴者说话或其他面部动作带来的加速度,则该目标加速度带来的位移是增强现实设备相对于佩戴者的偏移量,从而可以根据目标加速度对增强现实设备的待显示图像进行补偿。
在一个例子中,由于第一加速度为佩戴者的头部转动产生的加速度,第二加速度为增强现实设备的实际运动方向的加速度,所以当第一加速度和第二加速度的大小相等方向相同的情况下,说明增强现实设备的实际加速度完全是由于佩戴者的头部转动带来的,可以认为此时佩戴者仅处于转动头部的状态,不存在面部抖动带来的加速度,也就是说面部未发生抖动,此时可以确定目标加速度为零。进而无需对待显示图像进行补偿。
在一个例子中,在确定增强现实设备的佩戴者的运动状态信息之后,若佩戴者处于头部静止状态,则增强现实设备随着佩戴者的说话而抖动,也就是增强现实设备与佩戴者之间处于相对抖动状态,加速度传感器采集到的加速度数据就是说话者的面部舒张所带来的加速度。也就是说,在佩戴者处于头部静止状态的情况下,确定增强现实设备的加速度数据为目标加速度,进而根据述目标加速度对所述增强现实设备的待显示图像进行优化补偿。
S140、根据目标加速度对增强现实设备的待显示图像进行补偿。
具体地,本实施例通过对目标加速度进行积分运算,得到增强现实设备的位移值,以及,根据目标加速度的方向信息得到增强现实设备的位移方向;根据位移值对待显示图像进行位移补偿,以及,根据位移方向对所述待显示图像进行方向补偿。
在一个例子中,加速度是速度的变化率,速度又是位移的变化率。即加速度是速度的导数,速度是位移的导数,因此加速度是位移的二阶导数。那么,加速度的积分是速度,速度的积分是位移,因此对加速度进行二次积分可以得到位移,即对目标加速度进行积分运算,得到增强现实设备的位移值。
由于加速度是矢量,因此可以根据目标加速度的方向信息得到增强现实设备的位移方向,其中,以增强现实设备与佩戴者处于相对静止状态为例,当佩戴者张嘴时,增强现实设备会向上方移动,也就是加速度的方向向上,增强现实设备也向上,所以,增强现实设备的位移方向与目标加速度的位移方向一致,增强现实设备的位移量也就是根据目标加速度得到的位移值。
因此,可以根据位移值和位移方向,得到增强现实设备的位移量,位移量是与位移值大小一致,与位移方向一致的矢量。
可以理解的是,为了使显示的虚拟画面始终处于佩戴者眼睛的正前方,也就是显示的图像与佩戴者眼睛保持相对稳定,那么待显示的画面需要与增强显示眼镜的实际运动方向相反。例如:增强现实设备向上抖动位移值S,将相应的待显示图像向下移动S进行补偿;同理,当增强现实设备向下抖动位移值S时,将相应的待显示图像向上移动S进行补偿。
根据以上步骤S110~S140可知,通过本实施例的方法能够根据加速度数据,确定增强现实设备的佩戴者的运动状态信息,在佩戴者处于头部转动状态的情况下,获取增强现实设备的目标加速度,根据目标加速度对增强现实设备的待显示图像进行补偿,能够很好的解决由于佩戴者说话时的抖动带来的图像抖动问题,提高用户体验。
<设备实施例>
图3是根据一个实施例的装置的原理框图。如图3所示,该增强现实设备的图像优化装置300可以包括:
数据获取模块301,用于获取所述增强现实设备的加速度数据。
数据处理模块302,用于根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,其中,所述运动状态信息包括所述佩戴者处于头部转动状态或者头部静止状态。
加速度计算模块303,用于在佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度。
补偿模块304,用于根据所述目标加速度对所述增强现实设备的待显示图像进行补偿。
在一个实施例中,在一个实施例中,该数据处理模块302可以用于根据所述加速度数据,得到所述增强现实设备相对于初始状态的实际位移;在所述实际位移大于等于预设值时,确定所述所述佩戴者处于头部转动状态,在所述实际位移小于预设值时,确定所述佩戴者处于静止状态。
在一个实施例中,该加速度计算模块303可以用于获取第一方向的第一加速度和第二方向上的第二加速度,所述第一加速度为所述佩戴者的头部转动产生的加速度,所述第二加速度为所述增强现实眼镜的实际运动方向的加速度;对所述第一加速度和第二加速度进行矢量计算,得到所述目标加速度。
在一个实施例中,该加速度计算模块303可以用于在第一加速度和所述第二加速度的大小相等方向相同的情况下,确定所述目标加速度为零。
在一个实施例中,该加速度计算模块303可以用于在所述佩戴者处于头部静止状态的情况下,确定所述增强现实设备的加速度数据为目标加速度。
在一个实施例中,补偿模块304用于对所述目标加速度进行积分运算,得到所述增强现实设备的位移值,以及,根据所述目标加速度的方向信息得到所述增强现实设备的位移方向;根据所述位移值对所述待显示图像进行位移补偿,以及,根据所述位移方向对所述待显示图像进行方向补偿。
本实施例能够根据加速度数据,确定增强现实设备的佩戴者的运动状态信息,在佩戴者处于头部转动状态的情况下,获取增强现实设备的目标加速度,根据目标加速度对增强现实设备的待显示图像进行补偿,能够很好的解决由于佩戴者说话时的抖动带来的图像抖动问题,提高用户体验。
图4是根据另一个实施例的电子设备的硬件结构示意图。
如图4所示,该电子设备400包括处理器410和存储器420,该存储器420用于存储可执行的计算机程序,该处理器410用于根据该计算机程序的控制,执行如以上任意方法实施例的方法。
以上电子设备400的各模块可以由本实施例中的处理器410执行存储器410存储的计算机程序实现,也可以通过其他电路结构实现,在此不做限定。
本实施例能够根据增强现实设备的加速度数据在一稳定数值下的持续时间,得到增强显示设备与佩戴者的不同的相对运动状态,从而获取对应的目标加速度,根据目标加速度对待显示的图像进行补偿,能够很好的解决由于佩戴者说话时的抖动带来的图像抖动问题,提高用户体验。
本实施例还提供一种增强现实设备的图像优化系统500,参考图5,该系统包括:
增强现实眼镜501,用于显示待显示图像;
加速度传感器503,所述加速度传感器与所述增强现实眼镜固定设置,所述加速度传感器用于采集所述增强现实眼镜的加速度数据;
控制器503,所述控制器连接所述增强现实眼镜和所述加速度传感器,用于执行一种增强现实设备的图像优化方法。
本实施例能够根据加速度数据,确定增强现实设备的佩戴者的运动状态信息,在佩戴者处于头部转动状态的情况下,获取增强现实设备的目标加速度,根据目标加速度对增强现实设备的待显示图像进行补偿,能够很好的解决由于佩戴者说话时的抖动带来的图像抖动问题,提高用户体验。
本实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储计算机程序,所述计算机程序在被处理器执行时实现根据增强现实设备的图像优化方法。
本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本发明的各个方面。
这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是,通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本发明的范围由所附权利要求来限定。
Claims (10)
1.一种增强现实设备的图像优化方法,其特征在于,所述方法包括:
获取所述增强现实设备的加速度数据;
根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,其中,所述运动状态信息包括所述佩戴者处于头部转动状态或者头部静止状态;
在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度;
根据所述目标加速度对所述增强现实设备的待显示图像进行补偿。
2.根据权利要求1所述的方法,其特征在于,所述根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,包括:
根据所述加速度数据,得到所述增强现实设备相对于初始状态的实际位移;
在所述实际位移大于等于预设值时,确定所述所述佩戴者处于头部转动状态,在所述实际位移小于预设值时,确定所述佩戴者处于静止状态。
3.根据权利要求1所述的方法,其特征在于,所述在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度,包括:
获取第一方向的第一加速度和第二方向上的第二加速度,所述第一加速度为所述佩戴者的头部转动产生的加速度,所述第二加速度为所述增强现实眼镜的实际运动方向的加速度;
对所述第一加速度和第二加速度进行矢量计算,得到所述目标加速度。
4.根据权利要求3所述的方法,其特征在于,所述对所述第一加速度和第二加速度进行矢量计算,得到所述目标加速度,包括:
在所述第一加速度和所述第二加速度的大小相等方向相同的情况下,确定所述目标加速度为零。
5.根据权利要求1所述的方法,其特征在于,在确定所述增强现实设备的佩戴者的运动状态信息之后,所述方法还包括:
在所述佩戴者处于头部静止状态的情况下,确定所述增强现实设备的加速度数据为目标加速度;
根据所述目标加速度对所述增强现实设备的待显示图像进行优化补偿。
6.根据权利要求1或5所述的方法,其特征在于,所述根据所述目标加速度对所述增强现实设备的待显示图像进行补偿,包括:
对所述目标加速度进行积分运算,得到所述增强现实设备的位移值,以及,根据所述目标加速度的方向信息得到所述增强现实设备的位移方向;
根据所述位移值对所述待显示图像进行位移补偿,以及,根据所述位移方向对所述待显示图像进行方向补偿。
7.一种增强现实设备的图像优化装置,其特征在于,所述装置包括:
数据获取模块,用于获取所述增强现实设备的加速度数据;
数据处理模块,用于根据所述加速度数据,确定所述增强现实设备的佩戴者的运动状态信息,其中,所述运动状态信息包括所述佩戴者处于头部转动状态或者头部静止状态;
加速度计算模块,用于在所述佩戴者处于头部转动状态的情况下,获取所述增强现实设备的目标加速度;
补偿模块,用于根据所述目标加速度对所述增强现实设备的待显示图像进行补偿。
8.一种电子设备,包括存储器和处理器,所述存储器用于存储计算机程序;所述处理器用于执行所述计算机程序,以实现根据权利要求1-6中任意一项所述的方法。
9.一种增强现实设备的图像优化系统,其特征在于,包括:
增强现实眼镜,用于显示待显示图像;
加速度传感器,所述加速度传感器与所述增强现实眼镜固定设置,所述加速度传感器用于采集所述增强现实眼镜的加速度数据;
控制器,所述控制器连接所述增强现实眼镜和所述加速度传感器,用于执行权利要求1-6中任意一项所述的方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-6中任意一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111562281.6A CN114356082A (zh) | 2021-12-20 | 2021-12-20 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
PCT/CN2022/115157 WO2023116016A1 (zh) | 2021-12-20 | 2022-08-26 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111562281.6A CN114356082A (zh) | 2021-12-20 | 2021-12-20 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114356082A true CN114356082A (zh) | 2022-04-15 |
Family
ID=81100557
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111562281.6A Pending CN114356082A (zh) | 2021-12-20 | 2021-12-20 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN114356082A (zh) |
WO (1) | WO2023116016A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115268749A (zh) * | 2022-07-20 | 2022-11-01 | 广州视享科技有限公司 | 增强现实设备的控制方法、移动终端及防遮挡系统 |
WO2023116016A1 (zh) * | 2021-12-20 | 2023-06-29 | 歌尔股份有限公司 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9646419B2 (en) * | 2015-01-14 | 2017-05-09 | International Business Machines Corporation | Augmented reality device display of image recognition analysis matches |
CN109035308A (zh) * | 2017-06-09 | 2018-12-18 | 株式会社理光 | 图像补偿方法和装置、电子设备和计算机可读存储介质 |
CN109981983B (zh) * | 2019-03-26 | 2021-04-23 | Oppo广东移动通信有限公司 | 增强现实图像处理方法、装置、电子设备和存储介质 |
CN111355888A (zh) * | 2020-03-06 | 2020-06-30 | Oppo广东移动通信有限公司 | 视频拍摄方法、装置、存储介质以及终端 |
CN111614895B (zh) * | 2020-04-30 | 2021-10-29 | 惠州华阳通用电子有限公司 | 一种图像成像抖动补偿方法、系统及设备 |
CN114356082A (zh) * | 2021-12-20 | 2022-04-15 | 歌尔光学科技有限公司 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
-
2021
- 2021-12-20 CN CN202111562281.6A patent/CN114356082A/zh active Pending
-
2022
- 2022-08-26 WO PCT/CN2022/115157 patent/WO2023116016A1/zh unknown
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023116016A1 (zh) * | 2021-12-20 | 2023-06-29 | 歌尔股份有限公司 | 增强现实设备的图像优化方法、装置、电子设备及系统 |
CN115268749A (zh) * | 2022-07-20 | 2022-11-01 | 广州视享科技有限公司 | 增强现实设备的控制方法、移动终端及防遮挡系统 |
CN115268749B (zh) * | 2022-07-20 | 2024-04-09 | 广州视享科技有限公司 | 增强现实设备的控制方法、移动终端及防遮挡系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2023116016A1 (zh) | 2023-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7095030B2 (ja) | 仮想現実コンテンツのビデオレンダリング速度の調整および立体画像の処理 | |
US9762851B1 (en) | Shared experience with contextual augmentation | |
US20210165481A1 (en) | Method and system of interactive storytelling with probability-based personalized views | |
CN110351480B (zh) | 用于电子设备的图像处理方法、装置及电子设备 | |
CN114356082A (zh) | 增强现实设备的图像优化方法、装置、电子设备及系统 | |
JP2015095802A (ja) | 表示制御装置、表示制御方法、およびプログラム | |
CN109446912B (zh) | 人脸图像的处理方法及装置、电子设备和存储介质 | |
US11182953B2 (en) | Mobile device integration with a virtual reality environment | |
CN109923509A (zh) | 虚拟现实中的对象的协同操纵 | |
US10984571B2 (en) | Preventing transition shocks during transitions between realities | |
CN111355888A (zh) | 视频拍摄方法、装置、存储介质以及终端 | |
CN110622110A (zh) | 提供沉浸式现实内容的方法和装置 | |
CN109814710B (zh) | 数据处理方法、装置及虚拟现实设备 | |
US11792517B2 (en) | Pose tracking for rolling shutter camera | |
EP3087727A1 (en) | An emotion based self-portrait mechanism | |
CN113379896A (zh) | 三维重建方法及装置、电子设备和存储介质 | |
JP2018063567A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US20200057493A1 (en) | Rendering content | |
CN114356081A (zh) | 图像校正方法、装置、电子设备及头戴显示设备 | |
US20240112303A1 (en) | Context-Based Selection of Perspective Correction Operations | |
US20240103705A1 (en) | Convergence During 3D Gesture-Based User Interface Element Movement | |
US20230042920A1 (en) | Motion blur compensation through eye tracking | |
WO2023093704A1 (en) | Augmented reality replica of missing device interface | |
Halnum | Low-latency head-tracking for AR | |
CN117555419A (zh) | 控制方法、装置、头戴显示设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20221128 Address after: No. 500, Songling Road, Laoshan District, Qingdao, Shandong 266101 Applicant after: GOERTEK TECHNOLOGY Co.,Ltd. Address before: 261061 workshop 1, phase III, Geer Photoelectric Industrial Park, 3999 Huixian Road, Yongchun community, Qingchi street, high tech Zone, Weifang City, Shandong Province Applicant before: GoerTek Optical Technology Co.,Ltd. |