CN111580667A - 注视点显示方法及相关装置 - Google Patents

注视点显示方法及相关装置 Download PDF

Info

Publication number
CN111580667A
CN111580667A CN202010394171.2A CN202010394171A CN111580667A CN 111580667 A CN111580667 A CN 111580667A CN 202010394171 A CN202010394171 A CN 202010394171A CN 111580667 A CN111580667 A CN 111580667A
Authority
CN
China
Prior art keywords
display point
point
display
coordinates
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010394171.2A
Other languages
English (en)
Other versions
CN111580667B (zh
Inventor
吴义孝
方攀
王文东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202010394171.2A priority Critical patent/CN111580667B/zh
Publication of CN111580667A publication Critical patent/CN111580667A/zh
Application granted granted Critical
Publication of CN111580667B publication Critical patent/CN111580667B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供了一种注视点显示方法及相关装置,首先获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;然后,获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;最后,根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。可以降低注视点在显示时的抖动效果,大大提升了用户的使用体验。

Description

注视点显示方法及相关装置
技术领域
本申请涉及眼球追踪技术领域,特别是一种注视点显示方法及相关装置。
背景技术
随着技术的发展,眼球追踪技术的应用也逐渐进入大众视野,在确定眼球注视点的时候,由于外界环境的误差,往往计算出的眼球注视点会处于抖动状态,如果不对计算出的眼球注视点进行处理,会导致显示的眼球注视点一直处于抖动状态,举例来说,在对目标用户进行眼球追踪的时候,往往会因为目标用户的瞳孔位置的轻微变化、光照差异等环境因素导致算法计算出的用户的注视点一直处于轻微抖动状态,直接显示抖动的注视点会大大影响用户的使用体验。
发明内容
基于上述问题,本申请提出了一种注视点显示方法及相关装置,可以通过预设显示规则来确定最终的显示点位置,在降低注视点显示的抖动的同时还能保证其跟随性,大大提升了用户体验。
第一方面,本申请实施例提供了一种注视点显示方法,所述方法包括:
获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;
获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;
根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。
第二方面,本申请实施例提供了一种注视点显示装置,所述装置包括:
获取单元,用于获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;
距离单元,用于获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;
显示单元,用于根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。
第三方面,本申请实施例提供了一种电子设备,包括应用处理器、存储器,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述应用处理器执行,所述程序包括用于执行如本申请实施例第一方面任一项所述的方法中的步骤的指令。
第四方面,本申请实施例提供了一种计算机存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如本申请实施例第一方面任一项所述的方法。
第五方面,本申请实施例提供了一种计算机产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可见,通过上述方法,首先获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;然后,获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;最后,根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。可以降低注视点在显示时的抖动效果,大大提升了用户的使用体验。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种眼球追踪方法的示意图;
图2为本申请实施例提供的一种电子设备的结构示意图;
图3为本申请实施例提供的一种注视点显示方法的流程示意图;
图4A为本申请实施例提供的一种物理仿真模型的结构示意图;
图4B为本申请实施例提供的一种物理仿真模型的应用示意图;
图4C为本申请实施例提供的另一种物理仿真模型的应用示意图;
图4D为本申请实施例提供的另一种物理仿真模型的应用示意图;
图5为本申请实施例提供的一种注视点显示装置的功能单元组成框图;
图6为本申请实施例提供的另一种注视点显示装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
为了更好地理解本申请实施例的方案,下面先对本申请实施例可能涉及的背景技术进行介绍。
如图1所示,图1为本申请实施例所涉及的一种眼球追踪方法的示意图,O1为眼球中心,P1为瞳孔中心,G1为亮斑中心,可以通过相机获取到目标用户的眼部图像,O可以为相机的摄像头位置,通过小孔成像原理生成眼部图像,上述P1、G1在该眼部图像上反映为g1、p1,随着视线注视点的移动,p1、g1会形成不同的视线向量,每个向量对应一个唯一的视线注视点,可以通过获取眼部图像,然后根据眼部图像中的瞳孔中心和亮斑中心来确定视线向量,并根据预设的算法来确定上述视线向量对应的在屏幕上的注视点S。上述方法可以应用到VR游戏、眼球控制等多个领域,在此不做具体限定
在实际显示过程中,由于眼球追踪容易受到众多环境因素的干扰,如光照,眼球姿态的轻微位移等,注视点会以不断抖动的状态显示在屏幕上,这十分影响用户的使用体验。
本申请实施例通过获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;然后,获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;最后,根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。可以降低注视点在显示时的抖动效果,大大提升了用户的使用体验。
首先对本申请实施例的中央处理器频率的控制方法的软硬件运行环境进行说明,如图2所示。
图2为本申请实施例提供的一种电子设备的结构示意图,该电子设备200可以是具备通信能力的电子设备,该电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(User Equipment,UE),移动台(Mobile Station,MS),终端设备(terminal device)等等。本申请中的电子设备200可以包括一个或多个如下部件:处理器210、存储器220、输入设备230和输出设备240。
处理器210可以包括一个或者多个处理核心。处理器210利用通信接口连接整个终端200内的各个部分,通过运行或执行存储在存储器220内的指令、程序、代码集或指令集,以及调用存储在存储器220内的数据,执行电子设备200的各种功能和处理数据。处理器210可以包括一个或多个处理单元,例如:处理器210可以包括中央处理器(CentralProcessing Unit,CPU)、应用处理器(application processor,AP)、调制解调处理器、图形处理器(graphics processing unit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。CPU主要用于处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。本申请实施例中以中央处理器CPU为例进行说明,例如,当电子设备100在获取目标用户的眼球图像数据时,CPU可以基于上述眼球图像数据计算出注视点,并根据预设显示规则确定应当如何显示目标用户的注视点。
处理器210中可以设置存储器220,用于存储指令和数据。在一些实施例中,处理器210中的存储器220为高速缓冲存储器。该存储器220可以保存处理器210刚用过或循环使用的指令或数据。如果处理器210需要再次使用该指令或数据,可从所述存储器220中直接调用。避免重复存取,减少处理器210的等待时间,提高系统效率。
可以理解的是,上述处理器210在实际产品中可以映射为系统级芯片(System ona Chip,SOC),上述处理单元和/或接口也可以不集成到处理器210中,单独通过一块通信芯片或者电子元器件实现对应的功能。上述各模块间的接口连接关系,只是示意性说明,并不构成对电子设备200的结构的唯一限定。
存储器220可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选地,该存储器220包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器220可用于存储指令、程序、代码、代码集或指令集。存储器220可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等,该操作系统可以是安卓(Android)系统(包括基于Android系统深度开发的系统)、苹果公司开发的IOS系统(包括基于IOS系统深度开发的系统)或其它系统。存储数据区还可以存储电子设备200在使用中所创建的数据。
输入设备230可以包括摄像头,该摄像头可以为红外摄像头、摄像头阵列等,用于获取目标用户的眼部图像。
输出设备240可以包括显示屏,该显示屏用于显示各个应用程序的用户界面。显示屏通常设置在电子设备200的前面板。显示屏可被设计成为全面屏、曲面屏或异形屏。显示屏还可被设计成为全面屏与曲面屏的结合,异形屏与曲面屏的结合,本申请实施例对此不加以限定。
上面对本申请实施例的软硬件运行环境进行了介绍,下面结合图3对本申请实施例中的一种注视点显示方法进行详细说明,图3为本申请实施例提供的一种注视点显示方法的流程示意图,具体包括以下步骤:
步骤301,获取初始显示点坐标和目标用户的实时注视点坐标。
其中,上述实时注视点坐标表示在当前采样周期上述目标用户的注视点位置,上述初始显示点坐标表示在上述当前采样周期的前一个采样周期上述目标用户的注视点对应于屏幕上的显示点位置,而非特指第一个显示点的位置。需要说明的是,摄像头每个采样周期都会采集一次目标用户的眼部图像来确定注视点,如摄像时的画面为25帧,采样周期即为0.04秒,此时摄像头会每隔0.04秒采集一帧眼部图像以确定目标用户的注视点位置,并且在采集到一帧眼部图像确定注视点后会在显示屏上显示该注视点的位置。可以理解的是,实时注视点坐标表示根据眼球追踪算法计算出的目标用户当前的注视位置,此时还未确定实时注视点坐标对应的显示点坐标。
通过获取初始显示点坐标和目标用户的实时注视点坐标,可以在对目标用户的视线进行实时处理,随时启用本申请实施例的方法。
步骤302,获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离。
其中,上述相对距离为直线距离,可以设定相对距离为L,实时注视点坐标为(xi,yi),初始显示点坐标为(ai-1,bi-1),则可以通过以下公式确定上述初始显示点坐标和上述实时注视点坐标之间的相对距离:
Figure BDA0002487011500000071
其中,上述初始显示点坐标可以根据初始注视点坐标(xi-1,yi-1)来得到,上述初始注视点坐标表示当前采样周期的前一个采样周期采集到的目标用户的注视点位置。
步骤303,根据所述相对距离和预设显示规则确定目标显示点坐标并显示。
其中,上述预设显示规则包括通过物理仿真模型来确定目标显示点,该物理仿真模型为以物理规则连接上述初始显示点坐标和上述实时注视点坐标的模型,上述目标显示点表示应当在显示屏上实际显示的目标用户的注视位置。
上述物理仿真模型可以包括第一连接部件、第二连接部件和弹性部件,上述第一连接部件的一端连接上述初始显示点坐标,上述第一连接部件的另一端连接上述弹性部件的一端,上述弹性部件的另一端连接上述第二连接部件的一端,上述第二连接部件的另一端连接上述实时注视点坐标。
可选的,如图4A所示,上述第一连接部件可以为长度为L1的柔性绳,上述第二连接部件可以为长度为L2的柔性绳,上述弹性部件可以为原始长度为L3、弹性系数为k的弹簧,该弹性系数k可以根据目标需求自行设定,需要说明的是,上述第一连接部件和第二连接部件的形变可以忽略不计,上述只是举例说明物理仿真模型的结构和连接方式,并不代表对物理仿真模型的限定。
以上述举例的物理仿真模型对本申请实施例中的注视点显示方法进行说明,可分为两种情况,一种情况为上述相对距离L小于或等于上述第一弹性部件长度、上述弹性部件长度和上述第二连接部件长度之和L1+L2+L3,另一种情况为上述相对距离L大于上述第一弹性部件长度、上述弹性部件长度和上述第二连接部件长度之和L1+L2+L3,下面依次进行说明。
当L≤L1+L2+L3时,如图4B所示,以初始显示点为圆心,L1+L2+L3为半径画圆,只要目标用户的实时注视点位于圆的范围内,都可以将初始显示点作为目标显示点坐标并显示,具体的,在第一个初始显示点坐标已经确定的基础上,第一时间戳的实时注视点坐标与上述初始显示点坐标的相对距离L小于或等于上述第一弹性部件长度、上述弹性部件长度和上述第二连接部件长度之和L1+L2+L3,那么第一时间戳的注视点对应的目标显示点仍然为上述初始显示点,而在计算第二时间戳的实时注视点的目标显示点时,会将第一时间戳的注视点对应的目标显示点坐标作为初始显示点坐标,这里的第二时间戳可以理解为当前采样周期,而第一时间戳为上述当前采样周期的前一个采样周期,以此类推,可以根据第N帧的显示点坐标和第N+1帧的实时注视点坐标确定实时的目标显示点坐标;
可见,当实时注视点在小范围内抖动时,可以基于初始显示点坐标和实时注视点坐标之间的相对距离显示一个不动的显示点,大大提升了用户的观看体验。
当L>L1+L2+L3时,同样以初始显示点为圆心,L1+L2+L3为半径画圆,此时实时注视点位于圆的范围外,需要先确定目标显示点坐标,设定目标显示点坐标为(ai,bi),可以通过以下公式确定目标显示点坐标:
Figure BDA0002487011500000081
确定目标显示点坐标后,则可以生成上述初始显示点坐标移动至上述目标显示点坐标的移动轨迹动画并显示,该移动轨迹可以为上述初始显示点直线移动至上述目标显示点。
具体的,若相对距离L超出上述第一弹性部件长度、上述弹性部件长度和上述第二连接部件长度之和L1+L2+L3的超出值小于一定阈值,如图4C所示,由于弹簧的形变量较小,则该移动轨迹动画的时长较长,即弹簧将上述初始显示点移动至上述目标显示点的移动速度较慢;
若相对距离L超出上述第一弹性部件长度、上述弹性部件长度和上述第二连接部件长度之和L1+L2+L3的超出值大于一定阈值,如图4D所示,由于弹簧的形变量较大,则该移动轨迹动画的时长短,即弹簧将上述初始显示点移动至上述目标显示点的移动速度较快。
可见,通过物理仿真模型来确定目标显示点,可以在避免显示点在小范围内抖动的同时还能在目标用户实际需要移动注视点时保证显示点能跟随目标用户的实时注视位置的移动而移动,大大提升了用户体验。
进一步的,在生成移动轨迹动画方面,可选的,可以从预设的形变-速度数据库中选取所述弹性部件的形变量对应的牵引速度,并将所述初始显示点坐标以所述牵引速度移动至所述目标显示点坐标。
在生成移动轨迹动画方面,可选的,可以根据所述相对距离、所述初始显示点坐标与所述实时注视点坐标之间的时间差确定注视位移速度;
将所述初始显示点坐标以所述注视位移速度移动至所述目标显示点坐标。
可见,根据相对距离确定初始显示点移动到目标显示点的移动速度,可以保证注视点显示的跟随性,保证其跟随目标用户的注视点,大大提升了用户体验。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,上述方法可以独立实现也可以结合实现,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,下面结合图5对本申请实施例中的一种注视点显示装置进行详细说明,图5为本申请实施例提供的一种注视点显示装置的功能单元组成框图,包括:
获取单元510,用于获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;
距离单元520,用于获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;
显示单元530,用于根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。
其中,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
在采用集成的单元的情况下,下面结合图6对本申请实施例中的另一种注视点显示装置600进行详细说明,该注视点显示装置600应用于支持应用程序运行功能的电子设备,所述电子设备包括处理器等,所述注视点显示装置600包括处理单元601和通信单元602,其中,所述处理单元601,用于执行如上述方法实施例中的任一步骤,且在执行诸如发送等数据传输时,可选择的调用所述通信单元602来完成相应操作。
其中,所述注视点显示装置600还可以包括存储单元603,用于存储电子设备的程序代码和数据。所述处理单元601可以是中央处理器,所述通信单元602可以是触控显示屏或者收发器,存储单元603可以是存储器。
可以理解的是,由于方法实施例与装置实施例为相同技术构思的不同呈现形式,因此,本申请中方法实施例部分的内容应同步适配于装置实施例部分,此处不再赘述。上述注视点显示装置500和注视点显示装置600均可执行上述实施例包括的全部的注视点显示方法。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括电子设备。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括电子设备。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种注视点显示方法,其特征在于,所述方法包括:
获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;
获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;
根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。
2.根据权利要求1所述的方法,其特征在于,所述预设显示规则包括以物理规则连接所述初始显示点坐标和所述实时注视点坐标的物理仿真模型,所述物理仿真模型包括第一连接部件、第二连接部件和弹性部件;所述根据所述相对距离和预设显示规则确定目标显示点坐标并显示,包括:
根据所述相对距离采用所述物理仿真模型确定所述目标显示点坐标并显示。
3.根据权利要求2所述的方法,其特征在于,所述根据所述相对距离采用所述物理仿真模型确定所述目标显示点坐标并显示,包括:
当所述相对距离小于或等于所述第一弹性部件长度、所述弹性部件长度和所述第二连接部件长度之和时,将所述初始显示点坐标确定为所述目标显示点坐标并显示。
4.根据权利要求2所述的方法,其特征在于,所述根据所述相对距离采用所述物理仿真模型确定所述目标显示点坐标并显示,包括:
当所述相对距离大于所述第一连接部件长度、所述弹性部件长度和所述第二连接部件长度之和时,将所述第一连接部件长度、所述弹性部件长度和所述第二连接部件长度之和以及所述弹性部件的弹性系数、所述初始显示点坐标和所述实时注视点坐标代入预设公式,根据所述预设公式的输出确定所述目标显示点坐标并显示。
5.根据权利要求4所述的方法,其特征在于,所述将所述第一连接部件长度、所述弹性部件长度和所述第二连接部件长度之和以及所述弹性部件的弹性系数、所述初始显示点坐标和所述实时注视点坐标代入预设公式,根据所述预设公式的输出确定所述目标显示点坐标并显示,包括:
生成所述初始显示点坐标移动至所述目标显示点坐标的移动轨迹动画并显示。
6.根据权利要求5所述的方法,其特征在于,所述生成将所述初始显示点坐标移动至所述目标显示点坐标的移动轨迹动画并显示,包括:
从预设的形变-速度数据库中选取所述弹性部件的形变量对应的牵引速度;
将所述初始显示点坐标以所述牵引速度移动至所述目标显示点坐标。
7.根据权利要求5所述的方法,其特征在于,所述生成将所述初始显示点坐标移动至所述目标显示点坐标的移动轨迹动画并显示,包括:
根据所述相对距离、所述初始显示点坐标与所述实时注视点坐标之间的时间差确定注视位移速度;
将所述初始显示点坐标以所述注视位移速度移动至所述目标显示点坐标。
8.一种注视点显示装置,其特征在于,所述装置包括:
获取单元,用于获取初始显示点坐标和目标用户的实时注视点坐标,所述实时注视点坐标表示在当前采样周期所述目标用户的注视点位置,所述初始显示点坐标表示在所述当前采样周期的前一个采样周期所述目标用户的注视点对应于屏幕上的显示点位置;
距离单元,用于获取所述初始显示点坐标和所述实时注视点坐标之间的相对距离;
显示单元,用于根据所述相对距离和预设显示规则确定目标显示点坐标并显示,所述预设显示规则用于通过所述相对距离约束所述目标显示点的位置。
9.一种电子设备,其特征在于,包括应用处理器、存储器,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述应用处理器执行,所述程序包括用于执行如权利要求1~7任一项所述的方法中的步骤的指令。
10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1~7任一项所述的方法。
CN202010394171.2A 2020-05-11 2020-05-11 注视点显示方法及相关装置 Active CN111580667B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010394171.2A CN111580667B (zh) 2020-05-11 2020-05-11 注视点显示方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010394171.2A CN111580667B (zh) 2020-05-11 2020-05-11 注视点显示方法及相关装置

Publications (2)

Publication Number Publication Date
CN111580667A true CN111580667A (zh) 2020-08-25
CN111580667B CN111580667B (zh) 2023-07-14

Family

ID=72126450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010394171.2A Active CN111580667B (zh) 2020-05-11 2020-05-11 注视点显示方法及相关装置

Country Status (1)

Country Link
CN (1) CN111580667B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115942049A (zh) * 2022-08-26 2023-04-07 北京博雅睿视科技有限公司 一种面向vr视频的视角切换方法、装置、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000331184A (ja) * 1999-05-20 2000-11-30 Namco Ltd 画像生成装置及び情報記憶媒体
CN101576771A (zh) * 2009-03-24 2009-11-11 山东大学 基于非均匀样本插值的眼动仪定标方法
CN110209277A (zh) * 2019-05-29 2019-09-06 华南理工大学 一种仅基于瞳孔特征的头戴式视线跟踪方法
CN110969116A (zh) * 2019-11-28 2020-04-07 Oppo广东移动通信有限公司 注视点位置确定方法及相关装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000331184A (ja) * 1999-05-20 2000-11-30 Namco Ltd 画像生成装置及び情報記憶媒体
CN101576771A (zh) * 2009-03-24 2009-11-11 山东大学 基于非均匀样本插值的眼动仪定标方法
CN110209277A (zh) * 2019-05-29 2019-09-06 华南理工大学 一种仅基于瞳孔特征的头戴式视线跟踪方法
CN110969116A (zh) * 2019-11-28 2020-04-07 Oppo广东移动通信有限公司 注视点位置确定方法及相关装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115942049A (zh) * 2022-08-26 2023-04-07 北京博雅睿视科技有限公司 一种面向vr视频的视角切换方法、装置、设备及介质

Also Published As

Publication number Publication date
CN111580667B (zh) 2023-07-14

Similar Documents

Publication Publication Date Title
US11797084B2 (en) Method and apparatus for training gaze tracking model, and method and apparatus for gaze tracking
US11383166B2 (en) Interaction method of application scene, mobile terminal, and storage medium
WO2019109758A1 (zh) 一种视频图像处理方法及装置
CN112199140B (zh) 应用插帧方法及相关装置
CN110780742B (zh) 眼球追踪处理方法及相关装置
CN111833461B (zh) 一种图像特效的实现方法、装置、电子设备及存储介质
US20190362559A1 (en) Augmented reality method for displaying virtual object and terminal device therefor
US20220284597A1 (en) Method and apparatus for displaying object in video, and electronic device and computer readable storage medium
JP2021531589A (ja) 目標対象の動作認識方法、装置及び電子機器
EP4332904A1 (en) Image processing method and apparatus, electronic device, and storage medium
CN110969116A (zh) 注视点位置确定方法及相关装置
CN107065164B (zh) 图像展示方法及装置
CN111580667B (zh) 注视点显示方法及相关装置
WO2024055957A1 (zh) 拍摄参数的调整方法、装置、电子设备和可读存储介质
WO2017173583A1 (zh) 一种终端显示防抖方法及装置
CN113342157A (zh) 眼球追踪处理方法及相关装置
WO2023130809A1 (zh) 画面显示方法、装置、终端、存储介质及程序产品
CN114063761B (zh) 注视点显示方法及相关装置
CN117319725A (zh) 字幕的显示方法、装置、设备及介质
CN110941344B (zh) 获取注视点数据的方法及相关装置
CN112473138A (zh) 游戏的显示控制方法及装置、可读存储介质、电子设备
CN114201046B (zh) 注视方向优化方法、装置、电子设备及存储介质
CN111905365B (zh) 拖动游戏场景的方法、装置和电子设备
CN114288647B (zh) 基于AI Designer的人工智能游戏引擎、游戏渲染方法及装置
US12033283B2 (en) Virtual reality simulator and virtual reality simulation program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant