CN113487711B - 虚拟形象的眨眼控制方法、装置、电子设备及存储介质 - Google Patents
虚拟形象的眨眼控制方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113487711B CN113487711B CN202110835608.6A CN202110835608A CN113487711B CN 113487711 B CN113487711 B CN 113487711B CN 202110835608 A CN202110835608 A CN 202110835608A CN 113487711 B CN113487711 B CN 113487711B
- Authority
- CN
- China
- Prior art keywords
- blink
- indication
- real person
- avatar
- frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 230000006870 function Effects 0.000 claims description 63
- 230000004397 blinking Effects 0.000 claims description 33
- 238000004891 communication Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000006399 behavior Effects 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005315 distribution function Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004399 eye closure Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000009827 uniform distribution Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开关于一种虚拟形象的眨眼控制方法、装置、电子设备及存储介质,包括:获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼,使得虚拟形象的眨眼频率的发生概率和真人眨眼频率的发生概率趋近一致,提高了虚拟形象的眨眼真实感。
Description
技术领域
本公开涉及互联网技术领域,尤其涉及虚拟形象的眨眼控制方法、装置、电子设备及存储介质。
背景技术
随着虚拟形象在直播、短视频、游戏等新兴领域的广泛应用,出现了虚拟形象的类人行为控制技术,在类人行为中,眨眼行为是一个看似简单却很难模仿的行为。传统虚拟形象的眨眼控制方式,一般是采用固定的眨眼频率,但这种方式较为机械,难以保证虚拟形象的眨眼真实感。
发明内容
本公开提供一种虚拟形象的眨眼控制方法、装置、电子设备及存储介质,以至少解决相关技术中虚拟形象的眨眼真实感较低的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种虚拟形象的眨眼控制方法,包括:
获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;
从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;
基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼。
在其中一个实施例中,在所述获取针对真人眨眼频率的指示标签集之前,所述方法还包括:
统计历史时段内不同真人眨眼频率的发生次数;
确定不同真人眨眼频率的发生次数与所述历史时段对应的总发生次数的发生次数比值;
确定拟合各发生次数比值的函数,并基于所述函数确定各真人眨眼频率的发生概率。
在其中一个实施例中,所述确定拟合各发生次数比值的函数,包括:
获取所述各真人眨眼频率和所述各真人眨眼频率自身对应的发生次数比值的乘积;
将各乘积之和作为泊松概率函数的参数,得到参数为所述各乘积之和的泊松概率函数;
将参数为所述各乘积之和的泊松概率函数作为拟合所述各发生次数比值的函数。
在其中一个实施例中,在所述统计历史时段内不同真人眨眼频率的发生次数之前,所述方法还包括:
调用终端的摄像头采集眼部图像;
基于所述眼部图像,确定历史时段内不同真人眨眼频率的发生次数。
在其中一个实施例中,所述方法还包括:
根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
在其中一个实施例中,在所述指示标签集所包括的指示标签是0至1的随机数的情况下,所述根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时,包括:
确定所述最大值和所述最小值的差值;
获取所述差值与选取的所述任一指示标签的乘积,并将所述乘积与所述最小值的和作为用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
根据本公开实施例的第二方面,提供一种虚拟形象的眨眼控制装置,包括:
指示标签集获取模块,被配置为执行获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;
指示标签处理模块,被配置为执行从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;
眨眼控制模块,被配置为执行基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼。
在其中一个实施例中,所述装置还包括函数处理模块,被配置为执行统计历史时段内不同真人眨眼频率的发生次数;确定不同真人眨眼频率的发生次数与所述历史时段对应的总发生次数的发生次数比值;确定拟合各发生次数比值的函数,并基于所述函数确定各真人眨眼频率的发生概率。
在其中一个实施例中,所述函数处理模块,被配置为执行获取所述各真人眨眼频率和所述各真人眨眼频率自身对应的发生次数比值的乘积;将各乘积之和作为泊松概率函数的参数,得到参数为所述各乘积之和的泊松概率函数;将参数为所述各乘积之和的泊松概率函数作为拟合所述各发生次数比值的函数。
在其中一个实施例中,所述装置还包括真人眨眼次数处理模块,被配置为执行调用终端的摄像头采集眼部图像;基于所述眼部图像,确定历史时段内不同真人眨眼频率的发生次数。
在其中一个实施例中,所述装置还包括眨眼耗时处理模块,被配置为执行根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
在其中一个实施例中,在所述指示标签集所包括的指示标签是0至1的随机数的情况下,所述眨眼耗时处理模块,被配置为执行确定所述最大值和所述最小值的差值;获取所述差值与选取的所述任一指示标签的乘积,并将所述乘积与所述最小值的和作为用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
根据本公开实施例的第三方面,提供一种电子设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现如第一方面或第一方面的任一种可能实现方式所述的虚拟形象的眨眼控制方法。
根据本公开实施例的第四方面,提供一种存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面或第一方面的任一种可能实现方式所述的虚拟形象的眨眼控制方法。
根据本公开实施例的第五方面,提供一种计算机程序产品,所述程序产品包括计算机程序,所述计算机程序存储在可读存储介质中,设备的至少一个处理器从所述可读存储介质读取并执行所述计算机程序,使得设备执行第一方面的任一项实施例中所述的虚拟形象的眨眼控制方法。
本公开的实施例提供的技术方案至少带来以下有益效果:获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼,使得虚拟形象的眨眼频率的发生概率和真人眨眼频率的发生概率趋近一致,提高了虚拟形象的眨眼真实感。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的一种虚拟形象的眨眼控制方法的示意图。
图2是根据一示例性实施例示出的一种虚拟形象的眨眼控制方法的流程图。
图3是根据一示例性实施例示出的一种虚拟形象的眨眼控制方法的流程图。
图4是根据一示例性实施例示出的一种虚拟形象的眨眼控制装置的框图。
图5是根据一示例性实施例示出的一种电子设备的内部结构图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。
本公开所提供的虚拟形象的眨眼控制方法,可以应用于手机、笔记本电脑、平板电脑等电子设备中,也可以应用于服务器等设备中。以下结合图1和图2、且该方法应用于电子设备为例,介绍本公开提供的上述方法,上述方法可以包括以下步骤。
在步骤S201中,获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比。
其中,各真人眨眼频率的发生概率可以记为P(X=k),k=0,1,2……,k为真人眨眼频率,例如,P(X=0)表示真人眨眼频率为0次/T的发生概率;若P(X=0)=0.2、P(X=1)=0.3、P(X=2)=0.3、P(X=3)=0.2,那么各真人眨眼频率的发生概率的比值为P(X=0):P(X=1):P(X=2):P(X=3)=2:3:3:2。
各指示标签均有对应的真人眨眼频率,用于指示虚拟形象的眨眼频率;指示标签可以采用随机数、随机字母等表示;由全部指示标签形成的指示标签集中,各指示标签是被等概率取出的,例如由0至10这10个自然数形成的指示标签集中,任一自然数均是被等概率取出的,又例如在a至z这26个小写字母形成的指示标签集中,任一小写字母是被等概率取出的。
基于上述各真人眨眼频率的发生概率的比值,可以对指示标签集进行划分,形成多个指示标签子集;不同的指示标签子集对应不同的真人眨眼频率,且指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比。以图1为例介绍该内容:按照P(X=0):P(X=1):P(X=2):P(X=3)=2:3:3:2的比例对指示标签集进行划分后,形成4个指示标签子集a、b、c和d,其中,各指示标签子集对应不同的真人眨眼频率,如指示标签子集a对应0次/T的真人眨眼频率、指示标签子集b对应1次/T的真人眨眼频率、指示标签子集c对应2次/T的真人眨眼频率、指示标签子集d对应3次/T的真人眨眼频率;并且,指示标签子集a、b、c和d各自包含的指示标签数之比为2:3:3:2。若上述指示标签为随机数,那么对应的指示标签集为数值区间,如[0,10];对应地,指示标签子集也为数值区间(可以称为数值子区间),若按照P(X=0):P(X=1):P(X=2):P(X=3)=2:3:3:2的比例对[0,10]进行划分,形成的指示标签子集a、b、c和d分别为[0,2]、[2,5]、[5,8]、[8,10]。
在步骤S202中,从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集。
具体地,若指示标签集是数值区间,对应地,指示标签子集是数值子区间,那么电子设备可以将所选的任一数值与各个数值子区间的上下限进行比较,以得到该所选的任一数值所属的数值子区间。若指示标签集是字母集,对应地,指示标签子集是字母子集合,那么电子设备可以将所选的任一字母与各字母子集中的字母进行比较,以确定该所选的字母所属的字母子集。
在步骤S203中,基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼。
以指示标签集为[0,10]的数值区间为例介绍,若电子设备可以从[0,10]中选择的随机数为1,那么可以确定所选的随机数落在[0,2]区间(指示标签子集a)内,由于[0,2]区间所对应的真人眨眼频率为0次/T,因此,可以将0次/T作为虚拟形象在当前单位时间的眨眼频率,并控制虚拟形象按照该眨眼频率进行眨眼。另外,电子设备可以执行步骤S201至步骤S203,以确定虚拟形象在下一单位时间的眨眼频率。
上述虚拟形象的眨眼控制方法中,获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼,使得虚拟形象的眨眼频率的发生概率和真人眨眼频率的发生概率趋近一致,提高了虚拟形象的眨眼真实感。
在其中一个实施例中,如图3所示,电子设备在获取针对真人眨眼频率的指示标签集之前,还可以执行如下步骤:步骤S301,统计历史时段内不同真人眨眼频率的发生次数;步骤S302,确定不同真人眨眼频率的发生次数与所述历史时段对应的总发生次数的发生次数比值;步骤S303,确定拟合各发生次数比值的函数,并基于所述函数确定各真人眨眼频率的发生概率。
示例性地,若历史时段为历史30分钟,真人眨眼频率的单位T为分钟,那么对这历史30分钟的统计,可以得到各分钟的真人眨眼频率,例如,第1分钟的真人眨眼频率为0次/T,第2分钟的真人眨眼频率为2次/T、第3分钟的真人眨眼频率为1次/T、……、第33分钟的真人眨眼频率为3次/T。
接着,通过上述30分钟的各分钟的真人眨眼频率,可以确定0次/T、1次/T、2次/T和3次/T的发生次数分别为6次、9次、9次和6次。因此,可以得到真人眨眼频率为0次/T的发生次数与总发生次数的比值(即发生次数比值)为6/30,真人眨眼频率为1次/T的发生次数与总发生次数的比值(即发生次数比值)为9/30,真人眨眼频率为2次/T的发生次数与总发生次数的比值(即发生次数比值)为9/30,真人眨眼频率为3次/T的发生次数与总发生次数的比值(即发生次数比值)为6/30。
电子设备得到各真人眨眼频率的发生次数比值后,可以确定拟合各发生次数比值的函数,并基于该函数确定各真人眨眼频率的发生概率。
上述方式中,统计历史时段的真人眨眼频率的发生次数,基于各真人眨眼频率的发生次数与总发生次数的比值确定拟合函数,使得基于该函数确定的真人眨眼频率的发生概率更符合真人眨眼情况,提高虚拟形象的眨眼真实感。
进一步地,电子设备在确定拟合各发生次数比值的函数时,具体可以执行如下步骤:获取所述各真人眨眼频率和所述各真人眨眼频率自身对应的发生次数比值的乘积;将各乘积之和作为泊松概率函数的参数,得到参数为所述各乘积之和的泊松概率函数;将参数为所述各乘积之和的泊松概率函数作为拟合所述各发生次数比值的函数。
示例性地,电子设备得到30分钟内各分钟的真人眨眼频率后,可以确定0次/T、1次/T、2次/T和3次/T的发生次数分别为6次、9次、9次和6次,对应地,0次/T、1次/T、2次/T和3次/T对应的发生次数比值为6/30、9/30、9/30、6/30。因此,各真人眨眼频率和真人眨眼频率自身对应的发生次数比值的乘积分别为0×6/30、1×9/30、2×9/30、3×6/30。将上述各乘积之和作为泊松概率函数的参数λ=1.5,将参数λ=1.5的泊松概率函数作为拟合各真人眨眼频率对应的发生次数比值的函数。
上述方式中,仅需计算泊松分布函数的参数λ,即可得到拟合各真人眨眼频率对应的发生次数比值的函数,计算量小,便于部署在运算资源有限的移动终端等电子设备上。
进一步地,电子设备在统计历史时段内不同真人眨眼频率的发生次数之前,可以执行如下步骤:调用终端的摄像头采集眼部图像;基于所述眼部图像,确定历史时段内不同真人眨眼频率的发生次数。
示例性地,电子设备可以通过已有接口(如,ARKit接口,增强现实工具包接口)获取摄像头采集的用户眼部图像,该用户眼部图像的表情系数可以反映用户睁眼和闭眼情况,进而反映用户眨眼情况。
上述方式中,电子设备可以采集用户眼部图像确定历史时段的真人眨眼频率,得到更为真实的用户眨眼数据,提高虚拟形象的眨眼真实感。
在其中一个实施例中,电子设备还可以执行如下步骤:根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
示例性地,若统计确定的单次眨眼耗时的最小值为0.4秒、最大值为0.6秒,电子设备可以将最小值和最大值的平均值作为控制虚拟形象进行眨眼的单次眨眼耗时,也可以在最大值和最小值之间选取任一值作为控制虚拟形象进行眨眼的单次眨眼耗时。
在上述方式中,基于统计得到的单次眨眼耗时的最小值和最大值,确定单次眨眼耗时,提高虚拟形象的眨眼真实感。
进一步地,在所述指示标签集所包括的指示标签是0至1的随机数的情况下,电子设备根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时,具体可以执行如下步骤:确定所述最大值和所述最小值的差值;获取所述差值与选取的所述任一指示标签的乘积,并将所述乘积与所述最小值的和作为用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
以统计得到的单次眨眼耗时的最大值为max、最小值为min、选取的任一随机数为r为例介绍:若基于对历史时段内的各次眨眼耗时的统计,确定眨眼耗时是一个在min到max时间之间的均匀概率函数,那么电子设备可以形成(max-min)×r+min的均匀概率函数,并基于该均匀概率函数确定当前单位时间的单次眨眼耗时。
上述方式中,通过统计得到的单次眨眼耗时的最大值和统计最小值的差值、以及差值和随机数的乘积、该乘积与最小值的和确定当前单位时间的单次眨眼耗时,提高虚拟形象的眨眼真实感。
本公开还提供一应用实例,该应用实例主要包括:电子设备采集用户的眨眼数据,用户眨眼数据为通过ARKit接口可以获取摄像头内当前用户眼部图像的表情系数,其中8和9号参数就是左右眼闭眼的参数。电子设备根据真人眨眼频率的发生次数,找到真人眨眼频率的分布特征为泊松分布特征,将泊松概率函数作为描述真人眨眼频率的发生概率的函数,也即其中参数λ是每秒钟真人眨眼平均次数。
电子设备根据每次眨眼动作完成的耗时,得到不同眨眼耗时的发生次数,并确定单次眨眼耗时的分布特征为均匀分布特征,描述单次眨眼耗时的函数定为均匀概率函数,也即min(单次眨眼耗时的统计最小值)到max(单次眨眼耗时的统计最大值)之间的均匀概率函数。
电子设备在统计出真人眨眼的每秒钟平均眨眼次数后,可以确定泊松概率函数;并且电子设备统计出单次眨眼耗时的最小值min和最大值max。
根据泊松概率函数,可以确定真人眨眼频率每秒0次的概率为P(0),每秒1次的概率为P(1)…,接着在当前秒取一个[0,1]之间的随机数r,然后判断r<P(0)时眨0次,r>=P(0)且r<P(1)时眨1次,依次类推。进一步地,单次眨眼耗时对应的函数为(max-min)×r+min。
经过上述方式,电子设备可以确定虚拟形象在当前秒的眨眼次数和单次眨眼耗时,并控制虚拟形象进行眨眼,使得虚拟形象的眨眼频率和动作耗时都和真人在概率分布上完全一致,提高虚拟形象的眨眼真实感,从而达到模拟真人眨眼的效果。
需要说明的是,上述步骤的具体限定可以参见上文对一种虚拟形象的眨眼控制方法的具体限定,在此不再赘述。
应该理解的是,虽然图2至图3的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2至图3中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
图4是根据一示例性实施例示出的一种虚拟形象的眨眼控制装置框图,该装置包括:
指示标签集获取模块401,被配置为执行获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;
指示标签处理模块402,被配置为执行从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;
眨眼控制模块403,被配置为执行基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,控制虚拟形象进行眨眼。
在其中一个实施例中,所述装置还包括函数处理模块,被配置为执行统计历史时段内不同真人眨眼频率的发生次数;确定不同真人眨眼频率的发生次数与所述历史时段对应的总发生次数的发生次数比值;确定拟合各发生次数比值的函数,并基于所述函数确定各真人眨眼频率的发生概率。
在其中一个实施例中,所述函数处理模块,被配置为执行获取所述各真人眨眼频率和所述各真人眨眼频率自身对应的发生次数比值的乘积;将各乘积之和作为泊松概率函数的参数,得到参数为所述各乘积之和的泊松概率函数;将参数为所述各乘积之和的泊松概率函数作为拟合所述各发生次数比值的函数。
在其中一个实施例中,所述装置还包括真人眨眼次数处理模块,被配置为执行调用终端的摄像头采集眼部图像;基于所述眼部图像,确定历史时段内不同真人眨眼频率的发生次数。
在其中一个实施例中,所述装置还包括眨眼耗时处理模块,被配置为执行根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
在其中一个实施例中,在所述指示标签集所包括的指示标签是0至1的随机数的情况下,所述眨眼耗时处理模块,被配置为执行确定所述最大值和所述最小值的差值;获取所述差值与选取的所述任一指示标签的乘积,并将所述乘积与所述最小值的和作为用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图5是根据一示例性实施例示出的一种用于虚拟形象的眨眼控制方法的电子设备500的框图。例如,电子设备500可以是移动电话、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。
参照图5,电子设备500可以包括以下一个或多个组件:处理组件502、存储器504、电力组件506、多媒体组件508、音频组件510、输入/输出(I/O)的接口512、传感器组件514以及通信组件516。
处理组件502通常控制电子设备500的整体操作,诸如与显示、电话呼叫、数据通信、相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件502可以包括一个或多个模块,便于处理组件502和其他组件之间的交互。例如,处理组件502可以包括多媒体模块,以方便多媒体组件508和处理组件502之间的交互。
存储器504被配置为存储各种类型的数据以支持在电子设备500的操作。这些数据的示例包括用于在电子设备500上操作的任何应用程序或方法的指令、联系人数据、电话簿数据、消息、图片、视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、快闪存储器、磁盘或光盘。
电源组件506为电子设备500的各种组件提供电力。电源组件506可以包括电源管理系统,一个或多个电源,及其他与为电子设备500生成、管理和分配电力相关联的组件。
多媒体组件508包括在该电子设备500和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。该触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与该触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件508包括一个前置摄像头和/或后置摄像头。当电子设备500处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件510被配置为输出和/或输入音频信号。例如,音频组件510包括一个麦克风(MIC),当电子设备500处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中,音频组件510还包括一个扬声器,用于输出音频信号。
I/O接口512为处理组件502和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件514包括一个或多个传感器,用于为电子设备500提供各个方面的状态评估。例如,传感器组件514可以检测到电子设备500的打开/关闭状态,组件的相对定位,例如该组件为电子设备500的显示器和小键盘,传感器组件514还可以检测电子设备500或电子设备500一个组件的位置改变,用户与电子设备500接触的存在或不存在,电子设备500方位或加速/减速和电子设备500的温度变化。传感器组件514可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件514还可以包括加速度传感器、陀螺仪传感器、磁传感器、压力传感器或温度传感器。
通信组件516被配置为便于电子设备500和其他设备之间有线或无线方式的通信。电子设备500可以接入基于通信标准的无线网络,如WiFi,运营商网络(如2G、3G、4G或5G),或它们的组合。在一个示例性实施例中,通信组件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,该通信组件516还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的计算机可读存储介质,例如包括指令的存储器504,上述指令可由电子设备500的处理器520执行以完成上述方法。可选地,计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在示例性实施例中,还提供一种计算机程序产品,包括计算机程序,该计算机程序存储在计算机可读存储介质中,该计算机程序可由电子设备500的处理器520执行以完成上述方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (14)
1.一种虚拟形象的眨眼控制方法,其特征在于,所述方法包括:
按不同单位时间的真人眨眼频率,控制虚拟形象在相应单位时间进行眨眼;其中,每一所述单位时间的真人眨眼频率通过如下步骤得到:
获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;
从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;
基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,得到所述单位时间的真人眨眼频率。
2.根据权利要求1所述的虚拟形象的眨眼控制方法,其特征在于,在所述获取针对真人眨眼频率的指示标签集之前,所述方法还包括:
统计历史时段内不同真人眨眼频率的发生次数;
确定不同真人眨眼频率的发生次数与所述历史时段对应的总发生次数的发生次数比值;
确定拟合各发生次数比值的函数,并基于所述函数确定各真人眨眼频率的发生概率。
3.根据权利要求2所述的虚拟形象的眨眼控制方法,其特征在于,所述确定拟合各发生次数比值的函数,包括:
获取所述各真人眨眼频率和所述各真人眨眼频率自身对应的发生次数比值的乘积;
将各乘积之和作为泊松概率函数的参数,得到参数为所述各乘积之和的泊松概率函数;
将参数为所述各乘积之和的泊松概率函数作为拟合所述各发生次数比值的函数。
4.根据权利要求2所述的虚拟形象的眨眼控制方法,其特征在于,在所述统计历史时段内不同真人眨眼频率的发生次数之前,所述方法还包括:
调用终端的摄像头采集眼部图像;
基于所述眼部图像,确定历史时段内不同真人眨眼频率的发生次数。
5.根据权利要求1所述的虚拟形象的眨眼控制方法,其特征在于,所述方法还包括:
根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
6.根据权利要求5所述的虚拟形象的眨眼控制方法,其特征在于,在所述指示标签集所包括的指示标签是0至1的随机数的情况下,所述根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时,包括:
确定所述最大值和所述最小值的差值;
获取所述差值与选取的所述任一指示标签的乘积,并将所述乘积与所述最小值的和作为用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
7.一种虚拟形象的眨眼控制装置,其特征在于,包括:
眨眼控制模块,被配置为执行按不同单位时间的真人眨眼频率,控制虚拟形象在相应单位时间进行眨眼;其中,每一所述单位时间的真人眨眼频率通过如下模块得到:
指示标签集获取模块,被配置为执行获取针对真人眨眼频率的指示标签集;所述指示标签集被预先划分为多个指示标签子集,不同的指示标签子集对应不同的真人眨眼频率,各指示标签子集包含的指示标签数之比为各指示标签子集对应的真人眨眼频率的发生概率之比;
指示标签处理模块,被配置为执行从所述指示标签集中选取任一指示标签,并确定所述任一指示标签所属的指示标签子集;
眨眼控制模块,被配置为执行基于所述任一指示标签所属的指示标签子集对应的真人眨眼频率,得到所述单位时间的真人眨眼频率。
8.根据权利要求7所述的虚拟形象的眨眼控制装置,其特征在于,所述装置还包括函数处理模块,被配置为执行统计历史时段内不同真人眨眼频率的发生次数;确定不同真人眨眼频率的发生次数与所述历史时段对应的总发生次数的发生次数比值;确定拟合各发生次数比值的函数,并基于所述函数确定各真人眨眼频率的发生概率。
9.根据权利要求8所述的虚拟形象的眨眼控制装置,其特征在于,所述函数处理模块,被配置为执行获取所述各真人眨眼频率和所述各真人眨眼频率自身对应的发生次数比值的乘积;将各乘积之和作为泊松概率函数的参数,得到参数为所述各乘积之和的泊松概率函数;将参数为所述各乘积之和的泊松概率函数作为拟合所述各发生次数比值的函数。
10.根据权利要求8所述的虚拟形象的眨眼控制装置,其特征在于,所述装置还包括真人眨眼次数处理模块,被配置为执行调用终端的摄像头采集眼部图像;基于所述眼部图像,确定历史时段内不同真人眨眼频率的发生次数。
11.根据权利要求7所述的虚拟形象的眨眼控制装置,其特征在于,所述装置还包括眨眼耗时处理模块,被配置为执行根据统计确定的单次眨眼耗时的最小值和最大值,确定用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
12.根据权利要求11所述的虚拟形象的眨眼控制装置,其特征在于,在所述指示标签集所包括的指示标签是0至1的随机数的情况下,所述眨眼耗时处理模块,被配置为执行确定所述最大值和所述最小值的差值;获取所述差值与选取的所述任一指示标签的乘积,并将所述乘积与所述最小值的和作为用于控制所述虚拟形象进行眨眼的单次眨眼耗时。
13.一种电子设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至6中任一项所述的虚拟形象的眨眼控制方法。
14.一种计算机可读存储介质,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1至6中任一项所述的虚拟形象的眨眼控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110835608.6A CN113487711B (zh) | 2021-07-23 | 2021-07-23 | 虚拟形象的眨眼控制方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110835608.6A CN113487711B (zh) | 2021-07-23 | 2021-07-23 | 虚拟形象的眨眼控制方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113487711A CN113487711A (zh) | 2021-10-08 |
CN113487711B true CN113487711B (zh) | 2024-02-09 |
Family
ID=77943208
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110835608.6A Active CN113487711B (zh) | 2021-07-23 | 2021-07-23 | 虚拟形象的眨眼控制方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113487711B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116704080B (zh) * | 2023-08-04 | 2024-01-30 | 腾讯科技(深圳)有限公司 | 眨眼动画生成方法、装置、设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102129706A (zh) * | 2011-03-10 | 2011-07-20 | 西北工业大学 | 一种虚拟人眼部情感表现模拟方法 |
CN110363135A (zh) * | 2019-07-10 | 2019-10-22 | 广州市百果园信息技术有限公司 | 人眼闭合程度的确定方法、眼睛控制方法和装置 |
CN110991327A (zh) * | 2019-11-29 | 2020-04-10 | 深圳市商汤科技有限公司 | 交互方法及装置、电子设备和存储介质 |
CN112464031A (zh) * | 2021-02-02 | 2021-03-09 | 北京达佳互联信息技术有限公司 | 交互方法、装置、电子设备以及存储介质 |
CN112652041A (zh) * | 2020-12-18 | 2021-04-13 | 北京大米科技有限公司 | 虚拟形象的生成方法、装置、存储介质及电子设备 |
-
2021
- 2021-07-23 CN CN202110835608.6A patent/CN113487711B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102129706A (zh) * | 2011-03-10 | 2011-07-20 | 西北工业大学 | 一种虚拟人眼部情感表现模拟方法 |
CN110363135A (zh) * | 2019-07-10 | 2019-10-22 | 广州市百果园信息技术有限公司 | 人眼闭合程度的确定方法、眼睛控制方法和装置 |
WO2021004285A1 (zh) * | 2019-07-10 | 2021-01-14 | 广州市百果园信息技术有限公司 | 人眼闭合程度的确定方法、眼睛控制方法、装置、设备和存储介质 |
CN110991327A (zh) * | 2019-11-29 | 2020-04-10 | 深圳市商汤科技有限公司 | 交互方法及装置、电子设备和存储介质 |
CN112652041A (zh) * | 2020-12-18 | 2021-04-13 | 北京大米科技有限公司 | 虚拟形象的生成方法、装置、存储介质及电子设备 |
CN112464031A (zh) * | 2021-02-02 | 2021-03-09 | 北京达佳互联信息技术有限公司 | 交互方法、装置、电子设备以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113487711A (zh) | 2021-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106528389B (zh) | 系统流畅性的性能评测方法、装置及终端 | |
CN111405302B (zh) | 直播间关注提醒方法、装置、电子设备及存储介质 | |
CN108121631B (zh) | 屏幕异常状态提醒方法及装置 | |
CN107025421B (zh) | 指纹识别方法和装置 | |
CN107480785B (zh) | 卷积神经网络的训练方法及装置 | |
CN111988493B (zh) | 交互处理方法、装置、设备及存储介质 | |
CN111556352B (zh) | 多媒体资源分享方法、装置、电子设备及存储介质 | |
CN106331328B (zh) | 信息提示的方法及装置 | |
CN111984347A (zh) | 交互处理方法、装置、设备及存储介质 | |
CN112434338A (zh) | 图片分享方法、装置、电子设备及存储介质 | |
CN113382270A (zh) | 虚拟资源处理方法、装置、电子设备及存储介质 | |
CN113487711B (zh) | 虚拟形象的眨眼控制方法、装置、电子设备及存储介质 | |
CN112948704A (zh) | 用于信息推荐的模型训练方法、装置、电子设备以及介质 | |
CN111539617B (zh) | 数据处理方法和装置、电子设备、交互系统和存储介质 | |
CN112911372A (zh) | 页面数据处理方法、装置、电子设备、服务器 | |
CN112685599A (zh) | 视频推荐方法及装置 | |
CN108647074B (zh) | 锁屏状态下展示动态信息的方法、装置、硬件装置和介质 | |
CN107896277B (zh) | 设定闹钟提醒方式的方法、装置及计算机可读存储介质 | |
CN114189719B (zh) | 视频信息提取方法、装置、电子设备及存储介质 | |
CN111698532A (zh) | 弹幕信息的处理方法及装置 | |
CN112333233B (zh) | 事件信息的上报方法、装置、电子设备及存储介质 | |
CN114124866A (zh) | 会话处理方法、装置、电子设备及存储介质 | |
EP3200127A1 (en) | Method and device for fingerprint recognition | |
CN111898019B (zh) | 信息推送方法及装置 | |
CN106790450A (zh) | 缓存处理方法、装置及服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |