CN115564932A - 一种数据处理方法和数据处理装置 - Google Patents
一种数据处理方法和数据处理装置 Download PDFInfo
- Publication number
- CN115564932A CN115564932A CN202211218227.4A CN202211218227A CN115564932A CN 115564932 A CN115564932 A CN 115564932A CN 202211218227 A CN202211218227 A CN 202211218227A CN 115564932 A CN115564932 A CN 115564932A
- Authority
- CN
- China
- Prior art keywords
- value
- condition
- target
- output parameter
- influence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title abstract description 16
- 238000000034 method Methods 0.000 claims abstract description 24
- 239000000126 substance Substances 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 21
- 230000015654 memory Effects 0.000 description 17
- 230000000694 effects Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 238000009877 rendering Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 230000004044 response Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000003111 delayed effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000009508 confectionery Nutrition 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/40—Hidden part removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Architecture (AREA)
- Computing Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
Abstract
本申请实施例公开了一种数据处理方法和数据处理装置,其中,方法包括:输出参数为第一值,基于所述第一值得到关于虚拟空间中的第一空间的第一输出图像;其中,所述第一空间中包括目标对象;如果满足第一条件,所述输出参数能从所述第一值调整为第二值;其中,如果所述输出参数为所述第二值,基于所述第二值得到关于所述虚拟空间中的第二空间的第二输出图像,其中,所述第二空间中包括所述目标对象。
Description
技术领域
本申请涉及但不限于信息技术领域,尤其涉及一种数据处理方法和数据处理装置。
背景技术
随着科技的进步,虚拟数字场景作为互联网的新形态应运而生。
当在虚拟数字场景中嵌入被观测对象,视角跟随被观测对象移动的过程中,被观测对象的显示效果可能会不符合用户的观看需求,针对该问题,目前还没有合适的解决方案。
发明内容
本申请实施例期望提供一种数据处理方法和数据处理装置。
其中,数据处理方法包括:
输出参数为第一值,基于所述第一值得到关于虚拟空间中的第一空间的第一输出图像;其中,所述第一空间中包括目标对象;
如果满足第一条件,所述输出参数能从所述第一值调整为第二值;其中,如果所述输出参数为所述第二值,基于所述第二值得到关于所述虚拟空间中的第二空间的第二输出图像,其中,所述第二空间中包括所述目标对象。
本申请还提供一种数据处理装置,所述数据处理装置包括:
获得模块,用于基于输出参数得到关于虚拟空间中的输出图像;
调整模块,如果满足第一条件,能用于将输出参数从第一值调整为第二值;
其中,
如果输出参数为所述第一值,所述获得模块得到所述虚拟空间中的第一空间的第一输出图像;其中,所述第一空间中包括目标对象;
如果所述输出参数为所述第二值,所述获得模块得到所述虚拟空间中的第二空间的第二输出图像,其中,所述第二空间中包括所述目标对象。
一种电子设备,所述电子设备包括:处理器、存储器和通信总线;
所述通信总线用于实现处理器和存储器之间的通信连接;
所述处理器用于执行存储器中存储的信息处理程序,以实现上述的数据处理方法的步骤。
一种计算机存储介质,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如上述的数据处理方法的步骤。
附图说明
图1为本申请的实施例提供的一种数据处理方法的流程示意图;
图2为本申请的实施例提供的第一位置与第二位置的示意图;
图3为虚拟空间中的深度检测的示意图;
图4为虚拟空间中的有效点的示意图;
图5为本申请的实施例提供的一种调整基准点位置的示意图;
图6为本申请的实施例提供的一个镂空模型的示意图;
图7为本申请的实施例针对镂空模型进行深度检测的示意图;
图8为本申请的实施例提供的一种虚拟空间的场景示意图;
图9为本申请的实施例提供的未做防抖处理以及未做Alpha通道渲染的示意图;
图10为本申请的实施例提供的做了防抖处理以及做了Alpha通道渲染的示意图;
图11为本申请的实施例提供的一种数据处理装置的结构示意图;
图12为本申请的实施例提供的一种可穿戴设备的结构示意图;
图13为本申请的实施例提供的一种电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
对于虚拟数字场景中被观测对象的显示效果不符合用户观看需求这一问题,用户需要自行手动调整输出参数,部分应用甚至不会提供调整输出参数的选项,使得该问题无法被有效解决。为解决该问题,本申请的实施例提供一种数据处理方法,参照图1所示,该方法包括以下步骤:
步骤101、输出参数为第一值,基于第一值得到关于虚拟空间中的第一空间的第一输出图像;其中,第一空间中包括目标对象。
本申请实施例中,虚拟空间是应用程序在电子设备上运行时显示(或提供)的虚拟立体环境,应用程序可以为浏览器应用、客户端应用等。虚拟空间可以是对真实世界的仿真空间,虚拟空间也可以是半仿真半虚构的三维空间,虚拟空间还可以是纯虚构的三维空间。虚拟空间包括但不限于三维虚拟空间、四维虚拟空间等高维虚拟空间,本申请实施例以虚拟空间是三维虚拟空间来举例说明,但对此不加以限定。其中,电子设备可以为具有数据处理功能的设备,即具有处理单元,如手机、电脑等,电子设备除了具有处理单元外,还可以具有显示单元,显示单元可基于显示单元的指令来显示目标内容。
其中,应用程序是能支持显示虚拟空间的应用程序,虚拟空间中包括虚拟对象。可选的,应用程序支持三维虚拟空间的应用程序。该应用程序可以是虚拟现实(VirtualReality,VR)应用程序、增强现实(Augmented Reality,AR)应用程序中的任意一种。可选的,该应用程序也可以是三维(3-dimension,3D)游戏程序,对此本申请不做具体限制。虚拟对象可以是基于动画骨骼技术创建的三维立体模型。每个虚拟对象在三维虚拟空间中具有自身的形状和体积,占据三维虚拟空间中的一部分空间。
本申请实施例中,输出参数包括但不限于基准点参数,如基准点位置,其中,基准点可以是摄像头,作用为:采集关于虚拟空间的图像,之后,由渲染引擎生成最终输出的图像,故可以理解,基准点采集的画面决定图像输出的内容。
输出参数还可以是其他能够影响输出图像的参数,例如可以是基准点的视场角,即FOV(Field of View)、基准点的景深等等,本申请实施例对此不做具体限定。为理解方便,本申请下述实施例的基准点均指代摄像头,基准点参数均指代基准点位置,基准点位置即摄像头位置。
第一空间是基准点进行图像采集的一片空间区域,位于第一空间内的对象会被采集并渲染到屏幕上。第一空间可以根据如下方式确定:在基准点的视锥体中,将处于近裁切平面(near clipping plane)和远裁切平面(far clipping plane)之间的空间,确定为第一空间。除此之外,第一空间还可根据其他方式确定,在此不做限定。
以输出参数为基准点位置为例,当基准点位置在不同位置时,其对应的采集空间也会不同。基准点处于第一位置,则对应第一空间,基准点处于第二位置的话,则对应第二空间。第二空间与第一空间类似,都是基准点的采集空间。
本申请实施例中,目标对象是被观测对象,目标对象位于基准点进行图像采集的空间区域中,因此目标对象可以通过被基准点采集而呈现在输出图像中。
步骤102、如果满足第一条件,输出参数能从第一值调整为第二值;其中,如果输出参数为第二值,基于第二值得到关于虚拟空间中的第二空间的第二输出图像,其中,第二空间中包括目标对象。
容易理解,在步骤101至步骤102得到关于目标对象的图像的过程中,提供了一种输出参数自动调整的策略——当满足第一条件,输出参数能够从第一值调整为第二值,输出参数调整为第二值后,便可以得到满足观看需求的第二输出图像,无需用户手动调整输出参数,也克服了部分应用不提供输出参数调整接口的缺陷。
在一种具体实施方式中,上述输出参数为基准点的位置,该基准点位于虚拟空间中,第一值指代第一位置,第二值指代第二位置;相应的,第一输出图像是基于位于第一位置的基准点获得的关于虚拟空间中的第一空间的图像,第二输出图像是基于位于第二位置的基准点获得的关于虚拟空间中的第二空间的图像。
下面提供一种输出参数的调整策略,其包括步骤1021-1023:
步骤1021:如果满足第一条件,根据目标对象和基准点确定目标对象的影响对象。
以遮挡场景为例,第一条件对应第一输出图像中目标对象被遮挡的情况,那么影响对象则对应的是导致目标对象被遮挡的对象。
步骤1022:基于影响对象确定第二位置。
例如第二位置可以是影响对象所在的位置。
步骤1023:输出参数从第一位置调整为第二位置。
即基准点位置从原位置调整到影响对象所在的位置处。
上述实施例提供的调整策略,基于影响对象确定第二位置,使得输出参数调整到第二位置之后,其视角相对于第一位置不会发生较大变化,保证了视角的延续性。
基于计算机图形学成像原理,上述步骤1021中的影响对象可根据以下步骤10211-10213确定:
步骤10211:获得目标对象在虚拟空间中的第一目标位置和基准点在虚拟空间中的第二目标位置。
结合图3为例,获得目标对象在虚拟空间中的位置坐标(x2,y2,z2),即第一目标位置,以及获得基准点在虚拟空间中的位置坐标(x1,y1,z1),即第二目标位置。
步骤10212:基于第一目标位置和第二目标位置,确定目标对象与基准点之间的基准线。
基于目标对象的位置坐标和基准点的位置坐标,以其中一个坐标为起点,另一个坐标为终点来确定一条带有方向的基准线,如图3所示出的基准线R(x1-x2,y1-y2,z1-z3)。
步骤10213:将基准线所穿过的对象作为目标对象的影响对象。
如图3和图4所示,对于从基准点指向目标对象的基准线R,其所穿过的对象就是目标对象的影响对象。基准线R模仿的是由基准点看向目标对象的视线,当视线在抵达目标对象之前穿过了非目标对象,则非目标对象势必会对目标对象造成遮挡,因此将基准线所穿过的非目标对象作为目标对象的影响对象。
更为具体的,基准线R穿过的目标对象可通过如下方式确定:将基准线R所包括的点的坐标集称为第一坐标集,将各个非目标对象所包括的点的坐标集称为第二坐标集,如果第一坐标集与某个非目标对象的第二坐标集中的坐标有重合,则将该非目标对象作为影响对象。具体的结合图4所示,第一坐标集与第二坐标集重合的点有{point2,point3,point4,point5,point6,point7,point8},在point2和point3的坐标属于第一对象的第二坐标集中的坐标的情况下,则第一对象为影响对象,同理,基于point4和point5可确定第二对象为影响对象,基于point6、point7和point8可确定第三对象为影响对象。
当确定影响对象后,即可执行上述步骤1022:基于影响对象确定第二位置。
参见附图4,可以看到,影响对象可能不止一个,那么步骤1022的基于影响对象确定第二位置,就可以有多种确定方式。
用于确定第二位置的影响对象,称其为目标影响对象。首先,从多个影响对象中确定出目标影响对象,就有多种选择;其次,确定出目标影响对象后,基于该目标影响对象确定第二位置,也有多种方式:第一种方式:第二位置在目标影响对象上;第二种方式:第二位置不在目标影响对象上;并且,第一方式和第二种方式,也有多种方案,具体见图2所示。
参见附图2,第一位置为A点位置,针对上述第一种方式,即第二位置在目标影响对象上的情况,其可以包括以下方案分支:方案(1):第二位置在目标影响对象距离目标对象最近的表面上,如B点;方案(2):第二位置在基准线与目标影响对象表面的交点处,如C点。针对上述第二种方式,即第二位置不在目标影响对象的情况,其可以包括以下方案分支:方案(1):第二位置在基准线上,如D点;方案(2):第二位置不在基准线上,其可以位于目标影响对象的水平上方,如E点。由于从B、C、D、E这四类位置引向目标对象的基准线都不会与除目标对象以外的其他对象相碰撞,因此通过将第二位置设置在B、C、D、E这四类位置处,可以使目标对象不被遮挡。
上述方案中,步骤1022的一种优选实施方式包括如下步骤10221-10222:
步骤10221:如果存在多个影响对象,从其中选择距离目标对象最近的对象作为目标影响对象。
步骤10222:基于目标影响对象的位置确定第二位置。
结合图4和图5所示,步骤10221对应于:选择距离目标对象最近的影响对象1,将其作为目标影响对象,步骤10222对应于:基于该目标影响对象(即影响对象1)的位置确定第二位置。而步骤10222的具体实施方式,可参见上述关于图2中B、C、D、E点的描述,此处不再重复。
步骤10221-10222提供的实施例,可以使得基准点与目标对象之间,不会有其他对象,从而保证能够无遮挡得显示目标对象。
本申请其他实施例中,在解决目标对象被遮挡的问题上,还可以采用如下方式:调整影响对象的显示参数,具体的,被调整的输出参数是影响对象的透明度,通过渲染方式调整影响对象的透明度,使调整后的透明度高于调整前的透明度,则可实现目标对象不被遮挡的效果。
上述实施例讲到,如果满足第一条件,输出参数能从第一值调整为第二值。如果第一条件为:检测到目标对象被遮挡,则若每检测到一次目标对象被遮挡,都执行一次输出参数的调整,那么对于图6所示的镂空模型来说,会发生这样一种情况:在基准点视线始终跟随目标对象的情况下,随着基准点从左向右移动,则目标对象会频繁经历被遮挡、不被遮挡这二者状态的切换,那么输出参数会频繁调整,从而导致输出画面频繁发生变化(称为画面抖动),不利于用户观看。
为避免这种情况发生,即为防止画面抖动,可引入第二条件作为调整输出参数的另外附加的触发条件。具体的,一种可实施方式为:如果满足第一条件和第二条件,则输出参数从第一值调整为第二值。
也就是说,在满足第一条件的情况下,还不代表输出参数会被调整为第二值,只有当第二条件也被满足,才执行调整输出参数的操作。
具体的,本申请提供了下述可选实施方式,以实现防抖操作。
第一种可选的实施方式为:(a)如果检测到目标对象的影响对象,确定满足第一条件,将检测到影响对象的时刻作为第一时刻;(b)在从第一时刻起的第一时间间隔内,如果没有再次检测到影响对象,确定满足第二条件,在第一时刻起经过第一时间间隔后的第二时刻,输出参数从第一值调整为第二值;其中,在第一时间间隔期间,若在第三时刻检测到影响对象,将第三时刻作为第一时刻。
本实施例通过延时响应的方式,实现防抖操作,其中,延时响应可以理解为事件被触发了n秒后再执行;如果在这n秒内事件被重复触发,则重新计时。以函数f举例,本实施例中将函数f定义为调整输出参数这一行为,设定延时响应时间为3秒(延时响应时间即上述的第一时间间隔),即f被触发3s后才会执行。假设在t=0时,我们触发f。理想情况下,在t=3时,f将执行。倘若在t=2时,我们再次触发了f,则在t=(2+3)=5时,f才将执行。
为实现防抖操作,第二种可选的实施方式为:(a)如果检测到目标对象的影响对象,确定满足第一条件;(b)如果影响对象带有目标标签,确定满足第二条件,输出参数从第一值调整为第二值;如果影响对象不带有目标标签,确定不满足第二条件,输出参数不调整为第二值。
本实施例通过标签响应的方式,实现防抖操作,其中,标签响应可以理解为若影响对象带有目标标签则调输出参数,不带有目标标签就不调输出参数。标签是预先标注好的,可以通过预先为潜在影响对象标注上目标标签,来实现有选择地调整输出参数。至于为哪些潜在影响对象标注上目标标签,可以有多种规则,一种可选规则为:如果一个潜在影响对象的镂空区域面积占它总截面面积比值较小,则给这这类潜在影响对象带上目标标签(镂空区域比较小,即非镂空区域较大,意味着目标对象被该镂空结构遮挡的时长会较长,因此在检测到目标对象被这类影响对象遮挡时,就调整基准点位置至第二位置,可实现有遮挡就调整;于是有如下效果:当目标对象被非镂空区域遮挡,则将基准点位置调整到第二位置,当目标对象未被镂空区域遮挡,将基准点位置调整回默认位置,如此可较少影响观看效果)。与之相反的,如果一个潜在影响对象的镂空区域面积占它总界面面积比值较大,即大部分是镂空的,则不必给这类镂空对象带上目标标签,镂空对象的少部分非镂空区域遮挡住了目标对象,就算不调整输出参数也不会太过影响观看效果。
为实现防抖操作,第三种可选的实施方式为:(a)如果检测到目标对象的影响对象,确定满足第一条件;(b)如果检测到影响对象的次数满足连续预设次数,确定满足第二条件,输出参数从第一值调整为第二值。
结合图6和图7所示,由于镂空模型对目标对象的遮挡会更为复杂,因此以镂空模型为例进行说明。图6示出了基准点在不同时刻对目标对象进行视角跟随时所对应的多条基准线,在图7中这8条基准线的端点(端点在箭头处)示出了基准线首次碰到的影响对象的位置。
当采取第三实施例中的步骤(a)和步骤(b)方案,则具体为:图7中,基准线2、基准线4、基准线6和基准线8,都与镂空模型相碰撞,即检测到了影响对象,确定满足第一条件;并且进一步的,假设连续预设次数为连续4次,以图7为例,若每次对每一图像帧进行遮挡检测时,有连续4帧图像正好对应的是基准线2、基准线4、基准线6和基准线8,则检测到影响对象的次数满足连续4次,确定满足第二条件,进行一次输出参数的调整。
上述(b)方案,还可以在第二条件中附加时间限制,比如,第二条件设置为:在某一预设时长内检测到影响对象的次数满足连续预设次数;当满足该第二条件,才调整一次输出参数;如果检测到影响对象的次数满足连续预设次数,但超出了预设时长,则不算满足第二条件,不对输出参数进行调整。通过增加时间限制这个第三条件,可进一步有效防抖。
除上述可选实施方式之外,在第三种可选实施方式中步骤(b)的基础上,对于第四种可选实施方式,第二条件还可以有其他设置方式,如步骤(c),步骤(c)为:如果检测到影响对象的次数满足连续预设次数,且预设次数个基准点的位置和影响对象的位置之间的目标距离满足相似条件,确定满足第二条件,输出参数从第一值调整为第二值。
假设预设次数为4个,在连续4个图像帧检测到影响对象的情况下,预设次数个基准点的位置和影响对象的位置之间的目标距离满足相似条件,可以理解为:以图7为例,假设4帧图像正好对应的是基准线2、基准线4、基准线6和基准线8,获得这4条基准线分别对应的基准点位置和影响对象的位置,对每条基准线,将该基准线对应的基准点位置和影响对象的位置作差,得到这4条基准线中每条基准线的目标距离,记为Distance2、Distance4、Distance6、Distance8;目标距离满足相似条件,即是指这4个目标距离的大小较为相似,即这4个目标距离的差值不超过距离阈值,例如可以是这4个目标距离任意二者相差不超过距离阈值,也可以是相邻二者相差不超过距离阈值;如果目标距离满足相似条件,则判定第二条件满足。本实施例的第二条件,通过将条件进一步限制到目标距离满足相似条件,是考虑到,如果目标距离的差值过大,意味着:如果需要调整基准点位置,则基准点调整前后位置差距过大,使得调整后画面与调整前画面变动内容过多,再加上相邻两帧之间的时间间隔很小,故为了避免短时间内输出画面频繁发生较大变化,于是将目标距离满足相似条件这一条件加入到第二条件中。
除上述介绍的实施方式之外,还可以通过降低遮挡检测的频率的方法,来实现防抖操作,于是有第五种实施方式。
第五种实施方式为:随着基准点移动,不同时刻对应着不同基准线,获取不同时刻下,基准线与虚拟空间中的模型的交点,从中选取距离基准点最近的交点(即基准线碰到的第一个交点)作为目标交点(该目标交点即在距离基准点最近的影响对象上),将目标交点与基准点的距离称为目标距离;对比相邻两帧(如当前帧与前一帧)目标距离相差是否过大;如果过大,计数器清零;如果不大,计数器加1;每过一帧都会进行一次目标距离差值的比对,计数器根据比对结果执行加1或清零;计数器累加到4之前,只要有一次过大,则计数器清零;当计数器累加到4,则进行一次遮挡检测。这里的遮挡检测是指检测基准点与目标对象之间是否有影响对象。
本实施方式是在累计4帧发现目标距离都相差不大的情况下,才进行一次遮挡检测,降低了遮挡检测的频率,进一步可以降低输出参数的调整次数,从而实现防抖效果。
本申请其他实施例中,为实现防抖操作,还可以采用如下方式:
方式一、目标对象被遮挡过多则判定为满足第二条件,调整输出参数,目标对象被遮挡较少则不满足第二条件,不调整输出参数,故防抖操作还可以减少计算量,提升计算资源利用率。
方式二、将复杂的镂空模型做Alpha通道渲染,将镂空部分从视觉上渲染出镂空效果,但镂空部分的实际材质不是镂空,做基准线穿透的时候射基准线碰到镂空部分还是会检测为遮挡物。这样的话,检测到这种复杂镂空模型,则直接调整输出参数为第二位置,不会在镂空处返回到第一位置。
在一个可实现的虚拟空间中,图8为虚拟空间的示意图、图9为未做防抖处理以及未做Alpha通道渲染的示意图、图10为做了防抖处理以及做了Alpha通道渲染的示意图。结合图9的显示内容可知,保证视角范围内目标对象多次被遮挡,呈现的显示内容死角较多。结合图10的显示内容可知,本申请提供的数据处理方法,不仅能更加精准的判断遮挡物,动态调整基准点位置,保证视角范围内没有遮挡物,而且不需要关心模型复杂度,和镂空程度,做到完全无死角的视角体验效果。
本申请的实施例提供一种数据处理装置,该数据处理装置可以用于实施图1对应的实施例提供的一种数据处理方法,参照图11所示,该数据处理装置200包括:
获得模块201,用于基于输出参数得到关于虚拟空间中的输出图像;
调整模块202,如果满足第一条件,能用于将输出参数从第一值调整为第二值;
其中,如果输出参数为第一值,获得模块得到虚拟空间中的第一空间的第一输出图像;其中,第一空间中包括目标对象;如果输出参数为第二值,获得模块得到虚拟空间中的第二空间的第二输出图像,其中,第二空间中包括目标对象。
本申请其他实施例中,输出参数包括位于虚拟空间中的基准点的位置;相应的,第一值包括:第一位置,第二值包括:第二位置;基于第一值得到关于虚拟空间中的第一空间的第一输出图像,包括:基于位于第一位置的基准点获得关于虚拟空间中的第一空间的第一输出图像;基于第二值得到关于虚拟空间中的第二空间的第二输出图像,包括:基于位于第二位置的基准点获得关于虚拟空间中的第二空间的第二输出图像;其中,如果满足第一条件,输出参数能从第一值调整为第二值,包括:如果满足第一条件,根据目标对象和基准点确定目标对象的影响对象;基于影响对象确定第二位置;输出参数从第一位置调整为第二位置。
本申请其他实施例中,根据目标对象和基准点确定目标对象的影响对象,包括:获得目标对象在虚拟空间中的第一目标位置和基准点在虚拟空间中的第二目标位置;基于第一目标位置和第二目标位置,确定目标对象与基准点之间的基准线;将基准线所穿过的对象作为目标对象的影响对象。
本申请其他实施例中,基于影响对象确定第二位置,包括:如果存在多个影响对象,从其中选择距离目标对象最近的对象作为目标影响对象;基于目标影响对象的位置确定第二位置。
本申请其他实施例中,如果满足第一条件,输出参数能从第一值调整为第二值,包括:如果满足第一条件和第二条件,输出参数从第一值调整为第二值。
本申请其他实施例中,如果满足第一条件和第二条件,输出参数从第一值调整为第二值,包括:如果检测到目标对象的影响对象,确定满足第一条件,将检测到影响对象的时刻作为第一时刻;在从第一时刻起的第一时间间隔内,如果没有再次检测到影响对象,确定满足第二条件,在第一时刻起经过第一时间间隔后的第二时刻,输出参数从第一值调整为第二值;其中,在第一时间间隔期间,若在第三时刻检测到影响对象,将第三时刻作为第一时刻。
本申请其他实施例中,如果满足第一条件和第二条件,输出参数从第一值调整为第二值,包括:如果检测到目标对象的影响对象,确定满足第一条件;如果影响对象带有目标标签,确定满足第二条件,输出参数从第一值调整为第二值。
本申请其他实施例中,如果满足第一条件和第二条件,输出参数从第一值调整为第二值,包括:如果检测到目标对象的影响对象,确定满足第一条件;如果检测到影响对象的次数满足连续预设次数,确定满足第二条件,输出参数从第一值调整为第二值。
本申请其他实施例中,如果检测到影响对象的次数满足连续预设次数,确定满足第二条件,输出参数从第一值调整为第二值,包括:如果检测到影响对象的次数满足连续预设次数,且影响对象满足距离相似条件,确定满足第二条件,输出参数从第一值调整为第二值。
本申请实施例提供的数据处理装置,在满足第一条件的情况下,输出参数能够从第一值调整为第二值,注意,这里是输出参数能够从第一值调整为第二值,而不是说只要满足第一条件,输出参数就从第一值调整为第二值,因此,也可避免每当满足第一条件就调整输出参数而导致的输出参数频繁调整而使得输出画面频繁发生变化影响观看效果——由此,可以获得满足观看需求的第二输出图像。
图12提供了一种可穿戴设备的结构示意图,如图12所示,该可穿戴设备300包括:穿戴本体301和佩戴组件(图中未示出),穿戴本体301包括通信单元302、处理单元303和显示单元304;其中:
通信单元302,可以连接服务器,至少用于接收服务器发送的应用程序的显示画面,以及向服务器反馈指示操作,以使服务器根据接收到的指示操作,获取与指示操作存在映射关系的交互动作的操作。处理单元303,可以响应作用于虚拟对象的移动调整操作,控制虚拟对象在虚拟空间中移动。处理单元303,还可以在输出参数为第一值的情况下,基于第一值得到关于虚拟空间中的第一空间的第一输出图像;其中,第一空间中包括目标对象;如果满足第一条件,输出参数能从第一值调整为第二值;其中,如果输出参数为第二值,基于第二值得到关于虚拟空间中的第二空间的第二输出图像,其中,第二空间中包括目标对象。这里,服务器在向可穿戴设备300发送显示画面之前,可穿戴设备300通过通信单元302与服务器建立连接。
处理单元303,设置在穿戴本体301上。该处理单元303可以是处理器,用于执行本申请实施例提供的一种数据处理方法的步骤。
处理单元303可以包括但不限于中央处理器(Central Processing Unit,CPU)、微处理器(Microprocessor Unit,MPU)、数字信号处理器(Digital Signal Processing,DSP)或现场可编程门阵列(Field Programmable Gate Array,FPGA)中的任意一种或多种。
显示单元304,用于显示显示画面。
在实际应用中,穿戴本体301可以包括但不限于可穿戴设备的外壳以及用于支持通信单元302和处理单元303正常运行所必需的外围硬件电路等。
本申请实施例提供的可穿戴设备,当满足第一条件,输出参数能够从第一值调整为第二值,注意,这里是输出参数能够从第一值调整为第二值,而不是说只要满足第一条件,输出参数就从第一值调整为第二值,因此,也可避免每当满足第一条件就调整输出参数而导致的输出参数频繁调整而使得输出画面频繁发生变化影响观看效果——由此,可以获得满足观看需求的第二输出图像。
本申请的实施例提供一种电子设备,该电子设备可以用于图1对应的实施例提供的一种数据处理方法,参照图13所示,该电子设备400包括:处理器401、存储器402和通信总线403,其中,
通信总线403用于实现处理器401和存储器402之间的通信连接;
处理器401用于执行存储器402中存储的信息处理程序,以实现本申请实施例提供的数据处理方法,例如,如图1示出的方法。
作为示例,处理器可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
本申请实施例提供一种存储有可执行指令的存储介质,其中存储有可执行指令,当可执行指令被处理器执行时,将引起处理器执行本申请实施例提供的数据处理方法,例如,如图1示出的方法。
在一些实施例中,存储介质可以是计算机可读存储介质,例如,铁电存储器(FRAM,Ferromagnetic Random Access Memory)、只读存储器(ROM,Read Only Memory)、可编程只读存储器(PROM,Programmable Read Only Memory)、可擦除可编程只读存储器(EPROM,Erasable Programmable Read Only Memory)、带电可擦可编程只读存储器(EEPROM,Electrically Erasable Programmable Read Only Memory)、闪存、磁表面存储器、光盘、或光盘只读存储器(CD-ROM,Compact Disk-Read Only Memory)等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。
Claims (10)
1.一种数据处理方法,所述方法包括:
输出参数为第一值,基于所述第一值得到关于虚拟空间中的第一空间的第一输出图像;其中,所述第一空间中包括目标对象;
如果满足第一条件,所述输出参数能从所述第一值调整为第二值;其中,如果所述输出参数为所述第二值,基于所述第二值得到关于所述虚拟空间中的第二空间的第二输出图像,其中,所述第二空间中包括所述目标对象。
2.根据权利要求1所述的方法,
所述输出参数包括位于所述虚拟空间中的基准点的位置;相应的,所述第一值包括:第一位置,所述第二值包括:第二位置;
所述基于所述第一值得到关于虚拟空间中的第一空间的第一输出图像,包括:基于位于所述第一位置的基准点获得关于所述虚拟空间中的第一空间的第一输出图像;
所述基于所述第二值得到关于所述虚拟空间中的第二空间的第二输出图像,包括:基于位于所述第二位置的基准点获得关于所述虚拟空间中的第二空间的第二输出图像;
其中,所述如果满足第一条件,所述输出参数能从所述第一值调整为第二值,包括:
如果满足所述第一条件,根据所述目标对象和所述基准点确定所述目标对象的影响对象;
基于所述影响对象确定所述第二位置;
所述输出参数从所述第一位置调整为所述第二位置。
3.根据权利要求2所述的方法,所述根据所述目标对象和所述基准点确定所述目标对象的影响对象,包括:
获得所述目标对象在所述虚拟空间中的第一目标位置和所述基准点在所述虚拟空间中的第二目标位置;
基于所述第一目标位置和所述第二目标位置,确定所述目标对象与所述基准点之间的基准线;
将所述基准线所穿过的对象作为所述目标对象的影响对象。
4.根据权利要求2或3任意一项所述的方法,所述基于所述影响对象确定所述第二位置,包括:
如果存在多个所述影响对象,从其中选择距离所述目标对象最近的对象作为目标影响对象;
基于所述目标影响对象的位置确定所述第二位置。
5.根据权利要求1所述的方法,所述如果满足第一条件,所述输出参数能从所述第一值调整为所述第二值,包括:
如果满足所述第一条件和第二条件,所述输出参数从所述第一值调整为所述第二值。
6.根据权利要求5所述的方法,所述如果满足所述第一条件和第二条件,所述输出参数从所述第一值调整为所述第二值,包括:
如果检测到所述目标对象的影响对象,确定满足所述第一条件,将检测到所述影响对象的时刻作为第一时刻;
在从所述第一时刻起的第一时间间隔内,如果没有再次检测到所述影响对象,确定满足所述第二条件,在所述第一时刻起经过所述第一时间间隔后的第二时刻,所述输出参数从所述第一值调整为所述第二值;
其中,在所述第一时间间隔期间,若在第三时刻检测到所述影响对象,将所述第三时刻作为所述第一时刻。
7.根据权利要求5所述的方法,所述如果满足所述第一条件和第二条件,所述输出参数从所述第一值调整为所述第二值,包括:
如果检测到所述目标对象的影响对象,确定满足所述第一条件;
如果所述影响对象带有目标标签,确定满足所述第二条件,所述输出参数从所述第一值调整为所述第二值。
8.根据权利要求5所述的方法,所述如果满足所述第一条件和第二条件,所述输出参数从所述第一值调整为所述第二值,包括:
如果检测到所述目标对象的影响对象,确定满足所述第一条件;
如果检测到所述影响对象的次数满足连续预设次数,确定满足所述第二条件,所述输出参数从所述第一值调整为所述第二值。
9.根据权利要求8所述的方法,所述如果检测到所述影响对象的次数满足连续预设次数,确定满足所述第二条件,所述输出参数从所述第一值调整为所述第二值,包括:
如果检测到所述影响对象的次数满足连续预设次数,且所述预设次数个基准点的位置和所述影响对象的位置之间的目标距离满足相似条件,确定满足所述第二条件,所述输出参数从所述第一值调整为所述第二值。
10.一种数据处理装置,包括:
获得模块,用于基于输出参数得到关于虚拟空间中的输出图像;
调整模块,如果满足第一条件,能用于将输出参数从第一值调整为第二值;
其中,
如果输出参数为所述第一值,所述获得模块得到所述虚拟空间中的第一空间的第一输出图像;其中,所述第一空间中包括目标对象;
如果所述输出参数为所述第二值,所述获得模块得到所述虚拟空间中的第二空间的第二输出图像,其中,所述第二空间中包括所述目标对象。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211218227.4A CN115564932A (zh) | 2022-09-30 | 2022-09-30 | 一种数据处理方法和数据处理装置 |
US18/232,730 US20240112405A1 (en) | 2022-09-30 | 2023-08-10 | Data processing method, electronic device, and stroage medium |
DE102023122733.5A DE102023122733A1 (de) | 2022-09-30 | 2023-08-24 | Datenverarbeitungsverfahren, elektronische einrichtung und speichermedium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211218227.4A CN115564932A (zh) | 2022-09-30 | 2022-09-30 | 一种数据处理方法和数据处理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115564932A true CN115564932A (zh) | 2023-01-03 |
Family
ID=84745406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211218227.4A Pending CN115564932A (zh) | 2022-09-30 | 2022-09-30 | 一种数据处理方法和数据处理装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240112405A1 (zh) |
CN (1) | CN115564932A (zh) |
DE (1) | DE102023122733A1 (zh) |
-
2022
- 2022-09-30 CN CN202211218227.4A patent/CN115564932A/zh active Pending
-
2023
- 2023-08-10 US US18/232,730 patent/US20240112405A1/en active Pending
- 2023-08-24 DE DE102023122733.5A patent/DE102023122733A1/de active Pending
Also Published As
Publication number | Publication date |
---|---|
DE102023122733A1 (de) | 2024-04-04 |
US20240112405A1 (en) | 2024-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11709545B2 (en) | Gaze detection method and apparatus | |
CN108236783B (zh) | 游戏场景中模拟光照的方法、装置、终端设备及存储介质 | |
US10916048B2 (en) | Image processing apparatus, image processing method, and storage medium | |
US11196973B2 (en) | Providing apparatus, providing method and computer readable storage medium for performing processing relating to a virtual viewpoint image | |
US6945869B2 (en) | Apparatus and method for video based shooting game | |
CN108628436B (zh) | 电子装置、显示方法以及非暂态计算机可读取储存媒体 | |
US11270499B2 (en) | Multi line trace gaze to object mapping for determining gaze focus targets | |
KR20190138896A (ko) | 화상 처리 장치, 화상 처리 방법 및 프로그램 | |
US11521346B2 (en) | Image processing apparatus, image processing method, and storage medium | |
CN111275801A (zh) | 一种三维画面渲染方法及装置 | |
CN115564932A (zh) | 一种数据处理方法和数据处理装置 | |
CN111476870B (zh) | 一种对象渲染方法和装置 | |
US11688128B2 (en) | Multi line trace gaze to object mapping for determining gaze focus targets | |
US11423516B2 (en) | Gaze enhanced natural motion blur | |
JP7152873B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
US11778155B2 (en) | Image processing apparatus, image processing method, and storage medium | |
US20240037843A1 (en) | Image processing apparatus, image processing system, image processing method, and storage medium | |
CN117707340A (zh) | 虚拟场景切换方法、装置、设备和存储介质 | |
WO2020121844A1 (en) | Image processing device, image processing method, and program | |
CN116962814A (zh) | 一种渲染vr场景中的视频图像及方法 | |
CN118203847A (zh) | 游戏编辑方法、装置和电子设备 | |
GB2587626A (en) | Variable rendering system and method | |
CN115334324A (zh) | 视频图像处理方法、装置和电子设备 | |
Liao et al. | Using GPU-generated virtual video stream for multi-sensor system | |
WO2015011695A1 (en) | Method and device for 4 dimensional augmented reality applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |