CN111563879B - 一种应用画面显示质量的检测方法及装置 - Google Patents
一种应用画面显示质量的检测方法及装置 Download PDFInfo
- Publication number
- CN111563879B CN111563879B CN202010230288.7A CN202010230288A CN111563879B CN 111563879 B CN111563879 B CN 111563879B CN 202010230288 A CN202010230288 A CN 202010230288A CN 111563879 B CN111563879 B CN 111563879B
- Authority
- CN
- China
- Prior art keywords
- display device
- terminal display
- picture
- field
- view
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
Landscapes
- Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本申请提供一种应用画面显示质量的检测方法及装置。方法包括:在应用启动以后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的应用画面在渲染生成时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据;在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV一致的情况下,所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算表征所述应用画面与当前所述终端显示设备的视场范围的重叠程度的参数值;进而实现了终端显示设备对所显示的应用画面的显示质量进行检测。
Description
技术领域
本申请涉及云计算技术领域,具体而言,涉及一种应用画面显示质量的检测方法及装置。
背景技术
现有的云游戏应用、云VR应用均采用在云端渲染的运行方式,该方式中应用运行于云流化平台上,由云流化平台将应用运行所产生的场景进行渲染,然后将渲染生成的画面进行编码后传输至终端显示设备,终端显示设备进行解码后显示。
随着虚拟现实(Virtual Reality,VR)技术的快速发展,用户对VR头盔的沉浸感提出了更高的要求。VR头盔在为用户呈现VR应用的运行场景时,若用户的头部发生运动,此时VR头盔内所呈现的画面的区域也会跟随发生变化,为满足用户具有很好的沉浸体验,此时需要满足VR头盔内所显示的画面始终覆盖VR头盔的视场范围,但是由于系统时延的存在经常会出现头盔内所显示的画面没有完全覆盖VR头盔的视场范围,即出现黑边的情况;相关技术中,在检测VR头盔所显示的画面是否覆盖VR头盔的视场范围的检测只能通过测试者通过实际佩戴VR头盔进行观看检测画面的显示效果。
发明内容
有鉴于此,本申请提供一种应用画面显示质量的检测方法及装置,以实现终端显示设备对所显示的应用画面的显示质量进行检测。
具体地,本申请是通过如下技术方案实现的:
第一方面,本申请实施例提供了一种应用画面显示质量的检测方法,所述方法应用于终端显示设备,所述方法包括:
在应用启动以后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的应用画面在渲染生成时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据;
在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV一致的情况下,所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算表征所述应用画面与当前所述终端显示设备的视场范围的重叠程度的参数值;
其中,所述应用画面的渲染FOV为所述云流化平台在渲染生成所述应用画面时所采用的渲染FOV。
第二方面,本申请实施例提供了一种应用画面显示质量的检测装置,所述装置应用于终端显示设备,所述装置包括:
获取模块,用于在应用启动后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的应用画面在渲染时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据;
第一计算模块,用于在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV一致的情况下,基于所述第一姿态数据和所述第二姿态数据,计算表征所述应用画面所覆盖的区域与当前所述终端显示设备的视场范围的重叠程度的参数值;
其中,所述应用画面的渲染FOV为所述云流化平台在渲染生成所述应用画面时所采用的渲染FOV。
第三方面,本申请实施例提供了一种机器可读存储介质,机器可读存储介质上存储有若干计算机指令,计算机指令被执行时实现如第一方面所述的方法。
第四方面,本申请实施例提供了一种电子设备,包括:机器可读存储介质和处理器,机器可读存储介质:存储指令代码,处理器:与机器可读存储介质通信,读取和执行机器可读存储介质中的指令代码,实现如第一方面所述的方法。
本申请实施例中提供的一种应用画面显示质量的检测方法及装置,终端显示设备在检测到应用画面显示质量检测的触发事件以后,获取当前所显示的画面在渲染时云流化平台所使用的终端显示设备的第一姿态数据和当前终端显示设备的第二姿态数据,在该应用画面的渲染FOV与终端显示设备的FOV一致的情况下,终端显示设备基于上述的第一姿态数据和第二姿态数据,计算表征该应用画面与当前终端显示设备的视场范围的重叠程度的参数值,该参数值表征了当前所显示的应用画面是否完整覆盖了终端显示的视场范围,进而本申请中实现了在终端显示设备侧进行自动检测终端显示设备所呈现的应用画面是否出现了黑边的情况,实现了对应用画面显示质量的检测,能够为云流化平台渲染或者终端显示设备的画面调整提供参考依据。
附图说明
图1是本申请一示例性实施例示出的一种基于云流化的VR应用运行的功能架构示意图;
图2是本申请一示例性实施例示出的一种应用画面显示质量的检测方法的流程示意图;
图3是本申请一示例性实施例示出的一种应用画面显示的示意图;
图4是本申请一示例性实施例示出的一种用户视场方向发生变化的示意图;
图5是本申请一示例性实施例示出的另一种应用画面显示质量的检测方法的流程示意图;
图6是本申请一示例性实施例示出的一种应用画面显示质量的检测装置的结构示意图;
图7是本申请一示例性实施例示出的一种计算机设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
图1是本申请一示例性实施例示出的一种基于云流化的VR应用运行的功能架构示意图;参照图1所示的实施例,该实施例中以VR应用为例,提供了一种基于云流化的VR应用运行方式架构,该方式中VR应用运行于云流化平台,云流化平台进行VR头盔数据(包含头盔的姿态数据)采集,并对采集的头盔数据进行运动融合及预测得到头盔状态数据,并将该头盔状态数据传递至VR运行时库,VR应用运行过程中通过VR运行时库中的头盔状态数据进行画面渲染,将渲染的画面经过画面处理以后由编码器进行编码,编码器继续将编码后的画面传输至终端显示设备(该方案中的终端显示设备为头盔设备为例),由终端显示设备的解码器对画面进行解码处理,然后经过反畸变处理以后由终端显示设备进行显示输出。
上述方案中,由于系统时延的存在,往往会导致终端显示设备实际显示的画面与终端显示设备的视野范围之间存在偏差,使所显示的画面并没有完全覆盖终端显示设备的视野范围,出现黑边的情况。基于此,本申请实施例提供了一种应用画面显示质量的检测方法及装置。
图2是本申请一示例性实施例示出的一种应用画面显示质量的检测方法的流程示意图;参照图2所示,本实施例中提供的应用画面显示质量的检测方法,应用于终端显示设备,该方法具体包括如下步骤S10-S20:
S10、终端显示设备在应用启动以后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的画面在渲染时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据。
本申请实施例中,上述的终端显示设备包括各类头部显示器,比如VR头盔、AR头盔、MR头盔。上述的应用包括云游戏、云VR等应用,该应用部署于云流化平台,由云流化平台执行应用运行过程中的渲染和编码,并传输值终端显示设备。
终端显示设备在检测到应用画面显示质量检测的触发事件以后进行应用画面显示质量的检测,该应用画面显示质量检测的触发事件包括:到达应用画面显示质量检测的周期;进而,本实施例中终端显示设备可以是根据设置的应用画面显示质量检测的周期,在应用启动以后每间隔预设时间进行一次应用画面显示质量的检测,进而达到监测终端显示设备的应用画面显示质量的目的。一可选地实施例中,上述的应用画面显示质量检测的触发事件还包括:终端显示设备的姿态发生变化;进而本实施例中终端显示设备在检测到自身的姿态发生变化的情况下,进行应用画面显示质量的检测,进而可以有效地判断是否发生黑边的情况以及黑边的大小,进而为进一步评估系统时延的大小提供依据。可选地,上述的触发事件也可以是:接收到云流化平台或者第三方探测系统的检测指令,进而本实施例中,终端显示设备在接收到云流化平台或者第三方探测系统发送的应用画面显示质量检测的指令后进行应用画面显示质量的检测,并在计算得到表征应用画面与当前终端显示设备的视场范围的重叠程度的参数值以后,将该参数值上传至云流化平台或者第三方探测系统,以适应不同的检测场景。示例性的,该第三方探测系统可以是用来对终端显示设备所启动的应用的运行数据进行独立监测的服务器平台。
可选地,终端显示设备接收到云流化平台下发的应用画面,应用该画面中携带有云流化平台渲染生成该应用画面时所使用的终端显示设备的第一姿态数据;或者终端显示设备本地中存储有过去指定时间段内该终端显示设备的姿态数据和对应的时间戳,进而终端显示设备可以根据接收到的应用画面携带的渲染时间戳确定该画面渲染时的终端显示设备的姿态数据;并且,终端显示设备自身设置有进行姿态检测的传感器,能够实时检测终端显示设备的姿态。
S20、在所述应用画面的渲染FOV与所述终端显示设备的FOV一致的情况下,所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值。
终端显示设备接收到云流化平台下发的画面中携带的第一姿态数据中包含有该画面的渲染视场角FOV。
通常情况下,云流化平台在对应用运行所生成的场景进行渲染时是使用固定的渲染FOV,该渲染FOV与终端显示设备的FOV一致。进而本申请实施例中,针对画面的渲染FOV与终端显示设备的FOV相同的情况,终端显示设备在对当前所显示的应用画面进行应用画面显示质量检测时,获取该应用画面渲染时云流化平台所使用的终端显示设备的第一姿态数据和获取当前终端显示设备的第二姿态数据,并应用该第一姿态数据和第二姿态数据计算表征当前终端显示设备所显示的画面与当前终端显示设备的视场范围的重叠程度的参数值。
本申请一实施例中,上述步骤S20具体包括如下步骤A10:
步骤A10、所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述应用画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述应用画面的画面区域之外的部分所占的比率。
参照图3所示的实施例,该实施例中示出了终端显示设备所显示的应用画面没有完全覆盖终端显示设备的视场范围的情况。因为系统时延的原因,云流化平台渲染出来的画面传输至终端显示设备,并在经过终端显示设备的处理(比如异步时间扭曲ATW处理)以后在显示时不能全部覆盖终端显示设备的视场范围,使得用户能够看到画面区域以外的部分(黑边),该部分可能是黑色或者是其他填充颜色,进而导致用户的体验很差;在系统时延较低的情况下终端显示设备所显示的应用画面的画面区域与终端显示设备的视场范围一致或者几乎一致;当系统时延较大时,终端显示设备所显示的应用画面与终端显示设备的视场范围偏差较大,即黑边的情况会比较严重。
本实施例中,终端显示设备具体通过第一姿态数据和第二姿态数据计算在当前终端显示设备的视野范围内应用画面的画面区域所占的比率或者在终端显示设备的视野范围内该应用画面的画面区域之外的部分所占的比率,以此来衡量黑边的大小。
继续以VR头盔为例,若VR头盔在发生运动,用户的视场方向会发生变化。图4是本申请一示例性实施例示出的一种用户视场方向发生变化的示意图;参照图4所示,用户的视场方向通过用户视场角的中心线(也可以是非中心线)来标识;比如,前一时刻的用户视场方向通过视场角的中心线L0来标识,当前时刻的用户视场方向通过视场角的中心线L1来标识,在实际计算时可以是用中心线L0和中心线L1对应的四元数或者欧拉角计算用户视场方向的变化。
进而本实施例中,上述步骤A10中,具体包括如下步骤A10′:
步骤A10′、根据所述第一姿态数据与所述第二姿态数据计算得到所述用户的视场方向偏差,基于所述视场方向偏差计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者基于在视野范围内所述画面的画面区域所占的比率计算在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率。
示例性的,继续参照图3所示,通过以下公式(1),计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率f,
其中,上述的a为常数值,示例性地,该常数值为100;Q0,Q1为表征第一用户视场方向的四元数、第二用户视场方向的四元数,delta表示Q0和Q1的差。
进而本实施例中,通过以下公式(2)计算得到在终端显示设备的视野范围内画面的画面区域之外的部分所占的比率(黑边率BlackBoardRate):
其中,BlackBoardRate∈(0,1)。
本申请一可选的实施例中,上述终端显示设备将最终得到表征当前所显示的画面与当前终端显示设备的视场范围的重叠程度的参数值上传至云流化平台,若云流化平台根据上述参数值判断系统时延较大,云流化平台可以通过对应用所生成的场景进行放大渲染,示例性地,将原来的渲染FOV放大1.2倍,然后使用放大后的FOV进行对应用运行所生成的场景进行渲染,进而解决了时延导致的在终端显示设备发生运动时,终端显示设备侧显示的画面与终端显示设备实际的视场范围不吻合的问题,尽量避免黑边等问题的出现。
本申请另一可选地实施例中,上述终端显示设备将得到的表征当前所显示的画面与当前终端显示设备的视场范围的重叠程度的参数值上传至第三方探测系统,并由该第三方探测系统根据上述参数值判断系统时延较大的情况下,第三方探测系统将该参数值进一步发送至云流化平台,云流化平台对应用所生成的场景进行放大渲染,使用放大后的FOV进行对应用运行所生成的场景进行渲染。本实施例中,为了降低云流化平台的数据处理工作量,将得到的参数值上传至第三方探测系统,并由第三方探测系统根据上述参数值判断系统时延的情况。
图5是本申请一示例性实施例示出的另一种应用画面显示质量的检测方法的流程示意图;参照图5所示,本申请另一可能的实施例中,上述方法还包括如下步骤S30:
S30、在所述画面的渲染视场角FOV与所述终端显示设备的FOV不一致的情况下,所述终端显示设备基于所述第一姿态数据、所述第二姿态数据、所述画面的渲染视场角FOV与所述终端显示设备的FOV之间的差值,计算表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值。
本实施例中,针对画面的渲染FOV与终端显示设备的FOV不一致的情况下,通过当前所显示的画面在渲染时所使用的终端显示设备的第一姿态数据和当前终端显示设备的第二姿态数据计算得到用户的视场方向的偏差,通过该视场方向的偏差以及该画面的渲染FOV与终端显示设备的FOV之间的差值计算表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值。
可选的,上述计算表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值,包括:
计算在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率。
示例性地,在考虑渲染FoV放大的情况下:
假设渲染FoV单方向放大θ度,则按照以下公式(3)计算得到在终端显示设备的视野范围内画面的画面区域所占的比率f:
进一步地,按照以下下公式(4)计算得到在终端显示设备的视野范围内画面的画面区域之外的部分所占的比率(黑边率):
其中,上述的a为常数值,示例性地,该常数值100;
BlackBoardRate∈(0,1),Q0,Q1为表征第一视场方向、第二视场方向的四元数,delta表示Q0和Q1的差。
本申请一可选的实施例中,在计算用于表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值之后,上述方法,还包括:
将表征所述重叠程度的参数值上传至所述云流化平台进行云流化质量的评估或者由所述云流化平台发送至第三方探测系统进行所述应用的云流化质量的评估。该云流化质量包括渲染、编码和传输等的质量。
进而本实施例中实现了云流化平台或者第三方探测系统能够及时获取在终端显示设备上的画面的显示质量,为调整应用渲染和评估系统时延等提供参考依据。
图6是本申请一示例性实施例示出的一种应用画面显示质量的检测装置的结构示意图;参照图6所示,装置应用于终端显示设备,所述检测装置400包括:
获取模块401,用于在应用启动以后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的画面在渲染时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据;上述的应用包括云游戏。
第一计算模块402,用于在所述画面的渲染视场角FOV与所述终端显示设备的FOV一致的情况下,所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算表征所述画面所覆盖的区域与当前所述终端显示设备的视场范围的重叠程度的参数值;
其中,所述应用画面的渲染FOV为所述云流化平台在渲染生成所述应用画面时所采用的渲染FOV。
可选地,所述第一计算模块402,具体用于:
基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率。
可选地,上述第一计算模块402,具体用于:
根据所述第一姿态数据与所述第二姿态数据计算得到所述用户的视场方向偏差,基于所述视场方向偏差计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者基于在视野范围内所述画面的画面区域所占的比率计算在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率。
可选地,所述装置,还包括:
第二计算模块(图中未示出),用于在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV不一致的情况下,基于所述第一姿态数据、所述第二姿态数据和所述应用画面的渲染视场角FOV与所述终端显示设备的FOV之间的差值,计算用于表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值。
可选地,所述应用画面显示质量检测的触发事件,包括:
到达应用画面显示质量检测的周期;
或者,所述终端显示设备的姿态发生改变。
可选地,所述装置,还包括:
上传模块(图中未示出),用于将所述参数值上传至所述云流化平台进行云流化质量的评估或者由所述云流化平台发送至第三方探测系统进行所述应用的云流化质量的评估。
本申请另一实施例中还提供了一种机器可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现上述应用画面显示质量的检测方法的步骤。以实现在终端显示设备侧进行检测所呈现的画面是否出现了黑边的情况,实现了对应用画面显示质量的检测,能够为云流化平台渲染或者终端显示设备的画面调整提供参考依据。
图7是本申请本申请实施例示出的一种计算机设备的结构示意图。参照图7所示,该计算机设备500,至少包括存储器502和处理器501;所述存储器502通过通信总线503和所述处理器501连接,用于存储所述处理器501可执行的指令代码;所述处理器501用于从所述存储器502读取和执行指令代码以实现上述任一实施例所述的应用画面显示质量的检测方法的步骤。以实现在终端显示设备侧进行检测所呈现的画面是否出现了黑边的情况,实现了对应用画面显示质量的检测,能够为云流化平台渲染或者终端显示设备的画面调整提供参考依据。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
适合用于执行计算机程序的计算机包括,例如通用和/或专用微处理器,或任何其他类型的中央处理单元。通常,中央处理单元将从只读存储器和/或随机存取存储器接收指令和数据。计算机的基本组件包括用于实施或执行指令的中央处理单元以及用于存储指令和数据的一个或多个存储器设备。通常,计算机还将包括用于存储数据的一个或多个大容量存储设备,例如磁盘、磁光盘或光盘等,或者计算机将可操作地与此大容量存储设备耦接以从其接收数据或向其传送数据,抑或两种情况兼而有之。然而,计算机不是必须具有这样的设备。此外,计算机可以嵌入在另一设备中,例如移动电话、个人数字助理(PDA)、移动音频或视频播放器、游戏操纵台、全球定位系统(GPS)接收机、或例如通用串行总线(USB)闪存驱动器的便携式存储设备,仅举几例。
适合于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、媒介和存储器设备,例如包括半导体存储器设备(例如EPROM、EEPROM和闪存设备)、磁盘(例如内部硬盘或可移动盘)、磁光盘以及CD ROM和DVD-ROM盘。处理器和存储器可由专用逻辑电路补充或并入专用逻辑电路中。
虽然本说明书包含许多具体实施细节,但是这些不应被解释为限制任何发明的范围或所要求保护的范围,而是主要用于描述特定发明的具体实施例的特征。本说明书内在多个实施例中描述的某些特征也可以在单个实施例中被组合实施。另一方面,在单个实施例中描述的各种特征也可以在多个实施例中分开实施或以任何合适的子组合来实施。此外,虽然特征可以如上所述在某些组合中起作用并且甚至最初如此要求保护,但是来自所要求保护的组合中的一个或多个特征在一些情况下可以从该组合中去除,并且所要求保护的组合可以指向子组合或子组合的变型。
类似地,虽然在附图中以特定顺序描绘了操作,但是这不应被理解为要求这些操作以所示的特定顺序执行或顺次执行、或者要求所有例示的操作被执行,以实现期望的结果。在某些情况下,多任务和并行处理可能是有利的。此外,上述实施例中的各种系统模块和组件的分离不应被理解为在所有实施例中均需要这样的分离,并且应当理解,所描述的程序组件和系统通常可以一起集成在单个软件产品中,或者封装成多个软件产品。
由此,主题的特定实施例已被描述。其他实施例在所附权利要求书的范围以内。在某些情况下,权利要求书中记载的动作可以以不同的顺序执行并且仍实现期望的结果。此外,附图中描绘的处理并非必需所示的特定顺序或顺次顺序,以实现期望的结果。在某些实现中,多任务和并行处理可能是有利的。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
Claims (12)
1.一种应用画面显示质量的检测方法,其特征在于,所述方法应用于终端显示设备,所述方法包括:
在应用启动以后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的应用画面在渲染生成时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据;
在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV一致的情况下,所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算表征所述应用画面与当前所述终端显示设备的视场范围的重叠程度的参数值;
其中,所述应用画面的渲染视场角FOV为所述云流化平台在渲染生成所述应用画面时所采用的渲染FOV;
所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述应用画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述应用画面的画面区域之外的部分所占的比率,具体包括:
根据所述第一姿态数据与所述第二姿态数据计算得到用户的视场方向偏差,基于所述视场方向偏差计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者基于在视野范围内所述画面的画面区域所占的比率计算在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率,具体通过以下公式(1),计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率f,
其中,a为常数值;Q0,Q1为表征第一用户视场方向的四元数、第二用户视场方向的四元数,delta表示Q0和Q1的差。
2.根据权利要求1所述的方法,其特征在于,所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算表征所述应用画面与当前所述终端显示设备的视场范围的重叠程度的参数值,包括:
所述终端显示设备基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述应用画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述应用画面的画面区域之外的部分所占的比率。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述应用画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述应用画面的画面区域之外的部分所占的比率,包括:
根据所述第一姿态数据与所述第二姿态数据计算得到用户的视场方向偏差,基于所述视场方向偏差计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者基于在视野范围内所述画面的画面区域所占的比率计算在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率。
4.根据权利要求1-3任一所述的方法,其特征在于,所述方法,还包括:
在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV不一致的情况下,所述终端显示设备基于所述第一姿态数据、所述第二姿态数据和所述应用画面的渲染视场角FOV与所述终端显示设备的FOV之间的差值,计算用于表征所述应用画面与当前所述终端显示设备的视场范围的重叠程度的参数值。
5.根据权利要求1所述的方法,其特征在于,所述应用画面显示质量检测的触发事件,包括:
到达应用画面显示质量检测的周期;
或者,所述终端显示设备的姿态发生改变。
6.根据权利要求1所述的方法,其特征在于,在所述计算用于表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值之后,所述方法,还包括:
将所述参数值上传至所述云流化平台进行云流化质量的评估或者由所述云流化平台发送至第三方探测系统进行所述应用的云流化质量的评估。
7.一种应用画面显示质量的检测装置,其特征在于,所述装置应用于终端显示设备,所述装置包括:
获取模块,用于在应用启动后,若检测到应用画面显示质量检测的触发事件,获取当前所显示的应用画面在渲染时云流化平台所使用的终端显示设备的第一姿态数据以及当前所述终端显示设备的第二姿态数据;
第一计算模块,用于在所述应用画面的渲染视场角FOV与所述终端显示设备的FOV一致的情况下,基于所述第一姿态数据和所述第二姿态数据,计算表征所述应用画面所覆盖的区域与当前所述终端显示设备的视场范围的重叠程度的参数值;
其中,所述应用画面的渲染视场角FOV为所述云流化平台在渲染生成所述应用画面时所采用的渲染FOV;
所述第一计算模块,具体用于基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述应用画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述应用画面的画面区域之外的部分所占的比率;
所述第一计算模块,具体用于根据所述第一姿态数据与所述第二姿态数据计算得到用户的视场方向偏差,基于所述视场方向偏差计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者基于在视野范围内所述画面的画面区域所占的比率计算在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率,具体通过以下公式(1),计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率f,
其中,a为常数值;Q0,Q1为表征第一用户视场方向的四元数、第二用户视场方向的四元数,delta表示Q0和Q1的差。
8.根据权利要求7所述的装置,其特征在于,所述第一计算模块,具体用于:
基于所述第一姿态数据和所述第二姿态数据,计算在所述终端显示设备的视野范围内所述应用画面的画面区域所占的比率或者在所述终端显示设备的视野范围内所述应用画面的画面区域之外的部分所占的比率。
9.根据权利要求8所述的装置,其特征在,所述第一计算模块,具体用于:
根据所述第一姿态数据与所述第二姿态数据计算得到用户的视场方向偏差,基于所述视场方向偏差计算当前在所述终端显示设备的视野范围内所述画面的画面区域所占的比率或者基于在视野范围内所述画面的画面区域所占的比率计算在所述终端显示设备的视野范围内所述画面的画面区域之外的部分所占的比率。
10.根据权利要求7-9任一所述的装置,其特征在于,所述装置,还包括:
第二计算模块,用于在所述应用画面的渲染FOV与所述终端显示设备的FOV不一致的情况下,基于所述第一姿态数据、所述第二姿态数据和所述应用画面的渲染视场角FOV与所述终端显示设备的FOV之间的差值,计算用于表征所述画面与当前所述终端显示设备的视场范围的重叠程度的参数值。
11.一种机器可读存储介质,其特征在于,机器可读存储介质上存储有若干计算机指令,计算机指令被执行时执行如权利要求1-6任一所述的方法。
12.一种电子设备,其特征在于,包括:机器可读存储介质和处理器,机器可读存储介质:存储指令代码;处理器:与机器可读存储介质通信,读取和执行机器可读存储介质中的指令代码,实现如权利要求1-6任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010230288.7A CN111563879B (zh) | 2020-03-27 | 2020-03-27 | 一种应用画面显示质量的检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010230288.7A CN111563879B (zh) | 2020-03-27 | 2020-03-27 | 一种应用画面显示质量的检测方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111563879A CN111563879A (zh) | 2020-08-21 |
CN111563879B true CN111563879B (zh) | 2023-09-26 |
Family
ID=72073055
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010230288.7A Active CN111563879B (zh) | 2020-03-27 | 2020-03-27 | 一种应用画面显示质量的检测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111563879B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112738553A (zh) * | 2020-12-18 | 2021-04-30 | 深圳市微网力合信息技术有限公司 | 一种基于网络通信质量的自适应云渲染系统及方法 |
CN113542757B (zh) * | 2021-07-20 | 2024-04-02 | Oppo广东移动通信有限公司 | 云应用的图像传输方法、装置、服务器及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107735152A (zh) * | 2015-06-14 | 2018-02-23 | 索尼互动娱乐股份有限公司 | 用于虚拟现实(vr)观看的扩展视野重新渲染 |
CN108648254A (zh) * | 2018-04-27 | 2018-10-12 | 中科创达软件股份有限公司 | 一种图像渲染方法及装置 |
CN108921951A (zh) * | 2018-07-02 | 2018-11-30 | 京东方科技集团股份有限公司 | 虚拟现实图像显示方法及其装置、虚拟现实设备 |
CN109192113A (zh) * | 2018-06-29 | 2019-01-11 | 努比亚技术有限公司 | 终端显示方法、终端及计算机可读存储介质 |
CN109270688A (zh) * | 2013-02-14 | 2019-01-25 | 精工爱普生株式会社 | 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法 |
WO2019155876A1 (ja) * | 2018-02-06 | 2019-08-15 | ソニー株式会社 | 画像処理装置、画像処理方法、および画像提供システム |
-
2020
- 2020-03-27 CN CN202010230288.7A patent/CN111563879B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109270688A (zh) * | 2013-02-14 | 2019-01-25 | 精工爱普生株式会社 | 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法 |
CN107735152A (zh) * | 2015-06-14 | 2018-02-23 | 索尼互动娱乐股份有限公司 | 用于虚拟现实(vr)观看的扩展视野重新渲染 |
WO2019155876A1 (ja) * | 2018-02-06 | 2019-08-15 | ソニー株式会社 | 画像処理装置、画像処理方法、および画像提供システム |
CN108648254A (zh) * | 2018-04-27 | 2018-10-12 | 中科创达软件股份有限公司 | 一种图像渲染方法及装置 |
CN109192113A (zh) * | 2018-06-29 | 2019-01-11 | 努比亚技术有限公司 | 终端显示方法、终端及计算机可读存储介质 |
CN108921951A (zh) * | 2018-07-02 | 2018-11-30 | 京东方科技集团股份有限公司 | 虚拟现实图像显示方法及其装置、虚拟现实设备 |
Non-Patent Citations (2)
Title |
---|
Alexander Marquardt等.Non-Visual Cues for View Management in Narrow Field of View Augmented Reality Displays.2019 IEEE International Symposium on Mixed and Augmented Reality (ISMAR).2019,全文. * |
朱华西 ; 谢厚亮.动漫云计算渲染平台的应用.科技创新导报.2017,(015),全文. * |
Also Published As
Publication number | Publication date |
---|---|
CN111563879A (zh) | 2020-08-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2019205842A1 (zh) | 相机姿态追踪过程的重定位方法、装置及存储介质 | |
US10481689B1 (en) | Motion capture glove | |
EP3291536B1 (en) | Methods, devices and systems for automatic zoom when playing an augmented reality scene | |
US20120120113A1 (en) | Method and apparatus for visualizing 2D product images integrated in a real-world environment | |
US20080137913A1 (en) | Optical Flow Based Tilt Sensor | |
CN107111885A (zh) | 用于确定便携式设备的位置的方法 | |
CN111563879B (zh) | 一种应用画面显示质量的检测方法及装置 | |
CN113806036A (zh) | 虚拟内容的输出 | |
JP6609640B2 (ja) | 電子デバイス上における環境マッピング用のフィーチャ・データの管理 | |
CN108668108B (zh) | 一种视频监控的方法、装置及电子设备 | |
CN109154862B (zh) | 用于处理虚拟现实内容的装置、方法和计算机可读介质 | |
CN112927259A (zh) | 基于多相机的裸手追踪显示方法、装置及系统 | |
US20230300464A1 (en) | Direct scale level selection for multilevel feature tracking under motion blur | |
US20210201502A1 (en) | Method and system for motion prediction | |
CN114543797B (zh) | 位姿预测方法和装置、设备、介质 | |
US11615506B2 (en) | Dynamic over-rendering in late-warping | |
US11765457B2 (en) | Dynamic adjustment of exposure and iso to limit motion blur | |
US20220375041A1 (en) | Selective image pyramid computation for motion blur mitigation in visual-inertial tracking | |
WO2022245821A1 (en) | Selective image pyramid computation for motion blur mitigation | |
US20240029197A1 (en) | Dynamic over-rendering in late-warping | |
CN107872671A (zh) | 一种图片编码方法及终端 | |
US11683585B2 (en) | Direct scale level selection for multilevel feature tracking under motion blur | |
CN115550563A (zh) | 视频处理方法、装置、计算机设备和存储介质 | |
CN107038746B (zh) | 一种信息处理方法及电子设备 | |
CN116980744B (zh) | 基于特征的摄像头追踪方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |