CN108307190A - 用于测试显示器的方法、装置和计算机程序产品 - Google Patents

用于测试显示器的方法、装置和计算机程序产品 Download PDF

Info

Publication number
CN108307190A
CN108307190A CN201711456931.2A CN201711456931A CN108307190A CN 108307190 A CN108307190 A CN 108307190A CN 201711456931 A CN201711456931 A CN 201711456931A CN 108307190 A CN108307190 A CN 108307190A
Authority
CN
China
Prior art keywords
display
movement
described image
movable information
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711456931.2A
Other languages
English (en)
Other versions
CN108307190B (zh
Inventor
K.乔基恩
P.艾蒙恩
许晴晏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
European Pfirter Co Ltd
Original Assignee
European Pfirter Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=60142624&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN108307190(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by European Pfirter Co Ltd filed Critical European Pfirter Co Ltd
Publication of CN108307190A publication Critical patent/CN108307190A/zh
Application granted granted Critical
Publication of CN108307190B publication Critical patent/CN108307190B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/04Diagnosis, testing or measuring for television systems or their details for receivers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

公开了用于测试诸如头戴式显示器之类的显示器的各种方法、装置和计算机程序产品。在一些实施例中,所述方法包括:捕获由显示器的显示元件示出的图像集合;移动显示器;以及接收显示器的移动的运动信息。检测显示器的移动的瞬间作为第一时间实例。比较图像集合的至少两个图像的内容,以确定由显示元件示出的信息的至少一部分是否已经被移动到显示元件的另一个位置。提供比较结果作为所述图像内容的运动信息,其中基于图像内容的运动信息来检测图像集合中的移动。检测图像集合中的移动的瞬间作为第二时间实例。然后可以基于第二时间实例与第一时间实例之间的时间差异来确定运动光子延迟。

Description

用于测试显示器的方法、装置和计算机程序产品
技术领域
本发明涉及一种用于测试显示器的方法。本发明还涉及用于测试显示器的装置。本发明进一步涉及用于测试显示器的计算机程序产品。
背景技术
本章节意图提供针对权利要求中所叙述的发明的背景或情境。本文中的描述可以包括可能被贯彻的概念,但是不一定是已经被先前想到或贯彻的概念。因此,除非在本文中另行指定,本章节中所描述的内容不是针对本申请中的说明书和权利要求的现有技术,并且并不由于在本章节中包括而被承认是现有技术。
所谓的头戴式显示器是用户将会将其带上他/她的头部上以查看由例如移动电话、膝上型计算机、台式计算机或能够产生图像和/或视频的一些其他设备所提供的视觉信息的显示器。头戴式显示器通常具有两个单独的显示元件,一个用于用户的左眼,一个用于用户的右眼。然而,一些头戴式显示器可以仅使用一个显示器,使得显示器的左部分被左眼看到以及显示器的右部分被右眼看到。
头戴式显示器还可以包括移动检测器,其提供用户头部移动的信息。该移动信息可以被信息产生设备利用以确定所显示的信息是否应当改变。这可以是在用户正观看所谓的360度全景视频或图像时的情况。全景视频包含有关场景的周围环境的信息,但是头戴式显示器仅示出该场景的一部分。当用户转动他/她的头部时,头戴式显示器应当跟随该移动以使得不同的场景应当被示出。
头戴式显示器还可以被用于所谓的虚拟现实(VR)和/或增强现实(AR)应用中,其中用户可以感觉存在于由头戴式显示器示出的环境中。换言之,用户正虚拟地存在于该环境中。
在实际的实现方式中,在头部的实际移动与所显示信息中的对应改变之间可能存在延时。该延时可以被称为“运动光子延迟”(motion-to-photon latency)。存在可以影响运动光子延迟的若干个原因。例如,移动检测器在其将所检测到的移动的信息发送到设备之前可能具有一些延时,在所检测到的移动的所接收到的信息被处理以及用于确定要由头戴式显示器示出的场景作为移动的结果而应当如何改变之前,该设备可能具有一些延时。
运动光子延迟的程度可能影响用户如何体验由头戴式显示器示出的场景以及场景的改变。此外,如果运动光子延迟过高(即,从移动到显示器中的改变存在长延时),则用户甚至可能感到不适。高运动光子延迟可以诱发晕动病和/或恶心,而低运动光子延迟可以改善目前的状况。
除了运动光子延迟之外,还存在头戴式显示器所具有的可能影响观看体验的其他方面,诸如像素持久度、帧跳动、帧抖动、掉帧/重复帧、音频/视频同步化、应用运动延迟和/或左眼对比右眼帧延时。像素持久度意指显示器用来示出像素的时间。像素持久度值应当在特定的时间框架内。过长的像素持久度引起运动模糊,而过短的像素持久度可能影响所观看视频的照度和对比度。过长的像素持久度可能是针对晕动病和用户恶心的原因之一。帧跳动是平均内容更新速度,也表达为每秒帧数(fps)。在一些高端虚拟现实系统中,帧跳动可能高达120 fps并且通常至少是60 fps。帧抖动是内容更新的变化,也表达为标准偏差(以ms为单位)。与在基本虚拟现实使用中可能常见的平移移动一起,不良的帧抖动可能显著地降低终端用户所感知的用户体验。
掉帧/重复帧通常是严重的处理/同步化问题的迹象。带宽问题也可能引起掉帧。掉帧/重复帧可能与帧抖动一起出现。与动态场景(例如,平移移动)一起,掉帧/重复帧还可能降低终端用户所感知的用户体验。音频/视频同步化也是一种可能影响终端用户所感知的视听体验的问题。在多通道音频中,所有音频通道应当与彼此同步化,以及应当与所呈现的视觉内容同步化。音频/视频同步化和/或左显示器刷新时间与右显示器刷新时间之间的左眼对比右眼帧延时差异(左眼对比右眼帧延时)可能对观看体验具有使人厌烦的影响。
可以测量应用运动延迟,以使得当用户移动她/他的头部时(例如,倾斜和/或转动头部),与头戴式显示器附接的传感器检测到该移动,并且将该移动的指示提供给头戴式显示器的控制器。可以将信号发送到模拟系统,所述模拟系统确定由头戴式显示器示出的图像应当如何改变。将相应地生成新图像并且将该新图像发送到头戴式显示器来被显示。可以通过从新图像的生成到由头戴式显示器实际显示该新图像所花费的时间来确定应用光子延迟(application-to-photon)。然而,该测量结果并不将从移动的检测到新图像的生成所花费的时间考虑在内。因此,与在使用头戴式显示器时用户体验到的实际运动光子延迟相比,应用光子延迟可以指示过短的延迟值。
发明内容
本发明的一个目的是提供用于测试诸如头戴式显示器之类的显示器的方法和装置。
一些实施例提供一种用于测试显示器的方法。在一些实施例中,要被测试的显示器被放置在可以被旋转的测试台上。测试台可以包括移动编码器,其向测试装置提供移动信息。所述测试装置包括诸如相机的图像传感器之类的图像传感器,其被设置为使得图像传感器能够查看显示器的显示元件的至少一部分,以及可以基于旋转来识别所显示图像的移动。然后可以基于测试台的实际移动(例如由移动编码器指示的)与由图像传感器检测的显示器上的改变之间的时间差异来确定运动光子延迟。
在详细描述中提供了本发明的示例的各种方面。
根据第一方面,提供了一种用于测试显示器的方法,所述方法包括:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
根据第二方面,提供了一种用于测试显示器的装置,所述装置包括至少一个处理器;以及包括计算机程序代码的至少一个存储器,所述至少一个存储器和所述计算机程序代码被配置成利用所述至少一个处理器来使所述装置实行至少以下各项:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
根据第三方面,提供了一种计算机可读储存介质,在其上存储有供装置使用的代码,所述代码在由处理器执行时,使所述装置实行:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示单元的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的移动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
附图说明
为了更完整地理解本发明的示例实施例,现在对结合附图所进行的以下描述做出参考,其中:
图1是根据示例实施例的测试装置的简化框图;
图2图示了根据示例实施例的其中头戴式显示器被安装在测试台上的示例情形;
图3a-3f示出了根据描绘用于测试设备的机构的示例的示例实施例的由要用在运动光子延迟确定中的移动检测器和图像分析器块产生的信号以及根据该信号所获得的一些运动光子延迟计算结果的示例;
图4示出了根据示例实施例的方法的流程图;
图5图示了由头戴式显示器查看的全景图像;
图6示出了测试图像的示例;
图7是所感知的运动模糊的示例图示;以及
图8图示了运动音频延迟的示例。
具体实施方式
在下文将描述一些示例实施例。图1是根据本发明的示例实施例的测试装置1的简化框图,图2图示了根据本发明的示例实施例的用于测试显示器20的测试机构,以及图4是根据本发明的示例实施例的方法的流程图。在该示例中,显示器20是头戴式显示器,但是所述测试机构还可以被用于测试其他种类的显示器。测试装置1包括控制块5,其被适配成对测试装置1的操作进行控制。测试装置1还包括相机4,其意图在测试头戴式显示器20期间捕获图像。相机4应当被布置为使得其在测试期间相对于头戴式显示器20保持在相同位置中。根据实施例,这被布置为使得相机4与测验台3(图2)相附接。测验台3可以是至少可水平转动的,以模拟用户头部的移动,如稍后将在本说明书中进行描述的那样。根据实施例,测试台3还可以在与水平方向正交的方向上(即,在竖直方向上)可转动。测试装置1进一步包括测试台移动检测器6,其可以基于测试台3的移动向控制块5提供信号。控制块5可以包括运动信息处理块2,其可以将从移动检测器6接收到的运动信息处理成可以被用于确定测试台3和被附接到测试台3的头戴式显示器20已经如何移动的形式。测试装置1还具有与光纤10(诸如塑料光纤(POF)或玻璃光纤(GOF))的一端10a相附接的光传感器11。光纤10使光穿过光纤10的核心传输到光传感器11。光纤10的另一端10b可以被用于将其附接在头戴式显示器20的显示器21a、21b的表面上。光转换器12将光传感器11的输出转换成数字样本。
应当注意的是,还可能的是使用另一个相机或光学传感器代替光纤10和光传感器11。根据实施例,光纤10可以包括多个光纤,即一束光纤。
测试装置1可以进一步包括:用于储存用于操作测试装置1的计算机代码和/或数据的存储器16、用于向测试装置1的用户显示信息的显示器13、以及用于从用户接收指令的诸如键盘和/或指示设备和/或触摸传感器和/或传声器和/或一些其他输入设备等等的输入装置14。
相机4的传感器元件不需要具有非常高的分辨率,而低分辨率传感器元件可以提供用于测试过程的足够信息。作为示例,相机4可以是通常被用在计算机鼠标中以跟踪计算机鼠标移动的所谓的光流相机。这种相机的传感器元件的分辨率是x和y方向二者上的几十个(couple of tens)像素,例如30×30个像素,但却是相对高速的,使得其可以捕获足够的每秒帧数(fps)来足够快速地跟踪显示器上的改变。
图5图示了其中由用户501通过头戴式显示器20查看全景图像500的示例。头戴式显示器20仅示出全景图像500的一部分。利用虚线502来图示这一部分。当用户501转动他/她的头部时,由头戴式显示器20示出的图像也应当相应地改变,使得用户看到全景图像500的另一部分。在图5中利用箭头和虚线503图示出示图的这一改变。
在下文中,更详细的解释测试装置1的操作。假设的是,头戴式显示器20具有两个单独的显示单元21a、21b,一个显示器21a用于左眼,而另一个显示器21b用于右眼,但是当测试其中将同一显示器21用于显示针对左眼和右眼二者的图像的头戴式显示器20时,也可以应用类似的测试方法。此外,如果应当量度左显示器与右显示器之间的差异时,测试装置1可以包括两个相机4和两个光传感器11以及两个光纤10,使得可以基本上同时实行类似的操作。
头戴式显示器20被放置402到测验台3,以及可以由头戴式显示器20的显示器21a、21b示出测验图像或测验视频。光纤10的第二端10b被放在头戴式显示器20的显示器21a、21b的表面上。根据实施例,光纤的第二端10b被放在基本上与相机4相比相同的水平位置上,即,第二端10b和相机4是竖直对齐的。控制块5控制相机4来从显示器21a、21b中的一个捕获图像406。相机4的捕获速率与头戴式显示器20的显示器21a、21b的显示速率基本上相同。这可以被实现为例如使得经由光纤10传输并且由光传感器11检测到的光学信息被用来检测由显示器20显示的帧的改变,以及相机4被控制成以与显示器20的显示速率相同的速度来捕获图像。可以由控制块5将所捕获的图像储存到存储器16中,并且可以由图像分析器块15对所储存的图像进行分析。
图像分析器块15可以比较连续图像的内容,以确定408由头戴式显示器20示出的信息已经如何改变。这些改变可以揭示例如图像已经例如在水平方向上和/或在竖直方向上移动了多少。可以由图像分析器块15输出该移动信息,例如输出为连续的值流,其指示显示器21a、21b上的图像的实际移动。可以向运动光子计算元件7提供该信息以用于未来的使用。
移动检测器6基于测试台3的移动来产生信号,其中控制块5可以使用该信息来确定测试台3(以及相应地,头戴式显示器20)何时移动。如之前提到的,移动信息可以例如包括在水平方向上的转动、在水平方向上的转动或两者。然而,移动信息可以附加地或代替地包括其他种类的移动数据。
图3a示出了由图像分析器块15产生的信号(图3a中的曲线501)和由移动检测器6产生的信号(图3a中的曲线502)的示例。可以看到的是,曲线501滞后于来自运动检测器6的信号若干毫秒。
图6示出了测试图像的非限制性示例,但是也可以使用其他种类的图像。图6的测试图像具有一些图案,所述图案具有充分锐利的边缘(例如,在白背景上的黑图案或反之亦然),并且该图案中的许多图案是关于显示器20的x和y坐标具有不同旋转角度的箭头图案的种类。
运动光子计算元件7接收410移动信息,并且将其用作头戴式显示器20如何移动的指示。运动光子计算元件7可以使用412来自图像分析器块15的运动信息以及来自移动检测器6的运动信息来计算运动光子延迟。这种计算可以例如包括以下各项中的一项或多项。运动光子计算元件7可以包括求导元件7a,其对来自图像分析器块15的运动信息(图3b中的曲线503)和来自移动检测器6的运动信息(图3b中的曲线504)两者实行求导运算。图3b图示了当已经在求导中使用了50个样本的滑动窗口时的求导的示例。曲线503是来自图像分析器块15的运动信息的求导结果,以及曲线504是来自移动检测器6的运动信息的求导结果。可以使用例如回归来在-1……+1之间将值进行归一化:
(1)
在这些曲线中,可以清晰地看到运动光子延迟。
图3c图示了当已经在求导中使用了10个样本的滑动窗口时的求导的示例。曲线506是来自图像分析器块15的运动信息的归一化求导结果,以及曲线505是来自移动检测器6的运动信息的归一化求导结果。
确定来自图像分析器块15的运动信息与来自移动检测器6的运动信息之间的时延(即,运动光子延迟)的一些其他示例是对平方差的互相关和求和。图3d示出了在求导阶段中与50个样本的滑动窗口的互相关的示例结果,以及图3e示出了在具有四个不同测量长度(1000 ms、2000 ms、3000 ms和4000 ms)的求导阶段中与10个样本的滑动窗口的互相关的示例结果。图3f示出了在一定时间范围下运动光子延迟的结果。曲线507示出了来自图像分析器块15的运动信息,曲线508示出了来自移动检测器6的运动信息,以及曲线509示出了所确定的运动光子延迟。
根据实施例,测试装置1还可以显示414曲线501、502,并且提供所确定的运动光子延迟作为数字指示。
要由头戴式显示器20示出的测试图像或视频可以包含相对易于彼此区分的图案。换言之,图案应当具有十分锐利的边缘,使得当头戴式显示器转动时,将在显示元件21a、21b上的不同位置处示出图案,以及相机4应当能够检测到位移量。作为示例,图案可以是黑白图案(或者白色背景上的黑色图案或反之亦然)。图案的边缘也可以出现在不同方向上,而不仅仅在一个方向上。例如,边缘中的一些可以是竖直的、一些是水平的,以及一些边缘可以关于显示元件21a、21b的水平和竖直边缘是倾斜的。因此,对于测试装备1的图像分析器15可能更容易的是检测由头戴式显示器20示出的图像的移动。
在下文中,将更详细描述像素延迟确定。光传感器11经由光纤10接收照度并且产生与照度的强度成比例的电信号。由转换器12将电信号转换成指示所检测到的照度量的样本。电信号可以包括一个亮度分量或针对不同颜色(红色、绿色、蓝色)的不同分量,其中可以针对显示器21a、21b的所有颜色对像素持久度进行测量。可以由像素持久度确定元件8使用样本来计算像素持久度以及可能计算像素上升时间和/或像素下降时间。
光传感器11还可以被用于检测被包括在视频流中的可能标记,以检测帧改变以及可能检测跳帧和/或重复帧。这样的标记可以是二态标记或者具有多个状态。二态标记可以例如在每帧之后在两个状态(例如黑/白)之间改变颜色或照度水平,以使得在每隔一帧中所述标记具有第一状态,以及在每隔一帧中所述标记具有第二状态。在多态实施例中,标记可以具有多于两个不同的颜色或照度水平,其中标记可以在每个连续帧中具有不同颜色,并且颜色可以根据状态序列而变化。如果标记的所检测到的状态序列并不遵循所假设的状态序列,则其可以指示跳帧或重复帧。可以由测试装置1向用户指示这种情况。
根据实施例,测试装置1还可以测量帧跳动、帧抖动、音频/视频同步化和/或左眼对比右眼帧延时。可以通过对所捕获的图像进行检查来测量帧跳动,以检测头戴式设备20显示帧时的瞬间,其中有可能计算平均内容更新速度,所述平均内容更新速度还可以被表达为每秒帧数(fps)。
帧抖动是内容更新的变化,也被表达为标准差(以ms为单位),其中所捕获图像和所捕获图像的时序信息可以被用于确定内容更新上的变化。
液晶显示器(LCD)例如可能具有针对原色(红色、绿色、蓝色)的完全不同的响应,从而引起多光谱重影伪像。图7图示了某些持久度值可以如何被感知为运动模糊。在图7中,利用不同的灰度等级来指示不同颜色(红色、绿色、蓝色)。可以将重影伪像划分到三种主要类型上:
-非对称像素过渡(重影、拖尾运动伪像);
-响应时间加速(晕影(coronas)、像素过冲);以及
-脉冲宽度调制(PWM)伪像(重复的图像、运动流动性问题)。
因为针对上述伪像的根源全部都在LCD显示器的响应特性中,所以并不需要传感器和/或显示器内容的动态移动,而是可以使用静止机构。根据实施例,可以使用利用静止测量机构的动态目标图像,其中光纤10和光学传感器11可以被用来检测由显示器20示出的动态测试图案。所述动态测试图案可以包括不同颜色(诸如红色、绿色和蓝色)的重复序列,使得在100%的颜色分量之前和之后,存在50%的颜色值。在不同实现方式中颜色的改变速率可能是不同的,但是根据示例,改变速率是0.5 s。例如,首先图案是黑色的,之后是具有50%强度的红色分量,然后是具有100%强度的红色分量,以及再者是具有50%强度的红色分量。下一个“图案”可以是黑色的,之后是蓝色分量,首先是以50%的强度,然后是以100%的强度,以及再者是以50%的强度。在下一个黑色图案之后,可以存在绿色分量,首先是以50%的强度,然后是以100%的强度,以及再者是以50%的强度。可以将该序列重复若干次。测试装置可以测量针对每个颜色分量的响应曲线,其将产生针对每个颜色的上升和下降曲线,由此提供非对称像素过渡和响应时间加速。
重影可能在某些空间位置上表现得更强烈。因此,可以将光纤10附接到沿着显示器20的多个位置,以检查显示器20的不同空间位置处的重影。
在下文中,将对可以如何测试虚拟现实控制器的示例进行解释。可以将虚拟现实控制器例如用作用于头戴式显示器的指示器,以及用作类似于传统计算机鼠标的移动控制器。头戴式显示器应当对虚拟现实控制器的移动给出响应。该响应取决于用户利用虚拟现实控制器实行什么操作。实际控制操作与由虚拟现实控制器做出的响应之间的时间可能影响用户的存在感,使得延时越长,用户可能对虚拟现实控制器和头戴式显示器的互操作感觉越不真实。该延时可以被称为控制光子延迟。测试机构可以如下。虚拟现实控制器被放在测试台3上,并且头戴式显示器20保持静止。可以由头戴式显示器20显示测试图像,并且作为对虚拟现实控制器的移动的响应而移动测试图像。相机4正查看头戴式显示器20,并且可以将光纤10附接于头戴式显示器20的表面上。然而,如果仅在分析中使用由相机4捕获的图像,则可能并不需要光纤10。然后可以移动(例如,通过转动和/或倾斜)测试台3来模仿虚拟现实控制器的用户的移动。测试台移动检测器6基于测试台3的移动来向控制块5提供信号。可以对所捕获的图像进行分析来检测作为对测试台3和虚拟现实控制器的移动的响应的改变。在关于由头戴式显示器所显示的信息的所检测到的改变和所检测到的移动之间的时间差异与控制光子延迟相对应。
根据实施例,不需要测试台3,但是可以手动地移动虚拟现实控制器。因此,可能需要具有虚拟现实控制器的移动检测器来向控制块5用信号通知移动信息。
应注意的是,头戴式显示器20不需要是静止的,但是可以例如与相机4一起被定位在测试台3上,使得头戴式显示器20和相机4将不相对于彼此移动。
例如,可以实行测量音频/视频同步化,以使得头戴式显示器20被命令来输出声音信号,所述声音信号可以由测试装置1的传声器来捕获。所检测到的声音信号和所捕获的图像之间的时间差异可以被用作将音频和视频同步化得有多好或有多不好的指示。
运动音频测试还可以包括对音频信号的到达角度的确定。因此,音频信号的到达角度可以揭示音频信号正在跟随头戴式显示器的移动所利用的精确度。图8中图示了运动音频延迟的示例。用户可以观看其中注意到一个或多个音频源的全景视频80,其中系统应当生成音频信号,使得用户识别音频信号所到达的方向。该方向应当与音频信号源的方向相对应。如果用户转动他/她的头部,则音频信号的到达方向仍应当与显示器中的音频信号源的方向相对应。因此,如果音频信号的到达方向与音频信号源的视觉位置之间存在差异,则用户可能感受到这是使人厌烦的。图8中的箭头V图示了声音来源的实际方向,并且图8中的箭头S图示了由系统生成的声音的方向。在理想情形中,这些箭头V、S应当指向相同的角度,即,在图中是重叠的。
可以例如通过使用用于接收来自左扬声器和右扬声器的音频信号的两个传声器以及测量所接收到的音频信号之间的相位差来确定音频信号的到达方向。相位差可以指示音频信号的到达方向。然而,也可以将其他方法用于到达方向的确定。
应注意的是,可以针对左显示器21a和右显示器21b两者来实行上文所描述的测量,其中可以确定左显示器21a和右显示器21b之间的差异,诸如左显示器刷新时间与右显示器刷新时间(左眼对比右眼帧延时)之间的左眼对比右眼帧延时差异。
在多通道音频中,应当将所有音频通道彼此同步化,以及将其与所呈现的视觉内容同步化,其中如果测试装置1包括至少如存在的音频通道那样多的传声器,则测试装置1可以能够确定将不同音频通道彼此同步化得有多好。
将在下文中提供一些示例。
根据第一示例,提供了一种用于测试能够示出图像的显示器的方法,所述方法包括:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
在一些实施例中,所述方法包括:
使用滑动窗口对所述显示器的所述移动的运动信息和所述图像内容的运动信息进行求导;以及
基于求导结果来确定所述运动光子延迟。
在一些实施例中,所述方法包括:
将所述求导结果互相关;以及
基于所述互相关的结果来确定所述运动光子延迟。
在一些实施例中,所述方法进一步包括:
接收来自所述显示元件的照度信息;
基于所接收到的照度信息来形成照度样本集合;以及
使用所述照度样本集合来确定所述显示元件的像素持久度。
在一些实施例中,所述图像集合包括视频的图像,所述视频包括标记,其中所述方法进一步包括:
接收由所述显示元件示出的标记的照度信息;
基于所接收到的照度信息来形成照度样本集合;
基于所述照度样本集合的样本来检测所述标记中的改变;以及
使用所检测到的改变的时间信息来确定以下各项中的至少一项:
掉帧;
重复帧。
在一些实施例中,所述方法包括:
使用头戴式显示器作为要被测试的显示器。
根据第二示例,提供了一种用于测试显示器的装置,所述装置包括:至少一个处理器;以及包括计算机程序代码的至少一个存储器,所述至少一个存储器被配置成利用所述至少一个处理器使所述装置实行至少以下各项:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
在所述装置的一些实施例中:
要被测试的显示器是头戴式显示器。
根据第三示例,提供了一种用于测试能够以第一分辨率示出图像的显示器的计算机程序产品,所述计算机程序产品被储存在有形介质上,所述有形介质在其上具有供装置使用的代码,所述代码当由处理器执行时使所述装置进行以下各项:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的所述信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来确定所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。

Claims (11)

1.一种用于测试能够以第一分辨率示出图像的显示器的方法,所述方法包括:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
2.根据权利要求1所述的方法,包括:
使用滑动窗口对所述显示器的所述移动的运动信息和所述图像内容的运动信息进行求导;以及
基于求导结果来确定所述运动光子延迟。
3.根据权利要求2所述的方法,包括:
将所述求导结果互相关;以及
基于所述互相关的结果来确定所述运动光子延迟。
4.根据权利要求1所述的方法,包括:
接收来自所述显示元件的照度信息;
基于所接收到的照度信息来形成照度样本集合;以及
使用所述照度样本集合来确定所述显示元件的像素持久度。
5.根据权利要求1所述的方法,其中所述图像集合包括视频的图像,所述视频包括标记,其中所述方法进一步包括:
使用滑动窗口对所述显示器的所述移动的运动信息和所述图像内容的运动信息进行求导;以及
基于求导结果来确定所述运动光子延迟。
6.根据权利要求1所述的方法,包括:
使用头戴式显示器作为要被测试的显示器。
7.一种用于测试显示器的装置,所述装置包括:至少一个处理器;以及包括计算机程序代码的至少一个存储器,所述至少一个存储器被配置成利用所述至少一个处理器使所述装置实行至少以下各项:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来检测所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
8.根据权利要求7所述的装置,所述包括计算机程序代码的至少一个存储器被配置成利用所述至少一个处理器使所述装置实行以下各项:
使用滑动窗口对所述显示器的所述移动的运动信息和所述图像内容的运动信息进行求导;以及
基于求导结果来确定所述运动光子延迟。
9.根据权利要求8所述的装置,所述包括计算机程序代码的至少一个存储器被配置成利用所述至少一个处理器使所述装置实行以下各项:
将所述求导结果互相关;以及
基于所述互相关的结果来确定所述运动光子延迟。
10.根据权利要求7所述的装置,其中:
要被测试的显示器是头戴式显示器。
11.一种用于测试能够以第一分辨率示出图像的显示器的计算机程序产品,所述计算机程序产品被储存在有形介质上,所述有形介质在其上具有供装置使用的代码,所述代码当由处理器执行时使所述装置进行以下各项:
捕获由所述显示器的显示元件示出的图像集合;
移动所述显示器;
接收所述显示器的所述移动的运动信息;
检测所述显示器的所述移动的瞬间作为第一时间实例;
比较所述图像集合的至少两个图像的内容,以确定由所述显示元件示出的所述信息的至少一部分是否已经被移动到所述显示元件的另一个位置;
提供比较结果作为所述图像内容的运动信息;
基于所述图像内容的运动信息来确定所述图像集合中的移动;
确定所述图像集合中的所述移动的瞬间作为第二时间实例;以及
基于所述第二时间实例与所述第一时间实例之间的时间差异来确定运动光子延迟。
CN201711456931.2A 2017-01-13 2017-12-28 用于测试显示器的方法、装置和计算机可读介质 Active CN108307190B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/405783 2017-01-13
US15/405,783 US9807384B1 (en) 2017-01-13 2017-01-13 Method, apparatus and computer program product for testing a display

Publications (2)

Publication Number Publication Date
CN108307190A true CN108307190A (zh) 2018-07-20
CN108307190B CN108307190B (zh) 2021-03-19

Family

ID=60142624

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711456931.2A Active CN108307190B (zh) 2017-01-13 2017-12-28 用于测试显示器的方法、装置和计算机可读介质

Country Status (2)

Country Link
US (1) US9807384B1 (zh)
CN (1) CN108307190B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109696190A (zh) * 2018-12-29 2019-04-30 北京理工大学 一种基于渐变编码的vr头盔的转动延迟测量方法
CN109737997A (zh) * 2018-12-29 2019-05-10 北京理工大学 一种虚拟现实头戴显示设备的转动延迟测量方法
CN112312127A (zh) * 2020-10-30 2021-02-02 中移(杭州)信息技术有限公司 成像检测方法、装置、电子设备、系统及存储介质
CN112703441A (zh) * 2018-09-20 2021-04-23 索尼互动娱乐股份有限公司 显示系统,程序,显示方法和头戴式设备

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107820075A (zh) * 2017-11-27 2018-03-20 中国计量大学 一种基于光流相机的vr设备延迟测试装置
KR102202239B1 (ko) * 2018-04-02 2021-01-13 엘지전자 주식회사 헤드마운트디스플레이 분석 시스템
CN110545411B (zh) * 2018-05-29 2021-06-15 中强光电股份有限公司 投影机、投影系统以及其传输延迟的侦测方法
CN109696188B (zh) * 2018-12-29 2020-07-21 北京理工大学 一种基于激光管的vr头盔的转动延迟测量方法
CN109696191B (zh) * 2018-12-29 2020-06-30 北京理工大学 一种虚拟现实头戴显示设备的移动延迟测量方法
CN109696189B (zh) * 2018-12-29 2020-10-23 北京理工大学 一种基于编码器的vr头盔的转动延迟测量方法
US11270367B2 (en) * 2019-04-19 2022-03-08 Apple Inc. Product comparison techniques using augmented reality
WO2021001883A1 (ja) * 2019-07-01 2021-01-07 日本電信電話株式会社 遅延測定装置、遅延測定方法及びプログラム
US11468904B2 (en) * 2019-12-18 2022-10-11 Audio Analytic Ltd Computer apparatus and method implementing sound detection with an image capture system
CN113790872A (zh) * 2021-09-30 2021-12-14 福州大学 一种多测试仪器集成的显示器音频自动测试系统及方法
CN117278733B (zh) * 2023-11-22 2024-03-19 潍坊威龙电子商务科技有限公司 全景摄像在vr头显中的显示方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004021699A1 (ja) * 2002-08-30 2004-03-11 Olympus Corporation 頭部装着型画像表示システム装置及びその画像処理方法
US20120243747A1 (en) * 2011-03-01 2012-09-27 Kielkopf John F System and Method for Precision Measurement of Position, Motion and Resonances
CN104378626A (zh) * 2014-11-27 2015-02-25 江西洪都航空工业集团有限责任公司 一种图像传输系统的时延测试系统及其测试方法
CN105593924A (zh) * 2013-12-25 2016-05-18 索尼公司 图像处理装置、图像处理方法、计算机程序以及图像显示系统
CN105807601A (zh) * 2016-03-10 2016-07-27 北京小鸟看看科技有限公司 一种测试虚拟现实设备延时的方法和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004021699A1 (ja) * 2002-08-30 2004-03-11 Olympus Corporation 頭部装着型画像表示システム装置及びその画像処理方法
US20120243747A1 (en) * 2011-03-01 2012-09-27 Kielkopf John F System and Method for Precision Measurement of Position, Motion and Resonances
CN105593924A (zh) * 2013-12-25 2016-05-18 索尼公司 图像处理装置、图像处理方法、计算机程序以及图像显示系统
CN104378626A (zh) * 2014-11-27 2015-02-25 江西洪都航空工业集团有限责任公司 一种图像传输系统的时延测试系统及其测试方法
CN105807601A (zh) * 2016-03-10 2016-07-27 北京小鸟看看科技有限公司 一种测试虚拟现实设备延时的方法和系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112703441A (zh) * 2018-09-20 2021-04-23 索尼互动娱乐股份有限公司 显示系统,程序,显示方法和头戴式设备
US11906740B2 (en) 2018-09-20 2024-02-20 Sony Interactive Entertainment Inc. Display system, program, display method, and head mounted device
CN109696190A (zh) * 2018-12-29 2019-04-30 北京理工大学 一种基于渐变编码的vr头盔的转动延迟测量方法
CN109737997A (zh) * 2018-12-29 2019-05-10 北京理工大学 一种虚拟现实头戴显示设备的转动延迟测量方法
CN112312127A (zh) * 2020-10-30 2021-02-02 中移(杭州)信息技术有限公司 成像检测方法、装置、电子设备、系统及存储介质

Also Published As

Publication number Publication date
US9807384B1 (en) 2017-10-31
CN108307190B (zh) 2021-03-19

Similar Documents

Publication Publication Date Title
CN108307190A (zh) 用于测试显示器的方法、装置和计算机程序产品
EP3908382B1 (en) Wearable visualization system and method
JP5896617B2 (ja) 試験測定システム、試験測定機器及びその測定ビュー同期化方法
JPH11509660A (ja) 投写表示装置におけるレーザポインタの位置決定
US8837593B2 (en) Image processing apparatus, image processing method, and program
US20120176296A1 (en) Monocular display apparatus
US20120176483A1 (en) Three channel delivery of stereo images
US9432645B2 (en) Information processing method and electronic device
TW202004672A (zh) 針對非平面螢幕之色不均瑕疵補償系統
KR101661533B1 (ko) 입체 표시 장치 검출 시스템 및 그 검출 방법
CN110708540B (zh) 一种动态串扰测试系统及动态串扰测试方法
US10205940B1 (en) Determining calibration settings for displaying content on a monitor
US8514274B2 (en) Apparatus for compensating 3D image in projector and method thereof
US9179139B2 (en) Alignment of stereo images pairs for viewing
US11602684B2 (en) Peripheral tracking system and method
WO2021106379A1 (ja) 画像処理装置及び画像処理方法、並びに画像表示システム
CN108696747A (zh) 一种视频测试方法和装置
WO2019017695A1 (en) DISPLAY APPARATUS, CONTROL METHOD THEREFOR, AND COMPUTER PROGRAM PRODUCT THEREOF
CN111208963B (zh) 一种视频同步显示方法及系统
KR101650437B1 (ko) 실물 크기 출력용 프로젝터
CN115834952A (zh) 基于视觉感知的视频帧率检测方法及装置
CN108195563B (zh) 一种立体显示装置的显示效果测评方法、装置和测评终端
JP2010093405A (ja) 情報処理装置、及び情報処理方法
JP2019049628A (ja) 映像表示装置および映像制作支援方法
KR20190071043A (ko) 디지털 사이니지 멀티패널 색감도 자동 조절 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant