CN100456818C - 用于测试数字电视接收机的声像吻合的装置和方法 - Google Patents

用于测试数字电视接收机的声像吻合的装置和方法 Download PDF

Info

Publication number
CN100456818C
CN100456818C CNB2004800231551A CN200480023155A CN100456818C CN 100456818 C CN100456818 C CN 100456818C CN B2004800231551 A CNB2004800231551 A CN B2004800231551A CN 200480023155 A CN200480023155 A CN 200480023155A CN 100456818 C CN100456818 C CN 100456818C
Authority
CN
China
Prior art keywords
time
video
audio
signal
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2004800231551A
Other languages
English (en)
Other versions
CN1836443A (zh
Inventor
韩缵豪
金宗植
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN1836443A publication Critical patent/CN1836443A/zh
Application granted granted Critical
Publication of CN100456818C publication Critical patent/CN100456818C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
    • H04N5/602—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for digital sound signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

一种DTV接收机的声像吻合测试方法。该方法包括步骤：产生具有插入在其中的帧索引的数字音频流，和具有插入在其中的瞬态效应区域测试信号(TATS)的视频流；比较该时间索引的音频信号的波形与该时间索引的视频信号的波形；和基于该时间索引的音频与视频信号的时间索引，测量和计算在该音频与视频信号之间的时间差dt。

Description

用于测试数字电视接收机的声像吻合的装置和方法
技术领域
本发明涉及数字电视(DTV)接收机的基于时间索引的音频与视频信号的声像吻合测试装置和方法。
尤其是，本发明涉及基于具有在其中插入的瞬态效应区域测试信号(TATS)的视频信号，和具有在其中插入的帧索引信号的附加的音频子信道信号，能够简单地测试在DTV接收机的音频与视频信号之间的再生时间差的声像吻合测试方法和装置。
背景技术
数字广播系统基于数字信号执行全部的处理，因此可以得到清楚的图像，并且可以通过细分低音至高音声音信号来实现高的音质。因此，该数字广播系统的应用通过各种各样的媒介，诸如陆地、卫星和有线电视得到迅速地和广泛地推广。
通过使用来自该广播系统的信号可以对DTV接收机(其从该DTV广播系统接收)的功能和性能执行测试。但是，虽然可以基于来自实际的广播系统的信号执行操作上的测试，该DTV广播系统不提供任何的信号，而接收机的特殊的功能可以通过该信号被测试，或者该接收机的性能可以被保持稳定。因此，DTV接收机的开发者或者制造商一般地建立一个虚构的广播系统，以便通过该虚构的广播系统测试DTV接收机的功能和性能。
图1用示意地说明通过一个虚构的广播系统的DTV测试的概念。流产生器101产生一个在对DTV接收机的功能或者性能的测试中使用的音频/视频测试流，信道编码器102对该测试流执行信道编码，信道向上变换器103调制和向上变换该信道编码的测试流为一个RF电平，然后以RF信号的形式输出该向上变换的流，并且DTV接收机或者机顶盒104接收该RF信号。然后，测量仪器105，诸如示波器105或者HDTV/PC监视器106被用于基于该接收的测试流对该DTV接收机的功能或者性能执行测试。
在如同上述的DTV接收机的制造中使用的该测试流的长度必须在实际的广播中被无限地扩展。此外，对于该DTV接收机的功能或者性能测试来说，需要非常宽类型的测试流。随后这与庞大的数据一起产生许多的信道。但是，由于用于存储该DTV测试流的计算机存储介质具有有限的容量，流长度被减到最小，并且有限长度的流被重复地产生。在该有限长度的测试流被重复地产生的情况下，需要恰当地将视频或者音频成分流(ES)的产生时间与传输流(TS)的产生时间同步。也就是说，当该测试流被重复地产生的时候，在TS和ES之间任何的不一致可以引起音频或者视频不连续，其随后可能导致DTV接收机被误解是有缺陷的，即使在制造场所其已经通过了质量测试。因此，在该现有技术中需要用于同步ES与TS的装置。
此外，当DTV接收机解码接收的音频/视频资源构成的数字视频流，然后通过音频/视频处理输出(即，输出声音和显示视频图像)的时候，可能在音频与视频信号之间出现一些时间差，从而使该视频图像和该声音不匹配。该不匹配的声音和图像可能使观看DTV机的用户感觉不满。
上述的该音频信号与该视频信号的同步过程被称为“声像吻合”。有时候，可以在该DTV接收机内部设置用于执行声像吻合(例如，硬件和/或软件)的装置。作为用于允许操作该声像吻合的公知的技术，该DTV接收机使用该音频/视频信号的时间信息。该技术对该音频/视频信号的时间信息计数，以发现是否一个音频帧发生在图像帧的前面或者后面，并且如果在特定的时间点上发现在该音频与视频信号之间的时间差超过一个基准时间间隔，则在那个时间点上丢弃或者重复一个音频帧，从而执行该声像吻合。
但是，即使安装了声像吻合控制功能，制造的DTV接收机须经上述的测试设备进行测试，以便检查是否该DTV接收机的音频与视频流是彼此一致的。该声像吻合是在DTV系统中必需考虑的要素，并且是通过在该DTV接收机中测量在该音频与视频信号之间的时间差测试的。
例如，这里在该音频与视频信号之间的时间差是在从25msec到40msec的范围，也就是说，该音频信号在25msec内发生在该视频信号的前面，或者在该视频信号之后至少40msec。然后，在这个范围中，新生的图像和声音显得彼此匹配，从而给观众提供更加自然的图像和声音。
通常，为了在DTV接收机中测量在音频与视频信号之间的时间差，通过使用一个特别地构成的视频序列和音频信号来执行声像吻合测试。也就是说，该视频信号由黑色部分(black part)、白色部分(whitepart)和短线部分(short line part)构成。然后，声像吻合测试被通过将一个用于视频信号同步的信号插入进该短线部分中和使用一个单音信号来执行，该单音信号作为一个音频测试信号在同步位置上呈指数地降低。
但是，这种方法具有一个问题，即，视频序列和音频序列必须具有专用的用于该声像吻合测试的结构。因此，用于制造DTV接收机的该声像吻合测试需要附加的设备和技术，从而导致不便的测试操作和较低的产量。
发明内容
本发明的一个目的是提供一种基于时间索引的音频与视频信号的用于数字电视(DTV)接收机的声像吻合测试系统和方法。
尤其是，本发明的目的在于提供一种用于DTV接收机的声像吻合测试方法和系统，其通过将时间索引信号插入进视频和音频信号，然后借助于测量设备(诸如示波器)来测量该时间索引的音频与视频信号的波形，能够简单地在DTV接收机上执行声像吻合测试。
本发明的另一个目的是提供一种用于DTV接收机的声像吻合测试方法和系统，其通过将时间索引的信号插入进视频和音频信号，然后基于测量设备(诸如示波器)测量的时间差和从该时间索引中获得的场(field)/帧(frame)的数目来计算音频/视频时间差，能够简单地执行声像吻合测试。
本发明的再一个目的是提供一种DTV接收机的声像吻合测试方法和系统，其通过准备音频与视频资源，将帧索引信号和瞬态效应区域测试信号(TATS)分别地插入进音频与视频信号，将该帧索引信号和该TATS压缩为数字比特流，在DTV接收机中解码该数字音频与视频流，然后利用诸如示波器的设备来测量该解码的数字音频与视频流的波形，能够简单地执行声像吻合测试。
按照本发明用于实现该目的的一个方面，提供了一种用于DTV接收机的声像吻合测试方法，该方法包括步骤：产生具有插入在其中的帧索引的数字音频流，和具有插入在其中的TATS的视频流；比较该时间索引的音频信号的波形与该时间索引的视频信号的波形；并基于该时间索引的音频与视频信号的时间索引，测量和计算音频帧时间和视频场时间，并基于该音频帧时间和视频场时间计算在该音频与视频信号之间的时间差dt。
按照本发明用于实现该目的的另一个方面，提供了一种DTV接收机的声像吻合测试方法，该方法包括步骤：产生每个具有插入在其中的时间索引的数字音频与视频流；比较该时间索引的音频信号的波形与该时间索引的视频信号的波形；和基于该时间索引的音频与视频信号的时间索引，测量和计算音频帧时间和视频场时间，并基于该音频帧时间和视频场时间计算在该音频与视频信号之间的时间差dt。
按照本发明用于实现该目的的再一个方面，提供了一种用于数字TV(DTV)接收机的声像吻合测试系统，包括：用于检测包含在音频信号中的时间索引信号以鉴别相应的音频帧数目，并从该音频帧数目中计算相应的音频帧时间ta的装置；用于检测包含在该视频信号中的时间索引信号以鉴别相应的视频场(video field)数目，并从该视频场数目计算相应的视频场时间tv的装置；用于测量在该音频与视频信号之间的时间差的装置；和用于基于在该音频与视频信号之间的时间差、相应的帧时间和该视频场时间，计算声像吻合时间dt的装置。
根据本发明一个方面，提供一种用于DTV数字TV接收机的声像吻合测试方法，该方法包括下列步骤：产生具有插入在其中的帧索引的数字音频流和具有插入在其中的瞬态效应区域测试信号(TATS)的视频流；比较该时间索引的音频信号的波形与该时间索引的视频信号的波形；和基于该时间索引的音频与视频信号的时间索引，从该时间索引的音频帧波形测量第n个音频帧时间ta并计算ta，和从该时间索引的视频帧波形测量第m个tv并计算tv，以及基于该音频帧时间和视频场时间计算在该音频与视频信号之间的时间差dt。
根据本发明另一方面，提供一种数字TV DTV接收机的声像吻合测试方法，该方法包括步骤：产生每个具有插入在其中的时间索引的数字音频与视频流；比较该时间索引的音频信号的波形与该时间索引的视频信号的波形；和基于该时间索引的音频与视频信号的时间索引，从该时间索引的音频帧波形测量第n个音频帧时间ta并计算ta，和从该时间索引的视频帧波形测量第m个tv并计算tv，以及基于该音频帧时间和视频场时间计算在该音频与视频信号之间的时间差dt。
附图说明
图1示例了用于DTV接收机测试的虚构的广播系统；
图2是按照本发明的DTV声像吻合测试方法的流程图；
图3用示意地说明在本发明中采用的DTV图片格式；
图4示例了按照本发明的TATS结构；
图5示例了按照本发明的包括TATS的视频序列结构；
图6示例了按照本发明用于声像吻合测试的帧索引的音频信号结构；
图7示例了按照本发明的在时间索引的音频与视频信号之间的关系；
图8示例了按照本发明的示范的包括TATS的视频帧；
图9示例了按照本发明的用于声像吻合测试的DTV接收机的音频与视频测试波形；和
图10是说明按照本发明的用于DTV接收机的声像吻合测试系统结构的方框图。
具体实施方式
在下文中将参考伴随的附图描述按照本发明的一个声像吻合测试方法的实施例。
图2是按照本发明的DTV声像吻合测试方法的流程图。
音频与视频资源产生步骤S201重新产生音频与视频信号。通过计算机模拟，该音频信号生成一个附加的音频子信道，并且该视频信号生成一个将被测试的视频图案。
时间索引插入步骤S202将帧索引插入进该音频信号中，以形成时间索引的音频信号(参考图6)，并且将场(field)索引插入进该视频信号中，以形成时间索引的视频信号(参考图4和5)。稍后将参考图4至8更详细地描述该时间索引的音频与视频信号的结构。
接下来，音频/视频流产生步骤S203压缩该时间索引的音频与视频信号以产生音频与视频流。最后，该音频与视频流被利用一个仪器(诸如MPEG分析器)来多路复用，以形成一个传送流。
如同上述产生的该音频与视频流被输入进被测试的DTV接收机中，然后在音频与视频解码步骤S204中被解码。
该音频/视频解码被按照该领域公知的技术来执行。也就是说，该DTV接收机接收和分析该传输流，分别地将该传输流解码为音频与视频信号，然后通过处理该音频与视频信号输出声音和视频图像。
音频与视频信号波形测量步骤S205利用测量设备(诸如示波器)捕获和测量该解码的音频与视频信号的波形。这个测量步骤S205获得在该音频与视频信号之间的时间差tdav。
音频与视频信号信息计算步骤S206基于该时间索引的音频与视频信号的时间索引信息(波形)计算音频时间ta和视频时间tv。如稍后将详细地描述的，该音频时间ta是通过从该音频信号波形的时间索引信息中计算音频帧数目n，然后利用该帧时间计算该音频帧数目n而获得的，并且该视频时间tv是通过利用视频场比率(场/秒)计算对应于该音频帧数目的视频场数目m获得的。
接下来，音频与视频时间差计算步骤S207基于该音频与视频时间、在该音频与视频时间和解码的时间戳(DTS)的初始值tDTSoffset之间的时间差ta-tv来计算最后的声像吻合时间dt。该DTS被用于在视频包化的基本流(PES)分组中解码时间信息，并且表示一个时间值，在该时间值期间压缩的视频和音频流被从系统解码器传送给ES解码器。
该DTS的初始值具有初始延迟时间，以便以一个恒定值保持缓冲区的全满。由于该视频信号需要较大的缓冲区大小，该视频信号具有比音频信号更长的还原时间，并且从而具有大约0.2sec的延迟时间。
当然，该DTS的初始值可以按照流传输速率、帧速率、解码器缓冲区大小等等而改变。
基于第n个音频帧时间ta、第m个视频场时间tv、利用测量设备测量的音频与视频时间差tdav和DTS初始值tDTSoffset，该音频/视频时间差tdav可以被获得为dt＝ta-tv-tdav-tDTSoffset。
如上所述，有可能通过借助于该测量设备(诸如示波器)测量时间索引的音频与视频信号的波形，并然后基于该测量的时间索引信息获得该音频与视频时间差来执行声像吻合测试。
接下来，考虑到该音频时间索引、该视频时间索引和如上已经所述的该测量的波形，将参考图3至9描述一个示例的声像吻合测试方法。
首先，图3用示意地说明一个1920×1080图片格式。在这个格式中，显示孔径300具有1888×1062的大小。水平空白301位于该显示孔径300的左侧，垂直空白302位于在该显示孔径300的上面，清晰的效果区域(transparent effect areas，TAs)303(9像素的)邻近该显示孔径300的顶和底边，并且16像素的TAs 304邻近该显示孔径300的右和左边。
按照本发明，瞬态效应区域测试信号(transient effect area testsignals，TATS)被插入在每个视频帧的该垂直TAs中，以在模拟电视系统中插入有关相应的场类似的垂直扫描插入测试信号(VITS)索引。也就是说，该TATS被插入视频帧的最初的8行中，其中按照相应的场，该TATS具有不同的值，以便表示场/帧索引。
图4用示意图举例说明该TATS。如图4所示，在本发明中视频时间索引适合于基于4个电平索引相应的视频场数目。也就是说，该索引被以四元数字(quadruple digit)来执行，其中场索引被以具有四个电平0、1、2和3的索引波形401表示。由于在隔行扫描方式的情况下，二个场形成一个帧，例如如图4所示的“02134”的场索引表示第39个场，以及第19个帧的下部场。
图5举例说明包括TATS的视频序列501。如可以从图5中看到的，一个视频帧由二个视频场构成，并且场索引被基于开始于第一个场的4电平(四元数字)0、1、2和3以其顺序分级。
这里一个视频帧是33.3msec，一个场将对应于16.67msec。
图6说明按照本发明被插入音频帧中的时间索引。如图6所示，为了帧索引的目的，将索引波形插入到每个音频帧中。也就是说，该时间索引可以表示为附加的音频子信道，每个包含与帧数目有关的帧索引。
考虑到在图6中示出的该示例的音频帧时间索引，一个帧由32msec构成，并且一个被分级(插入)进每个帧的音频帧索引信号包括时间信息601和信号602的数目。
例如，第一个音频帧具有在1msec之后在其中插入的一个周期的正弦波，并且第二个音频帧具有在2msec之后在其中插入的二个周期的正弦波。
因此，在上文中描述的在视频和音频时间索引之间的相互关系将被安排如在以下的表1中那样。
表1
  视频场数目   TATS(时间索引)   音频帧数目   时间索引   索引信号的数目
  1   0000   1   1msec   1个周期
  2   0001   2   1msec   2个周期
  3   0002   ...   ...
  4   0003   ...   ...
  5   0010   10   1msec   10个周期
  ...   11   2msec   1个周期
  21   0110   12   2msec   2个周期
  ...   ...   ...   ...
  120   1313   ...   ...   ...
  ...   90   9msec   10个周期
  164   2210   91   10msec   1个周期
  ...   ...   ...   ...
  256   3333   125   12msec   5个周期
如同上述的该视频场和音频帧索引被对于特定的时间周期循环返回。例如，如图7所示，视频帧数目和音频帧数目702被每4秒循环返回，以便避免一些在相邻的同步信号之间的扰乱。
图8说明按照本发明的一个示例的具有在其中插入的TATS的视频帧。应该明白，时间索引，也就是说，如上所述的场索引被插入TA801中。由于假定一个帧是由二个场构成的，诸如如上所述的上和下场，该场索引可以表示为上场索引802和下场索引803。在图8中，当其是上场的时候，由于在TA中的TATS电平具有“32304”的值，应该理解，这个值指的是第236个场，因此表示第118个帧索引。
当如在以上的表1中报告的时间索引的视频和音频信号的波形被借助于测量仪器(诸如示波器)观察的时候，音频时间ta和视频时间tv可以被基于音频信号的帧数目和视频信号的场(帧)数目来计算，并且相应的帧速率或者其帧时间可以被从该时间索引来计算。然后，可以通过使用该音频和视频时间ta和tv来计算音频和视频声像吻合时间。
图9说明示例的按照本发明的用于声像吻合测试的DTV接收机的音频与视频测试波形。在图9中被捕获的波形借助于一个示波器测量，其中该参考数字901代表音频信号，而该参考数字902代表视频信号。
由于在该音频信号901中在10msec上检测到一个周期的正弦波，可以理解，这个时间索引信号如在以上的表1中报告的表示第91个音频帧。因此，该第91个音频帧的时间ta被按照一个音频帧时间23msec来计算ta＝32(msec/帧)×91(帧)＝2.912sec。
此外，包括在该视频信号902中的时间索引(TATS)波形具有值“22104”，其表示第164个场，也就是说，第82个帧。因此，第164个视频场的时间tv被按照该场速率60场/秒计算tv＝164/60＝2.7333sec。
由于可以理解，在第91个音频帧和第164个视频场之间测量的该时间差tdav是2msec，当DTS初始值tDTSoffset被设置0.2sec的时候，该声像吻合时间，也就是说，在该音频与视频信号之间的时间差被计算为：
dt＝ta-tv-tdav-tDTSoffset＝2.912-2.733-0.002-0.2＝-0.023sec。
这个测试结果教导该音频信号落后该视频信号23msec，因此在声像吻合标准(+25msec至-40msec)内。这指的是，该相应的DTV接收机通过该声像吻合测试。
图10是举例说明按照本发明用于DTV接收机的声像吻合测试系统的结构，其被设计成能自动地对DTV接收机执行如在上文中描述的该声像吻合测试方法。
按照本发明的用于DTV接收机的该声像吻合测试系统包括：音频时间计算装置11，用于检测包含在音频信号中的时间索引信号以鉴别相应的音频帧数目，并且从该音频帧数目中计算相应的音频帧时间ta；视频时间计算装置12，用于检测包含在该视频信号中的时间索引信号以鉴别相应的视频场数目，和从该视频场数目计算相应的视频场时间tv；测量装置13，用于测量在该音频与视频信号之间的时间差；和声像吻合鉴别装置14，用于基于在该音频与视频信号之间的时间差、相应的音频帧时间和该视频场时间来计算声像吻合时间dt。
该音频时间计算装置11包括：用于检测包含在该音频信号中的时间索引信号的音频时间索引检测装置111；用于解码该检测的音频时间索引信号以鉴别相应的音频帧数目的音频帧数目鉴别装置112；和用于借助于一个音频帧时间计算该鉴别的音频帧数目以计算相应的音频帧时间ta的计算装置113。
该视频时间计算装置12包括：用于检测包含在该视频信号中的时间索引信号的视频时间索引检测装置121；用于解码该检测的视频时间索引信号以鉴别相应的视频场数目的视频场数目鉴别装置122；和用于借助于视频场速率计算该鉴别的视频场数目以获得相应的视频帧时间tv的计算装置。
如下将描述用于本发明以上结构的DTV接收机的该声像吻合测试系统的操作。
该音频时间索引检测装置111从输入的音频信号中检测如图6所示插入的音频时间索引信号。该音频时间索引检测装置111检测被以正弦波的形式插入每个音频子信道中的该音频时间索引信号，其在每个音频帧中具有n个周期数目和预定的时间。
该音频帧数目鉴别装置112计数从该音频帧的初始位置到正弦波出现为止的时间周期，并且计数该检测的正弦波的数目以鉴别相应的音频帧。例如，由于在图9示出的该波形中，在10msec之后一个周期的正弦波被计数，第91个音频帧可以被从这个值中解码。
通过使用该解码的音频帧数目n，和一个音频帧时间，例如32msec，该计算装置计算如上所述表示为ta＝32msec×n[sec]的相应的音频帧时间ta，并且将该计算的音频帧时间输入进该声像吻合鉴别装置14中。
该视频时间索引检测装置121从输入音频信号中检测视频时间索引信号，其被如图4和5所示插入。由于以4个电平的形式的该视频时间索引信号被插入到每个视频场中，具有4个电平的信号被检测为该视频时间索引信号。在此处，通过检测对应于该音频帧的该视频时间索引，可以正确地测量该声像吻合时间差。
该视频场数目鉴别装置122解码该检测的视频时间索引信号的电平以鉴别相应的视频场数目。例如，第164个视频场(第82个视频帧)可以被从在图9示出的该波形中的该值“22104”解码。
该计算装置123通过使用该解码的视频场数目m，和例如60场/秒的视频场速率，计算相应的视频场时间tv＝m/60[sec]，并且将该计算的视频场时间输入进该声像吻合鉴别装置14中。
该测量装置13测量在由该音频时间计算装置11计算的该音频帧和由该视频时间计算装置12计算的该视频帧之间的时间差。作为测量方法的一个例子，该测量装置13可以计数从音频帧的初始点到检测如图9所示相应的场索引为止的时间(例如，在图9中的2msec)，以便测量该音频与视频时间差tdav。
基于第n个音频帧时间、对应于该第n个音频帧时间的第m个视频场时间、该检测的音频与视频时间差tdav和该DTS初始值tDTSoffset，该声像吻合鉴别装置14计算声像吻合时间dt＝ta-tv-tdavtDTSoffset，并且以数值的形式输出计算的结果。做为选择，该声像吻合鉴别装置14可以通过将该结果与预定的参考范围进行比较来判断是否相应的DTV接收机是有缺陷的。
工业实用性
本发明可以通过捕捉时间索引的音频与视频信号的波形，以获得该音频与视频信号的时间信息，并且基于在该音频与视频信号之间测量的时间差执行该声像吻合测试，来非常简单地对DTV接收机执行声像吻合测试。
此外，无需任何附加的声像吻合测试程序，本发明通过使用视频TATS和附加的音频子信道来有利地执行声像吻合测试。
尤其是，按照本发明的用于DTV接收机的该声像吻合测试方法具有一个优点，其中当时间索引的音频与视频信号的波形被捕捉的时候，不考虑时间点可以对时间索引的音频与视频信号的波形执行声像吻合测试。

Claims (18)

1.一种用于数字TV接收机的声像吻合测试方法，该方法包括步骤：
产生每个具有插入在其中的时间索引的数字音频与视频流；
比较插入了时间索引的音频信号的波形与插入了时间索引的视频信号的波形；和
基于该插入了时间索引的音频与视频信号的时间索引，计算从该插入了时间索引的音频帧波形测量的第n个音频帧时间ta，和从该插入了时间索引的视频帧波形测量的第m个视频场时间tv，以及基于该音频帧时间和视频场时间计算在该音频与视频信号之间的时间差dt。
2.根据权利要求1的声像吻合测试方法，进一步包括：
在数字音频流中插入帧索引和在视频流中插入场索引以产生所述具有插入在其中的时间索引的数字音频和视频流。
3.根据权利要求1的声像吻合测试方法，其中ta＝一个音频帧时间×n，其以秒为单位。
4.根据权利要求1的声像吻合测试方法，其中计算从该插入了时间索引的视频帧波形测量的tv，tv＝m/场速率，其中所述tv以秒为单位。
5.根据权利要求1的声像吻合测试方法，其中该音频帧索引和该视频场索引以预定的时间周期被循环返回。
6.根据权利要求1的声像吻合测试方法，其中所述视频场索引包括瞬态效应区域测试信号TATS。
7.根据权利要求1的声像吻合测试方法，其中该音频与视频时间差dt被表示为
dt＝ta-tv-tdav-tDTSoffset，
其中：ta是第n个音频帧时间，tv是对应于第n个音频帧时间的第m个视频场时间，tdav是利用测量设备测量的音频与视频时间差，而tDTSoffset是解码时间戳DTS初始值。
8.根据权利要求1的声像吻合测试方法，其中该音频帧索引是通过在对应于每个音频帧的预定的时间上将预定数目的波形插入进该数字音频流中形成的。
9.根据权利要求1的声像吻合测试方法，其中该视频信号的时间索引TATS是基于对应于每个视频帧的清晰的效应区域TA的线，通过将4电平场索引插入进该数字视频流形成的。
10.根据权利要求1的声像吻合测试方法，其中该音频与视频时间差dt被表示为
dt＝ta-tv-tdav-tDTSoffset，
其中：ta是第n个音频帧时间，tv是对应于第n个音频帧时间的第m个视频场时间，tdav是利用测量设备测量的音频与视频时间差，而tDTSoffset是解码时间戳DTS初始值。
11.根据权利要求1的声像吻合测试方法，其中该视频场的时间索引被插入进瞬态效应区域TA中。
12.根据权利要求1的声像吻合测试方法，其中该视频信号的时间索引索引视频场数目。
13.根据权利要求1的声像吻合测试方法，其中该音频信号的时间索引索引音频帧数目。
14.根据权利要求13的声像吻合测试方法，其中该音频信号的插入了时间索引的信号包括时间信息和信号数目。
15.一种用于数字TV接收机的声像吻合测试系统，包括：
用于检测包含在音频信号中的时间索引信号以鉴别相应的音频帧数目，和从该音频帧数目中计算相应的音频帧时间ta的装置；
用于检测包含在该视频信号中的时间索引信号以鉴别相应的视频场数目，和从该视频场数目计算相应的视频场时间tv的装置；
用于测量在该音频与视频信号之间的时间差的装置；和
用于基于在该音频与视频信号之间的时间差、相应的音频帧时间和该视频场时间，计算声像吻合时间dt的装置。
16.根据权利要求15的声像吻合测试系统，其中该音频时间计算装置包括：
用于检测包含在该音频信号中的时间索引信号的音频时间索引检测装置；
用于解码该检测的音频时间索引信号以鉴别相应的音频帧数目的音频帧数目鉴别装置；和
用于借助于一个音频帧时间计算该鉴别的音频帧数目以计算相应的音频帧时间ta的计算装置。
17.根据权利要求15的声像吻合测试系统，其中该视频时间计算装置包括：
用于检测包含在该视频信号中的时间索引信号的视频时间索引检测装置；
用于解码该检测的视频时间索引信号以鉴别相应的视频场数目的视频场数目鉴别装置；和
用于利用视频场速率计算该鉴别的视频场数目以获得相应的视频帧时间tv的计算装置。
18.根据权利要求15的声像吻合测试系统，其中该声像吻合时间计算装置计算该音频与视频时间差dt，其表示为：
dt＝ta-tv-tdav-tDTSoffset，
其中：ta是第n个音频帧时间，tv是对应于第n个音频帧时间的第m个视频场时间，tdav是利用测量设备测量的音频与视频时间差，而tDTSoffset是解码时间戳DTS初始值。
CNB2004800231551A 2003-07-01 2004-07-01 用于测试数字电视接收机的声像吻合的装置和方法 Expired - Fee Related CN100456818C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2003-0044233A KR100499037B1 (ko) 2003-07-01 2003-07-01 디지털 텔레비젼 수신기의 립 싱크 테스트 방법 및 장치
KR1020030044233 2003-07-01

Publications (2)

Publication Number Publication Date
CN1836443A CN1836443A (zh) 2006-09-20
CN100456818C true CN100456818C (zh) 2009-01-28

Family

ID=33562875

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004800231551A Expired - Fee Related CN100456818C (zh) 2003-07-01 2004-07-01 用于测试数字电视接收机的声像吻合的装置和方法

Country Status (5)

Country Link
US (1) US7586544B2 (zh)
EP (1) EP1639816B1 (zh)
KR (1) KR100499037B1 (zh)
CN (1) CN100456818C (zh)
WO (1) WO2005004470A1 (zh)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006101504A1 (en) * 2004-06-22 2006-09-28 Sarnoff Corporation Method and apparatus for measuring and/or correcting audio/visual synchronization
US7339958B2 (en) * 2005-01-03 2008-03-04 Mediatek, Inc. System and method for performing signal synchronization of data streams
KR100825191B1 (ko) * 2005-03-03 2008-04-24 비브콤 인코포레이티드 Ａｖ 프로그램 인덱싱 방법 및 그래픽 유저 인터페이스 장치
KR100875592B1 (ko) * 2005-03-18 2008-12-23 후지쯔 가부시끼가이샤 영상 장치에서의 영상 신호와 음성 신호와의 동기 제어방법 및 장치
GB0509047D0 (en) * 2005-05-04 2005-06-08 Pace Micro Tech Plc Television system
KR100757465B1 (ko) * 2005-07-22 2007-09-11 삼성전자주식회사 시간 정보를 이용하여 아날로그 영상 및 음성신호의 동기제어를 수행하는 ａ／ｖ 기기 및 그 동기 제어방법
KR100768342B1 (ko) * 2005-10-21 2007-10-17 주식회사 테스코 립싱크 테스트 방법
US7907212B2 (en) * 2006-03-20 2011-03-15 Vixs Systems, Inc. Multiple path audio video synchronization
CA2541560C (en) 2006-03-31 2013-07-16 Leitch Technology International Inc. Lip synchronization system and method
US7965338B2 (en) * 2006-04-06 2011-06-21 Microsoft Corporation Media player audio video synchronization
GB2437122B (en) * 2006-04-10 2011-01-05 Vqual Ltd Method and apparatus for measuring audio/video sync delay
GB2437123B (en) * 2006-04-10 2011-01-26 Vqual Ltd Method and apparatus for measuring audio/video sync delay
JP5031039B2 (ja) * 2006-12-12 2012-09-19 トムソン ライセンシング サブフレームの正確な同期化のための方法およびシステム
CN100546391C (zh) * 2007-03-09 2009-09-30 北京牡丹视源电子有限责任公司 数字电视视音频同步性测量方法
CN101295531B (zh) * 2007-04-27 2010-06-23 鸿富锦精密工业（深圳）有限公司 多媒体装置及其使用方法
US9083943B2 (en) * 2007-06-04 2015-07-14 Sri International Method for generating test patterns for detecting and quantifying losses in video equipment
WO2009115121A2 (en) * 2008-03-19 2009-09-24 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for measuring audio-video time skew and end-to-end delay
US9214004B2 (en) 2008-12-18 2015-12-15 Vmware, Inc. Watermarking and scalability techniques for a virtual desktop planning tool
US9674562B1 (en) 2008-12-18 2017-06-06 Vmware, Inc. Quality evaluation of multimedia delivery in cloud environments
US8788079B2 (en) 2010-11-09 2014-07-22 Vmware, Inc. Monitoring audio fidelity and audio-video synchronization
JP5837074B2 (ja) 2010-09-22 2015-12-24 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ マルチメディア・フローを処理する方法および対応する装置
US9336117B2 (en) 2010-11-09 2016-05-10 Vmware, Inc. Remote display performance measurement triggered by application display upgrade
US8836796B2 (en) * 2010-11-23 2014-09-16 Dolby Laboratories Licensing Corporation Method and system for display characterization or calibration using a camera device
KR101333107B1 (ko) * 2012-02-27 2013-11-26 강원대학교산학협력단 디지털 영상미디어의 객관적 화질 평가 시스템 및 장치
US10158927B1 (en) 2012-09-05 2018-12-18 Google Llc Systems and methods for detecting audio-video synchronization using timestamps
US9521449B2 (en) 2012-12-24 2016-12-13 Intel Corporation Techniques for audio synchronization
CN103051921B (zh) * 2013-01-05 2014-12-24 北京中科大洋科技发展股份有限公司 一种精确检测视音频处理系统视频、音频同步误差的方法
GB2522260A (en) * 2014-01-20 2015-07-22 British Broadcasting Corp Method and apparatus for determining synchronisation of audio signals
CN106470339B (zh) * 2015-08-17 2018-09-14 南宁富桂精密工业有限公司 终端设备、及音频视频同步检测方法
CN105657512A (zh) * 2016-01-29 2016-06-08 四川长虹电器股份有限公司 一种数字视频音画失步监测方法
CN106358039B (zh) * 2016-09-07 2019-02-01 深圳Tcl数字技术有限公司 音画同步测试方法及装置
US11228799B2 (en) * 2019-04-17 2022-01-18 Comcast Cable Communications, Llc Methods and systems for content synchronization
CN110636280A (zh) * 2019-09-18 2019-12-31 中铁检验认证中心有限公司 一种用于测试数字摄像机视音频失步时间的系统
EP4024878A1 (en) * 2020-12-30 2022-07-06 Advanced Digital Broadcast S.A. A method and a system for testing audio-video synchronization of an audio-video player
CN114666636B (zh) * 2022-03-01 2024-06-14 阿里巴巴（中国）有限公司 音画同步检测方法及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4703355A (en) * 1985-09-16 1987-10-27 Cooper J Carl Audio to video timing equalizer method and apparatus
EP0604035A2 (en) * 1992-12-21 1994-06-29 Tektronix, Inc. Semiautomatic lip sync recovery system
US5642171A (en) * 1994-06-08 1997-06-24 Dell Usa, L.P. Method and apparatus for synchronizing audio and video data streams in a multimedia system
US5844600A (en) * 1995-09-15 1998-12-01 General Datacomm, Inc. Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network
WO1999035824A1 (en) * 1998-01-07 1999-07-15 Thomson Consumer Electronics, Inc. Apparatus for providing a video lip sync delay and method therefore
JP2003046901A (ja) * 2001-07-30 2003-02-14 Nippon Hoso Kyokai <Nhk> リップシンク制御装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE33535E (en) * 1985-09-16 1991-02-12 Audio to video timing equalizer method and apparatus
US4963967A (en) * 1989-03-10 1990-10-16 Tektronix, Inc. Timing audio and video signals with coincidental markers
US5446492A (en) * 1993-01-19 1995-08-29 Wolf; Stephen Perception-based video quality measurement system
US6414960B1 (en) * 1998-12-29 2002-07-02 International Business Machines Corp. Apparatus and method of in-service audio/video synchronization testing
TW535442B (en) * 2001-12-13 2003-06-01 Winbond Electronics Corp Method and system for measuring the synchronous accuracy between video output and audio output of video encoding system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4703355A (en) * 1985-09-16 1987-10-27 Cooper J Carl Audio to video timing equalizer method and apparatus
EP0604035A2 (en) * 1992-12-21 1994-06-29 Tektronix, Inc. Semiautomatic lip sync recovery system
US5642171A (en) * 1994-06-08 1997-06-24 Dell Usa, L.P. Method and apparatus for synchronizing audio and video data streams in a multimedia system
US5844600A (en) * 1995-09-15 1998-12-01 General Datacomm, Inc. Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network
WO1999035824A1 (en) * 1998-01-07 1999-07-15 Thomson Consumer Electronics, Inc. Apparatus for providing a video lip sync delay and method therefore
JP2003046901A (ja) * 2001-07-30 2003-02-14 Nippon Hoso Kyokai <Nhk> リップシンク制御装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
分布式IP视频会议系统中声像同步技术的研究与实现. 郑立明，张会汀，刘伟平，薛沛林.计算机工程与应用，第11期. 2002
分布式IP视频会议系统中声像同步技术的研究与实现. 郑立明，张会汀，刘伟平，薛沛林.计算机工程与应用，第11期. 2002 *

Also Published As

Publication number Publication date
CN1836443A (zh) 2006-09-20
KR100499037B1 (ko) 2005-07-01
EP1639816B1 (en) 2017-04-05
US20070126929A1 (en) 2007-06-07
US7586544B2 (en) 2009-09-08
EP1639816A1 (en) 2006-03-29
EP1639816A4 (en) 2006-07-05
WO2005004470A1 (en) 2005-01-13
KR20050005095A (ko) 2005-01-13

Similar Documents

Publication Publication Date Title
CN100456818C (zh) 用于测试数字电视接收机的声像吻合的装置和方法
CN102084416B (zh) 音视频签名、导出签名的方法以及比较音视频数据的方法
US8379735B2 (en) Automatic video glitch detection and audio-video synchronization assessment
US20050219366A1 (en) Digital audio-video differential delay and channel analyzer
CN101616331B (zh) 一种对视频帧率及音视频同步性能进行测试的方法
US9055179B2 (en) Audio video offset detector
CN105049917B (zh) 录制音视频同步时间戳的方法和装置
CN103051921B (zh) 一种精确检测视音频处理系统视频、音频同步误差的方法
US20020114299A1 (en) Apparatus and method for measuring tuning of a digital broadcast receiver
US20080079851A1 (en) Audio video timing measurement and synchronization
CN105684085A (zh) 信息处理设备、方法及程序
CN113207009B (zh) 音视频交互系统音画失步的测试方法、装置及系统
CN104853244A (zh) 用于管理音视频、音频或视频内容的方法和装置
CN100551087C (zh) 数字电视接收机的声像同步测试方法及其装置
EP1158481A3 (en) A video display apparatus and display method
CN114666636B (zh) 音画同步检测方法及计算机可读存储介质
WO2018040856A1 (zh) 多屏显示装置的视频处理单元输出同步性检测方法和系统
CN107968942B (zh) 一种直播平台音视频时间差测量方法与系统
CN110446103B (zh) 一种音像测试方法、装置及存储介质
CN103399724B (zh) 一种数字音频响度测量卡
CN113055711B (zh) 一种音视频同步检测方法及其检测系统
KR20040073098A (ko) 시청된 프로그램의 히스토리 처리 방법
KR101849092B1 (ko) 실시간 영상 서비스의 화면깨짐 검출방법 및 그를 위한 장치
CN103139610A (zh) 集群视频同步播放的方法和装置
CN105657512A (zh) 一种数字视频音画失步监测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090128

Termination date: 20110701