CN101142817B - 视频装置的视频信号和音频信号的同步控制方法及装置 - Google Patents
视频装置的视频信号和音频信号的同步控制方法及装置 Download PDFInfo
- Publication number
- CN101142817B CN101142817B CN2005800491568A CN200580049156A CN101142817B CN 101142817 B CN101142817 B CN 101142817B CN 2005800491568 A CN2005800491568 A CN 2005800491568A CN 200580049156 A CN200580049156 A CN 200580049156A CN 101142817 B CN101142817 B CN 101142817B
- Authority
- CN
- China
- Prior art keywords
- signal
- audio
- delay
- video
- vision signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
Abstract
本发明的目的是在对视频信号及音频信号中的某一个进行某种信号处理时,对由该处理导致的信号延迟进行补偿而实现同步。包括:视频信号处理部12、16,其对输入的视频信号及音频信号进行信号处理;输入信号检测部NS,其存储输入的视频信号及音频信号的信号状态;输出信号检测部SS,其对由视频信号处理部12、16进行了信号处理的视频信号或者音频信号,存储其信号状态;视频延迟检测部25及音频延迟检测部26,其对存储于输入信号检测部NS中的视频信号及音频信号和存储于输出信号检测部SS中的相应的这些信号进行比较并求出各自的延迟时间n、k;延迟补偿量检测部27,其基于延迟时间n、k的差求出相对视频信号或音频信号的延迟补偿量HRV、HRA;延迟补偿部13、17,其依据所求得的延迟补偿量,对应该输出的视频信号或音频信号进行延迟补偿;输出影像的视频输出部14;输出音声的音频输出部18。
Description
技术领域
本发明涉及电视机、DVD播放装置、AV装置、或者用于这些装置的显示装置等的视频装置的视频信号和音频信号的同步控制方法及装置。
背景技术
近年来,在电视机、AV装置等上,在对视频信号及音频信号实施了数字处理之后,进行图像显示以及声音输出的情况越来越多。在数据处理中,要对视频信号进行将隔行扫描向图象顺序扫描的变更,或者进行提高画质的各种处理,为进行该处理,使用帧存储器的情况也很多。在这种情况下,由于在输出图像之前,会发生延迟数帧时间的情况,因此会产生图像与声音的时间差,从而让听众感到不和谐。
对此,提出了针对每个数据处理类型,将对应图像的声音的延迟量建立数据库并将其存储下来,然后根据数据处理的类型从数据库中读出延迟量并进行补偿的提案(专利文献1)。
另外,在为了电视的数字广播而使用机顶盒的情况下,存在音频信号仅延迟在外部装置的解码所消耗掉的时间的问题,对于该问题提出了相应的对策(专利文献2)。根据专利文献2,测定相对于从机顶盒中输出的音频信号的、在外部装置将从机顶盒输出的输出流的音频信号进行了解码的延迟量。通过将视频信号延迟相当于测定出的延迟量来实现声像同步。
专利文献1:JP特开2002-290932
专利文献2:JP特开2003-46901
发明内容
发明要解决的问题
但是,在上述专利文献1中,对于预先存储在数据库中的数据处理类型以外的数据就无法进行处理。而且,专利文献2的装置,在通过外部装置来对从机顶盒输出的音频信号及输出流进行解码的情况下是有效的,但是,对于接受此种输出流之后不进行解码的视频装置是不适用的。
即,在专利文献1及2中,在对视频信号及音频信号的某一个进行某种信号处理时,存在如何补偿所产生的信号延迟而实现同步的问题。
本发明是鉴于上述问题而提出,其目的在于,提供一种对视频信号及音频信号的某一个进行某种信号处理时,可以补偿所产生的信号延迟而获得同步的同步控制方法及装置。
解决问题的手段
关于本发明的方法是一种视频装置的视频信号和音频信号的同步控制方法,该视频装置包括:视频信号处理部,其对所输入的视频信号进行信号处理;视频输出部,其输出信号处理后的影像;音频信号处理部,其对所输入的音频信号进行信号处理;音频输出部,其输出信号处理后的音声,该同步控制方法的特征在于,对于所输入的所述视频信号及所述音频信号,分别将其信号状态存储于输入视频存储部及输入音频存储部;对于在所述视频信号处理部中信号处理后的视频信号以及在所述音频信号处理部中信号处理后的音频信号,分别将其信号状态存储于输出视频存储部及输出音频存储部;对存储于所述输入视频存储部中的视频信号的信号状态和存储于所述输出视频存储部中的视频信号的信号状态进行比较,求出视频信号的延迟时间;对存储于所述输入音频存储部中的音频信号的信号状态和存储于所述输出音频存储部中的音频信号的信号状态进行比较,求出音频信号的延迟时间;基于所求得的视频信号的延迟时间和音频信号的延迟时间的差值,求出相对于视频信号或者音频信号的延迟补偿量,并依据所求得的延迟补偿量,对应该输出的视频信号或者音频信号进行延迟补偿。
本发明的装置包括:输入视频存储部,其对所输入的所述视频信号的信号状态进行存储;输入音频存储部,其对所输入的所述音频信号的信号状态进行存储;输出视频存储部,其对在所述视频信号处理部中进行过信号处理后的视频信号的信号状态进行存储;输出音频存储部,其对在所述音频信号处理部中进行过信号处理后的音频信号的信号状态进行存储;视频延迟时间检测部,其对存储于所述输入视频存储部中的视频信号的信号状态和存储于所述输出视频存储部中的视频信号的信号状态进行比较并求出视频信号的延迟时间;音频延迟时间检测部,其对存储于所述输入音频存储部中的音频信号的信号状态和存储于所述输出音频存储部中的音频信号的信号状态进行比较并求出音频信号的延迟时间;延迟补偿量 检测部,其基于所求得的视频信号的延迟时间和音频信号的延迟时间之间的差值,求出相对于视频信号或者音频信号的延迟补偿量;延迟补偿部,其依据所求得的延迟补偿量,来对应该输出的视频信号或者音频信号进行延迟补偿。
最好是,所述视频延迟时间检测部,求出存储于所述输入视频存储部中的视频信号的信号状态的变化量及存储于所述输出视频存储部中的视频信号的信号状态的变化量,并从这些变化量的相关性最大的位置开始求出该视频信号的延迟时间,所述音频延迟时间检测部,求出存储于所述输入音频存储部中的音频信号的信号状态的变化量及存储于所述输出音频存储部中的音频信号的信号状态的变化量,并从这些变化量的相关性最大的位置开始求出该音频信号的延迟时间。
还有,所述输入视频存储部及所述输出视频存储部,在一定的周期内对亮度信号进行采样并作为所述视频信号的信号状态进行存储。而且,对各帧的频率成分或者与各个给定时间相对应的频率成分进行存储。而且,在一定的周期内对亮度信号的变化量进行采样并进行存储。
还有,所述输入音频存储部及所述输出音频存储部,在一定的周期内对音频信号的变化量进行采样并作为所述音频信号的信号状态进行存储。
发明的效果
根据本发明,即使在对视频信号或音频信号中任一个进行任一种信号处理时,也能够对由此处理导致的信号的延迟进行补偿从而可以实现同步。
附图说明
图1是表示关于本发明实施方式的显示装置构成的框图。
图2是表示关于视频信号进行处理及控制的部分的功能的框图。
图3是表示关于音频信号进行处理及控制的部分的功能的框图。
图4是表示输入侧的信号状态与输出侧的信号状态之间的关系的例的图。
图5是表示关于图4所表示的信号状态的相互关系的图。
图6是表示同步控制方法的流程图。
具体实施方式
图1是表示关于本发明的实施方式的显示装置1构成的框图。
图1中,显示装置1包括:输入部11、视频信号处理部12、延迟补偿部13、视频输出部14、显示面板15、音频信号处理部16、延迟补偿部17、音频输出部18、扬声器19、视频存储部21、音频存储部22、视频存储部23、音频存储部24、视频延迟检测部25、音频延迟检测部26、以及延迟补偿量检测部27。
输入部11,从外部装置输入视频信号SV1及音频信号SA1。输入的视频信号及音频信号都是时间的函数。作为外部装置,连接有例如各种电视机的高频头,DVD装置,录像带播放装置、个人计算机等。
视频信号处理部12,对所输入的视频信号SV1实施信号处理,并输出视频信号SV2。这里的信号处理,包括:例如,画质补偿处理、颜色补偿处理、顺序变换处理、其他处理等。
延迟补偿部13,基于从延迟补偿量检测部27输出的延迟补偿量HRV,对视频信号SV2进行延迟补偿,并输出视频信号SV3。
视频输出部14输出经过信号处理后的图像。视频输出部14是用于例如液晶面板及PDP面板等显示面板15的驱动电路。而且,视频输出部14也可用于将视频信号输出到外部。
音频信号处理部16,对所输入的音频信号SA1实施信号处理,并输出音频信号SA2。这里的信号处理,包括,例如音质补偿处理、环绕处理、其他处理等。
延迟补偿部17,基于从延迟补偿量检测部27输出的延迟补偿量HRA,对音频信号SA2进行延迟补偿,并输出音频信号SA3。
音频输出部18输出经过信号处理后的音频。音频输出部18是用于例如扬声器19的功率放大电路。而且,音频输出部18也可用于将音频信号输出到外部。
视频存储部21,存储与所输入的视频信号SV1相关的信号状态f(t)。
音频存储部22,存储与所输入的音频信号SA1相关的信号状态p(t)。
视频存储部23,存储与在视频信号处理部12中经过信号处理后的视频信号SV2相关的信号状态g(t)。
音频存储部24,存储与在音频信号处理部1 6中经过信号处理后的音频信号SA2相关的信号状态q(t)。
此外,视频存储部21及视频存储部23,作为视频信号的信号状态f(t)、 g(t),也可以在一定的周期内对亮度信号进行采样并存储。此时,作为亮度信号,可以采用某个特定像素的亮度信号,或者也可以采用某特定区域或全部区域的平均亮度信号等。而且,作为视频信号的信号状态f(t)、g(t),也可以存储每个帧的频率成分(频率特性)。此时,例如通过频谱分析器求出每个帧的频率成分的直方图并存储。
而且,作为视频信号的信号状态f(t)、g(t),也可以在一定的周期内对亮度信号的变化量进行采样并存储。
此外,音频存储部22及音频存储部24,作为音频信号的信号状态p(t)、q(t),也可以在一定的周期内对其振幅进行采样并存储。而且,作为音频信号的信号状态p(t)、q(t),也可以存储各规定时间ts间隔所对应的频率成分(频率特性)。
而且,作为音频信号的信号状态p(t)、q(t),也可以在一定的周期内对音频信号的变化量进行采样并存储。
视频延迟检测部25,对存储到输入侧的视频存储部21上的视频信号(的信号状态)f(t),与存储到输出侧的视频存储部23上的视频信号(的信号状态)g(t)进行比较,从而求出视频信号的延迟时间n。
视频延迟检测部25,例如求出存储到视频存储部21上的视频信号f(t)的变化量Df,以及存储到视频存储部23上的视频信号g(t)的变化量Dg,并从这些变化量Df、Dg的相关性最大的位置开始求出视频信号的延迟时间n。
音频延迟检测部26,对存储到输入侧的音频存储部22上的音频信号(的信号状态)p(t),与存储到输出侧的音频存储部24上的音频信号(的信号状态)q(t)进行比较,从而求出音频信号的延迟时间k。
音频延迟检测部26,例如求出存储到音频存储部22上的音频信号p(t)的变化量Dp,以及存储到音频存储部24上的音频信号q(t)的变化量Dq,并从这些变化量Dp、Dq的相关性最大的位置开始求出音频信号的延迟时间k。
延迟补偿量检测部27,基于,通过视频延迟检测部25求出的视频信号的延迟时间n,与通过音频延迟检测部26求出的音频信号的延迟时间k之间的差值,求出对应于视频信号SV2及音频信号SA2的延迟补偿量HRV、HRA。
另外,在视频存储部21、23和音频存储部22、24中进行的存储,以及 在视频信号处理部12及音频信号处理部16中进行的信号处理等都是实时地进行。
输入信号检测部NS,由输入侧的视频存储部21及音频存储部22构成,而输出信号检测部SS,由输出侧的视频存储部23及音频存储部24构成。而且,延迟时间计算部TH,由视频延迟检测部25、音频延迟检测部26,以及延迟补偿量检测部27构成。
这种显示装置1各个部分的功能,可以通过采用适当的硬件,或者通过CPU执行适当的程序那样的软件,或者组合硬件以及软件的方法来实现。此显示装置1相当于本发明的视频装置、AV装置、以及同步控制装置。
接下来,参照图2至图5来进一步详细地说明显示装置1的结构。
图2是表示关于视频信号进行处理及控制的部分的功能的框图,图3是表示关于音频信号进行处理及控制的部分的功能的框图,图4是表示输入侧的信号状态与输出侧的信号状态之间的关系的例的图,图5是表示关于图4所表示的信号状态的相互关系的图,图6是表示同步控制方法的流程图。
还有,图2及图3所示的框图,不但具有与图1所示的框图相同的部分,也具有其变形后的部分。即,可以将图2及图3所示的框图,认为是图1所示框图的部分变形例。
图2中,在输入信号检测部NSV,对所输入的视频信号SV1,检测其亮度信号的变化状态,频率的变化状态,振幅的变化状态等,并在一定周期ts内,即针对时间t0,t1,t2,t3…分别进行采样。通过采样得到的视频信号f(t)[t=0,1,2…],被存储到视频存储部(输入部存储器)21中。在运算部21b根据从视频存储部21读出的视频信号f(t)求出变化量Df。即,变化量Df由下式(1)表示。
Df=f(t)-f(t-1) ……(1)
对于在视频信号处理部12中进行信号处理后的视频信号SV2,在输出信号检测部SSV中,与输入信号检测部NSV一样,检测其亮度信号的变化状态,频率的变化状态,振幅的变化状态等,并在一定的周期ts内进行采样。通过采样得到的视频信号g(t)[t=0,1,2…],被存储到视频存储部(输出部件存储器)23中。但是,视频信号SV2,因为在视频信号处理部12进行的处理而相对视频信号SV1会延迟n个采样周期,因此存储到视频存储部23的视频 信号g(t)[t=0,1,2…]实际上是用[t+n]来代替[t],故表示为g(t+n)。在运算部23b中根据从视频存储部23读出的视频信号g(t+n)求出变化量Dg。即,变化量Dg由下式(2)表示。
Dg=g(t+n)-g(t+n-1)……(2)
还有,式(2)所示的变化量Dg为Dg(t+n)。
然后,视频延迟检测部25,从这些变化量Df、Dg的相关性最大的位置开始求出视频信号的延迟时间n。
图4表示某个输入信号(视频信号)f(t)的曲线图。在该曲线图的下方表示有,对应t=0,1,2…的输入信号的大小[f(t)],以及其变化量Df的数值。例如,对应t=1,2,3,4的输入信号f(t)为5,1,3,2,变化量Df为3,-4,2,-1。
而且,在其下方表示了输出信号(视频信号)g(t)的曲线图,该输出信号(视频信号)g(t)延迟了n个采样周期。在该曲线图的下方用数值表示对应t=0+n,1+n,2+n…的输出信号的值[g(t+n)],以及其变化量Dg。例如,对应t=10,11,12,13的输出信号g(t)为3,7,1,5,变化量Dg为4,-6,4,-1。另外,对于输入信号f(t)为0的t=9,此时的n为0(n=0)。
图5中,以在t=9即n=0时的输入信号f(t)的变化量Df为0作为基准,用数值表示与n=0,1,2,3…时的输出信号g(t)的变化量Dg之差(Df-Dg)的数值。其下方的表中用数值表示差值(Df-Dg)的平方,即(Df-Dg)2。
在图5的表中,差值的平方(Df-Dg)2最小的位置为n=8的位置,且其值为0。即,在t=17,n=8的位置上,输入信号f(t)的变化量Df(=0)与输出信号g(t)的变化量Dg(=0)一致,其差值的平方(Df-Dg)2为最小值0。因此,可求出在视频信号处理部12进行处理而延迟的视频信号SV2的延迟时间n为[8]。
这样,视频延迟检测部25中,在相关判断电路25a上,求出输入信号的变化量Df与输出信号的变化量Dg之间的相关性最大的位置,并根据此位置求出延迟时间n。
如图3所示,在输入信号检测部NSA及输出信号检测部SSA中,对音频信号SA,也可以如上述说明的视频信号SV一样,通过式(3)和(4)求出 变化量Dp和Dq。
Dp=p(t)-p(t-1)……(3)
Dq=q(t+n)-q(t+n-1)……(4)
然后,音频延迟检测部26,从这些变化量Dp、Dq的相关性最大的位置开始求出音频信号的延迟时间k。
基于所求得的延迟时间n、k,并通过延迟补偿量检测部27V、A,求出各自的延迟补偿量HRV、HRA。
即,如图2所示的延迟补偿量检测部27V中,比较延迟时间n和k,当n>k时,将延迟补偿量HRV设定为0。延迟补偿量HRV等于0是指使其不产生延迟。其他的情况下,即n≤k时,将延迟补偿量HRV设定为(k-n)。即,将延迟时间n和k之间的差值的绝对值设定为延迟补偿量HRV。
而且,如图3所示的延迟补偿量检测部27A中,比较延迟时间n和k,当n>k时,将延迟补偿量HRV设定为(n-k)。即,将延迟时间n和k之间的差值的绝对值设定为延迟补偿量HRA。其他的情况下,即n≤k时,将延迟补偿量HRA设定为0。
延迟补偿部13,基于作为延迟补偿量HRV所得的数值来对视频信号SV2进行延迟补偿,并输出视频信号SV3。延迟补偿部17,基于作为延迟补偿量HRA所得的数值来对视频信号SA2进行延迟补偿,并输出视频信号SA3。
这样,将视频信号SV2或音频信号SA2当中较慢的一方作为基准,使另一方延迟两个延迟时间n、k之间差值(|n-k|),从而可得到互相同步的视频信号SV3和音频信号SA3。
此外,输入信号检测部NS及输出信号检测部SS的信号的存储,视频延迟检测部25及音频延迟检测部26的延迟时间n、k的计算,延迟补偿量检测部27的延迟补偿量HRV、HRA的计算,可以在显示装置1工作期间的适当时刻来进行。例如,仅在开启了显示装置1的电源,或在其后的初期设定时进行一次。此外,此时进行多次,例如3次,并且进行3次后得到的三个延迟补偿量HRV、HRA各自一致时,设定成该值。当不一致时再进行3次。此外,当显示装置1工作时,以适当的时间间隔来计算延迟补偿量HRV、HRA。
而且,当视频信号处理部12或音频信号处理部16的处理内容发生变更时,重新计算延迟补偿量HRV、HRA。例如,视频信号处理部件12或音频 信号处理部16的处理内容随着传输线路的变更而发生变更时,或者基于传输线路的变更,延迟时间n、k发生了改变时等,就对应地重新计算延迟补偿量HRV、HRA。而且,当预料到视频信号处理部12或音频信号处理部16的处理内容会发生改变时,以给定的时间间隔,例如每隔10分钟,重新计算补偿量HRV、HRA。
将计算出的延迟补偿量HRV、HRA,保持在延迟补偿量检测部27或者延迟补偿部13、17中为好。
接下来,参照流程图来说明同步控制的大致的流程。
图6中,分别存储所输入的视频信号SV1及音频信号SA1的信号状态(#11)。与此同时,对视频信号SV1及音频信号SA1进行信号处理(#12)。对于进行了信号处理后的视频信号SV2及音频信号SA2,分别存储其信号状态(#13)。对于视频信号及音频信号,分别求出输出信号相对输入信号的延迟时间n、k(#14)。根据延迟时间n、k,求出延迟补偿量HRV、HRA(#15)。根据延迟补偿量HRV、HRA,延迟视频信号或者音频信号(#16)。
利用上述实施方式的显示装置1,即使对视频信号SV及音频信号SA中的某一个进行了某种信号处理,也可以对由该处理导致的信号的延迟进行补偿,从而可实现视频信号与音频信号的同步。其结果是,显示在显示面板15上的影像与扬声器19发出的音频之间不会产生时间差,从而可以让观众欣赏到和谐自然的图像及音频。
在求延迟时间n、k时,求出输入信号与输出信号之间的变化量,从两者间变化量的相关性最大的位置开始求得延迟时间n、k,由此可正确地求出各自的延迟时间n、k。即,虽然信号的强度(振幅)会发生变化,但是因为信号变化量不会产生那种程度的变化,因此通过所得到的变化量的相互关系可正确地求出延迟时间n、k。
此外,在图4及图5所示的例子中,求出变化量之差的平方(Df-Dg)2 之后查看其相互关系,但是不必要必须求出平方值。而且,虽然以例子的形式表示了信号f(t)、g(t)、p(t)、q(t)为各自都是同一个类型的情况,但是当这些信号是多种类型时,对于各个信号的变化量之差,只要利用最小二乘法,求出差为最小的位置即可。例如,当使用亮度信号作为视频信号f(t)时,对图像内多个不同的特定的点(像素)采用多个亮度信号,对于这些多个亮 度信号的变化量之差,利用最小二乘法求出最小的位置。
而且,延迟补偿部13、17中,由于其中的任一个将其延迟补偿量HR设为0,因此可使延迟时间变为最小,而且也可将信号的畸变抑制在最小范围内。但是,根据需要,可以在延迟补偿部13、17分别将延迟补偿量HRV、HRA设置为有效值来进行延迟补偿。反正,即使在视频或声音的任一个或两者都发生了延迟的情况下,也可对其进行补偿从而获得同步。
如上所述的实施方式中,输入信号检测部NS、输出信号检测部SS、视频延迟检测部25、音频延迟检测部26、延迟补偿量检测部27、以及显示装置1的全部或者各部分的构成、结构、电路、形状、个数、处理的内容或者顺序、处理的时刻等,可以依照本发明的宗旨适当地变更。
本发明,除了适用于上述显示装置1以外,还适用于计算机系统、电视机、DVD播放装置、AV装置等各种视频装置。
产业上的可利用性
本发明可利用到,电视机、DVD播放装置、AV装置、或者应用于其中的显示装置等上。
Claims (11)
1.一种视频装置的视频信号和音频信号的同步控制方法,该视频装置包括视频信号处理部、视频输出部、音频信号处理部和音频输出部,所述视频信号处理部对所输入的视频信号进行信号处理,所述视频输出部输出信号处理后的影像,所述音频信号处理部对与所述视频信号分离地输入的音频信号进行信号处理,所述音频输出部输出信号处理后的音声,其特征在于,
对于分别分离地输入的所述视频信号及所述音频信号,分别将其信号状态存储于输入视频存储部及输入音频存储部;
对于在所述视频信号处理部中信号处理后的视频信号以及在所述音频信号处理部中信号处理后的音频信号,分别将其信号状态存储于输出视频存储部及输出音频存储部;
对存储于所述输入视频存储部中的视频信号的信号状态和存储于所述输出视频存储部中的视频信号的信号状态进行比较,求出所述视频信号处理部中的视频处理所引起的视频信号的延迟时间;
对存储于所述输入音频存储部中的音频信号的信号状态和存储于所述输出音频存储部中的音频信号的信号状态进行比较,求出所述音频信号处理部中的音频处理所引起的音频信号的延迟时间;
基于所求得的视频信号的延迟时间和音频信号的延迟时间的差值,求出相对于视频信号或者音频信号的延迟补偿量,并依据所求得的延迟补偿量,对于应该输出的视频信号或者音频信号进行延迟补偿。
2.如权利要求1所述的视频装置的视频信号和音频信号的同步方法,其特征在于,
当求取所述视频信号的延迟时间时,
先求出存储于所述输入视频存储部中的视频信号的信号状态的变化量及存储于所述输出视频存储部中的视频信号的信号状态的变化量,并从这些变化量的相关性最大的位置开始求出该延迟时间,
当求取所述音频信号的延迟时间时,
先求出存储于所述输入音频存储部中的音频信号的信号状态的变化量及存储于所述输出音频存储部中的音频信号的信号状态的变化量,并从这些变化量的相关性最大的位置开始求出该延迟时间。
3.一种视频装置的视频信号和音频信号的同步控制装置,该视频装置包括视频信号处理部、视频输出部、音频信号处理部和音频输出部,所述视频信号处理部对所输入的视频信号进行信号处理,所述视频输出部输出信号处理后的影像,所述音频信号处理部对与所述视频信号分离地输入的音频信号进行信号处理,所述音频输出部输出信号处理后的音声,其特征在于,该同步控制装置包括:
输入视频存储部,其存储与所述音频信号分离地输入的所述视频信号的信号状态;
输入音频存储部,其存储与所述视频信号分离地输入的所述音频信号的信号状态;
输出视频存储部,其对于在所述视频信号处理部中信号处理后的视频信号的信号状态进行存储;
输出音频存储部,其对于在所述音频信号处理部中信号处理后的音频信号的信号状态进行存储;
视频延迟时间检测部,其对存储于所述输入视频存储部中的视频信号的信号状态和存储于所述输出视频存储部中的视频信号的信号状态进行比较,求出所述视频信号处理部中的视频处理所引起的视频信号的延迟时间;
音频延迟时间检测部,其对存储于所述输入音频存储部中的音频信号的信号状态和存储于所述输出音频存储部中的音频信号的信号状态进行比较,求出所述音频信号处理部中的音频处理所引起的音频信号的延迟时间;
延迟补偿量检测部,其基于所求得的视频信号的延迟时间和音频信号的延迟时间之间的差值,求出相对于视频信号或者音频信号的延迟补偿量;
延迟补偿部,其依据所求得的延迟补偿量,对于应该输出的视频信号或者音频信号进行延迟补偿。
4.如权利要求3所述的视频装置的视频信号和音频信号的同步控制装置,其特征在于,
所述视频延迟时间检测部求出存储于所述输入视频存储部中的视频信号的信号状态的变化量及存储于所述输出视频存储部中的视频信号的信号状态的变化量,并从这些变化量的相关性最大的位置开始求出该视频信号的延迟时间,
所述音频延迟时间检测部求出存储于所述输入音频存储部中的音频信号的信号状态的变化量及存储于所述输出音频存储部中的音频信号的信号状态的变化量,并从这些变化量的相关性最大的位置开始求出该音频信号的延迟时间。
5.如权利要求3或4所述的视频装置的视频信号和音频信号的同步控制装置,其特征在于,所述输入视频存储部及所述输出视频存储部以一定的周期对亮度信号进行采样并作为所述视频信号的信号状态进行存储。
6.如权利要求3或4所述的视频装置的视频信号和音频信号的同步控制装置,其特征在于,所述输入视频存储部及所述输出视频存储部将各帧的频率成分作为所述视频信号的信号状态进行存储。
7.如权利要求3或4所述的视频装置的视频信号和音频信号的同步控制装置,其特征在于,所述输入音频存储部及所述输出音频存储部将与各个给定时间相对应的频率成分作为所述音频信号的信号状态进行存储。
8.如权利要求3所述的视频装置的视频信号和音频信号的同步控制装置,其特征在于,所述输入视频存储部及所述输出视频存储部以一定的周期对亮度信号的变化量进行采样并将该变化量作为所述视频信号的信号状态进行存储。
9.如权利要求3或4所述的视频装置的视频信号和音频信号的同步控制装置,其特征在于,所述输入音频存储部及所述输出音频存储部以一定的周期对音频信号的变化量进行采样并将该变化量作为所述音频信号的信号状态进行存储。
10.一种音频视频装置,其特征在于,包括:
视频信号处理部,其对所输入的视频信号进行信号处理;
音频信号处理部,其对与所述视频信号分离地输入的音频信号进行信号处理;
输入视频存储部,其存储与所述音频信号分离地输入的所述视频信号的信号状态;
输入音频存储部,其存储与所述视频信号分离地输入的所述音频信号的信号状态;
输出视频存储部,其对于在所述视频信号处理部中信号处理后的视频信号的信号状态进行存储;
输出音频存储部,其对于在所述音频信号处理部中信号处理后的音频信号的信号状态进行存储;
视频延迟时间检测部,其对存储于所述输入视频存储部中的视频信号的信号状态和存储于所述输出视频存储部中的视频信号的信号状态进行比较,求出所述视频信号处理部中的视频处理所引起的视频信号的延迟时间;
音频延迟时间检测部,其对存储于所述输入音频存储部中的音频信号的信号状态和存储于所述输出音频存储部中的音频信号的信号状态进行比较,求出所述音频信号处理部中的音频处理所引起的音频信号的延迟时间;
延迟补偿量检测部,其基于所求得的视频信号的延迟时间和音频信号的延迟时间的差值,求出相对于视频信号或者音频信号的延迟补偿量;
延迟补偿部,其根据所求得的延迟补偿量,对于应该输出的视频信号或者音频信号进行延迟补偿;
视频输出部,其输出进行过信号处理后的影像;
音频输出部,其输出进行过信号处理后的音声。
11.一种视频信号和音频信号的同步控制装置,其特征在于,包括:
输入视频存储部,其存储所输入的视频信号的信号状态;
输入音频存储部,其存储与所述视频信号分离地输入的音频信号的信号状态;
输出视频存储部,其对于信号处理后的所述视频信号的信号状态进行存储;
输出音频存储部,其对于信号处理后的所述音频信号的信号状态进行存储;
视频延迟时间检测部,其对存储于所述输入视频存储部中的视频信号的信号状态和存储于所述输出视频存储部中的视频信号的信号状态各自的变化量进行比较,求出视频信号的延迟时间;
音频延迟时间检测部,其对存储于所述输入音频存储部中的音频信号的信号状态和存储于所述输出音频存储部中的音频信号的信号状态各自的变化量进行比较,求出音频信号的延迟时间;
延迟补偿量检测部,其基于所求得的视频信号的延迟时间和音频信号的延迟时间的差值,求出相对于视频信号或者音频信号的延迟补偿量;
延迟补偿部,其根据所求得的延迟补偿量,对于应该输出的视频信号或者音频信号进行延迟补偿。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2005/004987 WO2006100727A1 (ja) | 2005-03-18 | 2005-03-18 | 映像装置における映像信号と音声信号との同期制御方法および装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101142817A CN101142817A (zh) | 2008-03-12 |
CN101142817B true CN101142817B (zh) | 2011-05-11 |
Family
ID=37023424
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2005800491568A Expired - Fee Related CN101142817B (zh) | 2005-03-18 | 2005-03-18 | 视频装置的视频信号和音频信号的同步控制方法及装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20080049139A1 (zh) |
JP (1) | JPWO2006100727A1 (zh) |
KR (1) | KR100875592B1 (zh) |
CN (1) | CN101142817B (zh) |
WO (1) | WO2006100727A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007049451A1 (ja) * | 2005-10-27 | 2007-05-03 | National University Corporation Chiba University | 映像と音声のずれ時間を、高精度かつ簡便に計測する方法および計測装置 |
WO2010109745A1 (ja) * | 2009-03-24 | 2010-09-30 | パナソニック株式会社 | 音声画像再生システム、補聴器、音声画像処理装置 |
US8436939B2 (en) * | 2009-10-25 | 2013-05-07 | Tektronix, Inc. | AV delay measurement and correction via signature curves |
CN104954727B (zh) * | 2014-03-25 | 2018-08-07 | 南宁富桂精密工业有限公司 | 音视频同步控制设备及方法 |
CN104902317A (zh) * | 2015-05-27 | 2015-09-09 | 青岛海信电器股份有限公司 | 音视频同步方法及装置 |
CN105187688B (zh) * | 2015-09-01 | 2018-03-23 | 福建富士通信息软件有限公司 | 一种对手机采集的实时视频和音频进行同步的方法及系统 |
CN106851259B (zh) * | 2017-01-17 | 2021-03-12 | 中国科学院上海高等研究院 | 监控系统中的视频延时测试装置 |
CN110290411A (zh) * | 2019-07-05 | 2019-09-27 | 四川长虹电器股份有限公司 | 视频播放过程中自动校正音画不同步的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5844600A (en) * | 1995-09-15 | 1998-12-01 | General Datacomm, Inc. | Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network |
JP2003046901A (ja) * | 2001-07-30 | 2003-02-14 | Nippon Hoso Kyokai <Nhk> | リップシンク制御装置 |
WO2005004470A1 (en) * | 2003-07-01 | 2005-01-13 | Lg Electronics Inc. | Method and apparatus for testing lip-sync of digital television receiver |
JP2005033314A (ja) * | 2003-07-08 | 2005-02-03 | Ibex Technology Co Ltd | 信号遅延測定装置、信号遅延測定方法および信号遅延測定プログラム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4313135B1 (en) * | 1980-07-28 | 1996-01-02 | J Carl Cooper | Method and apparatus for preserving or restoring audio to video |
JPH0738771A (ja) * | 1993-07-22 | 1995-02-07 | Nippon Television Network Corp | 時間差調整装置 |
JP3154905B2 (ja) * | 1994-12-13 | 2001-04-09 | 株式会社東芝 | 映像/音声記録再生装置 |
JP3693393B2 (ja) * | 1995-10-26 | 2005-09-07 | 池上通信機株式会社 | 擬似雑音信号を用いた位相差調整装置 |
JPH09284726A (ja) * | 1996-04-12 | 1997-10-31 | Sony Corp | 信号遅延装置及び信号処理装置 |
JPH11150444A (ja) * | 1997-11-17 | 1999-06-02 | Sharp Corp | デジタル映像およびデジタル音声復号システム |
JPH11308613A (ja) * | 1998-04-22 | 1999-11-05 | Nippon Telegr & Teleph Corp <Ntt> | 映像音響同期方法および装置および映像音響同期プログラムを記録した記録媒体 |
US6496221B1 (en) * | 1998-11-02 | 2002-12-17 | The United States Of America As Represented By The Secretary Of Commerce | In-service video quality measurement system utilizing an arbitrary bandwidth ancillary data channel |
JP3377463B2 (ja) * | 1998-12-29 | 2003-02-17 | 日本放送協会 | 映像/音声ずれ補正システム、方法および記録媒体 |
JP2002223415A (ja) * | 2001-01-26 | 2002-08-09 | Sony Corp | Mpeg信号の記録再生装置 |
JP2002290767A (ja) * | 2001-03-27 | 2002-10-04 | Toshiba Corp | 映像及び音声の時間合わせ装置及び時間合わせ方法 |
JP2002290932A (ja) * | 2001-03-27 | 2002-10-04 | Toshiba Corp | デジタル放送受信装置とその制御方法 |
US6753925B2 (en) * | 2001-03-30 | 2004-06-22 | Tektronix, Inc. | Audio/video processing engine |
JP2003158643A (ja) * | 2001-11-20 | 2003-05-30 | Shibasoku:Kk | 信号処理方法及び信号処理装置 |
JP3629253B2 (ja) * | 2002-05-31 | 2005-03-16 | 株式会社東芝 | 音声再生装置および同装置で用いられる音声再生制御方法 |
US7283175B2 (en) * | 2002-11-07 | 2007-10-16 | Thomson Licensing | System and method for determining lip synchronization between audio and video in a digitized environment using buffer calculation |
EP1450555A1 (en) * | 2003-02-18 | 2004-08-25 | Thomson Licensing S.A. | Video device and method for synchronising time bases of video devices |
JP2004260641A (ja) * | 2003-02-27 | 2004-09-16 | Shibasoku:Kk | 信号処理装置 |
-
2005
- 2005-03-18 WO PCT/JP2005/004987 patent/WO2006100727A1/ja not_active Application Discontinuation
- 2005-03-18 KR KR1020077020112A patent/KR100875592B1/ko not_active IP Right Cessation
- 2005-03-18 CN CN2005800491568A patent/CN101142817B/zh not_active Expired - Fee Related
- 2005-03-18 JP JP2007509081A patent/JPWO2006100727A1/ja active Pending
-
2007
- 2007-09-17 US US11/856,368 patent/US20080049139A1/en not_active Abandoned
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5844600A (en) * | 1995-09-15 | 1998-12-01 | General Datacomm, Inc. | Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network |
JP2003046901A (ja) * | 2001-07-30 | 2003-02-14 | Nippon Hoso Kyokai <Nhk> | リップシンク制御装置 |
WO2005004470A1 (en) * | 2003-07-01 | 2005-01-13 | Lg Electronics Inc. | Method and apparatus for testing lip-sync of digital television receiver |
JP2005033314A (ja) * | 2003-07-08 | 2005-02-03 | Ibex Technology Co Ltd | 信号遅延測定装置、信号遅延測定方法および信号遅延測定プログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2006100727A1 (ja) | 2006-09-28 |
JPWO2006100727A1 (ja) | 2008-08-28 |
KR100875592B1 (ko) | 2008-12-23 |
KR20070116807A (ko) | 2007-12-11 |
US20080049139A1 (en) | 2008-02-28 |
CN101142817A (zh) | 2008-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101142817B (zh) | 视频装置的视频信号和音频信号的同步控制方法及装置 | |
US10360923B2 (en) | Method and system for eliminating an echo | |
US20070223874A1 (en) | Video-Audio Synchronization | |
US20070276670A1 (en) | Systems, methods, and apparatus for synchronization of audio and video signals | |
CN100394766C (zh) | 图像信号处理装置和图像信号处理方法 | |
US20070091207A1 (en) | Determining a delay | |
KR100651894B1 (ko) | 영상기기 및 그 제어방법 | |
RU2011107933A (ru) | Устройство и способ обработки сигнала изображения, устройство воспроизведения изображения, телевизионный приемник, электронное устройство | |
US20070296655A1 (en) | Method and system for frame insertion in a digital display system | |
US20070018999A1 (en) | Auto-centering of main image | |
CN101282438A (zh) | 画音同步方法和应用该方法的视频设备 | |
CN1285020C (zh) | 提高影像播放顺畅度的显示卡 | |
US20120293711A1 (en) | Image processing apparatus, method, and program | |
US20080211963A1 (en) | Equipment For Audio-Video Processing System | |
US7778789B2 (en) | Digital phase calibration method and system | |
JP4937382B2 (ja) | 映像信号補間装置、映像表示装置及び映像信号補間方法 | |
US20060109382A1 (en) | Display apparatus and control method thereof | |
US20060263064A1 (en) | Noise processing device and method thereof | |
JP2010154132A (ja) | ガンマ補正回路およびガンマ補正方法 | |
KR101583078B1 (ko) | 디스플레이 장치 및 그 방법 | |
KR100667297B1 (ko) | 메인 영상 신호 및 서브 영상 신호의 노이즈를 개별적으로감쇄시키는 디스플레이 장치 및 그 방법 | |
KR100929137B1 (ko) | 영상표시기기의 신호처리장치 및 방법 | |
KR101542253B1 (ko) | 영상표시기기 및 영상표시 방법 | |
JP2009147767A (ja) | 画像変換装置、画像表示装置 | |
KR20070079224A (ko) | 코어링 장치 및 이를 이용하는 휘도 처리 프로세서와 그방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20110511 Termination date: 20120318 |