具体实施方式
下面,基于附图来详细说明本发明的实施方式。而且,为了说明实施方式,在全部图中原则上对于同一部件赋予相同的符号,省略了其重复说明。本发明能够应用于普通的便携终端,例如便携电话、PHS(个人手持电话机系统(Personal Handy-phone System))、PDA(个人数字助理(Personal Digital Assistant)),但这里以便携电话机为例子进行说明.
使用图1到图8,说明了作为本发明的一个实施方式,利用不具有与27MHz的播放电台基准时钟相同频率的时钟发生器的便携终端机,来接收数字TV播放时,提高播放电台同步的同步精度的方法。
本实施方式应用于具有数字TV播放接收功能的便携终端机,这里,使用便携电话机作为便携终端机的一个例子来进行说明,但是,不限定应用于本发明的接收侧的设备。不言而喻,在除了便携电话机以外的情况下也能够具有同样的构成。
图1是表示本实施方式的便携电话机的大致构成的一个例子的方框构成图。
本实施方式的便携电话机包括:天线1;无线通信部2;编码解码处理部3;麦克风4;接收器5;通信用CPU6;通信用存储器7;输入部8;系统时钟9;应用CPU10;应用CPU用存储器11;工作存储器12;显示装置13;音频(Audio)-DAC(数字模拟转换器(Digital AnalogConverter))14;扬声器15;数字TV播放接收用天线20;数字TV播放用高频部21等。
天线1将电波变换为高频电信号,或者进行其逆变换。无线通信部2解调高频电信号,或者调制编码解码处理部3的输出信号。编码解码部3,解码无线通信部2的输出信号,向接收器5和通信用CPU6输出,相反地编码通信用CPU6和麦克风4的输出信号,向无线通信部2输出。通信用CPU6主要进行与电话机通信相关的处理和控制。通信用存储器7存储通信用CPU6的程序等。输入部8为数字键盘或者光标键等。系统时钟9是与27MHz时钟不同频率的本便携电话机的时钟信号。
应用CPU10主要进行与便携电话的应用有关的处理,和控制。应用CPU用存储器11存储应用CPU10的程序等。工作存储器12是成为应用执行时的作业用的区域的存储器。显示部13是LCD等。音频(Audio)-DAC14是将PCM数据变换为模拟声音的DAC。
数字TV播放接收用天线20,接收数字TV播放的电波,变换为高频电信号。数字TV播放用高频部21包括高频电路,解调由数字TV播放接收用天线20输出的高频电信号。
图2是表示用于接收数字TV播放所必需的应用CPU10内的概略构成图的一个例子,和图像、声音数据流的一个例子的图。
应用CPU10内,具有:TS处理部200,利用从数字TV播放用高频部21输出的数字播放标准,从作为使用的协议的MPEG2传输流(下面称为MPEG2-TS)分离播放电台基准时刻信息PCR(节目时钟基准(Program Clock Reference));TS-DeMux部201,将MPEG2-TS分离为动画用基本流(下面称为视频(Video)-ES)和声音用基本流(下面称为音频(Audio)-ES);视频解码部202,解码分离的视频(Video)-ES,变换为由显示部件13可显示的描画数据;显示控制部203,将描画数据传送给显示部13;音频解码部204,解码分离的音频(Audio)-ES,变换为PCM数据;音频控制部205,用于设定向音频(Audio)-DAC14传送PCM数据或者再现PCM数据时的采样频率(下面称为fs);CPU核心部206,进行上述各个处理的控制和音频再现时间等的运算;和DMAC207,例如在工作存储器12和音频控制部205之间,代替CPU高速地进行PCM数据的传送。此外,由用于临时地保存由上述处理所生成的各种数据的TS缓冲器300、视频(Video)-ES缓冲器301、描画缓冲器302、音频(Audio)-ES缓冲器303、PCM数据缓冲器304构成。
向TS处理部200输入:用于生成内部基准时钟成为源时钟的系统时钟9;在设定的采样数的PCM数据传送结束时,由DMAC207输出的DMAC传送结束中断.另外,在任意时刻能够读出来自CPU核心部206的值.
DMAC207能够设定DMA(直接存储器存取(Direct MemoryAccess))传送次数,传送设定的次数的采样数的PCM数据。重复进行DMA传送直到数字TV播放结束,或者用户进行了视听结束操作。另外,DMAC207如果结束设定的采样数的PCM数据传送,就输出DMAC传送结束中断。该DMAC传送结束中断输入到CPU核心部206,也用于由CPU核心部206进行的音频再现时间运算的定时信号。此外,也输入到TS(传输流)处理部200,用于锁存后述的内部基准时钟计数部402的计数值。通过这样,能够求出与音频再现时间相同瞬间的与播放电台同步的时钟的经过时间,能够更正确地求出同一期间内的2个时间,所以能够提高播放电台和便携电话机的同步精度。
各个缓冲器300、301、302、303、304为了加大各个所处理的数据尺寸,分配工作存储器12来充当各种缓冲器,但一般的,将应用CPU内具有的内置存储器充当存储器也没有关系。另外,每个缓冲器分散分配为外部工作存储器12和内部存储器也可以。
图3是表示TS处理部200的概略构成的一个例子的构成图。
TS处理部200具有:PCR提取部400,从由数字TV播放用高频部21输入的MPEG2-TS分离PCR;内部基准时钟生成部401,从便携电话机的系统时钟生成内部基准时钟;内部基准时钟计数部402,通过由PCR进行的修正,再现与播放电台同步的时钟;比较部403,比较由PCR提取部400输出的PCR值和内部基准时钟计数部402的计数值,在2个值有偏差时向内部基准时钟计数部402输出计数值修正信息;内部基准时钟计数值保持部404,触发DMAC传送结束中断信号,就保持由内部基准时钟计数部402锁相的计数值,能够在任意时刻从CPU核心部206读出。
内部基准时钟计数部402一边由内部基准时钟进行相加(countup),一边在PCR值和计数值有偏差时,进行修正使得根据计数值修正信息将计数值置换为PCR值。该PCR是播放电台基准时刻信息,所以如果内部基准时钟计数部402能够进行相加(count up)动作使得跟踪该PCR,就意味着,再现内部基准时钟计数部402跟踪了与播放电台同步的时钟的时间经过。
内部基准时钟计数部402的修正仅在接收PCR时进行,所以在不接收PCR时不进行修正处理。在不进行由PCR进行的修正处理期间,假定内部基准时钟和与播放电台同步的时钟一样超前(前进),仅进行由内部基准时钟进行的相加(count up)。
图4是表示音频控制部205的大致构成的一个例子的构成图。
音频控制部205具有:PCM数据处理部500,进行PCM数据的fs和立体声/单声道等的设定;DAC-IF部501,为了向音频(Audio)-DAC14输出PCM数据而变换为LRCLK/BCLK/Data,此外,由用于缓冲输入输出的PCM数据的输入FIFO(先入先出(First In First Out))600、输出FIFO601所构成。
在PCM数据处理部500,需要预先设定fs,为了进行正确的音频再现,需要正确地设定PCM数据的fs,但不一定需要设定与PCM数据的fs相同的值。详细的细节在后面描述,例如,输入fs与音频再现时间的关系,是对于输入fs=24k[Hz](=不进行fs修正的音频再现时间),进行输入fs=24k+α[Hz](=修正fs缩短音频再现的时间)、输入fs=24k-α[Hz](=修正fs延长音频再现的时间)的调整。
另外,PCM数据处理部500通过由过滤(filtering)处理等进行的fs变换,能够以与输入的PCM数据的fs不同的输出fs向音频(Audio)-DAC输出。这是不具有音频再现用的主时钟的便携电话机的有效的方法,与播放电台同步同样的,将由便携电话机的系统时钟能够生成的fs作为输出fs,由PCM数据处理部500设定,进行PCM数据的再现。
输入FIFO600与再现内容的长度相比,是非常小的容量,所以监视输入FIFO600内的数据量,根据需要,由DMAC207要求下一个数据的传送,使得不发生下溢或上溢。
接着,说明使用图5到图8的、为了得到与利用便携电话机接收数字TV播放所必需的播放电台的同步的动作流程,来提高与播放电台的同步精度的方法。
图5是表示从视听开始的一连串动作的一个例子的主流程图。图6是表示在播放电台同步处理中,使得便携电话机的内部基准时钟跟踪由TS处理部200处理的播放电台的PCR的动作的一个例子的流程图。图7是详细地表示图5的主流程中的“PCM数据传送处理”的动作的一个例子的流程图。图8是详细地表示图5的主流程中的“修正播放电台和便携电话机的经过时间的偏差的处理”的动作的一个例子的流程图。
首先,如图5所示,如果用户操作输入部8来开始数字TV播放的视听,就从由数字TV播放用天线20接收的电波,来解读信道信息等,进行初始化设定(S100)。接着,进行播放电台同步方法中所必需的、基准时间存储缓冲器和音频再现时间存储缓冲器的初始化(S101)。这两个缓冲器一般在工作存储器12中分配,但如果能够对应内置于应用CPU10内的存储器,来充当它们也可以。
TS处理部200,从接收的电波提取MPEG2-TS,存储在TS缓冲器300中(S102)。此时,同时还进行为了使内部基准时钟计数部402跟踪与播放电台同步的时钟而必需的PCR的提取。存储在TS缓冲器300中的MPEG2-TS由TS-DeMux部201分割为视频(Video)-ES和音频(Audio)-ES,分别存储在视频(Video)-ES缓冲器301和音频(Audio)-ES缓冲器303中(S103)。AV同步以音频再现定时为基准,在音频处理中,存储在视频(Video)-ES缓冲器中的视频(Video)-ES利用视频解码部202解码,与音频再现定时相应地从显示控制部203传送给显示装置13,进行描画处理(plot processing)(S108)。
存储在音频(Audio)-ES缓冲器303中的音频(Audio)-ES,利用音频解码部204解码,变换为PCM数据,存储在PCM数据缓冲器304中(S104)。PCM数据缓冲器304中的PCM数据,通过DMAC207传送给音频控制部205(S105),进行音频再现(S107),此时,对于再现由播放电台的PCR修正的与播放电台同步的时钟的内部基准时钟计数部402的相加(count up)时间,与音频再现时间进行比较,求出音频再现时间的延迟/超前的偏差,修正PCM数据处理部500所设定的输入fs,使得没有该偏差(S106),使得便携电话机的音频再现时间与播放电台的时间经过相匹配,使得便携电话机与播放电台同步,来视听节目。这里,输入fs的修正幅度处于对于人的听觉特性而言是能够容许的范围内,抑制了再现声音的失真和不自然等。该S105和S106是说明提高播放电台同步的同步精度的步骤,利用后面的图6和图7详细地说明。
在结束数字TV播放的视听的情况下,用户压下结束键(S109),在没有压下结束键的情况下(S109为否),再次从播放信号波中提取MPEG2-TS(S102),一面维持与播放电台同步,一面继续视听。在压下结束键的情况下(S109为是),停止全部的处理部,结束视听。
接着,使用图6来说明在TS处理部200中使得便携电话机的内部基准时钟跟踪播放电台的PCR的动作.
如图6所示那样,如果开始PCR跟踪动作,就将向内部基准时钟生成部401输入的系统时钟9作为源时钟,生成内部基准时钟。内部基准时钟计数部402根据内部基准时钟来进行相加(count up)动作(S200)。PCR提取部400取得与MPEG2-TS重叠的PCR(S201)。这是为了使得内部基准时钟跟踪与播放电台同步的时钟而利用的。PCR不能提取时,内部基准时钟计数部402不进行修正处理,仅继续进行由内部基准时钟进行的相加(count up)动作(S201为否)。
如能够提取PCR(S201为是),就比较提取的PCR值与现在的内部基准时钟计数部402的计数值(S202),如果两者的值一致(S202为是),就判断为与播放电台同步的时钟和内部基准时钟的时间超前方式相同,就不修正内部基准时钟计数部402的计数值,继续进行由内部基准时钟进行的相加(count up)动作,直到接收下一个PCR。
如果两者的值不一致(S202为否),就判断为与播放电台同步的时钟同内部基准时钟的时间超前方式(超前量)有偏差,就需要使内部基准时钟同与播放电台同步的时钟匹配。这里,将现在的内部基准时钟计数部402的计数值置换为利用PCR提取部400提取的PCR值(S203)。而且,继续由内部基准时钟进行的加和动作直到接收下一个PCR。上述内部基准时钟的PCR跟踪处理在接收数字TV播放期间决不停止,继续动作(S204为否)。在压下结束键的情况下(S204为是),停止PCR跟踪动作。
接着,使用图7来说明上述图5的主流程中PCM数据传送处理流程(S105)。
如图7所示那样,如果开始PCM数据传送处理,由音频解码部204解码的PCM数据存储在PCM数据缓冲器304中,但在解码时提取音频数据参数。CPU核心部206对音频控制部205设定这些参数(S300),这里设定的参数具有输入fs值或者立体声/单声道信息等。另外,CPU核心部206对应设定向DMAC207传送的采样数或传送方法等。
如果参数设定结束,向PCM数据缓冲器304中存储PCM数据,CPU核心部206就指示开始向DMAC207传送PCM数据(S301)。此时,CPU核心部206存储PCM数据传送开始时的内部基准时钟计数部402的计数值(S302)。该PCM数据传送开始时的计数值用于运算与播放电台同步的时钟的经过时间。
如果DMAC207从CPU核心部206接收PCM数据传送开始命令,就顺序向音频控制部205的输入FIFO600传送存储在PCM数据缓冲器304中的PCM数据(S303)。传送给输入FIFO600的PCM数据,以由S300设定的输入fs值的周期传送给音频(Audio)-DAC14。之后,进行由S300设定的采样数的PCM数据是否传送完的确认(S304)。
在设定的采样数的传送没有结束的情况下(S304为否),进行音频再现,减少输入FIFO600内的PCM数据,所以从音频控制部205对DMAC207发送下一个PCM数据的传送要求(S305),从PCM数据缓冲器304向输入FIFO600传送下一个PCM数据(S306)。然后,继续S304和S305,直到由S300设定的采样数的PCM数据传送给音频控制部205。
如果结束设定的采样数的传送(S304为是),DMAC207就对CPU核心部206和内部基准时钟计数部402输出DMAC传送结束中断(S307),返回到图5的主流程,转移到下一个步骤的与播放电台的同步处理(S106)。
输出DMAC传送结束中断后,一旦返回主流程,就进行与播放电台的同步处理(S106),但继续数字TV播放的视听限于马上返回本PCM数据传送处理流程,在再现的音频途中中断前,继续进行下一个PCM数据的传送处理.
在第二次以后进行的PCM数据传送处理,利用与播放电台的同步处理(S106),进行用于调整音频再现时间的输入fs设定值的修正。通过修正该输入fs设定值,原来PCM数据再现的时间与实际上向音频(Audio)-DAC14输出而再现时间产生差,使用该差,修正由内部基准时钟计数部402再现的与播放电台同步的时钟的经过时间跟便携电话机的音频再现时间的偏差,取得与播放电台的同步。
接着,使用图8来说明上述图5的主流程中修正播放电台与便携电话机的经过时间的偏差的处理流程(S106)。
在执行该处理流程时,利用上述图6所示的内部基准时钟的PCR跟踪动作,内部基准时钟计数部402跟踪与播放电台同步的时钟,此外,通过上述图7所示的PCM数据传送处理,在S300将设定的采样数的PCM数据传送给音频控制部205,来自DMAC207的DMAC传送结束中断向CPU核心部206和内部基准时钟计数部402输出。
内部基准时钟计数部402再现便携电话机内唯一的、与播放电台同步的时钟,但为了提高同步精度,需要在相同期间内得到更正确的音频再现时间和与播放电台同步的时钟的经过时间。在该相同期间内,作为为了得到更正确的音频再现时间和与播放电台同步的时钟的经过时间的期间,使用便携电话机的再现一定采样数的PCM数据的时间。再现PCM数据的时间是便携电话机内最正确稳定的时间,所以将再现一定采样数的PCM数据的时间,设为用于进行与播放电台同步的时钟的经过时间和便携电话机的音频再现时间的比较的单位期间。
接着,更正确地得到相同期间内与播放电台同步的时钟的经过时间和音频再现时间的方法是,便携电话机的音频再现时间是利用再现的PCM数据的fs设定值和采样数,利用公式(1)进行计算来求出:
音频再现时间=1/fs设定值×采样数[sec] (1)
与此相对,将与播放电台同步的时钟的经过时间的每个单位期间的时间设为基准时间(reference time),利用内部基准时钟计数部402的PCM数据的传送开始时刻的计数值,和向音频控制部205传送一定采样数的PCM数据结束时刻的计数值,利用公式(2)来计算求出:
基准时间=(传送开始时的计数值-传送结束时的计数值)×1/内部基准时钟[sec] (2)
为此,需要在一定采样数的PCM数据传送结束时刻的内部基准时钟计数部402的计数值。该计数值如何接近PCM数据传送结束时刻,决定与播放电台同步的时钟的经过时间的精度。这里,直接向内部基准时钟计数部402输入PCM数据传送结束的中断信号(interruptsignal),利用传送结束时的中断信号锁存内部基准时钟计数部402,将该计数值保持在内部基准时钟计数值保持部404。通过这样,能够得到传送结束时刻的内部基准时钟计数部402的计数值,能够提高同步精度。
如图8所示那样,如果开始播放电台和便携电话机的经过时间的偏差修正处理,内部基准时钟计数部402就触发DMAC传送结束中断,锁存计数值,保持在内部基准时钟计数值保持部404中(S400)。CPU核心部206读出保存在内部基准时钟计数值保持部404中的DMAC传送结束中断发生时的计数值,利用(公式2)来计算基准时间(S401)。
基准时间是从PCM数据传送开始到输出DMAC传送结束中断信号的时间,求出触发DMAC传送结束中断信号时锁存的内部基准时钟的计数值、和在S302存储的PCM数据传送刚开始后的内部基准时钟的计数值的差。计算出的基准时间存储在基准时间存储缓冲器中(S402)。
接着,CPU核心部206利用(公式1)来计算音频再现时间(S403)。基准时间是从PCM数据的再现开始到现在的时间,而音频再现时间是每一定采样数的时间,不是从再现开始的时间。CPU核心部206从PCM数据传送开始累计由计算求出的每一定采样数的音频再现时间,存储在音频再现时间存储缓冲器中(S404)。
接着,调查从PCM数据开始传送开始的、从再现的与播放电台同步的时钟求出的基准时间与便携电话机的音频再现时间是否没有引起偏差(S405)。如果在两个时间没有偏差的情况下(S405为是),能够判断为播放电台的时间超前量和便携电话机的时间超前量(timeadvance)相同,就不进行特别的修正处理,返回到上述图5的主流程,继续音频再现动作。
如果在具有偏差的情况下(S405为否),就修正PCM数据再现时的PCM数据处理部500的输入fs设定值,使得播放电台的时间超前情况与便携电话机的音频再现时间的超前情况匹配,来进行音频再现时间的调整。首先,为了修正PCM数据处理部500的输入fs设定值,调查相对基准时间的音频再现时间的超前量,从该结果,判断向正值侧修正输入fs设定值,还是向负极侧修正(S406)。
在音频再现时间超前的情况下(S406为是),称为再现PCM数据的时间早,所以将下一个PCM数据传送时的输入fs设定值向比现在的输入fs设定值还负的一侧修正(S407)。相反的,在基准时间超前的情况下(S406为否),称为再现PCM数据的时间迟,所以将下一个PCM数据传送时的输入fs设定值,向比现在的输入fs设定值还正的一侧修正(S408)。此时的fs修正幅度设为对于人的听觉特性来说能够容许的范围内。
例如,如果将PCM数据的fs设为24kHz,将由DMAC进行的传送采样数设为1024采样数,在不进行由输入fs进行的修正的情况下,以输入fs=24kHz的定时来再现fs=24kHz的PCM数据,所以1024采样数的PCM数据的再现时间为
与此相对,在音频再现时间超前的情况下,再现PCM数据的时间早,所以将输入fs设定值向负值侧修正,延迟PCM数据再现的时间。例如,如果向负值侧进行10Hz的修正,就以输入fs=23.990kHz的定时来再现fs=24kHz的PCM数据,1024采样数的PCM数据的再现时间为
与不进行输入fs修正的情况下相比,能够将再现时间延迟大约0.17msec。
相反地,在基准时间超前的情况下,PCM数据再现的时间延迟,所以将输入fs设定值向正值侧修正,提前PCM数据再现的时间。例如,如果向正值侧进行10Hz的修正,就以输入fs=24.010kHz的定时来再现fs=24kHz的PCM数据,1024采样数的PCM数据的再现时间为
与不进行输入fs修正的情况下相比,能够将再现时间提前大约0.18msec。
如果利用上述方法来调整音频再现时间,最终不改变实际再现的PCM数据的数据数量,此外,fs修正幅度也处于对于人们的听觉特性容许程度的预先规定的范围内来进行,所以能够抑制再现声音的失真和不自然等.一般的,对于人们的听觉特性能够容许的范围为0.2%左右,例如fs=24kHz的情况下,fs修正幅度为24kHz±48Hz左右.
如果按照本实施方式,能够在便携终端机上不增加27MHz的VCO等部件,可既抑制再现声音的失真,又能够实现便携终端机的与播放电台同步的同步精度。通过这样,由于不对便携终端机增加多余的部件,能够提供便宜的小型便携终端机。
此外,由于抑制了多余的消耗电流的增加,所以能够长时间连续视听数字TV播放。
另外,在对于人们的听觉特性能够容许的范围内对再现时的fs进行fs修正,能够抑制由修正导致的对于再现声音的音调的偏差等的影响。
以上基于实施方式具体地说明了本发明者们的发明,但本发明不限于所述实施方式,不用说能够在不脱离其宗旨的范围内进行各种改变。
本发明涉及例如数字TV播放接收系统的播放电台同步技术,特别是,能够应用于具有数字TV播放接收功能的便携终端机,能够广泛地应用于便携电话机,或者便携电话机以外的PHS、PDA等同样构成的接收侧的设备。
虽然我们已经显示和描述了本发明的几个实施例,但应该理解,在不脱离本发明的范围内这些实施例能够改变。因此,这里显示和描述的细节不是限制而是覆盖了所附权利要求范围内的所有改变和修改。