CN101118776A - 实现音、视频数据同步的方法、系统及装置 - Google Patents

实现音、视频数据同步的方法、系统及装置 Download PDF

Info

Publication number
CN101118776A
CN101118776A CNA2007101205850A CN200710120585A CN101118776A CN 101118776 A CN101118776 A CN 101118776A CN A2007101205850 A CNA2007101205850 A CN A2007101205850A CN 200710120585 A CN200710120585 A CN 200710120585A CN 101118776 A CN101118776 A CN 101118776A
Authority
CN
China
Prior art keywords
data
video data
video
station location
location marker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007101205850A
Other languages
English (en)
Other versions
CN101118776B (zh
Inventor
王国晖
王贞松
魏征
朱振华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Skyvein Net Computer Co., Ltd.
Original Assignee
Institute of Computing Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Computing Technology of CAS filed Critical Institute of Computing Technology of CAS
Priority to CN200710120585A priority Critical patent/CN101118776B/zh
Publication of CN101118776A publication Critical patent/CN101118776A/zh
Application granted granted Critical
Publication of CN101118776B publication Critical patent/CN101118776B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明公开了一种实现音、视频数据同步的方法,该方法包括:写入视频数据和音频数据,并建立视频数据或音频数据的位置标识与该数据的帧号的对应关系;当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,并播放所述未建立对应关系的数据和位于所述位置标识对应位置的数据。通过本发明,实现了在JPEG2000格式下的音、视频数据的同步。本发明还公开了一种实现音、视频数据同步的系统及一种同步装置。

Description

实现音、视频数据同步的方法、系统及装置
技术领域
本发明涉及多媒体技术领域,尤其涉及一种实现音、视频数据同步的方法、系统及装置。
背景技术
随着信息技术的发展,多媒体技术的应用也越来越广泛,例如越来越多地应用在数字电影方面。数字电影作为一个新兴的产业,具有成本低、制作加工简单、传输发行方式灵活、影像质量高和易于保存等优点,这使得数字电影越来越受到大众的青睐。
现在主流的高清数字电影采用第二代活动图像专家组编码标准(MotionPicture Experts Group2,MPEG2),其分辨率为1920*1080,视频码率约为40~60Mbps。在数字电影规范(v1.0)(Digital Cinema System Specification Ver.1.0)中确定了数字电影的行业标准,提出了基于JPEG2000图像格式的2K和4K两种标准的高清数字电影;其中2K数字电影分辨率为2048*1080,视频码率为250Mbs。
根据数字电影倡导联盟(DCI)规范的规定,电影在播放过程中必须保证音频、视频之间的同步关系,具体的要求是音视频同步需要做到唇同步(即口型与声音同步),也即音视频之间的偏差不能大于80毫秒。由于2K高清数字电影画面非常清晰,一旦出现音视频失同步现象,将会表现得非常明显,严重影响观众的观看感受。
对于基于MPEG2格式的数字电影,已经有比较成熟的方法解决音视频同步的问题。但是,这种基于MPEG2格式的解决音视频同步的方法却很难应用在基于JPEG2000格式的高清数字电影上,主要原因如下:
1、基于JPEG2000格式的高清数字电影播放系统采用JPEG2000格式压缩视频数据,其解码处理模块的结构与基于MPEG2格式的高清数字电影差异较大。
2、基于JPEG2000格式的高清数字电影的音频和视频数据是独立的,通过不同的通道输入到各自的处理模块,音、视频数据之间的关联较弱,不像MPEG2中音视频嵌入在同一个输入码流输入处理模块。
3、在基于MPEG2的数字电影系统中,音视频数据分别和系统时序时钟进行比对,从而达到同步的目的;而基于JPEG2000图像格式的高清数字电影中并不存在系统时序时钟。
总之,基于JPEG2000格式的高清数字电影在音、视频格式、播放系统构成等方面与MPEG2格式的数字电影相比存在巨大差异,所以原先用于MPEG2格式的音视频同步办法不适合用在基于JPEG2000的高清数字电影播放系统。现在还没有一种基于JPEG2000格式的音、视频数据同步方法。
发明内容
本发明实施例提供一种实现音、视频数据同步的方法、系统及装置,以解决现有技术中存在的无法在基于JPEG2000格式的情况下实现音、视频数据同步的问题。
一种实现音、视频数据同步的方法,该方法包括:
写入视频数据和音频数据,并建立视频数据或音频数据的位置标识与该数据的帧号的对应关系;
当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,并播放所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
一种实现音、视频数据同步的系统,该系统包括:
同步控制装置,用于写入音频数据和视频数据,建立视频数据或音频数据的位置标识与该数据的帧号的对应关系,当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,输出所述未建立对应关系的数据和位于所述位置标识对应位置的数据;
播放装置,用于播放所述同步控制模块输出的所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
一种同步控制装置,该装置包括:
视频缓存模块,用于写入和读出视频数据;
音频缓存模块,用于写入和读出音频数据;
建立模块,用于建立视频数据或音频数据的位置标识与该数据的帧号的对应关系;
同步管理模块,用于当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述建立模块中查找出对应的位置标识,并从所述音频缓存模块中获取并输出音频数据,从所述视频缓存模块中获取并输出视频数据。
本发明实施例通过建立视频数据或音频数据的位置标识与该数据的帧号的对应关系,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,并播放所述未建立对应关系的数据和位于所述位置标识对应位置的数据的方法,实现了在JPEG2000格式下的音、视频数据的同步。
附图说明
图1为本发明实施例一中实现音、视频数据同步的系统结构示意图;
图2为本发明实施例二中实现音、视频数据同步的方法步骤流程示意图;
图3(a)和图3(b)为本发明实施例二中保存的对应关系列表的结构示意图;
图4为本发明实施例三中同步控制装置的结构示意图;
图5为本发明实施例三中视频缓存模块的结构示意图;
图6为本发明实施例三中同步管理模块的结构示意图。
具体实施方式
本发明实施例在基于音、视频数据之间的关联较弱或者不能通过系统时序时钟进行音视频同步处理的系统中,例如基于JPEG2000图像格式的高清数字电影系统中。
在本发明实施例中,可以以音频数据为基准,实现音、视频数据同步:先写入视频数据和音频数据,在写入视频数据时建立视频数据的帧号与该视频数据被写入的位置标识的对应关系;然后,当播放音、视频数据时,根据音频数据的帧号从所述对应关系中查找出对应的位置标识,并同步播放所述音频数据和位于所述位置标识对应位置的视频数据。
类似地,本发明实施例还可以以视频数据为基准,实现音、视频数据同步:在写入音频数据时建立音频数据的帧号与该音频数据被写入的位置标识的对应关系;然后,当播放音、视频数据时,根据视频数据的帧号从所述对应关系中查找出对应的位置标识,并同步播放所述视频数据和位于所述位置标识对应位置的音频数据。
音频数据的帧号与其对应的视频数据的帧号具有对应关系,在本发明实施例中,可以看作音频数据的帧号与其对应的视频数据的帧号相同。
下面结合说明书附图详细说明本发明。
如图1所示,为本发明实施例一中实现音、视频数据同步的系统结构示意图,从图中可以看出该系统包括:同步控制装置11、和播放装置12,其中,同步控制装置11用于写入音频数据和视频数据,建立视频数据或音频数据的位置标识与该数据的帧号的对应关系,当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,输出所述未建立对应关系的数据和位于所述位置标识对应位置的数据;播放装置12用于播放所述同步控制装置11输出的所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
播放装置可以包括视频播放装置21和音频播放装置22,其中,视频播放装置21可以是投影机等视频播放设备,也可以是与视频播放设备相连达到播放视频数据的目的的其他设备。音频播放装置22可以是音响等音频播放设备,也可以是与音频播放设备相连达到播放音频数据的目的的其他设备。
同步控制装置11中写入的音频数据和视频数据是由系统中的数据处理装置13输出的。该数据处理装置13也可以划分为视频数据处理模块23和音频数据处理模块24。视频数据处理模块23可以是视频解码器,将解码后的视频数据输出给同步控制装置11;音频数据处理模块24可以是音频解码器,将解码后的音频数据输出给同步控制装置11。
当以音频数据为基准时,本实施例一中的系统的工作过程为:系统内的视频数据处理模块23和音频数据处理模块24分别接收到外界发送的未进行同步处理的视频数据和音频数据,视频数据处理模块23和音频数据处理模块24分别将所述视频数据和音频数据解码后向同步控制装置11输出;同步控制装置11写入接收到的所述视频数据和音频数据,并且在写入视频数据时建立该视频数据的帧号与该视频数据写入的位置标识的对应关系;当播放音、视频数据时,根据音频数据的帧号从所述对应关系中查找出对应的位置标识,向所述音频播放装置22输出该音频数据,向视频播放装置21输出位于所述位置标识对应位置的视频数据;则视频播放装置21和音频播放装置22将视频数据和音频数据同步输出。
同步控制装置11的具体结构及工作过程将在后续的实施例中详细描述。
下面结合具体实施例详细说明本发明方法。
如图2所示,为本发明实施例二中实现音、视频同步的方法步骤流程示意图,为了简便起见,也设定本实施例中以音频数据为基准来实现同步的,从图中可以看出该方法主要包括以下步骤:
步骤201:写入视频数据和音频数据。
在本实施例中,写入的视频数据和音频数据是经过了解码处理,但是未经过同步处理的数据。
将视频数据写入存储视频数据的区域可以是利用视频缓存的方式实现的,进一步地,可以是利用乒乓视频缓存的方式实现的,即将视频数据写入乒乓视频缓存区。
写入音频数据的数量可以根据需要设定,如设定连续写入的数据量为1秒的音频数据,由于音频数据较小,故存储音频数据的区域能够较快地存满1秒的音频数据,然后进入等待状态。音频数据的写入也可以利用缓存的方式实现,进一步地,也可以是利用乒乓视频缓存的方式实现。
步骤202:建立所述视频数据的帧号与该视频数据的位置标识的对应关系。
每一音频数据和视频数据都有能唯一地表示自己的标识,即时码,根据时码能够确定出音频数据和视频数据的帧号。在写入每一个视频数据时,为存储该视频数据分配了存储空间,则建立该视频数据的帧号和表示该存储空间的位置标识的一一对应关系。该对应关系可以以表的形式存在,该表可以由现场可编程门阵列(FPGA)内部的随机存储器(RAM)保存。
步骤203:当播放音、视频数据时,根据音频数据的帧号从所述对应关系中查找出对应的位置标识。
当存储音频数据的区域进入等待状态时,就可以从存储的音频数据中确定一个作为待播放的音频数据,可以按照音频数据帧号的先后顺序来确定。
由于处于同步状态的音频数据与视频数据的帧号相同,因此根据该音频数据帧号查找出的视频数据与该音频数据是同步的。
步骤204:播放音频数据和位于所述位置标识对应位置的视频数据。
在本实施例中,播放音、视频数据的方法可以有多种,包括但不限于以下两种:
1、为了尽可能好地实现音、视频数据的同步播放,可以根据音频数据的帧号从所述对应关系中查找出对应的位置标识之后,同时播放所述音频数据和位于所述位置标识对应位置的视频数据;
2、为了使系统更加简化,减少硬件资源,更加方便地实现同步过程,也可以先开始播放音频数据,再根据音频数据的帧号从所述对应关系中查找出对应的位置标识,播放位于所述位置标识对应位置的视频数据。虽然音、视频数据不是同时播放的,但是两个数据播放的间隔时间非常短,能够满足用户的对同步的要求。
步骤201至步骤204循环进行,可以不断实现音、视频数据的同步播放。
在步骤201中,写入视频数据时,可以同时将该视频数据的帧号与该视频数据写入的位置标识的对应关系,根据视频数据不同的写入方式可以建立不同的对应关系,包括但不限于:按照所述视频数据到达的先后顺序依次写入或按照视频数据的帧号从小到大顺序写入。
如图3(a)和图3(b)所示,帧号分别为1、2和3的三个视频数据先后到达同步控制装置11,根据视频数据的帧号确定这三个视频数据到达的先后顺序为:帧号1的视频数据最先到达,其次为帧号3的视频数据,最后为帧号2的视频数据。在同步控制装置11中顺序开辟了三个位置标识为0001、0002和0003的存储空间。若按照视频数据到达的先后顺序依次写入,则建立的对应关系为:帧号1对应的位置标识为0001,帧号2对应的位置标识为0003,帧号3对应的位置标识为0002,若将建立的对应关系通过列表来体现,则如图3(a)所示;若按照视频数据的帧号从小到大顺序写入,则建立的对应关系为:帧号1对应的位置标识为0001,帧号2对应的位置标识为0002,帧号3对应的位置标识为0003,若将建立的对应关系通过列表来体现,则如图3(b)所示。
步骤201中描述的乒乓视频缓存的方式可以为:设定两个大容量外部存储器为存储器A和存储器B,并且在存储器A或存储器B中写入24帧图像时为写满。初始时,存储器A和存储器B中都没有视频数据写入;当系统下发“启动”信息时,开始向存储器A写入视频数据,而存储器B处于待切换状态;当存储器A中连续写入的数据达到24帧时,进行一次乒乓切换,即切换后存储器B进入写状态,存储器A进入读状态。若不是初始状态,当前存储器A在写状态,存储器B为读状态,并且存储器B连续读出的帧数达到设定的第一阈值,存储器A连续写入的帧数达到设定的第二阈值,则切换存储器A和存储器B的读写状态,如此循环,实现乒乓视频缓存。
若出现音、视频失同步的情况,则需要调整视频数据播放的顺序,该调整过程也是以音频播放为基准,来确定当前待播放的音频数据对应的视频数据的。由于音频数据不间断进行发送,则不断查找出与当前音频数据同步的视频数据,并将该音频数据和视频数据播放。
若以视频数据为基准来实现同步,则实施例2的方法与上述类似。
基于上述对本发明实施例一和实施例二中的系统和方法的描述,本发明实施例三还提供一种同步控制装置11,如图4所示,该装置包括视频缓存模块31、音频缓存模块32、建立模块33和同步管理模块34,其中,视频缓存模块31用于写入和读出视频数据;音频缓存模块32用于写入和读出音频数据;建立模块33用于建立视频数据或音频数据的位置标识与该数据的帧号的对应关系;同步管理模块34用于当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述建立模块中查找出对应的位置标识,并输出所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
若未建立对应关系的数据是音频数据,则输出音频数据和位于所述位置标识对应位置的视频数据;若未建立对应关系的数据是视频数据,则输出视频数据和位于所述位置标识对应位置的音频数据。
音频数据缓存模块32不仅用来存储音频数据,还能够使音频数据平稳地输出。该音频缓存模块可以由一个先进先出队列(First In First Out,FIFO)、大容量双倍数据率同步动态随机存储器(DDR SDRAM)或DDR2DRAM构成。
以音频数据为基准,描述同步控制装置11的工作过程为:
1、同步管理模块34分别将接收到的未进行同步处理的音频数据和视频数据转存到音频缓存模块32和视频缓存模块31,并将视频数据的帧号和该视频数据写入的位置标识发送给建立模块33,由该建立模块33建立写入的所述视频数据的帧号与该视频数据写入的位置标识的对应关系。
2、当音频缓存模块32处于等待状态时,即当前连续写入的音频数据已满足设定值,则同步管理模块34确定出当前待输出的音频数据。
3、将当前待输出的音频数据从音频缓存模块32处获取,确定出该音频数据时码对应的帧号,并从建立模块33中查找出该帧号对应的位置标识。
4、同步管理模块34利用所述位置标识从视频缓存模块31中获取位于该位置标识对应的位置的视频数据,并将该音、视频数据输出。
以视频数据为基准的情况下,同步控制装置11的工作过程相似。
视频缓存模块31可以由一个先进先出队列(First In First Out,FIFO)、大容量双倍数据率同步动态随机存储器(DDR SDRAM)或DDR2DRAM构成,若它的工作是按照乒乓视频缓存的方式执行,则如图5所示,该视频缓存模块31包括两个缓存单元41、乒乓切换控制单元42和乒乓切换信号产生单元43,其中,两个缓存单元41分别用于对视频数据进行写入或读出的操作;乒乓切换控制单元42用于根据接收到切换信号来切换所述缓存单元的读写状态;乒乓切换信号产生单元43用于若当前进行读操作的缓存单元中连续读出的帧数达到第一阈值,且当前进行写操作的缓存单元中连续写入的帧数达到第二阈值,则向所述乒乓切换控制单元发送所述切换信号。
缓存单元41可以是大容量外部存储器,例如:大容量DDR SDRAM或DDR2DRAM,其存储深度可根据选用的大容量外部存储器的容量和想要进行音、视频调整的范围来共同决定。两组DDR SDRAM作为写缓存模块和读缓存模块的存储模块,交替进行读写,组成乒乓结构缓存。
视频缓存模块31中还包括了写缓存单元44和读缓存单元45。乒乓切换控制单元42可以看作是一个多路开关,设定两个视频缓存模块分别为DDRSDRAM_A和DDR SDRAM_B,则当希望DDR SDRAM_A执行写操作,DDRSDRAM_B执行读操作时,乒乓切换控制单元42建立写缓存单元44与DDRSDRAM_A的控制器的连接,并且建立读缓存单元45与DDR SDRAM_B的控制器的连接。
视频缓存模块31的工作过程为:
1、根据视频缓存模块31所处的系统下发的启动、暂停或跳帧等控制命令,或通过读缓存单元45确定当前进行读出操作的缓存单元中连续读出的帧数达到第一阈值,且通过写缓存单元44确定当前进行写入操作的缓存单元中连续写入的帧数达到第二阈值,乒乓切换信号产生单元43将乒乓切换信号发送给乒乓切换控制单元42。
2、乒乓切换控制单元42根据乒乓切换信号的指示,建立缓存单元41与写缓存单元44和读缓存单元45的连接,例如,将写缓存单元44与DDRSDRAM_A的控制器的连接,并且建立读缓存单元45与DDR SDRAM_B的控制器的连接。
3、当写缓存单元44接收到同步管理模块34发送的写控制信息和要写入的视频数据后,指示DDR SDRAM_A的控制器将该视频数据写入DDRSDRAM_A;当读缓存单元45接收到同步管理模块34发送读控制信息后,指示DDR SDRAM_B的控制器将视频数据从DDR SDRAM_B读出,发送到同步管理模块34。
为了使数据读出、写入平滑,将要写入的视频数据通过FIFO写入,将要读出的视频数据通过FIFO读出。
类似地,音频缓存模块32也可以设计成乒乓缓存的方式。
进一步地,装置中的同步管理模块34还可以划分为视频缓存控制单元46、音频缓存控制单元47和查找单元48,如图6所示,若所述建立模块33用于建立视频数据的位置标识与该视频数据的帧号的对应关系,则音频缓存控制单元47用于将接收到的音频数据转发至所述音频缓存模块32,并确定当前待输出的音频数据,从所述音频缓存模块32中获取并输出该音频数据;查找单元48用于根据所述音频缓存控制单元中47确定的所述当前待输出的音频数据的帧号,从所述建立模块33中查找出对应的视频数据写入的位置标识,并将该位置标识发送给视频缓存控制单元46;视频缓存控制单元46将接收到的视频数据转发至所述视频缓存模块31,并接收所述查找单元48发送的所述位置标识,从所述视频缓存模块31中获取并输出位于所述位置标识对应的位置的视频数据。
该同步管理模块34的工作过程为:
1、视频缓存控制单元46和音频缓存控制单元47分别接收未进行同步处理的视频数据和音频数据,并将这些数据分别写入视频缓存模块31和音频缓存模块32。
2、视频缓存控制单元46将视频数据写入视频缓存模块31的同时,将视频数据的帧号和该视频数据在视频缓存模块31中存放的位置标识发送给建立模块33中。
3、当音频缓存模块32处于等待状态时,可以开始播放音、视频数据,从音频缓存模块32处获取并输出该音频数据,将该音频数据的时码发送给查找单元48。
4、查找单元48将音频数据的时码转换为帧号,并从建立模块33查找出该帧号对应的位置标识,将该位置标识发送给视频缓存控制单元46。
5、视频缓存控制单元46从视频缓存模块31中获取并输出位于该位置标识对应的位置的视频数据。
通过本发明实施例提供的方法、系统及装置,能够获得以下优点:
1、在基于JPEG2000图像格式下,实现了音、视频的同步,并且音、视频调整范围大,同步效果好。
2、系统逻辑结构简单,容易使用硬件实现。
3、占用硬件资源少,成本较低。
4、具有较好的可扩展性,可以适用于码率更高的视频。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (12)

1.一种实现音、视频数据同步的方法,其特征在于,该方法包括:
写入视频数据和音频数据,并建立视频数据或音频数据的位置标识与该数据的帧号的对应关系;
当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,并播放所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述音频数据和所述视频数据的时码,确定出该时码对应的帧号。
3.如权利要求1所述的方法,其特征在于,所述视频数据的写入是利用视频缓存的方式实现的,和/或所述音频数据的写入是利用音频缓存的方式实现的。
4.如权利要求1所述的方法,其特征在于,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识之后,同时播放所述未建立对应关系的数据和位于所述位置标识对应位置的数据;或
先开始播放所述未建立对应关系的数据,再根据所述未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,播放位于所述位置标识对应位置的数据。
5.如权利要求1所述的方法,其特征在于,按照所述视频数据和音频数据到达的先后顺序依次写入;或
按照视频数据和音频数据的帧号从小到大顺序写入。
6.一种实现音、视频数据同步的系统,其特征在于,该系统包括:
同步控制装置,用于写入音频数据和视频数据,建立视频数据或音频数据的位置标识与该数据的帧号的对应关系,当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述对应关系中查找出对应的位置标识,输出所述未建立对应关系的数据和位于所述位置标识对应位置的数据;
播放装置,用于播放所述同步控制模块输出的所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
7.如权利要求6所述的系统,其特征在于,所述系统还包括:
数据处理装置,用于向所述同步控制装置输入音频数据和视频数据;
所述同步控制装置包括:
建立模块,用于建立所述视频数据的帧号与该视频数据的位置标识的对应关系;
视频缓存模块,用于写入和读出所述数据处理装置输出的视频数据;
音频缓存模块,用于写入和读出所述数据处理装置输出的音频数据;
同步管理模块,用于当播放音、视频数据时,根据音频数据的帧号从所述建立模块中查找出对应的位置标识,并从所述音频缓存模块中获取并输出该音频数据,从所述视频缓存模块中获取并输出位于所述位置标识对应位置的视频数据。
8.如权利要求7所述的系统,其特征在于,所述视频缓存模块包括:
两个缓存单元,分别用于对视频数据进行写入或读出的操作;
乒乓切换控制单元,用于根据接收到的切换信号来切换所述缓存单元的读写状态;
乒乓切换信号产生单元,用于若当前进行读操作的缓存单元中连续读出的帧数达到第一阈值,且当前进行写操作的缓存单元中连续写入的帧数达到第二阈值,则向所述乒乓切换控制单元发送所述切换信号。
9.如权利要求7所述的系统,其特征在于,所述同步管理模块包括:
音频缓存控制单元,用于将所述数据处理装置输出的音频数据转发至所述音频缓存模块,从所述音频缓存模块中获取并输出音频数据;
查找单元,用于当播放音、视频数据时,从所述建立模块中查找出音频数据的帧号所对应的位置标识,并将该位置标识发送;
视频缓存控制单元,用于将所述数据处理装置输出的视频数据转发至所述视频缓存模块,并接收所述查找单元发送的所述位置标识,从所述视频缓存模块中获取并输出位于所述位置标识对应位置的视频数据。
10.一种同步控制装置,其特征在于,该装置包括:
视频缓存模块,用于写入和读出视频数据;
音频缓存模块,用于写入和读出音频数据;
建立模块,用于建立视频数据或音频数据的位置标识与该数据的帧号的对应关系;
同步管理模块,用于当播放音、视频数据时,根据未建立对应关系的数据的帧号从所述建立模块中查找出对应的位置标识,并输出所述未建立对应关系的数据和位于所述位置标识对应位置的数据。
11.如权利要求10所述的装置,其特征在于,所述视频缓存模块包括:
两个缓存单元,用于分别对视频数据进行写入或读出的操作;
乒乓切换控制单元,用于根据接收到切换信号来切换所述缓存单元的读写状态;
乒乓切换信号产生单元,用于若当前进行读出操作的缓存单元中连续读出的帧数达到第一阈值,且当前进行写入操作的缓存单元中连续写入的帧数达到第二阈值,则向所述乒乓切换控制单元发送所述切换信号。
12.如权利要求10所述的装置,其特征在于,若所述建立模块,用于建立视频数据的位置标识与该视频数据的帧号的对应关系,则
所述同步管理模块包括:
音频缓存控制单元,用于将接收到的音频数据转发至所述音频缓存模块,并从所述音频缓存模块中获取并输出音频数据;
查找单元,用于当播放音、视频数据时,从所述建立模块中查找出根据音频数据的帧号对应的位置标识,并将该位置标识发送;
视频缓存控制单元,用于将接收到的视频数据转发至所述视频缓存模块,并接收所述查找单元发送的所述位置标识,从所述视频缓存模块中获取并输出位于所述位置标识对应的位置视频数据。
CN200710120585A 2007-08-21 2007-08-21 实现音、视频数据同步的方法、系统及装置 Active CN101118776B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200710120585A CN101118776B (zh) 2007-08-21 2007-08-21 实现音、视频数据同步的方法、系统及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200710120585A CN101118776B (zh) 2007-08-21 2007-08-21 实现音、视频数据同步的方法、系统及装置

Publications (2)

Publication Number Publication Date
CN101118776A true CN101118776A (zh) 2008-02-06
CN101118776B CN101118776B (zh) 2012-09-05

Family

ID=39054838

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200710120585A Active CN101118776B (zh) 2007-08-21 2007-08-21 实现音、视频数据同步的方法、系统及装置

Country Status (1)

Country Link
CN (1) CN101118776B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621573A (zh) * 2009-08-10 2010-01-06 上海闻泰电子科技有限公司 一种应用于手机的播放视频文件的方法
CN102176204A (zh) * 2011-01-26 2011-09-07 北京邮电大学 一种输入和输出数据的方法和设备
CN103686312A (zh) * 2013-12-05 2014-03-26 中国航空无线电电子研究所 一种dvr多路音视频记录方法
CN103780977A (zh) * 2014-02-26 2014-05-07 厦门雅迅网络股份有限公司 一种基于帧定位技术的流媒体播放方法
CN104080014A (zh) * 2013-03-28 2014-10-01 浙江大华技术股份有限公司 一种实时视频处理方法和装置
CN105409230A (zh) * 2014-05-27 2016-03-16 华为技术有限公司 媒体文件处理方法及装置
CN106375820A (zh) * 2016-08-30 2017-02-01 京东方科技集团股份有限公司 对音频和视频信号进行同步的方法和装置
CN106653068A (zh) * 2016-10-08 2017-05-10 广东欧珀移动通信有限公司 一种音频数据的播放方法、装置及终端
CN106775437A (zh) * 2015-11-24 2017-05-31 阿里巴巴集团控股有限公司 数据同步方法及装置
CN109697767A (zh) * 2018-12-29 2019-04-30 华为技术有限公司 数据处理方法、相关设备及计算机存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3997367B2 (ja) * 1998-04-30 2007-10-24 ソニー株式会社 記録再生装置および方法、並びに記録媒体
GB0000874D0 (en) * 2000-01-14 2000-03-08 Koninkl Philips Electronics Nv Latency handling for interconnected devices
KR100973863B1 (ko) * 2002-09-25 2010-08-03 파나소닉 주식회사 재생장치, 재생방법, 기록매체
CN1292345C (zh) * 2004-09-15 2006-12-27 萧学文 在brew平台上同步播放音频视频的方法及系统
CN100409681C (zh) * 2005-08-19 2008-08-06 上海晨兴电子科技有限公司 影音同步录制及播放方法

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621573A (zh) * 2009-08-10 2010-01-06 上海闻泰电子科技有限公司 一种应用于手机的播放视频文件的方法
CN102176204A (zh) * 2011-01-26 2011-09-07 北京邮电大学 一种输入和输出数据的方法和设备
CN102176204B (zh) * 2011-01-26 2013-05-15 北京邮电大学 一种输入和输出数据的设备
CN104080014A (zh) * 2013-03-28 2014-10-01 浙江大华技术股份有限公司 一种实时视频处理方法和装置
CN103686312A (zh) * 2013-12-05 2014-03-26 中国航空无线电电子研究所 一种dvr多路音视频记录方法
CN103780977B (zh) * 2014-02-26 2019-01-01 厦门雅迅网络股份有限公司 一种基于帧定位技术的流媒体播放方法
CN103780977A (zh) * 2014-02-26 2014-05-07 厦门雅迅网络股份有限公司 一种基于帧定位技术的流媒体播放方法
CN105409230A (zh) * 2014-05-27 2016-03-16 华为技术有限公司 媒体文件处理方法及装置
CN106775437A (zh) * 2015-11-24 2017-05-31 阿里巴巴集团控股有限公司 数据同步方法及装置
CN106775437B (zh) * 2015-11-24 2020-01-31 阿里巴巴集团控股有限公司 数据同步方法及装置
WO2018040669A1 (zh) * 2016-08-30 2018-03-08 京东方科技集团股份有限公司 对音频和视频信号进行同步的方法和装置
CN106375820A (zh) * 2016-08-30 2017-02-01 京东方科技集团股份有限公司 对音频和视频信号进行同步的方法和装置
CN106653068A (zh) * 2016-10-08 2017-05-10 广东欧珀移动通信有限公司 一种音频数据的播放方法、装置及终端
CN109697767A (zh) * 2018-12-29 2019-04-30 华为技术有限公司 数据处理方法、相关设备及计算机存储介质
CN109697767B (zh) * 2018-12-29 2021-11-19 华为技术有限公司 数据处理方法、相关设备及计算机存储介质

Also Published As

Publication number Publication date
CN101118776B (zh) 2012-09-05

Similar Documents

Publication Publication Date Title
CN101118776B (zh) 实现音、视频数据同步的方法、系统及装置
CN101072339B (zh) 一种控制播放帧率同步的方法及系统
US6512552B1 (en) Subpicture stream change control
US7020892B2 (en) Time-shifted video signal processing
CN101288298B (zh) 提供即时重放的方法及系统
CN101466044B (zh) 一种流媒体音视频同步播放的方法及其系统
US10129587B2 (en) Fast switching of synchronized media using time-stamp management
CN101588488B (zh) 多机位流媒体播放方法及系统
CN102347042B (zh) 一种音轨切换方法、系统及音视频文件播放设备
CN1893383B (zh) 提供根据剩余存储器容量的可记录时间的方法及其终端
US20200252580A1 (en) Video data processing method and video data processing device
CN102045528A (zh) 接收设备、接收方法、发送设备和发送方法
CN105120184A (zh) 一种基于fpga的高清视频无缝矩阵
CN112929713B (zh) 数据同步方法、装置、终端及存储介质
KR101142379B1 (ko) 디지털 방송 재생 방법 및 장치, 디지털 방송 녹화 방법
CN101138246A (zh) 视频流数据的缓冲
CN100358337C (zh) 多播放机数字电影播放系统两级同步控制方法
CN101094415A (zh) 发送广播信号的装置和方法、再现广播信号的方法以及接收广播信号的装置
US20010005398A1 (en) Method and a decoder for decoding MPEG video
US20240080514A1 (en) Methods and systems for synchronization of closed captions with content output
CN102811380A (zh) 多媒体文件中音视频数据的解复用方法及装置
CN115665493A (zh) 支持录播的大屏拼接装置、拼接器、播放控制方法及系统
JPH08331511A (ja) 動画像再生装置及び動画像再生処理回路
CN111757034A (zh) 一种基于fpga的视频同步显示方法、装置和存储介质
JP2000228759A (ja) Hd/sd対応デコード装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C53 Correction of patent for invention or patent application
CB03 Change of inventor or designer information

Inventor after: Wang Guohui

Inventor after: Wang Zhensong

Inventor after: Wei Zheng

Inventor after: Zhu Zhenhua

Inventor before: Wang Guohui

Inventor before: Wang Zhensong

Inventor before: Wei Zheng

Inventor before: Zhu Zhenhua

TR01 Transfer of patent right

Effective date of registration: 20181220

Address after: 100190 488, 4th floor, No. 10 South Road, Zhongguancun Academy of Sciences, Haidian District, Beijing

Patentee after: Beijing Skyvein Net Computer Co., Ltd.

Address before: 100080 No. 6 South Road, Zhongguancun Academy of Sciences, Beijing, Haidian District

Patentee before: Institute of Computing Technology, Chinese Academy of Sciences

TR01 Transfer of patent right