CN104333764B - 一种多路视频播放方法及装置 - Google Patents

一种多路视频播放方法及装置 Download PDF

Info

Publication number
CN104333764B
CN104333764B CN201310309785.6A CN201310309785A CN104333764B CN 104333764 B CN104333764 B CN 104333764B CN 201310309785 A CN201310309785 A CN 201310309785A CN 104333764 B CN104333764 B CN 104333764B
Authority
CN
China
Prior art keywords
channel
video
passage
code stream
video file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310309785.6A
Other languages
English (en)
Other versions
CN104333764A (zh
Inventor
胡静
苏丹
胡胜发
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Ankai Microelectronics Co.,Ltd.
Original Assignee
Anyka Guangzhou Microelectronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anyka Guangzhou Microelectronics Technology Co Ltd filed Critical Anyka Guangzhou Microelectronics Technology Co Ltd
Priority to CN201310309785.6A priority Critical patent/CN104333764B/zh
Publication of CN104333764A publication Critical patent/CN104333764A/zh
Application granted granted Critical
Publication of CN104333764B publication Critical patent/CN104333764B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8193Monomedia components thereof involving executable data, e.g. software dedicated tools, e.g. video decoder software or IPMP tool

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明适用于视频文件播放领域,提供了一种多路视频播放方法及装置。所述方法包括:A、获取第一通道的视频文件的第一帧视频码流和音频码流的属性;B、获取第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;C、设置第一通道的解码方式、解码尺寸大小;D、设置相应通道的解码方式、解码尺寸大小;E、设置第一通道的寄存器;F、设置第二通道至第N通道的寄存器;G、分别对第一通道至第N通道的视频文件进行硬件解码,同时进行软件解码;H、重复步骤E至步骤G,直到第一通道至第N通道的视频文件全部解码结束;I、播放解码后的视频文件。本发明实施例能够提高解码效率。

Description

一种多路视频播放方法及装置
技术领域
本发明属于视频播放领域,尤其涉及一种多路视频播放方法及装置。
背景技术
目前,视频播放技术已经发展到可以根据用户的需求和播放器的配置,制定多种分辨率、多种解码方式的视频解码。在视频播放过程中,比较耗时的是纯硬件解码过程、对视频文件的解析以获取纯视频码流和音频码流以及对音频码流的解码过程。
传统的视频播放方法中,采用软件解析视频文件,获取该视频文件的一帧视频码流和音频码流,然后进行硬件视频解码,软件音频解码,最后播放解码后的视频码流和音频码流。由于现有的视频播放方法是采用软、硬件串行解码音视频码流的方式,因此不能充分利用硬件解码时的时间,从而导致解码效率低下。
发明内容
本发明实施例提供了一种多路视频播放方法及装置,旨在解决现有的视频播放方法在解码视频文件时效率低下的问题。
本发明实施例是这样实现的,一种多路视频播放方法,所述方法包括下述步骤:
A、解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;
B、依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于等于2;
C、在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;
D、在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小;
E、获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;
F、获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中;
G、采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流;
H、重复步骤E至步骤G,直到第一通道、第二通道至第N通道的视频文件全部解码结束;
I、播放第一通道、第二通道至第N通道解码后的视频文件。
本发明实施例的另一目的在于提供一种多路视频播放装置,所述装置包括:
码流属性获取单元,用于解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;用于依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于等于2;
码流属性设置单元,用于在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;以及用于在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小;
寄存器设置单元,用于获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;以及用于获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中;
码流解码单元,用于采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流;
码流播放单元,用于播放第一通道、第二通道至第N通道解码后的视频文件。
在本发明实施例中,由于采用软件和硬件解码并行的方式,充分利用了硬件解码时的时间,因此极大提高了解码效率。
附图说明
图1是本发明第一实施例提供的一种多路视频播放方法的流程图;
图2是本发明第二实施例提供的一种多路视频播放的结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例中,第一通道至第N通道创建的多个(2个及2个以上)解码实例能够在硬件解码第一帧视频码流和音频码流开始时,同时启动软件对第二帧视频文件的解析和软件对音频的解码,充分利用了硬件解码时的时间。
本发明实施例提供了一种多路视频播放方法及装置。
所述方法包括:A、解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;
B、依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于等于2;
C、在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;
D、在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小;
E、获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;
F、获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中;
G、采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流;
H、重复步骤E至步骤G,直到第一通道、第二通道至第N通道的视频文件全部解码结束;
I、播放第一通道、第二通道至第N通道解码后的视频文件。
所述装置包括:码流属性获取单元,用于解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;用于依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于等于2;
码流属性设置单元,用于在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;以及用于在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小;
寄存器设置单元,用于获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;以及用于获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中;
码流解码单元,用于采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流;
码流播放单元,用于播放第一通道、第二通道至第N通道解码后的视频文件。
在本发明实施例中,由于采用软件和硬件解码并行的方式,充分利用了硬件解码时的时间,因此极大提高了解码效率。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一:
图1示出了本发明第一实施例提供的一种多路视频播放方法的流程图,详述如下:
步骤S101、解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小。
其中,视频文件的格式可以为音频视频交错格式(Audio Video Interleaved,avi)、mp4、wmv等;视频码流和音频码流的属性指从文件容器获取的信息,包括:视频码流的解码方式、音频码流的解码方式、视频码流的解码尺寸大小、音频码流的解码尺寸大小、视频码流的总帧数、音频码流的总帧数、视频码流的总的码流的大小、音频码流的总的码流的大小、播放时间长度等等。
优选地,本实施例提供的视频播放方法的解码方式包括以下任一种:H.264、MJPEG、H.263、MPEG4、MPEG2、RV。
其中,RV解码方式是指实时视频(Real Video,RV)。本实施例提供的具体的解码方式与视频码流和音频码流的属性相对应,若视频文件是wmv格式的,则该wmv格式的视频文件采用MPEG4的解码方式。
优选地,本实施例提供的视频播放方法的解码尺寸大小包括以下任一种:QCIF、1080p、720p、D1、VGA、CIF。
其中,D1的分辨率为720×480。本实施例提供的解码尺寸大小同样与视频码流和音频码流的属性相对应,当视频文件的编码图像大小为QCIF时,解码尺寸大小相应地为QCIF。
该步骤中,第一通道解析需要在该第一通道播放的一个视频文件,以获取该视频文件的第一帧视频码流和第一帧音频码流。
步骤S102、依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于等于2。
该步骤的视频文件的格式与步骤S101的相同,包括:avi、mp4、wmv等格式。在该步骤获取的视频码流和音频码流的属性是指在第二通道至第N通道解析的视频文件的视频码流和音频码流的属性,具体参阅步骤S101,此处不再赘述。
步骤S103、在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小。
该步骤中,只需要根据视频文件的第一帧视频码流和第一帧音频码流的属性设置一次第一通道的解码方式、解码尺寸大小以及相关的解码属性(如:视频码流的总帧数、音频码流的总帧数等数据)即可,后续无需重新设置。
步骤S104、在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小。
该步骤中,在第二通道至第N通道分别设置对应的第二解码实例,…,第N解码实例,其中,第二通道至第N通道的设置过程、需设置的信息与步骤S103相同,此处不再赘述。
步骤S105、获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中。
该步骤中,从文件容器中获取的视频码流的头部信息中获取视频文件的解码信息,比如视频的分辨率、帧的属性(判断该帧属于i帧或p帧的信息)等等,获取的解码信息将作为第一通道的解码参数。
步骤S106、获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中。
该步骤中,对第二通道至第N通道的寄存器的设置过程与步骤S105的相同,此处不再赘述。
步骤S107、采用设置了解码参数的第一通道的寄存器至第N通道的寄存器分别对所述第一通道的视频文件至第N通道的视频文件进行硬件解码,同时解码所述第一通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道至第N通道的视频文件的下一帧视频码流和音频码流。
该步骤中,当第一通道的寄存器、第二通道至第N通道的寄存器都设置完毕后,硬件解码就启动了。在硬件解码启动的同时,第一通道至第N通道进行软件解码对应音频的操作、第一通道至第N通道对该第一通道至第N通道的视频文件的下一帧视频码流和音频码流的解析操作等。
在第一通道至第N通道都解码结束,且步骤S107也完成的情况下,重复步骤S105至步骤S107,直到第一通道、第二通道至第N通道的视频文件全部解码结束。
步骤S108、播放第一通道、第二通道至第N通道解码后的视频文件。
在本发明实施例中,第一通道至第N通道创建的多个(2个及2个以上)解码实例能够在硬件解码第一帧视频码流和音频码流开始时,同时启动软件对第二帧视频文件的解析和软件对音频的解码,充分利用了硬件解码时的时间。由于本发明实施例采用软件和硬件解码并行的方式,因此极大提高了解码效率。
作为一优选实施例,在步骤S105,获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息时,还包括下述步骤:获取所述第一通道的视频文件的视频码流的时间戳和所述第一通道的视频文件的音频码流的时间戳;在步骤S106,获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息时,还包括下述步骤:获取所述第二通道至第N通道的视频文件的视频码流的时间戳和所述第二通道至第N通道的视频文件的音频码流的时间戳。
本实施例中,从文件容器中获取的视频码流的头部信息中逐个获取各帧的视频码流的时间戳和音频码流的时间戳,便于后续根据获取的时间戳选择是否执行解码操作。
作为一优选实施例,在步骤S107,解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流的步骤具体包括:
判断所述第一通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流;判断所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流。
本实施例中,只有在视频码流和其对应的音频码流的时间戳相等时(如第一帧视频码流的时间戳与第一帧的音频码流的时间戳相等),才执行视频码流的解码操作,从而能够保证解码视频码流和音频码流的同步性。
在上述实施例中,若所述第一通道的视频文件的上一帧的视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第一通道的视频文件的上一帧的视频码流;若所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第二通道至第N通道的视频文件的上一帧的视频码流。
本实施例中,由于视频码流的解码时间通常大于音频码流的解码时间,为了保持视频码流和音频码流的同步性,在判断出解码的视频码流的时间戳与解码的音频码流的时间戳不相等时,丢弃需解码的视频码流,能够加快视频文件的解码速度。
实施例二:
图2示出了本发明第二实施例提供的一种多路视频播放装置的结构图,该多路视频播放装置可以为mp5、平板电脑、网络机顶盒等,为了便于说明,仅示出了与本实施例相关的部分。
该多路视频播放装置装置包括:码流属性获取单元21、码流属性设置单元22、寄存器设置单元23、码流解码单元24、码流播放单元25。其中:
码流属性获取单元21,用于解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;用于依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于等于2。
本实施例中,视频码流和音频码流的属性指从文件容器获取的信息,包括:视频码流的解码方式、音频码流的解码方式、视频码流的解码尺寸大小、音频码流的解码尺寸大小、视频码流的总帧数、音频码流的总帧数、视频码流的总的码流的大小、音频码流的总的码流的大小、播放时间长度等等。
优选地,本实施例提供的解码方式包括以下任一种:H.264、MJPEG、H.263、MPEG4、MPEG2、RV。
优选地,本实施例提供的解码尺寸大小包括以下任一种:QCIF、1080p、720p、D1、VGA、CIF。
码流属性设置单元22,用于在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;以及用于在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小。
本实施例中,根据视频文件的第一帧视频码流和第一帧音频码流的属性设置一次第一通道的解码方式、解码尺寸大小以及相关的解码属性即可,后续无需重新设置。
寄存器设置单元23,用于获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;以及用于获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中。
本实施例中,从文件容器中获取的视频码流的头部信息中获取视频文件的解码信息,比如视频的分辨率、帧的属性等等,获取的解码信息将作为与该文件容器对应的通道的解码参数。
码流解码单元24,用于采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流。
本实施例中,在硬件解码的同时实现软件解码,以提高解码效率。
码流播放单元25,用于播放第一通道、第二通道至第N通道解码后的视频文件。
在本发明实施例中,由于采用软件和硬件解码并行的方式,充分利用了硬件解码时的时间,因此极大提高了解码效率。
作为一优选实施例,所述寄存器设置单元23在获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息时,还获取所述第一通道的视频文件的视频码流的时间戳和所述第一通道的视频文件的音频码流的时间戳;在获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息时,还获取所述第二通道至第N通道的视频文件的视频码流的时间戳和所述第二通道至第N通道的视频文件的音频码流的时间戳。
本实施例中,从文件容器中获取的视频码流的头部信息中逐个获取各帧的视频码流的时间戳和音频码流的时间戳,便于后续根据获取的时间戳选择是否执行解码操作。
作为一优选实施例,所述码流解码单元24在解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流时,判断所述第一通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流;以及判断所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流。
作为一优选实施例,所述码流解码单元24在解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流时,
若判断出所述第一通道的视频文件的上一帧的视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第一通道的视频文件的上一帧的视频码流;
若判断出所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第二通道的视频文件的上一帧的视频码流。
在上述实施例中,只有在视频码流和其对应的音频码流的时间戳相等时,才执行视频码流的解码操作,否则,丢弃该视频码流和音频码流,从而能够保证解码视频码流和音频码流的同步性,同时加快了视频文件的解码速度。
在本发明实施例中,第一通道至第N通道创建的多个(2个及2个以上)解码实例能够在硬件解码第一帧视频码流和音频码流开始时,同时启动软件对第二帧视频文件的解析和软件对音频的解码,充分利用了硬件解码时的时间。由于本发明实施例采用软件和硬件解码并行的方式,因此极大提高了解码效率。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种多路视频播放方法,其特征在于,所述多路视频播放方法包括步骤:
A、解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;
B、依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于2;
C、在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;
D、在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小;
E、获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;
F、获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中;
G、采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流;
H、重复步骤E至步骤G,直到第一通道、第二通道至第N通道的视频文件全部解码结束;
I、播放第一通道、第二通道至第N通道解码后的视频文件。
2.如权利要求1所述的方法,其特征在于,在步骤E,获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息时,还包括下述步骤:获取所述第一通道的视频文件的视频码流的时间戳和所述第一通道的视频文件的音频码流的时间戳;
在步骤F,获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息时,还包括下述步骤:获取所述第二通道至第N通道的视频文件的视频码流的时间戳和所述第二通道至第N通道的视频文件的音频码流的时间戳。
3.如权利要求要求2所述的方法,其特征在于,在步骤G,解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流的步骤具体包括:
判断所述第一通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流;
判断所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流。
4.如权利要求要求3所述的方法,其特征在于,
若所述第一通道的视频文件的上一帧的视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第一通道的视频文件的上一帧的视频码流;
若所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第二通道的视频文件的上一帧的视频码流。
5.如权利要求要求1至4任一项所述的方法,其特征在于,所述解码方式包括以下任一种:
H.264、MJPEG、H.263、MPEG4、MPEG2、RV。
6.如权利要求1至4任一项所述的方法,其特征在于,所述解码尺寸大小包括以下任一种:
1080p、720p、D1、VGA、CIF。
7.一种多路视频播放装置,其特征在于,所述多路视频播放装置包括:
码流属性获取单元,用于解析第一通道的视频文件,获取所述第一通道的视频文件的第一帧视频码流和音频码流,以及获取所述第一通道的视频文件的第一帧视频码流和音频码流的属性;所述第一通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;用于依次解析第二通道至第N通道的视频文件,获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流,以及获取所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性;所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性包括视频码流和音频码流的解码方式、解码尺寸大小;所述N为整数,N大于2;
码流属性设置单元,用于在所述第一通道创建第一解码实例,根据获取的所述第一通道的视频文件的第一帧视频码流和音频码流的属性设置所述第一通道的解码方式、解码尺寸大小;以及用于在所述第二通道至第N通道创建第二至第N解码实例,根据获取的所述第二通道至第N通道的视频文件的第一帧视频码流和音频码流的属性设置所述第二通道至第N通道的解码方式、解码尺寸大小;
寄存器设置单元,用于获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第一通道的解码参数,将所述第一通道的解码参数设置在所述第一通道的寄存器中;以及用于获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息,依据获取的解码信息确定所述第二通道至第N通道的解码参数,将所述第二通道至第N通道的解码参数分别设置在所述第二通道至第N通道的寄存器中;
码流解码单元,用于采用设置了解码参数的第一通道的寄存器、第二通道至第N通道的寄存器分别对所述第一通道的视频文件、所述第二通道至第N通道的视频文件进行硬件解码,同时解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流、解析所述第一通道的视频文件的下一帧视频码流和音频码流以及解析所述第二通道至第N通道的视频文件的下一帧视频码流和音频码流;
码流播放单元,用于播放第一通道、第二通道至第N通道解码后的视频文件。
8.如权利要求7所述的多路视频播放装置,其特征在于,所述寄存器设置单元在获取第一通道的视频文件的上一帧视频码流和音频码流的解码信息时,还获取所述第一通道的视频文件的视频码流的时间戳和所述第一通道的视频文件的音频码流的时间戳;在获取第二通道至第N通道的视频文件的上一帧视频码流和音频码流的解码信息时,还获取所述第二通道至第N通道的视频文件的视频码流的时间戳和所述第二通道至第N通道的视频文件的音频码流的时间戳。
9.如权利要求要求8所述的多路视频播放装置,其特征在于,所述码流解码单元在解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流时,判断所述第一通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流;以及判断所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳是否与对应的音频码流的时间戳相等,并在相等时,解码所述视频码流和音频码流。
10.如权利要求要求8所述的多路视频播放装置,其特征在于,所述码流解码单元在解码所述第一通道的视频文件的上一帧视频码流和音频码流、解码所述第二通道至第N通道的视频文件的上一帧视频码流和音频码流时,
若判断出所述第一通道的视频文件的上一帧的视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第一通道的视频文件的上一帧的视频码流;
若判断出所述第二通道至第N通道的视频文件的上一帧视频码流的时间戳与对应的音频码流的时间戳不相等,丢弃所述第二通道的视频文件的上一帧的视频码流。
CN201310309785.6A 2013-07-22 2013-07-22 一种多路视频播放方法及装置 Active CN104333764B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310309785.6A CN104333764B (zh) 2013-07-22 2013-07-22 一种多路视频播放方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310309785.6A CN104333764B (zh) 2013-07-22 2013-07-22 一种多路视频播放方法及装置

Publications (2)

Publication Number Publication Date
CN104333764A CN104333764A (zh) 2015-02-04
CN104333764B true CN104333764B (zh) 2017-09-29

Family

ID=52408403

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310309785.6A Active CN104333764B (zh) 2013-07-22 2013-07-22 一种多路视频播放方法及装置

Country Status (1)

Country Link
CN (1) CN104333764B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105187910B (zh) * 2015-09-12 2018-11-06 暴风集团股份有限公司 一种自动检测视频自适应参数的方法及系统
CN105872755A (zh) * 2015-12-07 2016-08-17 乐视云计算有限公司 视频播放方法及装置
CN106782578B (zh) * 2016-12-06 2020-09-01 瑞安市海达服饰有限公司 一种分布式解码控制器、分布式解码方法及音频终端
CN108600803B (zh) * 2018-04-10 2020-07-31 普联技术有限公司 多路视频码流的回放方法、装置、终端设备和存储介质
CN108718395B (zh) * 2018-06-08 2021-05-11 深圳市云智易联科技有限公司 一种分段视频录制的方法及行车记录仪
CN112637663B (zh) * 2021-01-28 2023-02-28 广州敏视数码科技有限公司 一种车载dvr数据同步播放的方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1791198A (zh) * 2004-12-17 2006-06-21 Tcl王牌电子(深圳)有限公司 一种实现可同时接收播放多套节目的电视机装置
CN101453640A (zh) * 2007-11-28 2009-06-10 中国科学院微电子研究所 一种软硬件联合解码的avs视频解码器
CN101453639A (zh) * 2007-11-29 2009-06-10 展讯通信(上海)有限公司 支持roi区域的多路视频流的编码、解码方法和系统
CN101466037A (zh) * 2007-12-21 2009-06-24 北京中电华大电子设计有限责任公司 一种软硬件配合的视频解码器实现方法
CN102065288A (zh) * 2010-06-30 2011-05-18 美商威睿电通公司 结合软硬件实现的视频处理系统、方法及其装置
CN102595114A (zh) * 2011-01-13 2012-07-18 安凯(广州)微电子技术有限公司 一种在低端嵌入式产品上播放视频的方法及终端
CN102724551A (zh) * 2012-06-13 2012-10-10 天脉聚源(北京)传媒科技有限公司 一种视频编码系统和方法
CN104185028A (zh) * 2013-05-20 2014-12-03 安凯(广州)微电子技术有限公司 一种视频播放方法及终端

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1791198A (zh) * 2004-12-17 2006-06-21 Tcl王牌电子(深圳)有限公司 一种实现可同时接收播放多套节目的电视机装置
CN101453640A (zh) * 2007-11-28 2009-06-10 中国科学院微电子研究所 一种软硬件联合解码的avs视频解码器
CN101453639A (zh) * 2007-11-29 2009-06-10 展讯通信(上海)有限公司 支持roi区域的多路视频流的编码、解码方法和系统
CN101466037A (zh) * 2007-12-21 2009-06-24 北京中电华大电子设计有限责任公司 一种软硬件配合的视频解码器实现方法
CN102065288A (zh) * 2010-06-30 2011-05-18 美商威睿电通公司 结合软硬件实现的视频处理系统、方法及其装置
CN102595114A (zh) * 2011-01-13 2012-07-18 安凯(广州)微电子技术有限公司 一种在低端嵌入式产品上播放视频的方法及终端
CN102724551A (zh) * 2012-06-13 2012-10-10 天脉聚源(北京)传媒科技有限公司 一种视频编码系统和方法
CN104185028A (zh) * 2013-05-20 2014-12-03 安凯(广州)微电子技术有限公司 一种视频播放方法及终端

Also Published As

Publication number Publication date
CN104333764A (zh) 2015-02-04

Similar Documents

Publication Publication Date Title
CN104333764B (zh) 一种多路视频播放方法及装置
CN102404624B (zh) 一种数字机顶盒用支持硬件解码的全格式媒体播放器
CN101605252B (zh) 将节目流转换成传输流的方法和系统
TW201242340A (en) Decoder and method at the decoder for synchronizing the rendering of contents received through different networks
CN103475927B (zh) 在线视频实时变速播放方法及系统
CN106534900A (zh) 一种上传直播视频流的方法及装置
CN106792154A (zh) 视频播放器的跳帧同步系统及其控制方法
WO2010130188A1 (zh) 一种承载ts流的方法及装置
EP2079233A3 (en) Digital broadcast receiver and digital broadcast receiving method
JPWO2016171002A1 (ja) 送信装置、送信方法、受信装置および受信方法
CN108924631A (zh) 一种基于音视频分流存储的录像生成方法
KR20090006014A (ko) 버전이 다른 avs1-p2 비트스트림을 시그널링하고디코딩하기 위한 방법 및 장치
CN106878290B (zh) 音视频的播放方法及装置
CN113301359A (zh) 音视频处理方法、装置及电子设备
CN102254560A (zh) 一种移动数字电视录像中的音频处理方法
CN102075739B (zh) 网络视频快进退平稳播放的方法和装置
CN104185028A (zh) 一种视频播放方法及终端
CN109040818A (zh) 直播时的音视频同步方法、存储介质、电子设备及系统
CN101668206A (zh) 基于h.264的多路视频解码显示方法及系统
WO2012094975A1 (zh) 一种多媒体数据的传输、接收方法及其传输、接收设备
CN103647970B (zh) 一种分布式转码的音视频同步方法及系统
CN103997694B (zh) 一种视频退播方法及系统
CN1867048A (zh) 一种视频节目中字幕的显示方法及系统
CN101093568A (zh) 基于多媒体交互终端的多种广告处理方法
JP5854208B2 (ja) 多段高速再生のための映像コンテンツ生成方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 3 / F, C1 area, innovation building, 182 science Avenue, Science City, Guangzhou, Guangdong 510663

Patentee after: Guangzhou Ankai Microelectronics Co.,Ltd.

Address before: 3 / F, C1 area, innovation building, 182 science Avenue, Science City, Guangzhou, Guangdong 510663

Patentee before: ANYKA (GUANGZHOU) MICROELECTRONICS TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder
CP02 Change in the address of a patent holder

Address after: 510555 No. 107 Bowen Road, Huangpu District, Guangzhou, Guangdong

Patentee after: Guangzhou Ankai Microelectronics Co., Ltd

Address before: 3 / F, C1 area, innovation building, 182 science Avenue, Science City, Guangzhou, Guangdong 510663

Patentee before: Guangzhou Ankai Microelectronics Co., Ltd

CP02 Change in the address of a patent holder