CN103428463B - 3d视频源存储方法和装置及3d视频播放方法和装置 - Google Patents

3d视频源存储方法和装置及3d视频播放方法和装置 Download PDF

Info

Publication number
CN103428463B
CN103428463B CN201210156555.6A CN201210156555A CN103428463B CN 103428463 B CN103428463 B CN 103428463B CN 201210156555 A CN201210156555 A CN 201210156555A CN 103428463 B CN103428463 B CN 103428463B
Authority
CN
China
Prior art keywords
video source
video
frame
file
eye video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210156555.6A
Other languages
English (en)
Other versions
CN103428463A (zh
Inventor
赖晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201210156555.6A priority Critical patent/CN103428463B/zh
Priority to JP2014537486A priority patent/JP5801497B2/ja
Priority to KR1020147007133A priority patent/KR101630720B1/ko
Priority to PCT/CN2013/073968 priority patent/WO2013174181A1/zh
Publication of CN103428463A publication Critical patent/CN103428463A/zh
Priority to US14/249,770 priority patent/US20140219640A1/en
Application granted granted Critical
Publication of CN103428463B publication Critical patent/CN103428463B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

一种3D视频源存储方法,包括以下步骤:将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中;将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中。上述方法,将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,当在线播放3D视频时,可一边下载MP4文件的连续的媒体流数据,一边从已经下载的媒体流数据中获取左、右眼视频源的视频帧进行合成,不需要MP4文件的所有媒体流数据都下载完成后再合成3D视频图像,从而可满足边下载边播放3D视频的需求。此外,还提供一种3D视频源存储装置、一种3D视频播放方法和装置。

Description

3D视频源存储方法和装置及3D视频播放方法和装置
【技术领域】
本发明涉及多媒体技术,特别的涉及一种3D视频存储方法和装置及3D视频播放方法和装置。
【背景技术】
3D影像的产生归结起来是“视觉移位”的原因。人的两眼左右相隔大约6厘米,观看物体时,两只眼睛是从左右两个视点分别观看的。左眼将看到物体的左侧,而右眼则会看到她的中间或右侧。当两眼看到的物体在视网膜上成像时,左右两面的印象合起来,就会得到最后的立体感觉。而这种获得立体感的效应就是“视觉位移”。
基于上述原理,拍摄影像时,只要用两台摄影机模拟左右两眼视差,分别拍摄两条影片,然后将这两条影片同时放映到银幕上,放映时加入必要的技术手段,让观众左眼只能看到左眼图像,右眼只能看到右眼图像。最后两幅图像经过大脑叠合后,我们就能看到具有立体纵深感的画面。
为了形成3D影像,一个场景需要同时拍摄两个影片,即左眼视频源和右眼视频源。传统的存储3D视频源的方法一般将左眼视频源和右眼视频源分别存储在不同的文件中。播放3D视频时,从两个文件中读取出左、右眼视频源,进一步将左、右视频源合成3D视频。
将左、右视频源分别存储在两个文件中,有可能在传输和保存过程中由于其中一个文件丢失而导致不能合成3D视频,尤其是在Internet中播放客户端在线播放3D视频时,需要将两个文件都下载完后,才能从文件中读取数据合成3D视频,进而播放3D视频,不能满足边下载边播放的需求,使得在线播放3D视频的速度很慢。
【发明内容】
基于此,有必要提供一种能将左、右眼视频源存储在一个文件中且能满足在线播放时边下载边播放需求的3D视频源存储方法。
一种3D视频源存储方法,包括以下步骤:
将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中;
将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中。
在其中一个实施例中,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致;
所述媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
在其中一个实施例中,所述媒体数据存储单元为MP4文件中的Media DataBox,所述媒体信息存储单元为MP4文件中的Track Box。
基于此,还有必要提供一种能将左、右眼视频源存储在一个文件中且能满足在线播放时边下载边播放需求的3D视频源存储装置。
一种3D视频源存储装置,包括:
媒体数据存储模块,用于将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中;
媒体信息存储模块,用于将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中。
在其中一个实施例中,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致;
所述媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
在其中一个实施例中,所述媒体数据存储单元为MP4文件中的Media DataBox,所述媒体信息存储单元为MP4文件中的Track Box。
上述3D视频源存储方法和装置,将视频的左眼视频源与右眼视频源存储在一个MP4文件中,一段视频对应一个存储文件,不需要将左、右眼视频源存储在两个文件中,可方便视频文件的传输和保存,避免在传输和保存过程中一个文件丢失而导致3D视频不能合成和播放。另外,上述3D视频源存储方法和装置,将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,当在线播放3D视频时,可一边下载MP4文件的连续的媒体流数据,一边从已经下载的媒体流数据中获取左、右眼视频源的视频帧进行合成,不需要MP4文件的所有媒体流数据都下载完成后再合成3D视频图像,从而可满足边下载边播放3D视频的需求。
基于此,还有必要提供一种能满足在线播放时边下载边播放需求的3D视频播放方法。
一种3D视频播放方法,包括以下步骤:
获取存储了左眼视频源和右眼视频源的MP4文件,所述左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中;
从左眼视频源对应的媒体信息存储单元和右眼视频源对应的媒体信息存储单元中分别读取左眼视频源的媒体信息和右眼视频源的媒体信息;
根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中分别读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧;
将时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像;
播放所述合成的3D视频图像。
在其中一个实施例中,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。
在其中一个实施例中,所述媒体数据存储单元为MP4文件中的Media DataBox,所述媒体信息存储单元为MP4文件中的Track Box。
基于此,还有必要提供一种能满足在线播放时边下载边播放需求的3D视频播放装置。
一种3D视频播放装置,包括:
文件获取模块,用于获取存储了左眼视频源和右眼视频源的MP4文件,所述左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中;
媒体信息获取模块,用于从左眼视频源对应的媒体信息存储单元和右眼视频源对应的媒体信息存储单元中分别读取左眼视频源的媒体信息和右眼视频源的媒体信息;
媒体数据获取模块,用于根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中分别读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧;
合成模块,用于将时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像;
播放模块,用于播放所述合成的3D视频图像。
在其中一个实施例中,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。
在其中一个实施例中,所述媒体数据存储单元为MP4文件中的Media DataBox,所述媒体信息存储单元为MP4文件中的Track Box。
上述3D视频播放方法和装置,可根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧,将时间对应一致的左、右眼视频源的视频帧合成3D视频图像,不需要将MP4文件的所有媒体数据都下载完成后再进行合成操作,可边获取MP4文件的媒体数据边合成3D视频图像,从而可满足在线播放3D视频时边下载边播放的需求。
【附图说明】
图1为一个实施例中的3D视频源存储方法的流程示意图;
图2为一个实施例中的3D视频源存储装置的结构示意图;
图3为一个实施例中的3D视频播放方法的流程示意图;
图4为一个实施例中的3D视频播放装置的结构示意图。
【具体实施方式】
如图1所示,在一个实施例中,一种3D视频源存储方法,包括以下步骤:
步骤S101,将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中。
具体的,媒体数据存储单元是MP4文件的Media Data Box。
MP4文件中的所有数据都装在box(QuickTime中为atom)中,也就是说MP4文件由若干个box组成,每个box有类型和长度,可以将box理解为一个数据对象块。box中可以包含另一个box,这种box称为container box。
MP4文件包含一个且只包含一个“moov”类型的box(Movie Box),它是一种container box,子box包含了MP4文件的媒体数据的相关信息,下文中媒体数据的相关信息简称为媒体信息。Track Box为“moov”的一种子box,每个TrackBox中包含一个单独视频流的媒体信息。MP4文件的另外一种类型的box为“mdat”类型的box(Media Data Box)。Media Data Box中包含MP4文件的媒体数据。媒体数据的结构由Movie Box包含的媒体信息进行描述。
具体的,左眼视频源的视频帧在MP4文件的媒体数据存储单元中按照时间由先到后排列,右眼视频源的视频帧在所述MP4文件的媒体数据存储单元中按照时间由先到后排列。
在一个实施例中,MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。视频帧的时间对应一致表示视频帧的时间相同或相近(间隔小于预设阈值)。
例如,可在媒体数据存储单元中按照以下顺序存储左、右眼视频源的视频帧:左眼视频源的第一帧视频、右眼视频源的第一帧视频、左眼视频源的第二帧视频、右眼视频源的第二帧视频……。左、右眼视频源是对同一场景从不同角度同时拍摄得到的,因此,左、右眼视频源的视频帧数量相同或相近,其中,序号对应的视频帧的时间也对应一致。
在一个实施例中,视频帧为一帧视频或一组连续视频帧。一组连续视频帧构成的单元称为chunk。在一个实施例中,可将左眼视频源与右眼视频源的chunk按时间先后顺序进行交错存储,且相邻的左眼视频源与右眼视频源的chunk的时间对应一致。
例如,可在媒体数据存储单元中按照以下顺序存储左、右眼视频源的chunk:左眼视频源的0~1秒内的chunk、右眼视频源的0~1±k秒内的chunk、左眼视频源的1~2秒内的chunk、右眼视频源的1±k~2±k秒内的chunk、……,其中,k为预设阈值。
步骤S102,将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中。
具体的,媒体信息存储单元为MP4文件的Track Box。
具体的,媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
当需要获取左、右眼视频源的视频帧时,可根据视频帧的时间信息和位置信息,获取相关时间对应的视频帧的位置信息,根据位置信息从MP4文件的媒体数据存储单元中读取视频帧数据。进一步的,可根据编解码信息将视频帧数据进行解码。
本实施例中,将左、右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,并使媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。在合成3D视频时,可方便的从MP4文件的连续的媒体流中获取到左、右眼视频源的时间对应一致的视频帧,从而可边下载MP4的媒体流数据,边从下载到的连续的媒体流数据中获取时间对应一致的左、右眼视频源的视频帧实时的合成3D视频图像,满足在线播放3D视频时边下载边播放的需求。
在一个实施例中,在步骤S101之前,上述3D视频源存储方法还包括步骤:将左眼视频源按照预设格式进行编码,并将视频的右眼视频源按照预设格式进行编码。
本实施例中,步骤S101的具体过程为:将编码后的左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中。
具体的,可将视频的左眼视频源和右眼视频源分别按照传统的视频编码格式(如h264格式)进行编码。进一步的,可将编码后的左、右眼视频源进行存储。
如图2所示,在一个实施例中,一种3D视频源存储装置,包括媒体数据存储模块201、媒体信息存储模块202,其中:
媒体数据存储模块201用于将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中。
具体的,媒体数据存储单元是MP4文件的Media Data Box。
具体的,左眼视频源的视频帧在MP4文件的媒体数据存储单元中按照时间由先到后排列,右眼视频源的视频帧在所述MP4文件的媒体数据存储单元中按照时间由先到后排列。
在一个实施例中,MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。视频帧的时间对应一致表示视频帧的时间相同或相近(间隔小于预设阈值)。
例如,媒体数据存储模块201可在媒体数据存储单元中按照以下顺序存储左、右眼视频源的视频帧:左眼视频源的第一帧视频、右眼视频源的第一帧视频、左眼视频源的第二帧视频、右眼视频源的第二帧视频……。左、右眼视频源是对同一场景从不同角度同时拍摄得到的,因此,左、右眼视频源的视频帧数量相同或相近,其中,序号对应的视频帧的时间也对应一致。
在一个实施例中,视频帧为一帧视频或一组连续视频帧。一组连续视频帧构成的单元称为chunk。在一个实施例中,媒体数据存储模块201可将左眼视频源与右眼视频源的chunk按时间先后顺序进行交错存储,且相邻的左眼视频源与右眼视频源的chunk的时间对应一致。
例如,媒体数据存储模块201可在媒体数据存储单元中按照以下顺序存储左、右眼视频源的chunk:左眼视频源的0~1秒内的chunk、右眼视频源的0~1±k秒内的chunk、左眼视频源的1~2秒内的chunk、右眼视频源的1±k~2±k秒内的chunk、……,其中,k为预设阈值。
媒体信息存储模块202用于将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中。
具体的,媒体信息存储单元为MP4文件的Track Box。
具体的,媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
当需要获取左、右眼视频源的视频帧时,可根据视频帧的时间信息和位置信息,获取相关时间对应的视频帧的位置信息,根据位置信息从MP4文件的媒体数据存储单元中读取视频帧数据。进一步的,可根据编解码信息将视频帧数据进行解码。
本实施例中,将左、右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,并使媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。在合成3D视频时,可方便的从MP4文件的连续的媒体流中获取到左、右眼视频源的时间对应一致的视频帧,从而可边下载MP4的媒体流数据,边从下载到的连续的媒体流数据中获取时间对应一致的左、右眼视频源的视频帧实时的合成3D视频图像,满足在线播放3D视频时边下载边播放的需求。
在一个实施例中,上述3D视频源存储装置还包括编码模块(图中未示出),用于将左眼视频源按照预设格式进行编码,并将视频的右眼视频源按照预设格式进行编码。
本实施例中,媒体数据存储模块201用于将编码后的左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中。
具体的,编码模块可将视频的左眼视频源和右眼视频源分别按照传统的视频编码格式(如h.264格式)进行编码。进一步的,媒体数据存储模块201可将编码后的左、右眼视频源进行存储。
上述3D视频源存储方法和装置,将视频的左眼视频源与右眼视频源存储在一个MP4文件中,一段视频对应一个存储文件,不需要将左、右眼视频源存储在两个文件中,可方便视频文件的传输和保存,避免在传输和保存过程中一个文件丢失而导致3D视频不能合成和播放。
另外,上述3D视频源存储方法和装置,将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,当在线播放3D视频时,可一边下载MP4文件的连续的媒体流数据,一边从已经下载的媒体流数据中获取左、右眼视频源的视频帧进行合成,不需要MP4文件的所有媒体流数据都下载完成后再合成3D视频图像,从而可满足边下载边播放3D视频的需求。
其次,相对于将左、右视频按照某一固定格式合成3D视频后再存储的方式,上述3D视频源存储方式,可方便后续进行3D视频合成时根据需要按照不同的格式合成3D视频,一个视频文件可满足不同的3D视频合成需要,而不需要存储多个不同合成格式的视频文件,因此,上述方式更加节省存储资源,当需要传输视频文件时,还可节约传输资源。
如图3所示,在一个实施例中,一种3D视频播放方法,包括以下步骤:
步骤S301,获取存储了左眼视频源和右眼视频源的MP4文件,左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中。
具体的,可根据指定路径获取MP4文件,或根据Internet地址下载MP4文件。
具体的,媒体数据存储单元为MP4文件的Media Data Box。
左眼视频源的视频帧在MP4文件的媒体数据存储单元中按照时间由先到后排列,所述右眼视频源的视频帧在所述MP4文件的媒体数据存储单元中按照时间由先到后排列。
MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。
步骤S302,从左眼视频源对应的媒体信息存储单元和右眼视频源对应的媒体信息存储单元中分别读取左眼视频源的媒体信息和右眼视频源的媒体信息。
具体的,媒体信息存储单元为MP4文件的Track Box。媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
步骤S303,根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中分别读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧。
具体的,在一个实施例中,可根据左、右眼视频源的视频帧的时间信息和位置信息,获取时间对应一致左、右眼视频源的视频帧的位置信息,分别根据左、右眼视频源的视频帧的位置信息从MP4文件的媒体数据存储单元中读取时间对应一致的视频帧数据。
步骤S304,将时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像。
具体的,可按照传统的3D视频图像合成方式,例如左右排列、上下排列、交错排列等,将左眼视频源和右眼视频源的时间对应一致的视频帧合成需要的3D视频图像。其中,左右排列方式将左眼视频源的视频帧排在左边,将右眼视频源的视频帧排在右边;上下排列方式将左眼视频源的视频帧排在上边,将右眼视频源的视频帧排在下边;交错排列方式将左、右眼视频源的视频帧的像素列交错排列。不同的3D播放设备可播放的3D视频图像的格式也不同,可根据3D播放设备来选择3D视频图像的合成方式。
本实施例中,将左、右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,并使媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。在合成3D视频时,可方便的从MP4文件的连续的媒体流中获取到左、右眼视频源的时间对应一致的视频帧,从而可边下载MP4的媒体流数据,边从下载到的连续的媒体流数据中获取时间对应一致的左、右眼视频源的视频帧实时的合成3D视频图像,满足在线播放3D视频时边下载边播放的需求。
步骤S305,播放合成的3D视频图像。
在一个实施例中,左眼视频源和右眼视频源为按照预设格式进行编码而成的视频源。在步骤S304之前,上述3D视频播放方法还包括步骤:按照与预设格式相应的格式解码左眼视频源和右眼视频源的视频帧数据。步骤S304的具体过程为:将解码后的时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像。
如图4所示,在一个实施例中,一种3D视频播放装置,包括文件获取模块401、媒体信息获取模块402、媒体数据获取模块403、合成模块404、播放模块405,其中:
文件获取模块401用于获取存储了左眼视频源和右眼视频源的MP4文件,左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中。
具体的,文件获取模块401可根据指定路径获取MP4文件,或根据Internet地址下载MP4文件。
具体的,媒体数据存储单元为MP4文件的Media Data Box。
左眼视频源的视频帧在MP4文件的媒体数据存储单元中按照时间由先到后排列,所述右眼视频源的视频帧在所述MP4文件的媒体数据存储单元中按照时间由先到后排列。
MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。
媒体信息获取模块402用于从左眼视频源对应的媒体信息存储单元和右眼视频源对应的媒体信息存储单元中分别读取左眼视频源的媒体信息和右眼视频源的媒体信息。
具体的,媒体信息存储单元为MP4文件的Track Box。媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
媒体数据获取模块403用于根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中分别读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧。
具体的,在一个实施例中,媒体数据获取模块403可根据左、右眼视频源的视频帧的时间信息和位置信息,获取时间对应一致左、右眼视频源的视频帧的位置信息,分别根据左、右眼视频源的视频帧的位置信息从MP4文件的媒体数据存储单元中读取时间对应一致的视频帧数据。
合成模块404用于将时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像。
具体的,合成模块404可按照传统的3D视频图像合成方式,例如左右排列、上下排列、交错排列等,将左眼视频源和右眼视频源的时间对应一致的视频帧合成需要的3D视频图像。其中,左右排列方式将左眼视频源的视频帧排在左边,将右眼视频源的视频帧排在右边;上下排列方式将左眼视频源的视频帧排在上边,将右眼视频源的视频帧排在下边;交错排列方式将左、右眼视频源的视频帧的像素列交错排列。不同的3D播放设备可播放的3D视频图像的格式也不同,合成模块404可根据3D播放设备来选择3D视频图像的合成方式。
本实施例中,将左、右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,并使媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致。在合成3D视频时,可方便的从MP4文件的连续的媒体流中获取到左、右眼视频源的时间对应一致的视频帧,从而可边下载MP4的媒体流数据,边从下载到的连续的媒体流数据中获取时间对应一致的左、右眼视频源的视频帧实时的合成3D视频图像,满足在线播放3D视频时边下载边播放的需求。
播放模块405用于播放合成的3D视频图像。
在一个实施例中,左眼视频源和右眼视频源为按照预设格式进行编码而成的视频源。上述3D视频播放装置还包括解码模块(图中未示出),用于按照与预设格式相应的格式解码左眼视频源和右眼视频源的视频帧数据。合成模块404用于将解码后的时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像。
上述3D视频播放方法和装置,从MP4文件中读取左眼视频源和右眼视频源,并将时间对应一致的左、右眼视频源的视频帧合成3D视频图像。上述方式不需要从两个文件中读取左、右眼视频源,一个视频只对应一个视频文件,可避免在获取视频的过程中,其中一个视频文件丢失而导致不能合成和播放3D视频的问题。
另外,上述方式可根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧,将时间对应一致的左、右眼视频源的视频帧合成3D视频图像,不需要将MP4文件的所有媒体数据都下载完成后再进行合成操作,可边获取MP4文件的媒体数据边合成3D视频图像,从而可满足在线播放3D视频时边下载边播放的需求。
其次,上述3D视频播放方法和装置,可将左、右眼视频源按照不同的格式合成3D视频,满足不同播放设备的播放需要。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (8)

1.一种3D视频源存储方法,包括以下步骤:
将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致;
将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中,所述媒体信息存储单元为MP4文件中的TrackBox,Track Box为“moov”的一种子box,每个Track Box中包含一个单独视频流的媒体信息,所述媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
2.根据权利要求1所述的3D视频源存储方法,其特征在于,所述媒体数据存储单元为MP4文件中的Media Data Box。
3.一种3D视频源存储装置,其特征在于,包括:
媒体数据存储模块,用于将左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致;
媒体信息存储模块,用于将左眼视频源的媒体信息与右眼视频源的媒体信息分别存储在MP4文件的不同的媒体信息存储单元中,所述媒体信息存储单元为MP4文件中的Track Box,Track Box为“moov”的一种子box,每个Track Box中包含一个单独视频流的媒体信息,所述媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息。
4.根据权利要求3所述的3D视频源存储装置,其特征在于,所述媒体数据存储单元为MP4文件中的Media Data Box。
5.一种3D视频播放方法,包括以下步骤:
获取存储了左眼视频源和右眼视频源的MP4文件,所述左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,所述媒体信息存储单元为MP4文件中的Track Box,Track Box为“moov”的一种子box,每个Track Box中包含一个单独视频流的媒体信息,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致;
从左眼视频源对应的媒体信息存储单元和右眼视频源对应的媒体信息存储单元中分别读取左眼视频源的媒体信息和右眼视频源的媒体信息,所述媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息;
根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中分别读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧;
将时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像;
播放所述合成的3D视频图像。
6.根据权利要求5所述的3D视频播放方法,其特征在于,所述媒体数据存储单元为MP4文件中的Media Data Box。
7.一种3D视频播放装置,其特征在于,包括:
文件获取模块,用于获取存储了左眼视频源和右眼视频源的MP4文件,所述左眼视频源与右眼视频源的视频帧按时间先后顺序交错存储在MP4文件的媒体数据存储单元中,所述媒体信息存储单元为MP4文件中的Track Box,TrackBox为“moov”的一种子box,每个Track Box中包含一个单独视频流的媒体信息,所述MP4文件的媒体数据存储单元中相邻的左眼视频源与右眼视频源的视频帧的时间对应一致;
媒体信息获取模块,用于从左眼视频源对应的媒体信息存储单元和右眼视频源对应的媒体信息存储单元中分别读取左眼视频源的媒体信息和右眼视频源的媒体信息,所述媒体信息包括视频源中视频帧的时间信息、位置信息以及视频帧的编解码信息;
媒体数据获取模块,用于根据左眼视频源的媒体信息和右眼视频源的媒体信息从MP4文件的媒体数据存储单元中分别读取时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧;
合成模块,用于将时间对应一致的左眼视频源的视频帧和右眼视频源的视频帧按照预设方式进行排列,合成3D视频图像;
播放模块,用于播放所述合成的3D视频图像。
8.根据权利要求7所述的3D视频播放装置,其特征在于,所述媒体数据存储单元为MP4文件中的Media Data Box。
CN201210156555.6A 2012-05-19 2012-05-19 3d视频源存储方法和装置及3d视频播放方法和装置 Active CN103428463B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201210156555.6A CN103428463B (zh) 2012-05-19 2012-05-19 3d视频源存储方法和装置及3d视频播放方法和装置
JP2014537486A JP5801497B2 (ja) 2012-05-19 2013-04-09 3dビデオソース格納方法及び装置、及び3dビデオ再生方法及び装置
KR1020147007133A KR101630720B1 (ko) 2012-05-19 2013-04-09 3d 비디오 소스 저장 방법 및 장치와 3d 비디오 재생 방법 및 장치
PCT/CN2013/073968 WO2013174181A1 (zh) 2012-05-19 2013-04-09 3d视频源存储方法和装置及3d视频播放方法和装置
US14/249,770 US20140219640A1 (en) 2012-05-19 2014-04-10 Method and apparatus for storing and playing 3d video source

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210156555.6A CN103428463B (zh) 2012-05-19 2012-05-19 3d视频源存储方法和装置及3d视频播放方法和装置

Publications (2)

Publication Number Publication Date
CN103428463A CN103428463A (zh) 2013-12-04
CN103428463B true CN103428463B (zh) 2016-10-12

Family

ID=49623082

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210156555.6A Active CN103428463B (zh) 2012-05-19 2012-05-19 3d视频源存储方法和装置及3d视频播放方法和装置

Country Status (5)

Country Link
US (1) US20140219640A1 (zh)
JP (1) JP5801497B2 (zh)
KR (1) KR101630720B1 (zh)
CN (1) CN103428463B (zh)
WO (1) WO2013174181A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101388988A (zh) * 2007-06-08 2009-03-18 三星电子株式会社 用于记录三维视频数据的方法及其介质
WO2011083626A1 (ja) * 2010-01-08 2011-07-14 ソニー株式会社 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1254773C (zh) * 2002-05-27 2006-05-03 矽统科技股份有限公司 交错式立体影像的产生装置及方法
JP4490074B2 (ja) * 2003-04-17 2010-06-23 ソニー株式会社 立体視画像処理装置、立体視画像表示装置、立体視画像提供方法、および立体視画像処理システム
EP2230844B1 (en) * 2008-01-17 2017-11-22 Panasonic Intellectual Property Management Co., Ltd. Recording medium on which 3d video is recorded, recording apparatus for recording 3d video, and reproducing device and method for reproducing 3d video
JP2010088092A (ja) * 2008-09-02 2010-04-15 Panasonic Corp 立体映像伝送システム、映像表示装置および映像出力装置
US8369693B2 (en) * 2009-03-27 2013-02-05 Dell Products L.P. Visual information storage methods and systems
US8830301B2 (en) * 2009-06-10 2014-09-09 Lg Electronics Inc. Stereoscopic image reproduction method in case of pause mode and stereoscopic image reproduction apparatus using same
JP2011082666A (ja) * 2009-10-05 2011-04-21 Sony Corp 信号伝送方法、信号送信装置及び信号受信装置
JP5482254B2 (ja) * 2009-11-05 2014-05-07 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
JP2011142585A (ja) * 2010-01-08 2011-07-21 Sony Corp 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム
CN102137268B (zh) * 2011-04-08 2013-01-30 清华大学 立体视频的行交错和棋盘格的渲染方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101388988A (zh) * 2007-06-08 2009-03-18 三星电子株式会社 用于记录三维视频数据的方法及其介质
WO2011083626A1 (ja) * 2010-01-08 2011-07-14 ソニー株式会社 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム

Also Published As

Publication number Publication date
US20140219640A1 (en) 2014-08-07
CN103428463A (zh) 2013-12-04
KR20140057611A (ko) 2014-05-13
KR101630720B1 (ko) 2016-06-17
JP5801497B2 (ja) 2015-10-28
JP2015501590A (ja) 2015-01-15
WO2013174181A1 (zh) 2013-11-28

Similar Documents

Publication Publication Date Title
CN101868970B (zh) 记录三维图像数据的方法
CN103202021B (zh) 编码装置、解码装置、再现装置、编码方法及解码方法
CN102427545B (zh) 将三维图像存储到记录介质中的方法
KR101362647B1 (ko) 2d 영상을 포함하는 3d 입체영상 파일을 생성 및재생하기 위한 시스템 및 방법
US8218855B2 (en) Method and apparatus for receiving multiview camera parameters for stereoscopic image, and method and apparatus for transmitting multiview camera parameters for stereoscopic image
JP5022443B2 (ja) 立体映像コンテンツ再生に利用されるメタデータの復号化方法
JP5193291B2 (ja) 2d映像メディア標準に基づいて3d映像ファイルを生成及び再生するためのシステム及び方法
JP6320366B2 (ja) 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法
US20110254925A1 (en) Image processing apparatus, image processing method, and program
CN103716611B (zh) 具有运动传感器的用于立体视频的设备和方法
JP2010258872A (ja) 立体映像および音声記録方法、立体映像および音声再生方法、立体映像および音声記録装置、立体映像および音声再生装置、立体映像および音声記録媒体
JP2009135686A (ja) 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置
JP2006270924A (ja) 映像データ処理装置、映像再生装置、映像データ処理方法、映像再生方法、これらの方法をコンピュータによって実行するためのプログラム並びに記録媒体
CN104137558B (zh) 用于显示三维图像的数字广播接收方法及其接收设备
NL2011349C2 (en) Method for generating, transmitting and receiving stereoscopic images, and related devices.
KR101686168B1 (ko) 스트레오스코픽 동영상 파일의 구성 방법
CN103024409B (zh) 视频编码方法、视频编码器、视频解码方法与视频解码器
CN103428463B (zh) 3d视频源存储方法和装置及3d视频播放方法和装置
CN107295326A (zh) 一种3d立体视频录制方法
JP2012249137A (ja) 記録装置、記録方法、再生装置、再生方法、プログラム、および記録再生装置
JP2011205702A (ja) 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置
Onural et al. Three-dimensional television: From science-fiction to reality
KR101433082B1 (ko) 2차원 영상과 3차원 영상의 중간 정도 느낌을 주는 영상 변환 및 재생 방법
KR101453084B1 (ko) 3d 영상 파일을 생성 및 재생하기 위한 휴대 단말기 및 방법
Onural Progress in European 3DTV research

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1187755

Country of ref document: HK

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1187755

Country of ref document: HK