CN102844696A - 电子装置和再现三维图像的方法 - Google Patents

电子装置和再现三维图像的方法 Download PDF

Info

Publication number
CN102844696A
CN102844696A CN2011800196543A CN201180019654A CN102844696A CN 102844696 A CN102844696 A CN 102844696A CN 2011800196543 A CN2011800196543 A CN 2011800196543A CN 201180019654 A CN201180019654 A CN 201180019654A CN 102844696 A CN102844696 A CN 102844696A
Authority
CN
China
Prior art keywords
frame
video
data
pixel data
odd
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800196543A
Other languages
English (en)
Other versions
CN102844696B (zh
Inventor
梁正烋
任振奭
任贞恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN102844696A publication Critical patent/CN102844696A/zh
Application granted granted Critical
Publication of CN102844696B publication Critical patent/CN102844696B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/24Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/337Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using polarisation multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/388Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/39Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the picture elements emitting light at places where a pair of light beams intersect in a transparent material

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

公开了一种电子装置和再现三维图像的方法。接收单元接收包含左眼视点图像数据和右眼视点图像数据的图像数据。格式器产生第一图像帧和第二图像帧。所述第一图像帧在其奇数行中包含左眼视点图像帧或右眼视点图像帧的第一像素数据,并且在其偶数行中包含另一图像帧的第二像素数据。所述第二图像帧在其奇数行中包含左眼视点图像帧或右眼视点图像帧的第三像素数据,并且在其偶数行中包含另一图像帧的第四像素数据。显示器扫描由所述格式器产生的所述第一图像帧和所述第二图像帧。

Description

电子装置和再现三维图像的方法
技术领域
本发明涉及一种电子装置和三维(3D)图像显示方法,更具体地讲,涉及一种能够以立体视图(stereo-view)或多视图(multi-view)3D图像技术处理3D图像的电子装置和3D图像显示方法。
背景技术
商业3D内容和3D广播主要使用双目视差方法。当人通过双眼看一个对象时,通过左眼看到的图像和通过右眼看到的图像之间存在位置差异。所述差异对应于在水平方向上双眼之间的间隔,称为双目视差。因此,将这样的图像提供给观看者的双眼,观看者可感知3D图像。因此,可向观看者的双眼提供通过利用双目相机拍摄实际对象而产生的图像,或者在计算机图形(CG)的情况下,通过以双目相机的形式映射CG对象而产生的图像,从而获得3D效果。
发明内容
技术问题
本发明的一个目的在于提供一种以全分辨率显示全分辨率的3D图像数据的电子装置和3D图像显示方法。
本发明的另一目的在于提供一种在图案化延迟器(patterned retarder)类型的3DTV中以全高清(full-HD)分辨率显示全高清分辨率的3D图像数据的电子装置和3D图像显示方法。
技术方案
为了实现这些目的和其它优点并根据本发明的目的,如本文实施并概括描述的,一种三维(3D)图像显示方法包括以下步骤:接收包括左视图视频数据和右视图视频数据的3D视频数据;基于所述左视图视频数据和所述右视图视频数据产生第一视频帧和第二视频帧,其中所述第一视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第一像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第二像素数据包括在偶数行中,并且其中所述第二视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第三像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第四像素数据包括在偶数行中;以及输出所述第一视频帧和所述第二视频帧。
所述第一像素数据可为奇数行数据,所述第二像素数据可为奇数行数据,所述第三像素数据可为偶数行数据,所述第四像素数据可为偶数行数据。
所述第一像素数据可为奇数行数据,所述第二像素数据可为偶数行数据,所述第三像素数据可为偶数行数据,所述第四像素数据可为奇数行数据。
所述第一像素数据可为偶数行数据,所述第二像素数据可为偶数行数据,所述第三像素数据可为奇数行数据,所述第四像素数据可为奇数行数据。
所述第一视频帧的第一行中所包括的像素数据可等于所述第二视频帧的第一行中所包括的像素数据。所述第一视频帧的第二奇数行中所包括的像素数据可为偶数行数据,所述第二视频帧的第二奇数行中所包括的像素数据可为奇数行数据。另外,所述第一视频帧的第二奇数行中所包括的像素数据可以是奇数行数据,所述第二视频帧的第二奇数行中所包括的像素数据可以是是偶数行数据。
产生所述第一视频帧和所述第二视频帧的步骤可包括对所述左视图视频数据和所述右视图视频数据执行垂直滤波。
所述左视图视频数据和所述右视图视频数据中的每一个的分辨率可为720×480p、1280×720p、1920×1080i、1920×1080p和4K×2K中的一个,如果所述分辨率为720×480p,则所述第一视频帧和所述第二视频帧可具有720×480p的分辨率,如果所述分辨率为1280×720p,则所述第一视频帧和所述第二视频帧可具有1280×720p的分辨率,如果所述分辨率是1920×1080i和1920×1080p中的一个,则所述第一视频帧和所述第二视频帧可具有1920×1080p的分辨率,如果所述分辨率为4K×2K,则所述第一视频帧和所述第二视频帧可具有4K×2K的分辨率。
在本发明的另一方面,一种三维(3D)图像显示方法包括以下步骤:接收包括左视图视频数据和右视图视频数据的3D视频数据;将所述左视图视频数据和所述右视图视频数据中每一个的帧频(frame rate)转换为输出帧频的一半;基于具有经转换的帧频的左视图视频数据和具有经转换的帧频的右视图视频数据产生第一视频帧和第二视频帧,其中所述第一视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第一像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第二像素数据包括在偶数行中,并且其中所述第二视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第三像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第四像素数据包括在偶数行中;输出所述第一视频帧和所述第二视频帧。
在本发明的另一方面,一种电子装置包括:接收器,其被构造为接收包括左视图视频数据和右视图视频数据的三维(3D)视频数据;格式器,其被构造为产生第一视频帧和第二视频帧,其中所述第一视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第一像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第二像素数据包括在偶数行中,并且其中所述第二视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第三像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第四像素数据包括在偶数行中;以及显示器,其被构造为扫描所述第一视频帧和所述第二视频帧。
所述第一像素数据可为奇数行数据和偶数行数据中的一个,如果所述第一像素数据是奇数行数据,则所述第二像素数据可为奇数行数据,所述第三像素数据可为偶数行数据,所述第四像素数据可为偶数行数据,如果所述第一像素数据是偶数行数据,则所述第二像素数据可为偶数行数据,所述第三像素数据可为奇数行数据,所述第四像素数据可为奇数行数据。
所述第一像素数据可为奇数行数据,所述第二像素数据可为偶数行数据,所述第三像素数据可为偶数行数据,所述第四像素数据可为奇数行数据。
所述第一视频帧的第一行中所包括的像素数据可等于所述第二视频帧的第一行中所包括的像素数据。所述第一视频帧的第二奇数行中所包括的像素数据可为偶数行数据和奇数行数据中的一个,如果所述第一视频帧的第二奇数行中所包括的像素数据是偶数行数据,则所述第二视频帧的第二奇数行中所包括的像素数据可为奇数行数据,如果所述第一视频帧的第二奇数行中所包括的像素数据是奇数行数据,则所述第二视频帧的第二奇数行中所包括的像素数据可为偶数行数据。所述第一视频帧和所述第二视频帧这两帧可形成一个3D图像。
所述格式器可对左视图视频数据和右视图视频数据执行垂直滤波。
所述左视图视频数据和所述右视图视频数据中的每一个的分辨率可为720×480p、1280×720p、1920×1080i、1920×1080p和4K×2K中的一个,如果所述分辨率为720×480p,则所述第一视频帧和所述第二视频帧可具有720×480p的分辨率,如果所述分辨率为1280×720p,则所述第一视频帧和所述第二视频帧可具有1280×720p的分辨率,如果所述分辨率是1920×1080i和1920×1080p中的一个,则所述第一视频帧和所述第二视频帧可具有1920×1080p的分辨率,如果所述分辨率为4K×2K,则所述第一视频帧和所述第二视频帧可具有4K×2K的分辨率。
所述电子装置还可包括帧频转换器,所述帧频转换器被构造为将所述左视图视频数据和所述右视图视频数据中的每一个的帧频转换为输出帧频的一半。
有益效果
根据本发明的电子装置和3D图像显示方法,由于在图案化延迟器类型的3D TV中通过两个帧显示左全分辨率和右全分辨率的3D图像,所以观看者可以以高于一半分辨率的最大分辨率观看3D图像。因此,本发明使许多人能够利用低成本(图案化延迟器类型的3D显示器的优点)的眼镜同时观看3D图像,同时以全分辨率(主动快门类型的3D显示器的优点)观看3D图像。另外,本发明可显示比主动快门类型的显示器的3D图像更亮的3D图像。
附图说明
图1是示出根据本发明的电子装置的示例性实施例的构造的框图。
图2是解释双目视差的示图。
图3是示出根据本发明的3D图像的单视频流格式的示例的示图。
图4是示出根据本发明的3D图像的多视频流格式的示例的示图。
图5是示出根据本发明的信号处理器的示例性实施例的构造的框图。
图6是示出FRC中的3D视频数据处理过程的示图。
图7是示出输入至格式器的左视图视频数据和右视图视频数据的示例性实施例的示图。
图8是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第一实施例的构造的示图。
图9是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第二实施例的构造的示图。
图10是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第三实施例的构造的示图。
图11是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第四实施例的构造的示图。
图12是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第五实施例的构造的示图。
图13是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第六实施例的构造的示图。
图14是解释垂直滤波的示图。
图15是示出并列格式的60Hz输入3D视频数据的示例性实施例的示图。
图16是示出图15所示的帧频被调节的3D视频数据6的示例性实施例的示图。
图17是示出利用图16所示的3D视频数据产生第一视频帧和第二视频帧的示例性实施例的示图。
图18是示出根据本发明的3D图像显示处理的示例性实施例的流程图。
图19是示出根据本发明的3D图像显示处理的另一示例性实施例的流程图。
图20是示出根据本发明的3D图像显示处理的另一示例性实施例的流程图。
具体实施方式
现在将参照附图详细说明本发明的示例性实施例。附图中示出并通过附图描述的本发明的构造和操作作为至少一个实施例描述。然而,对于本领域技术人员将明显的是,本发明的技术精神以及基本构造和操作不限于本文所述的具体实施例。
尽管本发明中所使用的术语在考虑其在本发明中的作用的同时选自本领域中广泛使用的一般术语,但是所述术语可根据本领域技术人员的意图、惯例、新技术的出现等而变化。另外,在特定情况下,本发明说明书中所使用的术语可由申请人斟酌选择,其详细含义在本文说明书的相关部分中有所描述。因此,本文使用的术语不应简单地按照所用实际术语来理解,而是按照本文所公开的说明书范围内的含义来理解。
图1是示出根据本发明的电子装置的示例性实施例的构造的框图。
参照图1,根据本发明的电子装置100可包括接收器101、信号处理器140、显示器150、音频输出单元160、输入单元170、存储单元180和控制器190。电子装置100可为个人计算机,例如台式计算机、膝上型计算机、平板计算机或手持计算机。电子装置100还可为移动终端,例如蜂窝电话、智能电话、数字多媒体广播(DMB)终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)或导航仪,并且可为固定的电器,例如数字TV。
接收器101可接收广播数据、视频数据、音频数据、信息数据和程序代码。视频数据可为双目视差类型的3D数据。所述3D数据可为立体视图或多视图图像。即,3D数据可包括左视图视频数据和右视图视频数据中的至少一个。3D数据可具有单视频流格式或多视频流格式。
图2是解释双目视差的示图。
参照图2,双目视差是指通过向观看者的眼睛211和212呈现利用双目相机等拍摄的左视图图像201和右视图图像202来提供空间感或3D感的3D显示方案。提供给观看者的空间感或3D感可根据左视图图像201和右视图图像202之间的双目视差而不同。
随着左视图图像201和右视图图像202之间的间隔减小,由于感觉图像形成在远离左眼211和右眼212的距离处,所以提供给观看者的空间感或3D感会减小。另外,随着左视图图像201和右视图图像202之间的间隔增大,由于感觉图像形成在靠近左眼211和右眼212的距离处,所以提供给观看者的空间感或3D感会增大。
图3是示出根据本发明的3D图像的单视频流格式的示例的示图。
参照图3,单视频流格式可包括并列格式、上下格式、棋盘格式、帧顺序格式和交织格式。
在并列格式中,显示左视图图像201的左视图视频数据311和显示右视图图像202的右视图视频数据312并列输入,以分别与观看者的左眼和右眼正交。在并列格式的视频帧310中,一个左视图视频帧311和一个右视图视频帧312并列布置。
在上下格式中,显示左视图图像201的左视图视频数据321和显示右视图图像202的右视图视频数据322上下输入。在上下格式的视频帧320中,一个左视图视频帧321和一个右视图视频帧322上下布置。
在棋盘格式中,显示左视图图像201的左视图视频数据331和显示右视图图像202的右视图视频数据322以棋盘的形状按时间交替输入。在棋盘格式的视频帧330中,左视图图像201的像素数据和右视图图像202的像素数据以棋盘的形状按时间交替布置。
在帧顺序格式中,显示左视图图像201的左视图视频数据341和显示右视图图像202的右视图视频数据342以时差输入。在帧顺序格式的视频帧340中,一个左视图视频帧341和一个右视图视频帧342中的每一个作为单独的图像帧被接收。
在交织格式的视频帧350中,显示左视图图像201的左视图视频数据和显示右视图图像202的右视图视频数据在水平方向上被1/2子采样,采样的左视图视频数据351和采样的右视图视频数据352逐行交替。在交织格式的视频帧355中,显示左视图图像201的左视图视频数据和显示右视图图像202的右视图视频数据在垂直方向上被1/2子采样,采样的左视图视频数据356和采样的右视图视频数据357逐行交替。
图4是示出根据本发明的3D图像的多视频流格式的示图。
参照图4,多视频流格式可包括全左/右格式410、全左/半右格式420和2D视频/深度格式430。
在全左/右格式410中,左视图图像411和右视图图像415顺序发送。在全左/半右格式420中,左视图图像421以原始状态发送,而右视图图像422或423通过在垂直或水平方向上执行1/2子采样来发送。在2D视频/深度格式430中,一个视点图像431和用于产生另一视点图像的深度信息435一起发送。
再参照图1,接收器101可包括调谐器110、解调器120、移动通信单元115、网络接口130和外部信号接收器135。
调谐器110从通过天线接收的射频(RF)广播信号中选择与用户所选择的信道对应的RF广播信号,并将选择的RF广播信号转换为中频(IF)信号或基带视频或音频信号。
解调器120接收由调谐器110转换的数字IF(DIF)信号,并对该DIF信号进行解调。例如,如果从调谐器110产生的DIF信号为ATSC信号,则解调器120执行8-残留边带(VSB)解调。作为另一个例子,如果从调谐器110产生的DIF信号为DVB信号,则解调器120执行编码正交频分复用(COFDMA)解调。
解调器120还可执行信道解码。对于信道解码,解调器120可包括网格(Trellis)解码器、解交织器和里德-所罗门解码器,以分别执行网格解码、解交织和里德-所罗门解码。
在执行解调和信道解码之后,解调器120可输出传输流(TS)信号。视频信号、音频信号或数据信号可被复用在TS信号中。例如,TS信号可以是运动图像专家组-2(MPEG-2)TS,其中,MPEG-2视频信号和杜比AC-3音频信号被复用在该MPEG-2TS中。更具体地,MPEG-2TS可包括4字节头和184字节净荷。
从解调器120产生的TS信号可提供给信号处理器140。
移动通信单元115向移动通信网络中的基站、外部终端和服务器中的至少一个发送无线电信号并从移动通信网络中的基站、外部终端和服务器中的至少一个接收无线电信号。所述无线电信号可包括音频呼叫信号、视频呼叫信号、或者用于文本或多媒体消息的发送和接收的各种类型的数据。
外部信号接收器135可提供能够将电子装置100连接至外部装置的接口。所述外部装置可以是多种类型的视频或音频输出装置,例如数字多功能盘(DVD)播放器、蓝光播放器、游戏装置、摄像机和计算机(如,笔记本计算机),并且可为存储装置,例如通用串行总线(USB)存储器或USB硬盘。电子装置100可显示从外部信号接收器135接收的视频和音频信号,并可存储或使用数据信号。
所述外部装置还可为图像拍摄装置90。图像拍摄装置90可包括多个相机。图像拍摄装置90可拍摄人的图像。图像拍摄装置90可通过放大来识别、聚焦并拍摄人手形状。拍摄的手形状可被识别为空间手势。即,控制器190可将拍摄的手形状识别为空间手势,并可执行命令以执行与识别的空间手势相关联的操作。所述空间手势可被定义为从映射至一个或多个特定计算操作并从图像拍摄装置90接收的视频帧或图像识别的手势。
作为一个部分实施例,电子装置100可包括图像拍摄装置90。
信号处理器140将从解调器210产生的TS信号解复用,处理解复用的信号,将图像提供给显示器150,并控制音频输出单元160输出声音161。信号处理器140可从移动通信单元115、网络接口130和外部信号接收器135接收图像数据、声音数据和广播数据。
信号处理器140可基于从接收器101接收的3D视频数据中所包括的左视图视频帧和右视图视频帧产生视频帧。作为部分实施例,信号处理器140可基于左视图视频帧和右视图视频帧产生第一视频帧和第二视频帧。即,信号处理器140可利用一个左视图视频帧和一个右视图视频帧产生两个视频帧。第一视频帧和第二视频帧可形成一个3D图像。
作为部分实施例,信号处理器140可改变3D视频数据的帧频,并可基于具有经改变的帧频的3D视频数据中所包括的左视图视频帧和右视图视频帧产生第一视频帧和第二视频帧。即,信号处理器140可利用具有经改变的帧频的3D视频数据中所包括的一个3D视频帧的左视图视频数据和右视图视频数据产生两个视频帧。第一视频帧和第二视频帧可形成一个3D图像。
第一视频帧和第二视频帧中的每一个可在奇数行中包括左视图视频帧和右视图视频帧中的一个的像素数据,并可在偶数行中包括另一个的像素数据。第一视频帧和第二视频帧可具有与左视图视频数据的分辨率相同的分辨率,并可具有与左视图视频数据的分辨率对应的渐进(progressive)分辨率。
信号处理器140可将产生的第一视频帧和第二视频帧提供给显示器150。
显示器150显示图像152。图像152可为3D图像。显示器150可以以图案化延迟器类型显示3D图像。从信号处理器140产生的第一视频帧和第二视频帧可被显示为3D图像152。
显示器150可结合控制器190操作。显示器150可显示图形用户界面(GUI)153,以在用户与电子装置100的操作系统(OS)或者OS上正在运行的应用之间提供易于使用的界面。GUI 153将程序、文件和操作选项表现为图形图像。所述图形图像可包括窗口、场(field)、对话框、菜单、图标、按钮、光标和滚动条。这些图像可按照预先定义的布局布置,或者可动态产生以帮助用户所执行的特定动作。在操作期间,用户可选择并激活图像以执行与各种图形有关的功能和操作。例如,用户可选择用于打开、关闭、最小化或最大化窗口的按钮、或者用于运行特定程序的图标。
音频输出单元160可从信号处理器140和控制器190接收音频数据,并可输出通过显示接收的音频数据而产生的声音161。
输入单元170可为触摸屏,所述触摸屏设置在显示器150上或显示器150的前面。所述触摸屏可集成到显示器150中,或者可为单独的元件。如果触摸屏设置在显示器150的前面,则用户可直接操纵GUI 153。例如,用户可将其手指置于待控制的对象上。然而,在触摸板中,不存在如触摸屏中一样的对应关系。
通常,触摸板单独设置在与显示器150不同的平面上。例如,显示器150通常位于垂直平面上,而触摸板通常位于水平平面上。触摸板的直观性较差,因此与触摸屏相比较难使用。除了触摸屏之外,输入单元170还可为多点输入装置。
存储单元180存储电子装置100所使用的程序代码和数据。存储单元180可实现为只读存储器(ROM)、随机存取存储器(RAM)、硬盘驱动器等。程序代码和数据可存储在可分离的存储器介质中,并且可根据需要加载或安装到电子装置100上。可分离的存储介质可包括CD-ROM、PC卡、存储卡、软盘、磁带和网络元件。
控制器190执行命令并执行与电子装置100有关的操作。例如,控制器190可利用从存储单元180检测到的命令控制电子装置100的元件之间的输入和输出以及数据接收和处理。控制器190可实现为单个芯片、多个芯片或多个电子元件。例如,包括专用或嵌入式处理器、单用途处理器、控制器、专用集成电路(ASIC)等在内的各种架构可用作控制器190。
控制器190与OS一起执行计算机代码,并产生和使用数据。OS是公知的,因此将省略其详细描述。OS的例子可包括Windows OS、Unix、Linux、Palm OS、DOS、Android和Mac OS。OS、其它计算机代码和数据可存在于存储单元180内,所述存储单元180在控制器190的控制下操作。
控制器190可识别用户动作,并可基于识别的用户动作控制电子装置100。用户动作可包括:选择电子装置100或遥控器的物理按钮、执行规定手势、或者选择触摸屏显示器上的软按钮、执行从通过图像拍摄装置拍摄的图像识别的规定手势、以及生成通过语音识别所识别的规定声音。外部信号接收器135可接收与通过遥控器的物理按钮选择的用户动作对应的信号。
手势可包括触摸手势和空间手势。触摸手势可被定义为与输入单元170的形式化的(stylized)交互,所述形式化的交互被映射至一个或多个计算操作。触摸手势可通过手(更具体地,手指)的移动来实现。作为另一种替代方式,手势可通过触针来实现。
输入单元170接收手势171,控制器190执行命令以执行与手势171相关联的操作。存储单元180可包括手势操作程序181,所述手势操作程序181可以是OS的一部分或另外的应用。手势操作程序181包括用于识别手势171的发生和通知一个或多个软件代理响应于手势171应该采取哪些动作的一系列命令。
控制器190可确定或确认3D图像显示模式。作为部分实施例,控制器190可基于识别的用户动作确定3D图像显示模式,并可基于接收的3D视频数据的分辨率和格式中的至少一个来确定3D图像显示模式。控制器190可基于接收的广播信息确定3D图像显示模式,并可基于存储的3D图像显示模式信息确认3D图像显示模式。
3D图像显示模式可以是全图像模式和半图像模式中的一个。全图像模式是以全分辨率显示3D视频数据的模式。半图像模式是以全分辨率的一半显示3D视频数据的模式。全分辨率可为全高清分辨率、显示装置中可支持的最高分辨率中的一个、或视频数据传输标准中定义的全分辨率。例如,全分辨率可以是高清多媒体接口(HDMI)1.4标准中定义为强制格式的全分辨率。在HDMI 1.4标准中,全分辨率的3D视频格式为1920x1080px224Hz和1280x720px260Hz/50Hz。作为另一个例子,全分辨率可为720x480p60Hz、1920x 1080ix260Hz、1920x 1080px260Hz和4Kx2Kx224Hz(或25Hz或30Hz)。在特殊情况下,如果在全视频模式下输入分辨率为1920x1080ix2的3D视频数据,则3D视频数据可以以1920x1080px2的分辨率显示。1920x1080px260Hz的分辨率是指3D视频数据包括分别具有1920x1080p的分辨率、60Hz的帧频的左视图视频帧和右视图视频帧。1280x720px260Hz/50Hz的分辨率是指3D视频数据包括分辨率为1280x720p、帧频为60Hz的左视图视频帧和分辨率为1280x720p、帧频为50Hz的右视图视频帧。
控制器190可根据确定或确认的3D图像显示模式控制信号处理器140以处理3D视频数据。信号处理器140可默认以全图像模式处理3D视频数据。
控制器190可感测用于请求GUI设置3D图像显示模式的用户动作。响应于该用户动作,控制器190可执行控制功能以产生用于显示画面的信号,所述画面包括显示GUI和图像数据的区域。3D图像可显示在上述区域中。
控制器190可根据通过GUI设置的3D图像显示模式控制信号处理器140处理显示在所述画面上的图像。
控制器190可控制存储单元190存储3D图像显示模式信息,该3D图像显示模式信息指示通过GUI设置的3D图像显示模式。
图5是示出根据本发明的信号处理器的示例性实施例的构造的框图。
参照图5,信号处理器140可包括解复用器510、音频解码器520、视频解码器530、缩放器(scaler)540、混合器550、帧频转换器(FRC)560、格式器570和视频接口580。
解复用器510可从移动通信单元115、网络接口130和外部信号接收器135接收流信号,并可将接收的流信号解复用为视频数据、音频数据和信息数据,以将解复用的视频数据、音频数据和信息数据分别提供给视频解码器530、音频解码器520和控制器190。
音频解码器520可从解复用器510接收音频数据,并可恢复接收的音频数据,以将恢复的音频数据提供给缩放器540或音频输出单元160。
视频解码器530从解复用器510接收视频数据,并恢复接收的视频数据,以将恢复的视频数据提供给缩放器540。所述视频数据可包括3D视频数据。
缩放器540将由视频解码器530、控制器190和音频解码器520处理的视频数据和音频数据缩放为具有适当大小的信号,以通过显示器150或扬声器(未示出)输出所述视频和音频数据。更具体地,缩放器540接收3D图像并缩放3D图像以使其适合于显示器150的分辨率或规定的纵横比。根据产品规格,显示器150可适于输出具有预定分辨率(例如720x480、1024x768、1280x720、1280x768、1280x800、1920x540、1920x1080和4Kx2K)的图像。然后,缩放器540可将具有各种分辨率的3D图像的分辨率转换为对应显示器的分辨率。
缩放器540根据显示的内容类型或用户设置来调节3D图像的纵横比。所述纵横比可为16:9、4:3或3:a2。缩放器540可将水平画面长度与垂直画面长度的比率调节为特定比率。
混合器550将缩放器540和控制器190的输出混合。
FRC 560可接收从接收器101、缩放器540或混合器550产生的视频数据,并可处理接收的视频数据的帧频以对应于显示器150的帧频。例如,如果接收的视频数据的帧频为60Hz,并且如果显示器150的帧频为120Hz或240Hz,则FRC 560按照预定方法处理视频数据的帧频,以使得视频数据的帧频对应于显示器150的帧频(120Hz或240Hz)。所述预定方法包括对输入视频数据执行时间内插的时间内插方法、以及对输入视频数据中所包括的视频帧进行简单重复的简单重复方法。可根据输入3D图像的格式适当选择相应方法,并可通过FRC 50来执行相应方法。
时间内插方法将60Hz的输入视频信号划分为四等份(如,0、0.25、0.5、和0.75),以获得240Hz的视频信号。简单重复方法将60Hz输入视频信号的每一帧重复四次,以使得每一帧的频率变为240Hz。
FRC 560可接收从接收器101、缩放器540或混合器550产生的视频数据,并可处理接收的视频数据的帧频以对应于显示器150的帧频的一半。例如,如果接收的视频数据的帧频为60Hz,并且如果显示器150的帧频为120Hz,则FRC 560可将视频数据旁通至格式器670。如果接收的数据的帧频为60Hz,并且如果显示器150的帧频为240Hz,则FRC 560通过预定方法处理视频数据的帧频以对应于120Hz的帧频(显示器150的帧频的一半)。如果接收的视频数据的帧频为120Hz,并且如果显示器150的帧频为120Hz,则FRC 560可将视频数据的帧频转换为60Hz(显示器150的帧频的一半)。
显示器150的帧频是指通过显示器150显示或产生由格式器570构造的视频帧的垂直扫描频率。下文中,显示器150的帧频被定义为输出帧频或显示器垂直频率。
下面的表1示出FRC 560根据3D视频数据类型和输出帧频来调节帧频的实施例。
[表1]
Figure BDA00002271520800131
图6是示出FRC中的3D视频数据处理过程的示图。
参照图6,图6的(a)示出输入至FRC 560的特定频率(如,60Hz)的视频数据,图6的(b)示出帧频通过FRC 560被转换为显示器垂直频率(如,240Hz)的一半的视频数据。为了方便描述,示出上下格式的3D视频数据作为例子。然而,本发明不限于此,参照图3和图4描述的所有格式均可被应用。
参照图6的(a),输入至FRC 560的上下格式的60Hz的视频数据包括上下格式的四帧L1/R1、L2/R2、L3/R3和L4/R4。参照图6的(b),上下格式的视频数据通过FRC560被处理成具有显示器垂直频率的一半的帧频,从而产生上下格式的120Hz视频数据。即,在图6(b)中,存在两个L1/R1帧、两个L2/R2帧、两个L3/R3帧和两个L4/R4帧。即使使用上述视频数据转换方法中的任一种,均可获得图6(b)所示的帧。
格式器570对由接收器101或FRC 560产生的3D视频数据采样,并将采样的数据提供给显示器150。
图7是示出输入至格式器的左视图视频数据和右视图视频数据的示例性实施例的示图。
参照图7,格式器570可从接收器101或FRC 560接收左视图视频帧710和右视图视频帧720。格式器570可利用左视图视频帧710和右视图视频帧720产生第一视频帧和第二视频帧。左视图视频帧710和右视图视频帧720中每一个的分辨率可为720x480p、1280x720p、1920x1080i、1920x1080p和4Kx2K中的一个。如果3D图像显示模式为全图像模式,则格式器570可利用左视图视频帧710和右视图视频帧720产生第一视频帧和第二视频帧。格式器570可将产生的第一视频帧和第二视频帧提供给视频接口580。左视图视频帧710和右视图视频帧720形成一个3D图像。
格式器570可从接收器101或FRC 560接收左视图视频帧710的下一左视图视频帧和右视图视频帧720的下一右视图视频帧,并可利用接收的下一左视图视频帧和接收的下一右视图视频帧产生第一视频帧和第二视频帧。可按照与对应视频帧的帧频对应的时间间隔接收左视图视频帧和右视图视频帧。
在图7中,L指示左视图视频帧710中所包括的像素数据,R指示右视图视频帧720中所包括的像素数据。L或R之后的数字指示视频帧的行号。即,L1表示左视图视频帧710的第一行,L2表示左视图视频帧710的第二行,L3表示左视图视频帧710的第三行,R1表示右视图视频帧720的第一行,R2表示右视图视频帧720的第二行,R3表示右视图视频帧720的第三行。
在左视图视频帧710和右视图视频帧720交织的情况下,如果行号为奇数,则其指示奇数场的行,如果行号为偶数,则其指示偶数场的行。L1表示左视图视频帧710的奇数场的第一行,L3表示奇数场的第二行,L5表示奇数场的第三行。类似地,L2表示左视图视频帧710的偶数行的第一行,L4表示偶数场的第二行,L6表示偶数场的第三行。
图8是示出由根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第一实施例的构造的示图。
参照图8,格式器570可产生视频帧810作为第一视频帧,并产生视频帧820作为第二视频帧。视频帧810的第一行包括左视图视频帧710的第一行的像素数据L1,视频帧820的第一行包括左视图视频帧710的第二行的像素数据L2。
视频帧810的第二行包括右视图视频帧720的第一行的像素数据R1,视频帧810的第三行包括左视图视频帧710的第三行的像素数据L3,视频帧810的第四行包括右视图视频帧720的第三行的像素数据R3,视频帧810的第五行包括左视图视频帧710的第五行的像素数据L5。即,左视图视频帧710的每一奇数行的像素数据被包括在视频帧810的每一奇数行中,右视图视频帧720的每一奇数行的像素数据被包括在视频帧810的每一偶数行中。
视频帧820的第二行包括右视图视频帧720的第二行的像素数据R2,视频帧820的第三行包括左视图视频帧710的第四行的像素数据L4,视频帧820的第四行包括右视图视频帧720的第四行的像素数据R4,视频帧820的第五行包括左视图视频帧710的第六行的像素数据L6。即,左视图视频帧710的每一偶数行的像素数据被包括在视频帧820的每一奇数行中,右视图视频帧720的每一偶数行的像素数据被包括在视频帧820的每一偶数行中。
如图8所示,根据显示器150的左眼和右眼视频行的偏振次序,视频帧810和视频帧820的奇数行可包括左视图视频数据,视频帧810和视频帧820的偶数行可包括右视图视频数据。相反,视频帧810和视频帧820的奇数行可包括右视图视频数据,视频帧810和视频帧820的偶数行可包括左视图视频数据。下文中,视频帧的奇数行中所包括的像素数据被定义为奇数行数据,视频帧的偶数行中所包括的像素数据被定义为偶数行数据。
图9是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第二实施例的构造的示图。
参照图9,格式器570可产生视频帧910作为第一视频帧,可产生视频帧920作为第二视频帧。
左视图视频帧710的奇数行数据被包括在视频帧910的每一奇数行中,右视图视频帧720的偶数行数据被包括在视频帧910的每一偶数行中。
左视图视频帧710的偶数行数据被包括在视频帧920的每一奇数行中,右视图视频帧720的奇数行数据被包括在视频帧920的每一偶数行中。
根据显示器150的左眼和右眼视频行的偏振次序,视频帧910和视频帧920的奇数行可包括左视图视频数据,视频帧910和视频帧920的偶数行可包括右视图视频数据,如图9所示。相反,视频帧910和视频帧920的奇数行可包括右视图视频数据,视频帧910和视频帧920的偶数行可包括左视图视频数据。
图10是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第三实施例的构造的示图。
参照图10,格式器570可产生视频帧1010作为第一视频帧,并可产生视频帧1020作为第二视频帧。
左视图视频帧710的偶数行数据被包括在视频帧1010的每一奇数行中,右视图视频帧720的偶数行数据被包括在视频帧1010的每一偶数行中。
左视图视频帧710的奇数行数据被包括在视频帧1020的每一奇数行中,右视图视频帧720的奇数行数据被包括在视频帧1020的每一偶数行中。
根据显示器150的左眼和右眼视频行的偏振次序,视频帧1010和视频帧1020的奇数行可包括左视图视频数据,视频帧1010和视频帧1020的偶数行可包括右视图视频数据,如图10所示。相反,视频帧1010和视频帧1020的奇数行可包括右视图视频数据,视频帧1010和视频帧1020的偶数行可包括左视图视频数据。
图11是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第四实施例的构造的示图。
参照图11,格式器570可产生视频帧1110作为第一视频帧,可产生视频帧1120作为第二视频帧。
左视图视频帧710的偶数行数据被包括在视频帧1110的每一奇数行中,右视图视频帧720的奇数行数据被包括在视频帧1110的每一偶数行中。
左视图视频帧710的奇数行数据被包括在视频帧1120的每一奇数行中,右视图视频帧720的偶数行数据被包括在视频帧1120的每一偶数行中。
根据显示器150的左眼和右眼视频行的偏振次序,视频帧1110和视频帧1120的奇数行可包括左视图视频数据,视频帧1110和视频帧1120的偶数行可包括右视图视频数据,如图11所示。相反,视频帧1110和视频帧1120的奇数行可包括右视图视频数据,视频帧1110和视频帧1120的偶数行可包括左视图视频数据。
图12是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第五实施例的构造的示图。
参照图12,格式器570可产生视频帧1210作为第一视频帧,产生视频帧1220作为第二视频帧。视频帧1210和视频帧1220的第一行包括左视图视频帧的第一行的像素数据。即,视频帧1210的第一行中所包括的像素数据L1等于视频帧1220的第一行中所包括的像素数据L1。
视频帧1210的第二行包括右视图视频帧720的第一行的像素数据R1,视频帧1210的第三行包括左视图视频帧710的第二行的像素数据L2,视频帧1210的第四行包括右视图视频帧720的第三行的像素数据R3,视频帧1210的第五行包括左视图视频帧710的第四行的像素数据L4。即,左视图视频数据被包括在视频帧1210的每一奇数行中,右视图视频数据被包括在视频帧1210的每一偶数行中。另外,右视图视频帧720的奇数行数据被包括在视频帧1210的每一偶数行中。左视图视频帧710的偶数行数据被包括在视频帧1210的每一奇数行中(除第一行之外)。
视频帧1220的第二行包括右视图视频帧720的第二行的像素数据R2,视频帧1220的第三行包括左视图视频帧710的第三行的像素数据L3,视频帧1220的第四行包括右视图视频帧720的第四行的像素数据R4,视频帧1220的第五行包括左视图视频帧710的第五行的像素数据L5。即,左视图视频数据被包括在视频帧1220的每一奇数行中,右视图视频数据被包括在视频帧1220的每一偶数行中。另外,左视图视频帧710的奇数行数据被包括在视频帧1220的每一奇数行中,右视图视频帧720的偶数行数据被包括在视频帧1220的每一偶数行中。
根据显示器150的左眼和右眼视频行的偏振次序,视频帧1210和视频帧1220的奇数行可包括左视图视频数据,视频帧1210和视频帧1220的偶数行可包括右视图视频数据,如图12所示。相反,视频帧1210和视频帧1220的奇数行可包括右视图视频数据,视频帧1210和视频帧1220的偶数行可包括左视图视频数据。在这种情况下,在图12中,L和R互换,L和R之后的数字保持相同。
图13是示出根据本发明的电子装置所产生的第一视频帧和第二视频帧的像素数据的第六实施例的构造的示图。.
参照图13,格式器570可产生视频帧1310作为第一视频帧,产生视频帧1320作为第二视频帧。视频帧1310和视频帧1320的第一行包括左视图视频帧的第一行的像素数据。即,视频帧1310的第一行中所包括的像素数据L1等于视频帧1320的第一行中所包括的像素数据L1。
视频帧1310的第二行包括右视图视频帧720的第二行的像素数据R2,视频帧1310的第三行包括左视图视频帧710的第三行的像素数据L3,视频帧1310的第四行包括右视图视频帧720的第四行的像素数据R4,视频帧1310的第五行包括左视图视频帧710的第五行的像素数据L5。即,左视图视频数据被包括在视频帧1310的每一奇数行中,右视图视频数据被包括在视频帧1310的每一偶数行中。另外,右视图视频帧720的偶数行数据被包括在视频帧1310的每一偶数行中。左视图视频帧710的奇数行数据被包括在视频帧1310的每一奇数行中。
视频帧1320的第二行包括右视图视频帧720的第一行的像素数据R1,视频帧1320的第三行包括左视图视频帧710的第二行的像素数据L2,视频帧1220的第四行包括右视图视频帧720的第三行的像素数据R3,视频帧1320的第五行包括左视图视频帧710的第四行的像素数据L4。即,左视图视频帧710的偶数行数据被包括在视频帧1320的每一奇数行中(除了第一行之外),右视图视频帧720的奇数行数据被包括在视频帧1320的每一偶数行中。
根据显示器150的左眼和右眼视频行的偏振次序,视频帧1310和视频帧1320的奇数行可包括左视图视频数据,视频帧1310和视频帧1320的偶数行可包括右视图视频数据,如图13所示。相反,视频帧1310和视频帧1320的奇数行可包括右视图视频数据,视频帧1310和视频帧1320的偶数行可包括左视图视频数据。在这种情况下,在图13中,L和R互换,L和R之后的数字保持相同。
图14是解释垂直滤波的示图。
参照图14,格式器570可对左视图视频帧710和右视图视频帧720的奇数行数据或偶数行数据执行垂直滤波。
在产生第一视频帧和第二视频帧时,格式器570可不使用相邻行的信息执行滤波,而是可通过简单地从左视图视频帧710和右视图视频帧720提取奇数行数据和偶数行数据来构造第一视频帧和第二视频帧。
在产生第一视频帧和第二视频帧时,格式器570可利用相邻行的信息对左视图视频帧710和右视图视频帧720的奇数行数据和偶数行数据执行垂直滤波,并可利用经滤波的奇数行数据和经滤波的偶数行数据构造第一视频帧和第二视频帧。
下面的等式1示出垂直滤波:
[等式1] I ~ ( x , y ) = Σ k = - N N w k · I ( x , y + k ) Σ k = - N N w k
在等式1中,yn表示当前中心行1415的Y轴坐标值,I(x,yn+k)表示与当前中心行1415分开K行的行中的每一X轴值处的像素值,wk表示第K行的滤波器系数,
Figure BDA00002271520800192
表示经滤波的像素值,N表示将经受滤波的上或下相邻行的数目。这里,N可为预设值、由用户设置的值、或者根据分辨率和行位置中的至少一个设置的值。
视频帧1410可为左眼视频帧710和右眼视频帧720中的一个。视频帧1410中的中心行1415的滤波器系数为W0,行1414、1413和1411的滤波器系数分别为W-1、W-2和W-n,行1416、1417和1418的滤波器系数分别为W1、W2和Wn
视频帧1420可以是包括通过对中心行1415滤波而产生的行1425的第一视频帧或第二视频帧中的一个。格式器570可对视频帧1410的每一奇数行数据和每一偶数行数据执行等式1中所定义的滤波,从而计算经滤波的奇数行数据和经滤波的偶数行数据。
如果对于所有K,wk=w-k,则这意味着通过基于中心行1415上下对称地分配权重来执行滤波,如果否,则这意味着通过上下不对称地分配权重来执行滤波。如果没有执行滤波,则与w0=1、wk,k≠0=0的情况相同,即,仅中心行141的权重为1,其它行的权重为0。
视频接口580可将格式器570所产生的第一视频帧和第二视频帧提供给显示器150。视频接口580可为低压差分信号(LVDS)发送(Tx)输出接口。
图15是示出并列格式的60Hz的输入3D视频数据的示例性实施例的示图。图16是示出图15所示的3D视频数据的示例性实施例的示图,所述3D视频数据的帧频被调节。图17是示出利用图16所示的3D视频数据产生第一视频帧和第二视频帧的示例性实施例的示图。
参照图15至17,FRC 560可接收帧频为60Hz的并列格式的3D视频数据1500。3D视频数据1500包括3D视频帧1510、3D视频帧1520和3D视频帧1550。3D视频帧1510包括左视图视频数据L1和右视图视频数据R1,3D视频帧1520包括左视图视频数据L2和右视图视频数据R2,3D视频帧1550包括左视图视频数据L60和右视图视频数据R60。
如果输出帧频为240Hz,则FRC 560可在将3D视频数据1500的帧频转换为120Hz的同时产生3D视频帧,并可将产生的3D视频帧插入3D视频数据1500的3D视频帧之间。即,FRC 560产生3D视频帧1610、3D视频帧1620和3D视频帧1650。3D视频帧1610、1620和1650可通过参照图6描述的方法产生。FRC 560将3D视频帧1610插入3D视频帧1510和3D视频帧1520之间,将3D视频帧1620插入3D视频帧1520之后,并将3D视频帧1650插入3D视频帧1550之后,从而将3D视频数据1500转换为3D视频数据1600。
FRC 560将帧频为120Hz的3D视频数据1600提供给格式器570。FRC 560可产生3D视频帧1620,同时顺序地产生位于3D视频帧1620前面的3D视频帧1510、1610和1520。
格式器570基于FRC 560所产生的3D视频数据1600中所包括的3D视频帧产生第一视频帧和第二视频帧。产生的第一视频帧和第二视频帧可为图8至图13所示的第一视频帧和第二视频帧。
格式器570利用3D视频帧1510产生第一视频帧1511和第二视频帧1512。格式器570利用3D视频帧1610产生第一视频帧1611和第二视频帧1612。格式器570利用3D视频帧1520产生第一视频帧1521和第二视频帧1522。
格式器570利用3D视频帧1620产生第一视频帧1621和第二视频帧1622。在接收到3D视频帧1550时,格式器570产生第一视频帧1551和第二视频帧1552。接下来,格式器570利用3D视频帧1650产生第一视频帧1651和第二视频帧1652。
图18是示出根据本发明的3D图像显示处理的示例性实施例的流程图。
参照图18,格式器570接收3D视频数据(步骤S100)。所述3D视频数据可从接收器101、缩放器540、混合器550和FRC 560产生,或者可具有结合图3和图4描述的格式。格式器570可顺序地接收包括在3D视频数据中的3D视频帧。所述3D视频帧可包括图7所示的左视图视频帧710和右视图视频帧710。
格式器570利用接收的3D视频数据产生第一视频帧和第二视频帧(步骤S110)。所述第一视频帧和第二视频帧可以是结合图8至图15中每一个描述的第一视频帧和第二视频帧。根据参照图16和图17描述的方法,格式器570可利用一个3D视频帧产生第一视频帧和第二视频帧。
显示器150扫描格式器570所产生的第一视频帧和第二视频帧(步骤S120)。显示器150可根据输出帧频来扫描第一视频帧和第二视频帧。
图19是示出根据本发明的3D图像显示处理的另一示例性实施例的流程图。
参照图19,格式器570接收3D视频数据(步骤S200)。所述3D视频数据可从接收器101、缩放器540、混合器550和FRC 560产生,或者可具有结合图3和图4描述的格式。格式器570可顺序地接收包括在3D视频数据中的3D视频帧。所述3D视频帧可包括图7所示的左视图视频帧710和右视图视频帧720。
格式器570对接收的3D视频数据执行垂直滤波(步骤S210)。格式器570可对接收的3D视频数据中所包括的3D视频帧的奇数行数据和偶数行数据执行垂直滤波。格式器570可根据等式1执行垂直滤波。
格式器570利用经垂直滤波的3D视频数据产生第一视频帧和第二视频帧(步骤S220)。所述第一视频帧和第二视频帧可以是图8至图13中每一个所示的第一视频帧和第二视频帧。根据结合图16和图17描述的方法,格式器570可利用一个3D视频帧产生第一视频帧和第二视频帧。
显示器150扫描格式器570所产生的第一视频帧和第二视频帧(步骤S230)。显示器150可根据输出帧频来扫描第一视频帧和第二视频帧。
图20是示出根据本发明的3D图像显示处理的另一示例性实施例的流程图。
参照图20,FRC 560接收3D视频数据(步骤S300)。所述3D视频数据可从接收器101、缩放器540和混合器550产生,或者可具有结合图3和图4描述的格式。
FRC 560调节接收的3D视频数据的帧频(步骤S310)。FRC 560可将3D视频数据的帧频转换为输出帧频的一半。即,FRC 560可根据表1所示的示例调节3D视频数据的帧频。FRC 560还可通过图6所示的方法调节帧频。FRC 560可根据图15和图16所示的方法产生3D视频帧,并可通过将产生的3D视频帧插入3D视频数据中来调节帧频。
格式器570利用帧频被调节的3D视频数据产生第一视频帧和第二视频帧(步骤S320)。格式器570可从FRC 560顺序地接收3D视频数据中所包括的3D视频帧。所述3D视频帧可包括图7所示的左视图视频帧710和右视图视频帧720。
所述第一视频帧和第二视频帧可以是图8至图13中的每一个所示的第一视频帧和第二视频帧。根据图16和图17所示的方法,格式器570可利用一个3D视频帧产生第一视频帧和第二视频帧。
格式器570可对3D视频数据执行垂直滤波,并可利用经垂直滤波的3D视频数据产生第一视频帧和第二视频帧。
显示器150扫描格式器570所产生的第一视频帧和第二视频帧(步骤S330)。显示器150可根据输出帧频扫描第一视频帧和第二视频帧。
本发明可实现为能够写在计算机可读记录介质上并因此可由计算机读取的代码。所述计算机可读记录介质包括以计算机可读方式存储数据的所有类型的记录装置。计算机可读记录介质的示例包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储器和载波(如,通过互联网的数据传输)。计算机可读记录介质可分布于通过网络连接的多个计算机装置上,以使得计算机可读代码以分布方式写入多个计算机装置并从多个计算机装置执行。
工业可应用性
对于本领域技术人员将明显的是,在不脱离本发明的精神或范围的情况下,可对本发明进行各种修改和变形。因此,本发明意在覆盖对本发明的这些修改和变形,只要其落在所附权利要求及其等同物的范围内。

Claims (20)

1.一种三维(3D)图像显示方法,所述3D图像显示方法包括以下步骤:
接收包括左视图视频数据和右视图视频数据的3D视频数据;
基于所述左视图视频数据和所述右视图视频数据产生第一视频帧和第二视频帧,其中所述第一视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第一像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第二像素数据包括在偶数行中,并且其中所述第二视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第三像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第四像素数据包括在偶数行中;以及
输出所述第一视频帧和所述第二视频帧。
2.根据权利要求1所述的3D图像显示方法,其中所述第一像素数据是奇数行数据,所述第二像素数据是奇数行数据,所述第三像素数据是偶数行数据,所述第四像素数据是偶数行数据。
3.根据权利要求1所述的3D图像显示方法,其中所述第一像素数据是奇数行数据,所述第二像素数据是偶数行数据,所述第三像素数据是偶数行数据,所述第四像素数据是奇数行数据。
4.根据权利要求1所述的3D图像显示方法,其中所述第一像素数据是偶数行数据,所述第二像素数据是偶数行数据,所述第三像素数据是奇数行数据,所述第四像素数据是奇数行数据。
5.根据权利要求1所述的3D图像显示方法,其中所述第一视频帧的第一行中所包括的像素数据等于所述第二视频帧的第一行中所包括的像素数据。
6.根据权利要求5所述的3D图像显示方法,其中所述第一视频帧的第二奇数行中所包括的像素数据是偶数行数据,所述第二视频帧的第二奇数行中所包括的像素数据是奇数行数据。
7.根据权利要求5所述的3D图像显示方法,其中所述第一视频帧的第二奇数行中所包括的像素数据是奇数行数据,所述第二视频帧的第二奇数行中所包括的像素数据是偶数行数据。
8.根据权利要求1所述的3D图像显示方法,其中所述第一视频帧和所述第二视频帧两个帧形成一个3D图像。
9.根据权利要求1所述的3D图像显示方法,其中产生所述第一帧和所述第二帧的步骤包括对所述左视图视频数据和所述右视图视频数据执行垂直滤波。
10.根据权利要求9所述的3D图像显示方法,其中所述左视图视频数据和所述右视图视频数据中的每一个的分辨率是720×480p、1280×720p、1920×1080i、1920×1080p和4K×2K中的一个,如果所述分辨率为720×480p,则所述第一视频帧和所述第二视频帧具有720×480p的分辨率,如果所述分辨率为1280×720p,则所述第一视频帧和所述第二视频帧具有1280×720p的分辨率,如果所述分辨率是1920×1080i和1920×1080p中的一个,则所述第一视频帧和所述第二视频帧具有1920×1080p的分辨率,如果所述分辨率为4K×2K,则所述第一视频帧和所述第二视频帧具有4K×2K的分辨率。
11.一种三维(3D)图像显示方法,所述3D图像显示方法包括以下步骤:
接收包括左视图视频数据和右视图视频数据的3D视频数据;
将所述左视图视频数据和所述右视图视频数据中的每一个的帧频转换为输出帧频的一半;
基于具有经转换的帧频的左视图视频数据和具有经转换的帧频的右视图视频数据产生第一视频帧和第二视频帧,其中所述第一视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第一像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第二像素数据包括在偶数行中,并且其中所述第二视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第三像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第四像素数据包括在偶数行中;
输出所述第一视频帧和所述第二视频帧。
12.一种电子装置,所述电子装置包括:
接收器,其被构造为接收包括左视图视频数据和右视图视频数据的三维(3D)视频数据;
格式器,其被构造为产生第一视频帧和第二视频帧,其中所述第一视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第一像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第二像素数据包括在偶数行中,并且其中所述第二视频帧将所述左视图视频帧和所述右视图视频帧中的一个的第三像素数据包括在奇数行中,并将所述左视图视频帧和所述右视图视频帧中的另一个的第四像素数据包括在偶数行中;以及
显示器,其被构造为扫描所述第一视频帧和所述第二视频帧。
13.根据权利要求12所述的电子装置,
其中所述第一像素数据是奇数行数据和偶数行数据中的一个,
如果所述第一像素数据是奇数行数据,则所述第二像素数据是奇数行数据,所述第三像素数据是偶数行数据,所述第四像素数据是偶数行数据,并且
如果所述第一像素数据是偶数行数据,则所述第二像素数据是偶数行数据,所述第三像素数据是奇数行数据,所述第四像素数据是奇数行数据。
14.根据权利要求12所述的电子装置,其中所述第一像素数据是奇数行数据,所述第二像素数据是偶数行数据,所述第三像素数据是偶数行数据,所述第四像素数据是奇数行数据。
15.根据权利要求12所述的电子装置,其中所述第一视频帧的第一行中所包括的像素数据等于所述第二视频帧的第一行中所包括的像素数据。
16.根据权利要求15所述的电子装置,
其中所述第一视频帧的第二奇数行中所包括的像素数据是偶数行数据和奇数行数据中的一个,
如果所述第一视频帧的第二奇数行中所包括的像素数据是偶数行数据,则所述第二视频帧的第二奇数行中所包括的像素数据是奇数行数据,并且
如果所述第一视频帧的第二奇数行中所包括的像素数据是奇数行数据,则所述第二视频帧的第二奇数行中所包括的像素数据是偶数行数据。
17.根据权利要求12所述的电子装置,其中所述第一视频帧和所述第二视频帧两个帧形成一个3D图像。
18.根据权利要求12所述的电子装置,其中所述格式器对所述左视图视频数据和所述右视图视频数据执行垂直滤波。
19.根据权利要求12所述的电子装置,其中所述左视图视频数据和所述右视图视频数据中的每一个的分辨率是720×480p、1280×720p、1920×1080i、1920×1080p和4K×2K中的一个,如果所述分辨率为720×480p,则所述第一视频帧和所述第二视频帧具有720×480p的分辨率,如果所述分辨率为1280×720p,则所述第一视频帧和所述第二视频帧具有1280×720p的分辨率,如果所述分辨率是1920×1080i和1920×1080p中的一个,则所述第一视频帧和所述第二视频帧具有1920×1080p的分辨率,如果所述分辨率为4K×2K,则所述第一视频帧和所述第二视频帧具有4K×2K的分辨率。
20.根据权利要求12所述的电子装置,该电子装置还包括帧频转换器,所述帧频转换器被构造为将所述左视图视频数据和所述右视图视频数据中的每一个的帧频转换为输出帧频的一半。
CN201180019654.3A 2010-02-22 2011-02-22 电子装置和再现三维图像的方法 Expired - Fee Related CN102844696B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US30690910P 2010-02-22 2010-02-22
US61/306,909 2010-02-22
KR10-2011-0014769 2011-02-18
KR1020110014769A KR20110096494A (ko) 2010-02-22 2011-02-18 전자 장치 및 입체영상 재생 방법
PCT/KR2011/001159 WO2011102699A2 (ko) 2010-02-22 2011-02-22 전자 장치 및 입체영상 재생 방법

Publications (2)

Publication Number Publication Date
CN102844696A true CN102844696A (zh) 2012-12-26
CN102844696B CN102844696B (zh) 2015-11-25

Family

ID=44931719

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180019654.3A Expired - Fee Related CN102844696B (zh) 2010-02-22 2011-02-22 电子装置和再现三维图像的方法

Country Status (5)

Country Link
US (1) US9392253B2 (zh)
EP (1) EP2541305A4 (zh)
KR (1) KR20110096494A (zh)
CN (1) CN102844696B (zh)
WO (1) WO2011102699A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106888373A (zh) * 2017-03-29 2017-06-23 京东方科技集团股份有限公司 一种三维图像的处理装置及处理系统

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110134211A1 (en) * 2009-12-08 2011-06-09 Darren Neuman Method and system for handling multiple 3-d video formats
US9049426B2 (en) * 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
KR20120020627A (ko) * 2010-08-30 2012-03-08 삼성전자주식회사 3d 영상 포맷을 이용한 영상 처리 장치 및 방법
US8786685B1 (en) * 2010-09-15 2014-07-22 Rockwell Collins, Inc. Full-resolution single-LCD stereoscopic display
KR101814798B1 (ko) * 2011-01-26 2018-01-04 삼성전자주식회사 입체영상 처리 장치 및 방법
US8953016B2 (en) * 2011-09-01 2015-02-10 Mediatek Inc. Apparatus and method for generating polarized video stream according to multi-view video stream and motion information derived from multi-view video stream
CN102540574B (zh) * 2012-02-29 2014-06-25 深圳市华星光电技术有限公司 三维显示面板及三维显示系统
CN102724539B (zh) * 2012-06-11 2016-08-10 京东方科技集团股份有限公司 一种3d显示方法及显示装置
CN102752617B (zh) * 2012-07-09 2015-02-18 京东方科技集团股份有限公司 一种3d显示方法及显示装置
KR102219419B1 (ko) * 2013-03-12 2021-02-24 한국전자통신연구원 비대칭 종횡비 영상을 이용한 3d 방송 서비스 제공 방법 및 장치, 그리고, 3d 방송 서비스 재생 방법 및 장치
JP2014225718A (ja) * 2013-05-15 2014-12-04 ソニー株式会社 画像処理装置および画像処理方法
US9967546B2 (en) 2013-10-29 2018-05-08 Vefxi Corporation Method and apparatus for converting 2D-images and videos to 3D for consumer, commercial and professional applications
US20150116458A1 (en) 2013-10-30 2015-04-30 Barkatech Consulting, LLC Method and apparatus for generating enhanced 3d-effects for real-time and offline appplications
US20150253974A1 (en) 2014-03-07 2015-09-10 Sony Corporation Control of large screen display using wireless portable computer interfacing with display controller
CN104065944B (zh) * 2014-06-12 2016-08-17 京东方科技集团股份有限公司 一种超高清三维转换装置及三维显示系统
US10158847B2 (en) 2014-06-19 2018-12-18 Vefxi Corporation Real—time stereo 3D and autostereoscopic 3D video and image editing

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0870475A (ja) * 1994-06-23 1996-03-12 Sanyo Electric Co Ltd 立体動画像の符号化・復号化方法及び装置
US6075556A (en) * 1994-06-23 2000-06-13 Sanyo Electric Co., Ltd. Three-dimensional image coding by merger of left and right images
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
CA2380105A1 (en) * 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
DE19652803C1 (de) 1996-12-18 1998-06-18 Siemens Nixdorf Inf Syst Verfahren und Schaltungsanordnung zum Konvertieren des Bildformates von mit Zeilenpolarisation hergestellten dreidimensionalen elektronischen Bildern
WO2005079078A1 (ja) 2004-02-17 2005-08-25 Seijiro Tomita 立体映像記録・再生方法並びにこれを表示する立体映像表示装置
US7670004B2 (en) * 2006-10-18 2010-03-02 Real D Dual ZScreen® projection
TWI319677B (en) * 2006-10-20 2010-01-11 Quanta Comp Inc Method for displaying stereoscopic image and display system thereof
EP2153670A4 (en) * 2007-06-11 2011-03-09 Samsung Electronics Co Ltd METHOD AND DEVICE FOR GENERATING HEADLINE INFORMATION ON A STEREOSCOPIC IMAGE
US8922621B2 (en) * 2007-10-19 2014-12-30 Samsung Electronics Co., Ltd. Method of recording three-dimensional image data
US8289998B2 (en) * 2009-02-13 2012-10-16 Samsung Electronics Co., Ltd. Method and apparatus for generating three (3)-dimensional image data stream, and method and apparatus for receiving three (3)-dimensional image data stream
KR101372376B1 (ko) * 2009-07-07 2014-03-14 경희대학교 산학협력단 디지털 방송 시스템의 스테레오스코픽 비디오 수신 방법
US8643698B2 (en) * 2009-08-27 2014-02-04 Broadcom Corporation Method and system for transmitting a 1080P60 video in 1080i format to a legacy 1080i capable video receiver without resolution loss

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0870475A (ja) * 1994-06-23 1996-03-12 Sanyo Electric Co Ltd 立体動画像の符号化・復号化方法及び装置
US6075556A (en) * 1994-06-23 2000-06-13 Sanyo Electric Co., Ltd. Three-dimensional image coding by merger of left and right images
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
CA2380105A1 (en) * 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
CN1647546A (zh) * 2002-04-09 2005-07-27 特格感官技术公司 立体视频序列编码系统和方法
US20090219382A1 (en) * 2002-04-09 2009-09-03 Sensio Technologies Inc. Process and system for encoding and playback of stereoscopic video sequences

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106888373A (zh) * 2017-03-29 2017-06-23 京东方科技集团股份有限公司 一种三维图像的处理装置及处理系统

Also Published As

Publication number Publication date
CN102844696B (zh) 2015-11-25
EP2541305A2 (en) 2013-01-02
KR20110096494A (ko) 2011-08-30
US9392253B2 (en) 2016-07-12
WO2011102699A3 (ko) 2011-12-29
WO2011102699A2 (ko) 2011-08-25
EP2541305A4 (en) 2015-04-08
US20110254929A1 (en) 2011-10-20

Similar Documents

Publication Publication Date Title
CN102844696B (zh) 电子装置和再现三维图像的方法
CN102223555B (zh) 图像显示装置及其控制方法
US20130093844A1 (en) Electronic apparatus and display control method
CN103369335A (zh) 图像显示设备及其操作方法
RU2598989C2 (ru) Устройство отображения трехмерного изображения и способ отображения для такового
CN103024410A (zh) 图像显示设备及其操作方法
EP2466363A1 (en) Display apparatus and method for processing image thereof
JP2012186652A (ja) 電子機器、画像処理方法及び画像処理プログラム
US20130120527A1 (en) Electronic apparatus and display control method
US20110085029A1 (en) Video display apparatus and video display method
JP5025768B2 (ja) 電子機器及び画像処理方法
US9117387B2 (en) Image display apparatus and method for operating the same
US9547933B2 (en) Display apparatus and display method thereof
JP2012104898A (ja) 画像処理装置、画像処理方法およびプログラム
CN102892024A (zh) 3d显示设备及其内容显示方法
KR101741432B1 (ko) 영상표시장치 및 그 동작방법
KR101804912B1 (ko) 입체영상 디스플레이 장치 및 입체영상 자막 디스플레이 방법
KR101913252B1 (ko) 입체영상 처리 장치 및 입체영상 디스플레이 방법
KR101227518B1 (ko) 전자 장치 및 입체영상 디스플레이 방법
KR20120102947A (ko) 전자 장치 및 입체영상 디스플레이 방법
KR20140145862A (ko) 해상도를 증가시킬 수 있는 무안경 방식의 영상표시장치
KR20120063388A (ko) 전자 장치 및 입체영상 재생 방법
KR20140055124A (ko) 영상표시장치, 및 그 동작방법
KR20140098512A (ko) 영상표시장치 및 그 동작방법
KR20130010612A (ko) 입체영상 디스플레이 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20151125

Termination date: 20200222

CF01 Termination of patent right due to non-payment of annual fee