CN101877795B - 立体图像数据发送、接收和中继方法以及其设备 - Google Patents

立体图像数据发送、接收和中继方法以及其设备 Download PDF

Info

Publication number
CN101877795B
CN101877795B CN2010101674944A CN201010167494A CN101877795B CN 101877795 B CN101877795 B CN 101877795B CN 2010101674944 A CN2010101674944 A CN 2010101674944A CN 201010167494 A CN201010167494 A CN 201010167494A CN 101877795 B CN101877795 B CN 101877795B
Authority
CN
China
Prior art keywords
eye image
image data
timing
data
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2010101674944A
Other languages
English (en)
Other versions
CN101877795A (zh
Inventor
泷塚博志
武中康一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Sony Corp
Original Assignee
Sony Corp
Sony Computer Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Computer Entertainment Inc filed Critical Sony Corp
Priority to CN201210258065.7A priority Critical patent/CN102811361B/zh
Publication of CN101877795A publication Critical patent/CN101877795A/zh
Application granted granted Critical
Publication of CN101877795B publication Critical patent/CN101877795B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/167Synchronising or controlling image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/12Use of DVI or HDMI protocol in interfaces along the display data pipeline

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

公开了立体图像数据发送方法和设备、接收方法和设备以及中继方法和设备。盘播放器通过HDMI线缆将用于显示立体图像的左眼图像数据和右眼图像数据发送到电视机。如果在盘播放器中再现的左眼图像数据和右眼图像数据的图像定时与在电视机中显示的左眼图像和右眼图像的显示定时不同,则盘播放器或电视机校正左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。盘播放器使用从电视机获取的显示定时信息。电视机使用从盘播放器获取的图像定时信息。

Description

立体图像数据发送、接收和中继方法以及其设备
技术领域
本发明涉及发送设备、立体图像数据发送方法、接收设备、立体图像数据接收方法、中继设备和立体图像数据中继方法,具体而言,涉及发送包含用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据的发送设备等。
背景技术
近来,作为高速发送数字视频信号(即,未压缩(基带)视频信号(图像数据))以及伴随例如从数字多功能盘(DVD)记录器、机顶盒或另一视听(AV)源到电视机、投影仪或另一显示器的视频信号的数字音频信号(音频数据)的通信接口,诸如高清多媒体接口(HDMI)之类的接口已经得到普及。例如,2006年11月10日的高清多媒体接口规范版本1.3a中描述了HDMI标准的细节。
发明内容
例如,可以假设将包含用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据从AV源发送到显示器,并且在显示器中使用双眼视差来显示立体图像。
大致存在关于显示定时的两种立体图像显示方案。一种是同步显示左眼图像和右眼图像的方案。该方案包括立体照片(anaglyph)方法、偏振眼镜方法和裸眼方法。另一种是交替地显示左眼图像和右眼图像的方案。该方案包括快门眼镜方法。
在立体照片方法中,形成使用了两种互补色(通常,红和蓝)并且建立了双眼视差的左眼图像和右眼图像,并且使用配备有滤色镜(其不具有公共的通过波长带)的眼镜来针对左右眼单独地呈现图像。在偏振眼镜方法中,通过使用偏振平面彼此正交的两个线性偏振光线来形成左眼图像和右眼图像,并且使用配备有偏振滤光器的眼镜来针对左右眼单独地呈现图像。
在裸眼方法、自动-立体方法以及没有眼镜的3D系统中,在显示器上交替地显示作为左眼图像和右眼图像的垂直带状分割图像,并且使用视差隔板(barrier)或透镜板(lenticular sheet)来针对左右眼单独地呈现图像。在快门眼镜方法中,例如以两倍帧速交替地显示左眼图像和右眼图像,并且使用配备有液晶快门的眼镜来针对左右眼单独地呈现图像。
进一步,大致存在关于图像定时的两种左眼图像数据和右眼图像数据。一种是通过同步捕获左眼图像和右眼图像而获得的左眼图像数据和右眼图像数据。在这种情况下,例如通过与双透镜相机的使用同时地同步捕获左和右图像而获得左眼图像数据和右眼图像数据。
另一种是通过以两倍帧速交替地捕获左眼图像和右眼图像而获得的左眼图像数据和右眼图像数据。在这种情况下,例如,在具有液晶快门、棱镜等的结构中,通过使用单透镜相机以两倍帧速交替地捕获左右图像而获得左眼图像数据和右眼图像数据。
如上所述,在从AV源向显示器发送包含用于显示立体图像的左眼图像数据和右眼图像数据并且在显示器中通过使用双眼视差来显示立体图像的情况下,如果左眼图像数据和右眼图像数据的图像定时不同于左眼图像和右眼图像的显示定时,则存在诸如带有运动的图像质量下降以及观众疲劳增加之类的缺点。
存在图像定时与显示定时不同的两种情况。一种是通过交替地成像而获得左眼图像数据和右眼图像数据,并且同步显示左眼图像和右眼图像。另一种是通过同步成像而获得左眼图像数据和右眼图像数据,并且交替地显示左眼图像和右眼图像。
上述AV源可以是游戏机。在游戏机中,动态地产生用于显示作为游戏图像的立体图像数据的左眼图像数据和右眼图像数据。作为在游戏机中产生的左眼图像数据和右眼图像数据的定时(其为与图像定时对应的定时),左眼图像数据和右眼图像数据可以是同步的,或者左眼图像数据和右眼图像数据可以是以两倍帧速交替的。在游戏机中产生的左眼图像数据和右眼图像数据的定时不同于显示器中左眼图像和右眼图像的显示定时的情况下,也存在诸如带有运动的图像质量下降和观众疲劳增加之类的缺点。
考虑到前述问题,期望在不增加用于操作或设置的用户工作量的情况下,改进带有运动的图像的质量,并减少观众疲劳。
根据本发明的一实施方式,提供了如下的发送设备,其包括:图像数据输出单元,输出用于显示立体图像的左眼图像数据和右眼图像数据;定时校正单元,校正从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的定时;以及数据发送单元,通过传输路径将包括从所述定时校正单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置,其中,所述定时校正单元基于左眼图像和右眼图像的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
根据本发明的一实施方式,提供了如下的接收设备,其包括:数据接收单元,通过传输路径从外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;数据处理单元,处理由所述数据接收单元接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;以及信息提供单元,通过所述传输路径将基于由所述数据处理单元获得的左眼图像数据的左眼图像和基于由所述数据处理单元获得的右眼图像数据的右眼图像的显示定时信息提供给所述外部装置,其中,所述数据接收单元从所述外部装置接收包括定时与左眼图像和右眼图像的显示定时一致的左眼图像数据和右眼图像数据的立体图像数据。
在发送设备中,数据发送单元通过传输路径将包括从图像数据输出单元输出的用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置(接收设备)。在接收设备中,数据接收单元通过传输路径从外部装置(发送设备)接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据,并且数据处理单元处理立体图像数据,并获得左眼图像数据和右眼图像数据。
发送设备基于左眼图像和右眼图像的显示定时信息,通过定时校正单元调整从图像数据输出单元输出的左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。例如,发送设备通过信息获取单元经由传输路径从外部装置(接收设备)获取左眼图像数据和右眼图像数据的显示定时信息。进一步,例如,发送设备使用指示由用户设置单元设置的左眼图像和右眼图像的显示定时的信息,作为左眼图像和右眼图像的显示定时信息。
接收设备通过数据接收单元接收包括定时与左眼图像和右眼图像的显示定时一致的左眼图像数据和右眼图像数据的立体图像数据。在发送设备如上所述获取左眼图像和右眼图像的显示定时信息的情况下,接收设备通过传输路径将显示定时信息提供给外部装置(发送设备)。
例如,发送设备的数据发送单元通过多个信道利用差分信号而经由传输路径将立体图像数据发送到外部装置。然后,例如,发送设备的信息获取单元从外部装置(接收设备)中包括的存储单元(如EDID ROM)获取左眼图像和右眼图像的显示定时信息。
例如,发送设备的定时校正单元校正左眼图像数据和右眼图像数据二者的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。这允许定时校正时左右图像的图像质量的恶化变得几乎相同。
进一步,例如,发送设备的定时校正单元校正左眼图像数据和右眼图像数据之一的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。例如,发送设备进一步包括图像数据选择单元,其从左眼图像数据和右眼图像数据中选择要校正定时的一个图像数据。在这种情况下,通过选择用于对非主眼显示图像的图像数据作为要校正定时的一个图像数据,可以抑制定时校正期间图像质量的恶化。
如上所述,在发送设备中,将校正定时以便与左眼图像和右眼图像的显示定时一致的左眼图像数据和右眼图像数据发送到外部装置(接收设备)。因此,在接收设备中,接收到的左眼图像数据和右眼图像数据的定时与基于这些图像数据而显示的左眼图像和右眼图像的显示定时彼此一致。由此可以提高带有运动的图像的质量,并减少观众疲劳。进一步,在发送设备从接收设备获取左眼图像和右眼图像的显示定时信息并基于显示定时信息校正左眼图像数据和右眼图像数据的定时的情况下,用于操作或设置的用户工作量没有增加,并且由于不存在用户的错误操作或设置,因此总是可以进行精确的定时校正。
根据本发明的一实施方式,提供了如下的接收设备,其包括:数据接收单元,通过传输路径从外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;数据处理单元,处理由所述数据接收单元接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;以及定时校正单元,校正由所述数据处理单元获得的左眼图像数据和右眼图像数据的定时,其中,所述定时校正单元调整左眼图像数据和右眼图像数据的定时以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致。
根据本发明的一实施方式,提供了一种发送设备,其包括:图像数据输出单元,输出用于显示立体图像的左眼图像数据和右眼图像数据;数据发送单元,通过传输路径将包括从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及信息提供单元,通过传输路径将从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的图像定时信息提供给所述外部装置。
在该实施方式中,发送设备通过数据发送单元经由传输路径将包括从图像数据输出单元输出的、用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置(接收设备)。接收设备通过数据接收单元从外部装置(发送设备)接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据,并且通过数据处理单元处理立体图像数据并获得左眼图像数据和右眼图像数据。
接收设备通过定时校正单元调整接收到的左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。例如,接收设备通过信息获取单元经由传输路径而从外部装置(发送设备)获取左眼图像数据和右眼图像数据的图像定时信息。进一步,例如,接收设备使用指示用户设置单元所设置的左眼图像数据和右眼图像数据的定时的信息。可替代地,例如,接收设备在假设左眼图像数据和右眼图像数据的定时相同的情况下执行定时校正。
例如,接收设备的数据接收单元通过多个信道利用差分信号而经由传输路径从外部装置接收立体图像数据。在接收设备如上所述那样获取左眼图像数据和右眼图像数据的图像定时信息的情况下,发送设备通过传输路径将图像定时信息提供到外部装置(接收设备)。然后,数据接收单元的信息获取单元通过从数据接收单元接收到的立体图像数据的消隐中提取信息来获取左眼图像数据和右眼图像数据的图像定时信息。
例如,接收设备的定时校正单元校正左眼图像数据和右眼图像数据二者的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。这允许定时校正时左右图像的图像质量的恶化变得几乎相同。
进一步,例如,接收设备的定时校正单元校正左眼图像数据和右眼图像数据之一的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。例如,接收设备进一步包括图像数据选择单元,其从左眼图像数据和右眼图像数据中选择要校正定时的一个图像数据。在这种情况下,通过选择用于对非主眼显示图像的图像数据作为要校正定时的一个图像数据,可以抑制在定时校正期间图像质量的恶化。
此外,当图像定时信息指示交替地捕获左眼图像数据和右眼图像数据并且左眼图像和右眼图像的显示定时相同时,接收设备的定时校正单元通过将左眼图像数据和右眼图像数据转换为具有两倍帧速的图像数据,来调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。在这种情况下,由于以两倍帧速显示左眼图像和右眼图像,因此可以减少余像。进一步,在通过使用之前和之后图像数据的内插来获得具有两倍帧速的图像数据的情况下,可以显示具有平滑运动的图像。
如上所述,在接收设备中,调整从外部装置(发送设备)接收到的左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。因此,在接收设备中,左眼图像数据和右眼图像数据的定时与基于这些图像数据的左眼图像和右眼图像的显示定时彼此一致。由此可以提高带有运动的图像的质量,并减少观众疲劳。
进一步,在接收设备从发送设备获取左眼图像数据和右眼图像数据的图像定时信息并基于图像定时信息校正左眼图像数据和右眼图像数据的定时的情况下,用于操作或设置的用户工作量没有增加,并且由于不存在用户的错误操作或设置,因此总是可以进行精确的定时校正。
根据本发明的一实施方式,提供了如下的发送设备,其包括:图像数据产生单元,动态地产生用于显示立体图像的左眼图像数据和右眼图像数据;以及数据发送单元,通过传输路径将包括所述图像数据产生单元中产生的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置,其中,所述图像数据产生单元基于左眼图像和右眼图像的显示定时,调整动态地产生的左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。
在该实施方式中,发送设备通过图像数据产生单元动态地产生用于显示立体图像的左眼图像数据和右眼图像数据。然后,发送设备通过数据发送单元经由传输路径将包括图像数据产生单元中所产生的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置。
发送设备通过图像数据产生单元调整动态地产生的左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。例如,发送设备通过信息获取单元经由传输路径从外部装置(接收设备)获取左眼图像和右眼图像的显示定时信息。进一步,例如,发送设备使用指示由用户设置单元设置的左眼图像和右眼图像的显示定时的信息作为左眼图像和右眼图像的显示定时信息。
例如,发送设备的数据发送单元通过多个信道利用差分信号而经由传输路径将立体图像数据发送到外部装置。然后,例如,发送设备的信息获取单元从外部装置(接收设备)中包括的存储单元(如EDID ROM)中获取左眼图像和右眼图像的显示定时信息。
如上所述,在发送设备中,将校正定时以便与左眼图像和右眼图像的显示定时一致的左眼图像数据和右眼图像数据发送到外部装置。因此,在外部装置中,接收到的左眼图像数据和右眼图像数据的定时与基于这些图像数据而显示的左眼图像和右眼图像的显示定时彼此一致。由此可以提高带有运动的图像的质量,并减少观众疲劳。进一步,在发送设备从接收设备获取左眼图像和右眼图像的显示定时信息并基于显示定时信息调整由图像数据产生单元产生的左眼图像数据和右眼图像数据的定时的情况下,用于操作或设置的用户工作量没有增加,并且由于不存在用户的错误操作或设置,因此总是可以进行精确的定时调整。
根据本发明的一实施方式,提供了如下的中继设备,其包括:数据接收单元,通过第一传输路径从第一外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;数据处理单元,处理由所述数据接收单元接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;定时校正单元,校正由所述数据处理单元获得的左眼图像数据和右眼图像数据的定时;以及数据发送单元,通过第二传输路径将包括从所述校正单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到第二外部装置,其中,所述定时校正单元调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。
在该实施方式中,中继设备通过数据接收单元经由传输路径从第一外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据,并且通过数据处理单元处理立体图像数据并获得左眼图像数据和右眼图像数据。中继设备通过定时校正单元校正左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。然后,中继设备通过数据发送单元经由第二传输路径将包括校正了定时的左眼图像数据和右眼图像数据的立体图像数据发送到第二外部装置。
例如,中继设备通过第一信息获取单元经由第一传输路径从第一外部装置获取左眼图像数据和右眼图像数据的图像定时信息。进一步,中继设备通过第二信息获取单元经由第二传输路径从第二外部装置获取左眼图像和右眼图像的显示定时信息。进一步,例如,中继设备使用指示由第一用户设置单元设置的左眼图像和右眼图像的显示定时的信息以及指示由第二用户设置单元设置的左眼图像数据和右眼图像数据的定时的信息。在这种情况下,中继设备可以假设左眼图像数据和右眼图像数据的定时相同。
例如,中继设备的数据接收单元通过多个信道利用差分信号而经由第一传输路径从第一外部装置接收立体图像数据,并且中继设备的数据发送单元通过多个信道利用差分信号而经由第二传输路径将立体图像数据发送到第二外部装置。然后,中继设备的第一信息获取单元通过从数据接收单元接收到的立体图像数据的消隐中提取信息来获取图像定时信息,并且中继设备的第二信息获取单元通过从第二外部装置中包括的存储单元中读取信息来获取显示定时信息。
例如,中继设备的定时校正单元校正左眼图像数据和右眼图像数据二者的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。这允许在定时校正时左右图像的图像质量的恶化变得几乎相同。
进一步,例如,中继设备的定时校正单元校正左眼图像数据和右眼图像数据之一的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。例如,中继设备进一步包括图像数据选择单元,其从左眼图像数据和右眼图像数据中选择要校正定时的一个图像数据。在这种情况下,通过选择用于对非主眼显示图像的图像数据作为要校正定时的一个图像数据,可以抑制定时校正期间图像质量的恶化。
如上所述,在中继设备中,校正来自第一外部装置的左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致,并将校正之后的左眼图像数据和右眼图像数据发送到第二外部装置。
因此,在第二外部装置中,接收到的左眼图像数据和右眼图像数据的定时与基于这些图像数据而显示的左眼图像和右眼图像的显示定时彼此一致。因此,通过将中继设备放置在第一外部装置和第二外部装置之间,可以提高带有运动的图像的质量,并减少观众疲劳。进一步,在中继设备通过从第一外部装置获取左眼图像数据和右眼图像数据的图像定时信息并从第二外部装置获取左眼图像和右眼图像的显示定时信息来校正左眼图像数据和右眼图像数据的定时的情况下,用于操作或设置的用户工作量不会增加,并且由于不存在用户的错误操作或设置,因此总是可以进行精确的定时校正。
根据上述的本发明实施方式,由于在接收设备中接收到的左眼图像数据和右眼图像数据的定时与基于这些图像数据而显示的左眼图像和右眼图像的显示定时彼此一致,因此可以提高带有运动的图像的质量,并减少观众疲劳。
附图说明
图1是示出了根据本发明实施方式的AV系统的示例性配置的框图。
图2是示出了AV系统中所包括的盘播放器(信源装置)的示例性配置的框图。
图3是示出了AV系统中所包括的电视机(信宿装置)的示例性配置的框图。
图4是示出了HDMI发送单元(HDMI TX)和HDMI接收单元(HDMIRX)的示例性配置的框图。
图5是示出了HDMI发送单元中的HDMI发送器和HDMI接收单元中的HDMI接收器的示例性配置的框图。
图6是示出了TMDS传输数据的示例性结构的视图(当发送宽度1920像素乘以高度1080行的图像数据时)。
图7是示出了HDMI线缆所连接的信源装置和信宿装置的HDMI端子的引脚输出(pin-out)(类型A)的视图。
图8是示出了左眼(L)图像数据和右眼(R)图像数据(以1920×1080p的像素格式的图像数据)的视图。
图9A是描述通过以逐场方式顺序地切换左眼图像数据和右眼图像数据来对其进行发送的方案(其为3D(立体)图像数据发送方案)的视图。
图9B是描述彼此交替地发送一行左眼图像数据和一行右眼图像数据的方案(其为3D(立体)图像数据发送方案)的视图。
图9C是描述分别在水平方向上在前一半中发送左眼图像数据的像素数据然后在水平方向上在后一半中发送右眼图像数据的像素数据的方案(其为3D(立体)图像数据发送方案)的视图。
图10是示出了在通过以逐场方式顺序地切换左眼图像数据和右眼图像数据来对其进行发送的方案中的TMDS传输数据的示例的视图。
图11是示出了彼此交替地发送一行左眼图像数据和一行右眼图像数据的方案中的TMDS传输数据的示例的视图。
图12是示出了在水平方向上在第一半中发送左眼图像数据的像素数据然后在水平方向上在最后一半中发送右眼图像数据的像素数据的方案中的TMDS传输数据的示例的视图。
图13是示出了E-EDID数据的示例性结构的视图。
图14是示出了Vender Specific(厂商专用)区域中数据结构的示例的视图。
图15A和图15B是描述在通过交替成像获得左眼图像数据和右眼图像数据并同步显示左眼图像和右眼图像的第一情况下的视频信号处理电路中所执行的定时校正处理的视图。
图16A和图16B是描述在通过同步成像获得左眼图像数据和右眼图像数据并交替地显示左眼图像和右眼图像的第二情况下的视频信号处理电路中所执行的定时校正处理的视图。
图17是示出了AVI InfoFrame(信息帧)分组的数据结构的示例的视图。
图18A和图18B是描述在通过交替成像获得左眼图像数据和右眼图像数据并同步显示左眼图像和右眼图像的第一情况下的3D信号处理单元中所执行的定时校正处理的视图。
图19是示出了根据本发明第二实施方式的AV系统的示例性配置的框图。
图20是示出了AV系统中所包括的游戏机(信源装置)的示例性配置的框图。
图21是示出了根据本发明第三实施方式的AV系统的示例性配置的框图。
图22是示出了AV系统中所包括的AV放大器(中继器装置)的示例性配置的框图。
具体实施方式
下文中将描述本发明的示例性实施方式(下文中将其称为“实施方式”)。将以如下次序给出描述。
1.第一实施方式
2.第二实施方式
3.第三实施方式
4.可替代的示例
在下文中,将参照附图详细描述本发明的优选实施方式。注意,在本说明书和附图中,用相同的附图标记表示具有基本上相同功能和结构的结构要素,并且省略这些结构要素的重复说明。
<1.第一实施方式>
[AV系统的示例性配置]
图1示出了根据本发明实施方式的视听(AV)系统200的示例性配置。AV系统200包括游戏机210,其用作信源装置;以及电视机250,其用作信宿装置。信源装置可以不是游戏机,如产生3D视频的装置或回放3D视频的装置(像蓝光盘播放器)。
盘播放器210和电视机250通过HDMI线缆350连接。盘播放器210具有与HDMI发送单元(HDMI TX)212连接的HDMI端子211。电视机250具有与HDMI接收单元(HDMI RX)252连接的HDMI端子251。HDMI线缆350的一端连接到盘播放器210的HDMI端子211,而HDMI线缆350的另一端连接到电视机250的HDMI端子251。
在图1所示的AV系统200中,将来自盘播放器210的未压缩图像数据(视频信号)通过HDMI线缆350发送到电视机250,并且将基于来自盘播放器210的图像数据的图像显示在电视机250中。进一步,将来自盘播放器210的未压缩音频数据(音频信号)通过HDMI线缆350发送到电视机250,并且在电视机250中输出基于来自盘播放器210的音频数据的声音。
在从盘播放器210发送到电视机250的图像数据是包括用于显示立体图像的、左眼图像数据和右眼图像数据的立体图像数据(3D图像数据)的情况下,电视机250执行立体图像的显示。
存在在盘播放器210中再现的左眼图像数据和右眼图像数据的两种图像定时(image timing):同步和交替。当图像定时是同步的,例如通过以双透镜相机同步捕获左眼图像和右眼图像来获得左眼图像数据和右眼图像数据。当图像定时是交替的,例如通过以单透镜相机交替地捕获左眼图像和右眼图像来获得左眼图像数据和右眼图像数据。
进一步,存在在电视机250中显示的左眼图像和右眼图像的两种显示定时:同步和交替。当电视机250的立体图像显示方案是立体照片方法、偏振眼镜方法、裸眼方法等时,例如同步地显示左眼图像和右眼图像。当电视机250的立体图像显示方案是快门眼镜方法时,例如交替地显示左眼图像和右眼图像。
在图1所示的AV系统200中,如果在盘播放器210中再现的左眼图像数据和右眼图像数据的图像定时与电视机250中显示的左眼图像和右眼图像的显示定时不同,则执行定时校正。执行定时校正,以便左眼图像数据和右眼图像数据的定时与左眼图像和右眼图像的显示定时一致。在盘播放器210或电视机250中执行定时校正。
存在图像定时与显示定时不同的两种情况。一种情况是通过交替成像来获得左眼图像数据和右眼图像数据,并且同步地显示左眼图像和右眼图像。另一种情况是通过同步成像来获得左眼图像数据和右眼图像数据,并且交替地显示左眼图像和右眼图像。
[盘播放器的示例性配置]
图2示出了盘播放器210的示例性配置。盘播放器210包括HDMI端子211、HDMI发送单元212、驱动器接口213和BD/DVD驱动器214。盘播放器210进一步包括多路分配器215、MPEG解码器216、视频信号处理电路217、音频解码器218和音频信号处理电路219。
盘播放器210进一步包括内部总线220、CPU 221、闪速ROM 222和DRAM 223。盘播放器210进一步包括以太网接口(I/F)224、网络端子225、遥控接收单元226和遥控发射器227。应该注意的是,“以太网”是注册商标。CPU 221、闪速ROM 222、DRAM 223、以太网接口224和驱动器接口213连接到内部总线220。
CPU 221控制盘播放器210的每一个单元的操作。闪速ROM 222存储控制软件和数据。DRAM 223形成CPU 221的工作区。CPU 221在DRAM 223中扩展从闪速ROM 222读出的软件和数据,并启动软件,由此控制盘播放器210的每一个单元。遥控接收单元226接收从遥控发射器227发送的遥控信号(遥控代码),并将其提供给CPU 221。CPU 221根据遥控代码控制盘播放器210的每个单元。
BD/DVD驱动器214将内容数据记录到作为盘形记录介质的BD或DVD(未示出),或者从BD或DVD再现内容数据。BD/DVD驱动器214经由驱动器接口213连接到内部总线220。
多路分配器215从BD/DVD驱动器214中再现的数据中分离出视频和音频基本流。MPEG解码器216对多路分配器215分离出的视频基本流执行解码,由此获得未压缩的图像数据。
视频信号处理电路217对MPEG解码器216所获得的图像数据适当地执行缩放(分辨率转换)、图形数据的叠加等,并将数据提供给HDMI发送单元212。进一步,如果MPEG解码器216所获得的图像数据是用于显示立体图像的立体图像数据(左眼图像数据和右眼图像数据),则视频信号处理电路217将立体图像数据处理为符合发送方案的状态。
进一步,在盘播放器210中执行上述左眼图像数据和右眼图像数据的定时校正的情况下,视频信号处理电路217进行定时校正。在这种情况下,视频信号处理电路217用作定时校正单元。后面描述视频信号处理电路217中定时校正的细节。
音频解码器218对多路分配器215所分离出的音频基本流执行解码,由此获得未压缩的音频数据。音频信号处理电路219对音频解码器218所获得的音频数据适当地执行音调控制等,并将数据提供给HDMI发送单元(HDMITX)212。
HDMI发送单元212通过符合HDMI标准的通信,发送来自HDMI端子211的基带图像(视频)和音频数据。在这种情况下,图像数据和音频数据被打包,并通过HDMI的TMDS信道而从HDMI发送单元212输出到用于发送的HDMI端子211。后面描述HDMI发送单元212的细节。
下文简要描述图2所示的盘播放器210的操作。将DVD/BD驱动器214的再现数据提供到多路分配器215,并将其分离为视频和音频基本流。将多路分配器215所分离出的视频基本流提供给MPEG解码器216并进行解码,以便获得未压缩的图像数据。将多路分配器215所分离出的音频基本流提供给音频解码器218并进行解码,以便获得未压缩的音频数据。
将MPEG解码器216所获得的图像数据经由视频信号处理电路217而提供给HDMI发送单元212。将音频解码器218所获得的音频数据经由音频信号处理电路219而提供给HDMI发送单元212。然后,通过HDMI的TMDS信道而将图像数据和音频数据从HDMI端子211发送到HDMI线缆。
如果MPEG解码器216所获得的图像数据是立体图像数据,则在视频信号处理电路217中将立体图像数据处理为符合发送方案的状态,然后将其提供给HDMI发送单元212。进一步,如果图像数据是立体图像数据,则在视频信号处理电路217中适当地执行组成立体图像数据的左眼图像数据和右眼图像数据的定时校正。
[电视机的示例性配置]
图3示出了电视机250的示例性配置。电视机250包括HDMI端子251、HDMI接收单元252和3D信号处理单元254。电视机250进一步包括天线端子255、数字调谐器256、多路分配器257、MPEG解码器258、视频信号处理电路259、图形产生电路260、面板驱动电路261和显示面板262。
电视机250进一步包括音频信号处理电路263、音频放大电路264、扬声器265、内部总线270、CPU 271、闪速ROM 272和DRAM 273。电视机250进一步包括以太网接口274、网络端子275、遥控接收单元276、遥控发射器277和DTCP电路278。
天线端子255是用于输入接收天线(未示出)所接收到的电视广播信号的端子。数字调谐器256处理输入到天线端子255的电视广播信号,并输出与用户所选频道对应的预定传输流。多路分配器257从数字调谐器256获得的传输流中提取与用户所选频道对应的部分传输流(TS)(视频数据TS分组和音频数据TS分组)。
进一步,多路分配器257从数字调谐器256获得的传输流中获取节目特定信息/服务信息(PSI/SI),并将其输出到CPU 271。在数字调谐器256获得的传输流中,多路复用多个信道。多路分配器257可以通过从PSI/SI(PAT/PMT)获得给定信道的分组ID(PID)的信息,从传输流中提取给定信道的部分TS。
MPEG解码器258对多路分配器257中获得的视频数据TS分组所组成的视频打包基本流(PES)分组执行解码,由此获得图像数据。进一步,MPEG解码器258对多路分配器257中获得的音频数据TS分组所组成的音频PES分组执行解码,由此获得音频数据。
视频信号处理电路259和图形产生电路260对MPEG解码器258所获得的图像数据或HDMI接收单元252所接收到的图像数据适当地执行缩放(分辨率转换)、图形数据的叠加等。进一步,如果HDMI接收单元252接收到的图像数据是包括左眼图像数据和右眼图像数据的立体图像数据,则视频信号处理电路259对左眼图像数据和右眼图像数据执行用于显示立体图像的处理。面板驱动电路261基于从图形产生电路260输出的视频(图像)数据来驱动显示面板262。
显示面板262例如是液晶显示器(LCD)、等离子显示面板(PDP)等。音频信号处理电路263对MPEG解码器258所获得的音频数据执行诸如D/A转换之类的必要处理。音频放大电路264将输出自音频信号处理电路263的音频信号进行放大,并将其提供给扬声器265。
CPU 271控制电视机250的每一个单元的操作。闪速ROM 272存储控制软件和数据。DRAM 273形成CPU 271的工作区。CPU 271在DRAM 273中扩展从闪速ROM 272读取的软件和数据并启动软件,由此控制电视机250的每个单元。
遥控接收单元276接收从遥控发射器277发送的遥控信号(遥控代码),并将其提供给CPU 271。CPU 271基于遥控代码来控制电视机250的每个单元。网络端子275是用于与网络进行连接的端子,并且其连接到以太网接口274。CPU 271、闪速ROM 272、DRAM 273和以太网接口274连接到内部总线270。DTCP电路278对从网络端子275提供到以太网接口274的加密数据进行解密。
HDMI接收单元(HDMI RX)252通过符合HDMI标准的通信,经由HDMI线缆350接收提供到HDMI端子251的未压缩图像(视频)和音频数据。后面描述HDMI接收单元252的细节。
3D信号处理单元254对HDMI接收单元252所接收到的3D图像数据执行符合发送方案的处理(解码),由此产生左眼图像数据和右眼图像数据。3D信号处理单元254由此执行上述盘播放器210的视频信号处理电路217(参照图2)的逆处理,并获取组成立体图像数据的左眼图像数据和右眼图像数据。
进一步,在电视机250中执行上述左眼图像数据和右眼图像数据的定时校正的情况下,3D信号处理单元254进行定时校正。在这种情况下,3D信号处理单元254用作定时校正单元。后面描述3D信号处理单元254中定时校正的细节。
下文简要描述图3中所示的电视机250的操作。将输入到天线端子255的电视广播信号提供给数字调谐器256。在数字调谐器256中,处理电视广播信号并输出对应于用户所选频道的预定传输流,并且将预定传输流提供给多路分配器257。在多路分配器257中,从传输流中提取与用户所选频道对应的部分TS(视频数据TS分组和音频数据TS分组),并且将部分TS提供给MPEG解码器258。
在MPEG解码器258中,对视频数据TS分组所组成的视频PES分组执行解码,从而获得图像数据。然后,在视频信号处理电路259和图形产生电路260中适当地对图像数据执行缩放(分辨率转换)、图形数据的叠加等,并且将图像数据提供给面板驱动电路261。从而,在显示面板262上显示对应于用户所选频道的图像。
进一步,在MPEG解码器258中,对音频数据TS分组所组成的音频PES分组执行解码,由此获得音频数据。然后,在音频信号处理电路263中对音频数据执行诸如D/A转换之类的必要处理,并且音频数据经音频放大电路264放大,然后提供给扬声器265。从而,从扬声器256输出对应于用户所选频道的声音。
另一方面,从网络端子275提供到以太网接口274的加密内容数据(图像数据和音频数据)经DTCP电路278解密,然后提供给MPEG解码器258。接下来的操作与接收电视广播信号时的上述操作相同,从而在显示面板262上显示图像并且从扬声器265输出声音。
在HDMI接收单元252中,获取从经由HDMI线缆350连接到HDMI端子251的盘播放器210发送的图像数据和音频数据。图像数据经由3D信号处理单元254而提供给视频信号处理电路259。音频数据直接提供到音频信号处理电路263。接下来的操作与接收电视广播信号时的上述操作相同,从而在显示面板262上显示图像并且从扬声器265输出声音。
如果HDMI接收单元252所接收到的图像数据是立体图像数据(3D图像数据),则在3D信号处理单元254中对立体图像数据执行符合发送方案的处理(解码),以便产生左眼图像数据和右眼图像数据。然后将左眼图像数据和右眼图像数据从3D信号处理单元254提供给视频信号处理电路259。当提供了组成立体图像数据的左眼图像数据和右眼图像数据时,基于左眼图像数据和右眼图像数据,在视频信号处理电路259中产生用于显示立体图像的图像数据(参照图2)。从而,在显示面板262上显示立体图像。进一步,如果图像数据是立体图像数据,则在3D信号处理单元254中适当地执行组成立体图像数据的左眼图像数据和右眼图像数据的定时校正。
当提供了组成立体图像数据的左眼图像数据和右眼图像数据时,基于左眼图像数据和右眼图像数据,在视频信号处理电路259中产生用于显示立体图像的图像数据。从而,在显示面板262上显示立体图像。
[HDMI发送单元和HDMI接收单元的示例性配置]
图4示出了图1所示AV系统200中盘播放器210的HDMI发送单元(HDMI TX)212与电视机250的HDMI接收单元(HDMI RX)252的示例性配置。
HDMI发送单元212在有效图像时间段(下文也称为活动视频时间段)中,在一个方向上将一个屏幕的未压缩图像的图像数据所对应的差分信号通过多个信道而发送到HDMI接收单元252。有效图像时间段是除了水平消隐时间段和垂直消隐时间段之外,从一个垂直同步信号到下一垂直同步信号的时间段。进一步,HDMI发送单元212在水平消隐时间段或垂直消隐时间段中,在一个方向上将(至少)伴随图像的音频数据、控制数据、其他辅助数据等所对应的差分信号通过多个信道而发送到HDMI接收单元252。
包括HDMI发送单元212和HDMI接收单元252的HDMI系统的传输信道如下。具体地,存在三个TMDS信道#0到#2,其用作与像素时钟同步地在一个方向上将像素数据和音频数据串行地从HDMI发送单元212传送到HDMI接收单元252的传输信道。还存在TMDS时钟信道,其用作发送像素时钟的传输信道。
HDMI发送单元212包括HDMI发送器81。HDMI发送器81例如将未压缩图像的像素数据转换为对应的差分信号,然后通过三个TMDS信道#0、#1和#2(其为多个信道),在一个方向上将信号串行地发送到经由HDMI线缆350所连接的HDMI接收单元252。
进一步,发送器81将伴随未压缩图像的音频数据以及进一步必需的控制数据、其他辅助数据等转换为对应的差分信号,然后通过三个TMDS信道#0、#1和#2,在一个方向上将信号串行地发送到HDMI接收单元252。
发送器81进一步通过TMDS时钟信道,将与通过TMDS信道#0、#1和#2所传送的像素数据相同步的像素时钟发送到经由HDMI线缆350所连接的HDMI接收单元252。在一个TMDS信道#i(i=0,1,2)中,在一个像素时钟中发送10位像素数据。
HDMI接收单元252在活动视频时间段中,通过多个信道接收与从HDMI发送单元212在一个方向上发送的图像数据对应的差分信号。在水平消隐时间段或垂直消隐时间段中,HDMI接收单元252进一步通过多个信道接收与从HDMI发送单元212在一个方向上发送的音频数据和控制数据对应的差分信号。
具体地,HDMI接收单元252包括HDMI接收器82。HDMI接收器82通过TMDS信道#0、#1和#2,接收从HDMI发送单元212在一个方向上传送的、与图像数据对应的差分信号以及与音频数据和控制数据对应的差分信号。此时,HDMI接收单元252通过TMDS时钟信道接收与从HDMI发送单元212发送的像素时钟同步的信号。
除了上述TMDS信道#0到#2以及TMDS时钟信道之外,包括HDMI发送单元212和HDMI接收单元252的HDMI系统的传输信道还涉及称为显示数据信道(DDC)83和CEC线84的传输信道。DDC 83由HDMI线缆350中包括的两条信号线(未示出)组成,并且其在HDMI发送单元212从经由HDMI线缆350连接的HDMI接收单元252读取增强型扩展显示标识数据(E-EDID)时使用。
具体地,除了HDMI接收器82之外,HDMI接收单元252还包括EDID只读存储器(ROM)85,其存储作为与其自身配置/性能有关的性能信息的E-EDID。例如响应于来自CPU 221的请求(参照图2),HDMI发送单元212通过DDC 83,从经由HDMI线缆350连接的HDMI接收单元252读取HDMI接收单元252的E-EDID。HDMI发送单元212将读取的E-EDID发送到CPU221。CPU 221将E-EDID存储在闪速ROM 222或DRAM 223中。
CPU 221可以基于E-EDID识别HDMI接收单元252的性能配置。例如,CPU 221识别包括HDMI接收单元252的电视机250所兼容的图像数据的格式(分辨率、帧速、纵横比等)。在该实施方式中,在盘显示器210中校正左眼图像数据和右眼图像数据的定时的情况下,CPU 221基于E-EDID中包含的显示定时信息(后面描述),识别包括HDMI接收单元252的电视机250中左眼图像数据和右眼图像数据的显示定时。
CEC线84由HDMI线缆350中所包括的一条信号线(未示出)组成,并且用于在HDMI发送单元212和HDMI接收单元252之间执行控制数据的双路通信。CEC线84组成控制数据线。
进一步,HDMI线缆350中包括与称为热插拔检测(HPD)的引脚相连接的线(HPD线)86。信源装置通过使用线86可以检测信宿装置的连接。此外,HDMI线缆350中包括用于从信源装置向信宿装置提供电源的线87。另外,在HDMI线缆350中包括备用线88。
图5示出了HDMI发送器81和HDMI接收器82的示例性配置。HDMI发送器81包括分别与三个TMDS信道#0、#1和#2对应的三个编码器/串行器81A、81B和81C。每一个编码器/串行器81A、81B和81C对向其提供的图像数据、辅助数据和控制数据进行编码,将数据从并行数据转换为串行数据,然后通过差分信号发送数据。例如,如果图像数据包含三个分量R、G和B,则将分量B提供给编码器/串行器81A,将分量G提供给编码器/串行器81B,并且将分量R提供给编码器/串行器81C。
例如,辅助数据涉及音频数据和控制分组,并且例如将控制分组提供给编码器/串行器81A,而将音频数据提供给编码器/串行器81B和81C。控制数据涉及一位垂直同步信号(VSYNC)、一位水平同步信号(HSYNC)和一位控制位CTL0、CTL1、CTL2和CTL3。将垂直同步信号和水平同步信号提供给编码器/串行器81A。将控制位CTL0和CTL1提供给编码器/串行器81B,并且将控制位CTL2和CTL3提供给编码器/串行器81C。
编码器/串行器81A以时分方式发送向其所提供的图像数据的B分量、垂直同步信号、水平同步信号和辅助数据。具体地,编码器/串行器81A将向其提供的图像数据的B分量处理为每一个均以8位(其为固定位数)的并行数据。编码器/串行器81A然后对并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#0发送串行数据。
进一步,编码器/串行器81A对向其提供的垂直同步信号和水平同步信号的两位并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#0发送串行数据。编码器/串行器81A进一步将向其提供的辅助数据处理为每一个均以4位的并行数据。编码器/串行器81A然后对并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#0发送串行数据。
编码器/串行器81B以时分方式发送向其提供的图像数据的G分量、控制位CTL0和CTL1以及辅助数据。具体地,编码器/串行器81B将向其提供的图像数据的G分量处理为每一个均以8位(其为固定位数)的并行数据。编码器/串行器81B然后对并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#1发送串行数据。
进一步,编码器/串行器81B对向其提供的控制位CTL0和CTL1的两位并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#1发送串行数据。编码器/串行器81B进一步将向其提供的辅助数据处理为每一个均以4位的并行数据。编码器/串行器81B然后对并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#1发送串行数据。
编码器/串行器81C以时分方式发送向其提供的图像数据的R分量、控制位CTL2和CTL3以及辅助数据。具体地,编码器/串行器81C将向其提供的图像数据的R分量处理为每一个均以8位(其为固定位数)的并行数据。编码器/串行器81C然后对并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#2发送串行数据。
进一步,编码器/串行器81C对向其提供的控制位CTL2和CTL3的两位并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#2发送串行数据。编码器/串行器81C进一步将向其提供的辅助数据处理为每一个均以4位的并行数据。编码器/串行器81C然后对并行数据进行编码,将编码的并行数据转换为串行数据并通过TMDS信道#2发送串行数据。
HDMI接收器82包括分别与三个TMDS信道#0、#1和#2对应的三个恢复/解码器82A、82B和82C。每一个恢复/解码器82A、82B和82C均接收分别通过TMDS信道#0、#1和#2利用差分信号所发送的图像数据、辅助数据和控制数据。然后每一个恢复/解码器82A、82B和82C将图像数据、辅助数据和控制数据从串行数据转换为并行数据,并对其进行解码和输出。
具体地,恢复/解码器82A接收通过TMDS信道#0利用差分信号所发送的图像数据的B分量、垂直同步信号、水平同步信号和辅助数据。然后恢复/解码器82A将图像数据的B分量、垂直同步信号、水平同步信号和辅助数据从串行数据转换为并行数据,并对其进行解码和输出。
恢复/解码器82B接收通过TMDS信道#1利用差分信号所发送的图像数据的G分量、控制位CTL0和CTL1以及辅助数据。然后恢复/解码器82B将图像数据的G分量、控制位CTL0和CTL1以及辅助数据从串行数据转换为并行数据,并对其进行解码和输出。
恢复/解码器82C接收通过TMDS信道#2利用差分信号而发送的图像数据的R分量、控制位CTL2和CTL3以及辅助数据。然后恢复/解码器82C将图像数据的R分量、控制位CTL2和CTL3以及辅助数据从串行数据转换为并行数据,并对其进行解码和输出。
图6示出了TMDS传输数据的示例性结构。图6示出了在通过TMDS信道#0、#1和#2发送宽度1920像素乘以高度1080行的图像数据情况下的各种传输数据时间段。
在通过HDMI的三个TMDS信道#0、#1和#2发送传输数据的视频场中,根据传输数据的类型存在三种类型的时间段。这三种类型的时间段是视频数据时间段、数据岛时间段和控制时间段。
视频场时间段是在某一垂直同步信号的活动沿与下一垂直同步信号的活动沿之间的时间段。视频场时间段划分为水平消隐、垂直消隐和活动视频时间段。活动视频时间段是除了水平消隐和垂直消隐之外的视频场的时间段。
将视频数据时间段分配给活动视频时间段。在视频数据时间段中,发送组成一个屏幕的未压缩图像数据的1920像素乘以1080行的活动像素的数据。
将数据岛时间段和控制时间段分配给水平消隐和垂直消隐。在数据岛时间段和控制时间段中,发送辅助数据。具体地,将数据岛时间段分配给部分水平消隐和垂直消隐。在数据岛时间段中,例如发送与控制无关的辅助数据(如,音频数据分组)。
将控制时间段分配给水平消隐和垂直消隐的其他部分。在控制时间段中,例如发送与控制有关的辅助数据(如,垂直同步信号、水平同步信号和控制分组)。
图7示出了HDMI端子211和HDMI端子251的引脚输出(类型A)的示例。图7中所示的引脚输出被称为类型A引脚输出。
两条差分线(通过其发送作为TMDS信道#i的差分信号的TMDS数据#i+和TMDS数据#i-)连接到分配了TMDS数据#i+的引脚(具有引脚号1、4和7)和分配了TMDS数据#i-的引脚(具有引脚号3、6和9)。
CEC线84(通过其发送作为控制数据的CEC信号)连接到具有引脚编号13的引脚,并且具有引脚编号14的引脚是保留引脚。发送诸如E-EDID之类的串行数据(SDA)的线连接到具有引脚号16的引脚,并且发送作为在发送和接收SDA信号时用于同步的时钟信号的串行时钟(SCL)信号的线连接到具有引脚号15的引脚。上述DDC 83由发送SDA信号的线和发送SCL信号的线组成。
进一步,用于信源装置检测信宿装置的连接的上述HPD线86连接到具有引脚号19的引脚。用于电源的上述线87连接到具有引脚号18的引脚。
[立体图像数据的示例性传输方案]
下文描述用于发送立体图像数据(3D图像数据)的第一到第三传输方案,尽管其他传输方案也是可应用的。在下文中,通过例示的方式描述左眼(L)图像数据和右眼(R)图像数据是以图8中所示的1920×1080p像素格式的情况。
第一传输方案是通过如图9(a)所示以逐场方式顺序地切换左眼图像数据和右眼图像数据来发送它们的方案。在该方案中,尽管用于切换的场存储器是必需的,但是信源装置中的信号处理是最简单的。图10示出了第一方案中的示例性TMDS传输数据。在该方案中,在奇数场中在以1920像素乘以1080行的活动视频时间段中放置以1920像素乘以1080行的活动像素的左眼(L)图像数据。进一步,在偶数场中在以1920像素乘以1080行的活动视频时间段中放置以1920像素乘以1080行的活动像素的右眼(R)图像数据。
第二传输方案是如图9(b)中所示彼此交替地发送一行左眼图像数据和一行右眼图像数据的方案。在该方案中,在左眼图像数据和右眼图像数据中分别将行减少到1/2。该方案等同于被称为“相位差板方案(phase differenceplate scheme)”的立体图像显示方案中的视频信号,并且信宿装置的显示单元中的信号处理最简单;然而,垂直分辨率变为原始信号的一半。
图11示出了第二传输方案中的示例性TMDS传输数据。在该方案中,在以1920像素乘以1080行的活动视频时间段中放置以1920像素乘以1080行的活动像素的数据(左眼(L)图像数据和右眼(R)图像数据的复合数据)。在第二传输方案的情况下,如上所述,在左眼图像数据和右眼图像数据中垂直方向上的行分别减少到1/2。待发送的左眼图像数据处于奇数行或偶数行,并且待发送的右眼图像数据也处于奇数行或偶数行。
如图9(c)所示,第三传输方案是如下这样的方案:在水平方向上在前一半中发送左眼图像数据的像素数据、然后在水平方向上在后一半中发送右眼图像数据的像素数据,其为当前用在实验广播中的“逐侧(side-by-side)”方案。在该方案中,在左眼图像数据和右眼图像数据中水平方向上的像素数据分别减少到1/2。通过输出数据作为现有2D图像数据,即使在与立体图像数据不兼容的信源装置中也可以实施第三传输方案,因此该方案具有与迄今使用的信源装置的高兼容性。
图12示出了第三传输方案中的示例性TMDS传输数据。在该方案中,在以1920像素乘以1080行的活动视频时间段中放置以1920像素乘以1080行的活动像素的数据(左眼(L)图像数据和右眼(R)图像数据的复合数据)。在第三传输方案的情况下,如上所述,在左眼图像数据和右眼图像数据中水平方向上的像素数据分别减少到1/2。
[盘播放器中的定时校正]
在图1中所示的AV系统200中,如果盘播放器210中再现的左眼图像数据和右眼图像数据的图像定时与电视机250中显示的左眼图像和右眼图像的显示定时不同,则执行定时校正。在下文中描述在盘播放器210的视频信号处理电路217中执行定时校正的情况。
在该实施方式中,盘播放器210从电视机250获取左眼图像和右眼图像的显示定时信息。具体地,盘播放器210(CPU 221)通过从电视机250读取增强型扩展显示标识数据(E-EDID)来获取显示定时信息。换言之,电视机250将显示定时信息添加到E-EDID,由此将所述信息提供给盘播放器210。
图13示出了E-EDID的数据结构的示例。E-EDID由基本块和扩展块组成。基本块开头是由E-EDID 1.3标准定义的数据(由“E-EDID 1.3 BasicStructure”表示),接着是用于保持与迄今使用的EDID的兼容性的定时信息(由“Preferred timing”表示)以及不同于“Preferred timing”的、用于保持迄今使用的EDID的定时信息(由“2nd timing”表示)。
进一步,在基本块中,“2nd timing”后面是指示显示设备名称的信息(由“Monitor NAME”表示)以及指示当纵横比为4∶3和16∶9时可显示的像素数量的信息(由“Monitor Range Limits”表示),所述信息顺序地以此次序排列。
扩展块开头是“Short Video Descriptor”。这是指示可显示图像大小(分辨率)、帧速和隔行/逐行的信息。其后面是“Short Audio Descriptor”。这是诸如可再现音频编解码器、采样频率、截止频率或编解码器位数之类的信息。其后面是与左右扬声器有关的信息,由“Speaker Allocation”表示。
进一步,在扩展块中,“Speaker Allocation”后面是对于每一个制造商唯一定义的数据(由“Vender Specific”表示)、用于保持与迄今使用的EDID的兼容性的定时信息(由“3rd timging”表示)以及用于保持与迄今使用的EDID的兼容性的定时信息(由“4th timing”表示)。
图14示出了Vendor Specific区域(HDMI Vendor Specific Data Block)的数据结构的示例。Vendor Specific区域具有放置的第0到第N块,其每一个为一字节长。
由“Vendor Specific”表示的、放置在数据开头的第0块包含指示数据“Vendor Specific”的数据区域的首标(由“Vendor-Specific tag code(=3)”表示)和指示数据“Vendor Specific”的长度的信息(由“Length(=N)”表示)。
进一步,第一到第三块包含指示对于HDMI(R)注册的编号“0x000C03”的信息(由“24-bit IEEE Registration Identifier(0x000C03)LSB first”表示)。第四和第五块包含指示24位信宿装置的物理地址的信息(分别由“A”、“B”、“C”和“D”表示)。
第六块包含指示与信宿装置兼容的功能的标志(由“Supports_AI”表示)、用于指定每像素的位数的信息(由“DC_48bit”、“DC_36bit”和“DC_30bit”表示)、指示信宿装置与YCbCr4:4:4的图像传输的兼容性的标志(由“DC_Y444”表示)以及指示信宿装置与双数字可视接口(DVI)的兼容性的标志(由“DVI_Dual”表示)。
第七块包含指示TMDS像素时钟的最大频率的信息(由“Max_TMDS_Clock”表示)。第八块包含指示视频和音频等待时间信息存在或不存在的标志(由第六位和第七位中的“Latency”表示)。
第九块包含逐行视频等待时间数据(由“Video_Latency”表示),并且第十块包含伴随逐行视频的音频等待时间数据(由“Audio_Latency”表示)。第十一块包含隔行视频等待时间数据(由“Interlaced_Video_Latency”表示)。第十二块包含伴随隔行视频的音频等待时间数据(由“Interlaced_Audio_Latency”表示)。
在该实施方式中,第八块具有指示第五位中显示定时信息的存在或不存在的标志(3D_Fields_Present)。将标志设置为“1”,并且在第十三块的第六和第七位中包含显示定时信息(LR_Display_Timing)。
例如,“00”指示左眼图像和右眼图像的显示定时相同。进一步,例如,“01”指示交替地显示左眼图像和右眼图像,并且在一帧中右眼图像在左眼图像之后。此外,例如,“10”指示交替地显示左眼图像和右眼图像,并且在一帧中左眼图像在右眼图像之后。
如果确定在一帧中左眼图像和右眼图像以此次序显示,则显示定时信息(LR_Display_Timing)可以是一位信息。在这种情况下,“0”指示左眼图像和右眼图像的显示定时相同,而“1”指示交替地显示左眼图像和右眼图像,并且在一帧中右眼图像在左眼图像之后。
在盘播放器210中可以通过用户的设置(选择)获取显示定时信息,不限于如上所述经由HDMI自动地读取。在这种情况下,例如,用户通过操作遥控发射器227来设置左眼图像和右眼图像的显示定时。在这种情况下,遥控发射器227用作用户设置单元。
盘播放器210的CPU 221基于上述E-EDID中包含的显示定时信息或通过用户设置的显示定时信息,识别电视机250中左眼图像和右眼图像的显示定时。进一步,例如,CPU 221基于视频基本流中的元数据或添加到BD/DVD盘中的元数据的元数据,识别在BD/DVD驱动器214中再现的左眼图像数据和右眼图像数据的图像定时。
如果图像定时与显示定时不同,则CPU 221进行控制以便在视频信号处理电路217中执行定时校正。执行定时校正,以便BD/DVD驱动器214中所再现的左眼图像数据和右眼图像数据的定时与左眼图像和右眼图像的显示定时一致。
“定时校正处理”
下文描述盘播放器210的视频信号处理电路217中的定时校正处理。存在图像定时与显示定时不同的两种情况。第一种情况是通过交替地成像来获得左眼图像数据和右眼图像数据,并且同步地显示左眼图像和右眼图像。第二种情况是通过同步成像来获得左眼图像数据和右眼图像数据,并且交替地显示左眼图像和右眼图像。
首先参照图15描述第一种情况下视频信号处理电路217中执行的定时校正处理。图15示出了在一帧中左眼(L)图像数据和右眼(R)图像数据以此次序得以捕获的情况的示例。
(a)第一校正处理的示例
图15(a)示出了第一校正处理的示例。第一校正处理的示例是校正左眼(L)图像数据和右眼(R)图像数据二者的定时的情况。作为校正两个图像的定时的结果,定时校正时左右图像的图像质量的恶化变得几乎相同。
在这种情况下,对于左眼图像数据,在每一帧中通过使用之前和之后左眼图像数据(L)的内插而产生提前了0.25帧时间段的定时处的左眼图像数据(L’)。进一步,对于右眼图像数据,在每一帧中通过使用之前和之后右眼图像数据(R)的内插而产生延迟了0.25帧时间段的定时处的右眼图像数据(R’)。在每一帧中以此方式产生的左眼图像数据(L’)的定时和右眼图像数据(R’)的定时相同,并且与左眼图像和右眼图像的显示定时一致。
(b)第二校正处理的示例
图15(b)示出了第二校正处理的示例。第二校正处理的示例是校正左眼(L)图像数据或右眼(R)图像数据的定时的情况。在该情况下,对于右眼图像数据,通过使用之前和之后右眼图像数据(R)的内插而产生移位了0.5帧时间段的定时处的右眼图像数据(R’)。在每一帧中以此方式产生的右眼图像数据(R’)的定时与左眼图像数据(L)的定时相同,并且与左眼图像和右眼图像的显示定时一致。
尽管在图15(b)中示出了校正右眼图像数据(R)的定时的情况,但是相反也可以校正左眼图像数据(L)的定时。在该实施方式中,在盘播放器210中,通过遥控发射器227的用户操作可以选择要校正左眼(L)图像数据和右眼(R)图像数据中哪一个的定时。遥控发射器227用作选择执行定时校正的图像数据的选择单元。在这种情况下,通过选择对于非主眼(non-dominanteye)显示图像的图像数据作为执行定时校正的图像数据,可以抑制由于定时校正引起的图像质量的恶化。
下文参照图16描述在第二种情况下视频信号处理电路217中执行的定时校正处理。图16示出了在一帧中左眼图像和右眼图像以此次序显示的情况的示例。
(a)第一校正处理的示例
图16(a)示出了第一校正处理的示例。第一校正处理的示例是校正左眼图像数据(L)和右眼图像数据(R)二者的情况。作为校正两个图像的定时的结果,定时校正时左右图像的图像质量的恶化变得几乎相同。
在这种情况下,对于左眼图像数据,在每一帧中通过使用之前和之后左眼图像数据(L)的内插而产生提前了0.75帧时间段的定时处的左眼图像数据(L’)。进一步,对于右眼图像数据,在每一帧中通过使用之前和之后右眼图像数据(R)的内插而产生提前了0.25帧时间段的定时处的右眼图像数据(R’)。每0.5帧交替以此方式产生的左眼图像数据(L’)的定时和右眼图像数据(R’)的定时,并且与左眼图像和右眼图像的显示定时一致。
(b)第二校正处理的示例
图16(b)示出了第二校正处理的示例。第二校正处理的示例是校正左眼(L)图像数据或右眼(R)图像数据的定时的情况。在该情况下,对于右眼图像数据,通过使用之前和之后右眼图像数据(R)的内插而产生提前了0.5帧时间段的定时处的右眼图像数据(R’)。每0.5帧交替以此方式产生的右眼图像数据(R’)的定时和左眼图像数据(L)的定时,并且与左眼图像和右眼图像的显示定时一致。
尽管在图16(b)中示出了校正右眼图像数据(R)的定时的情况,但是相反也可以校正左眼图像数据(L)的定时。在该实施方式中,在盘播放器210中,通过遥控发射器227的用户操作可以选择要校正左眼(L)图像数据和右眼(R)图像数据中哪一个的定时。遥控发射器227用作选择执行定时校正的图像数据的选择单元。在这种情况下,通过选择对于非主眼(non-dominanteye)显示图像的图像数据作为执行定时校正的图像数据,可以抑制由于定时校正引起的图像质量的恶化。
[电视机中的定时校正]
在图1中所示的AV系统200中,如果在盘播放器210中再现的左眼图像数据和右眼图像数据的图像定时与电视机250中显示的左眼图像和右眼图像的显示定时不同,则执行定时校正。下文描述在电视机250的3D信号处理单元254中执行定时校正的情况。
在该实施方式中,电视机250从盘播放器210获取左眼图像数据和右眼图像数据的图像定时信息。具体地,电视机250通过从HDMI接收单元252接收到的立体图像数据的消隐中提取图像定时信息来对其进行获取。换言之,盘播放器210将图像定时信息插入到要从HDMI发送单元212发送的立体图像数据的消隐,由此将图像定时信息提供给电视机250。
在这种情况下,例如,盘播放器210通过使用HDMI的辅助视频信息(Auxiliary Video Information,AVI)InfoFrame(信息帧)分组,将图像定时信息插入到立体图像数据的消隐。将AVI InfoFrame分组放置在上述数据导时间段(参照图6)。图17示出了AVI InfoFrame分组的数据结构的示例。在HDMI中,通过AVI InfoFrame分组将与图像有关的辅助信息从信源装置发送到信宿装置。
在字节0中,定义了指示数据分组的类型的“Packet Type”。AVI InfoFrame分组中的“Packet Type”是“0x82”。在字节1中,描述了分组数据定义的版本信息。在字节2中,描述了指示分组长度的信息。在CEA-861-D中定义了每一个AVI InfoFrame,因此将其省略。
字节17如下。字节17中的位6和位7包含图像定时信息(LR_Image_Timing)。
例如,“00”指示左眼图像数据和右眼图像数据的图像定时相同。进一步,例如,“01”指示通过交替地成像来获得左眼图像数据和右眼图像数据,并且在一帧中右眼图像数据在左眼图像数据之后。此外,例如,“10”指示通过交替地成像来获得左眼图像数据和右眼图像数据,并且在一帧中左眼图像数据在右眼图像数据之后。
如果确定在一帧中左眼图像数据和右眼图像数据以此次序得以捕获,则图像定时信息(LR_Image_Timing)可以是一位信息。在这种情况下,“0”指示左眼图像数据和右眼图像数据的图像定时相同,而“1”指示通过交替地成像来获得左眼图像数据和右眼图像数据,并且在一帧中右眼图像数据在左眼图像数据之后。
可以通过电视机250中的用户设置(选择)来获取图像定时信息,不限于如上所述经由HDMI自动读取。在这种情况下,例如,用户通过操作遥控发射器277来设置左眼图像数据和右眼图像数据的定时。在这种情况下,遥控发射器277用作用户设置单元。此外,电视机250可以在假设左眼图像数据和右眼图像数据的定时相同的情况下操作,而没有自动获取或用户设置。
“定时校正处理”
下文描述电视机250的3D信号处理单元254中的定时校正处理。存在图像定时与显示定时不同的两种情况。第一种情况是通过交替地成像来获得左眼图像数据和右眼图像数据,并且同步显示左眼图像和右眼图像。第二种情况是通过同步成像来获得左眼图像数据和右眼图像数据,并且交替地显示左眼图像和右眼图像。
首先,下文参照图15和图18描述第一种情况下3D信号处理单元254中执行的定时校正处理。图15和图18示出了在一帧中左眼图像数据(L)和右眼图像数据(R)以此方式得以捕获的情况的示例。
(a)第一校正处理的示例
图15(a)示出了第一校正处理的示例。第一校正处理的示例是校正左眼图像数据(L)和右眼图像数据(R)二者的定时的情况。之前在盘播放器210中的定时校正的描述中描述了第一校正处理的示例,因此未冗余地描述。
(b)第二校正处理的示例
图15(b)示出了第二校正处理的示例。第二校正处理的示例是校正左眼图像数据(L)或右眼图像数据(R)的定时的情况。之前在盘播放器210中的定时校正的描述中描述了第二校正处理的示例,因此未冗余地描述。
图18示出了第三校正处理的示例。第三校正处理的示例是通过将左眼图像数据(L)和右眼图像数据(R)转换为具有两倍帧速的图像数据来校正定时的情况。在图18(a)中,通过重复相同帧图像两次来创建具有两倍帧速的图像数据。在图18(b)中,通过插入利用之前和之后帧图像之间的内插而产生的帧图像L’和R’来创建具有两倍帧速的图像数据。
在如上所述通过到具有两倍帧速的图像数据的转换来执行定时校正的情况下,由于以两倍帧速显示左眼图像和右眼图像,因此可以减小余像。进一步,在如图18(b)中所示的那样通过使用之前和之后图像数据的内插而获得具有两倍帧速的图像数据的情况下,可以显示具有平滑运动的图像。
下文参照图16描述在第二情况下3D信号处理单元254中执行的定时校正处理。图16示出了在一帧中左眼图像和右眼图像以此次序显示的情况的示例。
(a)第一校正处理的示例
图16(a)示出了第一校正处理的示例。第一校正处理的示例是校正左眼图像数据(L)和右眼图像数据(R)二者的定时的情况。之前在盘播放器210中的定时校正的描述中描述了第一校正处理的示例,因此未冗余地描述。
(b)第二校正处理的示例
图16(b)示出了第二校正处理的示例。第二校正处理的示例是校正左眼图像数据(L)或右眼图像数据(R)的定时的情况。之前在盘播放器210中的定时校正的描述中描述了第二校正处理的示例,因此未冗余地描述。
如上所述,在图1中所示的AV系统200中,如果在盘播放器210中再现的左眼图像数据和右眼图像数据的图像定时与在电视机250中显示的左眼图像和右眼图像的显示定时不同,则执行定时校正。由此可以提高带有运动的图像的质量,并减少观众疲劳。
进一步,在图1中所示的AV系统200中的盘播放器210中执行定时校正的情况下,盘播放器210从电视机250中获取左眼图像和右眼图像的显示定时信息,并自动地执行左眼图像数据和右眼图像数据的定时校正。另一方面,在图1中所示的AV系统200中的电视机250中执行定时校正的情况下,电视机250从盘播放器210获取左眼图像数据和右眼图像数据的图像定时信息,并自动地执行左眼图像数据和右眼图像数据的定时校正。因此,没有增加用于操作或设置的用户工作量,并且由于不存在用户的错误操作或设置,因而总是可以进行精确的定时校正。
<2.第二实施方式>
[AV系统的示例性配置]
图19示出了根据本发明第二实施方式的AV系统200A的示例性配置。AV系统200A包括用作信源装置的游戏机400和用作信宿装置的电视机250。电视机250与图1中所示的AV系统200中的电视机250相同。
游戏机400和电视机250通过HDMI线缆350而连接。游戏机400具有与HDMI发送单元(HDMI TX)402连接的HDMI端子401。HDMI线缆350的一端连接到游戏机400的HDMI端子401,而HDMI线缆350的另一端连接到电视机250的HDMI端子251。
在图19中所示的AV系统200A中,通过HDMI线缆350将来自游戏机400的未压缩图像数据(视频信号)发送到电视机250,并且在电视机250中显示基于来自游戏机400的图像数据的图像。进一步,通过HDMI线缆350将来自游戏机400的未压缩音频数据(音频信号)发送到电视机250,并且在电视机250中输出基于来自游戏机400的音频数据的声音。
在从游戏机400发送到电视机250的图像数据是包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据(3D图像数据)的情况下,电视机250执行作为游戏图像的立体图像的显示。从游戏机400到电视机250的立体图像数据的传输方案与图1所示AV系统200中从盘播放器210到电视机250的立体图像数据的传输方案相同(参照图9到图12)。
存在电视机250中显示的左眼图像和右眼图像的两种显示定时:同步和交替。在图19所示AV系统200A中,在游戏机400中产生的、用于显示作为游戏图像的立体图像的左眼图像数据和右眼图像数据的定时与电视机250中左眼图像和右眼图像的显示定时一致。
[游戏机的示例性配置]
图20示出了游戏机400的示例性配置。
游戏机400包括HDMI端子401、HDMI发送单元(HDMI TX)402、以太网接口(I/F)404和网络端子405。游戏机400进一步包括输入接口406、控制垫(control pad)407、驱动器接口408和数字多功能盘/蓝光盘(DVD/BD)驱动器409。
游戏机400进一步包括内部总线410、中央处理单元(CPU)411、闪速只读存储器(ROM)412和动态随机存取存储器(DRAM)413。游戏机400进一步包括渲染(rendering)处理单元414、视频随机存取存储器(VRAM)415、音频处理单元416和MPEG解码器417。应该注意的是,“以太网”和“蓝光盘”是注册商标。
HDMI发送单元(HDMI TX)402通过符合HDMI标准的通信从HDMI端子401发送未压缩(基带)视频(图像)和音频数据。HDMI发送单元402具有与图1所示AV系统200中的盘播放器210的HDMI发送单元212相同的配置。
CPU 411、闪速ROM 412、DRAM 413、以太网接口404、输入接口406和驱动器接口408连接到内部总线410。渲染处理单元414、VRAM 415、音频处理单元416和MPEG解码器417也连接到内部总线410。DVD/BD驱动器409经由驱动器接口408连接到内部总线410。DVD/BD驱动器409执行诸如记录介质(如DVD)上记录的电影之类的内容的再现、在这种记录介质上记录的游戏软件信息的再现等。
在游戏机400用作播放器的情况下,MPEG解码器417执行从记录介质(如DVD)再现的压缩视频数据和音频数据的解码,由此获得未压缩视频数据和音频数据。
CPU 411控制游戏机400的每一个单元的操作。闪速ROM 412存储控制软件和数据。DRAM 413形成CPU 411的工作区。CPU 411在DRAM 413中扩展从闪速ROM 412中读取的软件和数据并启动软件,由此控制游戏机400的每一个单元。
控制垫407组成用户操作单元。输入接口406将来自控制垫407的操作输入信号捕获到内部总线410。渲染处理单元414包括渲染引擎。在游戏机400用作游戏机的情况下,渲染处理单元414基于游戏软件信息,响应于来自控制垫407的用户操作而动态地产生游戏图像,并在VRAM 415中对其进行扩展。
渲染处理单元414产生用于显示二维图像的图像数据,并且还产生用于显示立体图像的立体图像数据(左眼图像数据和右眼图像数据)作为游戏图像数据。在这种情况下,如之后所述的那样,渲染处理单元414通过使用电视机250中左眼图像和右眼图像的显示定时信息,调整待产生的左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。下面描述渲染处理单元414中定时调整的细节。
进一步,当通过HDMI的TMDS信道发送用于显示立体图像的立体图像数据时,渲染处理单元414将立体图像数据处理为符合传输方案的状态(参照图9到图12)。
在游戏机400用作游戏机的情况下,音频处理单元416基于游戏软件信息,响应于来自控制垫217的用户操作而产生用于获得与游戏图像对应的游戏声音的音频数据。
下文简要描述图20所示的游戏机400的操作。基于游戏软件信息响应于控制垫407的用户操作而动态地在渲染处理单元414中产生用于显示游戏图像的图像数据,并在VRAM 415中对其进行扩展。然后从VRAM 415读取图像数据,并将其提供给HDMI发送单元402。进一步,将音频处理单元416中所产生的音频数据提供给HDMI发送单元402。然后通过HDMI的TMDS信道将图像和音频数据从HDMI端子401发送到HDMI线缆。
如果待产生的图像数据是立体图像数据(左眼图像数据和右眼图像数据),则左眼图像数据和右眼图像数据的定时如下。具体地,基于电视机250中左眼图像和右眼图像的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
进一步,在这种情况下,基于游戏软件信息,响应于控制垫407的用户操作而在音频处理单元416中产生用于获得与游戏图像对应的游戏声音的音频数据。将音频数据提供给HDMI发送单元402。然后通过HDMI的TMDS信道,将提供给HDMI发送单元402的游戏图像和音频数据从HDMI端子401发送到HDMI线缆。
[游戏机中的定时调整]
在图19所示的AV系统200A中,当产生立体图像数据(左眼图像数据和右眼图像数据)时,渲染处理单元414调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
在该实施方式中,以与上述图1中的AV系统200的盘播放器210相同的方式,游戏机400从电视机250获取左眼图像和右眼图像的显示定时信息。具体地,游戏机400(CPU 411)通过从电视机250读取包含显示定时信息(LR_Display_Timing)(参照图13和图14)的E-EDID来获取显示定时信息。换言之,电视机250将显示定时信息添加到E-EDID,由此将信息提供给游戏机400。
可以通过游戏机400中的用户设置(选择)来获取显示定时信息,而不限于如上所述经由HDMI自动地获取。
游戏机400的CPU 411基于上述E-EDID中所包含的显示定时信息或由用户设置的显示定时信息来识别电视机250中左眼图像和右眼图像的显示定时。CPU 411基于显示定时信息来控制渲染处理单元414,以便将渲染处理单元414中所产生的左眼图像数据和右眼图像数据的定时调整为与左眼图像和右眼图像的显示定时一致。
在同步显示左眼图像和右眼图像的情况下,例如,渲染处理单元414关于每一帧在3D(三维)空间中执行对于左右图像共同的建模,由此产生左眼图像数据和右眼图像数据。另一方面,在交替地显示左眼图像和右眼图像的情况下,例如,渲染处理单元414关于每0.5帧在3D(三维)空间中执行左图像的建模和右图像的建模,由此产生左眼图像数据和右眼图像数据。
如上所述,在图19的AV系统200A中,在游戏机400中产生的、用于显示立体图像作为游戏图像的左眼图像数据和右眼图像数据的定时与电视机250中的左眼图像和右眼图像的显示定时相一致。由此可以提高带有运动的图像的质量,并减少观众疲劳。
进一步,在图19的AV系统200A中,游戏机400从电视机250获取左眼图像和右眼图像的显示定时信息,并基于所获取的显示定时信息,自动地调整渲染处理单元414中产生的左眼图像数据和右眼图像数据的定时以便与电视机250中的左眼图像和右眼图像的显示定时一致。因此,对于操作的用户工作量没有增加,并且由于不存在用户的错误操作或设置,因而总是可以进行精确的定时调整。
<3.第三实施方式>
[AV系统的示例性配置]
图21示出了根据本发明第三实施方式的AV系统200B的示例性配置。AV系统200B包括用作信源装置的盘播放器210、用作中继器装置的AV放大器300和用作信宿装置的电视机250。盘播放器210和电视机250与图1中所示AV系统200中的盘播放器210和电视机250相同。
在图21所示的AV系统200B中,AV放大器300连接在盘播放器210与电视机250之间。盘播放器210和AV放大器300通过HDMI线缆351连接。AV放大器300具有与HDMI接收单元(HDMI RX)302a连接的HDMI端子301a。HDMI线缆351的一端连接到盘播放器210的HDMI端子211,而HDMI线缆351的另一端连接到AV放大器300的HDMI端子301a。
进一步,AV放大器300和电视机250通过HDMI线缆352连接。AV放大器300具有与HDMI发送单元(HDMI TX)302b连接的HDMI端子301b。HDMI线缆352的一端连接到AV放大器300的HDMI端子301b,而HDMI线缆352的另一端连接到电视机250的HDMI端子251。
在图21所示的AV系统200B中,通过HDMI线缆351、AV放大器300和HDMI线缆352将来自盘播放器210的未压缩图像数据(视频信号)发送到电视机250,并且在电视机250中显示基于来自盘播放器210的图像数据的图像。进一步,通过HDMI线缆351、AV放大器300和HDMI线缆352将来自盘播放器210的未压缩音频数据(音频信号)发送到电视机250,并且在电视机250中输出基于来自盘播放器210的音频数据的声音。响应于用户的选择操作,可以从外部附于AV放大器300的扬声器(未示出)输出声音。
在从盘播放器210发送到电视机250的图像数据是包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据(3D图像数据)的情况下,电视机250执行立体图像的显示。从盘播放器210到电视机250的立体图像数据的传输方案与图1所示AV系统200中的相同(参照图9到图12)。
存在盘播放器210中再现的左眼图像数据和右眼图像数据的两种图像定时:同步和交替。进一步,存在电视机250中显示的左眼图像和右眼图像的两种显示定时:同步和交替。
在图21所示的AV系统200B中,如果盘播放器210中再现的左眼图像数据和右眼图像数据的图像定时与电视机250中显示的左眼图像和右眼图像的显示定时不同,则在AV放大器300中执行定时校正。执行定时校正,以便左眼图像数据和右眼图像数据的定时与左眼图像和右眼图像的显示定时一致。
存在图像定时与显示定时不同的两种情况。一种情况是通过交替地成像来获得左眼图像数据和右眼图像数据,并且同步显示左眼图像和右眼图像。另一种情况是通过同步成像来获得左眼图像数据和右眼图像数据,并交替地显示左眼图像和右眼图像。
[AV放大器的示例性配置]
图22示出了AV放大器300的示例性配置。AV放大器300包括HDMI端子301a和301b、HDMI接收单元302a以及HDMI发送单元302b。AV放大器300进一步包括视频图形处理电路305、音频处理电路307、音频放大电路308和音频输出端子309a到309f。AV放大器300进一步包括内部总线312、CPU 313、闪速ROM 314和DRAM 315。
HDMI接收单元302a通过符合HDMI标准的通信、经由HDMI线缆351来接收提供给HDMI端子301a的未压缩视频(图像)和音频数据。尽管未详细描述,但是HDMI接收单元302a具有与图1中所示的AV系统200中的电视机250的HDMI接收单元252相同的配置。
HDMI发送单元302b通过符合HDMI标准的通信,将未压缩视频(图像)和音频数据从HDMI端子301b发送到HDMI线缆352。尽管未详细描述,但HDMI发送单元302b具有与图1中所示的AV系统200中的盘播放器210的HDMI发送单元212相同的配置。
音频处理电路307对HDMI接收单元302a所获得的音频数据执行产生用于实现5.1ch环绕的相应声道的音频数据的处理、添加指定声场特征的处理、将数字信号转换为模拟信号的处理等。音频放大电路308将输出自音频处理电路307的相应声道的音频信号进行放大,并将信号输出到音频输出端子309a到309f。
在执行必要处理之后,音频处理电路307进一步将HDMI接收单元302a所获得的音频数据提供给HDMI发送单元302b。视频图形处理电路305对HDMI接收单元302a所获得的视频(图像)数据适当地执行图像转换、图形的叠加等,并将数据提供给HDMI发送单元302b。
CPU 313控制AV放大器300的每个单元的操作。闪速ROM 314存储控制软件和数据。DRAM 315形成CPU 313的工作区。CPU 313在DRAM 315中扩展从闪速ROM 314读取的软件和数据并启动软件,由此控制AV放大器300的每个单元。CPU 313、闪速ROM 314和DRAM 315连接到内部总线312。
视频图形处理电路305对HDMI接收单元302a所接收到的立体图像数据(3D图像数据)执行符合传输方案的处理(解码),由此产生左眼图像数据和右眼图像数据。进一步,视频图形处理电路305将经处理的立体图像数据(左眼图像数据和右眼图像数据)处理为符合传输方案的状态(参照图9到图12),并将其提供给HDMI发送单元302b。
此外,视频图形处理电路305适当地执行HDMI接收单元302a所接收到和获得的左眼图像数据和右眼图像数据的定时校正。在这种情况下,视频图形处理电路305用作定时校正单元。后面描述视频图形处理电路305中定时校正的细节。
简要描述图22中所示的AV放大器300的操作。在HDMI接收单元302a中,获取通过HDMI线缆351从与HDMI端子301a连接的盘播放器210发送的视频(图像)数据和音频数据。视频数据和音频数据分别经由视频图形处理电路305和音频处理电路307而提供给HDMI发送单元302b,并通过HDMI线缆352而从HDMI端子301b发送到电视机250。AV放大器300由此发挥中继器功能。
当经由AV放大器300输出声音时,音频处理电路307对HMDI接收单元302a所获得的音频数据执行诸如如下处理之类的必要处理:产生用于实现5.1ch环绕的相应声道的音频数据的处理、添加指定的声场特征的处理以及将数字信号转换为模拟信号的处理。然后音频放大电路308将相应声道的音频信号进行放大,并将其输出到音频输出端子309a到309f。
“定时校正处理”
下文描述AV放大器300的视频图形处理电路305中的定时校正处理。
在该实施方式中,AV放大器300就像上述图1中的AV系统200的电视机250一样,从盘播放器210获取左眼图像数据和右眼图像数据的图像定时信息。具体地,AV放大器300通过从HDMI接收单元302接收到的立体图像数据的消隐中提取包含图像定时信息(LR_Image_Timing)(参照图17)的AVI InfoFrame分组来获取图像定时信息。换言之,盘播放器210将图像定时信息插入到要从HDMI发送单元212发送的立体图像数据的消隐,由此将图像定时信息提供给AV放大器300。
可以通过AV放大器300中的用户设置(选择)来获取图像定时信息,而不限于如上所述那样经由HDMI自动地获取。进一步,关于图像定时信息,AV放大器300可以在假设左眼图像数据和右眼图像数据的定时相同的情况下操作,而不用自动获取或用户设置。
在该实施方式中,以与上述图1中AV系统200的盘播放器210相同的方式,AV放大器300从电视机250获取左眼图像和右眼图像的显示定时信息。具体地,AV放大器300(CPU 313)通过从电视机250读取包含显示定时信息(LR_Display_Timing)(参照图13和图14)的E-EDID来获取显示定时信息。换言之,电视机250将显示定时信息添加到E-EDID,由此将信息提供给AV放大器300。
可以通过AV放大器300中的用户设置(选择)来获取显示定时信息,而不限于如上所述经由HDMI自动地获取。
AV放大器300的CPU 313基于上述E-EDID中包含的显示定时信息或用户设置的显示定时信息,识别电视机250中左眼图像和右眼图像的显示定时。进一步,AV放大器300的CPU 313基于在上述AVI InfoFrame分组中包含的图像定时信息或用户设置的定时信息,识别从盘播放器210发送的左眼图像数据和右眼图像数据的图像定时。当不存在图像定时信息的自动获取或用户设置时,AV放大器300的CPU 313假设左眼图像数据和右眼图像数据的定时相同。
如果图像定时与显示定时不同,则CPU 313进行控制以便在视频图形处理电路305中执行定时校正。执行定时校正,以便在盘播放器210中由BD/DVD驱动器214再现的左眼图像数据和右眼图像数据的定时与电视机250中左眼图像和右眼图像的显示定时一致。
存在图像定时和显示定时不同的两种情况。第一种情况是通过交替地成像来获得左眼图像数据和右眼图像数据,并且同步显示左眼图像和右眼图像。第二种情况是通过通过成像来获得左眼图像数据和右眼图像数据,并且交替地显示左眼图像和右眼图像。
在第一种情况下在视频图形处理电路305中执行的定时校正处理与在第一种情况下在图1中所示的AV系统200中盘播放器210的视频信号处理电路217中执行的定时校正处理相同(参照图15(a)和15(b))。在这种情况下,在每一帧中,校正之后左眼图像数据的定时和右眼图像数据的定时相同,并且与左眼图像和右眼图像的显示定时一致。
进一步,在第二种情况下在视频图形处理电路305中执行的定时校正处理与在第二种情况下图1中所示的AV系统200中盘播放器210的视频信号处理电路217中执行的定时校正处理相同(参照图16(a)和图16(b))。在这种情况下,每0.5帧交替校正之后的左眼图像数据的定时和右眼图像数据的定时,并且与左眼图像和右眼图像的显示定时一致。
在图21所示的AV系统200B中,如果盘播放器210中再现的左眼图像数据和右眼图像数据的图像定时与电视机250中显示的左眼图像和右眼图像的显示定时不同,则在AV放大器300中执行定时校正。因此,电视机250中接收到左眼图像数据和右眼图像数据的定时与电视机250中左眼图像和右眼图像的显示定时一致。由此可以提高带有运动的图像的质量并减少观众疲劳。
进一步,在图21的AV系统200B中,AV放大器300从电视机250获取左眼图像和右眼图像的显示定时信息,并从盘播放器210获取左眼图像数据和右眼图像数据的图像定时信息。基于这些信息,AV放大器300自动地调整从盘播放器210中继到电视机250的左眼图像数据和右眼图像数据的定时,以便与电视机250中左眼图像和右眼图像的显示定时一致。因此,对于操作的用户工作量没有增加,并且由于不存在用户的错误操作或设置,因此总是可以进行精确的定时调节。
此外,在AV放大器300如图21中的AV系统200B中那样连接在盘播放器210和电视机250之间的情况下,就像图1的AV系统200中那样,可以在盘播放器210或电视机250中执行定时校正。在这种情况下,盘播放器210经由AV放大器300从电视机250获取左眼图像和右眼图像的显示定时信息。进一步,电视机250经由AV放大器300从盘播放器210获取图像定时信息。
例如,假设在图21所示的AV系统200B的配置中AV放大器300和电视机250二者均具有定时校正功能的情况。在这种情况下,当如上所述那样在AV放大器300中执行定时校正时,可以通过将电视机250中的显示定时信息设置为从AV放大器300提供到电视机250的图像定时信息来禁止电视机250中的校正处理。由此可以避免对左眼图像数据和右眼图像数据冗余地执行定时校正的缺点。
<4.可替代的示例>
本领域技术人员应理解,根据设计要求和其他因素可以出现各种修改、组合、部分组合和变更,只要其在所附权利要求及其等效物的范围内即可。
例如,在上述实施方式中,通过例示的方式示出了使用HDMI传输路径的系统。然而,例如,本发明也可同样地应用于使用不同于HDMI的未压缩视频信号的传输路径(如,期望在将来变得流行的数字可视接口(DVI)、显示端口(DP)接口、无线传输和千兆位以太网光纤传输路径)的系统。
例如,在DVI的情况下,就像上述HDMI那样,定义了将视频信号的可兼容数据格式(分辨率、帧速等)存储到接收设备中包括的称为E-EDID的区域的标准。因此,在DVI的情况下,发送设备可以以与上述HDMI的情况相同的方式,通过显示数据信道(DDC)而从接收设备中的E-EDID获取左眼图像和右眼图像的显示定时信息。因此,发送设备可以校正或产生左眼图像和右眼图像,以便与接收设备中的左眼图像和右眼图像的显示定时一致。
进一步,在上述实施方式中,示出了这样的系统:其中,盘播放器210、游戏机400或AV放大器300通过从电视机250读取E-EDID来获取左眼图像和右眼图像的显示定时信息。此外,在上述实施方式中,示出了这样的系统:其中,电视机250或AV放大器300通过从接收到的立体图像数据的垂直消隐中提取AVI InfoFrame分组来获取左眼图像数据和右眼图像数据的图像定时信息。
然而,每一个装置获取这种信息的方式不限于此。例如,可以通过利用CEC线(例如,其为HDMI线缆的控制数据线)执行通信来获取这种信息。进一步,每一个装置可以利用通过上述HDMI线缆的预定线(如,保留线、HPD线等)所组成的双路通信信道执行通信来获取这种信息。
此外,在上述实施方式中,通过例示的方式示出了发送设备是盘播放器210或游戏机400、中继设备是AV放大器300并且接收设备是电视机250的情况。然而,发送设备、中继设备和接收设备不限于此。例如,代替盘播放器210或游戏机400,发送设备可以是DVD记录器、机顶盒或另一AV源。进一步,代替电视机250,接收设备可以是投影仪、PC监视器或另一显示器。
本发明可应用于如下这样的AV系统:在该AV系统中,从发送设备发送立体图像数据,并在接收设备中显示左眼图像和右眼图像,由此向观众提供立体图像,这使得能够提高带有运动的图像的质量并减少观众疲劳,而不增加用于操作或设置的用户工作量。
本申请包含与2009年5月1日向日本专利局提交的日本优先权专利申请JP 2009-112291中公开的主题相关的主题,将其全部内容通过引用的方式合并在此。

Claims (41)

1.一种发送设备,包括:
图像数据输出单元,输出用于显示立体图像的左眼图像数据和右眼图像数据;
定时校正单元,校正从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的定时;
数据发送单元,通过传输路径将包括从所述定时校正单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
信息获取单元,通过所述传输路径从所述外部装置获取左眼图像和右眼图像的显示定时信息,
其中,所述定时校正单元基于左眼图像和右眼图像的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
2.一种发送设备,包括:
图像数据输出单元,输出用于显示立体图像的左眼图像数据和右眼图像数据;
定时校正单元,校正从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的定时;
数据发送单元,通过传输路径将包括从所述定时校正单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
用户设置单元,用于用户设置左眼图像和右眼图像的显示定时,
其中,所述定时校正单元基于左眼图像和右眼图像的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替,以及
其中,所述左眼图像和右眼图像的显示定时信息是指示由所述用户设置单元设置的左眼图像和右眼图像的显示定时的信息。
3.根据权利要求1或2所述的发送设备,其中
所述定时校正单元校正左眼图像数据和右眼图像数据二者的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
4.根据权利要求1或2所述的发送设备,其中
所述定时校正单元校正左眼图像数据和右眼图像数据之一的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
5.根据权利要求4所述的发送设备,进一步包括:
图像数据选择单元,从左眼图像数据和右眼图像数据中选择要校正定时的一个图像数据。
6.根据权利要求1或2所述的发送设备,其中
所述数据发送单元通过多个信道利用差分信号而经由所述传输路径将立体图像数据发送到所述外部装置。
7.根据权利要求1所述的发送设备,其中
所述数据发送单元通过多个信道利用差分信号而经由所述传输路径将立体图像数据发送到所述外部装置,以及
所述信息获取单元通过从所述外部装置中包括的存储单元中读取信息来获取显示定时信息。
8.一种立体图像数据发送方法,包括如下步骤:
输出用于显示立体图像的左眼图像数据和右眼图像数据;
校正在输出图像数据的步骤中输出的左眼图像数据和右眼图像数据的定时;
通过传输路径将包括要在校正定时的步骤中校正定时的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
通过传输路径从外部装置获取左眼图像和右眼图像的显示定时信息,
其中,校正定时的步骤基于在获取信息的步骤中获取的显示定时信息,调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
9.一种立体图像数据发送方法,包括如下步骤:
输出用于显示立体图像的左眼图像数据和右眼图像数据;
校正在输出图像数据的步骤中输出的左眼图像数据和右眼图像数据的定时;
通过传输路径将包括要在校正定时的步骤中校正定时的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
由用户设置左眼图像和右眼图像的显示定时,
其中,校正定时的步骤基于用户在设置显示定时的步骤中所设置的显示定时的信息,调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
10.一种接收设备,包括:
数据接收单元,通过传输路径从外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
数据处理单元,处理所述数据接收单元所接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;以及
信息提供单元,通过所述传输路径将基于所述数据处理单元所获得的左眼图像数据的左眼图像和基于所述数据处理单元所获得的右眼图像数据的右眼图像的显示定时信息提供给所述外部装置,
其中,所述数据接收单元从所述外部装置接收包括定时与左眼图像和右眼图像的显示定时一致的左眼图像数据和右眼图像数据的立体图像数据,并且所述定时为同步或交替。
11.一种接收设备,包括:
数据接收单元,通过传输路径从外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
数据处理单元,处理所述数据接收单元所接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;以及
定时校正单元,校正所述数据处理单元所获得的左眼图像数据和右眼图像数据的定时,
其中,所述定时校正单元调整左眼图像数据和右眼图像数据的定时以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致,并且所述定时为同步或交替。
12.根据权利要求11所述的接收设备,进一步包括:
信息获取单元,通过所述传输路径从所述外部装置获取左眼图像数据和右眼图像数据的图像定时信息,
其中,所述定时校正单元基于所述信息获取单元所获取的图像定时信息,调整左眼图像数据和右眼图像数据的定时以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致。
13.根据权利要求11所述的接收设备,其中
假设左眼图像数据和右眼图像数据的定时相同,所述定时校正单元调整左眼图像数据和右眼图像数据的定时,以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致。
14.根据权利要求11所述的接收设备,进一步包括:
用户设置单元,用于用户设置左眼图像数据和右眼图像数据的定时,
其中,所述定时校正单元基于所述用户设置单元所设置的定时的信息,调整左眼图像数据和右眼图像数据的定时,以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致。
15.根据权利要求11所述的接收设备,其中
所述定时校正单元校正左眼图像数据和右眼图像数据二者的定时,并调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。
16.根据权利要求11所述的接收设备,其中
所述定时校正单元校正左眼图像数据和右眼图像数据之一的定时,并调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。
17.根据权利要求16所述的接收设备,进一步包括:
图像数据选择单元,从左眼图像数据和右眼图像数据中选择要校正定时的一个图像数据。
18.根据权利要求12所述的接收设备,其中
当所述图像定时信息指示交替地捕获左眼图像数据和右眼图像数据,并且左眼图像和右眼图像的显示定时相同时,所述定时校正单元通过将左眼图像数据和右眼图像数据转换为具有两倍帧速的图像数据,来调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
19.根据权利要求11所述的接收设备,其中
所述数据接收单元通过多个信道利用差分信号而经由所述传输路径从外部装置接收立体图像数据。
20.根据权利要求12所述的接收设备,其中
所述数据接收单元通过多个信道利用差分信号而经由传输路径从外部装置接收立体图像数据,以及
所述信息获取单元通过从所述数据接收单元接收到的立体图像数据的消隐中提取信息,来获取图像定时信息。
21.一种立体图像数据接收方法,包括如下步骤:
通过传输路径从外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
处理在接收数据的步骤中接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;
校正在处理数据的步骤中获得的左眼图像数据和右眼图像数据的定时;以及
通过传输路径从外部装置获得左眼图像数据和右眼图像数据的图像定时信息,
其中,校正定时的步骤基于在获取信息的步骤中获取的图像定时信息,调整左眼图像数据和右眼图像数据的定时以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致,并且所述定时为同步或交替。
22.一种立体图像数据接收方法,包括如下步骤:
通过传输路径从外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
处理在接收数据的步骤中接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;
校正在处理数据的步骤中获得的左眼图像数据和右眼图像数据的定时;以及
由用户设置左眼图像数据和右眼图像数据的定时,
其中,校正定时的步骤基于用户在设置定时的步骤中所设置的左眼图像数据和右眼图像数据的定时信息,调整左眼图像数据和右眼图像数据的定时以便与基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像的显示定时一致,并且所述定时为同步或交替。
23.一种发送设备,包括:
图像数据输出单元,输出用于显示立体图像的左眼图像数据和右眼图像数据;
数据发送单元,通过传输路径将包括从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
信息提供单元,通过传输路径将从所述图像数据输出单元输出的左眼图像数据和右眼图像数据的图像定时信息提供给所述外部装置,并且所述定时为同步或交替。
24.一种发送设备,包括:
图像数据产生单元,动态地产生用于显示立体图像的左眼图像数据和右眼图像数据;以及
数据发送单元,通过传输路径将包括所述图像数据产生单元中产生的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置,
其中,所述图像数据产生单元基于左眼图像和右眼图像的显示定时信息,调整动态产生的左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
25.根据权利要求24所述的发送设备,进一步包括:
信息获取单元,通过传输路径从所述外部装置获取左眼图像和右眼图像的显示定时信息。
26.根据权利要求24所述的发送设备,进一步包括:
用户设置单元,用于用户设置左眼图像和右眼图像的显示定时,
其中,所述左眼图像和右眼图像的显示定时信息是指示所述用户设置单元所设置的左眼图像和右眼图像的显示定时的信息。
27.根据权利要求24所述的发送设备,其中
所述数据发送单元通过多个信道利用差分信号而经由传输路径将立体图像数据发送到外部装置。
28.根据权利要求25所述的发送设备,其中
所述数据发送单元通过多个信道利用差分信号而经由传输路径将立体图像数据发送到外部装置,以及
所述信息获取单元通过从外部装置中包括的存储单元中读取信息,来获取显示定时信息。
29.一种立体图像数据发送方法,包括如下步骤:
动态地产生用于显示立体图像的左眼图像数据和右眼图像数据;
通过传输路径将包括产生图像数据的步骤中所产生的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
通过传输路径从外部装置获取左眼图像和右眼图像的显示定时信息,
其中,产生图像数据的步骤基于在获取信息的步骤中所获取的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
30.一种立体图像数据发送方法,包括如下步骤:
动态地产生用于显示立体图像的左眼图像数据和右眼图像数据;
通过传输路径将包括产生图像数据的步骤中所产生的左眼图像数据和右眼图像数据的立体图像数据发送到外部装置;以及
由用户设置左眼图像和右眼图像的显示定时,
其中,产生图像数据的步骤基于用户在设置显示定时的步骤中所设置的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
31.一种中继设备,包括:
数据接收单元,通过第一传输路径从第一外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
数据处理单元,处理所述数据接收单元所接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;
定时校正单元,校正所述数据处理单元所获得的左眼图像数据和右眼图像数据的定时;以及
数据发送单元,通过第二传输路径将包括从所述校正单元输出的左眼图像数据和右眼图像数据的立体图像数据发送到第二外部装置,
其中,所述定时校正单元调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
32.根据权利要求31所述的中继设备,进一步包括:
第一信息获取单元,通过所述第一传输路径从所述第一外部装置获取左眼图像数据和右眼图像数据的图像定时信息;以及
第二信息获取单元,通过所述第二传输路径从所述第二外部装置获取左眼图像和右眼图像的显示定时信息,
其中,所述定时校正单元基于所述第一信息获取单元所获取的图像定时信息以及所述第二信息获取单元所获取的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
33.根据权利要求31所述的中继设备,进一步包括:
第一用户设置单元,用于用户设置左眼图像和右眼图像的显示定时;以及
第二用户设置单元,用于用户设置左眼图像数据和右眼图像数据的定时,
其中,所述定时校正单元基于指示所述第一用户设置单元所设置的左眼图像和右眼图像的显示定时的信息以及指示所述第二用户设置单元所设置的左眼图像数据和右眼图像数据的定时的信息,调整左眼图像数据和右眼图像数据的定时,以便与左眼图像和右眼图像的显示定时一致。
34.根据权利要求31所述的中继设备,进一步包括:
用户设置单元,用于用户设置左眼图像和右眼图像的显示定时,
其中,所述定时校正单元假设左眼图像数据和右眼图像数据的定时相同并且基于指示所述用户设置单元所设置的左眼图像和右眼图像的显示定时的信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
35.根据权利要求31所述的中继设备,其中
所述定时校正单元校正左眼图像数据和右眼图像数据二者的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
36.根据权利要求31所述的中继设备,其中
所述定时校正单元校正左眼图像数据和右眼图像数据之一的定时,并调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致。
37.根据权利要求36所述的中继设备,进一步包括:
图像数据选择单元,从左眼图像数据和右眼图像数据中选择要校正定时的一个图像数据。
38.根据权利要求31所述的中继设备,其中
所述数据接收单元通过多个信道利用差分信号而经由所述第一传输路径从所述第一外部装置接收立体图像数据,以及
所述数据发送单元通过多个信道利用差分信号而经由所述第二传输路径将立体图像数据发送到所述第二外部装置。
39.根据权利要求32所述的中继设备,其中
所述数据接收单元通过多个信道利用差分信号而经由所述第一传输路径从所述第一外部装置接收立体图像数据,
所述数据发送单元通过多个信道利用差分信号而经由所述第二传输路径将立体图像数据发送到所述第二外部装置,
所述第一信息获取单元通过从所述数据接收单元接收到的立体图像数据的消隐中提取信息来获取图像定时信息,以及
所述第二信息获取单元通过从所述第二外部装置中包括的存储单元中读取信息来获取显示定时信息。
40.一种立体图像数据中继方法,包括如下步骤:
通过第一传输路径从第一外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
处理在接收数据的步骤中所接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;
校正在处理数据的步骤中所获得的左眼图像数据和右眼图像数据的定时;
通过所述第一传输路径从所述第一外部装置获取左眼图像数据和右眼图像数据的图像定时信息;
通过第二传输路径将包括校正定时的步骤中校正了定时的左眼图像数据和右眼图像数据的立体图像数据发送到第二外部装置;以及
通过所述第二传输路径从所述第二外部装置获取左眼图像和右眼图像的显示定时信息,
其中,校正定时的步骤基于在获取图像定时信息的步骤中所获取的图像定时信息以及在获取显示定时信息的步骤中所获取的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
41.一种立体图像数据中继方法,包括如下步骤:
通过第一传输路径从第一外部装置接收包括用于显示立体图像的左眼图像数据和右眼图像数据的立体图像数据;
处理在接收数据的步骤中接收到的立体图像数据,并获得左眼图像数据和右眼图像数据;
校正在处理数据的步骤中获得的左眼图像数据和右眼图像数据的定时;
由用户设置左眼图像数据和右眼图像数据的定时;
通过第二传输路径将包括校正定时的步骤中校正了定时的左眼图像数据和右眼图像数据的立体图像数据发送到第二外部装置;以及
由用户设置左眼图像和右眼图像的显示定时,
其中,校正定时的步骤基于用户在设置定时的步骤中所设置的图像定时信息以及用户在设置显示定时的步骤中所设置的显示定时信息,调整左眼图像数据和右眼图像数据的定时以便与左眼图像和右眼图像的显示定时一致,并且所述定时为同步或交替。
CN2010101674944A 2009-05-01 2010-04-26 立体图像数据发送、接收和中继方法以及其设备 Expired - Fee Related CN101877795B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210258065.7A CN102811361B (zh) 2009-05-01 2010-04-26 立体图像数据发送、接收和中继方法以及其设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP112291/09 2009-05-01
JP2009112291A JP5448558B2 (ja) 2009-05-01 2009-05-01 送信装置、立体画像データの送信方法、受信装置、立体画像データの受信方法、中継装置および立体画像データの中継方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201210258065.7A Division CN102811361B (zh) 2009-05-01 2010-04-26 立体图像数据发送、接收和中继方法以及其设备

Publications (2)

Publication Number Publication Date
CN101877795A CN101877795A (zh) 2010-11-03
CN101877795B true CN101877795B (zh) 2012-09-05

Family

ID=43020244

Family Applications (2)

Application Number Title Priority Date Filing Date
CN2010101674944A Expired - Fee Related CN101877795B (zh) 2009-05-01 2010-04-26 立体图像数据发送、接收和中继方法以及其设备
CN201210258065.7A Expired - Fee Related CN102811361B (zh) 2009-05-01 2010-04-26 立体图像数据发送、接收和中继方法以及其设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201210258065.7A Expired - Fee Related CN102811361B (zh) 2009-05-01 2010-04-26 立体图像数据发送、接收和中继方法以及其设备

Country Status (3)

Country Link
US (1) US20100277567A1 (zh)
JP (1) JP5448558B2 (zh)
CN (2) CN101877795B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110129903A (ko) * 2009-02-18 2011-12-02 코닌클리케 필립스 일렉트로닉스 엔.브이. 3d 시청자 메타데이터의 전송
JP5609010B2 (ja) * 2009-05-26 2014-10-22 ヤマハ株式会社 Av機器制御装置
RU2012146943A (ru) * 2010-04-06 2014-05-20 Конинклейке Филипс Электроникс Н.В. Уменьшение видимости 3d шума
US9055281B2 (en) * 2010-05-20 2015-06-09 Samsung Electronics Co., Ltd. Source device and sink device and method of transmitting and receiving multimedia service and related data
US20120050462A1 (en) * 2010-08-25 2012-03-01 Zhibing Liu 3d display control through aux channel in video display devices
KR101910192B1 (ko) * 2010-11-12 2018-10-22 한국전자통신연구원 3dtv 서비스에서의 영상 압축 규격 결정 방법 및 장치
KR20120058702A (ko) * 2010-11-27 2012-06-08 전자부품연구원 디지털 방송에서 서비스 호환 방식 전송 방법
KR20120058700A (ko) 2010-11-27 2012-06-08 전자부품연구원 디지털 방송의 전송 모드 제공 및 인지 방법
JP2012204859A (ja) * 2011-03-23 2012-10-22 Toshiba Corp 画像処理装置及びカメラモジュール
KR101817939B1 (ko) 2011-03-28 2018-01-15 삼성디스플레이 주식회사 3차원 영상 데이터 처리 방법 및 이를 수행하는 표시 장치
JP5335022B2 (ja) * 2011-04-05 2013-11-06 住友電気工業株式会社 映像再生装置
JP5863356B2 (ja) * 2011-09-21 2016-02-16 キヤノン株式会社 ステレオ動画像の撮像装置、撮像方法、ステレオ動画像の表示装置、表示方法及びプログラム
WO2013080555A1 (ja) * 2011-12-01 2013-06-06 パナソニック株式会社 立体視映像データ生成装置及び立体視映像再生装置
US10129318B2 (en) 2014-05-06 2018-11-13 Lattice Semiconductor Corporation Media stream data and control parameter synchronization
WO2020100215A1 (ja) * 2018-11-13 2020-05-22 オリンパス株式会社 撮像装置、画像補正方法および画像補正プログラム
TWI769046B (zh) * 2021-08-10 2022-06-21 瑞昱半導體股份有限公司 具有頻率校正機制的訊號中繼裝置及方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1619359A (zh) * 2003-09-30 2005-05-25 株式会社东芝 立体图像生成方法和立体图像显示装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01171389A (ja) * 1987-12-25 1989-07-06 Sharp Corp 映像再生装置
US5821989A (en) * 1990-06-11 1998-10-13 Vrex, Inc. Stereoscopic 3-D viewing system and glasses having electrooptical shutters controlled by control signals produced using horizontal pulse detection within the vertical synchronization pulse period of computer generated video signals
US5416510A (en) * 1991-08-28 1995-05-16 Stereographics Corporation Camera controller for stereoscopic video system
JPH07284128A (ja) * 1994-04-07 1995-10-27 Sanyo Electric Co Ltd 立体映像表示方法及びその装置
JP2716388B2 (ja) * 1994-12-26 1998-02-18 日本電気株式会社 立体画像用ディスプレイ装置
US20040218269A1 (en) * 2002-01-14 2004-11-04 Divelbiss Adam W. General purpose stereoscopic 3D format conversion system and method
CA2380105A1 (en) * 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
WO2004049734A1 (ja) * 2002-11-28 2004-06-10 Seijiro Tomita 立体映像信号生成回路及び立体映像表示装置
US20040252756A1 (en) * 2003-06-10 2004-12-16 David Smith Video signal frame rate modifier and method for 3D video applications
JP4190357B2 (ja) * 2003-06-12 2008-12-03 シャープ株式会社 放送データ送信装置、放送データ送信方法および放送データ受信装置
CA2569106C (en) * 2004-06-04 2013-05-21 Qualcomm Incorporated High data rate interface apparatus and method
JP2006140553A (ja) * 2004-11-10 2006-06-01 Canon Inc 立体画像生成プログラム、立体画像生成装置および立体画像生成方法
JP2006157605A (ja) * 2004-11-30 2006-06-15 Furoobell:Kk 映像処理システムおよび方法、撮像装置および方法、映像処理装置、映像データ出力方法、記録媒体、並びにプログラム
US20090051759A1 (en) * 2005-05-27 2009-02-26 Adkins Sean M Equipment and methods for the synchronization of stereoscopic projection displays
JP5542297B2 (ja) * 2007-05-17 2014-07-09 株式会社半導体エネルギー研究所 液晶表示装置、表示モジュール及び電子機器
JP5060231B2 (ja) * 2007-09-21 2012-10-31 株式会社バンダイナムコゲームス 画像生成方法、立体視用印刷物、立体視用印刷物の製造方法及びプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1619359A (zh) * 2003-09-30 2005-05-25 株式会社东芝 立体图像生成方法和立体图像显示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2005-110010A 2005.04.21

Also Published As

Publication number Publication date
CN101877795A (zh) 2010-11-03
JP5448558B2 (ja) 2014-03-19
CN102811361B (zh) 2015-08-12
CN102811361A (zh) 2012-12-05
JP2010263382A (ja) 2010-11-18
US20100277567A1 (en) 2010-11-04

Similar Documents

Publication Publication Date Title
CN101877795B (zh) 立体图像数据发送、接收和中继方法以及其设备
JP5338166B2 (ja) 送信装置、立体画像データ送信方法、受信装置および立体画像データ受信方法
US8810563B2 (en) Transmitting apparatus, stereoscopic image data transmitting method, receiving apparatus, and stereoscopic image data receiving method
JP5531972B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
TWI437873B (zh) Three-dimensional image data transmission device, three-dimensional image data transmission method, three-dimensional image data receiving device and three-dimensional image data receiving method
JP5477499B2 (ja) 送信装置および立体画像データ送信方法
JP6304417B2 (ja) 受信方法および受信装置
JP6098678B2 (ja) 送信方法および送信装置
JP5577477B1 (ja) 立体画像データ受信方法および立体画像データ受信装置
JP5577476B1 (ja) 立体画像データ送信方法および立体画像データ送信装置
JP5621944B2 (ja) 送信装置および送信方法
JP5583866B2 (ja) 送信装置、立体画像データ送信方法、受信装置および立体画像データ受信方法
JP5790859B2 (ja) 送受信システム
JP5538604B2 (ja) 立体画像データ送信方法および立体画像データ送信装置
JP5583297B2 (ja) 立体画像データ受信方法および立体画像データ受信装置
JP2014131272A (ja) 受信装置および情報処理方法
JP2014225901A (ja) 立体画像データ送信方法および立体画像データ送信装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120905