CN102884800A - 发送装置、发送方法、接收装置、以及接收方法 - Google Patents

发送装置、发送方法、接收装置、以及接收方法 Download PDF

Info

Publication number
CN102884800A
CN102884800A CN2011800226182A CN201180022618A CN102884800A CN 102884800 A CN102884800 A CN 102884800A CN 2011800226182 A CN2011800226182 A CN 2011800226182A CN 201180022618 A CN201180022618 A CN 201180022618A CN 102884800 A CN102884800 A CN 102884800A
Authority
CN
China
Prior art keywords
data
information
video flowing
shutter
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011800226182A
Other languages
English (en)
Inventor
塚越郁夫
桥本胜宪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102884800A publication Critical patent/CN102884800A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359Switching between monoscopic and stereoscopic modes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

[要解决的问题]在接收多路复用流和执行多路复用流的图像显示时,允许适当地执行快门眼镜的自动切换,该多路复用流以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流。[解决办法]在发送侧,相对于第一视频流与第二视频流之间的切换定时留有时间余地T地插入从传输流中获得的预先信息。基于该预先信息,在比快门模式切换定时更早的定时,将快门模式切换命令从快门控制单元发送给快门眼镜。基于该快门模式切换命令,在从3维图像显示到2维图像显示的切换定时,在快门眼镜处切换快门模式。

Description

发送装置、发送方法、接收装置、以及接收方法
技术领域
本发明涉及发送装置、发送方法、接收装置、以及接收方法,更具体地涉及发送以时间分割方式包括插入了2维数据的视频流和插入了3维图像数据的视频流的多路复用流的发送装置等等。
背景技术
传统地,作为用于显示立体视频的系统,各种布置的已知的。例如,已知具有视差的左眼图像和右眼图像以预定周期交替显示在显示器上、以及用具有与显示器同步驱动的液晶快门的快门眼镜观看左眼图像和右眼图像的方法,如专利文献PTL 1至3所述。
引用列表
专利文献
PTL 1:日本未经审查的专利申请公开No.9-138384
PTL 2:日本未经审查的专利申请公开No.2000-36969
PTL 3:日本未经审查的专利申请公开No.2003-45343
发明内容
要解决的技术问题
如果从广播电台向用户的电视接收器发送诸如电视节目的内容,则可以设想在3维(3D)图像数据与2维(2D)图像数据之间进行切换时发送。例如,可以设想发送用于节目本身的3维图像数据、以及发送用于CM(commercial message:广告片消息)的2维图像数据的情况。在这种情况下,从广播电台发送以时间分割方式包括插入了2维图像数据的视频流和插入了3维图像数据的视频流的多路复用流。
视频流包括指示它是插入了2维图像数据的视频流、还是插入了3维图像数据的视频流的信令信息(ES层信令信息)。例如,在用H.264/AVC(Advanced Video Coding:高级视频编码)编码的情况下,信令信息包括在存取单元的SEI的部分中。还有,在用MPEG2视频编码格式编码的情况下,信令信息包括在图片头部的用户数据区。
然而,在用于切换的定时实际到来之前,不可以预先告知在插入了2维图像数据的视频流与插入了3维图像数据的视频流之间的切换定时。
如上所述,通过用快门眼镜观看左眼图像和右眼图像,可以使观众感觉到立体图像。甚至在戴着快门眼镜时,在显示2维图像时也可以使快门保持打开(open),其将抑制电能消耗,同时可以改善视力健康。
为了在2维图像显示状态或3维图像显示状态之间自动切换快门眼镜的模式,需要在实际切换定时之前向快门眼镜提供快门眼镜的切换信息。
本发明的目的是在接收以时间分割方式包括插入了2维图像数据的视频流和插入了3维图像数据的视频流的多路复用流以及执行2维图像显示或3维图像显示时,使能快门眼镜模式的合适的自动切换。
问题的解决办法
本发明的构思是发送器,包括:
发送单元,配置为发送以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流的多路复用流;
信息插入单元,配置为插入预先通知在第一视频流与第二视频流之间进行切换的预先信息到多路复用流中。
用本发明,发送单元发送以时间分割方式包括插入了2维(2D)图像数据的第一视频流和插入了3维(3D)图像数据的第二视频流的多路复用流。信息插入单元插入预先通知在第一视频流与第二视频流之间进行切换的预先信息到多路复用流中。例如,预先信息可以具有添加到那里的指示从预先信息的插入定时开始直到切换定时为止的间隔的定时信息。还有,例如,预先信息可以具有添加到那里的指示是切换到第一视频流还是切换到第二视频流的信息。
例如,将预先信息插入组成多路复用流的、并且与视频流无关的流中。还有,例如,将预先信息插入视频流的图片层或更高的层。还有,例如,将预先信息插入组成视频流的PES的头部部分中。还有,例如,将预先信息插入多路复用流中包括的节目映射表的下面。
因此,用本发明,将预先通知在插入了2维图像数据的第一视频流与插入了3维图像数据的第二视频流之间进行切换的预先信息插入到多路复用流中。因此,在接收侧,通过基于该预先信息而执行控制,在2维图像显示状态与3维图像显示状态的实际切换定时,可以合适地执行快门眼镜模式的自动切换。
还有,本发明的构思是接收器,包括:
接收单元,配置为接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流、以及还插入了预先通知第一视频流与第二视频流的切换的预先信息的多路复用流;
显示控制单元,配置为基于从接收单元接收的多路复用流中包括的视频流中获得的图像数据而在显示单元上执行2维图像显示或左眼图像与右眼图像交替显示的3维图像显示;和
快门控制单元,配置为基于从接收单元接收的多路复用流中获得的预先信息而在2维图像显示与3维图像显示之间的切换定时之前发送快门模式切换命令给快门眼镜。
用本发明,接收单元接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流的多路复用流。该多路复用流还具有插入其中的预先通知第一视频流与第二视频流的切换的预先信息。
显示控制单元基于从接收单元接收的多路复用流中包括的视频流中获得的图像数据而在显示单元上执行2维图像显示或左眼图像与右眼图像交替显示的3维图像显示。也就是说,如果视频流是第一视频流,以及包括2维图像数据,则执行2维图像显示。另一方面,如果视频流是第二视频流以及包括3维图像数据,则执行3维图像显示。
然后,快门控制单元基于从接收单元接收的多路复用流中获得的预先信息而在2维图像显示与3维图像显示之间的切换定时之前发送快门模式切换命令给快门眼镜。例如,快门模式切换命令可以包括指示直到切换快门模式时为止的时间的信息。还有,例如,快门模式切换命令可以具有添加到那里的指示是切换到与2维图像显示相对应的快门模式还是切换到与3维图像显示相对应的快门模式的信息。
因此,用本发明,基于预先通知在插入了2维图像数据的第一视频流与插入了3维图像数据的第二视频流之间进行切换的、包括在接收的多路复用流中的预先信息而在2维图像显示与3维图像显示的切换定时之前将快门模式切换命令发送给快门眼镜。因此,在2维图像显示状态与3维图像显示状态的实际切换定时,可以合适地执行快门眼镜模式的自动切换。
还有,本发明的另一构思是接收器,包括:
接收单元,配置为接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流、以及还插入了预先通知第一视频流与第二视频流的切换的预先信息的多路复用流;和
数据发送单元,配置为经由发送路径将从接收单元接收的多路复用流中包括的视频流中获得的图像数据和从多路复用流中获得的预先信息发送到外部装置。
用本发明,接收单元接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流的多路复用流。该多路复用流还具有插入插入其中的预先通知第一视频流与第二视频流的切换的预先信息。
数据发送单元经由发送路径将从接收单元接收的多路复用流中包括的视频流中获得的图像数据和从多路复用流中获得的预先信息发送到外部装置。例如,数据发送单元配置为经由发送路径在多个信道中通过差分信号发送图像数据到外部装置,以及通过插入预先信息到图像数据的消隐时段将预先信息发送给外部装置。
因此,用本发明,将预先通知插入了2维图像数据的第一视频流与插入了3维图像数据的第二视频流的切换的、包括在接收的多路复用流中的预先信息与图像数据一起经由发送路径发送给外部装置。因此,在外部装置处,在2维图像显示状态与3维图像显示状态的实际切换定时,通过基于该预先信息而执行控制可以合适地执行快门眼镜模式的自动切换。
还有,本发明的另一构思是接收器,包括:
数据接收单元,配置为经由发送路径从外部装置接收以时间分割方式包括2维图像数据和3维图像数据的图像数据以及预先通知在2维图像数据与3维图像数据之间进行切换的插入的预先信息;
显示控制单元,配置为基于数据接收单元接收的图像数据而在显示单元上执行2维图像显示或左眼图像与右眼图像交替显示的3维图像显示;和
快门控制单元,配置为基于数据接收单元接收的预先信息而在2维图像显示与3维图像显示之间的切换定时之前发送快门模式切换命令给快门眼镜。
用本发明,数据接收单元经由诸如HDMI电缆的发送路径从外部装置接收图像数据以及预先信息。图像数据以时间分割方式包括2维图像数据和3维图像数据。还有,预先信息是预先通知2维图像数据与3维图像数据的切换的信息。
显示控制单元基于数据接收单元接收的图像数据而在显示单元上执行2维图像显示或左眼图像与右眼图像交替显示的3维图像显示。也就是说,如果接收的图像数据是2维图像数据,则执行2维图像显示。另一方面,如果接收的图像数据是3维图像数据,则执行3维图像显示。
然后,快门控制单元基于从数据接收单元接收的预先信息而在2维图像显示与3维图像显示之间的切换定时之前发送快门模式切换命令给快门眼镜。例如,快门模式切换命令可以包括指示直到切换快门模式时为止的时间的信息。还有,例如,快门模式切换命令可以具有添加到那里的指示是切换到与2维图像显示相对应的快门模式还是切换到与3维图像显示相对应的快门模式的信息。
因此,用本发明,与图像数据一起接收预先通知2维图像数据与3维图像数据的切换的预先信息,以及基于该预先信息而在2维图像数据与3维图像数据之间的切换定时之前将快门模式切换命令发送给快门眼镜。因此,在2维图像显示状态与3维图像显示状态的实际切换定时,可以合适地执行快门眼镜模式的自动切换。
本发明的有益效果
根据本发明,当接收以时间分割方式包括插入了2维图像数据的视频流和插入了3维图像数据的视频流的多路复用流以及执行2维图像显示或3维图像显示时,可以执行合适的快门眼镜的自动切换。
附图说明
图1是说明作为本发明第一实施例的图像发送/接收系统的配置示例的方框图。
图2是说明在发送侧的时间管理以及视频流与预先信息之间的关系的图。
图3是说明接收器接收的传输流中包括的视频流与从该传输流中获得的预先信息之间的关系的图。
图4是说明生成传输流的发送数据生成单元的配置示例的方框图。
图5是说明1920×1080像素格式的图像数据的图。
图6是用于描述“上下(Top & Bottom)”格式、“左右(Side By Side)”格式、和“帧顺序(Frame Sequential)”格式的图,这些是立体图像数据(3D图像数据)的发送格式。
图7是说明视频流与在独立于该视频流的预先信息流中插入的预先信息流之间的关系的图。
图8是说明包括视频基本流、音频基本流、和预先信息基本流的传输流的配置示例的图。
图9是说明“G_data”的配置示例(Syntax:语法)的图。
图10是说明“G_data”和稍后描述的“G_descriptor”的主要数据规定内容(semantics:语义)的图。
图11是说明生成传输流的发送数据生成单元的配置示例的方框图。
图12是说明视频流与插入在该视频流的图片层或更高的层中的预先信息之间的关系的图。
图13是说明在插入G_data到PES层的PES_private_data(128位固定长度)中的情况下的配置示例(Syntax)的图。
图14是说明视频流与插入到PES层的PES_private_data中的预先信息之间的关系的图。
图15是说明包括视频基本流(插入了预先信息)和音频基本流的传输流的配置示例的方框图。
图16是说明生成传输流的发送数据生成单元的配置示例的方框图。
图17是说明视频流与插入在传输流TS的节目映射表(PMT)下面的预先信息之间的关系的图。
图18是说明包括视频基本流和音频基本流的传输流(插入了预先信息)的配置示例的图。
图19是说明“G_descriptor”的配置示例(Syntax)的图。
图20是说明配置了图像发送/接收系统的接收器的配置示例的方框图。
图21是说明用于用户感觉立体图像的快门眼镜的配置示例的图。
图22是示意地说明快门模式切换命令从接收器中的快门控制单元到快门眼镜的发送定时等等的图。
图23是说明作为本发明第二实施例的图像发送/接收系统的配置示例的方框图。
图24是说明配置图像发送/接收系统的机顶盒的配置示例的方框图。
图25是说明配置图像发送/接收系统的接收器的配置示例的方框图。
图26是示意地说明快门模式切换命令从接收器中的快门控制单元到快门眼镜的发送定时等等的图。
图27是说明HDMI发送单元(HDMI源端)和HDMI接收单元(HDMI宿)的配置示例的方框图。
图28是说明TMDS发送数据(发送水平×垂直为1920像素×1080行的图像数据的情况)的配置示例的图。
图29是说明在使用HDMI Vendor Specific InfoFrame发送预先信息(G_data)的情况下,HDMI Vendor Specific InfoFrame的分组配置示例的图。
具体实施方式
现在,将描述本发明的实施方式(此后,称为“实施例”)。注意,描述将按以下顺序进行。
1.第一实施例
2.第二实施例
3.修改
<1.第一实施例>
[图像发送/接收系统]
图1说明作为第一实施例的图像发送/接收系统10的配置示例。该图像发送/接收系统10配置为由广播电台100和接收器200组成。广播电台100通过广播波发送作为以时间分割方式包括第一视频流(第一视频基本流)和第二视频流(第二视频基本流)的多路复用流的传输流TS。
广播电台100具有生成该传输流TS的发送数据生成单元110。2维(2D)图像数据插入第一视频流中。还有,3维(3D)图像数据插入第二视频流中。现在,视频流是例如H.264/AVC视频流或MEPG2视频流。
在传输流TS中插入预先指示第一视频流与第二视频流的切换的预先信息。将指示从该预先信息的插入定时开始直到切换定时为止的间隔的定时信息添加到该预先信息中。还有,指示是切换到第一视频流还是切换到第二视频流的信息包括在该预先信息中。
例如,将预先信息插入独立于组成传输流的视频流的流中。还有,例如,将预先信息插入视频流的图片层或更高的层中。还有,例如,将预先信息插入组成视频流的PES头部部分中。还有,例如,将预先信息插入多路复用流中包括的节目映射表(PMT:Program Map Table)的下面。
图2说明在发送侧的时间管理,以及视频流与预先信息之间的关系。相对于从包括3维图像数据的第二视频流到包括2维图像数据的第一视频流的切换定时,在预定时间量之前,诸如在两秒钟之前、一秒钟之前、等等的定时,插入预先信息。还有,相对于从包括2维图像数据的第一视频流到包括3维图像数据的第二视频流的切换定时,在预定时间量之前,诸如两秒钟之前、一秒钟之前、等等的定时插入预先信息。
接收器200通过广播波接收从广播电台100发送的传输流TS。接收器200从接收的传输流TS中包括的视频流中获得图像数据。接收器200具有显示面板(显示单元)217。接收器200在显示面板217上执行2维图像显示或左眼图像与右眼图像交替显示的3维图像显示。也就是说,如果视频流是第一视频流,以及包括2维图像数据,则执行2维图像显示。另一方面,如果视频流是第二视频流,以及包括3维图像数据,则执行3维图像显示。
还有,接收器200从接收的传输流TS中获得预先信息。接收器200具有快门控制单元221,其控制快门眼镜300的操作。基于预先信息,在2维图像显示与3维图像显示的切换定时之前,接收器200使用快门控制单元221将快门模式切换命令发送给快门眼镜300。
快门模式切换命令具有添加的指示直到切换快门模式时为止的时间量的信息,和指示是切换到与2维图像显示相对应的快门模式还是切换到与3维图像显示相对应的快门模式的信息。快门眼镜300基于该快门模式切换命令,在2维图像显示状态与3维图像显示状态的实际切换定时,合适地切换快门模式。
图3说明在接收器200接收的传输流TS,即,位流数据中包括的视频流,与从该传输流TS中获得的预先信息之间的关系。还有,该图3示意地说明快门模式切换命令从接收器200的快门控制单元221到快门眼镜300的发送定时。
从传输流TS中获得的预先信息是在发送侧,相对于从第二视频流到第一视频流的切换定时,留有时间余地T地插入的。基于该预先信息,在比快门模式切换定时更早的定时,将快门模式切换命令从接收器200的快门控制单元221发送给快门眼镜300。基于该快门模式切换命令,在快门眼镜300,根据从3维图像显示到2维图像显示的切换定时切换快门模式。
[发送数据生成单元的配置示例]
[第一配置示例]
图4所示的发送数据生成单元110A说明用于在广播电台100生成上述传输流TS的发送数据生成单元110的示例。该发送数据生成单元110A说明将预先信息插入于独立于组成传输流TS的视频流的流中的示例。该发送数据生成单元110A具有数据提取单元(存档单元)111、视频编码器112和音频编码器113。发送数据生成单元110A还具有预先信息生成单元114、预先信息编码器115、和多路复用器116。
数据提取单元111从数据记录介质111a中提取以及输出图像数据和音频数据。例如,数据记录介质111a是可拆卸地安装到数据提取单元111上的盘形记录介质、半导体存储器、等等。因此,在数据记录介质111a中,与用传输流TS发送的预定节目的图像数据一起记录了与该图像数据相对应的音频数据。例如,与节目一致,图像数据切换到3维(3D)图像数据或2维(2D)图像数据。还有,例如,与主要特征、广告片、等等的内容一致,甚至在节目期间,图像数据切换到3维(3D)图像数据或2维(2D)图像数据。
3维图像数据由左眼图像数据和右眼图像数据组成。这里将描述3维图像数据的发送格式的示例。虽然将以下第一至第三格式作为发送格式给出,但是也可以使用除了这些之外的其它发送格式。这里,如图5所示,作为示例,将描述关于左眼(L)和右眼(R)的每片图像数据都是具有例如1920×1080像素格式的确定分辨率的图像数据的情况。
第一发送格式是上下(Top & Bottom)格式,如图6(a)所示,是用于在垂直方向的上半部发送左眼图像数据的每行数据以及在垂直方向的下半部发送右眼图像数据的每行数据的格式。在这种情况下,左眼图像数据和右眼图像数据的行稀薄化(thin out)成1/2,因此垂直分辨率相对于原始信号减少一半。
第二发送格式是并排(Side By Side)格式,如图6(b)所示,是用于在水平方向的前半部发送左眼图像数据的像素数据以及在水平方向的后半部发送右眼图像数据的像素数据的格式。在这种情况下,左眼图像数据和右眼图像数据每个都具有其在水平方向稀薄化化成1/2的像素数据,因此水平分辨率相对于原始信号减少一半。
第三发送格式是帧顺序(Frame Sequential)格式,以及如图6(c)所示,是通过对每一帧按顺序切换左眼图像数据和右眼图像数据而发送左眼图像数据和右眼图像数据的格式。注意,该帧顺序格式也有时称为全帧(Full Frame)格式或向后兼容(BackwardCompatible)格式。
视频编码器112编码从数据提取单元111输出的图像数据为H.264/AVC或MPEG2编码,以及获得编码的视频数据。还有,如果图像数据是2维图像数据,则视频编码器112通过下游具有的流格式化器(stream formatter)(未示出)生成其中插入了该2维图像数据的视频基本流(第一视频流)。还有,如果图像数据是3维图像数据,则视频编码器112生成其中插入了该3维图像数据的视频基本流(第二视频流)。
音频编码器113编码从数据提取单元111输出的音频数据为诸如MPEG-2Audio AAC等等的编码,以及生成音频基本流。
预先信息生成单元114生成作为预先信息的G_data,以便预先通知插入了2维图像数据的第一视频流与插入了3维图像数据的第二视频流之间的切换。该G_data包括指示从预先信息的插入定时到切换定时的间隔的定时信息、指示是切换到第一视频流还是切换到第二视频流的信息、等等。根据第一视频流与第二视频流之间的每个切换定时,预先信息生成单元114生成将要在预先信息的预定数量的插入定时使用的预定数量的G_data。
预先信息编码器115使从预先信息生成单元114输出的预定数量的G_data经受预定编码,以及生成预先信息基本流。在这种情况下,为了视频流之间的同步,将PTS(Presentation Time Stamp,呈现时间戳)附加到每个G_data。
多路复用器116分组化以及多路复用在视频编码器112、音频编码器113、以及预先信息编码器115生成的基本流,以及生成作为多路复用流的传输流TS。
在从数据提取单元111输出2维图像数据的预定节目时段、或节目内的预定时段期间,该传输流TS包括插入了2维图像数据的第一视频流。还有,在从数据提取单元111输出3维图像数据的预定节目时段、或节目内的预定时段期间,该传输流TS包括插入了3维图像数据的第二视频流。
另外,该传输流TS包括独立于视频流(第一视频流和第二视频流)的预先信息流。图7说明视频流与预先信息流之间的相互关系。预先信息流具有相对于第一视频流与第二视频流之间的切换定时的预定时间之前,例如,在诸如两秒钟之前、一秒钟之前的定时,插入的预先信息(G_data)。
将简单描述图4所示的发送数据生成单元110A的操作。从数据提取单元111输出的图像数据(3维图像数据或2维图像数据)提供给视频编码器112。在视频编码器112,图像数据经受H.264/AVC或MPEG2编码,从而生成包括编码的视频数据的视频基本流(视频流)。
在这种情况下,如果图像数据是2维图像数据,则生成插入了该2维图像数据的视频基本流(第一视频流)。还有,如果图像数据是3维图像数据,则生成插入了该3维图像数据的视频基本流(第二视频流)。将用这种方法在视频编码器112生成的视频基本流提供给多路复用器116。
还有,当图像数据从数据提取单元111中输出时,与该图像数据相对应的音频数据也从数据提取单元111中输出。该音频数据提供给音频编码器113。在音频编码器113,音频数据经受诸如MPEG-2Audio AAC等等的编码,以及生成包括编码的音频数据的音频基本流。该音频基本流提供给多路复用器116。
还有,在预先信息生成单元114,根据第一视频流与第二视频流之间的每个切换定时,生成在预先信息的预定数量的插入定时使用的预定数量G_data(预先信息)。该G_data包括指示从预先信息的插入定时到切换定时的间隔的定时信息、指示是切换到第一视频流还是切换到第二视频流的信息、等等。
在预先信息生成单元114生成的G_data提供给预先信息编码器115。在预先信息编码器115,G_data经受预定编码,以及生成预先信息基本流。在这种情况下,用于与视频流同步的PTS附加到每个G_data。该预先信息基本流提供给多路复用器116。
在多路复用器116,分组化以及多路复用从编码器提供的基本流,从而生成传输流TS。在从数据提取单元111输出2维图像数据的预定节目时段或节目内的预定时段期间,该传输流TS包括插入了2维图像数据的第一视频流。还有,在从数据提取单元111输出3维图像数据的预定节目时段或节目内的预定时段期间,该传输流TS包括插入了3维图像数据的第二视频流。另外,在该传输流TS中,该传输流TS还包括独立于视频流的预先信息流。
图8说明包括视频基本流、音频基本流、以及预先信息基本流的传输流(多路复用的数据流)的配置示例。该传输流包括通过分组化基本流获得的PES分组。用该配置示例,包括视频基本流的PES分组“Video PES”。还有,用该配置示例,包括音频基本流的PES分组“Audio PES”和预先信息基本流的PES分组“Pre-SwtichingControl PES”。充当预先信息的G_data插入预先信息基本流中,如上所述。
还有,传输流包括作为PSI(Program Specific Information,节目专用信息)的PMT(ProgramMap Table,节目映射表)。该PSI是描述传输流中包括的每个基本流属于哪个节目的信息。还有,传输流包括按事件递增执行管理的作为SI(Serviced Information,服务信息)的EIT(EventInformation Table,事件信息表)。
PMT中存在有节目描述符(Program Descriptor),其中是与整个节目有关的描述信息。还有,PMT中存在有具有与每个基本流有关的信息的基本环(loop)。对于该配置示例,存在视频基本环、音频基本环、以及私有基本环。每个基本环中都具有用于每个流的诸如分组标识符(PID)、流类型(Stream_Type)等等的信息,以及还具有描述与基本流有关的信息的描述符,虽然在附图中未示出。
图9说明“G_data”的配置示例(Syntax,语法)。图10说明“G_data”和稍后描述的“G_descriptor”的主要数据规定内容(semantics,语义)。1位字段“switching_bit”指示在接下来的视频流时段中是否存在从第一视频流到第二视频流的切换,或从第二视频流到第一视频流的切换。“1”指示存在切换,而“0”指示不存在切换。
1位字段“next_sequence_2D”指示切换之后的视频流是插入了2维图像数据的第一视频流,还是插入了3维图像数据的第二视频流。“1”指示第一视频流,而“0”指示第二视频流。如果上述1位字段“switching_bit”是“0”,则跳过该“next_sequence_2D”的1位字段的读取。
14位字段“timing_information”指示定时信息,其是从预先信息的插入定时到切换定时的间隔。该定时信息基于对象视频()帧频率。2位字段“timing_type”指示上述“timing_information”的数据类型。“00”指示定时信息是基于时间戳网格(基于90kHz)的STC(System Time Clock,系统时间时钟)。“01”指示定时信息是视频帧计数。“10”指示定时信息是基于0.5秒钟的计数。“11”指示定时信息是基于1秒钟的计数。
[第二配置示例]
图11所示的发送数据生成单元110B说明广播电台100中生成上述传输流TS的发送数据生成单元110的示例。该发送数据生成单元110B说明预先信息插入视频流的图片层或更高的层中的示例。在该图11中,与图4中的那些相对应的部分用相同的附图标记表示,将酌情省略其详细说明。
该发送数据生成单元110B具有数据提取单元(存档单元)111、视频编码器112B、音频编码器113、预先信息生成单元114、和多路复用器116。视频编码器112B使从数据提取单元111输出的图像数据经受H.264/AVC或MPEG2编码,从而获得编码的视频数据。
还有,经由下游的流格式化器(未示出),如果图像数据是2维图像数据,则该视频编码器112B生成插入了该2维图像数据的视频基本流(第一视频流)。还有,如果图像数据是3维图像数据,则生成插入了该3维图像数据的视频基本流(第二视频流)。此时,视频编码器112将充当在预先信息生成单元114生成的预先信息的G_data插入到视频流的图片层或更高的层中。在这种情况下,视频编码器112B将在预先信息的预定数量的插入定时使用的预定数量的G_data每个插入在与那些插入定时相对应的视频流位置。
例如,如果执行了H.264/AVC(Advanced Video Coding,高级视频编码)编码,则视频编码器112B将G_data插入存取单元的SEI部分。还有,例如,如果执行MPEG2video代码格式编码,则由视频编码器112B将G_data插入图片头部的用户数据区中。注意,在插入G_data到视频流的PES(PacketizedElementary Stream,分组基本流)的头部部分的情况下,在多路复用器116执行G_data的插入。也就是说,执行在多路复用器116处G_data到PES层的PES_private_data(128位固定长度)的插入。
图12说明视频流与插入到该视频流的图片层或更高的层的预先信息之间的关系。在第一视频流与第二视频流之间的切换定时的预定时间之前,例如,在诸如两秒钟之前、一秒钟之前的定时,,将预先信息(G_data)插入到视频流的图片层或更高的层。
图13说明在插入G_data到PES层的PES_private_data(128位固定长度)的情况下的PES_private_data的结构示例(Syntax)。指示G_data的标识值用8位字段“private_data_type”定义。随后的G_data的尺寸用8位字段“G_data_length”指示。
图14说明视频流与插入PES层的PES_private_data中的预先信息之间的关系。在第一视频流与第二视频流之间的切换定时的预定时间之前,例如,在诸如两秒钟之前、一秒钟之前的定时,,将预先信息(G_data)插入到PES_private_data。
多路复用器116分组化以及多路复用在视频编码器112B和音频编码器113生成的基本流,以及生成作为多路复用流的传输流TS。当将省略详细说明时,用和图4所示的发送数据生成单元110A相同的方式配置该图11所示的发送数据生成单元110B。
将简单描述图11所示的发送数据生成单元110B的操作。从数据提取单元111输出的图像数据(3维图像数据或2维图像数据)提供给视频编码器112B。在该视频编码器112B,图像数据经受H.264/AVC或MPEG2的编码,从而生成包括编码的视频数据的视频基本流(视频流)。
在这种情况下,如果图像数据是2维图像数据,则生成插入了该2维图像数据的视频基本流(第一视频流)。还有,如果图像数据是3维图像数据,则生成插入了该3维图像数据的视频基本流(第二视频流)。用这种方法在视频编码器112B生成的视频基本流提供给多路复用器116。
还有,当图像数据从数据提取单元111中输出时,与该图像数据相对应的音频数据也从数据提取单元111中输出。该音频数据提供给音频编码器113。在音频编码器113,音频数据经受诸如MPEG-2Audio AAC等等的编码,以及生成包括编码的音频数据的音频基本流。该音频基本流提供给多路复用器116。
还有,在预先信息生成单元114,根据第一视频流与第二视频流之间的每个切换定时,生成在预先信息的预定数量的插入定时使用的预定数量G_data(预先信息)。该G_data包括指示从预先信息的插入定时到切换定时的间隔的定时信息、指示是切换到第一视频流还是切换到第二视频流的信息、等等。
在该预先信息生成单元114生成的G_data提供给视频编码器112B。在视频编码器112B,G_data插入到视频流的图片层或更高的层。在这种情况下,视频编码器112B插入在预先信息的预定数量的插入定时使用的预定数量的G_data,每个都在与那些插入定时相对应的视频流位置。因此,在这种情况下,对于每个G_data,实现与视频流的同步。注意,如上所述,在插入G_data到视频流的PES(Packetized Elementary Stream)的头部部分的情况下,在预先信息生成单元114生成的G_data提供给多路复用器116,以及在该多路复用器116执行G_data的插入。
在多路复用器116,分组化以及多路复用从编码器提供的基本流,从而生成传输流TS。在从数据提取单元111输出2维图像数据的预定节目时段或节目内预定时段期间,该传输流TS包括插入了2维图像数据的第一视频流。充当预先信息的G_data插入到该视频流的图片层或更高的层中。
图15说明包括视频基本流和音频基本流的传输流(多路复用的数据流)的配置示例。将合适地省略与图8相对应的该图15的部分的详细说明。该传输流包括通过分组化基本流获得的PES分组。用该配置示例,包括视频基本流的PES分组“Video PES”。还有,用该配置示例,包括音频基本流的PES分组“Audio PES”。充当预先信息的G_data插入到视频基本流中,如上所述。
[第三配置示例]
图16所示的发送数据生成单元110C说明在广播电台100中生成上述传输流TS的发送数据生成单元110的示例。该发送数据生成单元110C说明预先信息插入到在多路复用流中包括的节目映射表下面的示例。在该图16中,与图4中的那些相对应的部分用相同的附图标记表示,将酌情省略其详细说明。
发送数据生成单元110C具有数据提取单元(存档单元)111、视频编码器112、音频编码器113、预先信息生成单元114、以及多路复用器116C。多路复用器116C分组化以及多路复用在视频编码器112和音频编码器113生成的基本流,以及生成作为多路复用流的传输流TS。
现在,多路复用器116C生成G_descriptor,作为包括在预先信息生成单元114生成的预先信息(G_data)的描述符,以及将该描述符插入节目映射表(PMT)的下面。在这种情况下,多路复用器116C插入在预先信息的预定数量的插入定时使用的预定数量的G_descriptor,每个都与那些插入定时相对应。
图17说明视频流与插入传输流TS的节目映射表(PMT)下面的预先信息之间的关系。在第一视频流与第二视频流之间的切换定时的预定时间之前,例如在诸如两秒钟之前、一秒钟之前的定时,将包括预先信息(G_data)的描述符插入节目映射表(PMT)的下面。
当将省略详细说明时,用和图4所示的发送数据生成单元110A相同的方式配置该图16所示的发送数据生成单元110C。
将简单描述图16所示的发送数据生成单元110C的操作。从数据提取单元111输出的图像数据(3维图像数据或2维图像数据)提供给视频编码器112。在该视频编码器112,图像数据经受H.2616/AVC或MPEG2编码,从而生成包括编码的视频数据的视频基本流(视频流)。
在这种情况下,如果图像数据是2维图像数据,则生成插入了该2维图像数据的视频基本流(第一视频流)。还有,如果图像数据是3维图像数据,则生成插入了该3维图像数据的视频基本流(第二视频流)。用这种方法在视频编码器112生成的视频基本流提供给多路复用器116C。
还有,当图像数据从数据提取单元111中输出时,与该图像数据相对应的音频数据也从该数据提取单元111中输出。该音频数据提供给音频编码器113。在音频编码器113,音频数据经受诸如MPEG-2Audio AAC等等的编码,以及生成包括编码的音频数据的音频基本流。该音频基本流提供给多路复用器116C。多路复用器116C分组化以及多路复用在视频编码器112和音频编码器113生成的基本流,以及生成作为多路复用流的传输流TS。
还有,在预先信息生成单元114,根据第一视频流与第二视频流之间的每个切换定时,生成在预先信息的预定数量的插入定时使用的预定数量的G_data(预先信息)。该G_data包括指示从预先信息的插入定时到切换定时的间隔的定时信息、指示是切换到第一视频流还是切换到第二视频流的信息、等等。
在该预先信息生成单元114生成的G_data提供给多路复用器116C。在多路复用器116C,创建包括充当在预先信息生成单元114生成的预先信息的G_data的内容的描述符(G_descriptor),以及将该描述符插入节目映射表(PMT)下面。在这种情况下,多路复用器116C插入在预先信息的预定数量的插入定时使用的预定数量的G_descriptor,每个与那些插入定时相对应。因此,在这种情况下,对于每个G_descriptor,实现与视频流的同步。
图18说明包括视频基本流和音频基本流的传输流(多路复用的数据流)的配置示例。将合适地省略与图8相对应的该图18的部分的详细说明。该传输流包括通过分组化基本流获得的PES分组。用该配置示例,包括视频基本流的PES分组“Video PES”。还有,用该配置示例,包括音频基本流的PES分组“Audio PES”。
还有,传输流TS包括作为PSI(Program Specific Information)的PMT(ProgramMap Table)。该PSI是描述传输流中包括的每个基本流属于哪个节目的信息。还有,传输流TS包括作为按事件递增执行管理的SI(ServicedInformation)的EIT(EventInformation Table)。在该配置示例中,将包括预先信息(G_data)的内容的“G_descriptor”插入PMT下面,例如,插入视频基本环(Video ES loop)下,如上所述。
图19说明“G_descriptor”的配置示例(Syntax)。8位字段“descriptor_tag”指示该描述符是“G_descriptor”。8位字段“descriptor_length”说明后面的数据字节数。注意,字段“switching_bit”、“next_sequence_2D”、“next_sequence_2D”、和“tining_information”与上述“G_data”的结构示例中描述的那些相同,因此将省略其描述(见图9、图10)。
如上所述,用图4、图11、和图16所示的发送数据生成单元110(110A、110B、110C),预先指示插入了2维图像数据的第一视频流与插入了3维图像数据的第二视频流之间的切换的预先信息被插入到充当多路复用流的传输流TS中。因此,在接收侧,能够通过基于该预先信息的控制,根据在2维图像显示状态与3维图像显示状态之间的实际的切换定时,适当地执行快门眼镜模式的自动切换。
[接收器的配置示例]
图20说明接收器200的配置示例。该接收器200包括CPU 201、闪速ROM 202、DRAM 203、内部总线204、远程控制接收单元205、和远程控制发送器206。还有,接收器200包括天线端子211、数字调谐器212、位流处理单元213、3D信号处理单元214、和视频信号控制单元215。还有,接收器200包括面板驱动电路216、显示面板217、音频信号处理单元218、音频放大器单元219、扬声器220、和快门控制单元221。
CPU 201控制接收器200的每个单元的操作。闪速ROM 202执行控制软件的存储和数据的存储。DRAM 203组成CPU 201的工作区。CPU 201加载从闪速ROM 202读出的软件和数据到DRAM 203、启动软件、以及控制图像显示装置100的每个单元。
远程控制单元205接收从远程控制发送器206发送的远程控制信号(远程控制代码),以及提供给CPU 201。CPU 201基于该远程控制代码而控制接收器200的每个单元。CPU 201、闪速ROM 202、和DRAM 203经由内部总线204相互连接。
天线端子211是用于输入接收天线(未示出)处接收的电视广播信号的端子。数字调谐器212处理输入到天线端子211的电视广播信号,以及输出与用户选择的频道相对应的预定传输流TS(位流数据)。位流处理单元213从位流数据中提取充当内容数据的图像数据和音频数据、还有预先信息(G_data)、等等。
当来自位流处理单元213的输出图像数据是3维图像数据时,3D信号处理单元214执行与发送格式相对应的处理,生成以及输出每个帧的左眼图像数据和右眼图像数据。注意,如果3D信号处理单元214的输出图像数据是2维图像数据,则3D信号处理单元214按照原样输出2维图像数据。
当每个帧的左眼图像数据和右眼图像数据从3D信号处理单元214输出时,视频信号控制单元215生成用于3维图像显示的图像数据。也就是说,视频信号控制单元215生成用于以时间分割方式按左眼图像→右眼图像→左眼图像→右眼图像→…的次序显示在显示面板217上的图像数据。而且,当从3D信号处理单元214输出2维图像数据时,视频信号控制单元215生成用于2维图像显示的图像数据。
视频信号控制单元215输出生成的图像数据给面板驱动单元216。面板驱动单元216基于来自视频信号控制单元215的图像数据而驱动显示面板217,以及在显示面板217上执行3维图像显示或2维图像显示。也就是说,对于3维图像显示,左眼图像和右眼图像以时间分割方式显示在显示面板217上。还有,对于2维图像显示,2维图像连续不断地显示在显示面板217上。
音频信号处理单元218使在位流处理单元213处接收的音频数据经受诸如D/A变换等等的必需的处理。音频信号放大器单元219放大从音频信号处理单元218输出的音频信号,以及提供给扬声器220。
快门控制单元221基于在位流处理单元213处获得的预先信息、基于在视频信号控制单元215处的信号处理而生成的预定信号、等等而生成用于控制快门眼镜300的快门操作的快门控制信号。快门控制单元221具有的无线通信单元221a基于例如IEEE 802.15.4而执行与快门眼镜300的无线通信。该无线通信单元221a发送在快门控制单元221处生成的快门控制信号给快门眼镜300。
快门控制信号包括例如快门打开/关闭周期以及其L/R相位信息、快门释放时间的信息、等等。快门控制单元221生成作为快门控制信号之一的快门模式切换命令。该快门模式切换命令是用于切换快门眼镜300的快门模式为正常模式(Normal Mode)或打开模式(Open Mode)的命令信号。当在正常模式时,快门眼镜300具有左眼快门和右眼快门,每个与显示在显示面板217上的左眼图像和右眼图像相对应地处于打开状态。还有,当在打开模式时,快门眼镜300使左眼快门和右眼快门两者都处于打开状态。
快门模式切换命令具有添加的指示到切换快门模式为止的时间的信息,以及还有指示是切换到打开模式还是切换到正常模式的信息。基于预先信息,快门控制单元221生成该快门模式切换命令,然后在2维图像显示与3维图像显示之间的切换定时之前发送到快门眼镜300。稍后将描述快门模式切换命令从快门控制单元221到快门眼镜300的发送定时的示例。
[快门眼镜的配置]
将关于快门眼镜300进行描述。图21说明快门眼镜300的配置示例。快门眼镜300具有控制单元301、无线通信单元302、快门驱动单元303、和眼镜单元304。
控制单元301控制快门眼镜300的每个部件的操作。无线通信单元302基于例如IEEE 802.15.4而执行与接收器200的无线通信。该无线通信单元302接收从接收器200的快门控制单元221的无线通信单元221a发送的快门控制信号。
快门驱动单元303基于在无线通信单元302处接收的快门控制信号,在控制单元301的控制之下驱动眼镜单元304的左眼快门300L和右眼快门300R。如上所述,快门模式切换命令作为快门控制信号之一存在。该快门模式切换命令具有添加的指示直到切换快门模式时为止的时间量的信息,以及还有指示是切换到打开模式还是切换到正常模式的信息。
基于该快门模式切换命令,快门驱动单元303切换快门驱动快门模式从正常模式到打开模式,或从打开模式到正常模式。当在正常模式时,快门驱动单元303在接收器200的显示面板217上显示左眼图像的定时打开左眼快门300L,以及在接收器200的显示面板217上显示右眼图像的定时打开右眼快门300R。
还有,当在正常模式时,根据在接收器200的显示面板217上的2维图像显示,快门驱动单元303让左眼快门300L和右眼快门300R两者都打开。因此,这抑制电能消耗,还有助于改善视力健康。
将描述图20所示的接收器200和图21所示的快门眼镜300的操作。输入到天线端子211的电视广播信号提供给数字调谐器212。用该数字调谐器212,处理电视广播信号,以及获得充当与用户选择的频道相对应的预定传输流TS的位流数据。
从数字调谐器212输出的位流数据提供给位流处理单元213。用该位流处理单元213,从位流数据中提取图像数据、音频数据、以及还有预先信息(G_data)等等。将在该位流处理单元213提取的图像数据提供给3D信号处理单元214。
在3D信号处理单元214,如果来自位流处理单元213的输出图像数据是3维图像数据,则执行与发送格式相对应的处理,以及生成和输出每个帧的左眼图像数据和右眼图像数据。还有,如果位流处理单元213的输出图像数据是2维图像数据,则3D信号处理单元214照原样输出2维图像数据。将从该3D信号处理单元214输出的图像数据提供给视频信号控制单元215。
当从3D信号处理单元214输出每个帧的左眼图像数据和右眼图像数据时,视频信号控制单元215生成用于3维图像显示的图像数据。也就是说,视频信号控制单元215生成用于以时间分割方式按左眼图像→右眼图像→左眼图像→右眼图像→…次序显示在显示面板217上的图像数据。还有,当2维图像数据从3D信号处理单元214输出时,视频信号控制单元215生成用于2维图像显示的图像数据。
在视频信号控制单元215处生成的图像数据提供给面板驱动单元216。面板驱动单元216基于来自视频信号控制单元215的图像数据而驱动显示面板217,以及在该显示面板217上执行3维图像显示或2维图像显示。也就是说,对于3维图像显示,左眼图像和右眼图像以时间分割方式显示在显示面板217上。还有,对于2维图像显示,2维图像连续不断地显示在显示面板217上。
还有,在位流处理单元213提取的音频数据提供给音频信号处理单元218。该0频信号处理单元218使音频数据经受诸如D/A变换等等的必需的处理。该音频数据在音频信号放大器单元219处放大,然后提供给扬声器220。因此,从扬声器220输出与显示面板217上的显示图像相对应的音频。
还有,基于信号处理而生成的预定信号从视频信号控制单元215提供给快门控制单元221。还有,在位流处理单元213提取的预先信息提供给快门控制单元221。快门控制单元221基于预先信息等等而生成诸如快门模式切换命令的快门控制信号以便控制快门眼镜300的快门操作。
快门控制信号经由无线通信单元221a发送给快门眼镜300。在这种情况下,从抑制快门眼镜300的功率消耗等等的观点来看,以间歇方式发送快门控制信号。还有,在这种情况下,在2维图像显示与3维图像显示之间的切换定时之前,将快门模式切换命令发送给快门眼镜300。
用快门眼镜300的无线通信单元302,接收从接收器200的快门控制单元221的无线通信单元221a发送的快门控制信号。然后,在快门驱动单元303,基于在无线通信单元302接收的快门控制信号,在控制单元301的控制之下驱动眼镜单元304的左眼快门300L和右眼快门300R。
在这种情况下,在切换到左眼图像和右眼图像顺序显示在接收器200的显示面板217上的3维图像显示状态的定时,眼镜单元304的快门模式切换到正常模式。另一方面,在切换到2维图像显示在接收器200的显示面板217上的2维图像显示状态的定时,眼镜单元304的快门模式切换到打开模式。
在正常模式,在左眼图像显示在接收器200的显示面板217上的定时,打开左眼快门300L,而在右眼图像显示在接收器200的显示面板217上的定时,打开右眼快门300R。因此,戴着快门眼镜300的用户只可以用左眼感觉左眼图像,以及只可以用右眼感觉右眼图像,因此可以基于显示在显示面板217上的左眼图像和右眼图像而感觉3维(3D)图像立体图像。
另一方面,在打开模式,左眼快门300L和右眼快门300R两者都保持打开。因此,戴着快门眼镜300的用户可以用自然的方式观察显示在接收器200的显示面板217上的2维图像。
如上所述,在2维图像显示与3维图像显示之间的切换定时之前,快门模式切换命令从接收器200的快门控制单元221发送给快门眼镜300。因此,在快门眼镜300处,在2维图像显示与3维图像显示之间的切换定时,适当地执行正常模式与打开模式之间的切换。
图22说明在接收器200接收的传输流TS中包括的视频流,即位流数据中包括的视频流与在位流处理单元213从位流数据中提取的预先信息之间的关系。还有,图22示意地说明快门模式切换命令从接收器200的快门控制单元221到快门眼镜300的发送定时。该图22说明充当预先信息的G_data插入到组成传输流TS的、并且独立于视频流的预先信息流中的示例(见图7和图8)。
接收器200的快门控制单元221在接收G_data的定时A立即测量并且记录它自己的时钟。如果将PTS附加到G_data,则从PTS和G_data中描述的“timing_information”的值中获得G_data的时间点与快门模式切换时间点之间的时间余地(leeway)T。注意,如果G_data存在于视频流内,则从G_data的当时位置和G_data中描述的“timing_information”的值中获得G_data的时间点与快门模式切换时间点之间的时间余地T。
随后,接收器200的快门控制单元221测量从上述定时A开始的过去时间U,获得时间余地T减去U的值S,如以下公式(1)。另外,从S中减去R的值T3。
S=T-U     (1)
T3=S-R    (2)
R表示穿过时段S快门控制信号从接收器200的快门控制单元221到快门眼镜300的发送周期Tp的时间。在发送周期Tp的时间网格中送出的快门模式切换命令(快门控制信号)中,T3(S-R)与从接收该命令的时间直到快门模式切换出现时为止的时间W相同。也就是说,在发送周期Tp的时间网格中从接收器200的快门控制单元221发送的快门模式切换命令具有添加的信息T3(S-R),其是指示直到切换快门模式时为止的时间的信息。
在快门眼镜300,检测添加到从接收器200的快门控制单元221送出的快门模式切换命令的参数。也就是说,在快门眼镜300,检测指示直到切换快门模式时为止的时间的信息(到切换为止的时间信息)以及指示是切换到正常模式还是切换到打开模式的信息(切换后模式信息)。
在快门眼镜300,然后,基于直到切换时为止的时间信息而控制快门模式切换定时。还有,在快门眼镜300,基于切换后模式信息而控制切换后快门模式。因此,在快门眼镜300处,在3维图像显示与2维图像显示之间的切换定时,合适地执行正常模式与打开模式之间的切换。
如上所述,用图20所示的接收器200,提取接收的传输流TS中插入的预先信息(G_data)。该预先信息是预先通知在插入了2维图像数据的第一视频流与插入了3维图像数据的第二视频流之间的切换的信息。在接收器200,可以基于该预先信息在2维图像显示与3维图像显示之间的切换定时之前,将快门模式切换命令发送给快门眼镜300。因此,通过基于该预先信息的控制,能够根据2维图像显示状态与3维图像显示状态之间切换的实际定时适当地执行快门眼镜模式的自动切换。
<2.第二实施例>
[图像发送/接收系统]
图23说明作为第二实施例的图像发送/接收系统10A的配置示例。该图像发送/接收系统10A包括广播电台100、机顶盒(STB:Set Top Box)400、和接收器200A。在图23中,与图1相对应的部分用相同的附图标记表示,以及将酌情省略其详细说明。
机顶盒400与接收器200A经由HDMI(High Definition MultimediaInterface,高清多媒体接口)电缆500连接在一起。对于机顶盒400,提供HDMI端子402。对于接收器200A提供HDMI端子231。HDMI电缆500的一端连接到机顶盒400的HDMI端子402,而该HDMI电缆500的另一端连接到接收器200A的HDMI端子231。
广播电台100发送充当以时间分割方式包括第一视频流(第一视频基本流)和第二视频流(第二视频基本流)的多路复用流的传输流TS。广播电台100具有生成该传输流TS的发送数据生成单元110。第一视频流具有插入其中的2维(2D)图像数据。还有,第二视频流具有插入其中的3维(3D)图像数据。现在,视频流是例如H.264/AVC视频流或MPEG2视频流。
传输流TS具有插入其中的预先通知第一视频流与第二视频流之间的切换的预先信息。该预先信息具有添加的指示从预先信息的插入定时到切换定时为止的间隔的定时信息。还有,指示是切换到第一视频流还是切换到第二视频流的信息被添加到该预先信息中。
例如,将预先信息插入到组成传输流的独立于视频流的流中。还有,例如,将预先信息插入视频流的图片层或更高的层中。在这种情况下,例如,将预先信息插入到组成视频流的PES头部部分中。还有,例如,将预先信息插入多路复用流中包括的节目映射表(PMT:Program Map Table)下面。
机顶盒400接收从广播电台100通过广播波发送的传输流TS。机顶盒400从接收的传输流TS中包括的视频流中获得图像数据。如果视频流是第一视频流以及包括2维图像数据,则该图像数据是2维图像数据,而如果视频流是第二视频流以及包括3维图像数据,则该图像数据是3维图像数据。
还有,机顶盒400从接收的传输流TS中获得预先信息(G_data)。机顶盒400然后经由HDMI数字接口,即充当发送路径的HDMI电缆500发送图像数据和预先信息给接收器200A。
[机顶盒的配置示例]
图24说明机顶盒400的配置示例。该机顶盒400包括位流处理单元401、HDMI端子402、天线端子403、数字调谐器404、视频信号处理电路405、HDMI发送单元406、和音频信号处理电路407。还有,该机顶盒400包括CPU 411、闪速ROM 412、DRAM 413、内部总线414、远程控制接收单元415、和远程控制发送器416。
天线端子403是用于输入接收天线(未示出)接收的电视广播信号的端子。数字调谐器404处理输入到天线端子403的电视广播信号,以及输出与用户选择的频道相对应的预定传输流(位流数据)TS。
位流处理单元201配置成与上述图20所示的接收器200中的位流处理单元213相同,以及从传输流TS中提取充当内容数据的图像数据和音频数据、以及还有预先信息(G_data)、等等。如果传输流TS中包括的视频流是第一视频流以及包括2维图像数据,则提取2维图像数据作为图像数据。另一方面,如果传输流TS中包括的视频流是第二视频流以及包括3维图像数据,则提取3维图像数据作为图像数据。
视频信号处理电路405根据需要使从位流处理单元401输出的图像数据(2维图像数据,3维图像数据)经受诸如缩放处理、图像质量处理、等等的图像质量调节处理等等,以及提供其处理之后的图像数据给HDMI发送单元406。音频信号处理电路407根据需要使从位流处理单元401输出的音频数据经受音频质量调节处理等等,以及提供其处理之后的音频数据给HDMI发送单元406。
HDMI发送单元406通过遵照HDMI的通信从HDMI端子402发送图像数据以及音频数据。此时,HDMI发送单元406添加由上述位流处理单元401获得的预先信息(G_data)到图像数据中并且发送。由于数据通过HDMI TMDS信道发送,所以图像和音频数据经受分组化,以及从HDMI发送单元406输出到HDMI端子402。该HDMI发送单元406是例如HDMI 1.4版,并处于可以处理3维图像数据的状态。稍后将描述该HDMI发送单元406的细节。
CPU 411控制机顶盒400的每个单元的操作。闪速ROM 412执行控制软件的存储以及数据的存储。DRAM 413配置CPU 411的工作区。CPU 411加载从闪速ROM 412读出的软件和数据到DRAM 413,以及启动软件来控制机顶盒400的每个单元。
远程控制接收单元415接收从远程控制发送器416发送的远程控制信号(远程控制代码),以及提供给CPU 411。CPU 411基于该远程控制代码而控制机顶盒400的每个单元。CPU 411、闪速ROM 412、以及DRAM 413连接到内部总线414。
将简单描述机顶盒400的操作。输入到天线端子403的电视广播信号提供给数字调谐器404。用该数字调谐器404,处理电视广播信号,输出与用户选择的频道相对应的预定传输流(位流数据)TS。
从数字调谐器404输出的传输流TS提供给位流处理单元401。用该位流处理单元401,从传输流TS中提取图像数据(2维图像数据、3维图像数据)、音频数据、预先信息(G_data)、等等。
在位流处理单元401提取的图像数据在视频信号处理电路405处根据需要经受缩放处理、图像质量处理、等等,其后提供给HDMI发送单元406。还有,在位流处理单元401提取的音频数据,在音频信号处理电路407处执行音频质量调节处理之后,被提供给HDMI发送单元406。还有,在位流处理单元401提取的预先信息(G_data)提供给HDMI发送单元406。提供给HDMI发送单元406的图像数据和音频数据、以及还有预先信息(G_data)然后通过HDMI TMDS信道从HDMI端子402发送给HDMI电缆500。
接收器200A接收经由HDMI电缆500从机顶盒400送出的图像数据和音频数据、以及还有预先信息(G_data)。接收器200A具有显示面板217。接收器200A基于图像数据(2维图像数据、3维图像数据)而在显示面板217上执行2维图像、或左眼图像与右眼图像交替显示的3维图像显示。也就是说,如果从机顶盒400送出2维图像数据,则执行2维图像显示。另一方面,如果从机顶盒400送出3维图像数据,则执行3维图像显示。
还有,接收器200A具有快门控制单元221。接收器200A基于预先信息(G_data),通过快门控制单元221,在2维图像显示与3维图像显示之间的切换定时之前,发送快门模式切换命令给快门眼镜300。该快门模式切换命令具有添加的指示直到切换快门模式时为止的时间的信息、和指示是切换到与2维图像显示相对应的快门模式还是切换到与3维图像显示相对应的快门模式的信息。
快门眼镜300基于该快门模式切换命令而在2维图像显示状态与3维图像显示状态之间切换的实际切换定时合适地切换快门模式。快门眼镜300的配置与以上所述(见图21)的相同。
[接收器的配置示例]
图25说明接收器200A的配置示例。在图25中,与图20相对应的部分用相同的附图标记表示,将省略其详细说明。该接收器200包括CPU 201、闪速ROM 202、DRAM 203、内部总线204、远程控制接收单元205、和远程控制发送器206。还有,接收器200包括天线端子211、数字调谐器212、位流处理单元213、3D信号处理单元214、和视频信号控制单元215。还有,接收器200包括面板驱动电路216、显示面板217、音频信号处理单元218、音频放大器单元219、扬声器220、和快门控制单元220。还有,接收器200具有HDMI端子231和HDMI接收单元232。
HDMI接收单元232通过遵照HDMI的通信接收经由HDMI电缆500从HDMI端子231送出的图像数据和音频数据、以及还有预先信息(G_data)。该HDMI接收单元232是例如HDMI 1.4版,且处于能够处理3维图像数据的状态。稍后将描述该HDMI接收单元232的细节。
3D信号处理单元214使在HDMI接收单元232处接收的或在位流处理单元213处获得的图像数据选择性地经受处理。在该3D信号处理单元214处理的内容与图20所示的接收器200的3D信号处理单元214的相同。音频信号处理单元218使在HDMI接收单元232接收的或在位流处理单元213处获得的音频数据选择性地经受处理。在该音频信号处理单元218处理的内容与图20所示的接收器200的音频信号处理单元218的相同。
快门控制单元221基于在HDMI接收单元232接收的或在位流处理单元213提取的预先信息(G_data)、基于在视频信号控制单元116的信号处理而生成的预定信号、等等而生成用于控制快门眼镜300的快门操作的快门控制信号。在这种情况下,如果要在显示面板217上执行在HDMI接收单元232处接收的图像数据的图像显示,则使用在HDMI接收单元232处接收的预先信息(G_data)。另一方面,如果要在显示面板217上执行在位流处理单元213处提取的图像数据的图像显示,则使用在位流处理单元213处提取的预先信息(G_data)。在该快门控制单元221处的处理的内容与图20所示的接收器200的快门控制单元221的相同。
当将省略详细说明时,图25所示的接收器200A与图20所示的接收器200相同。
将简单描述图25所示的接收器200A的操作。使用在位流处理单元213处提取的图像数据、音频数据和预先信息(G_data)的操作与图20所示的接收器200的相同,因此将省略。这里,将仅仅描述使用在HDMI接收单元232处接收的图像数据、音频数据和预先信息(G_data)的操作。
HDMI接收单元232接收从经由HDMI电缆500连接到HDMI端子231的机顶盒400发送的图像数据、音频数据以及还有预先信息(G_data)。在该HDMI接收单元232处接收的图像数据(2维图像数据、3维图像数据)提供给3D信号处理单元214。还有,在该HDMI接收单元232处接收的音频数据提供给音频信号处理单元218。另外,在该HDMI接收单元232接收的预先信息(G_data)提供给快门控制单元221。
当在HDMI接收单元232处接收的图像数据是3维图像数据时,3D信号处理单元214执行与发送格式相对应的处理,然后生成以及输出每帧的左眼图像数据和右眼图像数据。还有,如果在HDMI接收单元232接收的图像数据是2维图像数据,则3D信号处理单元214照原样输出2维图像数据。从3D信号处理单元214输出的图像数据提供给视频信号控制单元215。
当每帧的左眼图像数据和右眼图像数据从3D信号处理单元214输出时,视频信号控制单元215生成用于3维图像显示的图像数据。也就是说,视频信号控制单元215生成用于以时间分割方式按左眼图像→右眼图像→左眼图像→右眼图像→…的次序显示在显示面板217上的图像数据。还有,当2维图像数据从3D信号处理单元214输出时,视频信号控制单元215生成用于2维图像显示的图像数据。
视频信号控制单元215提供生成的图像数据给面板驱动单元216。面板驱动单元216基于来自视频信号控制单元215的图像数据而驱动显示面板217,以及在显示面板217上执行3维图像显示或2维图像显示。也就是说,对于3维图像显示,左眼图像和右眼图像以时间分割方式显示在显示面板217上。还有,对于2维图像显示,2维图像连续不断地显示在显示面板217上。
还有,在HDMI接收单元232处接收的音频数据提供给音频信号处理单元218。音频信号处理单元218使在位流处理单元213处接收的音频数据经受诸如D/A变换等等的必需的处理。音频放大器单元219放大该音频数据,以及提供给扬声器220。因此,与显示面板217上的显示图像相对应的音频从扬声器220输出。
基于信号处理而生成的预定信号被从视频信号控制单元215提供给快门控制单元221。还有,在HDMI接收单元232处接收的预先信息(G_data)提供给快门控制单元221。快门控制单元221基于预先信息等等而生成用于控制快门眼镜300的快门操作的诸如快门模式切换命令的快门控制信号。
快门控制信号经由无线通信单元221a发送给快门眼镜300。在这种情况下,从抑制快门眼镜300的功率消耗等等的观点来看,以间歇方式发送快门控制信号。还有,在这种情况下,在2维图像显示与3维图像显示之间的切换定时之前,将快门模式切换命令发送给快门眼镜300。相应地,在快门眼镜300处,在3维图像显示与2维图像显示之间的切换定时,合适地执行正常模式与打开模式之间的切换。
图26说明在机顶盒400处接收的传输流TS中包括的视频流与在位流处理单元401处从该位流数据中提取的预先信息(G_data)之间的关系。还有,图26示意地说明基于从机顶盒400送出的预先信息(G_data)的快门模式切换命令从接收器200A的快门控制单元221到快门眼镜300的发送定时。除了已经介绍的HDMI发送单元406和HDMI接收单元232之外,图26与图22相同,因此将省略其详细说明。
[HDMI发送单元和HDMI接收单元的配置示例]
图27说明对于图23中的图像发送/接收系统10A,机顶盒400的HDMI发送单元(HDMI源)406和接收器200A的HDMI接收单元(HDMI宿)232的配置示例。
在有效图像部分(此后,也称为“活动视频部分”)期间,HDMI发送单元406使用多个信道向HDMI接收单元232沿一个方向发送与未压缩的一个屏幕的图像的像素数据相对应的差分信号。这里,有效图像部分是通过从某个垂直同步信号与下一个垂直同步信号之间的部分中去除水平消隐部分和垂直消隐部分而获得的部分。还有,在水平消隐部分或垂直消隐部分期间,HDMI发送单元406使用多个信道向HDMI接收单元232沿一个方向发送跟在至少图像之后的与音频数据、控制数据、其他辅助数据、等等相对应的差分信号。
以下发送信道作为由HDMI发送单元406和HDMI接收单元232组成的HDMI系统的发送信道提供。具体地,存在充当发送信道的三个TMDS信道#0至#2,用于沿一个方向与像素时钟同步地将像素数据和音频数据从HDMI发送单元406串行(serially)发送到HDMI接收单元232。还有,有充当用于发送像素时钟的发送信道的TMDS时钟信道。
HDMI发送单元406包括HDMI发送器81。发送器81例如将未压缩图像的像素数据转换为相对应的差分信号,以及通过三个TMDS信道#0、#1、和#2(其是多个信道)沿一个方向串行发送到经由HDMI电缆500连接的HDMI接收单元232。
还有,发送器81将跟随在未压缩图像之后的音频数据、还有必需的控制数据以及其他辅助数据等等转换为相对应的差分信号,以及通过三个TMDS信道#0、#1、以及#2沿一个方向串行发送到HDMI接收单元232。
另外,发送器81使用TMDS时钟信道发送与三个TMDS信道#0、#1、和#2发送的像素数据同步的像素时钟给经由HDMI电缆500连接的HDMI接收单元232。这里,在像素时钟的一个时钟期间用一个TMDS信道#i(i=0、1、2)发送10位像素数据。
HDMI接收单元232在活动视频部分期间使用多个信道接收沿一个方向从HDMI发送单元406发送的与像素数据相对应的差分信号。还有,该HDMI接收单元232在水平消隐部分或垂直消隐部分期间,使用多个信道接收沿一个方向从HDMI发送单元406发送的与音频数据和控制数据相对应的差分信号。
具体地,HDMI接收单元232包括HDMI接收器82。该HDMI接收器82使用TMDS信道#0、#1、和#2接收沿一个方向从HDMI发送单元406发送的与像素数据相对应的差分信号以及与音频数据和控制数据相对应的差分信号。在这种情况下,HDMI接收器接收通过TMDS时钟信道从HDMI发送单元406发送的与像素时钟同步的差分信号。
除以上TMDS信道#0至#2以及TMDS时钟信道之外,HDMI系统的发送信道还包括称为DDC(Display Data Channel,显示数据信道)83和CEC线84的发送信道。DDC 83由HDMI电缆500中包括的未示出的两个信号线组成。DDC 83用于让HDMI发送单元406从HDMI接收单元232中读出E-EDID(Enhanced Extended Display Identification Data,增强型扩充显示器识别数据)。
具体地,除HDMI接收器82之外,HDMI接收单元232还包括EDID ROM(Read Only Memory)85,其中存储E-EDID,其是与它自己的性能(Configuration/capability,配置/能力)有关的性能信息。例如,响应来自CPU411的请求(见图24),HDMI发送单元406经由DDC 83从经由HDMI电缆500连接的HDMI接收单元232中读出E-EDID。
HDMI发送单元406发送读取的E-EDID给CPU 411。CPU 411存储该E-EDID到闪速ROM 412或DRAM 413中。CPU 411基于E-EDID而识别HDMI接收单元232的性能设置。例如,CPU 411识别HDMI接收单元232中包括的接收器200A是否可以处理立体图像数据,以及如果可以处理立体图像数据,则还识别可以处理哪种TMDS发送数据结构。
CEC线84由HDMI电缆500中包括的未示出的一个信号线组成,以及用于执行HDMI发送单元406与HDMI接收单元232之间的控制用数据的双向通信。该CEC线84组成控制数据线。
还有,HDMI电缆500包括连接到称为HPD(Hot Plug Detect:热插拔检测)的引脚的线(HPD线)86。源装置可以通过利用该线86检测宿装置的连接。注意,该HPD线86也用作组成双向通信路径的HEAC-行。还有,HDMI电缆500包括用于从源装置向宿装置提供电力的线(电力供给线)87。另外,HDMI电缆500包括设施线(utility line)88。该设施线88用作组成双向通信路径的HEAC+线。
图28说明TMDS发送数据的结构示例。该图28说明在使用TMDS信道#0、#1、以及#2发送具有1920像素×1080行的宽度×长度的图像数据的情况下的各种类型的发送数据的部分。
对于发送数据使用HDMI的三个TMDS信道#0、#1、和#2发送的视频场(Video Field),根据发送类型有三种类型的部分。这三种类型的部分是视频数据部分(Video Data period,视频数据时段)、数据导部分(Data Islandperiod,数据岛时段)、和控制部分(Control period,控制时段)。
这里,视频字段部分是从某一垂直同步信号的前沿(active edge:活动沿)到下一个垂直同步信号的前沿的部分。该视频字段部分划分成水平消隐时段(horizontal blanking:水平消隐)、垂直消隐时段(verticalblanking:垂直消隐)、以及活动视频部分(Active Video)。该活动视频部分是通过从视频字段部分中去除水平消隐时段和垂直消隐时段获得的部分。
视频数据部分分配给活动视频部分。对于该视频数据部分,发送组成未压缩的一个屏幕的图像数据的1920像素×1080行的有效像素(Active pixels)的数据。
数据导部分以及控制部分被分配给水平消隐时段和垂直消隐时段。利用数据导部分以及控制部分,发送辅助数据(Auxiliary data)。也就是说,数据导部分被分配给水平消隐时段和垂直消隐时段的部分。利用该数据导部分,发送辅助数据中的与控制无关的数据,例如音频数据的分组等等。
控制部分被分配给水平消隐时段和垂直消隐时段的另一部分。利用该控制部分,发送辅助数据中与控制有关的数据,例如垂直同步信号和水平同步信号、控制分组、等等。
[用HDMI发送预先信息(G_data)的方法]
将描述用HDMI接口发送预先信息(G_data)的方法。这里,将描述使用HDMI Vendor Specific InfoFrame(HDMI供应商专用信息帧)的方法,但是并不局限于此。用该方法,在HDMI Vendor Specific InfoFrame分组中,设置3D_Meta_present=1,以及指定Vendor Specific InfoFrame extension(供应商专用信息帧扩展)。在这种情况下,3D_Metadata_type定义为不用的例如“100”,以及指定预先信息(G_data)。
图29说明HDMI Vendor Specific InfoFrame的分组结构。该HDMI VendorSpecific InfoFrame在CEA-861–D中定义,因此将省略其详细说明。
指示图像数据的类型的3位信息“HDMI_Video_Format”位于第4字节(PB4)的第7位到第5位。还有,“3D_Meta_present”位于第5字节(PB5)的第3位,以及在指定Vendor Specific InfoFrame extension的情况下,这一个字节设置为“1”。还有,“3D_Metadata_type”位于第7字节(PB7)的第7位到第5位。在指定预先信息(G_data)的信息的情况下,该三个位的信息设置为不用的例如“100”。
还有,“3D_Metadata_length”位于第7字节(PB7)的第4位到第0位。信息的这五位指示随后3D_Metadata区的的长度。例如,设置“3D_Metadata_length=27(0x2)”,则预先信息(G_data)被安置具有紧接之后的字节位置起的两个字节的大小(见图9)。
也就是说,“switching_bit”位于第8字节(PB8)的第7位,“next_sequence_2D”位于其第6位,以及“timing_type”位于其第5位至第4位。还有,“timing information”位于第8字节(PB8)的第3位至第0位以及第8+1字节(PB8+1)的第7位至第0位。
<3.修改>
注意,利用上述实施例,举例说明了容器(container)是传输流(MPEG-2TS)情况下的布置。然而,本发明可以类似地应用于使用诸如因特网的网络分发给接收端子的配置的系统。对于因特网分发,经常使用MP4或其他格式的容器执行分发。也就是说,可应用各种类型的格式容器,诸如由数字广播标准采用的传输流(MPEG-2TS)、用于因特网分发的MP4等等。
工业实用性
本发明可以应用于通过广播波发送、或经由诸如因特网的网络等等分发以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流的多路复用流的图像发送/接收系统。
参考标记列表
10、10A图像发送/接收系统
100广播电台
110、110A至110C发送数据生成单元
111数据提取单元
111a数据记录介质
112、112B视频编码器
113音频编码器
114预先信息生成单元
115预先信息生成编码器
116、116C多路复用器
200、200A接收器
201CPU
202闪速ROM
203DRAM
211天线端子
212数字调谐器
213位流处理单元
2143D信号处理单元
215视频信号控制单元
216面板驱动单元
217显示面板
218音频信号处理单元
219音频信号放大器单元
220扬声器
221快门控制单元
221a无线通信单元
231HDMI端子
232HDNI接收单元
300快门眼镜
300L左眼快门
300R右眼快门
301控制单元
302无线通信单元
303快门驱动单元
304眼镜单元
400机顶盒
401位流处理单元
402HDMI端子
403天线端子
404数字调谐器
405视频信号处理电路
406HDMI发送单元
407音频信号处理电路
411CPU
412闪速ROM
413DRAM
500HDMI电缆

Claims (18)

1.一种发送器,包括:
发送单元,配置为发送以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流的多路复用流;
信息插入单元,配置为将预先通知在所述第一视频流与所述第二视频流之间的切换的预先信息插入到所述多路复用流中。
2.根据权利要求1所述的发送器,其中所述预先信息具有添加的定时信息,该定时信息指示从所述预先信息的该插入定时开始直到所述切换定时为止的间隔。
3.根据权利要求2所述的发送器,其中所述预先信息具有添加的指示是切换到所述第一视频流还是切换到所述第二视频流的信息。
4.根据权利要求1所述的发送器,其中所述信息插入单元将所述预先信息插入到组成所述多路复用流的、并且独立于所述视频流的流中。
5.根据权利要求1所述的发送器,其中所述信息插入单元将所述预先信息插入到所述视频流的图片层或更高的层。
6.根据权利要求5所述的发送器,其中所述信息插入单元将所述预先信息插入到组成所述视频流的PES的头部部分中。
7.根据权利要求1所述的发送器,其中所述信息插入单元将所述预先信息插入到所述多路复用流中包括的节目映射表的下面。
8.一种发送方法,包括:
发送步骤,发送以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流的多路复用流;
信息插入步骤,将预先通知在所述第一视频流与所述第二视频流之间的切换的预先信息插入到所述多路复用流中。
9.一种接收器,包括:
接收单元,配置为接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流、以及还插入了预先通知所述第一视频流与所述第二视频流的切换的预先信息的多路复用流;
显示控制单元,配置为基于从由所述接收单元接收的所述多路复用流中包括的所述视频流中获得的图像数据而在显示单元上执行2维图像显示或其中左眼图像与右眼图像交替显示的3维图像显示;和
快门控制单元,配置为,基于从由所述接收单元接收的所述多路复用流中获得的预先信息,在所述2维图像显示与所述3维图像显示之间的切换定时之前,发送快门模式切换命令给快门眼镜。
10.根据权利要求9所述的接收器,其中所述快门模式切换命令包括指示直到切换该快门模式时为止的时间的信息。
11.根据权利要求10所述的接收器,其中所述快门模式切换命令具有添加的指示是切换到与2维图像显示相对应的快门模式还是切换到与3维图像显示相对应的快门模式的信息。
12.一种接收方法,包括:
接收步骤,接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流、以及还插入了预先通知所述第一视频流与所述第二视频流的切换的预先信息的多路复用流;
显示控制步骤,基于从在所述接收步骤中接收的所述多路复用流中包括的所述视频流中获得的图像数据,在显示单元上执行2维图像显示或其中左眼图像与右眼图像交替显示的3维图像显示;和
快门控制步骤,基于从在所述接收步骤中接收的所述多路复用流中获得的预先信息,在所述2维图像显示与所述3维图像显示之间的切换定时之前,发送快门模式切换命令给快门眼镜。
13.一种接收器,包括:
接收单元,配置为接收以时间分割方式包括插入了2维图像数据的第一视频流和插入了3维图像数据的第二视频流、以及还插入了预先通知所述第一视频流与所述第二视频流的切换的预先信息的多路复用流;和
数据发送单元,配置为,经由发送路径,将从由所述接收单元接收的所述多路复用流中包括的所述视频流中获得的图像数据和从所述多路复用流中获得的预先信息发送到外部装置。
14.根据权利要求13所述的接收器,其中所述数据发送单元经由所述发送路径在多个信道中通过差分信号发送所述图像数据到所述外部装置;
以及其中通过在所述图像数据的消隐时段中插入所述预先信息,将所述预先信息发送给所述外部装置。
15.一种接收器,包括:
数据接收单元,配置为经由发送路径从外部装置接收以时间分割方式包括2维图像数据和3维图像数据的图像数据以及预先通知在2维图像数据与3维图像数据之间的切换的预先信息;
显示控制单元,配置为,基于由所述数据接收单元接收的图像数据,在显示单元上执行2维图像显示或其中左眼图像与右眼图像交替显示的3维图像显示;和
快门控制单元,配置为,基于由所述数据接收单元接收的该预先信息,在所述2维图像显示与所述3维图像显示之间的切换定时之前,发送快门模式切换命令给快门眼镜。
16.根据权利要求15所述的接收器,其中所述快门模式切换命令包括指示直到切换该快门模式时为止的时间的信息。
17.根据权利要求16所述的接收器,其中所述快门模式切换命令具有添加的指示是切换到与所述2维图像显示相对应的快门模式还是切换到与所述3维图像显示相对应的快门模式的信息。
18.一种接收方法,包括:
数据接收步骤,经由发送路径从外部装置接收以时间分割方式包括2维图像数据和3维图像数据的图像数据以及预先通知在2维图像数据与3维图像数据之间的切换的预先信息;
显示控制步骤,基于在所述数据接收步骤中接收的图像数据,在显示单元上执行2维图像显示或其中左眼图像与右眼图像交替显示的3维图像显示;和
快门控制步骤,基于在所述数据接收步骤中接收的该预先信息,在所述2维图像显示与所述3维图像显示之间的切换定时之前,发送快门模式切换命令给快门眼镜。
CN2011800226182A 2010-12-15 2011-12-02 发送装置、发送方法、接收装置、以及接收方法 Pending CN102884800A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-279949 2010-12-15
JP2010279949A JP2012129827A (ja) 2010-12-15 2010-12-15 送信装置、送信方法、受信装置および受信方法
PCT/JP2011/077994 WO2012081427A1 (ja) 2010-12-15 2011-12-02 送信装置、送信方法、受信装置および受信方法

Publications (1)

Publication Number Publication Date
CN102884800A true CN102884800A (zh) 2013-01-16

Family

ID=46244535

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011800226182A Pending CN102884800A (zh) 2010-12-15 2011-12-02 发送装置、发送方法、接收装置、以及接收方法

Country Status (6)

Country Link
US (1) US20120293621A1 (zh)
EP (1) EP2521360A4 (zh)
JP (1) JP2012129827A (zh)
CN (1) CN102884800A (zh)
BR (1) BR112012019870A2 (zh)
WO (1) WO2012081427A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103888748A (zh) * 2014-03-24 2014-06-25 中国人民解放军国防科学技术大学 用于众视点三维显示系统的视频帧同步方法
CN108476330A (zh) * 2016-01-08 2018-08-31 索尼公司 发送设备、发送方法、接收设备和接收方法
US11039142B2 (en) 2013-04-08 2021-06-15 Sony Corporation Encoding and decoding of significant coefficients in dependence upon a parameter of the significant coefficients

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012147121A (ja) * 2011-01-07 2012-08-02 Sony Corp 画像表示システム、表示装置、並びにシャッター眼鏡
JP2012178783A (ja) * 2011-02-28 2012-09-13 Sony Corp 画像表示システム、表示装置、並びにシャッター眼鏡
JP5641090B2 (ja) 2013-03-14 2014-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
KR20150031994A (ko) * 2013-09-17 2015-03-25 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어방법
WO2017068681A1 (ja) 2015-10-22 2017-04-27 三菱電機株式会社 映像配信装置、映像配信システムおよび映像配信方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62231578A (ja) * 1986-03-31 1987-10-12 Sanyo Electric Co Ltd 立体テレビジヨンシステム
JP2005006114A (ja) * 2003-06-12 2005-01-06 Sharp Corp 放送データ送信装置、放送データ送信方法および放送データ受信装置
US20090232389A1 (en) * 2008-03-12 2009-09-17 Samsung Electronics Co., Ltd. Image processing method and apparatus, image reproducing method and apparatus, and recording medium

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3066298B2 (ja) 1995-11-15 2000-07-17 三洋電機株式会社 立体画像観察用眼鏡の制御方法
JP3784967B2 (ja) 1998-07-21 2006-06-14 日本放送協会 立体画像表示方法および装置
JP2003045343A (ja) 2001-08-03 2003-02-14 Nippon Hoso Kyokai <Nhk> 立体画像表示装置
JP3789794B2 (ja) * 2001-09-26 2006-06-28 三洋電機株式会社 立体画像処理方法、装置、およびシステム
JP5469911B2 (ja) * 2009-04-22 2014-04-16 ソニー株式会社 送信装置および立体画像データの送信方法
JP2011066871A (ja) * 2009-08-21 2011-03-31 Sony Corp コンテンツ伝送方法及び表示装置
US9172991B2 (en) * 2010-04-30 2015-10-27 Lg Electronics Inc. Apparatus of processing an image and a method of processing thereof
CN102907107A (zh) * 2010-06-02 2013-01-30 日立民用电子株式会社 接收装置和输出方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62231578A (ja) * 1986-03-31 1987-10-12 Sanyo Electric Co Ltd 立体テレビジヨンシステム
JP2005006114A (ja) * 2003-06-12 2005-01-06 Sharp Corp 放送データ送信装置、放送データ送信方法および放送データ受信装置
US20090232389A1 (en) * 2008-03-12 2009-09-17 Samsung Electronics Co., Ltd. Image processing method and apparatus, image reproducing method and apparatus, and recording medium

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11039142B2 (en) 2013-04-08 2021-06-15 Sony Corporation Encoding and decoding of significant coefficients in dependence upon a parameter of the significant coefficients
CN103888748A (zh) * 2014-03-24 2014-06-25 中国人民解放军国防科学技术大学 用于众视点三维显示系统的视频帧同步方法
CN108476330A (zh) * 2016-01-08 2018-08-31 索尼公司 发送设备、发送方法、接收设备和接收方法
US10848800B2 (en) 2016-01-08 2020-11-24 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method for switching video data types
US11272230B2 (en) 2016-01-08 2022-03-08 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method for switching video data types

Also Published As

Publication number Publication date
EP2521360A1 (en) 2012-11-07
WO2012081427A1 (ja) 2012-06-21
EP2521360A4 (en) 2014-03-12
US20120293621A1 (en) 2012-11-22
BR112012019870A2 (pt) 2016-04-26
JP2012129827A (ja) 2012-07-05

Similar Documents

Publication Publication Date Title
CN102177724B (zh) 立体图像数据传输装置、立体图像数据发送方法、立体图像数据接收装置和立体图像数据接收方法
CN102811361B (zh) 立体图像数据发送、接收和中继方法以及其设备
CN102342113B (zh) 立体图像数据传输装置和立体图像数据接收装置
CN102884800A (zh) 发送装置、发送方法、接收装置、以及接收方法
CN102210155B (zh) 发送立体图像数据的立体图像数据发送装置和方法
CN102883215B (zh) 发送器、接收器、三维图像数据发送方法和接收方法
CN102369735B (zh) 立体图像数据发送装置、立体图像数据发送方法、立体图像数据接收装置和立体图像数据接收方法
US8854434B2 (en) Transmission device, receiving device, program, and communication system
JP5531972B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
CN102210154A (zh) 立体图像数据发送装置和立体图像数据接收装置
CN102342111A (zh) 立体图像数据传输装置、立体图像数据传输方法、立体图像数据接收装置、以及立体图像数据接收方法
EP2299724A2 (en) Video processing system and video processing method
CN102177723A (zh) 立体图像数据发送器、用于发送立体图像数据的方法和立体图像数据接收器
CN101873507A (zh) 传输装置、接收装置、立体图像数据传输方法和接收方法
CN102714746A (zh) 立体图像数据传送设备、立体图像数据传送方法、以及立体图像数据接收设备
JP2011166757A (ja) 送信装置、送信方法および受信装置
US20140327740A1 (en) Transmission apparatus, transmisson method, receiver and receiving method
CN103168476A (zh) 发送器、发送方法以及接收器
EP2506580A1 (en) Stereoscopic image data transmission device, stereoscopic image data transmission method, and stereoscopic image data reception device
CN107534786A (zh) 传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法
JP2013026643A (ja) 受信装置、受信方法および送受信方法
JP2011010255A (ja) 立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP2013026644A (ja) 受信装置、受信方法および送受信方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130116