CN102036044A - 发送器、发送方法、接收器和接收方法 - Google Patents

Abstract

一种发送器、发送方法、接收器和接收方法。所述发送器包括：传输数据产生部件，产生具有视频场时间段格式的传输数据，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括主视频区域和辅助视频区域；以及传输数据发送部件，以差分信号格式将所述传输数据产生部件中产生的传输数据经由传输路径和经由多个信道发送到外部装置。所述传输数据产生部件将画面数据分配给所述主视频区域，而将与分配给所述主视频区域的画面数据有关的附加信息分配给辅助视频区域。

Description

发送器、发送方法、接收器和接收方法

技术领域

本发明涉及发送器、发送方法、接收器和接收方法，并且更具体地涉及处理在活动视频时间段中除了主视频区域之外还包括辅助视频区域的传输数据的发送器等。

背景技术

近年来，例如，诸如HDMI(高清多媒体接口)之类的接口已经作为这样的通信接口而普及，其高速地从游戏机、DVD(数字多功能盘)记录器、机顶盒或任意其他AV源(视听源)向电视接收机、投影仪或任意其他显示器发送数字视频信号(即，未压缩(基带)数字视频信号(画面数据))和伴随视频信号的数字音频信号(音频数据)。例如，在2009年6月5日的高清多媒体接口规范版本1.4中详细描述了HDMI规范。

发明内容

在上述HDMI规范中，定义了发送3D画面的方法。例如，在“帧封包(Frame packing)”格式中，在左眼画面(L)与右眼画面(R)之间插入用于定时调整的、被称为“活动间隔”的间隔(space)，并且所述间隔目前未用于任何目的。

此外，在上述HDMI规范中，将“InfoFrame”定义为发送信息的手段。然而，InfoFrame存在不能保证信息与画面之间的同步的这样的问题，并且它们不与帧精度同步。此外，将InfoFrame的数据大小限制为32字节，因此不能发送大数据。

此外，在从信源装置(如BD(蓝光盘)播放器)向信宿装置(如电视接收机(TV))输出3D画面的情况下，将字幕、菜单(如BD的菜单)和OSD(如BD播放器信息或菜单的显示)叠加在3D画面上，然后输出3D画面。

然而，考虑到在电视接收机中执行3D画面的诸如校正或画质增强之类的处理，期望分离地发送3D画面和诸如字幕、菜单或OSD之类的待叠加的画面层，校正3D画面，然后将画面层叠加在3D画面上。在3D画面处理中，确定左右画面之间的相关性的必要性很高。因此，当叠加另一个画面层时，确定相关性的精度明显降低，从而引起画面校正质量的下降。

例如，期望有效地使用活动间隔。此外，期望允许与具有帧精度的画面同步地发送某种程度上的大数据。进一步，期望提高诸如3D画面的校正或画质增强之类的处理的质量。

根据本发明的实施例，提供了一种发送器，包括：传输数据产生部件，产生具有视频场时间段格式的传输数据，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括主视频区域和辅助视频区域；以及传输数据发送部件，以差分信号格式将所述传输数据产生部件中产生的传输数据经由传输路径和经由多个信道发送到外部装置。所述传输数据产生部件将画面数据分配给主视频区域，而将与分配给所述主视频区域的画面数据有关的附加信息分配给辅助视频区域。

在根据本发明实施例的发送器中，传输数据产生部件产生具有视频场时间段格式的传输数据，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元。活动视频时间段包括主视频区域和辅助视频区域。然后，向主视频区域分配画面数据，并且向辅助视频区域分配与分配给主视频区域的画面数据有关的附加信息。传输数据发送部件以差分信号格式将所述传输数据产生部件中产生的传输数据经由传输路径和经由多个信道发送到外部装置。

例如，分配给主视频区域的画面数据是用于显示立体画面(3D画面)的立体画面数据。例如，立体画面数据包括左眼画面数据和右眼画面数据。可替代地，例如，立体画面数据包括二维画面数据和与每一个像素对应的深度信息。

例如，在分配给辅助视频区域的附加信息的开头部分中可以提供具有固定值的同步样式。在这种情况下，在接收侧，通过检测辅助视频区域中具有固定值的同步样式，易于识别向辅助视频区域分配附加信息的事实以及附加信息的开始位置，并且易于提取附加信息。

例如，分配给辅助视频区域的附加信息包括信息数据和第二画面数据中之一或两者。例如，信息数据经历通过三倍模数冗余方法等的纠错编码。例如，信息数据是与要叠加在由分配给主视频区域的画面数据描述的画面上的画面(例如，信源装置的信息显示、诸如菜单的OSD画面)有关的信息的数据。在这种情况下，例如，与画面有关的信息是诸如显示位置、透射率、调色板或显示偏移之类的信息。

进一步，例如，信息数据是与要叠加在基于分配给所述主视频区域的画面数据的画面上叠加的字幕有关的信息的数据。在这种情况下，与画面有关的信息是字符串的信息、显示区域(显示位置、显示尺寸等)的信息、显示方向的信息等。

例如，信息数据是与用以获得分配给主视频区域的左眼画面数据和右眼画面数据的拍摄过程有关的拍摄相关数据。在这种情况下，拍摄相关数据是左相机与右相机之间的距离的信息、左相机与右相机的方向的信息、左相机和右相机的视角信息等。拍摄相关数据用于接收侧立体画面数据的校正所需的深度信息的估计。

在本发明的实施例中，活动视频时间段包括主视频区域和辅助视频区域，向辅助视频区域分配与分配给主视频区域的画面数据有关的附加信息。因此，例如，当利用活动间隔作为辅助视频区域时，允许有效地利用活动间隔。

此外，在本发明的实施例中，在具有主视频区域的活动视频时间段中包括辅助视频区域。因此，允许将具有某种程度上大尺寸的附加信息被分配给辅助视频区域，并且允许以帧精度与分配给主视频区域的画面数据同步地发送附加信息。

进一步，在本发明的实施例中，活动视频时间段包括主视频区域和辅助视频区域，并且向辅助视频区域分配与分配给主视频区域的画面数据有关的附加信息。因此，允许将与基于分配给主视频区域的画面数据的画面有关的、要叠加在该画面上的字幕或信息的数据分配给辅助视频区域，然后将其发送。因此，例如，在执行了诸如3D画面的校正或画质增强之类的处理之后，允许在接收侧叠加字幕、菜单画面等，并且这种处理的质量改进是可实现的。

例如，根据本发明实施例的发送器可以进一步包括信息获取部件，经由传输路径从外部装置获得信息，所述信息与分配给辅助视频区域的附加信息有关，并且传输数据产生部件可以基于由信息获取部件获得的信息，将附加信息分配给辅助视频区域。例如，信息获取部件可以从存储器部件(例如，外部装置中包括的EDIDROM)读出并获得与附加信息有关的信息。

例如，与附加信息有关的信息表示有效地利用分配给辅助视频区域的附加信息的功能的存在或不存在，并且在通过信息获取部件获得的信息指示有效地利用分配给辅助视频区域的信息的功能存在的情况下，传输数据产生部件将附加信息分配给辅助视频区域。在这种情况下，尽管外部装置不具有有效地利用分配给辅助视频区域的信息的功能，但是可去除向外部装置发送分配给辅助视频区域的信息的不必要处理。

根据本发明实施例的发送器可以进一步包括信息发送部件，所述信息发送部件经由传输路径向外部装置发送信息，所述信息与附加信息有关。例如，信息发送部件通过将信息插入到传输数据的消隐时间段中，经由传输路径向外部装置发送与附加信息有关的信息。

例如，与附加信息有关的信息表示是否将附加信息分配给辅助视频区域。在这种情况下，在接收侧，基于该信息，易于识别是否将附加信息分配给辅助视频区域。此外，例如，与附加信息有关的信息表示分配给辅助视频区域的附加信息的数据格式。在这种情况下，在接收侧，基于该信息，易于识别附加信息的数据格式。进一步，例如，与附加信息有关的信息表示在辅助视频区域的开头部分中提供的间隔的长度。在这种情况下，在接收侧，基于该信息，易于识别辅助视频区域的开头部分中提供的间隔的长度。

在根据本发明实施例的发送器中，例如，主视频区域中的数据和辅助视频区域中的数据中每一个包括每像素三个信道的8位数据，并且传输数据发送部件可以对于主视频区域中的数据执行剪裁然后发送结果，而在不执行剪裁的情况下发送辅助视频区域中的数据。在这种情况下，必须在辅助视频区域中指定“不剪裁”，并且数据发送部件的操作很复杂，但是在有限范围画面的情况下，允许将组成附加信息的8位数据按原样分配给辅助视频区域，由此数据产生很容易。

在根据本发明实施例的发送器中，例如，主视频区域中的数据和辅助视频区域中的数据中的每一个包括每像素三个信道的8位数据，并且传输数据产生部件可以将附加信息的两个8位数据的各个位分别分配给辅助视频区域中三个信道的8位数据的每一个的最高有效位(MSB)之外的各个位，并且将作为次高有效位的值的逻辑反转的反转值设置到MSB，并且传输数据发送部件可以对主视频区域中的数据和辅助视频区域中的数据执行剪裁，然后发送数据。在这种情况下，数据产生部件的操作很复杂，但是在有限范围画面的情况下，不需要在辅助视频区域中指定“不剪裁”，并且数据发送部件的操作很容易。

根据本发明的实施例，提供了一种接收器，包括：传输数据接收部件，经由传输路径和经由多个信道从外部装置接收差分信号格式的传输数据，所述传输数据具有视频场时间段的格式，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括分配画面数据的主视频区域和分配与分配给主视频区域的画面数据有关的附加信息的辅助视频区域，以及数据提取部件，从所述传输数据接收部件接收到的传输数据的主视频区域中提取并获得画面数据，并从所述传输数据接收部件接收到的传输数据的辅助视频区域中提取并获得附加信息。

在根据本发明实施例的接收器中，传输数据接收部件经由传输路径和经由多个信道从外部装置接收差分信号格式的传输数据。接收具有视频场时间段格式的传输数据，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元。活动视频时间段包括主视频区域和辅助视频区域，向主视频区域分配画面数据，并且向辅助视频区域分配与分配给主视频区域的画面数据有关的附加信息。数据提取部件从接收到的传输数据的主视频区域中提取并获得画面数据，并且从接收到的传输数据的辅助视频区域中提取并获得附加信息。

在根据本发明实施例的接收器中，例如，画面数据包括用于显示立体画面的左眼画面数据和右眼画面数据，并且在附加信息包括与用以获得左眼画面数据和右眼画面数据的拍摄过程有关的拍摄相关数据的情况下，画面数据校正部件可以基于该拍摄相关数据，校正左眼画面数据和右眼画面数据。例如，画面数据校正部件通过使用拍摄相关数据来估计深度信息，并基于深度信息和屏幕尺寸的信息来校正左眼画面数据和右眼画面数据。在这种情况下，拍摄相关数据以帧精度与左眼画面数据和右眼画面数据同步，并且允许高质量校正。

此外，在根据本发明实施例的接收器中，例如，画面数据包括用于显示立体画面的左眼画面数据和右眼画面数据，并且接收器可以进一步包括画面移动部件，所述画面移动部件在水平方向中移动左眼画面数据描述的左眼画面和右眼画面数据描述的右眼画面，并且附加信息可以包括伴随所述画面移动部件中的移动调整的必要像素数据。在这种情况下，即使移动左眼画面和右眼画面，也允许在不显示响应于该移动的黑色画面的情况下显示有效画面。

进一步，例如，在根据本发明实施例的接收器中，附加信息可以包括第二画面数据和规范信息，并且根据本发明实施例的接收器可以进一步包括：多个缓冲器；画面数据写入部件，基于所述规范信息将第二画面数据写入多个缓冲器中的指定一个的指定位置；以及画面数据叠加部件，以预定比例叠加从传输数据的主视频区域提取并获得的画面数据和写入多个缓冲器的第二画面数据。在这种情况下，允许分别将附加信息中包括的不同类型的画面数据写入不同的缓冲器，并且允许有效地执行诸如更新画面数据之类的处理。

根据本发明的实施例，允许有效地利用活动间隔。此外，根据本发明的实施例，允许以帧精度同步地发送具有某种程度上大尺寸的数据。进一步，根据本发明的实施例，诸如3D画面的校正或画质增强之类的处理的质量改进是可实现的。

本发明的其他和进一步目标、特征和优点将从下面的描述中更加全面地显现。

附图说明

图1是图示根据本发明的实施例的AV系统的配置示例的框图。

图2是图示构成AV系统的盘播放器(信源装置)的配置示例的框图。

图3是图示构成AV系统的电视接收机(信宿装置)的配置示例的框图。

图4是图示HDMI发送部件(HDMI信源)和HDMI接收部件(HMDI信宿)的配置示例的框图。

图5是图示构成HDMI发送部件的HDMI发送器和构成HDMI接收部件的HDMI接收器的配置示例的框图。

图6是图示(在发送1920像素宽×1080行高的画面数据的情况下)TMDS传输数据的配置示例的图。

图7是图示连接信源装置和信宿装置之间的HDMI线缆的HDMI端子的管脚排列(类型A)的表。

图8是图示作为立体画面数据的一个TMDS传输数据配置的帧封包3D视频格式的图。

图9是图示作为立体画面数据的一个TMDS传输数据配置的隔行格式(interlaced format)的帧封包3D视频格式的图。

图10是图示在包括多个活动间隔区域的情况下活动间隔区域的整合的图。

图11A到11C是每一个均图示在使用三个活动间隔的整合的情况下每一个活动间隔区域的第一行中的附加信息布局的示例的图。

图12是图示在帧封包3D视频格式中活动间隔区域的每一帧中的尺寸示例的表。

图13是图示在活动间隔区域未用于附加信息发送的情况下三个TMDS信道中相应像素位置中的数据的图。

图14是图示在活动间隔区域用于附加信息发送的情况下三个TMDS信道中相应像素位置中的数据的图。

图15是图示在附加信息包括信息数据和画面数据二者的情况下活动间隔区域中的数据布局的表。

图16是图示在附加信息仅包括信息数据的情况下活动间隔区域中的数据布局的表。

图17是图示在附加信息仅包括画面数据的情况下活动间隔区域中的数据布局的表。

图18是图示用于3D发送的扩展HDMI Vendor Specific InfoFrame(厂商特定信息帧)分组的图。

图19是图示信息区域首标的配置示例的表。

图20是图示信息块的配置示例的表。

图21是图示画面区域首标的配置示例的表。

图22是图示画面块的配置示例的表。

图23是图示由HDMI规范定义的视频彩色分量范围的表。

图24是用于描述在有限范围中存储数据的方法中位7具有反转值(其为位6的值的逻辑反转)的图。

图25是用于描述在有限范围中存储数据的方法中三个TMDS信道#0、#1和#2的像素值(8位数据)的位配置的图。

图26是图示在使用三倍模数冗余(triple modular redundancy)方法的情况下发送侧的编码处理和接收侧的解码处理的图。

图27是用于描述在使用三倍模数冗余方法的情况下，在发送侧提供公共数据作为每像素三个信道#0、#1和#2的8位数据的图。

图28是图示在盘播放器中的立体画面数据上叠加诸如字幕、菜单或OSD之类的画面数据然后将立体画面数据发送到电视接收机的情况下的数据流的示意图。

图29是图示在与立体画面数据分离地利用活动间隔区域将诸如字幕、菜单或OSD之类的画面信息发送到电视接收机，在电视接收机中校正立体画面数据，然后在经校正的立体画面数据上叠加诸如字幕、菜单或OSD之类的画面数据的情况下的数据流的示意图。

图30是用于描述当估计深度信息时，关于水平方向中的行来确定L画面与R画面之间的相关性的图。

图31是用于描述深度信息的估计的图。

图32是图示画面的估计深度信息的图。

图33是图示相机的方向α和视角β(在水平方向中)以及各相机之间的距离d的图。

图34是图示分别在画面的宽度和高度中的点数W和H的图。

图35是图示相机的方向(轴)与连接在关于左眼(L)画面中的位置(x1，y1)中显示的对象A和关于对象A的相机之间的线之间的角度γ1的图。

图36是用于描述在校正立体画面数据的情况下的建模处理的图。

图37是用于描述当校正立体画面数据时屏幕尺寸和观看距离用作参数的图。

图38是示意性地图示CPU中立体画面数据的重构的流程的流程图。

图39是用于描述计算相机的视角和纵横比的方法的参考图。

图40是图示当移动每一个左眼(L)画面和右眼(R)画面的显示位置时，在未出现与移动画面的一侧相反的一侧的边缘部分的画面数据的情况下，以与移动量对应的宽度在边缘部分中显示黑色的图。

图41是用于描述分配给活动间隔区域的OSD显示的画面数据被写入电视接收机中包括的被称为“显像面(picture plane)”的虚拟缓冲器的图。

图42是图示电视接收机中执行的操作的图，其中被写入给定显像面的OSD显示的画面数据与在下一帧的定时处发送的立体画面数据(发送视频)α混合。

图43是图示在信息块的有效载荷中存储的信息的配置示例的图。

图44是图示画面描述符(12字节)的配置示例的图。

图45是用于画面描述符的每一字段的描述的图。

图46是图示画面描述符的操作字段(3位)中的操作列表的表。

图47是图示在执行操作“NOP”的情况下画面描述符的配置示例的图。

图48是图示在执行操作“Clear Picture Plane(清除显像面)”的情况下画面描述符的配置示例的图。

图49是图示在执行操作“Clear Active Video Area(清除活动视频区域)”的情况下画面描述符的配置示例的图。

图50是图示在执行操作“Put Picture Horizontally N+1(水平地放置画面N+1)”的情况下画面描述符的配置示例的图。

图51是图示通过执行操作“Put Picture Horizontally N+1”的画面描述符的操作示例的图。

图52是图示在执行操作“Put Picture Vertically N+1(垂直地放置画面N+1)”的情况下画面描述符的配置示例的图。

图53是图示通过执行操作“Put Picture Vertically N+1”的画面描述符的操作示例的图。

图54是图示在执行操作“Put Picture Magnification N+1(放大地放置画面N+1)”的情况下画面描述符的配置示例的图。

图55是图示在通过执行操作“Put Picture Magnification N+1”的画面描述符的操作示例的图。

图56是图示E-EDID数据的配置示例的图。

图57是图示Vendor Specific区域的数据配置示例的图。

图58是用于描述在用于画面输出的帧存储器的渲染的内容(renderedcontent)被发送到HDMI发送部件的情况下的配置信息的图。

具体实施方式

以下将参照附图详细描述优选实施例。将以如下次序给出描述。

1.实施例

2.修改

1.实施例

AV系统的配置示例

图1图示了根据实施例的AV(视听)系统的配置示例。AV系统10包括作为HDMI信源装置的盘播放器100和作为HDMI信宿装置的电视接收机200。

盘播放器100和电视接收机200经由HDMI线缆300彼此连接。盘播放器100包括连接到HDMI发送部件(HDMI TX)102的HDMI端子101。电视接收机200包括连接到HDMI接收部件(HDMI RX)202的HDMI端子201。HDMI线缆300的一端连接到盘播放器100的HDMI端子101，而HDMI线缆300的另一端连接到电视接收机200的HDMI端子201。

在图1所图示的AV系统10中，通过HDMI线缆300将未压缩的(基带)画面数据(视频信号)从盘播放器100发送到电视接收机200。电视接收机200基于从盘播放器100发送的画面数据显示画面。此外，通过HDMI线缆300将未压缩的(基带)音频数据(音频信号)从盘播放器100发送到电视接收机200。电视接收机200基于从盘播放器100发送的音频数据输出音频。

在从盘播放器100向电视接收机200发送的画面数据是二维画面数据(2D画面数据)的情况下，电视接收机200显示二维画面。此外，在从盘播放器100向电视接收机200发送的画面数据是用于显示立体画面的三维画面数据(3D画面数据)(即立体画面数据)的情况下，电视接收机200显示立体画面。例如，立体画面数据包括左眼画面数据和右眼画面数据。此外，例如，立体画面数据包括二维画面数据和与每个像素对应的深度信息(深度数据)(MPEG-C系统)。

从盘播放器100发送到电视接收机200的立体画面数据被分配到TMDS传输数据的活动视频时间段。活动视频时间段除了分配立体画面数据的活动视频区域之外，还包括活动间隔区域。在实施例中，与立体画面数据有关的附加信息被分配到活动间隔区域，并且将附加信息与立体画面数据一起从盘播放器100发送到电视接收机200。电视接收机200使用附加信息执行处理。在这种情况下，活动视频区域构成主视频区域，而活动间隔区域构成辅助视频区域。下面将详细描述附加信息。

盘播放器的配置示例

图2图示了盘播放器100的配置示例。盘播放器100包括HDMI端子101、HDMI发送部件102、驱动接口103和BD(蓝光盘)/DVD(数字多功能盘)驱动器104。盘播放器100进一步包括多路分配器105、MPEG解码器106、视频信号处理电路107、音频解码器108和音频信号处理电路109。

盘播放器100进一步包括内部总线120、CPU 121、闪存ROM 122和DRAM 123。盘播放器100进一步包括以太网接口(Ethernet/IF)124、网络端子125、遥控接收部件126和遥控发射器127。注意，“Ethernet”是注册商标。CPU 121、闪存ROM 122、DRAM 123、以太网接口124和驱动接口103连接到内部总线120。

CPU 121控制盘播放器100的每一个组件的操作。闪存ROM 122存储控制软件和数据。DRAM 123形成CPU 121的工作区域。CPU 121提取从闪存ROM 122读出到DRAM 123的软件或数据以激活软件，并控制盘播放器100的每一个组件。遥控接收部件126接收从遥控发射器127发送的遥控信号(遥控码)以将遥控信号提供给CPU 121。CPU 121响应于控制码来控制盘播放器100的每一个组件。

BD/DVD驱动器104将内容数据记录在作为盘记录介质的BD或DVD(未图示)上，或者从BD或DVD再现内容数据。BD/DVD驱动器104通过驱动接口103连接到内部总线120。

多路分配器105从BD/DVD驱动器104的再现数据中提取诸如视频或音频之类的基本流。MPEG解码器106对于由多路分配器105提取的视频基本流进行解码处理以获得未压缩(基带)画面数据。

如果需要的话，视频信号处理电路107对于MPEG解码器106中获得的画面数据执行缩放处理(分辨率转换处理)、图形数据叠加处理等，以将画面数据提供给HDMI发送部件102。此外，在MPEG解码器106中获得的画面数据是立体画面数据的情况下，视频信号处理电路107对立体画面数据执行处理以进入与3D画面产生部件中的发送系统对应的状态。在处理中，立体画面数据被分配到TMDS传输数据的活动视频时间段的活动视频区域。

音频解码器108对于由多路分配器105提取的音频基本流执行解码处理，以获得未压缩(基带)音频数据。如果需要的话，音频信号处理电路109对在音频解码器108中获得的音频数据执行音频质量调整处理，以将音频数据提供给HDMI发送部件102。

HDMI发送部件102通过基于HDMI的通信，从HDMI端子101发送未压缩的画面(视频)数据和未压缩的音频数据。在这种情况下，经由HDMI的TMDS信道发送画面数据和音频数据，因此对画面数据和音频数据进行打包，并将其从HDMI发送部件102输出到HMDI端子101。下面将详细描述HDMI发送部件102。

在以上述方式从盘播放器100向电视接收机200发送立体画面数据的情况下，在TMDS传输数据的活动视频时间段中除了分配立体画面数据的活动视频区域之外，还包括活动间隔区域。在实施例中，在视频信号处理电路107或HDMI发送部件102中，将与立体画面数据有关的附加信息分配到活动间隔区域。

下面将简要描述图2所图示的盘播放器100的操作。将BD/DVD驱动器104的再现数据提供到多路分配器105，并且分离为诸如视频和音频之类的基本流。将由多路分配器105分离的视频基本流提供到MPEG解码器106以便进行解码，由此获得未压缩的画面数据。此外，将由多路分配器105分离的音频基本流提供到音频解码器108以便进行解码，由此获得未压缩的音频数据。

经由视频信号处理电路107将在MPEG解码器106中获得的画面数据提供到HMDI发送部件102。此外，经由音频信号处理电路109将音频解码器108中获得的音频数据提供到HDMI发送部件102。然后，经由HDMI的TMDS信道从HDMI端子101向HDMI线缆发送画面数据和音频数据。

在MPEG解码器106中获得的画面数据是立体画面数据的情况下，视频信号处理电路107的3D画面产生部件对立体画面数据执行处理以进入与发送系统对应的状态，然后将立体画面数据提供到HDMI发送部件102。此外，在画面数据是立体画面数据的情况下，在视频信号处理电路107或HDMI发送部件102中，如果需要的话，将与立体画面数据有关的附加信息分配到活动视频时间段的活动间隔区域。

电视接收机的配置示例

图3图示了电视接收机200的配置示例。电视接收机200包括HDMI端子201和HDMI接收部件202。电视接收机200进一步包括天线端子204、数字调谐器205、多路分配器206、MPEG解码器207、视频信号处理电路208、图形产生电路209、面板驱动电路210和显示面板211。

电视接收机200进一步包括音频信号处理电路212、音频放大电路213、扬声器214、内部总线220、CPU 221、闪存ROM 222和DRAM 223。电视接收机200进一步包括因特网接口(Ethernet I/F)224、网络端子225、DTCP电路226、遥控接收部件227和遥控发射器228。

天线端子204是用于允许由接收天线(未图示)接收到的电视广播信号输入到其中的端子。数字调谐器205处理输入到天线端子204的电视广播信号以输出与用户选择的频道对应的预定传输流。多路分配器206从数字调谐器205中获得的传输流中提取与用户选择的频道对应的部分TS(传输流)(视频数据的TS分组、音频数据的TS分组)。

此外，多路分配器206从数字调谐器205中获得的传输流中提取PSI/SI(节目特定信息/服务信息)以将PSI/SI输出到CPU 221。在数字调谐器205中获得的传输流中，多个信道被多路复用。通过从PSI/SI(PAT/PMT)获得任意信道的分组ID(PID)的信息，允许在多路分配器206中从传输流提取任意信道的部分TS的处理。

MPEG解码器207对于由多路分配器206中获得的视频数据的TS分组构成的视频PES(打包的基本流)分组进行解码处理，以获得画面数据。此外，MPEG解码器207对于由多路分配器206中获得的音频数据的TS分组构成的音频PES分组进行解码处理，以获得音频数据。

HDMI接收部件(HDMI信宿)202通过基于HDMI的通信经由HDMI线缆300接收被提供到HDMI端子201的未压缩(基带)画面(视频)数据和音频数据。下面将详细描述HDMI接收部件202。

如果需要的话，视频信号处理电路208和图形产生电路209对于在MPEG解码器207或HDMI接收部件202中获得的画面数据执行缩放处理(分辨率转换处理)或图形数据叠加处理。此外，在由HMDI接收部件202接收到的画面数据是立体画面数据的情况下，视频信号处理电路208对于立体画面数据执行用于显示立体画面的必要处理。

在这种情况下，HDMI接收部件202或视频信号处理电路208从3D视频格式传输数据的活动视频区域中提取并获得立体画面数据(参照将在下面描述的图8和图9)。此外，在这种情况下，HDMI接收部件202或视频信号处理电路208从传输数据的活动间隔区域中提取并获得与立体画面数据有关的附加信息。HDMI接收部件202或视频信号处理电路208构成数据提取部件。

此外，在由HDMI接收部件202接收到的画面数据是立体画面数据的情况下，视频信号处理电路208基于与立体画面数据有关的附加信息执行诸如叠加字幕或OSD的处理或校正立体画面数据的处理之类的处理。

面板驱动电路210基于从图形产生电路209输出的视频(画面)数据驱动显示面板211。例如，显示面板211由LCD(液晶显示器)、PDP(等离子显示面板)等构成。

音频信号处理电路212对于在MPEG解码器207中获得的音频数据或由HDMI接收部件202接收到的音频数据执行必要的处理(如D/A转换)。音频放大电路213放大从音频信号处理电路212输出的音频信号，以将放大的音频信号提供到扬声器214。

CPU 221控制电视接收机200的每一个组件的操作。闪存ROM 222存储控制软件和数据。DRAM 223形成CPU 221的工作区域。CPU 221提取从闪存ROM 222读出到DRAM 223的软件或数据以激活软件，并控制电视接收机200的每一个组件。

遥控接收部件227接收从遥控发射器228发送的遥控信号(遥控码)，以将遥控信号提供到CPU 221。CPU 221响应于遥控码来控制电视接收机200的每一个组件。

网络端子225是连接到网络的端子，并且连接到以太网接口224。CPU221、闪存ROM 222、DRAM 223和以太网接口224连接到内部总线220。DTCP电路226对从网络端子225提供到以太网接口224的加密数据进行解码。

下面将简要描述图3中所图示的电视接收机200的操作。将输入到天线端子204的电视广播信号提供到数字调谐器205。数字调谐器205处理电视广播信号，输出与用户选择的频道对应的预定传输流，并将预定传输流提供到多路分配器206。在多路分配器206中，从传输流中提取与用户选择的频道对应的部分TS(视频数据的TS分组、音频数据的TS分组)，并将部分TS提供到MPEG解码器207。

MPEG解码器207对于由视频数据的TS分组构成的视频PES分组执行解码处理，以获得画面数据。如果需要的话，视频信号处理电路208和图形产生电路209对画面数据执行缩放处理(分辨率转换处理)、图形数据叠加处理等，然后将画面数据提供到面板驱动电路210。因此，在显示面板211上显示与用户选择的频道对应的画面。

此外，MPEG解码器207对于由音频数据的TS分组构成的音频PES分组执行解码处理，以获得音频数据。音频信号处理电路212对音频数据执行必要的处理(如D/A转换)，在音频放大电路213中放大音频数据，然后将音频数据提供到扬声器214。因此，从扬声器214输出与用户选择的频道对应的音频。

进一步，由DTCP电路226对于从网络端子225向以太网接口224提供的加密的内容数据(画面数据、音频数据)进行解码，然后将解码的内容数据提供到MPEG解码器207。从此之后，电视接收机200以与接收上述电视广播信号时相同的方式进行操作，并且在显示面板211上显示画面，并且从扬声器214输出音频。

HDMI接收部件202获得从经由HDMI线缆300连接到HDMI端子201的盘播放器100发送的画面数据和音频数据。将画面数据提供到视频信号处理电路208。将音频数据提供到音频信号处理电路212。从此之后，电视接收机200以与接收上述电视广播信号时相同的方式进行操作，并且在显示面板211上显示画面，并且从扬声器214输出音频。

在由HDMI接收部件202接收到的画面数据是立体画面数据的情况下，视频信号处理电路208基于与立体画面数据有关的附加信息执行诸如叠加字幕或OSD的处理或校正立体画面数据的处理之类的处理。此外，在这种情况下，视频信号处理电路208产生用于显示立体画面的画面数据。因此，在显示面板211上显示立体画面。

HDMI发送部件和HDMI接收部件的配置示例

图4图示了图1中的AV系统10中盘播放器100的HDMI发送部件(HDMI信源)102和电视接收机200的HDMI接收部件(HDMI信宿)的配置示例。

在有效画面时间段(在下文中适当地称为“活动视频时间段”)中，HDMI发送部件102经由多个信道在一个方向中向HDMI接收部件202发送与未压缩的一个屏幕画面的像素数据对应的差分信号。有效画面时间段是通过从一个垂直同步信号与接下来的垂直同步信号之间的时间段中减去水平消隐时间段和垂直消隐时间段而获得的时间段。此外，在水平消隐时间段或垂直消隐时间段中，HDMI发送部件102经由多个信道在一个方向中向HDMI接收部件202发送与伴随至少一画面的音频数据或控制数据、其他辅助数据等对应的差分信号。

由HDMI发送部件102和HDMI接收部件202构成的HDMI系统的传输信道包括如下传输信道，即：三个TMDS信道#0到#2，作为用于与像素时钟同步地在一个方向中串行地将像素数据和音频数据从HDMI发送部件102发送到HDMI接收部件202的传输信道。传输信道进一步包括TMDS时钟信道，作为用于发送像素时钟的传输信道。

HDMI发送部件102包括HDMI发送器81。例如，发送器81将未压缩画面的像素数据转换为对应的差分信号，并经由多个信道(即：三个TMDS信道#0、#1和#2)在一个方向中串行地将差分信号发送到经由HDMI线缆300连接的HDMI接收部件202。

此外，发送器81将伴随未压缩画面的音频数据以及必要的控制数据、其他辅助数据等转换为各个对应的差分信号，并经由三个TMDS信道#0、#1和#2在一个方向中串行地将差分信号发送到HDMI接收部件202。

进一步，发送器81经由TMDS时钟信道，与要通过三个TMDS信道#0、#1和#2发送的像素数据同步地将像素时钟发送到经由HDMI线缆300连接的HDMI接收部件202。经由每一个TMDS信道#i(i＝0，1，2)，在像素时钟的一个时钟期间，发送10位像素数据。

在活动视频时间段中，HDMI接收部件202经由多个信道接收来自HDMI发送部件102的、在一个方向中发送的与像素数据对应的差分信号。此外，在水平消隐时间段或垂直消隐时间段中，HDMI接收部件202经由多个信道接收来自HDMI发送部件102的、在一个方向中发送的与音频数据或控制数据对应的差分信号。

换言之，HDMI接收部件202包括HDMI接收器82。HDMI接收器82经由TMDS信道#0、#1和#2接收来自HDMI发送部件102的、在一个方向中发送的与像素数据对应的差分信号以及与音频数据或控制数据对应的差分信号。在这种情况下，HDMI接收器82与经由TMDS时钟信道从HDMI发送部件102发送的像素时钟同步地接收差分信号。

除了上述TMDS信道#0到#2和TMDS时钟信道之外，HDMI系统的传输信道还包括被称为DDC(显示数据信道)83和CEC线84的传输信道。DDC 83由HDMI线缆300中包括的两条信号线(未图示)构成。DDC 83用于HDMI发送部件102从HDMI接收部件202读出E-EDID(增强扩展显示标识数据)。

换言之，除了HDMI接收器82之外，HDMI接收部件202还包括EDIDROM(只读存储器)85，存储作为关于其性能(配置/性能)的性能信息的E-EDID。例如，HDMI发送部件102响应于来自CPU 121的请求，经由DDC83从经由HDMI线缆300与其连接的HDMI接收部件202读出E-EDID(参照图2)。HDMI发送部件102将读取的E-EDID发送到CPU 121。CPU 121将E-EDID存储到闪存ROM 122或DRAM 123中。

允许CPU 121基于E-EDID识别HDMI接收部件202的性能的设置。例如，CPU 121识别与包括HDMI接收部件202的电视接收机200兼容的画面数据的格式(分辨率、帧速、纵横比等)。在实施例中，例如，CPU 121基于与E-EDID中包括的附加信息有关的信息，识别包括HDMI接收部件202的电视接收机200是否具有有效地利用分配到活动间隔区域的附加信息的功能。

CEC线84由HDMI线缆300中包括的一条信号线(未图示)构成，并且用以执行用于HDMI发送部件102与HDMI接收部件202之间的控制的数据的双路通信。CEC线84组成控制数据线。

此外，HDMI线缆300包括连接到称为HPD(热插拔检测)的管脚的线(HPD线)86。允许信源装置通过利用线86检测信宿装置的连接。HDMI线缆300进一步包括用于从信源装置向信宿装置供电的线87。HDMI线缆300进一步包括保留线88。

图5图示了图4中的HMDI发送器81和HDMI接收器82的配置示例。

HDMI发送器81包括分别与三个TMDS信道#0、#1和#2对应的三个编码器/串行器81A、81B和81C。然后，每一个编码器/串行器81A、81B和81C编码向其提供的画面数据、辅助数据和控制数据，将它们从并行数据转换为串行数据，并以差分信号格式发送串行数据。在画面数据包括三个分量(即，例如，R(红)、G(绿)和B(蓝)分量)的情况下，将B分量、G分量和R分量分别提供到编码器/串行器81A、81B和81C。

此外，辅助数据的示例包括音频数据和控制分组，并且例如将控制分组提供到编码器/串行器81A，而将音频数据提供到编码器/串行器81B和81C。进一步，控制数据包括1位垂直同步信号(VSYNC)、1位水平同步信号(HSYNC)和1位控制位CTL0、CTL1、CTL2和CTL3。将垂直同步信号和水平同步信号提供到编码器/串行器81A。将控制位CTL0和CTL1提供到编码器/串行器81B，而将控制位CTL2和CTL3提供到编码器/串行器81C。

编码器/串行器81A以时分方式发送向其提供的画面数据的B分量、垂直同步信号和水平同步信号以及辅助数据。换言之，编码器/串行器81A将向其提供的画面数据的B分量转换为具有8位(其为固定位数)大小的并行数据。此外，编码器/串行器81A将该并行数据编码为串行数据，并经由TMDS信道#0发送串行数据。

编码器/串行器81A编码向其提供的每一个垂直同步信号和水平同步信号的2位并行数据，并将并行数据转换为串行数据，然后经由TMDS信道#0发送串行数据。编码器/串行器81A将向其提供的辅助数据转换为4位并行数据。然后，编码器/串行器81A编码该并行数据，并将并行数据转换为串行数据，然后经由TMDS信道#0发送串行数据。

编码器/串行器81B以时分方式发送向其提供的画面数据的G分量、控制位CTL0和CTL1以及辅助数据。换言之，编码器/串行器81B将向其提供的画面数据的G分量转换为具有8位(其为固定位数)大小的并行数据。此外，编码器/串行器81B编码该并行数据，并将并行数据转换为串行数据，并经由TMDS信道#1发送串行数据。

编码器/串行器81B编码向其提供的每一个控制位CTL0和CTL1的2位并行数据，并将该并行数据转换为串行数据，然后经由TMDS信道#1发送串行数据。编码器/串行器81B将向其提供的辅助数据转换为4位并行数据。然后，编码器/串行器81B编码该并行数据，并将并行数据转换为串行数据，然后经由TMDS信道#1发送串行数据。

编码器/串行器81C以时分方式发送向其提供的画面数据的R分量、控制位CTL2和CTL3以及辅助数据。换言之，编码器/串行器81C将向其提供的画面数据的R分量转换为具有8位(其为固定位数)大小的并行数据。此外，编码器/串行器81C编码该并行数据，并将并行数据转换为串行数据，并经由TMDS信道#2发送串行数据。

编码器/串行器81C编码向其提供的每一个控制位CTL2和CTL3的2位并行数据，并将该并行数据转换为串行数据，然后经由TMDS信道#2发送串行数据。编码器/串行器81C将向其提供的辅助数据转换为4位并行数据。然后，编码器/串行器81C编码该并行数据，并将并行数据转换为串行数据，然后经由TMDS信道#2发送串行数据。

HDMI接收器82包括分别与三个TMDS信道#0、#1和#2对应的三个恢复/解码器82A、82B和82C。然后，每一个恢复/解码器82A、82B和82C接收差分信号格式的、经由TMDS信道#0、#1和#2发送的画面数据、辅助数据和控制数据。每一个恢复/解码器82A、82B和82C将画面数据、辅助数据和控制数据从串行数据转换并行数据，对其进行解码，然后对其进行输出。

换言之，恢复/解码器82A接收差分信号格式的、经由TMDS信道#0发送的画面数据的B分量、垂直同步信号和水平同步信号以及辅助数据。然后，恢复/解码器82A将画面数据的B分量、垂直同步信号和水平同步信号以及辅助数据从串行数据转换为并行数据，并对其进行解码，然后对其进行输出。

恢复/解码器82B接收差分信号格式的、经由TMDS信道#1发送的画面数据的G分量、控制位CTL0和CTL1以及辅助数据。然后，恢复/解码器82B将画面数据的G分量、控制位CTL0和CTL1以及辅助数据从串行数据转换为并行数据，并对其进行解码，然后对其进行输出。

恢复/解码器82C接收差分信号格式的、经由TMDS信道#2发送的画面数据的R分量、控制位CTL2和CTL3以及辅助数据。然后，恢复/解码器82C将画面数据的R分量、控制位CTL2和CTL3以及辅助数据从串行数据转换为并行数据，并对其进行解码，然后对其进行输出。

图6图示了TMDS传输数据的配置示例。图6图示了在经由TMDS信道#0、#1和#2发送1920像素宽×1080行高的画面数据的情况下各种传输数据的时间段。

经由HDMI的三个TMDS信道#0、#1和#2发送传输数据的视频场根据传输数据的类型包括三种类型的时间段，即：视频数据时间段、数据片(dataisland)时间段和控制时间段。

视频场时间段是从垂直同步信号的活动沿到下一个垂直同步信号的活动沿的时间段。将视频场时间段划分为水平消隐时间段、垂直消隐时间段和活动视频时间段。活动视频时间段是通过从视频场时间段中减去水平消隐时间段和垂直消隐时间段而获得的时间段。

将视频数据时间段分配给活动视频时间段。在视频数据时间段中，发送组成未压缩的一个屏幕的画面数据的1920像素×1080行的活动像素数据。

将数据片时间段和控制时间段分配给水平消隐时间段和垂直消隐时间段。在数据片时间段和控制时间段中，发送辅助数据。换言之，将数据片时间段分配给部分水平消隐时间段和垂直消隐时间段的部分。在数据片时间段中，发送辅助数据中与控制无关的数据，例如音频数据分组等。

将控制时间段分配给水平消隐时间段和垂直消隐时间段的其他部分。在控制时间段中，发送辅助数据中与控制有关的数据，例如垂直同步信号和水平同步信号、控制分组等。

图7图示HDMI端子211和251的管脚排列的示例。图7中所示的管脚排列被称为类型A。

经由作为差分线的两条线发送作为TMDS信道#i的差分信号的TMDS数据#i+和TMDS数据#i-。两条线连接到分配了TMDS数据#i+的管脚(具有管脚编号1、4和7的管脚)和分配了TMDS数据#i-的管脚(具有管脚编号3、6和9的管脚)。

此外，发送作为用于控制的数据的CEC信号的CEC线84连接到具有管脚编号13的管脚，并且具有管脚编号14的管脚是保留管脚。进一步，发送SDA(串行数据)信号(如E-EDID)的线连接到具有管脚编号16的管脚。然后，作为在发送和接收SDA信号时用于同步的时钟信号的SCL(串行时钟)信号的线连接到具有管脚编号15的管脚。上述DDC 83由发送SDA信号的线和发送SCL信号的线构成。

如上所述，用于允许信源装置检测信宿装置的连接的HPD线86连接到具有管脚编号19的管脚。此外，如上所述，用于供电的线87连接到具有管脚编号18的管脚。

附加信息的详细描述

图8图示作为立体画面数据的TMDS传输数据配置之一的帧封包3D视频格式。3D视频格式是用于发送作为立体画面数据的逐行左眼(L)画面数据和逐行右眼(R)画面数据的格式。在3D视频格式中，作为左眼(L)画面数据和右眼(R)画面数据，发送1920×1080p像素格式或1080×720p格式的画面数据。

对于3D视频格式，产生具有视频场时间段的传输数据，所述视频场时间段包括由垂直同步信号分离的水平消隐时间段(Hblank)、垂直消隐时间段(Vblank)和活动视频时间段(Vactive)。在3D视频格式中，活动视频时间段(Vactive)包括两个活动视频区域(Active video)和活动视频区域之间的活动间隔区域(Active space)。

将逐行左眼(L)画面数据分配给具有行数Vact_video的第一活动视频区域，而将逐行右眼(R)画面数据分配给具有行数Vact_video的第二活动视频区域。此外，将分配给活动视频区域的、与左眼(L)画面数据和右眼(R)画面数据有关的附加信息分配给具有行数Vact_space的活动间隔区域。

这里，在1920×1080p像素格式的情况下，行数Vact_space是45行。此外，在1280×720p像素格式的情况下，行数Vact_space是30行。

图9图示作为立体画面数据的TMDS传输数据配置之一的隔行格式的帧封包3D视频格式。3D视频格式是用于发送作为立体画面数据的隔行左眼(L)画面数据和隔行右眼(R)画面数据的格式。在3D视频格式中，作为左眼(L)画面数据和右眼(R)画面数据，发送1920×1080i像素格式的画面数据。

通过3D视频格式，产生具有视频场时间段的传输数据，所述视频场时间段包括由垂直同步信号分离的水平消隐时间段(Hblank)、垂直消隐时间段(Vblank)和活动视频时间段(Vactive)。在3D视频格式中，活动视频时间段(Vactive)包括四个活动视频区域(Active video)及其之间的三个活动间隔区域(Active space)。

将奇数场中的左眼(L)画面数据分配给具有行数Vact_video的第一活动视频区域，而将奇数场中的右眼(R)画面数据分配给具有行数Vact_video的第二活动视频区域。此外，将偶数场中的左眼(L)画面数据分配给具有行数Vact_video的第三活动视频区域，而将偶数场中的右眼(R)画面数据分配给具有行数Vact_video的第四活动视频区域。

将与分配给活动视频区域的左眼(L)画面数据和右眼(R)画面数据有关的附加信息分配给分别具有行数Vact_space1、Vact_space2和Vact_space1的三个活动间隔区域。这里，在1920×1080i像素格式的情况下，行数Vact_space1是23行且Vact_space2是22行。

如图9中的3D视频格式的情况中那样，在包括多个活动间隔区域的情况下，允许这些活动间隔区域作为一个整体的区域使用。图10图示了活动间隔区域的整合。当整合多个活动间隔区域并以这种方式使用时，允许增大一帧中允许发送的附加信息的数据量。

图11A到11C每一个图示了在使用三个活动间隔区域的整合的情况下，每一个活动间隔区域的第一行中附加信息布局的示例。图11A图示了第一活动间隔区域(Active Space1)的第一行，并且行编号是#0。

作为三个TMDS信道中的每一个的数据、具有固定值“0x00”和“0xFF”的同步样式(sync pattern)分别被分配给行#0的两个像素位置#0和#1。然后，将组成作为三个TMDS信道中的每一个的数据的附加信息的8位数据X0、X1、...分别分配给行#0的像素位置#2和后面位置。

此外，图11B图示了第二活动间隔区域(Active Space2)的第一行，并且行编号为#V0。图11C图示了第三活动间隔区域(Active Space3)的第一行，并且行编号为#V0+V1。在这种情况下，第一活动间隔区域中的行数(Vact_space1)为“V0”，而第二活动间隔区域中的行数(Vact_space2)是“V1”。此外，水平方向中的像素数量是“H”。

图12是图示帧封包3D视频格式中活动间隔区域的每一帧的尺寸示例。该示例是通过假设在三个TMDS信道的每一个像素位置中发送8位数据的计算而获得的示例。在发送像素格式为1920×1080p的画面数据的3D传输格式(参照图8)中，活动间隔区域中的总行数Vact_space是45行。因此，活动间隔区域的每一帧的大小约为259KB。

在发送像素格式为1920×1080i的画面数据的3D传输格式(参照图9)中，活动间隔区域中的总行数Vact_space为68行。因此，活动间隔区域的每一帧的大小约为392KB。此外，在发送像素格式为1280×720p的画面数据的3D传输格式(参照图8)中，活动间隔区域中的总行数Vact_space为30行。因此，活动间隔区域的每一帧的大小约为115KB。

活动间隔区域中的数据存储方法

下面将描述活动间隔区域中的数据存储方法。在HDMI规范版本1.4中，必须以单色填充活动间隔区域。图13图示了在活动间隔区域未用于附加信息的传输的情况下三个TMDS信道的每一个像素位置中的数据。图13中的部分(a)图示第0行(Line#0)，而图13中的部分(b)图示第一或后面的行(Line#1或后面)。在这种情况下，将公共数据分配给所有像素位置，并且如HDMI规范版本1.4定义的那样，以单色填充活动间隔区域。另外，图13中的C0、C1和C2是任意常数。

图14图示了在活动间隔区域用于附加信息的传输的情况下三个TMDS信道的每一个像素位置中的数据。图14中的部分(a)图示第0行(Line#0)，而图14中的部分(b)图示第一行(Line#1)。在这种情况下，在第0行中的像素0(Pixel 0)和像素1(Pixel 1)的像素位置中提供具有固定值的同步样式。另外，在图中所示的示例中，像素0和1中提供的固定值分别是“0xA5”和“0x96”。此外，在第0行中的像素2(Pixel 2)和后面的像素的位置中提供组成作为三个TMDS信道中的每一个的数据的附加信息的8位数据X0、X1、X2、...。另外，“H”指示水平方向中的像素数量(Hactive)。

活动间隔区域中的数据存储方法(数据配置)

分配给活动间隔区域的附加信息包括信息数据和画面数据之一或二者。在这种情况下，信息数据由一个信息块或多个信息块构成。此外，画面数据由一个画面块或多个画面块构成。

图15图示了在附加信息包括信息数据和画面数据二者的情况下活动间隔区域中的数据布局。在这种情况下，在活动间隔区域中，以此顺序排列间隔、同步样式、信息区域首标、信息块1到N、画面数据首标、画面块1到N、结束样式和间隔。另外，根据发送侧的情况来安排第一间隔。此外，可以移除结束样式。

图16图示了在附加信息中仅包括信息数据的情况下活动间隔区域中的数据布局。在这种情况下，在活动间隔区域中，以此顺序排列间隔、同步样式、信息区域首标、信息块1到N、结束样式和间隔。根据发送侧的情况来安排第一间隔。

图17图示了在附加信息中仅包括画面数据的情况下活动间隔区域中的数据布局。在这种情况下，在活动间隔区域中，以此顺序排列间隔、同步样式、画面区域首标、画面块1到N、结束样式和间隔。根据发送侧的情况来安排第一间隔。此外，可以移除结束样式。

间隔具有任意数据大小，并且数据的类型是“画面数据”。间隔以单色填充。活动间隔区域的开头部分是根据发送侧的情况而定的间隔。另外，在如隔行格式的帧封包3D视频格式(参照图9)的情况那样，包括多个活动间隔区域的情况下，在具有活动间隔区域的公共数据长度的开头部分中排列各间隔。

通过利用InfoFrame从发送侧(HDMI信源装置)向接收侧(HDMI信宿装置)通知活动间隔区域的开头部分中间隔的数据长度。例如，如图18中所示那样扩展3D传输的HDMI Vendor Specific InfoFrame分组。另外，将HDMIVendor Specific InfoFrame分组分配给消隐时间段中的数据片时间段。

HDMI Vendor Specific InfoFrame由CEA-861-D定义，并且将不进行描述。这里，将描述扩展部分。将描述第五字节。指示是否将附加信息分配给活动间隔区域，即指示是否在活动间隔区域中发送附加信息的信息“3D_OptData_Present”被分配给第五字节的第三位。在第三位是“1”的情况下，“1”指示在活动间隔区域中不发送附加信息。

在第五字节的上述第三位是“1”的情况下，存在字段“OptDataFmt”和“OptData_SkipLines”。字段“OptDataFmt”指示要在活动间隔区域中发送的数据格式，例如，发送全范围数据还是有限范围数据。此外，字段“OptDataFmt”指示要在活动间隔区域中发送的数据类型等。字段“OptData_SkipLines”指示活动间隔区域中的开头N行是间隔。在不存在间隔的情况下，设置“0”。

在接收侧(HDMI信宿装置)，由HDMI Vendor Specific InfoFrame分组的上述信息“3D_OptData_Present”可识别是否将附加信息分配给活动间隔区域。此外，由字段“OptDataFmt”可识别数据格式等，并且由字段“OptData_SkipLines”可识别活动间隔区域的开头部分中间隔的存在或不存在以及间隔的数据大小。

同步样式的数据大小是固定长度(2个像素或更多)，并且同步样式的数据类型是“固定值”。例如，作为同步样式，定义诸如“0xA5”或“0x96”之类的固定值。在接收侧(HDMI信宿装置)，一旦发现同步样式，则从此时起读出作为有效数据的数据。

信息区域首标包括区域尺寸和内部块数的信息。信息区域首标的数据尺寸是固定长度，并且信息区域首标的数据类型是“信息数据”。图19图示了信息区域首标的配置示例。信息区域首标包括以此顺序的“同步样式”、“信息块数”和“数据长度”的数据。

“同步样式”的数据大小是2字节，并且“同步样式”的数据类型是“固定值”。“同步样式”指示信息区域的开始。“信息块数”的数据大小是1字节，并且“信息块数”的数据类型是“信息数据”。“信息块数”指示帧中包括的信息块的数量。“数据长度”的数据大小是2字节，并且“数据长度”的数据类型是“信息数据”。“数据长度”指示帧中包括的信息块的数据大小。例如，数据大小由像素数量表示。

等于信息块1到N的“信息块数”的值的数字跟随信息区域首标。每一个信息块具有任意的数据大小，并且数据类型是“信息数据”。图20图示了信息块的配置示例。信息块包括以此顺序的“数据ID”、“数据长度”、“有效载荷”和“CRC(循环冗余校验)”的数据。“数据ID”的数据大小是1字节，并且“数据ID”的数据类型是“固定值”。“数据ID”指示信息块中包括的数据类型。“数据长度”的数据大小是2字节，并且“数据长度”的数据类型是“信息数据”。“数据长度”指示信息块的数据的必要部分(有效载荷)的数据大小(像素数)。

“有效载荷”的数据大小是由“数据长度”表示的大小，并且“有效载荷”的数据类型是“信息数据”。“有效载荷”是信息块的数据的必要部分。“CRC”的数据大小是2字节，并且“CRC”的数据类型是“信息数据”。“CRC”是关于所有数据ID、数据长度和有效载荷的CRC的值。

画面区域首标包括区域大小和内部块数量的信息。信息区域首标的数据大小是固定长度，并且数据类型是“信息数据”。图21图示了画面区域首标的配置示例。画面区域首标包括以此顺序的“同步样式”、“画面块数”和“数据长度”的数据。

“同步样式”的数据大小是2字节，并且“同步样式”的数据类型是“固定值”。“同步样式”指示画面区域的开始。“画面块数”的数据大小是1字节，并且“画面块数”的数据类型是“信息数据”。“画面块数”指示帧中包括的画面块的数量。“数据长度”的数据大小是4字节，并且“数据长度”的数据类型是“信息数据”。“数据长度”指示帧中包括的画面块的数据大小。

等于画面块1到N的“画面块数”的值的数字跟随画面区域首标。每一个画面块具有任意的数据大小，并且每一个画面块的数据类型是“信息数据”。图22图示了画面块的配置示例。画面块包括以此顺序的“画面ID”、“水平像素数量”、“垂直像素数量”和“画面数据”的数据。

“画面ID”的数据大小是1字节，并且“画面ID”的数据类型是“固定值”。“画面ID”是指示画面格式的ID。例如，“0”指示画面格式与分配给活动视频区域的立体画面(3D画面)数据的画面格式相同。

“水平像素数量”的数据大小是2字节，并且“水平像素数量”的数据类型是“信息数据”。“水平像素数量”指示画面的水平方向中的像素数量。“垂直像素数量”的数据大小是2字节，并且“垂直像素数量”的数据类型是“信息数据”。“垂直像素数量”指示画面的垂直方向中的像素数量。“画面数据”的数据大小等于“水平像素数量”ד垂直像素数量”，并且“画面数据”的数据类型是“画面数据”。“画面数据”是画面数据的必要部分。

结束样式的数据大小是固定长度(2个像素或更多)，并且结束样式的数据类型是“固定值”。例如，作为结束样式，定义诸如“0xFE”之类的固定值。在接收侧(HDMI信宿装置)，通过寻找结束样式来识别数据的结束。在结尾安排画面数据的情况下，可以移除结束样式(参照图15和图17)。

每一个像素中的数据存储方法

下面将描述活动间隔区域中每一个像素中的数据存储方法。在HDMI规范中，如图23所示，定义了允许在视频数据中使用的色彩分量范围。

在YCbCr的有限范围中典型地输出诸如DVD(数字多功能盘)或BD(蓝光盘)之类的画面数据(视频数据)。在有限范围的情况下，不允许使用全部的8位范围(值0-255)。在有限范围的情况下，值的有效范围是“1到254”，因此0和255不允许使用。

在实施例中，如上所述，发送分配给活动间隔区域的信息数据。因此，通过如下方法中的任意一种来发送活动间隔区域中的数据。

方法1

方法1是在发送有限范围画面数据的情况下，不剪裁地按原样发送活动间隔区域的数据(附加信息)，并允许使用作为数据(附加信息)的值0和255的方法。

方法1-1

HMDI发送部件102(参照图2)具有色彩空间转换功能(如，将RGB色彩空间转换为YCbCr色彩空间，反之亦然)，或者在输出有限范围数据的情况下将具有0到255范围的像素值舍入(剪裁)到有限范围1到254中的像素值的功能。

在输出立体画面数据(参照图8和9)的情况下，如果需要的话，HDMI发送部件102对于活动视频区域中的画面数据执行色彩空间转换功能，或者将活动视频区域中的画面数据剪裁到有限范围中的值，然后发送画面数据。然而，色彩空间转换功能对于活动间隔区域中的数据(附加信息)是无效的，因此HDMI发送部件102不剪裁地按原样发送数据的值。

在这种情况下，在发送侧(HDMI信源装置)，例如，在图2中的盘播放器100的视频信号处理电路107中，3D视频产生部件分别渲染用于视频输出的帧存储器中的活动视频区域和活动间隔区域中的立体画面(3D画面)和数据。

当将用于视频输出的帧存储器的渲染的内容发送到HDMI发送部件102时(参照图58)，发送侧设置(指定)如下信息。

(a)待发送到HDMI的信号的视频格式(帧速、Vblank、Vactive、Hblank、Hactive、PixelClock(传输率))、活动视频区域的色彩空间、全范围/有限范围、位数(深色或不是深色)、活动视频区域和活动间隔区域的数量、每一个区域中开始和结束行的数量

(b)帧存储器上视频中的行数(Vactive、Hactive、Hblank)、色彩空间、位数

当HDMI发送部件102产生要发送到HDMI的信号时，在帧存储器上的色彩空间和待输出到HDMI的色彩空间彼此不等效的情况下，在指定的活动视频区域(立体画面数据：左眼和右眼画面数据)中，如指定的那样转换帧存储器上的每一点的像素值的色彩空间，以产生待输出到HDMI的数据。另一方面，在指定的活动间隔区域(附加信息)中，产生输出数据而不转换每一点的像素值(数据)。

此外，在指定有限范围格式作为输出格式的情况下，在指定的活动视频区域(立体画面数据)中，每一点的具有范围0到255的像素值被剪裁为具有范围1到254的像素值，并且产生要输出到HDMI的数据。另一方面，在指定的活动间隔区域(附加信息)中，产生输出数据而不剪裁每一点的像素值(数据)。

方法1-2

HDMI发送部件102(参照图2)具有输入作为不同数据的活动视频区域中待发送的立体画面数据和活动间隔区域中待发送的数据，并组合和输出它们的功能。此外，HDMI发送部件102具有将来自视频信号处理电路107的3D视频产生部件的立体画面数据(左眼画面数据和右眼画面数据)的具有0到255范围的像素值舍入(剪裁)到有限范围1到254的功能。

在发送侧(HDMI信源装置)，例如，在图2中的盘播放器100的视频信号处理电路107中，3D视频产生部件渲染活动视频区域中的立体画面(3D画面)。此外，CPU 121产生分配给活动间隔区域的数据(附加信息)并将其进行发送。

在输出立体画面数据(参照图8和9)的情况下，3D视频产生部件通过使用垂直同步信号(Vsync)作为触发将左眼画面数据发送到HDMI发送部件102。当3D视频产生部件完成左眼画面数据的发送时，3D视频产生部件通过使用HDMI发送部件102产生的伪垂直同步信号(Vsync)作为触发将右眼画面数据发送到HDMI发送部件102。

此外，CPU 121将与活动间隔区域对应的所产生的数据(附加信息)发送到HDMI发送部件102。HDMI发送部件102以此顺序发送经历了剪裁的左眼画面数据、未经历剪裁的数据(附加信息)，和经历了剪裁的右眼画面数据。

另外，当以这种方式发送数据时，在左眼画面数据、数据(附加信息)和右眼画面数据的区域彼此相邻没有间隔的情况下，难以调整视频信号处理电路107的3D视频产生部件和CPU 121、以及HDMI发送部件102之间的定时。在这种情况下，当如上所述在活动间隔区域的开头部分中安排间隔(参照图15、16和17)时，在数据区域之间插入间隔，并且易于调整上述定时。

方法2

方法2是在发送有限范围画面数据的情况下允许发送具有与画面数据的有效范围相同的有效范围的活动间隔区域中的数据的方法。

在方法2中，视频信号处理电路107的3D视频产生部件处理活动间隔区域中的像素值(8位数据)以预先将像素值剪裁到有限范围(1到254)。换言之，3D视频产生部件在每一个像素中发送7位0到6的数据，并且如图24所示，位7的值是作为位6的值的逻辑反转的反转值。由此，活动间隔区域中的每一个像素值(8位数据)是具有64(01000000)到191(10111111)范围的值，并且被限制到有限范围(1到254)。

在这种情况下，当在每一个像素中发送7位数据时，在每一个像素中存储共计21(7×3)位的数据，作为用于3个TMDS信道#0、#1和#2的数据。因此，例如，16位用于存储2字节的数据(附加信息)，并且使用其他5位作为奇偶校验位。图25图示了像素值的三个TMDS信道#0、#1和#2的位配置示例(8位数据)。

存储组成1字节数据的8位(A7到A0)和用于其的奇偶校验位(Ap)，作为三个信道#0、#1和#2的位6到4。此外，存储组成1字节数据的8位(B7到B0)和用于其的奇偶校验位(Bp)，作为三个信道#0、#1和#2的位3到1。进一步，存储作为位6的值的逻辑反转的反转值，作为三个信道#0、#1和#2的每一个的位7的值。存储用于位7到1的奇偶校验位(P)，作为三个信道#0、#1和#2的每一个的位0。

作为HDMI中的视频发送，可以使用深色模式。深色模式是允许每一个像素的值不作为8位数据而作为多位长度(如10位、12位或16位)的数据的发送的模式。在实施例中，下面将描述每一个像素中发送具有8位范围的数据。

在深色发送时，以与上述“方法2”中描述的相同的方式，可以将通过反转紧接于最高有效位的位的值而获得的值设置为最高有效位，并且可以以允许使用0到255的所有值的状态来发送像素值的低侧8位。在这种情况下，在发送侧(HDMI信源装置)产生数据的处理和在接收侧(HDMI信宿装置)读出数据的处理变得更容易。

纠错

活动间隔区域中使用的TMDS编码(8b/10b编码)典型地是用于画面的编码，且易受错误攻击。因此，对于分配给活动间隔区域的数据(附加信息)执行用于提高可靠性的纠错编码。这里，下面将描述允许在活动间隔区域中存储全范围数据(附加信息)的情况。在有限范围的情况下，必须通过另一种方法执行纠错。

已知的三倍模数冗余方法用于纠错编码。图26图示在使用三倍模数冗余方法的情况下发送侧的编码处理和接收侧的解码处理。Xn[i]指示第n字节中位i的数据。Xn0[i]指示信道#0的第n字节中位i的数据。Xn1[i]指示信道#1的第n字节中位i的数据。Xn2[i]指示信道#2的第n字节中位i的数据。

在这种情况下，在发送侧，如图27所示，提供公共数据，作为每像素三个信道#0、#1和#2的8位数据。在接收侧，从逐个位地比较每像素三个信道的8位数据，并且通过大多数决定位7到0的值，由此执行纠错。

电视接收机(信宿装置)中立体画面数据的校正

下面将描述电视接收机200中校正立体画面数据(3D画面数据)的处理。在立体画面显示的情况下，认为与二维画面(2D画面)显示的情况相比，更重要的是根据观看环境(屏幕尺寸、观看距离、周围亮度)或用户喜好来校正画面数据。

通过电视接收机200易于获得关于观看环境的信息，因此电视接收机200优选地执行根据观看环境校正立体画面数据的处理。此外，可以通过电视接收机200或盘播放器100执行根据用户喜好的立体画面数据的校正。然而，电视接收机200优选地执行根据用户喜好的校正，这是因为考虑到广播，当允许电视接收机200执行校正时，校正更多类型的内容。

在电视接收机200执行立体画面数据的诸如校正或画质增强之类的处理的情况下，当在盘播放器100中将诸如字幕、菜单或OSD之类的画面数据叠加在立体画面数据上，然后将立体画面数据发送到电视接收机200时，画面数据干扰立体画面数据的诸如校正或画质增强之类的处理。在这种情况下，菜单意味着诸如DVD或BD之类的盘中的菜单，而OSD是盘播放器的信息显示、菜单等。

图28示意性地图示这种情况下的数据流。将描述盘播放器100中的数据流。解码来自盘的视频流以获得立体画面数据(左眼画面数据和右眼画面数据)。此外，基于来自盘的字幕或菜单的信息执行渲染，以获得诸如字幕和菜单之类的画面数据。然后，立体画面数据和诸如字幕和菜单之类的画面数据彼此叠加，以产生叠加了诸如字幕或菜单之类的画面的立体画面数据，并且将立体画面数据发送到电视接收机200。下面将描述电视接收机200中的数据流。从盘播放器100接收叠加了诸如字幕或菜单之类的画面的立体画面数据。然后，基于立体画面数据显示叠加了诸如字幕或菜单之类的画面的立体画面。

在实施例中，与立体画面数据分离地，在活动间隔区域中将诸如字幕、菜单或OSD之类的画面信息发送到电视接收机200。然后，在电视接收机200中校正立体画面数据，然后在立体画面数据上叠加诸如字幕、菜单或OSD之类的画面数据。由此，立体画面数据的诸如校正或画质增强之类的处理质量的提高是可实现的。

图29图示了这种情况下的数据流。下面将描述盘播放器100中的数据流。解码来自盘的视频流以获得立体画面数据(左眼画面数据和右眼画面数据)。此外，基于来自盘的诸如字幕或菜单之类的信息执行渲染，以获得诸如字幕和菜单之类的画面数据。将立体画面数据分配给活动视频区域，并发送到电视接收机200。此外，将来自盘的诸如字幕或菜单之类的画面数据和用于画面校正的元数据分配给活动间隔区域，并发送到电视接收机200。

下面将描述电视接收机200中的数据流。从盘播放器100彼此分离地接收立体画面数据和诸如字幕或菜单之类的画面数据。此外，从盘播放器100接收用于画面校正的元数据。基于用于画面校正的元数据执行立体画面数据的校正。然后，经校正的立体画面数据与诸如字幕和菜单之类的画面数据彼此叠加，以产生叠加了诸如字幕或菜单之类的画面的立体画面数据。基于立体画面数据显示叠加了诸如字幕或菜单之类的画面的立体画面。

另外，如图29中的虚线所示，可以将来自盘的诸如字幕或菜单之类的信息分配给活动间隔区域，然后从盘播放器100发送到电视接收机200。在这种情况下，基于诸如字幕和菜单之类的信息在电视接收机200中执行渲染，以获得诸如字幕和菜单之类的画面数据，并且在经校正的立体画面数据上叠加该画面数据。

字幕信息的发送

通过使用活动间隔区域将包括如下信息的信息块从盘播放器100(信源装置)发送到电视接收机200(信宿装置)。由此，允许在电视接收机200上显示字幕、消息或字符串。

(a)字符串

(b)字符显示方向(左→右，右→左，上→下)

(c)显示区域：位置(坐标)、大小、背景颜色(可以指定透射率α)

(d)字符显示位置、字符对齐(水平对齐：左对齐/右对齐/中心对齐/等间距，垂直对齐：上对齐/中心对齐/下对齐，等)

(e)字符间距，换行宽度

(f)3D显示方法

·显示偏移：显示在水平方向中偏移了x个点的画面

·阴影

等等

(g)字符码类型

(h)字体类型

(i)字体大小

(j)字符装饰(粗体、斜体、下划线等)

(k)字符颜色(可以指定透射率α)

(l)字符框线的宽度和颜色(可以指定透射率α)

(m)背景纹理(texture)的使用

当使用背景纹理时：

·用作纹理的图像ID(在画面区域中发送的)

(n)字符纹理的使用

当使用字符纹理时：

·用作纹理的图像ID

(o)外部字符定义功能(分别以位图格式发送外部字符)

(p)显示时间

·继续显示的帧数

当发送下一字幕信息时消除先前字幕。

为了消除字幕，可以发送作为空字符串的字幕信息。

(q)动画(淡入、淡出、卷动等)

·可以在每一帧中发送字幕信息，或者在字幕显示开始时，可以发送显示时间和动画的信息。

在BD-ROM规范中，作为字幕数据记录格式，定义了两种类型(即，PG(表现图形)和TextST(文本字幕))。PG是记录作为画面数据的字幕数据的格式。TextST是记录作为文本或字体数据的字幕数据的格式。

在TextST格式的字幕数据中，在BD-ROM盘中存储如下字符显示信息。

·字符串

·显示区域：位置、大小、背景颜色

·字符显示位置(坐标、显示区域的宽度)、字符对齐(垂直对齐、水平对齐)、换行宽度

·字体类型、字符装饰、字体大小、字符颜色、字符框线的宽度和颜色

等等

当将包括TextST格式的字幕数据的信息块分配给传输数据的活动间隔区域时，允许盘播放器100将TextST格式的字幕数据经由HDMI发送到电视接收机200。电视接收机200从传输数据的活动间隔区域获得TextST格式的字幕数据，由此允许电视接收机200显示字幕。

另外，TextST格式的字幕数据包括与显示字幕的定时有关的信息。因此，盘播放器100在开始字幕显示的定时处开始字幕数据的发送，而在完成字幕显示的定时处通过指定显示时间或发送空字符串来完成字幕显示。

作为日本数字广播中叠加的字幕和字符的数据包括如下信息。

·字符串

·字符大小(字体大小)

·字符颜色、背景颜色

·下划线

·框线

·字样

·字体

·滚动

·外部字符

目前，日本数字广播还未准备用于3D。然而，在将来日本数字广播准备用于3D的情况下，当盘播放器100再现BD-RE盘上记录的数字数据时，叠加的字幕和字符的数据可以包括在该数据中。在这种情况下，通过将包括叠加的字幕和字符的数据的信息块分配给传输数据的活动间隔区域，来允许盘播放器100经由HDMI将叠加的字幕和字符的数据发送到电视接收机200。电视接收机200从传输数据的活动间隔区域中获得叠加的字幕和字符的数据以显示字幕。

以与发送上述字幕数据等的情况相同的方式，通过使用传输数据的活动间隔区域，可以将美国使用的闭路的字幕(closed caption)的数据从盘播放器100发送到电视接收机200。

当经由HDMI发送作为字幕信息的用于字幕显示的必要数据时，电视接收机200(信宿装置)产生字幕画面数据，并执行3D显示方法(显示偏移、阴影)的处理。然后，将字幕画面数据叠加在组成立体画面数据的左眼画面数据和右眼画面数据上以显示字幕。

例如，在电视接收机200(参照图3)的视频信号处理电路208、图形产生电路209等中执行上述字幕画面数据的产生、3D显示方法的处理、叠加处理等。

拍摄期间相机信息的发送

盘播放器100向电视接收机200发送拍摄期间的相机信息作为用于校正立体画面数据的元数据。必须发送具有帧精度的相机的方向、缩放等的信息。因此，通过将信息分配给提供立体画面数据以发送信息的平面的活动间隔区域，使得确保具有帧精度的传输。

例如，拍摄期间的相机信息包括：

·相机之间的距离

·L相机和R相机的方向

·L相机和R相机的视角

·L相机和R相机的透镜信息和对焦信息

等等

电视接收机200检测深度并校正立体画面数据(左眼画面数据和右眼画面数据)。电视接收机200的CPU 221基于左眼画面数据和右眼画面数据分析左眼画面和右眼画面，以提取特征点并检测左眼画面和右眼画面之间的相关性，由此估计深度信息。

此外，在估计深度信息之后，电视接收机200的CPU 221基于屏幕尺寸和观看距离(电视接收机200和观看者之间的距离)的信息来校正左眼画面数据和右眼画面数据。由此，允许电视接收机200显示具有校正视差的立体画面。

下面将描述检测深度以校正立体画面数据的处理流程。首先，CPU 221估计深度信息。CPU 221分析组成立体画面数据的左眼(L)画面数据和右眼(R)画面数据，以确定L画面和R画面之间的相关性。可以假设，在垂直方向中，用于显示立体画面而拍摄的L和R画面的相机的矢量彼此相等。

因此，如图30所示，关于水平方向中的行确定L和R画面之间的相关性。在这种情况下，通过使用亮度/颜色信息、经历诸如关于亮度/颜色的差分之类的滤波(边沿检测)的画面信息来确定相关性，由此确定画面的区域和点之间的水平偏差。

在L画面和R画面如图30所示的情况下，如图31所示，朝向圆柱物体的左右视线在屏幕表面的前方彼此交叉。因此，可感觉到在参考面(屏幕表面)的前方提供圆柱物体。在这种情况下，允许通过计算确定深度。此外，朝向长方体物体的左右视线在屏幕表面上彼此交叉。因此，可感觉到在参考面(屏幕表面)上提供长方体物体。

允许如图32中所示的表示画面的深度信息。在参考面的前方提供圆柱物体，并且在参考面上的位置中提供长方体物体。此外，可假设物体放置在L画面中的位置与R画面中的位置之间的中点。因此，允许估计深度信息。

当允许诸如双透镜相机的透镜之间的距离或透镜的角度之类的信息用作相机拍摄条件时，允许根据相机的位置和角度的信息以及各区域或各点之间的水平偏差的信息更精确地估计每一个区域或每一个点中的深度信息。

如图33所示，相机的方向由α表示，相机的视角(水平方向中)由β表示，并且相机之间的距离由d表示。如图34所示，画面宽度中的点数由W表示，并且画面的高度中的点数由H表示。

如图35所示，关于左眼(L)画面的位置(xl，yl)中显示的对象A，相机的方向(轴)与将该对象连接到相机的线之间的角度γ1由表达式(1)表示。

γ1＝sgn(xl-W/2)·atan((xl/W-1/2)·tan(β1/2))  ...(1)

因此，将对象A放置在由表达式(2)表示的直线上。

X＝tan(α1+γ1)·Z-d/2...(2)

此外，关于在右眼(R)画面(未图示)的位置(xr，yr)中显示的对象A，相机的方向(轴)与将对象连接到相机的线之间的角度γr由表达式(3)表示。

γr＝sgn(xr-W/2)·atan((xr/W-1/2)·tan(βr/2))...(3)

因此，将对象A放置在由表达式(4)表示的直线上。

X＝tan(-αr+γr)·Z+d/2...(4)

当求解表达式(2)和(4)时，按以下表达式(5)和(6)指示的那样，确定拍摄期间对象A的位置(Z，X)。

Z＝d/(tan(α1+γ1)-tan(-αr+γr))...(5)

X＝d·(tan(α1+γ1)+tan(-αr+γr))/(2·(tan(α1+γ1)-tan(-αr+γr))...(6)

当以这种方式确定左眼(L)画面和右眼(R)画面之间的相关性以确定每一个画面中对象的坐标时，允许计算拍摄期间对象的位置，并且允许计算拍摄期间的空间布置。因此，允许更加精确地估计每一区域和每一点的深度信息。

CPU 221在以上述方式估计对象的位置和深度信息(拍摄期间的空间布置)之后重新配置立体画面数据(左眼画面数据和右眼画面数据)，以便允许在用户的观看环境中通过3D深度更加合适地显示立体画面。在这种情况下，CPU 221使用屏幕尺寸(显示3D视频的屏幕的物理尺寸)和视距(电视接收机与观看者之间的距离)的信息。此外，在这种情况下，CPU 221在建模处理中设置通过估计确定的对象的位置和深度信息，然后执行视点/光源设置、渲染和视频输出的各个处理。

下面将简要描述立体画面数据(左眼画面数据和右眼画面数据)的重新配置的流程。在产生立体画面数据的情况下，如图36所示，通过在3D(三维)空间中的建模和2D(2维)屏幕上的投影，产生2D画面(左眼画面数据和右眼画面数据)。在图36中的建模示例中，长方体物体Oa和圆柱物体Ob放置在屏幕表面后面。在这种情况下，如图37所示，允许通过使用屏幕尺寸和观看距离作为参数产生具有正确视差的2D画面(左眼画面和右眼画面)。

图38中的流程图示意性地图示了CPU 221中立体画面数据的重新配置流程。首先，在步骤ST1，CPU 221执行初始化处理。在这种情况下，CPU 221执行各种初始化处理，包括各种库和存储器的初始化、VRAM(帧缓冲器)的设置、输出设置等。

接下来，在步骤ST2，CPU 221执行建模处理。在建模处理中，CPU 221执行要在每一个渲染帧中渲染的每一个顶点数据(vertex data)的计算。在这种情况下，构造每一个对象的模型。然后，在每一个对象的“模型坐标系(本地坐标系)”上计算待渲染的每一个顶点。然后，将待渲染的对象放置在“完全坐标系”空间中。换言之，将在“模型坐标系”上计算的待渲染的每一个对象的顶点数据放置在“完全坐标系”中。

接下来，在步骤ST3，CPU 221执行设置视点和光源的处理，并在步骤ST4执行渲染，由此产生左画面数据和右画面数据。在产生立体画面数据的情况下，视点设置很重要。在这种情况下，CPU 221执行视点和光源设置以及用于左眼画面的渲染以产生左眼画面数据，然后执行视点和光源设置以及用于右眼画面的渲染以产生右眼画面数据。

在设置视点和光源的处理中，设置视点的位置和方向。在放置待渲染的每一个对象的“完全坐标系”中，设置视点、注视点、向上矢量(其指定哪个方向是相机的向上方向以确定视点的位置)、相机的视角和相机的纵横比。在这种情况下，确定与左右眼之间的距离相等的距离处的左眼和右眼视点的坐标。将注视点指定为左眼和右眼注视点共同的点。将向上矢量指定为左眼和右眼共同的方向，以便水平地对齐左右眼。

作为相机的视角(观看角度)，指定根据电视接收机200的屏幕尺寸和观看距离确定的视角。在这种情况下，基于与从电视接收机200获得的屏幕尺寸有关的信息来确定作为屏幕尺寸的高度和宽度。作为观看距离，使用由用户设置的值或基于屏幕尺寸的推荐观看距离的值(例如，等于屏幕高度的2到3倍的值)。

在将垂直方向中的视角指定为相机视角的情况下，允许根据屏幕尺寸的高度和观看距离来确定实际可视环境中的视角。在将水平方向中的视角指定为相机视角的情况下，允许根据屏幕尺寸的宽度和观看距离来确定实际可视环境中的视角。作为相机的纵横比，指定待输出的画面的纵横比。例如，在以全HD(1920×1080 16∶9)格式输出画面的情况下，将纵横比指定为16∶9。

图39是用于描述计算相机的视角和纵横比的方法的参考图。在计算的方法中，可获得视角和纵横比的更精确的值。在这种情况下，通过表达式(7)确定视角1，并且通过表达式(8)确定视角2。然后通过表达式(9)确定视角作为通过将视角1和视角2相加而获得的值。

[视角1]＝atan(([屏幕尺寸]/2-[双眼之间的距离]/2)/[观看距离])...(7)

[视角2]＝atan(([屏幕尺寸]/2+[双眼之间的距离]/2)/[观看距离])...(8)

[视角]＝[视角1]+[视角2]

＝atan(([屏幕尺寸]/2-[双眼之间的距离]/2)/[观看距离])+atan(([屏幕尺寸]/2+[双眼之间的距离]/2)/[观看距离])...(9)

此外，在相机的指定纵横比是[宽度]/[长度]的情况下，通过表达式(10)确定纵横比(宽度/长度)。

[纵横比(宽度/长度)]＝cos([视角]/2-[视角1])*[输出视频的纵横比(宽度/长度)＝cos(atan(([屏幕尺寸]/2+[双眼之间的距离]/2)/[观看距离])-atan(([屏幕尺寸]/2-[双眼之间的距离]/2)/[观看距离]))*[输出视频的纵横比(宽度/长度))]...(10)

此外，在相机的指定纵横比是[高度]/[宽度]之比的情况下，纵横比(高度/宽度)是表达式(9)的倒数。

在渲染的处理中，执行纹理映射(texture mapping)、深度测试、α测试、蜡纸测试(stencil test)、混合、各种效果处理等。然后，在渲染的处理中，产生与待显示的最终画面对应的左眼画面数据和右眼画面数据以扩展(渲染)到VRAM(帧缓冲器)。

接下来，在步骤ST5，CPU 221读出扩展(渲染)到VRAM的左眼画面数据和右眼画面数据，即：经校正的左眼画面数据和右眼画面数据，并且例如将数据输出到视频信号处理电路208。

诸如菜单或OSD之类的画面信息的传输

通过使用活动间隔区域，将包括菜单或OSD的画面信息(压缩的画面数据)的信息块从盘播放器100(信源装置)发送到电视接收机200(信宿装置)。由此，允许电视接收机200显示菜单或OSD。在这种情况下，菜单意味着诸如DVD或BD之类的盘的菜单，并且OSD意味着盘播放器的信息显示、菜单等。画面信息是通过例如调色板、行程编码等压缩菜单或OSD的画面而获得的信息。

在这种情况下，除了菜单或OSD的上述画面信息(压缩的画面数据)之外，还从盘播放器100向电视接收机200发送诸如画面尺寸或显示位置之类的信息。下面将描述待发送的信息的示例。

(a)画面尺寸

(b)显示位置

(c)3D显示方法

·偏移

·变化L和R的调色板

·阴影

等

(d)透射率α

(e)显示时间

(f)动画(淡入、淡出、卷动等)

·可以在每一帧中发送字幕信息，或者可以在字幕显示开始时发送显示时间和动画的信息。

(g)画面信息(压缩的画面数据)

·调色板

·行程编码的画面数据

在BD-ROM规范中，作为菜单数据的记录格式，定义IG(交互图形)。此外，在BD-ROM规范中，作为字幕数据的记录格式，定义PG(表现图形)。在IG和PG中，通过使用调色板的行程编码来压缩画面数据。可以在一个屏幕中包括多个IG和PG。IG和PG对象可以在盘播放器100中临时渲染，并且可以通过调色板和行程编码来重新压缩以包括在如上所述的信息块中，然后可以发送该信息块。

可替代地，IG和PG对象中的每一个可以依次包括在信息块中，并且可以从盘播放器100向电视接收机200发送信息块，然后以电视接收机200中数据布置的顺序渲染对象。在这种情况下，当以电视接收机200中的数据布置的顺序渲染对象时，允许在电视接收机200中渲染全部IG和PG。

用于移动显示(shift display)的辅助画面的传输

作为易于调整电视接收机200中的立体画面(3D画面)中的深度感的方法，使用称为画面的移动显示的方法。通过在水平方向中将左眼(L)画面和右眼(R)画面的显示位置移动几个点，允许前向或后向地调整立体画面中的深度感。例如，当将左眼(L)画面和右眼(R)画面分别向左和向右移动时，后向地移动整个立体画面。此外，例如，当将左眼(L)画面和右眼(R)画面分别向右和向左移动时，前向地移动整个立体画面。

当移动每一个左眼(L)画面和右眼(R)画面的显示位置时，在与移动每一个画面的一侧相反一侧的边沿部分中的画面数据的情况下，在边沿部分中显示黑色，其中与移动量对应的宽度显示为黑色。例如，当如图40中的部分(a)中所示显示移动之前的左眼(L)画面和右眼(R)画面时，分别将左眼(L)画面和右眼(R)画面向左和向右移动。当立体画面突然出现得太向前时，增大了疲劳，且某些用户不喜欢观看突然出现得太向前的立体画面，因此执行画面移动以解决这种问题。然而，这样的画面移动引起画面数据的缺乏，因此如图40中的部分(b)中所示，在每一个画面的边沿部分中显示黑色。

通过使用活动间隔区域，从盘播放器100(信源装置)向电视接收机200(信宿装置)发送包括在上述画面移动期间显示黑色的部分的画面数据(辅助画面数据)的画面块。由此，通过在电视接收机200中使用画面移动中的辅助画面数据，允许在显示黑色的部分中显示有效画面，以防止黑色显示。

用于OSD显示的画面数据的传输

通过使用活动间隔区域，从盘播放器100(信源装置)向电视接收机200(信宿装置)发送包括用于OSD显示的画面数据的画面块。由此，允许在电视接收机200上显示OSD。在这种情况下，如图41所示，将分配给活动间隔区域的、用于OSD显示的画面数据写入被称为电视接收机200中包括的显像面的虚拟缓冲器。在电视接收机200中，例如，在视频信号处理电路208中包括的存储器(未图示)中配置缓冲器。

显像面具有与分配立体画面数据(3D画面数据)的活动视频区域相同的配置。电视接收机200可以具有多个显像面。然后，将每一个显像面划分为具有由3D视频格式(参照图8和图9)指示的属性的活动视频区域。准备用于活动间隔区域的画面数据必须符合活动视频区域的属性。属性包括L/R/深度/图形/图形-深度、奇/偶、YCC/RGB、4:2:2/4:4:4、深色、比色法等。

另外，作为分配给活动间隔区域的信息数据，提供画面描述符。画面描述符包括诸如活动间隔区域中画面数据的位置、画面尺寸、显像面编号和待写入画面数据的活动视频区域编号以及待写入画面数据的活动视频区域的位置之类的信息等。

在电视接收机200中，执行被写入给定显像面的、用于OSD显示的画面数据与下一帧的定时处发送的立体画面数据(传输视频)进行α-混合的操作，以显示叠加了OSD画面的立体画面。图42图示了α-混合操作。当使用多个显像面时，允许将附加信息中包括的不同类型的画面数据分别写入不同的显像面，并且允许有效地执行诸如更新之类的处理。例如，各种类型的画面数据包括运动画面的数据、静止画面的数据等。不需要更新每一帧中静止画面的数据，并且可能仅需要更新每一帧中运动画面的数据。

在α值为0的情况下，不显示显像面的画面，因此当对于未完成渲染的显像面将α值设置为0时，允许显示同步。此外，通过对于每一帧使用非零的α值，允许一致地显示需要高速显示的数据(如光标)。

图43图示了在信息块的有效载荷中存储的信息的配置示例(参照图20)。

在第0字节的第六到第四位中提供指示显像面数量的值NP(显像面编号)-1。显像面的数量是1或更多。此外，向第一到第NP字节中的每一个提供每一个显像面的α值(显像面的α混合值)。此外，在第NP+1到第NP+2字节中提供指示画面描述符的数量的2字节信息(画面描述符计数)。另外，“H”指示高位侧，而“L”指示低位侧。对于下面的信息也是如此。

在第NP+3和后面的字节中提供具有12字节固定长度的上述数量的画面描述符。在每一个画面描述符中，写入用于操纵画面块中存储的数据以将数据渲染到显像面所需的信息。

图44图示了画面描述符(12字节)的配置示例。第0字节的三位(即，第七到第五位)是指示操作的操作字段。此外，第0字节的5位(即，第四到第零位)是指示操作所需参数的操作数字段。

进一步，在第一字节和第二字节中提供指示活动间隔区域中画面数据的位置的2字节指针信息(画面缓冲器指针)(参照图45)。例如，指针信息指示通过从活动间隔区域的开始到包括画面数据的画面块的开始的像素数中减去1而获得的值。另外，这里的活动间隔区域意味着在包括多个活动间隔区域的3D视频格式的情况下的组合的活动间隔区域(参照图9和图10)。

此外，在第三字节和第四字节中提供指示矩形画面的宽度(像素数)的2字节信息(画面宽度)(参照图45)。在第五字节和第六字节中提供指示矩形画面的高度(像素数)的2字节信息(画面高度)(参照图45)。

进一步，在第七字节的第六到第四位中提供指示要写入画面数据的显像面编号的3位信息(显像面#)。在第七字节的第二到第零位中提供指示要写入画面数据的活动视频区域编号的3位信息(活动视频区域#)。另外，在垂直消隐时间段之后从0分配活动视频区域编号。

在第八字节和第九字节中提供指示要写入矩形画面的活动视频区域中的水平位置的2字节信息(活动视频水平位置)。当将活动视频区域的左上定义为原点时，该信息指示矩形画面的水平左上位置(参照图45)。在第10字节和第11字节中提供要写入矩形画面的活动视频区域中的垂直位置的2字节信息(活动视频垂直位置)。当将活动视频区域的左上定义为原点时，该信息指示矩形画面的垂直左上位置(参照图45)。

图46图示了画面描述符的操作字段(3位)指示的操作列表。在操作字段是“0x0”的情况下，“0x0”指示操作“NOP”。在该操作中，不执行操作。此外，在操作字段是“0x1”的情况下，“0x1”指示操作“Clear Picture Plane(清除显像面)”。在该操作中，清除平面。

在操作字段是“0x2”的情况下，“0x2”指示操作“Clear Active Video Area(清除活动视频区域)”。在该操作中，清除活动视频区域。在操作字段是“0x3”的情况下，“0x3”指示操作“Put Picture Horizontally N+1(水平地放置画面N+1)”。在该操作中，在水平方向中对齐N个画面。在这种情况下，在画面描述符的操作数字段(3位)中，提供“N”作为操作必须的参数。

在操作字段是“0x4”的情况下，“0x4”指示操作“Put Picture VerticallyN+1(垂直地放置画面N+1)”。在该操作中，在垂直方向中对齐N个画面。在这种情况下，在画面描述符的操作数字段(3位)中，提供“N”作为操作必须的参数。在操作字段是“0x5”的情况下，“0x5”指示操作“Put PictureMagnification N+1(放大地放置画面N+1)”。在该操作中，将画面放大N倍。在这种情况下，在画面描述符的操作字段(3位)中，提供“N”作为操作必须的参数。

图47图示了在执行操作“NOP”的情况下画面描述符的配置示例。操作字段是“0x0”。在该操作中，在其他字段中不提供信息。

图48图示了在执行操作“Clear Picture Plane”的情况下画面描述符的配置示例。操作字段是“0x1”。此外，在第七字节的第六到第四位中提供指示待清除的显像面编号的3位信息(显像面#)，但是在其他字段中不提供信息。在这种情况下，在发送侧(电视接收机200)，基于该信息(显像面#)识别待清除的显像面编号，并且清除显像面中包括的活动视频区域中的所有画面数据。

图49图示了在执行操作“Clear Active Video Area”的情况下画面描述符的配置示例。操作字段是“0x2”。此外，在第七字节的第六到第四位中提供指示包括待清除的活动视频区域的显像面编号的3位信息(显像面#)。进一步，在第七字节的第二到第零位中提供指示待清除的活动视频区域的编号的3位信息(活动视频区域#)。在其他字段中不提供信息。

在这种情况下，在接收侧(电视接收机200)，基于信息(显像面#)识别包括待清除的活动视频区域的显像面编号。然后，在接收侧(电视接收机200)，基于信息(活动视频区域#)识别待清除的活动视频区域的编号，并且清除活动视频区域中的画面数据。

图50图示了在执行操作“Put Picture Horizontally N+1”的情况下画面描述符的配置示例。操作字段是“0x3”，并且向操作数字段提供作为参数的“N”。此外，在第七字节的第六到第四位中提供指示包括待写入画面数据的活动视频区域的显像面的编号的3位信息(显像面#)。在第七字节的第二到第零位中提供指示待写入画面数据的活动视频区域的编号的3位信息(活动视频区域#)。在这种情况下，其他字段的信息是必须的，因此在每一个字段中提供信息。

图51图示了通过执行图50中所示的操作“Put Picture Horizontally N+1”的画面描述符的操作示例。该示例是N＝1情况下的示例。在这种情况下，在接收侧(电视接收机200)，基于2字节指针信息(画面缓冲器指针)从活动间隔区域读出矩形画面的画面数据。然后，在接收侧，将矩形画面的画面数据写入指定显像面的指定活动视频区域。

在这种情况下，在接收侧(电视接收机200)，识别矩形画面的尺寸和要在活动视频区域中写入矩形画面的画面数据的矩形区域的左上位置。基于指示矩形画面的宽度的2字节信息(Picture Width)和指示矩形画面的高度的2字节信息(Picture Height)来识别矩形画面的尺寸。基于指示水平位置(ActiveVideo Horizontal Position)的2字节信息和指示垂直位置(Active Video VerticalPosition)的2字节信息识别矩形区域的左上位置。

在N＝0的情况下，仅将矩形画面的一个画面数据写入活动视频区域，但是如上所述，在N＝1的情况下，在水平方向中对齐和写入另一相同的画面数据。换言之，在N＝1的情况下，在水平方向中对齐和写入矩形画面的两个画面数据。另外，在这种情况下，在写入画面数据的位置处于活动视频区域之外的情况下，在活动视频区域中剪裁画面数据。

图52图示了在执行操作“Put Picture Vertically N+1”的情况下画面描述符的配置示例。操作字段是“0x4”，并且提供“N”作为操作数字段的参数。此外，向第七字节的第六到第四位提供指示包括要写入画面数据的活动视频区域的显像面的编号的3位信息(显像面#)。此外，向第七字节的第二到第零位提供指示要写入画面数据的活动视频区域的编号的3位信息(活动视频区域#)。在这种情况下，其他字段的信息是必要的，因此在每一个字段中提供信息。

图53图示了图52中所示的、执行操作“Put Picture Vertically N+1”的画面描述符的操作示例。该示例是N＝2的情况下的示例。在这种情况下，在接收侧(电视接收机200)，基于2字节指针信息(画面缓冲器指针)从活动间隔区域中读出矩形画面的画面数据。然后，在接收侧，将矩形画面的画面数据写入指定显像面的指定活动视频区域。

在这种情况下，在接收侧(电视接收机200)，识别矩形画面的尺寸和要在活动视频区域中写入矩形画面的画面数据的矩形区域的左上位置。基于指示矩形画面的宽度的2字节信息(Picture Width)和指示矩形画面的高度的2字节信息(Picture Height)来识别矩形画面的尺寸。基于指示水平位置(ActiveVideo Horizontal Position)的2字节信息和指示垂直位置(Active Video VerticalPosition)的2字节信息识别矩形区域的左上位置。

在N＝0的情况下，仅将矩形画面的一个画面数据写入活动视频区域，但是如上所述，在N＝2的情况下，在垂直方向中对齐和写入另两个相同的画面数据。换言之，在N＝2的情况下，在垂直方向中对齐和写入3个矩形画面的画面数据。另外，在这种情况下，在写入画面数据的位置处于活动视频区域之外的情况下，在活动视频区域中剪裁画面数据。

图54图示了在执行操作“Put Picture Magnification N+1”的情况下画面描述符的配置示例。操作字段是“0x5”，并且提供“N”作为操作数字段的参数。此外，向第七字节的第六到第四位提供指示包括要写入画面数据的活动视频区域的显像面的编号的3位信息(显像面#)。进一步，向第七字节的第二到第零位提供指示要写入画面数据的活动视频区域的编号的3位信息(活动视频区域#)。在这种情况下，其他字段的信息是必要的，因此在每一个字段中提供信息。

图55图示了图54中所示的、执行操作“Put Picture Magnification N+1”的画面描述符的操作示例。该示例是N＝1的情况下的示例。在这种情况下，在接收侧(电视接收机200)，基于2字节指针信息(画面缓冲器指针)从活动间隔区域中读出矩形画面的画面数据。然后，在接收侧，将矩形画面的画面数据写入指定显像面的指定活动视频区域。

在这种情况下，在接收侧(电视接收机200)，识别矩形画面的尺寸和要在活动视频区域中写入矩形画面的画面数据的矩形区域的左上位置。基于指示矩形画面的宽度的2字节信息(Picture Width)和指示矩形画面的高度的2字节信息(Picture Height)来识别矩形画面的尺寸。基于指示水平位置(ActiveVideo Horizontal Position)的2字节信息和指示垂直位置(Active Video VerticalPosition)的2字节信息识别矩形区域的左上位置。

在N＝0的情况下，在相同的放大率之下，向活动视频区域中与矩形画面对应的区域写入矩形画面的画面数据。然而，如上所述，在N＝1的情况下，通过缩放处理，在水平方向和垂直方向中将矩形画面的画面数据的像素数量放大两倍。然后，将该画面数据写入在活动视频区域中的水平方向和垂直方向中放大了两倍的区域。在这种情况下，在写入画面数据的位置处于活动视频区域之外的情况下，在活动视频区域中剪裁画面数据。

EDID

如上所述，作为HDMI信源装置的盘播放器100的CPU 121识别电视接收机200是否具有有效地利用分配给活动间隔区域的附加信息的功能。CPU121基于与E-EDID(参照图4)中包括的附加信息有关的信息来对此进行识别。

图56图示了E-EDID的数据配置示例。E-EDID由基本块和扩展块构成。由“E-EDID 1.3基本结构”表示且由E-EDID 1.3规范定义的数据在基本块的开头部分中提供。在基本块中，在该数据之后，提供由用于保持与现有技术中的EDID的兼容性的“优选定时”表示的定时信息以及由“第2定时”(其与用于保持与现有技术中的EDID的兼容性的“优选定时”不同)表示的定时信息。

并且，在基本块中，在“第2定时”之后，提供由“Monitor Name(监视器名称)”表示且指示显示器的名称的信息以及由“Monitor Range Limits(监视器范围限制)”表示且指示允许以4∶3和16∶9的纵横比显示的像素数量的信息。

在扩展块的开头部分中，提供由“Short Video Descriptor(短视频描述符)”表示的信息。该信息指示允许显示的画面尺寸(分辨率)、帧速以及视频数据为隔行还是逐行。在“Short Video Descriptor”之后，提供由“Short AudioDescriptor(短音频描述符)”表示的信息。该信息“Short Audio Descriptor”是诸如可再现音频编解码系统、采样频率、截止带宽、编解码位数之类的信息。然后，接下来提供由“Speaker Allocation(扬声器分配)”表示的、与左右扬声器有关的信息。

此外，在扩展块中，在“Speaker Allocation”之后，提供由“Vender Specific(厂商特定)”表示且对于每一个制造商唯一定义的数据。在扩展块中，接下来提供由用于保持与现有技术中的EDID的兼容性的“第3定时”表示的定时信息以及用于保持与现有技术中的EDID的兼容性的“第4定时”表示的定时信息。

图57图示了Vender Specific区域(HDMI Vendor Specific Data Block(HDMI厂商特定数据块))的数据配置示例。在Vender Specific区域中，提供作为一个字节的各块的第0到第N块。

在第0块中，提供由“Vendor-Specific标签码(＝3)”表示且指示数据“Vendor Specific”的数据区域的首标。此外，在第0块中，提供由“length(＝N)”表示且指示数据“Vendor Specific”的长度的信息。

在第一块到第三块中，提供由“24-bit IEEE Registration Identifier(0x000C03)LSB First”表示且指示对于HDMI(R)登记的数字“0x000C03”的信息。此外，在第四块和第五块中，分别提供由“A”、“B”、“C”和“D”表示且指示24位信宿装置的物理地址的信息片段。

在第六块中，提供由“Supports_AI”表示且指示信宿装置支持的功能的标志。此外，在第六块中，分别提供由“DC_48位”、“DC_36位”和“DC_30位”表示且指定每像素位数的信息片段。进一步，在第六块中，提供由“DC_Y444”表示且指示信宿装置是否支持YCbCr 4:4:4的画面传输的标志以及由“DVI_Dual”表示且指示信宿装置是否支持双DVI(数字可视接口)的标志。

此外，在第七块中，提供由“Max_TMDS_Clock”表示且指示TMDS的像素时钟的最大频率的信息。进一步，在第八块的第六位和第七位中，提供由“Latency”表示且指示视频和音频的延迟信息的存在或不存在的标志。

在第九块中，提供由“Video Latency(视频等待时间)”表示的逐行视频的延迟时间数据，并且在第十块中，提供伴随逐行视频的音频的延迟时间数据(由“Audio Latency(音频等待时间)”表示)。此外，在第十一块中，提供由“Interlaced Video Latency(隔行视频等待时间)”表示的隔行视频的延迟时间数据。在第十二块中，提供伴随隔行视频的音频的延迟时间数据(由“Interlaced Audio Latency(隔行音频等待时间)”表示)。

例如，在实施例中，在第八块的第五位中，提供表示有效地利用分配给活动间隔区域的信息的功能的存在或不存在的标志(OptData_FLG)。例如，在该标志为“1”的情况下，“1”指示有效地利用分配给活动间隔区域的信息的功能的存在。

此外，在第n块的第五位和第四位中，提供指示关于分配给活动间隔区域的数据的纠错编码的性能的2位信息(Coding1、Coding2)。例如，在2位信息是“0x0”的情况下，该信息对应于“不纠错”，而在2位信息是“0x1”的情况下，该信息对应于“三倍模数冗余方法”。

进一步，在第n块的第1位和第0位中，提供指示活动间隔区域的使用性能的2位信息(Type1、Type2)。例如，在2位信息是“0x0”的情况下，该信息对应于“作为画面数据区域使用”，而在2位信息是“0x1”的情况下，该信息对应于“作为3D语言(例如，X3D)描述区域使用”。在第n+1块的第2到第0位中，提供指示可用显像面的编号的2位信息(Number of PicturePlane(显像面编号))。

允许盘播放器100的CPU 121基于上述E-EDID中包括的标志(OptData_FLG)识别电视接收机200是否具有有效地利用分配给活动间隔区域的附加信息的功能。然后，在该标志指示电视接收机200具有该功能的情况下，盘播放器100的CPU 121将附加信息分配给活动间隔区域，并将附加信息分配给电视接收机200。由此，尽管电视接收机200不具有有效地利用分配给活动间隔区域的附加信息的功能，但是允许盘播放器100去除将附加信息分配给活动间隔区域并将附加信息发送到电视接收机200的不必要处理。此外，允许盘播放器100基于与E-EDID中包括的附加信息有关的信息(Coding、Type、Number of Picture Plane)，将要发送到电视接收机200的附加信息控制到合适的状态。

如上所述，在图1所示的AV系统中10，通过使用除了活动视频时间段中的活动视频区域之外还包括活动间隔区域的3D视频格式来发送立体画面数据(3D画面数据)。在这种情况下，将与分配给活动视频区域的立体画面数据有关的附加信息分配给活动间隔区域，并且与立体画面数据一起发送。因此，允许有效地使用活动间隔区域。

此外，在图1所示的AV系统10中，通过使用3D视频格式的活动视频时间段中包括的活动间隔区域来发送与立体画面数据有关的附加信息。因此，与通过HDMI规范定义的InfoFrame的传输相比，允许发送具有与附加信息相比相对大尺寸的信息，并且允许与具有帧精度的立体画面数据同步地发送附加信息。

进一步，在图1所示的AV系统10中，通过使用3D视频格式的活动视频时间段中包括的活动间隔区域来发送与立体画面数据有关的附加信息。因此，允许向活动间隔区域分配与在基于向活动视频区域分配的立体画面数据的画面上叠加和显示的画面有关的字幕或信息的数据，然后将其发送。

因此，在电视接收机200中执行诸如3D画面数据的校正或画质增强之类的处理之后，允许叠加字幕、菜单画面等，由此这种处理的质量改进是可实现的。另外，在上述实施例中，仅描述了3D画面数据的校正。此外，允许基于未叠加诸如字幕或菜单画面之类的画面数据的画面数据执行诸如对比度校正或彩色校正之类的画质增强处理，并且处理质量的改进是可实现的。

此外，在图1所示的AV系统10中，如上所述，允许从信源装置(盘播放器100)向信宿装置(电视接收机200)分离地发送立体画面数据和与画面有关的字幕和信息的数据。因此，AV系统10适用于允许电视接收机200开启/关闭显示的应用。期望AV系统10用于3D闭路字幕的显示、信源装置的控制屏幕、3D广告、频道显示、报警消息、不同服务(新闻种子，如RSS)等。

2.修改

在上述实施例中，描述了立体画面数据的TMDS传输数据配置是帧封包3D视频格式的情况。本发明可应用于立体画面数据的TMDS传输数据配置是任何其他3D视频格式(以相同的方式在活动视频时间段中包括活动视频区域和活动间隔区域)的情况。例如，本发明不仅可应用于立体画面数据的TMDS传输数据配置是包括左眼画面数据和右眼画面数据作为立体画面数据的3D视频格式的情况，还可应用于立体画面数据的TMDS传输数据配置是包括二维画面数据和与每一个像素对应的深度信息作为立体画面数据的3D视频格式的情况。

此外，在上述实施例中，描述了将基于分配给活动视频区域的画面数据的画面上叠加和显示的画面的数据分配给活动间隔区域的情况。然而，活动间隔区域的数据尺寸不是很大。因此，可以将一个画面的画面数据分离为多个帧的活动间隔区域，然后将其发送。可替代地，在活动间隔区域中，发送帧编号，并且经由与TMDS线路不同的传输路径(如以太网)发送与帧编号对应的画面数据，由此可以发送具有更大尺寸的画面数据。

进一步，在上述实施例中，作为示例，描述了包括盘播放器100作为HDMI信源装置和电视接收机200作为HDMI信宿装置的AV系统10。然而，HDMI信源装置和HDMI信宿装置不限于此。例如，作为信源装置，除了盘播放器100之外，还可以使用DVD记录器、机顶盒、游戏机或任何其他AV源。此外，作为信宿装置，除了电视接收机200之外，还可以使用投影仪、PC监视器或任何其他显示器。

在上述实施例中，在进行如下假设的情况下给出了描述：使用遵从HDMI的接口作为传输路径连接装置，但是本发明可应用于任何其他类似的传输规范。此外，在上述实施例中，描述了经由HDMI线缆连接各装置的情况，但是本发明可以相同的方式应用于各电子装置彼此无线地连接的情况。

工业实用性

本发明可应用于通过使用在活动视频时间段中包括活动视频区域和活动间隔区域的3D视频格式来发送立体画面数据(3D画面数据)的AV系统等。

本申请包含与2009年9月30日向日本专利局提交的日本优先权专利申请JP 2009-226538中公开的主题有关的主题，将其全部内容通过引用的方式合并在此。

本领域的技术人员应当理解，根据设计要求和其他因素可以出现各种修改、组合、子组合和变更，只要它们落在权利要求书及其等效物的范围内即可。

Claims (29)

1.一种发送器，包括：

传输数据产生部件，产生具有视频场时间段格式的传输数据，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括主视频区域和辅助视频区域；以及

传输数据发送部件，以差分信号格式将所述传输数据产生部件中产生的传输数据经由传输路径和经由多个信道发送到外部装置，

其中所述传输数据产生部件将画面数据分配给所述主视频区域，而将与分配给所述主视频区域的画面数据有关的附加信息分配给辅助视频区域。

2.根据权利要求1所述的发送器，进一步包括信息获取部件，经由所述传输路径从所述外部装置获取信息，所述信息与要分配给所述辅助视频区域的附加信息有关，

其中所述传输数据产生部件基于由所述信息获取部件获得的信息，将所述附加信息分配给所述辅助视频区域。

3.根据权利要求2所述的发送器，其中

通过所述信息获取部件获得的、与附加信息有关的信息表示有效利用所述附加信息的功能的存在或不存在，以及

在通过所述信息获取部件获得的信息指示有效利用所述附加信息的功能存在的情况下，所述传输数据产生部件将所述附加信息分配给所述辅助视频区域。

4.根据权利要求2所述的发送器，其中

所述外部装置具有存储器部件，以及

所述信息获取部件从所述外部装置中的存储器部件读出并获得与所述附加信息有关的信息。

5.根据权利要求1所述的发送器，其中

所述画面数据是用于显示立体画面的立体画面数据。

6.根据权利要求5所述的发送器，其中

所述立体画面数据包括左眼画面数据和右眼画面数据。

7.根据权利要求5所述的发送器，其中

所述立体画面数据包括二维画面数据和与每一个像素对应的深度信息。

8.根据权利要求1所述的发送器，进一步包括信息发送部件，经由所述传输路径将信息发送到所述外部装置，所述信息与所述附加信息有关。

9.根据权利要求8所述的发送器，其中

与所述附加信息有关的信息表示是否将附加信息分配给所述辅助视频区域。

10.根据权利要求8所述的发送器，其中

与所述附加信息有关的信息表示分配给所述辅助视频区域的附加信息的数据格式。

11.根据权利要求8所述的发送器，其中

与所述附加信息有关的信息表示在所述辅助视频区域的开头部分中提供的间隔的长度。

12.根据权利要求8所述的发送器，其中

所述信息发送部件通过将与所述附加信息有关的信息插入到所述传输数据的消隐时间段，经由所述传输路径将所述信息发送到所述外部装置。

13.根据权利要求1所述的发送器，其中

在分配给所述辅助视频区域的所述附加信息的开头部分中提供具有固定值的同步样式。

14.根据权利要求13所述的发送器，其中

分配给所述辅助视频区域的所述附加信息包括信息数据和第二画面数据中之一或两者。

15.根据权利要求1所述的发送器，其中

所述主视频区域中的数据和所述辅助视频区域中的数据中每一个包括每像素三个信道的8位数据，以及

所述传输数据发送部件对于所述主视频区域中的数据执行色彩空间转换或剪裁，然后发送结果，而在不执行色彩空间转换或剪裁的情况下发送所述辅助视频区域中的数据。

16.根据权利要求15所述的发送器，其中

一旦从所述传输数据产生部件提供传输数据，则所述传输数据发送部件指定画面区域和所述辅助视频区域，指定在传输数据产生部件中产生的传输数据的主画面区域中和要输出到所述传输路径的视频数据的主画面区域中采用的色彩空间类型，并指定输出到所述传输路径的主画面区域中的视频数据为全范围数据还是受限制的范围数据，并由此按所指定的对主画面区域中的视频数据执行色彩空间转换和有限范围检查/转换处理，然后输出结果，而在不执行色彩空间转换以及有限范围检查/转换处理的情况下输出辅助视频数据。

17.根据权利要求1所述的发送器，其中

所述主视频区域中的数据和所述辅助视频区域中的数据每一个包括每像素三个信道的8位数据，

所述传输数据产生部件分别向辅助视频区域中三个信道的8位数据的每一个的最高有效位MSB以外的各个位分配作为附加信息的两个8位数据的各个位，并且将作为次高有效位的值的逻辑反转的反转值设置到MSB，以及

所述传输数据发送部件对于主视频区域中的数据以及辅助视频区域中的数据执行剪裁，然后发送所述数据。

18.根据权利要求14所述的发送器，其中

所述附加信息中包括的信息数据经历纠错编码。

19.根据权利要求18所述的发送器，其中

所述主视频区域中的数据和所述辅助视频区域中的数据每一个包括每像素三个信道的8位数据，

所述纠错编码是通过三倍模数冗余方法的纠错编码，以及

所述传输数据产生部件分配公共的8位数据作为辅助视频区域中的三个信道的8位数据。

20.根据权利要求14所述的发送器，其中

所述附加信息中包括的信息数据是与要在由分配给所述主视频区域的画面数据描述的画面上叠加的画面有关的信息的数据。

21.根据权利要求14所述的发送器，其中

所述附加信息中包括的信息数据是与要在基于分配给所述主视频区域的画面数据的画面上叠加的字幕有关的信息的数据。

22.根据权利要求14所述的发送器，其中

所述画面数据包括用于显示立体画面的左眼画面数据和右眼画面数据，以及

所述附加信息中包括的信息数据是与用以获得左眼画面数据和右眼画面数据的拍摄过程有关的拍摄相关数据。

23.一种发送方法，包括如下步骤：

产生具有视频场时间段格式的传输数据，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括主视频区域和辅助视频区域；以及

以差分信号格式将所述传输数据经由传输路径和经由多个信道发送到外部装置，

其中在产生传输数据的步骤中，将画面数据分配给所述主视频区域，而将与分配给所述主视频区域的画面数据有关的附加信息分配给辅助视频区域。

24.一种接收器，包括：

传输数据接收部件，经由传输路径和经由多个信道从外部装置接收差分信号格式的传输数据，所述传输数据具有视频场时间段的格式，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括分配画面数据的主视频区域和分配与分配给主视频区域的画面数据有关的附加信息的辅助视频区域，以及

数据提取部件，从所述传输数据接收部件接收到的传输数据的主视频区域中提取并获得画面数据，并从所述传输数据接收部件接收到的传输数据的辅助视频区域中提取并获得附加信息。

25.根据权利要求24所述的接收器，其中

所述画面数据包括用于显示立体画面的左眼画面数据和右眼画面数据，

所述附加信息包括与用以获得左眼画面数据和右眼画面数据的拍摄过程有关的拍摄相关数据，以及

所述接收器进一步包括画面数据校正部件，其基于在所述数据提取部件中获得的拍摄相关数据，校正在所述数据提取部件中获得的左眼画面数据和右眼画面数据。

26.根据权利要求25所述的接收器，其中

所述画面数据校正部件通过使用拍摄相关数据来估计深度信息，并基于深度信息和屏幕尺寸的信息来校正左眼画面数据和右眼画面数据。

27.根据权利要求24所述的接收器，其中

所述画面数据包括用于显示立体画面的左眼画面数据和右眼画面数据，

所述接收器进一步包括画面移动部件，其执行允许在水平方向中移动左眼画面数据描述的左眼画面和右眼画面数据描述的右眼画面的移动调整，以及

所述附加信息包括伴随所述画面移动部件中的移动调整的必要的像素数据。

28.根据权利要求24所述的接收器，其中

所述附加信息包括第二画面数据和规范信息，所述接收器进一步包括：

多个缓冲器；

画面数据写入部件，基于所述规范信息将所述第二画面数据写入多个缓冲器中的指定的一个的指定位置；以及

画面数据叠加部件，以预定比例叠加从传输数据的主视频区域提取并获得的画面数据和写入多个缓冲器的第二画面数据。

29.一种接收方法，包括如下步骤：

经由传输路径和经由多个信道从外部装置接收差分信号格式的传输数据，所述传输数据具有视频场时间段的格式，所述视频场时间段作为包括由垂直同步信号分离的水平消隐时间段、垂直消隐时间段和活动视频时间段的单元，所述活动视频时间段包括分配画面数据的主视频区域和分配与分配给主视频区域的画面数据有关的附加信息的辅助视频区域，以及

从接收传输数据的步骤中接收到的传输数据的主视频区域中提取并获得画面数据，并从接收传输数据的步骤中接收到的传输数据的辅助视频区域中提取并获得附加信息。

Images