CN104081767A - 发送装置、发送方法、接收装置和接收方法 - Google Patents

Abstract

为了在3D图像数据和2D图像数据以时分方式从发送器发送到接收器时，在接收器侧满意地执行图像显示，通过图像数据获取单元获取图像数据，并且通过发送单元将图像数据发送到外部设备。当图像数据是与构成三维图像的多个视图(例如，左眼视图和右眼视图)相关的图像数据时，发送单元以三维图像发送格式发送与视图的每个相关的图像数据。此外，当图像数据是二维图像数据时，发送单元以相同的三维图像发送格式发送图像数据。

Description

发送装置、发送方法、接收装置和接收方法

技术领域

本技术涉及发送装置、发送方法、接收装置和接收方法，并且更具体地涉及以时分方式将对应于3D(立体)内容和2D(二维)内容的图像数据的项目发送到外部装置的发送装置等。

背景技术

例如，在专利文献1中，公开了一种信令(signaling)，通过该信令在来自广播站的分发内容从动态地从2D图像改变为3D图像或从3D图像改变为2D图像的情况下，使得接收器能够执行正确的流接收。在此情况下，例如，当分发2D图像时，发送包括2D图像数据的AVC流，并且当分发3D图像时，发送包括关于构成3D图像的基础视图和非基础视图的图像数据的项目的MVC流。当分发3D图像时，与基础视图和非基础视图相关联的信息插入传输(transport)流。接收器识别分发内容中的动态改变，并且因此可以基于相关联的信息在解码处理和显示处理之间动态切换。

引用列表

专利文献

PTL 1：日本未审专利申请公开No.2001-234336

发明内容

技术问题

例如，考虑接收器是机顶盒并且如上所述，来自广播站的分发内容动态地从2D图像改变为3D图像或从3D图像改变为2D图像。在此情况下，关于构成3D图像的左眼视图和右眼视图的图像数据(下文中，适当地称为“立体(3D)图像数据”)以及2D图像数据的项目通过例如诸如HDMI的数字接口，以时分方式从机顶盒发送到例如电视接收机的监视器。

在现有技术中，3D图像数据以立体图像传送(transfer)格式发送，而2D图像数据以二维图像传送格式发送。因为此，当来自广播站的分发内容动态地从2D图像改变为3D图像或从3D图像改变为2D图像时，出现数字接口的格式参数的变化。现在，出现机顶盒和监视器之间的之前连接设置中的参数变化，在从出现变化的时间点到实际发送图像数据的时间的时间段期间出现时间延迟，并且因此存在将出现非显示间隔(静音间隔)的可能性。

本技术的目的是在从发送装置到接收器以时分方式发送3D图像数据和2D图像数据的情况下，实现在接收器侧令人满意地执行图像显示。

对于问题的解决方案

本技术的概念体现在一种发送装置，包括：图像数据获得单元，其获得图像数据；以及发送单元，其将获得的图像数据发送到外部装置，其中当获得的图像数据是关于多个视图(例如，构成立体图像的左眼视图和右眼视图)的图像数据的项目时，所述发送单元以立体图像传送格式发送关于左眼视图和右眼视图的每个的图像数据，并且其中当获得的图像数据是二维图像数据时，所述发送单元以所述立体图像传送格式发送所述二维图像数据。

根据本技术，通过图像数据获得单元获得图像数据，并且通过发送单元将图像数据发送到外部装置。例如，图像数据获得单元以事件为单位接收具有包括关于多个视图(例如，构成立体图像的左眼视图和右眼视图)的图像数据的视频流的容器。在发送单元中，当获得的图像数据是关于多个视图(例如，构成立体图像的左眼视图和右眼视图)的图像数据的项目时，以立体图像传送格式发送关于多个视图的每个的图像数据。此外，在发送单元中，当获得的图像数据是二维图像数据时，以立体图像传送格式发送二维图像数据。例如，以有线或无线方式通过数字接口(诸如HDMI)发送二维图像数据。

以此方式，根据本技术，以相同的立体图像传送格式发送立体(3D)图像数据(关于多个视图，例如，左眼视图和右眼视图的图像数据的项目)和二维图像数据两者。因为此，即使存在从立体图像数据到二维图像数据或从二维图像数据到立体图像数据的切换，数字接口的格式参数的改变也不出现。因为此，发送装置和外部装置之间连接设置中的参数的改变不出现，并且可以抑制外部装置中非显示间隔(静音间隔)的出现。

此外，根据本技术，例如，当发送二维图像数据时，发送单元可以执行二维图像数据的重新格式化，并且因此可以生成必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分中的第一图像数据和第二图像数据。在此情况下，在外部装置侧，即使执行立体图像显示处理，也可能执行在空间上和时间上实现相对于显示能力的完全分辨率的二维图像显示。

在此情况下，例如，所述发送装置可以还包括：信息获得单元，其获得在所述外部装置中的立体显示方法的信息，其中根据获得的立体显示方法的信息，所述发送单元可以执行所述二维图像数据的重新格式化，并且因此可以获得第一图像数据和第二图像数据。

例如，当所述立体显示方法是偏振方法时，所述发送单元可以将所述二维图像数据分为偶数线中的图像数据和奇数线中的图像数据，可以从所述偶数线中的图像数据配置所述第一图像数据，并且从所述奇数线中的图像数据配置所述第二图像数据。此外，例如，当所述立体显示方法是快门方法时，所述发送单元可以从所述二维图像数据的每帧配置所述第一图像数据的每帧，并且可以从所述二维图像数据的每帧之间的内插帧配置所述第二图像数据的每帧。

此外，根据本技术，当发送所述二维图像数据时，所述发送装置可以设置所述二维图像数据为必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据，并且可以发送指示所述第一图像数据和第二图像数据是相同的二维图像数据的项目的标识信息。在此情况下，在外部装置侧，通过使用第一图像数据和第二图像数据之一，基于标识信息，可以执行对于二维图像的显示处理，并且可能执行在空间上和时间上实现相对于显示能力的完全分辨率的二维图像显示。

此外，例如，根据本技术，所述发送单元可以发送根据以所述立体图像传送格式发送的图像数据建议用户应该执行特定观看动作的消息信息。以此方式，在外部装置侧，消息信息的发送使得可能建议用户应该执行特定观看动作，并且使得用户可能以正确的状态观看。例如，如果执行立体图像显示，那么消息信息建议用户应该佩戴他的/她的3D眼镜(偏振眼镜、快门眼镜等)，并且相反地，如果执行二维图像显示，那么消息信息建议用户应该摘除他的/她的3D眼镜。

此外，例如，根据本技术的发送装置可以还包括叠加单元，其将关于建议用户应该采取特定观看动作的消息的显示数据叠加在获得的图像数据。以此方式，在外部装置侧，图像数据上消息显示数据的叠加使得可能建议用户应该执行特定观看动作，并且使得用户可能以正确的状态观看。

此外，本技术的另一概念体现在一种接收装置，包括：接收单元，其从外部装置接收以立体传送格式发送的第一图像数据和第二图像数据，并且其接收指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目还是相同的二维图像数据的项目的标识信息；以及处理单元，其通过基于接收的标识信息，对接收的所述第一图像数据和第二图像数据执行处理，获得显示图像数据。

根据本技术，接收单元从外部装置接收以立体传送格式发送的第一图像数据和第二图像数据。此外，接收单元从外部装置接收指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目还是相同的二维图像数据的项目的标识信息。然后，处理单元通过基于接收的标识信息，对接收的所述第一图像数据和第二图像数据执行处理，获得显示图像数据。

例如，当标识信息指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，处理单元处理所述第一图像数据和第二图像数据，并且因此获得用于显示立体图像的显示图像数据。此外，当标识信息指示所述第一图像数据和第二图像数据是相同的二维图像数据的项目，处理单元通过使用所述第一图像数据和第二图像数据之一获得用于显示二维图像的显示图像数据。

以此方式，根据本技术，基于标识信息，对所述第一图像数据和第二图像数据执行处理，并因此获得显示图像数据。因为此，如果以立体图像传送格式发送的所述第一图像数据和第二图像数据是相同的二维图像数据的项目，那么可以通过使用所述第一图像数据和第二图像数据之一获得用于显示二维图像的显示图像数据，并且实现相对于显示能力的完全分辨率的二维图像显示是可能的。

此外，本技术的另一概念体现在一种接收装置，包括：接收单元，其从外部装置接收以立体传送格式发送的图像数据，并且其接收根据所述图像数据是用于显示立体图像的图像数据还是用于显示二维图像的图像数据，指示建议用户应该采取特定观看动作的消息的消息信息；处理单元，其通过处理接收的图像数据，获得用于显示立体图像或二维图像的显示图像数据；消息生成单元，其基于接收的消息信息，获得消息显示数据；以及叠加单元，其将获得的消息显示数据叠加在获得的显示图像数据上。

根据本技术，接收单元从外部装置接收以立体传送格式发送的图像数据。此外，接收单元从外部装置接收根据所述图像数据是用于显示立体图像的图像数据还是用于显示二维图像的图像数据，指示建议用户应该执行特定观看动作的消息的消息信息。

处理单元处理接收的图像数据，并因此获得用于显示立体图像或二维图像的显示图像数据。此外，基于接收的消息信息，获得消息显示数据。然后，叠加单元将消息显示数据叠加在显示图像数据上。

以此方式，根据本技术，关于建议用户应该执行特定观看动作的消息的显示数据叠加在用于显示立体图像或二维图像的显示图像数据上。因为此，可能建议用户应该执行特定观看动作，并且使得用户可能以正确的状态观看。例如，如果执行三维图像显示，则可以提供用户应该佩戴他的/她的3D眼镜的建议，并且相反地，如果执行二维图像显示，则可以提供用户应该摘除他的/她的3D眼镜的建议。

此外，例如，根据本技术的接收装置可以还包括控制单元，其基于接收的消息信息，控制快门眼镜的操作，其中立体显示方法是快门方法。

本发明的有益效果

根据本技术，在从发送装置到接收器以时分方式发送3D图像数据和2D图像数据的情况下，可以在接收器侧令人满意地执行图像显示。

附图说明

图1是图示根据实施例的图像发送和接收系统的配置示例的框图。

图2是示意性地图示在发送3D内容或2D内容的情况下在广播站处的处理和在机顶盒处的处理的图。

图3是用于描述在机顶盒中和在电视接收机中的处理功能的图。

图4是用于描述以立体图像传送格式(例如，以“3D帧封装”)发送立体图像数据和以二维图像传送格式(例如，以“2D(普通)”)发送二维图像数据的情况的图。

图5是示意性图示在发送立体图像数据的情况下由在发送侧的机顶盒的处理和由在接收侧的电视接收机的处理的示例的图。

图6是示意性图示在发送二维图像数据的情况下由在发送侧的机顶盒的处理和由在接收侧的电视接收机的处理的示例的图。

图7是图示如果立体显示方法是“偏振方法”，则从二维图像数据生成第一图像数据和第二图像数据的处理的一个示例的图。

图8是示意性图示在重新格式化并且因此发送二维图像数据的情况下，如果3D显示方法是偏振方法，则由在发送侧的机顶盒的处理和由在接收侧的电视接收机的处理的示例的图。

图9是图示如果立体显示方法是“快门方法”，则从二维图像数据生成第一图像数据和第二图像数据的处理的一个示例的图。

图10是示意性图示在重新格式化并且发送二维图像数据的情况下，如果3D显示方法是快门方法，则由在发送侧的机顶盒的处理和由在接收侧的电视接收机的处理的示例的图。

图11是示意性图示在发送二维图像数据的情况下，由在发送侧的机顶盒的处理和由在接收侧的电视接收机的处理的示例的图。

图12是图示在广播站中生成传输流TS的发送数据生成单元的配置示例的框图。

图13是用于描述multiview_view_position SEI消息插入访问单元的“SELs”部分的图。

图14是图示包括在SEI消息中的multiview view position()的语法的图。

图15是示意性图示在NAL单元的结构中编码的基本流和从属流的配置的图。

图16是图示“NAL单元报头mvc扩展”的语法的图。

图17是图示3D_event_descriptor的语法的图。

图18是图示在3D_event_descriptor的语法中的重要信息的语义的图。

图19是图示成分描述符的语法的图。

图20是图示传输流TS的配置示例的图。

图21是图示传输流TS的另一配置示例的图。

图22是图示构成图像发送和接收系统的机顶盒的配置示例的框图。

图23是图示视频解码器的详细配置示例的图。

图24是图示用于由视频解码器的处理的过程示例的流程图。

图25是图示HDMI发送单元中的发送处理的一个示例的流程图。

图26是图示构成图像发送和接收系统的电视接收机的配置示例的框图。

图27是图示机顶盒的HDMI发送单元以及电视接收机的HDMI接收单元的配置示例的图。

图28是图示HDMI厂商专用信息帧(HDMI Vendor Specific InfoFrame)的分组语法的图。

图29是用于描述从机顶盒发送到电视接收机的图像数据动态地从立体(3D)图像数据变为二维(2D)图像数据或者从二维(2D)图像数据变为立体(3D)图像数据的情况的图。

图30是图示构成图像发送和接收系统的机顶盒的另一配置示例的框图。

图31是用于描述机顶盒中的2D检测的另一示例的图。

图32是示意性图示在四个视图上从图像数据的各项目配置立体图像数据的情况下，重新格式化(偏振方法)的处理示例的图。

具体实施方式

下面描述本发明的实施例(下文中称为“实施例”)。此外，按以下顺序提供描述。

1.实施例

2.修改示例

<1.第一实施例>

[图像发送和接收系统]

图1图示根据实施例的图像发送和接收系统10的配置示例。图像发送和接收系统10具有广播站100、机顶盒(STB)200和作为监视器的电视接收机(TV)300。机顶盒200和电视接收机300通过高分辨率多媒体接口(HDMI)线缆400相互连接。

广播站100将传输流TS作为容器载入广播波上，并且因此发送传输流TS。广播站100以事件(节目)为单位变为处于立体(3D)图像发送模式或二维(2D)图像发送模式。

在立体图像发送模式中，包括分别关于构成立体图像的左眼视图和右眼视图的图像数据的项目的基本流和从属流包括在传输流TS中。在二维图像发送模式中，仅仅包括二维图像数据的基本流包括在传输流TS中。可替代地，包括分别相同的二维图像数据的项目的基本流和从属流包括在传输流TS中。

如果基本流和从属流包括在传输流TS中，则指示除了基本流外的从属流存在的第一标识信息(3D信令)插入基本流中。如上所述，在立体图像发送模式的情况下，基本流和从属流包括在传输流TS中。此外，如上所述，同样在二维图像发送模式中，基本流和从属流包括在传输流TS中。下面描述标识信息的细节。

此外，如果除了基本流外的从属流包括在传输流TS中，识别存在立体图像发送模式和二维图像发送模式的哪一个的第二标识信息(2D/3D信令)插入从属流中。换句话说，标识信息识别包括在基本流中的图像数据和包括在从属流中的图像数据是否相同。下面描述标识信息的细节。

此外，指示存在立体图像发送模式和二维图像发送模式的哪一个的第三标识信息插入传输流TS的一层。例如，标识信息插入包括在传输流TS中的事件信息表之下一级。建议用户应该执行特定观看动作的消息添加到对应于发送模式的标识信息。例如，消息在立体图像发送模式中建议用户应该佩戴他的/她的3D眼镜(偏振眼镜、快门眼镜等)，并且在二维图像发送模式中建议用户应该摘掉他的/她的3D眼镜。下面描述标识信息的细节。

机顶盒200接收载入广播波并且因此从广播站100发送的传输流TS。在立体图像发送模式中包括分别关于构成立体图像的左眼视图和右眼视图的图像数据的项目的基本流和从属流包括在传输流TS中。此外，在二维图像发送模式中，仅仅包括二维图像数据的基本流包括在传输流TS中。可替代地，包括分别相同的二维图像数据的项目的基本流和从属流包括在传输流TS中。

如上所述，机顶盒200执行基于插入基本流和从属流的标识信息的处理，并且因此以适当的、有效的方式获得图像数据。也就是说，如果第一标识信息没有包括在基本流中，则仅解码基本流，并且因此获得二维图像数据。图2(c)示意性图示在此情况下通过广播站100的处理和通过机顶盒200的处理。在此情况下，对应于2D内容的二维图像数据用AVC编码，并且因此从发送侧发送。在接收侧，用AVC执行解码，并且因此获得二维图像数据。

此外，如果第一标识信息包括在基本流中，并且包括在从属流中的第二标识信息指示立体图像发送模式，则解码基本流和从属流两者，并且因此获得关于左眼视图和右眼视图的图像数据的项目。图2(a)示意性图示在此情况下通过广播站100的处理和通过机顶盒200的处理。在此情况下，用MVC编码关于对应于3D内容的左眼视图和右眼视图的图像数据的项目，并且从发送侧发送。在接收侧，用MVC执行解码，并且获得关于左眼视图和右眼视图的图像数据的项目。

此外，如果第一标识信息包括在基本流中，并且包括在从属流中的第二标识信息指示二维图像发送模式，则仅解码基本流，并且因此获得用于显示二维图像的显示图像数据。图2(b)示意性图示在此情况下通过广播站100的处理和通过机顶盒200的处理。在此情况下，用MVC编码对应于2D内容的二维图像数据，并且因此从发送侧发送。在接收侧，用MCV执行解码，并且获得二维图像数据。在此情况下，仅解码基本流。

机顶盒200将如上所述获得的图像数据通过HDMI数字接口传送(发送)到电视接收机300。此时，机顶盒200构成HDMI源装置，并且电视接收机300构成HDMI宿装置。

如图3所图示的，机顶盒200执行接收服务的处理，并且执行将数据传送到电视接收机300的数字传送处理。此外，如图3所图示的，电视接收机300根据从机顶盒200发送的图像数据，执行3D显示处理或2D显示处理。在机顶盒200和电视接收机300之间出现数字接口的格式参数的改变。

此时，如图4所图示的，考虑这样的情况，其中以立体图像传送格式(例如，“3D帧封装”)发送立体图像数据(关于构成立体图像的左眼(左)视图和右眼(右)视图的图像数据的项目)，并且以二维图像传送格式(例如，“2D(普通))”发送二维图像数据。

在此情况下，当从立体图像数据到二维图像数据执行切换时，在从切换的时间点到实际发送图像数据的时间的时间段期间，出现由于机顶盒200和电视接收机300之间的格式参数改变的时间延迟。因此，存在在电视接收机300中将出现非显示间隔(静音间隔)的可能性。

因此，根据本技术，当发送二维图像数据时使用与发送立体图像数据时相同的传送格式。根据实施例，当发送立体图像数据时和发送二维图像数据时也使用“3D帧封装”的传送格式。当然，可以使用其他立体图像传送格式。

[发送立体图像数据的情况]

描述发送立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)的情况。图5示意性图示在发送立体图像数据的情况下，通过发送侧的机顶盒200的处理以及通过接收侧的电视接收机300的处理的示例。

在机顶盒200中，解码视频流，并且因此获得立体图像数据(即，关于左眼视图和右眼视图的图像数据的项目)(参照图2(a))，并且以“3D帧封装”的传送格式发送关于每个视图的图像数据。此外，在电视接收机300中，对关于每个视图的图像数据执行3D显示处理，并且因此获得用于显示3D图像的显示图像数据。在此情况下，使得每个视图的图像显示具有在空间上和时间上等于显示能力的一半的分辨率。

[发送二维图像数据的情况]

接下来，描述发送二维图像数据的情况。图6示意性图示在发送二维图像数据的情况下，通过发送侧的机顶盒200的处理以及通过接收侧的电视接收机300的处理的示例。该处理示例是这样的示例，其中以“3D帧封装”的传送格式发送二维图像数据，但是相同的二维图像数据简单地插入关于左眼视图和右眼视图的图像数据的项目的每个插入部分中，并且由此发送。

在机顶盒200中，解码视频流，并且由此获得二维图像数据(参照图2(b)和2(c))，并且以“3D帧封装”的传送格式发送二维图像数据。在此情况下，相同的二维图像数据插入关于左眼视图和右眼视图的图像数据的项目的每个插入部分中。

此外，在电视接收机300中，对相同的二维图像数据的项目执行3D显示处理，并且生成显示图像数据。以这样的方式设置显示图像数据，使得在时间方向上相同的图像帧每次前进2，或者在垂直方向上相同的线在一帧内每次前进2。在此情况下，变为呈现平坦3D显示，并且使得每个视图的图像显示具有空间上和时间上等于显示能力的一半的分辨率。

因此，根据本技术，当以“3D帧封装”的传送格式发送二维图像数据时，简单地应用以下(1)或(2)，而不插入相同的二维图像数据到关于左眼视图和右眼视图的图像数据的项目的每个插入部分中。

[(1)二维图像数据的重新格式化]

重新格式化二维图像数据，并且生成必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分中的第一图像数据和第二图像数据。然后，当以“3D帧封装”的传送格式发送二维图像数据时，第一图像数据和第二图像数据分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分中。

此时，以这样的方式执行二维图像数据的重新格式化，以便对应于在电视接收机300中采用的立体显示方法。机顶盒200可以从电视接收机300的增强扩展显示标识数据(EDID)寄存器(EDID-ROM)获得各条信息。这样的各条信息包括关于可接收的格式类型、监视器尺寸和立体显示方法(偏振方法、快门方法等)的各条信息。

当立体显示方法是偏振方法时，机顶盒200将二维图像数据分为偶数线中的图像数据和奇数线中的图像数据，从偶数线中的图像数据配置第一图像，并且从奇数线中的图像数据配置第二图像。

图7图示从二维图像数据生成第一图像数据和第二图像数据的处理的一个示例。图7(a)图示二维图像数据。如图7(b)和7(c)所示，二维图像数据在垂直方向上分为偶数线组和奇数线组。

然后，如图7(d)所示，对偶数线中的图像数据执行诸如线双写入(linedouble-writing)的处理，并且因此使得线的数目为根据原始二维图像数据。结果，获得插入关于左眼视图的图像数据的部分中的第一图像数据(左视图帧)。此外，如图7(e)所示，对奇数线中的图像数据执行诸如线双写入的处理，并且因此使得线的数目为根据原始二维图像数据。结果，获得插入关于右眼视图的图像数据的部分中的第二图像数据(右视图帧)。

图8示意性图示在重新格式化并且因此发送二维图像数据的情况下，如果3D显示方法是偏振方法，则由在发送侧的机顶盒200的处理和由在接收侧的电视接收机300的处理的示例。

在机顶盒200中，解码视频流，并且因此获得二维图像数据(参照图2(b)和2(c))。以“3D帧封装”的传送格式发送二维图像数据。现在，二维图像数据T_0分为偶数和奇数组，并且此后对偶数和奇数组的每个执行诸如线双写入的处理，并且因此使得偶数和奇数组的每个中线的数目为根据原始二维图像数据T_0。因此，获得插入关于左眼视图的图像数据的部分中的第一图像数据(左视图帧)T_0_even(参照图7(d))。此外，获得插入关于右眼视图的图像数据的部分中的第二图像数据(右视图帧)T_0_odd(参照图7(e))。

此外，在电视接收机300中，对第一图像数据和第二图像数据执行使用偏振方法的3D显示处理，并且因此生成显示图像数据。通过在垂直方向上交替从第一图像数据和第二图像数据提取线获得显示图像数据，并且使得显示图像数据对应于原始二维图像数据T_0。在此情况下，使得二维图像的显示空间上实现相对于显示能力在垂直方向上的完全分辨率。

此外，上面描述了其中在垂直方向上将二维图像数据分为偶数线组和奇数线组并且因此生成第一图像数据和第二图像数据的示例。然而，考虑在水平方向上将二维图像数据分为偶数线组和奇数线组并且因此生成第一图像数据和第二图像数据。在垂直方向上还是水平方向上分割二维图像数据依赖于3D显示方法是否是偏振方法。

此外，当立体显示方法是快门方法时，机顶盒200从二维图像数据的每帧配置第一图像数据的每帧，并且从二维图像数据的每帧之间的内插帧配置第二图像数据的每帧。

图9图示从二维图像数据生成第一图像数据和第二图像数据的处理的一个示例。在图9(a)中，T_0、T_1、T_2等指示二维图像数据的连续帧。此外，在图9(a)中，T_0n、T_1n等指示二维图像数据的每帧之间的连续内插帧。此时，从二维图像数据的帧T_0和T_1生成内插帧T_0n，并且从二维图像数据的帧T_1和T_2生成内插帧T_1n。然后，如图9(b)所示，二维图像数据的每帧设为第一图像数据的每帧(左视图帧)。此外，如图9(b)所示，每个内插帧设为第二图像数据的每帧(右视图帧)。

图10示意性图示在重新格式化并且发送二维图像数据的情况下，如果3D显示方法是快门方法，则由在发送侧的机顶盒200的处理和由在接收侧的电视接收机300的处理的示例。

在机顶盒200中，解码视频流，并且因此获得二维图像数据(参照图2(b)和2(c))。以“3D帧封装”的传送格式发送二维图像数据。现在，从二维图像数据的每帧生成每帧之间的内插帧。然后，二维图像数据的帧T_0设为插入关于左眼视图的图像数据的部分中的第一图像数据(左视图帧)(参照图9(b))。此外，内插帧T_0n设为插入关于右眼视图的图像数据的部分中的第二图像数据(右视图帧)(参照图9(b))。

此外，在电视接收机300中，对第一图像数据和第二图像数据执行使用快门方法的3D显示处理，并且因此生成显示图像数据。通过并排交替放置第一图像数据的帧和第二图像数据的帧，获得显示图像数据，并且变得等于对原始二维图像数据执行用于N倍速度显示的内插处理时获得的图像数据。在此情况下，使得二维图像的显示空间上实现相对于显示能力的完全分辨率，并且使得二维图像的显示成为用于移动的更平滑显示。

[(2)指示二维图像数据存在的标识信息的发送]

二维图像数据本身设为分别必须插入关于左眼视图和右眼视图的图像数据的项目的插入部分第一图像数据和第二图像数据。然后，当以“3D帧封装”的传送格式发送二维图像数据时，相同的二维图像数据插入关于左眼视图和右眼视图的图像数据的项目的插入部分的每一个。在此情况下，也发送指示第一图像数据和第二图像数据是相同的二维图像数据的项目的标识信息。

图11示意性图示在发送二维图像数据的情况下，由在发送侧的机顶盒200的处理和由在接收侧的电视接收机300的处理的示例。在机顶盒200中，解码视频流，并且因此获得二维图像数据(参照图2(b)和2(c))。以“3D帧封装”的传送格式发送二维图像数据。

在此情况下，二维图像数据T_0设为插入关于左眼视图的图像数据的部分中的第一图像数据(左视图帧)。此外，二维图像数据T_0的副本T_n设为插入关于右眼视图的图像数据的部分中的第二图像数据(右视图帧)。然后，在此情况下，指示第一图像数据和第二图像数据是相同的二维图像数据的项目的标识信息(2Dflg)添加到图像数据，并且因此发送。

此外，在电视接收机300中，基于标识信息，对第一图像数据和第二图像数据之一执行2D显示处理，并且因此生成显示图像数据。在此情况下，因为观看交错不出现，所以显示具有完全分辨率的2D图像。

此外，机顶盒200根据发送立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)和二维图像的哪一个，发送建议电视接收机300的用户应该执行特定观看动作的消息信息到电视接收机300。例如，消息信息在发送立体图像数据时建议用户应该佩戴他的/她的3D眼镜(偏振眼镜、快门眼镜等)，并且在发送二维图像数据时建议用户应该摘除他的/她的3D眼镜。基于该消息信息，电视接收机300以这样的方式在显示图像上显示消息，以便将该消息重叠在显示图像上，并且建议用户应该制定特定观看动作。

[发送数据生成单元的配置示例]

图12图示在广播站100中生成上述传输流TS的发送数据生成单元110的配置示例。发送数据生成单元110具有数据提取单元111、视频编码器112、音频编码器113和复用器114。

数据提取单元111具有图像捕获介质111a、声音输入介质111b和数据记录介质111c。图像捕获介质111a是成像拍摄被摄体并且因此输出关于构成立体图像的左眼图像和右眼图像的数据或者二维图像数据的项目的相机。声音输入介质111b是输出声音数据的麦克风。此外，数据记录介质111c记录并且再现上述每个数据项目。

视频编码器112对从数据提取单元111提取的图像数据执行例如MPEG4-AVC(MVC)、MPEG2视频或HEVC的编码，并且因此获得编码的图像数据。此外，视频编码器112使用在后侧提供的流格式化器(未图示)生成包括编码的图像数据的视频流(视频基本流)。

视频编码器112以事件(节目)为单位变为立体(3D)图像发送模式或二维(2D)图像发送模式。在其中发送3D内容图像的立体图像发送模式中，视频编码器112生成包括分别关于构成立体图像的基本视图和非基本视图的图像数据的项目的基本流和从属流。此外，在其中发送2D内容图像的二维图像发送模式中，视频编码器112仅生成包括二维图像数据的基本流或者生成分别包括二维图像数据的项目的基本流和从属流。

如果基本流和从属流包括在传输流TS中，则视频编码器112将指示除了基本流外的从属流存在的第一标识信息(3D信令)插入基本流中。此外，如果除了基本流外的从属流包括在传输流TS中，那么视频编码器112将标识立体图像发送模式和二维图像发送模式的哪一个存在的第二标识信息插入从属流中。

音频编码器113对从数据提取单元111提取的声音数据执行诸如MPEG-2音频或AAC的编码，并且生成音频流(音频基本流)。

复用器114复用来自视频编码器112和音频编码器113的每个流，并且获得传输流TS。在此情况下，出现时间戳(PTS)或解码时间戳(DTS)插入每个分组化基本流(PES)的报头，用于在接收侧同步再现。

复用器114将指示立体图像发送模式和二维图像发送模式的哪一个存在的第三标识信息插入传输流TS的层中。建议用户应该执行特定观看动作的消息添加到对应于发送模式的标识信息。

简要描述图12中图示的发送数据生成单元110的操作。从数据提取单元111提取的图像数据(关于构成立体图像的左眼图像和右眼图像或二维图像的数据的项目)提供给视频编码器112。在视频编码器112中，对图像数据执行编码，并且因此生成包括编码的图像数据的视频流(视频基本流)。视频流提供给复用器114。

在此情况下，在其中发送3D内容图像的立体图像发送模式中，生成包括分别关于构成立体图像的基本视图和非基本视图的图像数据的项目的基本流和从属流。此外，在此情况下，在其中发送二维内容图像的二维图像发送模式中，仅生成包括二维图像数据的基本流、或者生成分别包括二维图像数据的项目的基本流和从属流。

此外，如果生成基本流和从属流，那么在视频编码器112中，执行将指示除了基本流外的从属流存在的第一标识信息(3D信令)插入基本流中的处理。此外，如果生成从属流和基本流，那么在视频编码器112中，执行将标识立体图像发送模式和二维图像发送模式的哪一个存在的第二标识信息插入从属流中的处理。

从数据提取单元111提取的声音数据提供到音频编码器113。在音频编码器113中，对声音数据执行编码，并且生成音频流(音频基本流)。音频流提供给复用器114。

在复用器114中，复用来自视频编码器112和音频编码器113的每个流，并且获得传输流TS。在此情况下，PTS插入PES报头，用于在接收侧同步再现。此外，在复用器114中，将指示立体图像发送模式和二维图像发送模式的哪一个存在的第三标识信息插入传输流TS的层中。

[标识信息的各个项目的语法和TS配置]

如上所述，如果基本流和从属流包括在传输流TS中，那么识别除了基本流外的从属流存在的第一标识信息(3D信令)插入基本流中。例如，如果编码方法是MPEG4-AVC(MVC)，或者如果编码方法是像在诸如NAL单元的编码结构上类似的HEVC的一个编码方法，则第一标识信息插入访问单元(AU)的“SEIs”部分中作为SEI消息。

在此情况下，例如，现有的multiview_view_position SEI消息用作第一标识信息。图13(a)图示一组画面(GOP)的头部访问单元。图13(b)图示除了GOP的头部访问单元外的访问单元。因为在比其中编码像素数据的片在位流上之前的位置编码SEI消息，所以接收者可能通过识别SEI的语法确定随后的解码处理。

图14图示包括在SEI消息中的multiview view position()的语法。字段“num_views_minus1”指示从位的数目减1得到的值(0到123)。字段“view_position[i]”指示在每个视图显示时的相对位置关系。也就是说，字段“view_position[i]”使用从0顺序增加的值指示在每个视图显示时从左视图到右视图的顺序相对位置。

此外，如上所述，如果除了基本流外的从属流包括在传输流TS中，则识别存在立体图像发送模式和二维图像发送模式的哪一个的第二标识信息(2D/3D信令)插入从属流中。例如，如果编码方法是MPEG4-AVC(MVC)，或者如果编码方法是像在诸如NAL单元的编码结构上类似的HEVC的一个编码方法，那么第二标识信息插入构成从属流的NAL单元的报头部分。

具体地，通过在构成从属流的NAL单元的“NAL单元报头mvc扩展”中的字段“priority_id”中定义与基本流的关系，执行第二标识信息的插入。

图15示意性图示在NAL单元的结构中编码的基本流和从属流的配置。从包括“AU定界符”、“SPS”、“PPS”、“SEI”、“片(基础)”等的NAL单元配置基本流的访问单元(AU)。“AU定界符”指示访问单元的起始。“SPS”指示序列参数。“PPS”指示画面参数。“SEI”提供在显示或者缓冲器管理方面有用的信息。“片(基础)”包括关于实际画面的编码数据。

此外，仅图示一个“SEI”，但是实际上，存在多个“SEI”。仅图示一个上述multiview_view_position SEI消息，但是实际上，存在多个multiview_view_position SEI消息。此外，“SPS”仅在一组画面(GOP)的头部访问单元中存在。

从包括“从属定界符”、“子集SPS”、“PPS”、“SEI”、“片(从属)”等的NAL单元配置从属流的访问单元(AU)。“从属定界符”指示访问单元的起始。“子集SPS”指示序列参数。“PPS”指示画面参数。“SEI”提供在显示或者缓冲器管理方面有用的信息。“片(从属)”包括关于实际画面的编码数据。

从头部“NAL单元类型”和头部“NAL单元类型”之后的“NAL单元有效载荷”构成基本流的NAL单元。相比之下，在从属流的NAL单元中，在“NAL单元类型”和“NAL单元有效载荷”之间存在“NAL单元报头mvc扩展”。

图16图示“NAL单元报头mvc扩展”的语法。如图所示，“priority_id”存在于“NAL单元报头mvc扩展”中。“priority_id”意味着值越小优先级越高，并且相反地，值越大优先级越低。

根据实施例，如果应用该含义赋值并且相同的二维图像数据包括在基本流和从属流两者中，那么在从属流中不存在数据独立性，并且因此给出最低优先级。因此，设置为意味着不需要用于显示，并且设置为意味着理解为二维图像发送模式的信令。也就是说，如果“priority_id”中的值大，即“0×3E”，那么这意味着存在优先级显著低的2D(二维图像发送模式)。

另一方面，在3D(立体图像发送模式)的情况下，从属流具有与基本流独立的视图数据。因为此，为了意味着保留数据独立性，值设为优先级上高于2D，即设为大于“0×00”但是小于“0×3E”。

从“priority_id”中的值可以识别基本流中的编码数据(基本片)和从属流中的编码数据(从属片)是相同的，并且因此可以识别2D(二维图像发送模式)和3D(立体图像发送模式)的哪一个存在。根据本实施例，以下标识是可能的。

也就是说，当“priority_id＝0×01到0×3E”时，“从属片≠基本片”并且识别3D(立体图像发送模式)存在。此外，当“priority_id＝0×3E”时，“从属片＝基本片”并且识别2D(二维图像发送模式)存在。

此外，因为“priority_id”与“片”同步，并且因此可以切换，所以“priority_id”设为帧精确的3D/2D信令。此外，信令信息以此方式置入所有“NAL单元报头mvc扩展”中，使得接收器可以在任何定时执行检测。

基本流不保留“nal_unit_header_mvc_extension”，但是其“片(基本)”确定被视为“priority_id＝0×00”(最高优先级)。“priority_id”在解码处理中不用作MPEG标准，但是可以在应用中使用。

此外，如上所述，指示立体图像发送模式和二维图像发送模式的哪一个存在的第三标识信息插入包括在传输流TS中的事件信息表下面的级别。图17图示作为第三标识信息的3D_event_descriptor的语法。此外，图18图示该语法中重要信息的语义。

8位字段“descriptor_tag”指示描述符类型并且在此指示存在3D事件描述符。8位字段“descriptor_length”指示描述符的长度(大小)，并且指示随后字节的数目作为描述符的长度。

标记信息“3D_flag”指示分发节目(事件)是否是3D的。“1”指示3D，并且“0”指示不存在3D，即指示2D。1位字段“video_stream_delivery_type”指示节目的视频流是否是单个流。“1”指示存在单个流，并且“0”指示存在多个流。

此外，在3D事件描述符中，用“text_char”发送消息。该消息例如是建议用户应该执行特定观看动作的消息。在此情况下，语义可以提到通知当“3D_flag”是“1”时应该佩戴3D眼镜。相反地，语义可以提到通知当“3D_flag”是“0”时应该摘除3D眼镜。

此外，替代3D事件描述符，可以对于插入事件信息表之下级别的现有成分描述符进行应用。图19图示成分描述符的语法。4位字段“stream_content”指示要传送的格式(MPEG-4-AVC、MVC等)的类型。此外，8位字段“component_type”指示2D或3D(在3D的情况下，帧兼容性或服务兼容性)。

图20图示传输流TS的配置示例。视频基础流的PES分组“PID1:视频PES1”和PES分组“PID2:音频PES1”包括在传输流TS中。

如果除了基本流外的从属流包括在视频基础流中，那么指示除了基本流外的从属流存在的第一标识信息(3D信令)插入基本流中作为多视图视图位置SEI消息。

此外，如果除了基本流外的从属流包括在视频基础流中，那么识别立体图像发送模式和二维图像发送模式的哪一个存在的第二标识信息(2D/3D信令)插入从属流的NAL单元的“NAL单元报头mvc扩展”的“priority_id”字段中。

此外，在传输流TS中包括节目图表(PMT)作为节目特定信息(PSI)。PSI是其中写入传输流中包括的每个基础流属于哪个节目的信息。此外，在传输流TS中包括事件信息表(EIT)作为以事件(节目)为单位的执行管理的服务信息(SI)。

保留与每个基础流相关的信息的基础环存在于PMT中。视频基础环(视频ES环)存在于配置示例中。对应于上述的一个视频基础流，诸如流类型和分组标识符(PID)的信息安排在视频基础环中，并且描述与其视频基础流相关的信息的描述符也安排在视频基础环中。

指示立体图像发送模式和二维图像发送模式的哪一个存在的第三标识信息作为3D事件描述符插入EIT之下的级别。此外，成分描述符也插入EIT之下的级别。

此外，图20中图示的传输流TS的配置示例图示基本流和从属流插入相同视频基础流并且因此发送的情况。考虑基本流和从属流插入分离的视频基础流并且因此发送。尽管未详细图示，图21图示在此情况下传输流TS的配置示例。

[机顶盒的配置示例]

图22图示机顶盒200的配置示例。机顶盒200具有CPU 201、闪速ROM202、DRAM 203、内部总线204、遥控接收单元(RC接收单元)205和遥控发射器(RC发射器)206。

此外，机顶盒200具有天线端子210、数字调谐器211、传输流缓冲器(TS缓冲器)212和解复用器213。此外，机顶盒200具有视频解码器214、音频解码器215、HDMI发送单元216和HDMI端子217。

CPU 201控制机顶盒200的每个单元的操作。闪速ROM 202执行控制软件的存储和数据的保持。DRAM 203构成CPU 201的工作区域。CPU 201将从闪速ROM 202读取的软件和数据部署在DRAM 203上，并且因此激活软件并且控制机顶盒200的每个单元。

RC接收单元205接收从RC发射器206发射的遥控信号(遥控代码)，并且将接收的遥控信号提供给CPU 201。CPU 201基于遥控代码控制机顶盒200的每个单元。CPU 201、闪速ROM 202和DRAM 203用内部总线204相互连接。

天线端子210是在接收天线(未图示)接收的电视广播信号输入的端子。数字调谐器211处理输入到天线端子210中的电视广播信号，并且因此输出对应于由用户选择的频道的预定传输流TS。TS缓冲器212临时累积从数字调谐器211输出的传输流TS。视频基础流和音频基础流包括在传输流TS中。

在立体(3D)图像发送模式中，包括分别关于构成立体图像的左眼视图和右眼视图的图像数据的项目的基本流和从属流包括在传输流TS中。此外，在二维(2D)图像发送模式中，仅仅包括二维图像数据的基本流包括在传输流TS中。可替代地，包括分别相同的二维图像数据的项目的基本流和从属流包括在传输流TS中。

解复用器213从在TS缓冲器212中临时累积的传输流TS提取视频和音频的每个流(基础流)。此外，解复用器213从传输流TS提取上述3D_event_descriptor(参照图17)，并且将提取的3D_event_descriptor发送到CPU 201。

CPU 201可以从3D事件描述符掌握立体图像发送模式和二维图像发送模式的哪一个存在。此外，CPU 201可以从3D事件描述符获得建议用户应该执行特定观看动作的消息信息。

视频解码器214对在解复用器213中提取的视频基础流执行解码处理，并且因此获得图像数据。也就是说，在立体(3D)图像发送模式中，视频解码器214获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此外，在二维(2D)图像发送模式中，视频解码器214获得二维图像数据。

此时，视频解码器214基于插入基本流的第一标识信息和插入从属流的第二标识信息，执行解码处理。如上所述，第一标识信息是指示除了基本流外的从属流存在的3D信令。如上所述，第二标识信息是指示立体图像发送模式和二维图像发送模式的哪一个存在的2D/3D信令。

图23图示视频解码器214的详细配置示例。视频解码器214具有NAL单元解析单元214a、片解码单元214b和SPS/PPS/SEI处理单元214c。NAL单元解析单元214a解析基本流和从属流的NAL单元，并且发送片的NAL单元到片解码单元214b并且发送SPS/PPS/SEI的NAL单元到SPS/PPS/SEI处理单元214c。

片解码单元214b解码包括在片的NAL单元中的编码数据，并且因此获得图像数据。NAL单元解析单元214a检查插入从属流的第二标识信息(priority_id)的语义，并且发送检查的结果到片解码单元214b。此外，SPS/PPS/SEI处理单元214c检查基本流中第一标识信息(多视图视图位置SEI)的存在，并且发送检查的结果到片解码单元214b。

片解码单元214b基于每个检查的结果切换处理。也就是说，如果第一标识信息没有包括在基本流中，那么片解码单元214b仅解码基本流，并且因此获得二维图像数据。

此外，如果第一标识信息包括在基本流中，并且包括在从属流中的第二标识信息指示立体图像发送模式，那么片解码单元214b解码基本流和从属流两者，并且因此获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目。

此外，如果第一标识信息包括在基本流中，并且包括在从属流中的第二标识信息指示二维图像发送模式，那么片解码单元214b仅解码基本流，并且因此获得二维图像数据。

图24中的流程图图示用于由视频解码器214的处理的过程的一个示例。视频解码器214在步骤ST1开始处理。然后，在步骤ST2中，视频解码器214确定基本流中是否存在第一标识信息(多视图视图位置SEI)。

当多视图视图位置SEI存在时，在步骤ST3中，视频解码器214设置基本流和从属流在服务中。然后，在步骤ST4中，视频解码器214确定包括在从属流中的第二标识信息(priority_id)是否指示二维图像发送模式，也就是说，是否“priority_id＝0×3E”。

当第二标识信息指示二维图像发送模式时，在步骤ST5中，视频解码器214确定包括在基本流和从属流中的图像数据的项目是相同的数据的项目。然后，在步骤ST6中，视频解码器214仅用片解码单元214b解码基本流，并且因此获得二维图像数据。此后，在步骤ST7中，视频解码器214结束处理。

此外，当在步骤ST4中，第二标识信息指示立体图像发送模式时，在步骤ST8中，视频解码器214确定包括在基本流和从属流中的图像数据的项目是不同的图像数据的项目。然后，在步骤ST9中，视频解码器214用片解码单元214b解码基本流和从属流两者，并且因此获得关于左眼视图和右眼视图的图像数据的项目。此后，在步骤ST7中，视频解码器214结束处理。

此外，当在步骤ST2中，基本流中不存在第一标识信息(多视图视图位置SEI)时，在步骤ST10中，视频解码器214设置从属流未在服务中，并且进到步骤ST6。然后，视频解码器214仅用片解码单元214b解码基本流，并且因此获得二维图像数据。此后，在步骤ST7中，视频解码器214结束处理。

此外，返回参照图22，音频解码器215进一步对在解复用器213中提取的音频基础流执行解码处理，并且因此获得解码的声音数据。

HDMI发送单元216使用基于HDMI的通信，通过HDMI端子217将在视频解码器214中获得的图像数据和在音频解码器215中获得的声音数据发送到HDMI宿装置(根据实施例的电视接收机300)。

如上所述，在立体(3D)图像发送模式中由视频解码器214获得立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)。在二维(2D)图像发送模式中由视频解码器214获得二维图像数据。HDMI发送单元216以立体图像传送格式(例如，以“3D帧封装”)发送立体图像数据，并且还以相同的传送格式发送二维图像数据。

当发送二维图像数据时，如下所述，HDMI发送单元216获得必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据。如上所述，如果应用“(1)二维图像数据的重新格式化”，那么如下根据用于在电视接收机300中使用的立体(3D)显示方法，从二维图像数据获得第一图像数据和第二图像数据。

也就是说，当立体显示方法是偏振方法时，二维图像数据分为偶数线组和奇数线组(参照图7(b)和7(c))。然后，对偶数线中的图像数据执行诸如线双写入的处理，并且因此使得线的数目为根据原始二维图像数据。结果，获得插入关于左眼视图的图像数据的部分的第一图像数据(左视图帧)(参照图7(d))。此外，对奇数线中的图像数据执行诸如线双写入的处理，并且因此使得线的数目为根据原始二维图像数据。结果，获得插入关于右眼视图的图像数据的部分的第二图像数据(右视图帧)(参照图7(e))。

此外，当立体显示方法是快门方法时，从二维图像数据的帧T_0、T_1、T_2等生成每个帧之间的内插帧T_0n、T_1n等(参照图9(a))。然后，二维图像数据的每个帧设为第一图像数据的每个帧(左视图帧)(参照图9(b))。此外，每个内插帧设为第二图像数据的每个帧(右视图帧)(参照图9(b))。

此外，如上所述，如果应用“(2)指示二维图像数据存在的标识信息的发送”，那么二维图像数据设为必须插入左眼视图的插入部分的第一图像数据。此外，生成二维图像数据的副本，并且该副本设为必须插入右眼视图的插入部分的第二图像数据。

在此情况下，HDMI发送单元216用HDMI接口将指示第一图像数据和第二图像数据是否是相同的二维图像数据的项目的标识信息(2Dflg)发送到电视接收机300。根据该实施例，标识信息是在图像数据的消隐间隔期间插入并且因此发送。HDMI发送单元216在下面详细描述。

图25中的流程图图示上述HDMI发送单元216中的发送处理的一个示例。HDMI发送单元216例如每帧执行流程图中图示的发送处理。

HDMI发送单元216在步骤ST21中开始处理，并且此后处理进到步骤ST22。在步骤ST22中，HDMI发送单元216确定发送图像数据是立体(3D)图像数据还是二维(2D)图像数据。

当发送图像数据是立体(3D)图像数据时，在步骤ST23中，HDMI发送单元216以“3D帧封装”的传送格式发送关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此后，在步骤ST24中，HDMI发送单元216结束处理。

在步骤ST22中，当发送图像数据是二维(2D)图像数据时，HDMI发送单元216进到步骤ST25中的处理。在步骤ST25中，HDMI发送单元216确定应用“(1)二维图像数据的重新格式化”和“(2)指示二维图像数据存在的标识信息的发送”的哪一个。例如，HDMI发送单元216使用从电视接收机300的EDID寄存器获得的信息，确定电视接收机300是否可以对应于标识信息，并且基于确定的结果，确定应用哪一个。

当应用“重新格式化”时，在步骤ST26中，HDMI发送单元216确定用于在电视接收机300中使用的立体显示方法是“偏振方法”还是“快门方法”。当立体显示方法是“偏振方法”时，HDMI发送单元216进到步骤ST27中的处理。

在步骤ST27中，HDMI发送单元216对二维图像数据执行用于分割为偶数和奇数线的处理，并且因此生成第一图像数据和第二图像数据(参照图7)。然后，在步骤ST28中，HDMI发送单元216通过插入第一图像数据和第二图像数据替代关于左眼视图和右眼视图的图像数据的项目，以“3D帧封装”的传送格式发送二维图像数据。此后，在步骤ST24中，HDMI发送单元216结束处理。

此外，当在步骤ST26中立体显示方法是“快门方法”时，HDMI发送单元216进到步骤在步骤ST29中的处理。在步骤ST29中，HDMI发送单元216对二维图像数据执行帧间内插处理，并且因此生成第一图像数据和第二图像数据(参照图9)。然后，在步骤ST28中，HDMI发送单元216通过插入第一图像数据和第二图像数据替代关于左眼视图和右眼视图的图像数据的项目，以“3D帧封装”的传送格式发送二维图像数据。此后，在步骤ST24中，HDMI发送单元216结束处理。

此外，在步骤ST25中，当应用“标识信息发送”时，HDMI发送单元216进到步骤ST30中的处理。在步骤ST30中，HDMI发送单元216对二维图像数据执行复制处理，并且因此获得作为相同的二维图像数据的项目的第一图像数据和第二图像数据。

然后，在步骤ST31中，HDMI发送单元216通过插入第一图像数据和第二图像数据替代关于左眼视图和右眼视图的图像数据的项目，以“3D帧封装”的传送格式发送二维图像数据。此外，在步骤ST31中，HDMI发送单元216额外发送指示第一图像数据和第二图像数据是相同的图像数据的项目的标识信息(2Dflg)。此后，在步骤ST24中，HDMI发送单元216结束处理。

此外，根据发送立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)和二维图像数据的哪一个，HDMI发送单元216用HDMI接口额外地将建议电视接收机300的用户应该执行特定观看动作的消息信息(3Dglassoff)发送到电视接收机300。根据实施例，消息信息是在图像数据的消隐间隔期间插入并且因此发送的。

描述图22中图示的机顶盒200的操作。输入天线端子210的电视广播信号提供到数字调谐器211。在数字调谐器211中，处理电视广播信号，并且因此输出对应于由用户选择的频道的预定传输流TS。传输流TS临时在TS缓冲器212中累积。视频基础流和音频基础流包括在传输流TS中。

在立体(3D)图像发送模式中，包括分别关于构成立体图像的左眼视图和右眼视图的图像数据的项目的基本流和从属流包括在传输流TS中。此外，在二维图像发送模式中，仅包括包含二维图像数据的基本流。可替代地，包括分别包含二维图像数据的项目的基本流和从属流。

在解复用器213中，从在TS缓冲器212中临时累积的传输流TS提取视频和音频的每个流(基础流)。视频基础流提供到视频解码器214，并且音频基础流提供到音频解码器215。

此外，在解复用器213中，从传输流TS提取3D_event_descriptor，并且发送到CPU 201。在CPU 201中，可以从描述符掌握立体图像发送模式和二维图像发送模式的哪一个存在。此外，在CPU 201中，从描述符获得建议用户应该执行特定观看动作的消息信息。

在视频解码器214中，对在解复用器213中提取的视频基础流执行解码处理，并且因此获得图像数据。在此情况下，在视频解码器214中，基于插入基本流的第一标识信息和插入从属流的第二标识信息执行处理。也就是说，如果第一标识信息没有包括在基本流中，那么仅解码基本流，并且获得二维图像数据。

此外，如果第一标识信息包括在基本流中并且包括在从属流中的第二标识信息指示立体图像发送模式，那么解码基本流和从属流，并且获得立体图像数据，即，关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此外，如果第一标识信息包括在基本流中并且包括在从属流中的第二标识信息指示二维图像发送模式，那么仅解码基本流，并且获得二维图像数据。

此外，在解复用器213中提取的音频流提供到音频解码器215。在音频解码器215中，对音频流执行解码处理，并且因此获得解码的声音数据。在视频解码器214中获得的图像数据和在音频解码器215中获得的声音数据提供到HDMI发送单元216。

在HDMI发送单元216中，在视频解码器214中获得的图像数据和在音频解码器215中获得的声音数据使用基于HDMI的通信，通过HDMI端子217发送到电视接收机300。在此情况下，以立体图像传送格式(例如，以“3D帧封装”)从视频解码器214发送立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)，并且还以相同的传送格式发送二维图像数据。因为此，当发送二维图像数据时，生成分别必须插入关于左眼视图和右眼视图的图像数据的项目的插入部分中的第一图像数据和第二图像数据。

此外，如果在HDMI发送单元216中相同的二维图像数据的项目作为第一图像数据和第二图像数据发送，那么指示第一图像数据和第二图像数据是相同的二维图像数据的项目的标识信息(2Dflg)通过HDMI接口发送到电视接收机300。此外，在HDMI发送单元216中，根据发送立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)和二维图像数据的哪一个，用HDMI接口发送建议电视接收机300的用户应该执行特定观看动作的消息信息(3Dglassoff)到电视接收机300。

[电视接收机300的配置示例]

图26图示电视接收机300的配置示例。电视接收机300具有CPU 301、闪速ROM 302、DRAM 303、内部总线304、遥控接收单元(RC接收单元)305和遥控发射器(RC发射器)306。

此外，电视接收机300具有天线端子310、数字调谐器311、传输流缓冲器(TS缓冲器)312、解复用器313、视频解码器314和显示处理单元315。此外，电视接收机300具有消息生成单元316、叠加单元317、音频解码器318、频道处理单元319、HDMI端子320和HDMI接收单元321。

CPU 301控制电视接收机300的每个单元的操作。闪速ROM 302执行控制软件的存储和数据的保持。DRAM 303构成CPU 301的工作区域。CPU 301将从闪速ROM 302读取的软件和数据部署在DRAM 303上，并且因此激活软件并且电视接收机300的每个单元。RC接收单元305接收从RC发射器306发射的遥控信号(遥控代码)，并且将接收的遥控信号提供给CPU 301。CPU301基于遥控代码控制电视接收机300的每个单元。CPU 301、闪速ROM 302和DRAM 303用内部总线304相互连接。

天线端子310是在接收天线(未图示)接收的电视广播信号输入的端子。数字调谐器311处理输入到天线端子310中的电视广播信号，并且因此输出对应于由用户选择的频道的预定传输流TS。TS缓冲器312临时累积从数字调谐器311输出的传输流TS。视频基础流和音频基础流包括在传输流TS中。

在立体(3D)图像发送模式中，包括分别关于构成立体图像的左眼视图和右眼视图的图像数据的项目的基本流和从属流包括在传输流TS中。此外，在二维图像发送模式中，仅仅包括包含二维图像数据的基本流。可替代地，包括包含分别相同的二维图像数据的项目的基本流和从属流。

解复用器313从在TS缓冲器312中临时累积的传输流TS提取视频和音频的每个流(基础流)。此外，解复用器313从传输流TS提取上述3D_event_descriptor(参照图17)，并且将提取的3D_event_descriptor发送到CPU 301。

CPU 301可以从3D事件描述符掌握立体图像发送模式和二维图像发送模式的哪一个存在。此外，CPU 301可以从3D事件描述符获得建议用户应该执行特定观看动作的消息信息。基于该消息信息，CPU 301可以控制从消息生成单元316生成的消息显示数据(位图数据)。

以与上述机顶盒200中的视频解码器214相同的方式配置视频解码器314。视频解码器314对在解复用器313中提取的视频基础流执行解码处理，并且因此获得图像数据。也就是说，在立体(3D)图像发送模式中，视频解码器314获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此外，在二维(2D)图像发送模式中，视频解码器314获得二维图像数据。

此时，视频解码器314基于插入基本流的第一标识信息和插入从属流的第二标识信息，执行解码处理。如上所述，第一标识信息是指示除了基本流外的从属流存在的3D信令。如上所述，第二标识信息是指示立体图像发送模式和二维图像发送模式的哪一个存在的2D/3D信令。

音频解码器318对在解复用器313中提取的音频基础流执行解码处理，并且因此获得解码的声音数据。

HDMI接收单元321使用基于HDMI的通信，从HDMI源装置(根据实施例的机顶盒200)通过HDMI端子320接收图像数据和声音数据。此时，HDMI接收单元321以事件为单位接收立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)或者二维图像数据。

此时，HDMI接收单元321以立体图像传送格式(例如，以“3D帧封装”)接收立体图像数据，并且还以相同的传送格式接收二维图像数据。当接收立体图像数据时，HDMI接收单元321获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此外，当接收二维图像数据时，HDMI接收单元321获得插入分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分中的第一图像数据和第二图像数据。

如上所述，如果在机顶盒200中应用“(1)二维图像数据的重新格式化”，那么用重新格式化获得第一图像数据和第二图像数据。

例如，当用于在电视接收机300中使用的立体显示方法是“偏振方法”时，通过对二维图像数据执行用于分为偶数线和奇数线的处理获得第一图像数据和第二图像数据(参照图7)。此外，例如，当用于在电视接收机300中使用的立体显示方法是“快门方法”时，通过对二维图像数据执行帧间内插处理获得第一图像数据和第二图像数据(参照图9)。

此外，如上所述，如果在机顶盒200中应用“(2)指示二维图像数据存在的标识信息的发送”，那么第一图像数据和第二图像数据变为相同的二维图像数据的项目。

此外，HDMI接收单元321用HDMI接口从机顶盒200接收指示第一图像数据和第二图像数据是否是相同的二维图像数据的项目的标识信息(2Dflg)。此外，根据发送立体图像数据(关于构成立体图像的左眼视图和右眼视图的图像数据的项目)和二维图像数据的哪一个，HDMI接收单元321用HDMI接口从机顶盒200接收建议用户应该执行特定观看动作的消息信息(3Dglassoff)。

HDMI接收单元321将标识信息(2Dflg)和消息信息(3Dglassoff)发送到CPU 301。CPU 301从标识信息(2Dflg)掌握在HDMI接收单元321获得的第一图像数据和第二图像数据是否是相同的第二图像数据的项目，并且因此可以控制显示处理单元315的操作。此外，基于消息信息(3Dglassoff)，CPU 301控制从消息生成单元316生成的消息显示数据(位图数据)。

在广播接收时，声道处理单元319从在音频解码器318获得的声音数据，获得用于实现例如5.1声道环绕等的每个声道的声音数据，并且将获得的声音数据提供到扬声器。此外，在HDMI输入时，声道处理单元319从在HDMI接收单元321中接收的声音数据，获得用于实现例如5.1声道环绕等的每个声道的声音数据SA。

在广播接收时，显示处理单元315对在视频解码器314中获得的图像数据执行显示处理，并且因此获得显示图像数据。当在视频解码器314中获得二维图像数据时，显示处理单元315执行二维(2D)显示处理，并且因此获得用于显示二维图像的显示图像数据。

此外，当在视频解码器314中获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，显示处理单元315执行立体(3D)显示处理，并且因此获得用于显示立体图像的显示图像数据。此外，通过使用用于在电视接收机300中使用的立体显示方法(偏振方法、快门方法等)，使得立体(3D)显示处理不同。

此外，在HDMI输入时，显示处理单元315对在HDMI接收单元321中接收的图像数据执行显示处理，并且因此获得显示图像数据。此时，除了在HDMI接收单元321中接收作为相同的二维图像数据的项目的第一图像数据和第二图像数据的情况，显示处理单元315执行立体(3D)显示处理，并且获得显示图像数据。

在此情况下，当在HDMI接收单元321中接收关于左眼视图和右眼视图的图像数据的项目时，对这些图像数据的项目执行立体(3D)显示处理，并且因此获得用于显示立体图像的显示图像数据。此外，当在HDMI接收单元321中接收重新格式化的第一图像数据和第二图像数据时，对这些图像数据的项目执行立体(3D)显示处理，并且因此获得用于显示具有完全分辨率的二维图像的显示图像数据。

此外，除了在HDMI接收单元321中作为相同的二维图像数据的项目的第一图像数据和第二图像数据的情况，显示处理单元315对图像数据的项目之一执行二维(2D)显示处理，并且获得用于显示具有完全分辨率的二维图像的显示图像数据。

在广播接收时，消息生成单元316基于从3D事件描述符提取的消息信息，生成关于建议用户应该执行特定观看动作的消息(例如，关于与佩戴和不佩戴3D眼镜有关的消息)的显示数据。此外，在HDMI输入时，消息生成单元316基于用HDMI接口从机顶盒200发送的消息信息(3Dglassoff)，生成关于建议用户应该执行特定观看动作的消息(例如，关于与佩戴和不佩戴3D眼镜有关的消息)的显示数据。

叠加单元317将在消息生成单元316中生成的消息显示数据(位图数据)叠加在显示处理单元315中获得的显示图像数据上，获得最终显示图像数据SV，并且因此将获得的最终显示图像数据SV提供到显示器。

此外，考虑如果用于在电视接收机300中使用的立体显示方法是“快门方法”，那么基于消息信息控制快门眼镜的操作。例如，当消息信息指示指示不佩戴3D眼镜的消息时，CPU 301以关闭快门眼镜同步的方式执行控制，并且因此打开快门。此外，例如，当消息信息指示指示佩戴3D眼镜的消息时，CPU 301以打开快门眼镜同步的方式执行控制，并且因此执行快门操作。

描述图26中图示的电视接收机300的操作。首先，描述广播接收时的操作。输入天线端子310的电视广播信号提供到数字调谐器311。在数字调谐器311中，处理电视广播信号，并且因此输出对应于由用户选择的频道的预定传输流TS。传输流TS临时在TS缓冲器312中累积。视频基础流和音频基础流包括在传输流TS中。

在立体(3D)图像发送模式中，包括分别关于构成立体图像的基本视图和非基本视图的图像数据的项目的基本流和从属流包括在传输流TS中。此外，在二维图像发送模式中，仅包括包含二维图像数据的基本流。可替代地，包括分别包含二维图像数据的项目的基本流和从属流。

在解复用器313中，从在TS缓冲器312中临时累积的传输流TS提取视频和音频的每个流(基础流)。视频基础流提供到视频解码器314，并且音频基础流提供到音频解码器318。

此外，在解复用器313中，从传输流TS提取3D_event_descriptor，并且发送到CPU 301。在CPU 301中，可以从描述符掌握立体图像发送模式和二维图像发送模式的哪一个存在。此外，在CPU 301中，从描述符获得建议用户应该执行特定观看动作的消息信息。在CPU 301中，基于消息信息执行消息生成单元316的控制，并且生成对应于消息信息的消息显示数据(位图数据)。

在视频解码器314中，对在解复用器313中提取的视频基础流执行解码处理，并且因此获得图像数据。在此情况下，在视频解码器314中，基于插入基本流的第一标识信息和插入从属流的第二标识信息执行处理。也就是说，如果第一标识信息没有包括在基本流中，那么仅解码基本流，并且因此获得二维图像数据。

此外，如果第一标识信息包括在基本流中并且包括在从属流中的第二标识信息指示立体图像发送模式，那么解码基本流和从属流二者，并且获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此外，如果第一标识信息包括在基本流中并且包括在从属流中的第二标识信息指示二维图像发送模式，那么仅解码基本流，并且获得二维图像数据。

由视频解码器314获得的图像数据提供到显示处理单元315。在显示处理单元315中，对在视频解码器314中获得的图像数据执行显示处理，并且获得显示图像数据。也就是说，当在视频解码器314中获得二维图像数据时，在显示处理单元315中，执行二维(2D)显示处理，并且因此获得用于显示二维图像的显示图像数据。

此外，当在视频解码器314中获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，在显示处理单元315中，执行立体(3D)显示处理，并且因此获得用于显示立体图像的显示图像数据。此外，使用用于在电视接收机300中使用的立体显示方法(偏振方法、快门方法等)，立体(3D)显示处理设为不同。

在显示处理单元315中获得的显示图像数据提供到叠加单元317，并且因此叠加来自消息生成单元316的消息显示数据，并且获得最终显示图像数据SV。显示图像数据SV提供到显示器，并且执行显示器上的立体图像显示或二维图像显示。

现在，在二维图像显示的情况下，以叠加在图像上的方式在图像上显示建议不佩戴3D眼镜的消息，并且在立体图像显示的情况下，在图像上叠加建议佩戴3D眼镜的消息。因此，用户可能以正确的观看状态观看图像。

此外，现在，如果立体显示方法是“快门方法”，那么基于消息信息由CPU 301控制快门眼镜的操作。例如，在二维图像显示的情况下，关闭快门眼镜同步，并且因此快门打开。因为此，尽管佩戴快门眼镜，用户也可以观看在时间方向上具有完全分辨率的二维图像。此外，例如，在立体图像显示的情况下，打开快门眼镜同步，并且执行快门操作。因为此，用户可以满意地观看立体图像。

接下来，描述HDMI输入时的操作。使用基于HDMI的通信由HDMI接收单元321接收图像数据和声音数据。在此情况下，在HDMI接收单元321中，以立体图像传送格式(例如，以“3D帧封装”)接收立体图像数据，并且还以相同的传送格式接收二维图像数据。

当接收立体图像数据时，在HDMI接收单元321中，获得关于构成立体图像的左眼视图和右眼视图的图像数据的项目。此外，当接收二维图像数据时，在HDMI接收单元321中，获得分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据。

例如，如果在机顶盒200中应用“重新格式化”，并且用于在电视接收机300中使用的立体显示方法是“快门方法”，那么通过对二维图像数据执行用于分为偶数线和奇数线的处理获得第一图像数据和第二图像数据(参照图7)。此外，例如，如果在机顶盒200中应用“重新格式化”，并且用于在电视接收机300中使用的立体显示方法是“快门方法”时，那么通过对二维图像数据执行帧间内插处理获得第一图像数据和第二图像数据(参照图9)。此外，如果在机顶盒200中应用“标识信息发送”，那么第一图像数据和第二图像数据变为相同的二维图像数据的项目。

此外，在HDMI接收单元321中，用HDMI接口从机顶盒200接收指示第一图像数据和第二图像数据是否是相同的二维图像数据的项目的标识信息(2Dflg)以及建议用户应该执行特定观看动作的消息信息(3Dglassoff)。这些信息项目发送到CPU 301。

在CPU 301中，从标识信息(2Dflg)掌握用HDMI接收单元321获得的第一图像数据和第二图像数据是否是相同的二维图像数据的项目，并且执行显示处理单元315的控制操作。此外，在CPU 301中，基于消息信息(3Dglassoff)执行消息生成单元316的控制，并且生成对应于消息信息(3Dglassoff)的消息显示数据(位图数据)。

在HDMI接收单元321中接收的图像数据提供到显示处理单元315。在显示处理单元315中，对在HDMI接收单元321中接收的图像数据执行显示处理，并且获得显示图像数据。也就是说，除了在HDMI接收单元321中接收作为相同的二维图像数据的第一图像数据和第二图像数据的情况外，在显示处理单元315中，执行立体(3D)显示处理，并且因此获得显示图像数据。此外，使用用于在电视接收机300中使用的立体显示方法(偏振方法、快门方法等)，立体(3D)显示处理设为不同。

在此情况下，当在HDMI接收单元321中接收关于左眼视图和右眼视图的图像数据的项目时，对这些图像数据的项目执行立体(3D)显示处理，并且因此获得用于显示立体图像的显示图像数据(参照图5)。此外，当在HDMI接收单元321中接收重新格式化的第一图像数据和第二图像数据时，对这些图像数据的项目执行立体(3D)显示处理，并且因此获得用于显示具有完全分辨率的二维图像的显示图像数据(参照图8和10)。

此外，在HDMI接收单元321中接收相同的二维图像数据的项目的第一图像数据和第二图像数据的情况下，在显示处理单元315中，对图像数据的项目之一执行二维(2D)显示处理，并且因此获得用于显示具有完全分辨率的二维图像的显示图像数据(参照图11)。

在显示处理单元315中获得的显示图像数据提供到叠加单元317，并且因此叠加来自消息生成单元316的消息显示数据，并且获得最终显示图像数据SV。显示图像数据SV提供到显示器，并且执行显示器上的立体图像显示或二维图像显示。

现在，在二维图像显示的情况下，在图像上叠加建议不佩戴3D眼镜的消息，并且在立体图像显示的情况下，以叠加在图像上的方式在图像上显示建议佩戴3D眼镜的消息。因此，用户可能以正确的观看状态观看图像。

此外，现在，如果立体显示方法是“快门方法”，那么基于消息信息由CPU 301控制快门眼镜的操作。例如，在二维图像显示的情况下，关闭快门眼镜同步，并且因此快门打开。因为此，尽管佩戴快门眼镜，用户也可以观看在时间方向上具有完全分辨率的二维图像。此外，例如，在立体图像显示的情况下，接通快门眼镜同步，并且执行快门操作。因为此，用户可以满意地观看立体图像。

此外，在HDMI接收单元321中接收的声音数据提供到声道处理单元319。在声道处理单元319中，相对于声音数据生成关于用于实现5.1声道环绕等的每个声道的声音数据SA。声音数据SA提供到扬声器，并且使得根据图像显示的声音输出可用。

[HDMI发送单元和HDMI接收单元的配置示例]

图27图示在图1的图像发送和接收系统10中机顶盒200的HDMI发送单元216和电视接收机300的HDMI接收单元321的配置示例。

在有效图像间隔(下文中适当地称为活动视频间隔)中，HDMI发送单元216在多个信道上的一个方向上发送对应于用于一个非压缩屏幕的图像的像素数据的差分信号到HDMI接收单元321。此时，有效图像间隔是从一个垂直同步信号到下一个垂直同步信号的间隔移除水平消隐间隔和垂直消隐间隔得到的间隔。此外，在水平消隐间隔或垂直消隐间隔中，HDMI发送单元216在多个信道上的一个方向上发送对应于伴随至少图像的声音数据或控制数据、辅助数据的其他项目等的差分信号到HDMI接收单元321。

作为从HDMI发送单元216和HDMI接收单元321得到的HDMI系统的传送信道，存在下面描述的传送信道。也就是说，存在TMDS信道#0到#2作为传送信道，用于同步像素数据和声音数据与像素时钟，并且因此在从HDMI发送单元216到HDMI接收单元321的一个方向上传送同步的像素数据和声音数据。此外，存在TMDS时钟信道作为用于传送像素时钟的传送信道。

HDMI发送单元216具有HDMI发送器81。发送器81例如将关于非压缩图像的像素数据转换为相应的差分信号，并且在多个信道上(三个TMDS信道#0、#1和#2)在一个方向上将转换的结果串行传送到通过HDMI线缆400连接的HDMI接收单元321。

此外，发送器81将伴随非压缩图像的声音数据、必要的控制数据、其他项目的辅助数据等转换为相应的差分信号，并且在三个TMDS信道#0、#1和#2上在一个方向上将转换的结果串行传送到HDMI接收单元321。

此外，发送器81在TMDS时钟信道上，将与在三个TMDS信道#0、#1和#2上发送的像素数据同步的像素时钟发送到通过HDMI线缆400连接的HDMI接收单元321。此时，在一个TMDS信道#i(i＝0、1、2)上在像素时钟方面在一个时钟发送10位像素数据。

在活动视频间隔中，HDMI接收单元321在多个信道上接收从HDMI发送单元216在一个方向发送并且对应于像素数据的差分信号。此外，在水平消隐间隔或垂直消隐间隔中，HDMI接收单元321在多个信道上接收从HDMI发送单元216在一个方向发送并且对应于声音数据或控制数据的差分信号。

也就是说，HDMI接收单元321具有HDMI接收器82。HDMI接收器82在TMDS信道#0、#1和#2上接收从HDMI发送单元216在一个方向上发送并且对应于像素数据的差分信号，以及对应于声音数据或控制数据的差分信号。在此情况下，这些差分信号与在TMDS时钟信道上从HDMI发送单元216发送并且因此接收的像素时钟同步。

作为用于HDMI系统的传送信道，除了上述TMDS信道#0到#2以及TMDS时钟信道外，存在称为显示数据信道(DDC)83或CEC线84的传送信道。DDC 83从未图示的并且包括在HDMI线缆400中的两条信号线形成。使用DDC 83以便HDMI发送单元216从HDMI接收单元321读取增强的扩展显示标识数据(E-EDID)。

也就是说，除了HDMI接收器81，HDMI接收单元321具有EDID只读存储器(ROM)85，其存储作为与其自身性能(配置/能力)相关的性能信息的E-EDID。例如，HDMI发送单元216根据来自未图示的控制单元(CPU)的请求，通过DDC 83从通过HDMI线缆400连接的HDMI接收单元321读取E-EDID。

HDMI发送单元216将读取的E-EDID发送到控制单元(CPU)。控制单元(CPU)可以基于E-EDID识别HDMI接收单元321的性能的设置。例如，控制单元(CPU)识别具有HDMI接收单元321的电视接收机300是否可以处理立体图像数据，并且如果可以，则识别电视接收机300是否可以支持TMDS传送数据格式等。

CEC线84由未图示的包括在HDMI线缆400中的一条信号线形成，并且使用CEC线84以便执行HDMI发送单元216和HDMI接收单元321之间的双向控制数据通信。CEC线84构成控制数据线。

此外，连接到称为热插拔检测(HPD)的管脚的线(HPD线)86包括在HDMI线缆400中。源装置可以通过使用相应的线86检测宿装置的连接。此外，HPD线86还用作构成双向通信路径的“HEAC-线”。此外，用于将来自源装置的电源提供到宿装置的线(电源线)87包括在HDMI线缆400中。此外，效用线88包括在HDMI线缆400中。效用线88还用作构成双向通信路径的“HEAC+线”。

[使用HDMI的标识信息(2Dflg)和消息信息(3Dglassoff)的发送和接收]

描述其中用HDMI接口发送和接收标识信息(2Dflg)和消息信息(3Dglassoff)的方法，标识信息(2Dflg)指示第一图像数据和第二图像数据是否是相同的二维图像数据的项目，消息信息(3Dglassoff)建议用户应该执行特定观看动作。作为这样的方法，例如，考虑其中使用消息分组(例如，HDMI厂商专用信息帧(VS_Info))的方法，对于图像数据在消隐间隔期间安排HDMI厂商专用信息帧(VS_Info)。

图28图示HDMI厂商专用信息帧的分组语法。HDMI厂商专用信息帧在CEA-861-D中定义，并且因此省略其详细描述。

指示图像数据的类型的“HDMI_Video_Format”3位信息安排在第四字节(PB4)中从第七位到第五位的空间中。根据实施例，因为总是进行3D数据传送，所以该3位信息设为“010”。此外，在存在3D数据传送的情况下，指示传送格式的“3D_Structure”4位信息安排在第五字节(PB5)中从第七位到第四位的空间中。例如，在帧封装方法(3D帧封装)的情况下，该4位信息设为“0000”。

此外，例如，“2Dflag”1位信息安排在第五字节(PB5)中的第二位。如上所述，该信息构成指示以“3D帧封装”发送的关于两个视图的图像数据的项目(也就是说，第一图像数据和第二图像数据)是否是相同的二维图像数据。“1”指示二维图像数据“左视图＝右视图”。“0”指示立体图像数据，“左视图≠右视图”。此外，即使“3D_Structure”是“1000”(并排)或“0110”(上下)，“左视图”和“右视图”是相同的可以以相同方式用“2Dflag”指示。

此外，例如，1位标识信息“3Dglassoff”安排在第五字节(PB5)中的第一位的空间。如上所述，该信息构成建议用户应该执行特定观看动作的消息信息。如果“3D_Structure”指示3D格式，那么该信息指派3D眼镜的操作给在HDMI宿侧显示的图像。“1”要求关闭3D眼镜同步，并且因此快门打开或者摘除3D眼镜。“0”要求打开3D眼镜同步，并且因此快门操作或者佩戴3D眼镜。

如上所述，在图1图示的图像发送和接收系统10中，不管图像数据是立体(3D)图像数据还是二维(2D)图像数据，总是以立体图像传送格式(例如，以“3D帧封装”)执行从机顶盒200到电视接收机300的图像数据的HDMI传送。因为此，即使存在从立体(3D)图像数据到二维(2D)图像数据或从二维(2D)图像数据到立体(3D)图像数据的切换，数字接口的格式参数的改变也不出现。因为此，装置之间连接参数的改变不出现，并且可以抑制电视接收机300中非显示间隔(静音间隔)的出现。

图29(b)图示根据实施例的情况，从机顶盒200发送到电视接收机300的图像数据从立体(3D)图像数据到二维(2D)图像数据或从二维(2D)图像数据到立体(3D)图像数据动态改变。在此情况下，传送格式也设为“3D帧封装”。

在此情况下，对于根据本技术添加的信令，当传送立体(3D)图像数据时，表达式设为“2Dflg＝0”和“3Dglassoff＝0”。此外，当传送二维(2D)图像数据时，如果应用“重新格式化”(情况A)，则表达式设为“2Dflg＝0”和“3Dglassoff＝1”，并且如果应用“标识信息发送”(情况B)，则表达式设为“2Dflg＝1”和“3Dglassoff＝1”。

此外，图29(a)图示其中以“2D普通”的传送格式传送二维(2D)图像数据的情况(现有技术中的示例)。在此情况下，当从立体(3D)图像数据到二维(2D)图像数据或从二维(2D)图像数据到立体(3D)图像数据执行切换时，数字接口的格式参数的改变出现。因为此，用于设置机顶盒200和电视接收机300之间连接的参数的改变出现，并且存在在电视接收机300中将出现非显示间隔(静音间隔)的可能性。

此外，在图1的图像发送和接收系统10中，如果二维图像数据以立体图像传送格式(例如，以“3D帧封装”)从机顶盒200传送到电视接收机300，那么应用“重新格式化”或“标识信息发送”。

如果应用“重新格式化”，那么当用于在电视接收机300中使用的立体显示方法是“偏振方法”时，通过对二维图像数据执行用于分割为偶数和奇数线的处理，获得分别必须插入左眼视图和右眼视图的插入部分中的第一图像数据和第二图像数据(参照图7)。此外，当用于在电视接收机300中使用的立体显示方法是“快门方法”时，通过对二维图像数据执行帧间内插处理获得第一图像数据和第二图像数据(参照图9)。

因为此，在此情况下，在电视接收机300中，对第一图像数据和第二图像数据执行立体显示处理，但是可能执行相对于显示能力具有完全分辨率的二维图像显示(参照图8和10)。

此外，如果应用“标识信息发送”，那么第一图像数据和第二图像数据是相同的二维图像数据，但是仅使用图像数据的项目的任一，并且因此基于标识信息(2Dflg)在电视接收机300中执行二维显示处理。因为此，同样在此情况下，可能执行相对于显示能力具有完全分辨率的二维图像显示(参照图11)。

此外，在图1的图像发送和接收系统10中，通过HDMI接口从机顶盒200发送消息信息到电视接收机300，该消息信息(3Dglassoff)建议用户应该采取特定观看动作，例如佩戴或不佩戴3D眼镜。因为此，电视接收机300的用户基于以叠加在图像上的方式在图像上显示的消息，执行3D眼镜的佩戴或不佩戴，并且因此可能容易以正确的状态观看图像。

<2.修改示例>

此外，根据上述实施例，图示了基于在电视接收机300侧的消息信息(3Dglassoff)，以叠加在图像上的方式在图像上显示消息的示例。然而，可以检查机顶盒200侧系统的描述符(组件描述符或MVC扩展描述符)，并且当3D服务改变为2D服务时，给出应该摘除3D眼镜的通知的消息可以张贴在图像上，并且因此发送到电视接收机300。在此情况下，不知道在电视接收机300侧存在2D服务，但是可能在没有3D眼镜的情况下观看据由完全分辨率的2D图像。

图30图示在这种情况下机顶盒200A的配置示例。图30图示分别给出相似参考标号的对应于图22中那些组件的组件。在机顶盒200A中，提供生成消息显示信号的消息生成单元219和将该消息显示信号叠加在图像数据上的叠加单元218。

此外，根据上述实施例，机顶盒200基于multiview_view_position SEI消息确定除了基本流外是否存在从属流(额外流)。此外，机顶盒200基于“NAL单元报头mcv扩展”的“priority_id”，确定立体图像发送模式和二维图像发送模式的哪一个存在。

即使标识信息不存在，机顶盒200也可以执行2D检测。例如，在没有从属流(额外流)的情况下确定接收的数据的基本流是2D。也就是说，存在3D还是2D基于是以构成3D的多视图流的形式提供接收的流还是从构成2D的一个视图流配置。

具体地，如图31(a)所示，通过解复用器将接收的传输流分组TS存储在视频缓冲器中，在预定时间过去之后从缓冲器读取视频流，检查NAL单元类型，并且确定流是一个类型或多个类型。如果流仅是一个类型，那么检测流是2D。

此外，例如，确定接收的数据的视频数据的项目中，从相同的数据的项目配置构成3D视图的视图数据的多个项目。具体地，如图31(b)所示，存在方法(1)检查在解码时宏块的状态是多个视图流之间的相同数据，以及方法(2)检查解码之后得到的像素数据的项目是否是视图数据的多个项目中的相同的。

此外，根据上述实施例，图示了其中关于左眼视图和右眼视图的图像数据的项目处理为立体图像数据的示例。然而，本技术可以应用于其中关于多个视图的图像数据的项目处理为立体图像数据的情况。

例如，图32示意性图示其中从关于四个视图的图像数据的项目配置立体图像数据的情况下的重新格式化(偏振方法)的处理示例。(a)在源侧(在机顶盒200侧)，二维图像数据的每条线(在该示例中，水平方向的每条线)顺序分为四组。(b)然后，使用四重写入使得每个组中的线的数目根据原始二维图像数据的线的数目，并且因此生成第一、第二、第三和第四图像数据。图像数据的四个项目以立体图像传送格式从源侧传送到宿侧(电视接收机300侧)。(c)在宿侧，可以通过对图像数据的四个项目执行立体图像显示处理生成用于显示具有完全分辨率的二维图像的显示图像数据。

此外，根据上述实施例，图示了其中容器是传输流(MPEG-2 TS)的示例。然而，本技术还可以应用于具有其中使用诸如因特网的网络进行到接收端子的分发的配置的系统。在因特网上分发的情况下，大多数时候，用MP4或不同于MP4的格式的其他容器进行分发。也就是说，作为容器，存在各种格式的容器，诸如采用作为数字广播规范的传输流(MPEG-2 TS)和在因特网上分发中使用的MP4。

此外，根据上述实施例，机顶盒200和电视接收机300之间利用HDMI数字接口的连接图示。然而，本技术当然可以以相同方式在机顶盒200和电视接收机300用相同数字接口(包括除了有线接口外的无线接口)作为HDMI数字接口连接的情况下应用。

此外，根据上述实施例，作为其中标识信息(2Dflg)或消息信息(3Dglassoff)从机顶盒200发送到电视接收机300的方法，描述了其中使用HDMI厂商专用信息帧的方法。此外，考虑其中使用活动空间并且通过从HPD线86(HEAC-线)和效用线88(HEAC+线)配置的双向通信路径的发送。

此外，本技术可以配置如下。

(1)一种发送装置，包括：图像数据获得单元，其获得图像数据；以及发送单元，其将获得的图像数据发送到外部装置，其中当获得的图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，所述发送单元以立体图像传送格式发送关于左眼视图和右眼视图的每个的图像数据，并且其中当获得的图像数据是二维图像数据时，所述发送单元以所述立体图像传送格式发送所述二维图像数据。

(2)如(1)所述的发送装置，其中当发送所述二维图像数据时，所述发送单元重新格式化所述二维图像数据，并且因此生成必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据。

(3)如(2)所述的发送装置，还包括：信息获得单元，其获得在所述外部装置中的立体显示方法的信息，其中根据获得的立体显示方法的信息，所述发送单元执行所述二维图像数据的重新格式化，并且因此获得第一图像数据和第二图像数据。

(4)如(3)所述的发送装置，其中当所述立体显示方法是偏振方法时，所述发送单元将所述二维图像数据分为偶数线中的图像数据和奇数线中的图像数据，从所述偶数线中的图像数据配置所述第一图像数据，并且从所述奇数线中的图像数据配置所述第二图像数据。

(5)如(3)所述的发送装置，其中当所述立体显示方法是快门方法时，所述发送单元从所述二维图像数据的每帧配置所述第一图像数据的每帧，并且从所述二维图像数据的每帧之间的内插帧配置所述第二图像数据的每帧。

(6)如(1)所述的发送装置，其中当发送所述二维图像数据时，所述发送单元设置所述二维图像数据为必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据，并且发送指示所述第一图像数据和第二图像数据是相同的二维图像数据的项目的标识信息。

(7)如(1)到(6)的任一所述的发送装置，其中所述发送单元发送根据以所述立体图像传送格式发送的图像数据建议用户应该执行特定观看动作的消息信息。

(8)如(1)到(7)的任一所述的发送装置，还包括：叠加单元，其将关于建议用户应该执行特定观看动作的消息的显示数据叠加在获得的图像数据上。

(9)一种发送方法，包括：获得图像数据的图像数据获得步骤；以及

将获得的图像数据发送到外部装置的发送步骤，其中在所述发送步骤中，当获得的图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，以立体图像传送格式发送关于左眼视图和右眼视图的每个的图像数据，并且其中在所述发送步骤中，当获得的图像数据是二维图像数据时，以所述立体图像传送格式发送所述二维图像数据。

(10)一种接收装置，包括：接收单元，其从外部装置接收以立体传送格式发送的第一图像数据和第二图像数据，并且其接收指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目、还是相同的二维图像数据的项目的标识信息；以及处理单元，其通过基于接收的标识信息，对接收的所述第一图像数据和第二图像数据执行处理，获得显示图像数据。

(11)如(10)所述的接收装置，其中当所述标识信息指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，所述处理单元通过处理所述第一图像数据和第二图像数据，获得用于显示所述立体图像的显示图像数据，并且其中当所述标识信息指示所述第一图像数据和第二图像数据是相同的二维图像数据的项目时，所述处理单元通过使用所述第一图像数据和第二图像数据之一获得用于显示二维图像的显示图像数据。

(12)一种接收方法，包括：接收步骤，从外部装置接收以立体传送格式发送的第一图像数据和第二图像数据，并且接收指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目、还是相同的二维图像数据的项目的标识信息；以及处理步骤，通过基于接收的标识信息，对接收的所述第一图像数据和第二图像数据执行处理，获得显示图像数据。

(13)一种接收装置，包括：接收单元，其从外部装置接收以立体传送格式发送的图像数据，并且其接收根据所述图像数据是用于显示立体图像的图像数据还是用于显示二维图像的图像数据，指示建议用户应该执行特定动作的消息的消息信息；处理单元，其通过处理接收的图像数据，获得用于显示立体图像或二维图像的显示图像数据；消息生成单元，其基于接收的消息信息，获得消息显示数据；以及叠加单元，其将获得的消息显示数据叠加在获得的显示图像数据上。

(14)如(13)所述的接收装置，还包括：控制单元，其基于接收的消息信息，控制快门眼镜的操作，其中立体显示方法是快门方法。

(15)一种接收方法，包括：接收步骤，从外部装置接收以立体传送格式发送的图像数据，并且接收根据所述图像数据是用于显示立体图像的图像数据还是用于显示二维图像的图像数据，指示建议用户应该执行特定动作的消息的消息信息；处理步骤，通过处理接收的图像数据，获得用于显示立体图像或二维图像的显示图像数据；消息生成步骤，基于接收的消息信息，获得消息显示数据；以及叠加步骤，将获得的消息显示数据叠加在获得的显示图像数据上。

(16)一种发送装置，包括：图像数据获得单元，其获得图像数据；以及发送单元，其将所述图像数据发送到外部装置，其中当获得的所述图像数据是关于构成立体图像的多个视图的图像数据的项目时，所述发送单元以立体图像传送格式发送关于所述多个视图的每个的图像数据，并且其中当获得的所述图像数据是二维图像数据时，所述发送单元以所述立体图像传送格式发送所述二维图像数据。

本技术的主要特征是不管图像数据是3D还是2D，总是以3D传送格式执行从STB 200到TV 300的图像数据的HDMI传送，并且因此当在3D和2D之间执行切换时，可以显著地减少TV 300中的非显示间隔(静音间隔)而没有格式参数的改变(参照图29)。

参考标号列表

10  图像发送和接收系统

100  广播站

110  发送数据生成单元

111  数据提取单元

111a  图像捕获介质

111b  声音输入介质

111c  数据记录介质

112  视频编码器

113  音频编码器

114  复用器

200,200A  机顶盒

201  CPU

211  数字调谐器

212  传输流缓冲器

213  解复用器

214  视频解码器

214a  NAL单元解析单元

214b  片解码单元

214c  SPS/PPS/SEI处理单元

215  音频解码器

216  HDMI发送单元

217  HDMI端子

218  叠加单元

219  消息生成单元

300  电视接收机

301  CPU

311  数字调谐器

312  传输流缓冲器(TS缓冲器)

313  解复用器

314  视频解码器

315  显示处理单元

316  消息生成单元

317  叠加单元

318  音频解码器

319  声道处理单元

320  HDMI端子

321  HDMI接收单元

Claims (16)

1.一种发送装置，包括：

图像数据获得单元，其获得图像数据；以及

发送单元，其将获得的图像数据发送到外部装置，

其中当获得的图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，所述发送单元以立体图像传送格式发送关于左眼视图和右眼视图的每个的图像数据，并且

其中当获得的图像数据是二维图像数据时，所述发送单元以所述立体图像传送格式发送所述二维图像数据。

2.如权利要求1所述的发送装置，

其中当发送所述二维图像数据时，所述发送单元重新格式化所述二维图像数据，并且因此生成必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据。

3.如权利要求2所述的发送装置，还包括：

信息获得单元，其获得在所述外部装置中的立体显示方法的信息，

其中根据获得的立体显示方法的信息，所述发送单元执行所述二维图像数据的重新格式化，并且因此获得第一图像数据和第二图像数据。

4.如权利要求3所述的发送装置，

其中当所述立体显示方法是偏振方法时，所述发送单元将所述二维图像数据分为偶数线中的图像数据和奇数线中的图像数据，从所述偶数线中的图像数据配置所述第一图像数据，并且从所述奇数线中的图像数据配置所述第二图像数据。

5.如权利要求3所述的发送装置，

其中当所述立体显示方法是快门方法时，所述发送单元从所述二维图像数据的每帧配置所述第一图像数据的每帧，并且从所述二维图像数据的每帧之间的内插帧配置所述第二图像数据的每帧。

6.如权利要求1所述的发送装置，

其中当发送所述二维图像数据时，所述发送单元设置所述二维图像数据为必须分别插入关于左眼视图和右眼视图的图像数据的项目的插入部分的第一图像数据和第二图像数据，并且发送指示所述第一图像数据和第二图像数据是相同的二维图像数据的项目的标识信息。

7.如权利要求1所述的发送装置，

其中所述发送单元还发送根据以所述立体图像传送格式发送的图像数据建议用户应该执行特定观看动作的消息信息。

8.如权利要求1所述的发送装置，还包括：

叠加单元，其将关于建议用户应该执行特定观看动作的消息的显示数据叠加在获得的图像数据上。

9.一种发送方法，包括：

获得图像数据的图像数据获得步骤；以及

将获得的图像数据发送到外部装置的发送步骤，

其中在所述发送步骤中，当获得的图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，以立体图像传送格式发送关于左眼视图和右眼视图的每个的图像数据，并且

其中在所述发送步骤中，当获得的图像数据是二维图像数据时，以所述立体图像传送格式发送所述二维图像数据。

10.一种接收装置，包括：

接收单元，其从外部装置接收以立体传送格式发送的第一图像数据和第二图像数据，并且其接收指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目，还是相同的二维图像数据的项目的标识信息；以及

处理单元，其通过基于接收的标识信息，对接收的所述第一图像数据和第二图像数据执行处理，获得显示图像数据。

11.如权利要求10所述的接收装置，

其中当所述标识信息指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目时，所述处理单元通过处理所述第一图像数据和第二图像数据，获得用于显示所述立体图像的显示图像数据，并且

其中当所述标识信息指示所述第一图像数据和第二图像数据是相同的二维图像数据的项目时，所述处理单元通过使用所述第一图像数据和第二图像数据之一获得用于显示二维图像的显示图像数据。

12.一种接收方法，包括：

接收步骤，从外部装置接收以立体传送格式发送的第一图像数据和第二图像数据，并且接收指示所述第一图像数据和第二图像数据是关于构成立体图像的左眼视图和右眼视图的图像数据的项目，还是相同的二维图像数据的项目的标识信息；以及

处理步骤，通过基于接收的标识信息，对接收的所述第一图像数据和第二图像数据执行处理，获得显示图像数据。

13.一种接收装置，包括：

接收单元，其从外部装置接收以立体传送格式发送的图像数据，并且其接收根据所述图像数据是用于显示立体图像的图像数据还是用于显示二维图像的图像数据，指示建议用户应该执行特定动作的消息的消息信息；

处理单元，其通过处理接收的图像数据，获得用于显示立体图像或二维图像的显示图像数据；

消息生成单元，其基于接收的消息信息，获得消息显示数据；以及

叠加单元，其将获得的消息显示数据叠加在获得的显示图像数据上。

14.如权利要求13所述的接收装置，还包括：

控制单元，其基于接收的消息信息，控制快门眼镜的操作，

其中立体显示方法是快门方法。

15.一种接收方法，包括：

接收步骤，从外部装置接收以立体传送格式发送的图像数据，并且接收根据所述图像数据是用于显示立体图像的图像数据还是用于显示二维图像的图像数据，指示建议用户应该执行特定动作的消息的消息信息；

处理步骤，通过处理接收的图像数据，获得用于显示立体图像或二维图像的显示图像数据；

消息生成步骤，基于接收的消息信息，获得消息显示数据；以及

叠加步骤，将获得的消息显示数据叠加在获得的显示图像数据上。

16.一种发送装置，包括：

图像数据获得单元，其获得图像数据；以及

发送单元，其将所述图像数据发送到外部装置，

其中当获得的所述图像数据是关于构成立体图像的多个视图的图像数据的项目时，所述发送单元以立体图像传送格式发送关于所述多个视图的每个的图像数据，并且

其中当获得的所述图像数据是二维图像数据时，所述发送单元以所述立体图像传送格式发送所述二维图像数据。