CN101006733A - 图像数据显示装置 - Google Patents

Abstract

控制部(103)根据显示图像的位置信息，来选择对由解码部(102)解码后的三维图像数据进行立体显示(三维显示模式)还是进行平面显示(二维显示模式)，并且通知给显示部(104)作为显示模式。具体而言，对所输入的位置信息＝显示地址进行监视，当没有时间上的变化时，即图像数据的显示位置没有变化时，选择三维显示模式作为显示模式。另一方面，当有时间上有变化时，即因滚动而图像数据的显示位置变化时，选择二维显示模式作为显示模式。由此，提供一种当三维图像数据的滚动显示时在显示器上有效地显示图像数据的图像数据显示装置。

Description

图像数据显示装置

技术领域

本发明涉及将三维图像编码数据再生且显示在显示器上的技术，更详细地说涉及当滚动显示三维图像数据时，将图像数据有效地显示在显示器上的图像数据显示装置。

背景技术

以往提出了显示三维图像的各种方法。然而其中一般采用的是利用两眼视差的称作“两眼式”的方法。即，通过准备具有两眼视差的左眼用图像和右眼用图像，并且分别向左右眼独立地投射，由此进行立体视。

图23是用于说明作为该两眼式的一种代表方式的“时间分割方式”的概念图。

如图23所示，在时间分割方式中，将左眼用图像和右眼用图像配置为垂直隔着一根线而交替并列的形状，并且将表示左眼用图像的域(field)和表示右眼用图像的域交替切换并显示。左眼用图像和右眼用图像与通常的二维显示时相比，垂直分辨率变为一半。观察者佩带以与显示器的切换周期同步的方式开闭的快门式的眼镜。这里使用的快门当显示着左眼用图像时左眼侧打开而右眼侧关闭，当显示着右眼用图像时左眼侧关闭而右眼侧打开。通过这种方式，仅用左眼观察左眼用图像，而仅用右眼来观察右眼用图像，从而进行立体视。

图24是用于说明作为两眼式的另一种代表方式的“视差栅栏(parallexbarrier)方式”的概念图。图24(a)是表示产生视差的原理的图。另一方面，图24(b)是表示以视差栅栏方式显示的画面的图。

将如图24(b)所示的左眼用图像和右眼用图像这一对以条纹状并列后的图像，如图24(a)所示那样显示在图像显示面板2401，并且以与该图像相对应的间隔在其前面放置具有狭缝(slit)的所谓的视差栅栏2402，由此仅用左眼2403观察左眼用图像，而仅用右眼2404观察右眼用图像，从而进行立体视。

不局限于“时间分割方式”、“视差栅栏方式”而一般对三维图像进行立体视的情况下，根据所显示的图像内容或者显示方法而进行立体视的容易度不同。例如，如果为动态图像数据，则在变动激烈的图像、或者快进(fast-forwarding)等的特殊再生时，一个帧的显示时间变短，因此虽然也有个人之差，但有时因立体视而内容的掌握变得困难。在后述的专利文献1中所公开的“立体动态图像压缩编码装置和立体动态图像解码再生装置”中，举出了在三维图像的再生中，高速再生时显示为二维图像的示例。

对于上述立体动态图像压缩编码装置和立体动态图像解码再生装置中的高速再生时的动作进行简单的说明。

在编码装置中，首先根据由照相机等输入的左眼用图像数据和右眼用图像数据来制作参考图像数据(reference image data)。接下来，求得所制作的参考图像数据与左眼用图像数据和右眼用图像数据之间的差分，并且分别输出为左眼用差分数据和右眼用差分数据。对这些参考图像数据、左眼用差分数据和右眼用差分数据进行压缩编码并多路复用，由此制作三维图像编码数据。

在解码再生装置中，首先将所压缩的三维图像编码数据分离为参考图像数据、左眼用差分数据和右眼用差分数据。通常再生时，对参考图像数据、左眼用差分数据和右眼用差分数据均进行解码，并且用参考图像数据和左眼用差分数据来制作左眼用图像、用参考图像数据和右眼用差分数据来制作右眼用图像数据。利用这些左眼用图像数据和右眼用图像数据再生为三维图像。另一方面，在高速再生时仅对参考图像数据进行解码，来再生其参考图像作为二维图像。

但是，虽然也适用于静态图像数据的情况，但是在图像数据的分辨率大于显示器的分辨率时，在该状态下只能显示图像数据的一部分。因此，需要用于显示图像数据的期望区域的滚动(scroll)。例如在显示如地图图像这种空间分辨率非常大的图像时，滚动功能是必须的。最近，在携带电话、PDA等中也具备用于图像显示的小型显示器，而在这种移动设备中显示图像时也需要滚动功能。

专利文献1：特开平7-327242号公报

但是，存在下述问题，即在将三维图像数据以三维显示状态下显示在显示器，并进行滚动显示时，尤其随着滚动速度的增大，画面的变动相对变快，因此进行立体视变得困难，而且掌握所显示的图像内容变得困难。

另外，存在下述问题，即以往构成三维图像数据时，如图25所示那样整个图像(该示例中1280像素×960像素)由一个左目用图像数据2501和一个右目用图像数据2502构成，因此当处理空间分辨率大的图像时，需要非常大的图像存储器等的资源。

发明内容

本发明是为了解决上述问题而提出的，其目的在于提供一种当三维图像数据的滚动显示时，在显示器上有效地显示图像数据的图像数据显示装置。

本发明为一种图像数据显示装置，可切换所输入的三维图像数据的立体显示与平面显示，其特征在于，上述图像数据显示装置具备：控制机构，其对三维显示模式和二维显示模式的选择进行控制；图像转换机构，其根据上述控制机构的显示模式的选择，将三维图像数据转换为二维图像数据；和显示机构，其根据上述控制机构的显示模式的选择，可切换三维显示与二维显示并进行显示，上述控制机构在三维图像数据的显示位置变化时，选择二维显示模式。

本发明为一种图像数据显示装置，可切换所输入的三维图像数据的立体显示和平面显示，上述图像数据显示装置具备：控制机构，其对三维显示模式和二维显示模式的选择进行控制；图像转换机构，其根据上述控制机构的显示模式的选择，将三维图像数据转换为二维图像数据；和显示机构，其根据上述控制机构的显示模式的选择，可切换三维显示和二维显示而进行显示，上述控制机构在三维图像数据的显示位置以规定的速度以上发生变化时，选择二维显示模式。

这里，上述图像转换机构在所述控制机构选择了二维显示模式时，从上述三维图像数据中所包括的多个视点图像数据中选择一个视点图像数据，并转换为二维图像数据。

另外，上述三维图像数据由M×N个(M≥1、N≥1)的多个块构成，并且所述块包括多个视点图像数据。

(发明效果)

根据本发明，当三维图像数据的显示位置变化时，例如在三维图像数据的滚动显示时、或三维动态图像移动时，由于采用了使控制机构切换到二维显示模式，并将三维图像转换为二维显示图像数据来进行显示的构成，因此用于不会进行任何操作，显示图像在移动时，不需要对显示图像进行立体视，从而能够容易地掌握内容。

附图说明

图1是表示本发明的第一实施方式中的图像数据显示装置的概略构成的功能框图。

图2是表示蓄积部中所蓄积的整个三维图像的图。

图3是表示三维图像编码数据的构成的图。

图4是详细表示三维图像编码数据中所包括的三维显示控制信息对象和图像信息对象的图。

图5是表示解码部的内部构成的框图。

图6是表示由图像解码部解码后的解码图像数据、和由重新排列部输出的三维图像数据的图。

图7是用于说明重新排列部的动作的图。

图8是表示蓄积部中所蓄积的整个三维图像的图。

图9是表示帧存储器的初始状态的图。

图10是表示从初始状态开始在左下滚动时的帧存储器的状态的图。

图11是表示从初始状态开始在右下滚动时的帧存储器的状态的图。

图12是表示更新后的帧存储器的状态的图。

图13是表示显示部的内部构成的框图。

图14是表示输入到图像转换部的三维图像数据的图。

图15是表示由图像转换部转换后的二维图像数据的图。

图16是表示输入到图像转换部的三维图像数据的图。

图17是表示本发明的第二实施方式中的图像数据显示装置的概略构成的功能框图。

图18是表示解码部的内部构成的框图。

图19是表示显示用图像生成部的内部构成的框图。

图20是表示帧存储器的初始状态的图。

图21是表示从初始状态开始在左下滚动时的帧存储器的状态的图。

图22是表示从初始状态开始在左下滚动时的帧存储器的状态的图。

图23是用于说明基于时间分割方式的三维图像显示的概念图。

图24是用于说明基于视差栅栏方式的三维图像显示的概念图。

图25是表示现有的三维图像数据的构成的图。

符号说明：101-蓄积部；102-解码部；103-控制部；104-显示部；301-报头信息对象；302-三维显示控制信息对象；303-图像信息对象；501-数据读出部；502-三维显示控制信息解析部；503-图像解码部；504-重新排列部；505-存储控制器；506-帧存储器；801-原点；901-显示图像区域；1001-显示图像区域；1101-显示图像区域；1301-开关；1301A-接点A；1301B-接点B；1302-图像转换部；1303-显示器；1701-解码部；1702-显示用图像生成部；1703-显示部；1901-存储控制器；1902-开关；1902A-接点A；1902B-接点B；1903-重新排列部；1904-图像转换部；2001-显示图像区域；2101-显示图像区域；2201-区域；2202-区域；2203-区域；2204-区域；2401-图像显示面板；2402-视差栅栏；2403-左眼；2404-右眼；2501-左目用图像数据；2502-右目用图像数据；2503-显示区域；2504-区域；2505-区域。

具体实施方式

以下，结合附图说明本发明的实施方式。此外，在附图中对同一部分赋予同一符号，并且不重复对其说明。

(第一实施方式)

图1是表示本发明的第一实施方式中的图像数据显示装置的概略构成的功能框图。

本实施方式中的图像数据显示装置由蓄积部101、解码部102、控制部103和显示部104构成。

蓄积部101由记录有三维图像编码数据的记录介质、和用于对记录在该记录介质中的三维图像编码数据的读出进行控制的控制电路等构成。记录介质也可为SD卡、压缩闪存(compact flash)(注册商标)卡等半导体媒介、CD、DVD等磁盘媒介、或者硬盘等任意器件。

解码部102根据显示图像的位置信息，对从蓄积部101读出的三维图像编码数据进行解码，并且将解码后的三维图像数据输出到显示部104。此外，显示图像的位置信息是指针对整个三维图像，用于特定要显示的图像位置的信息，设表示了地址等。

控制部103根据显示图像的位置信息，选择对由解码部102解码后的三维图像数据进行立体显示(三维显示模式)还是进行平面显示(二维显示模式)，并且通知给显示部104作为显示模式。

显示部104具备显示器，该显示器通过来自外部的输入可切换三维显示模式/二维显示模式，显示部104可按照从控制部103通知的显示模式，将解码后的三维图像数据以立体或平面方式显示在显示器。此外，设本实施方式中的立体显示的方式使用“视差栅栏方式”。

首先，利用图2、图3和图4，对蓄积在蓄积部101中的三维图像编码数据进行说明。

图2是表示蓄积在蓄积部101中的整个三维图像(静态图像)的图。由1280像素×960像素构成的整个三维图像被分割为由160像素×120像素构成的8×8＝64个块(block)，并且采用以块单位将左目用图像数据和右目用图像数据左右配置的构成。将各块的图像数据利用JPEG压缩方式进行编码后，与配置信息(左右)等一起构成后述的三维图像编码数据，并且蓄积在蓄积部101中。此外，作为分割单位的“160像素×120像素”始终是示例，并不局限于此。

图3是表示三维图像编码数据的构成的图。三维图像编码数据由报头信息对象301、三维显示控制信息对象302和图像信息对象303构成。这里采用了在三维显示控制信息对象302之后继有多个图像信息对象303的构成，当然也可为集中的一个图像信息对象，而没被分割为多个。

图4是详细表示三维图像编码数据中所包括的三维显示控制信息对象302和图像信息对象303的图。

图4(a)是详细表示三维显示控制信息对象302的图。三维显示控制信息对象302中保存有图像配置信息、取样信息和二维选择图像信息作为对象固有ID(Object ID＝0×12)、整个对象的大小(Object Size＝256byte)和三维显示控制信息。

图像配置信息是表示怎样配置由多个视点摄影的图像数据的信息，以(水平方向的视点数、垂直方向的视点数)来表示。例如，由两个视点摄影的图像数据在水平(左右)配置的情况下，图像配置信息＝(2、1)。在垂直(上下)配置的情况下，图像配置信息＝(1、2)。

取样信息表示各个视点图像数据的水平方向和垂直方向的取样比，以(水平方向的取样比、垂直方向的取样比)来表示。例如，在采样为仅仅使水平方向的分辨率为1/2的情况下，取样信息＝(1/2、1)。在采样为仅仅使垂直方向的分辨率为1/2的情况下，取样比信息＝(1、1/2)。在本实施方式中，利用各个的视点图像数据显示在视差栅栏方式的三维显示器时，为了调整图像纵横比(aspect ratio)而使用取样信息。此外，根据取样信息除了纵横比之外还求得相对原图像数据(取样之前的图像数据)的缩小率，但在本实施方式中没有特别使用该信息。

另外，二维选择图像信息是用于在由多个视点摄影的图像数据之中选择一个视点的图像数据的信息，并且二维选择图像信息＝(水平方向的视点编号、垂直方向的视点编号)。例如，由在水平(左右)配置(图像配置信息＝(2，1))的两个视点摄影的图像数据之中选择左侧的图像数据时，二维选择图像信息＝(1、1)。同样，选择右侧的图像数据时，二维选择图像信息＝(2、1)。

在本实施方式中，图像配置信息＝(2、1)，取样信息＝(1/2、1)，二维选择图像信息＝(1、1)。

图4(b)是详细表示图像信息对象303的图。图像信息对象303中保存有JPEG压缩数据作为对象固有ID(Object ID＝0×13)、整个对象的大小(Object Size＝20480byte)和编码数据。

接下来，对解码部102的动作详细说明。

图5是表示解码部102的内部构成的框图。解码部102由数据读出部501、三维显示控制信息解析部502、图像解码部503、重新排列部504、存储控制器505和帧存储器506构成。

数据读出部501根据显示图像的位置信息，从蓄积部101读出三维图像编码数据，并且进行三维图像编码数据中所包括的各对象的分离。具体而言，对所读出的三维图像编码数据的报头信息对象301进行解析，来判定接着报头信息对象301的对象种类。接下来，通过参照各对象的ObjectID，当Object ID为0×12时向三维显示控制信息解析部502发送，当ObjectID为0×13时向图像解码部503发送，由此进行三维图像编码数据的分离。

三维显示控制信息解析部502中，对从数据读出部501发送过来的三维显示控制信息对象302进行解析，并且输出图像配置信息、取样信息和二维选择图像信息作为三维显示控制信息。这里输出：表示两个视点图像数据在水平(左右)配置的图像配置信息＝(2、1)；表示只有水平方向的分辨率为1/2的取样信息＝(1/2、1)；和表示在选择一个视点图像数据时选择左侧的视点图像数据的二维选择图像信息＝(1、1)。

图像解码部503中，对从数据读出部501中发送过来的图像信息对象303进行解析，并且进行保存在对象内的JPEG压缩数据的解码处理后，将解码图像数据输出到重新排列部。

图6是表示由图像解码部503解码后的解码图像数据(图6(a))和由重新排列部504输出的三维图像数据(图6(b))的图。

如由三维显示控制信息解析部502解析后那样，由图像解码部503解码后的解码图像数据采用下述构成，即将左目用图像数据和右目用图像数据分别按照水平方向的分辨率成为1/2的方式采样，并配置在左右。

图7是用于说明重新排列部504的动作的图。重新排列部504中如图7(a)所示那样首先将解码图像数据分割为条纹状。然后将分割后的左眼用图像数据L1、L2、L3…和右眼用图像数据R1、R2、R3…重新排列为如L1、R1、L2、R2、L3、R3那样使左眼用图像数据与右眼用图像数据交替配置(图7(b))。其结果，可得图6(b)所示的三维图像数据，从而能够在视差栅栏方式的三维显示器中正确地立体显示。

参照图8、图9、图10、图11和图12，对存储控制器505和帧存储器506进行说明。

图8是表示蓄积在蓄积部101中的整个三维图像的图。如之前说明那样，由1280像素×960像素构成的整个三维图像被分割为160像素×120像素的块。这里以三维图像的左上作为原点801，并设为在水平方向取X坐标，在垂直方向取Y坐标。另外，从原点801开始计算，将水平方向的第i个(i＝0，1，2，…)、垂直方向的第j个(j＝0，1，2，…)块设为Bij(图8中省略一部分的记载)。

帧存储器506是用于预先暂时保持由重新排列部504输出的完成解码的三维图像数据的存储器，能够保持9个块量的三维图像数据。例如，能够保持图8中的区域(由块B22、块B32、块B42、块B23、块B33、块B43、块B24、块B34和块B44构成的区域)、或者区域B(由块B33、块B43、块B53、块B34、块B44、块B54、块B35、块B45和块B55构成的区域)等。此时，区域A的左上(块B22的左上)的坐标为(320、240)，区域B的左上(块B33的左上)的坐标为(480、360)。

存储控制器505将由重新排列部504重新排列后的三维图像数据写入到帧存储器506，并且从帧存储器506读出应当显示在显示器上的三维图像数据后进行输出。另外，存储控制器505进行下述位置信息的管理，即表示整个三维图像之中的哪个部分保持在帧存储器506中的位置信息、和表示保持在帧存储器506中的三维图像数据的哪个部分显示在显示器上的位置信息。在本实施方式中，这两种位置信息之中将前者称作基准地址(base address)，将后者称作显示偏置。

图9是表示帧存储器506的初始状态的图。图8中的块B33被选择为显示图像区域901，并且加上其周围8块总共9块(块B22、块B32、块B42、块B23、块B33、块B43、块B24、块B34和块B44)的三维图像数据被保存在帧存储器506。此时，存储控制器505保持：作为基准地址保存在帧存储器中的三维图像数据的开头地址也就是块B22的开头地址(320、240)；和作为显示偏置地址图9中以箭头表示的距基准地址的偏置(160、120)。

此外，这里使显示图像区域901和分割块的大小设为相同，但是并不限定于此，即使不同也同样可适用。

图10是表示从初始状态(图9)开始在左下滚动时的帧存储器506的状态的图。

帧存储器506中与初始状态同样保存有块B22、块B32、块B42、块B23、块B33、块B43、块B24、块B34和块B44的三维图像数据，并且基准地址为(320、240)，表示显示图像区域1001的显示偏置为(70、190)。

这样，当显示图像区域1001未达到帧存储器506的边界时，换言之，还可以在帧存储器506内上下左右任何方向可滚动时，帧存储器506的内容和基准地址不被更新，而只有显示偏置被更新。

图11(a)是表示从初始状态(图9)开始在右下滚动时的帧存储器506的状态的图。

帧存储器506中与初始状态同样，保存有块B22、块B32、块B42、块B23、块B33、块B43、块B24、块B34和块B44的三维图像数据，并且基准地址为(320、240)，表示显示图像区域1101的显示偏置为(320、240)。与图10不同点在于显示图像区域1101与帧存储器506的边界重叠。在该情况下还可向上方向和向左方向滚动，但是在右方向和下方向不存在完成解码的三维图像数据，所以这状态下不能滚动。因此，进行帧存储器506、基准地址和显示偏置的更新。

或者，如图11(b)所示，设定小于帧存储器506的以斜线部分表示的区域1102，在显示图像区域1101在区域1102的内侧移动时，不进行帧存储器506、基准地址和显示偏置的更新，而在显示图像区域1101达到区域1102的边界时，进行帧存储器506、基准地址和显示偏置的更新也可。

图12是表示更新后的帧存储器506的状态的图。

帧存储器506中保存有以对应于显示图像区域1101的块B44为中心的9块(块B33、块B43、块B53、块B34、块B44、块B54、块B35、块B45和块B55)的三维图像数据。另外，将基准地址更新为B33的开头地址(480、360)，将显示偏置更新为(160、120)。

当更新帧存储器506的内容时，基本上从数据读出部501重新读出对应块的三维图像编码数据，并且由图像解码部503、重新排列部504解码后，通过存储控制器505将三维图像数据写入到帧存储器506中。

但是，以上说明过的示例中，9个块之中针对块B33、块B43、块B34和块B44这四个块已经完成解码，并且只不过改变帧存储器506内的保存位置而已。因此，对这些已完成解码的块不是再次进行解码处理，而是通过存储控制器505将已经解码的三维图像数据在帧存储器506内进行复制即可。或者，另外准备用于表示9个块的各自的显示位置(显示偏置等)的表格，并且对保存位置有变化的块变更对应表格内的值，由此进行管理即可。例如，也可对块B44仅仅将对应表格内的显示偏置由(320、240)变更为(160、120)。同样，对块B33将对应表格内的显示偏置由(160、120)变更为(0、0)。

接下来，对控制部103的动作进行详细说明。

控制部103根据显示图像的位置信息，选择对由解码部102解码后的三维图像数据进行立体显示(三维显示模式)还是进行平面显示(二维显示模式)，并且作为显示模式通知给显示部104。具体而言，监视所输入的位置信息＝显示地址，并且当在时间上无变化时，即图像数据的显示位置无变化时，选择三维显示模式作为显示模式。另一方面，当在时间上有变化时，即因滚动而图像数据的显示位置发生变化时，选择二维显示模式作为显示模式。

或者，也可设置规定的阈值，当位置信息的变化比例在阈值以下时，即慢慢滚动时，选择三维显示模式作为显示模式，当阈值以上时，即以较快速度滚动时，选择二维显示模式作为显示模式。

接下来，对显示部104的动作进行详细说明。

图13是表示显示部104的内部构成的框图。显示部104由开关1301、接点1301A、接点1301B、图像转换部1302和显示器1303构成。

到显示部104的输入为由控制部103通知的显示模式(三维显示模式/二维显示模式)、作为解码部102的输出的三维显示控制信息和三维图像数据。

当显示模式为三维显示模式时，开关1301与接点1301A连接，并且在显示器1303立体显示三维图像数据作为三维图像。

当显示模式为二维显示模式时，开关1301与接点1301B连接，并且有图像转换部1302将三维图像数据转换为二维图像数据之后，在显示器1303上显示为二维图像。

图像转换部1302中根据三维显示控制信息，进行由三维图像数据到二维图像数据的转换。利用图14和图15对图像转换部1302的动作进行说明。图14是输入到图像转换部1302的三维图像数据，按照L1、R1、L2、R2、L3、R3顺序，将左目用图像数据和右目用图像数据交替地并列配置在条纹上。图像转换部1302中首先利用三维显示控制信息中所包括的图像配置信息＝(2、1)，从三维图像数据中选择左目用图像数据或右目用图像数据，并提取。然后，利用三维显示控制信息中所包括的取样信息＝(1/2、1)，进行分辨率的转换。

图15是表示由图像转换部1302转换后的二维图像数据的图。图15(a)表示当选择了左目用图像数据时的输出图像，图15(b)表示当选择了右目用图像数据时的输出图像。图15(a)或图15(b)所示的二维图像数据在显示器1303上显示为二维图像。

这里，对于选择左目用图像数据还是选择右目用图像数据，也可使用三维显示控制信息的二维选择图像信息，也可始终提取左目用图像数据等固定地进行选择。

另外，作为到显示部104的输入，设如图14所示那样各视点图像数据从左开始以L1、R1、L2、R2、L3、R3的顺序排列，但是也有时按照滚动方法如图16所示那样各视点图像数据从左开始以R1、L2、R2、L3、R3、L4的顺序排列。例如，当提取左目用图像数据时，针对在前者(图14)的情况下为从左开始计算奇数号(第一个、第三个、第五个)条纹，在后者(图16)的情况下从左开始计算偶数号(第二个、第四个、第六个)条纹，从而提取的位置不同。这是将滚动单位作为像素单位而引起的，否则也可进行限制以使滚动的单位为视点数的整数倍。其结果，到显示部104的输入被限制在图14所示的形式的图像数据，从而能够简化图像转换部1302的处理，并且能够防止视点图像数据提取中的左目用图像数据和右目用图像数据的反转。

在本实施方式的情况下，由于水平方向的视点数为2，因此通过使水平方向的滚动单位设为2的整数倍，由此能够简化处理。

(第二实施方式)

接下来，对本发明的第二实施方式中的图像数据显示装置进行说明。

图17是表示本发明的第二实施方式中的图像数据显示装置的概略构成的功能框图。

本实施方式中的图像数据显示装置由蓄积部101、解码部1701、控制部103、显示用图像生成部1702和显示部1703构成。

蓄积部101与第一实施方式同样，由记录有三维图像编码数据的记录介质、和用于对记录在记录介质中的三维图像编码数据的读出进行控制的控制电路等构成。

解码部1701根据显示图像的位置信息，对从蓄积部101读出的三维图像编码数据进行解码，并且将解码后的三维图像数据输出到显示用图像生成部1702。

控制部103与第一实施方式同样，根据显示图像的位置信息，选择对由解码部1701解码后的三维图像数据进行立体显示(三维显示模式)还是进行平面显示(二维显示模式)，并且通知给显示用图像生成部1702和显示部1703作为显示模式。

显示用图像生成部1702按照从控制部103通知的显示模式，根据由解码部1701解码后的三维图像数据，生成在显示部1703上可显示的图像数据并进行输出。

显示部1703是通过来自外部的输入可切换三维显示模式/二维显示模式的显示器，按照从控制部103通知的显示模式，能够在显示器上立体或平面显示解码后的三维图像数据。此外，设本实施方式中的立体显示的方式采用“视差栅栏方式”。

此外，对蓄积部101和控制部103而言与第一实施方式同样，因此省略详细说明。

首先，对解码部1701的动作进行详细说明。图18是表示解码部1701的内部构成的框图。解码部1701由数据读出部501、三维显示控制信息解析部502和图像解码部503构成。

数据读出部501根据显示图像的位置信息，从蓄积部101读出三维图像编码数据，并且进行三维图像编码数据中所包括的各对象的分离。

三维显示控制信息解析部502对从数据读出部501发送过来的三维显示控制信息对象302进行解析，并且输出图像配置信息、取样信息和二维选择图像信息作为三维显示控制信息。这里与第一实施方式同样，设输出：表示两个试点图像数据在水平(左右)配置的图像配置信息＝(2、1)；表示只有水平方向的分辨率为1/2的取样信息＝(1/2、1)；和表示在选择一个视点的图像数据时选择左侧的视点图像数据的二维选择图像信息＝(1、1)。

图像解码部503对从数据读出部501发送过来的图像信息对象303进行解析，并且进行保存在对象内的JPEG压缩数据的解码处理后，输出解码图像数据。这里，如图6(a)所示，输出左目用图像数据和右目用图像数据左右配置的构成的图像数据。

接下来，对显示用图像生成部1702的动作进行详细说明。

图19是表示显示用图像生成部1702的内部构成的框图。显示用图像生成部1702由存储控制器1901、帧存储器506、开关1902、重新排列部1903和图像转换部1904构成。

蓄积部101中与第一实施方式同样，如图8所示那样将整个三维图像分割为160像素×120像素的块，并且按照每块进行编码后蓄积。

帧存储器506是用于预先暂时保持由解码部1701输出的完成解码的三维图像数据的存储器，与第一实施方式同样能够保持9个块量的数据。存储控制器1901将由解码部1701解码后的三维图像数据写入到帧存储器506，并且将显示所需的一个或多个块的三维图像数据从帧存储器506中读出并进行输出。

图20是表示帧存储器506的初始状态的图。将图8中块B33选择为显示图像区域2001，并且在帧存储器506中保存加上其周围8块总共9块(块B22、块B32、块B42、块B23、块B33、块B43、块B24、块B34和块B44)的三维图像数据。第一实施方式中，保存有三维图像数据，该三维图像数据重新排列为在视差栅栏方式的显示器上可按照每块进行显示的形式(图6(b)或图7(b))，但是在本实施方式中按照每块将左目用图像数据和右目用图像数据左右配置的形式(图6(a)或图7(a))来进行保存，这一点与第一实施方式不同。

当从控制部103输入的显示模式为三维显示模式时，开关1902与接点1902A连接，并且从存储控制器1901输入的三维图像数据输入到重新排列部1903。另一方面，当显示模式为二维显示模式时，开关1902与接点1902B连接，并且三维图像数据输入到图像转换部1904。

重新排列部1903根据三维显示控制信息、位置信息和从存储控制器1901输入的一个或多个块的三维图像数据，将显示位置的三维图像数据进行重新排列为在三维显示模式下即在视差栅栏方式的三维显示器上可进行显示的形式(图6(b)或图7(b))，并且输出为显示图像数据。

图像转换部1904根据三维显示控制信息、位置信息和从存储控制器1901输入的一个或多个块的三维图像数据，将显示位置的三维图像数据转换为能够以二维显示模式进行显示的形式(例如，图15(a)、图15(b)等)的图像数据，并且输出为显示图像数据。转换方法不限定于图15所示的转换方法，也可用图14中的L1、L2、L3来制作内插(interpolate)图像L1’(用L1和L2制作)、L2’(用L2和L3制作)、L3’(用L3和L4(右邻块的图像数据)制作)，并且将L1、L1’、L2、L2’、L3、L3’输出为显示图像数据。

这里，参照图20、图21，简单说明显示用图像生成部1702的动作。

在帧存储器506为初始状态(图20)时，由于显示图像区域2001＝分割块B33，所以存储控制器1901从帧存储器506中仅仅读出块B33并且输出。

当显示模式为三维显示模式时，通过开关1902与接点1902A连接，将所读出的块B33的三维图像数据输入到重新排列部1903。重新排列部1903根据三维显示控制信息，进行由图7(a)到图7(b)的形式的重新排列，并输出到显示部1703。在该情况下，重新排列部1903的动作与第一实施方式中的重新排列部504的动作相同。

当显示模式为二维显示模式时，通过开关1902与接点1902B连接，将所读出的块B33的三维图像数据输入到图像转换部1904。图像转换部1904根据三维显示控制信息，转换为图15(a)或图15(b)的形式，并且输出到显示部1703。在该情况下，图像转换部1904的动作与第一实施方式中的图像转换部1302的动作相同。

图21是表示从初始状态(图20)开始在左下滚动时的帧存储器506状态的图。显示图像区域2101由于横跨多个分割块(块B23、块B33、块B24和块B34)，因此存储控制器1901从帧存储器506中读出这些四个块并进行输出。

但显示模式为三维显示模式时，通过开关1902与接点1902A连接，将所读出的四个块的三维图像数据输入到重新排列部1903。重新排列部1903根据位置信息和三维显示控制信息，重新排列为在视差栅栏方式的显示器上可进行显示的图7(b)的形式，但是此时也可暂且将四个所有的块重新排列为图7(b)的形式，然后切掉(cut out)对应显示图像区域2101的图像数据，并输出到显示部1703，或者也可只对必要的区域进行重新排列。例如，如本实施方式那样当左目用图像数据和右目用图像数据左右并列配置时，只需要位于显示图像区域2101的左右的图像数据的一部分，而不需要位于上下的图像数据，因此能够简化处理。图22是对图21中的块23、块33、块24和块34的部分进行放大的图。为了显示与显示图像区域2101对应的图像数据，作为左目用图像数据所需的区域为由斜线部分表示的区域2201和区域2203，而作为右目用图像数据所需的区域为区域2202和区域2204。

当显示模式为二维显示模式时，通过开关1902与接点1902B连接，将所读出的四个块的三维图像数据输入到图像转换部1904。图像转换部1904根据位置信息和三维显示控制信息，进行重新排列为图15(a)或图15(b)的形式，此时，也可暂且进行四个所有块的转换，然后切掉与显示图像区域2101对应的图像数据，并且输出到显示部1703，或也可只对所需的区域进行转换。例如，如本实施方式那样当左目用图像数据和右目用图像数据左右并列配置时，只需要位于显示图像区域2101的左右的图像数据的一部分，而不需要位于上下的图像数据，所以能够简化处理。在该情况下也同样需要图22中的区域2201～2204。或者，在二维显示模式时已知将显示的图像数据作为左目用图像数据还是作为右目用图像数据时，能够进一步简化处理。例如，如果为左目用图像数据则只需要区域2201和区域2203，如果为右目用图像数据则只需要区域2202和区域2204。

以上，对第一和第二实施方式进行说明，但是当本实施方式中的图像数据显示装置中显示为二维图像时，采用了将显示部104或显示部1703切换到二维显示模式下进行显示的构成，但是将左目用图像数据与右目用图像数据设为相同，从而也可在三维显示模式下实现二维显示。

另外，本实施方式中的图像数据显示装置表示由两个视点图像数据构成的三维图像数据的示例，但是由3个视点以上的图像数据构成的三维图像数据时也同样可适用。

另外，本实施方式中图像数据显示装置中表示三维静态图像数据的滚动的示例，但是不限于静态图像数据，即使在动态图像数据时也同样可适用。当动态图像数据时，不仅在滚动显示时，检测变动的程度，在变动激烈的情况下不进行三维显示，而转换为二维图像数据来进行二维显示即可。关于变动检测，例如若为以MPEG-4、H.263标准压缩的编码数据，则例如通过利用编码数据中所包括的变动矢量的值来可进行检测。另外，当画面内的一部分区域为如进行滚动那样的视频(例如3D游戏画面等)时，只对滚动显示的部分进行二维显示即可。

另外，本实施方式中的图像解码部503采用以时间分割执行分割块的解码处理的构成，但是通过具备多个(例如与可保存在帧存储器506中的块数相同的数)图像解码部，并行执行多个块的解码处理。

另外，本实施方式中，如图2所示那样表示了将整个图像分割为多个块，各块由左目用图像数据和右目用图像数据构成的三维图像数据的滚动显示的示例，但是在将整个图像不分割为多个块，而如图25所示那样由一个左目用图像数据和一个右目用图像数据构成的情况也适用于本发明。在该情况下，只对与显示区域2503(相对于整个图像的中央部分)对应的部分(区域2504作为左目用图像数据、区域2505作为右目用图像数据)进行解码，并显示为三维图像数据或二维图像数据，或者也可暂且对整个图像进行解码后切掉显示区域，并显示为三维图像数据或二维图像数据也可。

另外，本实施方式中的图像数据显示装置采用下述构成，即读出在记录介质中记录的三维图像编码数据，并将所读出的三维图像编码数据解码后进行显示，但是本发明与有线/无线无关地接收由外部机构解码后的三维图像数据，并进行显示的方式中也同样可适用。

Claims (4)

1、一种图像数据显示装置，可切换所输入的三维图像数据的立体显示与平面显示，

上述图像数据显示装置具备：

控制机构，其对三维显示模式和二维显示模式的选择进行控制；

图像转换机构，其根据上述控制机构的显示模式的选择，将三维图像数据转换为二维图像数据；和

显示机构，其根据上述控制机构的显示模式的选择，切换三维显示与二维显示而进行显示，

上述控制机构在三维图像数据的显示位置变化时，选择二维显示模式。

2、一种图像数据显示装置，可切换所输入的三维图像数据的立体显示和平面显示，

上述图像数据显示装置具备：

控制机构，其对三维显示模式和二维显示模式的选择进行控制；

图像转换机构，其根据上述控制机构的显示模式的选择，将三维图像数据转换为二维图像数据；和

显示机构，其根据上述控制机构的显示模式的选择，可切换三维显示和二维显示而进行显示，

上述控制机构在三维图像数据的显示位置以规定的速度以上变化时，选择二维显示模式。

3、根据权利要求1或2所述的图像数据显示装置，其特征在于，

上述图像转换机构在所述控制机构选择了二维显示模式时，从上述三维图像数据中所包括的多个视点图像数据中选择一个视点图像数据，并转换为二维图像数据。

4、根据权利要求1或2所述的图像数据显示装置，其特征在于，

上述三维图像数据由M×N个(M≥1、N≥1)的多个块构成，并且所述块包括多个视点图像数据。

Images