CN103262550B - 用于处理三维视频内容的方法及相关装置 - Google Patents

Abstract

本公开涉及用于处理三维视频内容的方法及相关装置。本发明关于一种用于处理三维视频内容的方法，其中视频流处理器(2)被输入有视频流(Fi)，该视频流(Fi)包含根据确定的输送布置而配置于单帧内且适于产生三维显示的视频图像和/或数据图像，其中该视频流处理器(2)响应于通过控制模块(5)发送的控制信号(8)而产生可重现于关联可视化装置(4)上的视频信号(9、13)，该视频信号包含所述图像的至少一部分，如对于所述单帧中的至少一个而在每个单帧中所配置的，以便在辨识该经确定输送布置方面支持使用者。

Description

用于处理三维视频内容的方法及相关装置

技术领域

本发明涉及一种可实施于能够产生三维显示的视频图像流处理领域中的方法。

更具体地，本发明涉及一种用于使使用者选择及键入在屏幕上正确地显示具有三维效应的视频图像流所必要的数据的方法。

背景技术

立体及自动立体系统中的实境的三维感觉是基本上基于双眼视觉现象。为了利用由双眼视觉引起的三维效应，有必要向使用者的左眼及右眼提供对应的左图像及右图像。因此，对于立体类型的三维视频内容，有必要提供至少两个图像序列，这两个图像序列中的至少一个意于用于左图像且至少一个意于用于右图像。

这些右图像及左图像被合适地变换以便根据不同的可能立体显示模式而直接地显示于屏幕上，或由投影仪间接地显示于屏幕上。

最普通的立体显示模式为被称为“行交错(lineinterleave)”及“帧交替(framealternation)”的立体显示模式。

在行交错显示模式中，左图像及右图像的行交替地显示于具有行以不同方式(例如，右向及左向圆形偏振)而偏振的表面的屏幕上。佩戴相对于屏幕的行合适地偏振的镜片的观看者仅将左图像的行接收至左眼且仅将右图像的行接收至右眼，允许大脑实现三维效应。

在帧交替显示模式中，可视化装置或与可视化装置相关联的视频处理器必须自传入视频流提取左图像及右图像且必须在屏幕上交替地显示它们。

由观看者所佩戴的合适快门眼镜仅允许右图像到达观看者的右眼且左图像仅到达观看者的左眼，因此，大脑可产生通常人类视觉提供的三维效应。

然而，有必要使重现或可视化装置知道传入视频流的布置，即，已产生的意于三维地显示的每个流帧或图像的输送布置。

例如，为了正确地产生三维效应，重现装置必须知道给定场景的右图像及左图像在视频流中位于何处、它们是否已被采样以及如何被采样。例如，在依据帧交替而操作的屏幕的情况下，为了以三维模式正确地显示视频流，取决于待显示的视频流的布置的不同程序（过程，procedure）将是必要的。

通常，视频处理装置的视频处理器在工厂被程序化设计以便根据预定模式而将经译码视频流转换成意于重现于屏幕(其为与该视频处理器相关联的可视化装置的部分)上的视频信号。所述预定模式可取决于视频流的输送布置而改变，该输送布置因此通常将不同于将由产生的视频信号所采取的布置，以便借助于或不借助于由观看者所佩戴的眼镜而实现三维效应。显然，这个信号仅仅取决于可视化装置的类型；然而，转换程序(且因此，可视化程序)在不知道由待重现的视频流所采取的布置的情况下不能正确地发生。无论如何，如果布置是未知的，则有必要以任何方式向视频处理器传达哪一布置为待重现于关联的可视化装置上的假想的流输送布置。

在其它类型的立体系统中，例如，图像是用合适深度图(depthmap)进行传输，一旦这些深度图在重现之前与有关图像组合，该等深度图产生具有三维效应的视频。因此，即使在自动立体类型的系统中，也有必要至少传输用于图像的第一视频序列及插入有深度图的第二序列。

然而，因为用于压缩、输送及重现视频内容的当前系统提供仅一个二维视频流，所以如果期望维持与此系统的向后兼容性，则三维内容的图像或数据必须插入至二维视频帧的单一流中。因此，为了达到这种目标，已开发出可根据如下两个不同类型而分类的数个技术：“帧兼容(framecompatible)”及“服务兼容(servicecompatible)”。

“帧兼容”技术涉及一种通用器件，该通用器件意于重现能够在无需适应任何软件或硬件改变的情况下将三维类型的视频流的图像显示于关联可视化装置上的特定二维流，其中仅损失三维效应，对于这种情形，将流图像转换至特定可视化装置的系统以及能够执行这种转换的可视化装置是必要的。特别的，有可能将左图像或右图像的流显示于可视化装置上。

例如，“并排(SidebySide)”、“上下(Top-bottom)”及“分裂(splitting)”布置是在这种类别的向后兼容流内，其中左图像或右图像中的一个在未经受分裂的情况下分配至帧中，而另一个被分解成以旋转或未旋转方式配置于未被第一图像占据的空间中的数个部分。

“帧兼容”技术关于图像配置技术而进一步不同，此图像配置技术基于诸如位置、大小、旋转、抽取或欠采样、配置及数个图像至视频流中的转移速率的参数而相互不同。

相反地，在根据“服务兼容”技术而产生的视频流中，没有可能将提供于视频流中的立体图像两者都显示于意于显示特定视频流的通用装置上。在这种类型的视频流中，这两个图像中的一个相对于另一个被表示为差异或甚至不同(例如，被表示为视点的移位、被表示为深度图，等等)，且与此（这种）差异有关的数据经合适地编码且插入于该视频流中以作为元数据，即，作为不意于含有立即可显示的视觉信息的数据。然而，意于重现特定视频流的装置能够正确地解译及重现此类型的向后兼容视频流的两个图像中的一个，而与另一图像有关的数据不能被正确地解译且因此不能用于显示另一立体图像(在不改变其结构及操作的情况下)。例如，“L+深度”及“2D+差量”布置属于此类别的向后相容流。

因此，用于表示及显示至今所提及的三维内容的多种方法及技术涉及三维视频内容的数个输送布置的存在。

当前，为了传输及显示三维视频流，不存在实际上可用于任何生产、输送、散布及重现系统上的参考标准或技术。此外，不存在用于在视频流内部用信号通知已用于产生三维效应的输送布置的参考标准。这种用信号通知可由可视化装置用于适当地解译待显示的视频流。

此外，重现和/或接收三维视频流的装置具备数个互连接口，诸如，DVI-D、DVI-I、HDMI、显示端口(DisplayPort)、USB、WiMAX、Wi-Fi、无线吉比特联盟（WirelessGigabitAlliance），并且显然，这些接口可直接配备调谐器、蓝牙（Blu-ray）或DVD读取器及内部固态或光学内存。因此，在内容直接地来自集成于重现和/或接收装置内的调谐器的状况下，三维内容是以数个形式，诸如，储存于Blu-ray或DVD媒体上的内容、由PC自因特网下载的视频文件，或广播频道(卫星、缆线、陆地)提供至重现装置。这种内容或视频流中每个可针对三维内容而采取不同的输送布置。

此处，术语“视频流”意指一系列视频帧，每个视频帧含有准备供可视化装置使用的一个或多个经解压缩图像或经解压缩视频数据。所述帧中所含有的解压缩的视频数据及图像具有其自己的输送布置，该输送布置必须为可视化装置所知以便被正确地重现。这不意味着这些流通常不能甚至包含不同于视频图像的其它信息或内容，诸如，音频作用(audiocontribution)、与视频或音频内容相关联或不相关联的数据(图文电视(teletext)、EPG、用信号通知、元数据，等等)。在此状况下，将有必要提取视频内容，或分离视频内容与提供于流中的其它信息内容。

由于由重现和/或接收装置所达到的复杂性水平、由于数个可能的连续演进的输送布置以及由于不存在用于三维内容的用信号通知的参考标准的事实，因此上文所描述的技术情境很复杂且多样化。因此，可能发生：三维视频流的输送布置未被正确地用信号通知，或该输送布置根本未被用信号通知。在由广播信号输送系统传输的视频内容的状况下提供此情形的真实实例，其中三维内容用信号通知数据不正确或未被提供，因为用于三维内容的压缩及输送的装置不能插入三维内容或不具有用于将用信号通知数据周期性地更新至经传输三维内容的必要自动化。

例如，可能发生：第一电视“RaiUno”服务含有输送布置未被信号通知的三维内容。可能进一步发生：在“RaiUno”服务内部的给定节目使用根据由代表这种布置的字段正确地用信号通知的“并排”技术而布置的三维内容，而仍属于同一服务的后继节目含有具有“上下”类型的布置的内容。但是，与新节目有关的用信号通知字段含有“并排”指示，因为该字段关于先前节目未被更新，且因此，可能发生：“上下”三维内容被信号错误地通知为“并排”，因此阻止该节目被正确地识别及相应正确地显示。

相似考虑在储存于储存媒体中的三维内容的状况下适用：这种内容可通过不能够引入经压缩三维视频流的输送布置的信号通知的编码器获得。此外，有可能的是，具有特定布置且被正确地用信号通知的原始三维内容已通过不能够完全地输送或正确地转换新布置的用信号通知字段的转换器出于任何原因而重新转换或译码成具有不同于原始布置的三维内容。最后，必须注意，布置技术的演进很快速且多样化，因此，重现及接收三维内容的电子装置的接口连接标准(诸如HDMI的标准)不含有或未被更新至市场上所使用的一些输送布置。

自动地辨识视频流布置的机制在此项技术中是已知的，该等机制是基于插入于视频流中的特定用信号通知的辨识。然而，当用信号通知不存在或错误时，此机制失效，因此发生：重现装置不能够正确地重现三维视频流，因为用于待显示的内容的输送布置的用信号通知不存在，或因为这种用信号通知错误。在这些状况下，使用者必须手动地键入与三维内容的输送布置有关的数据。

重现具备置放于控制单元上的特定图形接口或选择器(使用者可通过这些图形接口或选择器而针对经接收三维视频流来选择一个特定输送布置)的三维内容的装置可在市场上获得。然而，如上文所述，存在可通过视频流采取的许多可能输送布置，因此导致不同可能输送布置的长列表，在这些可能输送布置中，使用者必须选择正确的一个输送布置。因此，对于使用者，自此列表逐一地选择可能布置以用于搜寻正确布置是复杂的。因此，选择操作涉及特定时间消耗，因为：对于每个所选择布置，使用者无论如何必须通过可视化装置来验证所选择布置使三维内容被正确地重现。此外，这些重现装置的另外缺陷在于：使用者并非始终能够验证所选择且设定的布置是正确的，因为：有可能的是，两个或两个以上不同输送布置在屏幕上产生彼此极相似、具有几乎不可理解的内容、差异几乎不被使用者感觉的三维显示。然而，除了导致错误三维显示以外，这些差异也可随时间流失而导致使用者感觉不舒适。

发明内容

因此，本发明的一个目标是提供一种用于处理三维内容的方法，其允许使用者选择用于该内容自身的正确输送布置以便将该内容显示于重现装置上。

本发明的另一个目标是提供一种用于处理三维内容的方法，其显著地缩减用于明确该内容自身的正确输送布置所必要的时间。

本发明的另一个目标是提供一种用于处理三维内容的方法，其缩减如下机率：选择错误输送布置，引起阻止该三维内容被正确地显示于重现装置上。

简言之，根据本发明的方法是供以产生用于将具有特定输送布置的视频流的至少一个单帧显示于可视化装置的屏幕上或其相关部分上的显示信号，所述布置意于产生三维效应。

根据本发明的方法，单帧是以其二维格式进行显示。因此，基于显示于可视化装置屏幕上的内容，使用者可无任何特定困难地选择正确的输送布置。

例如，在具有“并排”类型的输送布置的三维视频流的状况下，两个图像显示于屏幕上，一个图像占据以二维模式而显示的帧的左部分且另一图像占据该帧的右部分。因此，使用者立即感觉到用于此三维视频流的输送布置。

本发明的另外特性及目标在意于作为本发明的描述的整体部分的所附权利要求中进行陈述，本发明的描述的教导将以非限制性实例而说明的一个较佳实施例的详细描述变得更清楚，其中特定地参看附图：

-图1和图2分别是处理三维及二维视频内容的系统的方框图的第一个和第二个实施例。

-图3a-3f和4a-4f是能够在关联于执行本发明的方法的装置的可视化装置的屏幕上重现的图形示例。

-图5、6和7是用于选择传输布置的交互式菜单的三个可能的实施例。

-图8a和8b是显示于与根据本发明的装置关联的可视化装置的屏幕的另外两个可能的实施例。

-图9a和9b是涉及带有不同阶层层级的三维视频流的传输布置的表相应地上部部分和下部部分。

-图10a和10b是涉及带有不同阶层层级的传输布置的选择的方框图的相应地上部部分和下部部分。

具体实施方式

很明显，所述图中的一些图所示的屏幕截图不表示实际装置的忠实且准确的重现，但其意于提供根据本发明的方法及系统的可能实施例的图解的且近似的思想(但对于本领域技术人员完全地清楚且立即可理解)。

参看图1，显示用于三维及甚至二维内容的视频处理系统100，其包含：

-三维及甚至二维视频流F₁、F₂、…、F_N的一或多个来源S₁、…、S_n，其可包含：用于经由缆线或以空中方式而接收广播电视传输的接收单元；Blu-ray或DVD播放器；使用USB接口的内存读取器、固态或光学内存；用于这种器件的界面端口；

-译码器1，其获取及解码由通用来源S_i提供的数据；

-视频流处理器2，其能够将图形接口插入于视频流中且能够处理视频流，使得视频流可在输送待显示的视频流的数据交换接口3上输送；

-控制模块5，其能够控制译码器1的操作、能够控制视频流处理器2的操作，且能够自响应于由使用者所执行的操作而将信号输出至控制模块5的使用者控制单元6接收控制信号：使用者控制单元6可以诸如多个按键、遥控器等等的数个方式进行实施，以便允许使用者选择功能及给出命令。

视频处理系统100可进一步包含可视化装置4，该可视化装置包含(例如)屏幕、投影仪，等等。然而，出于本发明的目的，可视化装置4也可能不集成于视频处理系统100内，但可通过任何已知连接构件(有线(例如，SCART、HDMI、DVI、显示端口、RCA-Cinch)及无线两者)而与该视频处理系统相关联。本发明的教导可独立于可视化装置4的存在而进行。

处理系统100(例如)可以是能够获取及重现三维视频内容的电视机、机顶盒、视频记录器、移动电话或便携式多媒体播放器。

通用来源S_i(例如)自Blu-ray/DVD媒体、自广播传输信号、自USB内存或内部硬盘获取三维视频内容且将三维视频内容以输送流F_i的形式发送至译码器1。

此处，术语“输送流”意为信息流，其包含经压缩或经解压缩视频流的数据，及尤其也含有对于提取及代表构成视频流的个别帧有用的存在于其它信息中的一系列元数据，诸如，个别帧的分辨率及用于其解压缩的信息。

来源S₁、S₂、…、S_n中每个能够提供对应输送流F₁、F₂、…、F_n。下文将考虑通用输送流F_i。这些输送流F_i通常不同时地发送至译码器1：提供多任务器或输入选择器装置(图1及图2中未图示)，其一次仅允许一个视频流F_i通过(或与译码器1能够同时地处理的视频流一样多的视频流F_i)。

哪一个视频流发送至译码器1通常取决于由使用者所进行的调整及当前作用中（active）设定，即，取决于所选择的输入端口(例如，USB或HDMI)和/或可来自不同接收和处理单元的所选择的信号类型(例如，DVB-T或T2、DVB-S或S2、DVB-C或C2、ATSC、ISDB-T电视信号)。

译码器1能够解压缩与通用输送流F_i中所含有的经压缩的视频流相关的数据(如果此视频流被编码)，或在任何状况下，自通用输送流F_i提取视频流7且将所述视频流7输出至视频流处理器2。

在输送流F_i中含有已封装帧的视频流7是在译码器1的输出处被获得，其中图像在视频流7中采取特定布置以便在屏幕上产生具有产生三维效果的目标的显示。

意于产生三维效果的在视频流7中图像的可能输送布置(例如)为以下各者：“上下”、“场交替(fieldalternative)”、“行交替(linealternative)”、“并排”、“列交替(columnalternative)”、“分裂”、“L+深度”、“L+深度+图形+图形-深度”、“2D+差量”。

如果此输送布置是(未必正确地)在输送流F_i中被用信号通知，则译码器1将关于该输送布置的用信号通知值发送至控制模块5。此后，将视频流7发送至视频流处理器2。控制模块5通过控制信号8来控制视频流处理器2的操作。取决于通过控制信号8采取的值，视频流处理器2以不同操作模式而操作。另外或作为一个替代，可在装置中提供一系统，该系统基于传达至译码器1的输送流F_i的视频内容而计算输送布置。

根据第一操作模式或三维呈现显示模式，视频流处理器2执行视频流7的此转换及调适以使该视频流适于根据预定模式而重现于与该处理器相关联的特定可视化装置4上，其出于此目的而被编程，以便让配备有合适眼镜(如果需要)的观看者而在可视化装置4的屏幕上产生三维效应。这种转换及调适操作产生第一接口视频信号13，依据该视频信号，视频处理器2(另外，与控制模块5合作或不合作)可通过通过插入对于将视频流7显示于可视化装置4上的有用的某些元数据来执行用于数据接口3上的输送的调适操作。在该元数据中，甚至插入输送布置的用信号通知值，该值是经控制模块5而发送至视频流处理器2。数据交换接口3进而又将第一接口视频信号13转移至可视化装置4。

根据第二操作模式或帧显示模式，视频流处理器2处理视频流7的内容以便获得可通过可视化装置4重现的第二接口视频信号9，使得来自译码器1的输出处的视频流7中所含有的图像至少部分地直接地可见。视频信号9经由数据交换接口3发送至可视化装置4。在外部可视化装置4的情况下，数据交换接口3可为(例如)HDMI类型或显示端口类型。相反地，在集成于视频处理系统100内的可视化装置4的情况下，该数据交换接口可在系统内部采取数据总线的形式。

有可能提供使用者由控制单元6发送控制信号10，该控制信号请求验证当前提供为来自视频处理系统100的输出的三维视频内容的输送布置，例如，在识别3D视频内容的错误(三维或二维)显示后，或仅仅为了验证这种内容的输送布置的正确选择。

响应于此控制信号10，控制模块5通过控制信号8而使视频流处理器2自上文所描述的第一操作模式传递到第二操作模式。

作为一个替代或另外，如果视频处理系统100配备有未接续或相信未接续定义待重现于关联可视化装置4上的输入流F_i的输送布置的输送布置识别系统，则有可能提供此通路发生。在能够通过合适元数据而自视频流7提取及解译与此布置有关的用信号通知的辨识系统的状况下，输送布置的非识别可归因于(例如)没有用信号通知或模糊的或错误的用信号通知。在配备有基于视频流7中所含有的图像的分析的辨识系统的视频处理系统100的状况下，这种非识别可归因于(例如)这些图像的极端复杂性或极端可变性或不稳定性。在此类型的通路中，一旦识别该布置的不可能性被探测到，控制模块5将控制信号8发射至视频处理器2。显然有可能使启动控制信号8的两个可能模式中的一个或其两个及后继帧显示在工厂启动，且在必要时由使用者撤销启动、启动或重新启动。

在第二操作模式中，获得来自视频流处理器2的输出视频信号9，其意于通过将当前选择以待显示的视频流7的单视频帧中这种视频图像或这种数据图像所具有的配置及内容维持至单帧中而在可视化装置4的屏幕上或此屏幕的部分中显示这些图像。

例如，可通过使视频处理器2及可视化装置4以如下方式操作来实现此结果：以二维模式重现视频流7(例如，在不进行用以实现三维表示的任何处理的情况下)，或执行使帧显示二维地重现(即，具有零深度的平坦显示)的操作。

因此，视频信号9是通过数据交换接口3而提供至可视化装置4。这个或这些图像的配置及内容向使用者给出通过当前所选择的三维内容采用的输送布置的清楚指示。为了较好地解释可通过此类型的显示提供给使用者的信息类型，下文显示一些实例。

在下文的描述中，意于表示与视频图像有关的数据(诸如，图像的深度图)的帧中的通用像素数组通常是通过术语“数据图像”代表，以便指示这些数据为视频信息，自该视频信息，有可能间接地计算原始立体图像的真实视频内容。

如果比如包含两个图像(一个图像是在视频帧21的左部分32中且一个图像是在视频帧21的右部分33中)的图3a或图3b所示的显示是响应于控制信号10而显示于可视化装置4的屏幕30上，则对于使用者而言，很清楚，当前所重现的三维内容具有“并排”类型的输送布置，因为该两个图像彼此紧接。

图3b显示帧显示31仅部分地占据屏幕30的可见区域的情况。

图3c及图3d显示当两个图像插入至单帧中时的状况，使得帧显示31包含在视频帧34的上部部分35中的图像，及在视频帧34的下部部分37中的图像，且因此，很清楚，通过当前所选择的三维内容采取的输送布置为“上下”类型。图3d显示当帧显示31仅部分地占据屏幕30的可见区域时的状况。

最后，在图3e及图3f所示的图解实例中，在帧显示31的左部分37中显示视频图像，而在右部分38中显示为深度图的数据图像：在此状况下，当前所重现的三维视频内容采取“L+深度”类型的布置。对于使用者而言，特别是对于非专家使用者而言，重要的是通常定义插入于个别视频帧中的图像的类型和/或配置。

显然，帧显示可根据不同图形形式而进行。例如，帧显示可占据可视化装置4的整个屏幕30，诸如图3a、图3c及图3e所示，或帧显示可占据该屏幕的仅一部分，诸如图3b、图3d及图3f所示。在后一状况下，有可能规定屏幕30的剩余部分专用于显示三维视频内容或表示与此内容有关的图形接口或数据。此外，专用于帧显示31的部分可与对应三维视频内容同时地显示，引起相对于此内容的分离或叠加部分(透明地或不透明地)。在此状况下，例如，视频处理器2可通过将含有帧显示的方框适当地组合于也含有待显示于同一屏幕上的图像的呈现显示及可能其它部分(例如，下拉式菜单、叠加部和/或含有图形或字母数字元素的方框)的复合帧中而组成接口视频信号9。

可能发生：单帧的内容的显示不足以验证由三维内容采取的正确布置；在此状况下，因此适当的是采用替代实施(诸如，图2所示的实施)。根据视频处理系统100的实施例，有可能将紧接在当前所显示的帧后的帧内容显示于可视化装置4的屏幕30上。每当控制模块5接收请求帧显示的控制信号10时，该控制模块启动将预定帧序列储存于内部的缓冲器11。可在视频处理系统100的制造阶段中或甚至由使用者进行适当的调整决定所储存的帧的量。视频流处理器2通过线14连接至缓冲器11，且该处理器接收储存于该缓冲器中的帧。可由视频流处理器2使用缓冲器11的内容，以便产生根据不同的可能选项形成的第二接口视频信号9。

第一选项在于意于将第一帧的重现显示于关联的可视化装置4上的第二视频信号9。通过发送至控制模块5的请求帧显示的第二控制信号10(其进而定义视频流处理器2的行为)，使用者请求显示第二帧。视频流处理器2产生意于表示紧接在第一帧后的第二帧的显示的视频信号9。通过重复此程序模式，有可能使使用者显示储存于缓冲器11中的总帧序列。

第二选项提供待以相似于第一选项中所提供的方式而显示的数个帧，但不同于使帧逐一地流动，使用者有可能成群组地显示这些帧或以单一显示来显示所有这些帧。

“帧交替”技术为当第二帧的内容的显示对于使使用者定义正确输送布置可特别有效时的情形。

在此状况下，左图像及右图像或视频图像及其对应数据图像被交替地插入为个别帧序列，即，例如，在第一帧中存在左图像，在第二后续帧中存在右图像等等，以用于视频流7的完整帧序列。

在本发明的另一个实施例中，周期性地更新帧显示。可能发生：帧显示模式在长时间周期中被选择：在此情形中，有可能规定由使用者关于时间可感知的规则时间间隔而将帧显示的内容更新至属于视频流7的新帧。以(例如)通过图1及图2中未示出的内部时脉电路CK计算的规则时间间隔，控制模块5通过控制信号8而请求视频流处理器2的电路自视频流7选择新帧且基于新选择的帧的内容而形成新视频信号9。在缓冲器11存在的情况下，控制模块5使缓冲器11重设且使其储存来自视频流7的新帧序列。这些规则的更新时间间隔的长度可在制造阶段期间定义或可由使用者设定。也有可能规定帧显示的更新是由发送至控制模块5的控制信号10发生，该控制信号因此验证视频流处理器2的操作及缓冲器11(如果存在)的操作。

在验证三维视频内容的输送布置的阶段(此阶段是基于帧显示)之后，有可能提供使用者(例如)在已探测到三维视频内容的错误三维显示后发送用于修改当前所设定的输送布置的请求。

当前所设定的输送布置(即，通过控制模块5发送至视频流处理器2以便插入于第一接口视频信号13中的布置值)可为在输送流F_i中用信号通知(适当地或不适当地)的输送布置，或作为一个替代，为先前由使用者选择的布置。请求布置修改的控制信号10是由使用者控制单元6发送至控制模块5。控制模块5通过控制信号8而请求视频流处理器2产生新的第二接口视频信号9，此新的第二视频信号9意于显示图形接口，使用者可通过该图形接口而选择新的输送布置。

存在用于形成所述图形接口的数个可能选项。然而，必须注意，本发明的教导可独立地实施于通过此接口采取的图形形状上及实施于此接口中所含有的信息的特定文字形式上。图形接口的主要目标是允许使用者基于由使用者自帧显示所获得的信息而选择正确的输送布置。下面以实例描述用于形成此接口的一些选项。下面所列出的选项划分成：内容选项，描述图形接口的信息内容；及图形选项，描述在可视化装置的屏幕中图形接口的形状及位置。

第一内容选项在于将由技术名称指定的可能输送布置列表显示于图形接口中。根据第一个替代，有可能通过提供于控制单元6上的与输送布置相关联的数字按键61(如图6中所示)或通过取决于通过使用者控制单元6接收的输入而指出可能布置中的一个的光标或矩形突出显示背景51(诸如图5所示)来选择输送布置。

为了列出第二内容选项中的数个输送布置，不使用技术名称，而使用简单图形符号，其使想起使用者可自帧显示获得的信息，诸如，在数个帧内部的图像的配置。例如，对于“并排”，有可能提供由含有数字1及2的两个邻近正方形组成的图形符号，其因此意为在个别帧中并排地提供两个图像1及2。图7中显示此选项的实例，其中符号71代表“并排”，符号72代表“上下”，且图形符号73代表“L+深度”。针对第一内容选项所作出的考虑适用于数个符号的选择。

可能发生：请求输送流布置的交互式选择，因为使用者相信三维显示是错误的或视频处理系统100尚不能够定义输入视频流的布置。无论如何，控制模块5在特定请求的情况下必须针对待重现于可视化装置4上的视频流来选择必须首先启动哪一呈现(三维)显示，以便允许使用者启动用于交互式地选择输送布置的程序。此情形可根据数个选择标准完成。

一个选择准则可为在工厂以固定方式建立此呈现显示；另一准则可为起初根据默认（default）仅建立作用中显示且允许使用者(例如)通过菜单来改变该显示。

作为一个替代，此第一显示可为二维显示，其为仅一个帧显示(部分的或整个屏幕)，而对于使用者，撤销启动任何三维显示，以便避免经更改或不正确的重现。

另外，三维输送布置的非识别可取决于待显示的流为二维的事实。自此初始显示起始，以交互的方式且通过显示于可视化装置4的屏幕上的可能指令或建议的辅助，使用者可进行定义及选择适当输送布置所必要的操作。

关于图形选项，一个较佳实施例在于将图形选择接口添加至三维内容的正常显示，且在与先前区带分离的屏幕的不同区带中，也重现帧显示，使得输送流布置及通过可视化装置4产生的流布置(对应于彼特定布置)两者重现于同一屏幕截图中，因为装置将处于三维呈现显示模式中。因此，使用者立即感知到视频处理系统100中正在发生的事且可快速地且有效地定义及在视觉上选择适当流输送布置，而无可产生混淆的不同类型的图像的叠加。

图8a中示意性地显示一个可能的实施例，其中，在待显示的视频流的帧显示80附近，在同一屏幕中同时地显示在用于针对当前由使用者所选择的布置而对经启动显示的调适的程序后通过视频处理器2产生的三维显示82。在图8a的状况下，已假定：输入视频流为并排类型：因此，因为当前所选择的显示恰好为并排的，所以含有对应于此选择的3D显示的方框82是正确的。在此情况下，对于使用者而言，很清楚，较低阶层层级的其它布置设定并非必要的(因为下文将对其进行较好地描述)，因此，使用者可(例如)通过操作控制单元6的按键来确认选择，且如果需要储存在此所选择布置及所播放视频流间的关联，则视频处理系统100可(例如)在已向使用者请求(在必要时)之后传到通常的全屏幕3D显示。

一个替代实施例在于将图形选择接口叠加至三维内容的正常显示，且在屏幕的有限区带中，也叠加帧显示(诸如图8b示意性地所示)，其中方框80是不透明地或半透明地叠加于通过视频处理器2产生的三维显示82上且因此产生为全屏幕。

在两种状况下，为了避免经更改或经扰动的显示，适当的是，视频处理器2组成待显示于可视化装置4上的视频流的帧，使得含有帧显示的方框为二维类型且以零深度而置放，即，在方框内部无任何高浮雕或浅浮雕效应。此情形可通过如下方式达到：将帧显示适当地置放于待显示的流的帧中，且迫使视频处理器2以所选择方式进行对显示的调适，使得帧显示始终被适当地重现，而不更改使用者对其的可解度。

现在参看图4a，假定：在第一假设中，视频流具有并排布置，且由使用者或视频处理系统100将并排布置选择为初始默认布置或重设序列中的后续布置。因此，视频处理器2可插入帧显示(诸如图4b所示，即，通过在相对于并排布置中的右图像及左图像的两个推测(且在此状况下，真实)位置的同一位置中插入含有帧显示的两个方框41达两次)，且可执行对应于此布置的呈现。图4c中显示结果(即，可由具备合适眼镜的观看者在关联可视化装置的屏幕上所看到的结果)，其中部分45中所含有的帧显示及呈现显示两者是正确的；呈现显示对应于存在于视频流中的显示，除了因为于呈现阶段中所进行的内插操作而加倍的帧显示的水平尺寸。

现在参看图4d，假定：相反地，输送视频流为上下类型，而用于呈现的当前所选择且启动的布置仍为并排布置。在此状况下，视频处理器2将进行帧显示与待以与已绘制的先前显示(见图4e，其显示方框43的插入，其中，未提供于视频流中的垂直中间线46作为参考)相同的方式而呈现的显示的组成。在依据帧交替而操作的屏幕的状况下，图4f中近似地显示所得显示：虽然呈现是明显错误的，但方框48中所含有的帧显示是正确的且以很可解且忠实的方式(除了加倍的垂直尺寸)表示待重现的视频流的帧中所含有的显示。因此，即使在此状况下，使用者也可至少毫无困难地进行第一层级布置的选择，即，其可定义该布置为上下类型布置(即使视频处理系统已启动针对并排类型布置(即，不同于实际提供的布置)的视频流而提供的调适程序)。因此，使用者可通过图4f所示类型的屏幕而容易地发现在辨识输送布置时所形成的错误。

很清楚，可根据需要而修改含有帧显示的方框41、43及48的尺寸，且因此，可选择这些尺寸以便占据屏幕30的总区域，诸如图3a、图3c及图3e所示。也有可能通过向使用者给出可使用屏幕30上的额外图形元素及按键的启动或提供于控制单元6上的其它命令输入元素的合适复位大小程序而使该等方框可由使用者复位大小。

通过合适调整，可将相似组成程序用于其它所选择布置(诸如，上下布置、分裂布置，等等)中。

相同考虑适用于图8a所示的类型的显示，其中差异在于：在彼情况下，视频处理器2相对于其它部分个别地处理所呈现部分82，因为其它部分显示于屏幕的分离区域中；这避免包含呈现显示的方框与其他方框(如果提供)组合。

此外，有可能提供：每当根据图形接口选择新输送布置时，控制模块5自使用者接收特定控制信号10，且响应于使用者的此控制信号10，控制模块5向视频流处理器2给出将由此视频处理器2插入于第一接口视频信号13中的对应输送布置值。因此，通过可视化装置4根据由使用者所选择的输送布置值来显示三维视频内容。因此，向使用者显示对于选择有用的所有信息，即，持有可能布置的图形接口、帧显示，及最后，根据由使用者所进行的选择而显示的3D内容。后一信息为向使用者提供关于由使用者所进行的选择的恒定回馈。此信息可以不同于此处所描述的图形形式的图形形式进行组织。然而，在数个图形形式间的差异对于本发明的新颖性目的并不重要。

使用者在已通过控制单元6选择其相信为正确的布置后发送确认控制信号10；响应于此控制信号10，控制模块5通过控制信号8而使视频流处理器2传递到呈现显示模式。

可将图8a及图8b所示的另外方框84有利地添加至帧显示及呈现显示，该方框含有可能输送流布置的列表，比如，帮助使用者定义当前作用中选择及仍可选择布置以及有效地且交互式地进行选择的菜单的页面。针对视频处理器2的呈现而当前选择且作用中的布置可以任何方式(例如，通过提供箭头、粗体字符、呈浮雕或具有不同色彩的字符、背景有色轮廓，等等)进行突出显示。所述另外方框84可通过视频处理器2以针对含有帧显示的方框所描述的相同方式插入。

通过启动交互式输送布置选择的特定命令，视频处理系统100在关联可视化装置4上产生混合显示，诸如，图8a或图8b所示的显示。使用者看到针对视频处理器2所假定的输送布置为哪一布置，及对应于该布置产生呈现显示，以及相关帧显示。现在，使用者可确认针对布置的选择(如果使用者认为该布置正确)，或使用者可(例如)通过向下操作光标按键以用于在菜单方框中所列出的布置当中选择不同布置来选择另一布置(仍作用于控制单元6上)。此选择是通过控制模块5获取，该模块驱动视频处理器2，使得在此选择后，代表新选择布置的字符被突出显示，且该模块被启动以用于进行针对视频处理器2所设定的对应呈现显示。在图8a的实例中，使用者在控制单元6上向下按压光标按键，这是通过突出显示“上下”菜单的行2来进行：控制模块5以使得视频处理器2执行针对上下布置所提供的呈现方式操作。这个交互式对话可继续，直至使用者通过确认选择或通过放弃输送布置的识别来停止。

菜单方框的列表也可持有可视化装置不支持的其它布置；这些布置可以指出它们不能被启动的事实的方式进行标记；如果这些不被支持的布置中的一个被选择，则控制模块5可以按如下方式操作：通过该装置产生的视频流含有意于指出不支持所选择布置的在关联可视化装置4上可见的指示。

此外，有可能也在列表中提供可视化装置4不支持的布置，且在所述不支持布置中的一个被选择的情况下，控制模块5以如下方式而操作：通过关联的可视化装置4重现的视频流采取二维模式。

在混合图形屏幕(即，包含视频流的三维呈现及图像的部分(其中重现帧显示和/或含有菜单页面的方框)屏幕截图)的情况下，通过先前所示的机制，该混合图形屏幕以不刺激使用者的方式呈现于可视化装置4上。已知的是，如果叠加于三维图像上的图像的部分置放于以相对于同一场景中的周围对象极不同的距离而配置的视觉平面上且仅当所述图像的所述部分置放于相对于屏幕的表观平面过于深或过于向外突出的视觉平面上时，则所述图像的所述部分才可刺激使用者。

以使得处理器将帧显示的方框及其他方框配置于与屏幕30重合的视觉平面上的方式置放这些方框的办法可通过如下操作改进：用含有随时间而均一且静止的像素的区带的黑色或中性区域来环绕方框，使得3D呈现的图像且置放于完全间隔开的视觉平面上的可能区域不会扰乱观看者。为了改进所述情形，有可能将这些方框置放于屏幕的周边区带中，通常在这些周边区带中提供背景场景，即，包含相互远离置放且相隔近似均一距离的物件。

作为一个替代或另外，有可能向使用者给出关于位置及尺寸两者而重新定义帧显示的方框的可能性(在具有改变比例的可能性的情况下)。

在本发明的另一实施例中，可基于每个布置的参数而以阶层方式来组织使用者可选择的三维视频内容的输送布置。因此，每个阶层层级(“层”)代表使用者可选择的可能布置中的一个的特定参数。在较高阶层层级处的特定参数的选择导致可能参数集合，在这些参数当中，使用者可进行其在较低阶层层级处的选择。由使用者所进行的选择决定的路径(自结构的第一阶层层级传递到最后阶层层级)定义由使用者所选择的输送布置的参数，所述选择是通过这个路径而发生。

图9a及图9b中显示可能布置的此阶层结构或组织的实例，其中提供：

-对应于第一阶层层级的第一栏“布置”，其基于在单帧中的图像配置而形成在这些布置间的区别：例如，在单帧中输送的两个图像“并排”的情况下，一个图像配置于帧自身的左部分中且另一图像配置于帧自身的右部分中；例如，在“上下”的状况下，第一图像配置于个别帧的上部部分中，而第二图像配置于下部部分中；

-第二栏“分辨率”显示第二阶层层级，其中“全(Full)”项意为帧中的单图像含有待显示的所有像素的布置，而“半(Half)”项代表帧中的单图像含有待显示的像素的仅一部分布置，因为这些像素经受图像欠采样；

-定义第三阶层层级的第三栏“图像配置”，显示图像如何插入于不同单帧中，即在“并排”布置的状况下，针对每个单帧而传输左图像及右图像。在此情形中，指示“L/R”表示：在第一帧部分(即，左部分)中配置左图像，而在第二部分(即，右部分)中配置右图像。相反地，指示“R/L”表示：在帧的左部分中配置右图像，而在右部分中配置左图像。相似考虑适用于“上下”情况，其中关于状况“L/R”，左图像配置于帧的上部部分中，而右图像配置于下部部分中；相反地，关于指示“R/L”，其中右图像配置于上部部分中，而左图像配置于下部部分中；

-第四栏“图像欠采样”定义第四阶层层级，其中代表欠采样(如果进行)，即在“水平欠采样”的情况下，欠采样是由像素列进行，在“梅花式欠采样”的情况下，欠采样根据类棋盘图案来采样个别图像的像素，且最后在“垂直欠采样”的情况下，欠采样是由像素行进行；

-最后栏(即，栏“欠采样像素”)定义第五阶层层级，其中定义经受欠采样的像素在单左图像及右图像内部的奇数或偶数位置。

刚才所描述的阶层结构为简单说明性实例。可能布置被阶层化或排序的结构可遵循本文未描述的不同区别性准则。此外，可能布置的选择也可延伸至其它类型，诸如，分裂类型或“2D+差量”类型。

图10a及图10b所示的树形图中以实例显示可由可能布置的此阶层结构或组织进行的可能选择路径。

图10a显示在路径的“起始”开始条件后的第一阶层层级(层1)：针对“并排”及“上下”类型的布置显示较低阶层层级，而“L+深度”类型的布置不具有较低布置层级。

接着显示后继阶层层级(层2)，其中可能的可选择参数是由自在较高阶层层级处所选择的参数分支的树形图的分支定义。如果在第一阶层层级处选择“并排”参数，则可能的“全分辨率”(F)及“半分辨率”(H)参数对应于第二阶层层级(层2)。在“全”值的状况下，选择程序结束，而如果选择“半”参数，则进入下一阶层层级，且其为第三阶层层级(层3)，其中在“L/R”选项与“R/L”选项之间进行选择。

在考虑至今所进行的选择的情况下，自第三阶层层级，通过选择“L/R”参数，进入第四阶层层级(层4)，其中可能选择为“水平欠采样”及“梅花式”参数，从而再次进行一次选择。例如，通过选择“梅花式”参数，进入第五阶层层级，其中在四个不同参数当中进行选择：通过选择这种参数中的一个(例如，“奇数/左图像、奇数/右图像”(OL/OR)，选择程序结束。

这些参数的其它值为“奇数/左图像、偶数/右图像”、“偶数/左图像、奇数/右图像”，及“偶数/左图像、偶数/右图像”。可(例如)如图9b所示通过两个后续选择(首先，在“奇数/左图像”与“偶数/左图像”之间，且接着在“奇数/右图像”与“偶数/右图像”之间)进行选择。本文中被显示为一个实例的路径导致选择特征为参数“并排、半、L/R、水平欠采样、奇数/左图像、奇数/右图像”的输送布置，即，“并排”类型的输送布置，其中左图像配置于帧的左部分中且右图像配置于帧的右部分中，每个图像经受对具有针对左图像及右图像两者经定义为“奇数位置”的位置的像素所进行的水平欠采样。

知道在第一阶层层级后的阶层层级的这种布置的事实有助于使视频处理器2正确地使重新建构尽可能地忠实于起始视频流的图像的起源。因此，当考虑适当时，即使对于定义输送布置的这种参数，也有可能应用与针对第一层级所建议的交互式机制相同的用于选择输送布置的交互式机制。

为了增加使用者正确地选择甚至低于第一层级的阶层层级的子布置的机率，有利的是以如下方式起作用：实施本发明的方法的视频处理系统100产生在选择中支持及引导使用者的视频信号，其中提供取决于内容(其基于已经进行的选择及当前待进行的选择)而改变的显示。例如，假定：使用者已选择“并排、半分辨率”布置，且现在，使用者必须决定该布置为L/R或R/L，即，流的左图像及右图像分别配置于帧的哪一半方框中。在此状况下，视频处理系统100可产生包含显示的视频流，其中并排地置放的左图像及右图像在已自帧显示切割后以两个可能配置而一个图像配置于另一图像上。因此，使用者可了解两个显示(左显示及右显示)中的场景中对象的位置的相对差且可推断左图像及右图像已在帧中配置于何处。实际上，已知的是，远处对象(即，置放于对应于屏幕的视觉平面后方的对象)较多地在右边置放于左图像中且较多地在左边置放于右图像中；关于置放于此平面前方的对象，恰好发生相反情形。因此，通过同时地显示合适地配置于屏幕上的两个图像，使用者可容易地探测这些图像。为了促进任务，有可能应用数个方法：例如，有可能向使用者给出放大一些同源区带(即，在右或左子图像中具有同一相对位置)的可能性。也有可能通过控制单元6而使两个图像可以一个图像在另一图像上的方式在屏幕上移动且叠加这些图像，使得提供于子图像中且置放于屏幕的视觉平面后方的对象占据屏幕的同一区带：现在，视频处理系统100可自使用者所移动的两个图像的相对位置自动地推断哪一图像为左图像及右图像。

为了促进使用者的操作且同时为了减轻视频处理器2的计算负担，有可能的是，在使用者所进行的这些及其它选择操作期间，对于帧显示且对于可能三维呈现显示两者，当三维呈现显示重现于屏幕上时，使用者可通过停止特定帧上的显示来停止视频流的图像的流动。

本发明的一较佳实施例操作，使得当两个显示提供于屏幕上时，这些显示指代同一场景或截图，而独立于视频流渐进地显示(“播放(PLAY)”)或停止于静态图像(“停止(STOP)”)上的事实。在此情况下，在视频处理系统100中，帧内存及同步机制可为必要的，从而通过补偿由三维呈现处理序引入的可能延迟来允许帧显示及同一帧的对应3D呈现显示同时地提供于屏幕上。

同时，有可能辅助使用者选择布置的第四阶层层级。例如，有可能自默认或起始第四层级布置(在工厂定义或由使用者定义)起始、通过以此布置而提供的视频处理器2启动呈现，且使视频处理器2在通过控制模块5提供的合适输入后将帧显示且同时地将对应于当前作用中的第四层级布置的相关呈现显示同时地显示于关联显示屏幕30上。为了促进在抽取子图像与在内插后所获得的相关图像之间的比较，有可能将自经译码帧所获得的(左和/或右)子图像中的至少一个及至少对应经内插子图像同时地显示于屏幕上，而无获得三维效应所必要的任何进一步处理(例如，“帧交替”或“行交错”处理序)。在这种情况下，有利的是以并排方式且以合适放大方式显示两个内插前显示及内插后显示，其可能关于位置及放大因子而可由使用者改变，以便使待重现的图像区域可选择且使通过视频处理器2进行的用于重新建构在对图像的抽取或欠采样操作中所消除的像素的内插操作是否导致人为产物或更改的引入对于使用者而言有价值。实际上，在没有这些人为产物及更改的情况下，有可能推断已正确地执行重新建构，且因此，想象的第四层级布置实际上对应于译码器1的输出处所提供的布置，或无论如何，由视频处理器2进行的内插适于待重现的视频流。

为了使待放大和/或缩减和/或比例改变和/或移动的图像或子图像部分的选择更快捷，有可能用图形选择元素(例如，用矩形形状)来标记此部分。此矩形(例如)可在帧显示中移动且可具有可变延伸部。此外，有可能在也待同时地改变的呈现显示中提供对应于此部分的区域，以便允许使用者理解在帧显示与呈现显示间的对应性且定义最适当的显示。

对于针对在第一阶层层级后的这种阶层层级所进行的选择，也可重复将列表菜单连同当前所选择的呈现显示及相关帧显示一起显示于同一屏幕截图上的办法。例如，在L/R或R/L选择中，也许有可能将含有与指出两个选项中哪一个为当前作用中选项的图形元素或与之图形更改组合的两个选项的列表显示于接收由视频处理器2产生的视频信号的屏幕上。

通过可能输送布置的特性参数的阶层组织，有可能在选择正确三维内容布置方面指导使用者。虽然图9a及图9b的表显示三十六个不同可能布置，但通过采用此类型的阶层组织，使用者不处于滑过所有三十六个可能布置的位置中，但在选择路径的每个步骤处，取决于所涉及的阶层层级而缩减在两个或至多四个不同参数间的选择。此外，在用于选择的每个步骤处，使用者可利用通过帧显示给予其的信息。因此，正确输送布置的选择是在短时间内发生且具有所选择布置实际上为正确布置的较高可能性。关于图形接口(使用者可通过该图形接口进行特性化输送布置的不同参数的阶层选择)，象那些先前关于图形接口已经描述的考虑是有效的。

特别地，有可能提供由列出第一阶层层级的特性参数(在该实例中，“并排”及“上下”)的第一方框组成的图形接口：在突出显示或选择这些两个参数中的一个后，第二方框出现，其显示较低阶层层级的参数(在该实例中，“全”及“半”)。遵循相同程序以选择剩余参数及完成阶层选择路径。较低阶层层级的方框可简单地替换针对专用于较高阶层层级的方框所显示的方框，或作为一个替代，较低阶层方框可显示于屏幕的不同区带中，对应于较高阶层层级的方框仍被显示。如先前实施例中已经描述的，图形接口是基于来自控制单元6的使用者输入被启动及修改，响应于这些输入，控制模块5控制视频处理器2的活动，其产生意于显示图形接口的视频信号9。

关于一些或所有选择步骤，一个可能替代是向使用者建议具有最高似然值的参数为正确参数(通过以图形方式突出显示或通过在列表的第一等级中列出该参数)，而进一步辅助使用者选择正确输送布置。每个参数的似然值(对于特定选择路径是特定的)可通过控制模块5基于先前所接收的信号所进行的合适统计计算进行计算：作为一个替代，有可能由使用者或通过软件更新(在视频处理装置可经由软件(例如，经由因特网连接)或通过接收适当广播信号进行更新的情况下)提供待在制造阶段中定义的所述似然值。

根本没有必要必须对所有阶层层级进行探索，且因此，根本没有必要使使用者进行自在当前所选择的阶层层级后的第一阶层层级直至最后阶层层级的所有可能选择。例如，有可能在每个选择步骤处提供待自动地建议的最可能的流布置(即，关于属于下一层级的所有后续选择的最频繁使用的流布置)，及待同时启动的针对此布置所提供的相关三维模式。例如，假定：使用者基于可视化装置上的帧显示已针对第一层级而选择并排布置。现在，有可能使该装置自动地想象、建议及启动对应于最可能的布置的3D显示模式(例如，用于第一层级并排布置的并排、半分辨率、L/R、偶数左、偶数右欠采样，在图9a中以粗体进行突出显示)。可能地，如果容易地显示于屏幕上的对应呈现显示是正确的，则使用者可立即确认刚才所进行的选择且避免进行下一层级的选择。该缩短的选择程序，与相关呈现显示的关联可视化装置4的互动演示相结合，可以在一些更高的层级上得到应用。

所有这些默认布置可在工厂设定，其在离开制造场所后可更新，例如，在装置的本端或远程固件更新的场合中。此外，作为一个替代或另外，可形成这些布置，以便可由使用者(例如)在视频处理装置的控制交互式菜单内修改。可能发生：由于三维视频流的传输及输送格式的不确定性，在理论上可能的格式当中的一些格式实际上从未被使用，因此，可容易地识别的布置的范围很小于所列出的布置(例如图9a中)。默认布置且通常可选择的布置可储存于视频处理系统100中且可通过任何方法更新，诸如，远程更新(例如，经由广播、因特网)或本端更新(例如，自USB按键、PC加载)。

此外，有可能规定使用者在其认为布置适当后停止选择程序，因为(例如)通过三维图像在可视化装置上的显示，使用者相信当前所选择的布置是正确的。

也有可能规定通过切换布置的显示模式的按键快速地切换不同显示模式(图8a及图8b的混合显示模式，和/或图3a、图3c及图3e的个别显示模式)，以便允许使用者在关联可视化装置4的屏幕上具有被认为辨识布置及立即定义可自图8a及图8b中的对应方框中突出显示的菜单项目获得的当前作用中选择所必要的(呈现或帧)显示。

知道在第一阶层层级后的阶层层级的这些布置的事实有助于使视频处理器2正确地使重新建构尽可能地忠实于起始视频流的图像的起源。因此，当考虑适当时，即使对于定义输送布置的这些参数，也有可能应用与针对第一层级所建议的交互式机制相同的用于选择输送布置的交互式机制。

为了增加使用者正确地选择甚至低于第一层级的阶层层级的子布置的机率，有利的是以如下方式起作用：实施本发明的方法的视频处理系统100产生在选择中支持及引导使用者的视频信号，其中提供取决于内容脉络(其基于已经进行的选择及当前待进行的选择)而改变的显示。例如，假定：使用者已选择“并排、半分辨率”布置，且现在，使用者必须决定该布置为L/R抑或R/L，即，流的左图像及右图像分别配置于帧的哪一半方框中。在此状况下，视频处理系统100可产生包含显示的视频流，其中并排地置放的左图像及右图像在已自帧显示切割后以两个可能配置而一个图像配置于另一图像上。因此，使用者可了解两个显示(左显示及右显示)中的场景中对象的位置的相对差且可推断左图像及右图像已在帧中配置于何处。实际上，已知的是，远处对象(即，置放于对应于屏幕的视觉平面后方的对象)较多地在右边置放于左图像中且较多地在左边置放于右图像中；关于置放于此平面前方的对象，恰好发生相反情形。因此，通过同时地显示合适地配置于屏幕上的两个图像，使用者可容易地探测这些图像。为了促进任务，有可能应用数个方法：例如，有可能向使用者给出放大一些同源区带(即，在右或左子图像中具有同一相对位置)的可能性。也有可能通过控制单元6而使两个图像可以一个图像在另一图像上的方式在屏幕上移动且叠加这些图像，使得提供于子图像中且置放于屏幕的视觉平面后方的对象占据屏幕的同一区带：现在，视频处理系统100可自使用者所移动的两个图像的相对位置自动地推断哪一图像为左图像及右图像。

为了促进使用者的操作且同时为了减轻视频处理器2的计算负担，有可能的是，在使用者所进行的这些及其它选择操作期间，对于帧显示且对于可能三维呈现显示两者，当三维呈现显示重现于屏幕上时，使用者可通过停止特定帧上的显示来停止视频流的图像的流动。

本发明的一较佳实施例操作，使得当两个显示提供于屏幕上时，这些显示指代同一场景或截图，而独立于视频流渐进地显示(“播放(PLAY)”)或停止于静态图像(“停止(STOP)”)上的事实。在此情况下，在视频处理系统100中，帧内存及同步机制可为必要的，从而通过补偿由三维呈现处理序引入的可能延迟来允许帧显示及同一帧的对应3D呈现显示同时地提供于屏幕上。

同时，有可能辅助使用者选择布置的第四阶层层级。例如，有可能自默认或起始第四层级布置(在工厂定义或由使用者定义)起始、通过以此布置而提供的视频处理器2启动呈现，且使视频处理器2在通过控制模块5提供的合适输入后将帧显示且同时地将对应于当前作用中的第四层级布置的相关呈现显示同时地显示于关联显示屏幕30上。为了促进在抽取子图像与在内插后所获得的相关图像之间的比较，有可能将自经译码帧所获得的(左和/或右)子图像中的至少一个及至少对应经内插子图像同时地显示于屏幕上，而无获得三维效应所必要的任何进一步处理(例如，“帧交替”或“行交错”处理序)。在这种情况下，有利的是以并排方式且以合适放大方式显示两个内插前显示及内插后显示，其可能关于位置及放大因子而可由使用者改变，以便使待重现的图像区域可选择且使通过视频处理器2进行的用于重新建构在对图像的抽取或欠采样操作中所消除的像素的内插操作是否导致人为产物或更改的引入对于使用者而言有价值。实际上，在没有这些人为产物及更改的情况下，有可能推断已正确地执行重新建构，且因此，想象的第四层级布置实际上对应于译码器1的输出处所提供的布置，或无论如何，由视频处理器2进行的内插适于待重现的视频流。

为了使待放大和/或缩减和/或比例改变和/或移动的图像或子图像部分的选择更快捷，有可能用图形选择元素(例如，用矩形形状)来标记此部分。此矩形(例如)可在帧显示中移动且可具有可变延伸部。此外，有可能在也待同时地改变的呈现显示中提供对应于此部分的区域，以便允许使用者领会在帧显示与呈现显示间的对应性且定义最适当的显示。

对于针对在第一阶层层级后的这些阶层层级所进行的选择，也可重复将列表菜单连同当前所选择的呈现显示及相关帧显示一起显示于同一屏幕截图上的办法。例如，在L/R或R/L选择中，也许有可能将含有与指出两个选项中哪一个为当前作用中选项的图形元素或与的图形更改组合的两个选项的列表显示于接收由视频处理器2产生的视频信号的屏幕上。

通过可能输送布置的特性参数的阶层组织，有可能在选择正确三维内容布置方面指导使用者。虽然图9a及图9b的表显示三十六个不同可能布置，但通过采用此类型的阶层组织，使用者不处于滑过所有三十六个可能布置的位置中，但在选择路径的每个步骤处，取决于所涉及的阶层层级而缩减在两个或至多四个不同参数间的选择。此外，在用于选择的每个步骤处，使用者可利用通过帧显示给予其的信息。因此，正确输送布置的选择是在短时间内发生且具有所选择布置实际上为正确布置的较高可能性。关于图形接口(使用者可通过该图形接口进行特性化输送布置的不同参数的阶层选择)，象那些先前关于图形接口已经描述的考虑是有效的。

特别地，有可能提供由列出第一阶层层级的特性参数(在该实例中，“并排”及“上下”)的第一方框组成的图形接口：在突出显示或选择这些两个参数中的一者后，第二方框出现，其显示较低阶层层级的参数(在该实例中，“全”及“半”)。遵循相同程序以选择剩余参数及完成阶层选择路径。较低阶层层级的方框可简单地替换针对专用于较高阶层层级的方框所显示的方框，或作为一个替代，较低阶层方框可显示于屏幕的不同区带中，对应于较高阶层层级的方框仍被显示。如先前实施例中已经描述的，图形接口是基于来自控制单元6的使用者输入被启动及修改，响应于这些输入，控制模块5控制视频处理器2的活动，以产生意于显示图形接口的视频信号9。

关于一些或所有选择步骤，一个可能替代是向使用者建议具有最高似然值的参数为正确参数(通过以图形方式突出显示或通过在列表的第一等级中列出该参数)，从而进一步辅助使用者选择正确输送布置。每个参数的似然值(对于特定选择路径是特定的)可通过控制模块5基于先前所接收的信号所进行的合适统计计算进行计算：作为一个替代，有可能由使用者或通过软件更新(在视频处理装置可经由软件(例如，经由因特网连接)或通过接收适当广播信号进行更新的情况下)提供待在制造阶段中定义的所述似然值。

根本没有必要必须对所有阶层层级进行探索，且因此，根本没有必要使使用者进行自在当前所选择的阶层层级后的第一阶层层级直至最后阶层层级的所有可能选择。例如，有可能在每个选择步骤处提供待自动地建议的最可能的流布置(即，关于属于下一层级的所有后续选择的最频繁使用的流布置)，及待同时启动的针对此布置所提供的相关三维模式。例如，假定：使用者基于可视化装置上的帧显示已针对第一层级而选择并排布置。现在，有可能使该装置自动地想象、建议及启动对应于最可能的布置的3D显示模式(例如，用于第一层级并排布置的并排、半分辨率、L/R、偶数左、偶数右欠采样，在图9a中以粗体进行突出显示)。可能地，如果容易地显示于屏幕上的对应呈现显示是正确的，则使用者可立即确认刚才所进行的选择且避免进行下一层级的选择。该缩短的选择程序，与相关呈现显示的关联可视化装置4的互动演示相结合，可以在一些更高的层级上得到应用。

所有这些默认布置可在工厂设定，其在离开制造场所后可更新，例如，在装置的本端或远程固件更新的场合中。此外，作为一个替代或另外，可形成这些布置，以便可由使用者(例如)在视频处理装置的控制交互式菜单内修改。可能发生：由于三维视频流的传输及输送格式的不确定性，在理论上可能的格式当中的一些格式实际上从未被使用，因此，可容易地识别的布置的范围极小于所列出的布置(例如图9a中)。默认布置且通常可选择的布置可储存于视频处理系统100中且可通过任何方法更新，诸如，远程更新(例如，经由广播、因特网)或本端更新(例如，自USB按键、PC加载)。

此外，有可能规定使用者在其认为布置适当后停止选择程序，因为(例如)通过三维图像在可视化装置上的显示，使用者相信当前所选择的布置是正确的。

也有可能规定通过切换布置的显示模式的按键快速地切换不同显示模式(图8a及图8b的混合显示模式，和/或图3a、图3c及图3e的个别显示模式)，以便允许使用者在关联可视化装置4的屏幕上具有被认为识别布置及立即定义可自图8a及图8b中的对应方框中突出显示的菜单项目获得的当前作用中选择所必要的(呈现或帧)显示。

很清楚，本发明可应用于“帧兼容”类型及“服务兼容”类型的视频流两者。本发明可应用于任何视频处理系统100，其中有可能产生包含属于意于以三维模式而重现的视频流的帧显示的视频信号，因为视频流在关联可视化装置4上的重现可帮助使用者定义流布置(如果该流布置为错误的或被使用者或装置认为错误的)。

本发明在完全地能够自主地辨识待显示的视频流布置的视频处理系统100的状况下也是有用的，因为使用者可能希望检查装置是否在正确地操作，或因为使用者可能想要确切地知道用于当前所重现的视频流的是哪一输送格式或大体上熟悉3D技术或可用输送格式。另外，当在工厂编程视频处理器2时，及当视频处理系统100归因于失效或故障而被检验或修复时由使用者和/或由服务中心编程视频处理器2时，本发明也有用于检查视频处理器2的适当操作及其正确编程。

上文所描述且图1及图2所示的功能组件的配置是完全地说明性的，且该配置为显示实施本发明的方法的装置的实施例的简单方块图。很清楚，两个或两个以上功能区块可形成于单一硬件器件中，且同一功能区块可实施为两个实体上分离的电路组件(例如，视频记录器、机顶盒、电视机、监视器)之间的合作。因此，例如，可能发生：在未来，视频处理器2和/或控制模块5和/或译码器1间的两个或两个以上功能区块集成到单一集成电路中，然而，其中清楚地提供形成为实施本文所描述的本发明的硬件或软件的模块。

控制模块5又可由通常监督意于实施本发明的方法的视频处理装置的操作的微处理器形成。该控制模块可形成为编程的逻辑软件或硬件，或其可由合适的电路形成。

视频处理器2可在包含译码器1和/或控制模块5的装置外部；用于此功能单元的本文所描述的用于实施本发明的功能可(例如)由与外部可视化装置集成的视频处理器进行，该外部可视化装置并入用于对应于由实施本发明的方法的视频处理系统100产生的视频信号的图像的视频重现的屏幕或投影仪。在此情况下，提供连接译码器与视频处理器的合适数据接口，其使有可能转移来自译码器1的视频流及来自控制模块5的控制信号的通过。由集成于视频处理系统100中的视频处理器2执行的任务可由集成于外部可视化装置中的视频处理器部分地或完全地执行，在此情况下，除了屏幕以外，该外部可视化装置也包含其自己的视频处理器，该视频处理器通过用于控制信号的交换的数据接口(其可与连接接口实体上或逻辑上重合或不重合)而自控制模块5接收视频流及控制信号且与该控制模块合作，以便实施本发明。

通常，用于产生意于产生来自译码器的视频流起始的三维显示的视频信号的处理程序可划分成不同操作，其取决于待重现的视频流的输送布置及与此流相关联的三维屏幕的类型而可变。取决于可视化装置为了获得三维效应所需要的模式，有可能尤其提及两个左和/或右子图像的提取、自第一子图像起始的第二子图像的计算、子图像的内插，及其在空间或时间上的交替。

必须注意，这种操作中的一些可取决于视频流为“帧兼容”类型抑或“服务兼容”类型的事实而省略。然而，这种操作的部分可由集成于实施本发明的方法的装置中的第一视频处理器执行，且其它部分可由在该装置外部集成于可视化装置4中的第二视频处理器执行。相似地，集成于该装置中的视频处理器2可由串行地和/或并行地合作以用于执行产生三维显示的处理序的不同操作模块组成，而不脱离本发明的保护范围。

在视频处理系统100中，甚至可提供数个译码器，每个译码器意于解码特定类型(例如，“帧兼容”或“服务兼容”)的视频流或视频流集合(“L+深度”、“2D+差量”)。在此情况下，控制模块5可适时地控制及启动为了获得本发明所需要的帧显示而请求的译码器。

除了三维视频流以外，实施根据本发明的方法的视频处理系统100可能够也显示二维视频流。也有可能规定：如果该装置不能够验证视频流为二维的或是三维的，则该装置使关联可视化装置以二维模式重现视频流，即，没有使用以三维模式显示输入视频流的任何处理程序。

可视化装置4包含任何类型或种类的屏幕或投影仪，条件为：该屏幕或投影仪能够在佩戴或未佩戴特定眼镜的使用者接收由实施本发明的方法的视频装置产生的视频信号时产生对使用者的三维效应。屏幕可无差异地为LCD类型(LED或非LED)、CRT、背面投影或等离子；屏幕可由投影仪组成；屏幕可使用任何3D呈现技术(例如，帧交替、行交错、列交错、像素交错)；且屏幕可包含或不包含参与或未参与根据上文所描述的模式来产生三维显示的处理的视频处理器。

因此，可容易地理解，先前所描述的内容可经受各种改变、改进、相似部件及组件的替换而不脱离本发明的思想，因为其在以下权利要求中进行较好地指定。

例如，含有构成视频流的图像的帧通常具有“全HD”尺寸，即1920x1080的尺寸，即针对1080个像素行的1920个列的数组，且这些帧以MPEG4格式进行正确地压缩(即，编码)。然而，本发明也无区别地应用于具有不同尺寸的帧(较小或较高帧(例如，1280x720或2K))，且独立于用于视频流的图像的编码或压缩程序的存在且甚至独立于其类型(例如，MPEG2、MPEG4、WMV，等等)。

Claims (21)

1.一种用于处理三维视频内容的方法，允许使用者对于内容本身选择适当的输送布置以将它显示在关联的可视化装置(4)的屏幕上，其中视频流处理器(2)被输入有输入视频流(Fi)，所述输入视频流(Fi)包含一系列单视频帧，每个单视频帧包含准备好由所述关联的可视化装置(4)使用的且根据特定输送布置而配置于所述单视频帧内的一个或多个图像或者视频数据，所述特定输送布置必须被所述视频流处理器(2)适当地个性化以在所述关联的可视化装置(4)上三维地适当地显示所述内容，其特征在于：所述视频流处理器(2)生成能够重现于所述关联的可视化装置(4)的所述屏幕上的输出视频信号(9，13)，其中，所述视频流处理器(2)能够从第一操作模式转换为第二操作模式，在第一操作模式中，所述视频流处理器(2)对所述输入视频流(Fi)执行转换和适配，以使得它适于根据预先确定的模式重现于所述关联的可视化装置(4)上，从而在所述可视化装置(4)的所述屏幕上产生三维效果，在第二操作模式中，通过将这种一个或多个图像或者视频数据具有的配置和内容保持到所述单帧中，在当前被选择以供显示的所述视频流(7)的单视频帧中包含的所述一个或多个图像或者视频数据的至少一部分被显示在这种屏幕的一部分中，所述一个或多个图像或者视频数据的配置和内容给予使用者被当前选择的三维内容所采用的输送布置的视觉指示并且帮助使用者选择所述具体的输送布置。

2.根据权利要求1所述的方法，其中所述一个或多个图像或者视频数据的所述至少一部分是由所述视频流处理器(2)按以下方式而产生的，所述方式使得所述至少一部分似乎定位于对应于所述可视化装置(4)的屏幕(30)的表观平面的视觉平面中。

3.根据权利要求1或2所述的方法，其中所述一个或多个图像或者视频数据的所述至少一部分按以下方式由所述视频流处理器(2)生成，所述方式使得所述至少一部分可由所述使用者放大及缩减、和/或比率改变、和/或移动。

4.根据权利要求1或2所述的方法，其中响应于由与控制模块(5)相关联的控制单元(6)发起的控制信号(8)，所述视频流处理器(2)从所述第一操作模式转换为所述第二操作模式，所述控制单元(6)可由使用者操作。

5.根据权利要求4所述的方法，其中提供用于辨识所述输入视频流(Fi)的输送布置的装置，且所述控制信号(8)在所述特定输送布置未被所述辨识装置辨识或被所述辨识装置认为不对应于所确定的输送布置的情况下产生。

6.根据权利要求5所述的方法，其中所述三维显示能够通过启动产生所述三维显示的对应程序而得到。

7.根据权利要求6所述的方法，其中除了任何单向调整大小以外，所述一个或多个图像或者视频数据(43、45)的至少所述一部分根据产生所述三维显示的所述程序正确地重现于所述关联的可视化装置(4)上。

8.根据权利要求6所述的方法，其中可重现于所述关联的可视化装置(4)上的所述视频信号(9、13)包含指示当前用于产生所述三维显示的所述程序中的所述输送布置或作用中布置的显示。

9.根据权利要求6所述的方法，其中可重现于所述关联的可视化装置(4)上的所述视频信号(9、13)包含至少部分地指示所述输入视频流(Fi)的多个输送布置的列表的显示，对于所述显示，视频处理器(2)可启动产生所述三维显示的所述程序。

10.根据权利要求9所述的方法，其中，当所述作用中布置被突出显示时，所述列表的所述输送布置可由使用者通过控制单元(6)选择，且当从所述列表选择一个布置时，与所述控制单元相关联的控制模块(5)按以下方式而操作，所述方式使得所述视频流处理器(2)启动对应于由所述使用者所选择的所述输送布置的三维显示产生程序。

11.根据权利要求9所述的方法，其中所述列表还包括未编程的布置，且其中，如果选择所述未编程布置中的一个，则所述控制模块(6)按以下方式而操作，所述方式使得通过视频处理器(2)产生的输出视频信号包含所选择的输送布置不被支持的指示。

12.根据权利要求10或11所述的方法，其中：

所述多个确定的输送布置被储存为选项的集合，所述选项具有不同阶层层级，其可通过与所述控制模块(5)相关联的所述控制单元(6)而由所述使用者以预定序列相继地连续选择；

所述控制模块(5)按以下方式而操作，所述方式使得响应于通过使用者可操作控制单元(6)发出的控制信号(10)，所述视频流处理器(2)产生包含关于由所述使用者当前所选择的输送布置的阶层层级的布置的指示的输出视频信号；

包含于通过所述视频流处理器(2)产生的所述输出视频信号中的所述一个或多个图像或者视频数据的所述至少一部分通过考虑到所述输送布置的较低阶层层级的先前选择以及当前所选择的所述阶层层级的选择而显示。

13.根据权利要求12所述的方法，其中对于可由使用者在输送布置的特定阶层层级处选择的至少一个选项，对于下一阶层层级可选择的所有选项是预定义的，从而形成默认布置，使得当这种至少一个布置由所述使用者选择时，所述控制模块(5)按以下方式而操作，所述方式使得视频流处理器(2)启动为所述默认布置而编程的三维显示产生程序。

14.根据权利要求1或2所述的方法，其中所述一个或多个图像或者视频数据的所述至少一部分半透明地叠加于所述三维显示上。

15.根据权利要求1或2所述的方法，其中所述一个或多个图像或者视频数据的所述至少一部分不透明地叠加于所述三维显示上。

16.根据权利要求1或2所述的方法，其中所述视频流处理器(2)的编程可通过远程或本端更新进程进行更新，和/或可由使用者确定或重新确定。

17.根据权利要求1或2所述的方法，其中所述视频流处理器(2)适于产生二维视频信号。

18.一种用于处理三维视频内容的视频处理装置，允许使用者对于内容本身选择适当的输送布置以将它显示在关联的可视化装置(4)的屏幕上，所述视频处理装置包含视频流处理器(2)，所述视频流处理器(2)被输入有输入视频流(Fi)，所述输入视频流(Fi)包含一系列单视频帧，每个单视频帧包含准备好由所述关联的可视化装置(4)使用的且根据特定输送布置而配置于所述单视频帧内的一个或多个图像或者视频数据，所述特定输送布置必须被所述视频流处理器(2)适当地个性化以在所述关联的可视化装置(4)上三维地适当地显示所述内容，其特征在于：所述视频流处理器(2)产生可重现于所述关联的可视化装置(4)的所述屏幕上的输出视频信号(9、13)，其中，所述视频流处理器(2)能够从第一操作模式转换为第二操作模式，在第一操作模式中，所述视频流处理器(2)对所述输入视频流(Fi)执行转换和适配，以使得它适于根据预先确定的模式重现于所述关联的可视化装置(4)上，从而在所述可视化装置(4)的所述屏幕上产生三维效果，在第二操作模式中，通过将这种一个或多个图像或者视频数据具有的配置和内容保持到所述单帧中，在当前被选择以供显示的所述视频流(7)的单视频帧中包含的所述一个或多个图像或者视频数据的至少一部分被显示在这种屏幕的一部分中，所述一个或多个图像或者视频数据的配置和内容给予使用者被当前选择的三维内容所采用的输送布置的视觉指示并且帮助使用者选择具体的输送布置。

19.根据权利要求18所述的视频处理装置，包含用于重现通过所述视频流处理器(2)产生的输出视频信号(9、13)的用于屏幕的投影仪。

20.根据权利要求18或19所述的视频处理装置，其中所述可视化装置(4)被集成到所述视频处理装置中。

21.根据权利要求18或19所述的视频处理装置，其中所述可视化装置(4)是通过有线或无线连接接口而与所述视频流处理器(2)相关联的。