CN1615615A - 用于传送和过滤视频内容数据的系统 - Google Patents

Abstract

移动装置正在成为能够发送和接收视频以及音频和文本消息的多媒体终端。发送器11能够把内容数据13传送到接收器12。描述了怎样能够通过将添加适当效果的预定义过滤器信号14附加到剪辑中而编辑和修改视频剪辑并发送该剪辑(颜色修改，图标的覆盖，场景间的渐变等)。过滤器14与视频内容13一起发送，而不是在传输之前使用过滤器编辑视频剪辑，因此允许接收器使用或不使用过滤器或者使用不同过滤器来观看剪辑。

Description

用于传送和过滤视频内容数据的系统

本发明涉及一种传送内容数据、特别是视频的方法，其中发送器提供内容数据，发送器产生表示内容数据的传输信号，传输信号通过传输信道传送到接收器，接收器接收传输信号并恢复内容数据，然后接收器再现内容数据。

本发明还涉及一种用于发送内容数据、特别是视频的装置，该装置包括用于提供内容数据的输入部件以及用于产生表示内容数据的传输信号的部件。

本发明还涉及一种用于接收内容数据、特别是视频的装置，该装置包括用于接收传输信号的部件、用于从传输信号中恢复内容数据的部件以及用于再现内容数据的部件。

本发明还涉及一种信号以及将该信号记录在其上的记录载体。

这样的方法、这样的装置以及这样的信号从US 5557320中可知。该文件涉及一种在用于视频邮件的基于发送器-用户的传输流量控制系统中通过传输信道从发送器向接收器以传输信号的形式传送内容数据的方法。电子数据主要以具有或不具有声道的静态或动态图片影像的形式传送。递送网络系统提供商提供网络实时控制视频邮件传输的服务。路径、带宽分配、协议格式等可以由网络提供商自行设置，也可以提供压缩/解压缩或者加密处理器。然而对用户而言，没有控制这类内容数据传输的灵活性。

因此本发明的一个目的是提供更加灵活的方式来传送内容数据。根据本发明的第一方面，此目的通过开头段落中所述的方法实现，其特征在于，发送器提供用于修改内容数据的过滤器，发送器产生表示过滤器的过滤器信号，过滤器信号通过传输信道传送至接收器，接收器接收过滤器传输信号并恢复过滤器，然后接收器通过过滤器来处理内容数据。

根据本发明的第二方面，此目的通过开头段落中所述的发送装置实现，其特征在于，所述装置包括用于提供过滤器以便修改内容数据的过滤器输入部件以及用于产生表示过滤器的过滤器信号的部件。

根据本发明的第三方面，此目的通过表示内容数据以及第一方法中使用的过滤器的过滤器信号来实现，其特征在于，过滤器用于设置远程处理单元以过滤内容数据，特别是视频。

根据本发明的第四方面，此目的通过开头段落中所述的再现装置来实现，其特征在于，所述装置包括用于接收表示过滤器的过滤器信号的部件以及用于处理过滤器设置的内容数据的处理部件。

本发明基于以下认识。如移动电话之类的装置正日益成为既能发送和接收音频和文本消息、又能发送和接收视频的多媒体终端。本发明针对如何能够通过将添加了适当效果的预定义“过滤器”附加到正发送给朋友的视频剪辑中来编辑和修改该剪辑(例如颜色修改、图标的覆盖、场景间的渐变等)。例如，如果在浪漫的假日发送视频消息给你的朋友，你可能喜欢编辑剪辑以创造更浪漫的氛围(背景音乐，“玫瑰色”过滤器，平缓的视频淡入淡出)。然而，如果从“冒险的假日”发送消息，你可能喜欢使用生动的过滤器修改剪辑(例如MTV音乐视频)。过滤器与视频一起发送，而不是在传输之前使用过滤器编辑视频剪辑，因此允许接收器使用或不使用过滤器或使用它们自己的过滤器来观看剪辑。

根据本发明的第五方面，此目的通过提供在第一方法中使用的过滤器的方法来实现，其特征在于，过滤器用于设置处理单元以过滤内容数据，特别是视频，该方法中有许多过滤器可供选择，接收表明过滤器选择的客户请求，产生表示过滤器的过滤器信号，然后将过滤器信号通过传输信道传送至客户。

效果是可以选择适当的过滤器并且过滤器可以被下载到发送器或接收器，不需要过滤器本身在发送器和接收器之间实际传送。

根据本发明的方法、装置和信号的其它优选实施例在进一步的权利要求中给出。

进一步参考以下描述中通过例子说明的实施例并参考附图，本发明的这些以及其它方面将会更加清晰，其中

图1表示发送器和接收器，

图2表示发送器、接收器和过滤器提供者，

图3表示视频处理，

图4表示记录载体，以及

图5表示过滤器。

这些图中，与已描述的元件对应的元件具有相同的参考标号。

图1表示发送器和接收器。发送器11具有用于提供内容数据的内容输入单元15。内容数据可以是例如从外部源检索的或者通过照相机模块在发送器内创建的视频剪辑或静态图像。输入视频的格式可以是任何适当的、最好是标准的编码(例如MPEG视频)。内容数据还可以包含在发送端在用户的控制下由内部或从外部源提供的文本或音频。发送器配备了过滤器输入单元16，用于定义要用来修改内容数据以合乎用户喜好的过滤器。发送器还包括用于产生表示内容数据的传输信号13的内容信号单元17，以及用于产生表示用户选择的用来发送的过滤器的过滤器信号的过滤器信号单元18。在一个实施例中，所述装置具有一个过滤器创建单元，用于通过用户提供的输入定义特定的过滤器，由此用户可以定义过滤器的参数。内容数据通过内容信号单元17被编码成传输信号13并且过滤器数据通过过滤器信号单元18被编码成过滤器信号14。信号通过传输信道(例如移动电话网或因特网)或者记录载体(例如CD-R)传送至接收器12。接收器12具有用于接收传输信号13的接收信号单元19以及用于接收过滤器信号14的过滤器输入单元20。参考图3，接收器12还包括处理单元，用于执行如下所述的过滤器信号定义的过滤器操作。内容数据被过滤并且可以被再现在例如视频显示器上，或者可以提供给一个输出端。通过过滤器信号14传送的过滤器可以提供如下各种各样的效果。

颜色过滤器：以一致的方式改变每帧的颜色，例如：

-将整个剪辑改为黑白色；

-创建分级的玫瑰色过滤器(图像上面非常红，屏幕下面正常颜色)；

-在不同帧中特定颜色的淡入淡出。

图像过滤器：改变每帧的结构，例如：

-模糊边缘；

-“热雾”效果，随着帧前进从一边到另一边摇晃部分图像；

-“镜厅(Hall of mirrors)”效果—拉伸图像的一些部分，压缩另一些部分。

覆盖视频/图像。操作是在视频之上绘制图标或者使动画图像移动穿过屏幕，滚动视频之下的文本等。

场景渐变。从一个场景渐变至另一个。

场景渐变过滤器会要求自动场景改变检测，这意味着过滤器必须是“非流式传输”类型。

为修改音频或者替换声道，过滤器可能包含音频过滤器操作，例如“添加声道”，用于为视频剪辑添加背景音乐。可以选择过滤器输入文件的格式。一种示例格式在下面通过图5描述的实施例中给出。过滤器操作由处理单元执行，该处理单元被设置为过滤器规定的过滤类型。处理单元可能使用编码的视频数据，因为编码的视频数据可以从内容数据输入中获得。在一个实施例中，过滤器对解码的视频进行处理，因此与视频编码格式无关。通过这种方法，过滤器处理可以用于不同类型的视频数据。有许多很好理解的方法用于过滤视频以修改内容(例如颜色/对比度/亮度以及镜头之间的切换)。

图2表示发送器、接收器和过滤器提供商。除了参考图1描述的系统外，发送器11现在具有过滤器输入单元，用于通过网络21(例如因特网)从外部过滤器提供商22检索过滤器。接收器也具有过滤器输入单元25，用于通过网络21从外部过滤器提供商22检索过滤器。发送者可选择提供商可提供的候选过滤器之一并下载此过滤器到他的装置。然后，过滤器可通过过滤器信号24传送至接收器。或者，发送器可能仅仅在过滤器信号24中包含一个对过滤器的引用，然后接收器可以从提供商22或从不同的外部源检索过滤器本身。在一个实施例中，接收器具有过滤器数据的本地存储器，用于存储要使用得较为频繁的过滤器。现在引用所指示的过滤器可能在接收器存储器中已经可获得。目前，移动电话允许一些较小的功能部件通过网络下载(通常是付费的)，例如，新的铃声。同样很容易理解下载屏幕保护程序或应用程序(例如java小应用程序)，例如用于PC或者能够运行虚拟机的个人数字助理PDA。过滤器的下载可以使用相似的传输技术来完成。

图3表示视频处理。在视频输入单元31中以编码视频信号的形式接收视频输入，并传送至解码器32。解码之后，解码视频被传送至处理单元33。处理单元被设置成通过来自过滤器输入单元35的过滤器、例如从外部源接收的过滤器输入文件来执行过滤器操作。过滤之后，视频被传送至输出单元34。在一个实施例中，输出单元包括用于再现所处理的视频的显示器。在另一实施例中，装置具有选择器36，用于选择过滤之后的视频输出信号或者未经过滤的视频信号。还可能包括另一个选择器，用于使用从装置中的存储器37本地提供的用户过滤器。应当指出，视频过滤器包含规则的一般集合，这些规则可以采用适当的风格修改任何视频剪辑。过滤器与任何特定的视频剪辑无关。特别是过滤器处理应用于解码后的视频，而与编码类型无关。然而，在不同的实施例中，处理单元可能与编码视频连接，过滤器也可能应用于编码视频。对于过滤器，可采用两个主要的处理变型：流式或者非流式。在流式模型中，过滤器引擎修改每一视频帧，然后在接收下一帧之前输出它。换句话讲，执行过滤处理不要求任何关于将来的视频帧的信息；它的优势在于，给视频显示过程增加最小延迟。在非流式模型中，用于特定帧的过滤处理依赖于视频流中将来的帧。这种情况的一个简单例子是过滤器引擎接收整个解码的视频剪辑，处理这些内容(例如找出场景改变发生的位置)，然后输出过滤后的视频剪辑。这允许处理中更具灵活性，但是暗含了观看视频时的延迟。

在一个实施例中，视频输入单元35能够从外部源提供过滤器。外部源可能是由读取单元、例如CD读取器读取的记录载体。或者，视频过滤器可以通过许多不同的方式下载到装置，例如，移动手机。本发明假设移动装置能够使用标准(基于因特网的)技术连接到网络。如果是这样，则每个视频过滤器都可以使用它自己的URL(统一资源定位符)存储在网络上。手机则会请求下载此URL。手机能够将下载文件识别为“视频过滤器文件”，因为这些文件被分配了它们自己特有的数据类型以将它们标识为视频过滤器(例如，如果通过HTTP下载，MIME类型自动和数据一起发送)。应当指出，视频输入单元31和过滤器输入单元35可能被配置成从发送器接收组合的视频和过滤器消息。很容易理解两个移动装置之间的数据消息传输(例如，类似SMS的文本消息)。另外，发送器和接收器之间的电子邮件传输也是众所周知的，并且也可设置在2个具有因特网能力的移动电话之间。为了发送组合的视频和过滤器消息，需要一起发送消息的两个组成部分以及它们各自的数据类型。例如，如果使用电子邮件作为底层的传输协议，消息可以作为多部分MIME消息发送；同时接收装置将会接收到视频和过滤器，并相应地显示过滤后的视频。在一个实施例中，发送器和接收器可以例如使用浏览器通过众所周知的HTTP协议在网络上经由URL访问数据，例如通过POP3/SMTP接收和发送电子邮件消息，并解码和显示MPEG4视频。例如，2个WAP(无线接入协议)启用的移动电话可以使用WTP协议访问数据。发送器也可包括视频内容发生器，例如，用于捕获的照相机和用于将视频编码为MPEG4的编码器。如果这样假设，本发明可以使用下面的步骤实现。过滤器根据HTTP通过浏览器下载。它们具有明确定义的MIME类型(例如“文本视频过滤器”)。过滤器文件格式是基于XML的；一个示例过滤器在下面说明。下载后，过滤器存储在移动电话存储器中。当发送组合的视频和过滤器时，消息作为多部分MIME电子邮件消息(包含MPEG4剪辑和“文本视频过滤器”过滤器)发送。利用这些概念，过滤器的发展将会只依赖于如何定义用于创建和显示视频消息的软件以及如何定义“过滤器引擎”。

图4表示带有为记录而设计的轨道42的记录载体41和中心孔40。轨道42按照线圈的螺线图案排列。记录载体的中间区域中轨道的第一部分构成了容纳控制数据的引入端43。记录载体包括带有记录层和保护层的透明衬底。记录层可以是光可写的，例如通过相位改变，或者是通过用于写信息的装置而磁光可写的，例如已知的可重写CD或者可记录CD。也可以通过生产过程向记录层提供信息，其中首先生产出母盘，然后通过压制进行复制。信息被组织成信息块并且通过反射较多辐射和极少辐射的一系列区域的形式的光可读标记表示，例如CD中不同长度的一系统坑点。信息块包括上面描述的表示过滤器数据结构和参数的过滤器信号。记录载体的一个实施例包括过滤器的大集合，因此用户可以选择合适的过滤器。在一个实施例中，记录载体包括视频处理软件，用于对标准处理单元、例如PC编程，用于执行视频编码或解码以及过滤器处理。

图5表示过滤器。过滤器51以XML(扩展标记语言)类型语言定义。第一指令指示要从外部源检索的颜色过滤器；在这种情况下指示因特网URL。这部分过滤器将把颜色改为黑白色。下一段可能包含图像操作，但此例中均不包含。最后一段包含覆盖操作，在这种情况下，处理单元要覆盖命名为smiley的图标。

尽管已经通过采用移动手机的实施例说明了本发明，但也可使用任何再现装置或其它合适的装置。对于记录载体，还已经描述了光盘，但是如磁盘或磁带之类的其它媒体也可使用。应当指出，在本文档中，术语“包括”并不排除那些列出的元件或步骤之外的其它元件或步骤的出现，而且在元件之前的单词“一个”并不排除多个这类元件的出现，任何参考标号都不限定权利要求的范围，本发明可以同时通过软件和硬件来实现，并且几个“部件”可能通过同一项硬件表示。此外，本发明的范围不限于这些实施例，本发明存在于上面描述的每一个新特点或特点组合中。

Claims (18)

1.传送内容数据、特别是视频的方法，其中：

发送器(11)提供所述内容数据，

所述发送器产生表示所述内容数据的传输信号(13)，

所述传输信号通过传输信道传送至接收器(12)，

所述接收器接收所述传输信号并恢复所述内容数据，以及

所述接收器再现所述内容数据，

其特征在于

所述发送器(11)提供用于修改所述内容数据的过滤器，

所述发送器产生表示所述过滤器的过滤器信号(14)，

所述过滤器信号通过所述传输信道传送至接收器，

所述接收器(12)接收所述过滤器传输信号并恢复所述过滤器，以及

所述接收器通过所述过滤器处理所述内容数据。

2.提供在权利要求1的方法中使用的过滤器的方法，所述过滤器用于设置处理单元以过滤内容数据、特别是视频，在所述方法中有大量的过滤器可供选择，

接收指明过滤器选择的客户请求，

产生表示所述过滤器的过滤器信号，以及

所述过滤器信号通过传输信道(21)传送至所述客户。

3.用于发送内容数据、特别是视频的装置，所述装置包括用于提供所述内容数据的输入部件(15)，以及

用于产生表示所述内容数据的传输信号的部件(17)，

其特征在于

所述装置包括用于提供过滤器以修改所述内容数据的过滤器输入部件(16)，以及

用于产生表示所述过滤器的过滤器信号的部件(18)。

4.如权利要求3所述的装置，其特征在于，所述装置包括用于处理所述过滤器设置的所述内容数据的处理部件(33)。

5.如权利要求3所述的装置，其特征在于，所述装置包括用于再现所述处理后的内容数据的部件(34)。

6.如权利要求3所述的装置，其特征在于，所述装置包括用于从外部源、特别是通过网络或者从存储媒体检索过滤器的过滤器输入部件(25)。

7.如权利要求3所述的装置，其特征在于，所述装置包括用于发送作为组合消息的所述传输信号和所述过滤器信号的部件。

8.表示内容数据以及权利要求1的方法中使用的过滤器的过滤器信号，所述过滤器(51)用于设置远程处理单元以过滤所述内容数据、特别是视频。

9.如权利要求8所述的过滤器信号，其特征在于，所述过滤器(51)包括用于过滤流式视频的参数，其中过滤过程只与直到下一个要显示的帧的视频帧有关。

10.如权利要求8所述的过滤器信号，其特征在于，所述过滤器(51)包括用于过滤非流式视频的参数，其中所述过滤过程与视频中包括下一帧以外将被显示的帧的多个帧相关。

11.如权利要求8所述的过滤器信号，其特征在于，所述过滤器(51)包括颜色过滤器和/或图像结构过滤器和/或覆盖过滤器和/或场景渐变过滤器。

12.如权利要求9所述的过滤器信号，其特征在于，所述过滤器(51)包括音频过滤器和/或附加的音频。

13.记录载体(41)，在所述记录载体上，在轨道(42)中提供如权利要求8、9、10、11或12所述的过滤器信号，轨道中的信息图案表示所述过滤器信号，所述过滤器用于设置远程处理单元以过滤内容数据、特别是视频。

14.如权利要求13所述的记录载体，其特征在于，所述记录载体包括用于根据所述过滤器处理内容信息的计算机程序产品。

15.用于接收内容数据、特别是视频的装置，所述装置包括用于接收传输信号的部件，

用于从所述传输信号中恢复所述内容数据的部件，以及

用于再现所述内容数据的部件，

其特征在于

所述装置包括用于接收表示过滤器的过滤器信号的部件(20)，以及

用于处理所述过滤器设置的所述内容数据的处理部件(33)。

16.如权利要求15所述的装置，其特征在于，所述装置包括用于再现所述处理后的内容数据的再现部件(34)。

17.如权利要求15所述的装置，其特征在于，所述装置包括用于再现经过或未经过所述过滤器处理的所述内容数据的选择器(36)。

18.如权利要求15所述的装置，其特征在于，所述装置包括用于按照所述过滤器信号中的引用所指示的、从外部源、特别是通过网络或者从存储媒体中检索过滤器的过滤器输入部件(35)。

Images