CN101288069A

CN101288069A - 可点击视频超链接

Info

Publication number: CN101288069A
Application number: CNA2006800383089A
Authority: CN
Inventors: Y·李; J·孙; L·李; W·张; X·唐; M·赫特; E·皮卡德
Original assignee: Microsoft Corp
Current assignee: Microsoft Corp
Priority date: 2005-10-14
Filing date: 2006-10-13
Publication date: 2008-10-15

Abstract

所提供的系统(100)将可点击超链接(304)与出现在视频流(200)中的对象(204)绑定或相关联。超链接可在与视频流分开的流中发送，向用户提供用户界面(300)来激活超链接。超链接的激活可引起至相关联网站(308)的重定向。此外，可就用户对于兴趣的活动以及对于视频中的特定超链接的激活来提供反馈。

Description

可点击视频超链接

背景

超链接广泛用于电子文本文档中，且一般用浏览器(即，web浏览器)实现。超链接可被视为在诸如超文本文档的文档中例如词语、短语、符号或对象的元素与同一文档、另一文档、文件或脚本中的一不同元素之间的连接。超链接可通过用户通过诸如鼠标的交互式用户设备点击超链接来激活。当用户点击超链接时，浏览器可被重定向至该元素或其它文档。超链接的概念也可用在图像上，尤其用作超文本标记语言中的图像上的“地图”标签。例如，当用户点击具有地图标签的区域时，该浏览器被重定向到所链接的网页。

参考静态文档作出以上关于超文本的概念所述的实现。换言之，超链接存在于没有改变的文档上。浏览器和其它应用程序不仅支持静态电子文档，而且也支持视频。从而，期望随视频或视频流中的元素一起来实现超链接概念。然而，随视频一起实现超链接可能存在若干问题，包括将超链接与视频帧中的移动目标对象相关联。此外，视频中的超链接对于观看体验而言会分散注意力。

概述

视频流包括视频帧序列，且标识了包括一对象的关键视频帧。超链接被绑定至该对象，且与该视频流一起提供包括该超链接的单独流。超链接可由用户在接收视频流和超链接流的设备处激活。

提供该概述以简化形式介绍将在以下详细描述中进一步描述的概念选集。该概述不旨在标识所要求保护的主题的关键特征或本质特征，也不旨在用于帮助确定所要求保护的主题的范围。

内容的简要描述

参考附图描述了详细描述。附图中，参考标号中最左边的数位标识了其中该参考标号首次出现的附图。在不同附图中使用同一参考标号指示相似或相同的项目。

图1是用于随视频提供超链接的示例性系统的框图。

图2是与超链接相关联的视频帧的示意图。

图3是在视频流的对象中提供超链接的图形用户界面的图示。

图4是示出用于在视频流上创建超链接的过程的流程图。

图5是示出用于激活视频中的超链接的过程的流程图。

图6是示出用于就用户对于视频中的超链接的行为提供反馈的过程的流程图。

详细描述

图1示出了随视频流提供超链接的示例性系统100。具体地，在服务器或源计算机102处超链接与对象相关联。视频流以及所创建的超链接流可通过网络106发送给接收设备或计算机104。网络106可包括一个或多个网络，包括因特网。

服务器计算机102包括若干计算机之一，诸如个人计算机、专用服务器或其它计算设备。计算机102包括如由处理器108表示的一个或多个处理单元或处理器。计算机102也具有可由处理器108访问或控制的存储器110。存储器110包括并表示存储存储器、动态存储器、只读存储器、读存取存储器等。操作系统112被包括在服务器计算机102中，且可驻留在存储器110中。

此外，计算机102包括一个或多个应用程序114。具体地，应用程序114包括提供或用于访问音频和视频流的应用程序。具体访问以MPEG和其它格式提供的视频流，且在本示例中被表示为创作工具116的应用程序用于将超链接与视频流中的具体对象相关联。

在此示例中，创作工具116提供一单独流，它包括与单独的视频流的视频帧中的对象相关联的超链接。这两个单独的流可彼此同步或定时，并经由网络100发送。提供输入/输出118来发送视频流和超链接流。在某些情况中，可实现特定的通信协议(例如，RDP)，以及特定的传输协议(例如，TCP/IP)。输入/输出118可包括支持这样的通信协议、传输协议和用于传送视频流、超链接流和其它数据(即，诸如音频和字幕流的其它流)的其它协议的特定的编码器、解码器和通信接口(例如，有线、无线等)。输入/输出118还包括接收其它数据和信息的功能。

创作工具116可实现如下所述允许用户标识一系列帧中的一个或多个对象并将超链接与对象相关联的显示器120的使用。输入/输出118可包括在显示器120上显示视频流和超链接的任何接口(例如，模拟视频、数字视频等)。

接收计算机104可以是各种计算和娱乐设备之一，诸如个人计算机、个人数字助理、机顶盒(例如，Web TV、因特网协议TV等)。接收计算机104包括如由处理器122表示的一个或多个处理单元或处理器。计算机104也包括由处理器122访问或控制的存储器124。存储器124包括并表示存储存储器、动态存储器、只读存储器、读存取存储器等。操作系统126被包括在接收计算机104中，且可驻留在存储器124中。

此外，计算机104包括一个或多个应用程序130。具体地，应用程序130包括回放所接收的视频流以及与视频流同步的超链接流的应用程序。浏览器程序，具体为浏览器130可与其它应用程序一起或不与其它应用程序一起回放视频流和相关联的超链接流。浏览器130还被实现为允许用户交互，诸如激活超链接并重定向到与特定的超链接相关联的站点(即，网站)。

提供输入/输出132来接收视频流和超链接流。输入/输出132可包括支持各种通信协议、传输协议和用于接收视频流、超链接流和其它数据的其它协议的特定的编码器、解码器和通信接口(例如，有线、无线等)。输入/输出132还包括发送其它数据和信息的功能。

应用程序128，具体为浏览器130可实现显示带有与视频流中的特定对象相关联的超链接的视频流的显示器134的使用。输入/输出134可包括在显示器134上显示视频流和超链接的任何接口(例如，模拟视频、数字视频等)。

图2示出了与超链接相关联的示例性视频帧。视频流200包括多个且连续的视频帧202的串或序列。在典型的实现中，帧的数目可以数百个帧。视频流200及其视频帧可按照诸如由运动图像专家组即MPEG定义的标准的若干标准之一来格式化。

在实现中，标识了帧202的两个关键帧。具体地，标识了第一帧202和最后一帧202，其中在第一帧202与最后一帧202之间存在视频流200的中间帧202。在此示例中，将帧202(1)表示为第一关键帧，并将帧202(N)标识为最后关键帧。在对象上放置形状204。在此示例中，帧中与形状204相关联的对象是女人所穿的“黑夹克”。在此示例中，使用矩形来标识形状204；然后，可使用除矩形以外的形状。

形状204及其所标识的对象(即，“黑夹克”)与特定超链接相关联。具体的相关联可由以上在图1中的创作工具116执行。在一个实现中，在Zhang等人于2005年10月14日提交的尚待批准的美国专利申请第60/727,119号中描述的算法和方法描述了一对象如何与视频和视频帧相关联以及如何随视频和视频帧跟踪对象。在某些情况中，作为视频流中帧202(1)与202(N)的中介(即，其之间)的其它关键帧可被标识，以便使用特定算法更好地跟踪结果。换言之，使用附加的中间帧202来实现更好的跟踪结果。

在此示例中，特定对象由形状204标识(即，“黑夹克”)并与特定超链接相关联；然而，在其它示例中，多个形状和对象可被标识并与不同的超链接相关联。可在超文本文档中通过诸如SGMTL和HTML的标记语言中的标签来指示超链接。

可基于形状204的关联来创建单独的超链接流。超链接流可包括与每一帧202相关联的超文本文档。换言之，存在关联每一帧202的超文本文档。超文本流可类似于音频或字幕流随视频流发送的方式与视频流200分开发送。包括在超文本流中的信息包括超链接、形状(例如，形状204)、统一资源定位符(URL)以及超链接在视频帧上的位置。可提供其它信息，包括诸如对象的名字以及超链接的相关联URL的描述性信息。

图3示出了示例性用户界面。示出了可在接收计算机104的显示器134上显示的示例屏幕截图300。屏幕截图300可由应用程序128和/或浏览器130中的应用程序提供。具体地，使用应用程序128和/或浏览器130处理所接收的视频流及其相关联的超链接流，并如屏幕截图300所示显示。

接收计算机104被配置来使用定点设备(未示出)，诸如鼠标。箭头302表示向定点设备传达的用户指令。在如屏幕截图300中所示的用户界面中，随着视频被显示，用户可将箭头302放置或悬停在显示(即，屏幕截图300)上。随着箭头302被显示，诸如矩形等昏暗或明亮的形状可出现在显示中的特定对象上，如由区域或形状304所表示，指示超链接的可用性或存在性，其中超链接与各形状所围绕的对象相关联。否则，当箭头302未被激活或在显示上悬停时，不呈现其它形状，使得视频观看体验不会被打扰。

屏幕截图300或显示也允许向用户呈现其它信息。例如，随着用户将箭头302放置(悬停)在特定形状或超链接区域(例如，形状304)上，即呈现关于对象，在此示例中为“黑夹克”306的信息。此外，向用户显示超链接的URL。在此示例中，URL为“www.buythisblackjacket.com(买这件黑夹克的网站)”。也可传达其它信息。如上所述的信息和相关联的超链接通过单独的超文本流传达或提供。

用户界面的其它变化包括以正常速度播放视频，直到用户将箭头302置于显示中。当箭头302被置于显示中或在显示中激活时，视频慢下来。在实现中，视频的回放速度可随着箭头进入如由形状304所表示的超链接区域而慢下来。视频的变慢允许用户激活或点击形状304以激活超链接。在其它实现中，暂停视频以允许用户激活超链接。一旦超链接被激活或点击，浏览器130即将用户重定向到特定的网站(例如，www.buythisblackjacket.com)。

图4示出了允许在视频上创建超链接的过程400。过程400被示为逻辑流程图中的框的集合，该图表示可用硬件、软件、固件或其组合实现的操作的序列。在软件的上下文中，框表示当由一个或多个处理器执行时实现所述操作的计算机指令。尽管被描述为流程图，但构想了某些框可并发或按不同的顺序发生。过程400例如可由图1的计算机102实现，尽管过程400可由其它体系结构实现。

在框402，接收到可包括数百个独立视频帧的视频流。视频帧在视频流的序列中一个跟着一个。视频流可作为包括MPEG标准的若干格式之一提供。视频流可从可以驻留也可以不驻留在执行过程400的计算设备上的另一计算设备或存储设备处理。特定对象被包括在视频流的视频帧中。这样的对象可与超链接相关联。

在框404，在视频流中标识关键帧。具体地，标识第一和最后关键帧。取决于对进一步的准确性和/或用于将视频流中的对象与超链接绑定或相关联的特定算法，可标识其它的关键帧。使用一形状来标识或绑定关键帧中出现的特定对象。该形状表示超链接并与之相关联，从而该超链接变得与该对象相关联。

在框406，可对超链接和对象添加其它信息。其它信息的示例包括但不限于：超链接的相关联URL、超链接在视频帧上的位置、超链接的形状、向用户进一步描述超链接的文本等。

在框408，提供包括该超链接的单独流。该超链接流可包括包含超链接和与超链接相关联的信息的超文本文档的序列。超链接可类似于音频和字幕流与视频流一起传输。超链接流具体地随视频流定序或定时，使得超链接和相关联信息可被正确地向接收流的接收设备或计算机的用户显示。此外，流可被编码来支持特定的通信和传输协议和格式。

图5示出了允许激活视频中的超链接的过程500。过程500被示为逻辑流程图中的框的集合，该图表示可用硬件、软件、固件或其组合实现的操作的序列。在软件的上下文中，框表示当由一个或多个处理器执行时实现所述操作的计算机指令。尽管被描述为流程图，但构想了某些框可并发或按不同的顺序发生。过程500例如可由图1的计算机104实现，尽管过程500可由其它体系结构实现。

在框502，视频流由应用程序播放并通过诸如显示器134的显示设备向用户显示。连同视频流，与视频流同步的超链接流被播放或处理。所处理的超链接流可在后台中运行，而可能对用户不明显(即，超链接可能不为用户所见)。与视频流同步的其它流也可被播放或处理，包括音频和字幕流。

在框504，显示光标或界面图标。界面图标可以是表示诸如鼠标的定点设备的动作的箭头。界面图标具体在用户激活该定点设备时被显示在视频的顶端，允许用户将界面图标悬停在显示上。

在框506，随着用户将界面图标悬停在与超链接相关联的视频显示的区域上，该区域可由诸如矩形的形状表示。该区域，具体为该形状，可被突出显示并向用户呈现(例如，矩形被描画轮廓并在显示上显示)。随着界面图标进入该区域或形状，视频可慢下来或暂停，允许用户将界面图标置于该区域上。其它信息也可被呈现或显示，包括URL的名字以及描述对象的信息。

在框508，超链接由用户通过点击该区域来激活。当超链接被激活时，浏览器可将用户重定向到所标识并与该超链接的URL相关联的网站。

图6示出了就用户对于视频中的超链接的行为提供反馈的过程600。该过程600被示为逻辑流程图中的框的集合，该图表示可用硬件、软件、固件或其组合实现的操作的序列。在软件的上下文中，框表示当由一个或多个处理器执行时实现所述操作的计算机指令。尽管被描述为流程图，但构想了某些框可并发或按不同的顺序发生。过程600例如可由图1的系统100，具体是在计算机104处实现，尽管过程600可由其它体系结构实现。

在框602，视频以及超链接信息被呈现或显示给用户。与对象相关联的超链接由视频上的突出显示区域表示。视频和与视频中的对象相关联的超链接(即，突出显示的区域)被显示在诸如显示器134的屏幕上。此外，随视频和超链接区域显示光标或界面图标，其中界面图标表示用户与诸如鼠标的定点设备的交互。

在框604，跟踪界面图标的运动。具体地，在用户界面图标的运动以及用户就视频中的超链接的兴趣(使用)之间作出推断。

在框606，记录界面图标悬停或置于特定对象或超链接区域上的时间。此外，可记录界面图标在特定对象或超链接区域上移动的时间的百分比，其中时间的百分比基于界面图标活动的时间。

在框608，如果用户激活超链接并定向到一网站，则所激活的超链接被记录。此外特定超链接被激活的次数可被记录。

在框610，从框604、606和608得到的结果可被提供或发送给另一方，诸如视频发源的服务器计算机，或收集这样的信息的第三方。

结论

上述系统和方法支持将超链接与视频中的对象相关联，向用户提供带有可被激活的超链接的视频。尽管用结构特征和/或方法动作专用的语言描述了本发明，但可以理解，在所附权利要求书中定义的本发明不必限于所述特定特征或动作。相反，特定特征和动作被公开为实现所要求保护的本发明的示例性形式。

Claims

1.一种由计算设备(104)执行的方法(400)，包括：

接收(402)包括视频帧序列的视频流；

标识(404)所述视频流中的关键帧；

将超链接绑定(404)至所述关键帧中的对象；以及

提供(406)包括所述超链接的单独流。

2.如权利要求1所述的方法，其特征在于，所述标识关键帧包括所述视频流中的第一帧和最后一帧。

3.如权利要求1所述的方法，其特征在于，所述标识关键帧包括所述视频流中的第一、中间帧和最后一帧。

4.如权利要求1所述的方法，其特征在于，所述绑定通过向所述对象分派形状来执行，其中所述形状表示所述超链接。

5.如权利要求1所述的方法，其特征在于，其中所述提供包括将所述单独流与所述视频流定序。

6.如权利要求1所述的方法，其特征在于，还包括随与所述单独流一起发送的所述超链接添加附加信息。

7.如权利要求6所述的方法，其特征在于，所述附加信息包括以下中的一个或多个：URL信息、所述超链接在所述视频帧上的位置、表示所述超链接的形状、进一步描述所述对象的文本以及描述所述URL的文本。

8.一种由计算设备(104)执行的方法(500)，用于在显示设备(134)上显示超链接激活指令，所述方法包括：

在所述显示设备上显示(502)视频流；

在所述视频流的视频上显示(504)界面图标；

当所述界面图标被置于表示所述视频中的对象的区域上，呈现(506)可用超链接；以及

当用户点击表示所述超链接的区域，激活(508)所述可用超链接的超链接。

9.如权利要求8所述的方法，其特征在于，所述显示视频流还包括运行与所述视频流同步的超链接流。

10.如权利要求8所述的方法，其特征在于，所述显示界面图标在所述用户激活定点设备时执行。

11.如权利要求8所述的方法，其特征在于，所述呈现可用的超链接还包括当所述界面图标被置于所述区域之一上时减慢所述视频。

12.如权利要求8所述的方法，其特征在于，所述呈现可用超链接还包括在所述界面图标被置于所述区域之一上时暂停所述视频。

13.如权利要求8所述的方法，其特征在于，所述激活将所述用户重定向到与所述超链接相关联的网站。

14.如权利要求8所述的方法，其特征在于，还包括呈现包括以下中的一个或多个的附加信息：所述URL名和描述所述对象的信息。

15.一种在计算设备(104)处执行的方法(600)，包括：

向用户显示(602)视频；

在所述视频中呈现(602)突出显示的区域，其中所述突出显示的区域表示超链接；

当所述界面图标被移动到所述突出显示的区域上时，跟踪(604)其运动；以及

记录(606)所述界面图标位于所述突出显示的区域中的特定突出显示的区域上的时间。

16.如权利要求15所述的方法，其特征在于，所述显示还包括关于所述超链接的信息。

17.如权利要求15所述的方法，其特征在于，所述记录包括所述界面图标在特定突出显示的区域上移动的时间比上所述界面图标活动的时间的百分比。

18.如权利要求15所述的方法，其特征在于，还包括跟踪所述特定超链接的激活。

19.如权利要求18所述的方法，其特征在于，所述跟踪包括特定超链接被激活的次数。

20.如权利要求15所述的方法，其特征在于，还包括根据所述跟踪和记录来提供信息。