CN103124968B - 用于后仰式娱乐的内容转换 - Google Patents

Abstract

本发明涉及使具有可主动选择内容（例如，基于web的内容）文档适合以后仰模式消费的装置、方法和计算机程序产品。该文档以可以以后仰模式最佳消费的方式渲染。将该文档的多媒体内容（图像、文本等）转换成可以好像例如电视频道一样渲染的连续信息流（例如，视频）。

Description

用于后仰式娱乐的内容转换

技术领域

本发明涉及将诸如基于web的内容可主动选择内容转换成用于被动消费的连续信息流的装置、方法、和计算机程序产品。

背景技术

万维网或因特网在我们的社会中正变得无处不在。由于多种原因，人们使用台式计算机、膝上型计算机、个人数字助理(PDA)或移动电话来访问因特网。不久，任何电子设备都将被连接成允许从因特网访问所有类型的web服务和信息。越来越多的人将因特网用作他们的主要娱乐来源。诸如例如视频或音乐下载站点那样的网站十分受欢迎和吸引着非常大量的观众，即使未超过电视(TV)，也与电视(TV)相当。

将当前因特网网站用于娱乐的一个缺点是它们需要用户“前倾地”主动涉及和参与。用户必须通过链接导航，搜索和选择他们希望消费的内容，不能像在观看TV节目的情况下那样仅仅后仰和观看。相反，TV和收音机是被动接收信息的极其流行手段，即所谓的“后仰式(lean back)”娱乐。没有迹象显示有任何前倾式娱乐手段将取代它。

在下文中，内容适配指的是将内容转换成适应设备能力的动作。内容适配可能涉及由于它们的有限计算能力、小屏幕尺寸和受约束键盘功能而需要特殊管理的移动设备。已经开发内容适配技术以使网站可容易地从具有有限能力(诸如有限存储器、有限处理能力、无鼠标、和/或小屏幕)的设备访问。一种方法是转换网页的布局，使得内容更好地适合小外形尺寸屏幕。另外，可以加入特殊导航功能(譬如，容易放大和缩小)以便可以导航大网页。在自动内容适配中已经取得了许多进展，最近诸如移动电话的许多手持设备都提供了web浏览能力。

在TV屏幕上展示具有可主动选择内容(例如，基于web的内容)的当前适配方法涉及内容适配或消费者电子类超文本标记语言(CE-HTML)。CE-HTML是为诸如TV的消费者电子(CE)设备创建用户界面页面的语言。但是，这些方法是受限的，由于它们非常复杂(CE-HTML需要设计和发布独立专用版本的网页)或不适合后仰式被动消费。由于大多数网站是针对点击界面设计的，所以它们需要往往变得难用的用户交互。

美国专利申请US 2004/0073941A1描述了将web内容动态转换成交互式围墙花园节目的方法。按照该方法，从外部数据源下载源内容。将下载的数据转码成准备广播数据。将准备广播数据输送给客户机加以展示，以便用户可以与所展示数据交互。web内容的下载可以依赖于标识外部数据源的配置文件、web内容的根网页和web内容目标信息。

发明内容

本发明的目的是提供一种改进内容适配或转换处理和装置，其允许在没有点击界面的情况下具有可主动选择内容的文档的后仰式消费。

这个目的是通过本公开发明所提供的将具有可主动选择内容的网页转换成用于被动消费的至少一个连续信息流的方法、本公开所提供的将具有可主动选择内容的网页转换成用于被动消费的至少一个连续信息流的装置及计算机程序产品达到的。

于是，具有可主动选择内容的文档可以以这样的方式渲染，即可以无需点击界面(例如，鼠标或其他指针界面)以后仰模式容易地消费。可以将文档(图像、文本等)的多媒体内容转变成可以像例如TV频道一样渲染的视频和/或音频信息。

在多媒体内容的情况下，至少一个信息流可以包含视频信息流和音频信息流。从而，至少一个信息流可以经由广播视频或TV频道传送和通过使用TV或其他视频显示设备消费。

按照第一方面，可以分开渲染主动块，以便显示在显示屏上的预定位置上和经由遥控设备提供用户界面。因此，用户可以通过使用他的遥控设备与主动块交互。

按照可以与第一方面结合的第二方面，可以在显示屏上为文档的每个超链接目标添加主动控制元素，以允许用户跳过所述至少一个信息流的相应内容。从而，用户可以通过他的遥控设备个别地选择是否使用超链接。

按照可以与第一或第二方面结合的第三方面，可以通过在显示屏上将相应文本可视化和允许用户选择它来渲染超链接。这使超链接在显示屏上保持可视和可选。

按照可以与第一到第三方面的任何一个结合的第四方面，该分区可能涉及到基于文档对象模型、基于地点的方法和基于视觉的方法的至少一种的页面分割。因此，可以根据至少一条预定标准自动划分文档的每个页面。

按照可以与第一到第四方面的任何一个结合的第五方面，该指定可以基于空间特征、内容特征、和基于模板方法的至少一种。因此可以根据不同标准自动指定块优先级。

按照可以与第一到第五方面的任何一个结合的第六方面，可以根据它们的块优先级过滤块，以便放弃具有低于预定阈值的块优先级的块。从而，可以从连接信息流中放弃对用户来说具有低重要性的块。

按照可以与第一到第六方面的任何一个结合的第七方面，可以将预定标签标记在主动块上，可以根据该标签控制渲染。这便于在线性化之后渲染块。

按照可以与第一到第七方面的任何一个结合的第八方面，可以使用语音合成将具有文本内容的块转换成音频信息流。这提供了用户无需由于分辨率约束可能不便的从显示屏中读取文本信息的优点。

按照可以与第一到第八方面的任何一个结合的第九方面，预定信息可能在文档中，该预定信息描述要插入至少一个连续信息流中的被动块之间的附加块。这样的块有利地允许像广告或用户引导信息那样的辅助信息插入。

按照可以与第一到第九方面的任何一个结合的第十方面，块优先级的指定可以基于用户反馈。从而，可以通过例如从推荐系统获得的用户反馈自动控制用于优先级分配的阈值计算。

按照可以与第一到第十方面的任何一个结合的第十一方面，可以根据用户在网页的固定编辑部分中的浏览行为选择要渲染的网页的用户特定动态部分。从而，使网页元素到信息流的转换受用户在编辑部分中的浏览行为影响。

要注意的是，上述装置可以实现成含有分立硬件部件的分立硬件电路，实现成集成芯片，实现成芯片模块的布置，或实现成可以通过存储在存储器中的软件例程或程序控制的信号处理设备或计算机设备或芯片。

附图说明

现在根据参考附图的实施例，通过示例描述本发明，其中：

图1示出了按照本发明第一实施例的内容转换设备的示意性框图；

图2示出了按照第二实施例将具有可主动选择内容的文档转换成连续信息流的过程的流程图；

图3示出了分区成具有所指优先级的块的两个网页的示例；以及

图4示出了用于以肖像宽高比渲染图像的示例性动画序列。

具体实施方式

现在根据可以与依靠用户反馈的可选推荐系统结合提供的示例性万维网到视频转换系统描述本发明的实施例。

按照如下实施例，以可以以后仰模式最佳消费的方式转换和渲染网页。为了达到这个目的，将网页的多媒体内容(图像、文本等)转换成可以好像TV频道一样渲染的视频流。

图1示出了具有可靠推荐功能的转换设备或系统的示意性框图，它包含可以存储网页以便以后在内容适配器(CA)中转换的数据存储体101(例如，硬盘驱动器)。存储的网页被供应给优先级分配器102，优先级分配器102适用于将网页分区成协调的和代表网页的内容的某种逻辑划分的块，并根据网页内每个块的重要性对该块指定块优先级。

内容适配器103接收分配了块优先级的块，将这些块分类成需要用户输入的主动块和只包括用于被动消费的内容的被动块，并至少根据它们的块优先级排序这些块以获得视频流的展示次序。然后由内容适配器103以视频加音频的形式渲染排序块，其中分离主动块以便用户可以使用，例如，他/好的遥控器与它们交互。

网页的源头可以是，例如，提供对因特网的访问的万维网浏览器应用程序。在转换之后，可以将渲染的网页显示在TV监视器(M)104的显示屏上，存储在可移动或不可移动数据存储体或记录载体上，或经由TV或视频频道广播。检索的网络可选地可以得到过滤，然后供应给各自推荐引擎(RE)105。推荐引擎105可以含有与之相联系的用户简档。推荐引擎105的输出可以由优先级分配器(PA)102使用将块优先级指定给要渲染的网页的所识别块。作为一个示例，可以取决于用户反馈地对每个网页采用优先级计算。对于给定网站或网页，如果用户降低块过滤阈值，则系统使该阈值适用于呈现相似特点(例如，相似布局)的所有网站。朴素贝叶斯分类器可以用于根据用户反馈自动采用阈值计算。可替代地，根据可在块中获得的文本，可以由分类器自动估计主题或风格，以及给定掌握的用户偏爱，可以相应地设置优先级。

现在参考图2更详细地描述转换装置的操作。

图2示出了按照第二实施例将具有可主动选择内容的文档转换成连续信息流的过程的流程图。

我们将网页(例如，超文本标记语言(HTML)页面)作为输入，该网页可以使用，例如，超文本传输协议(HTTP)经由万维网浏览器与万维网服务器连接获得。假设下载或可获得(例如，在数据存储体101中)像图形、视频、声音等那样在网页中引用的所有元素。

该过程的第一步骤或阶段S10包含将页面分区成一组语义块。每个块作为协调的和代表取决于网页的内容的某种逻辑划分的网页的一个区域来选择。在现有技术中已知网页分区的几种方法。这里可应用的示例是如下文献所述的基于文档对象模型(DOM)分割：Chen,J.,Zhou,R,Shi,J.,Zhang,H.-J.and Qiu,F.,"Function-Based Object ModelTowards Website Adaptation",Proc.of the 101k World Wide Web Conference,Budapest,Hungary,May 2001；如下文献所述的基于地点分割：Kovacevic,M.,Diligen-ti,M.,Gori,M.,and Milutinovic,V.,"Recognition of Common Areas in a Web PageUsing Visual Information:a possible application in a page classification",Proc.Of the 2002IEEE Int.Conference on Data Mining,Maebashi City,Japan,December 2002；以及如下文献所述的基于视觉页面分割：Cai,D.,Yu,S.,Wen,J.-R.andMa,W.-Y.,"VIPS:a vision-based page segmentation algorithm",MicrosoftTechnical Report,MSR-TR-2003-79,2003。

图3示出了分区成具有它们所分配优先级的用虚线长方形指示的块的两个网页的示例。注意，每个块可以递归地分区成子块(例如，标题、图像和文本)和每个子块可以递归地分区成孙块(例如，文本块中的段落)。

在第二步骤或阶段S20中，计算并对每个块指定块优先级。块优先级可以，例如，被确定成与一页内的每个块的重要性成反比的优先级得分(即，最重要的块具有优先级得分“1”)。适合在TV屏幕上观看的许多网页是这样的，存在被为导航到其他内容和选择其他内容提供选项的一个或多个附加元素包围、吸引观众注意力的一个主要元素。网页内的不同信息具有取决于在网页内的地点、占据的区域、和当然内容本身的不同重要性。例如，许多用户都不太关注出现在许多网页的底部的版本声明。

参照图3的示例，在左网页的中心的最近新项目(优先级得分“1”和“2”)比到显示在网页的右部的其他较老新项目(优先级得分“3”)的链接重要，到该其他较老新项目(优先级得分“3”)的链接又比标题和网站标题块(优先级得分“4”)重要。来自相关文献的几种算法可以用于计算页块的优先级。例如，在文献Song,R.,Liu,H.,Wen,J.-R.and Ma,W.-Y.,"Learning Block Importance Models for Web Pages",Proc.Of the World Wide WebConference,New York,USA,2004中，使用了采用空间特征(像块的位置和大小那样)和内容特征(像图像和链接的数量那样)自动为一个块计算重要性得分的分类器。更进一步，在文献Bar-Yossef,Z.,Rajagopalan,S.,"Template Detection via Data Mining and itsApplications",Proc.Of the World Wide Web Conference,May 2002中，使用基于模板做法来检测在页面之间重叠的块，因此可以对其指定低优先级得分。

在步骤S20中对每个块指定了优先级和重要性得分之后，可以在步骤或阶段S30中应用可选过滤步骤以放弃不够重要(优先级太低)或具有某些非所希望性质的那些块。可以应用像如下那样的简单阈值或/或一组标准：只保留优先级最高的块，放弃带有版本声明的页脚块。用户可以控制过滤阈值。当使用，例如，遥控器上的按钮时，用户可以降低有效地包含更多块和因此更多内容的阈值。

然后将保留块作为输入用于在块分类步骤或阶段S40中将它们分类成主动或被动块的算法或过程。主动块是主要目的是请求用户输入和因此要求用户输入的页面元素。示例是输入关键字或文本的文本字段、按钮、选项的列表等。主动块有助于将万维网浏览表征成“前倾”体验，因为它们使用户可以通过内容控制和导航。

另一方面，被动块是主要包含像图像、文本、音频、和视频那样，意味着以“后仰”方式被动消费的内容的页面元素。在这个步骤之后，通过了过滤步骤(S30)的每个高度重要块也可能接收用于控制线性化之后块的渲染的标记“主动/被动”。

在线性化步骤或阶段S50之后，计算块的展示次序，以便可以逐个地向用户展示它们。当上传视频或画面(例如，添加页面中的博客帖子或评论)时，该排序考虑到块的优先级(例如，首先是最重要块)、原始页面上的次序、和像日期那样的可潜在获得和可理解语义的信息的至少一种。

例如，在图3的右网页的情况下，首先展示优先级得分为“1”的标题为“TheBiology of Music”的块，接着展示标题为“Guatemala”(优先级得分也是“1”)的块，如此等等。注意，在渲染期间，用户可以以线性次序跳到下一个或前一个块。可以用相应目标取代直接指向图像或视频的超链接。例如，包含缩略图网格的画廊页面在页面线性化之后，可以导致与缩略图相对应的图像的线性幻灯片放映。当超链接被它的目标(例如，图像)取代时，可以将主动控制元素(像按钮那样)加到屏幕中，使用户可以跳过相应内容或返回到原始页面。

可选地，在处理了整个页面之后，系统可以从页面的超链接中检索来自相同万维网服务器的其他页面，并且将它们的块加入线性展示中。这等效于通过网站的页面的图形定义路径。

最后步骤S60是以视频加音频的形式对块进行块到视频渲染，以便可以将页面插入TV频道的列表中和犹如TV节目似地观看。块的渲染取决于它们是主动的还是被动的，在后一种情况下，取决于内容。主动块可以渲染在TV屏幕的底部上。用户可以使用遥控器与它们交互。被动块的渲染形成万维网信道的主要内容。

可以使用语音合成将文本翻译成音频。可以通过在屏幕上(例如，在底部)将相应文本可视化以及使用户可以选择它们(例如，通过按下遥控器上的按钮)渲染超链接。超链接可以在屏幕上保持可视和可选择一段固定时间(例如，5到10秒)，或可以使它们可通过特殊菜单获得。可以取决于图像格式(肖像/风景，宽高比)地使用虚拟相机操作(平移和变焦)像图像幻灯片放映那样缩放和渲染图像。

图4示出了以肖像宽高比渲染图像的示例性动画序列。在本例中，可以将具有“肖像”宽高比、图3的标题为“The Biology of Music”的块中的图像制成动画以便渲染在16:9TV屏幕上。在图4中，在虚拟放大操作(画面1到4)之后进行从顶部到底部的虚拟平移(画面5到8)。动画的持续时间可以通过语音合成所得的音频的持续时间确定。可以设置动画的持续时间的最大值以防止动画太慢。

图像和发声文本的合成可以通过关联有关图像的信息(例如，alt属性)和出现在文本中的词汇来细化。

视频仅仅按原样渲染(但虚拟缩小或放大也有可能是必要的)，并且可以将控制与遥控器的适当按钮链接。其他主动块可以就像它们渲染在网页上那样渲染。

在第三实施例中，使用专用标签将引导步骤或阶段S10中的页面分区和步骤或阶段S60中的块渲染的至少一种的信息嵌在网页中。该标签可以描述可以在线性化或阶段S50之后插在内容块之间、被标准万维网浏览器忽略的附加块。这样的块可以，例如，使视频商业广告或用户引导信息等可以插入。

在第四实施例中，为个人频道转换成视频的页面由对于所有用户(一群用户，例如，一个国家)都相同和由编辑者保持的“编辑”部分、和对于每个都不同和动态地随用户的浏览行为而变的“个人”部分。个人部分可以包含像个人照片或视频、评论、博客帖子那样，由用户提供的信息。

在第四实施例中，将网页元素转换成视频受用户在编辑部分中的浏览行为(即，固定元素的浏览历史)影响。取决于用户与之交互的网页(编辑部分)的元素，影响和改变动态万维网内容，以便只渲染网页可以通过图1的优先级分配器102或内容适配器103选择的部分作为包括在个人频道中的视频。类似地，取决于用户与之交互的视频(从网页中收集)地更新网页的动态和个人部分。

例如，如果用户在个人频道中某个演员的照片库的视频展示交互，则可以将网页的动态部分更新成包括有关那个特定演员的更多信息。

注意，本发明不仅可以应用于网页，而且可以应用于具有可主动选择内容(即，前倾内容)的其他类型文档。输出不仅可以转换成视频流，而且可以转换成像同步多媒体集成语言(SMIL)、微软Power Point等那样的其他多媒体展示格式和标准。通常，当输入是标准因特网地址(统一资源定位符(URL))和所得结果是像SMIL那样的标准化文档格式时，所提出的转换可以作为将前倾式内容转变成后仰式可消费内容流的公共万维网服务来提供。

本发明不局限于上述实施例，而是可以应用于电视机、机顶盒、个人计算机、笔记本计算机、移动电话、视频游戏控制台、万维网服务等。

总之，已经描述了使具有可主动选择内容，例如，基于万维网内容的文档适合以后仰模式消费的装置、方法和计算机程序产品。该文档以可以以后仰模式最佳消费的方式渲染。将该文档的多媒体内容(图像、文本等)转换成可以犹如，例如，电视频道似地渲染的连续信息流(例如，视频)。

虽然在附图和上面的描述中已经详细例示和描述了本发明，但这样的例示和描述被认为是例示性的或示例性的而不是限制性的。本发明不局限于公开的实施例。通过阅读本公开，其他修改对于本领域的普通技术人员来说是显而易见的。这样的修改可能牵涉到在现有技术中已知的和可以取代本文已述的特征或除了本文已述的特征之外使用的其他特征。

本领域的普通技术人员可以通过研究附图、公开和所附权利要求书理解和实现公开实施例的变种。在权利要求书中，词汇“包含”并不排除其他元件或步骤，以及不定冠词“一个”或“一种”并不排除多个元件或步骤。单个处理器或其他单元可能根据相应软件例程至少完成图2的功能。计算机程序可能存储/分布在像与其他硬件一起或作为其他硬件的一部分供应的光存储媒体或固体媒体那样的适当媒体上，但也可以以其他形式，像经由因特网或其他有线或无线通信系统那样分发。某些措施被列举在相互不同从属权利要求中的仅有事实并不指示不能有利地使用这些措施的组合。权利要求书中的所有标号都不应当理解为限制本发明的范围。

Claims (12)

1.一种将具有可主动选择内容的网页转换成用于被动消费的至少一个连续信息流的方法，所述方法包含：

a)将所述网页分区(S10)成协调区域的多个块；

b)根据所述网页内的块的重要性，为每个所述块计算(S20)各自块优先级和对每个所述块指定各自所计算的块优先级；

c)将所述块分类(S40)成请求来自用户的输入的主动块或包含被动消费的内容的被动块；

d)至少根据所述指定的块优先级为所述块计算(S50)展示次序；以及

e)依赖于所述块的分类和内容，以视频加音频的形式对所述块进行块到视频渲染(S60)，其中分开渲染主动块以便显示在显示屏上的预定位置，并且提供和允许在被动消费期间经由遥控设备的针对主动块的页面元素的用户输入。

2.按照权利要求1所述的方法，进一步包含在所述显示屏上为所述网页的每个超链接目标添加主动控制元素，以便允许用户跳过所述至少一个信息流的相应内容。

3.按照权利要求1或2所述的方法，进一步包含通过在所述显示屏上将相应文本可视化和允许用户选择它来渲染超链接。

4.按照权利要求1或2所述的方法，其中所述分区(S10)涉及基于文档对象模型、基于地点的方法和基于视觉的方法的至少一种的页面分割。

5.按照权利要求1或2所述的方法，其中所述指定(S20)基于空间特征、内容特征、和基于模板方法的至少一种。

6.按照权利要求1或2所述的方法，进一步包含根据所述块的块优先级过滤(S30)所述块，以便放弃具有低于预定阈值的块优先级的块。

7.按照权利要求1或2所述的方法，进一步包含用预定标签标记主动块，以及根据所述标签控制所述渲染(S60)。

8.按照权利要求1或2所述的方法，进一步包含使用语音合成将具有文本内容的块转换成音频信息流。

9.按照权利要求1或2所述的方法，进一步包含将预定信息嵌入所述网页中，所述预定信息描述要插入所述至少一个连续信息流中的被动块之间的附加块。

10.按照权利要求1或2所述的方法，进一步包含根据用户反馈控制所述块优先级的所述指定(S20)。

11.按照权利要求1或2所述的方法，进一步包含根据用户在所述网页的固定编辑部分中的浏览行为，选择要渲染的所述网页的用户特定动态部分。

12.一种将具有可主动选择内容的网页转换成用于被动消费的至少一个连续信息流的装置，所述装置包含：

a)分区器，用于将所述网页分区成协调区域的多个块；

b)优先级分配器，用于根据所述网页内的块的重要性，为每个所述块计算各自块优先级和对每个所述块指定各自所计算的块优先级；

c)分类器，用于将所述块分类成请求来自用户的输入的主动块或包含用于被动消费的内容的被动块；

d)线性化器，用于至少根据所述指定块优先级为所述块计算展示次序；以及

e)流生成器，用于依赖于所述块的分类和内容，以视频加音频的形式对所述块进行块到视频渲染，其中分开渲染主动块以便显示在显示屏上的预定位置，并且提供和允许在被动消费期间经由遥控设备的针对主动块的页面元素的用户输入。