CN1460361A - 用于为“记忆错觉deja vu”视频系统提供用户接口的系统和方法 - Google Patents

用于为“记忆错觉deja vu”视频系统提供用户接口的系统和方法 Download PDF

Info

Publication number
CN1460361A
CN1460361A CN02800862A CN02800862A CN1460361A CN 1460361 A CN1460361 A CN 1460361A CN 02800862 A CN02800862 A CN 02800862A CN 02800862 A CN02800862 A CN 02800862A CN 1460361 A CN1460361 A CN 1460361A
Authority
CN
China
Prior art keywords
file
video
multimedia file
user
documents
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN02800862A
Other languages
English (en)
Inventor
L·尼科洛夫斯卡
N·迪米特罗瓦
Y·陈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1460361A publication Critical patent/CN1460361A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开用于视频显示系统中的一种用户接口系统，此视频显示系统能在显示屏幕上同时显示主多媒体文件和多个附加多媒体文件。此视频显示系统在显示屏幕的中央部分显示主多媒体文件。此用户接口系统接收用户指令，选择用于显示多个附加多媒体文件的格式。这多个附加多媒体文件可以以其中各个附加多媒体文件位于主多媒体文件周围的拼贴格式进行显示。这多个附加多媒体文件也可以显示在一个或多个水平行中或显示在一个或多个垂直行中。此用户接口系统能接收用户指令，以控制这多个附加多媒体文件的显示。

Description

用于为“记忆错觉DEJA VU”视频 系统提供用户接口的系统和方法
技术领域
本发明涉及为视频显示系统提供用户接口的系统和方法，并且更具体地本发明涉及用于为称为“记忆错觉视频(dejaVideo)”的视频显示系统提供用户接口的系统和方法。
背景技术
“记忆错觉”是一种名称，指在人们第一次经历某些景物和事件时明显记住这些景物和事件的经历。记忆错觉也称为“记忆错误”。记忆错觉的一种解释是经历记忆错觉的人正从记忆中回想起非常类似于此人目前经历的经历，所回忆起的经历与实际经历的相似性使此人感觉他或她正在重复以前的经历。
选择名称“dejaVideo”来表示使观看者能够根据从当前正在观看的视频片段中回忆起的线索来访问视频片段(或其他的多媒体文件)的视频显示系统。在dejaVideo系统中，提供给观看者的视频片段通过让观看者查找与此观看者已经看见或听过的某些事的相关性来探究新内容而有助于此观看者增强此经历。
dejaVideo系统通过以透明显示模式或重叠显示模式提供附加信息能提供有关视频中见到的物体的其他信息。在透明显示模式中，通过重叠的视频图像可看见潜在的视频图像。在重叠显示模式中，通过重叠的视频图像不能看见潜在的视频图像。利用诸如图像变形的视觉效果能从第一视频片段中的一个景物平滑转换为第二视频片段中不同的景物。
dejaVideo系统能将视频片段构造为包括自动从视频片段或其他的多媒体文件中获取的链路。在视频处理系统中处理视频片段，以确定物体、实体或视频片段和其他文件的其他特性之间的相关性，然后将这些相关性用于从这些附加文件中获取信息，从而使获得的信息能利用原始视频片段或代替原始视频片段进行显示。
dejaVideo系统利用诸如帧特征化和目标(脸部)识别的技术自动地提取视觉相关性。dejaVideo系统为用户存取(1)主多媒体文件和(2)在视觉上或概念上与主多媒体文件紧密相关的附加类似多媒体文件。这些多媒体文件可以包括视频元素、音频元素、文本元素、网站或上述的任何结合。
在本领域中需要改进的系统和方法，用于提供用户接口以便在dejaVideo系统中显示多媒体文件。在本领域中也需要改进的系统和方法，以使用户能选择地存取和显示dejaVideo系统中的多媒体文件。
发明内容
为解决现有技术的上述缺陷，本发明的主要目的是提供一种系统和方法，用于提供用户接口来控制多媒体文件在dejaVideo视频显示系统上的显示。
本发明包括用于视频显示系统的用户接口系统，此视频显示系统能同时显示主多媒体文件和多个附加多媒体文件。此视频显示系统在显示屏幕的中央部分上显示主多媒体文件。用户接口系统接收用户指令，选择用于显示多个附加多媒体文件的格式，然后利用用户选择的格式在显示屏幕上显示这多个附加多媒体文件。
根据本发明的优选实施例，多个附加多媒体文件可以以其中各个附加多媒体文件位于主多媒体文件周围的拼贴(collage)格式进行显示。
根据本发明的优选实施例，多个附加多媒体文件可以以其中各个附加多媒体文件位于显示屏幕上的一个或多个水平行中的水平线性格式进行显示。
根据本发明的另一实施例，多个附加多媒体文件可以以其中各个附加多媒体文件位于显示屏幕上的一个或多个垂直行中的垂直线性格式进行显示。
根据本发明的还一实施例，用户接口系统能接收用户指令来控制这多个附加多媒体文件的显示。
前面已相当广泛地概述了本发明的特点和技术优点，因此本领域技术人员可以更好地理解随后的本发明的详细描述。下面将描述形成本发明保护主题的本发明的其他特性和优点。本领域技术人员应意识到，他们可以容易地使用公开的概念和具体实施例作为修改或设计其他结构来实现本发明的同样目的的基础，本领域技术人员也应认识到，这样的等效结构不背离本发明最宽泛形式中的精神和范畴。
在进行详细说明之前，列出这整个专利文件中使用的某些字和词组的定义可能是有好处的，术语“包含”和“包括”及其导出词表示非限制性包含；术语“或者”为包含，意思为和/或；词组“与…相关”和“与之相关”及其导出词可以表示包括、包括在其中、与之相连、包含、包含在其中、连接到或与之连接、耦合到或与之耦合、与之可通信、与之协作、交错、并列、近似于、受约束或用于约束、具有、具有…特性等等；术语“控制器”表示控制至少一个操作的任何装置、系统及其部分，这样的装置可以以硬件、固件或软件或其中至少两个部分的某种组合来实施。应注意，与任何特定控制器相关的功能可以本地或远程进行集中或分布。特别地，控制器可以包括一个或多个数据处理器和/或相关的输入/输入装置和存储器，执行一个或多个应用程序和/或操作系统程序。这整个专利文件中提供某些字或词组的定义，本领域技术人员应明白，在许多情况(如果不是大多数情况的话)下这样的定义应用于如此定义的字和词组的以前以及未来使用。
附图说明
为了更完全理解本发明及其优点，现参考结合附图进行的以下描述，其中相同的标号表示相同的物体，并且其中：
图1表示dejaVideo视频显示系统的优选实施例的方框图；
图2表示示例性dejaVideo视频显示装置的优选实施例；
图3表示图2中所示的示例性dejaVideo视频显示装置的优选实施例的方框图；
图4表示可以用于为dejaVideo视频显示系统提供本发明的改进用户接口的计算机软件；
图5表示dejaVideo视频显示装置的显示屏幕，表示出以拼贴形式安排的中央定位的主多媒体文件和周围定位的较小多媒体文件；
图6表示dejaVideo视频显示装置的显示屏幕，表示出中央定位的主多媒体文件和安排在主多媒体文件下面的水平行中的较小多媒体文件；
图7表示dejaVideo视频显示装置的显示屏幕，表示出中央定位的主多媒体文件和沿主多媒体文件的一个边缘安排在垂直行中的较小多媒体文件；和
图8表示说明本发明的方法的优选实施例的操作的流程图。
具体实施方式
此专利文件中用于说明本发明的原理的下面讨论的图1至图8和各个实施例仅仅用于示意，而不应以任何方式认为限制本发明的范畴。在随后的示例性实施例的描述中，本发明集成在dejaVideo视频显示系统中或与相连使用。本领域技术人员将认识到，本发明的示例性实施例可以容易地进行修改以便用于任何类型的类似视频显示系统中。
dejaVideo系统为用户存取(1)主多媒体文件，和(2)在视觉上或概念上与此主多媒体文件紧密相关的附加类似多媒体文件。这些多媒体文件可以包括视频元素、音频元素、文本元素、网站或上述的任何组合。
这些多媒体文件之间的相似性可以选择地定义在几个级别。低级别的相似性定义可以集中在诸如视频元素、音频元素、运动、结束字幕等的各个特性上。高级别的相似性定义可以集中在诸如景物、事件等的高级别特性上。
dejaVideo系统中的两个主要处理是创作处理和导航(显示)处理，创作处理生成视频片段(和其他类型的多媒体文件)之间的相关性。在该创作处理期间，计算视频序列的感兴趣特性和相应的相关规则，以便未来检索目的。在导航处理期间，用户根据导出的相关性访问相关的视频段片段(和其他类型的多媒体文件)。在dejaVideo系统显示主多媒体文件(通常为视频片段)时，根据主多媒体文件并根据不同级别的相似性显示可利用的超链接的多媒体文件的选择。
图1表示dejaVideo视频显示系统100的优选实施例的方框图。提供视频信号(和其他的多媒体内容)的多个频道(110，115，…，120)之中的每一个频道耦合到缓冲器单元125。将每个频道的计算特性和相关规则通过其相应的频道发送给缓冲器单元125。缓冲器单元125耦合到动态视频数据库130，此动态视频数据库130耦合到匹配引擎135。在用户观看频道时，利用匹配引擎135将此频道的相关规则与动态视频数据库130中的规则进行比较。
用户选择单元140和网源145也耦合到匹配引擎135。在该匹配处理期间，匹配引擎135接入用户选择单元140，以获得考虑用户选择的信息。在匹配处理期间，匹配引擎135也接入网源145，以便从网站中获得信息。
根据匹配结果，匹配引擎135从多个频道(110，115，…，120)并从网源145中获得超链接文件。这些超链接文件存储在存储器(图1中未示出)中以便以后观看，或者直接发送至dejaVideo视频显示装置150以便与从主显示频道155中播放的主多媒体文件同时进行播放。
主显示频道155是主多媒体文件的源。主显示频道155耦合到缓冲器单元160，该缓冲器单元耦合到视频内容与相关单元165。视频内容与相关单元165耦合到匹配引擎135。
在图1所示的实施例中，在匹配引擎135中从主显示频道155(通过缓冲器单元160和视频内容与相关单元165)接收主多媒体文件。在匹配引擎135中从多个频道(110，115，…，120)(通过缓冲器单元125和动态视频数据库130)并从网源145中接收附加相似多媒体文件。调谐电路(未示出)可以用于(从许多不同的可利用频道中)选择一个需要的频道以占据主显示频道155的位置。
图2表示示例性dejaVideo显示装置150。在本发明的一个优选实施例中，dejaVideo显示装置150包括录像机250和电视机205。录像机250接收从匹配引擎135输入的多媒体信号。录像机250将多媒体信号发送至电视机205进行显示。
在记录模式中，录像机250可以解调输入的射频(RF)电视信号，以生成记录和存储在录象机250内或连接到录像机250的的存储介质上的基带视频信号。在播放模式中，录像机250从存储介质中读取观看者选择的存储的基带视频信号(即，程序)并将此信号发送至电视机205，录像机250也可包括能够接收、记录、与之交互作用和播放数字信号的类型的录像机。
录像机250可以包括利用录像带或利用硬盘或利用固态存储器或利用任意其他类型的记录设备的类型的录像机。如果录像机250是盒式磁带录像机(VCR)，则录像机250将输入的多媒体信号存储到盒式磁带并从中检索所述信号。如果录像机250是基于磁盘驱动装置，诸如Replay TVTM录像机或TiVOTM录像机，则录像机250将输入的多媒体信号存储到计算机硬磁盘上而不是存储到盒式磁带上，并从中检索输入的多媒体信号。在其他的实施例中，录像机250可以存储并从本地读/写(R/W)数字高密度视盘(DVD-RW)或读/写(R/W)光盘(CD-RW)中检索。本地存储介质可以是固定的(例如，硬盘驱动器)或可以是可拆卸的(例如，DVD-RW，CD-RW)。
录像机250包括红外(IR)传感器260，从观看者操纵的遥控装置2 25中接收命令(诸如频道上调，频道下调、音量上调、音量下调、记录、播放、快进(FF)、倒带等等)。电视机205是包括屏幕210、红外传感器215和一个或多个人工控制(200)(如点虚线所示)的常规电视机。IR传感器215也从观看者操作的遥控装置225中接收命令(诸如，音量上调、音量下调、接电、断电)。
应注意：录像机250不限于接收特定类型的输入多媒体信号。输入信号可以是数字信号、模拟信号、网际协议(IP)分组或其他类型格式的信号。
为了简单和简明解释本发明的原理，下面的描述一般涉及其中录像机250接收包含结束字幕文本信息的输入模拟多媒体信号的实施例。但是，本领域技术人员将明白，本发明的原理可以容易地适于和数字电视信号、无线广播电视信号、本地存储系统、包含MPEG数据的IP分组输入流等等一起使用。
另外，本领域技术人员应明白，本发明的原理可以容易地适于和其他文本源一起使用，这些文本源包括但不限于来自语音-文本转换器的文本、来自第三方源的文本、来自提取的视频文本的文本、来自嵌入的屏幕文本的文本等等。因此，术语“脚本”应定义为表示源于任何文本源的文本文件，包括但不限于结束字幕文本、来自语音-文本转换器的文本、来自第三方源的文本、来自提取的视频文本的文本、来自嵌入的屏幕文本的文本等等。
图3更具体地表示根据本发明的一个实施例的示例性录像机250。录像机250包括IR传感器260、视频处理器310、MPEG2编码器320、硬盘驱动器330、MPEG2解码器340和控制器350。录像机250还包括视频单元360、dejaVideo显示控制器370和存储器380，控制器350控制录像机250的全部操作，包括观看模式、记录模式、播放模式、快进(FF)模式、倒带模式和其他类似的功能，控制器350也根据本发明的原理控制多媒体文件的创建、显示和交互作用。
在观看模式中，控制器350使来自匹配引擎135的输入多媒体信号利用视频处理器310进行解调和处理，并发送至电视机205，同时在硬盘驱动器330上存储或不存储视频信号(或从中检索视频信号)。视频处理器310包含射频(RF)前端电路，用于从匹配引擎135中接收输入多媒体信号，并将这些多媒体信号转换为适于在电视机205上显示的基带电视信号(例如，超视频信号)。视频处理器310也能够从MPEG2解码器340接收常规信号并从存储器380中接收视频帧，而且将基带电视信号(例如，超视频信号)发送至电视机205。
在记录模式中，控制器350使输入的多媒体信号存储在硬盘驱动器330上。在控制器350的控制下，MPEG2编码器320从匹配引擎135接收输入模拟多媒体信号并将接收的多媒体信号转换为MPEG格式以便存储在硬盘驱动器330上。注意：在数字多媒体信号的情况中，可以将信号直接存储在硬盘驱动器330上而不用在MPEG2编码器320中进行编码。
在播放模式中，控制器350控制硬盘驱动器330将存储的多媒体信号(即，程序)传送给MPEG2解码器340，此解码器将来自硬盘驱动器330的MPEG2数据转换为例如超视频(S-Video)信号，视频处理器310将此信号发送至电视机205。
应注意：选择MPEG2标准用于MPEG2编码器320和MPEG2解码器340只是为了说明目的。在本发明的可选择实施例中，MPEG编码器与解码器可以符合MPEG-1、MPEG-2和MPEG-4标准之一或其中的多个标准或符合一个或多个其他类型的标准。
对于此申请和随后的权利要求书，硬盘驱动器330定义为包括可读和可写的任何大容量(mass)存储装置，包括但不限于用于读/写数字高密度盘(DVD-RW)、可重写CD-ROM、VCR磁带等等的常规的磁盘驱动器和光盘驱动器。实际上，硬盘驱动器330不必是永久嵌入在录像机250中的常规意义上的固定。相反地，硬盘驱动器330包括专用于录像机250进行存储记录的视频节目的任何大容量存储装置。因而，硬盘驱动器330可以包括附属外围驱动器或可拆卸磁盘驱动器(无论嵌入式或附属式)，诸如保持几个读/写DVD或可重写CD-ROM的自动唱片点唱装置(未示出)。如图3中示意地表示的，这种类型的可拆卸磁盘驱动器能够接收和读取可重写CD-ROM盘335。
而且，在本发明的优选实施例中，硬盘驱动器330可以包括录像机250通过网络连接(例如，网际协议(IP)连接)可以访问和控制的外部大容量存储装置，包括例如观看者家用个人计算机(PC)中的磁盘驱动器或在观看者的互联网服务供应商(ISP)处的服务器上的磁盘驱动器。
控制器350从视频处理器310获得有关利用视频处理器310接收的视频信号的信息。当控制器350确定录像机250正在接收电视节目时，控制器350确定此电视节目是否是选择记录的节目。如果要记录此电视节目，则控制器350以前面描述的方式使此电视节目记录在硬盘驱动器330中。如果不记录此电视节目，则控制器350以前面描述的方式使此电视节目利用视频处理器310进行处理并发送至电视机205。
存储器380可以包括随机存取存储器(RAM)或随机存取存储器(RAM)和只读存储器(ROM)的组合。存储器380可以包括非易失性随机存取存储器(RAM)，诸如闪速存储器。在电视接收机205的可选择优选实施例中，存储器380可以包括大容量存储数据装置，诸如硬盘驱动器(未示出)。存储器380也可包括读取读/写DVD或可重写CD-ROM的附属外围驱动器或可拆卸磁盘驱动器(无论嵌入式或附属式)。如图3中示意地表示的，这种类型的可拆卸磁盘驱动器能接收和读取可重写CD-ROM盘385。
主多媒体文件显示在显示屏幕210上中央。为了协调显示屏幕210上附加多媒体文件的同时显示，控制器350使用视频单元360，视频单元360格式化这些附加多媒体文件的布局。如更全面描述的，视频单元360根据来自dejaVideo显示控制器370的指令在显示屏幕210上定位每个附加多媒体文件。
视频单元360利用于1999年7月9日申请的题为“METHOD ANDAPPARATUS FOR LINKING A VIDEO SEGMENT TO ANOTHER SEGMENT ORINFORMATION SOURCE”的美国专利申请序列号为09/351086中提出和描述的用于链接视频片段的方法和设备。附加多媒体文件可以显示不同类型的信息。例如，附加多媒体文件可以显示至另一文件位置的指针或链路(例如，通用资源定位器或“URL”)。附加多媒体文件可以显示全部视频文件。可选择地，附加多媒体文件可以显示较大视频文件的一部分(或极小部分)。附加多媒体文件也可以显示视频文件的概述(例如，运动图象的题目和电影中的一些视频图像)。
dejaVideo显示控制器370(通过控制器350)从用户输入260接收用户指令。为响应这些用户指令，dejaVideo显示控制器370则给控制器350和视频单元360提供具有用户选择的用于附加多媒体文件的显示格式。
本发明的优选实施例包括能够提供用于dejaVideo系统100的用户接口的计算机软件400。特别地，计算机软件400能够提供一个或多个用户选择的在显示屏幕100上显示附加多媒体文件的格式。图4表示存储器380的选择部分，其包含本发明的计算机软件400。存储器380包含操作系统接口程序410、拼贴显示应用程序420、水平线性显示应用程序430、垂直线性显示应用程序440、多媒体文件选择应用程序450和线性显示控制应用程序460。
dejaVideo显示控制器370和计算机软件400一起组成能够实现本发明的用户接口控制器。操作系统接口程序410利用控制器350的操作系统来协调计算机软件400的操作。
dejaVideo显示控制器370(通过控制器350)从用户输入260接收用户指令。此用户可以指示dejaVideo显示控制器370将这些附加多媒体文件以拼贴格式安排在主多媒体文件四周。为响应这种类型的用户请求，dejaVideo显示控制器370存取存储在存储器380内的软件400中的拼贴显示应用程序420。拼贴显示应用程序420使这些附加多媒体文件位于显示在显示屏幕210上的主多媒体文件的四周。
参见图5可以更清楚明白此，图5表示显示在显示屏幕210上的主多媒体文件510。附加多媒体文件520、530、540、550、560、570、580和590位于主多媒体文件510的四周，这种格式称为拼贴格式。在“拼贴”格式中，可以显示各个多媒体文件，以使这些多媒体文件部分地相互覆盖或“重叠”，各个多媒体文件也可以部分地覆盖或“重叠”主多媒体文件510。
如果用户希望使附加多媒体文件之一(例如，文件560)显示为主多媒体文件510，则用户通过用户输入260和控制器350发送指令给dejaVideo显示控制器370。为响应此指令，dejaVideo显示控制器370存取存储在存储器380之内的软件400中的多媒体文件选择应用程序450。多媒体文件选择应用程序450使选择的附加多媒体文件(在此示例中为文件560)显示为主多媒体文件510。以前显示为主多媒体文件510的多媒体文件则显示为新文件560。
用户也可以指示显示控制器370将这些附加多媒体文件以水平线性格式安排在主多媒体文件510之下。为响应这种类型的用户请求，dejaVideo显示控制器370存取存储在存储器380内的软件400中的水平线性显示应用程序430。水平线性显示应用程序430使这些附加多媒体文件在显示屏幕210上显示在主多媒体文件510之下，如图6所示。
图6表示显示在显示屏幕210上的主多媒体文件510。附加多媒体文件520、530、540、550、560、570、580和590显示在主多媒体文件510下面的水平行中。此格式称为“水平线性”格式。在“水平线性”格式中，显示各个多媒体文件，以使这些多媒体文件不会相互部分地覆盖或“重叠”或覆盖或“重叠”主多媒体文件510。
如更全部解释的，本发明的系统和方法能在显示屏幕210上在主多媒体文件510下面的水平行中向左或向右移动附加多媒体文件520至590的显示。
和在“拼贴”格式的情况中一样，如果用户希望以“水平线性”格式使附加多媒体文件之一(例如，文件530)显示为主多媒体文件510，则用户通过用户输入260和控制器350发送指令给dejaVideo显示控制器370。为响应此指令，dejaVideo显示控制器370存取存储在存储器380内的软件400中的多媒体文件选择应用程序450，多媒体文件选择应用程序450使选择的多媒体文件(此实施例中的文件530)显示为主多媒体文件510。以前显示为主多媒体文件510的多媒体文件则作为新的文件530进行显示。
用户也可以指示dejaVideo显示控制器370将这些附加多媒体文件沿主多媒体文件510的两个垂直边缘之一或这两个垂直边缘进行安排。这种格式称为“垂直线性”格式。在“垂直线性”格式中，显示各个多媒体文件，以使这些多媒体文件不会部分地相互覆盖或“重叠”或覆盖或“重叠”主多媒体文件510。
为响应这种类型的用户请求，dejaVideo显示控制器370存取存储在存储器380内的软件400中的垂直线性显示应用程序440。垂直线性显示应用程序440使这些附加多媒体文件沿主多媒体文件510的一个垂直边缘或两个垂直边缘显示在显示屏幕210上，如图7所示。
如更全面解释的，本发明的系统和方法能在位于显示屏幕210上的主多媒体文件510旁边的垂直行内向上或向下移动这些附加多媒体文件520至570的显示。
如同在“拼贴”格式和“水平线性”格式情况中一样，用户可以以“垂直线性”格式使附加多媒体文件之一显示为主多媒体文件510，这可以以前面所述的方式利用多媒体文件选择应用程序450来实现。
可能出现其中附加多媒体文件的数量超过可用于以“水平线性”格式或“垂直线性”格式同时全部显示这些文件的位置的数量。例如，在图6所示的“水平线性”格式中，具有位置用于使8个附加多媒体文件同时显示在主多媒体文件510之下。当具有8个以上的附加多媒体文件要进行显示时，用户可以发送指令以使所有的附加多媒体文件顺序显示在“水平线性”格式的8个位置“窗口”内。用户可以通过用户输入260和控制器350将这样的指令发送给dejaVideo显示控制器370。
为响应此指令，dejaVideo显示控制器370存取存储在存储器380内的软件400中的线性显示控制应用程序460。在本发明的一个优选实施例中，线性显示控制应用程序460则使多媒体文件520停止显示，随后使多媒体文件530显示在以前被多媒体文件520占用的位置中。对于每个多媒体文件，重复此处理，直至在起初被多媒体文件580占用的位置中显示多媒体文件590。然后，在以前被多媒体文件590占用的位置中显示第九个多媒体文件(未示出)。
对于每个附加多媒体文件，可以重复顺序移动多媒体文件的处理，以使这些多媒体文件似乎从右至左移动通过“水平线性”格式的8个位置“窗口”。此处理中的移动方向也可以选择为从左至右。在最后的多媒体文件从起初被文件590占用的位置移动到起初被文件580占用的位置时，则在起初被文件590占用的位置中显示文件520。以这种方式，形成这些多媒体文件的一个完整循环并且一次顺序显示8个文件。当然，数字8只用于示例目的。根据显示在显示屏幕210上的多媒体文件的大小可以使用不同的数字。
顺序移动多媒体文件的处理也可以与“垂直线性”格式一起使用，以使这些多媒体文件似乎从顶至底(或从底至顶)移动通过“垂直线性”格式“窗口”中的位置。
在以上述方式顺序显示这些多媒体文件时，用户可以发送指令以使这些多媒体文件的显示的顺序移动暂停。用户可以通过用户输入260和控制器350发送这样的指令给dejaVideo显示控制器370。
为响应暂停显示的顺序显示的指令，dejaVideo显示控制器370存取存储在存储器380内的软件400中的线性显示控制应用程序460，线性显示控制应用程序460随后使这些多媒体文件的显示的顺序移动暂停，直至接收到重新开始这些多媒体文件的显示的顺序移动的用户指令。
同样地，在以上述方式顺序显示这些多媒体文件的同时，用户可以发送指令以使这些多媒体文件的显示的顺序移动反转方向。用户可以通过用户输入260和控制器350发送这样的指令给dejaVideo显示控制器370。
根据反转显示的顺序移动方向的指令，dejaVideo显示控制器370存取存储在存储器380内的软件400中的线性显示控制应用程序460。线性显示控制应用程序460随后使这些多媒体文件的显示的顺序移动反转方向，直至接收到使这些多媒体文件的显示的顺序移动恢复其原始方向的用户指令。
另外，在以上述方式顺序显示这些多媒体文件的同时，用户可以发送指令来控制显示的顺序移动的速度。观看者的阅读能力和阅读速度因人而异，速度控制特性使观看者能调整显示的移动速度，以便这些观看者具有足够的时间来阅读并对这些多媒体文件的显示进行反应。
为响应增加或降低显示的顺序移动速度的指令，dejaVideo显示控制器370存取存储在存储器380内的软件400中的线性显示控制应用程序460。线性显示控制应用程序460随后根据用户提供的指令增加或降低这些多媒体文件的显示的顺序移动速度。
随时在顺序显示这些多媒体文件的同时，用户能选择任何一个顺序显示的多媒体文件显示在主多媒体文件510的位置中，这如前所述利用多媒体文件选择应用程序460来实现。
在本发明的用户接口的另一优选实施例中，可以同时表示出一个以上的“水平线性”格式行。同样地，可以同时表示出一个以上的“垂直线性”格式行。在本发明的用户接口的还一实施例中，可以同时表示出一个或多个“水平线性”格式行和一个或多个“垂直线性”格式行。
在至少同时表示出两个“水平线性”格式行时，“水平线性”格式行之一能显示与主多媒体文件的图像组成关系相关的多媒体文件，并且“水平线性”格式行之一能显示与面部的目标识别关系相关的多媒体文件。可选择地，每个“水平线性”格式行能显示与基于特定用户侧面关系相关的多媒体文件。
相同的原理应用于同时显示至少两个“垂直线性”格式行的情况。相同的原理应用于同时显示至少一个“水平线性”格式行和至少一个“垂直线性”格式行的情况。
在本发明的可选择优选实施例中，也可以显示多媒体文件，以使这些多媒体文件在显示屏幕210上出现和消失。例如，假设显示屏幕210上可利用的空间已经被多媒体文件占满。在将另一多媒体文件增加到显示屏幕210上时，显示屏幕210上“旧”的多媒体文件之一消失，而“新”的多媒体文件出现在其位置上。根据需要可以重复此处理，以显示任意数量的多媒体文件。
图8描述表示本发明方法的优选实施例的操作的流程图800。在dejaVideo显示装置150中并且更具体地在具有dejaVideo显示控制370和计算机软件400的用户接口控制器中执行流程图800中列出的步骤。
dejaVideo显示装置150从匹配引擎135接收主多媒体文件和附加多媒体文件(步骤810)。dejaVideo显示装置150随后格式化主多媒体文件，以显示在显示屏幕210的中央部分上(步骤815)。
dejaVideo显示装置150接收用户指令，选择用于显示附加多媒体文件的格式(步骤820)。然后，dejaVideo显示装置150确定此用户指令是否请求使用“水平线性”格式(判决步骤825)。如果此用户指令请求“水平线性”格式，则dejaVideo显示装置150利用此格式来格式化这些附加多媒体文件以便进行显示(步骤830)。
如果此用户指令未请求“水平线性”格式，则dejaVideo显示装置150确定此用户指令是否请求使用“垂直线性”格式(判决步骤835)。如果此用户指令请求“垂直线性”格式，则dejaVideo显示装置150使用此格式来格式化附加多媒体文件以便进行显示(步骤840)。
如果此用户指令未请求“垂直线性”格式，则dejaVideo显示装置150确定此用户指令是否请求使用“拼贴”格式(判决步骤845)。如果此用户指令请求“拼贴”格式，则dejaVideo显示装置150使用此格式来格式化这些附加多媒体文件以便进行显示(步骤850)。
如果此用户指令未请求“拼贴”格式，则dejaVideo显示装置150将不显示这些附加多媒体文件(步骤855)，直至dejaVideo显示装置150接收到具有有效格式请求的用户指令。
虽然已详细说明本发明，但本领域技术人员应明白，他们可以进行各种改变、替换和选择而不背离最广泛形式上的本发明的精神与范畴。
计算机程序应理解为表示可通过诸如互联网的网络下载或可以任何其他方式购买到的存储在诸如软盘的计算机可读介质上的任何软件产品。

Claims (16)

1.一种视频显示系统(100)，能在显示屏幕(210)上同时显示主多媒体文件(510)和多个附加多媒体文件(520，…，590)，所述视频显示系统(100)包括用户接口系统(370，400)，它具有：
用户接口控制器(370，400)，能从用户接收至少一个指令，选择利用所述主多媒体文件(510)显示所述多个附加多媒体文件(520，…，590)的格式，
其中所述用户接口控制器(370，400)能以所述用户选择的格式在所述显示屏幕(210)上显示所述多个附加多媒体文件(520，590)。
2.如权利要求1的视频显示系统(100)，其中用于利用所述主多媒体文件(510)显示所述多个附加多媒体文件(520，…，590)的所述格式包括水平线性格式、垂直线性格式和拼贴格式之中的至少一种格式。
3.如权利要求1的视频显示系统(100)，其中所述用户接口控制器(370，400)能从用户接收至少一个指令，选择所述多个附加多媒体文件(520，…，590)之一显示为主多媒体文件(510)，和其中所述用户接口控制器(370，400)能将所述多个所述附加多媒体文件(520，…，590)之中所述选择的一个文件在所述显示屏幕(210)上显示为主多媒体文件(510)。
4.如权利要求2的视频显示系统(100)，其中为响应接收到用户指令，所述用户接口控制器(370，400)能在显示屏幕(210)上在所述水平线性格式、垂直线性格式或拼贴格式内顺序移动所述多个所述附加多媒体文件(520，…，590)。
5.如权利要求4的视频显示系统(100)，其中为响应接收到用户指令，所述用户接口控制器(370，400)能反转所述多个所述附加多媒体文件(520，…，590)的顺序移动的方向。
6.如权利要求4的视频显示系统(100)，其中为响应接收到用户指令，所述用户接口控制器(370，400)能控制所述多个所述附加多媒体文件(520，…，590)在所述水平线性格式内在所述显示屏幕(210)上的移动速度。
7.如权利要求1的视频显示系统(100)，其中所述用户接口控制器(370，400)包括：
dejaVideo(记忆错觉视频)显示控制器(370)，能执行包含在耦合到所述dejaVideo显示控制器(370)的存储器(380)内的计算机软件指令(400)，以便从用户接收选择用于利用所述主多媒体文件(510)显示所述多个附加多媒体文件(520，…，590)的格式的至少一个指令，并在所述显示屏幕(210)上以所述用户选择的格式显示所述多个附加多媒体文件(520，…，590)。
8.如权利要求1的视频显示系统(100)，其中所述多个多媒体文件(520，…，590)包括以下文件之中的至少一个文件：包含至另一文件位置的链路的多媒体文件；包含所有视频文件的多媒体文件；包含较大视频文件的一部分的多媒体文件；和包含视频文件概述的多媒体文件。
9.如权利要求1的视频显示系统(100)，其中所述用户接口控制器(370，400)能在所述显示屏幕(210)上显示所述多个附加多媒体文件(520，…，590)，以使各个多媒体文件(520，…，590)在所述显示屏幕(210)上出现和消失。
10.用于在显示屏幕(210)上能同时显示主多媒体文件(510)和多个附加多媒体文件(520，…590)的视频显示系统(100)中使用的，用于为所述视频显示系统(100)提供用户接口(370，400)的一种方法，所述方法包括下列步骤：
在用户接口控制器(370，400)中从用户中接收至少一个指令，选择利用所述主多媒体文件(510)显示所述多个附加多媒体文件(520，…590)的格式；和
在所述显示屏幕(210)上以所述用户选择的格式显示所述多个附加多媒体文件(520，…，590)。
11.如权利要求10的方法，其中用于利用所述主多媒体文件(510)显示多个附加多媒体文件(520，…590)的所述格式包括以下格式之中的至少一种格式：水平线性格式；垂直线性格式；和拼贴格式。
12.如权利要求10的方法，还包括下列步骤：
在用户接口控制器(370，400)中从用户接收至少一个指令，选择所述多个附加多媒体文件中(520，…590)之一作为主多媒体文件(510)进行显示；和
在所述显示屏幕(210)上将所述多个所述附加多媒体文件中(520，…，590)之中所述选择的一个文件作为主多媒体文件(510)进行显示。
13.如权利要求11的方法，还包括下列步骤：
在所述水平线性格式、垂直线性格式或拼贴格式内在所述显示屏幕(210)上顺序移动所述多个所述附加多媒体文件(520，…，590)。
14.如权利要求13的方法，还包括下列步骤：
控制所述多个附加多媒体文件(520，…，590)的移动速度和/或反转所述多个所述附加多媒体文件(520，…，590)的移动方向。
15.如权利要求10的方法，还包括下列步骤：
在所述显示屏幕(210)上显示所述多个附加多媒体文件(520，…，590)，以使各个多媒体文件(520，…590)在所述显示屏幕(210)上出现和消失。
16.一种计算机程序产品，在执行所述计算机程序产品时允许可编程装置用作如权利要求1至8之中任何一个权利要求所述的视频显示系统。
CN02800862A 2001-01-26 2002-01-15 用于为“记忆错觉deja vu”视频系统提供用户接口的系统和方法 Pending CN1460361A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/772,319 2001-01-26
US09/772,319 US20020103821A1 (en) 2001-01-26 2001-01-26 System and method for providing a user interface for a deja video system

Publications (1)

Publication Number Publication Date
CN1460361A true CN1460361A (zh) 2003-12-03

Family

ID=25094666

Family Applications (1)

Application Number Title Priority Date Filing Date
CN02800862A Pending CN1460361A (zh) 2001-01-26 2002-01-15 用于为“记忆错觉deja vu”视频系统提供用户接口的系统和方法

Country Status (6)

Country Link
US (1) US20020103821A1 (zh)
EP (1) EP1358760A1 (zh)
JP (1) JP2004531920A (zh)
KR (1) KR20020086941A (zh)
CN (1) CN1460361A (zh)
WO (1) WO2002060177A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003726B2 (en) * 2001-02-21 2006-02-21 Nanonation Incorporated Computer network having context sensitive and interactive multimedia applications and controls, forming dynamic user interfaces on local computer terminals
US7275210B2 (en) * 2003-03-21 2007-09-25 Fuji Xerox Co., Ltd. Systems and methods for generating video summary image layouts
US7053956B2 (en) * 2003-03-27 2006-05-30 Sony Corporation Method of and apparatus for maintaining smooth video transition between distinct applications
KR100641024B1 (ko) * 2004-07-08 2006-11-06 우종일 거타퍼차 포인트의 재단장치
US7559027B2 (en) * 2006-02-28 2009-07-07 Palm, Inc. Master multimedia software controls
US20110078626A1 (en) * 2009-09-28 2011-03-31 William Bachman Contextual Presentation of Digital Media Asset Collections
US10048921B2 (en) * 2010-03-02 2018-08-14 Qualcomm Incorporated Controlling a multimedia device in remote display mode

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06311449A (ja) * 1993-02-26 1994-11-04 Sony Corp テレビジョン受像機
JPH09505432A (ja) * 1994-09-12 1997-05-27 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ ユーザがサービスを選択することが可能である方法、該方法を実行するためのシステム、該システムにおいて使用するサーバ及び該システムにおいて使用する機器
JPH0965225A (ja) * 1995-08-24 1997-03-07 Hitachi Ltd テレビジョン装置及びその表示方法
US5754253A (en) * 1996-01-11 1998-05-19 Lg Electronics Inc. Apparatus for generating a plurality of quasi-moving PIP/POP screens
US5978046A (en) * 1996-12-24 1999-11-02 Sony Corporation Television receiver with picture-in-picture function displays titles of reduced screen programs
US6763522B1 (en) * 1998-06-30 2004-07-13 Sony Corporation System and method for a digital television electronic program guide
US6204887B1 (en) * 1998-12-11 2001-03-20 Hitachi America, Ltd. Methods and apparatus for decoding and displaying multiple images using a common processor
JP3595745B2 (ja) * 1999-01-29 2004-12-02 キヤノン株式会社 画像処理装置
CA2362706A1 (en) * 1999-02-08 2000-08-10 United Video Properties, Inc. Electronic program guide with support for rich program content

Also Published As

Publication number Publication date
WO2002060177A1 (en) 2002-08-01
JP2004531920A (ja) 2004-10-14
US20020103821A1 (en) 2002-08-01
EP1358760A1 (en) 2003-11-05
KR20020086941A (ko) 2002-11-20

Similar Documents

Publication Publication Date Title
US7171402B1 (en) Dynamic interactive content system
CN1242611C (zh) 交互式媒体指南系统及允许其用户访问媒体的方法
CN1300726C (zh) 使用多媒体用户简档的多媒体检索和浏览方法
CN1226867C (zh) 推荐节目的方法及其系统
CN1178489C (zh) 视频装置和显示方法
US20100247061A1 (en) Collection and concurrent integration of supplemental information related to currently playing media
CN1622092A (zh) 内容观看支持装置和内容观看支持方法以及计算机程序
CN1909642A (zh) 用于在数字重放系统中自动安排删除文件的方法和装置
CN1394342A (zh) 用于对存储于存储媒体之上的信息信号进行再现的装置
CN1665293A (zh) 影像再生装置及方法
CN1484442A (zh) 显示菜单向导的视频记录/再现装置和方法
CN1332926A (zh) 定制含提示项或本地标识符的节目指南信息的系统和方法
CN1430851A (zh) 具有观看节目表的交互式电视应用
CN1529981A (zh) 上下文相关的web页面系统和方法
CN1411275A (zh) 分层索引图像的方法及其设备
WO2008048268A1 (en) Method, apparatus and system for generating regions of interest in video content
CN101064825A (zh) 基于移动设备的体育视频的个性化定制方法及其装置
CN1299196A (zh) 广播系统和接收设备
CN1577220A (zh) 电子设备、屏幕控制方法和屏幕控制程序
CN1228970C (zh) 用于管理数据的装置及方法
CN1168528A (zh) 从数字移动图像产生数字静止图像文件的仪器和方法
CN1682533A (zh) 视频记录器装置以及操作视频记录器装置的方法
CN1656798A (zh) 内容记录和再现设备、方法以及计算机程序
CN1829992A (zh) 与dvd链接的因特网加书签
CN1770855A (zh) 播放节目输出控制装置和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication