CN102823268A - 视频数据的技巧回放 - Google Patents

视频数据的技巧回放 Download PDF

Info

Publication number
CN102823268A
CN102823268A CN2010800660143A CN201080066014A CN102823268A CN 102823268 A CN102823268 A CN 102823268A CN 2010800660143 A CN2010800660143 A CN 2010800660143A CN 201080066014 A CN201080066014 A CN 201080066014A CN 102823268 A CN102823268 A CN 102823268A
Authority
CN
China
Prior art keywords
equipment
video
video data
playback
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800660143A
Other languages
English (en)
Other versions
CN102823268B (zh
Inventor
李钧
许军
马小骏
陈剑峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
InterDigital Madison Patent Holdings SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN102823268A publication Critical patent/CN102823268A/zh
Application granted granted Critical
Publication of CN102823268B publication Critical patent/CN102823268B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4825—End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提出了一种用于通过第二设备（13）控制第一设备（12）上的视频数据的回放的方法，所述方法在第二设备包括：呈现对应于视频数据的一个部分的图像；响应于所述图像的呈现状态的改变，向所述第一设备传输命令以根据所述图像的呈现状态的变化调整所述第一设备上的视频数据的所述部分的回放状态。

Description

视频数据的技巧回放
技术领域
本发明总体上涉及视频系统，具体而言，本发明涉及视频数据的技巧回放（trick playback）的方法和装置。
背景技术
数字视频记录（DVR）技术能够提供除了传统的基于时间的技巧模式之外的更加智能化的视频数据的技巧回放。例如，已经提出了广告切换（advertisement zapping），使得用户能够在视频预先录制并且以充分的元数据索引的情况下可以跳过某个时段。
有很多方法可以在视频流的resp.中插入resp.associate元数据。自动情景（scene）检测是一种相关技术，其能够标记视频流的主要情景变化。可以对于主要情景创建元数据并将其插入至视频流。
情景元数据可以被用于支持基于情景的技巧模式。基于情景的技巧模式涉及全部的回放控制操作，例如快进、倒带或者慢放，所述控制基于情景而非时间戳。基于情景的技巧模式的优点是能够快速移动视频而不丢失重要情景。
DVD章节书（Chapter Book）菜单可以进行基于情景的回放控制。但是，其只支持“转到”类型的功能，即能使回放到达电影的某个章节/部分。但是这并不能取代传统的技巧模式。
上述传统的基于情景的技巧模式的缺点在于，其有可能使习惯于基于时间的技巧模式的用户在使用传统工具（例如遥控器）进行操作时产生迷惑。
另外一个缺点是缺少一种机制来改善技巧模式的创建。
发明内容
根据本发明的一个方面，提出了一种用于通过第二设备控制第一设备上的视频数据的回放的方法。所述方法在第二设备包括：呈现对应于视频数据的一个部分的图像；响应于所述图像的呈现状态的改变，向所述第一设备传输命令以根据所述图像的呈现状态的变化调整所述第一设备上的视频数据的所述部分的回放状态。
根据本发明的另一个方面，提出了一种用于控制另一设备上的视频数据的回放的装置。所述装置包括：用于按照视频数据的回放顺序显示一组图像的装置，所述图像的每一个对应于所述视频数据的一部分；和装置，用于在视频数据的对应部分在所述另一设备上回放的时间段内突出显示所述图像，并且响应于所述图像的显示状态的变化，向所述另一设备传输命令以根据所述图像的显示状态的变化调整所述视频数据的所述部分的回放状态。
附图说明
通过下面结合附图的详细说明，本发明的上述及其他方面、特征和优点讲更为明显，其中：
图1是根据本发明实施方式的视频系统的框图；
图2是说明图1中视频系统的运转的高级流程图；
图3是说明所述第一设备的视频解码器/TV模块的运转的流程图；
图4是说明所述第一设备的同步模块的运转的流程图；
图5是所述第一设备的通信模块的流程图；
图6是所述第二设备的故事书浏览器的运转的流程图；
图7是说明了第二设备的同步模块的运转的流程图；
图8是第二设备的通信模块的流程图；
图9a和图9b是便携设备的示例性故事书用户界面的实例；和
图10显示了便携设备的具有控制按键的详细菜单。
具体实施方式
下面将对本发明的多个实施方式进行详细说明。出于解释的目的，下面将对具体结构进行详细说明以使本发明得到更好的理解。但是，本领域普通技术人员可以理解，也可以不采用所述具体细节来实施本发明。
考虑到上述现有技术的缺点，本发明的实施方式提供了一种视频系统，其利用与第二设备上的可视媒体（visual media）的交互来实现在第一设备上的视频回放的技巧模式。
具体而言，在第二设备上呈现（present）可视媒体，所述可视媒体对应于第一设备上的视频回放的视频剪辑（video clip）或视频部分（video section）。所述第二设备上的可视媒体的呈现状态与第一设备上的视频的回放状态相同步。一个方面，第一设备上的视频部分的回放将导致第二设备上的相关可视媒体的呈现。在另一方面，所述第二设备上的可视媒体的状态变化将造成第一设备上的视频部分的回放状态的相应改变。从这种意义上讲，在第二设备上的可视媒体的呈现状态与第一设备上的视频的回放状态之间具有双向同步。
根据本发明的实施方式，视频故事书（storybook）用作第二设备上的可视媒体，用于执行基于情景的技巧模式。所述故事书是一种类似于书的媒体显示，包括一系列的页（幻灯片、图像），每页表示在第一设备上显示的视频节目的对应视频部分。从某种意义而言，视频故事书是供用户浏览在第一设备上显示的视频的视频总结。故事书对于移动应用特别有益，因为在这种情况下不需要传输全部的视频以用于技巧播放，这样将节省很多带宽。
下面将详细说明根据本发明实施方式的视频系统的实施方式，所述视频系统用于通过在第二设备上显示的故事书执行在第一设备上的基于情景的技巧播放。
图1是根据本发明实施方式的视频系统的框图。
请参看图1，视频系统10包括头端11、用于视频数据回放的第一设备12、用于呈现第一设备的视频数据的故事书的第二设备13。头端11、第一设备12和第二设备13通过通信网络（CN）14进行信号通信。
第一设备12可以包括但不局限于机顶盒（STB）或电视机。第二设备13可以包括但不局限于便携设备、平板电脑、个人计算机或笔记本电脑。CN 14可以是能够携带和传输视频内容的任何类型的网络，例如宽带网、IP网络或其结合。
头端11包括：视频内容服务器（VCS）110，用于提供视频内容；视频广播服务器（VBS）111，用于从VCS 110接收视频内容并将该视频内容广播至CN 14，例如电缆网；故事书产生器（SC）112，用于基于预先设定的规则（PR）113为来自VCS 110的视频内容创建故事书。如图1所示，头端11还可以包括用户操作收集器（UAC）114，用于从CN 14收集并分析用户对故事书进行的操作统计，并将分析结果发送至SC 112，SC112可以基于来自UAC114的分析结果创建故事书。如图1所示，可以理解，SC 112还可以提供编辑交互用户界面（UI），编辑者可以通过该用户界面手动创建故事书。在将创建的故事书发送至CN 14之前可以将其存储在故事书库（SI）115中。
需要指出，在系统中的CN 14不提供返回通道的情况下（例如广播网络的情况），UAC 114将无法收集用户操作统计数据。
第一设备12包括：视频解码器/TV（VD/TV）121，用于解码来自CN 14的视频并在其上进行视频回放；同步模块（SM）122，用于将第一设备12上的视频回放的状态与第二设备13上的故事书的显示状态进行同步；和通信模块（CM）123，用于与第二设备13进行通信。
可以理解，可以通过遥控器（未示出）或者第一设备12的SM 122发出的命令控制VD/TV 121上的视频回放的状态。
SM 122将通过CM 123向第二设备13报告第一设备12的VD/TV 121上的视频回放的状态，作为其上的故事书显示状态的同步参考。具体而言，所述报告可以是时间驱动或者事件驱动。即，在一方面，SM 122将向第二设备13定期地发送报告（称为心跳机制），通知第一设备12的VD/TV 121上的视频回放的进展以使第二设备13进行同步。可以基于应用要求预先定义报告传输的周期。另一方面，SM 122例如可以根据遥控器发出的命令探测VD/TV121上的视频回放状态是否有任何变化（作为一个例子，如果用户在遥控器上进行快进操作，这将导致VD/TV 121上的视频回放状态改变，VD/TV 121将通过向SM 122发送消息立刻通知SM 122）。如果为“是”，SM 122将立刻将第一设备12的当前视频回放状态的报告通过CM 123发送至第二设备13，以使第二设备13对其上的故事书显示状态进行相应地改变（同步）。
如下文将要说明的那样，SM 122还将通过CM 123从第二设备13接收关于故事书显示当前状态的报告并向VD/TV 121发送命令，请求VD/TV 121上的视频回放的进展或状态与第二设备13上的故事书显示的状态进行同步。
第二设备13包括：故事书浏览器（SB）131，用于显示故事书；同步模块（SM）132，用于将第二设备上的故事书显示状态与第二设备12上的视频显示状态进行同步；和通信模块（CM）133，用于与第一设备12进行通信。
根据视频服务的要求，可以在线或离线创建和传输故事书。头端11可以可以独立于视频内容数据将故事书直接传输至第二设备13。可选择地，可以在头端11将故事书以元数据或某些标记的形式嵌入在视频流中（例如，对于MPEG-2视频系统，MPEG-2中的传输流的适配（adaption）字段由于具有可用的保留字节而可以用于携带故事书的链接）并传输至第一设备12，第一设备12提取出故事书相关数据并传输至第二设备13以利用元数据和视频流数据（例如，如果合适，提取代表性图像）形成合适的故事书。可以通过自备（self-contained）方式（传输全部故事书数据）或者通过链接至将要收集的数据进行引用的方式传输故事书。在后一种情况下，第二设备13可以通过利用上述链接访问适当的服务器获取故事书数据。
如上所述，还可以将故事书存储在头端11的SI 115中。在这种情况下，用户可以通过访问SI 115（例如通过利用合适的IP地址）访问故事书。上述IP地址可以是固定的并且不需要与视频流一起传输。当用户浏览故事书并选择其中之一时，相应的视频将从头端11流放至第一设备12。
还可以将故事书与视频点播（VoD）或时移电视（time-shift TV）服务结合在一起提供给用户。
用户可以利用个人视频录像机（PVR）功能将视频与相应的故事书结合在一起存储在第一设备12上。
根据另一实施方式，如果图1中的CN 14具有返回通道，可以将用户与故事书的交互发送至头端11的UAC 114以协助和丰富故事书创建。例如，可以使用新闻视频部分的每日点击率进行新闻选择以组成每周新闻故事书。
如上所述，在从第一设备12接收到关于视频回放的进展或状态时，SM132将SB 131上的故事书显示的进展或状态与第一设备12上的视频回放的进展或状态进行同步。
SM 132将通过CM 133向第一设备12报告第二设备13的SB 131上的故事书显示的状态，作为其上视频回放的状态的同步基准。具体而言，SM 132将探测第二设备13的SB 131上的故事书显示的状态。如果探测到该状态的任何变化，SM 132将立刻通过CM 133向第一设备12报告第二设备13上的故事书显示的当前状态。
可以根据用户与第二设备13的交互改变或者控制第二设备13的SB 131上的故事书显示的状态。
SM 132可以将关于第二设备13上的故事书显示的状态的报告定期地发送至第一设备12，以便于两个设备之间的同步。
下面将结合附图2-8详细说明图1所示视频系统的运转过程的实施方式。
图2是说明图1中视频系统的运转的高级流程图。
如图2所示，在步骤S201，头端11将例如根据预先定义的规则和用户互动统计数据创建故事书。
在步骤S202，头端11将视频内容与相应的故事书（或其链接）一起发送至CN 14。
在步骤S203，第一设备12从CN 14接收视频内容和相应的故事书（或其链接）。
在步骤S204，第一设备12解码和在其屏幕上显示视频内容，并将故事书（或其链接）分配至第二设备13。
在步骤S205，在第二设备12接收到用于故事书的链接的情况下，其将从头端11下载所述故事书。
在步骤S206，第一设备11例如通过遥控器接收命令，并且第二设备12允许用户与其上的故事书进行交互。
在步骤S207，在第一设备11上的视频回放与第二设备12上的故事书显示之间进行状态同步。在此步骤，还可以向头端11发送关于用户交互的报告，以改善以后的故事书创建。
图3是说明所述第一设备11的视频解码器/TV模块121的运转的流程图。
如图3所示，在步骤S301，视频解码器/TV模块121从CN 14接收视频数据。
在步骤S302，视频解码器/TV模块121解码视频数据并在第一设备11上回放。
在步骤S303，视频解码器/TV模块121判断是否例如从遥控器接收到命令。
如果步骤S303的结果为“否”，则过程前进至步骤S304，视频解码器/TV模块121进一步判断是否从SM 122接收到命令。如果步骤S304的结果为“是”，过程前进至步骤S305，视频解码器/TV模块121根据SM 122发出的命令相应地改变视频回放状态。否则过程返回S302。
如果步骤S303的结果为“是”，则过程前进至步骤S306，视频解码器/TV模块121探测是否收到“停止”命令。
如果步骤S306的结果为“否”，则过程前进至步骤S307，视频解码器/TV模块121改变视频回放状态并向SM 122发送状态报告。如果步骤S306的结果为“是”，则过程前进至步骤S308，视频解码器/TV模块121停止视频回放并向SM 122发送状态报告。
图4是说明所述第一设备12的同步模块122的运转的流程图。
如图4所示，在步骤S401，SM 122开始将第一设备12上的视频回放与第二设备13上的故事书显示同步。
在步骤S402，SM 122判断是否已经到了发送定期报告的时间。
如果步骤S402的结果为“是”，在下面的步骤S403，SM 122将从视频解码器/TV模块121检索视频回放状态，形成状态报告并通过CM 123将报告发送至第二设备13。
如果步骤S402的结果为“否”，过程将前进至S404，SM 122将判断是否从视频解码器/TV模块121收到报告。
如果步骤S404的结果为“是”，过程将前进至S409，SM 122将通过CM 123将报告发送至第二设备13。
如果步骤S404的结果为“否”，在下面的步骤S405，SM 122将判断是否通过CM 123从第二设备13接收到报告。
如果步骤S405的结果为“否”，过程将返回至步骤S402。如果步骤S405的结果为“是”，在下面的步骤S406，SM 122将从视频解码器/TV模块121检索第一设备12上的视频回放的当前状态。
在下面的步骤S407，SM 122将判断是否需要改变视频回放状态。如果步骤S407的结果为“否”，过程将返回步骤S402。如果步骤S407的结果为“是”，在步骤S408，SM 122将形成并向视频解码器/TV模块121发送命令以改变视频回放状态。
图5是所述第一设备12的通信模块123的流程图。
如图5所示，在步骤S501，CM 123开始进行通信。
在步骤S502，CM 123将等待从SM 122或第二设备13发出的状态报告。
在步骤S503，CM 123判断是否从SM 122接收到报告。如果步骤S503的结果为“是”，过程将前进至步骤S506，CM 123向第二设备13发送报告。如果步骤S503的结果为“否”，过程将前进至步骤S504，CM 123将判断是否从第二设备13接收到报告。
如果步骤S504的结果为“是”，过程将前进至步骤S505，CM 123向CM122发送报告。如果步骤S504的结果为“否”，过程返回步骤S502。
图6是所述第二设备13的故事书浏览器SB 131的运转的流程图。
如图6所示，在步骤S601，SB 131从CN 14接收故事书。
在步骤S602，SB 131在第二设备13上显示故事书。
在步骤S603，SB 131判断是否从用户接收到命令。
如果步骤S603的结果为“否”，过程将前进至步骤S604，SB 131将进一步判断是否从SM 132接收到命令。如果步骤S604的结果为“是”，过程将前进至步骤S605，SB 131基于从SM 132接收到的命令相应地改变故事书回放状态。否则，过程前进至步骤S602。
如果步骤S603的结果为“是”，过程前进至步骤S606，SB 131探测是否收到“停止”命令。
如果步骤S606的结果为“否”，过程将前进至步骤S607，SB 131将改变故事书回放状态并向SM 132发送状态报告。如果步骤S606的结果为“是”，过程前进至步骤S608，SB 131将关闭故事书并向SM 132发送状态报告。
图7是说明了第二设备13的同步模块SM 132的运转的流程图。
在步骤S701，SM 132开始将第二设备13上的故事书显示与第一设备12上的视频回放进行同步。
在步骤S702，SM 132判断是否已经到了发送定期报告的时间。
如果步骤S702的结果为“是”，在下面的步骤S703，SM 132将从SB 131检索视频回放状态，形成状态包括并通过CM 133将报告发送至第一设备12。
如果步骤S702的结果为“否”，过程将前进至S704，SM 132将判断是否从SB 131收到报告。
如果步骤S704的结果为“是”，过程将前进至S709，SM 132将通过CM 133将报告发送至第一设备12。
如果步骤S704的结果为“否”，在下面的步骤S705，SM 132将判断是否通过CM 133从第一设备12接收到报告。
如果步骤S705的结果为“否”，过程将返回至步骤S702。如果步骤S705的结果为“是”，在下面的步骤S706，SM 132将从SB 131检索第二设备12上的故事书回放的当前状态。
在下面的步骤S707，SM 132将判断是否需要改变故事书回放状态。如果步骤S707的结果为“否”，过程将返回步骤S702。如果步骤S707的结果为“是”，在步骤S708，SM 132将形成并向SB 131发送命令以改变故事书回放状态。
图8是第二设备13的通信模块CM 133的流程图。
如图8所示，在步骤S801，CM 133开始进行通信。
在步骤S802，CM 133将等待从SM 132或第一设备12发出的状态报告。
在步骤S803，CM 133判断是否从SM 132接收到报告。如果步骤S803的结果为“是”，过程将前进至步骤S806，CM 133向第一设备12发送报告。如果步骤S803的结果为“否”，过程将前进至步骤S804，CM 133将判断是否从第一设备12接收到报告。
如果步骤S804的结果为“是”，过程将前进至步骤S805，CM 133向CM132发送报告。如果步骤S804的结果为“否”，过程返回步骤S802。
图9示出了故事书的一个示例性用户界面。在此实例中，通过电视和便携设备之间的互动实现在STB/TV上的视频数据的技巧显示。
如图9a所示，在电视屏幕901上显示视频数据，例如电影。可以理解，电影数据由多个部分构成，每个部分由一个主要情景来代表（在本实施方式中该主要情景为固定的图像，但是也可以采用视频序列或者其他代表项目）。当视频部分i（其中i为0，1，2，…）在电视屏幕901上显示时，相应的主要情景i将显示在便携设备902上。在这种情况下，可以将主要情景i称为页i，因为其看上去像是显示在便携设备902上以描述电视屏幕901上回放的内容的故事书的一页。
作为选择，可以如图9b所示在便携设备902的屏幕上按顺序呈现数个主要情景（故事书的页）的矩阵。在这种情况下，当电视屏幕901上回放视频部分i时，相应的主要情景i将动态地被突出显示（图9b中用粗线框表示）。
本领域普通技术人员可以理解，上述两种类型的用户界面可以结合使用在一个应用中。即，当视频部分i在电视屏幕901上回放时，对应的主要情景i将显示在便携设备902的屏幕上。并且同时地，多个主要情景按顺序地出现在便携设备902的屏幕的适当位置上，相应的主要情景i被突出显示。
下面的代码给出了用于确定故事书的内容的实例。
Figure BDA00002223435800091
Figure BDA00002223435800101
在此实例中，页id（page id）表示页目录，时间戳（timestamp）确定页与相应视频内容之间的时间关系，image_src指出页的图片链接；image_thumbnail指出页的略图（thumbnail）图片链接。
如上所示，故事书包括12页，页码为0至11。页0对应于时间戳范围0至30.08秒的电影部分0，页1对应于时间戳范围30.08至114.032秒的电影部分1，以此类推。
根据本实施方式，在电视屏幕上回放的电影的状态与便携设备902的屏幕上的情景的显示状态“双向地”同步。
具体而言，在一方面，当电视上回放电影时，在由视频部分的时间戳范围限定的时间段内便携设备902上的相应页（即主要情景）将动态地被突出显示以反映电视上的电影回放进展。随着电影的向前/向后回放，故事书的突出显示页也得到更新以保证上述同步。如果用户使用传统遥控器在电视上进行电影的快进/快退，相应的进展也会通过突出显示页逐页向前/向后移动反映在便携设备902上。
另一方面，通过用户与便携设备902的屏幕上显示的页（主要情景）的交互，可以实现在电视上的电影的基于情景的技巧回放。例如，用户可以点击任何一页以在电视上立刻转换至相应的电影部分。另外，便携装置902还可以设置有具有数个功能按钮的菜单以便于各种各种技巧回放操作。
便携设备902的控制按钮详细菜单示于图10中。下面是便携设备提供的某些示例性技巧回放功能。
转到：通过点击/选择故事书中的页，用户可以使视频回放从相应地情景开始。
下一/PREV：通过向左和向右分别刷动至故事书中的下一和前一页可以使视频回放分别从下一和前一情景开始。
FF/RW：通过在故事书上分别反复向左和向右刷动，用户可以使视频以正比于反复频率的速度快进/快倒。可以根据每秒钟的情景的数量测量所述速度。
播放/暂停：通过点击播放按钮，用户可以开始视频回放；将手指保持在故事书的页上可以使视频回放暂停在相应情景的静止图像。
重复：通过在故事书的页上画圈可以反复回放相应部分。
慢放：通过在故事书的页上缓慢滑动，用户可以使相应部分慢放。
范围：通过选择故事书的开始页和结束页，用户可以使视频在相应的情景开始和结束。
放大：通过放大/聚焦在故事书的图像页，在回放的视频上进行聚焦放大，放大的中心可以在显示器上移动。
STB/电视与便携设备之间的消息交换可以通过下述任何一个事件来触发：
通过遥控器在STB/电视上进行的任何操作；
在故事书上进行的任何用户互动；
关于STB/电视视频状态的定期报告；和
关于便携设备的故事书状态的定期报告。
STB/电视与便携设备之间的消息交换用于报告设备之间的本地状态，因此获得上述同步。可以使用下述消息格式：
Figure BDA00002223435800121
需要指出，根据应用需要可以扩展消息主体以包括更多字段。
下面将详细说明当用户按下便携设备上的PREV按钮时便携式设备与STB/电视之间的消息交换。在这种情况下，故事书中突出显示的页将转至前一页。
当用户按下PREV按钮时，从便携式设备向STB/电视发送具有下述消息主体的报告以通知便携设备上的故事书显示状态。
Figure BDA00002223435800132
Figure BDA00002223435800141
在从便携设备收到状态报告之后，STB/电视将采用消息内的信息进行上述同步。另外，STB/电视还将向便携设备发送具有下述消息主体的确认消息。
Figure BDA00002223435800142
Figure BDA00002223435800151
可以理解，在不背离本发明的主旨和权利要求限定的范围的情况下，可以对所述实施方式进行各种修改。

Claims (10)

1.一种用于通过第二设备（13）控制第一设备（12）上的视频数据的回放的方法，所述方法在第二设备（13）包括：
呈现对应于所述视频数据的部分的图像；
响应于所述图像的呈现状态的改变，向所述第一设备（12）传输命令，以根据所述图像的呈现状态的变化调整所述第一设备上的视频数据的所述部分的回放状态。
2.根据权利要求1所述方法，其中所述图像的呈现包括在所述第一设备（12）上的视频数据的相应部分回放的时间段内突出显示在第二设备（13）上显示的多个图像中的一个，所述多个图像的每一个分别对应于所述视频数据的一个部分。
3.根据权利要求1所述方法，其中通过用户对所述第二设备（13）的操作触发所述图像的呈现的变化。
4.根据权利要求1所述的方法，还包括根据第一设备（12）上的视频数据的所述部分的回放状态的变化调整所述图像的呈现状态。
5.根据权利要求1所述的方法，其中通过用于提供所述视频数据的服务器（11）创建用于所述图像呈现的数据。
6.根据权利要求5所述的方法，其中从所述服务器（11）向所述第二设备（13）传输用于图像呈现的数据。
7.根据权利要求5所述的方法，其中所述服务器（11）存储用于图像呈现的数据并向所述第二设备（13）传输用于访问所述图像呈现的链接。
8.根据权利要求5所述的方法，其中将用于所述图像呈现的数据嵌入在所述视频数据中并将视频数据从所述服务器（11）传输至所述第一设备（12），所述第一设备（12）从视频数据中提取出用于图像呈现的数据并传输至所述第二设备（13）。
9.一种用于控制另一设备（12）上的视频数据的回放的装置（13），包括：
用于按照视频数据的回放顺序显示一组图像的装置（121），所述图像的每一个对应于所述视频数据的一部分；和
装置（122，123），用于在视频数据的对应部分在所述另一设备（12）上回放的时间段内突出显示所述图像，并且响应于所述图像的显示状态的变化，向所述另一设备（12）传输命令，以根据所述图像的显示状态的变化调整所述视频数据的所述部分的回放状态。
10.根据权利要求9所述的装置（13），还包括用于根据所述另一设备（12）上的视频数据的所述部分的回放状态的变化调整所述图像的显示状态的装置（122，123）。
CN201080066014.3A 2010-03-31 2010-03-31 视频数据的技巧回放 Active CN102823268B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2010/000413 WO2011120195A1 (en) 2010-03-31 2010-03-31 Trick playback of video data

Publications (2)

Publication Number Publication Date
CN102823268A true CN102823268A (zh) 2012-12-12
CN102823268B CN102823268B (zh) 2018-05-22

Family

ID=44711283

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080066014.3A Active CN102823268B (zh) 2010-03-31 2010-03-31 视频数据的技巧回放

Country Status (10)

Country Link
US (3) US9866922B2 (zh)
EP (1) EP2553918A4 (zh)
JP (1) JP5792276B2 (zh)
KR (1) KR101692097B1 (zh)
CN (1) CN102823268B (zh)
CA (1) CA2795296C (zh)
MX (1) MX2012010634A (zh)
MY (1) MY160803A (zh)
RU (1) RU2543936C2 (zh)
WO (1) WO2011120195A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MX2012010634A (es) 2010-03-31 2012-11-29 Thomson Licensing Reproduccion trucada de datos de video.
WO2012036658A1 (en) 2010-09-17 2012-03-22 Thomson Licensing Method for semantics based trick mode play in video system
US8681963B2 (en) * 2011-06-09 2014-03-25 Blackberry Limited Method for sending recorded conference call content
CN103167333A (zh) * 2011-12-13 2013-06-19 亚旭电子科技(江苏)有限公司 数字机上装置
JP2014204265A (ja) * 2013-04-04 2014-10-27 キヤノン株式会社 再生制御装置及び再生制御方法
US20170244992A1 (en) * 2014-10-30 2017-08-24 Sharp Kabushiki Kaisha Media playback communication
US10096342B2 (en) * 2015-04-30 2018-10-09 Rodica Schileru Method and sytem for segmenting videos
KR102434103B1 (ko) 2015-09-18 2022-08-19 엘지전자 주식회사 디지털 디바이스 및 상기 디지털 디바이스에서 데이터 처리 방법
JP6134373B2 (ja) * 2015-12-04 2017-05-24 ヤフー株式会社 端末装置、動画制御方法、および動画制御プログラム
US9985724B2 (en) * 2016-09-09 2018-05-29 Ciena Corporation Horizontal synchronization extensions for service resizing in optical networks
US10321190B2 (en) 2017-03-29 2019-06-11 International Business Machines Corporation Video content presentment device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005286798A (ja) * 2004-03-30 2005-10-13 National Institute Of Information & Communication Technology 画像コンテンツ配信システム
US20080209075A1 (en) * 2007-02-22 2008-08-28 Yahoo! Inc. Synchronous delivery of media content and real-time communication for online dating
JP2009124298A (ja) * 2007-11-13 2009-06-04 Mitsubishi Electric Corp 符号化映像再生装置及び符号化映像再生方法
US20090198607A1 (en) * 2008-02-01 2009-08-06 Google Inc. Online map advertising

Family Cites Families (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1996017313A1 (en) 1994-11-18 1996-06-06 Oracle Corporation Method and apparatus for indexing multimedia information streams
US6289363B1 (en) 1996-08-23 2001-09-11 International Business Machines Corporation Navigation editor framework for building mulitmedia titles
JP3877371B2 (ja) 1997-02-26 2007-02-07 株式会社東芝 映像再生装置
JPH11112870A (ja) 1997-10-07 1999-04-23 Matsushita Electric Ind Co Ltd 動画エディットシステム，動画再生システム，動画エディット再生システムおよびそれらのシステム用プログラムを記録した媒体
IL122498A0 (en) 1997-12-07 1998-06-15 Contentwise Ltd Apparatus and methods for manipulating sequences of images
RU2238614C2 (ru) * 1998-05-08 2004-10-20 Квэлкомм Инкорпорейтед Устройство и способ распространения высококачественных видео-и аудиопрограмм к удаленным местам
US6374225B1 (en) 1998-10-09 2002-04-16 Enounce, Incorporated Method and apparatus to prepare listener-interest-filtered works
JP2001350775A (ja) 2000-06-05 2001-12-21 Fuji Xerox Co Ltd 複数情報提示方法及び装置
US7079113B1 (en) * 2000-07-06 2006-07-18 Universal Electronics Inc. Consumer electronic navigation system and methods related thereto
KR100403238B1 (ko) 2000-09-30 2003-10-30 엘지전자 주식회사 비디오의 지능형 빨리 보기 시스템
JP3573203B2 (ja) 2001-01-22 2004-10-06 日本電気株式会社 情報再生方法及び情報再生システム。
JP2002330419A (ja) * 2001-04-27 2002-11-15 Matsushita Electric Ind Co Ltd マルチストーリー視聴装置及びマルチストーリー視聴方法
JP4734792B2 (ja) * 2001-07-16 2011-07-27 ソニー株式会社 制御装置、制御方法、プログラムおよび遠隔操作システム
EP1276237A1 (en) 2001-07-12 2003-01-15 Sony Corporation Remote controller and system having the same
US20030035075A1 (en) * 2001-08-20 2003-02-20 Butler Michelle A. Method and system for providing improved user input capability for interactive television
WO2003051043A1 (en) * 2001-12-06 2003-06-19 Digeo, Inc. Method and system for distributing personalized editions of media programs using bookmarks
US7130528B2 (en) 2002-03-01 2006-10-31 Thomson Licensing Audio data deletion and silencing during trick mode replay
JP4012540B2 (ja) 2002-05-20 2007-11-21 富士通株式会社 教材表示方法及び教材表示プログラム
KR100555426B1 (ko) 2002-12-27 2006-02-24 엘지전자 주식회사 비디오 콘텐트의 동적 탐색 방법 및 장치
WO2004079709A1 (ja) 2003-03-07 2004-09-16 Nec Corporation スクロール表示制御
JP4003697B2 (ja) 2003-05-28 2007-11-07 船井電機株式会社 映像再生装置
AU2004306754B2 (en) 2003-10-06 2009-09-17 Disney Enterprises, Inc. System and method of playback and feature control for video players
CN103143011A (zh) 2004-06-25 2013-06-12 魁北克益得生物医学公司 用于治疗神经疾病的组合物和方法
JP4339206B2 (ja) * 2004-08-19 2009-10-07 ソニー株式会社 再生装置、再生方法および再生プログラム、ならびに、記録媒体
WO2006064749A1 (ja) 2004-12-16 2006-06-22 Sharp Kabushiki Kaisha 動画像再生方法および動画像再生装置
WO2006082787A1 (ja) 2005-02-03 2006-08-10 Matsushita Electric Industrial Co., Ltd. 記録再生装置および記録再生方法および記録再生プログラムを格納した記録媒体および記録再生装置において用いられる集積回路
WO2006092765A2 (en) 2005-03-04 2006-09-08 Koninklijke Philips Electronics N.V. Method of video indexing
KR100716291B1 (ko) * 2005-07-27 2007-05-09 삼성전자주식회사 영상재생장치와 그 제어방법 및 ｐｖｒ
US7941464B2 (en) * 2005-09-19 2011-05-10 Polytechnic Institute Of New York University Reassembling fragmented files or documents in a file order-independent manner
JP2007174245A (ja) * 2005-12-21 2007-07-05 Daikin Ind Ltd 録画再生システム及び録画再生方法
US20070204238A1 (en) * 2006-02-27 2007-08-30 Microsoft Corporation Smart Video Presentation
US20070206024A1 (en) * 2006-03-03 2007-09-06 Ravishankar Rao System and method for smooth pointing of objects during a presentation
WO2007110813A1 (en) 2006-03-29 2007-10-04 Koninklijke Philips Electronics N.V. Method and apparatus for navigating through a video signal
JP5089916B2 (ja) 2006-05-09 2012-12-05 シャープ株式会社 制御装置及び制御方法
JP4735413B2 (ja) 2006-05-23 2011-07-27 ソニー株式会社 コンテンツ再生装置およびコンテンツ再生方法
JP5239858B2 (ja) * 2006-06-22 2013-07-17 ソニー株式会社 再生装置および方法、並びにプログラム
US8270819B2 (en) 2006-10-31 2012-09-18 Tivo Inc. Performing trick play functions in a digital video recorder with efficient use of resources
JP2008134966A (ja) * 2006-11-29 2008-06-12 Sony Corp データ管理サーバ、データ管理システム、データ管理方法およびプログラム
US20080155627A1 (en) 2006-12-04 2008-06-26 O'connor Daniel Systems and methods of searching for and presenting video and audio
KR101428730B1 (ko) 2007-01-04 2014-08-11 삼성전자주식회사 인터넷 검색방법 및 이를 적용한 영상수신장치
US9253222B2 (en) 2007-02-22 2016-02-02 Match.Com. L.L.C. Synchronous delivery of media content in a collaborative environment
JP5147278B2 (ja) 2007-04-09 2013-02-20 株式会社日立製作所 映像配信装置およびキーフレーム配信方法
JP2009130876A (ja) 2007-11-28 2009-06-11 Hitachi Ltd 端末連携継続視聴システム、端末、サーバ、方法
US8898686B2 (en) 2007-09-27 2014-11-25 Verizon Patent And Licensing Inc. Video on demand sneak peek and “snippet” billing
KR101434498B1 (ko) * 2007-10-29 2014-09-29 삼성전자주식회사 휴대 단말기 및 그의 동영상 관리 방법
US8875212B2 (en) * 2008-04-15 2014-10-28 Shlomo Selim Rakib Systems and methods for remote control of interactive video
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
JP2009159188A (ja) * 2007-12-26 2009-07-16 Hitachi Ltd コンテンツ表示用サーバ
WO2009097492A1 (en) 2008-01-30 2009-08-06 Azuki Systems, Inc. Media navigation system
JP2009182803A (ja) 2008-01-31 2009-08-13 Toshiba Corp 情報再生装置および再生速度制御方法
KR101454025B1 (ko) 2008-03-31 2014-11-03 엘지전자 주식회사 영상표시기기에서 녹화정보를 이용한 영상 재생 장치 및 방법
CN101599241A (zh) * 2008-06-03 2009-12-09 株式会社东芝 信息处理设备
CN102132575B (zh) 2008-08-29 2013-10-02 索尼电脑娱乐公司 信息处理系统及信息处理装置
US9183881B2 (en) * 2009-02-02 2015-11-10 Porto Technology, Llc System and method for semantic trick play
US8307390B2 (en) * 2009-02-26 2012-11-06 Comcast Cable Communications, Llc Re-addressable alternate content
US20110066942A1 (en) * 2009-09-14 2011-03-17 Barton James M Multifunction Multimedia Device
US9131278B2 (en) * 2009-11-23 2015-09-08 At&T Intellectual Property I, Lp System and method for layered delivery of media content quality
US9189137B2 (en) * 2010-03-08 2015-11-17 Magisto Ltd. Method and system for browsing, searching and sharing of personal video by a non-parametric approach
US8634873B2 (en) * 2010-03-17 2014-01-21 Microsoft Corporation Mobile communication device having multiple, interchangeable second devices
MX2012010634A (es) 2010-03-31 2012-11-29 Thomson Licensing Reproduccion trucada de datos de video.
WO2012036658A1 (en) 2010-09-17 2012-03-22 Thomson Licensing Method for semantics based trick mode play in video system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005286798A (ja) * 2004-03-30 2005-10-13 National Institute Of Information & Communication Technology 画像コンテンツ配信システム
US20080209075A1 (en) * 2007-02-22 2008-08-28 Yahoo! Inc. Synchronous delivery of media content and real-time communication for online dating
JP2009124298A (ja) * 2007-11-13 2009-06-04 Mitsubishi Electric Corp 符号化映像再生装置及び符号化映像再生方法
US20090198607A1 (en) * 2008-02-01 2009-08-06 Google Inc. Online map advertising

Also Published As

Publication number Publication date
MY160803A (en) 2017-03-31
MX2012010634A (es) 2012-11-29
US9866922B2 (en) 2018-01-09
CA2795296C (en) 2018-10-02
KR20130038824A (ko) 2013-04-18
JP2013524577A (ja) 2013-06-17
CN102823268B (zh) 2018-05-22
KR101692097B1 (ko) 2017-01-02
US20220400318A1 (en) 2022-12-15
RU2543936C2 (ru) 2015-03-10
JP5792276B2 (ja) 2015-10-07
US20180007445A1 (en) 2018-01-04
US20130004145A1 (en) 2013-01-03
EP2553918A4 (en) 2013-12-04
WO2011120195A1 (en) 2011-10-06
US11418853B2 (en) 2022-08-16
RU2012146315A (ru) 2014-05-10
CA2795296A1 (en) 2011-10-06
EP2553918A1 (en) 2013-02-06

Similar Documents

Publication Publication Date Title
CN102823268A (zh) 视频数据的技巧回放
RU2607236C2 (ru) Задание последовательности контента
US8437409B2 (en) System and method for capturing, editing, searching, and delivering multi-media content
US20110123972A1 (en) System for automatic production of lectures and presentations for live or on-demand publishing and sharing
CN105025094B (zh) 多屏互动方法及系统
CN101236764B (zh) 重放控制设备、方法和程序
TW201327202A (zh) 使用共享及個人裝置合作提供個人化使用者功能
JP2005277847A (ja) 画像再生システム、画像送信装置、画像受信装置、画像再生方法、画像再生プログラム、記録媒体
CN101779458A (zh) 视频配送装置以及视频配送程序
JP5272835B2 (ja) 画像供給装置、画像供給方法、及び画像供給用プログラム
JP6085635B2 (ja) ビデオデータのトリック再生
KR101328270B1 (ko) 스마트 ｔｖ의 비디오 어노테이션 및 증강 방법 및 그 시스템
JP4373229B2 (ja) 映像閲覧方法及び映像閲覧システム
JP2007243605A (ja) 通信装置、通信方法及びプログラム
JP2008090526A (ja) 会議情報保存装置、システム、会議情報表示装置及びプログラム
JP6323761B2 (ja) 遠隔制御システム及び電子機器
CN116366890B (zh) 提供数据监看服务的方法及一体机设备
JP2002223264A (ja) 協調処理方式
KR20110130803A (ko) 다양한 유형의 디지털 콘텐츠 인식 및 플레이가 가능한 디지털 콘텐츠 플레이어 시스템 및 그 방법
KR20150137146A (ko) 영상제공장치의 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190107

Address after: Paris France

Patentee after: Interactive Digital Madison Patent Holdings

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190107

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING