CN107087224B - 内容同步设备和方法 - Google Patents

内容同步设备和方法 Download PDF

Info

Publication number
CN107087224B
CN107087224B CN201710265403.2A CN201710265403A CN107087224B CN 107087224 B CN107087224 B CN 107087224B CN 201710265403 A CN201710265403 A CN 201710265403A CN 107087224 B CN107087224 B CN 107087224B
Authority
CN
China
Prior art keywords
content
information
user
synchronization
played
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710265403.2A
Other languages
English (en)
Other versions
CN107087224A (zh
Inventor
曹贞美
郑韶永
金正寿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107087224A publication Critical patent/CN107087224A/zh
Application granted granted Critical
Publication of CN107087224B publication Critical patent/CN107087224B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H04L67/306—User profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供一种内容同步设备和方法。所述内容同步设备包括：通信单元，构造为与装置进行通信，其中，所述内容同步设备能够与所述装置同步内容；控制单元，构造为响应于接收到的用于共享由所述装置正在播放的当前内容的同步命令，通过通信单元获取当前内容以及与当前内容对应的状态信息来共享当前内容，使用当前内容和状态信息来与所述装置同步当前内容，并基于与所述装置同步当前内容的结果来配置显示屏幕；输出单元，构造为显示配置的显示屏幕。

Description

内容同步设备和方法
本申请是申请日为2011年11月30日，申请号为“201110412415.6”，标题为“内容同步设备和方法”的发明专利申请的分案申请。
技术领域
以下描述涉及一种内容同步设备和方法。
背景技术
已经对通过无线连接来连接计算机、传感器和各种其他电子装置的方法进行了研究，以便为用户提供多种有用的服务。响应于电子装置变得普遍，在电子装置之间共享内容的需要已经增长。
已经在各种电子产品中采用了扩增实境(AR)，AR是将虚拟对象放置在物理真实世界环境的图像上的技术。AR可使用计算机图形修改真实的视图，并且不仅可提供物理真实世界环境的视图，而且可提供与物理真实世界环境对应的信息。通过AR将虚拟图像放置在真实世界环境的视图上，真实世界和虚拟世界之间的区别会变得模糊。AR提供虚拟对象和真实世界环境的混合，并且可允许用户观看真实世界环境，从而提供增强的真实感和多种附加信息。例如，通过使用智能电话相机扫描周围区域，显示与该区域中的商店对应的各种信息(诸如商店的位置和电话号码)的立体图像可以被显示。
发明内容
以下描述涉及一种内容同步设备和方法，所述内容同步设备和方法提供与在多个装置之间共享的内容相关的个性化扩增实境(AR)，其中，所述多个装置能够在它们之间共享内容，并且能够获取和操作个性化信息。
在一个总的方面，提供了一种内容同步设备。所述内容同步设备包括：通信单元，构造为与装置进行通信，其中，所述内容同步设备能够与所述装置同步内容；控制单元，构造为响应于接收到用于共享由所述装置正在播放的当前内容的同步命令，通过通信单元获取当前内容以及与当前内容对应的状态信息来共享当前内容，使用当前内容和状态信息来与所述装置同步当前内容，并基于与所述装置同步当前内容的结果来配置显示屏幕；输出单元，构造为显示配置的显示屏幕。
控制单元可从所述装置获取与当前内容对应的扩增信息，并且可响应于从获取的扩增信息中选择的能够与所述内容同步设备的用户进行交互的扩增信息，执行与选择的扩增信息对应的预定操作。
所述内容同步设备还可包括：存储单元，构造为存储与所述内容同步设备的用户对应的用户配置信息、与所述内容同步设备的用户对应的用户偏好信息或者它们的组合。控制单元可使用用户配置信息、用户偏好信息或者它们的组合来从获取的扩增信息中选择扩增信息，并且可配置包括当前内容和选择的扩增信息的显示屏幕。
控制单元可从所述装置获取与当前内容对应的内容元数据，并可使用内容元数据从除了所述装置以外的另一装置获取当前内容。内容元数据可用于搜索当前内容。
内容元数据可包括与当前内容对应的web地址、与能够接收当前内容的广播频道对应的广播频道信息或者它们的组合。
所述内容同步设备还可包括构造为捕捉图像的图像获取单元。在响应于图像获取单元捕捉的图像接收到同步命令的情况下，控制单元可通过分析捕捉的图像来获取与当前内容对应的内容元数据。
通信单元可与扩增实境(AR)支持服务器进行通信，其中，AR支持服务器提供与多个内容项对应的扩增信息，控制单元可使用获取的内容元数据从AR支持服务器获取与当前内容对应的附加的扩增信息，并通过渲染附加的扩增信息以及当前内容来配置显示屏幕。
获取的扩增信息可包括用于控制当前内容的重放的重放控制信息，控制单元可响应于接收到用于选择重放控制信息的用户输入信号，来控制当前内容的重放。
控制单元可与执行当前内容的同步并行地执行能够与所述内容同步设备的用户进行交互的应用。
能够与所述内容同步设备的用户进行交互的应用可包括互联网搜索应用、社交网络应用或者它们的组合。
控制单元可响应于接收到用于将由所述内容同步设备正在播放的内容与所述装置共享的同步命令，来将由所述内容同步设备正在播放的内容以及与由所述内容同步设备正在播放的内容对应的状态信息和扩增信息发送到所述装置。
在同步当前内容之前，控制单元可检测所述内容同步设备的同步范围内的装置，并可控制通信单元访问所述装置。
状态信息可包括关于内容的信息。
扩增信息可包括能够与内容一起提供的信息。
在另一方面，提供了一种内容同步设备。所述内容同步设备包括：通信单元，构造为与装置进行通信，其中，所述内容同步设备能够与所述装置同步内容；控制单元，构造为响应于接收到用于将由所述内容同步设备正在播放的当前内容与所述装置共享的同步命令，控制通信单元将当前内容和与当前内容对应的状态信息发送到所述装置，并将与当前内容对应的扩增信息发送到所述装置。
控制单元可检测在所述内容同步设备的同步范围内的预先注册的可同步装置，并控制通信单元访问检测到的装置。
所述内容同步设备可以是移动终端，所述装置可以是TV。
在另一方面，提供了一种内容同步方法。所述内容同步方法包括：接收用于共享由装置正在播放的当前内容的同步命令；通过获取当前内容以及与当前内容对应的状态信息来共享当前内容；使用当前内容和状态信息与所述装置同步当前内容。
所述内容同步方法还可包括：从所述装置获取与当前内容对应的内容元数据，并使用内容元数据从除了所述装置以外的装置直接获取当前内容。
直接获取当前内容的步骤可包括：响应于当前内容是实时广播内容，通过使用内容元数据从广播网络接收实时广播内容来获取当前内容。
所述内容同步方法还可包括：从所述装置获取与当前内容对应的扩增信息。同步当前内容的步骤可包括：使用当前内容、状态信息和扩增信息来与所述装置同步当前内容。
内容同步还可包括：基于用户配置信息、用户偏好信息或者它们的组合选择部分扩增信息，并将选择的扩增信息与当前内容一起提供。
扩增信息可包括用于控制当前内容的重放的重放控制信息，所述内容同步方法还可包括：响应于接收到用于选择重放控制信息的用户输入信号，来控制当前内容的重放。
所述内容同步方法还可包括：与同步当前内容并行地执行能够进行交互的应用。
所述内容同步方法还可包括：响应于接收到用于将当前内容与另一装置共享的同步命令，将当前内容以及与当前内容对应的状态信息和扩增信息发送到所述另一装置。
在另一方面，提供了一种内容同步设备。所述内容同步设备包括：同步单元，构造为响应于接收到用于共享由装置正在播放的当前内容的同步命令，通过识别当前内容以及与当前内容对应的状态信息来获取当前内容和状态信息，并使用当前内容和状态信息来与所述装置同步当前内容；输出单元，构造为输出同步的内容。
所述内容同步设备还可包括：图像获取单元，构造为捕捉与当前内容对应的内容执行屏幕的图像。同步单元可通过对内容执行屏幕执行对象提取、模式识别、字符识别或者它们的组合来识别当前内容和状态信息。
所述内容同步设备还可包括：音频输入单元，构造为接收与当前内容对应的音频信号。同步单元可从接收的音频信号提取特征信息，并识别与特征信息对应的音频数据。
所述内容同步设备还可包括：存储单元，构造为存储至少一个内容项。同步单元可通过搜索存储单元获取识别的当前内容。
所述内容同步设备还可包括：通信单元，构造为与内容提供服务器进行通信，所述内容提供服务器使用内容元数据搜索内容并提供内容。同步单元可通过通信单元从内容提供服务器获取当前内容。
在另一方面，提供了一种内容同步设备。所述内容同步设备包括：通信单元，构造为与提供web服务的web服务器进行通信；图像获取单元，构造为响应于接收到用于共享由装置正在执行的web应用的同步命令，捕捉与web应用对应的web应用执行屏幕的图像；同步单元，构造为从捕捉的图像识别web应用，获取用于接收web服务的用户信息，使用该用户信息访问web服务器，通过通信单元从web服务器获取与web应用对应的web应用状态信息，并使用web应用和web应用状态信息来再现所述装置中的web应用的执行状态。
用户信息可包括用于接收web服务的用户登录信息。
所述内容同步设备还可包括构造为存储用户信息的存储单元，其中，用户信息用于使用至少一个web应用来接收web服务。同步单元可从存储单元获取用户信息。
通信单元可与所述装置进行通信，同步单元可从所述装置获取用户信息。
在另一方面，提供了一种内容同步设备。所述内容同步设备包括：检测单元，构造为响应于位于同步范围内的另一装置来检测所述另一装置；控制单元，构造为响应于检测到位于同步范围内的所述另一装置，共享由所述另一装置正在播放的当前内容、与当前内容对应的状态信息以及与当前内容对应的扩增信息；接收单元，构造为从所述另一装置接收当前内容、状态信息和扩增信息。
从以下详细描述、附图和权利要求，其他特征和方面会是清楚的。
附图说明
图1是示出用于提供扩增实境(AR)交互的系统的示例的视图，所述系统可在装置之间共享信息，可提供在装置之间同步的交互，并可提供个性化扩增信息。
图2是示出图1中所示的第一装置与第二装置同步内容的初始操作的示例的流程图。
图3是示出图1中所示的第二装置共享由图1中所示的第一装置正在播放的内容的操作的示例的示图。
图4是示出图1中所示的第一装置共享由图1中所示的第二装置正在播放的内容的操作的示例的示图。
图5是示出用于解释在其他多个装置之间共享由一个装置正在播放的内容的显示屏幕的示例的示图。
图6是示出图1中所示的第一装置的结构的示例的示图。
图7是示出图6中所示的控制单元的结构的示例的示图。
图8是示出与另一装置同步由一个装置正在执行的web应用的方法的示例的流程图。
贯穿附图和详细描述，除非另外描述，否则相同的附图标号将被理解为表示相同的元件、特征和结构。为了清晰、说明和方便，可以夸大这些元件的相对大小和描述。
具体实施方式
提供以下描述以帮助读者获得对这里描述的方法、设备和/或系统的全面理解。因此，将对本领域普通技术人员提出这里描述的方法、设备和/或系统的各种改变、修改及等同物。此外，为了更加清晰和简明，可省略对已知功能和结构的描述。
图1示出用于提供扩增实境(AR)交互的系统的示例，所述系统可在装置之间共享信息，可提供在装置之间同步的交互，并可提供扩增信息。
参照图1，用于提供AR交互的系统100可允许多个用户彼此共享内容，可在多个用户之间同步共享的内容，并可提供在能够获取和操作扩增信息的多个装置之间同步的AR交互。系统100可包括：第一装置110、第二装置120、AR支持服务器130、广播提供设备140、内容提供服务器150和web服务器160。
第一装置110和第二装置120可彼此同步和共享内容。例如，第一装置110和第二装置120可彼此发送/接收内容、状态信息和扩增信息，并且可彼此同步和共享内容。
例如，内容可包括由提供内容的装置执行的应用、在应用中播放或执行的各种类型的数据(诸如照片、视频数据、音频数据、文本等)、多媒体数据以及与内容相关的内容元数据。应用的示例包括用于播放内容的媒体播放器以及用于通过与web服务器160的通信来提供内容并用于提供各种web服务的web应用。
内容元数据可以是与内容相关的信息，并且可用于搜索内容。例如，在内容是广播内容的情况下，内容元数据可包括与内容相关的频道信息、标题信息、广播时间信息、情节数量信息和演员表信息。
状态信息可对应于内容。例如，状态信息可包括音量和播放时间信息。状态信息可包括用于在由一个装置播放内容时再现另一装置的状态信息的信息，从而可在这两个装置之间共享所述内容。状态信息还可包括例如与提供内容的装置对应的屏幕亮度信息。例如，在应用是视频播放器程序的情况下，内容可以是由视频播放器程序播放的视频文件，并且状态信息可包括音量信息和播放时间信息。
扩增信息可包括：1)可被添加到内容并与内容一起被提供的信息；2)用于控制内容的重放的重放控制信息；3)可被与内容关联地执行的应用。例如，在内容是戏剧或电影的情况下，扩增信息可包括：与拍摄戏剧或电影的地点对应的信息以及与戏剧或电影对应的原声带(OST)信息、剧情简介和演员表信息。在另一个示例中，在内容体育比赛转播的情况下，扩增信息可包括体育比赛统计信息。在另一个示例中，在内容是音乐节目的情况下，扩增信息可包括音乐节目的演唱者信息以及音乐节目的简介。
扩增信息可被配置为交互式，从而可响应于用户选择的扩增信息来执行预定操作或提供与扩增信息对应的信息。例如，响应于接收的用于选择扩增信息的用户输入信号，可执行购买或支付服务。
第一装置110可将扩增信息连同内容一起提供给第一装置110的用户。类似地，第二装置120可将扩增信息连同内容一起提供给第二装置120的用户。
在非限制性的示例中，图1示出两个装置，但是能够在彼此之间共享内容并提供扩增信息的装置的数量不受限制。在另一个示例中，三个或更多个装置可在彼此之间共享内容。
第一装置110和第二装置120可以是相同类型的装置或不同类型的装置。例如，第一装置110和第二装置120都可以是移动终端。在另一个示例中，第一装置110可以是移动终端，而第二装置120可以是配备有大显示器的电子装置(诸如TV或台式计算机)。
第一装置110和第二装置120可构造为使用用于同步内容的各种通信协议，诸如蓝牙、Zigbee、无线局域网(WLAN)、家庭射频(RF)、超宽带(UWB)、无线1394等。第一装置110和第二装置120可在不进行彼此传输信息的情况下在彼此之间同步内容。例如，第一装置110可获取第二装置120的内容执行屏幕，可分析获取的内容执行屏幕，可基于分析结果识别由第二装置执行的内容和与该内容对应的状态信息，并可从数据库(未示出)或内容提供服务器150获取该内容。
AR支持服务器130可通过通信网络连接到第一装置110和第二装置120，并可将与内容对应的扩增信息提供给第一装置110和第二装置120。例如，AR支持服务器130可连接到第一装置110或第二装置120，并可将与内容对应的扩增信息提供给第一装置110和第二装置120中的AR支持服务器130连接到的那个装置。
广播提供设备140通过广播网络(诸如但不限于卫星、地面波、互联网或有线电视网络)发送包括广播节目(诸如音频/视频(AV)流)和与广播节目对应的信息的广播信号。与广播节目对应的信息的示例包括与广播节目对应的电子节目指南(EPG)信息和节目描述信息。广播提供设备140可通过广播网络连接到第一装置110和第二装置120，并可通过广播网络将广播内容提供给第一装置110和第二装置120。第一装置110和第二装置120可接收和播放广播内容。
内容提供服务器150可以是用于存储多个内容项并搜索和提供所述多个内容项中的被请求的任意一个的服务器。内容提供服务器150可通过通信网络连接到第一装置110或第二装置120或者它们的组合。内容提供服务器150可构造为将请求的内容提供给第一装置110或第二装置120或者它们的组合(例如，第二装置120)。
Web服务器160可以是用于提供web服务的服务器。Web服务器160可通过通信网络连接到第一装置110或第二装置120或者它们的组合。Web服务器160可构造为响应于第一装置110或第二装置120或者它们的组合(例如，第二装置120)使用用户信息登录到web服务器160，将与另一装置(例如，第一装置110)使用的web应用的执行状态对应的web应用状态信息提供给第一装置110，以使用web服务，其中，所述另一装置已使用与第二装置120相同的用户信息登录到web服务器160。用户信息可包括用于接收web服务的用户标识符(ID)、密码和其他授权信息。Web应用状态信息可包括第二装置120使用web服务的状态、第二装置120访问的网页的历史以及与已通过web服务与第二装置120通信的用户对应的其他用户信息。
作为示例，假设第一装置110是移动终端，第二装置120是数字TV。
在另一示例中，第一装置110可以是移动终端，诸如配备有显示器的遥控器、平板PC、智能电话、移动电话等。第一装置110可构造为包括能够实现各种形式的输入和输出(诸如语音、文本、图像以及运动触摸输入和输出)从而提供交互功能的接口。
第一装置110可将与第二装置120的内容同步提供给第一装置110的用户。第一装置110可将由第二装置120正在播放的内容和与该内容相关的扩增信息提供给第一装置110的用户。可将与内容相关的各种扩增信息提供给第一装置110的用户。在考虑显示大量扩增信息会妨碍观看来自第二装置120的内容，并且可能存在正好对不同的扩增信息感兴趣的第二装置120的多个用户的情况下，第一装置110可构造为将与内容对应的扩增信息连同内容一起提供。第一装置110可从第二装置120提供的所有扩增信息中滤出与对应于其用户的个人信息(诸如用户配置信息或用户偏好信息)相关的扩增信息，并可提供滤出的扩增信息作为扩增信息。因此，第一装置110的用户可被提供有内容，还可被提供有与该内容对应的扩增信息，并且可选择性地搜索和使用与该内容对应的任何期望的扩增信息。
例如，第一装置110可在不妨碍观看来自第二装置120(例如，数字TV)的TV内容的情况下，将TV内容和与该TV内容对应的扩增信息提供给第一装置110的用户。与TV内容对应的扩增信息可包括能够与第一装置110的用户进行交互并由第一装置110的用户操作的交互信息。响应于第一装置110的用户从与TV内容对应的扩增信息中选择交互信息，可执行与交互信息对应的操作，从而第一装置110的用户可操作TV内容。
第一装置110可提供来自第二装置120的内容以及与内容对应的状态信息和扩增信息，从而第一装置110和第二装置120可彼此同步和共享内容。因此，第一装置110的用户可允许由第一装置110正在播放的内容由配备有大显示器的第二装置120共享和显示，从而第二装置120可将与第一装置110同步的与由第一装置110正在播放的内容相同的内容以及与由第一装置110正在播放的内容对应的扩增信息提供给其用户。换句话说，第一装置110可在使用来自第一装置110的内容的同时与任何期望的装置(例如，第二装置120)同步，从而可提供可与其他用户共享的同步的AR交互。
例如，在第二装置120上向其他用户播放戏剧的同时，第一装置110的用户可搜索并找到与该戏剧对应的任何期望的扩增信息(诸如戏剧中存在的特定产品的一般描述和价格)，并可与所述其他用户共享找到的期望的扩增信息。
扩增信息可包括内容重放控制信息。因此，第一装置110可响应于选择的内容重放控制信息来控制与第二装置120同步的内容的重放。例如，第一装置110的用户可暂停在第一装置110和第二装置120之间共享的当前TV内容，可通过频道转换来搜索其他频道，或者可操作与当前TV内容对应的节目指南信息，而不妨碍观看来自第二装置120的当前TV内容。
第一装置110可构造为在不妨碍观看来自第二装置120的内容的情况下，与第二装置120同步和共享内容，同时执行可由例如TV提供的应用，诸如通过社交网络服务(SNS)(诸如微博(Twitter)或即时通讯服务)与观看与正在第二装置120上显示的广播节目相同的广播节目的联系人进行通信。
图2示出第一装置110与第二装置120同步内容的初始操作的示例。
第一装置110可与其同步内容的装置的类型和说明可预先在第一装置110中注册。多个装置可被注册在第一装置110中作为第一装置110可与其同步内容的可同步装置。用于将所述多个装置与第一装置110同步的应用可被预先设置在第一装置110中，并可根据所述多个装置的类型被分类。
参照图2，第一装置110可将在第一装置110中注册的装置检测为在第一装置110的同步范围内的可同步装置。例如，第一装置110可检测第二装置120(210)。第一装置110的用户可注册用于与第二装置120进行通信的IP地址和标识信息，并将所述IP地址和标识信息存储在第一装置110中，从而第一装置110可与第二装置120同步内容。
第一装置110可与可能处于其同步范围中的第二装置120进行通信连接，以与第二装置120进行通信，从而可在第一装置110和第二装置120之间同步信号(220)。例如，第一装置110可控制第二装置120激活用于将第二装置120与第一装置110同步的操作模式。
作为非限制性示例，图2示出执行用于与第二装置120同步的初始操作的第一装置110。换句话说，第二装置120也可将注册在第二装置120中的装置检测为在其同步范围内的可同步装置。例如，注册的装置可以是第一装置110，并且可与第二装置120进行通信连接。
响应于第一装置110不需要被提供有第二装置120的内容和与第二装置120的内容对应的状态信息来与第二装置120同步内容，例如，在第一装置110可容易地识别由第二装置120正在播放的内容和与所述内容对应的状态信息的情况下，可不执行图2中所示的操作。例如，响应于第一装置110和第二装置120需要进行通信以彼此同步内容，可选择性地执行图2中所示的操作。
图3示出第二装置120共享由第一装置110正在播放的内容的操作的示例。
参照图3，第一装置110接收用于将由第一装置110正在播放的内容与另一装置(诸如第二装置120)共享的同步命令(310)。
第一装置110将正在播放的内容和与所述内容对应的状态信息发送到第二装置120(320)。第一装置110可另外将与所述内容相关的扩增信息发送到第二装置120。
例如，在第一装置110是移动终端并且第二装置120是数字TV的情况下，第二装置120可被提供有用于在第一装置110和第二装置120之间同步内容的同步信息，诸如与第一装置110的内容对应的状态信息、与所述内容对应的扩增信息、用于播放所述内容的应用等。第二装置120可以以适合于TV显示器的分辨率来显示由第一装置110提供的同步信息。
图4示出第一装置110共享由第二装置120正在播放的内容的操作的示例。
参照图4，第一装置110接收共享由第二装置120正在播放的内容的同步命令(410)。
第一装置110从第二装置120获取内容以及与所述内容对应的状态信息和扩增信息，并与第二装置120共享获取的内容(420)。第一装置110还可与第二装置120共享获取的扩增信息。
第一装置110可通过基于获取的内容、获取的状态信息和获取的扩增信息将其自身与第二装置120同步，来配置包括获取的内容和获取的扩增信息显示屏幕(430)。配置的显示屏幕可显示在第一装置110的显示器(未示出)上。
响应于从配置的显示屏幕选择的可与第一装置110的用户进行交互的扩增信息(440)，第一装置110可执行与选择的扩增信息对应的预定操作(450)。
图5示出用于解释在其他多个装置之间共享由一个装置正在播放的内容的显示屏幕的示例。
参照图5，装置520是显示广播内容的TV，装置512、514和516可以是移动终端。
可由TV 520将用于与TV 520同步的同步信息(诸如广播内容、与所述广播内容对应的扩增信息和状态信息)提供给移动终端512，移动终端512可以以适当的分辨率在其上显示同步信息。移动终端512可基于例如用户配置信息或用户偏好信息为其用户提供在其他扩增信息中的与广播内容对应的扩增信息。在移动终端512、514和516的用户是家庭成员(诸如四十多岁的父亲和他十几岁的女儿们)的情况下，他们可能对扩增信息具有不同的偏好。在这种情况下，可基于移动终端512、514和516的每个用户对扩增信息的个人偏好，来为他们提供扩增信息。
例如，移动终端512可为其用户提供与拍摄广播内容的地点对应的信息和与广播内容对应的OST信息，作为扩增信息。例如，拍摄地点信息和OST信息可由移动终端512的用户选择，并且可以是能够与移动终端512的用户进行交互从而可在被移动终端512的用户选择时提供预定信息或预定操作的指引的交互信息。在该实例中，移动终端512的用户可通过选择拍摄地点信息或OST信息而被提供有与广播内容对应的扩增信息。
移动终端514的用户可暂停广播内容，可通过频道转换来搜索其他频道，或者可操作与广播节目对应的节目指南信息，而基本上不妨碍观看来自TV 520的广播节目。
例如，移动终端516可为其用户提供与购买服务或支付服务相关的交互信息，作为扩增信息。在该示例中，移动终端516的用户可通过扩增信息来使用购买服务或支付服务。
可与TV 520同步的移动终端512、514和516的用户可执行各种操作，诸如内容控制、装置控制和应用控制，而基本上不妨碍观看来自TV 520的内容。移动终端512、514和516的用户可与TV 520同步他们找到的任何内容和/或任何扩增信息，从而可与TV 520的用户共享所述内容和/或所述扩增信息。
图6示出第一装置110的结构的示例。
参照图6，第一装置110包括：控制单元610、用户接口单元620、图像获取单元630、广播接收单元640、存储单元650、通信单元660、输出单元670和麦克风680。
控制单元610可控制第一装置110的整体操作，并可包括用于对音频流和视频流进行解码的解码器(未示出)。控制单元610可将第一装置110与另一装置(例如，第二装置120)同步以共享由第二装置120正在播放的内容，并且可执行用于将由第一装置110正在播放的内容与第二装置120共享的操作。
用户接口单元620可接收用户输入信号并可将用户输入信号发送到控制单元610。用户接口单元620可包括各种类型的用户输入单元，诸如键盘、触摸板、穿梭操控旋钮(jogshuttle)等。用户接口单元620还可包括能够感测由第一装置110的用户做出的触摸手势的触摸板。触摸板可与输出单元670的显示器672集成，从而处理用户输入的结果可容易地显示在显示器672上。用户接口单元620可采用触觉技术，从而响应于接收的用户输入而提供触觉效果或动作感觉。例如，响应于从第一装置110的用户接收的用户输入信号，用户接口单元620可将触觉反馈给予第一装置110的用户，从而第一装置110得用户可感受到发生了什么。
图像获取单元630(例如，相机)可包括镜头、成像传感器(诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器)、模数(A/D)转换器等。图像获取单元630可通过捕捉对象的图像来获取图像信号，可将获取的图像信号转换为数字信号，并可将数字信号发送到控制单元610。控制单元610可对由图像获取单元630提供的数字信号执行图像处理(诸如噪声去除和颜色处理)。控制单元610可在显示器672上显示由图像获取单元630连续捕捉的对象的多个图像，以向第一装置110的用户通知由图像获取单元630正在捕捉的对象的当前状态。
广播接收单元640可通过广播频道(诸如地面广播频道、卫星广播频道或双向频道(诸如互联网))接收广播节目。在广播接收单元640通过广播频道接收广播节目的情况下，广播接收单元640可包括：1)调谐器(未示出)，用于通过调谐输出传输流，并用于对输入广播信号进行解调；2)解复用器(未示出)，将由调谐器输出的传输流解复用为视频流和音频流。
存储单元650可存储与第一装置110相关的操作系统(OS)、应用程序和数据。存储单元650可存储用户配置信息(包括第一装置110的用户的年龄和性别)、用户偏好信息或者它们的组合。用户配置信息和用户偏好信息可以被预先设置并存储在存储单元650中。响应于接收到的用户输入信号，可将新的信息添加到用户配置信息和用户偏好信息，或者可修改或删除用户配置信息和用户偏好信息。存储单元650还可存储各种内容项(诸如视频文件、音乐文件、文本等)以及与各种内容项对应的扩增信息。
通信单元660可与通过网络连接到第一装置110的外部装置进行通信，或者与各种服务器(诸如AR支持服务器130、内容提供服务器150和web服务器160)进行通信。通信单元660可包括：第一通信模块，与通过互联网连接到第一装置110的服务器进行通信；第二通信模块，与特定装置进行通信，其中，第一装置110可与所述特定装置同步内容。例如，通信单元660可构造为支持多种通信协议，诸如蓝牙、Zigbee、WLAN、家庭RF、UWB、无线1394或者它们的组合。
输出单元670可包括显示器672和扬声器674。
麦克风680可从第一装置110的外部接收音频信号，并可将接收的音频信号发送到控制单元610。
控制单元610可将在第一装置110中预先注册的任何装置检测为在第一装置110的同步范围内的可同步装置，并可控制通信单元660将第一装置110连接到检测到的可同步装置。
响应于接收到用于共享由第二装置120正在播放的内容的同步命令，控制单元610可从第二装置120获取内容以及与所述内容对应的状态信息和扩增信息，可使用获取的内容、获取的状态信息以及获取的扩增信息将第一装置110与第二装置120同步，并且可配置包括获取的内容和获取的扩增信息的显示屏幕。
响应于通过用户输入信号从获取的扩增信息中选择的能够与第一装置110的用户进行交互的扩增信息，控制单元610可执行与选择的扩增信息对应的预定操作。
控制单元610可基于用户配置信息、用户偏好信息或者它们的组合从所有获取的扩增信息中选择或滤出部分扩增信息，并可将选择的或滤出的扩增信息连同获取的内容一起提供给显示器672。
扩增信息可包括用于控制内容的重放的重放控制信息。控制单元610可响应于接收到的选择重放控制信息的用户输入信号来控制同步的内容的重放。控制单元610可与执行内容的同步并行地执行可与第一装置110的用户交互的应用。可与第一装置110的用户进行交互的应用可包括互联网搜索应用、社交网络应用或者它们的组合。
为了共享由第二装置120正在播放的内容，控制单元610可构造为从除了第二装置120以外的装置获取由第二装置120正在播放的内容。例如，为了共享由第二装置120正在播放的实时广播内容，控制单元610可从另一装置获取与所述实时广播内容对应的内容元数据，并可使用内容元数据来控制广播接收单元640从广播网络获取所述实时广播内容。
可通过分析用于共享由第二装置120正在播放的内容的同步命令以及在接收到同步命令时第二装置120的操作环境，来获取内容元数据。内容元数据可包括与由第二装置120正在播放的内容对应的web地址、与可接收由第二装置120正在播放的内容的广播频道对应的广播频道信息或者它们的组合。内容元数据可以是由第二装置120正在播放的内容的一部分(例如，与视频文件的一部分对应的视频帧或者与音乐文件的一部分对应的音频信号)，并且可以以能够适用于搜索由第二装置120正在播放的内容的各种类型来形成。
控制单元610可识别由第二装置120正在播放的内容以及与由第二装置120正在播放的内容对应的状态信息，可获取由第二装置120正在播放的内容，并可使用获取的内容和获取的状态信息将第一装置110与第二装置120同步，而不与第二装置120进行通信。
例如，在响应于由图像获取单元630正在捕捉的图像而接收到用于共享由第二装置120正在播放的内容的同步命令的情况下，控制单元610可通过分析捕捉的图像来获取与由第二装置120正在播放的内容对应的内容元数据。在另一示例中，控制单元610可将通过麦克风680在多于预定时间量内检测的音频信号用作内容元数据，可分析该音频信号，并可在存储单元650中搜索与该音频信号对应的音乐文件或视频文件。
响应于获取的内容元数据，控制单元610可使用内容元数据从AR支持服务器130获取附加的扩增信息，可通过渲染附加的扩增信息以及由第二装置120正在播放的内容来配置显示屏幕，并可在显示器672上显示配置的显示屏幕。
例如，响应于用于与第二装置120共享由第一装置110的控制单元610正在播放的内容的同步命令，控制单元610可控制通信单元660将由控制单元610正在播放的内容以及与由控制单元610正在播放的内容对应的状态信息和扩增信息发送到第二装置120。在该示例中，控制单元610可将显示器672上正在显示的扩增信息发送到与第一装置110相同类型的另一装置。
图7示出图6中所示的控制单元610的结构的示例。
参照图7，控制单元610可包括同步器710、扩增信息处理器720、重放控制器730和并行应用执行器740。
同步器710可与另一装置(例如，第二装置120)共享和同步内容。
响应于接收到用于共享由第二装置120正在播放的内容的同步命令，同步器710可将用于共享和同步内容的同步信息发送到第二装置120。
响应于接收到同步命令，同步器710可识别并获取由第二装置120正在播放的内容以及与由第二装置120正在播放的内容对应的状态信息，并可使用获取的状态信息在第一装置110和第二装置120之间同步获取的内容。输出单元670可输出在第一装置110和第二装置120之间同步的内容。
响应于图像获取单元630捕捉显示在第二装置120上的内容执行屏幕的图像，同步器710可通过对内容执行屏幕执行对象提取、对内容执行屏幕执行模式识别、对内容执行屏幕执行字符识别或者它们的组合，来识别由第二装置120正在播放的内容以及与由第二装置120正在播放的内容对应的状态信息。
响应于音频输出单元(诸如麦克风680)接收与由第二装置120正在播放的内容对应的音频信号，同步器710可从音频信号提取特征信息，并可识别与提取的特征信息对应的音频数据。
存储单元650可存储至少一个内容项。同步器710可在存储单元650中搜索任何识别的内容。
例如，存储单元650可存储内容，从而可使用由同步器710通过对象提取、模式识别或字符识别而产生的特征信息来搜索所述内容。在另一示例中，存储单元650可存储可使用从音频信号提取的特征信息来搜索的内容。从音频信号提取的特征信息可以是与音频对象的浓缩概要对应的声学指纹，并且可包括一个或多个可用于识别音频数据或音频文件的参数。
在通信单元660使用内容元数据搜索内容提供服务器150并与内容提供服务器150进行通信的情况下，同步器710通过通信单元660从内容提供服务器150获取内容。
以下将描述响应于接收的用于共享例如由第二装置120正在执行的web应用的同步命令由同步器710执行的操作。由第二装置120正在执行的web应用的用户可以与第一装置110的用户相同。
在该示例中，web应用可提供通过与通信单元660的通信从web服务器160接收的信息。web应用可包括即时通讯、微博(Twitter)、博客(blog)、web浏览器等。响应于接收的用于共享web应用的同步命令，图像获取单元630可从第二装置120获取web应用执行屏幕。
同步器710可通过对获取的web应用执行屏幕执行对象提取、对获取的web应用执行屏幕执行模式识别、对获取的web应用执行屏幕执行字符识别或者它们的组合，来识别web应用。例如，同步器710可获取用于接收web服务器160提供的web服务的用户信息。用户信息可包括用户登录信息，诸如用户ID、密码和其他授权信息。同步器710可使用用户信息访问web服务器160，可通过通信单元660从web服务器160获取与web应用对应的状态信息，并可使用识别的web应用和获取的状态信息再现与由第二装置120正在执行的web应用相同的执行状态。
在另一示例中，同步器710可从存储用户信息的存储单元650获取用户信息，所述用户信息用于使用至少一个web应用从web服务器160接收web服务。
在另一示例中，在通信单元660构造为与第二装置120进行通信并从第二装置120获取用户信息的情况下，同步器710可从第二装置120获取用户信息。同步器710可使用用户信息访问web服务器160，可通过通信单元660从web服务器160获取与web应用对应的状态信息，并可使用获取的状态信息再现第二装置120中的web应用的执行状态。
在web应用是提供一对一聊天服务的即时通讯程序的情况下，同步器710可从第二装置120上的内容执行屏幕识别即时通讯程序，并可执行即时通讯程序。即时通讯程序可以是可由与第二装置120进行通信的web服务器支持的程序，并且不能是与第二装置120中执行的即时通讯程序相同的程序。例如，即时通讯程序可以是用于由同步器710执行的优化的程序。同步器710可通过使用用户信息通过即时通讯程序来访问web服务器160，可从web服务器160获取与即时通讯程序对应的状态信息(例如，与加入与第二装置120的用户的一对一聊天会话的一方对应的信息)，并可进行一对一聊天会话。
响应于接收到用于共享由第二装置120正在播放的内容的同步命令，同步器710可通过从第二装置120获取由第二装置120正在播放的内容，从第二装置120获取与由第二装置120正在播放的内容对应的状态信息，并从第二装置120获取与由第二装置120正在播放的内容对应的扩增信息，来共享由第二装置120正在播放的内容，并可通过基于获取的内容、获取的状态信息和获取的扩增信息在第一装置110和第二装置120之间同步获取的内容，来配置包括获取的内容和获取的扩增信息的显示屏幕。响应于接收到用于与第二装置120共享由第一装置110的控制单元610正在播放的内容的同步命令，同步器710可控制通信单元660将内容、与所述内容对应的状态信息发送到第二装置120，并将与所述内容对应的扩增信息发送到第二装置120。
扩增信息处理器720可使用用户配置信息、用户偏好信息或者它们的组合，从获取的扩增信息中滤出部分扩增信息，并且将滤出的扩增信息提供给同步器710。因此，同步器710可通过渲染滤出的扩增信息以及由第一装置110正在播放的内容来重新配置显示屏幕。
重放控制器730可构造为控制在第一装置110和第二装置120之间同步的内容的重放，而不修改第二装置120的状态。例如，在第二装置120是TV的情况下，重放控制器730可控制在第一装置110和TV之间共享的内容的重放，并可操作由TV正在播放的内容，而基本上不妨碍其他用户观看来自TV的内容。
并行应用执行器740可构造为与执行内容的同步并行地执行可与第一装置110的用户交互的应用。例如，并行应用执行器740可允许第一装置110的用户执行可由例如TV提供的应用，搜索互联网，或者通过SNS(诸如微博或即时通讯)和正在观看与TV上正在显示的TV内容相同的TV内容的联系人进行通信，而基本上不妨碍观看来自TV的TV内容。因此，可提供个性化交互空间，并可提供用于特定功能(诸如浏览)的更直观的近距离交互，其中，在所述个性化交互空间中，第一装置110的用户可自由地执行与由其他用户正在共享的内容相关的操作，而基本上不妨碍其他用户，对于所述特定功能，近距离交互可比远距离交互更适合。
第二装置120可执行第一装置110的功能。例如，在第二装置120是TV的情况下，第二装置可将内容以及与内容对应的状态信息和扩增信息提供给第一装置110以与第一装置110同步内容，并且第一装置110可同步由第二装置120提供的内容并可在第一装置110的屏幕上显示同步的内容。
图8示出与另一装置同步由一个装置正在执行的web应用的方法的示例。
参照图8，在操作810，第一装置接收用于共享由第二装置正在执行的web应用的同步命令。
响应于接收到同步命令，在操作820，第一装置基于web应用获取显示在第二装置120上的web应用执行屏幕。
在操作830，第一装置通过对获取的web应用执行屏幕执行对象提取，对获取的web应用执行屏幕执行模式识别，对获取的web应用执行屏幕执行字符识别或者它们的组合，来识别web应用。在操作840，第一装置执行识别的web应用。
在操作850，第一装置获取用于提供web服务的用户信息。可从第一装置的存储器或另一装置的存储器来获取所述用户信息。
在操作860，第一装置使用识别的web应用和识别的用户信息来访问web服务器，并从web服务器获取与识别的web应用对应的状态信息。
在操作870，第一装置使用获取的状态信息来再现第二装置中的web应用的执行状态。
用于执行这里描述的方法或所述方法的一个或多个操作的程序指令可被记录、存储或固定在一个或多个计算机可读存储介质中。所述程序指令可由计算机实现。例如，计算机可使得处理器执行所述程序指令。所述介质可包括单独的程序指令、数据文件、数据结构等，或者包括它们的组合。计算机可读介质的示例包括：磁介质，诸如硬盘、软盘和磁带；光介质，诸如CD ROM盘和DVD；磁光介质，诸如光盘；专门配置以存储和执行程序指令的硬件装置，诸如只读存储器(ROM)、随机存取存储器(RAM)、闪存等。程序指令的示例包括诸如由编译器产生的机器代码以及包含可由计算机使用解释器执行的更高级代码的文件。程序指令(即，软件)可被分布到网络连接的计算机系统上，从而软件以分布式方式被存储和执行。例如，可由一个或多个计算机可读记录介质来存储软件和数据。此外，用于实现这里公开的示例性实施例的功能程序、代码和代码段可由实施例所属技术领域的编程人员基于和使用这里提供的附图的流程图和框图及其对应的描述来容易地解释。此外，描述的用于执行操作或方法的单元可以是硬件、软件、或者硬件和软件的某些组合。例如，所述单元可以是在计算机上运行的软件包，或者是软件在其上运行的计算机。以上已经描述了多个示例。然而，应该理解，可进行各种修改。例如，如果以不同的顺序来执行描述的技术，和/或如果描述的系统、架构、装置或电路中的组件以不同的方式来组合和/或由其他组件或者其等同物来替换或补充，则可实现适当的结果。因此，其他实施方式在权利要求的范围之内。

Claims (6)

1.一种内容输出装置，包括：
输出单元；
拍摄单元；
控制单元，被配置为：
基于由拍摄单元获得的图像来识别正在外部装置中执行的内容，
从所述外部装置获得所述内容和与所述内容相关的信息，
基于与所述内容相关的信息以及用户配置信息获得与所述内容相关的个性化信息，
通过输出单元输出包括所述个性化信息和所述内容的屏幕，
其中，与所述内容相关的信息包括指示正在所述外部装置中执行的所述内容的执行状态的信息。
2.如权利要求1所述的装置，还包括：
音频输入单元，
其中，控制单元基于通过音频输入单元接收到的音频信号以及获得的图像来识别所述内容。
3.如权利要求1所述的装置，其中，控制单元基于指示所述内容的执行状态的信息以及所述内容来配置并输出正在所述外部装置中执行的屏幕。
4.一种内容输出装置的输出控制方法，所述方法包括：
基于获得的图像来识别正在外部装置中执行的内容；
从所述外部装置获得所述内容和与所述内容相关的信息；
基于与所述内容相关的信息以及用户配置信息获得与所述内容相关的个性化信息；
输出包括与所述内容相关的所述个性化信息和所述内容的屏幕，
其中，与所述内容相关的信息包括指示正在所述外部装置中执行的所述内容的执行状态的信息。
5.如权利要求4所述的方法，还包括：
接收音频信号，
其中，识别内容的步骤包括：基于接收到的音频信号以及获得的图像来识别所述内容。
6.如权利要求4所述的方法，其中，输出所述屏幕的步骤包括：基于指示所述内容的执行状态的信息以及所述内容来配置并输出正在所述外部装置中执行的屏幕。
CN201710265403.2A 2011-01-07 2011-11-30 内容同步设备和方法 Active CN107087224B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2011-0001853 2011-01-07
KR1020110001853A KR101763887B1 (ko) 2011-01-07 2011-01-07 디바이스간 동기화된 인터랙션을 제공하는 콘텐츠 동기화 장치 및 방법
CN201110412415.6A CN102595228B (zh) 2011-01-07 2011-11-30 内容同步设备和方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201110412415.6A Division CN102595228B (zh) 2011-01-07 2011-11-30 内容同步设备和方法

Publications (2)

Publication Number Publication Date
CN107087224A CN107087224A (zh) 2017-08-22
CN107087224B true CN107087224B (zh) 2020-07-07

Family

ID=46455201

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201110412415.6A Active CN102595228B (zh) 2011-01-07 2011-11-30 内容同步设备和方法
CN201710265403.2A Active CN107087224B (zh) 2011-01-07 2011-11-30 内容同步设备和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201110412415.6A Active CN102595228B (zh) 2011-01-07 2011-11-30 内容同步设备和方法

Country Status (3)

Country Link
US (2) US9277283B2 (zh)
KR (1) KR101763887B1 (zh)
CN (2) CN102595228B (zh)

Families Citing this family (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101719264B1 (ko) * 2010-12-23 2017-03-23 한국전자통신연구원 방송 기반 증강 현실 콘텐츠 제공 시스템 및 그 제공 방법
KR101292463B1 (ko) * 2011-01-27 2013-07-31 주식회사 팬택 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법
KR20130023490A (ko) * 2011-08-29 2013-03-08 주식회사 팬택 애플리케이션 동기화 시스템 및 방법
US9275148B1 (en) * 2011-09-23 2016-03-01 Shauki Elassaad System and method for augmented browsing and knowledge discovery
US9930311B2 (en) * 2011-10-20 2018-03-27 Geun Sik Jo System and method for annotating a video with advertising information
US20130110900A1 (en) * 2011-10-28 2013-05-02 Comcast Cable Communications, Llc System and method for controlling and consuming content
KR101666246B1 (ko) * 2012-03-12 2016-10-13 한국전자통신연구원 메타데이터 우선제공 증강방송 장치 및 방법
US9930094B2 (en) * 2012-03-27 2018-03-27 Industry-Academic Cooperation of Yonsei University Content complex providing server for a group of terminals
US8739223B2 (en) * 2012-04-25 2014-05-27 Electronics And Telecommunications Research Institute Method and apparatus for processing augmented broadcast content using augmentation region information
KR101952700B1 (ko) 2012-07-31 2019-02-28 삼성전자주식회사 방송 통신 융합 서비스의 제공 방법 및 장치
KR102130733B1 (ko) * 2012-08-22 2020-07-06 한국전자통신연구원 하이브리드 환경에서의 증강 서비스 제공장치 및 수신장치
US9086838B2 (en) 2012-09-03 2015-07-21 Nvidia Corporation Synchronous media display through automatic hardware profiles across multiple display units
US9081535B2 (en) 2012-09-03 2015-07-14 Nvidia Corporation Automatic topology configuration through automatic hardware profiles across multiple display units
KR101952178B1 (ko) * 2012-09-05 2019-02-26 엘지전자 주식회사 이동 단말기 및 그것을 이용한 클라우드 시스템
US9226011B2 (en) 2012-09-11 2015-12-29 Comcast Cable Communications, Llc Synchronizing program presentation
CN102866777A (zh) * 2012-09-12 2013-01-09 中兴通讯股份有限公司 一种数字媒体内容播放转移的方法及播放设备及系统
US9769503B2 (en) * 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
KR101934099B1 (ko) * 2012-12-14 2019-01-02 삼성전자주식회사 컨텐츠 재생 장치, 그 ui 제공 방법, 네트워크 서버 및 그 제어 방법
US9306990B2 (en) * 2013-02-14 2016-04-05 Raytheon Company System and method for map collaboration
US10135901B2 (en) * 2013-03-15 2018-11-20 Cox Communications, Inc. Exchange of content consumption-related information between networked devices
US10135902B2 (en) * 2013-03-15 2018-11-20 Cox Communications, Inc. Exchange of content consumption-related information between networked devices
CN103945274A (zh) * 2013-04-19 2014-07-23 达腾科公司 提供对应于电视节目的交互增强现实信息的方法和设备
US20140317659A1 (en) * 2013-04-19 2014-10-23 Datangle, Inc. Method and apparatus for providing interactive augmented reality information corresponding to television programs
JP6092702B2 (ja) * 2013-04-25 2017-03-08 京セラ株式会社 通信端末、および情報送信方法
US9355240B2 (en) * 2013-06-27 2016-05-31 Avaya Inc. Multi-device single network sign-on
EP2819075A1 (en) * 2013-06-28 2014-12-31 Samsung Electronics Co., Ltd Method and apparatus for automatically synchronizing electronic devices
KR101538755B1 (ko) * 2013-09-23 2015-07-24 (주)파워보이스 외부 디바이스의 동작 제어 및 디바이스 간 컨텐츠 동기화를 위한 음파를 출력하는 디바이스 및 방법, 그리고 외부 디바이스
KR101600038B1 (ko) * 2013-10-01 2016-03-04 목포대학교산학협력단 소셜 증강현실 서비스 시스템 및 방법
KR101479624B1 (ko) * 2013-11-15 2015-01-06 현대모비스 주식회사 차량용 헤드 유닛 및 상기 차량용 헤드 유닛에서의 화면 설정 방법
US10198777B2 (en) 2013-12-06 2019-02-05 Remote Media, Llc System, method, and application for exchanging content in a social network environment
US20150163326A1 (en) * 2013-12-06 2015-06-11 Dropbox, Inc. Approaches for remotely unzipping content
WO2015139179A1 (zh) 2014-03-17 2015-09-24 华为终端有限公司 一种终端间同步内容的方法和终端
CN106416129B (zh) * 2014-04-23 2018-01-16 远程媒体有限责任公司 将综合转播和分组流社交化的智能路由同步系统和方法
US9685196B2 (en) * 2014-09-17 2017-06-20 Verizon Patent And Licensing Inc. Sharing and synchronizing content
EP3016362A1 (en) 2014-11-03 2016-05-04 OpenTV Europe SAS Method and system to share advertisement content from a main device to a secondary device
CN104618471B (zh) * 2015-01-23 2018-04-06 天津大学 面向不同终端的应用程序状态转移方法
CN105072246A (zh) * 2015-07-01 2015-11-18 小米科技有限责任公司 信息同步方法、装置及终端
EP3128413A1 (en) * 2015-08-04 2017-02-08 Nokia Technologies Oy Sharing mediated reality content
CN106487843A (zh) * 2015-08-28 2017-03-08 阿里巴巴集团控股有限公司 调整智能终端性能参数的方法及装置
WO2017065443A1 (ko) * 2015-10-16 2017-04-20 명지대학교 산학협력단 미디어 중심 사물 인터넷 기반의 미디어 사물 및 이의 동작 방법
CN106921882A (zh) * 2015-12-24 2017-07-04 中兴通讯股份有限公司 控制方法、控制装置、终端及音频同步播放系统
CN105549823A (zh) * 2015-12-25 2016-05-04 苏州拾向梦数字媒体有限公司 一种无线涂鸦墙
KR101725194B1 (ko) * 2016-03-08 2017-04-12 주식회사 아이아라 통신 단말기간 식별 방법
US9912711B1 (en) * 2016-04-12 2018-03-06 Blingby, Llc Computer system of computer servers and dedicated computer clients configured for video playing with live metadata streaming based on video content, and methods of use thereof
CN106210909A (zh) * 2016-08-15 2016-12-07 深圳Tcl数字技术有限公司 电视显示内容的处理方法、装置及系统
US11172005B2 (en) * 2016-09-09 2021-11-09 Nokia Technologies Oy Method and apparatus for controlled observation point and orientation selection audiovisual content
CN106230709B (zh) * 2016-09-14 2020-02-14 Oppo广东移动通信有限公司 一种聊天信息区别同步的方法及装置
US10291678B2 (en) * 2016-10-01 2019-05-14 Facebook, Inc. Architecture for augmenting video data obtained by a client device with one or more effects during rendering
CN106981000B (zh) 2016-10-13 2020-06-09 阿里巴巴集团控股有限公司 基于增强现实的多人线下交互、点餐方法及系统
WO2018191720A1 (en) * 2017-04-14 2018-10-18 Penrose Studios, Inc. System and method for spatial and immersive computing
US10565168B2 (en) 2017-05-02 2020-02-18 Oxygen Cloud, Inc. Independent synchronization with state transformation
KR102474754B1 (ko) 2017-09-08 2022-12-07 삼성전자주식회사 V2V 인터랙션/V2IoT 통신 방법 및 장치
US10468018B2 (en) * 2017-12-29 2019-11-05 Dish Network L.L.C. Methods and systems for recognizing audio played and recording related video for viewing
US20190212901A1 (en) * 2018-01-08 2019-07-11 Cisco Technology, Inc. Manipulation of content on display surfaces via augmented reality
US10225360B1 (en) * 2018-01-24 2019-03-05 Veeva Systems Inc. System and method for distributing AR content
KR102499354B1 (ko) 2018-02-23 2023-02-13 삼성전자주식회사 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법
US11077365B2 (en) 2018-06-27 2021-08-03 Niantic, Inc. Low latency datagram-responsive computer network protocol
CN109040806A (zh) * 2018-07-24 2018-12-18 广州孩教圈信息科技股份有限公司 一种跨设备投影屏幕内容的方法和系统
US10916220B2 (en) 2018-08-07 2021-02-09 Apple Inc. Detection and display of mixed 2D/3D content
CN109922130A (zh) * 2019-01-11 2019-06-21 视联动力信息技术股份有限公司 一种远程控制方法和装置
US11420116B2 (en) 2019-02-25 2022-08-23 Niantic, Inc. Augmented reality mobile edge computing
KR102629990B1 (ko) * 2019-12-03 2024-01-25 엘지전자 주식회사 허브 및 이를 포함하는 전자 디바이스
US11489763B2 (en) 2019-12-20 2022-11-01 Niantic, Inc. Data hierarchy protocol for data transmission pathway selection
CN111327928A (zh) * 2020-03-11 2020-06-23 广州酷狗计算机科技有限公司 歌曲播放方法、装置及系统、计算机存储介质
US20220400012A1 (en) * 2021-06-14 2022-12-15 Samsung Electronics Co., Ltd. Systems and methods for shared device access control
JP2024532669A (ja) * 2021-07-27 2024-09-10 ループ ナウ テクノロジーズ インコーポレイテッド 第三者のウェブページ情報に基づくビデオストリームインタフェース
WO2023027208A1 (ko) * 2021-08-25 2023-03-02 삼성전자 주식회사 복수의 디바이스를 그룹핑 하는 방법 및 시스템
WO2023090619A1 (ko) * 2021-11-22 2023-05-25 삼성전자주식회사 시청자 참여 가능한 컨텐츠 제공 방법 및 이를 위한 전자 장치
US20230161544A1 (en) * 2021-11-23 2023-05-25 Lenovo (United States) Inc. Virtual content transfer
WO2024122951A1 (ko) * 2022-12-05 2024-06-13 삼성전자 주식회사 화면 및 화면 캡처 시점의 상황을 공유하는 전자 장치, 동작 방법, 및 저장 매체

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5774859A (en) * 1995-01-03 1998-06-30 Scientific-Atlanta, Inc. Information system having a speech interface
US7092569B1 (en) * 1999-07-29 2006-08-15 Fuji Photo Film Co., Ltd. Method and device for extracting specified image subjects
JP2002041429A (ja) * 2000-07-26 2002-02-08 Nec Corp インターネットにおける共有資料を用いて会議を行う方法、会議システム、情報処理装置及び記録媒体
WO2003012744A1 (en) * 2001-08-02 2003-02-13 Intellocity Usa, Inc. Post production visual alterations
CA2485100C (en) * 2002-05-06 2012-10-09 David Goldberg Localized audio networks and associated digital accessories
AU2003239385A1 (en) * 2002-05-10 2003-11-11 Richard R. Reisman Method and apparatus for browsing using multiple coordinated device
US20050039206A1 (en) * 2003-08-06 2005-02-17 Opdycke Thomas C. System and method for delivering and optimizing media programming in public spaces
US9075805B2 (en) 2004-02-04 2015-07-07 Sony Corporation Methods and apparatuses for synchronizing and tracking content
US20050286546A1 (en) * 2004-06-21 2005-12-29 Arianna Bassoli Synchronized media streaming between distributed peers
US7814518B2 (en) 2004-11-23 2010-10-12 Palo Alto Research Center Incorporated Methods, apparatus, and program products for presenting replacement content instead of a portion of a recorded content
US7882530B2 (en) * 2004-11-23 2011-02-01 Palo Alto Research Center Incorporated Method, apparatus, and program products for socially synchronizing an experiential data stream
US20060230415A1 (en) * 2005-03-30 2006-10-12 Cyriac Roeding Electronic device and methods for reproducing mass media content
KR20070049426A (ko) 2005-11-08 2007-05-11 에스케이 텔레콤주식회사 개인 중심의 서비스 제공 방법 및 시스템
US20070157251A1 (en) * 2006-01-04 2007-07-05 Mptv, Llc Methods and Systems For Distributing Assets Associated With Television Program
US9253222B2 (en) 2007-02-22 2016-02-02 Match.Com. L.L.C. Synchronous delivery of media content in a collaborative environment
US8925010B2 (en) * 2007-04-02 2014-12-30 Tp Lab, Inc. Method and system for television channel group
US8695034B2 (en) * 2007-08-31 2014-04-08 Silicon Image, Inc. Delivering on screen display data to existing display devices
KR100900806B1 (ko) 2007-11-01 2009-06-04 광주과학기술원 컨텍스트 인식 증강 현실을 제공하기 위한 시스템 및 방법
JP4538756B2 (ja) * 2007-12-03 2010-09-08 ソニー株式会社 情報処理装置、情報処理端末、情報処理方法、およびプログラム
US20090160735A1 (en) * 2007-12-19 2009-06-25 Kevin James Mack System and method for distributing content to a display device
JP5219501B2 (ja) * 2007-12-27 2013-06-26 三菱電機株式会社 画面生成装置および画面レイアウト共有システム
US8264505B2 (en) 2007-12-28 2012-09-11 Microsoft Corporation Augmented reality and filtering
KR100963238B1 (ko) 2008-02-12 2010-06-10 광주과학기술원 개인화 및 협업을 위한 테이블탑-모바일 증강현실 시스템과증강현실을 이용한 상호작용방법
US8051444B2 (en) * 2008-06-02 2011-11-01 Intent IQ, LLC Targeted television advertisements selected on the basis of an online user profile and presented with television programs or channels related to that profile
US10086265B2 (en) * 2008-07-11 2018-10-02 Disney Enterprises, Inc. Video teleconference object enable system
CN101339725A (zh) * 2008-08-07 2009-01-07 北京中星微电子有限公司 一种展品的讲解系统、装置及方法
JP5244547B2 (ja) * 2008-11-10 2013-07-24 株式会社日立ソリューションズ 音声コメント配信共有方法及びシステム
JP4683128B2 (ja) * 2009-01-06 2011-05-11 ソニー株式会社 プレゼンス情報共有装置、プレゼンス情報共有方法、プレゼンス情報共有プログラムおよびプレゼンス情報共有システム
WO2011149558A2 (en) * 2010-05-28 2011-12-01 Abelow Daniel H Reality alternate
KR101719992B1 (ko) * 2010-11-16 2017-03-27 엘지전자 주식회사 이동 단말기 및 이것의 메타데이터 활용 방법
KR101839406B1 (ko) * 2011-09-27 2018-03-19 삼성전자 주식회사 디스플레이장치 및 그 제어방법

Also Published As

Publication number Publication date
CN102595228B (zh) 2017-05-17
CN107087224A (zh) 2017-08-22
US20120177067A1 (en) 2012-07-12
CN102595228A (zh) 2012-07-18
US9979788B2 (en) 2018-05-22
US9277283B2 (en) 2016-03-01
KR101763887B1 (ko) 2017-08-02
KR20120080410A (ko) 2012-07-17
US20160142490A1 (en) 2016-05-19

Similar Documents

Publication Publication Date Title
CN107087224B (zh) 内容同步设备和方法
US9066146B2 (en) Electronic device and method for providing information related to broadcast viewing
CN105578267B (zh) 终端装置及其信息提供方法
CN109118290B (zh) 方法、系统和计算机可读非暂时性存储介质
JP6416626B2 (ja) 第２のスクリーン上での代替ビュービデオの再生
KR101843592B1 (ko) 동적 ui 프레임워크를 통한 주 스크린 뷰 제어
KR101873793B1 (ko) 디바이스간 동기화된 인터랙션을 제공하는 콘텐츠 동기화 장치 및 방법
US20130173765A1 (en) Systems and methods for assigning roles between user devices
JP2016533075A (ja) 情報取得方法、装置、プログラム、及び記録媒体
KR20130132886A (ko) 디스플레이된 컨텐츠에 관련된 추가적인 컨텐츠를 제공하기 위한 방법 및 시스템
US10616634B2 (en) Display device and operating method of a display device
US20150135218A1 (en) Display apparatus and method of controlling the same
CN111742557A (zh) 显示装置和包括该显示装置的系统
KR101903639B1 (ko) 전자 장치 및 시청 정보 제공 방법
CN106060641A (zh) 用于搜索的显示装置及其控制方法
KR20170123184A (ko) 스크랩 기능을 제공하는 디스플레이 장치 및 그의 동작 방법
US11949942B2 (en) Display device
US20230209102A1 (en) Electronic device and operating method therefor
KR102509935B1 (ko) 디스플레이 장치
Palacio-Baus et al. Current challenges of interactive digital television
KR20170117997A (ko) 디스플레이 장치 및 검색 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant