CN105122177A - 用户监控和目的确定的系统和方法 - Google Patents

用户监控和目的确定的系统和方法 Download PDF

Info

Publication number
CN105122177A
CN105122177A CN201480007203.1A CN201480007203A CN105122177A CN 105122177 A CN105122177 A CN 105122177A CN 201480007203 A CN201480007203 A CN 201480007203A CN 105122177 A CN105122177 A CN 105122177A
Authority
CN
China
Prior art keywords
component devices
entertainment system
home entertainment
multiple component
event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480007203.1A
Other languages
English (en)
Other versions
CN105122177B (zh
Inventor
阿沙姆·哈塔姆贝可伊
保罗·D·阿林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Universal Electronics Inc
Original Assignee
Universal Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Universal Electronics Inc filed Critical Universal Electronics Inc
Publication of CN105122177A publication Critical patent/CN105122177A/zh
Application granted granted Critical
Publication of CN105122177B publication Critical patent/CN105122177B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4333—Processing operations in response to a pause request
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224—Monitoring of user activity on external systems, e.g. Internet browsing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4667—Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4852—End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Selective Calling Equipment (AREA)

Abstract

与家庭娱乐系统相关的感应界面被用于令系统自动响应于在与家庭娱乐系统相关的可视区域内发生的事件。源自这样的感应界面的数据还可以用于提高一个或多个系统部件的相应速度。而且，源自这样的感应界面的用户存在数据可用于捕集和报道用户观看习惯和/或偏好。

Description

用户监控和目的确定的系统和方法
发明背景
由多个设备和/或用于将命令发送至这些设备的控制装置组成的家庭娱乐系统可以具有用于通过现有技术已知的例如手势、语音、面部识别、空间分析等方法来检测用户存在和/或用户交互。此外，个人通讯装置，例如智能电话、平版电脑等的日益增长的使用可通过在无线局域网络(例如WiFi网络、蓝牙网络等)上检测这样的个人通讯装置而为用户存在的确定提供额外的方式。虽然多个媒体源和多个媒体渲染装置可以在许多这样的家庭娱乐系统中通过中心路由设备(例如AV接收器、机顶盒、智能TV等)连接，但是目前尚不存在单独使用或者与中心路由设备联合使用用户存在和/或用户交互检测来提供增强的家庭娱乐系统功能的系统或方法。
发明概述
因此，本发明总体上涉及家庭娱乐系统及其控制方法，并且特别地，涉及这样的家庭娱乐系统的增强的功能，其通过为这样的系统提供额外的用户相关输入方法而实现。例如，在本发明的一个方面中，感应界面，例如图像感应界面(例如与相机相关的界面)、声音感应界面(例如与麦克风相关的界面)和/或用于感应例如为智能电话的RF装置存在的界面，可被用于完全地或者部分地令系统自动响应在TV观看会话期间可能发生的公共事件，例如一个或者多个用户离开或进入观看区域、用户接听电话、门铃响声或婴儿监控警报的检测，等等。在本发明的另一个方面中，源自这样的感应界面的数据可被用于提高一个或多个系统部件的响应能力，例如通过感应用户何时伸手去拿物理远程控制单元或准备一个发出声音或手势命令的部件。在本发明的又一个方面中，源自这样的感应界面的用户存在数据可以由中心路由设备结合媒体流信息使用，从而采集和报告用户观看习惯和/或偏好。
根据下文的详细说明以及附图，可以更好的理解本发明的目标、优点、特征、特性和关系，附图用于阐明说明性的实施方式，并表明本发明的原理可以应用的多种方式。
附图说明
为了更好地理解本发明的多个方面，可参考在附图中示出优选的实施方式，其中：
图1描述了本发明的教导可以用于其中的一种示例性的系统；
图2描述了本发明的教导可以用于其中的另一种示例性的系统；
图3以框图的形式描述了用于设备的示例性硬件架构，所述设备可以是在图1和2中所描述的系统的构件；
图4以框图的形式描述了用于图3的说明性设备的示例性软件架构；
图5以流程图的形式描述了在图4中描述的软件架构的示例性事件处理模块的运行。
发明详述
参考图1，一个本发明的方法可在其中应用的示例性家庭娱乐系统可以包含用作集线器的AV接收器100，其用于将所选择的视频和/或音频媒体流从例如为卫星或有线系统机顶盒和/或DVR设备(“STB”)104、DVD播放器106、CD播放器108或游戏机110的源设备导向至目标设备，例如电视机102，所选择的视频和/或音频媒体流在此处会被渲染。在一种优选的实施方式中，设备102至110与AV接收器100之间的连接130、132通常包含用于携带HDMI兼容数字信号的连接，然而能够理解的是，在特定设备的限制所必须的时候，可以替换其它接口标准，例如分量视频、PCM音频等。在一些实施方式中，其它的AV内容流也可由流媒体服务118(例如Netflix、Vudu、YouTube、NBC在线等)通过广域网(例如因特网116)提供，终端AV接收器100具有与因特网网关设备、例如路由器114的连接112。将会理解的是，AV接收器100和因特网网关设备114之间的连接可以是所示的有线连接，或者根据情况可以是无线连接，例如WiFi局域网。为了支持音频和/或视频电话、会议等，并且根据本发明的特定教导，示例性的家庭娱乐系统还具有一个或多个感应界面，例如与麦克风120和相机112相关的界面，其适用于在家庭娱乐系统环境中捕集可听和/或可视的事件。说明性娱乐系统的用户124、126可以通过任何方便的方法选择当前正在观看的媒体流，例如通过使用现有技术已知的遥控器、声音指令、手势等。在某些实施方式中，与这些选择相关的数据包括但不限于媒体源、频道、轨道、标题等，其与观看时间、用户存在等一起累积并报告给数据库服务器128，用于集成并分析用户观看习惯和偏好，其将在下文更加详细地讨论。
现在参考图2，在第二种说明性的实施方式中，“智能”TV设备200可以结合内容渲染和源流选择功能。在这种配置中，本地设备104至110例如可以通过HDMI连接130直接连接至TV200的多个输入端口。作为智能TV类型的特点，TV200还可以支持与例如为因特网116的广域网的连接112，流AV内容和其它数据可以在其上接收。将用户指令输入至TV200和设备104至110的方法可以采用控制装置204的形式，例如传统的遥控器或者智能手机应用程序，根据需要通过任何方便的红外(IR)、无线电频率(RF)、硬连接、点对点或者网络协议而与所述设备通信，使各个目标设备执行所期望的操作功能。另外，在特定的实施方式中，用户输入还可以包含语音和/或手势指令来替代控制设备信号或者作为补充，声音和手势可以由麦克风120和相机122来接收，并通过一个设备、例如TV200来处理和解码，并根据需要例如通过HDMICEC指令、IR或RF信号等转发至其它目标设备，正如在例如共同未决的具有共同所有权的美国专利申请13/657,176“SystemandMethodforOptimizedApplianceControl”中所描述的，其在这里通过应用而被全文引入。
为了简要，下文的讨论将基本上参考图2的示例性的设备配置，然而，可以理解的是，在其它实施方式中，例如在图1中所描述的实施方式中，在这里提出的方法步骤对于特定的设备配置来说，可以根据情况通过不同的设备或设备组合并加以必要的变通来执行。
如在图3中所示的，示例性的中心路由设备，例如智能TV设备200，根据例如渲染性能的特定应用的需要，可以包括：TV引擎和媒体处理器300(可以理解的是，其可包含一个或多于一个的物理处理器，这取决于特定的实施方式)；存储器302，其可以包含任意类型的可读或读/写介质，例如RAM、ROM、FLASH、EEPROM、硬盘、光盘等，或其组合；USB接口304；数字AV输入端口和接口306，例如DVI或HDMI；模拟AV输入端口和接口308，例如与模拟音频相关的AV端子或色差端子；以太网和/或WiFi接口310；蓝牙接口328；与相机122相关的数码相机接口312，所述相机122可以外部连接至TV200机壳或者构建于其中；与麦克风120相关的麦克风接口314，其可以外部连接至TV200机壳或者构建于其中；远程控制接口316，用于通过IR或RF信号326来接收用户初始操作指令；与TV屏幕322连接的视频输出318；以及与内部或外部扬声器324连接的音频输出320。
为了使智能TV设备200执行动作，合适的程序指令会被存储于存储器302中(在下文为“TV程序”)，从而通过TV引擎和媒体处理器300而执行。这样的TV程序的一种示例性的架构在图4中示出。如所示的，示例性的TV程序根据特定的应用需要可以包括底层操作系统402，例如LINUX，其可以支持实现智能TV设备的不同功能的一系列软件模块。这样的软件模块可以包括用于在不同的应用软件模块之间提供设备独立接口的硬件抽象层404，以及硬件依赖性软件模块，例如视频输出驱动器406、音频输出驱动器408、HDMI接口410、模拟输入/输出ADC/DAC412、以太网和/或WiFi接口414、蓝牙接口416；USB接口418、远程控制接口420以及相机和麦克风驱动器422和423。位于抽象层404上方的示例性的应用模块根据特定的实施方式的需要可以包括传输和会话层协议和接口管理428；AV输出管理424；输入/输出处理和传送440；杂项服务模块426，用于支持隐藏字幕、显示配置、OSD等；远程控制指令解码器430；和设备资源管理442。另外，根据本发明的教导，示例性的TV程序可以包括音频和视频事件检测器模块432、434，例如声音和/或图像辨识引擎等；用户事件处理436；和用户统计收集和报告模块438。
在这样的TV程序控制下，智能TV设备200例如可以接收来自输入端口306、308之一的引入AV媒体流，其将被处理、缓冲、分离至音频和视频部件，并传送至输出318、320，用于在TV显示屏幕322和扬声器324上渲染；可以接收来自远程控制接口316的指令，其经解码和作用，例如用以选择输入媒体流、调整音频音量等；通过以太网或WiFi接口310，可以管理与因特网的连接，从而能够浏览内容、下载软件更新、利用相机122和麦克风120的输入进行视频电话；等等。另外，根据在这里的教导，示例性的TV程序可以接收并处理源自控制设备204、相机122和/或麦克风120的输入信号，从而检测用户存在，确定个人用户和/或接收用户指令输入，这将在下文描述。能够理解的是，虽然在说明性的实施方式中，音频输入信号源可以包含麦克风120和作为智能TV设备200一部分来提供的相关接口314，在替换实施方式中，音频输入信号可以通过系统内的任何其它设备来捕集并传送至用于处理的设备200，或者可以源于在例如为遥控器或智能电话204的控制设备中提供的麦克风，麦克风的输出例如可以通过控制设备204而被数字化和/或处理，并且根据特定的应用的需要通过遥控器接口326、WiFi接口310、蓝牙接口328、或任意其它装置而无线传送至智能TV设备200。
在一种示例性的实施方式中，TV设备200的TV程序的用户事件处理模块436(在下文为“事件处理”)如在图5的流程图中所描述的在用户相关事件的发生时起作用。首先，在步骤502，可以确定事件是否构成远程控制指令的接收，这可以由远程控制指令解码器439报告。将会理解的是，取决于特定的实施方式以及当前使用的特定的控制设备，远程控制指令可以通过任意的或所有的RC接口420(例如红外或RF4CE信号等)、以太网/WiFi接口414或蓝牙接口416接收。如果确定事件构成远程控制指令的接收，那么在步骤540，就可以执行所请求的功能操作。通过示例而非限定的方式，这样的操作可以包括将由AV管理模块424执行的输出音频音量的调整，将由I/O和传送模块440执行的新媒体输入流的选择，等等。在某些实施方式中，所接收的远程控制指令还可以包含请求，用以引导其它连接设备的功能操作，例如通过将由接口管理模块428经由HDMI连接130发出的CEC指令来控制DVD播放器106或STB104；或者可替换地，通过连接的IR增强器或LAN，例如描述于共同未决的具有共同所有权的美国专利申请13/657,176“SystemandMethodforOptimizedApplianceControl”，其在这里通过参考而被全文引入。在请求指令功能完成后，在步骤542，其接下来可以确定正在执行的指令功能是否包含由TV200渲染的媒体流的变化，例如新的输入端口306、308的选择；所选择的广播频道或者STB104的DVR重放的变化；因特网媒体源的变化等。如果这样的话，在步骤544，与这种事件相关的数据就会传送至用户统计模块438，用于记录并最终报告至数据库服务器128。将会理解的是，与新的内容流相关的数据记录可以包括部分或全部的指令参数，例如STB通道数和时间标记；可由内容源设备或通道获得的元数据项目，例如DVD标题、视频流URL等；用于如在例如为美国专利7,986,913、7,627,477或7,346,512的现有技术中已知并描述的进行分析的音频或视频内容样本；或者适用于确定目的的任意其它数据。如果确定所执行的功能不包含当前媒体流的任何变化，那么在步骤546，接下来就可以确定所执行的功能是否包含可报告事件，例如打开或关闭TV200(或任意其它的连接设备)，在DVR重放过程中发出快进指令等。如果是这样的，那么这种事件还可被报告至用户统计模块438，用于记录，随后完成远程控制指令的处理。在这一方面，将会理解的是，可报告设备事件，例如开启或关闭所连接的设备，还可以例如通过直接通信来自其自身的远程控制的设备来单独地初始化。据此，尽管未说明，但是当这样的事件例如可以通过HDMI状态、不存在或者存在视频或音频信号等检测到的时候，就还可以报告并记录这些事件。
如果所报告的事件并不是远程控制指令，那么在步骤504，事件处理就可以接下来确定所报告的事件是否构成由可视事件监测模块432报告的图像变化事件，其响应于通过相机驱动器422接收自相机122的图像数据的分析。这样的图像处理例如可以使用在美国专利5,534,917、6,829,384、8,274,535，WIPO(PCT)专利申请公开WO2010/057683A1等中描述的技术，并且例如可以周期性地监测包含相机122视野区域的图像，从而响应于图像数据的任何超出特定阈值的变化的检测来初始化图像分析。如果确定所述事件为检测到的图像变化的报告，那么在步骤518，接下来就会确定所述事件是否包含用户从TV200观看环境离开或者即将离开。如果是这样的，那么就可以根据需要，通过事件处理436采取不同的行动。例如，如果离开的用户是唯一的观看者(或者在某些实施方式中是主要用户，即开启当前视频会话的用户)，那么事件处理就可以进行调整以将“暂停”指令发送至当前媒体流的来源。根据需要，对于特定的实施方式和配置，其它的行动可以包括但不限于激活DVR的记录功能，注销网址等。如果采取这样的行动，那么在步骤520，在说明性的实施方式中，事件处理就会致使在TV屏幕322上显示请求确认，例如“你希望暂停该放映吗？(Y/N)”。如果用户在步骤522确认，所述确认可以采用手势、语音指令、远程控制输入等的形式，或者在某些实施方式中，当超时而采取默认操作的时候，那么在步骤528，所指示的行动就会被执行。在本文中，将会理解的是，在预期声音或手势响应的实施方式中，音频和/或视频事件监测模块432，434的执行准确性可以通过将一定范围的可能响应(在这种例子中为“是”或“否”)事先标示于这些模块来改善，由此限制需要匹配的声音或手势模型的数目。而且，在某些可以使用声音输入的实施方式中，可以暂时性地降低TV音频输出320的音量，从而减少背景噪音。其后，在步骤530，与用户变化相关的数据可被传送至用于在处理完成之后进行记录的统计集成模块438，所述数据包括用户身份，其例如可以通过利用例如在美国专利7,551,756、7,702,599等中描述的技术来确定。
如果所检测的图像变化事件并不是用户离开，那么在步骤524，事件处理器接下来可以确定所报告的事件是否包含新的或其他用户进入TV观看环境，并且如果是这样的，那么采取合适的行动。举例来说，某些实施方式可以进行调整以允许观看者启用“私密观看”状态，在其它用户进入观看环境的事件中，其会导致当前内容被自动静音、暂停、转换等。在这样的实施方式中，在步骤526，可以确定当前是否存在这样的状态。如果是这样的，那么在步骤528，就可以执行恰当的行动，其后，与用户进入相关的包括可确定的用户身份的数据会被传送至用于记录的统计集成模块438，并且事件处理完成。通过非限制性的进一步的例子，用户再次进入至观看环境中会触发之前暂停内容的恢复播放；或者在其中设备通过网络连接在一起并装备有观看者识别的设备的多房间、多设备家庭中，用户进入一个观看环境会导致在所述环境中的事件处理器对家庭中其它位置的其它事件处理器和/或统计模块提出询问，从而确定用户最近是否离开另一个环境，并且如果是这样的话，就会提供在之前其它环境中暂停的内容流的恢复播放。
如果所检测的图像变化事件并不是用户进入或离开，那么在步骤532、534和536，接下来就会确定所报告的事件是否包含可检测的手势，在本文中可检测的手势包含用户行动或运动，其通过预编程的或学习过程而被确定至可视事件监测模块432，其对用户输入具有重要的意义。如果所报告的事件被确定为与操作指令功能相关，例如“暂停”、“静音”、“频道上调”等，那么可以在步骤540继续进行处理，以执行如上所述的指令。如果所报告的事件被确定为预备手势，那么就会在步骤538采取恰当的预期行动。在本文中，预备手势可以包含但不限于任何用户的初步运动或手势，其可被解释为用户意图实施行动的可能指示，例如起立、伸手去拿或放下远程控制设备、示意视线外的人进入房间、接电话等。预期行动例如可以包括预调节视频和/或音频检测模块432、434，从而出于匹配的目的有助于模板的特定子集；通过例如遥控器的键盘化设备将屏幕菜单从对于手势控制优化的格式改进为对于导航来说最优化的格式，或与之相反；减小或静音音频音量；对远程控制设备发送信号退出静止状态，从而开启或关闭其背光等；等等。
如果所报告的事件并不是图像变化事件，那么在步骤506，事件处理接下来就会确定所报告的事件是否构成由音频事件监测模块434报告的声音辨认事件。通过模块434的讲话或者声音识别例如可以使用在美国专利7,603,276，WIPO(PCT)专利申请公开WO2002/054382A1等中描述的技术。如果所述事件为声音辨认事件，那么在步骤512，就会确定所解码的声音是否构成由用户发送的语音指令。如果是这样的，那么处理就会在步骤540继续，从而如上所述地执行期望指令。如果不是语音指令，那么在步骤514，就会确定所报告的事件是否构成触发声音。在本文中，触发声音可以是通过麦克风102接收的非嗓音音频信号的情况，其通过预编程或者通过学习过程而被分配一个指令或预期行动。举例来说，但非限制性地，触发声音可以包括电话或门铃响声，婴儿监控，烟雾警报，微波铃声等。如果所报告的声音事件为触发声音，那么恰当的动作，例如令电视静音等，就会在步骤516发生。所述系统还可以经编程以辨认不同的声音和/或口头语言/短语，作为预备事件的指示，因此，通过如上所述的期望动作而准备好一个或多个系统部件。举例来说，例如“让我们看看还有什么”的话语会被辨认为准备事件，因此期望动作会被执行，从而将远程控制设备置于这样的状态，其中远程控制设备准备好接收期待其应用的输入，或例如“过来”的话语，门铃声等可被识别为准备事件，由此期望动作可被执行，从而令所述系统准备寻找期望事件，例如特定的手势，例如用户起立、离开观看区域等，因此对于所感应的预期的恰当响应动作，例如暂停媒体，会被执行。
在期望事件未在预定时间内执行的事件中，所述系统可以根据需要来执行进一步的动作，例如恢复动作，从而将系统置于所期望的状态，例如令家庭娱乐系统的一个或多个部件返回至所述部件不再搜索期望事件发生的状态。
如果所报告的事件不是声音辨认事件，那么在步骤508，事件处理接下来就可以确定所报告的事件是否包含无线设备(例如智能电话、平板电脑、游戏控制器等)加入与智能TV200或系统中其它设备相关的LAN或PAN或从其断开。如果这样的设备已经由TV程序在先注册，那么这样的活动就可被用于推断特定用户的存在或不存在。这样的信息随后可以与如上所述的在步骤518继续的用户图像检测相类似的方式来处理(例如随着用户的加入或离开而被处理)。
最后，在步骤510，事件处理器可以处理与特定实施方式相一致的任意其它的事件报告活动。例如，在某些实施方式中，可为用户提供个人远程控制设备，在它们的指令传递中嵌有用户身份数据，例如在共同未决的具有共同所有权的美国专利申请13/225,635“ControllingDevicesUsedtoProvideanAdaptiveUserInterface”中所描述的，其在这里通过参考而被全文引入，在这种情况下，用户存在报告事件可以通过远程控制接口420来产生。在其它实施方式中，例如在自动的无人管理的断电应用的领域中所提出的例如红外体加热感应的技术可被进一步调整以用于在这里描述的目的。其它的活动事件源还可以根据需要包括从其它的家庭设备接收的数据，例如装备有占用传感器的安保、灯光或HVAC控制系统；入口相机；车道传感器等。
统计集成模块438可以经调整以将在如上所述的事件处理步骤中传输至其的数据报告至例如托管在因特网连接的服务器设备128上的集中服务，用以聚集并分析用户观看习惯和偏好。取决于特定的实施方式，这样的报告可以基于逐事件来执行，或者可替换地，数据可以累积并以预定时间间隔报告或者仅在收到服务器设备的请求时执行。
例如，在说明性的实施方式中，报告至统计收集模块438的数据可被格式化为用于上传至服务器设备128的数个不同的事件记录种类和类型。示例性的记录种类可以包含用户事件，例如在图5的步骤530中所报告的；设备事件，例如在图5的步骤548中所记录的；和内容事件，例如在图5的步骤544中所报告的。将会理解的是，不同的或其它的事件种类在可替换的实施方式中是恰当的，并且据此，上文的分类仅通过示例性的而非限制性的方式提出。
参见下文的表1，用户事件记录类型可以包括用户加入(即到达)观看区域，以及从观看区域删除用户(即离开)。如所示的，这些记录类型中的每一种均可以包括时间标记数据和用户ID。所描述的时间标记适用于其中服务器设备已经注意到报告系统的地理位置的应用，例如作为通过URL解码等的初始建立步骤的结果。在不是这种情况的实施方式中，时间标记域(field)根据需要可以包括其它的数据，例如时区、邮编等。用户身份可以是任意项目的数据，其用于唯一地确认个人用户从而帮助在服务器128观察习惯和偏好分析。例如，对于特定的实施方式，根据需要，用户ID可以包含在建立/构建过程中详细指定的身份；在每个不同的用户被初始检测的时候，由系统指定的随机数字；由面部或声音识别算法产生的散列值；分配给智能电话或平板电脑的MAC地址或序列号；等等。
事件类型 时间标记 用户ID
用户：加入 年：月：日：时：分：秒 XXXXXXXX
用户：删除 年：月：日：时：分：秒 XXXXXXXX
表1：用户事件记录
现在参考表2，设备事件记录可以包含表示所报告的事件、所发出的功能指令和/或通过不同的控制设备执行的操作的记录类型，如在图5的步骤548中所报告的。这样的事件可以包括但不限于设备开启/关闭指令，播放控制指令等，这是完全理解用户观看习惯和偏好所必需的。例如，除了捕捉DVR设备的电源状态外，快进指令也可被录入，从而监控商用跳跃活性。如所示的，每个设备事件记录类型还可以包括如上所述的时间标记域以及设备类型/ID域，所述设备类型/ID域包含设备类型指示器(例如STB/DVR、DVD、因特网流等)以及独特的ID或子类型数值，其可以通过事件监控和/或统计收集模块分配从而区别相同类型的多个设备，例如具有多个DVD播放器的家庭，或者具有电缆和卫星STB的家庭。
事件类型 时间标记 设备类型/ID
设备：开 年：月：日：时：分：秒 tt：xxxx
设备：关 年：月：日：时：分：秒 tt：xxxxx
设备：播放 年：月：日：时：分：秒 tt：xxxxx
设备：停止 年：月：日：时：分：秒 tt：xxxxx
设备：暂停 年：月：日：时：分：秒 tt：xxxxx
设备：快进 年：月：日：时：分：秒 tt：xxxxx
等等
表2：设备事件记录
现在参考图3，内容事件记录类型可以包括但不限于频道或轨道变化信息记录类型；标题信息记录类型，例如包含由程序导向数据、DVD或点播视频标题信息等重新获得的显示标题；元数据记录类型，包含由DVD或CD、视频流服务等获得的元数据数值；内容样本记录类型，包含音频和/或视频内容的样本剪辑，用于与内容鉴别数据库进行对比；或者在替换实施方式中，可以是在确定特定内容流的身份中使用的任何其它数据。每种记录类型均可以包含如上所述的时间标记和源设备域，以及包含身份数据的域，其根据需要可以包含数字、文本或者二进制数据。将会理解的是，其它的记录和/或域类型可以根据需要在其它的实施方式中使用，从而能够可靠地确认媒体内容流。
事件类型 时间标记 源设备 身份数据
内容：频道/轨道 年：月：日：时：分：秒 tt：xxxx xxxxx
内容：标题 年：月：日：时：分：秒 tt：xxxx {文本}
内容：元数据 年：月：日：时：分：秒 tt：xxxx {文本}
内容：样本 年：月：日：时：分：秒 tt：xxxx {二进制数据}
等
表3：内容事件记录
将会理解的是，虽然表1至3的示例性的数据结构在这里使用表格的形式给出以便于参考，但是实际上，其在特定的实施方式中根据需要可以使用任何方便的数据表示法以不同的形式来实施，例如结构化的数据库、XML文件、基于云的服务等。此外，将会理解的是，虽然所描述实施方式的统计收集和记录功能作为示例性设备200的程序、即软件模块438的一部分来实施，但是在其它实施方式中，这种功能可以在不同的位置提供，例如在形成娱乐系统一部分的一个其它设备中，在本地PC中，在远程服务器或者电缆系统头端等，或者在特定的设备程序能够报告用户事件的任意其它方便位置。
虽然已经详细描述了不同的概念，但是本领域技术人员将会理解的是，对于这些概念的不同的改进和替代可以基于本文的总体教导而发展。例如，在替换实施方式中，如上所述方法的步骤可以在其它各种设备中根据需要而有利地执行，例如AV接收器或电缆/卫星STB。此外，在例如在图1或2中所描述的互联系统中，特别是这样的互联为数字的情况中，将会理解的是，所述方法的不同步骤可以通过不同的设备来执行。示例性的担不是限制性的，图像分析和/或语音识别可以通过智能TV设备、本地连接个人电脑、家庭安全系统等或者甚至是“在云中”、即通过基于因特网的服务来执行，结果报告至存在于所连接的AV接收器或STB中的用户统计收集模块和/或事件处理模块。
此外，虽然在功能模块内容中描述并使用框图形式描述，但是可以理解的是，除非另有所指，一个或多个所描述的功能和/或特征可被整合在单独的物理设备和/或软件模块中，或者一个或多个功能和/或特征可在单独的物理设备或软件模块中执行。还将理解的是，每个模块的实际执行的详细讨论对于本发明的理解来说并不是必须的。与之相反地，鉴于在这里公开了系统中不同功能模块的特性、功能和内部关系，这样的模块的实际执行将完全处于工程师常规技能范围内。因此，应有常规技能的本领域技术人员将能够实践权利要求陈述的发明，而不需要进行不恰当的实验。还将理解的是，所公开的特定的概念仅为说明性的，不会限定本发明的范围，本发明的范围由所附权利要求及其任何等价形式的所有方面来确定。
在本文中所引用的所有专利在这里均通过参考而被全文引入。

Claims (21)

1.用于控制由多个组件设备组成的家庭娱乐系统中至少一个组件设备的方法，包含：
通过至少一个图像感应接口和声音感应接口接收事件数据；
确定所接收的事件数据是否指示准备事件；和
当所接收的事件数据被确定为指示准备事件的时候，执行预期动作，由此家庭娱乐系统的多个组件设备中的至少一个为期望事件做好准备。
2.如权利要求1所述的方法，其中家庭娱乐系统的多个组件设备中的至少一个包含远程控制设备，并且所执行的预期动作包含将远程控制设备置于这样的状态，其中所述远程控制设备为期望事件做好准备。
3.如权利要求1所述的方法，其中所执行的预期动作包含预处理图像检测模块和声音检测模块中的至少一个，从而帮助由图像检测模块和声音检测模块使用的一个或多个模板确定随后由图像感应接口和声音感应接口之一接收的事件数据是否为期望事件的指示。
4.如权利要求1所述的方法，包含确定期望事件是否发生，并且当期望事件被确定为未在预定时间内发生的时候，执行恢复动作，由此基于将多个组件设备中的至少一个被置于这样的状态，其中多个组件设备中的至少一个不再为期望事件做好准备。
5.如权利要求1所述的方法，包含确定期望事件是否发生，并且当期望事件被确定为已经发生的时候，执行一个指令动作，由此导致多个组件设备中的至少一个执行操作功能。
6.如权利要求5所述的方法，其中期望事件包含在与家庭娱乐系统相关的观看区域内所感知的观看者数量的变化。
7.如权利要求6所述的方法，其中多个组件设备中的至少一个包含媒体播放设备，并且所执行的指令动作包含致使媒体播放设备执行暂停操作功能。
8.如权利要求5所述的方法，其中多个组件设备中的至少一个包含声音产生设备，并且所执行的指令动作包含致使所述声音产生设备执行音量控制操作功能。
9.如权利要求1所述的方法，其中多个组件设备中的至少一个包含显示设备，并且所执行的期望动作包含致使菜单显示在显示设备上。
10.用于控制由多个组件设备构成的家庭娱乐系统中的至少一个组件设备的方法，包含：
通过图像感应接口、声音感应接口和网络设备感应接口中的至少一个接收事件数据；
由所接收的事件数据确定在与家庭娱乐系统相关的第一观看区域中的观看者的数量和身份中的至少一个；和
当根据所接收的事件数据确定在与家庭娱乐系统相关的第一观看区域中的观看者数量和身份中的至少一个已经变化的时候，执行指令动作，由此导致多个组件设备中的至少一个执行操作功能。
11.如权利要求10所述的方法，其中多个组件设备中的至少一个包含媒体播放设备，并且所执行的指令动作包含致使媒体播放设备执行暂停操作功能，从而阻止媒体在与家庭娱乐系统相关的第一观察区域中的播放。
12.如权利要求11所述的方法，包含由所接收的事件数据确定在与家庭娱乐系统相关的第二观看区域中的观看者的数量和身份中的至少一个，并且当由所接收的数据确定与家庭娱乐系统相关的第二观看区域中的观看者的数量和身份中的至少一个已经变化的时候，执行指令动作，由此导致多个组件设备中的至少一个执行操作功能。
13.如权利要求12所述的方法，其中多个组件设备中的至少一个包含媒体播放设备，并且所执行的指令动作包含致使媒体播放设备执行操作功能以继续在与家庭娱乐系统相关的第二观看区域中播放在与家庭娱乐系统相关的第一观看区域中所暂停的媒体。
14.用于收集指示由多个组件设备组成的家庭娱乐系统中的至少一个组件设备的使用的信息的方法，包含：
通过图像感应接口、声音感应接口和网络设备感应接口中的至少一个接收事件数据；
由所接收的事件数据确定在与家庭娱乐系统相关的观看区域中的观看者数量和身份中的至少一个；和
致使事件记录形成，其中存储的数据指示事件记录形成的时间，家庭娱乐系统的多个组件设备中的至少一个在此时的状态，以及在此刻确定位于与家庭娱乐系统相关的观看区域中的观看者的数量和身份中的至少一个。
15.如权利要求14所述的方法，包含致使事件记录响应于经发送以改变家庭娱乐系统的多个组件设备中的至少一个的状态的指令而形成。
16.如权利要求14所述的方法，包含致使事件记录响应于由与家庭娱乐系统相连的系统服务器发送的请求而形成。
17.如权利要求14所述的方法，包含致使事件记录响应于经确定位于与家庭娱乐系统相关的观看区域中的观看者的数量和身份中的至少一个的变化而形成。
18.如权利要求14所述的方法，包含致使事件记录以预定的时间间隔产生。
19.如权利要求14所述的方法，其中指示家庭娱乐系统中多个组件设备中的至少一个的状态的数据包含指示通过多个组件设备中的至少一个来传送的媒体内容的数据。
20.如权利要求19所述的方法，其中指示通过多个组件设备中的至少一个来传送的媒体内容的数据包含媒体内容的取样。
21.如权利要求14所述的方法，包含执行指令动作，由此导致多个组件设备中的至少一个执行操作功能，此时确定位于与家庭娱乐系统相关的观看区域中的观看者的数量和身份中的至少一个已经变化。
CN201480007203.1A 2013-02-04 2014-01-15 用户监控和目的确定的系统和方法 Active CN105122177B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/758,307 2013-02-04
US13/758,307 US9706252B2 (en) 2013-02-04 2013-02-04 System and method for user monitoring and intent determination
PCT/US2014/011573 WO2014120438A1 (en) 2013-02-04 2014-01-15 System and method for user monitoring and intent determination

Publications (2)

Publication Number Publication Date
CN105122177A true CN105122177A (zh) 2015-12-02
CN105122177B CN105122177B (zh) 2018-03-20

Family

ID=51260466

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480007203.1A Active CN105122177B (zh) 2013-02-04 2014-01-15 用户监控和目的确定的系统和方法

Country Status (5)

Country Link
US (6) US9706252B2 (zh)
EP (1) EP2951662A4 (zh)
CN (1) CN105122177B (zh)
BR (1) BR112015017883A2 (zh)
WO (1) WO2014120438A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113031455A (zh) * 2019-12-25 2021-06-25 中国移动通信集团终端有限公司 一种控制方法、装置、设备及计算机存储介质

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10863234B2 (en) 2009-03-03 2020-12-08 Mobilitie, Llc System and method for secure appliance operation
US9706252B2 (en) * 2013-02-04 2017-07-11 Universal Electronics Inc. System and method for user monitoring and intent determination
US9891600B2 (en) * 2013-03-11 2018-02-13 Honeywell International Inc. Upgradable home awareness system
US20160080806A1 (en) * 2013-04-26 2016-03-17 Sharp Corporation Device state checking system, device state checking method, server device, communication terminal device, and computer program
US9472205B2 (en) * 2013-05-06 2016-10-18 Honeywell International Inc. Device voice recognition systems and methods
US9681189B2 (en) * 2013-06-20 2017-06-13 Microsoft Technology Licensing, Llc Paired devices
CN104349208A (zh) * 2013-08-09 2015-02-11 中兴通讯股份有限公司 消息处理方法、装置、网关、机顶盒及网络电视系统
US9696701B2 (en) * 2013-12-07 2017-07-04 Svv Technology Innovations, Inc. Radio frequency occupancy sensing load control
US20150215564A1 (en) * 2014-01-30 2015-07-30 Echostar Uk Holdings Limited Methods and apparatus for creation of a reference time index for audio/video programming
US9615122B2 (en) 2014-01-30 2017-04-04 Echostar Technologies L.L.C. Methods and apparatus to synchronize second screen content with audio/video programming using closed captioning data
US9847018B2 (en) * 2014-06-20 2017-12-19 Ray Enterprises, LLC System and method for applying over the air updates to a universal remote control device
US11973813B2 (en) 2014-10-15 2024-04-30 Benjamin Nowak Systems and methods for multiple device control and content curation
US9704531B2 (en) * 2014-10-15 2017-07-11 Benjamin Nowak Creating composition of content captured using plurality of electronic devices
US10362075B2 (en) 2015-10-14 2019-07-23 Benjamin Nowak Presenting content captured by a plurality of electronic devices
US11575534B2 (en) 2015-02-10 2023-02-07 Universal Electronics Inc. System and method for aggregating and analyzing the status of a system
WO2017020954A1 (en) * 2015-08-06 2017-02-09 Arcelik Anonim Sirketi Multi-point motion sensing and user monitoring system for an image display device
US11070864B2 (en) * 2015-10-14 2021-07-20 Sony Group Corporation Auto pause when disturbed
US9892632B1 (en) * 2016-04-18 2018-02-13 Google Llc Configuring universal remote control device for appliances based on correlation of received infrared signals and detected appliance events
US20180018965A1 (en) * 2016-07-12 2018-01-18 Bose Corporation Combining Gesture and Voice User Interfaces
WO2018125032A1 (en) * 2016-12-27 2018-07-05 Rovi Guides, Inc. Systems and methods for dynamically adjusting media output based on presence detection of individuals
US10614804B2 (en) 2017-01-24 2020-04-07 Honeywell International Inc. Voice control of integrated room automation system
US10121494B1 (en) * 2017-03-30 2018-11-06 Amazon Technologies, Inc. User presence detection
US10984329B2 (en) 2017-06-14 2021-04-20 Ademco Inc. Voice activated virtual assistant with a fused response
US10200733B1 (en) 2018-03-09 2019-02-05 Krishna Adusumilli Automatic input selection
US20190332848A1 (en) 2018-04-27 2019-10-31 Honeywell International Inc. Facial enrollment and recognition system
US20190390866A1 (en) 2018-06-22 2019-12-26 Honeywell International Inc. Building management system with natural language interface
US10897647B1 (en) * 2018-07-25 2021-01-19 Imdb.Com, Inc. Ascertaining audience reactions for a media item
US10798572B2 (en) * 2018-10-25 2020-10-06 Ioxt, Llc System and method for secure appliance operation
US11418502B2 (en) * 2018-11-20 2022-08-16 International Business Machines Corporation Input entry based on user identity validation

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070271518A1 (en) * 2006-05-16 2007-11-22 Bellsouth Intellectual Property Corporation Methods, Apparatus and Computer Program Products for Audience-Adaptive Control of Content Presentation Based on Sensed Audience Attentiveness
US20100315549A1 (en) * 2008-08-15 2010-12-16 At&T Labs, Inc. System and method for adaptive content rendition
US20120060176A1 (en) * 2010-09-08 2012-03-08 Chai Crx K Smart media selection based on viewer user presence

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4931865A (en) 1988-08-24 1990-06-05 Sebastiano Scarampi Apparatus and methods for monitoring television viewers
US5235414A (en) 1990-05-21 1993-08-10 Control Data Corporation Non-obtrusive programming monitor
US6233734B1 (en) * 1995-01-05 2001-05-15 Videoguide, Inc. System and method for controlling the broadcast and recording of television programs and for distributing information to be displayed on a television screen
US6130726A (en) 1997-03-24 2000-10-10 Evolve Products, Inc. Program guide on a remote control display
US7185355B1 (en) 1998-03-04 2007-02-27 United Video Properties, Inc. Program guide system with preference profiles
US20050210101A1 (en) * 1999-03-04 2005-09-22 Universal Electronics Inc. System and method for providing content, management, and interactivity for client devices
US6990453B2 (en) 2000-07-31 2006-01-24 Landmark Digital Services Llc System and methods for recognizing sound and music signals in high noise and distortion
CN101715109A (zh) * 2000-10-11 2010-05-26 联合视频制品公司 提供数据存储到点播媒体传递系统中服务器上的系统和方法
US20020174426A1 (en) 2001-05-15 2002-11-21 Koninklijke Philips Electronics N.V Method and apparatus for activating a media player based on user behavior
US7536704B2 (en) 2001-10-05 2009-05-19 Opentv, Inc. Method and apparatus automatic pause and resume of playback for a popup on interactive TV
CN1685735A (zh) 2002-04-22 2005-10-19 尼尔逊媒介研究股份有限公司 采集与媒体显示相关的观众信息的方法和装置
DK1504445T3 (da) 2002-04-25 2008-12-01 Landmark Digital Services Llc Robust og invariant lydmönster-matching
US20040003392A1 (en) * 2002-06-26 2004-01-01 Koninklijke Philips Electronics N.V. Method and apparatus for finding and updating user group preferences in an entertainment system
US20050015816A1 (en) * 2002-10-29 2005-01-20 Actv, Inc System and method of providing triggered event commands via digital program insertion splicing
JP4933899B2 (ja) * 2004-02-19 2012-05-16 ランドマーク、ディジタル、サーヴィセズ、エルエルシー 放送源の識別のための方法および装置
US7420956B2 (en) * 2004-04-16 2008-09-02 Broadcom Corporation Distributed storage and aggregation of multimedia information via a broadband access gateway
US9584868B2 (en) * 2004-07-30 2017-02-28 Broadband Itv, Inc. Dynamic adjustment of electronic program guide displays based on viewer preferences for minimizing navigation in VOD program selection
US20090285545A1 (en) 2004-12-07 2009-11-19 Koninklijke Philips Electronics, N.V. Intelligent pause button
US20080056222A1 (en) * 2006-08-29 2008-03-06 Nigel Waites Wireless router connection indicator
JP4898581B2 (ja) * 2007-07-12 2012-03-14 株式会社日立製作所 ユーザインターフェース方法、表示装置、および、ユーザインターフェースシステム
US8539357B2 (en) 2007-11-21 2013-09-17 Qualcomm Incorporated Media preferences
US8875188B2 (en) * 2008-02-05 2014-10-28 Stratosaudio, Inc. Systems, methods, and devices for scanning broadcasts
EP2304948A1 (en) * 2008-06-26 2011-04-06 Honeybee TV Israel Ltd. Methods and systems for managing viewing at client terminals
US8793727B2 (en) 2009-12-10 2014-07-29 Echostar Ukraine, L.L.C. System and method for selecting audio/video content for presentation to a user in response to monitored user activity
GB2476668B (en) * 2009-12-31 2015-06-17 Sony Europe Ltd Audiovisual multi-room Support
US20110289067A1 (en) * 2010-05-18 2011-11-24 Rovi Technologies Corporation User interface for content browsing and selection in a search portal of a content system
US8341669B2 (en) 2010-05-26 2012-12-25 United Video Properties, Inc. Systems and methods for controlling an electronic device
KR101951500B1 (ko) * 2011-08-03 2019-02-22 인텐트 아이큐, 엘엘씨 복수의 온라인 장치와 연결된 프로필에 근거한 텔레비전 표적 광고
US20130061258A1 (en) 2011-09-02 2013-03-07 Sony Corporation Personalized television viewing mode adjustments responsive to facial recognition
US20130219417A1 (en) * 2012-02-16 2013-08-22 Comcast Cable Communications, Llc Automated Personalization
US9706252B2 (en) * 2013-02-04 2017-07-11 Universal Electronics Inc. System and method for user monitoring and intent determination

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070271518A1 (en) * 2006-05-16 2007-11-22 Bellsouth Intellectual Property Corporation Methods, Apparatus and Computer Program Products for Audience-Adaptive Control of Content Presentation Based on Sensed Audience Attentiveness
US20100315549A1 (en) * 2008-08-15 2010-12-16 At&T Labs, Inc. System and method for adaptive content rendition
US20120060176A1 (en) * 2010-09-08 2012-03-08 Chai Crx K Smart media selection based on viewer user presence

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113031455A (zh) * 2019-12-25 2021-06-25 中国移动通信集团终端有限公司 一种控制方法、装置、设备及计算机存储介质

Also Published As

Publication number Publication date
US20230007341A1 (en) 2023-01-05
US9706252B2 (en) 2017-07-11
US11949947B2 (en) 2024-04-02
US10820047B2 (en) 2020-10-27
US20200413133A1 (en) 2020-12-31
WO2014120438A1 (en) 2014-08-07
EP2951662A1 (en) 2015-12-09
US11477524B2 (en) 2022-10-18
US20140366050A1 (en) 2014-12-11
BR112015017883A2 (pt) 2017-07-11
EP2951662A4 (en) 2016-05-25
US20140223465A1 (en) 2014-08-07
US20140223463A1 (en) 2014-08-07
CN105122177B (zh) 2018-03-20
US20240196052A1 (en) 2024-06-13

Similar Documents

Publication Publication Date Title
CN105122177A (zh) 用户监控和目的确定的系统和方法
US11990126B2 (en) Voice-controlled media play in smart media environment
KR102114003B1 (ko) 음성 사용자 인터페이스들의 시각적 어포던스를 위한 led 설계 언어
US9560407B2 (en) Systems and methods for managing pairing of remote control devices with a plurality of media content processing devices
US9137570B2 (en) System and method for user monitoring and intent determination
WO2020076365A1 (en) Display assistant device for home monitoring
EP3847822A1 (en) Display assistant device for home monitoring
CN105474652B (zh) 用于用户监控和意图判断的系统和方法
CN111263213B (zh) 一种跟随视听传输的方法以及能够实施该方法的设备
BR112015032568B1 (pt) Método para controlar pelo menos um dispositivo componente em um sistema de entreterimento doméstico

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant