CN103237248B - 基于媒体反应来控制媒体节目 - Google Patents

基于媒体反应来控制媒体节目 Download PDF

Info

Publication number
CN103237248B
CN103237248B CN201310113825.XA CN201310113825A CN103237248B CN 103237248 B CN103237248 B CN 103237248B CN 201310113825 A CN201310113825 A CN 201310113825A CN 103237248 B CN103237248 B CN 103237248B
Authority
CN
China
Prior art keywords
media
media program
people
presentation
reaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310113825.XA
Other languages
English (en)
Other versions
CN103237248A (zh
Inventor
G·J·胡尔藤
U·A·门德罗
K·J·克鲁姆
M·J·康拉德
D·B·雷明顿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN103237248A publication Critical patent/CN103237248A/zh
Application granted granted Critical
Publication of CN103237248B publication Critical patent/CN103237248B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk

Abstract

基于媒体反应来控制媒体节目。本文描述了用于基于媒体反应来控制媒体节目的技术和装置。在一些实施例中,所述技术在用户离开房间时、当房间中的用户正在聊天或其他地没有关注节目时、或者当儿童走进房间时暂停、静音、或停止媒体节目。

Description

基于媒体反应来控制媒体节目
技术领域
本发明涉及基于媒体反应来控制媒体节目。
背景技术
目前,欣赏媒体节目的用户经常期望在节目呈现期间控制那些媒体节目,诸如暂停、静音或停止呈现。例如,用户可能希望在他或她在观看电视节目时起来拿零食的时候停止电视节目。为此,传统的控制器,诸如遥控器,可能需要用户找到遥控器,找到遥控器上的停止按钮,按下停止按钮,并且一旦他或她带着零食返回,要再次找到遥控器,找到播放按钮,并按下播放按钮。
或者,用户可能正在听音乐节目,而和该用户一起听的朋友可能在音乐节目期间开始与该用户交谈。在这种情况下,用户可能希望暂停、减小音量、或将音乐节目静音,直到讨论结束。传统方法准许用户通过用户的有意的、主动的控制来暂停、减少音量、或将节目静音,所述控制诸如通过立体声放大器上的音量转盘或通过遥控器。然而,通过这些方法控制音乐节目可能很慢,从而使得用户错过朋友所说的话,或者其他地没有提供好的用户体验。
而且,用户可能有很小的儿子或女儿,他们出人意料地踏入房间,房间中正在播放用户不希望儿子或女儿听到或看到的歌曲或电影。在这种情况下,用户可能尝试停止媒体节目,但是对控制的这种尝试可能不尽如人意地慢。
这些仅是用于控制媒体节目的传统方法可能无法提供良好用户体验的方式的若干示例。
发明内容
本文描述了用于基于媒体反应来控制媒体节目的技术和装置。在一些实施例中,所述技术在用户离开房间时、当房间中的用户正在交谈或其他地没有关注节目时、或者当儿童走进房间时暂停、静音、或停止媒体节目。
提供本发明内容以介绍将在下文的具体实施方式中进一步描述的用于基于媒体反应来控制媒体节目的简化概念。本发明内容并不旨在标识所要求保护的主题的必要特征,也不旨在用于帮助确定所要求保护的主题的范围。
附图说明
参考以下附图描述了用于基于媒体反应来控制媒体节目的技术和装置的实施例。在各附图中,使用相同的标号来指代相同的特征和组件:
图1示出了可在其中实现用于基于媒体反应来控制媒体节目的技术以及其他技术的示例环境。
图2是对图1的观众而言在本地的示例计算设备的图示。
图3是对图1的观众而言在远程的示例远程计算设备的图示。
图4示出用于基于被动传感器数据来确定媒体反应的示例方法。
图5示出媒体反应的基于时间的图,所述媒体反应是针对一个用户以及针对媒体节目呈现期间的40个时间段的兴趣水平。
图6示出用于构造反应历史的示例方法。
图7示出用于基于媒体反应来控制媒体节目的示例方法。
图8示出媒体节目的场景以及观看媒体节目的人的媒体反应。
图9示出用于基于人的身份或人口统计(demographic)来控制媒体节目的示例方法。
图10示出用于基于多个人的媒体反应来控制媒体节目的示例方法。
图11示出了可在其中实现用于基于媒体反应来控制媒体节目的技术以及其他技术的示例设备。
具体实施方式
概览
本文描述了用于基于媒体反应来控制媒体节目的技术和装置。例如,考虑如下情况:Bob和Janet两个人正在观看电视剧。假定Janet转向Bob来交谈。在此时,或响应于Bob转向Janet来对她回应,所述技术暂停该节目。这两个人均没有去寻找、找到、或者选择遥控器来暂停节目。而且,假定Bob或者Bob和Janet把头转回朝向电视。此时所述技术恢复节目。再次注意,这两个人均不需要使用遥控器来使节目恢复。
还考虑如下情况:电视剧对儿童不宜。当Bob和Janet不希望他们的孩子看到这个节目时,他们在孩子已经去睡觉了之后正在观看该节目。然而,假定,他们的六岁大的女儿Abigail从床上起来并走进Bob和Janet正在观看电视剧的房间。不是去寻找、找到并快速按下遥控器上的停止按钮,相反,Abigail一走进房间所述技术就使屏幕黑掉并使音频静音。当Abigail离开房间时,所述技术可等待一个短时间段,将电视剧倒回到该剧被黑屏并静音的时刻或者该时刻之前,并恢复该剧。
这些仅仅是所述技术和/或装置可如何基于媒体反应来控制媒体节目的两个示例,然而此处构想许多其他示例。在上下文允许时,在本文中技术和/或装置被分开称呼或被统称为“技术”。本文现在转向可在其中具体化所述技术的示例环境,随后转向能够(但不需要)与所述技术一起工作的各示例方法。这些各个方法中的一些包括用于感测并确定对媒体的反应以及为用户构造反应历史的方法。在这些各示例方法后,本文转向用于基于媒体反应来控制媒体节目的示例方法。
示例环境
图1是用于接收传感器数据并基于此传感器数据来确定媒体反应的示例环境100的图示。这些媒体反应可被用于控制媒体节目,以及其他用途。所述技术可单独地或与其他信息(诸如人口统计、反应历史、以及关于人和媒体节目或其一部分的信息)结合地使用这些媒体反应。
环境100包括媒体呈现设备102、观众感测设备104、状态模块106、兴趣模块108、接口模块110、以及用户接口112。
媒体呈现设备102向具有一个或多个用户116的观众114呈现媒体节目。媒体节目可单独或组合地包括电视节目、电影、音乐视频、视频剪辑、广告、博客、网页、电子书、计算机游戏、歌曲、歌曲专辑或节目、幻灯片或其他图片布置、推特(tweet)、或其他音频和/或视频媒体。观众114可包括位于以下位置的一个或多个用户116:所述位置允许媒体呈现设备102所呈现的媒体节目的消耗以及观众感测设备104所进行的测量,无论是分开地或在一群观众114内。在观众114中示出三个用户:用户116-1、用户116-2、和用户116-3。尽管只示出了三个用户,然而可以在许多位置并且对于数十、数百、数千或者甚至数百万用户来感测传感器数据并确定媒体反应。
观众感测设备104能够感测观众114并向状态模块106和/或兴趣模块108提供观众114的传感器数据(传感器数据118被示出为经由箭头提供)。所感测的数据可以是被动地、主动地和/或响应于明确的请求而感测的。
通过在测量用户时不需要那些用户的主动参与,被动感测的数据是被动的。主动感测的数据包括观众中的用户所记录的数据(诸如手写日志)以及通过观众中的用户所穿戴的生物测定传感器从用户感测的数据。响应于明确请求所感测的传感器数据可以是主动地或被动地感测的。一个示例是其中在控制媒体节目之前或期间,所述技术请求用户执行特定动作来产生特定结果,诸如如果用户希望所述技术停止或暂停媒体节目或将媒体节目静音则举手。在这种情况下,用户在表达举手的反应,然而这可以通过不要求用户主动地参与反应的测量来被动地感测。所述技术以如下所述的若干方式感测此举起的手。
传感器数据可包括使用观众感测设备104所发射的光或所发送的其他信号而感测到的数据,诸如用将所发射的红外光从用户或观众空间(例如,沙发、墙壁等)弹回并感测返回的光的红外传感器。下面更详细地提供测量用户的传感器数据以及可测量传感器数据的方式的示例。
观众感测设备104在向状态模块106和/或兴趣模块108提供传感器数据之前可以处理或可以不处理该传感器数据。因此,传感器数据可以是或可包括原始数据或经处理的数据,诸如:RGB(红、绿、蓝)帧;红外数据帧;深度数据;心率;呼吸率;用户的头部定向或移动(例如,三维坐标x、y、z和三个角度俯仰(pitch)、倾斜(tilt)和偏航(yaw));面部(例如,眼睛、鼻子和嘴)定向、移动或遮挡;骨架的定向、移动或遮挡;音频,其可包括指示足以确定音频源自哪个用户的定向或直接指示哪个用户或说了什么话(如果有人说话)的信息;足以确定或指示用户116之一的存在和位置的热读数;以及距观众感测设备104或媒体呈现设备102的距离。在一些情况下,观众感测设备104包括红外传感器(网络摄像头、Kinect相机)、立体声话筒或有向音频话筒、以及热读数计(加上红外传感器),然而也可以使用或者转而使用其他感测装置。
状态模块106接收传感器数据并基于所述传感器数据来确定观众114中的用户116的状态120(在箭头处示出)。状态包括:例如:悲伤、讲话、恶心、害怕、微笑、皱眉、平静、惊讶、生气、大笑、尖叫、拍手、摇手、欢呼、移开目光、看向、倾斜远离、向……倾斜、睡着、刚刚到达、或离开,仅举数例。
讲话状态可以是指示用户正在讲话的一般性状态,然而它还可包括基于语音内容的子类别,诸如讲关于媒体节目的话(相关讲话)或讲与媒体节目不相关的话(无关讲话)。状态模块106可通过语音识别来确定哪个讲话类别。
基于传感器数据,状态模块106还可确定或转而确定用户的数量、用户的身份和/或人口统计数据(在122处示出)、或呈现期间的参与(engagement)(在124处示出)。身份指示观众114中的用户116之一的唯一身份,诸如Susan Brown。人口统计数据将用户116之一分类,诸如5英尺4英寸高、小孩、以及男性或女性。参与指示用户是否可能正在关注媒体节目,诸如基于该用户的存在或头部定向。在一些情况下,参与可以由状态模块106用与用于确定状态的传感器数据相比具有较低分辨率或经较少处理的传感器数据来确定。即便如此,参与在测量观众时仍可有用,无论是其自身还是用于使用兴趣模块108来确定用户的兴趣。
兴趣模块108基于传感器数据118和/或用户的参与或状态(在箭头处用参与/状态126示出)和关于媒体节目的信息(在箭头处用媒体类型128示出)来确定用户对该媒体节目的兴趣水平130(在箭头处示出)。兴趣模块108可确定例如旨在作为严肃正剧的媒体节目的多个大笑状态指示低兴趣水平,反过来,对于旨在作为喜剧的媒体节目,多个大笑状态指示高兴趣水平。
如图1中所示,状态模块106和/或兴趣模块108提供人口统计/身份122以及以下媒体反应中的一个或多个:参与124、状态120、或兴趣水平130,均在图1中的箭头处示出。基于这些媒体反应中的一个或多个,状态模块106和/或兴趣模块108还可提供另一种类型的媒体反应,即对媒体节目的总媒体反应类型,诸如评级(例如,竖起拇指或三星)。然而,在一些情况下,转而由接口模块110来接收媒体反应并确定总媒体反应。
状态模块106和兴趣模块108可对观众114而言在本地,并且从而对媒体呈现设备102和观众感测设备104而言在本地,然而不要求如此。其中状态模块106和兴趣模块108对观众114而言在本地的示例实施例在图2中示出。然而,在一些情况下,状态模块106和/或兴趣模块108对观众114而言在远程,这在图3中示出。
接口模块110接收媒体反应和人口统计/身份信息,并确定或接收关于所述反应与哪个媒体节目或其哪个部分有关的某种指示。接口模块110可通过用户接口112呈现对媒体节目的媒体反应132或致使所述对媒体节目的媒体反应132被呈现,尽管不要求如此。
接口模块110可以相对观众114而言位于本地,诸如在一个用户正在观看他或她自己的媒体反应或家庭成员的媒体反应的情况下。然而,在许多情况下,接口模块110从远程源接收媒体反应。
注意,传感器数据118可包括用户正在对媒体作出反应的上下文或者对其请求对媒体的评级或推荐的用户的当前上下文。从而,观众感测设备104可感测第二个人正在房间中或者以其他方式在物理上在第一个人附近,这可以是第一个人的上下文。还可以用下面图2中描述的其他方式来确定上下文。
图2是对观众114而言在本地的示例计算设备202的图示。计算设备202包括,或能访问,媒体呈现设备102、观众感测设备104、一个或多个处理器204、以及计算机可读存储介质(“CRM”)206。
CRM206包括操作系统208、状态模块106、兴趣模块108、媒体节目210(媒体节目210中的每个均可包括或具有相关联的节目信息212和部分214)、接口模块110、用户接口112、历史模块216、反应历史218、以及控制模块220。
媒体节目210中的每一个可具有、包括节目信息212和部分214或与所述节目信息212和部分214相关联。节目信息212可指示节目的名称、标题、剧集、作者或艺术家、类型,以及其他信息,包括与每个媒体节目210内的各部分有关的信息。从而,节目信息212可指示媒体节目210之一是音乐视频、包括重复4次的和声部分、包括4个诗节(verse)部分、包括基于歌曲期间的每个视觉呈现的部分,诸如艺术家唱歌、伴唱歌手跳舞、音乐视频的名称、艺术家、制造年份、分辨率和格式化数据等等。
媒体节目210之一的各部分214构成该节目,每个部分可具有关于每个部分的元数据或其他信息(例如,对于特定部分但不是同一电影的其他部分的“R”评级)。这些部分可表示媒体节目中的特定时间范围,诸如2秒、5秒或15秒时间段。这些部分转而可表示媒体节目中的内聚部分,这可基于内聚部分中的内容,诸如在类似无线电的节目中播放的完整歌曲、体育赛事中的控球或玩耍、剧院演出中的动作、广告块中的广告、或电影中的场景,以上仅举数例。
历史模块216包括反应历史218或能够访问反应历史218。历史模块216可基于用户(或如下面指出的其他人)对媒体节目的正在进行的反应来构造并更新反应历史218。在一些情况下,历史模块216确定用户的各上下文,然而这转而可以从其他实体确定并接收。从而,在一些情况下,历史模块216确定用户对媒体节目的反应或者对媒体节目的评级或推荐的请求期间的时间、场所、该场所的天气等等。历史模块216可基于用户的当前上下文和反应历史218来确定媒体的评级和/或推荐。如同本文中别处所指出的,反应历史218可与媒体反应一起使用作为用于控制媒体节目的呈现的基础。
控制模块220能够基于媒体反应来控制媒体节目的呈现。控制模块220可基于媒体反应来实施控制,例如所述媒体反应指示像“人在场并具有一身份或人口统计”这样少的信息。从而,控制模块220可基于指示人已走进房间并且该人为儿童的媒体反应来控制媒体节目。或者,媒体模块220可基于该人的身份来将电影的正在播放的示出具有断腿的马的场景模糊化,其中该人的身份通过该人的反应历史218来指示:该人有可能对示出处于不幸中的动物的场景敏感。
如图2和3中所示,媒体节目210、部分214、或控制模块220可以对计算设备202而言位于本地或远程,并从而对具有媒体反应的一个或多个用户(例如,图1的观众114的用户116-1)而言位于本地或远程。
注意,在此所示示例中,包括媒体呈现设备102、观众感测设备104、状态模块106、兴趣模块108、接口模块110、历史模块216和控制模块220在内的实体被包括在单一计算设备(诸如具有显示器、面向前的相机、话筒、音频输出等的台式计算机)内。然而,这些实体中的每一个可以在一个或多个计算设备中或以其他方式彼此分开或集成。如下面将部分描述的,媒体呈现设备102可以与观众感测设备104集成但是与状态模块106、兴趣模块108、接口模块110、历史模块216、或控制模块220分开。而且,这些模块中的每一个可以在分开的设备上操作或者被组合在一个设备中。
如图2中所示,计算设备202各自可以是各种设备之一或其组合,这里以六个示例示出:膝上型计算机202-1、平板计算机202-2、智能电话202-3、机顶盒202-4、台式计算机202-5、以及游戏系统202-6,但也可使用诸如具有计算能力的电视、上网本、以及蜂窝电话等其他计算设备和系统。注意,这些计算设备202中的三个包括媒体呈现设备102和观众感测设备104(膝上型计算机202-1、平板计算机202-2、智能电话202-3)。一个设备不包括媒体呈现设备102和观众感测设备104但是与它们通信(台式计算机202-5)。两个其他设备不包括媒体呈现设备102并且可以包括或可以不包括观众感测设备104,诸如在其中观众感测设备104被包括在媒体呈现设备120内的情况下(机顶盒202-4和游戏系统202-6)。
图3是对观众114而言在远程的示例远程计算设备302的图示。图3还示出通信网络304,远程计算设备302通过该通信网络304与观众感测设备104(未示出,但是在计算设备202内实现或与其通信)、接口模块110、历史模块216(包括或不包括反应历史218)、或控制模块220通信,假定如图2中所示这些实体在计算设备202中。通信网络304可以是因特网、局域网、广域网、无线网络、USB集线器、计算机总线、另一移动通信网络或这些的组合。
远程计算设备302包括一个或多个处理器306以及远程计算机可读存储介质(“远程CRM”)308。远程CRM308包括状态模块106、兴趣模块108、媒体节目210(媒体节目210中的每个均可包括或具有相关联的节目信息212和/或部分214)、历史模块216、反应历史218、以及控制模块220。
注意,在此所示示例中,媒体呈现设备102和观众感测设备104与状态模块106和兴趣模块108物理地分开,其中前两者对于观看媒体节目的观众而言在本地而后两者远程地操作。从而,传感器数据被从观众感测设备104传递到状态模块106或兴趣模块108之一或两者,其可被本地(图2)或远程(图3)传送。而且,在由状态模块106和/或兴趣模块108确定后,各个媒体反应和其他信息可被传送到相同的或其他的计算设备202以被接口模块110、历史模块216和/或控制模块220接收。从而,在一些情况下,计算设备202中的第一计算设备可测量传感器数据、将该传感器数据传送到远程设备302,然后远程设备302将媒体反应传送到计算设备202中的另一计算设备,所有传送均通过网络304。
这些和其它能力,以及其中图1-3的实体动作和交互的方式在下文中更详细地阐述。这些实体可被进一步划分、组合等。图1的环境100以及图2和3的详细图示示出了能够采用所描述的技术的许多可能的环境中的一些。
示例方法
基于被动传感器数据来确定媒体反应
图4描绘了基于被动传感器数据来确定媒体反应的方法400。本文描述的这些和其他方法被示为指定所执行的操作的各组框,但不必限于所示次序来执行相应框的操作。在以下讨论的各部分中,将对图1的环境100以及图2-3中详细示出的实体做出参考,对其做出的参考仅出于示例目的。所述技术不限于由一个实体或者在一个设备上操作的多个实体执行。
框402感测或接收观众或用户的传感器数据,该传感器数据是在向观众或用户呈现媒体节目期间被动地感测的。此传感器数据可包括观众或用户的上下文,或者可分开地接收的上下文,然而上下文不是必需的。
例如,考虑如下情况:观众包括图1的所有三个用户116:用户116-1、116-2、和116-3。假定媒体呈现设备102是LCD显示器,该LCD显示器具有扬声器且通过该LCD显示器来呈现媒体节目,并且该显示器与图2的机顶盒202-4通信。此处观众感测设备104是与机顶盒202-4或媒体呈现设备102集成的能够感测声音和位置的Kinect、面向前的高分辨率红外传感器、红-绿-蓝传感器和两个话筒。还假定正在呈现的媒体节目210是名称为“超人家族(Incredible Family)”的评级为PG的动画电影,该电影被从远程源并通过机顶盒202-4来流传输。机顶盒202-4呈现带有6个广告的超人家族,间隔出现于在电影的开头一个、在三个广告块中三个、在一个两广告块中两个。
针对观众114中的所有三个用户116接收传感器数据;为此示例,考虑第一用户116-1。此处假定:在超人家族的过程中,该观众感测设备104针对用户116-1在各时刻测量以下内容并随后在框402提供以下内容:
时刻1,头部定向3度,无音频或低幅值音频。
时刻2,头部定向24度,没有音频。
时刻3,骨架移动(臂),高幅值音频。
时刻4,骨架移动(臂和身体),高幅值音频。
时刻5,头部移动,面部特征改变(20%),中等幅值音频。
时刻6,详细的面部定向数据,无音频。
时刻7,骨架定向(丢失),无音频。
时刻8,面部定向,呼吸率。
框404基于传感器数据来确定媒体节目期间用户的状态。在一些情况下,框404确定该状态的概率,或分别确定多个状态的多个概率。例如,框404可确定一状态可能是正确的,但是不具有完全的确定性(例如,有40%的机会用户在大笑)。框404还可以或转而基于传感器数据来确定多个状态是可能的(诸如悲伤或平静状态)以及每个状态的概率(例如,悲伤状态65%,平静状态35%)。
框404还可或转而确定人口统计、身份和/或参与。而且,方法400可跳过框404并直接进行到框406,如下面稍后描述的。
在所进行的示例中,状态模块106接收上面列出的传感器数据并确定用户116-1的以下对应状态:
时刻1:看向。
时刻2:移开目光。
时刻3:拍手。
时刻4:欢呼。
时刻5:大笑。
时刻6:微笑。
时刻7:离开。
时刻8:睡着。
在时刻1,状态模块106基于指示用户116-1的头部从直接看着LCD显示器偏离3度的传感器数据以及指示“看向”状态适用于小于20度的偏离(仅作为示例)的规则来确定用户116-1的状态是看向媒体节目。类似地,在时刻2,由于偏离大于20度,状态模块106确定用户116-1移开目光。
在时刻3,状态模块106基于指示用户116-1具有手臂的骨架移动的传感器数据以及高幅值的音频来确定用户116-1正在拍手。状态模块106可基于手臂移动的类型(为了简要,上面未指示)来区分拍手和其他状态(诸如欢呼)。类似地,在时刻4,由于手臂移动和可归因于用户116-1的高幅值音频,状态模块106确定用户116-1正在欢呼。
在时刻5,状态模块106基于指示用户116-1具有头部移动、20%的面部特征改变、以及中等幅值音频的传感器数据来确定用户116-1正在大笑。可使用各种传感器数据来区分不同的状态,诸如基于音频为中等幅值而不是高幅值、以及面部特征改变(诸如嘴的张开和双眉的挑起)的尖叫。
对于时刻6,观众感测设备104处理原始传感器数据来提供经处理的传感器数据,并且在此情况下,进行面部识别处理以提供详细的面部定向数据。结合没有音频,状态模块106确定详细的面部定向数据(此处为翘起的嘴角、眼睑覆盖眼睛的量)指示用户116-1正在微笑。
在时刻7,状态模块106基于指示用户116-1具有远离观众感测设备104移动的骨架移动的传感器数据来确定用户116-1离开。传感器数据也可直接指示这一点,诸如在观众感测设备104没有感测到用户116-1的在场的情况下(或者通过没有骨架或头部读数,或者不再接收到热签名)。
在时刻8,状态模块106基于指示用户116-1的面部定向在某一时间段内没有改变(例如,用户眼睛没有眨过)以及稳定的、缓慢的呼吸率的传感器数据来确定用户116-1睡着了。
这八个传感器读数是出于解释目的的简化示例。传感器数据可包括如本文别处指出的广泛数据。而且,可接收传感器数据,所述传感器数据每几分之一秒测量一次观众,由此提供呈现媒体节目期间的数十、数百、以及数千个时间段的详细数据,并且从该数据可确定状态或其他媒体反应。
返回方法400,除了用户的状态之外,框404还可确定人口统计、身份、和参与。状态模块106可确定或接收传感器数据,从该传感器数据来确定人口统计和身份,或者从观众感测设备104接收人口统计或身份。继续正在进行的示例,用户116-1的传感器数据可指示用户116-1是John Brown,用户116-2是Lydia Brown,用户116-3是Susan Brown。或者,例如,传感器数据可指示用户116-1为6英尺4英寸高并且是男性(基于骨架定向)。传感器数据可以与指示可分别归因于观众中的每个用户的传感器数据的部分的信息一起被接收,或者包括所述信息。然而,在此当前示例中,假定观众感测设备104提供三组传感器数据,其中每组传感器数据指示与该传感器数据一起的用户的身份。
仍在框404,所述技术可确定观众或观众中的用户的参与。如所指出的,此确定可以不如用户的状态的确定那么精细,但仍旧是有用的。假定对于上述示例,针对用户116-2(Lydia Brown)接收传感器数据,并且此传感器数据只包括头部和骨架定向。
时刻1,头部定向0度,骨架定向上躯干在下躯干之前。
时刻2,头部定向2度,骨架定向上躯干在下躯干之前。
时刻3,头部定向5度,骨架定向上躯干与下躯干大致齐平。
时刻4,头部定向2度,骨架定向上躯干在下躯干之后。
时刻5,头部定向16度,骨架定向上躯干在下躯干之后。
时刻6,头部定向37度,骨架定向上躯干在下躯干之后。
时刻7,头部定向5度,骨架定向上躯干在下躯干之前。
时刻8,头部定向1度,骨架定向上躯干在下躯干之前。
状态模块106接收此传感器数据并确定Lydia Brown的以下对应参与:
时刻1:参与高。
时刻2:参与高。
时刻3:参与中等-高。
时刻4:参与中等。
时刻5:参与中等-低。
时刻6:参与低。
时刻7:参与高。
时刻8:参与高。
在时刻1、2、7和8,状态模块106基于指示用户116-2的头部从直接看向LCD显示器偏离5度或更少以及上躯干在下躯干之前的骨架定向(指示Lydia正向前倾斜于媒体呈现)的传感器数据来确定Lydia在这些时刻正高度参与超人家族。
在时刻3,由于Lydia不再向前倾斜,状态模块106确定Lydia的参与水平已经下降。在时刻4,状态模块106基于Lydia向后倾斜而确定Lydia的参与进一步降低到中等,即便她仍旧几乎直接看向超人家族。
在时刻5和6,状态模块106分别基于Lydia仍旧向后倾斜并稍微将目光移开(16度)以及随后明显移开(37度)来确定Lydia较少参与,下降到中等-低,并随后下降到低参与。注意,在时刻7,Lydia快速返回到高参与,对此媒体创建者可能感兴趣,因为它指示被认为是令人激动的或另外地有感染力的内容。
方法400可直接从框402进行到框406,或从框404进行到框406或框408。如果从框404进行到框406,所述技术基于正呈现的媒体的类型和用户的参与或状态来确定兴趣水平。如果从框402进行到框406,则所述技术基于正呈现的媒体的类型以及用户的传感器数据来确定兴趣水平,而不必首先或独立地确定用户的参与或状态。
对用户116-1和116-2继续以上示例,假定框406接收在框404处由状态模块106对用户116-1(John Brown)确定的状态。基于John Brown的状态和关于该媒体节目的信息,兴趣模块108确定对于超人家族的兴趣水平(总体的或者随时间的)。此处假定超人家族是冒险节目又是喜剧节目,该电影的各部分被标记为具有这些媒体类型之一。尽管被简化,然而假定时刻1和2被标记为喜剧,时刻3和4被标记为冒险,时刻5和6被标记为喜剧,且时刻7和8被标记为冒险。重新访问状态模块106所确定的状态,再次考虑以下:
时刻1:看向。
时刻2:移开目光。
时刻3:拍手。
时刻4:欢呼。
时刻5:大笑。
时刻6:微笑。
时刻7:离开。
时刻8:睡着。
基于这些状态,状态模块106确定:对于时刻1,John Brown对时刻1的内容具有中等-低兴趣——如果这是冒险或正剧类型,状态模块106可确定John Brown反而是高度感兴趣的。然而,此处,由于内容是喜剧并且从而是为了诱发大笑或类似状态,则兴趣模块108确定在时刻1John Brown具有中等-低兴趣。类似地,对于时刻2,兴趣模块108确定John Brown在时刻2具有低兴趣,因为他的状态不仅不是大笑或微笑而是移开目光。
在时刻3和4,兴趣模块108基于这些时刻的冒险类型和拍手和欢呼的状态,确定John Brown具有高兴趣水平。在时刻6,基于喜剧类型和John Brown微笑,确定他在此时刻具有中等兴趣。
在时刻7和8,兴趣模块108确定John Brown具有非常低的兴趣。此处媒体类型是冒险,然而在此情况下兴趣模块108会确定John Brown的兴趣水平对大多数类型的内容而言非常低。
很容易看出,广告客户、媒体提供者、媒体的构造者或扩充者、以及媒体创建者可受益于知晓用户的兴趣水平。此处假定随时间提供对于超人家族的兴趣水平,以及关于John Brown的人口统计信息。使用来自多个在人口统计上类似的用户的此信息,媒体创建者可了解到成人男性对某些冒险内容感兴趣,但是大部分喜剧部分是无趣的,至少对此人口统计群体而言如此。
作为更详细的示例,考虑图5,图5示出了具有在媒体节目的一部分上40个时间段504的兴趣水平502的基于时间的图500。此处假定媒体节目是在时间段18到30处包括其他媒体节目——广告——的电影。如图所示,兴趣模块108确定用户从中等兴趣水平开始,并随后在中等和中等-高、高和非常高兴趣水平之间反弹,直到时间段18。在覆盖时间段18到22的第一个广告期间,兴趣模块108确定用户具有中等低兴趣水平。然而,对于时间段23到28,兴趣模块108确定该用户具有非常低的兴趣水平(因为例如他正移开目光并且交谈或者离开房间)。然而,对于覆盖时间段28到32的最后一个广告,兴趣模块108确定用户对时间段29到32——该广告的大部分——具有中等兴趣水平。
这可能是有价值的信息——对于第一个广告用户留下,对于中间的广告和最后一个广告的开头用户离开,并且对于最后一个广告的大部分用户返回(具有中等兴趣)。将兴趣的此分辨率与准确度与某些传统方法对比,这些传统方法可能不提供关于看电影的人中有多少实际观看了广告、观看了哪些广告、以及以什么兴趣量观看广告的信息。如果此示例是观看群众的常见趋势,则块的中间的广告的价格会下降,而其他广告价格也会被调整。或者,广告客户和媒体提供者可能学习播放例如仅具有两个广告的较短的广告块。兴趣水平502还提供了关于电影本身的各部分的有价值的信息,诸如通过在时间段7处的非常高的兴趣水平(例如,电影的特别有感染力的场景)以及在时间段35-38处的减弱的兴趣。
注意,在一些情况下,参与水平尽管有用,但是与状态和兴趣水平相比可能较不有用或准确。例如,如果用户的面部被遮挡(挡住)并从而没有在看媒体节目,则仅对于参与水平,状态模块106可以确定用户没有参与。如果用户的面部被用户的手挡住(骨架定向)而且音频指示高音量音频,则状态模块106在确定状态时可确定用户在尖叫。与内容为恐怖的或悬疑的相结合,尖叫状态指示非常高的兴趣水平。这仅是兴趣水平可以与参与水平明显不同的情况的一个示例。
如同上面指示的,方法400可从框402直接进行到框406。在这种情况下,兴趣模块108单独地或与状态模块106结合起来基于媒体的类型(包括对于媒体节目的不同部分的多个媒体类型)和传感器数据来确定兴趣水平。作为示例,对于在时刻4的John Brown的传感器数据——该数据指示骨架移动(臂和身体)——以及高幅值音频,以及喜剧、运动、基于冲突的脱口秀、基于冒险的视频游戏、推特、或恐怖类型,兴趣模块108可确定在时刻4JohnBrown具有高兴趣水平。相反,对于在时刻4的相同传感器数据,对于正剧、情节剧、或古典音乐,兴趣模块108可确定John Brown在时刻4具有低兴趣水平。这可以基于传感器数据来执行而无需首先确定参与水平或状态,然而也可以执行所述确定。
在框404或406之后,框408提供人口统计、身份、参与、状态、和/或兴趣水平。状态模块106或兴趣模块108可向各个实体(诸如接口模块110、历史模块216、控制模块220以及其他)提供此信息。
向集锦(highlight)节目的构造者提供此信息可使集锦者能够用真正精彩的部分来构造节目,诸如喜剧中受到好评的笑话或者体育节目中的极好的体育竞赛。向媒体节目的扩充者提供此信息可使扩充者能够向媒体节目的呈现添加媒体反应,这可改善用户的体验。用户在伴随着真实笑声并且在喜剧节目的正确时刻的时候更欣赏喜剧,例如与笑声音轨相比。
在呈现广告后(确定该广告中的媒体反应)向广告客户提供此信息可以有效地使广告客户能够测量他们在媒体节目期间所显示的广告的价值。向媒体创建者提供此信息可以有效地使媒体创建者能够评估类似媒体节目或其部分的潜在价值。例如,在将媒体节目释放给公众之前,媒体创建者可确定反应不好的媒体节目部分,并从而更改媒体节目来改善它。
向评级实体提供此信息可以有效地使评级实体能够自动为用户对该媒体节目评级。其他一些实体(诸如控制模块220)可使用此信息来控制媒体的呈现。
向历史模块216提供媒体反应可以有效地使历史模块216能够构造并更新反应历史218。历史模块216可基于其中接收到对媒体节目的每组媒体反应的一个或多个上下文来构造反应历史218,或者媒体反应可全部或部分在上下文中将媒体反应计入。从而,其中用户在周三晚上下班后观看电视节目的媒体反应的上下文可以被更改来反映用户可能上班累了。
如本文指出的,所述技术可确定大多数媒体节目的过程中用户的多个状态,甚至对于15秒的广告或视频片段也是如此。在这种情况下,重复框404,诸如在一秒的时间段重复。
而且,状态模块106可以不仅确定用户随时间的多个状态,而且确定在特定时刻处的各个不同状态。例如,用户可能既大笑又移开目光,这两者均是可被确定并提供或用于确定用户的兴趣水平的状态。
此外,状态模块106和兴趣模块108中的任一个或两者可以基于历史数据以及传感器数据或媒体类型来确定参与、状态、和/或兴趣水平。在一种情况下,用户的历史传感器数据被用来正规化用户的参与、状态或兴趣水平(例如,对于当前媒体反应来说动态地进行)。例如,如果Susan Brown正在观看媒体节目并且接收到她的传感器数据,则所述技术可正规化或以其他方式学习如何最好地基于她的历史传感器数据来确定她的参与、状态和兴趣水平。如果Susan Brown的历史传感器数据指示她不是特别爱表现或爱说话的用户,则所述技术可针对此历史来调整。从而,与用于确定典型用户笑了的音频幅值相比,较低的幅值的音频可能足以确定Susan Brown笑了。
在另一情况下,将为其接收了传感器数据的用户的历史参与、状态或兴趣水平与其他人的历史参与、状态或兴趣水平进行比较。从而,基于指示与其他人的兴趣水平相比(一般性地或者对于同一媒体节目)Lydia Brown对她所观看的几乎每个媒体节目都呈现出高兴趣的数据,可确定Lydia Brown的较低的兴趣水平。在这些情况中的任一情况下,所述技术随着时间学习,并由此可正规化参与、状态、和/或兴趣水平。
用于构造反应历史的方法
如同上面指出的,所述技术可确定用户对各个媒体节目的参与、状态、和/或兴趣水平。而且,这些技术可以使用被动或主动传感器数据来这样做。使用这些媒体反应,所述技术可构造用户的反应历史。此反应历史可以如本文别处所述的各种方式使用。
图6描绘了用于基于用户对媒体节目的反应来构造反应历史的方法600。框602接收用户的反应集合以及关于相应媒体节目的信息,所述反应集合是在呈现多个相应媒体节目期间感测的。在图5中示出了对媒体节目的示例反应集合,所示出的那些随着向用户呈现节目的时间对兴趣水平的测量。
关于相应媒体节目的信息可包括例如媒体的名称(例如,办公室,第104集)及其类型(例如,歌曲、电视节目、或广告)以及本文所述的其他信息。
除了媒体反应和其相应的媒体节目外,框602还可接收如上所述的在呈现媒体节目期间用户的上下文。
此外,框602可从其他用户接收媒体反应,使用这些媒体反应来构造反应历史。从而,历史模块216可基于用户的媒体反应(部分地,或者在构造用户的初始或初步反应历史之后)来确定具有与该用户的那些媒体反应类似的反应的其他用户。历史模块216可确定具有与该用户的反应类似的反应的其他人,并使用那些其他人对用户尚未看到或听到的节目的反应来细化用户的反应历史。
框604基于用户的反映集合和关于相应媒体节目的信息来构造用户的反应历史。如所指出的,框604还可使用其他人的反应历史、上下文等等来构造该用户的反应历史。在本文别处所述的一些实施例中,此反应历史可被用来控制媒体节目。
用于控制媒体节目的方法
图7示出用于基于媒体反应来控制媒体节目的方法700。如所指出的,所述技术可控制媒体节目而无需用户的主动控制(例如,拨盘、键盘或遥控器),然而不必排除用户的主动控制。
框702接收对当前被呈现给具有一个或多个人的观众的媒体节目的当前媒体反应,该媒体反应是基于在呈现期间被动地感测的传感器数据来确定的。这些媒体反应可包括本文描述的许多媒体反应中的一个或多个,其可如上面指出的那样来确定。
框704基于当前媒体反应来确定该人没有在关注媒体节目。可指示人没有在关注的媒体反应包括非常低的兴趣水平、低参与、离开的状态、无关交谈状态、以及移开目光状态,以上仅举数例。
例如,假定名字为Bob和Janet的两个人正在他们的家的房间中一起观看电影。假定Janet转向Bob并评论该电影。此处假定控制模块220从图1-3的状态模块106接收到交谈状态。假定状态模块106基于对Janet所说的前几句话的分析而指示交谈是相关的并且指示还接收到伴随的移开目光状态。此处控制模块220基于交谈是相关的来确定Janet的媒体反应不指示Janet没有关注。控制模块220随后可在框702等待接收另一媒体反应。
继续正在进行的示例,假定就在Janet转向Bob并交谈后Bob从电影移开目光并且对Janet回应。在框704,控制模块220在接收到Janet的相关交谈以及移开目光状态后很快接收到Bob的移开目光状态和交谈状态。控制模块220随后确定Bob没有关注该电影,相反,他在关注Janet。控制模块220可基于Bob的移开目光状态和他的交谈状态来确定他没有在关注。控制模块220相反还可考虑Janet的状态或Bob的反应历史,诸如指示例如Bob在观看媒体节目时很少交谈或移开目光的反应历史。
响应于确定该人没有在关注该媒体节目,框706控制该媒体节目的呈现。此控制可以实时地、快速地以及以各种方式执行。控制模块220可暂停该媒体节目的呈现,将该媒体节目的音频静音或减少音量,或者停止该媒体节目的呈现。
控制模块220还可以或者反而在该媒体节目中与当前媒体反应相称的时刻或位置记录标记。此标记可在随后在对该媒体节目“倒带”时使用,如下面指出的。
继续正在进行的示例,控制模块220暂停该电影。控制模块220可等待另一媒体反应,如下面指示的。控制模块220还可以或者反而明确地请求媒体反应,其中控制模块220响应于该媒体反应停止控制(例如,暂停)该媒体节目。此处假定控制模块220暂停该电影并且在暂停的电影上方呈现陈述“请挥动你的手来继续该节目”的请求。Bob或Janet可挥动他们的手来继续该电影,然而此处我们假定他们继续他们的谈话而该电影保持暂停。
框708接收该人的第二媒体反应。正被接收的媒体反应可能是相同或类似的媒体反应,响应于该媒体反应方法700继续控制该媒体节目的呈现。因此,方法700可重复框702、704和706。在例如Bob和Janet继续交谈并从电影移开目光时,控制模块220继续暂停该电影。
然而,在某点处,假定Bob回头看向呈现被暂停的电影的显示器。在这种情况下,控制模块220接收看向状态而不是接收更多的移开目光状态。
框710基于第二媒体反应来确定该人正在关注或准备好关注该媒体节目。框710确定人正在关注或准备好关注所基于的媒体反应可能不同,包括基于该人的反应历史。可指示用户正在关注的媒体反应包括中等或更高的兴趣水平、中等或更高的参与、看向状态、向……倾斜状态、以及刚到达状态,以上仅举数例。
继续正在进行的示例,在框710处,控制模块220接收Bob的看向状态。控制模块220确定Bob现在正在关注,因为他正在看着暂停的电影。
响应于确定该用户正在或即将关注该媒体节目,框712停止控制和/或恢复该媒体节目。如上面指出的,控制媒体节目的呈现可包括暂停、静音、或停止该媒体节目等等。从而,控制模块220可停止暂停该媒体节目,停止将该媒体节目的音频静音,或恢复该媒体节目。
然而,在一些情况下,控制模块220将该媒体节目倒带特定时间量(诸如2秒),或在该媒体节目的该控制在其期间发生的内聚部分的开头处呈现该媒体节目。
在以上的Bob和Janet的示例中,假定控制模块220在其期间Bob没有在关注的特定场景期间暂停该电影。控制模块220可将该媒体节目倒带回该同一场景的开头。这可取决于观众的分心的长度。在分心不止一瞬间时,控制模块220可倒带并在一场景的开头处开始播放。从而,假定Bob和Janet交谈了5分钟。在这种情况下,控制模块220可倒带到该场景的开头。如果Bob和Janet相反仅交谈了4秒钟,则控制模块220可相反仅停止暂停该电影或倒带仅几秒。
如同上面指出的,控制模块220可在该媒体节目中的一时刻或位置处记录标记。此标记可帮助控制模块220,诸如其中在控制模块220没有暂停该媒体节目,而是反而静音或将音量调低但是允许该媒体节目继续被呈现的情况下。
作为一不同示例,假定两个人正在听具有三十首歌的专辑。响应于这两个人开始交谈,控制模块220可将音量调低,但是不是关掉音量或停止歌曲。控制模块220可标记此位置,并且如果缺少关注持续几分钟或更多,则当交谈停止时倒带到该歌曲的开头来以正常音量重播该歌曲。
控制模块220可分析与该位置或时间相关联的元数据来确定该控制被实施的内聚部分。从而,控制模块220可基于该媒体节目中的所标记位置处该电影的元数据来确定该媒体节目的当前部分是该媒体节目中具有特定时刻的开头的场景的一部分。控制模块220随后可在该特定时刻处恢复该媒体节目的呈现以重播该场景的开头。
作为说明,考虑图8,图8示出了媒体节目800、名称为罪与罚的电视剧中的前五分钟的场景802(此处为场景802-1、802-2、802-3和802-4)以及观看该电视剧的人的参与804。假定,在场景802-3期间,控制模块220接收低参与的媒体反应。基于此低参与,控制模块220减小音量并标记减小音量处的点(在标记806处显示)。控制模块220确定在标记806处示出的此减小的音量控制是在场景802-3内。响应于确定再次播放该场景,控制模块220在场景802-3的开头处(被示出为场景开始808)呈现该电视剧。
方法700可单独操作或与本文描述的其他方法(诸如方法400、600、900和/或1000)结合操作。此描述用还描述用于控制媒体节目的技术的其他方法来继续。
图9示出用于基于人的身份或人口统计来控制媒体节目的方法900。方法900可与方法700结合操作或与方法700类似地操作,诸如通过记录标记或确定媒体节目的、在不再希望控制该呈现之后要继续媒体节目的呈现处的内聚部分等等。
框902接收人的身份或人口统计,该身份或人口统计是基于在媒体节目的当前呈现期间被动地感测的传感器数据来确定的。如本文所指出的,该身份或人口统计可以从媒体反应来确定,然而在一些情况下,其还可在不必还要确定该人的媒体反应的情况下基于传感器数据来确定。
框904基于身份或人口统计和关于该媒体节目的信息来确定要控制该媒体节目的当前呈现。此信息可指示例如该媒体节目是特定类型的,诸如是恐怖或悬疑节目,或者该节目被评级为不适于儿童等等。
框906控制该媒体节目的当前呈现。对当前呈现的此控制可包括对方法700所指出的那些,然而框906可以上面未阐述的附加方式来更改该呈现。
例如,假定人的身份或人口统计指示该人为少数族群(minors)且该信息指示该媒体节目或该媒体节目的当前呈现的部分不适于呈现给该少数族群。在这种情况下,控制模块220可如上地暂停、停止或将该媒体节目静音,然而,控制模块220可转而通过使其黑屏或显著降低该呈现的视频部分的分辨率(例如,视频的像素化)并降低音量来更改该呈现。对于以上的电影示例,假定电影在播放时Bob和Janet的6岁大的女儿出人意料地走进该房间。作为响应,控制模块220可部分模糊化或降低该电影的分辨率,同时还降低音量,但可放弃停止或暂停该节目。
而且,如果接收到身份,则控制模块220可确定与该人相关联的反应历史。在这种情况下,控制模块220可在框904确定是否要控制当前呈现,并且如果确定控制,确定如何控制该呈现。例如,假定关于该媒体节目的该部分的信息指示将要为该媒体节目呈现粗口并且该反应历史指示观众中的人具有不喜欢粗口或对粗口敏感的历史。在这种示例中,控制模块220可在该粗口期间降低该呈现的音量。
再次考虑来自上面电影示例的Bob和Janet。这里假定控制模块220接收或确定Janet的身份和相关联的反应历史。基于此反应历史,控制模块220确定Janet对被示出为处于不幸中的动物非常敏感或会被其冒犯。对于媒体节目的大部分,控制模块220可确定不需要控制。然而,假定对于特定的即将到来的场景,控制模块220基于与该电影的部分相关联的媒体节目的元数据(例如,关于图2的所有媒体节目210的部分214的信息212)来确定在此即将到来的场景中狗被车撞上。控制模块220可模糊化该视频呈现,减少该视频呈现的分辨率,或以其他方式更改该视频呈现。注意,在这样做时,所述技术可以不仅通过使人们在许多情况下能够放弃主动控制节目而准许人们更好地欣赏媒体节目,而且可使人们能够欣赏原本他们可能完全不看的节目。
从而,假定儿童的父母已经决定一流行的喜剧节目除了粗口外会对儿童观看很好,因为该喜剧本来具有许多补偿性的品质。儿童欣赏该喜剧而不听到粗口可能是几乎不可能的——替代方案是家长留意地握着遥控器上的静音按钮(这仍然可能无法将所有粗口静音)或者在没有任何音频的情况下观看该喜剧(这有可能使得观看该喜剧没有意义)。然而,所述技术使得儿童能够观看该喜剧而父母无需主动地控制该节目。
在媒体节目的被控制的部分不再被呈现后(诸如通过被完全呈现或者跳过),控制模块220停止控制该媒体节目。从而,控制模块220可以在粗口结束或被跳过之后停止对粗口静音,或者在示出处于不幸中的动物的场景结束后停止模糊化该场景。
图10示出用于基于多个人的媒体反应来控制媒体节目的方法1000。方法1000可与方法700和/或900结合操作或与其类似地操作,然而不要求如此。
框1002接收对当前被呈现给具有一个或多个人的观众的媒体节目的第一媒体反应,该第一媒体反应是基于在当前呈现期间被动地感测的并且是所述一个或多个人中的第一人的传感器数据来确定的。
框1004基于第一媒体反应来确定第一人没有在关注媒体节目。控制模块220可按上面描述的各种方式中的一种或多种来这样做。一些媒体反应不指示人没有在关注,而的确指示人没有在关注的一些媒体反应在某些情况下可能被忽略。例如,离开的状态可指示该媒体节目的控制是有保证的,然而情况不总是这样。如果广告刚刚开始,则离开的状态可能不指示停止媒体节目(以及从而该广告)的当前呈现是有保证的。类似地,广告期间的低兴趣水平也可能不指示控制模块220应当停止该媒体节目的呈现。
响应于确定该第一人没有在关注该媒体节目,框1006停止或更改该媒体节目的当前呈现,诸如通过停止、暂停或将该当前呈现静音。
框1008接收该第一人的第二媒体反应。控制模块220可确定此媒体反应与第一媒体反应是来自同一人的,尽管所接收的媒体反应也可能被标记或以其他方式包括将该媒体反应与观众中的一人相关联的指示符,无论这些人的身份是否已知。
框1010基于第二媒体反应来确定该第一人正在关注或将要关注该媒体节目。
框1012在当前呈现停止或被改变的点处或之前呈现该媒体节目的第二呈现。如上所述,在当前呈现停止或被改变的点处或之前呈现媒体节目可以基于确定在该处开始呈现的内聚部分(诸如场景或歌曲)来执行。呈现该媒体节目可被自动执行且无用户交互地执行,然而不要求如此。
框1014接收或确定观众中的该一个或多个人中的第二人是近似年龄的。近似年龄可以是基于为该第二人确定的身份或人口统计,该身份或人口统计可被接收或确定。如果被确定,则近似年龄可基于第二人的媒体反应,这可以像接收如上指示的“新在场状态”那样简单。
框1016基于关于该媒体节目的信息和第二人是近似年龄的来确定要停止或更改该媒体节目的第二呈现。
框1018停止或更改该媒体节目的第二呈现。控制模块220可以按照上面阐述的各种方式,响应于确定该第二人不再在场(诸如通过从图1-3的状态模块106接收离开状态),通过再次呈现该媒体节目来恢复该媒体节目。
这些仅是所述技术可以使人们能够更好地欣赏或控制媒体节目的许多方式中的一些。
前面的讨论描述了与基于媒体反应来控制媒体节目相关的方法,以及其他方法和技术。这些方法的各方面可用硬件(例如,固定逻辑电路)、固件、软件、手动处理、或其任何组合来实现。软件实现表示当由计算机处理器执行时执行指定任务的程序代码。可以在计算机可执行指令的一般上下文中描述示例方法,这些指令可包括软件、应用、例程、程序、对象、组件、数据结构、过程、模块、功能等等。程序代码可被存储在计算机处理器本地和/或远程的一个或多个计算机可读存储器设备中。方法还可以在分布式计算模式中由多个计算设备实施。此外,此处所描述的特征是平台无关的,并且可在具有各种处理器的各种计算平台上实现。
这些技术可以在图1-3和11所示的实体(下面描述设备1100)中的一个或多个上具体化,其可以被进一步划分、组合等。因此,这些附图示出能够采用所描述的技术的许多可能的系统或装置中的某些。这些附图中的各实体一般表示软件、固件、硬件、整个设备或网络、或其组合。例如,在软件实现的情况下,实体(例如,状态模块106、兴趣模块108、接口模块110、历史模块216和控制模块220)表示当在处理器(例如,处理器204和/或306)上执行时执行指定任务的程序代码。该程序代码可被存储在一个或多个计算机可读存储器设备中,诸如CRM206和/或远程CRM308或图11中的计算机可读存储介质1114。
示例设备
图11示出了可被实现为参考之前的图1-10来描述的任何类型的客户机、服务器、和/或计算设备来实现用于基于媒体反应来控制媒体节目的技术的示例设备1100的各个组件。在各实施例中,设备1100可被实现为有线和/或无线设备中的一个或其组合,如任何形式的电视移动计算设备(例如,电视机顶盒、数字录像机(DVR)等等)、消费设备、计算机设备、服务器设备、便携式计算机设备、用户设备、通信设备、视频处理和/或呈现设备、电器设备、游戏设备、电子设备、片上系统(SoC)和/或另一类型的设备或其部分。设备1100还可与用户(例如,个人)和/或操作该设备的实体相关联,从而使得设备描述包括用户、软件、固件和/或设备的组合的逻辑设备。
设备1100包括允许设备数据1104(例如,接收到的数据、正被接收的数据、安排用于广播的数据、数据的数据包等)的有线和/或无线通信的通信设备1102。设备数据1104或其他设备内容可以包括设备的配置设置、存储在设备上的媒体内容(例如,媒体节目210)、和/或与设备的用户相关联的信息。存储在设备1100上的媒体内容可以包括任何类型的音频、视频和/或图像数据。设备1100包括经由其可以接收任何类型的数据、媒体内容和/或输入的一个或多个数据输入1106,诸如人类话语、用户可选输入、消息、音乐、电视媒体内容、媒体反应、所记录的视频内容以及从任何内容和/或数据源接收的任何其它类型的音频、视频和/或图像数据。
设备1100还包括通信接口1108,其可被实现为串行和/或并行接口、无线接口、任何类型的网络接口、调制解调器、和任何其他类型的通信接口中的任一个或多个。通信接口1108提供设备1100和通信网络之间的连接和/或通信链路,其他电子、计算和通信设备通过其来与设备1100传递数据。
设备1100包括一个或多个处理器1110(例如,微处理器、控制器等中的任何一个),该处理器处理各种计算机可执行指令以控制设备1100的操作和实现用于基于媒体反应来控制媒体节目和本文所述的其他方法的技术。作为补充或替换,设备1100可被实现为具有与在1112处概括标识的处理和控制电路有关地实现的硬件、固件、或固定逻辑电路中的任何一个或组合。虽然未示出,但是设备1100可包括耦合设备内的各种组件的系统总线或数据传输系统。系统总线可包括不同总线结构中的任一个或组合,诸如存储器总线或存储器控制器、外围总线、通用串行总线、和/或利用各种总线架构中的任一种的处理器或局部总线。
设备1100还包括诸如一个或多个存储器设备等启用持久和/或非暂态数据存储(即,与仅仅信号传输相对比)的计算机可读存储介质1114,存储器设备的示例包括随机存取存储器(RAM)、非易失性存储器(例如,只读存储器(ROM)、闪存、EPROM、EEPROM等中的任一个或多个)、以及盘存储设备。盘存储设备可被实现为任何类型的磁性或光学存储设备,如硬盘驱动器、可记录和/或可重写紧致盘(CD)、任何类型的数字多功能盘(DVD)等等。设备1100还可包括大容量存储设备1116。
计算机可读存储介质1114提供数据存储机制以便存储设备数据1104、以及各种设备应用1118和关于设备1100的各操作方面的任何其它类型的信息和/或数据。例如,操作系统1120可以用计算机可读存储介质1114作为计算机应用来维护并在处理器1110上执行。设备应用1118可以包括设备管理器,如任何形式的控制应用、软件应用、信号处理和控制模块、特定设备本地的代码、特定设备的硬件抽象层等等。
设备应用1118还包括任何系统组件、引擎、或模块来实现用于基于媒体反应来控制媒体节目的技术。在此示例中,设备应用1118可包括状态模块106、兴趣模块108、接口模块110、历史模块216、和/或控制模块220。
结语
尽管已经用结构特征和/或方法专用的语言描述了用于基于媒体反应来控制媒体节目的技术和装置的各实施例,但是应该理解所附权利要求的主题不必限于所述的具体特征或方法。相反,所述具体特征和方法是作为用于基于媒体反应来控制媒体节目的示例实现来公开的。

Claims (10)

1.一种计算机实现的方法,包括:
接收对当前被呈现给具有一个或多个人的观众的媒体节目的当前媒体反应,所述媒体反应是基于传感器数据来确定的,所述传感器数据是在所述呈现期间被动地感测的并且是所述一个或多个人中的至少一个人的;
基于在所述呈现期间被动感测的所述人的头部定向或骨骼定向来确定所述人的参与度;
基于所确定的参与度以及所述当前媒体反应来确定所述人是否在关注所述媒体节目,所述当前媒体反应基于确定所述人所讲的话是否与所述媒体节目相关来确定;
响应于基于所确定的参与度以及所述人所讲的话不与所述媒体节目相关而确定所述人没有在关注所述媒体节目,控制所述媒体节目的所述呈现;以及
响应于基于所确定的参与度以及所述人所讲的话与所述媒体节目相关而确定所述人在关注所述媒体节目,等待接收另一媒体反应。
2.如权利要求1所述的计算机实现的方法,其特征在于,控制所述媒体节目的所述呈现包括暂停所述媒体节目或将所述媒体节目的音频静音。
3.如权利要求1所述的计算机实现的方法,其特征在于,还包括,在控制所述媒体节目的所述呈现之后:
接收所述人的第二媒体反应;
基于所述第二媒体反应来确定所述人正在关注或准备好关注所述媒体节目;以及
响应于确定所述人正在关注或准备好关注所述媒体节目,停止控制所述媒体节目的所述呈现。
4.如权利要求3所述的计算机实现的方法,其特征在于,控制所述媒体节目的所述呈现停止或暂停所述媒体节目的所述呈现,并且停止控制所述呈现在所述媒体节目的、其间所述停止或暂停发生的内聚部分的开头处恢复所述媒体节目的所述呈现。
5.一种计算机实现的方法,包括:
接收人的身份或人口统计,所述身份或人口统计是基于在媒体节目的当前呈现期间被动地感测的传感器数据来确定的;
基于在所述呈现期间被动感测的所述人的头部定向或骨骼定向来确定所述人的参与度;
基于所述身份或所述人口统计、所确定的参与度以及当前媒体反应和关于所述媒体节目的信息来确定要控制所述媒体节目的所述当前呈现,所述当前媒体反应包括所述人所讲的话是否与所述媒体节目相关;以及
响应于基于所确定的参与度以及所述人所讲的话不与所述媒体节目相关而确定所述人没有在关注所述媒体节目,控制所述媒体节目的所述呈现;以及
响应于基于所确定的参与度以及所述人所讲的话与所述媒体节目相关而确定所述人在关注所述媒体节目,等待接收另一媒体反应。
6.如权利要求5所述的计算机实现的方法,其特征在于,控制所述当前呈现停止或更改所述当前呈现。
7.如权利要求5所述的计算机实现的方法,其特征在于,所述人的所述身份或所述人口统计指示所述人是少数族群并且所述信息指示所述媒体节目或所述媒体节目的当前呈现的部分不适于向少数族群呈现。
8.如权利要求5所述计算机实现的方法,其特征在于,所述人的所述身份或所述人口统计是所述人的所述身份,所述方法还包括确定与所述身份相关联的用户历史,并且其中确定要控制所述媒体节目的所述当前呈现是基于所述用户历史的。
9.如权利要求8所述的计算机实现的方法,其特征在于,确定要控制所述当前呈现确定要更改所述当前呈现来将所述呈现的一视觉部分模糊化或降低其分辨率,但是不停止所述当前呈现。
10.如权利要求5所述的计算机实现的方法,其特征在于,控制所述当前呈现控制所述媒体节目的一部分并且所述方法进一步包括当所述媒体节目的所述部分的呈现完成时停止控制所述媒体节目。
CN201310113825.XA 2012-04-04 2013-04-03 基于媒体反应来控制媒体节目 Active CN103237248B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/439,284 US8898687B2 (en) 2012-04-04 2012-04-04 Controlling a media program based on a media reaction
US13/439,284 2012-04-04

Publications (2)

Publication Number Publication Date
CN103237248A CN103237248A (zh) 2013-08-07
CN103237248B true CN103237248B (zh) 2017-12-22

Family

ID=48142963

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310113825.XA Active CN103237248B (zh) 2012-04-04 2013-04-03 基于媒体反应来控制媒体节目

Country Status (7)

Country Link
US (1) US8898687B2 (zh)
EP (1) EP2834987A1 (zh)
JP (1) JP2015518680A (zh)
KR (1) KR20150005574A (zh)
CN (1) CN103237248B (zh)
TW (1) TWI581128B (zh)
WO (1) WO2013152056A1 (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2661641A1 (en) * 2011-01-04 2013-11-13 Koninklijke Philips N.V. A presence detection system and a lighting system.
US8760395B2 (en) 2011-05-31 2014-06-24 Microsoft Corporation Gesture recognition techniques
US8635637B2 (en) 2011-12-02 2014-01-21 Microsoft Corporation User interface presenting an animated avatar performing a media reaction
US9100685B2 (en) 2011-12-09 2015-08-04 Microsoft Technology Licensing, Llc Determining audience state or interest using passive sensor data
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
CN102833607B (zh) * 2012-08-21 2015-06-10 中兴通讯股份有限公司 一种有线电视系统控制方法、装置和系统
US9514664B2 (en) * 2012-09-25 2016-12-06 The Boeing Company Measuring latency in a test system using captured images
US9188644B1 (en) 2012-09-25 2015-11-17 The Boeing Company Latency measurement system and method
US9531985B2 (en) * 2013-03-15 2016-12-27 Samsung Electronics Co., Ltd. Measuring user engagement of content
US20160151705A1 (en) * 2013-07-08 2016-06-02 Seung Hwan Ji System for providing augmented reality content by using toy attachment type add-on apparatus
US9313545B2 (en) * 2013-08-27 2016-04-12 At&T Mobility Ii Llc Method and apparatus for managing viewing of media content
CN103809862B (zh) * 2014-02-21 2017-01-18 联想(北京)有限公司 一种信息处理方法及电子设备
US10798459B2 (en) 2014-03-18 2020-10-06 Vixs Systems, Inc. Audio/video system with social media generation and methods for use therewith
CN103974112B (zh) * 2014-05-24 2017-04-05 天津三星电子有限公司 一种电视机控制方法及装置
US9386272B2 (en) * 2014-06-27 2016-07-05 Intel Corporation Technologies for audiovisual communication using interestingness algorithms
JP2016110631A (ja) * 2014-12-02 2016-06-20 三星電子株式会社Samsung Electronics Co.,Ltd. 状態推定装置、状態推定方法およびプログラム
CN105744052A (zh) * 2014-12-11 2016-07-06 富泰华工业(深圳)有限公司 来电铃声控制系统及方法
US9525898B2 (en) * 2014-12-30 2016-12-20 Videology Inc. Method and system for assessing viewing quality of media objects
CN104683847A (zh) * 2015-02-04 2015-06-03 四川长虹电器股份有限公司 智能控制音量的电视机与方法
US10904617B1 (en) * 2015-02-19 2021-01-26 Amazon Technologies, Inc. Synchronizing a client device with media content for scene-specific notifications
TW201633157A (zh) * 2015-03-13 2016-09-16 Netvox Technology Co Ltd 可自動控制設備音量的監控裝置與音量調控方法
US20160381171A1 (en) * 2015-06-23 2016-12-29 Intel Corporation Facilitating media play and real-time interaction with smart physical objects
US10178421B2 (en) * 2015-10-30 2019-01-08 Rovi Guides, Inc. Methods and systems for monitoring content subscription usage
US10542315B2 (en) * 2015-11-11 2020-01-21 At&T Intellectual Property I, L.P. Method and apparatus for content adaptation based on audience monitoring
CN105843580A (zh) * 2016-03-07 2016-08-10 乐卡汽车智能科技(北京)有限公司 一种车载播放器音量调整方法和装置
US11012719B2 (en) * 2016-03-08 2021-05-18 DISH Technologies L.L.C. Apparatus, systems and methods for control of sporting event presentation based on viewer engagement
US10187694B2 (en) * 2016-04-07 2019-01-22 At&T Intellectual Property I, L.P. Method and apparatus for enhancing audience engagement via a communication network
EP3563579B1 (en) 2016-12-27 2023-10-25 Rovi Guides, Inc. Systems and methods for dynamically adjusting media output based on presence detection of individuals
US10097888B2 (en) 2017-02-06 2018-10-09 Cisco Technology, Inc. Determining audience engagement
CN106792182A (zh) * 2017-02-15 2017-05-31 广东小天才科技有限公司 视频回放方法、移动终端及音频输出设备
US10395693B2 (en) 2017-04-10 2019-08-27 International Business Machines Corporation Look-ahead for video segments
WO2019067783A1 (en) * 2017-09-29 2019-04-04 Chappell Arvel A PRODUCTION AND CONTROL OF KINEMATIC CONTENT IN RESPONSE TO AN EMOTIONAL USER STATUS
US20190114037A1 (en) 2017-10-17 2019-04-18 Blend Systems, Inc. Systems and methods for distributing customized avatars responsive to events
US10158919B1 (en) * 2017-12-21 2018-12-18 Rovi Guides, Inc. Systems and methods for dynamically enabling and disabling a biometric device
CN108600669A (zh) * 2018-03-30 2018-09-28 努比亚技术有限公司 游戏视频录制方法、移动终端及计算机可读存储介质
TWI691893B (zh) * 2018-05-30 2020-04-21 大陸商出門問問信息科技有限公司 音頻數據續播方法及裝置
EP3932042A1 (en) 2019-02-25 2022-01-05 Pretechnology, Inc. Method and apparatus for monitoring and tracking consumption of digital content
CN112825560B (zh) * 2019-11-20 2021-12-24 海信集团有限公司 显示设备及视频图像显示方法
US11218525B2 (en) * 2020-01-21 2022-01-04 Dish Network L.L.C. Systems and methods for adapting content delivery based on endpoint communications
US11128925B1 (en) * 2020-02-28 2021-09-21 Nxp Usa, Inc. Media presentation system using audience and audio feedback for playback level control
US11822367B2 (en) 2020-06-22 2023-11-21 Apple Inc. Method and system for adjusting sound playback to account for speech detection
US20220174357A1 (en) * 2020-11-30 2022-06-02 At&T Intellectual Property I, L.P. Simulating audience feedback in remote broadcast events
US20220377413A1 (en) * 2021-05-21 2022-11-24 Rovi Guides, Inc. Methods and systems for personalized content based on captured gestures
US20230217086A1 (en) * 2021-12-30 2023-07-06 Interwise Ltd. Providing and Using a Branching Narrative Content Service

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1123223C (zh) * 1996-11-14 2003-10-01 皇家菲利浦电子有限公司 电视节目源和使电视节目的声音/可见显示不出现的方法
CN101894502A (zh) * 2009-05-19 2010-11-24 日立民用电子株式会社 影像显示装置

Family Cites Families (506)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4288078A (en) 1979-11-20 1981-09-08 Lugo Julio I Game apparatus
US7831204B1 (en) 1981-11-03 2010-11-09 Personalized Media Communications, Llc Signal processing apparatus and methods
US4695953A (en) 1983-08-25 1987-09-22 Blair Preston E TV animation interactively controlled by the viewer
US4630910A (en) 1984-02-16 1986-12-23 Robotic Vision Systems, Inc. Method of measuring in three-dimensions at high speed
US4627620A (en) 1984-12-26 1986-12-09 Yang John P Electronic athlete trainer for improving skills in reflex, speed and accuracy
US4645458A (en) 1985-04-15 1987-02-24 Harald Phillip Athletic evaluation and training apparatus
US4702475A (en) 1985-08-16 1987-10-27 Innovating Training Products, Inc. Sports technique and reaction training system
US4843568A (en) 1986-04-11 1989-06-27 Krueger Myron W Real time perception of and response to the actions of an unencumbered participant/user
US4711543A (en) 1986-04-14 1987-12-08 Blair Preston E TV animation interactively controlled by the viewer
US4796997A (en) 1986-05-27 1989-01-10 Synthetic Vision Systems, Inc. Method and system for high-speed, 3-D imaging of an object at a vision station
US5184295A (en) 1986-05-30 1993-02-02 Mann Ralph V System and method for teaching physical skills
US4751642A (en) 1986-08-29 1988-06-14 Silva John M Interactive sports simulation system with physiological sensing and psychological conditioning
US4809065A (en) 1986-12-01 1989-02-28 Kabushiki Kaisha Toshiba Interactive system and related method for displaying data to produce a three-dimensional image of an object
US4817950A (en) 1987-05-08 1989-04-04 Goo Paul E Video game control unit and attitude sensor
US5239464A (en) 1988-08-04 1993-08-24 Blair Preston E Interactive video system providing repeated switching of multiple tracks of actions sequences
US5239463A (en) 1988-08-04 1993-08-24 Blair Preston E Method and apparatus for player interaction with animated characters and objects
US4901362A (en) 1988-08-08 1990-02-13 Raytheon Company Method of recognizing patterns
US4893183A (en) 1988-08-11 1990-01-09 Carnegie-Mellon University Robotic vision system
US4931865A (en) 1988-08-24 1990-06-05 Sebastiano Scarampi Apparatus and methods for monitoring television viewers
JPH02199526A (ja) 1988-10-14 1990-08-07 David G Capper 制御インターフェース装置
US4925189A (en) 1989-01-13 1990-05-15 Braeunig Thomas F Body-mounted video game exercise device
US5229756A (en) 1989-02-07 1993-07-20 Yamaha Corporation Image control apparatus
US5469740A (en) 1989-07-14 1995-11-28 Impulse Technology, Inc. Interactive video testing and training system
JPH03103822U (zh) 1990-02-13 1991-10-29
US5101444A (en) 1990-05-18 1992-03-31 Panacea, Inc. Method and apparatus for high speed object location
US5148154A (en) 1990-12-04 1992-09-15 Sony Corporation Of America Multi-dimensional user interface
US5175641A (en) 1991-04-05 1992-12-29 International Business Machines Corporation Dual-mode laser diode transmitter
US5534917A (en) 1991-05-09 1996-07-09 Very Vivid, Inc. Video image based control system
US5417210A (en) 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
US5295491A (en) 1991-09-26 1994-03-22 Sam Technology, Inc. Non-invasive human neurocognitive performance capability testing method and system
US6054991A (en) 1991-12-02 2000-04-25 Texas Instruments Incorporated Method of modeling player position and movement in a virtual reality system
CA2101633A1 (en) 1991-12-03 1993-06-04 Barry J. French Interactive video testing and training system
US5875108A (en) 1991-12-23 1999-02-23 Hoffberg; Steven M. Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
JPH07325934A (ja) 1992-07-10 1995-12-12 Walt Disney Co:The 仮想世界に向上したグラフィックスを提供する方法および装置
US5999908A (en) 1992-08-06 1999-12-07 Abelow; Daniel H. Customer-based product design module
JP3244798B2 (ja) 1992-09-08 2002-01-07 株式会社東芝 動画像処理装置
US5320538A (en) 1992-09-23 1994-06-14 Hughes Training, Inc. Interactive aircraft training system and method
IT1257294B (it) 1992-11-20 1996-01-12 Dispositivo atto a rilevare la configurazione di un'unita' fisiologicadistale,da utilizzarsi in particolare come interfaccia avanzata per macchine e calcolatori.
US5495576A (en) 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
US5690582A (en) 1993-02-02 1997-11-25 Tectrix Fitness Equipment, Inc. Interactive exercise apparatus
JP2799126B2 (ja) 1993-03-26 1998-09-17 株式会社ナムコ ビデオゲーム装置及びゲーム用入力装置
US5405152A (en) 1993-06-08 1995-04-11 The Walt Disney Company Method and apparatus for an interactive video game with physical feedback
US5454043A (en) 1993-07-30 1995-09-26 Mitsubishi Electric Research Laboratories, Inc. Dynamic and static hand gesture recognition through low-level image analysis
US5423554A (en) 1993-09-24 1995-06-13 Metamedia Ventures, Inc. Virtual reality game method and apparatus
US5980256A (en) 1993-10-29 1999-11-09 Carmein; David E. E. Virtual reality system with enhanced sensory apparatus
JP3419050B2 (ja) 1993-11-19 2003-06-23 株式会社日立製作所 入力装置
US5347306A (en) 1993-12-17 1994-09-13 Mitsubishi Electric Research Laboratories, Inc. Animated electronic meeting place
JP2552427B2 (ja) 1993-12-28 1996-11-13 コナミ株式会社 テレビ遊戯システム
US5577981A (en) 1994-01-19 1996-11-26 Jarvik; Robert Virtual reality exercise machine and computer controlled video system
US5580249A (en) 1994-02-14 1996-12-03 Sarcos Group Apparatus for simulating mobility of a human
US5597309A (en) 1994-03-28 1997-01-28 Riess; Thomas Method and apparatus for treatment of gait problems associated with parkinson's disease
US5385519A (en) 1994-04-19 1995-01-31 Hsu; Chi-Hsueh Running machine
US5528263A (en) 1994-06-15 1996-06-18 Daniel M. Platzker Interactive projected video image display system
US5524637A (en) 1994-06-29 1996-06-11 Erickson; Jon W. Interactive system for measuring physiological exertion
JPH0844490A (ja) 1994-07-28 1996-02-16 Matsushita Electric Ind Co Ltd インターフェイス装置
US5563988A (en) 1994-08-01 1996-10-08 Massachusetts Institute Of Technology Method and system for facilitating wireless, full-body, real-time user interaction with a digitally represented visual environment
JPH0863326A (ja) 1994-08-22 1996-03-08 Hitachi Ltd 画像処理装置及び方法
US6714665B1 (en) 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
WO1996009579A1 (en) 1994-09-22 1996-03-28 Izak Van Cruyningen Popup menus with directional gestures
US5516105A (en) 1994-10-06 1996-05-14 Exergame, Inc. Acceleration activated joystick
JP3270264B2 (ja) 1994-10-19 2002-04-02 富士写真フイルム株式会社 放射線像変換パネルおよびその製造法
US5638300A (en) 1994-12-05 1997-06-10 Johnson; Lee E. Golf swing analysis system
JPH08161292A (ja) 1994-12-09 1996-06-21 Matsushita Electric Ind Co Ltd 混雑度検知方法およびそのシステム
US5594469A (en) 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
US5682229A (en) 1995-04-14 1997-10-28 Schwartz Electro-Optics, Inc. Laser range camera
DE19516664C1 (de) 1995-05-05 1996-08-29 Siemens Ag Verfahren zum Aufbau einer Farbtabelle in einer Computereinheit zur Klassifikation von Bildpunkten in einem Bild
US5913727A (en) 1995-06-02 1999-06-22 Ahdoot; Ned Interactive movement and contact simulation game
US6229913B1 (en) 1995-06-07 2001-05-08 The Trustees Of Columbia University In The City Of New York Apparatus and methods for determining the three-dimensional shape of an object using active illumination and relative blurring in two-images due to defocus
IL114278A (en) 1995-06-22 2010-06-16 Microsoft Internat Holdings B Camera and method
US5682196A (en) 1995-06-22 1997-10-28 Actv, Inc. Three-dimensional (3D) video presentation system providing interactive 3D presentation with personalized audio responses for multiple viewers
JPH11508359A (ja) 1995-06-22 1999-07-21 3ディブイ・システムズ・リミテッド 改善された光学測距カメラ
US7895076B2 (en) 1995-06-30 2011-02-22 Sony Computer Entertainment Inc. Advertisement insertion, profiling, impression, and feedback
US5702323A (en) 1995-07-26 1997-12-30 Poulton; Craig K. Electronic exercise enhancer
JPH0981309A (ja) 1995-09-13 1997-03-28 Toshiba Corp 入力装置
WO1999044698A2 (en) 1998-03-03 1999-09-10 Arena, Inc. System and method for tracking and assessing movement skills in multidimensional space
US6308565B1 (en) 1995-11-06 2001-10-30 Impulse Technology Ltd. System and method for tracking and assessing movement skills in multidimensional space
US6073489A (en) 1995-11-06 2000-06-13 French; Barry J. Testing and training system for assessing the ability of a player to complete a task
US6430997B1 (en) 1995-11-06 2002-08-13 Trazer Technologies, Inc. System and method for tracking and assessing movement skills in multidimensional space
US6098458A (en) 1995-11-06 2000-08-08 Impulse Technology, Ltd. Testing and training system for assessing movement and agility skills without a confining field
US6176782B1 (en) 1997-12-22 2001-01-23 Philips Electronics North America Corp. Motion-based command generation technology
US5933125A (en) 1995-11-27 1999-08-03 Cae Electronics, Ltd. Method and apparatus for reducing instability in the display of a virtual environment
US5641288A (en) 1996-01-11 1997-06-24 Zaenglein, Jr.; William G. Shooting simulating process and training device using a virtual reality display screen
US6115482A (en) 1996-02-13 2000-09-05 Ascent Technology, Inc. Voice-output reading system with gesture-based navigation
US6152856A (en) 1996-05-08 2000-11-28 Real Vision Corporation Real time simulation using position sensing
US6173066B1 (en) 1996-05-21 2001-01-09 Cybernet Systems Corporation Pose determination and tracking by matching 3D objects to a 2D sensor
US6002808A (en) 1996-07-26 1999-12-14 Mitsubishi Electric Information Technology Center America, Inc. Hand gesture control system
US5989157A (en) 1996-08-06 1999-11-23 Walton; Charles A. Exercising system with electronic inertial game playing
CN1168057C (zh) 1996-08-14 2004-09-22 挪拉赫梅特·挪利斯拉莫维奇·拉都包夫 追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统
JP3064928B2 (ja) 1996-09-20 2000-07-12 日本電気株式会社 被写体抽出方式
US20020120925A1 (en) * 2000-03-28 2002-08-29 Logan James D. Audio and video program recording, editing and playback systems using metadata
DE69626208T2 (de) 1996-12-20 2003-11-13 Hitachi Europ Ltd Verfahren und System zur Erkennung von Handgesten
US5904484A (en) 1996-12-23 1999-05-18 Burns; Dave Interactive motion training device and method
US6009210A (en) 1997-03-05 1999-12-28 Digital Equipment Corporation Hands-free interface to a virtual reality environment using head tracking
US5999766A (en) 1997-03-05 1999-12-07 Matsushita Electric Industrial Co., Ltd. Image processing apparatus with user authorization mechanism
US6100896A (en) 1997-03-24 2000-08-08 Mitsubishi Electric Information Technology Center America, Inc. System for designing graphical multi-participant environments
US5877803A (en) 1997-04-07 1999-03-02 Tritech Mircoelectronics International, Ltd. 3-D image detector
US6215898B1 (en) 1997-04-15 2001-04-10 Interval Research Corporation Data processing system and method
US6075895A (en) 1997-06-20 2000-06-13 Holoplex Methods and apparatus for gesture recognition based on templates
JP3077745B2 (ja) 1997-07-31 2000-08-14 日本電気株式会社 データ処理方法および装置、情報記憶媒体
US6188777B1 (en) 1997-08-01 2001-02-13 Interval Research Corporation Method and apparatus for personnel detection and tracking
US6289112B1 (en) 1997-08-22 2001-09-11 International Business Machines Corporation System and method for determining block direction in fingerprint images
US6720949B1 (en) 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US6750848B1 (en) 1998-11-09 2004-06-15 Timothy R. Pryor More useful man machine interfaces and applications
AUPO894497A0 (en) 1997-09-02 1997-09-25 Xenotech Research Pty Ltd Image processing method and apparatus
WO1999015863A1 (en) 1997-09-24 1999-04-01 3Dv Systems, Ltd. Acoustical imaging system
EP0905644A3 (en) 1997-09-26 2004-02-25 Matsushita Electric Industrial Co., Ltd. Hand gesture recognizing device
US6141463A (en) 1997-10-10 2000-10-31 Electric Planet Interactive Method and system for estimating jointed-figure configurations
US6101289A (en) 1997-10-15 2000-08-08 Electric Planet, Inc. Method and apparatus for unencumbered capture of an object
US6130677A (en) 1997-10-15 2000-10-10 Electric Planet, Inc. Interactive computer vision system
WO1999019828A1 (en) 1997-10-15 1999-04-22 Electric Planet, Inc. Method and apparatus for performing a clean background subtraction
AU9808298A (en) 1997-10-15 1999-05-03 Electric Planet, Inc. A system and method for generating an animatable character
US6072494A (en) 1997-10-15 2000-06-06 Electric Planet, Inc. Method and apparatus for real-time gesture recognition
US6181343B1 (en) 1997-12-23 2001-01-30 Philips Electronics North America Corp. System and method for permitting three-dimensional navigation through a virtual reality environment using camera-based gesture inputs
US7196720B2 (en) 1998-03-06 2007-03-27 Intel Corporation Method and apparatus for powering on an electronic device with a video camera that detects motion
US6159100A (en) 1998-04-23 2000-12-12 Smith; Michael D. Virtual reality game
US6421453B1 (en) 1998-05-15 2002-07-16 International Business Machines Corporation Apparatus and methods for user recognition employing behavioral passwords
US6181472B1 (en) 1998-06-10 2001-01-30 Robotic Vision Systems, Inc. Method and system for imaging an object with a plurality of optical beams
US6077201A (en) 1998-06-12 2000-06-20 Cheng; Chau-Yang Exercise bicycle
US6552722B1 (en) 1998-07-17 2003-04-22 Sensable Technologies, Inc. Systems and methods for sculpting virtual objects in a haptic virtual reality environment
US6141010A (en) 1998-07-17 2000-10-31 B. E. Technology, Llc Computer interface method and apparatus with targeted advertising
US6681031B2 (en) 1998-08-10 2004-01-20 Cybernet Systems Corporation Gesture-controlled interfaces for self-service machines and other applications
US7036094B1 (en) 1998-08-10 2006-04-25 Cybernet Systems Corporation Behavior recognition system
US20010008561A1 (en) 1999-08-10 2001-07-19 Paul George V. Real-time object tracking system
US6950534B2 (en) 1998-08-10 2005-09-27 Cybernet Systems Corporation Gesture-controlled interfaces for self-service machines and other applications
US7121946B2 (en) 1998-08-10 2006-10-17 Cybernet Systems Corporation Real-time head tracking system for computer games and other applications
US6801637B2 (en) 1999-08-10 2004-10-05 Cybernet Systems Corporation Optical body tracker
IL126284A (en) 1998-09-17 2002-12-01 Netmor Ltd System and method for three dimensional positioning and tracking
EP0991011B1 (en) 1998-09-28 2007-07-25 Matsushita Electric Industrial Co., Ltd. Method and device for segmenting hand gestures
US6501515B1 (en) 1998-10-13 2002-12-31 Sony Corporation Remote control system
AU1930700A (en) 1998-12-04 2000-06-26 Interval Research Corporation Background estimation and segmentation based on range and color
US6222465B1 (en) 1998-12-09 2001-04-24 Lucent Technologies Inc. Gesture-based computer interface
US6147678A (en) 1998-12-09 2000-11-14 Lucent Technologies Inc. Video hand image-three-dimensional computer interface with multiple degrees of freedom
US7134130B1 (en) * 1998-12-15 2006-11-07 Gateway Inc. Apparatus and method for user-based control of television content
AU1574899A (en) 1998-12-16 2000-07-03 3Dv Systems Ltd. Self gating photosurface
US6466232B1 (en) 1998-12-18 2002-10-15 Tangis Corporation Method and system for controlling presentation of information to a user based on the user's condition
US6570555B1 (en) 1998-12-30 2003-05-27 Fuji Xerox Co., Ltd. Method and apparatus for embodied conversational characters with multimodal input/output in an interface device
US6226388B1 (en) 1999-01-05 2001-05-01 Sharp Labs Of America, Inc. Method and apparatus for object tracking for automatic controls in video devices
US6363160B1 (en) 1999-01-22 2002-03-26 Intel Corporation Interface using pattern recognition and tracking
US6377296B1 (en) 1999-01-28 2002-04-23 International Business Machines Corporation Virtual map system and method for tracking objects
US7120880B1 (en) 1999-02-25 2006-10-10 International Business Machines Corporation Method and system for real-time determination of a subject's interest level to media content
US7003134B1 (en) 1999-03-08 2006-02-21 Vulcan Patents Llc Three dimensional object pose estimation which employs dense depth information
US6299308B1 (en) 1999-04-02 2001-10-09 Cybernet Systems Corporation Low-cost non-imaging eye tracker system for computer control
DE69942663D1 (de) 1999-04-13 2010-09-23 Sony Deutschland Gmbh Zusammenfügen von Sprachschnittstellen zur gleichzeitigen Benützung von Vorrichtungen und Anwendungen
US6591236B2 (en) 1999-04-13 2003-07-08 International Business Machines Corporation Method and system for determining available and alternative speech commands
US20030141360A1 (en) 1999-04-22 2003-07-31 De Leo Stephen L. System and method for providing information and services to and from an automated teller machine
US6614422B1 (en) 1999-11-04 2003-09-02 Canesta, Inc. Method and apparatus for entering data using a virtual input device
US7015950B1 (en) 1999-05-11 2006-03-21 Pryor Timothy R Picture taking method and apparatus
US6503195B1 (en) 1999-05-24 2003-01-07 University Of North Carolina At Chapel Hill Methods and systems for real-time structured light depth extraction and endoscope using real-time structured light depth extraction
US7821507B2 (en) 1999-05-25 2010-10-26 Silverbrook Research Pty Ltd Method of providing information via a printed substrate and two-mode sensing device
US6476834B1 (en) 1999-05-28 2002-11-05 International Business Machines Corporation Dynamic creation of selectable items on surfaces
US6291816B1 (en) 1999-06-08 2001-09-18 Robotic Vision Systems, Inc. System and method for measuring object features with coordinated two and three dimensional imaging
US6873723B1 (en) 1999-06-30 2005-03-29 Intel Corporation Segmenting three-dimensional video images using stereo
US6738066B1 (en) 1999-07-30 2004-05-18 Electric Plant, Inc. System, method and article of manufacture for detecting collisions between video images generated by a camera and an object depicted on a display
US7113918B1 (en) 1999-08-01 2006-09-26 Electric Planet, Inc. Method for video enabled electronic commerce
US6514081B1 (en) 1999-08-06 2003-02-04 Jeffrey L. Mengoli Method and apparatus for automating motion analysis
US7050606B2 (en) 1999-08-10 2006-05-23 Cybernet Systems Corporation Tracking and gesture recognition system particularly suited to vehicular control applications
US7224384B1 (en) 1999-09-08 2007-05-29 3Dv Systems Ltd. 3D imaging system
US6512838B1 (en) 1999-09-22 2003-01-28 Canesta, Inc. Methods for enhancing performance and data acquired from three-dimensional image systems
US7779439B2 (en) 2001-04-23 2010-08-17 Starz Entertainment, Llc Program guide environment
US6622119B1 (en) 1999-10-30 2003-09-16 International Business Machines Corporation Adaptive command predictor and method for a natural language dialog system
US20030021032A1 (en) 2001-06-22 2003-01-30 Cyrus Bamji Method and system to display a virtual input device
US7006236B2 (en) 2002-05-22 2006-02-28 Canesta, Inc. Method and apparatus for approximating depth of an object's placement onto a monitored region with applications to virtual interface devices
US20030132950A1 (en) 2001-11-27 2003-07-17 Fahri Surucu Detecting, classifying, and interpreting input events based on stimuli in multiple sensory domains
US6690618B2 (en) 2001-04-03 2004-02-10 Canesta, Inc. Method and apparatus for approximating a source position of a sound-causing event for determining an input used in operating an electronic device
US7050177B2 (en) 2002-05-22 2006-05-23 Canesta, Inc. Method and apparatus for approximating depth of an object's placement onto a monitored region with applications to virtual interface devices
DE19960180B4 (de) 1999-12-14 2006-03-09 Rheinmetall W & M Gmbh Verfahren zur Herstellung eines Sprenggeschosses
US7028001B1 (en) 1999-12-27 2006-04-11 Motorola, Inc. System and method for measuring web page advertisement impressions
US20030001846A1 (en) 2000-01-03 2003-01-02 Davis Marc E. Automatic personalized media creation system
US7146329B2 (en) 2000-01-13 2006-12-05 Erinmedia, Llc Privacy compliant multiple dataset correlation and content delivery system and methods
US6674877B1 (en) 2000-02-03 2004-01-06 Microsoft Corporation System and method for visually tracking occluded objects in real time
US6663491B2 (en) 2000-02-18 2003-12-16 Namco Ltd. Game apparatus, storage medium and computer program that adjust tempo of sound
US20020062481A1 (en) 2000-02-25 2002-05-23 Malcolm Slaney Method and system for selecting advertisements
US6633294B1 (en) 2000-03-09 2003-10-14 Seth Rosenthal Method and apparatus for using captured high density motion for animation
GB0005727D0 (en) 2000-03-10 2000-05-03 Koninkl Philips Electronics Nv Television
WO2001069799A2 (en) 2000-03-16 2001-09-20 Creator Ltd. Methods and apparatus for integration of interactive toys with interactive television and cellular communication systems
EP1277104A1 (en) 2000-03-30 2003-01-22 Ideogramic APS Method for gesture based modeling
US6778171B1 (en) 2000-04-05 2004-08-17 Eagle New Media Investments, Llc Real world/virtual world correlation system using 3D graphics pipeline
EP1152261A1 (en) 2000-04-28 2001-11-07 CSEM Centre Suisse d'Electronique et de Microtechnique SA Device and method for spatially resolved photodetection and demodulation of modulated electromagnetic waves
US6856827B2 (en) 2000-04-28 2005-02-15 Ge Medical Systems Global Technology Company, Llc Fluoroscopic tracking and visualization system
US6640202B1 (en) 2000-05-25 2003-10-28 International Business Machines Corporation Elastic sensor mesh system for 3-dimensional measurement, mapping and kinematics applications
KR100865598B1 (ko) 2000-05-29 2008-10-27 브이케이비 인코포레이티드 수문자 조합 및 다른 데이터의 입력을 위한 가상 데이터입력 장치 및 방법
US6731799B1 (en) 2000-06-01 2004-05-04 University Of Washington Object segmentation with background extraction and moving boundary techniques
US7042442B1 (en) 2000-06-27 2006-05-09 International Business Machines Corporation Virtual invisible keyboard
US6788809B1 (en) 2000-06-30 2004-09-07 Intel Corporation System and method for gesture recognition in three dimensions using stereo imaging and color vision
US7227526B2 (en) 2000-07-24 2007-06-05 Gesturetek, Inc. Video-based image control system
US20090234718A1 (en) 2000-09-05 2009-09-17 Novell, Inc. Predictive service systems using emotion detection
JP4432246B2 (ja) 2000-09-29 2010-03-17 ソニー株式会社 観客状況判定装置、再生出力制御システム、観客状況判定方法、再生出力制御方法、記録媒体
US7058204B2 (en) 2000-10-03 2006-06-06 Gesturetek, Inc. Multiple camera control system
JP3725460B2 (ja) 2000-10-06 2005-12-14 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
US20030036944A1 (en) 2000-10-11 2003-02-20 Lesandrini Jay William Extensible business method with advertisement research as an example
US7039676B1 (en) 2000-10-31 2006-05-02 International Business Machines Corporation Using video image analysis to automatically transmit gestures over a network in a chat or instant messaging session
US20020072952A1 (en) 2000-12-07 2002-06-13 International Business Machines Corporation Visual and audible consumer reaction collection
DE60129591T2 (de) 2000-12-15 2008-04-17 E.I. Du Pont De Nemours And Co., Wilmington Aufnahmeelement zur einstellung des brennpunktes eines bilderzeugungslasers
ES2261527T3 (es) 2001-01-09 2006-11-16 Metabyte Networks, Inc. Sistema, procedimiento y aplicacion de software para publicidad dirigida mediante una agrupacion de modelos de comportamiento, y preferencias de programacion basadas en grupos de modelos de comportamiento.
JP2002259720A (ja) 2001-03-02 2002-09-13 Internatl Business Mach Corp <Ibm> コンテンツ要約システム、映像要約システム、ユーザ端末、要約映像生成方法、要約映像受信方法、およびプログラム
JP4371597B2 (ja) * 2001-03-15 2009-11-25 シャープ株式会社 情報再生装置
US20020144259A1 (en) 2001-03-29 2002-10-03 Philips Electronics North America Corp. Method and apparatus for controlling a media player based on user activity
US6539931B2 (en) 2001-04-16 2003-04-01 Koninklijke Philips Electronics N.V. Ball throwing assistant
US7313621B2 (en) 2001-05-15 2007-12-25 Sony Corporation Personalized interface with adaptive content presentation
US20020174445A1 (en) 2001-05-17 2002-11-21 Koninklijke Philips Electronics N.V. Video playback device with real-time on-line viewer feedback capability and method of operation
US8035612B2 (en) 2002-05-28 2011-10-11 Intellectual Ventures Holding 67 Llc Self-contained interactive video display system
US7259747B2 (en) 2001-06-05 2007-08-21 Reactrix Systems, Inc. Interactive video display system
US6594616B2 (en) 2001-06-18 2003-07-15 Microsoft Corporation System and method for providing a mobile input device
US6795972B2 (en) 2001-06-29 2004-09-21 Scientific-Atlanta, Inc. Subscriber television system user interface with a virtual reality media space
JP3420221B2 (ja) 2001-06-29 2003-06-23 株式会社コナミコンピュータエンタテインメント東京 ゲーム装置及びプログラム
US20030007018A1 (en) 2001-07-09 2003-01-09 Giovanni Seni Handwriting user interface for personal digital assistants and the like
US6868383B1 (en) 2001-07-12 2005-03-15 At&T Corp. Systems and methods for extracting meaning from multimodal inputs using finite-state devices
GB2379017A (en) 2001-07-27 2003-02-26 Hewlett Packard Co Method and apparatus for monitoring crowds
WO2003015056A2 (en) 2001-08-09 2003-02-20 Visual Interaction Gmbh Automated behavioral and cognitive profiling for training and marketing segmentation
FI115419B (fi) 2001-08-20 2005-04-29 Helsingin Kauppakorkeakoulu Informaatiopalveluiden käyttäjäkohtainen personointi
US7007236B2 (en) 2001-09-14 2006-02-28 Accenture Global Services Gmbh Lab window collaboration
US6937742B2 (en) 2001-09-28 2005-08-30 Bellsouth Intellectual Property Corporation Gesture activated home appliance
US20030066071A1 (en) 2001-10-03 2003-04-03 Koninklijke Philips Electronics N.V. Program recommendation method and system utilizing a viewing history of commercials
US8079045B2 (en) 2001-10-17 2011-12-13 Keen Personal Media, Inc. Personal video recorder and method for inserting a stored advertisement into a displayed broadcast stream
US20030079226A1 (en) 2001-10-19 2003-04-24 Barrett Peter T. Video segment targeting using remotely issued instructions and localized state and behavior information
US8561095B2 (en) * 2001-11-13 2013-10-15 Koninklijke Philips N.V. Affective television monitoring and control in response to physiological data
WO2003054683A2 (en) 2001-12-07 2003-07-03 Canesta Inc. User interface for electronic devices
US6585521B1 (en) 2001-12-21 2003-07-01 Hewlett-Packard Development Company, L.P. Video indexing based on viewers' behavior and emotion feedback
US7340077B2 (en) 2002-02-15 2008-03-04 Canesta, Inc. Gesture recognition system using depth perceptive sensors
US6730913B2 (en) 2002-02-21 2004-05-04 Ford Global Technologies, Llc Active night vision system for vehicles employing short-pulse laser illumination and a gated camera for image capture
US7516447B2 (en) 2002-02-22 2009-04-07 Bea Systems, Inc. Methods and apparatus for building, customizing and using software abstractions of external entities
US20030169906A1 (en) 2002-02-26 2003-09-11 Gokturk Salih Burak Method and apparatus for recognizing objects
US7310431B2 (en) 2002-04-10 2007-12-18 Canesta, Inc. Optical methods for remotely measuring objects
ATE321689T1 (de) 2002-04-19 2006-04-15 Iee Sarl Sicherheitsvorrichtung für ein fahrzeug
US7170492B2 (en) 2002-05-28 2007-01-30 Reactrix Systems, Inc. Interactive video display system
US7348963B2 (en) 2002-05-28 2008-03-25 Reactrix Systems, Inc. Interactive video display system
US7710391B2 (en) 2002-05-28 2010-05-04 Matthew Bell Processing an image utilizing a spatially varying pattern
US7489812B2 (en) 2002-06-07 2009-02-10 Dynamic Digital Depth Research Pty Ltd. Conversion and encoding techniques
US20040001616A1 (en) 2002-06-27 2004-01-01 Srinivas Gutta Measurement of content ratings through vision and speech recognition
US7646372B2 (en) 2003-09-15 2010-01-12 Sony Computer Entertainment Inc. Methods and systems for enabling direction detection when interfacing with a computer program
US7623115B2 (en) 2002-07-27 2009-11-24 Sony Computer Entertainment Inc. Method and apparatus for light input device
US7883415B2 (en) 2003-09-15 2011-02-08 Sony Computer Entertainment Inc. Method and apparatus for adjusting a view of a scene being displayed according to tracked head motion
US8019121B2 (en) 2002-07-27 2011-09-13 Sony Computer Entertainment Inc. Method and system for processing intensity from input devices for interfacing with a computer program
US7627139B2 (en) 2002-07-27 2009-12-01 Sony Computer Entertainment Inc. Computer image and audio processing of intensity and input devices for interfacing with a computer program
US7058902B2 (en) 2002-07-30 2006-06-06 Microsoft Corporation Enhanced on-object context menus
US7145330B2 (en) 2002-08-16 2006-12-05 Brown University Research Foundation Scanning magnetic microscope having improved magnetic sensor
US7151530B2 (en) 2002-08-20 2006-12-19 Canesta, Inc. System and method for determining an input selected by a user through a virtual interface
WO2004027685A2 (en) 2002-09-19 2004-04-01 The Penn State Research Foundation Prosody based audio/visual co-analysis for co-verbal gesture recognition
JP2004110453A (ja) * 2002-09-19 2004-04-08 Sony Corp 携帯端末装置
US7002560B2 (en) 2002-10-04 2006-02-21 Human Interface Technologies Inc. Method of combining data entry of handwritten symbols with displayed character data
EP1408443B1 (en) 2002-10-07 2006-10-18 Sony France S.A. Method and apparatus for analysing gestures produced by a human, e.g. for commanding apparatus by gesture recognition
US20040113933A1 (en) 2002-10-08 2004-06-17 Northrop Grumman Corporation Split and merge behavior analysis and understanding using Hidden Markov Models
US7576727B2 (en) 2002-12-13 2009-08-18 Matthew Bell Interactive directed light/sound system
JP4235729B2 (ja) 2003-02-03 2009-03-11 国立大学法人静岡大学 距離画像センサ
US9177387B2 (en) 2003-02-11 2015-11-03 Sony Computer Entertainment Inc. Method and apparatus for real time motion capture
US7435941B2 (en) 2003-03-14 2008-10-14 Inphase Technologies, Inc. Methods for measuring optical characteristics by differential diffractive scanning
US7762665B2 (en) 2003-03-21 2010-07-27 Queen's University At Kingston Method and apparatus for communication between humans and devices
US7665041B2 (en) 2003-03-25 2010-02-16 Microsoft Corporation Architecture for controlling a computer using hand gestures
US8745541B2 (en) 2003-03-25 2014-06-03 Microsoft Corporation Architecture for controlling a computer using hand gestures
DE602004006190T8 (de) 2003-03-31 2008-04-10 Honda Motor Co., Ltd. Vorrichtung, Verfahren und Programm zur Gestenerkennung
WO2004107266A1 (en) 2003-05-29 2004-12-09 Honda Motor Co., Ltd. Visual tracking using depth data
US8072470B2 (en) 2003-05-29 2011-12-06 Sony Computer Entertainment Inc. System and method for providing a real-time three-dimensional interactive environment
WO2005113099A2 (en) 2003-05-30 2005-12-01 America Online, Inc. Personalizing content
JP4546956B2 (ja) 2003-06-12 2010-09-22 本田技研工業株式会社 奥行き検出を用いた対象の向きの推定
US7214932B2 (en) 2003-08-20 2007-05-08 Xyratex Technology Limited Resonator method and system for distinguishing characteristics of surface features or contaminants
US7170605B2 (en) 2003-08-25 2007-01-30 Evan Francis Cromwell Active sensor and method for optical illumination and detection
US20050082480A1 (en) 2003-08-26 2005-04-21 Aegis Semiconductor, Inc. Infrared camera system
KR100493902B1 (ko) 2003-08-28 2005-06-10 삼성전자주식회사 콘텐츠 추천방법 및 시스템
US7874917B2 (en) 2003-09-15 2011-01-25 Sony Computer Entertainment Inc. Methods and systems for enabling depth and direction detection when interfacing with a computer program
JP2005108108A (ja) 2003-10-01 2005-04-21 Canon Inc 三次元cg操作装置および方法、並びに位置姿勢センサのキャリブレーション装置
US7536032B2 (en) 2003-10-24 2009-05-19 Reactrix Systems, Inc. Method and system for processing captured image information in an interactive video display system
US7155305B2 (en) 2003-11-04 2006-12-26 Universal Electronics Inc. System and methods for home appliance identification and control in a networked environment
GB2410359A (en) 2004-01-23 2005-07-27 Sony Uk Ltd Display
JP3847753B2 (ja) 2004-01-30 2006-11-22 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
JP2005218025A (ja) * 2004-02-02 2005-08-11 Matsushita Electric Ind Co Ltd 視聴中断位置記憶装置、再生装置、及び記録装置
US7706616B2 (en) 2004-02-27 2010-04-27 International Business Machines Corporation System and method for recognizing word patterns in a very large vocabulary based on a virtual keyboard layout
EP1722287A1 (en) 2004-03-04 2006-11-15 NEC Corporation Data update system, data update method, date update program, and robot system
US8949899B2 (en) 2005-03-04 2015-02-03 Sharp Laboratories Of America, Inc. Collaborative recommendation system
US20050215319A1 (en) 2004-03-23 2005-09-29 Harmonix Music Systems, Inc. Method and apparatus for controlling a three-dimensional character in a three-dimensional gaming environment
US7301529B2 (en) 2004-03-23 2007-11-27 Fujitsu Limited Context dependent gesture response
EP1582965A1 (en) 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
JP4092697B2 (ja) 2004-04-07 2008-05-28 ソニー株式会社 情報処理装置および方法、プログラム並びに記録媒体
CN100573548C (zh) 2004-04-15 2009-12-23 格斯图尔泰克股份有限公司 跟踪双手运动的方法和设备
US7308112B2 (en) 2004-05-14 2007-12-11 Honda Motor Co., Ltd. Sign based human-machine interaction
US8050782B2 (en) 2004-05-20 2011-11-01 Abb Research Ltd. Method and system to retrieve and display technical data for an industrial device
US20050289582A1 (en) 2004-06-24 2005-12-29 Hitachi, Ltd. System and method for capturing and using biometrics to review a product, service, creative work or thing
US7178111B2 (en) 2004-08-03 2007-02-13 Microsoft Corporation Multi-planar three-dimensional user interface
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
US7704135B2 (en) 2004-08-23 2010-04-27 Harrison Jr Shelton E Integrated game system, method, and device
US7991220B2 (en) 2004-09-01 2011-08-02 Sony Computer Entertainment Inc. Augmented reality game system using identification information to display a virtual object in association with a position of a real object
JP2006068315A (ja) 2004-09-02 2006-03-16 Sega Corp ポーズ検出プログラム、ビデオゲーム装置、ポーズ検出方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
US7761814B2 (en) 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
WO2006038779A1 (en) 2004-10-01 2006-04-13 Samsung Electronics Co., Ltd. Device and method for displaying event in wireless terminal
EP1645944B1 (en) 2004-10-05 2012-08-15 Sony France S.A. A content-management interface
US7346944B2 (en) 2004-11-05 2008-03-25 Mark Shaw Mattress monitoring system
US7212665B2 (en) 2004-11-05 2007-05-01 Honda Motor Co. Human pose estimation with data driven belief propagation
US7814518B2 (en) 2004-11-23 2010-10-12 Palo Alto Research Center Incorporated Methods, apparatus, and program products for presenting replacement content instead of a portion of a recorded content
US7870589B2 (en) 2004-11-23 2011-01-11 Palo Alto Research Center Incorporated Method for providing commentary audio and additional or replacement video content
US7217020B2 (en) 2004-11-24 2007-05-15 General Motors Corporation Headlamp assembly with integrated infrared illuminator
US20060123360A1 (en) 2004-12-03 2006-06-08 Picsel Research Limited User interfaces for data processing devices and systems
JP4449723B2 (ja) 2004-12-08 2010-04-14 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
KR20060070280A (ko) 2004-12-20 2006-06-23 한국전자통신연구원 손 제스처 인식을 이용한 사용자 인터페이스 장치 및 그방법
US7216053B2 (en) 2004-12-30 2007-05-08 Nokia Corporation Low power motion detector
CN101137996A (zh) 2005-01-07 2008-03-05 格斯图尔泰克股份有限公司 基于光流的倾斜传感器
WO2006074310A2 (en) 2005-01-07 2006-07-13 Gesturetek, Inc. Creating 3d images of objects by illuminating with infrared patterns
HUE049974T2 (hu) 2005-01-07 2020-11-30 Qualcomm Inc Képeken lévõ objektumok észlelése és követése
KR100703693B1 (ko) 2005-01-13 2007-04-05 삼성전자주식회사 얼굴 인식 시스템 및 방법
JP3862027B2 (ja) * 2005-01-25 2006-12-27 船井電機株式会社 放送信号受信システム
US20060184800A1 (en) 2005-02-16 2006-08-17 Outland Research, Llc Method and apparatus for using age and/or gender recognition techniques to customize a user interface
EP1851750A4 (en) 2005-02-08 2010-08-25 Oblong Ind Inc SYSTEM AND METHOD FOR CONTROL SYSTEM BASED ON GESTURES
US8009871B2 (en) 2005-02-08 2011-08-30 Microsoft Corporation Method and system to segment depth images and to detect shapes in three-dimensionally acquired data
GB2423808B (en) 2005-03-04 2010-02-17 Ford Global Tech Llc Motor vehicle control system for controlling one or more vehicle devices
US20060218573A1 (en) 2005-03-04 2006-09-28 Stexar Corp. Television program highlight tagging
KR100688743B1 (ko) 2005-03-11 2007-03-02 삼성전기주식회사 멀티 레이어 커패시터 내장형의 인쇄회로기판의 제조방법
US7643056B2 (en) 2005-03-14 2010-01-05 Aptina Imaging Corporation Motion detecting camera system
US7877703B1 (en) 2005-03-14 2011-01-25 Seven Networks, Inc. Intelligent rendering of information in a limited display environment
JP4686595B2 (ja) 2005-03-17 2011-05-25 本田技研工業株式会社 クリティカルポイント解析に基づくポーズ推定
US8147248B2 (en) 2005-03-21 2012-04-03 Microsoft Corporation Gesture training
US7487461B2 (en) 2005-05-04 2009-02-03 International Business Machines Corporation System and method for issuing commands based on pen motions on a graphical keyboard
EP1886509B1 (en) 2005-05-17 2017-01-18 Qualcomm Incorporated Orientation-sensitive signal output
US20060262116A1 (en) 2005-05-19 2006-11-23 Hillcrest Laboratories, Inc. Global navigation objects in user interfaces
US20060280055A1 (en) 2005-06-08 2006-12-14 Miller Rodney D Laser power control and device status monitoring for video/graphic applications
US7646960B2 (en) 2005-06-09 2010-01-12 International Business Machines Corporation Determining chapters based on presentation of a program
EP1752748B1 (en) 2005-08-12 2008-10-29 MESA Imaging AG Highly sensitive, fast pixel for use in an image sensor
US20080026838A1 (en) 2005-08-22 2008-01-31 Dunstan James E Multi-player non-role-playing virtual world games: method for two-way interaction between participants and multi-player virtual world games
US8645985B2 (en) * 2005-09-15 2014-02-04 Sony Computer Entertainment Inc. System and method for detecting user attention
TW200713060A (en) 2005-09-30 2007-04-01 Primax Electronics Ltd Adaptive input method for touch screen
US7450736B2 (en) 2005-10-28 2008-11-11 Honda Motor Co., Ltd. Monocular tracking of 3D human motion with a coordinated mixture of factor analyzers
GB2431717A (en) 2005-10-31 2007-05-02 Sony Uk Ltd Scene analysis
US20070143787A1 (en) 2005-12-19 2007-06-21 Cankaya Hakki C System and method for providing context-aware local advertising in IPTV systems
US20070140532A1 (en) 2005-12-20 2007-06-21 Goffin Glen P Method and apparatus for providing user profiling based on facial recognition
US20070150281A1 (en) 2005-12-22 2007-06-28 Hoff Todd M Method and system for utilizing emotion to search content
US20070150916A1 (en) 2005-12-28 2007-06-28 James Begole Using sensors to provide feedback on the access of digital content
US20070214292A1 (en) 2006-02-24 2007-09-13 Gillian Hayes System and method for archiving of continuous capture buffers
JP4917615B2 (ja) 2006-02-27 2012-04-18 プライム センス リミティド スペックルの無相関を使用した距離マッピング(rangemapping)
US20070219430A1 (en) 2006-03-17 2007-09-20 Moore Barrett H Electricity Providing Privately Provisioned Subscription-Based Survival Supply Unit Method And Apparatus
DE102006037156A1 (de) 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
US8362713B2 (en) 2006-03-28 2013-01-29 Wireless Environment, Llc Wireless lighting devices and grid-shifting applications
US8491159B2 (en) 2006-03-28 2013-07-23 Wireless Environment, Llc Wireless emergency lighting system
US7568116B2 (en) 2006-04-14 2009-07-28 Clever Innovations, Inc. Automated display device
DE102006021414A1 (de) 2006-05-05 2007-11-08 Claudia Eisert Flexibles orthetisches Bekleidungsstück
US8766983B2 (en) 2006-05-07 2014-07-01 Sony Computer Entertainment Inc. Methods and systems for processing an interchange of real time effects during video communication
US20070271580A1 (en) 2006-05-16 2007-11-22 Bellsouth Intellectual Property Corporation Methods, Apparatus and Computer Program Products for Audience-Adaptive Control of Content Presentation Based on Sensed Audience Demographics
US7721207B2 (en) 2006-05-31 2010-05-18 Sony Ericsson Mobile Communications Ab Camera based control
WO2007149341A2 (en) 2006-06-14 2007-12-27 Agent Science Technologies, Inc. System to associate a demographic to a user of an electronic system
US7640304B1 (en) 2006-06-14 2009-12-29 Yes International Ag System and method for detecting and measuring emotional indicia
US20090254932A1 (en) 2006-06-27 2009-10-08 Koninklijke Philips Electronics N.V. Inserting advertisements in a television program
JP2009543497A (ja) * 2006-07-12 2009-12-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ オーディオ−ビデオコンテンツを再生するための装置及び方法
US7701439B2 (en) 2006-07-13 2010-04-20 Northrop Grumman Corporation Gesture recognition simulation system and method
TW200806029A (en) 2006-07-14 2008-01-16 Asustek Comp Inc Display system and control method thereof
US20080018591A1 (en) 2006-07-20 2008-01-24 Arkady Pittel User Interfacing
US20080027984A1 (en) 2006-07-31 2008-01-31 Motorola, Inc. Method and system for multi-dimensional action capture
US8775237B2 (en) 2006-08-02 2014-07-08 Opinionlab, Inc. System and method for measuring and reporting user reactions to advertisements on a web page
EP2063767A4 (en) 2006-09-05 2014-05-21 Innerscope Res Inc METHOD AND SYSTEM FOR DETERMINING THE RESPONSE OF A PUBLIC TO A SENSORY STIMULUS
US9514436B2 (en) 2006-09-05 2016-12-06 The Nielsen Company (Us), Llc Method and system for predicting audience viewing behavior
US7725547B2 (en) 2006-09-06 2010-05-25 International Business Machines Corporation Informing a user of gestures made by others out of the user's line of sight
US8395658B2 (en) 2006-09-07 2013-03-12 Sony Computer Entertainment Inc. Touch screen-like user interface that does not require actual touching
US8310656B2 (en) 2006-09-28 2012-11-13 Sony Computer Entertainment America Llc Mapping movements of a hand-held controller to the two-dimensional image plane of a display screen
US8287372B2 (en) 2006-09-28 2012-10-16 Mattel, Inc. Interactive toy and display system
JP5395323B2 (ja) 2006-09-29 2014-01-22 ブレインビジョン株式会社 固体撮像素子
US7806329B2 (en) 2006-10-17 2010-10-05 Google Inc. Targeted video advertising
EP1919216A1 (en) 2006-10-30 2008-05-07 British Telecommunications Public Limited Company Personalised media presentation
US8102422B1 (en) 2006-11-22 2012-01-24 Amdocs Software Systems Limited System, method and computer program product for presenting an option to receive advertisement content
US20080124690A1 (en) 2006-11-28 2008-05-29 Attune Interactive, Inc. Training system using an interactive prompt character
US20080134102A1 (en) 2006-12-05 2008-06-05 Sony Ericsson Mobile Communications Ab Method and system for detecting movement of an object
CN101202994B (zh) 2006-12-14 2012-10-24 北京三星通信技术研究有限公司 辅助用户健身的方法和装置
KR100720335B1 (ko) 2006-12-20 2007-05-23 최경순 접촉 위치 이동에 따라 생성되는 상대좌표값에 대응하는텍스트를 입력하는 텍스트 입력 장치 및 그 방법
US8351646B2 (en) 2006-12-21 2013-01-08 Honda Motor Co., Ltd. Human pose estimation and tracking using label assignment
KR20080058740A (ko) 2006-12-22 2008-06-26 삼성전자주식회사 디지털 방송 수신 장치 및 시간 동기화 방법
US7412077B2 (en) 2006-12-29 2008-08-12 Motorola, Inc. Apparatus and methods for head pose estimation and head gesture detection
US9311528B2 (en) 2007-01-03 2016-04-12 Apple Inc. Gesture learning
US20080163283A1 (en) 2007-01-03 2008-07-03 Angelito Perez Tan Broadband video with synchronized highlight signals
US7770136B2 (en) 2007-01-24 2010-08-03 Microsoft Corporation Gesture recognition interactive feedback
GB0703974D0 (en) 2007-03-01 2007-04-11 Sony Comp Entertainment Europe Entertainment device
US20090070798A1 (en) 2007-03-02 2009-03-12 Lee Hans C System and Method for Detecting Viewer Attention to Media Delivery Devices
US7729530B2 (en) 2007-03-03 2010-06-01 Sergey Antonov Method and apparatus for 3-D data input to a personal computer with a multimedia oriented operating system
US20080234023A1 (en) 2007-03-23 2008-09-25 Ajmal Mullahkhel Light game
EP2140333B1 (en) 2007-04-03 2013-03-27 TTE Technology, Inc. System and method for toggling between system power modes based on motion detection
US20090217315A1 (en) 2008-02-26 2009-08-27 Cognovision Solutions Inc. Method and system for audience measurement and targeting media
US20080310707A1 (en) 2007-06-15 2008-12-18 Microsoft Corporation Virtual reality enhancement using real world data
KR20090002809A (ko) 2007-07-04 2009-01-09 삼성전자주식회사 어플리케이션에서 생성된 데이터를 hdmi cec에 따라송수신하는 방법
JP5086711B2 (ja) * 2007-07-11 2012-11-28 シャープ株式会社 映像表示装置
US7865916B2 (en) 2007-07-20 2011-01-04 James Beser Audience determination for monetizing displayable content
US8726194B2 (en) 2007-07-27 2014-05-13 Qualcomm Incorporated Item selection using enhanced control
US20090037945A1 (en) 2007-07-31 2009-02-05 Hewlett-Packard Development Company, L.P. Multimedia presentation apparatus, method of selecting multimedia content, and computer program product
US7852262B2 (en) 2007-08-16 2010-12-14 Cybernet Systems Corporation Wireless mobile indoor/outdoor tracking system
US8081302B2 (en) 2007-08-17 2011-12-20 Princeton Satellite Systems, Inc. Multimode optical sensor
US9261979B2 (en) 2007-08-20 2016-02-16 Qualcomm Incorporated Gesture-based mobile interaction
US8132187B2 (en) 2007-08-31 2012-03-06 Microsoft Corporation Driver installer usable in plural environments
KR101182286B1 (ko) 2007-09-19 2012-09-14 삼성전자주식회사 움직임을 감지하는 리모트 컨트롤러 및, 리모트 컨트롤러에의해 포인터를 제어하는 영상디스플레이장치 및 그들의제어방법
US7899777B2 (en) 2007-09-27 2011-03-01 Rockwell Automation Technologies, Inc. Web-based visualization mash-ups for industrial automation
EP2042969A1 (en) 2007-09-28 2009-04-01 Alcatel Lucent Method for determining user reaction with specific content of a displayed page.
US7970176B2 (en) 2007-10-02 2011-06-28 Omek Interactive, Inc. Method and system for gesture classification
US8332883B2 (en) 2007-10-02 2012-12-11 The Nielsen Company (Us), Llc Providing actionable insights based on physiological responses from viewers of media
US8776102B2 (en) 2007-10-09 2014-07-08 At&T Intellectual Property I, Lp System and method for evaluating audience reaction to a data stream
US20090106645A1 (en) 2007-10-17 2009-04-23 Thinkingcraft, Inc. Adaptive response/interpretive expression, communication distribution, and intelligent determination system and method
US8001108B2 (en) 2007-10-24 2011-08-16 The Invention Science Fund I, Llc Returning a new content based on a person's reaction to at least two instances of previously displayed content
US9292092B2 (en) 2007-10-30 2016-03-22 Hewlett-Packard Development Company, L.P. Interactive display system with collaborative gesture detection
US8094891B2 (en) 2007-11-01 2012-01-10 Sony Ericsson Mobile Communications Ab Generating music playlist based on facial expression
US9986293B2 (en) 2007-11-21 2018-05-29 Qualcomm Incorporated Device access control
US8471868B1 (en) 2007-11-28 2013-06-25 Sprint Communications Company L.P. Projector and ultrasonic gesture-controlled communicator
US20090221368A1 (en) 2007-11-28 2009-09-03 Ailive Inc., Method and system for creating a shared game space for a networked game
GB2455316B (en) 2007-12-04 2012-08-15 Sony Corp Image processing apparatus and method
US20090157472A1 (en) 2007-12-14 2009-06-18 Kimberly-Clark Worldwide, Inc. Personalized Retail Information Delivery Systems and Methods
US9165199B2 (en) 2007-12-21 2015-10-20 Honda Motor Co., Ltd. Controlled human pose estimation from depth image streams
US9098766B2 (en) 2007-12-21 2015-08-04 Honda Motor Co., Ltd. Controlled human pose estimation from depth image streams
US8149210B2 (en) 2007-12-31 2012-04-03 Microsoft International Holdings B.V. Pointing device and method
US8090030B2 (en) 2008-01-04 2012-01-03 Silicon Image, Inc. Method, apparatus and system for generating and facilitating mobile high-definition multimedia interface
US8166421B2 (en) 2008-01-14 2012-04-24 Primesense Ltd. Three-dimensional user interface
US8646017B2 (en) 2008-01-14 2014-02-04 At&T Intellectual Property I, L.P. Method and apparatus for providing collaborative viewing of a media stream
US7889073B2 (en) 2008-01-31 2011-02-15 Sony Computer Entertainment America Llc Laugh detector and system and method for tracking an emotional response to a media presentation
WO2009099296A2 (en) 2008-02-05 2009-08-13 Lg Electronics Inc. Virtual optical input device for providing various types of interfaces and method of controlling the same
KR101365776B1 (ko) 2008-04-08 2014-02-20 엘지디스플레이 주식회사 멀티 터치 시스템 및 그 구동 방법
EP2108328B2 (de) 2008-04-09 2020-08-26 Brainlab AG Bildbasiertes Ansteuerungsverfahren für medizintechnische Geräte
CN101254344B (zh) 2008-04-18 2010-06-16 李刚 场地方位与显示屏点阵按比例相对应的游戏装置和方法
GB2459707B (en) 2008-05-01 2010-08-11 Sony Computer Entertainment Inc Media recorder, audio visual entertainment system and method
WO2009143294A2 (en) 2008-05-20 2009-11-26 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US7979590B2 (en) 2008-05-27 2011-07-12 Eyran Lida Multiple sink configuration supporting HDMI-CEC
US8477139B2 (en) 2008-06-09 2013-07-02 Apple Inc. Touch screen device, method, and graphical user interface for manipulating three-dimensional virtual objects
JP2009302751A (ja) * 2008-06-11 2009-12-24 Sharp Corp 要約再生装置、要約再生方法、要約再生プログラム、および記録媒体
US9130684B2 (en) 2008-06-23 2015-09-08 Echostar Technologies L.L.C. Systems and methods for conserving energy in an entertainment system
CN201247590Y (zh) 2008-08-01 2009-05-27 鸿富锦精密工业(深圳)有限公司 可自动切换显示模式的电子相框
JP5035174B2 (ja) * 2008-08-21 2012-09-26 株式会社日立製作所 映像再生装置
US20100070987A1 (en) 2008-09-12 2010-03-18 At&T Intellectual Property I, L.P. Mining viewer responses to multimedia content
US8925001B2 (en) 2008-09-12 2014-12-30 At&T Intellectual Property I, L.P. Media stream generation based on a category of user expression
US20100070913A1 (en) 2008-09-15 2010-03-18 Apple Inc. Selecting an item of content in a graphical user interface for a portable computing device
US8769427B2 (en) 2008-09-19 2014-07-01 Google Inc. Quick gesture input
US8516561B2 (en) 2008-09-29 2013-08-20 At&T Intellectual Property I, L.P. Methods and apparatus for determining user authorization from motion of a gesture-based control unit
JP2010086356A (ja) * 2008-09-30 2010-04-15 Nec Corp 意識関与度測定装置、意識関与度測定方法および意識関与度測定プログラム
US20100086204A1 (en) 2008-10-03 2010-04-08 Sony Ericsson Mobile Communications Ab System and method for capturing an emotional characteristic of a user
US8544046B2 (en) 2008-10-09 2013-09-24 Packetvideo Corporation System and method for controlling media rendering in a network using a mobile device
KR20100041006A (ko) 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
US9399167B2 (en) 2008-10-14 2016-07-26 Microsoft Technology Licensing, Llc Virtual space mapping of a variable activity region
US20100107184A1 (en) * 2008-10-23 2010-04-29 Peter Rae Shintani TV with eye detection
WO2010049932A1 (en) 2008-10-30 2010-05-06 Taboola.Com Ltd. A system and method for the presentation of alternative content to viewers of video content
US8752087B2 (en) 2008-11-07 2014-06-10 At&T Intellectual Property I, L.P. System and method for dynamically constructing personalized contextual video programs
US20100138797A1 (en) 2008-12-01 2010-06-03 Sony Ericsson Mobile Communications Ab Portable electronic device with split vision content sharing control and method
KR101531363B1 (ko) 2008-12-10 2015-07-06 삼성전자주식회사 이차원 인터랙티브 디스플레이에서 가상 객체 또는 시점을 제어하는 방법
US20100153984A1 (en) 2008-12-12 2010-06-17 Microsoft Corporation User Feedback Based Highlights of Recorded Programs
JP4775671B2 (ja) 2008-12-26 2011-09-21 ソニー株式会社 情報処理装置および方法、並びにプログラム
US8856829B2 (en) 2008-12-29 2014-10-07 Ngc Network Us, Llc Interactive display highlight systems, methods, and computer program products
US20100169157A1 (en) 2008-12-30 2010-07-01 Nokia Corporation Methods, apparatuses, and computer program products for providing targeted advertising
US20100191631A1 (en) 2009-01-29 2010-07-29 Adrian Weidmann Quantitative media valuation method, system and computer program
TW201032087A (en) 2009-02-19 2010-09-01 Asustek Comp Inc Command control system and method thereof
US20100248832A1 (en) 2009-03-30 2010-09-30 Microsoft Corporation Control of video game via microphone
US9172482B2 (en) 2009-03-31 2015-10-27 At&T Intellectual Property I, L.P. Content recommendations based on personal preferences
US8942428B2 (en) 2009-05-01 2015-01-27 Microsoft Corporation Isolate extraneous motions
US8660303B2 (en) 2009-05-01 2014-02-25 Microsoft Corporation Detection of body and props
KR101567603B1 (ko) 2009-05-07 2015-11-20 엘지전자 주식회사 멀티 음성 시스템의 동작 제어 장치 및 방법
US20100295782A1 (en) 2009-05-21 2010-11-25 Yehuda Binder System and method for control based on face ore hand gesture detection
US9417700B2 (en) 2009-05-21 2016-08-16 Edge3 Technologies Gesture recognition systems and related methods
US8418085B2 (en) 2009-05-29 2013-04-09 Microsoft Corporation Gesture coach
US8255955B1 (en) 2009-06-16 2012-08-28 Tivo Inc. Dynamic item highlighting system
WO2010147600A2 (en) 2009-06-19 2010-12-23 Hewlett-Packard Development Company, L, P. Qualified command
US20100332842A1 (en) 2009-06-30 2010-12-30 Yahoo! Inc. Determining a mood of a user based on biometric characteristic(s) of the user in an online system
US8390680B2 (en) 2009-07-09 2013-03-05 Microsoft Corporation Visual representation expression based on player expression
US20110016102A1 (en) 2009-07-20 2011-01-20 Louis Hawthorne System and method for identifying and providing user-specific psychoactive content
US8428368B2 (en) 2009-07-31 2013-04-23 Echostar Technologies L.L.C. Systems and methods for hand gesture control of an electronic device
JP5397081B2 (ja) 2009-08-12 2014-01-22 富士通モバイルコミュニケーションズ株式会社 携帯端末
US8326002B2 (en) 2009-08-13 2012-12-04 Sensory Logic, Inc. Methods of facial coding scoring for optimally identifying consumers' responses to arrive at effective, incisive, actionable conclusions
US7873849B2 (en) 2009-09-02 2011-01-18 Apple Inc. Motion sensor data processing using various power management modes
EP2476065A1 (en) 2009-09-08 2012-07-18 Telecom Italia S.p.A. Method for exploring a catalog of digital information contents
US8275834B2 (en) 2009-09-14 2012-09-25 Applied Research Associates, Inc. Multi-modal, geo-tempo communications systems
US8875167B2 (en) 2009-09-21 2014-10-28 Mobitv, Inc. Implicit mechanism for determining user response to media
US20110084983A1 (en) 2009-09-29 2011-04-14 Wavelength & Resonance LLC Systems and Methods for Interaction With a Virtual Environment
US20110077719A1 (en) 2009-09-30 2011-03-31 Broadcom Corporation Electromagnetic power bio-medical unit
KR101647722B1 (ko) 2009-11-13 2016-08-23 엘지전자 주식회사 영상표시장치 및 그 동작방법
US8627230B2 (en) 2009-11-24 2014-01-07 International Business Machines Corporation Intelligent command prediction
CN102741842A (zh) 2009-12-04 2012-10-17 Tivo有限公司 多功能多媒体设备
US20110145040A1 (en) 2009-12-16 2011-06-16 Microsoft Corporation Content recommendation
KR20110076458A (ko) 2009-12-29 2011-07-06 엘지전자 주식회사 디스플레이 장치 및 그 제어방법
US8719776B2 (en) 2009-12-30 2014-05-06 Foneclay, Inc. System for creation and distribution of software applications usable on multiple mobile device platforms
US10356465B2 (en) 2010-01-06 2019-07-16 Sony Corporation Video system demonstration
US20110173589A1 (en) 2010-01-13 2011-07-14 Microsoft Corporation Cross-Browser Interactivity Testing
JP5609160B2 (ja) 2010-02-26 2014-10-22 ソニー株式会社 情報処理システム、コンテンツ合成装置および方法、並びに記録媒体
US20110216059A1 (en) 2010-03-03 2011-09-08 Raytheon Company Systems and methods for generating real-time three-dimensional graphics in an area of interest
US9124651B2 (en) 2010-03-30 2015-09-01 Microsoft Technology Licensing, Llc Controlling media consumption privacy settings
JP5521727B2 (ja) 2010-04-19 2014-06-18 ソニー株式会社 画像処理システム、画像処理装置、画像処理方法及びプログラム
US20110263946A1 (en) 2010-04-22 2011-10-27 Mit Media Lab Method and system for real-time and offline analysis, inference, tagging of and responding to person(s) experiences
US20110264531A1 (en) 2010-04-26 2011-10-27 Yahoo! Inc. Watching a user's online world
US8381108B2 (en) * 2010-06-21 2013-02-19 Microsoft Corporation Natural user input for driving interactive stories
US20110316845A1 (en) 2010-06-25 2011-12-29 Palo Alto Research Center Incorporated Spatial association between virtual and augmented reality
US8424037B2 (en) 2010-06-29 2013-04-16 Echostar Technologies L.L.C. Apparatus, systems and methods for accessing and synchronizing presentation of media content and supplemental media rich content in response to selection of a presented object
US20120005632A1 (en) 2010-06-30 2012-01-05 Broyles Iii Paul J Execute a command
JP2012029019A (ja) * 2010-07-23 2012-02-09 Hitachi Consumer Electronics Co Ltd コンテンツ再生装置
US8453176B2 (en) * 2010-08-20 2013-05-28 Avaya Inc. OCAP/STB ACAP/satellite-receiver audience response/consumer application
US8499245B1 (en) 2010-08-24 2013-07-30 Amazon Technologies, Inc. Multi-source profiling for adaptive device operation
US9247205B2 (en) * 2010-08-31 2016-01-26 Fujitsu Limited System and method for editing recorded videoconference data
US8949871B2 (en) * 2010-09-08 2015-02-03 Opentv, Inc. Smart media selection based on viewer user presence
US20120079521A1 (en) 2010-09-23 2012-03-29 Garg Sharad K Incentivizing advertisement viewing and validating associated purchase
US20120084812A1 (en) 2010-10-04 2012-04-05 Mark Thompson System and Method for Integrating Interactive Advertising and Metadata Into Real Time Video Content
US9348141B2 (en) 2010-10-27 2016-05-24 Microsoft Technology Licensing, Llc Low-latency fusing of virtual and real content
US20120109726A1 (en) 2010-10-30 2012-05-03 Verizon Patent And Licensing, Inc. Methods and Systems for Trigger-Based Updating of an Index File Associated with a Captured Media Content Instance
US9348417B2 (en) 2010-11-01 2016-05-24 Microsoft Technology Licensing, Llc Multimodal input system
US10034034B2 (en) 2011-07-06 2018-07-24 Symphony Advanced Media Mobile remote media control platform methods
JP4945675B2 (ja) 2010-11-12 2012-06-06 株式会社東芝 音響信号処理装置、テレビジョン装置及びプログラム
US20120209715A1 (en) 2011-02-11 2012-08-16 Microsoft Corporation Interaction with networked screen content via motion sensing device in retail setting
US20110145041A1 (en) 2011-02-15 2011-06-16 InnovatioNet System for communication between users and global media-communication network
US20120226981A1 (en) 2011-03-02 2012-09-06 Microsoft Corporation Controlling electronic devices in a multimedia system through a natural user interface
US8620113B2 (en) 2011-04-25 2013-12-31 Microsoft Corporation Laser diode modes
US10671841B2 (en) 2011-05-02 2020-06-02 Microsoft Technology Licensing, Llc Attribute state classification
US9026476B2 (en) 2011-05-09 2015-05-05 Anurag Bist System and method for personalized media rating and related emotional profile analytics
US20120304059A1 (en) 2011-05-24 2012-11-29 Microsoft Corporation Interactive Build Instructions
US20120304206A1 (en) 2011-05-26 2012-11-29 Verizon Patent And Licensing, Inc. Methods and Systems for Presenting an Advertisement Associated with an Ambient Action of a User
US8760395B2 (en) 2011-05-31 2014-06-24 Microsoft Corporation Gesture recognition techniques
US8544729B2 (en) 2011-06-24 2013-10-01 American Express Travel Related Services Company, Inc. Systems and methods for gesture-based interaction with computer systems
US9026948B2 (en) 2011-06-29 2015-05-05 Microsoft Technology Licensing, Llc Multi-faceted relationship hubs
US8509545B2 (en) 2011-11-29 2013-08-13 Microsoft Corporation Foreground subject detection
US8943526B2 (en) 2011-12-02 2015-01-27 Microsoft Corporation Estimating engagement of consumers of presented content
US20130145385A1 (en) 2011-12-02 2013-06-06 Microsoft Corporation Context-based ratings and recommendations for media
US8635637B2 (en) 2011-12-02 2014-01-21 Microsoft Corporation User interface presenting an animated avatar performing a media reaction
US20130159555A1 (en) 2011-12-20 2013-06-20 Microsoft Corporation Input commands
US20130198690A1 (en) 2012-02-01 2013-08-01 Microsoft Corporation Visual indication of graphical user interface relationship
US20130268955A1 (en) 2012-04-06 2013-10-10 Microsoft Corporation Highlighting or augmenting a media program
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
CA2775814C (en) 2012-05-04 2013-09-03 Microsoft Corporation Advertisement presentation based on a current media reaction

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1123223C (zh) * 1996-11-14 2003-10-01 皇家菲利浦电子有限公司 电视节目源和使电视节目的声音/可见显示不出现的方法
CN101894502A (zh) * 2009-05-19 2010-11-24 日立民用电子株式会社 影像显示装置

Also Published As

Publication number Publication date
CN103237248A (zh) 2013-08-07
EP2834987A1 (en) 2015-02-11
WO2013152056A1 (en) 2013-10-10
TWI581128B (zh) 2017-05-01
US20130268954A1 (en) 2013-10-10
JP2015518680A (ja) 2015-07-02
TW201401104A (zh) 2014-01-01
KR20150005574A (ko) 2015-01-14
US8898687B2 (en) 2014-11-25

Similar Documents

Publication Publication Date Title
CN103237248B (zh) 基于媒体反应来控制媒体节目
CN103207675A (zh) 制作媒体节目集锦或扩充媒体节目
CN108965956B (zh) 提供视频呈现评论的方法、介质、服务器和系统
US10798438B2 (en) Determining audience state or interest using passive sensor data
CN106507207B (zh) 直播应用中互动的方法及装置
US8990842B2 (en) Presenting content and augmenting a broadcast
CN107111642A (zh) 用于创建收听日志和音乐库的系统和方法
CN105453070B (zh) 基于机器学习的用户行为表征
CN102595212A (zh) 与多媒体内容的模拟组交互
CN105723325A (zh) 使用因用户而异的语法的媒体项选择
KR20150013237A (ko) 현재 프리젠팅된 미디어 프로그램의 미래 부분의 결정
CN109040297A (zh) 用户画像生成方法及装置
JP2011217197A (ja) 電子機器、再生制御システム、再生制御方法及びプログラム
WO2014179247A2 (en) Media synchronized advertising overlay
CN104756145A (zh) 支持混合广告的和用户拥有的内容呈现
CN112511850A (zh) 连麦方法、直播显示方法、装置、设备及存储介质
WO2023109037A1 (zh) 基于直播间的互动方法及电子设备
CN107251019A (zh) 信息处理装置、信息处理方法和程序
CN110493635A (zh) 视频播放方法、装置及终端
US20160357498A1 (en) Gamified Adaptive Digital Disc Jockey
CN112104889B (zh) 用于网络平台的虚拟物品展示方法和设备
CN103383597B (zh) 用于呈现媒体节目的方法
CN103383764A (zh) 基于当前媒体反应的广告呈现
CN104869131B (zh) 基于使用者意向的多个电子装置互动方法及其系统
JP5861360B2 (ja) 画像表示装置、画像表示プログラム、及び画像表示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1186325

Country of ref document: HK

ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150722

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150722

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

GR01 Patent grant
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1186325

Country of ref document: HK