CN102595212A - 与多媒体内容的模拟组交互 - Google Patents

与多媒体内容的模拟组交互 Download PDF

Info

Publication number
CN102595212A
CN102595212A CN2011104401943A CN201110440194A CN102595212A CN 102595212 A CN102595212 A CN 102595212A CN 2011104401943 A CN2011104401943 A CN 2011104401943A CN 201110440194 A CN201110440194 A CN 201110440194A CN 102595212 A CN102595212 A CN 102595212A
Authority
CN
China
Prior art keywords
beholder
multimedia content
data stream
comment data
content flows
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011104401943A
Other languages
English (en)
Inventor
K·S·佩雷
A·巴-泽埃夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102595212A publication Critical patent/CN102595212A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer

Abstract

本发明公开了与多媒体内容的模拟组交互。提供了一种用于基于观看者与多媒体内容流的交互来生成时间同步的数据流的方法和系统。记录观看者与该观看者正在观看的多媒体内容流的交互。观看者的交互包括观看者在观看多媒体内容流时提供的评论。评论包括观看者提供的文本消息、音频消息、视频馈源、姿势或面部表情。基于观看者的交互来生成时间同步的评论数据流。该时间同步的评论数据流包括相对于向观看者呈现多媒体内容流的实际开始时间加时间戳的观看者的交互。在观看者观看多媒体内容流时，经由视听设备向观看者呈现一个或多个时间同步的数据流。

Description

与多媒体内容的模拟组交互
技术领域
本发明涉及多媒体技术，更具体地，涉及与多媒体内容的模拟组交互。
背景技术
视频点播(VOD)系统允许用户通过机顶盒、计算机或其他设备流传送内容来按需选择和观看多媒体内容。视频点播系统通常向用户提供在任何时间观看多媒体内容的灵活性。然而，在观看所记录的视频内容、视频点播内容或其他点播媒体内容时，用户可能不会感觉到他们是实况事件或体验的一部分，因为内容通常是离线流传送给用户的。另外，在按需观看多媒体内容时，用户可能缺乏社区和连通性的感觉，因为他们可能没有与他们的朋友和家人一起实况地观看内容。
发明内容
此处公开了一种通过为观看者重新创建与诸如观看者的朋友和家人等其他用户一起实况地观看多媒体内容的体验来增强观看者在观看所记录的视频内容、视频点播内容或其他点播媒体内容时的体验的方法和系统。在一个实施方式中，所公开的技术在观看者观看多媒体内容流时多次生成同步的数据流，该同步的数据流包括由观看者和诸如观看者的朋友和家人等其他用户提供的评论。评论可包括观看者和其他用户提供的文本消息、音频消息、视频馈源、姿势或面部表情。在观看者观看多媒体内容流时经由视听设备向观看者呈现时间同步的数据流，由此为观看者重新创建与其他用户一起实况地观看多媒体内容的体验。在一个实施方式中，多个观看者在单个位置观看多媒体内容并且记录来自该多个观看者的与多媒体内容流的交互。
在另一实施方式中，公开了一种用于基于观看者与多媒体内容流的交互来生成时间同步的评论数据流的方法。接收与当前广播相关的多媒体内容流。在连接到计算设备的捕捉设备的视野内标识观看者。记录观看者与该观看者正在观看的多媒体内容流的交互。基于观看者的交互来生成时间同步的评论数据流。接收来自观看者的观看与该观看者正在观看的多媒体内容流相关的一个或多个时间同步的评论数据流的请求。响应于观看者的请求，经由观看者的视听设备向观看者显示时间同步的评论数据流。
提供本发明内容以便以简化的形式介绍将在以下具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本发明的任一部分中提及的任何或所有缺点的实现。
附图说明
图1示出了用于执行所公开的技术的操作的目标识别、分析和跟踪系统的一个实施方式。
图2示出了可用作跟踪系统的一部分的捕捉设备的一个实施方式。
图3示出了用于实现本技术的环境的实施方式。
图4示出了可用来实现图1-2的计算设备的计算设备的示例。
图5示出了可用来实现图1-2的计算设备的另一个实施方式的通用计算设备。
图6是描述用于基于观看者与多媒体内容流的交互来生成时间同步的评论数据流的过程的一个实施方式的流程图。
图6A是描述用于应观看者观看评论数据流的请求而接收由其他用户生成的评论数据流的过程的一个实施方式的流程图。
图6B是描述用于生成时间同步的评论数据流的过程的一个实施方式的流程图。
图7是描述用于生成与一个或多个用户观看的特定多媒体内容流相关的时间同步的评论数据流的报告的过程的一个实施方式的流程图。
图8是描述用于基于观看者的评论观看资格来向观看者提供由其他用户生成的评论数据流的过程的一个实施方式的流程图。
图9A示出了用于在记录观看者与多媒体内容流的交互之前获取观看者的偏好信息的示例性用户界面屏幕。
图9B示出了用于获取观看者的观看来自其他用户的评论的输入的示例性用户界面屏幕。
图10示出了向观看者显示观看与多媒体内容流相关的时间同步的评论数据流的一个或多个选项的示例性用户界面屏幕。
图11A、11B和11C示出了其中向观看者显示与多媒体内容流相关的一个或多个时间同步的评论数据流的示例性用户界面屏幕。
具体实施方式
公开了用来增强用户在观看所记录的视频内容、视频点播内容或其他点播媒体内容时的体验的技术。观看者经由视听设备观看与当前广播相关的多媒体内容流。记录观看者与多媒体内容流的交互。在一种方法中，观看者与多媒体内容流的交互可包括在该观看者观看多媒体内容流时由观看者提供的文本消息、音频消息或视频馈源形式的评论。在另一种方法中，观看者与多媒体内容流的交互可包括在该观看者观看多媒体内容流时由观看者做出的姿势、姿态或面部表情。基于观看者的交互来生成时间同步的评论数据流。该时间同步的评论数据流通过相对于多媒体内容流的实际开始时间同步包含观看者的交互的数据流来生成。在一个实施方式中，经由视听设备向观看者呈现时间同步的评论数据流，同时记录观看者与多媒体内容流的交互。在另一实施方式中，应观看者的请求，经由视听设备向观看者呈现由其他用户生成的一个或多个时间同步的评论数据流，同时记录观看者与多媒体内容流的交互。
多个数据流可以与一个多媒体内容流同步并由用户评论来标识。以此方式，可基于与多媒体内容流相关联的数据流来定义组。由此在对多媒体内容的后续观看时将在不同观看时间和地点提供其反应和评论的观看者和用户带到一起，因为根据本技术在每一观看期间添加了与内容相关联的数据。组可以从观看者的朋友扩展到观看者的社交图及更广的范围。
图1示出了用于执行所公开技术的各操作的目标识别、分析和跟踪系统10的一个实施方式(下文统称为运动跟踪系统)。跟踪系统10可用来识别、分析和/或跟踪诸如用户18和19之类的一个或多个人类目标。如图1所示，跟踪系统10可包括计算设备12。在一个实施方式中，计算设备12可被实现为有线和/或无线设备中的任何一个或组合，实现为电视客户端设备(例如，电视机机顶盒、数字录像机(DVR)等等)、个人计算机、便携式计算机设备、移动计算设备、媒体设备、通信设备、视频处理和/或呈现设备、电器设备、游戏设备、电子设备中的任何形式、和/或实现为可被实现为以音频、视频和/或图像数据中的任何形式接收媒体内容的任何其他类型的设备。根据一个实施方式，计算设备12可以包括硬件组件和/或软件组件，使得计算设备12可用来执行诸如游戏应用程序、非游戏应用程序之类的应用程序。在一个实施方式中，计算设备12可包括可执行在处理器可读存储设备上存储的、用于执行在此描述的过程的指令的处理器，诸如标准化处理器、专用处理器、微处理器等。
如图1所示，跟踪系统10还可包括捕捉设备20。捕捉设备20例如可以是相机，该相机可以用于可视地监视一个或多个用户18和19，以使得这些用户所做出的移动、姿态和姿势可由捕捉设备20在该捕捉设备20的视野6内捕捉和跟踪。线2和4表示视野6的边界。
根据一个实施方式，计算设备12可以连接到可向人类目标18和19提供视觉和/或音频的诸如电视机、监视器、高清电视机(HDTV)等的视听设备16。例如，计算设备12可以包括诸如图形卡之类的视频适配器和/或诸如声卡之类的音频适配器，这些适配器可以向用户提供视听信号。视听设备16可从计算设备12接收视听信号，并且然后可向用户18和19输出与视听信号相关联的视觉和/或音频。根据一个实施方式，视听设备16可经由例如，S-视频电缆、同轴电缆、HDMI电缆、DVI电缆、VGA电缆等连接到计算设备12。
在由所公开的技术执行的一组操作中，用户18、19经由视听设备16观看与当前广播相关的多媒体内容流，并且计算设备12记录用户与多媒体内容流的交互。在一种方法中，诸如用户18、19等观看者可通过在观看多媒体内容流时提供文本消息、音频消息或视频馈源来与多媒体内容流交互。文本消息可包括电子邮件消息、SMS消息，MMS消息或twitter消息。在一个示例中，观看者可无线地(例如，WiFi、蓝牙、红外线或其他无线通信手段)或通过有线连接与计算系统12进行通信的遥控设备或移动计算设备来提供文本消息、音频消息和视频馈源。在一个实施方式中，遥控设备或移动计算设备被同步到计算设备12，该计算设备12向观看者流传送多媒体内容流以使得观看者可以在观看多媒体内容流时提供文本消息、音频消息或视频馈源。在另一示例中，观看者还可通过在观看多媒体内容流时做出移动、姿势、姿态或面部表情来与多媒体内容流交互。在观看者经由视听设备16观看多媒体内容流时，观看者的移动、姿势、姿态和面部表情可由捕捉设备20跟踪并由计算系统12记录。
如此处所描述的，多媒体内容流可包括录制的视频内容、视频点播内容、电视内容、电视节目、广告、商业广告、音乐、电影、视频剪辑，及其他点播媒体内容。其他多媒体内容流可包括交互式游戏、基于网络的应用程序，以及任何其他内容或数据(例如，包括节目指南应用数据、用户界面数据、广告内容、隐藏字幕、内容元数据、搜索结果和/或推荐等等)。
在由所公开的技术执行的另一组操作中，计算设备12基于观看者与多媒体内容流的交互来生成时间同步的评论数据流。该时间同步的数据流通过相对于多媒体内容流的实际开始时间同步包含观看者的交互的数据流来生成。在一个实施方式中，计算设备12经由视听设备16来呈现观看者的评论数据流，同时记录观看者与多媒体内容流的交互。在另一实施方式中，应观看者的请求，计算设备12经由视听设备16呈现由其他用户生成的评论数据流，同时记录观看者与多媒体内容流的交互。下面详细讨论由计算设备12和捕捉设备20执行的操作。
图2示出了在图1的系统中可用来执行所公开的技术的一个或多个操作的捕捉设备20和计算设备12的一个实施方式。根据一个实施方式，捕捉设备20可被配置成经由任何合适的技术，包括例如飞行时间、结构化光、立体图像等来捕捉具有深度信息的视频，该深度信息包括可以包括深度值的深度图像。根据一个实施方式，捕捉设备20可将所计算的深度信息组织为“Z层”或可垂直于从深度相机沿其视线延伸的Z轴的层。
如图2所示，捕捉设备20可以包括图像相机组件32。根据一个实施方式，图像相机组件32可以是可捕捉场景的深度图像的深度相机。深度图像可包括所捕捉的场景的二维(2-D)像素区域，其中2-D像素区域中的每个像素都可以表示深度值，比如所捕捉的场景中的物体与相机相距的例如以厘米、毫米等为单位的距离。
如图2所示，图像相机组件32可包括可被用来捕捉捕捉区域的深度图像的IR光组件34、三维(3-D)相机36、以及RGB相机38。例如，在飞行时间分析中，捕捉设备20的IR光组件34可以将红外光发射到捕捉区域上，然后可以使用传感器，用例如3-D相机36和/或RGB相机38来检测从捕捉区域中的一个或多个目标和对象的表面反向散射的光。在某些实施方式中，可以使用脉冲式红外光从而可以测量出射光脉冲和相应的入射光脉冲之间的时间差并将其用于确定从捕捉设备20到捕捉区域中的目标或对象上的特定位置的物理距离。此外，可将出射光波的相位与入射光波的相位进行比较来确定相移。然后可以使用该相移来确定从捕捉设备到目标或物体上的特定位置的物理距离。
根据一个实施方式，可使用飞行时间分析，通过经由包括例如快门式光脉冲成像的各种技术来分析反射光束随时间的强度变化以间接地确定从捕捉设备20到目标或对象上的特定位置的物理距离。
在另一示例中，捕捉设备20可使用结构化光来捕捉深度信息。在该分析中，图案化光(即，被显示为诸如网格图案或条纹图案等已知图案的光)可经由例如IR光组件34被投影到捕捉区域上。在撞击到捕捉区域中的一个或多个目标或对象的表面时，作为响应，图案可变形。图案的这种变形可由例如3-D相机36和/或RGB相机38来捕捉，然后可被分析来确定从捕捉设备到目标或物体上的特定位置的物理距离。
根据一个实施方式，捕捉设备20可包括可以从不同的角度观察捕捉区域的两个或更多个在物理上分离的相机，以获取可以被解析以生成深度信息的视觉立体数据。也可使用其他类型的深度图像传感器来创建深度图像。
捕捉设备20还可包括话筒40。话筒40可包括可接收声音并将其转换成电信号的换能器或传感器。根据一个实施方式，话筒40可用来减少在目标识别、分析和跟踪系统10中的捕捉设备20与计算设备12之间的反馈。另外，话筒40可用来接收也可由用户在与多媒体内容流交互时提供的音频信号，或控制可由计算设备12执行的诸如游戏应用程序、非游戏应用程序等应用程序。
在一个实施方式中，捕捉设备20还可以包括可以在操作上与图像相机组件32进行通信的处理器42。处理器42可包括可执行指令的标准处理器、专用处理器、微处理器等，这些指令可包括用于存储简档的指令、用于接收深度图像的指令、用于确定合适的目标是否被包括在深度图像中的指令、用于将合适的目标转换成该目标的骨架表示或模型的指令、或任何其他合适的指令。
捕捉设备20还可包括存储器组件44，存储器组件34可存储可由处理器42执行的指令、由3-D相机或RGB相机所捕捉的图像或图像的帧、用户简档、或任何其他合适的信息、图像等等。根据一个示例，存储器组件44可包括随机存取存储器(RAM)、只读存储器(ROM)、高速缓存、闪存、硬盘或任何其他合适的存储组件。如图2所示，存储器组件44可以是与图像捕捉组件32和处理器42进行通信的分离的组件。在另一实施方式中，存储器组件44可被集成到处理器42和/或图像捕捉组件32中。在一个实施方式中，图2中示出的捕捉设备20的组件32、34、36、38、40、42和44中的一些或全部被容纳在单一壳体中。
捕捉设备20可以经由通信链路46来与计算设备12进行通信。通信链路46可以是包括例如USB连接、火线连接、以太网线缆连接之类的有线连接和/或诸如无线802.11b、802.11g、802.11a或802.11n连接之类的无线连接。计算设备12可以经由通信链路46向捕捉设备20提供时钟，该时钟可以用来确定何时捕捉例如场景。
捕捉设备20可将由例如3-D(或深度)相机36和/或RGB相机38捕捉的深度信息和图像经由通信链路46提供给计算设备12。如下面详细讨论的，计算设备12可随后使用深度信息和所捕捉的图像来执行所公开技术的一个或多个操作。
在一个实施方式中，捕捉设备20在捕捉设备的视野6内捕捉观看多媒体内容流的一个或多个用户。捕捉设备20向计算设备12提供所捕捉到的用户的视觉图像。计算设备12执行由捕捉设备20捕捉的用户的标识。在一个实施方式中，计算设备12包括面部识别引擎192来执行用户的标识。面部识别引擎192可以将来自从捕捉设备20接收到的视觉图像的用户的面部与参考视觉图像进行相关以确定用户的身份。在另一示例中，还可以通过从用户接收标识他们身份的输入来确定用户的身份。在一个实施方式中，可以要求用户通过站在计算系统12之前以便捕捉设备20可以捕捉每个用户的深度图像和视觉图像来标识出他们自己。例如，可以要求用户站在捕捉设备20之前，转身，并且摆出各种姿态。在计算设备12获得标识用户所必需的数据以后，向用户提供标识该用户的唯一的标识符。关于标识用户的更多信息可在美国专利申请序列号12/696,282“Visual Based Identity Tracking(基于视觉的身份跟踪)”，以及美国专利申请序列号12/475,308“Device for Identifying and Tracking MultipleHumans over Time(用于随时间标识和跟踪多个人类的设备)”中找到，这两个申请的全部内容通过引用并入本申请。在另一实施方式中，在用户登陆到计算设备时(诸如：例如，当该计算设备是诸如用户的蜂窝电话之类的移动计算设备时)，用户的身份可以已经为该计算设备所知。在另一个实施方式中，还可以使用用户的声纹来确定用户的身份。
在一个实施方式中，用户的标识信息可以存储在计算设备12中的用户简档数据库207中。在一个示例中，用户简档数据库207可以包括诸如下列关于用户的信息：与用户相关联的唯一标识符、用户的姓名、以及诸如用户的年龄组、性别和地理位置之类的与用户相关的其他人口统计信息。用户简档数据库207还包括关于用户的节目观看历史的信息，诸如用户所观看的节目列表以及用户偏好的列表。用户偏好可包括关于以下内容的信息：用户的社交图、用户的朋友、朋友身份、朋友的偏好、(用户和用户朋友的)活动、照片、图像、所记录的视频等。在一个示例中，用户的社交图可包括关于以下内容的信息：用户希望使他或她的评论在观看多媒体内容流时对其可用的用户组的用户偏好。
在所公开技术执行的一组操作中，在用户经由视听设备16观看多媒体内容流时，捕捉设备20跟踪用户做出的移动、姿势、姿态和面部表情。例如，由捕捉设备20跟踪到的面部表情可包括在用户观看多媒体内容流时检测到来自用户的微笑、大笑、哭泣、皱眉、打哈欠或者鼓掌。
在一个实施方式中，计算设备12还包括姿势库196和姿势识别引擎190。姿势库196包括姿势过滤器的集合，每一姿势过滤器包括与用户所做出的移动、姿势或姿态相关的信息。在一个实施方式中，姿势识别引擎190可将由相机36、38和设备20捕捉的骨架模型以及与其相关联的移动形式的数据与姿势库192中的姿势过滤器进行比较来标识用户(如骨架模型所表示的)何时做出了一个或多个姿势或姿态。计算设备12可使用姿势库192来解释骨架模型的移动以执行所公开的技术的一个或多个操作。关于姿势识别引擎190的更多信息参见2009年4月13日提交的美国专利申请12/422,661“Gesture Recognition SystemArchitecture(姿势识别系统架构)”，该申请通过整体引用合并于此。关于识别姿势和姿态的更多信息参见于2009年2月23日提交的美国专利申请12/391,150“Standard Gestures(标准姿势)”以及于2009年5月29日提交的美国专利申请12/474,655“Gesture Tool(姿势工具)”，这两个申请的全部内容都通过引用并入本申请。关于运动检测和跟踪的更多信息可在2009年12月18日提交的美国专利申请12/641,788“Motion Detection Using Depth Images(使用深度图像的运动检测)”，以及美国专利申请12/475,308“Device for Identifyingand Tracking Multiple Humans over Time(用于随时间标识和跟踪多个人类的设备)”中找到，这两个申请通过整体引用合并于此。
计算设备12中的面部识别引擎192可包括面部表情库198。面部表情库198包括面部表情过滤器的集合，每个面部表情过滤器包括关于用户的面部表情的信息。在一个示例中，面部表情引擎192可对捕捉设备20中的相机36、38所捕捉的数据与面部表情库198中的面部表情过滤器进行比较以标识用户的面部表情。在另一示例中，面部识别引擎192还可以对由捕捉设备20中的话筒40所捕捉的数据与面部表情库198中的面部表情滤波器进行比较以标识出诸如例如来自用户的大笑或鼓掌的声音之类的一个或多个声音或音频响应。
在另一个实施方式中，还可以使用位于用户经由视听设备观看多媒体内容流的房间中或者放置在该房间中的物理表面(诸如桌面)上的一个或多个附加传感器来跟踪用户的移动、姿势、姿态和面部表情。传感器可包括例如一个或多个活动信标传感器，该传感器发射结构化光、脉冲红外光或可见光到物理表面上，检测从物理表面上的一个或多个对象的表面反向散射的光，并且检测用户所做出的移动、姿势、姿态和面部表情。传感器还可包括生物监控传感器、用户可穿戴传感器或者可跟踪用户所做出的移动、姿势、姿态和面部表情的传感器。
在所公开的技术执行的一组操作中，计算设备12从媒体提供者52接收与当前广播相关联的多媒体内容流。媒体提供者52例如可以包括诸如内容提供者、宽带提供者或第三方提供者的任意实体，第三方提供者可创建结构并将多媒体内容流传递给计算设备12。多媒体内容流可以通过各种网络50接收。可以被配置为支持服务提供商提供多媒体内容服务的合适类型的网络例如可以包括基于电话的网络、基于同轴电缆的网络以及基于卫星的网络。在一个实施方式中，多媒体内容流经由视听设备16显示给用户。如以上所描述的，多媒体内容流可包括录制的视频内容、视频点播内容、电视内容、电视节目、广告、商业广告、音乐、电影、视频剪辑及其他点播媒体内容。
在所公开的技术执行的另一组操作中，计算设备12标识与诸如用户18、19等观看者正在观看的多媒体内容流相关的节目信息。在一个示例中，多媒体内容流可被标识为电视节目、电影、实况演出或者体育赛事。例如，与电视节目相关的节目信息可包括节目名称、节目的当前季、集号以及节目的播出日期和时间。
在一个实施方式中，计算设备12包括评论数据流生成模块56。评论数据流生成模块56在观看者观看多媒体内容流时记录观看者与多媒体内容流的交互。在一种方法中，观看者与多媒体内容流的交互可包括由观看者在该观看者观看多媒体内容流时提供的文本消息、音频消息或视频馈源形式的评论。在另一种方法中，观看者与多媒体内容流的交互可包括由观看者在该观看者观看多媒体内容流时执行的姿势、姿态和面部表情。
评论数据流生成模块56基于观看者的交互来生成时间同步的数据流。评论数据流生成模块56向集中式数据服务器306(在图2B中示出)提供时间同步的评论数据流以及与多媒体内容流相关的节目信息以便提供给其他观看者。在一个实施方式中，时间同步的评论数据流包括相对于多媒体内容流的实际开始时间同步的观看者与多媒体内容流的交互的时间戳。由计算设备12执行的生成时间同步的评论数据流的操作在图6中详细讨论。
计算设备12中的显示模块82经由视听设备16呈现观看者生成的时间同步的评论数据流。在一个实施方式中，观看者还可经由视听设备16中的用户界面来选择观看由其他用户生成的评论数据流的一个或多个选项。观看者可以与视听设备16中的用户界面交互的方式在图9-11中详细讨论。
图3示出了用于实现本技术的环境。图3示出了多个客户机设备300A、300B……300X，这些客户机设备耦合到网络304并且与集中式数据服务器306通信。集中式数据服务器306针对客户机设备300A、300B……300X收发信息，并且提供在客户机设备300A、300B……300X上运行的应用程序可以调用和利用的服务的集合。客户机设备300A、300B……300X可包括图1中讨论的计算设备12，或者可被实现为图4-5中描述的设备中的任一个。例如，客户机设备300A、300B……300X可以包括游戏和媒体控制台、个人计算机、或者诸如蜂窝电话、启用web的智能电话、个人数字助理、掌上型计算机或者膝上型计算机的移动设备。网络304可包括因特网，但构想了诸如LAN或WAN等其他网络。
在一个实施方式中，集中式数据服务器306包括评论数据流聚集模块312。在一个实施方式中，评论数据流聚集模块312从客户机设备300A、300B……300X处的一个或多个用户接收一个或多个时间同步的评论数据流，从客户机设备300A、300B……300X接收与多媒体内容流相关的节目信息以及与一个或多个用户相关的偏好信息，并且生成与一个或多个用户观看的特定多媒体内容流相关的时间同步的评论数据流的报告。在一个示例中，报告可被实现为具有标识以下内容的字段的表：向特定多媒体内容流提供评论的一个或多个用户、用户观看多媒体内容流的播出日期/时间、由用户生成的时间同步的评论数据流以及由用户设置的关于特定多媒体内容流的评论观看资格。这一报告的示例性图示在如下所示的表1中示出：
表1-与特定多媒体内容流相关的时间同步的评论数据流的报告
Figure BSA00000646092600111
Figure BSA00000646092600121
如表1所示，该“时间同步的评论数据流”包括相对于向用户呈现多媒体内容流的实际开始时间加时间戳的用户的交互。生成时间同步的评论数据流的过程在图6中讨论。“评论观看资格”指的是用户希望使他或她的评论对其可用以供观看的用户组。在一个示例中，该用户组可包括用户的朋友、家人或全世界。在一个示例中，评论观看资格可以从存储在用户简档数据库207中的用户社交图获取。在另一示例中，评论观看资格还可通过以下操作确定：在记录用户与多媒体内容流的交互之前经由用户的计算设备中的用户界面直接从用户获取该用户希望使他或她的评论对其可用的用户组的用户偏好。
在另一实施方式中，集中式数据服务器306还应观看多媒体内容流的观看者的请求并基于该观看者的评论观看能力来在客户机设备处向该观看者提供由其他用户生成的评论数据流。集中式数据服务器306包括评论数据库308。评论数据库308存储由用户在客户机设备300A、300B……300X处生成的一个或多个时间同步的评论数据流。例如，媒体提供者52可以包括诸如内容提供者、宽带提供者或第三方提供者之类的可创建结构并将多媒体内容流直接传递给客户机设备300A、300B……300X或集中式数据服务器306的任何实体。例如，集中式数据服务器306可以从媒体提供者52接收与当前广播(可以是实况、点播或预先记录的广播)相关联的多媒体内容流，并且将该多媒体内容流提供给客户机设备300A、300B……300X处的一个或多个用户。
在一个实施方式中，媒体提供者可操作集中式数据服务器，或者集中式数据服务器可由不与媒体提供者52相关联的一方作为单独的服务来提供。
在另一实施方式中，集中式数据服务器306可包括具有其他输入源的数据聚集服务315。例如，服务器306还可以从一个或多个第三方信息源接收诸如由一个或多个用户提供的馈源、
Figure BSA00000646092600132
更新或语音消息等来自社交网络或其他通信服务的实时数据更新。聚集服务315可包括数据服务器306对第三方通信服务54的认证以及直接从客户机设备300A-300C接收对第三方服务的更新。在一个实施方式中，聚集服务315可以从第三方信息源54收集实时数据更新并且提供对设备300A-300C上的观看应用程序的更新。在一个示例中，实时数据更新可被存储在评论数据库308中。这一聚集服务的一个示例是在移动设备上提供对在观看者的移动计算设备中执行的
Figure BSA00000646092600133
搜索应用程序的社交更新的微软Live服务。观看者的移动计算设备被同步到观看者的计算设备，以使得观看者能够经由连接到观看者的计算设备的视听显示器来观看实时数据更新。
在提供第三方聚集服务的情况下，这些服务可自动过滤与用户正在观看的多媒体内容相关的任何实时数据更新，并且然后在观看者观看多媒体内容流时经由视听显示器16向观看者提供经过滤的实时数据更新。在另一示例中，该应用程序可自动过滤提供给观看者的信息更新，以便在观看者正在观看实况广播时防止该观看者获取关于该观看者正在观看的多媒体内容的实时数据更新。例如，当一用户正在观看所选媒体流时，可以存储该用户提供的、关于该媒体流的社交更新以便在稍后的观看者观看该数据流时由该流“重放”。
图4示出了可用来实现图1-2的计算设备12的计算设备100的示例。图4的计算设备100可以是诸如游戏控制台等多媒体控制台100。如图4所示，多媒体控制台100具有中央处理单元(CPU)200以及便于处理器访问各种类型存储器的存储器控制器202，各种类型存储器包括闪速只读存储器(ROM)204、随机存取存储器(RAM)206、硬盘驱动器208、以及便携式媒体驱动器106。在一种实现中，CPU 200包括1级高速缓存210和2级高速缓存212，用于临时存储数据，并且因此减少对硬盘驱动器208进行的存储器访问周期的数量，从而提高处理速度和吞吐量。
CPU 200、存储器控制器202、以及各种存储器设备经由一个或多个总线(未示出)互连在一起。在此实现中所使用的总线的细节对理解此处所讨论的关注主题不是特别相关。然而，应该理解，这样的总线可以包括串行和并行总线、存储器总线、外围总线、使用各种总线体系结构中的任何一种的处理器或局部总线中的一个或多个。作为示例，这样的体系结构可以包括工业标准体系结构(ISA)总线、微通道体系结构(MCA)总线、增强型ISA(EISA)总线、视频电子标准协会(VESA)局部总线、以及也称为夹层总线的外围部件互连(PCI)总线。
在一种实现中，CPU 200、存储器控制器202、ROM 204、以及RAM 206被集成到公用模块214上。在此实现中，ROM 204被配置为通过PCI总线和ROM总线(两者都没有示出)连接到存储器控制器202的闪速ROM。RAM 206被配置为多个双倍数据速率同步动态RAM(DDR SDRAM)模块，它们被存储器控制器202通过分开的总线(未示出)独立地进行控制。硬盘驱动器208和便携式媒体驱动器106被示为通过PCI总线和AT附加(ATA)总线216连接到存储器控制器202。然而，在其他实现中，也可以备选地应用不同类型的专用数据总线结构。
图形处理单元220和视频编码器222构成了用于进行高速度和高分辨率(例如，高清晰度)的图形处理的视频处理流水线。数据通过数字视频总线(未示出)从图形处理单元220传输到视频编码器222。音频处理单元224和音频编解码器(编码器/解码器)226构成了对应的音频处理流水线，用于对各种数字音频格式进行多通道音频处理。通过通信链路(未示出)在音频处理单元224和音频编解码器226之间传输音频数据。视频和音频处理流水线向A/V(音频/视频)端口228输出数据，以便传输到电视机或其他显示器。在所示出的实现中，视频和音频处理组件220-228安装在模块214上。
图4示出了包括USB主控制器230和网络接口232的模块214。USB主控制器230被示为通过总线(例如，PCI总线)与CPU 200和存储器控制器202进行通信，并作为外围控制器104(1)-104(4)的主机。网络接口232提供对网络(例如因特网、家庭网络等)的访问，并且可以是包括以太网卡、调制解调器、无线接入卡、蓝牙模块、电缆调制解调器等各种有线或无线接口组件中的任一种。
在图4中所描绘的实现中，控制台102包括用于支持四个控制器104(1)-104(4)的控制器支持子部件240。控制器支持子部件240包括支持与诸如，例如，媒体和游戏控制器之类的外部控制设备的有线和无线操作所需的任何硬件和软件组件。前面板I/O子部件242支持电源按钮112、弹出按钮114，以及任何LED(发光二极管)或暴露在控制台102的外表面上的其他指示器等多个功能。子部件240和242通过一个或多个电缆部件244与模块214进行通信。在其他实现中，控制台102可以包括另外的控制器子部件。所示出的实现还示出了被配置成发送和接收可以传递到模块214的信号的光学I/O接口235。
存储器单元(MU)140(1)和140(2)被示为可以分别连接到MU端口“A”130(1)和“B”130(2)。附加MU(例如，MU 140(3)-140(6))被示为可连接到控制器104(1)和104(3)，即每一个控制器两个MU。控制器104(2)和104(4)也可以被配置成接纳MU(未示出)。每一个MU 140都提供附加存储，在其上面可以存储游戏、游戏参数、及其他数据。在一些实现中，其他数据可以包括数字游戏组件、可执行的游戏应用，用于扩展游戏应用的指令集、以及媒体文件中的任何一种。当被插入到控制台102或控制器中时，MU 140可以被存储器控制器202访问。系统供电模块250向游戏系统100的组件供电。风扇252冷却控制台102内的电路。
包括机器指令的应用程序260被存储在硬盘驱动器208上。当控制台102被接通电源时，应用程序260的各个部分被加载到RAM 206，和/或高速缓存210以及212中以在CPU 200上执行，其中应用程序260是一个这样的示例。各种应用程序可以存储在硬盘驱动器208上以用于在CPU 200上执行。
通过简单地将游戏和媒体系统100连接到监视器150(图1)、电视机、视频投影仪或其他显示设备，该系统100就可以作为独立系统来操作。在此独立模式下，游戏和媒体系统100允许一个或多个玩家玩游戏或欣赏数字媒体，例如观看电影或欣赏音乐。然而，随着宽带连接的集成通过网络接口232而成为可能，游戏和媒体系统100还可以作为较大的网络游戏社区的参与者来操作。
图5示出了可被用于实现计算设备12的另一实施方式的通用计算设备。参考图5，用于实现所公开的技术的示例性系统包括以计算机310的形式呈现的通用计算设备。计算机310的组件可包括，但不限于，处理单元320、系统存储器330、以及将包括系统存储器的各种系统组件耦合到处理单元320的系统总线321。系统总线321可以是若干类型的总线结构中的任一种，包括使用各种总线体系结构中的任一种的存储器总线或存储器控制器、外围总线、以及局部总线。作为示例而非限制，这样的体系结构包括工业标准体系结构(ISA)总线、微通道体系结构(MCA)总线、增强型ISA(EISA)总线、视频电子标准协会(VESA)局部总线，以及也称为夹层总线的外围部件互连(PCI)总线。
计算机310通常包括各种计算机可读介质。计算机可读介质可以是能由计算机310访问的任何可用介质，而且包含易失性和非易失性介质、可移动和不可移动介质。作为示例而非限制，计算机可读介质可包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括，但不限于，RAM、ROM、EEPROM、闪存或其他存储器技术，CD-ROM、数字多功能盘(DVD)或其他光盘存储设备，磁带盒、磁带、磁盘存储设备或其他磁存储设备，或者能用于存储所需信息且可以由计算机310访问的任何其他介质。通信介质通常以诸如载波或其他传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其他数据，并包括任意信息传送介质。术语“已调制数据信号”是指具有以在信号中编码信息的方式被设定或改变其一个或多个特征的信号。作为示例而非限制，通信介质包括诸如有线网络或直接线连接之类的有线介质，以及诸如声学、RF、红外及其他无线介质之类的无线介质。上述中任一组合也应包括在计算机可读介质的范围之内。
系统存储器330包括易失性和/或非易失性存储器形式的计算机存储介质，如只读存储器(ROM)331和随机存取存储器(RAM)332。基本输入/输出系统333(BIOS)包含诸如在启动期间帮助在计算机310内的元件之间传输信息的基本例程，基本输入/输出系统331(BIOS)通常储存储在ROM 223中。RAM332通常包含处理单元320可立即访问和/或目前正在操作的数据和/或程序模块。作为示例而非限制，图5示出了操作系统334、应用程序335、其他程序模块336，以及程序数据337。
计算机310也可以包括其他可移动/不可移动、易失性/非易失性计算机存储介质。仅作为示例，图5示出了对不可移动、非易失性磁介质进行读写的硬盘驱动器340，对可移动、非易失性磁盘352进行读写的磁盘驱动器351，以及对诸如CD ROM或其它光学介质等可移动、非易失性光盘356进行读写的光盘驱动器355。可在示例性操作环境中使用的其他可移动/不可移动、易失性/非易失性计算机存储介质包括但不限于，磁带盒、闪存卡、数字多功能盘、数字录像带、固态RAM、固态ROM等。硬盘驱动器341通常由诸如接口340等不可移动存储器接口连接至系统总线321，并且磁盘驱动器351和光盘驱动器355通常由诸如接口350等可移动存储器接口连接至系统总线321。
上文所讨论的并且在图5中示出的驱动器及其相关联的计算机存储介质为计算机310提供了对计算机可读的指令、数据结构、程序模块及其他数据的存储。例如，图5中，硬盘驱动器341被示为存储操作系统344、应用程序345、其它程序模块346和程序数据347。注意，这些组件可以与操作系统334、应用程序335、其他程序模块336和程序数据337相同，也可以与它们不同。在此操作系统344、应用程序345、其他程序模块346以及程序数据347被给予了不同的编号，以说明至少它们是不同的副本。用户可以通过输入设备，例如键盘362和定点设备361——通常是指鼠标、跟踪球或触摸垫——向计算机20输入命令和信息。其他输入设备(未示出)可包括话筒、操纵杆、游戏手柄、圆盘式卫星天线、扫描仪等。这些和其他输入设备通常通过耦合至系统总线的用户输入接口360连接至处理单元320，但也可以由其他接口和总线结构，例如并行端口、游戏端口或通用串行总线(USB)来连接。监视器391或其他类型的显示设备也通过诸如视频接口390之类的接口连接至系统总线321。除监视器之外，计算机也可包括诸如扬声器397和打印机396之类的其他外围输出设备，它们可以通过输出外围接口390来连接。
计算机310可以使用到一个或多个远程计算机(如远程计算机380)的逻辑连接，以在联网环境中操作。远程计算机380可以是个人计算机、服务器、路由器、网络PC、对等设备或其他公共网络节点，并且通常包括上文参考计算机310所描述的许多或全部元件，虽然图5中只示出了存储器设备381。图5中所描述的逻辑连接包括局域网(LAN)371和广域网(WAN)373，但是，也可以包括其他网络。这些联网环境在办公室、企业范围计算机网络、内联网和因特网中是常见的。
当用于LAN网络环境中时，计算机310通过网络接口或适配器370连接到LAN 371。当在WAN联网环境中使用时，计算机310通常包括调制解调器372或用于通过诸如因特网等WAN 373建立通信的其他手段。调制解调器372，可以是内置的或外置的，可以经由用户输入接口360或其他适当的机制，连接到系统总线321。在联网环境中，相对于计算机310所描述的程序模块或其部分可被存储在远程存储器存储设备中。作为示例而非限制，图5示出了驻留在存储器设备381上的远程应用程序385。应当理解，所示的网络连接是示例性的，并且可使用在计算机之间建立通信链路的其他手段。
以上讨论的图1-5的硬件设备可用于实现基于一个或多个用户与这些用户观看的多媒体内容流的交互来生成一个或多个时间同步的评论数据流的系统。
图6是描述用于基于观看者与多媒体内容流的交互来生成时间同步的评论数据流的过程的一个实施方式的流程图。在一个实施方式中，可由计算设备12在软件的控制下执行图6的步骤。
在步骤600中，确定计算设备的视野内的一个或多个观看者的身份。在一个实施方式中并且如图2所讨论的，观看者的身份可通过从观看者接收标识观看者的身份的输入来确定。在另一实施方式中，计算设备12中的面部识别引擎192还可执行对观看者的标识。
在步骤602中，获取观看者的偏好信息。观看者的偏好信息包括该观看者的社交图中的、该观看者希望使他或她的评论在观看多媒体内容流时对其可用的一个或多个用户组。在一种方法中，观看者的偏好信息可以从存储在用户简档数据库207中的观看者的社交图获取。在另一种方法中，观看者的偏好信息可以经由视听显示器16直接从观看者获取。图9A示出了用于获取观看者的偏好信息的示例性用户界面屏幕。在一个示例中，观看者的偏好信息可以在观看者每一次观看诸如电影或节目等多媒体内容流时从该观看者获取。在另一示例中，可以在观看者的系统的初始设置期间、在每一次观看者登录到系统时或者在诸如就在观看者开始观看电影或节目之前的特定会话期间获取观看者的偏好信息。在步骤604中，将观看者的偏好信息提供给集中式数据服务器306。
在步骤606中，观看者选择要观看的多媒体内容。在步骤608中，经由视听设备16向用户显示该用户选择的多媒体内容流。在步骤610中，确定用户选择的多媒体内容流是否包括来自其他用户的先前的评论。如果多媒体内容流包括来自其他用户的先前的评论，则在步骤612中，执行图6A中描述的过程的步骤(630-640)。
如果观看者正在观看的多媒体内容流不包括任何先前的评论，则在步骤614中，记录观看者与多媒体内容流的交互。如图2所示，在一种方法中，观看者与多媒体内容流的交互可基于在观看者观看多媒体内容流时由该观看者提供的文本消息、音频消息或视频馈源来记录。在另一种方法中，观看者与多媒体内容流的交互还可基于在该观看者观看多媒体内容流时由观看者做出的姿势、姿态或面部表情来记录。
在步骤616中，基于观看者的交互来生成时间同步的评论数据流。用于生成时间同步的评论数据流的过程在图6B中描述。
在步骤618中，将时间同步的评论数据流以及与多媒体内容流相关的节目信息提供给集中式数据服务器以供分析。在步骤620中，在观看者观看多媒体内容流时，可任选地经由视听设备16向观看者显示时间同步的评论数据流。
图6A是描述用于应观看者观看评论数据流的请求而接收由其他用户生成的评论数据流的过程的一个实施方式的流程图。在一个实施方式中，当确定用户正在观看的多媒体内容流包括来自其他用户的先前的评论时(例如，图6的步骤610)，执行图6A的步骤。在步骤627中，确定观看者是否希望观看来自其他用户的评论。例如，观看者可能已经选择具有先前的评论的多媒体内容流，但可能希望观看没有评论的多媒体内容流。图9B示出了用于获取观看者的观看来自其他用户的评论的请求的示例性用户界面屏幕。如果观看者不希望观看来自其他用户的评论，则在步骤629中，经由视听设备16向观看者呈现多媒体内容流，而不显示来自其他用户的评论。
如果观看者希望观看来自其他用户的评论，则在步骤628中，将与多媒体内容流相关的节目信息提供给集中式数据服务器306。在步骤630中，从集中式数据服务器306接收来自观看者有资格观看其评论的一个或多个用户的一个或多个时间同步的评论数据流。在一个示例中，与观看者正在观看的多媒体内容流相关的评论观看资格可以从由集中式数据服务器306生成的、与一个或多个用户观看的特定多媒体内容流相关的时间同步的评论数据流的报告(例如，如表1所示)中获取。
在步骤632中，经由视听显示器16中的用户界面向观看者呈现观看来自各个用户的时间同步的评论数据流的一个或多个选项。在一个示例中，这些选项包括向观看者显示来自一个或多个特定用户的评论数据流。在另一示例中，这些选项包括向观看者显示特定内容类型的评论数据流。内容类型可包括由各个用户提供的文本消息、音频消息和视频馈源。内容类型还可包括由各个用户提供的姿势和面部表情。图10示出了显示观看来自一个或多个用户的一个或多个评论数据流的一个或多个选项的示例性用户界面屏幕。
在步骤634中，经由用户界面获取观看者对一个或多个选项的选择。例如，在一个实施方式中，观看者可选择观看用户Sally和Bob的所有文本消息和音频消息。在步骤636中，经由视听设备16基于观看者的选择来向观看者显示时间同步的评论数据流。在步骤638中，还同时记录观看者自己与该观看者正在观看的多媒体内容流的交互。这为其他用户提供了重新观看该流的选项并且允许其他观看者在稍后时间观看多个评论集。
在步骤640中，基于观看者的交互来生成时间同步的评论数据流。在步骤642中，将时间同步的评论数据流以及与多媒体内容流相关的节目信息提供给集中式数据服务器以供分析。
图6B是描述用于生成时间同步的评论数据流的过程的一个实施方式的流程图(例如，图6的616和图6A的步骤640的更多细节)。在步骤650中，确定向观看者呈现多媒体内容流的实际开始时间。例如，如果在下午9.00(太平洋标准时间)向观看者播出诸如电视节目等多媒体内容流，则在一个实施方式中该多媒体内容流的实际开始时间被确定为0小时，0分钟和0秒。在步骤652中，确定相对于实际开始时间的观看者的每一次交互的时间戳。例如，如果观看者与该观看者正在观看的电视节目的交互在下午9.12(太平洋标准时间)被记录，则观看者的交互的相对于实际开始时间的时间戳被确定为0小时，12分钟，0秒。在步骤654中，生成时间同步的评论数据流。该时间同步的评论数据流包括相对于向观看者呈现多媒体内容流的实际开始时间加时间戳的观看者的交互。
图7是描述用于生成与一个或多个用户观看的特定多媒体内容流相关的时间同步的评论数据流的报告的过程的一个实施方式的流程图。在一个实施方式中，图7的步骤可由集中式数据服务器306中的评论数据流聚集模块312在软件的控制下执行。在步骤700中，从一个或多个客户机设备300A、300B……300X接收一个或多个时间同步的评论数据流、与多媒体内容流相关的节目信息以及与一个或多个用户相关的偏好信息。在步骤702中，生成关于用户观看的特定多媒体内容流的时间同步的评论数据流的报告。与一个或多个用户观看的特定多媒体内容流相关的时间同步的评论数据流的报告的示例性例示在上文的表1中示出。在一个实施方式中并且如图2所讨论的，一个或多个用户的偏好信息被用来确定用户希望使他或她的评论对其可用以供观看的用户组的评论观看资格。
图8是描述用于基于观看者的评论观看人选来向观看者提供由其他用户生成的评论数据流的过程的一个实施方式的流程图。在一个实施方式中，可由集中式数据服务器306在软件的控制下执行图8的步骤。在步骤704中，接收来自一个或多个客户机设备300A、300B……300X的观看与观看者正在观看的多媒体内容相关的一个或多个先前的评论数据流的请求。例如，当在图6A的步骤628处接收到来自一个或多个客户机设备的请求时，可执行步骤704。在步骤706中，标识提供与多媒体内容流相关的评论的一个或多个用户。在一个示例中，该一个或多个用户可通过参考与一个或多个用户观看的特定多媒体内容流相关的时间同步的评论数据流的报告(例如，如表1所示)来标识。在步骤708中，标识观看者有资格观看其评论的用户子集。在一个示例中，该用户子集可通过参考表1所示的“评论观看资格”字段来标识。例如，如果一观看者在由一特定用户提供的“评论观看资格”字段中列出的用户组中的一个或多个用户中，则该观看者有资格观看由该特定用户提供的评论。在步骤710中，在观看者的客户机设备处向观看者提供与用户子集相关的时间同步的评论数据流。
图9A示出了用于在记录观看者与多媒体内容流的交互之前获取观看者的偏好信息的示例性用户界面屏幕。如上文中所讨论的，观看者的偏好信息包括观看者希望使他或她的评论对其可用以供观看的用户组。在一个示例中，这些用户组可包括观看者的朋友、家人或全世界。在图9A的示例性图示中，可以向观看者呈现文本，诸如“选择你想要与其共享你的评论的用户组！”。在一个示例中，观看者可复选框902、904或906中的一个或多个以选择一个或多个用户组。
图9B示出了用于获取观看者的观看来自其他用户的评论的请求的示例性用户界面屏幕。在图9B的示例性图示中，可以向观看者呈现文本，诸如“你希望观看其他用户的评论吗？”。在一个示例中，观看者的请求可以在该观看者选择一个框，即“是”或“否”时获取。
图10示出了向观看者显示观看与多媒体内容流相关的时间同步的评论数据流的一个或多个选项的示例性用户界面屏幕。在一个示例中，观看者可通过选择框910、912或914中的一个或多个来观看来自一个或多个特定的评论数据流。如进一步示出的，在一个示例中，来自各个用户的时间同步的评论数据流可被分类为“实况”或“离线”。如此处所使用的，用户的评论数据流在该用户在节目的实况播出期间提供评论的情况下被分类为“实况”，并且在该用户在节目录像期间提供评论的情况下被分类为“离线”。评论数据流的“实况”或“离线”分类可基于来自由集中式数据服务器306生成的时间同步的评论数据流的报告的节目的播出时间/日期来导出。可以理解，时间同步的评论数据流的“实况”和“离线”分类向观看者提供只观看来自实况地观看节目的用户或观看节目录像的用户的评论的选项。如图10进一步示出的，观看者可选择框910、912、914或916中的一个或多个以选择一个或多个用户组。在另一个示例中，观看者还可观看特定内容类型的时间同步的评论数据流，诸如由一个或多个用户提供的文本消息、音频消息、视频馈源、姿势或面部表情。观看者可选择框918、920、922或924中的一个或多个以观看一个或多个用户的特定内容类型的时间同步的评论数据流。在另一示例中，观看者还可在观看多媒体内容流时经由视听设备16观看从第三方信息源54提供给观看者的移动计算设备的实时数据更新。在另一示例中，观看者还可选择不观看来自任何用户的任何评论数据流。
图11A、11B和11C示出了其中向观看者显示与多媒体内容流相关的一个或多个时间同步的评论数据流的示例性用户界面屏幕。在示例性图示中，时间同步的评论数据流930、932分别包括用户Sally和Bob的评论。如进一步示出的，时间同步的评论数据流930、932是相对于多媒体内容流的实际开始时间同步的。在观看者观看多媒体内容流时，评论数据流930、932为观看者重新创建与其他用户一起实况地观看多媒体内容的体验。
图11A示出了其中在数据流中的时间点10:02处出现文本消息的技术的一实施方式。该文本消息可已经由Sally在观看该内容时的那个时间发送，并由此被重新创建为正在观看的用户的屏幕上的文本。图11B示出了通过音频输出播放的语音消息或语音评论。应当理解，音频输出无需具有任何虚拟指示符，或者可包括如图11B所示的小指示符以指示该音频不是流的一部分。
图11C示出提供Sally和Bob的用户化身1102或视频记录剪辑1104。在利用以上讨论的捕捉设备和跟踪系统的情况下，模拟用户的移动和音频的化身可由系统生成。另外，用户的视频剪辑1104可由捕捉设备和跟踪系统记录。可显示评论用户的全部或各部分。例如，在Sally的化身1102中显示整个身体图像，但在Bob的录像中只显示Bob的面部以示出Bob在该内容部分悲伤。这些用户表示中的任一个或两者可以在正在观看的用户的用户界面中提供。评论用户被显示为具有用户外表的化身、表示除用户之外的某一事物的化身还是显示评论用户的视频可由评论用户或正在观看的用户来配置。此外，尽管只示出了两个评论用户，但可以在用户界面中呈现任何数量的评论用户。另外，化身或视频的呈现大小也可以从相对较小的显示部分变化到较大的显示部分。化身或视频可以在单独的窗口中呈现或覆盖在多媒体内容上。
尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。更确切而言，上述具体特征和动作是作为实现权利要求的示例形式公开的。本技术的范围由所附的权利要求进行定义。

Claims (10)

1.一种用于基于观看者与多媒体内容流的交互来生成时间同步的评论数据流的计算机实现的方法，包括以下计算机实现的步骤：
标识(600)连接到计算设备的捕捉设备的视野内的观看者；
经由所述计算设备从所述观看者接收(606)对要观看的多媒体内容流的选择；
记录(614)所述观看者与所述观看者正在观看的多媒体内容流的交互；
基于所述观看者的交互来生成(616)时间同步的评论数据流；以及
响应于来自所述观看者的请求(634)，经由连接到所述计算设备的视听设备显示(636)与所述观看者正在观看的多媒体内容流相关的一个或多个时间同步的评论数据流。
2.如权利要求1所述的计算机实现的方法，其特征在于，所述观看者的交互包括在所述观看者观看所述多媒体内容流时由所述观看者提供的文本消息、音频消息和视频馈源，或者由所述观看者做出的姿势、姿态和面部表情。
3.如权利要求1所述的计算机实现的方法，其特征在于，还包括获取与所述多媒体内容流相关的偏好信息，所述偏好信息包括所述观看者的社交图中的有资格观看所述观看者与所述多媒体内容流的交互的一个或多个用户组。
4.如权利要求1所述的计算机实现的方法，其特征在于，生成所述时间同步的评论数据流还包括：
确定向所述观看者呈现所述多媒体内容流的实际开始时间；
确定观看者交互相对于所述实际开始时间的时间戳；以及
生成时间同步的评论数据流，所述时间同步的评论数据流包括相对于向所述观看者呈现所述多媒体内容流的实际开始时间加时间戳的观看者的交互。
5.如权利要求1所述的计算机实现的方法，其特征在于，显示所述一个或多个时间同步的评论数据流还包括：
获取与所述观看者正在观看的多媒体内容流相关的观看者评论观看资格；
基于观看者评论观看资格，经由用户界面呈现用于观看所述一个或多个时间同步的评论数据流的一个或多个选项；
经由所述用户界面从所述观看者获取对所述一个或多个选项的选择；以及
基于观看者的选择来向所述观看者显示所述一个或多个时间同步的评论数据流。
6.如权利要求1所述的计算机实现的方法，其特征在于，显示所述一个或多个时间同步的评论数据流还包括：
在向所述观看者呈现所述一个或多个时间同步的评论数据流的同时记录所述观看者与所述多媒体内容流的交互。
7.一种用于基于观看者与多媒体内容流的交互来生成时间同步的评论数据流的系统，包括：
经由通信网络(304)与集中式数据服务器(306)进行通信的一个或多个客户机设备(300)，所述一个或多个客户机设备包括使得所述客户机设备中的处理设备执行以下操作的指令：
记录(614)来自一个或多个观看者的与所述一个或多个观看者正在观看的多媒体内容流的交互；
基于所述交互来生成(616)一个或多个时间同步的评论数据流；
将所述时间同步的评论数据流提供(618)给所述集中式数据服务器；
从所述一个或多个观看者接收(634)观看多媒体内容的选择；
确定(702)对于所述多媒体内容是否存在评论数据流；以及
当所述一个或多个观看者选择观看所述评论数据流时，呈现(636)具有所述评论数据流的多媒体内容。
8.如权利要求16所述的装置，其特征在于：
所述一个或多个客户机设备在所述评论数据流中记录所述一个或多个观看者的视觉和音频交互。
9.如权利要求17所述的装置，其特征在于，还包括：
连接到所述一个或多个客户机设备的视听设备，所述视听设备与所述观看者正在观看的多媒体内容流一起显示评论数据流中的其他用户的视觉和音频交互。
10.如权利要求18所述的装置，其特征在于，还包括以下各项中的至少一个：
连接到所述一个或多个客户机设备的深度相机，所述深度相机基于所述一个或多个观看者在所述一个或多个客户机设备的视野内做出的移动、姿势、姿态和面部表情来跟踪来自所述一个或多个观看者的交互；或者
连接到所述一个或多个客户机设备的移动计算设备，所述移动计算设备从所述一个或多个观看者接收所述交互，并且所述移动计算设备被同步到向所述观看者流传送所述多媒体内容流的一个或多个客户机设备。
CN2011104401943A 2010-12-16 2011-12-15 与多媒体内容的模拟组交互 Pending CN102595212A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/970,855 US20120159527A1 (en) 2010-12-16 2010-12-16 Simulated group interaction with multimedia content
US12/970,855 2010-12-16

Publications (1)

Publication Number Publication Date
CN102595212A true CN102595212A (zh) 2012-07-18

Family

ID=46236278

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011104401943A Pending CN102595212A (zh) 2010-12-16 2011-12-15 与多媒体内容的模拟组交互

Country Status (2)

Country Link
US (1) US20120159527A1 (zh)
CN (1) CN102595212A (zh)

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102946549A (zh) * 2012-08-24 2013-02-27 南京大学 一种移动社交视频分享方法与系统
CN103150325A (zh) * 2012-09-25 2013-06-12 圆刚科技股份有限公司 多媒体评论系统以及多媒体评论方法
CN103731685A (zh) * 2013-12-27 2014-04-16 乐视网信息技术（北京）股份有限公司 对客户端上播放视频同步进行交流的方法和系统
CN104125491A (zh) * 2014-07-07 2014-10-29 乐视网信息技术（北京）股份有限公司 音频评论信息生成方法和装置，音频评论播放方法和装置
CN104239354A (zh) * 2013-06-20 2014-12-24 珠海扬智电子科技有限公司 影音内容的评价分享与播放方法以及影音分享系统
CN104244101A (zh) * 2013-06-21 2014-12-24 三星电子（中国）研发中心 对多媒体内容进行评论的方法和设备
CN104967876A (zh) * 2014-09-30 2015-10-07 腾讯科技（深圳）有限公司 弹幕信息处理方法和装置、弹幕信息展示方法和装置
CN105007297A (zh) * 2015-05-27 2015-10-28 国家计算机网络与信息安全管理中心 社交网络的交互方法及装置
CN105992065A (zh) * 2015-02-12 2016-10-05 南宁富桂精密工业有限公司 随选视讯社交互动方法和系统
CN107256136A (zh) * 2012-06-25 2017-10-17 英特尔公司 使用叠加动画促成由多个用户对媒体内容的同时消费
CN107277643A (zh) * 2017-07-31 2017-10-20 合网络技术（北京）有限公司 弹幕内容的发送方法及客户端
CN107590771A (zh) * 2016-07-07 2018-01-16 谷歌公司 具有用于在建模3d空间中投影观看的选项的2d视频
CN107612815A (zh) * 2017-09-19 2018-01-19 北京金山安全软件有限公司 一种信息发送方法、装置及设备
CN107710270A (zh) * 2015-06-05 2018-02-16 苹果公司 媒体流服务中的社交交互
US10028016B2 (en) 2016-08-30 2018-07-17 The Directv Group, Inc. Methods and systems for providing multiple video content streams
CN108650556A (zh) * 2018-03-30 2018-10-12 四川迪佳通电子有限公司 一种弹幕输入方法及装置
CN109309878A (zh) * 2017-07-28 2019-02-05 Tcl集团股份有限公司 弹幕的生成方法及装置
CN109479157A (zh) * 2016-07-25 2019-03-15 谷歌有限责任公司 促进内容流的观看者之间的交互的方法、系统和介质
WO2019096307A1 (zh) * 2017-11-20 2019-05-23 腾讯科技（深圳）有限公司 视频播放方法、装置、计算设备及存储介质
US10405060B2 (en) 2017-06-28 2019-09-03 At&T Intellectual Property I, L.P. Method and apparatus for augmented reality presentation associated with a media program
CN110419225A (zh) * 2017-05-17 2019-11-05 赛普拉斯半导体公司 用于多媒体回放中的环境信号的分布式同步控制系统
CN111741350A (zh) * 2020-07-15 2020-10-02 腾讯科技（深圳）有限公司 文件展示方法、装置、电子设备及计算机可读存储介质
CN112383570A (zh) * 2015-06-23 2021-02-19 脸谱公司 流媒体呈现系统
CN115443663A (zh) * 2020-05-19 2022-12-06 国际商业机器公司 自动生成对av内容的增强
US11563997B2 (en) 2015-06-23 2023-01-24 Meta Platforms, Inc. Streaming media presentation system

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150143262A1 (en) * 2006-06-15 2015-05-21 Social Commenting, Llc System and method for viewers to comment on television programs for display on remote websites using mobile applications
JP5258826B2 (ja) * 2010-03-26 2013-08-07 株式会社エヌ・ティ・ティ・ドコモ 端末装置及びアプリケーション制御方法
DE102011017305A1 (de) * 2011-04-15 2012-10-18 Abb Technology Ag Bedien- und Beobachtungssystem für technische Anlagen
US10498782B2 (en) * 2011-12-12 2019-12-03 Samsung Electronics Co., Ltd. Method and apparatus for experiencing a multimedia service
KR20140103156A (ko) * 2011-12-12 2014-08-25 삼성전자주식회사 멀티미디어 서비스를 이용하기 위한 시스템, 장치 및 방법
US9301016B2 (en) * 2012-04-05 2016-03-29 Facebook, Inc. Sharing television and video programming through social networking
CN103517158B (zh) * 2012-06-25 2017-02-22 华为技术有限公司 一种生成可展示视频批注的视频的方法、装置及系统
CN103517092B (zh) * 2012-06-29 2018-01-30 腾讯科技（深圳）有限公司 一种视频展示的方法及装置
CN103530788A (zh) * 2012-07-02 2014-01-22 纬创资通股份有限公司 多媒体评价系统、多媒体评价装置以及多媒体评价方法
US9699485B2 (en) 2012-08-31 2017-07-04 Facebook, Inc. Sharing television and video programming through social networking
US20140096167A1 (en) * 2012-09-28 2014-04-03 Vringo Labs, Inc. Video reaction group messaging with group viewing
US9215503B2 (en) 2012-11-16 2015-12-15 Ensequence, Inc. Method and system for providing social media content synchronized to media presentation
CN103854197A (zh) * 2012-11-28 2014-06-11 纽海信息技术（上海）有限公司 多媒体评论系统及其方法
CN103024587B (zh) * 2012-12-31 2017-02-15 Tcl数码科技（深圳）有限责任公司 一种视频点播的信息标注及显示方法及装置
US20140280571A1 (en) * 2013-03-15 2014-09-18 General Instrument Corporation Processing of user-specific social media for time-shifted multimedia content
US9191422B2 (en) 2013-03-15 2015-11-17 Arris Technology, Inc. Processing of social media for selected time-shifted multimedia content
EP3005719B1 (en) 2013-06-05 2020-03-11 Snakt, Inc. Methods and systems for creating, combining, and sharing time-constrained videos
WO2014205641A1 (en) * 2013-06-25 2014-12-31 Thomson Licensing Server apparatus, information sharing method, and computer-readable storage medium
CN103546771B (zh) * 2013-06-26 2017-08-08 Tcl集团股份有限公司 一种基于智能终端的电视节目评论处理方法及系统
US20150113121A1 (en) * 2013-10-18 2015-04-23 Telefonaktiebolaget L M Ericsson (Publ) Generation at runtime of definable events in an event based monitoring system
AU2014351069B9 (en) * 2013-11-12 2020-03-05 Blrt Pty Ltd Social media platform
US11146629B2 (en) * 2014-09-26 2021-10-12 Red Hat, Inc. Process transfer between servers
US10484439B2 (en) * 2015-06-30 2019-11-19 Amazon Technologies, Inc. Spectating data service for a spectating system
US9692815B2 (en) * 2015-11-12 2017-06-27 Mx Technologies, Inc. Distributed, decentralized data aggregation
CN106973322A (zh) * 2015-12-09 2017-07-21 财团法人工业技术研究院 多媒体内容跨屏幕同步装置与方法以及播放装置与伺服器
CN106131641A (zh) * 2016-06-30 2016-11-16 乐视控股（北京）有限公司 一种弹幕控制方法、系统和安卓智能电视
CN107277641A (zh) * 2017-07-04 2017-10-20 上海全土豆文化传播有限公司 一种弹幕信息的处理方法及客户端
CN107451605A (zh) * 2017-07-13 2017-12-08 电子科技大学 一种基于信道状态信息和支持向量机的简单目标识别方法
CN108495152B (zh) * 2018-03-30 2021-05-28 武汉斗鱼网络科技有限公司 一种视频直播方法、装置、电子设备及介质
CN110312169B (zh) * 2019-07-30 2022-11-18 腾讯科技（深圳）有限公司 视频数据处理方法、电子设备及存储介质
CN110913266B (zh) * 2019-11-29 2020-12-29 北京达佳互联信息技术有限公司 评论信息显示方法、装置、客户端、服务器、系统和介质
CN115702570A (zh) * 2020-05-06 2023-02-14 艾锐势企业有限责任公司 点播视频中的交互评论
WO2023092083A1 (en) * 2021-11-18 2023-05-25 Flustr, Inc. Dynamic streaming interface adjustments based on real-time synchronized interaction signals

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070283380A1 (en) * 2006-06-05 2007-12-06 Palo Alto Research Center Incorporated Limited social TV apparatus
WO2009067670A1 (en) * 2007-11-21 2009-05-28 Gesturetek, Inc. Media preferences
US20090249224A1 (en) * 2008-03-31 2009-10-01 Microsoft Corporation Simultaneous collaborative review of a document
CN101849229A (zh) * 2007-11-05 2010-09-29 费斯布克公司 在社交网络网站中传送与来自其他域的活动有关的信息
CN101897185A (zh) * 2007-12-17 2010-11-24 通用仪表公司 用于在通信网络中共享注释的方法和系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7200857B1 (en) * 2000-06-09 2007-04-03 Scientific-Atlanta, Inc. Synchronized video-on-demand supplemental commentary
US20020083451A1 (en) * 2000-12-21 2002-06-27 Gill Komlika K. User-friendly electronic program guide based on subscriber characterizations
US7739584B2 (en) * 2002-08-08 2010-06-15 Zane Vella Electronic messaging synchronized to media presentation
KR100611370B1 (ko) * 2004-04-07 2006-08-11 주식회사 알티캐스트 아바타를 통한 방송프로그램 참여 및 이를 위한 지원 시스템
US7624416B1 (en) * 2006-07-21 2009-11-24 Aol Llc Identifying events of interest within video content
US7559017B2 (en) * 2006-12-22 2009-07-07 Google Inc. Annotation framework for video
US7917853B2 (en) * 2007-03-21 2011-03-29 At&T Intellectual Property I, L.P. System and method of presenting media content
US8898316B2 (en) * 2007-05-30 2014-11-25 International Business Machines Corporation Enhanced online collaboration system for viewers of video presentations
US20080317439A1 (en) * 2007-06-22 2008-12-25 Microsoft Corporation Social network based recording
US9246613B2 (en) * 2008-05-20 2016-01-26 Verizon Patent And Licensing Inc. Method and apparatus for providing online social networking for television viewing
US8839327B2 (en) * 2008-06-25 2014-09-16 At&T Intellectual Property Ii, Lp Method and apparatus for presenting media programs
US8301699B1 (en) * 2008-10-29 2012-10-30 Cisco Technology, Inc. Dynamically enabling features of an application based on user status
US8863173B2 (en) * 2008-12-11 2014-10-14 Sony Corporation Social networking and peer to peer for TVs
US8253774B2 (en) * 2009-03-30 2012-08-28 Microsoft Corporation Ambulatory presence features
US20120072936A1 (en) * 2010-09-20 2012-03-22 Microsoft Corporation Automatic Customized Advertisement Generation System

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070283380A1 (en) * 2006-06-05 2007-12-06 Palo Alto Research Center Incorporated Limited social TV apparatus
CN101849229A (zh) * 2007-11-05 2010-09-29 费斯布克公司 在社交网络网站中传送与来自其他域的活动有关的信息
WO2009067670A1 (en) * 2007-11-21 2009-05-28 Gesturetek, Inc. Media preferences
CN101897185A (zh) * 2007-12-17 2010-11-24 通用仪表公司 用于在通信网络中共享注释的方法和系统
US20090249224A1 (en) * 2008-03-31 2009-10-01 Microsoft Corporation Simultaneous collaborative review of a document

Cited By (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10956113B2 (en) 2012-06-25 2021-03-23 Intel Corporation Facilitation of concurrent consumption of media content by multiple users using superimposed animation
CN107256136A (zh) * 2012-06-25 2017-10-17 英特尔公司 使用叠加动画促成由多个用户对媒体内容的同时消费
US11789686B2 (en) 2012-06-25 2023-10-17 Intel Corporation Facilitation of concurrent consumption of media content by multiple users using superimposed animation
US11526323B2 (en) 2012-06-25 2022-12-13 Intel Corporation Facilitation of concurrent consumption of media content by multiple users using superimposed animation
CN102946549A (zh) * 2012-08-24 2013-02-27 南京大学 一种移动社交视频分享方法与系统
CN103150325A (zh) * 2012-09-25 2013-06-12 圆刚科技股份有限公司 多媒体评论系统以及多媒体评论方法
CN104239354A (zh) * 2013-06-20 2014-12-24 珠海扬智电子科技有限公司 影音内容的评价分享与播放方法以及影音分享系统
CN104244101A (zh) * 2013-06-21 2014-12-24 三星电子（中国）研发中心 对多媒体内容进行评论的方法和设备
CN103731685A (zh) * 2013-12-27 2014-04-16 乐视网信息技术（北京）股份有限公司 对客户端上播放视频同步进行交流的方法和系统
CN104125491A (zh) * 2014-07-07 2014-10-29 乐视网信息技术（北京）股份有限公司 音频评论信息生成方法和装置，音频评论播放方法和装置
CN104967876A (zh) * 2014-09-30 2015-10-07 腾讯科技（深圳）有限公司 弹幕信息处理方法和装置、弹幕信息展示方法和装置
CN105992065A (zh) * 2015-02-12 2016-10-05 南宁富桂精密工业有限公司 随选视讯社交互动方法和系统
CN105992065B (zh) * 2015-02-12 2019-09-03 南宁富桂精密工业有限公司 随选视讯社交互动方法和系统
CN105007297A (zh) * 2015-05-27 2015-10-28 国家计算机网络与信息安全管理中心 社交网络的交互方法及装置
CN107710270A (zh) * 2015-06-05 2018-02-16 苹果公司 媒体流服务中的社交交互
CN112383570A (zh) * 2015-06-23 2021-02-19 脸谱公司 流媒体呈现系统
US11563997B2 (en) 2015-06-23 2023-01-24 Meta Platforms, Inc. Streaming media presentation system
CN112383569A (zh) * 2015-06-23 2021-02-19 脸谱公司 流媒体呈现系统
CN107590771A (zh) * 2016-07-07 2018-01-16 谷歌公司 具有用于在建模3d空间中投影观看的选项的2d视频
CN107590771B (zh) * 2016-07-07 2023-09-29 谷歌有限责任公司 具有用于在建模3d空间中投影观看的选项的2d视频
CN109479157A (zh) * 2016-07-25 2019-03-15 谷歌有限责任公司 促进内容流的观看者之间的交互的方法、系统和介质
US11277667B2 (en) 2016-07-25 2022-03-15 Google Llc Methods, systems, and media for facilitating interaction between viewers of a stream of content
US10491946B2 (en) 2016-08-30 2019-11-26 The Directv Group, Inc. Methods and systems for providing multiple video content streams
US10028016B2 (en) 2016-08-30 2018-07-17 The Directv Group, Inc. Methods and systems for providing multiple video content streams
CN110419225A (zh) * 2017-05-17 2019-11-05 赛普拉斯半导体公司 用于多媒体回放中的环境信号的分布式同步控制系统
US10405060B2 (en) 2017-06-28 2019-09-03 At&T Intellectual Property I, L.P. Method and apparatus for augmented reality presentation associated with a media program
US11206459B2 (en) 2017-06-28 2021-12-21 At&T Intellectual Property I, L.P. Method and apparatus for augmented reality presentation associated with a media program
CN109309878A (zh) * 2017-07-28 2019-02-05 Tcl集团股份有限公司 弹幕的生成方法及装置
CN107277643A (zh) * 2017-07-31 2017-10-20 合网络技术（北京）有限公司 弹幕内容的发送方法及客户端
CN107612815B (zh) * 2017-09-19 2020-12-25 北京金山安全软件有限公司 一种信息发送方法、装置及设备
CN107612815A (zh) * 2017-09-19 2018-01-19 北京金山安全软件有限公司 一种信息发送方法、装置及设备
WO2019096307A1 (zh) * 2017-11-20 2019-05-23 腾讯科技（深圳）有限公司 视频播放方法、装置、计算设备及存储介质
CN108650556A (zh) * 2018-03-30 2018-10-12 四川迪佳通电子有限公司 一种弹幕输入方法及装置
CN115443663A (zh) * 2020-05-19 2022-12-06 国际商业机器公司 自动生成对av内容的增强
CN115443663B (zh) * 2020-05-19 2024-04-09 国际商业机器公司 自动生成对av内容的增强
CN111741350A (zh) * 2020-07-15 2020-10-02 腾讯科技（深圳）有限公司 文件展示方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
US20120159527A1 (en) 2012-06-21

Similar Documents

Publication Publication Date Title
CN102595212A (zh) 与多媒体内容的模拟组交互
US8990842B2 (en) Presenting content and augmenting a broadcast
US20210344991A1 (en) Systems, methods, apparatus for the integration of mobile applications and an interactive content layer on a display
US10039988B2 (en) Persistent customized social media environment
CN102346898A (zh) 自动定制广告生成系统
US9392211B2 (en) Providing video presentation commentary
CN104756514B (zh) 通过社交网络共享电视和视频节目
US20180316948A1 (en) Video processing systems, methods and a user profile for describing the combination and display of heterogeneous sources
CN102572539A (zh) 自动的被动和匿名反馈系统
TWI581128B (zh) 基於媒體反應來控制媒體節目的方法、系統及電腦可讀取儲存記憶體
US9026596B2 (en) Sharing of event media streams
CN102522102A (zh) 基于事件标识的重播的智能确定
US11284137B2 (en) Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
US20110244954A1 (en) Online social media game
US20110225519A1 (en) Social media platform for simulating a live experience
US20180316946A1 (en) Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
CN104205854A (zh) 在与第一屏幕上的内容同步的第二屏幕上提供社交消息的显示的方法和系统
US20180316944A1 (en) Systems and methods for video processing, combination and display of heterogeneous sources
CN102591574A (zh) 与娱乐内容的实时交互
US20180316941A1 (en) Systems and methods for video processing and display of a combination of heterogeneous sources and advertising content
US8845429B2 (en) Interaction hint for interactive video presentations
CN112929685B (zh) Vr直播间的互动方法、装置、电子设备和存储介质
WO2023277950A1 (en) Method and apparatus for shared viewing of media content
CN114846808A (zh) 内容发布系统、内容发布方法以及内容发布程序
CN113661715A (zh) 放映厅业务管理方法、互动方法、显示设备及移动终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1171304

Country of ref document: HK

ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150727

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150727

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20120718