CN107710261B - 用于估计用户注意的系统和方法 - Google Patents

用于估计用户注意的系统和方法 Download PDF

Info

Publication number
CN107710261B
CN107710261B CN201680034538.1A CN201680034538A CN107710261B CN 107710261 B CN107710261 B CN 107710261B CN 201680034538 A CN201680034538 A CN 201680034538A CN 107710261 B CN107710261 B CN 107710261B
Authority
CN
China
Prior art keywords
content
rate
measurement system
content item
audience measurement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680034538.1A
Other languages
English (en)
Other versions
CN107710261A (zh
Inventor
埃亚·奥伦
法尔扎·罗哈尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Priority to CN202110678008.3A priority Critical patent/CN113596525B/zh
Publication of CN107710261A publication Critical patent/CN107710261A/zh
Application granted granted Critical
Publication of CN107710261B publication Critical patent/CN107710261B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0242Determining effectiveness of advertisements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4667Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25891Management of end-user data being end-user preferences
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0263Targeted advertisements based upon Internet or website rating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0269Targeted advertisements based on user profile or attribute
    • G06Q30/0271Personalized advertisement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/252Processing of multiple end-users' preferences to derive collaborative data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2543Billing, e.g. for subscription services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224Monitoring of user activity on external systems, e.g. Internet browsing
    • H04N21/44226Monitoring of user activity on external systems, e.g. Internet browsing on social networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6582Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • Computer Graphics (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Pharmaceuticals Containing Other Organic And Inorganic Compounds (AREA)

Abstract

本公开提供了用于估计观众成员对内容的参与或者将消费内容的用户与已经分心或者已经离开的用户区分开的系统和方法。可以根据用户与内容的交互或者跳过内容来估计用户存在或者注意,其中,将用户交互与来自小型观众测量评估小组的高质量参与数据进行比较,或者基于时间参与曲线外插。可以估计注意差距,所述注意差距表示不是为客户端装置处的内容呈现而存在的、或者不参与或者不注意客户端装置处的内容呈现的用户。这使测量系统能够将消费了并且有可能喜欢所述内容的用户与未消费或可能不喜欢所述内容的用户区分开,即使在这两组用户的客户端装置都接收到并且呈现了所述内容项时。

Description

用于估计用户注意的系统和方法
背景技术
利用单播互联网递送,可以准确地测量内容呈现的实例,内容递送服务器准确地报告递送了任何内容项的客户端装置的数量。虽然可能很容易假设每个递送实例都导致用户关注或者主动消费了内容,但可能并非总是如此。用户的注意可能被吸引到其它地方,使得用户不能主动消费内容,或者用户可以在不暂停或者停止媒体流的情况下离开紧邻区域,从而导致向空房间呈现内容。
另外,用于使内容递送个性化或者定制内容递送的内容选择系统可以使用呈现统计来确定哪些用户或者人口统计对什么类型的内容感兴趣。假设所有用户都参与递送至其客户端装置的内容或者对递送至其客户端装置的内容感兴趣可能夸大了一些项的实际感兴趣率,导致不准确地确定用户注意。
发明内容
可以根据用户与内容的交互或者跳过内容来估计用户存在或者注意,其中,将用户交互与来自小型观众测量评估小组的高质量参与数据进行比较、或者基于时间参与曲线外插。可以估计注意差距,所述注意差距表示不是为客户端装置处的内容呈现而存在的或者不参与或者不关注客户端装置处的内容呈现的用户。这使测量系统能够将消费了并且有可能喜欢内容的用户与未消费或可能不喜欢内容的用户区分开,即使在这两组用户的客户端装置都接收到并且呈现了内容项时也是如此。
在一个方面中,观众测量系统可以使用具有可以经由小型评估小组或者调查来高质量确定的已知感兴趣率的内容。随后可以将相同的内容呈现给普通观众,经由与内容的交互(例如,点击进入、跳过、调查选择等)来测量观众参与度。例如,通过使用跳过测得的观众交互率可以直接标识正在主动地参与内容但对内容不感兴趣的用户(例如,明确地跳过内容的用户)的百分比;但是可能会通过将不存在的或者不参与内容的用户包括在该数量中而过度表示在不跳过内容的情况下消费了并且喜欢内容的用户。注意差距可以被标识为在已知感兴趣率与测得交互率之间的差。在假设如果所有用户都参与了内容的情况下,观众交互率将与小型高质量评估小组的交互率相似,因此,注意差距表示不参与内容或者不是为内容呈现而存在的用户的一部分。因此,可以确定参与或者感兴趣的用户的百分比,并且内容提供者按照调整后的主动视图或者选择算法进行了计费。可以使用相同的注意差距来估计先前或者随后的内容呈现的参与度。
在另一方面中,观众测量系统可以基于不同持续时间的相似或者相同内容来利用时间参与曲线。这使得能够进行参与度或者注意测量,而不需要使用评估小组来确定基线。可以假设,如果内容项具有无限的持续时间,则关注内容呈现的每个用户最终将选择跳过或者终止呈现,并且因此,对于100%的观众参与度或者兴趣,最终将存在对应的100%的跳过率。因此,在理论上的100%的跳过率与可以从较短持续时间的内容的跳过率外插的跳过率之间的任何差表示注意差距,或者未参与或者不存在的用户的百分比。在一种这样的实施方式中,可以向观众呈现不同长度的相似或者相同内容(诸如,30秒、1分钟、2分钟等)以及测得的跳过率。可以针对无限持续时间的相似内容确定最佳拟合曲线并且外推出最佳拟合曲线,使得可以计算注意差距。然后可以将该差距应用于较早的测量,以估计各个内容呈现的参与的、感兴趣的用户的百分比。
可以单独地或者结合地使用这些技术,并且可以使用任何类型的内容(例如,流式音频或者视频、电视节目、前置内容、后置内容、或者间隙内容等)和任何类型的交互(跳过、倒带、点击进入、投票、社交媒体“喜欢”、共享等)。
提到这些实施方式不是为了限制或者限定本公开的范围,而是为了帮助理解本公开。可以开发特定实施方式来实现以下优点中的一个或者多个优点。
附图说明
在附图和下面描述中阐述了一个或多个实施方式的细节。本公开的其它特征、方面、和优点将通过描述、附图、以及权利要求书变得显而易见,在附图中:
图1A是允许进行用户交互的媒体播放器的实施方式的图示;
图1B是图示了根据一个实施方式的随着时间的改变与内容交互的示例的图;
图2A是根据一个实施方式的内容递送和参与度测量环境的框图;
图2B是根据一个实施方式的图2中示出的客户端和服务器装置的框图;以及
图3A是图示了根据一个实施方式的与内容的交互的评估小组的测量示例的图;
图3B和图3C是图示了根据一些实施方式的通过使用在测得内容交互与预期内容交互之间的差距来估计观众参与度的图;
图4是用于估计用户注意的方法的实施方式的流程图;
图5A和图5B是图示了根据一个实施方式的通过使用时间参与外插来估计观众参与度的图;以及
图6是根据一个实施方式的用于通过使用时间参与外插来估计观众参与度的方法的实施方式的流程图。
在各种附图中的类似的附图标记和指示表示类似的元件。
具体实施方式
可以将媒体或者其它内容提供给客户端装置,包括:桌面型计算机、膝上型计算机、平板或者智能电话、视频游戏机、智能电视、可穿戴计算机、或者能够向用户呈现内容的任何其它类型或者形式的客户端装置。内容可以具有任何类型和形式,包括:文本、音频、视频、交互式应用、游戏、或者其它媒体。在许多实施方式中,内容可以由发布者、通常称为内容提供者创建;并且可以通过具有用于将内容同时递送给数千个或者数百万个客户端装置的基础设施和带宽的内容分配系统将其递送至客户端装置。
在许多实施方式中,内容分配系统可以基于通常通过递送内容的客户端装置的数量测得的接收者的数量或者观众大小对内容提供者进行计费。利用响应于请求(例如,超文本传输协议(HTTP)GET请求、实时流传输协议(RTSP)PLAY请求、实时传输协议(RTP)请求、或者其它类型和格式的请求)而递送的流式媒体或者相似的内容,在一些实施方式中,请求(或者响应)的数量可以直接由内容分配系统测量。在其它系统诸如利用多播协议的或者广播系统中,在一些实施方式中,诸如电缆解调器或者解码器或者机顶盒的装置可以将内容的频道调谐或者接收的标识传输至内容分配者。
内容提供者可能希望按照内容呈现或者观看来确定观众大小。然而,虽然内容可以递送至客户端装置并且由客户端装置呈现,但是用户可以或可以不实际存在或者可能会被其它内容或者事件分心。例如,流媒体或者多媒体广播的许多实施方式包括附加的前置内容、后置内容、或者间隙内容。观众成员可以查看其它装置,离开房间(例如,拿小吃),或者在呈现该附加内容期间不专心。因此,虽然一些装置可以接收和呈现内容,但是假设每个这种呈现表示观众成员进行的浏览可能是不正确的。
另外,内容提供者、制作商、和发布者经常基于内容对观众或者相关人口统计的流行度做出制作决定,诸如,创建与受欢迎的内容相似的内容、或者取消不受欢迎的内容的呈现。类似地,用于使内容递送个性化或者定制内容递送的内容选择系统可以使用呈现统计来确定哪些用户或者人口统计对什么类型的内容感兴趣。所有用户参与递送至其客户端装置的所有内容或者对递送至客户端装置的所有内容感兴趣的错误假设可能夸大了一些项的实际感兴趣率。
在一些实施方式中,内容可以由客户端装置利用交互式控制呈现。例如,图1A是允许进行用户交互的媒体播放器100的实施方式的图示。媒体播放器100可以是独立式软件应用、在由web浏览器渲染的web页面内的嵌入式播放器、智能电视的显示环境、或者用于向用户呈现内容并且允许用户以至少有限的方式与内容或者内容呈现交互的与任何其它类型和形式的接口。
媒体播放器100可以显示内容102,诸如,多媒体内容、音频内容、文本内容、或者任何其它类型和形式的内容。在许多实施方式中,内容102可以具有时间方面或者持续时间,诸如,音频或者视频内容。这种内容的示例包括直播或者预录制的电视节目、电影、音乐、广播节目、播客、或者任何其它这种内容。在许多实施方式中,媒体播放器100可以用时间线104或者相似界面来表示内容102的时间方面,以便显示播放时间106和/或允许与播放交互(例如,倒带、快进、暂停、在特定时间发起播放等)。
可以在较长的内容期间按顺序或者在预定时间呈现不同的或者附加的内容,尤其是对于广播或者流式内容,诸如,在另一个节目之前的前置内容、在节目之后的后置内容、或者在节目中断期间的间隙内容。
在媒体播放器100的许多实施方式中,用户可以具有终止或者跳过内容的一部分或者与内容呈现交互或者控制内容呈现的能力。例如,预录制的内容通常具有预定持续时间或者最大长度108,诸如,30秒。在一些实施方式中,用户可以观看完整的预录制的内容,或者可以通过选择“skip(跳过)”按钮110或者类似的界面元素来选择跳过内容的一部分。虽然在所显示的媒体内容102的一个角落上示出了跳过按钮110,但在许多实施方式中,跳过按钮110可以放置在媒体播放器100内的其它地方或者与媒体播放器分开放置(例如,在遥控器上)。对跳过按钮110的选择可以使媒体播放器100终止当前内容的播放并且请求下一项内容或者开始播放缓冲的下一项内容。在其它实施方式中,可以使用“不喜欢”或者“不相关”按钮来指示用户对播放的内容不感兴趣,并且媒体播放器100可以将偏好的标识提供给用于调整个性化简档的内容选择系统或者提供给内容提供者。在一些这样的实施方式中,媒体播放器可以在选择“不喜欢”或者“不相关”界面元素之后继续呈现媒体。
虽然“跳过”、“不喜欢”、“不相关”或者相似的否定界面元素可以指示用户对内容不感兴趣,在其它实施方式中,媒体播放器100可以包括肯定的交互控件以允许用户明确地指示用户对内容感兴趣。例如,媒体播放器100可以包括触发与内容相关的功能诸如请求网站的控件。
对否定或者肯定界面元素的选择不仅可以指示用户的明确偏好,该选择还隐含地将用户标识为存在且消费或参与了内容。然而,在许多实例中,用户可以对内容具有肯定偏好,消费了内容,或者被内容吸引,但可能不会选择对应的界面元素。例如,一些媒体播放器100可能不包括肯定的界面元素,使得用户只可以跳过媒体(指示否定偏好)或者完整地观看媒体。后者的行为可以指示用户对媒体具有肯定偏好,或者可以指示用户在不停止播放的情况下离开房间或者使用户从呈现中脱身。
图1B是图示了根据一个实施方式的随着时间125的改变与呈现内容进行否定交互120(例如,选择“跳过”、“不喜欢”、“不相关”、或者相似的界面元素)的示例的图。在许多情况下,用户子集122可以尽可能快地选择否定接口元素(例如,以避免观看内容),并且因此,交互或者“跳过”率可以最初快速上升。用户的另一子集124可以观看内容,并且在内容呈现期间的某个时间点决定其对内容不感兴趣并且可以选择界面元素。在这段时间期间,跳过率可以类似地上升,虽然按照不同速率的跳过率取决于内容的有趣程度。
在播放内容期间的某个时间点,当大多数用户122和124已经选择了界面元素时,主动被内容吸引但对内容不感兴趣的少数用户将保留或者将不会选择界面元素。因此,跳过率可能会下降并且最终趋向平稳(例如,打算按下跳过按钮的极少用户将一直等待,直到内容项的最后几秒为止)。然而,用户的剩余子集126(例如,接收到内容的总观众大小或者客户端装置的数量减去子集122和124之和)表示主动被内容吸引并且对内容感兴趣的用户以及未参与内容呈现(例如,不存在或者分心)的用户。
为了将参与内容并且对内容感兴趣的用户与不参与内容的用户区分开,可以经由将来自小型观众测量评估小组的高质量参与数据进行比较来估计用户存在或者注意,或者基于时间参与曲线外插。可以估计注意差距,该注意差距表示不是为客户端装置处的内容呈现而存在的或者不参与或者不注意客户端装置处的内容呈现的用户。这使测量系统能够将消费了并且有可能喜欢内容的用户与未消费或可能不喜欢内容的用户区分开,即使在这两组用户的客户端装置都接收到并且呈现了内容项时也是如此。
为了阅读对以下各个实施例的描述,下面对本说明书及其相应内容的各部分的描述可以是有帮助的:
A部分描述了用于递送内容和估计观众注意率的网络环境和计算环境;
B部分描述了用于经由将来自评估小组的参与度数据进行比较来估计观众注意的系统和方法的实施例;
C部分描述了用于经由时间参与外插来估计观众注意的系统和方法的实施例;
A.网络和计算环境
图2A是根据一个实施方式的内容递送和参与度测量环境200的框图。网络205可以连接一个或者多个客户端装置210A至210N(通常称为客户端装置210)和内容分配系统或者观众测量系统(通常称为观众测量系统212)。观众测量系统212可以直接或者经由网络205任一者从一个或者多个内容提供者218接收内容。观众测量系统212还可以与评估小组提供者214进行通信,该评估小组提供者可以与一个或者多个小组成员216A至216N(通常称为小组成员216)执行单源评估小组测量或者研究。尽管仅图示了一个测量系统或者服务器212和一个评估小组提供者214,但在许多实施方式中,多个提供者或者服务器可以经由一个或者多个网络205进行通信。
仍然参照图2A并且更详细地,网络205可以是任何形式的计算机网络或者在客户端装置210、一个或者多个观众测量服务器212、以及未图示的其它装置之间中继信息的网络的组合。网络205可以包括互联网和/或其它类型的数据网络,诸如,局域网(LAN)、广域网(WAN)、蜂窝网络、卫星网络、或者其它类型的数据网络。网络126还可以包括被配置成接收和/或发送网络205内的数据的任何数量的计算装置(例如,计算机、服务器、路由器、网络交换机等)。网络205可以进一步包括任何数量的硬连线和/或无线连接。客户端装置210可以与硬连线(例如,经由光纤电缆、CAT5电缆等)至网络205中的其它计算装置的收发器进行无线通信(例如,经由WiFi、蜂窝、无线电等)。在一些实施方式中,网络205可以是虚拟网络,诸如在由单个物理机器执行的多个虚拟机之间的虚拟网络,或者抽象网络,诸如经由物理上可移动的介质(例如,Sneakernet、经由磁带介质、CD-ROM、闪速介质、外部硬盘驱动器、软盘等传输数据)离线传输数据。
客户端装置210可以按照不同的方式称为客户端、装置、客户端装置、计算装置、用户装置、或者任何其它这种术语,可以是桌面型计算机、膝上型计算机、平板计算机、智能电话、视频游戏机、智能电视或者机顶盒、服务器、工作站、或者能够通过网络205进行通信的任何其它类型和形式的计算装置。在一些实施方式中,客户端装置210可以执行应用、服务、服务器、守护进程(daemon)、例程、或者用于通过网络205进行通信的其它可执行逻辑,诸如,web浏览器、邮件客户端、视频播放器、音乐播放器、视频游戏、或者任何其它这种应用。这种应用可以包括命令行接口、图形用户界面、或者这些或者其它接口的任何组合。在客户端装置是智能电视或者机顶盒的实施方式中,客户端装置可以经由第一接口诸如地面、卫星、或者有线广播接收内容;并且可以经由网络205经由诸如以太网或者WiFi接口的第二接口与观众测量服务器进行通信。在其它实施方式中,客户端装置210可以经由网络205接收内容并且可以经由网络205发送交互标识。
内容提供者218可以包括一个或者多个计算装置,该一个或者多个计算装置连接至网络205并且被配置成直接或者经由观众测量系统或者内容分配系统212任一者向客户端210提供内容。内容提供者218可以按照不同的方式称为内容提供者、服务器、web服务器、数据服务器、发布者、服务提供者、或者用其它相似的术语称谓。在许多实施方式中,内容提供者218可以包括被配置成服务器场或者云的多个计算装置,并且可以包括路由器、负载平衡器、网络地址转换器、防火墙、或者其它这种装置。内容提供者218可以是计算机服务器(例如,FTP服务器、文件共享服务器、web服务器等)或者服务器组合(例如,数据中心、云计算平台等)。内容提供者218可以提供任何类型和形式的内容,包括文本、图像、视频、音频、多媒体、或者其它数据、或者它们的任何组合。内容可以包括搜索结果、博客或者论坛内容、新闻文章、电影、电视节目、播客、视频游戏、或者其它交互式内容、网站、社交网络、或者任何其它类型和形式的内容。内容提供者218可以是响应于搜索查询而向客户端装置210提供搜索结果数据的在线搜索引擎。在另一实施方式中,内容提供者218可以是响应于对网页的请求而向客户端装置210提供网页数据的第一方web服务器。
观众测量服务器或者系统212可以包括连接至网络205的一个或者多个计算装置,并且被配置成测量和分析观众数据以确定观众大小和参与率。观众测量服务器212可以按照不同的方式称为内容分配系统、分配和测量系统、测量服务器、服务器、web服务器、数据服务器、服务提供者、或者用其它相似的术语称谓。在许多实施方式中,观众测量服务器212可以包括被配置成服务器场或者云的多个计算装置,并且可以包括路由器、负载平衡器、网络地址转换器、防火墙、或者其它这种装置。在一些实施方式中,观众测量服务器212可以是内容提供者218。
在一些实施方式中,观众测量服务器212可以经由网络205从客户端210接收对内容和/或装置标识符的请求的标识。在一种这样的实施方式中,客户端210可以执行插件或者其它应用来向观众测量服务器212发送对内容的请求的标识。在另一实施方式中,可以将对内容的请求从客户端210发送至观众测量服务器212,该观众测量服务器212然后可以将请求重新指向适合的内容提供者218,同时记录关于请求的信息。在又一实施方式中,可以将对内容的请求从客户端210发送至内容提供者218,该内容提供者218可以用使客户端210将第二请求发送至观众测量服务器212的内容和嵌入式指令来做出响应。从内容提供者递送的诸如web页面的内容可以包括具有观众测量服务器212的地址的嵌入式逐个像素图像,使得在客户端的web浏览器渲染内容时,web浏览器将对图像的请求发送至观众测量服务器212,有可能包括参数或者cookies,装置标识符、或者其它信息。
在其它实施方式中,观众测量服务器212可以从内容提供者218接收对内容和/或装置标识符的请求的标识。内容提供者218可以执行测量代理(未图示),该测量代理可以包括应用、服务、服务器、守护进程、或者用于测量来自客户端装置的、由内容提供者218接收的请求的其它可执行逻辑。测量代理可以单独地或者聚合地将请求的标识发送至观众测量系统212。
评估小组提供者214可以包括用于与一个或者多个评估小组参与者或者小组成员216进行市场或者观众研究的一个或者多个计算装置。已经同意参加评估小组的评估小组参与者可以向评估小组提供者指示其观看了或者收听了特定内容项,诸如,电视节目、广播节目、电影、商业广告、标识的时间段诸如一分钟、十分钟、半小时、或者任何其它这种时间段、或者任何其它这种信息。在一些实施方式中,评估小组参与者可以提供日记或者日志,或者穿戴或者携带检测在附近播放的内容并且记录日志以供随后发送至评估小组提供者的便携式装置。评估小组提供者214可以聚合关于观看了或者收听了事件的每个评估小组参与者的人口统计信息并且使该信息匿名,以创建观众简档,指示以下特性,诸如,指定性别、年龄、来自特定位置的观众的百分比、或者其它这种信息。内容的观众测量对测量观众大小或者内容的流行度用于计划内容递送排程度或者其它这种目的可能是有用的。
在一些实施方式中,评估小组提供者214可以聚合评估小组日记或者日志和/或使评估小组日记或者日志匿名并且将内容框的人口统计信息发送至观众测量服务器212。在许多实施方式中,评估小组提供者214可以将对应的广播块的标识和/或关于内容块的信息发送至观众测量服务器212,诸如,节目类型、节目标题、节目描述、与节目相关联的关键字、与节目相关联的网站或者其它文档、与节目相关联的制作品和/或制造商、或者任何其它这种信息。
在一些实施方式中,评估小组提供者214可以从小组成员216采集关于内容项的偏好信息,诸如,内容的肯定或者否定偏好。在一些实施方式中,这可以是明确的偏好标识,而在其它实施方式中,可以允许小组成员216选择跳过内容项,从而指示否定偏好。在一些这样的实施方式中,如上文讨论的,小组成员可以使用客户端装置210和媒体播放器100。
因为评估小组提供者通常向评估小组成员支付参与费用,所以小组成员216可以充分参与内容。因此,这种观众测量和偏好数据可以具有高质量,虽然针对小样本大小。
在许多实施方式中,关于小组成员(和其它用户)的人口统计信息可以是匿名的或者消除歧义的,以保护小组成员或者装置用户的隐私。在许多这样的实施方式中或者可以针对测量采集有关客户端装置的用户的个人信息或者可以使用该个人信息来选择第三方内容的类似情况下,可以为用户提供如下机会:控制采集个人信息(例如,有关用户的社交网络、社交动作或者活动、用户的偏好、或者用户的当前位置的信息)的程序或者特征是否可以采集个人信息,或者控制是否或者如何将测量数据发送至观众测量服务器和/或评估小组提供者。另外,在通过观众测量服务器存储或者使用特定数据之前,可以按照一种或者多种方式来处理该特定数据,从而使得可以在生成参数(例如,人口统计参数)时去除个人身份信息。在一些实施方式中,可以使用户的身份匿名,从而使得无法确定用户的个人身份信息,或者在获得位置信息的情况下,可以将用户的地理位置一般化(诸如,到城市、邮政编码、或者州县等级),从而使得无法确定用户的特定位置。因此,用户可以控制如何采集关于该用户的信息,以及观众测量服务器、评估小组提供者、以及内容提供者如何使用该信息。
图2B是根据一个实施方式的图2A中示出的客户端和服务器装置的框图。首先参照客户端装置210,客户端装置可以是客户端、评估小组参与者、或者非评估小组参与者或者内容的“常规”观众成员的计算装置。客户端装置210可以是被配置成经由网络205进行通信的任何数量的不同类型的用户电子装置,包括但不限于,膝上型计算机、桌面型计算机、平板计算机、智能电话、数字视频录像机、电视的机顶盒、视频游戏机、或者任何其它类型和形式的计算装置或者装置的组合。在一些实施方式中,可以将客户端装置210的类型分类为移动装置、桌面型装置、或者打算保持静止或者被配置成主要经由局域网访问网络205的装置、或者可以是电子装置的另一类别,诸如,媒体消费装置。
在许多实施方式中,客户端装置210包括处理器222和存储器224。存储器224可以存储机器指令,该机器指令在由处理器222执行时使处理器222执行本文描述的操作中的一个或者多个操作。处理器222可以包括微处理器、ASIC、FPGA等或者它们的组合。在许多实施方式中,处理器222可以是多核处理器或者处理器阵列。存储器224可以包括,但不限于,电子存储装置、光学存储装置、磁性存储装置、或者能够向处理器222提供程序指令的任何其它存储装置。存储器224可以包括软盘、CD-ROM、DVD、磁盘、存储器芯片、ROM、RAM、EEPROM、EPROM、闪速存储器、光学介质、或者处理器222可以读取指令的任何其它合适的存储器。指令可以包括来自任何合适的计算机编程语言诸如但不限于,C、C++、C#、Java、JavaScript、Perl、HTML、XML、Python、和Visual Basic的代码。
客户端装置210可以包括一个或者多个网络接口226。网络接口226可以包括任何类型和形式的接口,包括以太网,包括10Base T、100Base T、或者1000Base T(“千兆”);802.11无线的任何变型,诸如802.11a、802.11b、802.11g、802.11n、或者802.11ac;蜂窝,包括CDMA、LTE、3G、或者4G蜂窝;蓝牙或者其它短距离无线连接;或者用于与网络205进行通信的这些或者其它接口的任何组合。在许多实施方式中,客户端装置210可以包括不同类型的多个网络接口226,实现经由不同的子网络到诸如互联网的各种网络205或者网络205的连接。如上文讨论的,客户端装置210还包括用于接收地面、卫星、电缆模拟、或者数字广播的其它接口。
客户端装置210可以包括一个或者多个用户接口装置228。用户接口装置228可以是通过生成感觉信息(例如,在显示器上的可视化、一个或者多个声音、触觉反馈等)将数据传送给用户和/或将来自用户的接收到的感觉信息转换成电子信号的任何电子装置(例如,键盘、鼠标、指向装置、触摸屏幕显示器、麦克风等)。根据各个实施方式,一个或者多个用户接口装置可以处于客户端装置210的外壳内部,诸如内置显示器、触摸屏幕、麦克风等,或者处于客户端装置210的外壳的外部,诸如连接至客户端装置210的监视器、连接至客户端装置210的扬声器等。
客户端装置210可以将应用230包括在存储器224中或者可以利用处理器222执行应用230。应用230可以是应用、小程序、脚本、服务、守护进程、例程、或者用于接收内容并且用于发送响应、命令、或者其它数据的其它可执行逻辑。在一些实施方式中,应用230可以是web浏览器,而在另一实施方式中,应用230可以是视频游戏。应用230可以包括用于显示经由网络接口226接收的和/或由处理器222本地生成的内容和用于发送经由用户接口装置228接收的交互的功能,交互诸如对网站的请求、对调查响应选项的选择、输入文本串等。
应用230可以是媒体播放器或者包括嵌入式媒体播放器100,诸如,web浏览器内的插件或者本地媒体播放器。应用230可以提供用于与媒体播放器中播放的内容进行交互的用户界面,诸如,跳过控制、不喜欢按钮、或者任何相似的接口。
在一些实施方式中,应用230可以包括数据采集器或者采集代理。采集代理可以包括应用插件、应用扩展、子例程、浏览器工具栏、守护进程、或用于采集由应用230处理的数据的其它可执行逻辑。在一些实施方式中,应用230可以是分离的应用、服务、守护进程、例程、或与应用230分开但被配置成拦截和/或采集由应用230处理的数据的其它可执行逻辑,诸如屏幕抓取器、分组拦截器、AOI挂钩进程、或者其它这种应用。采集代理可以被配置成拦截或者接收经由用户接口装置228输入的数据,诸如,互联网搜索查询、文本串、调查响应选择、或者其它值、或者由应用230接收和处理的数据,包括所访问的网站、与网站或者应用交互所花费的时间、阅读的页面、或者其它这种数据。在许多实施方式中,类集可以将这些数据中的一些或者所有数据或者这些数据的标识符存储在行为历史数据库或者其它数据结构中,并且可以包括所访问的网站、所跟随的网络链接、所输入的搜索查询、或者其它这种数据的标识。在一些实施方式中,数据可以是匿名的或者消除歧义的,以减少个人身份信息。在其它实施方式中,采集代理可以由服务器执行,或者可以由部署在客户端与服务器之间的中间装置诸如路由器、电缆调制解调器、或者其它这种装置执行。当请求和响应遍历路由器时,数据请求和响应可以由在中间路由器上执行的采集代理进行解析。在一些实施方式中,这可以允许监视去往/来自家庭的所有数据流,而不需要将采集代理安装在家庭内的多个装置上。在其它实施方式中,如上面讨论的,客户端装置210可以不执行采集代理;在这样的实施方式中,请求数据可以由观众测量服务器在不使用采集代理的情况下获得,诸如,经由渲染内容中的嵌入式图像、重定向请求、或者其它这种方法。
客户端210可以包括装置标识符234或者用装置标识符234标识。装置标识符234可以是字母数字串、数据串、序列号、媒体访问控制(MAC)地址、互联网协议(IP)地址、用户名或者账户名、全球唯一标识符(GUID)、cookie、随机或者伪随机数、或者任何其它类型和形式的标识符,包括这些或者其它标识符的组合。在一些实施方式中,装置标识符234可以固定至装置或者预先配置在装置中,诸如,制造商序列号或者MAC地址,而在其它实施方式中,装置标识符234可以由内容提供者、评估小组提供者、观众测量服务器、应用230、或者其它实体动态地设置,诸如,cookie或者用户名。在一些实施方式中,可以为内容提供者和/或观众测量服务器的每个通信设置唯一的或者新装置标识符234,而在其它实施方式中,装置标识符234可以不发生变化,或者可以周期性地发生变化(例如,每小时、每天、每周等),或者按照其它间隔(例如,在重启客户端装置、登录到互联网服务时等)发生变化。在一些实施方式中,装置标识符234可以与一个或者多个其它装置标识符234(例如,移动装置的装置标识符、家庭计算机的装置标识符等)相关联。在许多实施方式中,如上面讨论的,装置标识符234可以由内容提供者生成和/或发送至装置210。在其它实施方式中,如上面讨论的,客户端210可以向观众测量服务器或者内容提供者请求装置标识符或者cookie 234,并且可以将该装置标识符或者cookie 234与对内容的请求相关联地发送至观众测量服务器提供者或者内容提供者。
在图2B中也图示了观众测量服务器212或者内容提供者218、广播提供者、或者相似的装置的实施方式的框图。正如客户端装置210,服务器212可以包括一个或者多个处理器222、存储器224、网络接口226、以及用户接口228。在称为无头服务器的一些实施方式中,服务器218可以不包括用户接口228,但可以经由网络205与具有用户接口228的客户端210进行通信。存储器224可以包括内容存储装置,诸如,网页、图像、音频文件、视频文件、数据文件、或者任何其它类型和形式的数据的存储装置。在一些实施方式中,存储器224可以存储供服务器的处理器222执行的一个或者多个应用(未图示),服务器包括FTP服务器、web服务器、邮件服务器、文件共享服务器、对等服务器、或者用于递送存储在内容存储装置中的内容的其它这种应用。
在一些实施方式中,服务器212可以执行测量引擎250。测量引擎250可以包括应用、服务、服务器、守护进程、例程、或者用于测量内容项的观众的其它可执行逻辑,包括接收装置标识符和/或对内容项的请求或者关于这种请求的信息、根据装置标识符聚合内容标识符或者对内容标识符进行分类、并且在时间段期间测量内容项的观众。在一个实施方式中,测量引擎可以对标识在与不同的装置标识符相关联的时间段(诸如,一小时)内接收到的特定内容项的内容标识符的数量进行计数,以对接收到内容项的观众的大小进行计数。可以将该观众测量提供给第三方,诸如,内容提供者。
在一些实施方式中,服务器212可以维护测量数据库244。测量数据库244可以包括用于利用对应的装置标识符、cookie、和/或会话标识符来存储多个内容标识符的任何类型和形式的数据库、平面文件、数据文件、数据阵列、或者其它数据结构。在许多实施方式中,测量数据库244还可以包括接收的或者发送的内容标识符的时间戳。测量数据库244还可以包括从客户端装置接收到的人口统计信息或者特性,该人口统计信息或者特性结合对内容的请求或者先前从客户端装置接收并且与装置标识符相关联。可以经由调查或者简档问题明确地获得特性,或者可以经由与装置相关联的、和与具有已知特性的装置相关联的请求相似的请求隐含地获得特性。特性或者特征可以用值来标识,诸如,其中,特性可能具有几个不同的潜在值。在一些实施方式中,可以聚合与来自不同装置的广播事件或者块相关联的特性和/或使该特性匿名。
服务器212还可以维护内容存储装置246,该内容存储装置可以存储包括如上文讨论的音频或者视频内容的任何类型和形式的内容。在一些实施方式中,内容存储装置246可以处于一个或者多个外部存储装置中,或者可以分布在一个或者多个服务器212或者云存储装置中。可以将来自内容存储装置246的内容提供给客户端装置210、评估小组提供者214、或者小组成员216。
服务器212可以执行比较器或者比较引擎252。比较器252可以包括应用、服务、服务器、守护进程、例程、或者用于将测量数据诸如提供给观众的内容的测得跳过率、来自小组成员测量的跳过率、或者其它这种信息进行比较的其它可执行逻辑。比较器252可以包括用于将整数值或者位串进行比较的按位比较器、数学比较器、模拟比较器、或者用于将值彼此比较和/或与阈值进行比较的任何其它类型和形式的应用或者软件。
服务器212还可以执行相关器或者相关引擎256,该相关器或者相关引擎256可以包括应用、服务、例程、守护进程、或者用于确定在包括多元人口统计数据的各种信息之间的相关性的其它可执行逻辑。相关器256可以使用任何类型和形式的算法来确定聚合装置测量数据中的特性的存在与人口统计数据中的特性的存在的统计值之间的相关性。相关引擎256可以使用Pearson相关算法来将数据中的特性的频率与其它数据中的特性的频率进行比较。可以将所产生的相关系数与阈值进行比较,并且可以响应于系数高于或者低于阈值增加或者减少与特性相关联的置信度分数。
服务器212还可以执行外推器258,该外推器258可以包括应用、服务、例程、守护进程、或者用于从数据集中外插给定输入参数的预测值的其它可执行逻辑。外推器258可以使用任何类型和形式的算法来确定外插,包括确定最佳拟合曲线、计算给定函数的极限、或者任何其它这种函数。
在图2B中也图示了小组成员提供者214的服务器的实施方式的框图。正如客户端装置210,服务器214可以包括一个或者多个处理器222、存储器或者存储装置224、网络接口226、以及用户接口228。在称为无头服务器的一些实施方式中,服务器214可以不包括用户接口228,但可以经由网络205与具有用户接口228的客户端210或者小组成员210进行通信。存储器224可以包括内容存储装置,诸如,网页、图像、音频文件、视频文件、数据文件、或者任何其它类型和形式的数据的存储装置。在一些实施方式中,存储器224可以存储供服务器的处理器222执行的一个或者多个应用(未图示),服务器包括FTP服务器、web服务器、邮件服务器、文件共享服务器、对等服务器、或者用于递送存储在内容存储装置中的内容的其它这种应用。
在一些实施方式中,评估小组提供者214可以维护评估小组信息的数据库240。数据库240可以是任何类型和形式的数据库,并且可以包括关于小组成员的信息,该信息包括人口统计信息、内容偏好、或者任何其它这种信息。如上面讨论的,在许多实施方式中,可以使小组成员信息混淆、可以对小组成员进行加密、可以使小组成员匿名、或者使小组成员信息模糊化以保护小组成员的隐私。
评估小组提供者214可以存储测试内容242,该测试内容242可以包括向小组成员216呈现的任何类型和形式的内容。在一些实施方式中,测试内容242可以是来自内容存储装置246的内容的子集。例如,如下面更详细地讨论的,与观众成员可能变得更加矛盾的内容相反,测试内容242可以是被小组成员或者观众成员广泛偏爱或者不喜欢的内容。评估小组提供者214可以存储关于测试内容的信息,包括跳过率、偏好率、或者其它这种信息。在许多实施方式中,并不是存储测试内容242,而是评估小组提供者214可以仅存储测试内容的标识(例如,存储在数据库中),并且可以将客户端或者小组成员指向由服务器212维护的内容存储装置246。
B.经由评估小组测量的参与度估计
在一个方面中,观众测量系统可以使用具有可以经由小型评估小组或者调查以高质量确定的已知感兴趣率的内容。如上面讨论的,因为可以向小组成员支付参与费用,所以小组成员对内容的参与度可以等于100%(小组成员喜欢或者不喜欢内容,但尽管如此仍主动消费了内容,而不是在呈现期间分心或者不存在)。可以明确地确定(例如,“喜欢”或者“不喜欢”界面元素或者其这种控件)或者隐含地确定(例如,通过使小组成员能够跳过或者终止其不喜欢的内容呈现)偏好。
图3A是图示了根据一个实施方式的评估小组与内容交互(“不喜欢”或者“跳过”率300;或者相反,“喜欢”或者“完整地观看”率302)的测量的示例的图。可以将测试内容称为大部分小组成员可能不喜欢的低质量内容304或者大部分小组成员可能喜欢的高质量内容。可以丢弃小组成员存在矛盾的内容(或者喜欢和不喜欢内容的小组成员的数量相似的内容),这是因为该内容对于进行参与度测试过于模糊。可以将内容明确地设计为高质量或者低质量(例如,30秒的警笛声和/或闪光),或者可以响应于内容的较大的跳过收视率(例如,低质量内容)或者较大的不跳过收视率(例如,高质量内容)而选择内容。
如图所示,小组成员可以以非常高的水平n 306(相当于非常低水平的观看率)跳过低质量内容304。在一些情况下,对于真正好的内容,n可以等于100%;然而,经常有至少少数的小组成员可能不喜欢内容或者跳过内容,从而产生小于100%的n 306。类似地,小组成员可以按照非常低的速率m 312(相当于非常高的观看率)跳过高质量内容310。同样,虽然很有可能没有小组成员会跳过一些非常高质量的内容,但是在许多情况下,至少少数的小组成员会跳过内容,从而产生低但非零速率m 312。低质量和高质量内容可以基于阈值来分类,可以将阈值设置为足以避免模糊或者测量误差。在各种实施方式中,低质量内容可以具有大于70%、80%、或者90%或者任何其它这种值的跳过率;并且高质量内容可以具有小于30%、20%、或者10%或者任何其它这种值的跳过率。更多极值可能会造成测量改进。
随后可以将相同的测试内容呈现给普通观众,经由与内容的交互(例如,点击进入、跳过、调查选择等)来测量观众参与度。如上文讨论的,通过使用跳过测得的观众交互率可以直接标识正在主动地参与内容但对内容不感兴趣的用户(例如,明确地跳过内容的用户)的百分比;但是可能会通过将不存在的或者不参与内容的用户包括在该数量中而过度表示在不跳过内容的情况下消费了并且喜欢内容的用户。注意差距可以被标识为在已知感兴趣率与测得交互率之间的差。在假设如果所有用户都参与了内容的情况下,观众交互率将与小组成员的交互率相似,因此,注意差距表示不参与内容或者不是为内容呈现而存在的用户的一部分。因此,可以确定参与或者感兴趣的用户的百分比,并且内容提供者按照调整后的主动视图或者选择算法进行了计费。可以使用相同的注意差距来估计先前或者随后的内容呈现的参与度。
图3B是图示了根据一些实施方式的通过使用在低质量内容304的测得内容交互与预期内容交互之间的差距来估计观众参与度的图。可以如上文讨论那样结合图3A,基于充分参与的小组成员与内容的交互来确定预期跳过率n 306。可以将相同的内容提供给具有不喜欢内容或者跳过内容的能力的普通观众。由于在内容呈现期间一些普通观众很可能会脱身(例如,分心或者不存在),所以较小百分比的普通观众将明确地不喜欢或者跳过内容,从而产生小于预期跳过率n的测得跳过率i 324(或者相反,大于预期观看率的观看率)。在预期率n与测得率m之间的差表示注意差距326,或者(如果已存在的)用户已脱身并且很可能已经跳过了内容的用户的百分比。
可以在测试内容304之前或者之后(例如,在诸如在商业广告的从测试内容中脱身的任何用户很可能会类似地从主题内容330中脱身的短时间帧紧接着之前或者之后或者其间)将称为主题内容330的其它内容提供给相同的观众客户端装置。可以针对观众客户端装置测量跳过率j 328(或者相反,观看率)。可以将注意差距326添加至跳过率(或者可以从观看率减去注意差距)以计算关注的跳过率k 330(或者关注的观看率332)。关注的跳过率或者观看率指示如果这些脱身或者不存在的用户存在能够选择跳过内容,他们会跳过内容的或者完整观看内容的观众成员的百分比。
图3C是图示了根据一些实施方式的通过使用在高质量内容310的测得内容交互与预期内容交互之间的差距来估计观众参与度的另一图。与图3B中示出的图相似,测得跳过率i 324可以低于预期跳过率m 312,其中差等于注意差距326。可以如上文讨论的那样应用注意差距326来确定其它主题内容的关注的跳过率或者关注的观看率。
图4是用于估计用户注意的方法400的实施方式的流程图。将该方法划分成两个阶段,评估小组训练401或者基于内容的小组成员测量的注意差距模型的训练;以及观众测量402或者模型的应用。尽管示出了在测量402之前执行训练401,但在一些实施方式中,可以在较早的观众测量之后执行训练401并且对来自较早的观众测量的所存储的数据进行注意估计。
在模型的小组成员训练期间,在步骤404中,可以向小组成员示出或者提供内容项。在一些实施方式中,可以将内容提供给评估小组作为组(例如,在组设置中),而在一些实施方式中,可以将内容提供给评估小组成员的单独的客户端装置。在一些实施方式中,如上文结合图1A讨论的,可以经由媒体播放器来提供内容。每个评估小组成员可以消费内容并且指示对于内容的肯定或者否定偏好,或者可以观看内容(指示肯定偏好)或者选择跳过或者终止内容呈现(指示否定偏好)。如上文讨论的,每个交互可以触发媒体播放器、采集代理、或者相似的应用,以向评估小组提供者发送请求或者标识符以便进行测量。
在步骤406中,请求或者标识符可以由评估小组提供者接收。可以存储小组成员的偏好的标识符,诸如,存储在评估小组信息数据库中。在一些实施方式中,可以基于参考偏好来更新内容项的跳过率或者观看率。在一种这样的实施方式中,对于等于所接收的跳过交互除以小组成员的数量的跳过率,可以对小组成员数量进行增量,并且响应于接收到跳过指示符而对跳过交互的次数进行增量,或者响应于接收到观看或者肯定偏好指示符(或者提供给小组成员的内容的指示符,并且未接收到否定偏好指示符)而不对跳过交互的次数进行增量。在其它实施方式中,可以类似地更新观看率。在许多实施方式中,对于评估小组的每个成员,步骤404和406可以迭代地重复,或者直到参与的小组成员的数量超出足以获得评估小组的统计准确性的预定阈值(这种阈值可以基于等于对应的观众或者人口统计人口的预定部分的小组成员的数量)为止。
如果不需要来自附加评估小组成员的数据,则在步骤408中,根据实施方式,评估小组提供者或者观众测量系统可以确定等于聚合跳过率或者观看率的内容项的预期率。可以将预期率提供给观众测量系统或者存储在与内容项相关联的测量数据中。
如上文讨论的,内容项可以预先确定或者创建为低质量或者高质量内容项,或者可以分别响应于来自评估小组的聚合跳过率或者观看率高于预定阈值而被分类为低质量或者高质量。
较大评估小组或者重复测试可以提高预期率的准确性。因此,在一些实施方式中,在步骤410中,评估小组提供者或者观众测量系统可以将步骤404至408的迭代计数与阈值进行比较,并且可以响应于迭代次数低于阈值而重复步骤404至410。
在观众测量阶段402期间,在412中,可以向观众成员示出测试内容项(例如,向评估小组示出的内容,该内容预期率已知)或者将其提供给如上文讨论的观众成员或者用户的客户端装置。在一些实施方式中,客户端装置可以请求内容项,诸如主题内容项,并且内容提供者或者分配者可以选择提供测试内容项和主题内容项两者。在其它实施方式中,内容提供者或者分配者可以响应于第一请求而选择提供测试内容,并且响应于第二请求而选择提供主题内容。
在步骤414中,观众测量服务器可以从客户端装置接收指示符,诸如,跳过或者否定偏好指示符。可以经由上文讨论的任何方法或者系统,诸如经由请求的参数(例如,小图像的HTTP请求或者具有参数和/或对应值的GET请求)或者任何这种方法,来接收指示符。
在步骤416中,观众测量服务器可以确定将测试内容呈现给非评估小组观众的测得跳过率(或者相反,观看率)。如上文讨论的,可以根据内容的先前率将该率确定或者更新为接收到的跳过指示符的数量除以对内容的请求的数量或者内容的发送的数量(或者对于观看率,该值的倒数)。如图所示,在许多实施方式中,对于附加观众成员,可以重复步骤412至422,并且可以对应地更新测得率。
在步骤418中,可以确定注意差距,该注意差距等于向非评估小组观众呈现测试内容项的测得跳过率减去针对测试内容项从评估小组获得的预期跳过率(或者测得观看率减去预期观看率)。
在步骤420中,可以向观众成员示出或者呈现主题内容。如上文讨论的,可以在来自呈现测试内容项的预定时间窗口内将主题内容项提供给观众成员,以确保计算得到的注意差距的准确性。可以直接提供主题项,或者观众成员的客户端装置可以请求用于显示的主题内容项。
客户端装置可以呈现主题内容项,并且用户可以与内容进行否定地交互,明确地与内容进行肯定地交互,隐含地与内容进行肯定地交互(例如,通过全面地观看内容),或者从内容项中脱身(例如,分心、离开房间等)。如果用户明确地与内容交互,则在步骤422中,观众测量服务器可以接收显式指示符的标识(例如,跳过、不喜欢、喜欢等)。可以记录显式或者隐式指示符或者将其与主题内容项的其它指示符聚合,诸如,对表示观众人口的大小的数量和表示跳过或者非跳过的数量(例如,用于确定跳过率或者观看率)的数量进行增量。如上文讨论的,在一些实施方式中,对于附加观众成员,可以重复步骤412至422。在又一实施方式中,可以在步骤424和/或步骤426至430之前或者之后迭代地重复执行步骤412至422。因此,在一些实施方式中,可以针对主题内容项的每次呈现重新计算注意率;而在其它实施方式中,可以在确定注意率之前采集和聚合一定量的测量数据。
在步骤424中,可以基于主题内容项的测得跳过率加上通过测试内容项确定的计算得到的注意差距来确定注意率。注意率可以表示完整地观看了内容并且参与了内容并且不分心或者缺席的用户的百分比。
如上文讨论的,在一些实施方式中,可以基于注意率来调整内容分配者向付费内容(例如,主题内容项)的提供者收取的费率。因此,在步骤426中,在一些实施方式中,测量系统可以确定注意率是否小于合同中的指定最小注意率或者以其它方式与内容项相关联。如果注意率不小于合同中的指定最小注意率,则在一些实施方式中,在步骤428中,内容提供者可以收取合同费率。如果注意率小于合同中的指定最小注意率,则在步骤430中,可以将合同费率减小预定量或者与注意差距对应的百分比。在其它实施方式中,基于注意率,内容提供者或者经销商基于高于预定阈值的注意率可以选择主题项以供更广泛的分配或者可以选择用户可能会感兴趣的其它内容。例如,响应于高注意率,内容分配系统可以基于观众将继续参与内容的高可能性来提供与所述主题内容相关的其它内容用于自动呈现。
因此,通过以充分参与的小组成员的已知跳过率将评估小组测试的和测得的内容显示给具有未知参与度水平的观众,其注意率可以由在预期跳过率与测得跳过率之间的差距的标识确定。可以使用该注意率来调整其它内容的跳过率或者观看率的测量,从而使系统能够将在不跳过内容的情况下消费了内容的用户与在内容呈现期间分心或者不存在的用户区分开。
在一个实施方式中,本公开描述了一种估计用户对由客户端装置呈现的内容的注意的方法。该方法包括:由观众测量系统向多个客户端装置中的每一个客户端装置发送第一内容项。该方法还包括:由观众测量系统从多个客户端装置的第一子集中的每一个客户端装置接收第一内容项的第一跳过指示符,多个客户端装置的第一子集小于多个客户端装置。该方法进一步包括:由观众测量系统基于多个客户端装置的第一子集中的数量与多个客户端装置中的数量的比率来确定第一内容项的第一跳过率。该方法还包括:由观众测量系统向多个客户端装置中的每一个客户端装置发送第二内容项,该第二内容项与通过评估小组研究获得的测得跳过率相关联。该方法还包括:由观众测量系统从多个客户端装置的第二子集中的每一个客户端装置接收第二内容项的第二跳过指示符,多个客户端装置的第二子集小于多个客户端装置。该方法进一步包括:由观众测量系统基于多个客户端装置的第二子集中的数量与多个客户端装置中的数量的比率来确定第二内容项的第二跳过率。该方法还包括:由观众测量系统确定在第二跳过率与测得跳过率之间的比率差。该方法还包括:由观众测量系统基于比率差和第一跳过率来计算第一内容项的注意率,该注意率指示多个用户正在对应的客户端装置上观看第一内容项;并且由观众测量系统向由观众测量系统维护的数据库添加条目,该条目标识第三内容项和对应的注意率。
在一些实施方式中,该方法包括:由观众测量系统标识共享共同特性的客户端装置的群体的第一子集;并且由观众测量系统选择与该第一子集对应的多个装置。例如,多个装置可以包括与一组小组成员共享共同的人口或者兴趣特性的用户的装置。
在其它实施方式中,该方法包括:由观众测量系统向多个客户端装置中的每一个客户端装置发送第三内容项,该第三内容项与从第二评估小组研究获得的第二测得跳过率相关联,该第二测得跳过率小于测得跳过率。该方法还包括:由观众测量系统从多个客户端装置的第三子集中的每一个客户端装置接收第三内容项的第三跳过指示符,多个客户端装置的第三子集小于多个客户端装置。该方法进一步包括:由观众测量系统基于多个客户端装置的第二子集中的数量除以多个客户端装置中的数量来确定第二内容项的第三跳过率。该方法还包括:由观众测量系统确定在第三跳过率与第二测得跳过率之间的第二比率差。在一些这种实施方式中,计算注意率包括:基于第二比率差来计算注意率。在又一实施方式中,该方法包括:通过将在第一跳过率与所述差之间的第一差和在第一跳过率与第二差之间的第二差相加来计算注意率。
在一些实施方式中,该方法包括:确定多个客户端装置的装置类型是移动装置;并且基于确定装置类型是移动装置将注意率减小调整率。例如,在一些这种实施方式中,系统可以假设移动装置的用户比例如消费了智能电视上的内容的个体更容易脱身。这种装置类型专用的修饰符可以应用于注意率计算。
在一些实施方式中,该方法包括:由观众测量系统确定自动播放了第一内容项;并且基于确定自动播放了第一内容项来计算注意率。例如,即使用户已经离开了房间,某些系统也会自动排列附加内容用于呈现。测量系统可以确定是否手动请求或者自动请求了内容项的呈现,并且可以响应于自动请求了内容的确定而将注意率计算减小预定量或者因子。在其它实施方式中,该方法包括:由观众测量系统确定第一内容项是与主要内容相关联的前置内容项还是间隙内容项;并且基于确定第一内容项是前置内容项还是间隙内容项来计算注意率。
在一些实施方式中,该方法包括:由观众测量系统基于从数据库检索到的注意率来为第一内容项生成注意率报告。该方法还包括:由观众测量系统确定第一内容项的注意率大于阈值注意率;并且响应于确定注意率大于阈值注意率,由观众测量系统向第二多个客户端装置中的每一个客户端装置发送第一内容项。
在一些实施方式中,该方法包括:由观众测量系统基于注意率,为与第一内容项相关联的内容提供者生成发货单;并且由观众测量系统向内容提供者发送第一内容项的发货单。在又一实施方式中,该方法包括:由观众测量系统基于注意率来计算内容提供者的发货单上的每呈现率的折扣。
在一些实施方式中,该方法包括:由观众测量系统向多个客户端装置中的每一个客户端装置发送具有第一持续时间的第四内容项;由观众测量系统从多个客户端装置的第四子集中的每一个客户端装置接收客户端装置的用户选择跳过第四内容项的一部分的指示;由观众测量系统基于在第四子集的大小与多个客户端装置的大小之间的比率来确定第四内容项的第四跳过率;由观众测量系统向第五多个客户端装置中的每一个客户端装置发送具有与第一持续时间不同的第二持续时间的第五内容项;由观众测量系统从第二多个客户端装置的第五子集中的每一个客户端装置接收客户端装置的用户选择跳过第五内容项的一部分的指示;由观众测量系统基于在第五子集的大小与第五多个客户端装置的大小之间的比率来确定第五内容项的第五跳过率;由观众测量系统从第一持续时间的第四跳过率和第二持续时间的第五跳过率计算第三持续时间的外插跳过率;其中,计算第一内容项的注意率进一步基于第一多个客户端装置的大小、第一子集的大小、以及外插跳过率。
C.经由时间参与外插的参与估计
在另一方面中,观众测量系统可以基于不同持续时间的相似或者相同内容来利用时间参与曲线。这允许参与测量或者注意,而不需要使用评估小组来确定测试内容项的基线或者预期率。
图5A和图5B是图示了根据一个实施方式的通过使用时间参与外插来估计观众参与度的图。参照图5A,图示出了一个或者多个观众成员针对相关内容项在内容持续时间502上的聚合跳过率500。内容可以是相关的,但是具有不同的持续时间,诸如,在相同内容类别中的15秒内容项和30秒内容项。在另一实施方式中,可以重复较短内容以填充较长的持续时间。
可以将多个持续时间的相关内容提供给多个客户端装置以便向用户显示,并且针对每个持续时间标识跳过率或者相似的否定交互率(510)。如图所示,少量的用户可能会跳过非常短的内容,而大量的用户可能会跳过较长的内容。可以假设,如果内容项具有无限的持续时间,则注意内容呈现的每个用户最终将选择跳过或者终止呈现,并且因此,利用100%的观众参与度或者兴趣,对于无限的持续时间内容,最终将存在对应的100%的跳过率。因此,在理论上的100%的跳过率与可以从较短持续时间的内容的跳过率外插的跳过率之间的任何差表示注意差距520,或者未参与或者不存在的用户的百分比。
如图所示,可以基于多个测得样本510或者不同的预定持续时间的相关内容的跳过率来确定最佳拟合曲线512或者函数。针对与曲线514相似的无限持续时间的内容可以外推出曲线512,使得可以计算注意差距520。现在参照图5B,计算得到的差距520然后可以应用于较早的测量510,以估计在每个持续时间针对每个内容呈现的参与的感兴趣的用户的百分比(530)。如上文所讨论的,可以基于估计的注意率530而不是测得但夸大的观看率来调整合同分配计费或者内容选择算法。
图6是根据一个实施方式的用于通过使用时间参与外插来估计观众参与度的方法600的实施方式的流程图。
在步骤604中,可以向多个客户端装置提供第一长度的内容项。如上文讨论的,提供内容项可以包括:从每个客户端装置接收对内容项的请求,选择内容项,并且将内容项或者内容项的统一资源定位符发送至客户端装置。测量服务器还可以接收否定偏好或者内容项跳过的指示,并且可以在步骤606中基于接收到的否定偏好指示的数量与在该持续时间中接收内容的客户端装置的数量的比率来测量或者确定持续时间特定的跳过率。
在步骤608中,在一些实施方式中,测量服务器可以确定在两个连续的持续时间特定的跳过率(例如,跳过率t和跳过率t-1)之间的差是否小于预定阈值。例如,测量服务器可以确定两个连续的测量值之间的斜率是否接近平坦或者在预定的斜率阈值内。这可能表明参与内容并且将在当前持续时间按下跳过的所有用户也在先前持续时间参与内容并且将按下跳过。
如果差不低于阈值(例如,如果测量之间的斜率太陡),则在步骤610中,可以选择另一持续时间,并且可以在重复步骤604至610中将相关的内容项呈现给多个观众成员。这可以迭代地重复,直到在步骤608中连续的跳过率测量之间的差小于阈值为止,或者因此当在两个连续的跳过率测量之间的最佳拟合曲线接近水平时。
在步骤612中,测量系统的外推器可以基于跳过率的最佳拟合曲线的外插,或者等于t接近100%的无限大时的极限减去在各种时间t处测得的跳过率,来计算用于内容项呈现的注意差距,。
在一些实施方式中,测量系统可以将注意差距与内容项相关联。在许多实施方式中,关联性可以具有预定有效期,使得可以周期性地丢弃或者更新注意差距,附加组客户端装置在每个持续时间接收内容。
在一些实施方式中,如图5B所示,注意差距可以应用于为确定注意差距而进行的测量。在这种实施方式中,在步骤614中,观众测量系统可以在不跳过内容或者以其它方式与内容进行否定地交互的情况下(例如,从内容的观众测量数据库)检索内容项的多个视图或者所述持续时间的内容项的观看率。在步骤616中,可以将所确定的注意差距应用于检索到的值或者观看率,与在内容呈现之前或者内容呈现期间脱身的观众成员的比率相比,导致更准确的参与和观看率。
如上文讨论的,在一些实施方式中,可以基于注意率来调整内容分配者向付费内容(例如,主题内容项)的提供者收取的费率。因此,在步骤618中,在一些实施方式中,测量系统可以确定注意率是否小于合同中的指定最小注意率或者与内容项相关联。如果注意率不小于合同中的指定最小注意率,则在一些实施方式中,在620中,内容提供者可以收取合同费率。如果注意率小于合同中的指定最小注意率,则在步骤622中,可以将合同费率减小预定量或者与注意差距对应的百分比。在其它实施方式中,基于注意率,内容提供者或者分配者基于高于预定阈值的注意率,可以选择主题项以供更广泛的分布或者可以选择用户可能会感兴趣的其它内容。例如,响应于高注意率,内容分配系统可以基于观众将继续参与内容的高可能性来提供与主题内容相关的其它内容用于自动呈现。
因此,通过将以不同持续时间的相关内容的跳过率外插至无限长度的内容的理论跳过率,测量系统可以基于理论跳过率与100%之间的差来确定观众成员未参与内容的注意差距或者注意率。然后可以通过将每个持续时间的项的测得跳过率减小注意差距来确定注意率,从而使系统能够将在不跳过的情况下消费了内容的用户与在内容呈现期间分心或者不存在的用户区分开,而不需要测试内容或者付费评估小组。
在一个实施方式中,本公开描述了一种估计用户对由客户端装置呈现的内容的注意的方法。该方法包括:由观众测量系统向多个客户端装置中的每一个客户端装置发送具有第一持续时间的第一内容项。该方法还包括:由观众测量系统从多个客户端装置的第一子集中的每一个客户端装置接收客户端装置的用户选择跳过第一内容项的一部分的指示。该方法进一步包括:由观众测量系统基于在第一子集的大小与多个客户端装置的大小之间的比率来确定第一内容项的第一跳过率。该方法还包括:由观众测量系统向第二多个客户端装置中的每一个客户端装置发送具有与第一持续时间不同的第二持续时间的第二内容项,该第二内容项与第一内容项相关。该方法还包括:由观众测量系统从第二多个客户端装置的第二子集中的每一个客户端装置接收客户端装置的用户选择跳过第二内容项的一部分的指示。该方法还包括:由观众测量系统基于在第二子集的大小与第二多个客户端装置的大小之间的比率来确定第二内容项的第二跳过率。
该方法进一步包括:由观众测量系统从第一持续时间的第一跳过率和第二持续时间的第二跳过率计算第三持续时间的外插跳过率。该方法还包括:由观众测量系统向第三多个客户端装置中的每一个客户端装置发送第三内容项。该方法进一步包括:由观众测量系统从第三多个客户端装置的第三子集中的每一个客户端装置接收客户端装置的用户选择跳过第三内容项的一部分的指示。该方法还包括:由观众测量系统基于第三多个客户端装置的大小、第三子集的大小、以及外插跳过率来确定第三内容项的注意率;并且由观众测量系统向由观众测量系统维护的数据库添加条目,该条目标识第三内容项和对应的注意率。
在该方法的一些实施方式中,确定注意率进一步包括:通过从第三多个客户端装置的大小和所述第三子集的大小之差减去所述第三多个客户端装置的大小除以外插跳过率来计算注意率。在方法的许多但并非所有实施方式中,第三持续时间是无限的持续时间。在其它实施方式中,计算外插跳过率进一步包括:计算第三持续时间的外插跳过率,第三持续时间大于第一持续时间和第二持续时间中的每一个。
在一些实施方式中,计算注意率进一步包括:确定多个客户端装置的装置类型是移动装置;并且基于确定装置类型是移动装置将注意率减小调整率。在其它实施方式中,该方法包括:由观众测量系统确定自动播放了第三内容项;并且基于确定自动播放了第三内容项来计算注意率。
在一些实施方式中,该方法包括:由观众测量系统确定第三内容项是与主要内容相关联的前置内容项还是间隙内容项;并且基于确定第三内容项是前置内容项还是间隙内容项来计算注意率。
在其它实施方式中,该方法包括:由观众测量系统基于从数据库检索到的注意率来为第三内容项生成注意率报告。在又一实施方式中,该方法还包括:由观众测量系统确定第三内容项的注意率大于阈值注意率;并且响应于确定注意率大于阈值注意率,由观众测量系统向第二多个客户端装置中的每一个客户端装置发送第三内容项。
在再一实施方式中,该方法包括:由观众测量系统基于注意率为与第三内容项相关联的内容提供者生成发货单;并且由观众测量系统向内容提供者发送第三内容项的发货单。在又一实施方式中,该方法包括:由观众测量系统基于注意率来计算内容提供者的发货单上的每呈现率的折扣。
如上文所讨论的,在许多这种实施方式中,所采集的数据可以是匿名的或者消除歧义的,以保护隐私,特别是对于不是评估小组参与者的个体。在许多这种实施方式中或者可以针对测量采集有关客户端装置的用户的个人信息或者可以使用该个人信息来选择第三方内容的类似情况下,可以为用户提供如下机会:控制可能采集个人信息(例如,有关用户的社交网络、社交动作或者活动、用户的偏好、或者用户的当前位置的信息)的程序或者特性是否可以采集个人信息,或者控制是否或者如何将测量数据发送至观众测量服务器和/或评估小组提供者。另外,在通过观众测量服务器存储或者使用特定数据之前,可以按照一种或者多种方式来处理该特定数据,从而使得可以在生成参数(例如,人口统计参数)时去除个人身份信息。用户的身份可以是匿名的,从而使得无法确定用户的个人身份信息,或者在获得位置信息的情况下,可以将用户的地理位置一般化(诸如,到城市、邮政编码、或者州县等级),从而使得无法确定用户的特定位置。因此,用户可以控制如何采集关于该用户的信息,以及观众测量服务器、评估小组提供者、以及内容提供者如何使用该信息。
可以在数字电子电路系统、或者在计算机软件、固件、或者硬件、包括在本说明书中所公开的结构及其结构等效物、或者它们中的一个或者多个的组合中实施本说明书中所描述的主题和操作的实施方式。可以将本说明书中描述的主题的实施方式实施为一个或者多个计算机程序,即,编码在一种或者多种计算机存储介质上、由数据处理设备执行或者控制该数据处理设备的操作的计算机程序指令的一个或者多个模块。可替代地或者另外,程序指令可以编码在人工生成的传播信号上,例如,机器生成的电气、光学、或者电磁信号,生成该信号是为了对信息进行编码用于发送至合适的接收器设备供数据处理设备执行。计算机存储介质可以是计算机可读存储装置、计算机可读存储基板、随机或者串行存取存储器阵列或者装置、或者它们中的一个或者多个的组合,或者包括在其中。此外,尽管计算机存储介质不是传播信号,计算机存储介质可以是编码在人工生成的传播信号中的计算机程序指令的源或者目的地。计算机存储介质也可以是一个或者多个单独的部件或者介质(例如,多个CD、磁盘、或者其它存储装置),或者包括在其中。因此,计算机存储介质可以是有形的。
可以将本说明书中描述的操作实施为由数据处理设备对存储在一个或者多个计算机可读存储装置上的或者从其它源接收到的数据执行的操作。
术语“客户端”或者“服务器”包括用于处理数据的所有种类的设备、装置、和机器,诸如,可编程处理器、计算机、片上系统、或者前述中的多种或者组合。设备可以包括专用逻辑电路系统,例如,FPGA(现场可编程门阵列)或者ASIC(专用集成电路)。除了硬件之外,设备还可以包括为探讨中的计算机程序创建执行环境的代码,例如,构成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行时间环境、虚拟机、或者它们中的一个或者多个的组合的代码。设备和执行环境可以实现各种不同的计算模型基础设施,诸如,web服务、分布式计算和网格计算基础设施。
可以用任何形式的编程语言包括编译语言或者解译语言、陈述性语言或者程序语言来编写计算机程序(也称为程序、软件、软件应用、脚本或者代码),并且可以按照任何形式来部署计算机程序,包括作为独立式程序或者模块、部件、子例程、对象、或者适合用于计算环境的其它单元。计算机程序可以但并非必须与文件系统中的文件对应。可以将程序存储在保持其它程序或者数据(例如,存储在标记语言文档中的一个或者多个脚本)的文件的一部分中,或者存储在专用于所探讨中的程序的单个文件中,或者存储在多个协作文件(例如,存储一个或者多个模块、子程序、或者部分代码的文件)中。可以将计算机程序部署为在一个计算机上执行或者在位于一个站点处或者分布在多个站点中并且通过通信网络互相连接的多个计算机上执行。
可以通过一个或者多个可编程处理器来执行本说明书中所描述的过程和逻辑流程,该一个或者多个可编程处理器执行一个或者多个计算机程序以通过操作输入数据并且生成输出来执行动作。也可以通过专用逻辑电路系统(例如,FPGA(现场可编程门阵列)或者ASIC(专用集成电路))来执行过程和逻辑流程,并且也可以将设备实施为FPGA或者ASIC。
适合于执行计算机程序的处理器包括通用微处理器和专用微处理器两者、以及任何种类的数字计算机的任何一个或者多个处理器。一般而言,处理器将从只读存储器或者随机存取存储器或者两者接收指令和数据。计算机的关键元件是:用于根据指令来执行动作的处理器、和用于存储指令和数据的一个或者多个存储器装置。一般而言,计算机还将包括用于存储数据的一个或者多个海量存储装置(例如,磁盘、磁光盘、或者光盘),或者计算机可以操作地耦合以接收来自该海量存储装置的数据或者将数据传输至该海量存储装置或者两者。然而,计算机无需具有这种装置。此外,计算机可以嵌入在另一装置中,例如,移动电话、个人数字助理(PDA)、移动音频或者视频播放器、游戏机、全球定位系统(GPS)接收器、或者便携式存储装置(例如,通用串行总线(USB)闪存驱动),仅举几例。适合于存储计算机程序指令和数据的装置包括所有形式的非易失性存储器、介质和存储器装置,包括:半导体存储器装置,例如,EPROM、EEPROM、和闪速存储器装置;磁盘,例如,内部硬盘或者可移动盘;磁光盘;以及CD-ROM盘和DVD-ROM盘。处理器和存储器可以由专用逻辑电路系统补充或者可以并入该专用逻辑电路系统中。
为了提供与用户的交互,可以在具有用于向用户显示信息的显示装置例如,CRT(阴极射线管)、LCD(液晶显示器)、OLED(有机发光二极管)、TFT(薄膜晶体管)、等离子体、其它柔性配置、或者任何其它监视器以及用户可以通过这些装置来将输入提供给计算机的键盘、指向装置(例如,鼠标、轨迹球等)、或者触摸屏幕、触摸板等的计算机上实施本说明书中描述的主题的实施方式。其它种类的装置还可以用于提供与用户的交互;提供给用户的反馈可以是任何形式的感觉反馈,例如,视觉反馈、听觉反馈或者触觉反馈;并且可以用任何形式来接收来自用户的输入,包括声输入、语音输入或者触觉输入。此外,计算机可以通过将文档发送至用户所使用的装置并且接收来自该装置的文档,通过响应于从web浏览器接收到的请求来将网页发送至在用户的用户装置上的web浏览器,来与用户互动。
可以将在本说明书中描述的主题的实施方式实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者web浏览器的客户端计算机,用户可以通过该图形用户界面或者该web浏览器来与本说明书中描述的主题的实施方式执行交互)、或者包括一个或者多个这种后端部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信例如通信网络来将系统的部件相互连接。通信网络可以包括:局域网(“LAN”)和广域网(“WAN”)、网际网(例如,互联网)、以及点对点网络(例如,ad hoc点对点网络)。
可以在智能电视模块(或者联网的电视模块、混合电视模块等)上实施本文所公开的特征,该智能电视模块可以包括被配置成将互联网连接性与更传统的电视节目源(例如,经由电缆、卫星、无线、或者其它信号接收到的)集成的处理电路。可以物理地将智能电视模块包含到电视机中,或者智能电视模块可以包括单独的装置,诸如,机顶盒、蓝光或者其它数字媒体播放器、游戏机、酒店电视系统、和其它配套装置。智能电视模块可以被配置成允许观看者搜索和查找在web上、在本地有线电视频道上、在卫星电视频道上、或者存储在本地硬盘驱动器上的视频、电影、照片和其它内容。机顶盒(STB)或者机顶单元(STU)可以包括信息应用装置,该信息应用装置可以包含调谐器并且连接至电视机和外部信号源,将信号转换成内容,然后该内容显示在电视屏幕或者其它显示装置上。智能电视模块可以被配置成提供包括诸如web浏览器和多种流媒体服务、联网的电缆或者卫星媒体源、其它网络“信道”等的多个不同应用的图标的主屏幕或者顶级屏幕。智能电视模块可以进一步被配置成向用户提供电子节目指南。智能电视模块的配套应用可以在移动计算装置上操作以向用户提供有关可用节目的附加信息,以允许用户控制智能电视模块等。在替代实施方式中,可以在膝上型计算机或者其它个人计算机、智能电话、其它移动电话、手持式计算机、平板PC、或者其它计算装置上实施所述特征。
虽然本说明书包含了许多具体实施细节,但是不应该将这些细节视为对任何发明或者可能被要求的内容的范围的限制,而是作为针对特定发明的特定实施方式的特征的描述。在本说明书中在单独实施方式的背景下描述的某些特征还可以组合地实施在单个实施方式中。相反,在单个实施方式的背景下描述的各种特征也可以单独地或者按照任何合适的子组合实施在多个实施方式中。此外,虽然上文可能将特征描述为以某些组合来起作用并且最初甚至同样地对该特征进行了要求,但是在一些情况下可以从组合中删除来自要求保护的组合的一个或者多个特征,并且要求保护的组合可以指向子组合或者子组合的变化。
同样,虽然在附图中按照特定顺序示出了操作,但是不应该将其理解为需要按照所示的特定顺序或者按照相继的顺序来进行这种操作,或者需要进行所有图示的操作以实现期望的结果。在某些情况下,多任务处理和并行处理可以是有利的。此外,不应该将在上述实施方式中的各种系统部件的分离理解为在所有实施方式中需要这种分离,并且应该理解,所描述的程序部件和系统通常可以一起集成在单个软件产品中或者封装到多个软件产品中。
由此,已经对本主题的特定实施方式进行了描述。其它实施方式在以下权利要求书的范围内。在某些情况下,在权利要求书中叙述的动作可以按照不同的顺序来进行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定需要所示的特定顺序或者相继顺序,以实现期望的结果。在某些实施方式中,多任务处理和并行处理可以是有利的。

Claims (9)

1.一种估计对由客户端装置呈现的内容的用户注意的方法,包括:
由观众测量系统向多个客户端装置中的每一个发送具有第一持续时间的第一内容项;
由所述观众测量系统从所述多个客户端装置的第一子集中的每一个客户端装置接收所述客户端装置的用户选择跳过所述第一内容项的一部分的指示;
由所述观众测量系统基于在所述第一子集的大小与所述多个客户端装置的大小之间的比率来确定所述第一内容项的第一跳过率;
由所述观众测量系统向第二多个客户端装置中的每一个客户端装置发送具有与所述第一持续时间不同的第二持续时间的第二内容项;
由所述观众测量系统从所述第二多个客户端装置的第二子集中的每一个客户端装置接收所述客户端装置的用户选择跳过所述第二内容项的一部分的指示;
由所述观众测量系统基于在所述第二子集的大小与所述第二多个客户端装置的大小之间的比率来确定所述第二内容项的第二跳过率;
由所述观众测量系统从所述第一持续时间的所述第一跳过率和所述第二持续时间的第二跳过率计算第三持续时间的外插跳过率;
由所述观众测量系统向第三多个客户端装置中的每一个客户端装置发送第三内容项;
由所述观众测量系统从所述第三多个客户端装置的第三子集中的每一个客户端装置接收所述客户端装置的用户选择跳过所述第三内容项的一部分的指示;
由所述观众测量系统基于所述第三多个客户端装置的大小、所述第三子集的大小、以及所述外插跳过率来确定所述第三内容项的注意率;以及
由所述观众测量系统向由所述观众测量系统维护的数据库添加条目,所述条目标识所述第三内容项和对应的注意率,
其中,确定所述注意率进一步包括:通过从所述第三多个客户端装置的大小和所述第三子集的大小之差减去所述第三多个客户端装置的大小除以所述外插跳过率来计算所述注意率。
2.根据权利要求1所述的方法,其中,所述第三持续时间是无限持续时间。
3.根据权利要求1或者2所述的方法,其中,计算所述外插跳过率进一步包括:计算所述第三持续时间的所述外插跳过率,所述第三持续时间大于所述第一持续时间和所述第二持续时间中的每一个。
4.根据权利要求1或者2所述的方法,还包括:
由所述观众测量系统向所述多个客户端装置中的每一个客户端装置发送第四内容项,所述第四内容项与从评估小组研究获得的测得跳过率相关联;
由所述观众测量系统从所述多个客户端装置的第四子集中的每一个客户端装置接收所述第四内容项的跳过指示符,所述多个客户端装置的所述第四子集小于所述多个客户端装置;
由所述观众测量系统基于所述多个客户端装置的所述第四子集中的数量与所述多个客户端装置的数量的比率来确定所述第四内容项的第四跳过率;
由所述观众测量系统确定在所述第四跳过率与所述测得跳过率之间的比率差;
其中,由所述观众测量系统确定所述第三内容项的注意率进一步基于所述比率差和所述第一跳过率,所述注意率指示多个用户正在对应的客户端装置上观看所述第三内容项。
5.一种估计对由客户端装置呈现的内容的用户注意的方法,包括:
由观众测量系统向多个客户端装置中的每一个客户端装置发送第三内容项;
由所述观众测量系统从所述多个客户端装置的第一子集中的每一个客户端装置接收所述第三内容项的第一跳过指示符,所述多个客户端装置的所述第一子集小于所述多个客户端装置;
由所述观众测量系统基于所述多个客户端装置的所述第一子集中的数量与所述多个客户端装置的数量的比率来确定所述第三内容项的第一跳过率;
由所述观众测量系统向所述多个客户端装置中的每一个客户端装置发送第二内容项,所述第二内容项与从评估小组研究获得的测得跳过率相关联;
由所述观众测量系统从所述多个客户端装置的第二子集中的每一个客户端装置接收所述第二内容项的第二跳过指示符,所述多个客户端装置的所述第二子集小于所述多个客户端装置;
由所述观众测量系统基于所述多个客户端装置的所述第二子集中的数量与所述多个客户端装置的数量的比率来确定所述第二内容项的第二跳过率;
由所述观众测量系统确定在所述第二跳过率与所述测得跳过率之间的比率差;
由所述观众测量系统基于所述比率差和所述第一跳过率来计算所述第三内容项的注意率,所述注意率指示多个用户正在对应的客户端装置上观看所述第三内容项;以及
由所述观众测量系统向由所述观众测量系统维护的数据库添加条目,所述条目标识所述第三内容项和对应的注意率,
其中,计算所述注意率进一步包括:
确定所述多个客户端装置的装置类型是移动装置;以及
基于确定所述装置类型是所述移动装置将所述注意率减小调整率。
6.根据权利要求5所述的方法,进一步包括:
由所述观众测量系统确定自动播放了所述第三内容项;以及
其中,计算所述注意率进一步包括:基于确定自动播放了所述第三内容项来计算所述注意率。
7.根据权利要求5所述的方法,进一步包括:
由所述观众测量系统确定所述第三内容项是与主要内容相关联的前置内容项还是间隙内容项;以及
其中,计算所述注意率进一步包括:基于确定所述第三内容项是所述前置内容项还是所述间隙内容项来计算所述注意率。
8.根据权利要求5所述的方法,进一步包括:
由所述观众测量系统基于从所述数据库检索到的所述注意率来为所述第三内容项生成注意率报告。
9.根据权利要求5所述的方法,进一步包括:
由所述观众测量系统确定所述第三内容项的所述注意率大于阈值注意率;以及
响应于确定所述注意率大于所述阈值注意率,由所述观众测量系统向第二多个客户端装置中的每一个客户端装置发送所述第三内容项。
CN201680034538.1A 2015-12-14 2016-11-04 用于估计用户注意的系统和方法 Active CN107710261B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110678008.3A CN113596525B (zh) 2015-12-14 2016-11-04 用于估计用户注意的系统和方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562267081P 2015-12-14 2015-12-14
US62/267,081 2015-12-14
US15/015,972 2016-02-04
US15/015,972 US10405045B2 (en) 2015-12-14 2016-02-04 Systems and methods for estimating user attention
PCT/US2016/060669 WO2017105667A1 (en) 2015-12-14 2016-11-04 Systems and methods for estimating user attention

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110678008.3A Division CN113596525B (zh) 2015-12-14 2016-11-04 用于估计用户注意的系统和方法

Publications (2)

Publication Number Publication Date
CN107710261A CN107710261A (zh) 2018-02-16
CN107710261B true CN107710261B (zh) 2021-06-29

Family

ID=59020493

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201680034538.1A Active CN107710261B (zh) 2015-12-14 2016-11-04 用于估计用户注意的系统和方法
CN202110678008.3A Active CN113596525B (zh) 2015-12-14 2016-11-04 用于估计用户注意的系统和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110678008.3A Active CN113596525B (zh) 2015-12-14 2016-11-04 用于估计用户注意的系统和方法

Country Status (7)

Country Link
US (2) US10405045B2 (zh)
EP (1) EP3295415A1 (zh)
JP (1) JP6615339B2 (zh)
CN (2) CN107710261B (zh)
DE (1) DE112016002225T5 (zh)
GB (1) GB2555545A (zh)
WO (1) WO2017105667A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190012681A1 (en) * 2017-07-10 2019-01-10 Facebook, Inc. Determining viewability of content items displayed on client devices based on user interactions
US11532007B2 (en) * 2018-08-16 2022-12-20 Frank S. Maggio Systems and methods for implementing user-responsive reactive advertising via voice interactive input/output devices
US10560539B1 (en) * 2018-09-20 2020-02-11 Sap Se Automatic script code coverage measurements for software scripts
US11310296B2 (en) * 2018-11-06 2022-04-19 International Business Machines Corporation Cognitive content multicasting based on user attentiveness
GB2579613A (en) * 2018-12-06 2020-07-01 Sony Interactive Entertainment Inc Method and apparatus for determining user engagement in a videogame
US11625311B2 (en) * 2019-06-17 2023-04-11 Beseeq User interaction for determining attention
US11698827B2 (en) 2020-02-19 2023-07-11 Quantum Metric, Inc. Proactive learning of network software problems
KR102318660B1 (ko) * 2020-02-28 2021-10-28 (주)재플 방송 수신 장치와 그의 동영상 재핑 광고 제공 방법 및 동영상 재핑 광고 제공 시스템
CN112315456B (zh) * 2020-10-07 2022-02-11 南京理工大学 基于跳接注意力机制的人体动作预测方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102770861A (zh) * 2010-12-13 2012-11-07 英特尔公司 数据突出和提取
US8763020B2 (en) * 2008-10-14 2014-06-24 Cisco Technology, Inc. Determining user attention level during video presentation by monitoring user inputs at user premises
CN104217008A (zh) * 2014-09-17 2014-12-17 中国科学院自动化研究所 互联网人物视频交互式标注方法及系统

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7055165B2 (en) * 2001-06-15 2006-05-30 Intel Corporation Method and apparatus for periodically delivering an optimal batch broadcast schedule based on distributed client feedback
US7043746B2 (en) * 2003-01-06 2006-05-09 Matsushita Electric Industrial Co., Ltd. System and method for re-assuring delivery of television advertisements non-intrusively in real-time broadcast and time shift recording
US8613024B2 (en) * 2005-12-13 2013-12-17 United Video Properties, Inc. Cross-platform predictive popularity ratings for use in interactive television applications
US20080066107A1 (en) * 2006-09-12 2008-03-13 Google Inc. Using Viewing Signals in Targeted Video Advertising
EP2332110A4 (en) * 2008-09-04 2013-11-13 Beezag Inc CONFIRMATION OF VISUALIZATION OF MULTIMEDIA CONTENT
US20110185382A2 (en) * 2008-10-07 2011-07-28 Google Inc. Generating reach and frequency data for television advertisements
US8209715B2 (en) * 2008-11-14 2012-06-26 Google Inc. Video play through rates
WO2011068575A1 (en) 2009-08-19 2011-06-09 (N)Torus Technologies On-line video entertainment and advertising system and method for using the same
US8468056B1 (en) * 2010-04-21 2013-06-18 Google Inc. Ad skip feature for characterizing advertisement effectiveness
JP2012039498A (ja) * 2010-08-10 2012-02-23 Kddi Corp コンテンツ視聴傾向分析システム、方法およびプログラム
JP2012186621A (ja) * 2011-03-04 2012-09-27 Sony Corp 情報処理装置、情報処理方法およびプログラム
CN102630049B (zh) * 2011-12-31 2014-12-10 上海聚力传媒技术有限公司 一种用于确定用户关于在播视频的兴趣度的方法和设备
US10853826B2 (en) * 2012-02-07 2020-12-01 Yeast, LLC System and method for evaluating and optimizing media content
US9245280B2 (en) 2012-08-03 2016-01-26 Hulu, LLC Predictive video advertising effectiveness analysis
US10491694B2 (en) * 2013-03-15 2019-11-26 Oath Inc. Method and system for measuring user engagement using click/skip in content stream using a probability model
US9313294B2 (en) * 2013-08-12 2016-04-12 The Nielsen Company (Us), Llc Methods and apparatus to de-duplicate impression information
US10505833B2 (en) * 2014-05-15 2019-12-10 At&T Intellectual Property I, L.P. Predicting video engagement from wireless network measurements
US9848224B2 (en) * 2015-08-27 2017-12-19 The Nielsen Company(Us), Llc Methods and apparatus to estimate demographics of a household

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8763020B2 (en) * 2008-10-14 2014-06-24 Cisco Technology, Inc. Determining user attention level during video presentation by monitoring user inputs at user premises
CN102770861A (zh) * 2010-12-13 2012-11-07 英特尔公司 数据突出和提取
CN104217008A (zh) * 2014-09-17 2014-12-17 中国科学院自动化研究所 互联网人物视频交互式标注方法及系统

Also Published As

Publication number Publication date
EP3295415A1 (en) 2018-03-21
US20190387277A1 (en) 2019-12-19
JP6615339B2 (ja) 2019-12-04
CN113596525A (zh) 2021-11-02
GB2555545A (en) 2018-05-02
WO2017105667A1 (en) 2017-06-22
CN113596525B (zh) 2024-05-24
CN107710261A (zh) 2018-02-16
US20170171620A1 (en) 2017-06-15
JP2018531468A (ja) 2018-10-25
GB201721018D0 (en) 2018-01-31
US11089371B2 (en) 2021-08-10
DE112016002225T5 (de) 2018-04-26
US10405045B2 (en) 2019-09-03

Similar Documents

Publication Publication Date Title
CN107710261B (zh) 用于估计用户注意的系统和方法
AU2016238846B2 (en) Systems and methods for enhancing audience measurement data
US9438941B2 (en) Using second screen devices to augment media engagement metrics
JP2018531468A6 (ja) ユーザの注意を推定するためのシステムおよび方法
US9872069B1 (en) Goal-based video analytics
US9794641B2 (en) Video segment presentation tracking
US10028000B2 (en) Automatic rating optimization
US8286206B1 (en) Automatic rating optimization
US10430476B2 (en) Annotation of videos using aggregated user session data
CN114596110A (zh) 动态内容显示时间调整

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant