CN103460709A - 用于图像回放验证的方法 - Google Patents

用于图像回放验证的方法 Download PDF

Info

Publication number
CN103460709A
CN103460709A CN2012800154013A CN201280015401A CN103460709A CN 103460709 A CN103460709 A CN 103460709A CN 2012800154013 A CN2012800154013 A CN 2012800154013A CN 201280015401 A CN201280015401 A CN 201280015401A CN 103460709 A CN103460709 A CN 103460709A
Authority
CN
China
Prior art keywords
numeral
display
media content
playing
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012800154013A
Other languages
English (en)
Inventor
格雷格里·查尔斯·赫林
斯科特·拉塞尔·弗朗西斯
埃里克·卢克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN103460709A publication Critical patent/CN103460709A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2407—Monitoring of transmitted content, e.g. distribution time, number of downloads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41415—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance involving a public display, viewable by several users in a public space outside their home, e.g. movie theatre, information kiosk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

一种用于验证显示器上媒体内容的回放的处理包括：接收在显示器上播放的媒体内容的至少一部分的数字表示；将所接收的数字表示和安排在从中捕获数字表示的显示器上播放的媒体内容作比较；以及如果所接收的数字表示与相比较的媒体内容相匹配，则验证所接收数字表示的回放。该处理还可以包括征求显示器的观察者捕获在显示器上呈现的媒体内容的至少一部分的数字表示，并将所捕获的数字表示传送到公告位置。

Description

用于图像回放验证的方法
相关申请的交叉引用
本申请要求2011年3月30日递交的美国临时申请序列号61／469，416的递交日的权益，该申请通过全文引用合并于此。
技术领域
本发明一般地涉及媒体回放，更具体地，涉及一种用于通过图像回放验证(verification)来提供性能证明(proof of performance)的方法。
背景技术
在媒体回放环境例如零售广告环境中，对于商场内广告系统而言，目前使用验证系统来记录所有媒体回放事件。这些验证系统是复杂的，并进行操作以记录在回放屏幕上播放的所有媒体的时间和名称。例如，这样的系统使用回放设备中的传感器来监控播放的内容并记录回放结果。接着将这些记录通过通信链接发送到中央位置，以便分析和向广告商汇报。这个“性能证明”记录对于广告价值而言是重要的。然而，用来监控屏幕是否在正确操作以及记录屏幕上播放的内容、接着将该数据发送给中央位置的这种系统是昂贵的并且需要运行人员。需要一种方法，来确定屏幕是否正在播放正确的媒体，而无需移动记录或甚至记载记录的带宽成本。
发明内容
本发明的实施例通过提供一种用于图像回放验证的方法来解决现有技术的不足。
在本发明的一个实施例中，一种用于提供图像回放验证的方法包括：捕获在商场内视频屏幕／显示器上播放的媒体内容的至少一部分的数字表示，并将所捕获的数字表示传送到公告位置。所述方法还包括：使用所接收的数字表示中关于例如捕获数字图像的日期、时间及位置的信息，将所接收的数字表示与安排在捕获数字表示时在从中捕获数字表示的屏幕上播放的媒体内容中的图像相比较。如果比较结果相匹配，则将与所接收的数字表示相比较的媒体内容的回放验证为已播放。
在本发明的备选实施例中，所述方法包括：征求购物者捕获商场内视频屏幕上播放的媒体内容的数字图像，并针对将所捕获的数字图像传送到公告位置而对购物者提供补偿或奖励。
附图说明
考虑以下结合附图的详细描述，可以容易地理解本发明的教义，其中：
图1示出了可以应用本发明实施例的内容分发系统的高级框图；
图2示出了用于提供商场内广告的商场内广告网络的高级框图；
图3示出了根据本发明实施例的用于比较图像的方法的流程图；
图4示出了根据本发明的实施例在例如图1的内容分发系统中呈现媒体的屏幕的示例，其中用户可以捕获数字表示并向公告位置发送该数字表示；以及
图5示出了根据本发明实施例的用于图像回放验证的方法的流程图。
应理解，附图是为了示出本发明的构思，而不必是用于示出本发明的唯一可能配置。为了帮助理解，尽可能地使用相同的附图标记来表示附图中的相同元件。
具体实施方式
本发明有利地提供了一种用于图像回放验证的方法。尽管主要在商场内零售广告网络环境的背景中描述本发明，但是不应将本发明的具体实施例认为是限制本发明的范围。本领域技术人员将理解，且通过本发明的教义可获知，本发明的构思可以有利地应用于使用屏幕或显示器显示媒体内容的任何内容分发或通信网络，例如，视频点播系统等。
可以通过使用专用硬件以及能够执行软件的硬件结合合适的软件，来提供在附图中所示的各种元件的功能。这些功能当由处理器提供时，可以通过单个专用处理器、通过单个共用处理器或通过多个单独处理器(部分可以共用)来提供。此外，术语“处理器”或“控制器”的明确使用不应理解为专门地指能够执行软件的硬件，可以隐含包括但不限于：数字信号处理器(“DSP”)硬件、用于存储软件的只读存储器(“ROM”)、随机存取存储器(“RAM”)、及非易失性存储装置。此外，文中记载本发明的原理、方案和实施例及其具体示例的所有陈述意在包含其结构和功能等同物。此外，这种等同物意指既包括当前已知的等同物也包括将来开发的等同物(即，所开发的执行相同功能的任何元件，无论结构如何)。
因此，例如，本领域技术人员将理解，文中所呈现的框图表示体现本发明原理的示例性系统组件和／或电路的概念图。相似地，将理解，任何作业图、流程图、状态转换图、伪代码等表示实质上可以表现为计算机可读介质且因此由计算机或处理器执行的各种处理，而无论是否明确示出这样的计算机或处理器。
图1示出了可以应用本发明实施例的内容分发系统的高级框图。图1的内容分发系统100示例性地包括：至少一个服务器110；多个接收设备，例如，调谐／解码装置(示例性地，机顶盒(STB))1201-120n，和分别用于每个机顶盒1201-120n的显示器1301-130n；以及其它接收设备，例如音频输出设备(示例性地，扬声器系统)1351-135n。尽管在图1的系统100中，多个机顶盒1201-120n中的每个都示例性地连接到单个相应显示器，但是在本发明的备选实施例中，多个机顶盒1201-120n中的每个可以连接到多于一个显示器。此外，尽管在图1的内容分发系统100中，将调谐／解码装置示例性地描述为机顶盒120，但是在本发明的备选实施例中，本发明的调谐／解码装置可以包括备选调谐／解码装置，例如，集成在显示器130中的调谐／解码电路或其它独立的调谐／解码设备等。此外，本发明的接收设备可以包括能够接收内容如音频、视频和／或音频／视频内容的任何设备。
在本发明的一个实施例中，图1的内容分发系统100可以是商场内广告网络的一部分。例如，图2示出了用于提供商场内广告的商场内广告网络200的高级框图。在图2的广告网络200中，广告网络200和分发系统100使用软件和硬件的组合，在商场内提供对音乐录音、家庭视频、产品展示、广告内容及其它这种内容的目录、分发、呈现和使用追踪，以及娱乐内容、新闻及类似消费信息内容。内容可以包括以压缩或非压缩视频和音频流格式(例如，MPEG4／MPEG4Part10／AVC-H.264、VC-1、Windows Media等)呈现的内容，尽管本系统不应限于仅使用这些格式。
在本发明的一个实施例中，用于控制商场内广告网络200和内容分发系统100的各种元件的软件可以包括使用窗口环境的32位操作系统(例如，Ms-WindowsTM或X-Windows操作系统)和高性能计算硬件。广告网络200可以使用分布式架构，并且在一个实施例中通过卫星(或其它方法，例如，广域网(WAN)、因特网、系列微波链接或相似机制)和商场内模块，来提供集中内容管理和分布式控制。
如图2中所示，用于商场内广告网络200和内容分发系统100的内容可以从广告商202、录音公司204、电影工作室206、或其它内容供应方208来提供。广告商202可以是产品制造商、服务供应商、代表制造商或服务供应商的广告公司、或其他实体。来自广告商202的广告内容可以由视听内容(包括商业广告、“专题广告”、产品信息及产品展示等)构成。
录音公司204可以是记录标签、音乐发行方、许可／出版实体(例如，BMI或ASCAP)、单独艺术家、或音乐相关内容的其它这样的源。录音公司204提供视听内容，例如，音乐剪辑(所记录音乐的小片段)、音乐视频剪辑等。电影工作室206可以是电影工作室、影片生产公司、宣传方、或关于电影产业的其它源。电影工作室206可以提供电影剪辑、对男演员与女演员的预录采访、电影回顾、“幕后花絮”展现和类似内容。
其它内容供应方208可以是能够通过例如图1的内容分发系统100来分发和显示的视频、音频或视听内容的任何其它供应方。
在本发明的一个实施例中，通过网络管理中心210(NMC)使用例如传统记录介质(磁带、CD、视频等)来获得内容。将提供给NMC210的内容编制成适于向例如本地分发系统100分发的形式，本地分发系统100在本地地点处分发并显示内容。
NMC210可以数字化所接收内容，以数字化数据文件222的形式将其提供给网络操作中心(NOC)220。应注意，数据文件222尽管被称作数字化内容，但是也可以是流音频、流视频或其他这样的信息。NMC210编制和接收的内容可以包括商业广告、保险杆(bumpers)、图形、音频等。优选地对所有文件进行命名，以便可以进行唯一地识别。更具体地，NMC210产生分发包，所述分发包定向于特定地点，例如，商店位置，并基于安排或点播而被发送到一个或多个商店。分发包(如果使用的话)包括旨在代替或增强现场已存在的现有内容的内容(除非首次对该地点的系统进行初始化，在这种情况下，所传送的包将形成该地点的初始内容的基础)。备选地，可以分别压缩和发送文件，或者使用一些类型的流压缩程序。
在该示例中，NOC220通过通信网络225将数字化数据文件222传送到商业销售渠道230处的内容分发系统100。通信网络225可以实现为若干技术中的任何一种。例如，在本发明的一个实施例中，卫星链接可以用于向商业销售渠道230的内容分发系统100分发数字化数据文件222。通过向各个位置广播(多播)内容，这使得内容能够容易地分发。备选地，因特网可以既用于向商业销售渠道230分发视听内容，也用于允许从商业销售渠道230进行反馈。根据本发明的备选实施例，也可以使用实现通信网络225的其它方式，例如，使用租用线路、微波网络或其它这样的机制。
内容分发系统100的服务器110能够接收内容(例如，分发包)，并因此在商场内将其分发到各种接收设备，例如，机顶盒120和显示器130、以及扬声器系统135。也就是说，在内容分发系统100处，接收并配置内容，以便流处理(streaming)。流处理可以通过配置为一同或协同操作的一个或多个服务器来执行。流内容可以包括针对遍及销售渠道230(例如，商店)的多个不同位置或产品而配置的内容。例如，各机顶盒120和显示器130及多个扬声器系统135可以位于遍及销售渠道230的特定位置处，分别配置为显示内容和广播音频，所述内容和音频关于位于距每个机顶盒和显示器的位置在预定距离内的产品。
内容分发系统100的服务器110接收内容，并产生音频、视频和／或音频／视频的多个不同流(例如，内容信道)，以便传输到遍及商店的各种接收设备。流可以是在射频分发上的调制音频、视频和／或音频／视频的单独信道，或在单播或多播因特网协议(IP)网络中作为数据流传输。这些流可以源自控制软件的相同逻辑集合下的一个或多个服务器。
本发明的多个实施例提供了一种用于图像回放验证的方法。在本发明的一个实施例中，使用移动设备例如数码相机或具有数码相机的移动电话，来捕获在商场内视频显示器(例如，具有图1的内容分发系统100的商店中的显示器130)上播放的媒体内容的至少一部分的数字表示。在本发明的一个实施例中，所捕获的媒体内容部分是以静态图像或数字图片的形式捕获的。在本发明的备选实施例中，可以将所捕获的媒体内容部分捕获为媒体剪辑或视频剪辑。在本发明的一个实施例中，开启“地理标记(geotagging)”来捕获数字表示，以便在捕获该部分媒体内容时，将数字图像的日期、时间和位置与该部分媒体内容一同记录。
接着，将在显示器130上播放的媒体内容的该部分的所捕获数字表示传送到公告位置。也就是说，根据本发明的实施例，公告可以向其发送所捕获数字表示的位置。在本发明的一个实施例中，向其发送所捕获数字图像的位置可以在内容分发系统100的显示器130上或在其它标记系统上公告，或者甚至可以直接传送给用户的移动通信设备。可以向其发送数字表示的公告位置可以是中央位置，例如服务器，如内容分发系统100的服务器110，或商场内广告网络200的NMC210或NOC220。所捕获数字表示的发送可以使用例如MMS或通过电子邮件、或通过某些类型的“drop box”文件传输而传送到中央位置。在一个实施例中，向中央位置传送数字表示也可以使用智能电话通过因特网或内联网来实现。在本发明的备选实施例中，如果零售环境／商店提供WiFi连接，则该链接可用于将所捕获数字表示传送到中央位置。然而，有利地，根据本发明的构思，并不需要由内容分发系统100或商场内广告网络200提供的网络连接，因为用于捕获数字表示的移动设备或相关移动设备的服务供应商可以用于将所捕获的数字表示传送到中央位置。
在中央位置处，将接收到的数字表示与安排在从中捕获数字表示的屏幕上播放的媒体内容中的图像进行比较，并且在本发明的一个实施例中，使用接收到的数字表示中关于例如捕获数字图像的日期、时间及位置的信息，与安排在捕获数字表示的时间播放的图像进行比较。如果比较结果相匹配，则将与接收到的数字表示相比较的媒体内容的回放验证为已播放。更具体地，在中央位置处，获知关于计划在所有位置处和所有屏幕上(例如，商场内广告网络200中内容分发系统100的显示器)进行播放的所有媒体文件／内容的信息。
在本发明的一个实施例中，媒体文件从全运动视频转换为针对每个视频帧的离散图像的集合。由于视频通常每秒30帧，所以这将导致对于每秒的视频而言计划显示至少30幅照片图像。在本发明的这种实施例中，这些图像存储在中央位置，对其进行索引以便准确获知哪些图像集合与要在每个特定位置(商店或其它广告地点)处播放的视频文件相匹配。在本发明的多个实施例中，在中央位置处还记录关于播放位置(例如，商店)的元数据，包括计划在一些地点的显示器上播放特定媒体文件的日期和时间及每个地点的地理位置。
在本发明的一个实施例中，在针对匹配的处理之前，通过应用快速傅里叶变换(FFT)将每个图像帧转换到相空间。该处理仅需要对每个媒体剪辑图像使用一次。存储最终的相空间图像。最终的数据集合是相空间图像的大集合(存储为矩阵)，而不是真实图像。
当在中央位置处接收到所捕获的数字表示时，对它们进行处理以便确定匹配。在本发明的一个实施例中，为了减少为进行匹配而搜索的图像的数量，在数据库系统中记录每个所捕获数字表示，以便追踪该数字表示来自什么人，什么时间、什么地点、什么时候捕获了该数字表示，以及在什么地理位置拍摄该数字表示。如此，识别了与位置匹配的商店或地点。基于在中央位置处已可用的计划信息，来确定安排在匹配的显示器(或显示器的集合)上进行播放的计划媒体文件的集合。
根据发明的多个实施例，有多种选项来将显示器上播放的媒体内容的所捕获数字表示与媒体内容相匹配。在所捕获数字图像表示是视频剪辑的情况下，所捕获视频剪辑的每个帧可以认为是离散的图像。应注意，较低视频分辨率视频可以导致一定的复杂性，这种复杂性可能使得难于计算匹配，但是可以通过使用HD视频来解决。
为了将在显示器上播放的媒体的所捕获数字图像表示与应该在显示器上播放的已知媒体内容相匹配，在本发明的一个实施例中，检测从中捕获数字表示的显示器的边界，该信息用来剪裁数字表示。接着使用简单图像差别，将所剪裁的数字表示与如上所述确定的剪辑帧作比较。尽管有效，但是该方法可能遭受封闭屏幕边界、图像失真(例如，强光)、甚至摄像机的轻微倾斜等问题。
在本发明的备选实施例中，如同如上所述的媒体剪辑帧，也将接收到的捕获数字表示通过FFT转换到相空间中。一旦所捕获数字表示在相空间中，确定复共轭来形成最终的基础图像。在存储器中保存或保留该基础图像，以便匹配处理。接着可以使用标准的图像配准(imageregistration)技术(例如，来自医学成像的技术)来比较图像。更具体地，可以使用频域(相空间)中的互相关，并且在一个实施例中，可以将得到的相图与阈值相比较，来确定两个(或者更多)图像是否相匹配。相较于在正常空间中的互相关，在相空间执行该计算需要少得多的计算资源。
例如，图3示出了根据本发明实施例的用于比较图像的方法的流程图。如图3所示，将视频格式的计划媒体内容转换为图像帧。对转换后的图像帧(每帧一个图像)进行FFT处理，并转换为相空间图像。在图3的实施例中，并行地对接收到的从显示器上播放的媒体内容中捕获的图像的数字表示进行FFT处理，并转换为相空间图像。接着，如文中所述比较相空间图像以便确定是否存在匹配。
在本发明的一个实施例中，通过将两个相空间图像(矩阵形式)相乘并对结果进行归一化，来计算图片和媒体剪辑图像之间的相关。向结果应用逆傅里叶变换，以便获得最终的相关图。该图具有2D图像的形式，该2D图像大部分由零值构成。然而，如果在所捕获数字图像表示中的任何位置可以找到媒体剪辑，则相关图将包含一个小区域，其中包含非零值的“峰”。由于这些值的大小表示两个图像之间的相关程度，所以可以使用简单阈值方法来确定匹配是否成功。如果相关图不包括超过阈值的值(或如果有太多超过阈值的值，即，剪辑与太多地方匹配，例如，在空白帧的情况下)，则可以确定所捕获数字图像表示不包括媒体剪辑中的帧。应注意，尽管这种方法计算仿射(affine)影像变换(平移(translation)等)的参数，但是该方法不使用这些值，而是仅提供布尔型(Boolean)图像匹配测试。
例如，图4示出了根据本发明的实施例在例如图1的内容分发系统中呈现媒体的屏幕的示例，其中用户可以捕获数字表示并向公告位置发送该数字表示。在图4中，广告屏幕正在显示视频广告。根据本发明的实施例，将计划在该屏幕上播放的所有视频文件拆分为离散图像，每帧一个图像。接着，如上所述，将所有图像转换到相空间，使用矩阵乘法来比较这些图像。得到的匹配结果确认此时在该位置处播放该媒体。
尽管已知上述图像配准方法在计算上高效，但是可以如下进一步优化这种方法，以便实现更好的性能：
1.剪辑和所捕获数字表示图像可以进行缩小，以便几何上减小所需计算量(将分辨率降低N倍令计算量降低N2)。因为该方法依赖于图像(而不是控制点)之间的相差，所以这在面对分辨率适度降低时是鲁棒的。
2.多个剪辑帧可以并行地与所捕获数字表示图像相关，令该方法成为用于群集或基于云的硬件阵列的候选方案。
3.所捕获数字表示图像可以与代表性的剪辑帧(例如，I-帧或若干帧的平均)而不是与单个帧相关，这是因为目标是媒体剪辑匹配，而不是单个帧匹配。
本领域技术人员将认识到，根据本发明的构思，图像处理的其它方法同样可以用来确定接收到的所捕获数字表示图像的一部分是否与构成安排在一地点处的显示器上播放的所有视频的帧的任何图像相匹配。
在本发明的一个实施例中，本发明的构思可以包括激励购物者参与捕获显示器上播放的媒体内容的数字表示，并将这种数字表示传送到公告的中央位置。更具体地，在本发明的一个实施例中，例如通过显示器130或其它标记系统，征求在包含图1的内容分发系统100的商店内的购物者使用他们的移动设备(例如，数码相机和具有数码相机的移动电话)，来捕获在内容分发系统100的多个位置处的显示器130上播放的媒体内容的至少一部分。在本发明的一个实施例中，鼓励购物者启用“地理标记”来捕获数字表示，以便在捕获数字表示时，将数字表示的日期、时间和位置与数字表示一同记录。
根据本发明，公告购物者可以向其发送所捕获数字表示的位置。在本发明的一个实施例中，可以将向其发送所捕获数字表示的位置可以在内容分发系统100的屏幕上或其它标记系统上公告，或甚至可以在购物者的移动通信设备上直接发送给购物者。所述位置可以是中央位置，例如服务器，如内容分发系统100的服务器110，或商场内广告网络200的NMC210或NOC220。所捕获数字表示的发送可以由购物者使用例如MMS或通过电子邮件、或通过某些类型的“drop box”文件传输，而传送到中央位置。在一个实施例中，数字表示向中央位置的传送也可以使用智能电话通过因特网或内联网来实现。在本发明的备选实施例中，如果零售环境／商店提供WiFi连接，则该链接可用于将所捕获数字表示传送到中央位置。然而，有利地，根据本发明的构思，并不需要由内容分发系统100或商场内广告网络200提供的网络连接，因为用于捕获数字表示的移动设备或相关移动设备的服务供应商可以用于将所捕获的数字表示传送到中央位置。
如上所述，在中央位置处，将接收到的数字表示与安排在捕获数字表示时在从中捕获数字表示的屏幕上播放的媒体内容中的图像进行比较。
作为对拍摄数字表示并将其传送到中央位置的交换，可以向购物者提供某种类型的奖励或补偿，或类似的机会。应注意，在这样的实施例中，通过购物者来发挥捕获数字表示的效果，购物者使用例如通过他们的移动设备提供的资源和服务来承担发送所捕获数字表示的带宽。如果商场内环境提供WiFi连接，则该链接也可以用于将所捕获数字表示传送到中央位置。然而，在本发明的这种实施例中，由内容分发系统100或商场广告网络200提供的网络连接不是必须的。
在本发明的再一备选实施例中，如上所述，内容分发系统100或商场内广告网络200的用户或技术员可以使用本发明的构思，来捕获在内容分发系统的多个位置处的显示器上显示的媒体内容的数字表示，并将所捕获的数字表示传送到中央位置。
图5示出了根据本发明实施例的用于图像回放验证的方法的流程图。图5的方法500开始于步骤502，其中接收视频屏幕／显示器上播放的媒体内容的至少一部分的数字表示。接着方法500进行到步骤504。
在步骤504，将接收到的数字表示与安排为例如在一个实施例中在捕获数字表示时在从中捕获数字表示的视频屏幕／显示器上播放的媒体内容中的图像作比较。接着方法500进行到步骤506。
在步骤506，如果接收到的数字表示与所比较的安排在从中捕获数字表示的显示器上播放的媒体相匹配，则验证了所接收数字表示的回放。
接着退出方法500。
已经描述了用于图像回放验证的方法的多个实施例(是用于说明的目的，而不是限制)，应注意，根据以上教义，本领域技术人员可以进行多种修改和改变。因此应理解，可以在所公开的本发明的具体实施例中作出多种改变，这些改变在本发明的范围和精神之内。尽管上述内容针对本发明的多个实施例，但是在不脱离本发明的基本范围的前提下，可以设计出本发明的其它更多实施例。

Claims (21)

1.一种用于图像回放验证的方法，包括：
接收在显示器上播放的媒体内容的至少一部分的数字表示；
将所接收的数字表示和安排在屏幕上播放的媒体内容作比较，其中从所述屏幕上捕获数字表示；以及
如果所接收的数字表示与相比较的媒体内容相匹配，则验证所接收数字表示的回放。
2.根据权利要求1所述的方法，其中所接收的在显示器上播放的媒体内容的至少一部分的数字表示是使用数码相机来捕获的。
3.根据权利要求2所述的方法，其中所接收的在显示器上播放的媒体内容的至少一部分的数字表示包括静态图像、数字图片、媒体剪辑和视频剪辑中的至少一种。
4.根据权利要求1所述的方法，其中捕获在显示器上播放的媒体内容的至少一部分的所接收数字表示，使得记录数字表示的回放的日期、时间和位置中的至少一个。
5.根据权利要求1所述的方法，还包括公告在显示器上播放的媒体内容的至少一部分的数字表示要传送到的位置。
6.根据权利要求5所述的方法，其中在显示器上公告所述位置。
7.根据权利要求1所述的方法，其中在用户的移动通信设备的显示器上公告所述位置，所述移动通信设备用于传送在显示器上播放的媒体内容的至少一部分的数字表示。
8.根据权利要求1所述的方法，其中通过多媒体消息服务、电子邮件、drop-box文件传输、内联网、无线通信和因特网中的至少一个，接收在显示器上播放的媒体内容的至少一部分的数字表示。
9.根据权利要求1所述的方法，其中使用移动通信设备来捕获和传送在显示器上播放的媒体内容的至少一部分的数字表示。
10.根据权利要求1所述的方法，包括通过仅比较安排在接近捕获数字表示的时间在显示器上显示的媒体内容，来减少与所接收的数字表示相比较的媒体内容。
11.根据权利要求1所述的方法，其中已获知关于计划在特定显示器上显示媒体内容的位置、日期和时间中的至少一个的信息。
12.根据权利要求1所述的方法，其中所述比较包括将媒体内容和所接收数字表示中的至少一个转换为针对每个视频帧的离散图像的集合。
13.根据权利要求12所述的方法，其中所述比较包括通过应用快速傅里叶变换将至少一个图像帧转换到相空间。
14.根据权利要求13所述的方法，其中将相空间图像的大集合存储为矩阵。
15.根据权利要求13所述的方法，其中所述比较还包括：使用频域中的互相关，来确定相空间中的两个或更多图像是否匹配。
16.根据权利要求13所述的方法，其中将相比较的媒体内容和所接收数字表示转换到相空间，并且通过将作为矩阵的两个相空间图像相乘，对结果进行归一化，并向结果应用逆傅里叶变换以得到最终的相关图，来计算相空间之间的相关。
17.根据权利要求16所述的方法，其中如果最终的相关图包括零值，则不相关，而如果最终的相关图包括非零值的峰，则相关。
18.根据权利要求1所述的方法，还包括缩小所接收数字表示的分辨率，以在几何上减小比较步骤所需的计算量。
19.根据权利要求1所述的方法，还包括：检测从中捕获数字表示的显示器的边界，并使用边界信息来剪裁数字表示，以便改善与安排在显示器上播放的媒体内容的比较，其中从所述显示器上捕获数字表示。
20.根据权利要求1所述的方法，还包括：激励购物者参与捕获在显示器上播放的媒体内容的数字表示并将这种数字表示传送到公告的位置。
21.一种用于图像回放验证的方法，包括：
征求显示器的观察者捕获在显示器上呈现的媒体内容的至少一部分的数字表示，并将所捕获的数字表示传送到公告位置；
在公告位置处接收所述在显示器上播放的媒体内容的至少一部分的数字表示；
将所接收的数字表示与安排在显示器上播放的媒体内容作比较，其中从所述显示器上捕获数字表示；以及
如果所接收的数字表示与相比较的媒体内容相匹配，则验证所接收数字表示的回放。
CN2012800154013A 2011-03-30 2012-01-24 用于图像回放验证的方法 Pending CN103460709A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161469416P 2011-03-30 2011-03-30
US61/469,416 2011-03-30
PCT/US2012/022295 WO2012134610A1 (en) 2011-03-30 2012-01-24 Method for image playback verification

Publications (1)

Publication Number Publication Date
CN103460709A true CN103460709A (zh) 2013-12-18

Family

ID=45563584

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012800154013A Pending CN103460709A (zh) 2011-03-30 2012-01-24 用于图像回放验证的方法

Country Status (7)

Country Link
US (1) US20130347019A1 (zh)
EP (1) EP2692142A1 (zh)
JP (1) JP2014516486A (zh)
KR (1) KR20140061295A (zh)
CN (1) CN103460709A (zh)
CA (1) CA2830769A1 (zh)
WO (1) WO2012134610A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111246269A (zh) * 2018-11-28 2020-06-05 纬创资通股份有限公司 显示器、播放内容监控方法及播放内容监控系统
CN111327784A (zh) * 2018-12-14 2020-06-23 德高公司 用于验证由数字显示设备显示内容项目的方法以及数字显示系统

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140193084A1 (en) * 2013-01-09 2014-07-10 Wireless Ronin Technologies, Inc. Content validation analysis method and apparatus
JP6089828B2 (ja) * 2013-03-15 2017-03-08 株式会社リコー 情報処理システムおよび情報処理方法
US9906782B2 (en) * 2015-01-14 2018-02-27 Cinder LLC Source agnostic audio/visual analysis framework
US10269156B2 (en) 2015-06-05 2019-04-23 Manufacturing Resources International, Inc. System and method for blending order confirmation over menu board background
US10216467B2 (en) 2016-02-03 2019-02-26 Google Llc Systems and methods for automatic content verification
TWI762465B (zh) 2016-02-12 2022-05-01 瑞士商納格維遜股份有限公司 共享從視訊傳輸提取的快照之方法及系統
JP2019526948A (ja) * 2016-05-31 2019-09-19 マニュファクチャリング・リソーシズ・インターナショナル・インコーポレーテッド 電子ディスプレイ遠隔画像確認システム及びその方法
US10430822B1 (en) * 2017-09-06 2019-10-01 Ruby Vasquez Advertising and customer loyalty system
US11138278B2 (en) * 2018-08-22 2021-10-05 Gridspace Inc. Method for querying long-form speech
US11895362B2 (en) 2021-10-29 2024-02-06 Manufacturing Resources International, Inc. Proof of play for images displayed at electronic displays

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001268552A (ja) * 2000-03-17 2001-09-28 Fujitsu General Ltd 表示装置監視システム
CN1556518A (zh) * 2003-12-31 2004-12-22 张忠发 智能化视音频媒体广告监播仪
CN101207524A (zh) * 2006-12-22 2008-06-25 上海亿动信息技术有限公司 网页广告的监播方法与系统
WO2010077258A1 (en) * 2008-12-29 2010-07-08 Thomson Licensing Method and system for monitoring a display venue

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4967273A (en) * 1983-03-21 1990-10-30 Vidcode, Inc. Television program transmission verification method and apparatus
US5309174A (en) * 1987-10-13 1994-05-03 Motorola, Inc. Electronic display system
US5412416A (en) * 1992-08-07 1995-05-02 Nbl Communications, Inc. Video media distribution network apparatus and method
US6108637A (en) * 1996-09-03 2000-08-22 Nielsen Media Research, Inc. Content display monitor
US20070100757A1 (en) * 1999-05-19 2007-05-03 Rhoads Geoffrey B Content Protection Arrangements
US20050071230A1 (en) * 1999-07-07 2005-03-31 Mankoff Jeffrey W. Delivery, organization, and redemption of virtual offers from the internet, interactive-TV, wireless devices and other electronic means
US7194752B1 (en) * 1999-10-19 2007-03-20 Iceberg Industries, Llc Method and apparatus for automatically recognizing input audio and/or video streams
JP2001126065A (ja) * 1999-10-26 2001-05-11 Toyota Central Res & Dev Lab Inc 距離分布検知装置
EP1235169A1 (en) * 2001-02-21 2002-08-28 BRITISH TELECOMMUNICATIONS public limited company Supply of personalised information
US20020190972A1 (en) * 2001-05-17 2002-12-19 Ven De Van Antony Display screen performance or content verification methods and apparatus
US7098870B2 (en) * 2001-06-29 2006-08-29 Novus Partners Llc Advertising method for dynamic billboards
US7614065B2 (en) * 2001-12-17 2009-11-03 Automated Media Services, Inc. System and method for verifying content displayed on an electronic visual display
US7020304B2 (en) * 2002-01-22 2006-03-28 Digimarc Corporation Digital watermarking and fingerprinting including synchronization, layering, version control, and compressed embedding
FR2862475B1 (fr) * 2003-11-17 2006-02-24 Okdak Systeme de diffusion d'informations
WO2006023770A2 (en) * 2004-08-18 2006-03-02 Nielsen Media Research, Inc. Methods and apparatus for generating signatures
US20070016918A1 (en) * 2005-05-20 2007-01-18 Alcorn Allan E Detecting and tracking advertisements
US7584484B2 (en) * 2005-06-02 2009-09-01 The Nielsen Company (Us), Llc Methods and apparatus for collecting media consumption data based on usage information
JP2007041643A (ja) * 2005-07-29 2007-02-15 Fuji Xerox Engineering Co Ltd 物品確認装置、物品確認方法及び物品確認プログラム
JP2007049584A (ja) * 2005-08-12 2007-02-22 Casio Comput Co Ltd 宣伝支援システム及びプログラム
US20070282750A1 (en) * 2006-05-31 2007-12-06 Homiller Daniel P Distributing quasi-unique codes through a broadcast medium
JP2008146349A (ja) * 2006-12-09 2008-06-26 Miura Densetsu Kogyo Kk 広告表示確認システム
US8645987B2 (en) * 2007-04-13 2014-02-04 Power-Link Software Systems, Inc. Advertisement airing audit system and associated methods
US8332887B2 (en) * 2008-01-10 2012-12-11 Touchtunes Music Corporation System and/or methods for distributing advertisements from a central advertisement network to a peripheral device via a local advertisement server
US20090094114A1 (en) * 2007-10-03 2009-04-09 Rice Daniel J Systems and methods for optimized addressable advertising
US8131118B1 (en) * 2008-01-31 2012-03-06 Google Inc. Inferring locations from an image
US20100125881A1 (en) * 2008-11-17 2010-05-20 Sony Corporation Method and apparatus for conveying content acquisition opportunities upon detection of proximity to interactive signage
EP2190136A1 (en) * 2008-11-25 2010-05-26 GfK Telecontrol AG Method for monitoring the viewing of video content
US20110123062A1 (en) * 2009-11-24 2011-05-26 Mordehay Hilu Device, software application, system and method for proof of display
CA2826253A1 (en) * 2010-02-03 2011-08-11 Hoyt M. Layson, Jr. Location derived messaging system
US9094454B2 (en) * 2011-06-10 2015-07-28 Zone24X7 Inc. Location specific personalized enterprise services using video signature of an electronic display

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001268552A (ja) * 2000-03-17 2001-09-28 Fujitsu General Ltd 表示装置監視システム
CN1556518A (zh) * 2003-12-31 2004-12-22 张忠发 智能化视音频媒体广告监播仪
CN101207524A (zh) * 2006-12-22 2008-06-25 上海亿动信息技术有限公司 网页广告的监播方法与系统
WO2010077258A1 (en) * 2008-12-29 2010-07-08 Thomson Licensing Method and system for monitoring a display venue

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111246269A (zh) * 2018-11-28 2020-06-05 纬创资通股份有限公司 显示器、播放内容监控方法及播放内容监控系统
CN111246269B (zh) * 2018-11-28 2022-03-04 纬创资通股份有限公司 显示器、播放内容监控方法及播放内容监控系统
CN111327784A (zh) * 2018-12-14 2020-06-23 德高公司 用于验证由数字显示设备显示内容项目的方法以及数字显示系统

Also Published As

Publication number Publication date
JP2014516486A (ja) 2014-07-10
US20130347019A1 (en) 2013-12-26
CA2830769A1 (en) 2012-10-04
WO2012134610A1 (en) 2012-10-04
EP2692142A1 (en) 2014-02-05
KR20140061295A (ko) 2014-05-21

Similar Documents

Publication Publication Date Title
CN103460709A (zh) 用于图像回放验证的方法
US9779426B2 (en) Methods and apparatus to access media
US20140236737A1 (en) Wearable computers as media exposure meters
US20130174196A1 (en) Method and system for determining identity/presence of a mobile device user for control and interaction in content distribution
US20130205324A1 (en) Method and system for coupons based on automatic content recognition
EP3286673A1 (en) Automatic content recognition fingerprint sequence matching
US20140295893A1 (en) Method, Apparatus and System for Enabling the Recall of Content of Interest for Subsequent Review
CN104412605B (zh) 发送装置、信息处理方法、程序、接收装置和应用链接系统
CN105530523B (zh) 一种业务实现方法及设备
US9288536B2 (en) Method and apparatus for using viewership activity data to customize a user interface
MX2010011970A (es) Metodo, aparato y sistema para distribucion y despliegue de contenido con base en evento.
CN102257763B (zh) 用于在带宽约束网络上监视和控制服务器系统的系统和方法
US20150281787A1 (en) Social Network Augmentation of Broadcast Media
KR20120139698A (ko) 모바일 통신 기술을 이용하여 콘텐츠 디스플레이 시스템들을 프로비저닝하는 방법 및 시스템
US11638052B2 (en) Methods, apparatus, and articles of manufacture to identify candidates for media asset qualification
KR20110124251A (ko) 수신기에서의 튜닝 향상 방법, 장치 및 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20131218

WD01 Invention patent application deemed withdrawn after publication