CN112514404B - 用于生成目标媒体内容的系统和方法 - Google Patents

用于生成目标媒体内容的系统和方法 Download PDF

Info

Publication number
CN112514404B
CN112514404B CN201980047640.9A CN201980047640A CN112514404B CN 112514404 B CN112514404 B CN 112514404B CN 201980047640 A CN201980047640 A CN 201980047640A CN 112514404 B CN112514404 B CN 112514404B
Authority
CN
China
Prior art keywords
media content
image
audience
information
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980047640.9A
Other languages
English (en)
Other versions
CN112514404A (zh
Inventor
马里斯·J·恩辛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ma LisiJEnxin
Original Assignee
Ma LisiJEnxin
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US16/036,625 external-priority patent/US20200021875A1/en
Priority claimed from US16/111,109 external-priority patent/US20200021871A1/en
Priority claimed from US16/142,435 external-priority patent/US10484818B1/en
Application filed by Ma LisiJEnxin filed Critical Ma LisiJEnxin
Publication of CN112514404A publication Critical patent/CN112514404A/zh
Application granted granted Critical
Publication of CN112514404B publication Critical patent/CN112514404B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/535Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Collating Specific Patterns (AREA)

Abstract

用于生成、选择和/或提供目标媒体内容的系统和方法从图像捕获装置捕获图像。该系统可以分析该图像以识别诸如面部特征或车牌的图像特征。一些图像特征可以彼此关联,例如,人的面部可以与车辆车牌关联。该系统随后使图像特征与属性关联,这可以用于选择专门针对那些属性的媒体内容。该系统还可以收集关联信息以增强属性和图像特征功能。

Description

用于生成目标媒体内容的系统和方法
技术领域
本公开大体涉及基于由图像捕获装置捕获的一个或多个图像来提供或补充媒体内容。
背景技术
一些公司使用多种类型的媒体递送系统,诸如,例如,广告牌、
自助服务亭、免下车窗口和加油站泵,这些媒体递送系统可以在各种位置(诸如,例如,博物馆、美术馆、主题公园、受众中心、动物园和道路)向消费者显示媒体。通常,为了增强观看者的体验,这些媒体递送系统将提供媒体内容,例如,以通知、教育或娱乐目标受众和/或为商品或服务做广告。媒体内容通常在显示器、扬声器、耳机和/或其他回放装置(诸如,例如,便携式或手持装置(例如,平板电脑或智能手机))上回放(play back)。
提供媒体内容以补充媒体递送系统的一个方面是提供将使观众成员感兴趣或娱乐的内容。每个受众可以由具有不同兴趣和需求的各种成员组成。因此,本领域技术人员不断致力于提供这样的系统和方法:其提供补充媒体递送系统以满足每个特定受众成员或受众成员的每个特定类别或子组的需求的媒体内容。
发明内容
根据本公开的各个方面的系统和方法基于捕获的一组图像来提供目标媒体内容。媒体内容计算机系统通常电子耦接到该系统的任何(一个或多个)媒体内容回放装置和图像捕获装置。如本文中使用的,电子或功能连接允许两个电子装置彼此发送数据。电子连接可以使用任何合适的数据耦接技术进行有线或无线连接。
在优选的实施例中,分析一组图像以确定适当的最有效的目标媒体内容。一个或多个图像通常由媒体内容计算机系统进行分析,以例如通过将查询发送至使图像特征与标识符关联的图像数据库,而根据在一组图像中发现的图像特性(“图像特征”)来生成标识符。
媒体内容计算机系统还可以被编程,以例如通过将查询发送至使彼此关联的标识符相关的关系数据库,来分析标识符,以确定在一组图像中未发现的相关标识符。示例性相关标识符包括已知乘坐在被标识的车辆内的乘员(例如,驾驶员和/或乘客)的标识符、或者已知跟随被标识的老师的学生的标识符。在优选的实施例中,媒体内容计算机系统可以通过分析一组图像来生成新的关系,并且还可以为任何关系创建期满时间,使得可以在时间阈值期满时删除关系。例如,媒体内容计算机系统可以分析一组图像,该组图像包含经由面部识别算法标识的三个人,他们全部进入具有牌照的汽车。三个人中的每一个和汽车的唯一标识符可以在关系数据库中彼此关联,使得每个人与汽车都有关系。关系可以根据算法设置为期满,例如,坐在驾驶员座位上的人可以被配置为具有永久关系,或者在一年之内期满的关系,同时坐在乘客座位上的人可以具有被设置为在阈值时间段(例如,几天、一周)内期满的关系。
媒体内容计算机系统优选使用一些或所有的标识符,以例如通过将查询发送至使标识符与一个或多个属性关联的属性数据库来确定与标识符相关的属性。在一些实施例中,媒体内容计算机系统还可以通过分析一个或多个交易来填入属性数据库。可以拍摄由其面部特征标识的个人的一组图像,并且可以拍摄识别指示正在发生交易的动作(例如,在加油站泵的前方刷RFID(射频标识符)芯片的运动(movement)或向收银员提供信用卡的运动)的一组图像。该交易标识符可以经由任何合适的方式(例如,经由时间戳或条形码)与诸如现金收银机或加油站泵的交易捕获装置所记录的交易关联,使得交易信息可以随后与属性数据库中人员的标识符关联。
利用这种收集的属性,可以例如通过将查询发送至使一个或多个属性与媒体内容关联的媒体内容数据库来生成媒体内容的一个或多个样本。例如,计算机系统可以从存储装置检索个人具有购买某种类型的商品的数字历史的数据,并且可以随后搜索与该商品的标识符关联的媒体内容,或者计算机系统可以从存储装置检索个人偏爱字幕或具有收听另一种语言中的语言音轨(language track)的数字历史的数据,这随后可以触发搜索具有字幕或被配置为具有字幕的媒体内容。媒体内容系统还可以响应于播放的媒体内容来监测个人的动作,以更改媒体内容,例如,在阈值时间段内没有看显示器的个人可以触发媒体内容系统来利用不同媒体内容文件循环播放的媒体内容。属性数据库中的属性还可以根据观察到的动作进行修改。
在一些实施例中,媒体内容计算机系统可以被编程以标识交易,例如,在加油站的燃料支付或在收银机或其他电子支付站的一个或多个物品的支付。在一些实施例中,媒体内容计算机系统可以使用高级算法分析程序进行编程,该高级算法分析程序从详细的一组图像中识别交易运动和商品,以导出交易属性(例如,标识面部图像特征,标识购买并标识商品,以将面部图像特征的标识符与该商品的属性关联)。在优选的实施例中,媒体内容计算机系统与捕获一组交易属性和捕获的交易标识符的交易捕获装置协作。交易捕获装置所捕获的这种捕获的交易标识符随后可以与对从一组图像的分析导出的生成的交易标识符匹配。预期的交易标识符包括时间戳值和部分或全部账号(例如,信用卡账号或会员ID)。预期的交易捕获装置包括加油站泵、自助服务亭和收银机计算机系统。匹配的交易标识符随后可以用于使用由交易捕获装置捕获的与从图像特征导出的标识符关联的交易属性来更新属性数据库。
在一个实施例中,媒体内容系统和方法还可以确定媒体内容的回放参数。根据一些方面,可以基于所捕获的图像来修改交互式触摸屏或其他输入装置的配置。根据这些方面中的许多方面,可以捕获后续图像,并且基于后续图像来更新媒体内容和/或回放参数。例如,图像可以相对于触摸屏的高度来标识人的身高,这触发系统根据人的身高将触摸屏的用户界面移动到新的高度,或者图像可以标识具有英语为主要语言的属性的人,这触发系统使用英语字幕播放非英语媒体内容。在一些实施例中,系统的用户可以经历允许用户输入要保存在系统的存储介质上的属性的登录过程。用户可以输入他们的身高数据,可以输入他们的身高低于阈值,可以表明他们被轮椅束缚,或者可以输入他们的范围(reach)是有限的。系统随后可以基于这些属性选择向用户显示触发了可访问性选项的控件,诸如在触摸屏上显示位于阈值高度以下的控件以改善访问。
根据本公开的媒体内容提供系统可以可选地包括以下中的一个或多个:展台控制系统、模块或功能;内容控制系统、模块或功能;图像分析系统、模块或功能;以及面部识别系统、模块或功能。可以有利地通过计算机系统和一个或多个媒体回放装置来提供展台控制功能,计算机系统连接到聚焦在展台附近的受众区域上的图像捕获装置(例如,相机)。计算机系统可以控制相机来捕获受众区域的图像,处理图像以识别与属性关联的标识符,并且将属性提供至内容控制系统、模块或功能。这种方法可以用于允许计算机系统检测公共属性或者公共属性组,这可以基于组的大小对其进行加权(例如,以西班牙语为第一语言的20个人的组的权重可以重于在同一受众区域中找到的以英语为第一语言的10个人的组的权重),这可以用于选择媒体内容或媒体内容回放特征(例如,语言或字幕选择)。计算机系统随后接收媒体内容信息以从第三方下载媒体内容,或者其直接接收媒体内容。媒体内容随后通过回放装置进行回放。媒体内容信息可以包括用于媒体内容的回放参数,计算机系统可以基于来自面部识别系统的信息来有利地调整回放参数。可以由计算机系统、存储与展台关联的媒体内容的数据库和存储受众成员信息的数据库来执行内容控制功能。内容控制系统或模块从展台控制系统或模块接收图像,并将图像提供至图像分析系统或模块和/或面部识别系统或模块。内容控制系统或模块随后从图像分析系统或模块和/或面部识别系统或模块接收受众信息,并且其确定发送至展台控制系统或模块的媒体内容和回放参数。图像分析系统或模块从内容控制系统或模块接收受众区域的图像,分析图像,并且将基于图像分析确定的受众信息属性返回至内容控制系统或模块。优选地,实时动态地执行这种分析,使得计算机系统在媒体递送过程期间或者至少在计算机系统已经标识了受众成员之后做出关于如何通过回放过程播放媒体内容的决定。
预期的媒体递送系统还包括可适用于向受众成员(优选地,以视频/音频格式,尽管可以使用其他形式的媒体内容,例如,气味、味道或触觉格式)递送媒体内容的任何装置。根据本公开的一些方面,媒体递送系统包括:图像捕获装置,其可被操作为获得图像;媒体内容回放装置;处理器;存储器,其存储用于处理器的指令和可在回放装置上播放的媒体内容;以及数据库,其存储媒体内容与所捕获的图像内的被标识的实体之间的标识符关系。这些指令使媒体递送系统的一个或多个处理器从图像捕获装置接收图像。分析该图像以确定图像标识符,并且图像标识符与数据库中的相关的媒体内容匹配,以确定哪种类型的媒体最适于显示在媒体内容回放装置上。
根据本公开的其他方面,用于提供用于展台的媒体内容的方法执行如下:由图像捕获装置来捕获实体的图像。处理器对捕获的图像执行图像分析以标识一个或多个图像标识符。处理器随后将图像标识符同与图像标识符中的一个或多个有关的媒体内容进行匹配。处理器随后选择媒体内容,并且将其发送至媒体内容回放装置。
根据本公开的其他方面,系统和方法可以用来将媒体内容提供至展台。根据本公开的一些方面,系统包括:图像捕获装置,其可操作为获得展台的受众区域的图像;媒体内容回放装置;一个或多个处理器;以及存储器,其与一个或多个处理器数据通信,并存储用于处理器的指令。
一个或多个处理器可以从图像捕获装置接收受众区域的图像。可以分析受众区域的图像以生成当前的受众信息。基于当前的受众信息来确定用于要呈现的媒体内容的媒体内容信息,并将其提供至媒体内容回放装置。
根据一些方面,传感器可操作为检测受众区域中的受众成员,并且响应于该检测而发送近距离信号。在这种实施例中,图像捕获装置可以被配置为响应于近距离信号而获得图像,然而在其它实施例中,图像捕获装置可以被配置为不断地获得图像,但是可以被触发,以在传感器已经检测到图像时的时间期间执行额外的图像分析。可以通过分析由图像捕获装置所捕获的图像来由图像捕获装置执行该近距离感测功能。在又一其它实施例中,图像捕获装置可以不包括传感器,并且可以分析由图像捕获装置捕获的所有图像,或者可以分析在指定的阈值或预定时间段捕获的图像。
根据本公开的各方面,用于提供用于展台的媒体内容的方法包括:从图像捕获装置捕获受众区域的图像;由处理器对捕获的图像执行面部识别,以获得面部识别信息;由处理器根据面部识别信息生成当前的受众信息;基于当前的受众信息,由处理器标识用于媒体内容呈现的媒体内容信息;由处理器将媒体内容信息提供至媒体内容回放装置;以及基于媒体内容信息,由媒体内容回放装置播放媒体内容。
根据一些方面,受众区域的图像的分析可以包括:标识图像的包括面部图像的每个部分;以及对图像的包括面部图像的每个部分执行面部识别,以确定与面部图像关联的受众成员。
根据这些方面中的一些方面,该分析还可以包括:获得与图像的包括面部图像的每个部分关联的用于每个受众成员的受众信息;以及将用于每个关联的受众成员的受众信息添加至当前的受众信息。
根据这些方面中的许多方面,可以通过对图像的包括面部图像部分的每个部分执行行为识别来分析受众区域的图像,以确定受众区域中的受众成员的人口统计学信息,由此,每个面部图像部分的人口统计学信息被包括在当前的受众信息中。例如,计算机系统可以被编程,以识别与人的性别有关的受众成员的属性(例如,女性面部特征与男性面部特征,女性衣着与男性衣着),并且随后可以将人口统计学信息保存在一组检测到的受众信息中。还可以由使用有关数据(例如,测量到的高度/宽度比)的相机来计算每个受众成员的身高,以使用图像或一组图像来估算受众成员的身高。这种人口统计学信息可以被添加到经由对通过系统捕获的图像的分析动态检测到的当前的受众信息。在其它实施例中,人口统计学信息的至少一部分可以例如在人员的注册过程或登录过程期间输入到计算机中,或者所有的人口统计学信息可以经由一个或多个受众成员可访问的用户界面来进行输入,无论当他们在受众区域中时,还是在进入受众区域之前(例如,在注册期间)。
根据一些方面,图像的分析可以包括:标识图像的包括受众成员之一的面部图像的每个部分;确定来自图像的包括面部图像的部分的受众成员中的每一个的物理属性信息;以及包括当前的受众信息中的受众属性信息。
根据许多方面,确定媒体内容可以包括确定要提供至媒体内容回放装置的媒体内容以及确定用于在回放所确定的媒体内容期间使用的回放参数。所确定的媒体内容的标识符和回放参数可以被包括在回放信息中。
根据一些方面,回放参数可以包括从组(诸如例如,音量、分辨率、对比度、亮度和界面配置中的至少一个)中选择的一个或多个参数。
根据一些方面,媒体内容可以包括视频媒体内容、音频媒体内容、嗅觉媒体内容、味觉媒体内容、触觉媒体内容中的至少一个(例如,质地、速度、加速度,特别是在媒体回放系统中,受众成员可以体验的乘坐品(ride)或吸引物(attraction))。根据许多方面,媒体内容信息包括包含所确定的媒体内容的文件的标识符。根据许多方面,媒体内容信息可以包括源媒体内容。
根据一些方面,可以在回放所确定的媒体内容的期间由图像捕获装置来捕获受众区域的第二图像。可以分析第二图像,以生成当前的受众信息更新。可以基于当前的受众信息更新来修改所确定的媒体内容,以生成媒体内容更新信息。媒体内容更新信息可以被发送至媒体内容回放装置。
根据本公开的一些方面,用于将用于展台的媒体内容提供至与展台关联的媒体内容回放装置的设备包括处理器和处理器可读的存储器,存储器存储一些指令,这些指令在由处理器读取时,指导处理器:从图像捕获装置捕获接近展台的受众区域的图像;对捕获的图像执行面部识别以获得面部识别信息;根据面部识别信息生成当前的受众信息;基于当前的受众信息来标识用于媒体内容呈现的媒体内容信息;以及将媒体内容信息提供至媒体内容回放装置。
附图说明
图1是根据本公开的各方面的执行用于提供媒体内容以补充展台(exhibit)的过程的系统和装置的示意性实施例。
图2是根据本公开的一方面的示例性计算机处理系统的框图。
图3是根据本公开的一方面的具有展台的示例性房间的概念透视图,所述展台包括用于提供补充媒体内容的回放装置。
图4A是根据本公开的一方面的基于展台的受众区域的图像提供用于展台的补充媒体内容的示例性过程的概述的流程图。
图4B是根据本公开的一方面的基于在展台的受众区域的图像中标识的一组或更多组的视觉标识符来提供用于展台的补充媒体内容的示例性过程的流程图。
图4C是根据本公开的一方面的基于展台的受众区域的图像中的受众成员的面部识别来提供用于展台的补充媒体内容的示例性过程的流程图。
图5是根据本公开的实施例的展台控制系统的部件的框图。
图6是根据本公开的一方面的由展台控制系统执行以获得和回放补充媒体内容的示例性过程的流程图。
图7是根据本公开的一方面的由内容控制系统执行以将补充媒体内容提供至展台的示例性过程的流程图。
图8A是根据本公开的一方面的在确定要提供的合适的媒体内容时使用的示例性内容控制系统所存储的受众成员的数据记录的概念图。
图8B是根据本公开的一方面的在确定要提供的合适的媒体内容时使用的图8A的内容控制系统所存储的组的数据记录的概念图。
图9A是根据本公开的一方面的由示例性内容控制系统执行以获得受众成员信息并生成受众成员记录的过程的流程图。
图9B是根据本公开的一方面的由示例性内容控制系统执行以获得组信息并生成组记录的过程的流程图。
图10A是根据本公开的一方面的由图像分析系统的实施例执行以存储受众成员的图像的数据记录的过程的流程图。
图10B是根据本公开的一方面的由示例性面部识别系统执行以存储受众成员的图像的数据记录的过程的流程图。
图11是根据本公开的一方面的由面部识别系统维持的示例性面部图像记录的概念图。
图12是根据本公开的一方面的用于对受众区域的捕获的图像执行面部识别分析的软件的示例性模块的概念图。
图13A是根据本公开的一方面的由面部识别系统执行以根据受众区域的捕获的图像生成受众信息的示例性过程的流程图。
图13B是根据本公开的一方面的由内容控制系统执行以获得受众成员信息并生成受众成员记录的过程的流程图。
图14是根据本公开的一方面的由面部识别系统维持的示例性组图像分析记录的概念图。
图15是根据本公开的一方面的用于对受众区域的捕获的图像执行图像分析的功能模块的实施例的概念图。
图16是根据本公开的一方面的由图像分析模块执行以根据受众区域的捕获的图像生成受众信息的示例性过程的流程图。
图17是根据本公开的一方面的由图像分析模块执行以分析捕获的图像从而标识受众区域中的组的视觉标识符的示例性过程的流程图。
图18是根据本发明的一方面的由图像分析模块执行以分析捕获的图像从而基于视觉标识符的颜色或图案来标识这些组的成员的示例性过程的流程图。
图19示出了媒体递送系统的实施例的示意图。
图20示出了使用图19的媒体递送系统的示例性方法。
图21示出了根据本发明的一个方面的执行提供会场中的用户组的位置信息的过程的系统和装置的实施例的示意图。
图22是根据本公开的一方面的计算机处理系统的实施例的部件的框图。
图23是根据本公开的一方面的示例性会场的概念透视图,在会场中在各种展台处放置有图像捕获装置。
图24是根据本公开的一方面的用于提供关于在会场中在各种位置处的用户的位置信息的示例性过程的流程图。
图25是根据本公开的一方面的展台控制系统的示例性部件的框图。
图26是根据本公开的一方面的由展台控制系统执行以捕获展台区域中的注册用户的图像的示例性过程的流程图。
图27是根据本公开的一方面的由展台控制系统执行以捕获提供关于注册用户的可消费的信息的示例性过程的流程图。
图28是根据本发明的一方面的由展台控制系统执行以将在拍照机会(photoopportunity)处捕获的图像与注册用户关联的过程的流程图。
图29是根据本发明的一方面的由中心控制系统执行以维持和提供用于注册用户的位置信息和用于包括展台的位置的人群信息的过程的流程图。
图30是根据本发明的一方面的由中心控制系统执行以维持和提供可用于注册用户的可消费产品的识别的过程的流程图。
图31是根据本发明的实施例的由中心控制系统执行以获得和维持与注册用户关联的拍照机会区域所捕获的图像的过程的流程图。
图32是根据本公开的一方面的由中心控制系统执行以确定注册用户是否满足用于会场中的区域的所需标准的过程的流程图。
图33是根据本公开的一方面的由中心控制系统执行以将组中的注册用户的位置信息提供至组成员的过程的流程图。
图34是根据本公开的一方面的中心控制系统所存储的用于注册用户的数据记录的概念图。
图35是根据本公开的一方面的中心控制系统所存储的用于会场中的位置的数据记录的概念图。
图36是根据本公开的一方面的由中心控制系统执行以获得用户信息并生成注册用户记录的过程的流程图。
图37是根据本公开的一方面的由中心控制系统执行以将人群信息提供至注册用户的过程的流程图。
图38是根据本公开的一方面的由面部识别系统执行以存储注册用户的图像的数据记录的过程的流程图。
图39是根据本公开的一方面的由面部识别系统维持的面部图像记录的概念图。
图40是根据本公开的一方面的用于对某一位置的捕获的图像执行面部识别分析的软件的模块的概念图。
图41是根据本公开的一方面的由面部识别系统执行以根据某一区域位置的捕获的图像生成位置信息的过程的流程图。
具体实施方式
根据本公开的各个方面的系统和方法基于一组捕获的图像提供目标媒体内容。如本文中使用的,一“组”包括至少一个项目,使得“一组图像”可以包括仅单个图像或若干图像,但是不包括零个图像。应理解,任何捕获的、接收到的或生成的数据可以包括单个数据元素或多个数据元素。
出于本讨论的目的,“媒体内容”包括在回放期间可由人类感知的任何类型的内容。媒体内容的类型的示例包括但不限于视觉、音频、触觉、振动、气味、味道或人类用户可感知的任何其他形式的媒体。因此,媒体内容回放装置(media content playback device)可以是被配置为向用户播放媒体内容的任何合适的电子装置,例如,视频显示器、音频扬声器、盲文显示器、嗅觉仪或它们的任意组合。
优选地,至少一个显示器和图像捕获装置由媒体内容计算机系统访问和控制,该媒体内容计算机系统对照一个或多个数据库交叉引用(cross-reference)从一组捕获的图像中收集的信息以选择目标媒体内容。如本文中使用的,“计算机系统”包括计算、计算机或计算装置的任何合适的组合,诸如可以单独或集体操作的台式机、膝上型计算机、蜂窝电话、刀片(blades)、服务器、接口、系统、数据库、代理、对等点、引擎、模块或控制器。计算机系统至少包括处理器,其被配置为执行存储在有形的、非暂时性的计算机可读存储介质(例如,硬盘驱动器、固态驱动器、RAM、闪存、ROM等)上的软件指令。软件指令优选地将计算机系统配置为执行所公开的功能。在一些实施例中,计算机系统跨网络分布,而在其他实施例中,计算机系统可以包括仅单个嵌入式系统。
本公开的各方面体现为系统、方法或存储在一个或多个机器可读介质上的程序代码/指令。因此,各方面可以采取硬件、软件(包括固件、常驻软件、微代码等)或者软件和硬件方面的组合的形式,这些方面在本文中通常都统称为“电路”、“模块”或“系统”。可以根据平台(操作系统和/或硬件)、应用程序生态系统、界面、程序员偏好、编程语言、管理员偏好等中的任何一种来不同地组织示例说明中作为单独模块/单元提供的功能。
可以使用一个或多个非暂时性机器可读介质的任意组合。机器可读存储介质可以是例如但不限于采用电子、磁、光学、电磁、红外或半导体技术中的任何一种或组合来存储程序代码的系统、设备或装置。机器可读存储介质的更多具体的示例(非排他性列表)将包括以下示例:便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、便携式光盘只读存储器(CD-ROM)、光学存储装置、磁存储装置或上述的任意合适组合。在本文的上下文中,非暂时性机器可读存储介质可以是任何有形介质,其可以包含或存储由指令执行系统、设备或装置使用或与其结合使用的程序。非暂时性机器可读存储介质可以是机器可读的,但是优选地,程序指令不存储在非暂时性存储介质上。
机器可读信号介质可以包括例如在基带中或作为载波的一部分的具有嵌入其中的机器可读程序代码的传播的数据信号。这种传播的信号可以采取多种形式(包括但不限于电磁、光学或其任何合适的组合)中的任何一种。机器可读信号介质可以是任何机器可读介质,其不是机器可读存储介质并且可以通信、传播或传输供指令执行系统、设备或装置使用或与其结合使用的程序。
诸如C、C++、C#、Java、JavaScript或呈现在机器可读介质上的任何其他编程语言、汇编语言或类似编程语言的程序代码可以使用任意合适的介质(包括但不限于无线、有线、光纤电缆、RF等,或者前述的任何适当组合)来传输。
可以以一种或更多种编程语言的任意组合编写用于执行本公开的各方面的操作的计算机程序代码,所述编程语言包括:面向对象的编程语言,诸如编程语言、C++等;动态编程语言,诸如Python;脚本语言,诸如Perl编程语言或PowerShell脚本语言;以及常规的过程编程语言,诸如“C”编程语言或类似的编程语言。程序代码可以完全在独立的机器上执行,可以在多台机器上以分布式方式执行,并且可以在一台机器上执行,同时在另一台机器上提供结果和/或接受输入。
程序代码/指令还可以存储在非暂时性机器可读介质中,该非暂时性机器可读介质可以指导机器以特定方式工作,使得存储在机器可读介质中的一些指令产生包括以下指令的制品:该指令实现流程图和/或框图的(一个或多个)块中指定的功能/动作。
如本文中使用的,“模块”包括软件或硬件功能单元,其接收发送至模块的数据,转换数据,并发送发送至模块的数据。优选地,该数据被发送至保存经转换的数据的存储装置。例如,面部识别模块可以接收图像数据,识别该数据内的面部图案,根据所识别的面部图案生成面部特征(fingerprint),使用所生成的面部特征来从数据库检索关联的数据,并且随后可以将经检索的关联的数据发送至分析模块以用于进一步的处理。
如本文中使用的,“图像特征”是可被分析以提供特性的图像的任意部分。这些特性可以是唯一的(例如,用于对人的脸部照片执行面部识别的面部图像特征),或者它们可以是非唯一的(例如,一组中的多个人中的一个或多个穿着的制服)。同样地,标识符也可以是唯一的(例如,一个人的社会安全号码或UID(系统分配的唯一标识符)),或非唯一的(例如,一组学生所上学校的名称)。预期的图像特征包括面部特征、车牌号、徽标、条形码、服装/配件,或者可以用特征标记的任何其他合适的图像。预期的标识符包括社会安全号码、UID、车牌字母数字代码、汽车品牌/型号以及团体名称(例如,学校名称、班级名称、公司名称)。
如本文中使用的,“属性”包括任何特性,并且可以以任何合适的形式(例如,数值或字母数字字符串)来保存。预期的属性包括对商品和/或服务以及人口统计的偏好。
提供流程图以帮助理解图示,并且不用于限制权利要求的范围。流程图描绘了可以在权利要求的范围内变化的示例性操作。可以执行其他操作;可以执行更少的操作;这些操作可以并行执行;并且可以以不同的次序执行这些操作。流程图图示和/或框图的每个框以及流程图图示和/或框图中的框的组合可以通过使用一个或多个处理器对计算机系统执行程序代码来以编程方式实现。
可以为本文中描述为单个实例的部件、操作或结构提供多个实例。各种部件、操作和数据存储之间的边界可以被任意定义。优选地,在特定说明性配置的上下文中示出特定操作。可以设想功能的其他分配,并且其可以落入本公开的范围内。通常,示例配置中被示出为单独的部件的结构和功能可以实现为组合的结构或部件。类似地,示出为单个部件的结构和功能可以被实现为单独的部件。这些和其他变型、修改、添加和改进可以落入本公开的范围内。
云计算:上述系统和技术在云计算环境中适用且有用。云计算是指这样的计算能力:其可在计算资源与其底层技术架构(例如,服务器、存储器、网络)之间提供抽象概念,从而能够对共享的可配置计算资源池进行方便的按需网络访问,可配置计算资源池可以以最小的管理工作量或服务提供商交互迅速地进行配置和发布。术语“云”旨在表示使用网络电子耦接的多个不同的计算机系统,并且云计算允许共享资源,例如,软件、数据、处理器、带宽和像公共事业一样按需可用的信息。
示例性云计算提供商在线递送商业应用程序,该商业应用程序可从另一网络服务或像网络浏览器一样的软件访问,而软件和数据远程存储在服务器上。云计算架构可以使用分层方法以用于提供应用程序服务。第一层是在客户端计算机处执行的应用程序层。在应用程序层之后,可以是云平台和云基础结构,然后是包括为云特定服务设计的硬件和计算机软件的“服务器”层。各种公开的系统可以是使用上述创新技术的服务器层的一部分。
图1示出了根据本公开的一方面的用于提供媒体内容以补充展台的系统。该系统包括:面部识别模块102和/或图像分析模块106;内容控制模块104;以及展台控制模块108,所有这些通过网络110彼此通信连接。便携式个人通信装置120和计算机125也可以连接至网络110。尽管示出为图1中的单独的装置或功能,但是内容控制模块104、图像分析模块106和展台控制模块108中的一个或多个以及面部识别模块102可以由单个计算系统提供。可替代地,提供面部识别模块102、内容控制模块104、图像分析模块106和展台控制模块108中的一个或多个的过程可以分布在经由网络110通信连接的多个系统上。
面部识别模块102可以通过计算机系统来实现或功能化,该计算机系统包括存储器和处理单元,以例如通过捕获一组图像并针对包含面部特征与标识符之间的关系的数据库对面部特征进行交叉引用来执行用于提供面部识别的过程。实现面部识别模块、功能或系统的计算机系统可以包括一个或多个服务器、路由器、计算机系统和/或存储器系统,这些部件经由网络通信连接以提供面部识别和/或其他图像分析,并且返回可用于导出适当的媒体内容的标识符。
内容控制模块104可以通过计算机系统来实现或功能化,该计算机系统包括存储器和处理单元,以执行用于存储和提供用于会场中的一个或多个展台的媒体内容的过程。内容控制模块104还可以有利地存储和更新在确定要提供至展台的媒体内容时使用的受众信息。内容控制功能可以通过用于会场的中心控制系统来提供。具体地,内容控制模块104可以通过这样的系统来实现或功能化:该系统包括一个或多个服务器、路由器、计算机系统和/或存储器系统,这些部件经由网络通信连接,以存储和提供用于会场中的一个或多个展台的媒体内容,以及存储和更新在确定要提供至展台的内容时使用的受众信息。
图像分析模块106可以通过计算机系统来实现或功能化,该计算机系统包括存储器和处理单元,以执行用于提供图像分析的过程。实现图像分析模块、功能或系统的计算机系统可以包括一个或多个服务器、路由器、计算机系统和/或存储器系统,这些部件经由网络通信连接以提供面部识别和/或其他图像分析。
展台控制模块108可以通过计算机系统来实现或功能化,该计算机系统控制展台区域中的装置,其包括图像捕获装置和用于补充展台的媒体内容的各种回放装置。有利地,一个计算机系统可以控制用于多于一个展台的装置。在特定实施例中,展台控制模块108可以通过这样的系统来实现或功能化:该系统包括一个或多个服务器、路由器、计算机系统、存储器系统、图像捕获装置和/或媒体回放装置,这些部件经由局域网通信连接以获得和呈现用于展台的媒体内容。
网络110可以有利地是互联网。可替代地,网络110可以是广域网(WAN)、局域网(LAN)、或者可以通信地用来连接图1中所示的各种装置和/或模块的互联网、WAN和LAN的任意组合。
便携式个人通信装置120可以是智能电话、平板电脑、个人数字助理(PDA)、膝上型计算机或经由无线连接122可连接至网络110的任何其他装置。计算机125可以经由常规的“有线”或无线连接有利地连接至网络110。计算机125可以是例如台式计算机、膝上型计算机、智能电视和/或连接至网络110的任何其他装置。便携式个人通信装置120和/或计算机125允许用户与上述模块中的一个或多个进行交互,以提供信息,诸如例如要添加至用户的受众成员信息的个人信息。在一些实施例中,便携式个人通信装置120或媒体递送系统128可以用作用于展台的补充媒体内容的回放装置。示例性媒体递送系统包括平板计算机、扬声器、VR装置、显示器、触摸屏、台式计算机、终端、嗅觉生成器、振动马达、4D影院和它们的组合。
尽管以上参照图1描述了装置和/或功能模块的特定系统,但是添加、移除和/或组合各种装置和/或模块的其他系统架构可以用于执行根据本公开的各个其它方面的各种过程。
图2是示出了可以根据本公开的一些方面使用的处理系统200的架构的示例的高级框图。处理系统200可以表示提供面部识别功能、内容控制功能、图像分析功能、展台控制功能和/或其它部件或功能的计算机系统。
处理系统200包括一个或多个处理器205,其与存储器210可操作地通信,并且耦接至总线系统212。如图2中所示的总线系统212是通过适当的网桥、适配器和/或控制器连接的任何一个或多个分离的物理总线和/或点对点连接的示意性表示。因此,总线系统212可以包括例如系统总线、外围部件互连(PCI)总线、超传输或工业标准架构(ISA)总线、小型计算机系统接口(SCSI)总线、通用串行总线(USB)或电气与电子工程师协会(IEEE)标准1394总线(有时称为“火线”)。
一个或多个处理器205是处理系统200的中央处理单元(CPU),由此控制其整体操作。在某些方面,一个或多个处理器205通过执行存储在存储器210中的软件来实现这一点。(一个或多个)处理器205可以是或者可以包括一个或多个可编程通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑装置(PLD)等,或者这样的装置的组合。
存储器210表示任何形式的随机存取存储器(RAM)、只读存储器(ROM)、闪存等,或者这样的装置的组合。存储器210包括处理系统200的主存储器。实现以下描述的过程步骤的指令215可以驻留在存储器210中,并且由(一个或多个)处理器205从存储器210执行。
还有利地通过总线系统212可操作地连接到(一个或多个)处理器205的是一个或多个内部或外部大容量存储装置220和网络接口222。(一个或多个)大容量存储装置220可以是或可以包括任何以非易失性方式存储大量数据的常规介质,诸如一个或多个固态盘、磁盘或光盘。网络接口222使处理系统200能够通过网络与远程装置(例如,存储服务器)通信,并且可以是例如以太网适配器、光纤通道适配器等。
处理系统200还有利地包括一个或多个输入/输出(I/O)装置217,其可操作地耦接至总线系统212。I/O装置217可以包括例如显示装置、键盘、鼠标等。
图3示出了根据本发明的一方面的展台显示区域。如图3中所示,展台315位于房间中。例如,展台315可以安装在房间的墙(未示出)上,放置在地板上或者悬挂在天花板上。可替代地,展台315可以是舞台或其他升高的平台,在该平台或其他升高的平台上,可以上演由演员、艺术家、音乐家等进行的表演。
为了提供补充媒体内容,可以提供一个或多个媒体回放装置,以向受众(audience)呈现补充媒体内容。例如,一个或多个受众成员和/或展台职员可以携带或穿戴诸如智能电话、平板计算机或其他媒体回放装置的个人装置。该个人装置可以经由无线连接与展台控制模块通信,或者直接与展台控制模块通信,或者根据各个方面通过网络连接与展台控制模块通信以获得和/或呈现补充媒体内容。
在图3中,回放装置被示出为显示器305和扬声器320。显示器305可以是监控器或其它视频回放装置,其定位为接近展台315以显示用于展台315的补充媒体内容的视频内容。扬声器320是听觉回放装置,其可以有利地安装到墙上,或者接近墙立着,位于显示器305之下,或者在房间的其他地方,并且其回放补充媒体内容中的听觉内容。通常,显示器305、扬声器320和/或其它回放装置可以定位或安装在接近展台315的任何地方,并且它们被有利地放置为提供受众区域325的足够的覆盖,以允许期望数量的受众成员观看、听到,和/或以一些其它方式感知媒体内容的呈现。
受众区域325被限定为接近展台315。在图3中,受众区域325是展台315前方的地板;然而,受众区域325可以是受众可期望站立、坐下或以其他方式观看展台的任何限定区域。例如,受众区域325可以是展台315前方的长凳或座位。在一些实施例中,传感器330(诸如例如压力传感器、运动检测器或感测至少一个受众成员的存在的任何其它类型的传感器)定位在受众区域325中或其附近。
图像捕获装置310(诸如例如相机(优选地,摄像机))被定位为接近展台315,例如,在墙中,并且其聚焦在受众区域325。图像捕获装置310在受众观看显示器305和/或展台315时捕获受众的静止图像和/或视频图像。尽管被示出为墙挂式安装接近展台315,但是图像捕获装置310可以放置在展台315的区域中的任何地方,其将允许装置捕获位于受众区域325中和/或接近受众区域325的受众成员的至少一部分(如果不是所有)的图像。
尽管以上参照图3描述了根据本发明的一方面的示例性展台区域,但是相对于彼此添加、移除、组合和/或移动部件的其他配置是可能的。
图4A示出了根据本发明的另一方面的使用展台的受众区域的捕获的图像的图像处理来提供用于展台的补充媒体内容的一般方法的流程图。过程4000接收关于受众成员的信息(4005)。根据一些实施例,该信息可以是个体受众成员特有的。根据一些其它实施例,该信息可以属于包括受众成员的组。出于该讨论的目的,组可以是具有可用于确定要提供的媒体内容的共同特性的任何一组受众成员。组的示例可能包括但不限于班级、旅行团、家庭和残障人士。
随后为受众成员分配视觉标识符(4010)。根据一些实施例,视觉标识符可以是个体受众成员特有的。例如,受众成员的面部图像可以在这些实施例中的许多实施例中被分配为受众成员的视觉标识符。根据一些其它实施例,视觉标识符可以是分配给受众成员的相关组中的每个成员的某种视觉标识符。例如,视觉识别符可以是但不限于该组穿戴的服装的特定颜色或图案,或者可以是会场分配给该组的每个成员的组中的每个成员所穿戴或持有的挂绳、徽章或标签上的颜色、图案或符号。
存储包括与受众成员关联的标识符、视觉标识符和确定要呈现的媒体内容时相关的信息的记录(4015)。根据一些实施例,该记录是识别组名称或其它组标识符、与该组关联的视觉标识符和组信息(其为确定媒体内容时相关的信息)的组记录。根据一些其它实施例,该记录可以是受众成员记录,其存储个体受众成员的名字或其它标识符、受众成员的面部图像或一些其它特定视觉标识符、以及确定用于受众成员的媒体内容时相关的成员信息。
过程4000捕获接近展台的受众区域中的受众成员的图像(4020)。随后对捕获的图像执行图像分析过程以标识(identify)捕获的图像中的每个视觉标识符(4025)。如以下讨论的,可使用的图像处理的两个示例包括用于组视觉标识符的颜色、图案或符号识别以及用于受众成员的面部图像的面部识别。该计算机系统可以被编程为从一组图像导出这样的信息,并且根据表格或数据库对这些信息进行交叉引用来做出决定。例如,该计算机系统可以分析一组图像,以确定大多数实体所穿的颜色、大多数实体在标签上具有的图案、在一组图像中存在来自于一组识别出的符号中的什么符号,和/或可以被编程为从一组图像中导出面部特征。获得每个被标识的(identified)视觉标识符的成员和/或组信息(例如,具有适当的用户信息)(4030)。还可以由图像分析装置或模块或者面部识别装置或模块来确定或获得人口统计学信息以及可选地整体上针对受众的其他与受众有关的信息(4035)。标识符信息可以输入到将标识符与媒体内容进行匹配的表格或数据库中(例如,向大多数实体穿着红色的组显示媒体内容A,向大多数实体穿着蓝色的组显示媒体内容B),或者输入到将标识符与属性进行匹配的表格或数据库中,然后将其用作另一数据库中的查询以选择媒体内容(例如,说英语的人戴上方形符号,说西班牙语的人戴上三角形。向说英语的人显示英语媒体内容,同时向说西班牙语的人显示西班牙语媒体内容)。随后基于所获得的组和/或用户信息和/或根据所确定的受众的人口统计学信息来确定要向受众呈现的媒体内容(4040)。根据一些方面,还可以根据直接(例如,直接分析一组图像)或间接(例如,通过针对一个或多个数据库交叉引用来自图像的信息来进行间接分析)导出的属性来选择要提供的每个媒体内容的回放参数。媒体内容和/或回放参数随后可以被提供至展台控制装置或模块以使用媒体回放装置进行回放(4045),在此之后,过程4000结束。
图4B示出了用于基于组信息和将受众成员标识为特定组的一部分的视觉标识符来提供根据本发明的一方面的用于展台的补充媒体内容的过程400的流程图。在一些特定实施例中,所执行的图像处理是颜色识别。过程400捕获接近展台的受众区域中的受众成员的图像(405)。
随后对受众区域的捕获的图像执行图像分析(410),以(例如,利用适当的组信息)标识当前的受众信息(415)。还可以通过以上提及的图像分析装置或模块106来确定或获得作为整体的受众的人口统计学信息以及可选地其它受众相关信息(420)。随后基于从受众区域的捕获的图像和/或从所确定的受众的人口统计学信息标识出的当前的受众信息来确定要向受众呈现的媒体内容(425)。根据一些方面,还可以确定或获得要提供的每个媒体内容的回放参数。将媒体内容和/或回放参数提供至展台控制装置或模块以使用媒体回放装置进行回放(430),在此之后,过程400结束。
图4C示出了根据本发明的另一方面的使用受众区域的捕获的图像中的受众成员的面部识别来提供用于展台的补充媒体内容的过程的流程图。过程450捕获接近展台的受众区域中的受众成员的一个或多个图像(455)。(一个或多个)捕获的图像或从这些图像导出的面部图像特征可以被有利地提供至面部识别装置或模块(460)。面部识别装置或模块标识出受众区域的捕获的图像中的包括一个或多个受众成员的面部图像的期望部分(465)。
在使用面部识别过程的实施例中,可以对捕获的图像的每个被标识的部分执行面部识别功能,以(例如,利用适当的用户信息)标识每个受众成员(470)。还可以通过面部识别装置或模块(优选地通过针对图像、关系和/或属性数据库交叉引用被标识的信息)来确定或获得作为整体的受众的人口统计学信息以及可选地,其它受众有关的信息(475)。随后基于从一组图像收集的信息来确定要向受众呈现的媒体内容,从一组图像收集的信息例如为从图像的包括面部的部分标识出的受众成员的人的标识符(针对使该人的标识符与媒体内容关联的表格或数据库交叉引用的)、人的属性(针对使该人的标识符与属性关联的表格或数据库交叉引用的)、或者人的关系(针对使该人的标识符与另一标识符关联的表格或数据库交叉引用的),并且/或者从所确定的受众的人口统计学信息来确定要向受众呈现的媒体内容(480)。在使用人的标识符和人口统计学信息两者的实施例中,两种类型的数据可以用作属性数据库中的查询,该属性数据库返回可以以任何适当的方式合计(aggregate)或加权的媒体内容或属性。根据一些方面,还可以确定要提供的每个媒体内容的回放参数。媒体内容和/或回放参数被提供至展台控制装置或模块以使用媒体回放装置进行回放(485),在此之后,过程450结束。
以上描述了根据本公开的一个方面的提供媒体内容以补充展台的整个过程。然而,添加、组合、移除和/或重新排序过程的步骤的其他过程是可能的。
如上所述,在采用面部识别功能的实施例中以及在采用识别颜色、图案或符号的实施例中,展台控制装置或模块捕获受众的图像,并且回放基于捕获的图像选择的媒体内容。图5是根据本公开的一方面的展台控制装置或模块500的部件的框图,展台控制装置或模块500包括控制器505、图像捕获装置510、显示器515和音频系统520。
控制器505可以实现为处理系统,该处理系统在捕获受众区域的图像时控制图像捕获装置510,以获得基于对捕获的图像的分析而提供的媒体内容信息。根据一些方面,控制器505还可以控制展台的一个或多个部件。这些部件可以包括例如在展台中提供运动的阀门、液压升降机、电子动画设备,以及接收指令以执行有助于展台的展示的任务的任何其他部件。在一些其他方面,用于多于一个展台的控制系统可以由处理系统提供。
图像捕获装置510可以是捕获静止图像的相机和/或捕获视频图像的摄像机。在图5中所示的示例性实施例中,图像捕获装置510是单独的装置,其包括经由无线或有线连接通信连接至控制器505的处理系统。在一些其它方面中,图像捕获装置510是包括控制器505的处理系统或模块的I/O装置。如以上所讨论的,图像捕获装置510被放置成使得装置以捕获图像的方式聚焦在受众区域,所述图像包括受众的面部图像和/或与受众的成员关联的特定颜色、图案或符号的图像。图像捕获装置510还可以捕获、记录或以其他方式提供其他信息,诸如用于成像对象的深度信息。
显示器515通信连接到控制器505。在一些实施例中,显示器515可以是由控制器505的处理系统控制的监控器。根据一些其它方面,显示器515可以是由控制器505控制的照明元件照明的一个或多个标记(sign)。可替代地,显示器515可以是允许与受众成员交互的触摸屏。
音频系统520可以包括放置在展台和/或受众区域周围的一个或多个扬声器,并且其还可以包括通信连接到控制器505的处理系统。在一些实施例中,音频系统可以包括音频换能器,其被配置为控制器505的I/O装置。
尽管以上参照图5描述了展台控制装置或模块的示例性实施例,但是添加、组合、重新布置和/或移除部件的其他实施例是可能的。
图6示出了根据本公开的一方面的由展台控制装置或模块执行以提供补充媒体内容的过程600的流程图。在过程600中,通过例如运动传感器、热传感器、近距离传感器、和/或可检测受众区域中的一个或多个受众成员的存在的任何其他类型的传感器来在受众区域中检测受众(605)。
例如响应于检测到受众区域中的一个或多个受众成员,捕获受众区域的图像(610)。可替代地,图像捕获装置可以以预定时间间隔定期捕获图像,或者可以连续地捕获受众区域的视频馈送(video feed)。
捕获的图像可选地与关于图像的其他信息一起被发送至内容控制装置或模块(615)。这种其他图像信息可以包括例如相机设置、深度信息、照明信息和/或与图像有关的其他类似信息。图像信息可以被单独发送,或者其可以在捕获的图像中被发送或与捕获的图像一起被发送。可选地,视频馈送可以被提供至内容控制装置或模块。展台控制装置或模块可以可选地监测视频馈送,并且仅发送这样的图像:其包括受众成员,并且当在受众区域中检测到受众时从馈送中获取该图像。展台控制装置或模块可以可选地在发送图像之前执行图像处理以改善图像品质,并且/或者其可以可选地将面部图像从捕获的图像分离,并且仅将图像的包括面部图像的部分发送至内容控制装置或模块。
如以下进一步讨论的,展台控制装置或模块接收媒体内容信息(620)以补充基于捕获的图像确定的展台。媒体内容信息有利地包括要呈现的媒体内容,并且其还可以包括标识符,诸如例如,互联网地址、文件目录标识符、或可用于获取媒体内容和/或用于流传输来自被标识的内容提供者的内容的其他标识符。视频内容信息可以可选地包括用于调整回放装置的参数以提供期望的回放的回放参数。例如,媒体内容信息可以包括亮度、对比度、分辨率或用于视频回放的其它信息,并且/或者其可以包括用于音频回放的音量和/或平衡信息。
随后通过从展台控制装置或模块中的存储器读取和/或通过从一个或多个特定媒体内容存储系统接收来获得媒体内容(625)。可以可选地使用自适应比特率流传输或来自内容提供者的一些其他流传输技术来流传输媒体内容。
随后可以基于接收到的媒体内容信息来调整单个的回放装置的回放参数(630),并且随后在过程600可以结束的点处通过回放装置来呈现媒体内容(635)。然而,在一些实施例中,可以在回放期间定期重复该过程,以更新要呈现的媒体内容,以解释随着受众成员在回放期间到达和离开而改变的受众的组成。
尽管以上参照图6讨论了根据本公开的各方面的由展台控制装置或模块执行以提供用于补充展台的媒体内容的示例性过程,但是由展台控制装置或模块执行以提供添加到、组合、重新布置或移除所描述的步骤中的任一个的媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
图7示出了由内容控制装置或模块执行以基于捕获的图像来确定要被提供至展台控制装置或模块的媒体内容的过程700的流程图。可以针对接收到的每个图像执行过程700。因此,可以执行过程700一次,以相应地确定一次要呈现的媒体内容,或者可替代地,可以在媒体内容的呈现期间定期执行过程700,以更新要呈现的媒体内容,以解释展台的受众随着时间的流逝的变化。
在过程700中,从展台控制装置或模块接收受众区域的捕获的图像(705)。如以上所讨论的,可以可选地与图像一起接收额外的图像信息。在一些实施例中,图像随后可以被提供至面部识别装置或模块和/或图像分析装置或模块,以用于图像分析(710)。内容控制装置或模块可以在将图像提供至面部识别装置或模块和/或图像分析装置或模块之前做出一些图像处理。例如,该分析可以包括:隔离图像中的面部图像和/或视觉组标识符(例如,预先定义的颜色、图案或符号)、修改图像以改善图像品质、以及/或者分析图像以确定或获得其它图像信息。在一些实施例中,可以通过捕获的图像将这样的其他图像信息提供至面部识别装置或模块和/或图像分析模块。
过程700接收受众信息,该受众信息可以包括在捕获的图像中被标识的受众成员和/或组的标识符(715)。如以下进一步讨论的,标识符可以来自于这样的受众信息:内容控制装置或模块或一些其它系统、装置或模块先前已将该受众信息提供至图像分析装置或模块和/或面部识别装置和/或模块。在一些方面,可以在被标识的受众成员和/或组的列表中提供标识符。还接收受众的人口统计学信息(720)。人口统计学信息是关于图像分析装置或模块和/或面部识别装置或模块在分析图像期间生成的受众的特性的信息。人口统计学信息可以是每个受众成员的列表的形式,或者其可以是代表一个或多个特定特性的量化的数字的形式。人口统计学信息可以包括例如受众中的人的年龄、国籍、种族、身高和/或性别。可以可选地提供其他受众信息,诸如,受众的(甚至是个体受众成员的)一般情绪状态。
内容提供者装置或模块随后获得与所接收的每个标识符关联的受众成员信息和/或组信息(725)。受众成员信息可以是由内容提供者装置或模块所存储的关于被标识的受众成员的信息,该内容提供者装置或模块提供对特定受众成员的兴趣和要求的洞察,从而指示该成员将有可能感兴趣的媒体内容。组信息可以是由内容提供者装置或模块所存储的关于被标识的组的信息,该内容提供者装置或模块提供对特定受众成员的兴趣和要求的洞察,从而指示该成员将感兴趣的媒体内容。
图8A示出了根据本公开的一方面的由内容提供者装置或模块维持的受众成员记录的示例。受众成员记录800有利地包括标识符805,诸如受众成员的姓名和成员编号。记录800还可以包括受众成员已经提供给内容提供者装置或模块的或者在注册过程期间从受众成员捕获的成员的面部图像810。记录800还包括关于受众成员的特定信息的字段,其可用于确定受众成员可能最感兴趣的媒体内容。记录800中的字段可以有利地包括一个或多个个人特性的字段,诸如例如,成员的年龄815、成员的教育水平820、成员的身高825、成员的特定兴趣830、成员的任何特殊需求835和成员使用的主要语言840。特定兴趣的示例可以包括例如该成员有兴趣进行理解的学习领域(诸如科学和历史)。特殊需求的示例可以包括:例如,用户可能需要以感知媒体内容的任何视觉辅助、音频辅助和/或其他辅助,以及成员由于物理限制而可能需要以与媒体内容交互的要求(诸如,特别可访问的输入)。每个记录可以可选地包括其他字段和/或定义这些字段中的特定类别的子字段,其可以用于确定要提供的适当的媒体内容和/或回放装置为了成员最好地体验内容而可能需要的呈现要求。
图8B示出了根据本公开的另一方面的由内容提供者装置或模块维持的组记录850的示例。组记录850有利地包括组标识符855,诸如组的名称或组号。记录850还包括成员已经提供至内容提供者装置或模块的或者在注册过程期间从受众成员捕获的受众成员的组视觉标识符860。记录850还包括关于组的特定信息的字段,其可用于确定组成员可能最感兴趣的媒体内容。记录850中的字段可以有利地包括一个或多个组特性的字段,诸如组的年龄水平或平均年龄865、组的教育水平870、组的特定兴趣875、组成员的任何特殊需求880以及组成员使用的主要语言885。每个记录可以可选地包括其它字段和/或定义这些字段中的特定类别的子字段,其可以用于确定要提供的适当的媒体内容和/或回放装置为了成员在感知内容时具有尽可能最好的体验而可能需要的呈现要求。
返回图7中所示的过程700,过程700使用每个被标识的受众成员和/或被标识的组的受众成员信息;和/或人口统计学信息,以确定要呈现的用以补充展台的媒体内容(730)。在将要通过受众成员的个人装置回放媒体内容的情形中,过程700可以可选地仅使用特定成员的成员信息来确定要向该成员提供的媒体内容。在一些实施例中,即使不存在被标识的受众成员的特定受众成员记录,人口统计学信息也将用于确定要提供的内容。
根据一些方面,组、受众成员、和/或人口统计学信息可以应用于算法,该算法随后确定最广泛的受众成员将最感兴趣的媒体内容。例如,该算法可以是人工智能算法,诸如神经网络算法,其采用可用的受众成员和/或人口统计信息的至少一部分,并且选择的媒体内容:其可用于将吸引最大数量的受众成员的展台。例如,该算法可以选择以由最大数量的被标识的受众成员使用的语言进行音频呈现,或者选择由在人口统计学或组信息中被标识的最大数量的特定国籍所确定的语言进行音频呈现。然后,该算法可以为第二最大数量的受众成员或另一组所使用的语言选择隐藏式字幕轨道。
根据一些方面,可以确定所提供的媒体内容所覆盖的主题以吸引最大数量的受众成员。例如,该算法可以确定大多数受众由对展台的科学方面而不是历史方面感兴趣的成员组成。如此,该算法选择针对展台的科学方面的视频和音频媒体内容。该算法还可以在选择内容时考虑受众成员的年龄。例如,如果受众的平均年龄较年轻,则该算法可以选择针对较年轻学生的内容,以及如果确定受众平均年龄在成人范围内,则该算法可以选择更成熟的内容。
另外,该算法可以基于服务参数的质量来加权受众成员信息中的一些。例如,一些受众成员可能已经购买了使他们有权享有比其他受众成员优惠的待遇的服务订阅。如此,在确定要提供的内容时,可以在算法中为这些成员的信息赋予增加的权重。
根据一些方面,该算法可以对被标识的成员的信息赋予比全体受众的人口统计学信息更多或更少的权重。可替代地,该算法可以赋予人口统计学信息更多的权重,以试图吸引最大数量的受众成员。
根据一些方面,受众成员的特殊需求可以包括在特定展台或在整个会场要花费的时间分配。如此,算法可以使用该时间分配信息来选择具有符合一个或多个受众成员的时间分配需求的回放时间的媒体内容。在这些方面中的一些方面中,媒体内容还可以包括将(一个或多个)受众成员引导到其他展台的建议,以便在分配的时间中引导该成员穿过会场并且/或者观看一个或多个所识别的成员可能最感兴趣的展台。
一旦该算法已经确定要提供的媒体内容和/或满足受众的需求的回放参数,就生成媒体内容信息和/或回放信息并且将其提供至展台控制装置或模块(735),至此,过程700可以结束。如以上所讨论的,可以定期地重复过程700以更新媒体信息和/或回放参数,以解释受众的组成的变化。
以上参照图7描述了根据本公开的实施例的由内容控制装置或模块执行的用于选择媒体内容以补充展台的示例性过程。然而,根据其它实施例,添加、组合、重新布置和/或移除上述一个或多个步骤的用于选择媒体内容的其他过程是可能的。
在一些实施例中,可以根据本公开的各个方面通过面部识别系统(即,装置或模块)来执行对受众区域的捕获的图像的分析。为了执行面部识别,面部识别装置或模块需要受众成员的面部图像,以执行比较。根据本公开的一些方面,成员的面部图像在用于生成受众成员记录(诸如以上参照图8A所述的记录)的注册过程期间由受众成员提供并且/或者由系统捕获。根据一些其它实施例,组视觉标识符(诸如,颜色、符号或图案中的一个或多个)由生成组记录的用户提供或者在其他地方生成,并且在注册过程期间生成组记录。颜色、图案或符号可以以衣物物品(例如,帽子、T恤或围巾)、徽章、别针、挂绳、旗帜、横幅、气球或可由受众中的个体穿戴或携带的任何其他合适的物品的形式被提供至特定受众中的每个个体。可以由根据本公开的各个方面的中心控制系统或内容控制装置或模块来执行注册过程。随后通过注册过程将受众成员的面部图像和/或标识符以及/或者视觉组标识符提供至面部识别装置或模块和/或图像分析模块。
图9A示出了根据本公开的一方面的由中心控制系统或内容控制装置或模块执行的注册过程900的流程图,其中,使用了受众成员的面部识别。在注册过程900中,接收正在利用系统进行注册的受众成员的面部图像(905)。例如,受众成员可以提供存储在该受众成员的正使用其进行注册的用户装置上的面部图像。在该情形中,过程900可以发出命令(例如,通过无线通信),这些命令指导用户装置使用与用户装置关联的图像捕获装置来捕获面部图像,并将图像提供至过程900。过程900还可接收成员的受众成员信息(910)。根据一些方面,注册成员可以将信息输入到将信息提供给过程900的个人装置。受众成员信息可以包括以上参考图8A讨论的信息的至少一部分。然而,该信息还可以包括使用特定算法选择媒体内容可能需要的任何信息。
生成包括所接收到的受众成员信息和所捕获的面部图像的受众成员记录(915)并将其存储在受众成员数据库中(920)。所捕获的面部图像和受众成员的标识符被提供至面部识别装置或模型(925),随后过程900可以结束。
以上参照图9A描述了根据本公开的实施例的用于注册受众成员的示例性过程。根据其它实施例,添加、组合、重新布置和/或移除上述一个或多个步骤的其他注册过程是可能的。
图9B示出了由根据本公开的一方面的中心控制系统或内容控制装置或模块使用受众成员的组的组标识符来执行以确定受众信息的注册过程950的流程图。在注册过程950中,接收正在利用系统进行注册的组的视觉标识符信息(955)。例如,如上所述,可以向组的成员提供要携带或穿戴的并且显示特定颜色、符号或图案的物品以进行注册。过程950还可以接收成员的组信息(960)。根据一些方面,注册组的用户可以将信息输入到将信息提供给过程900的个人装置。组信息可以包括以上参考图8B讨论的信息的至少一部分。但是,该信息还可以包括使用特定算法选择媒体内容可能需要的任何信息。
生成包括所接收到的组标识符信息和组的组视觉标识符的组记录(965),并且将其存储在组数据库中(970)。组视觉标识符信息和组的标识符被提供至图像分析装置或模块(975),并且过程900可以结束。
以上参照图9B描述了根据本公开的实施例的用于注册组的示例性过程。根据其它实施例,添加、组合、重新布置和/或移除上述一个或多个步骤的其他注册过程是可能的。
图10A示出了根据本公开的一些实施例的由面部识别装置或模块响应于接收到受众成员的面部图像和标识符而执行的过程1000,其使用面部识别来确定受众信息。在过程1000中,面部识别装置或模块从中心控制系统或内容控制装置或模块接收受众成员的面部图像和标识符(1005)。生成并存储面部识别记录(1010)。如以下进一步讨论的,面部识别记录的生成可以包括例如分析图像,以生成可在面部识别过程期间用于图像比较的面部参数。
以上参照图10A描述了根据本公开的实施例的用于在面部识别系统中获得受众成员面部图像的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略上述一个或多个步骤的用于获得面部图像的其他过程是可能的。
图10B示出了根据本公开的一些实施例的由图像分析装置或模块响应于接收到组的组标识符和组视觉标识符信息而执行的过程1050,其使用图像分析来确定受众信息。在过程1050中,图像分析装置或模块从中心控制系统或内容控制装置或模块接收组的组标识符和组视觉标识符信息(1055)。生成并存储组记录(1060)。如以下进一步讨论的,组记录的生成可以包括例如分析组视觉标识符的图像,以生成可在图像分析过程期间用于图像比较的图像参数。
以上参照图10B描述了根据本公开的实施例的用于在图像分析系统中获得组信息的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略上述一个或多个步骤的用于获得组信息的其他过程是可能的。
根据本发明的一些方面,执行对捕获的图像中的受众成员的面部识别以提供受众信息,和/或图像分析用于标识受众中的组。以下参照图11、图12、图13A和图13B讨论根据本发明的一些方面的由面部识别装置或模块执行面部识别的过程和数据结构。以下参照图14至图17来讨论根据本发明的一些方面的用于通过图像分析装置或模块标识受众中的组的过程和数据结构。
图11是根据本公开的一方面的用于面部识别记录的概念数据结构。面部识别记录1100包括受众成员的标识符1105、接收到的面部图像1110、和用于面部识别比较的面部参数1115。标识符可以是例如受众成员的姓名和/或昵称,或者标识符可以是将图像与由内容控制装置或模块和/或中心控制系统所存储的特定受众成员记录关联的数字或字母数字字符串。
尽管以上参照图11描述了根据本公开的实施例的示例性面部识别记录,但是根据其它实施例,添加、组合、重新布置和/或省略信息的其他面部识别记录是可能的。
图12中示出了根据本公开的实施例的执行面部识别过程的软件和/或硬件模块。面部识别系统1200包括接收模块1205、面部图像标识符模块1210、面部图像分析模块1215、可生成其它信息(具体地,人口统计学信息)的人口统计学信息模块1220、面部识别模块1225和受众特性模块1230。
接收模块1205接收捕获的图像,并处理捕获的图像以使该图像符合执行用于面部识别分析的各种后续处理所需的参数。根据一些方面,图像处理可以包括例如焦点调整、颜色调整、边缘限定以及使图像符合后续模块的要求所需的其他图像调整。根据一些方面,接收模块还接收图像信息,诸如深度信息、相机信息和照明信息。接收模块1205在图像处理中使用图像信息,以使该图像符合所要求的标准。
经处理的图像被提供至面部图像标识符模块1210,面部图像标识符模块1210标识该图像中的包括面部图像的部分。该标识可以使用边缘检测和其他各种搜索过程来标识图像的那些部分,这些部分包括可以对其应用面部识别的面部的图像。根据一些方面,面部图像标识符还可以执行一些图像处理,以使包括面部图像的部分符合分析模块的要求。
面部图像分析模块1215接收图像中的包括面部图像的部分,并且对每个图像执行分析,以生成其它模块所需的数据,从而生成所需信息。例如,图像分析模块可以生成执行为执行各种后续处理所需的边缘检测、颜色检测等所需的像素颜色和矢量数据。根据一些方面,面部图像分析模块1215还接收图像信息和/或完整图像以用于执行分析。由面部图像分析模块1215生成的信息被提供至人口统计学信息模块1220、面部识别模块1225和受众特性模块1230,以执行面部识别功能并生成人口统计学和受众特性信息。
人口统计学信息模块1220使用从面部图像分析模块接收的每个面部图像的信息,来生成全体受众或者至少大部分受众(例如,代表性样本)的人口统计学信息。人口统计学信息可以包括例如受众成员的年龄、国籍、种族等。人口统计学信息还可以可选地包括对各类别的统计分析,以提供每个类别的均值、中值和其他信息。
面部识别模块1225接收每个面部图像的信息,并将每个面部图像的信息与每个面部识别记录中的面部图像的信息进行比较,以确定匹配,并返回与来自捕获的图像的面部图像之一匹配达到预定的置信度的每个记录的标识符。为了促进该比较,这些记录可以包括面部图像数据,该面部图像数据被预先计算以通过消除分析每个参考图像的需要而提供更快的比较。
受众特性模块1230接收用于每个面部图像的信息并编辑受众特性信息。特性信息可以包括受众的规模、受众在受众区域中的位置以及与作为整体的受众的物理特性有关的其他信息。为此,受众特性模块1230还可以可选地接收图像信息,以帮助定义图像中示出的空间特性。
尽管以上说明描述了根据本公开的示例性实施例的面部识别系统的模块,但是根据其它实施例,添加、组合、重新布置和/或省略模块的其他面部识别模块是可能的。
图13A示出了根据本公开的一方面的由面部识别系统执行以对受众区域的捕获的图像执行面部识别的过程1300的流程图。在过程1300中,接收受众区域的图像(1305)。如以上所讨论的,接收到的图像可以被处理为使图像符合过程1300的要求。
标识接收到的(并且可选地,经处理的)图像中的包括面部图像的部分(1310)。如以上所讨论的,每个部分还可以被处理,以使面部图像符合面部识别过程的要求。执行对存储在面部识别记录中的面部图像的面部识别比较,以标识与面部图像匹配的记录(1315)。匹配记录的标识符被提供至内容控制模块或装置。
为了面部识别比较而生成的来自于捕获的图像的面部图像的信息用于生成受众的人口统计学信息(1325)。以上参照图12讨论了所提供的人口统计学信息。受众的人口统计学信息被提供至内容控制模块或装置(1330)。
为了面部识别比较而生成的来自于捕获的图像的面部图像的信息还用于生成受众特性信息(1335)。以上参照图12讨论了用于生成受众特性信息的过程和所生成的信息。受众特性信息还被提供至内容控制模块或装置(1340),此时,过程1300可以结束。
以上参照图13A、13B描述了根据本公开的实施例的用于使用面部识别确定受众信息的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略一个或多个上述步骤的用于获得组信息的其他过程是可能的。
图13B示出了根据本公开的一方面的由内容控制系统执行以获得受众成员信息并生成受众成员记录的过程1350的流程图。在过程1350中,计算机系统例如经由具有安装在移动装置上的app的移动装置相机或具有捕获图像的相机和屏幕的自助服务终端(kiosk)来接收受众成员的图像(1355)。在优选实施例中,计算机系统经由诸如LAN、WAN或互连网的网络将信息发送至服务器,使得服务器合计来自捕获此类面部图像的各种计算机系统的数据。
计算机系统还经由用户界面(诸如,移动装置触摸屏,或者自助服务终端或台式计算机的触摸屏或键盘)接收受众成员信息(1360),随后可以将其与受众成员的图像关联。在一些实施例中,受众成员信息可以经由另一计算机系统被发送到该计算机系统。例如,班上的老师可以让学生为他们自己拍照,同时老师经由单独的用户界面提供有关班上每个学生的信息。计算机系统随后可以生成受众成员记录(1365),其包括受众成员的图像和输入到系统中的受众成员信息。在优选实施例中,受众记录随后被存储在受众成员数据库上(1370)。优选地,该受众成员数据库存储在存储装置(例如,服务器、NAS)上,媒体系统可访问该存储装置,媒体系统具有相机,该相机监测关于诸如建筑物内或主题公园的场所内的区域的受众区域。
来自受众成员数据库的记录优选地可用于面部识别系统(1375),诸如当面部识别系统将面部图像特征发送到受众成员数据库时,或者当面部识别系统请求来自受众成员数据库的更新后的数据时。面部识别系统随后可以从与同受众成员关联的图像关联的受众成员数据库中收集受众成员信息。通过这种方法,可以用原来没有的(优选地由希望使媒体内容针对受众成员的可用于选择要回放的适当的媒体内容的属性进行定制的受众成员自己输入的)新的受众成员信息来更新媒体内容系统和方法。
图14是根据本公开的一方面的用于组记录1400的概念数据结构。组记录1400包括组的组标识符1405、接收到的组视觉标识符信息1410、以及可选地用于图像比较的组视觉标识符参数1415。标识符1405可以是例如组的名称和/或昵称,或者标识符可以是将组视觉标识符信息与内容控制设备或模块和/或中心控制系统所存储的特定组记录关联的数字或字母数字字符串。
尽管以上参照图14描述了根据本公开的实施例的示例性组记录,但是根据其它实施例,添加、组合、重新布置和/或省略信息的其他组记录是可能的。
图15中示出了根据本公开的一些实施例的包括执行图像分析过程的软件和/或硬件模块的图像分析装置或系统1500。图像分析系统1500包括接收模块1505、视觉标识符图像模块1510、图像分析模块1515、人口统计学信息模块1520、组识别模块1525和受众特性模块1530。
接收模块1505接收捕获的图像,并且处理捕获的图像,以使该图像符合执行图像分析的各种后续过程所需的参数。根据一些方面,图像处理可以包括例如焦点调整、颜色调整、边缘限定以及使图像符合后续模块的要求所需的其他图像调整。根据一些方面,接收模块还接收图像信息,诸如深度信息、相机信息和照明信息。接收模块1505在图像处理中使用图像信息以使该图像符合所要求的标准。
经处理的图像被提供至视觉标识符图像模块1510,以标识图像中的包括与组和/或受众成员关联的视觉标识符(例如,由该组的所有成员穿戴或显示的如上所述的特定颜色、图案或符号)的部分。该标识可以使用边缘检测和其它各种搜索过程来标识图像中的包括必要的视觉标识符的那些部分。根据一些方面,视觉标识符图像模块1510还可以执行一些图像处理,以使包括视觉标识符的部分符合分析模块的要求。
图像分析模块1515接收图像的被标识的部分和/或整个捕获的图像,并且其对图像的每个被标识的部分执行分析,以生成从其导出所需信息的数据。例如,图像分析模块1515可以生成执行为执行各种后续过程所需的边缘检测、像素颜色检测等所需的像素颜色和矢量数据。根据一些方面,图像分析模块1515还接收图像信息和/或完整图像以用于执行分析。由图像分析模块1515生成的信息被提供给人口统计学信息模块1520、组识别模块1525和受众特性模块1530,以用于执行组识别并生成人口统计学和受众特性信息。
人口统计学信息模块1520使用来自于从图像分析模块1515接收的每个被标识的部分和/或整个图像的信息,来生成全体受众或至少大部分受众(例如,代表性样本)的人口统计学信息。人口统计学信息可以包括例如受众成员的年龄、国籍、种族等。人口统计学信息还可以可选地包括对各类别的统计分析,以提供每个类别的均值、中值和其他信息。
组识别模块1525从接收到的图像接收信息,并将每个组记录中的组视觉标识符信息的信息进行比较,以确定匹配,并返回与来自捕获的图像的数据匹配达到预定的置信度的每个组记录的组标识符。为了促进该比较,该记录可以包括视觉标识符图像数据,该视觉标识符图像数据被预先计算以通过消除分析每个参考图像的需要而提供更快的比较。
受众特性模块1530接收用于捕获的图像的信息并编辑受众特性信息。特性信息可以包括受众的规模、受众在受众区域中的位置以及与作为整体的受众的物理特性有关的其他信息。为此,受众特性模块1530还可以可选地接收图像信息,以帮助定义图像中示出的空间特性。
尽管以上说明描述了根据本公开的示例性实施例的图像分析装置或系统的模块,但是根据其它实施例,添加、组合、重新布置和/或省略模块的其他图像处理模块是可能的。
图16示出了根据本公开的一方面的由图像分析装置或模块执行以检测受众区域的捕获的图像中的受众成员的组的过程1600的流程图。在过程1600中,接收受众区域的图像(1605)。如以上所讨论的,接收到的图像可以被处理,以使图像符合过程1600的要求。
分析捕获的图像以基于组记录中的组标识符信息检测受众中的组(1610)。根据一些实施例,该分析可以包括确定在捕获的图像中每个像素的颜色和每种颜色的像素的总数量。可以基于图像中每种颜色的像素的数量来对像素颜色进行排序。将存在的像素颜色与每个组记录的视觉标识符信息中被标识的颜色进行比较。以下参照图17和图18讨论根据本发明的一些其他实施例的用于分析图像的其他过程。随后通过是否存在被标识的颜色的像素的阈值数量和/或通过像素颜色的排名来确定存在的组。来自已与组视觉标识符信息匹配的每个组记录的组标识符作为受众信息的一部分被提供给内容提供者装置或模块(1615),并且可以结束过程1600。
以上参照图16描述了根据本公开的实施例的用于使用图像分析确定受众信息的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略上述一个或多个步骤的用于获得组信息的其他过程是可能的。
图17示出了根据本公开的一些方面的用于针对与每个组关联的视觉标识符分析受众区域的捕获的图像的过程1700。标识接收到的(并且可选地,经处理的)图像中的包括视觉标识符的部分(1705)。如以上所讨论的,每个被标识的部分还可以被处理,以符合分析过程的要求。执行对存储在每个组记录中的组标识符信息中的视觉图像的图像比较,以标识与图像的被标识的部分中的视觉标识符匹配的组记录(1710)。随后过程1700可以结束,并且上述过程1600(图16)可以继续,并且将匹配的组记录的组标识符提供至内容控制模块或装置,如以上所讨论的。
以上参照图17描述了根据本公开的一些实施例的用于执行图像分析的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略一个或多个上述步骤的用于获得组信息的其他过程是可能的。
图18示出了根据一些实施例的用于针对与每个组关联的视觉标识符(例如,特定颜色、图案或符号,如以上所讨论的)分析受众区域的捕获的图像的过程1800。标识接收到(并且可选地,经处理的)的受众区域的图像中的可以包括视觉标识符的部分(1805)。例如,过程可以标识图像的包括以下各项的部分:徽章、别针、挂绳、旗帜、衣物或由受众成员所穿戴或显示的一些其他配件。如以上所讨论的,每个被标识的部分可以被进一步处理以符合分析过程的要求。
可以对每个被标识的部分执行颜色识别,以确定视觉标识符的(一个或多个)颜色(1810)。该(一个或多个)颜色随后用于基于存储在每个组记录的组视觉标识符信息中的颜色来确定与每个部分关联的组(1815)。被标识的每个组的组标识符被添加至受众信息(1820)。根据一些实施例,被标识为与每个被标识的组关联的部分的数量的计数可以被确定并被添加至受众信息,以用于确定基于每个组中的受众成员的数量提供的媒体内容。随后过程1800可以结束,并且上述过程1600(图16)可以继续并且将匹配的组记录的组标识符提供至如以上所讨论的内容控制模块或装置。
以上参照图18描述了根据本公开的一些实施例的用于使用视觉标识符的颜色识别执行图像分析的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略一个或多个上述步骤的用于获得组信息的其他过程是可能的。
图19示出了本发明的可替代的实施例的示意图,该实施例具有捕获图像的图像捕获装置1910和播放媒体内容的媒体内容回放装置1920。虽然图像捕获装置1910可以是捕获单个图像的相机,但是图像捕获装置1910优选地是捕获图像流并将那些图像保存到存储器(例如,计算机系统1912中的硬盘驱动器或RAM)的相机。优选地,图像流作为循环(例如,十分钟的循环或一小时长的循环)被保存在存储器中,随着存储在存储器中的图像数量达到存储器阈值,该图像流被不断地覆盖。在一些实施例中,图像捕获装置1910可以响应于用于捕获一组图像的触发(例如,电耦接至相机的运动传感器(未示出)或感应车辆环路传感器)而激活以捕获一组图像。
优选地,在已经从一组图像得到一组图像特征之后,删除或覆盖存储器中的该组图像。在一些实施例中,图像捕获装置1910可以仅捕获单个图像,但是优选地,图像捕获装置1910随着时间的流逝捕获多个图像。在示例性实施例中,图像捕获装置1910被具有软件的图像计算机系统1912控制,该软件当被处理器执行时捕获图像,并将图像中的至少一些保存在瞬态或非瞬态存储器(未示出)中,并将它们通过网络1960转发到服务器1950以用于分析。
网络1960在图19中被象征性地示出为“云”网络,该网络将装置彼此电连接,使得可以经由网络1960将数据从一个装置发送至另一装置。服务器1950随后分析从图像计算机系统1912发送的一个或多个图像,以根据从图像捕获装置1910收集的数据来确定哪种媒体内容是合适的。如先前提及的,计算机系统1912和服务器1950在这里被象征性地表示为使用网络1960电子耦接的两个分立计算机系统,但是在一些实施例中,它们可以集成到单个计算机系统中。同样地,如先前提及的,尽管将图像捕获装置1910示为单个装置,但是多个图像捕获装置可以电子耦接到图像计算机系统1912或服务器1950。
图像捕获装置1910优选地被配置为实时捕获图像,但是其可以被配置为例如通过使用循环存储器保持视频流来连续记录多组图像。这样的实施例可能在这样的情形中是优选的:其中,图像捕获装置正在监测具有恒定交通量的道路或具有多个客户的停车场。在实时分析图像的实施例中,可以生成被提取的图像特征,以防止原始图像被保存在瞬态存储器中。在其他实施例中,图像捕获装置1910被配置为响应于来自电子耦接至图像捕获装置1910的传感器的触发来捕获图像。例如,运动传感器可以触发图像的捕获,或者感应车辆环路传感器内的车辆的检测可触发图像捕获。在这样的实施例中,图像捕获装置1910优选地随着时间的流逝捕获一组图像,例如,开始于运动传感器检测到运动时并且结束于运动传感器在阈值时间段内未检测到运动时的视频流。也可以引入反馈机制,该反馈机制触发图像捕获装置1910捕获图像的方式的改变。例如,图像捕获装置1910可以被配置为仅使用实时分析算法来导出面部图像特征,该实时分析算法将导出的面部图像特征与图像数据库1942中的面部图像特征进行比较,并且匹配图像特征的识别可以触发图像捕获装置1910来导出面部图像特征和交易标识符,或者面部图像特征和交互作用两者。虽然示出了单个图像捕获装置1910,但是媒体内容系统可以具有任何数量的图像捕获装置,它们可以与任何数量的计算机系统彼此协同工作。
服务器1950使用一个或多个数据库(诸如图像数据库1942、关系数据库1944、属性数据库1946和媒体数据库1948)来执行一组图像的分析。虽然这些数据库中的每一个被象征性地示出为电子耦接至网络1960的单独的网络附加存储(NAS)数据库,然而可以将这些数据库中的每一个集成到单个存储器中,或者其可以根据需要分布在多个存储器系统中。数据库可以分布在多个系统之中,并且它们可以以任何合适的方式集成。
图像数据库1942用于使图像特征与标识符关联。优选地,图像数据库1942预先填有这样的标识符:其由经认证的用户输入到数据库中或者通过从第三方数据库(诸如第三方数据库1934)导入这样的数据而被输入到数据库中。经认证的用户可以包括系统的管理员或具有有限权限的访客,例如,被赋予权限为教室中的学生添加标识符(例如,学生ID)的老师。可以使用任何适当的用户界面(例如,由服务器1950托管的网站、自动处理包含标识符信息的被填充的表格模板的电子邮件地址、自助服务亭(未示出)、或者它们的组合)来添加这样的标识符。在其它实施例中,服务器1950可以向图像数据库1942查询与给定图像特征匹配的标识符,并且如果查询返回空结果,则服务器1950可以随后将唯一标识符添加到图像数据库1942中。例如,可以搜索面部图像特征,并且如果图像数据库1942返回空结果,则将来可以为该面部图像特征分配唯一标识符。以这种方式,随着随时间的流逝使用媒体内容系统,图像数据库1942可以动态地增长。
关系数据库1944用于使标识符与其它标识符关联。再一次地,优选地,关系数据库1944预先填有这样的关系:其由经认证的用户输入到数据库中或者通过从第三方数据库(诸如第三方数据库1934)导入这样的数据而被输入到数据库中,但是媒体内容系统也可以动态地添加到关系数据库1944。
在一些实施例中,当服务器1950标识属于共同关联的类别的图像特征,并且关系数据库1944返回空值时,服务器1950可以创建新的关系。例如,如果服务器1950检测到一组图像内的一组面部特征和汽车牌照,并且发现具有那些面部特征的人的标识符和具有该牌照的汽车的标识符不存在于关系数据库1944中,则服务器1950随后可以将关系添加到关系数据库1944中,以将那些人的标识符与该汽车关联。在一些实施例中,一组图像内捕获的标识符可以改变关系数据库1944内的关系。例如,每当一组图像同时包含人员标识符和汽车标识符时,可以更改(例如,值的增加)人员标识符与汽车标识符之间的乘员关系的权重。另一方面,每当一组图像包含具有不同人员识别符的汽车识别符时,可以减小该汽车识别符与其他人员识别符之间的乘员关系的权重。以这种方式,当系统在多组图像内重复检测到车辆中的相同乘员时,可以增加该乘员与该汽车之间的关系的权重,并且当系统在多个图像组内重复检测到汽车中的不是与该车具有现有关系的人员的乘员时,可以减小关系权重。
在一些实施例中,可以在标识符之间定义若干关系,例如,人与车辆的关联、以及该车辆的车座椅(例如,驾驶员座椅、前排乘客座椅、中间后排座椅)的关联。在一些实施例中,仅接近就足以创建关联(例如,同一组图像内的一组标识符),而在其他实施例中,运动识别对于触发向关系数据库1944添加新关系是必需的(例如,与面部图像特征关联的身体的移动到车辆的前乘客门中的运动)。
属性数据库1946用于使标识符与该标识符的属性关联。可以使用任何合适的属性,例如,商品/服务或人口统计学的偏好。再一次地,虽然属性数据库1946优选地预先填有这样的属性:其由经认证的用户输入到数据库中或通过从第三方数据库(诸如第三方数据库1934)导入这样的数据而被输入到数据库中,但是媒体内容系统可以动态地添加到属性数据库1946。在一些实施例中,媒体内容系统可以分析在一组或多组图像中捕获的活动。这样的实施例优选地从由服务器1950或由它们自己的图像计算机系统(诸如图像计算机系统1912)控制的额外的图像捕获装置中检索多组图像数据,并且还可以从第三方传感器(例如,第三方传感器1932)收集数据,第三方传感器将信息馈送到第三方计算机系统1930中以存储在第三方数据库1934中。
例如,在一个实施例中,一组图像可以捕获穿着品牌的衣服的人的图像。服务器1950随后可以分析该组图像,以唯一地标识与人的标识符关联的面部图像特征,并且唯一地标识与品牌和服装类型(例如,品牌(诸如),和服装类型(诸如运动文胸))关联的徽标特征。服务器1950随后可以在属性数据库1946中为该人的标识符创建属性,以将该人的唯一标识符与品牌和/或服装类型相关联。可以以任何合适的方式对这些属性进行加权,例如,经由第三方数据(例如,从包含人的属性的更新后的信息的服务器中检索的更新后的数据),和/或经由对随着时间的流逝的多组图像的分析(例如,利用使用与属性匹配的图像数量作为函数输入的算法,在25组图像中被发现拿着网球拍并且在3组图像中被发现拿着篮球的人可具有偏爱网球拍的相关权重分布)。
在其它实施例中,可以使用在一组图像内分析的交互来改变属性数据库1946中的属性。例如,如果图像捕捉装置1910捕获被标识的人观看与网球拍相关联的媒体内容的一组图像,并且标识出该人将目光移开媒体内容的动作或标识出该人在预定阈值时间段内没有看过媒体内容,则服务器1950可以减小与属性数据库1946中的该人的标识符关联的网球拍属性的权重。交互还可以包括被分析的实体的身体移动。例如,微笑或竖起大拇指可以指示对图像中另一个对象的偏爱度增加,而皱眉或拇指向下可以指示对图像中另一个对象的偏爱度降低。响应于检测到一组图像中的这样的交互以及该组图像中的被标识的对象或交易标识符,服务器1950可以被配置为例如通过增加或减少与被识别的对象的标识符关联的数值属性值的权重来改变属性数据库1946的属性(例如,当持有一类被标识的食物时检测到的微笑增加与该类被标识的食物关联的值的权重)。
媒体内容数据库1948用于使一个或多个属性与一组媒体内容关联,以将目标媒体内容提供至媒体内容回放装置1920。再一次地,虽然媒体内容数据库1948优选地预先填有这样的媒体内容:其由经认证的用户保存到数据库中或通过从第三方数据库(诸如第三方数据库1934)导入这样的数据而被保存到数据库中,但是媒体内容系统可以向媒体内容数据库1946动态添加新的媒体内容,或者甚至可以向媒体内容数据库1946添加新的关联。在优选实施例中,可以根据一组图像内被标识的触发交互来添加新的关联。例如,如果图像捕获装置1910捕获到被标识的人观看与冰淇淋蛋筒关联的媒体内容达预定阈值时间段的一组图像,则服务器1950可以标识出该动作,并且随后可以将被标识的人的一个或多个属性与该媒体内容关联。优选地,仅利用罕见地检测到的被标识的触发和/或交互(例如,向媒体内容回放装置1920的移动,或具有共同属性(例如,消费媒体内容时的微笑,在特定方向上观看的阈值时间段)的大量人员)来触发这样的添加。通过使用罕见地检测到的被标识的触发,不太可能生成假阳性指标。在优选实施例中,如果在预定时间段内被标识的触发被检测到高于阈值水平(例如,在十分钟的跨度内超过十次),则可以生成通知并将其发送到用户界面(诸如经由电子邮件或短信),以通知用户被标识的触发是给定受众的常见触发,并且可能会产生假阳性指标。在其他实施例中,系统可以被配置为如果触发已被标识为是在预定的时间段内被检测到在阈值次数以上的常见触发,则将该触发自动停用,从而允许系统使用未被停用的其他触发作为用于合计受众指标的适当的刺激。
服务器1950随后可以将来自媒体内容数据库1948的一组或多组媒体内容发送至回放计算机系统1922以用于在媒体内容回放装置1920上播放。在一些实施例中,根据标识符的加权属性来对该组媒体内容加权,使得具有较高权重的媒体内容被提供有优先级。在其他实施例中,来自该组媒体内容的媒体内容被随机选择用于回放。在一些实施例中,媒体内容和属性两者被发送到回放计算机系统1922,在回放计算机系统1922中,属性改变播放所选媒体内容的方式。例如,属性可以是播放的视频的音量,或者其可以是播放视频的音频部分的语言,或者其可以是显示视频字幕的语言。在一些实施例中,属性可以触发要导出的不同媒体内容,例如,年龄属性可以触发动画片或真人媒体文件之间的决定。
尽管图19示出了彼此协同工作的多个计算机系统(即,图像计算机系统1912、回放计算机系统1922、服务器1950和第三方计算机系统1930),但是可以使用任何数量的计算机系统或计算机系统的组合。例如,图像捕获装置1910和媒体内容回放装置1920可以由公共计算机系统控制,并且该公共计算机系统甚至可以在具有存储在本地存储器中的数据库1942、1944、1946和1948中的一个或多个的服务器1950中起作用。在其他实施例中,计算机系统中的每一个的角色和职责可以分布在多个计算机系统之间。
图20示出了可被一个或多个媒体内容计算机系统使用以将媒体内容提供至媒体内容回放装置的示例性过程2000。在步骤2005中,媒体内容计算机系统可以例如从图像捕获装置接收一组图像。在步骤2010中,计算机系统可以分析该组图像,以导出一组图像特征,诸如面部图像特征、车牌或服装标签。在步骤2015中,例如通过对照包括图像特征与标识符之间的相关性的图像数据库来交叉引用该组图像特征,计算机系统可以生成第一组图像标识符。在步骤2025中,使用第一组标识符中的至少一些(如果不是全部的话)(例如通过使用第一组标识符查询关系数据库),计算机系统可以生成第二组标识符。在步骤2030中,计算机系统可以使用第二组标识符中的至少一些(并且在一些实施例中使用第二组标识符和第一组标识符两者中的至少一些)来生成一组属性。可以例如通过查询包括标识符与属性之间的相关性的属性数据库来执行该组属性的导出。在步骤2035中,计算机系统可以使用该组属性(例如,通过查询包括属性与媒体内容之间的相关性的媒体内容数据库)来生成一组媒体内容。优选地,这些属性被加权,其中一些属性具有比其他属性更大的权重。在一些实施例中,该组媒体内容可以仅包括由回放系统用来检索媒体内容的标识符,而在其他实施例中,该组媒体内容可以包括媒体文件本身。优选地,该组媒体内容被加权或被组织成加权列表,其中具有较高权重的媒体内容与较高的加权属性具有较高的相关性。在步骤2040中,计算机系统随后可以在媒体内容回放装置上播放该组媒体内容中的至少一些。
本文的实施例可以用来使用一组图像内的任何合适的被标识的关系将目标媒体内容提供至媒体内容回放装置。例如,图像捕获装置1910可以捕获面部的图像,图像计算机系统1912可以经由网络1960将该图像或面部特征发送至服务器1950以用于分析。服务器1950随后可以经由网络1960将面部特征与图像数据库1942进行比较,以确定标识符。该标识符随后用于查询属性数据库1946,以找出被标识的人具有偏好的语言,例如,“荷兰语”。服务器1950随后对照媒体数据库1948检查“荷兰语”属性,以找到优选地由荷兰人观看的媒体内容,随后将其转发给回放计算机系统1922。回放计算机系统1922随后提取(pull)媒体内容文件之一,并且使其在加油站燃油泵处的A/V显示器的媒体内容回放装置1920上播放,检查由图像捕获装置1910捕获的后续图像,以查看该人是否在观看。如果该人在某个阈值时间段内没有观看,则回放计算机系统1922随后循环到另一个媒体文件。
在另一实施例中,图像捕获装置1910捕获一组人并将一组图像发送至服务器1950以用于分析。服务器1950将第一组或数量(例如,20个)的一组人标识为穿着浅绿色(aqua)方形标签,而将第二组或数量(例如,5个)标识为穿着水鸭色(teal)方形标签。在该实施例中,服务器1950被配置为仅分析方形标签的属性,诸如识别出的颜色阴影或识别出的图案。服务器1950随后将“浅绿”与图像数据库1942进行比较以确定“浅绿”与第一被标识的组关联,并且将“水鸭”与图像数据库1942进行比较以确定“水鸭”与第二被标识的组关联。这些标识符随后与属性数据库1946进行比较,以确定属性“英语”与第一标识组关联以及属性“西班牙语”与第二标识组关联。由于在该组图像中找到了20个浅绿色的实例,因此“英语”给予20的权重,而相应地,“西班牙语”给予5的权重。这些属性随后与媒体数据库1948进行比较,以检索具有英语音频和西班牙语字幕的媒体。回放计算机系统1922随后在从服务器1950接收到该媒体内容之后在博物馆展台的媒体内容回放装置1920上播放该媒体。
在另一实施例中,图像捕获装置1910可以被配置为捕获进入车辆的一组人,并且将一组图像发送至服务器1950以用于分析。服务器1950随后将查询图像数据库1942以确定人和车辆的标识符,并且随后查询关系数据库1944以确定这些人是否与该车辆关联。如果后一个查询结果为空值,则服务器1950随后可以将人的标识符与车辆的标识符之间的关系添加到关系数据库1944。可以将该关系设置为没有期满日期,或者可以是被设置为在给定时间段结束时期满,例如,在春假假期周结束时或在周末结束时的周日结束。在之后的时间,图像捕获装置1910随后可以仅捕获该车辆的图像,并将该组图像发送到服务器1950以用于分析。服务器1950随后将查询图像数据库1942以使用所捕获的车牌号来确定车辆的标识符,并且随后可以查询关系数据库1944以确定车辆的标识符与人的各种标识符之间的关系。服务器1950随后可以使用人的标识符来查询属性数据库1946,以确定人的属性,并且可以例如通过将属性加在一起(例如,人1的汉堡包属性为0.2,人2的汉堡包属性为0.3,从而导致汉堡包的属性总计为0.5)来对属性的合计列表中的所有属性进行适当加权。服务器1950随后可以查询媒体内容数据库1948以确定适合于该车辆中的属性的一组媒体内容,并且可以将该组媒体内容发送到回放计算机系统1922,该回放计算机系统1922将耦接到将向该车辆显示的路侧标记(例如,广告牌)的媒体内容回放装置1920。在一些实施例中,该媒体可以立即播放,而在其他实施例中,该系统可以被编程为在距车辆在道路前面的给定距离(例如,一英里或1.5km)处播放该媒体,其根据计算的时间/距离阈值或者当刚好放置在广告牌前方的单独的图像捕获装置标识出相同的车牌时被触发。
在一些实施例中,显示在广告牌上的媒体内容可以包括根据车辆的被导出的乘员的先前兴趣选择的广告(ad),或者基于从车辆的乘员的属性导出的社会经济数据选择的广告。例如,具有与汽车旅馆关联的属性的检测到的乘员可以触发关于汽车旅馆的媒体内容,而具有与豪华汽车旅馆关联的属性的检测到的乘员可以触发关于豪华旅馆的媒体内容的选择。这样的方法还可以用在车辆可见的饭店标记(例如,免下车餐馆(drive-in)标记)上,其可以导出车辆乘员的先前顺序的属性,并且可以在免下车餐馆标记上触发这样的消息:其指示乘员“如果您要按常规顺序,请闪烁车前灯三次,这是用两杯浓咖啡制成的摩卡咖啡”。对准车辆的相机随后可以检测是否检测到车前灯的三次闪烁,并且如果通过计算机系统分析来自相机的图像数据而检测到这样的视觉反馈,则计算机系统可以将用两杯浓咖啡制成的摩卡咖啡的顺序偏好发送到餐厅工作人员的计算机终端或其他餐厅工作人员用户界面。类似地,这样的方法还可以在主题公园或体育场中使用,其可以搜索受众标识符,从存储装置检索该受众标识符与VIP状态或季票状态关联的信息,并且随后可以为该人发送问候语,该问候语不同于其他检测到的人的问候语,甚至可以触发其他动作,诸如音乐播放或开门。
在其它实施例中,可以分析多组车辆以导出组的属性数据。例如,图像捕获装置1910可以在一段时间(例如,单个瞬间或五秒的时间段)内捕获各种车辆的一组图像。图像计算机系统1912随后可以分析该组图像以生成图像特征。在一些实施例中,该分析可以生成汽车的标识符,诸如车辆的车牌或车辆的品牌/型号,而在其他实施例中,图像特征被发送到服务器1950以查询图像数据库1942来确定每个车辆的标识符。服务器1950随后可以使用所生成的标识符来查询关系数据库1944并且收集多个相关标识符(例如,那些车辆的乘员或车辆的类型),这可以进而用于查询属性数据库1946,并且收集每个相关标识符的属性。以这种方式,可以收集大量被导出的车辆乘员的属性。优选地,例如通过对属性的加权值求和来合计这些属性。尽管服务器1950随后可以使用这些属性的总体来导出媒体数据库1948的多组媒体内容,但是在优选实施例中,仅选择属性的子集,优选地,根据属性(例如,最佳属性或前5个属性)的权重来选择属性的子集,以用于从媒体数据库1948中导出多组适当的媒体内容。服务器1950随后可以将该组媒体内容发送至回放计算机系统1922以播放到媒体内容回放装置1920。在一些实施例中,在车辆不移动的情况下,例如交通拥堵或在免下车电影院,回放计算机系统1922可以被配置为避免重复媒体(例如,通过在回放之后从存储在存储器中的该组媒体的列表中删除媒体内容),或者在预定阈值时间段内(例如,在半小时)不重复媒体。
在一些实施例中,第三方计算机系统1930可以提供对关系数据库1944的访问,以核实已经保存到关系数据库1944的关系数据。例如,服务器1950可以从一组图像导出驾驶员标识符(例如,通过识别进入车辆驾驶员门的交互并捕获进入该车辆的实体的一个或多个图像)和车辆标识符两者(例如,通过使用面部图像特征和车牌号查询图像数据库1942),并且随后可以将两种标识符作为关系与时间戳一起保存在关系数据库1944中。第三方计算机系统1930随后可以使用车辆的标识符(例如,车辆的车牌)和时间段向服务器1950发送查询,服务器1950可以通过提供在预定的阈值时间段内已经捕获了该车辆的驾驶员的所有方的标识符来响应第三方计算机系统1930。在其他实施例中,第三方计算机系统1930可以提供面部图像特征或经授权的驾驶员的标识符,并且服务器1950可以被编程为提供以下信息:实体不是经授权的驾驶员,或不是与接收到的面部图像特征匹配的人是汽车的驾驶员。
在一些实施例中,第三方计算机系统1930可以被配置为具有经授权的访问以在服务器1950上设置与车辆标识符有关的触发警报。例如,第三方计算机系统1930可以将车辆标识符与一组面部图像特征一起提供给服务器1950,并且作为响应,服务器1950随后可以在图像数据库1942中为该组面部图像特征中的每一个创建标识符,并且可以使车辆标识符与关系数据库1944中带有“经授权的驾驶员”标签的新创建的标识符关联。服务器1950随后可以分析多组图像,以用于具有驾驶车辆或出/入车辆的驾驶员门的识别出的交互的实体的面部图像特征,并且用于车辆图像特征(例如,车牌号)。服务器1950随后可以导出具有与车辆的交互的驾驶员的实体的标识符和车辆的标识符,并且在关系数据库1944中搜索输入的搜索查询项之间的“经授权的驾驶员”的关系。如果服务器1950未能找到经授权的驾驶员关系,则服务器1950随后可以向第三方计算机系统1930(或由第三方计算机系统1930的用户定义的任何其他计算机系统)发送未经授权的驾驶员正在驾驶车辆的警报。
在有关实施例中,服务器1950可以被配置为响应于触发将来自图像捕获装置1910的一组或多组图像保存到存储器,例如,保存到服务器1950上的本地存储器、媒体数据库1948或第三方数据库1934。在一些实施例中,第三方计算机系统1930可以发送用于服务器1950的请求,以保存具有或不具有关系、或具有或不具有属性的图像。例如,服务器1950可以被配置为在服务器1950未能找到图像捕获的驾驶员与被标识的车辆之间的经授权的驾驶员关系时保存一组或多组图像。在另一实施例中,服务器1950可以被配置为当服务器1950用标识符标识“保存图像”的属性时保存一组或多组图像。这样的图像可以与元数据信息(诸如时间戳、图像捕获装置的位置和/或图像捕获装置的位置的标识符)一起保存,并且可以被推送到实时请求信息的第三方计算机系统,或者其可以被存储在存储器中以备以后检索。在一些实施例中,来自第三方计算机系统1930的请求可以具有期满日期计时器,以在设置的时间段阈值之后删除多组图像。
在其它实施例中,代替播放一组媒体内容或者除了播放一组媒体内容之外,服务器1950可以将一个或多个属性发送至第三方计算机系统1930。例如,当图像捕获装置1910捕获关于加油站燃油泵的图像,并且媒体内容回放装置1920是加油站处的屏幕时,第三方计算机系统1930可以被配置为控制燃油泵的自动选择特征。在这样的实施例中,来自图像捕获装置1910的该组捕获的图像可以包括车辆图像特征(诸如车牌的照片),其可以由计算机系统(诸如图像计算机系统1912或服务器1950)处理,以导出车牌标识符或品牌/型号车辆标识符。服务器1950或图像计算机系统1912随后可以使用该导出的标识符来查询属性数据库1946,并确定车辆的优选燃料类型,并且随后将该优选燃料类型发送给第三方计算机系统1930,随后该第三方计算机系统1930可以自动选择首选燃料类型。
图21示出了根据本公开的一方面的用于提供媒体内容以补充展台的替代系统2100。系统2100包括面部识别模块2102;中心控制模块2104;以及通过网络2110通信连接的展台控制模块2108和2112。便携式个人通信装置2120和计算机2125还可以连接到网络2110。尽管在图21中被示出为四个单独的装置或功能,但是面部识别模块2102、中心控制模块2104、以及展台控制模块2108和2112可以由单个计算系统提供。可替代地,提供面部识别模块2102、中心控制模块2104和展台控制模块2108中的一个或多个的过程可以分布在经由网络2110通信连接的多个系统上。
面部识别模块、功能或系统2102可以通过计算机系统来实现或功能化,计算机系统包括存储器和处理单元以执行提供面部识别和/或其他图像分析的过程。实现面部识别模块、功能或系统的计算机系统可以包括一个或多个服务器、路由器、计算机系统和/或存储器系统,这些部件经由网络通信连接以提供面部识别和/或其他图像分析。
中心控制模块2104可以通过计算机系统来实现或功能化,计算机系统包括存储器和处理单元以执行存储和提供用于会场中的一个或多个展台的媒体内容的过程。中心控制模块2104还可以有利地存储和更新用户的位置信息。中心控制功能可以由用于会场的中心控制系统提供。具体地,中心控制模块2104可以通过这样的系统来实现或功能化:其包括一个或多个服务器、路由器、计算机系统和/或存储器系统,这些部件经由网络通信连接以存储和提供用于会场中的一个或多个展台的媒体内容,并且存储和更新注册用户的位置信息。
展台控制模块2108和2112中的每一个可以通过计算机系统实现或功能化,该计算机系统控制包括图像捕获装置的展台区域中的装置。有利地,一个计算机系统可以控制多于一个展台的装置。在特定实施例中,展台控制模块2108和2112可以通过这样的系统实现或功能化:其包括一个或多个服务器、路由器、计算机系统、存储器系统、图像捕获装置和/或媒体回放装置,这些部件经由本地网络通信连接以获得和呈现展台的媒体内容。
网络2110可以有利地是互联网。可替代地,网络2110可以是广域网(WAN)、局域网(LAN)、或者可以通信地用于连接图21中所示的各种装置和/或模块的互联网、WAN和LAN的任意组合。
便携式个人通信装置2120可以是智能电话、平板电脑、个人数字助理(PDA)、膝上型计算机或通过无线连接2122可连接到网络2110的任何其他装置。计算机2125可以经由传统的“有线”或无线连接有利地连接至网络2110。计算机2125可以是例如台式计算机、膝上型计算机、智能电视和/或连接到网络110的任何其他装置。便携式个人通信装置2120和/或计算机2125将有利地允许用户与上述模块中的一个或多个交互,以提供信息,诸如例如要添加至用户的注册用户信息的个人信息。
尽管以上参照图21描述了装置和/或功能模块的特定系统,但是添加、移除和/或组合各种装置和/或模块的其他系统架构可以用来执行根据本公开的各个其他方面的各种过程。
图22是示出了根据本公开的一些方面可被使用的示例性处理系统2200的架构的高级框图。处理系统2200可以代表这样的计算机系统:其提供面部识别功能、中心控制功能、展台控制功能和/或其它部件或功能。处理系统的与本公开的主题无关的某些标准和众所周知的部件未在图22中示出。
处理系统2200包括一个或多个处理器2205,其与存储器2210操作性通信并耦接至总线系统2212。如图22中所示,总线系统2212是通过适当的网桥、适配器和/或控制器连接的任何一个或多个单独的物理总线和/或点对点连接的示意性表示。因此,总线系统2212可以包括例如系统总线、外围部件互连(PCI)总线、超传输或工业标准架构(ISA)总线、小型计算机系统接口(SCSI)总线、通用串行总线(USB)或电气与电子工程师协会(IEEE)标准1394总线(有时称为“火线”)。
一个或多个处理器2205是处理系统2200的中央处理单元(CPU),由此控制其整体操作。在某些方面,一个或多个处理器2205通过执行存储在存储器2210中的软件来实现这一点。(一个或多个)处理器2205可以是或者可以包括一个或多个可编程通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑装置(PLD)等,或者这样的装置的组合。
存储器2210表示任何形式的随机存取存储器(RAM)、只读存储器(ROM)、闪存等,或者这样的装置的组合。存储器2210包括处理系统2200的主存储器。实现以下描述的过程步骤的指令215可以驻留在存储器2210中,并且由(一个或多个)处理器2205从存储器2210执行。
还有利地,通过总线系统2212可操作地连接到(一个或多个)处理器2205的是一个或多个内部或外部大容量存储装置2220和网络接口2222。(一个或多个)大容量存储装置2220可以是或者可以包括以非易失性方式存储大量数据的任何常规介质,诸如一个或多个固态盘、磁盘或光盘。网络接口2222使处理系统2200能够通过网络与远程装置(例如,存储服务器)通信,并且可以是例如以太网适配器、光纤通道适配器等。
处理系统2200还有利地包括一个或多个输入/输出(I/O)装置2217,其可操作地耦接至总线系统2212。I/O装置2217可以包括例如显示装置、键盘、鼠标等。
图23示出了根据本发明的一方面的具有多个展台或吸引物(attraction)的会场。会场2300包括多个展台或包括展台2305、2310、2315、2320和2325的吸引物。每个展台分别具有关联的图像捕获装置2307、2312、2317、2322和2327。
例如,展台2305具有关联的图像捕获装置2307,其聚焦在展台2305前方的区域,以捕获具有进入展台2305的顾客的面部图像的图像。优选地,该区域由管理员用户定义,该管理员用户专注于图像的各个部分,或者控制相机指向展台2305前方的预定区域。优选地,图像捕获装置聚焦于展台的入口和/或出口附近的区域,以确保捕获具有最大数量的顾客的面部图像的图像。此外,尽管与每个展台一起示出了一个关联的图像捕获装置,但是根据本公开的各个方面,展台可以具有一个以上的关联的图像捕获装置。此外,图像捕获装置(诸如图像捕获装置2328)可以被放置在会场300周围的各个位置(诸如但不限于高人群流量区域),以捕获该位置中的顾客的位置信息和/或尽可能多的顾客。
根据一些方面,近距离传感器2329可以可操作地与图像捕获装置2328关联,来检测一个或多个顾客何时在某个位置。可替代地,图像捕获装置2328可以包括近距离感测功能。当检测到一个或多个顾客时,近距离传感器2329可以将信号发送至图像捕获装置2328。图像捕获装置2329随后捕获该位置的图像,以用于注册用户的位置确定,如以下将更详细地讨论的。
尽管以上参照图23描述了根据本发明的一方面的示例性会场,但是相对于彼此添加、移除、组合和/或移动部件的其他配置是可能的。
图24示出了根据本公开的一方面的提供关于用户在会场中的各个位置处的位置信息的过程的流程图。以下参照图36详细地描述用户的注册过程的一个示例。过程2400使用多个图像捕获装置(例如,图23中的装置2307、2312、2317、2322、2327和2328)在整个会场2405的各个已知位置中捕获顾客的图像。例如,位置可以是但不限于:展台的入口或出口;会场的入口或出口;和/或会场中的其他高人群流量位置。在步骤2410中,捕获的图像被有利地提供至面部识别装置或模块(例如,图21中的2102)。在步骤2415中,面部识别装置或模块标识每个捕获的图像中的包括一个或多个顾客的面部图像的期望的部分。
在步骤2420中,随后对每个捕获的图像的被标识部分执行面部识别过程,以标识(例如,利用适当的用户信息)每个图像中的每个注册用户,并且使每个被标识的用户与捕获图像的位置关联。在步骤2425中,每个被标识的用户的位置随后在用户的位置记录(诸如图33中所示的那些)中被更新。在步骤2430中,还可以从每个位置的图像确定包括但不限于展台的人群规模的某一位置中的人群状况。例如,软件可以对随时间流逝而拍摄的一组图像中具有唯一面部图像特征的实体进行计数。在步骤2435中,随后在例如图34中所示的数据库3400中的位置记录中更新每个位置的人群信息,此后结束过程2400。
如以上所讨论的,展台控制系统、装置或模块(例如,2108、2112,图21)可以捕获展台/高人群流量区域附近的顾客的图像。在一些实施例中,展台控制系统、装置或模块可以是不与特定展台关联的单独的系统。相反,图像捕获装置(例如,2328,图23)可以位于高人群流量位置,并且与位置控制系统和/或关联的展台控制系统关联,以将信息发送至中心控制装置或模块(例如,2104,图21)。
在一些实施例中,每个注册用户可以具有针对检测区域内的特定位置设置的许可要求。例如,基本用户可以具有带有设置的许可要求的被监测的位置的第一组位置,高级用户可以具有带有设置的许可要求的被监测的位置的第二组位置,并且管理用户可以具有带有设置的许可要求的所有被监测的位置。这样的许可要求可以例如根据进入通行证来进行设置,或者可以由授权用户单独设置。该系统可以检查注册用户的属性,以确定保存在系统中的用户属性,例如,用户是否具有在检测到该用户的位置内设置的许可要求。如果注册用户不具有在一位置内设置的许可要求(例如,当注册用户不具有针对VIP区域设置的许可要求时,注册用户处于VIP区域,或者当注册用户未购买与排队队伍关联的活动的门票时,注册用户在排队队伍中),则可以将通知发送至计算机系统,以指示已发生了未经授权的输入。该通知可以包括与注册用户关联的属性(例如,注册用户的注册照片及其姓名),并且可以被发送到任何经授权的计算机系统(诸如员工的移动装置或员工的终端)。任何适当的通知都可以用来向经授权的人员警告已经达到非许可状态。优选地,系统的所有注册用户具有至少一个设置的许可要求,例如,针对监测区域的进入设置的许可要求或者针对监测区域的礼品店设置的许可要求。在一些实施例中,可以将许可要求设置为具有时间阈值,诸如仅在营业时间期间或仅在工作时间期间。
以上描述了根据本公开的一个方面的用于获得注册用户的位置信息和/或会场中的位置的人群信息的整个过程。然而,对过程的步骤进行添加、组合、移除和/或重新排序的其他过程是可能的。
图25是根据本公开的一方面的示例性展台控制系统、装置或模块2500和/或位置控制系统(与图21中的2108、2112类似)的部件的框图,其包括控制器2505和图像捕获装置2515(与图23中的2328相似)。
控制器2505可以被实现为处理系统,其在捕获某一区域和/或位置的图像时控制图像捕获装置2515,以使用对捕获的图像的图像分析来获得注册用户的位置信息。根据一些方面,控制器2505还可以控制展台的一个或多个部件。这些部件可以包括例如阀门、液压升降机、在展台中提供运动的电子动画设备以及接收指令以执行有助于展台的展示的任务的任何其他部件。在一些其他方面,用于一个以上展台的控制系统可以由处理系统提供。这些控制装置可以经由触发机制来控制,该触发机制是通过识别一组图像内的预先定义的图像特性或运动来触发。例如,表可以定义当在一组图像内识别出预定老师或预定学生或具有老师属性的实体时电子动画设备激活。
图像捕获装置2515可以是捕获静止图像的相机和/或捕获视频图像(即,一组图像)的摄像机。在图25中所示的示例性实施例中,图像捕获装置2515是单独的装置,其包括经由无线或有线连接通信连接至控制器2505的处理系统。在一些其他方面,图像捕获装置2515是包括控制器2505的处理系统或模块的I/O装置。如以上所讨论的,图像捕获装置2515被设置为使得装置以捕获包括区域中的顾客的面部图像的图像的方式聚焦在展台附近的特定区域。图像捕获装置2515还可以捕获、记录或以其它方式提供其他信息,诸如,成像的图像对象的深度信息。
尽管以上参照图25描述了展台控制装置或模块的示例性实施例,但是添加、组合、重新布置和/或移除部件的其他实施例是可能的。
图26示出了根据本公开的一方面的由展台控制装置或模块(2500或2108/2112)执行以捕获要提供注册用户的位置信息的图像的示例性过程2600的流程图。在过程2600中,通过例如面部识别系统、运动传感器、热传感器和/或可以检测受众区域中的一个或多个顾客的存在的任何其他类型的传感器,在某一区域中检测顾客(2605)。
例如,响应于图像捕获装置2515在指定区域中检测到一个或多个顾客来捕获该区域的图像(2610)。可替代地,图像捕获装置可以以预定时间间隔定期捕获图像,或者当在指定区域中检测到一个或多个顾客时,可以连续捕获指定区域的视频馈送,并且随后可以从该视频馈送中提取一个或多个图像。
将捕获的图像可选地与关于图像的其他信息一起发送至中心控制装置或模块(例如,2104,图21)(2615)。这样的其他图像信息可以包括例如相机设置、深度信息、时间戳、照明信息、位置和/或与该图像有关的其他类似信息。可以单独发送图像信息,或者图像信息可以在捕获的图像中或与捕获的图像一起被发送。可选地,可以将视频馈送提供给中心控制装置或模块。展台控制装置或模块可以可选地监测视频馈送,并且仅在该区域中检测到顾客时才发送从馈送中获取的包括顾客的图像。展台控制装置或模块可以在发送图像之前可选地执行图像处理以改善图像品质,并且/或者其可以可选地将面部图像从捕获的图像分离,并且仅将图像中包括面部图像的部分发送至中心控制装置或模块。随后可以结束过程2600。
尽管以上参照图26讨论了根据本公开的各方面的由展台控制装置或模块执行以获得注册用户的位置信息的示例性过程,但是添加到、组合、重新布置或移除任何所述步骤中的由展台控制装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
根据本公开的一些方面,该系统还可以存储注册用户购买和/或获得的可消费产品的记录。这样的记录可以经由识别交易和将所述交易的属性记录在数据库中的所公开的计算机系统之一输入到数据库中。为了该讨论的目的,可消费产品被定义为会场中的注册用户可以获得或购买的任何物品。示例包括但不限于玩具、礼品券、纪念品或用户可以在会场中获得的任何其他物品。用户随后可以在稍后的时间到兑换中心,并获得用户早先购买/接收的可消费产品。优选地,兑换中心将在会场的出口附近,以允许用户在即将离开会场之前收集所获得的可消费产品。
图27示出了由展台控制模块或装置(例如,2108,图21)执行以发送关于由注册用户在展台处获得的可消费产品的信息的过程的流程图。过程2700开始于检测到用户有权享有可消费产品(2705)。该检测可以是购买可消费产品或者获得可消费产品作为游戏和/或竞赛中的奖品。例如,可以拍摄用户的图像,并且随后可以将面部图像特征输入到图像数据库中以检索用户的标识符,随后将其与包含实体标识符与产品权利之间的关系的数据库进行交叉引用。数据库返还这样的权利可能触发识别图像中的用户有权享有数据库中标识的可消费产品。
该过程随后生成可消费产品的记录,其指示所包含的可消费产品和获得该物品的注册用户(2710)。随后将可消费产品的记录发送到中心控制系统(2715),并且结束过程2700。
尽管以上参照图27讨论了根据本公开的各方面的由展台控制装置或模块执行以提供用户获得的可消费产品的记录的示例性过程,但是添加到、组合、重新布置或移除任何所述步骤的由展台控制装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
与以上讨论的可消费产品类似,一些展台和/或区域可以具有可用于拍照机会的区域,并且在拍照机会区域具有会场工作人员和/或专业摄影师以捕获注册用户和/或一组用户的图像。根据本发明的一些方面,该系统提供了这样的系统:其用于存储在各个拍照机会区域捕获的图像,并使这些图像可用于注册用户或被授权代理注册用户进行检索和/或购买的用户。优选地,这样的图像在注册用户可访问的存储装置(例如,网站或移动装置)上保存一段时间。在一些实施例中,在达到阈值时间段之后(例如,当一个月或一年过去时,或者当注册用户的会员资格期满时(例如,主题公园的会员资格)),自动存档这样的图像。
图28示出了根据本发明的一方面的另一示例性过程的流程图,其由展台控制系统、装置或模块(例如,2108,图21)和/或位置控制系统、装置或模块执行以将所捕获用户的图像提供至中心控制系统、装置或模块(2104,图21)以供用户检索。
过程2800开始于在与展台/区域关联的接受拍照区域捕获注册用户的图像(2805)。可以使用单独的和/或与位置确定所使用的(一个或多个)图像捕获装置不同的图像捕获装置来捕获该图像。
该过程随后标识与捕获的图像关联的每个注册用户(2810)。根据一些方面,可以通过读取用户携带的卡上的条和/或条形码来执行该标识。根据一些其他方面,可以使用面部识别系统、装置或模块(例如,2102,图21)来执行该标识。与图像中的每个被标识的注册用户关联的图像和标识符(图33)被发送到中心控制系统(2815)。根据一些实施例,被标识的注册用户的标识符可以被嵌入在图像的元数据中,或者他们可以被系统添加到图像的元数据中。根据一些其他实施例,可以生成并发送包括图像和标识符的图像记录。该元数据可以被保存到数据库中以促进图像的搜索。随后可以结束过程2800。
以上参照图28描述了根据本发明的一方面的由展台控制系统、装置或模块执行以提供拍照机会区域中捕获的注册用户的图像的过程,添加到、组合、重新布置或移除任何所述步骤的由展台控制系统、装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
图29示出了这样的示例性过程的流程图:其由中心控制装置或模块(例如,2104,图21)执行,以基于从整个会场的各个位置捕获的图像,获得和存储注册用户的位置信息、和/或获得和存储展台和/或位置的人群信息。可以针对接收到的图像中的一些或所有执行过程2900。因此,可以执行过程2900一次,以确定注册用户的当前位置,或者可替代地,可以对来自所有位置的图像定期执行过程2900,以不断地更新注册用户的位置信息。
在过程2900中,从展台控制装置或模块(例如,2108,图21)接收会场中各个位置的捕获的图像(2905)。如以上所讨论的,可以可选地与图像一起接收额外的图像信息。图像随后被提供至面部识别装置或模块(例如,2102,图21)以用于图像分析。中心控制装置或模块可以在将图像提供至面部识别装置或模块之前执行一些图像处理。例如,该分析可以包括将图像中的每一个中的面部图像隔离,修改图像以改善图像品质,和/或分析图像以确定或获得额外的或其它图像信息。在一些实施例中,捕获的图像可以将这样的其他图像信息提供至面部识别系统。来自各个位置的接收到的图像被提供至面部识别模块或系统。如以下将更详细地解释的,面部识别系统标识每个图像中的用户,并且使图像的位置与每个被标识的用户关联,以提供被标识的注册用户中的每一个的位置信息。此外,位置信息可以包括指示在位置处检测到注册用户的图像的时间的时间戳。
过程2900接收在捕获的图像中标识的注册用户的位置信息和标识符(2915)。中心控制系统(例如,2104,图21)基于接收到的位置信息来更新每个被标识的注册用户的记录中的位置信息(2920)。
过程2900还可以从面部识别系统接收每个位置/展台的人群信息(见图34)(2925),并且更新针对每个位置维持的位置记录中的人群信息(2930)。位置可以被定义为图像内的位置,但是可以使用表格或数据库将图像内的位置(例如x和y位置)与位置的标识符(例如,位置4、5中的实体在座位4B中,而位置2、3中的实体在座位3A中)进行交叉引用。随后可以结束过程2900。
尽管以上参照图29讨论了根据本公开的各方面的由中心控制装置或模块执行以获得和维持用于注册用户的位置信息和/或用于位置的人群信息的示例性过程,但是添加到、组合、重新布置或移除任何描述的步骤的由中心控制装置或模块执行以提供媒体内容的其他过程是可能的且被认为在本公开的范围内。
图30示出了由中心控制模块或系统(例如,2104,图21)执行以维持注册用户获得的可消费产品的列表的示例性过程的流程图。过程3000开始于中心控制模块或系统从展台控制系统或模块(2108、2112,图21)接收可消费交易记录(3005)。该交易记录包括可消费产品的标识符和注册用户有权享有该产品的标识符。在一些情形下,该交易记录可以包括其它交易信息,其可以例如包括购买价格和/或付款、期满日期/时间或与产品有关的其他信息。可以使用任何合适的用户界面来保存交易记录,诸如,保存与交易发生时系统可访问的交易数据库有关的元数据的交易装置。
被标识的注册用户的记录中的可消费产品信息可以被有利地更新为包括可消费产品(3010)。稍后,中心控制系统可以从兑换中心系统(未示出)接收用于由注册用户已经获得的可消费产品的列表的请求(3015)。兑换中心系统可以包括用于启用关于图30或其他地方在本文中描述的处理框的一个或多个计算装置。在一些实施例中,有权获得一个或多个其他用户(诸如该用户的孩子或其他组成员)的产品的用户可以获得注册用户具有获得其产品的授权的每个用户可用的可消费产品的列表。响应于该请求,中心控制系统将有利地将可消费产品的列表从注册用户的用户记录发送到兑换中心系统(3020)。兑换中心系统随后可以向用户提供所列出的可消费产品。兑换中心系统随后可以将由注册用户接收到的每个可消费产品添加到兑换物品列表,并将该列表发送至中心控制系统(3025)。中心控制系统随后可以更新注册用户的用户记录中的可消费产品列表,以反映兑换的产品(3030),并且可以结束过程3000。
尽管以上参照图30讨论了根据本公开的各方面的由中心控制装置或模块执行以维持注册用户的可消费产品信息的示例性过程,但是添加到、组合、重新布置或移除任何描述的步骤的由中心控制装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
根据本公开的一些方面,中心控制系统、装置或模块存储来自拍照机会区域的图像,并且使图像与注册用户关联。例如通过将数据库配置为根据人的标识符(例如,条形码、人的姓名)返回图像,中心控制系统、装置或模块随后可以将图像提供至兑换装置以用于注册用户选择、删除和/或购买图像。
图31示出了根据本公开的一方面的由发明的中心控制系统、装置或模块(例如,2104,图21)执行的用于存储图像、与注册用户关联、并且将图像提供至兑换装置的另一示例性过程。在过程3100中,从展台/位置系统、模块或装置接收与图像中的注册用户关联的图像和标识符(3105)。图像随后被存储在处理器可访问的存储器位置(3107)。根据一些实施例,图像存储在图像数据库,使用结构化或非结构化对象的数据结构,或者由中心控制系统、装置或模块维持的库中,如以下参照图33所述。随后将更新图像中被标识的每个注册用户的用户记录,以指示图像的存储信息,以将图像与注册用户关联(3110)。
稍后,中心控制系统可以从兑换装置接收针对已与注册用户关联的图像的列表的请求(3115)。在一些实施例中,具有获得/查看与一个或多个其它用户(诸如,用户的孩子或其它组成员)关联的图像的授权的用户可以获得注册用户对其具有查看或获得的授权的每个用户关联的图像列表。响应于请求,中心控制系统将向兑换装置发送来自(一个或多个)注册用户的(一个或多个)用户记录的图像列表(3120)。兑换装置随后将向请求用户提供所列出的图像。这可以包括从图像数据库下载图像和/或从中心控制系统请求图像的兑换装置。兑换装置随后将由注册用户接收、购买或上传的每个图像添加到保存的图像列表,并且将保存的列表发送至中心控制系统;和/或将每个删除的/丢弃的图像添加到丢弃的图像列表。中心控制系统将接收保存的图像列表和/或丢弃的图像列表(3125),中心控制系统随后可以更新存储在存储器中的图像和/或注册用户的用户记录中的关联图像,以反映接收到的列表中的每一个(3130),并且可以结束过程3100。
尽管以上参照图31讨论了根据本公开的各方面的由中心控制装置或模块执行以存储和提供来自注册用户的拍照机会区域的图像的示例性过程,但是添加到、组合、重新布置或移除任何描述的步骤的由中心控制装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
注册用户可能关于用户可以参观的展台或位置有某些限制。例如,一些父母可能不希望他们的孩子观看和/或乘坐(ride)某些展台,因为展台或乘坐品(ride)中的材料可能不适合他们孩子的年龄。此外,会场可能要确保孩子与适当的监护人(诸如老师或父母)一起离开会场,或者父母或其他成年人不会让未成年人在会场上无人看管。因此,根据本发明的这些方面中的一些方面的系统和过程可以提供对注册用户的位置的监测,并且它们可以确定当确定注册用户处于特定展台和/或其它位置时是否满足任何限制和/或访问特权。图32示出了由中心控制系统执行以监测根据本公开的一方面的区域从而基于限制和/或访问特权来确定注册用户在该区域中是否被许可的过程。
图32中所示的过程3200接收从与特定展台或位置关联的展台控制模块或系统(例如,2108、2112,图21)捕获的图像(3205)。中心控制系统或模块(例如,2104,图21)将该图像提供至面部识别系统或模块(例如,2102,图21)(3210)。中心控制系统接收图像中被标识的每个用户的位置信息(3215)。中心控制系统或模块随后可以确定被标识的用户中的每一个或任意一个是否具有针对特定展台和/或位置的任何限制和/或访问特权(3220)。例如,可以限制父母在没有未成年人的情况下不得离开,和/或可以限制未成年人在没有经授权的成年人的情况下不得离开。在第二示例中,展台可能是如此受欢迎,以至于有必要或有利于在某些时间限制用户对展台的访问。在一些情况下,用户可以具有访问特权,诸如进入高级展台和/或乘坐品的权利。如果针对特定展台位置对被标识的注册用户存在限制和/或访问特权,则进行检查以确定是否满足限制/访问特权(3225)。作为第二示例,中心控制系统可以确定经授权的成年人是否与被标识的未成年人在一起,和/或父母是否与他们的未成年人在出口处或在具有可能不适合该未成年人的年龄的材料的展台处。如果满足限制/访问特权,则可以结束过程3200。如果不满足限制/访问特权,则生成标识限制或特权的通知(3030)。在一些方面,这可能导致警告(诸如,警报、蜂鸣器)或一些其他装置被激活,以将限制/访问通知会场人员。在一些方面,该通知被发送到注册用户的组和/或子组中的指定方和/或用户的装置(3235)。在一些其他方面,该通知被发送到展台/位置处的会场人员的一个或多个装置,以允许该人员处理该情形。随后可以结束过程3200。
尽管以上参照图32讨论了根据本公开的各方面的由中心控制装置或模块执行以监测展台/位置处的限制和/或特权的示例性过程,但是添加到、组合、重新布置或移除任何描述的步骤的由中心控制装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
根据本公开的一些方面,中心控制系统可以将关于组中的注册用户的位置的信息提供至该组中的其他注册用户。此外,组中的用户还可以被划分为仅具有某些组成员的子组,该某些组成员具有针对组和/或特定子组的位置信息的访问特权。组/子组中的成员的位置信息可以被传送到这样的应用:该应用正在具有用于提供位置信息的计算机系统的会场中的注册用户的个人装置上或自助服务终端处的装置上执行。图33示出了根据本公开的一方面的由中心控制系统或模块(例如,2104,图21)执行以提供一组注册用户的位置信息的过程的流程图。
在过程3300中,接收与特定组关联的注册用户的位置信息的请求(3305)。可以以可以针对包括认证数据的数据库进行认证的任何合适的方式(例如,经由指纹或面部识别扫描(生物数据),或者通过输入用户名/密码组合)来认证请求信息的实体(3310)。如果认证失败(3312),则结束过程3300并且不提供位置信息。优选地,随后将错误消息通知发送到请求信息的实体。如果认证成功(3312),则系统可以查看保存在位置数据库中的注册用户的最新位置数据(3315)。该确定可以使用接收到的注册组的标识符来检索为每个注册组维持的成员列表。在一些实施例中,可以通过检索保存在属性的注册用户或组数据存储库中的组中的每个注册用户的用户记录中的组和/或子组字段来生成为每个注册组维持的成员列表。
可以确定请求用户是否被授权获得位置信息(3317)。在优选实施例中,经认证的用户需要用于获得关于个人和/或组的位置信息的许可,其由为保存在成员列表中或保存在包括注册用户属性(包括位置许可权限和访问)的数据库中的每个注册用户和/或注册组设置的许可标志来指示。还可以通过读取存储在经认证的请求用户的注册用户记录中的访问许可来执行这样的确定,该访问许可随后可以用来从包括每个注册用户的最新位置数据的数据库中检索每个成员的位置。在又一其他实施例中,该许可可以存储在由中心控制系统、装置或模块为所请求的组和/或子组维持的组数据记录中。
如果请求用户无权接收一组或该组中的个人的位置信息,则结束过程3300,并且优选地,经由用户界面终端将相应的通知发送给请求用户。如果请求用户被授权接收该组和/或该组中所有个人的位置信息,则中心控制系统、装置或模块从由中心控制系统、装置或模块维持的用户记录检索组和/或子组中的每个注册用户的至少一些位置信息(3320),这些记录将已识别的注册用户的位置信息存储在位置数据库中。在一些实施例中,每个注册用户的位置信息仅包括关于用户的最后确定的位置的信息。根据一些其他实施例,位置信息可以包括关于检测到注册用户的2个或更多个最后位置的信息。在又一些其他实施例中,提供了该组中每个注册用户的位置的整个历史记录。在一些其他方面,可以提供到达特定用户或用户组的当前位置的指导。随后可以将该组中每个注册用户的位置信息提供给请求装置(3325),并且可以结束过程3300。
尽管以上参照图33讨论了根据本公开的各方面的由中心控制装置执行以提供用户或用户组的位置信息的示例性过程,但是添加到、组合、重新布置或移除任何描述的步骤的由中心控制装置或模块执行以提供媒体内容的其他过程是可能的,并且被认为在本公开的范围内。
图34示出了根据本公开的一方面的由中心控制装置或模块维持的注册用户记录的示例。注册记录3400有利地包括标识符3405,诸如注册用户的姓名或会员号。记录3400还包括提供给中心控制装置或模块或者在注册过程期间从注册用户捕获的注册用户的面部图像3410。记录3400还包括标识与注册用户关联的组的组字段3425。另外,可以提供一个或多个子组字段3430。可替代地,子组字段可以是指向用户所属的所有子组的指针或包括用户所属的所有子组的链表。
记录3400还可以包括访问许可字段3435和限制字段3440。访问许可字段或数据结构3435存储指示用户的所有访问特权的代码。访问特权可以指示用户可以访问的展台、访问其他用户或组的位置信息的权限、和/或服务质量指示符(诸如用户在会场中可能具有的非常重要的人(VIP)特权)。限制字段或数据结构3440是列表、指向列表的指针、或包括适用于用户的所有限制的其他数据结构。限制可以包括但不限于对离开场地的限制、对展台的访问或访问时间的限制、会场的禁止区域等。
关于注册用户的特定信息的其他字段可以保存在数据库中。例如,记录3400中的字段可以有利地包括用于用户年龄的字段3415、到用户位置列表的链接3465、到可消费产品列表的链接3460、与用户关联的图像的列表3455、期望参观的展台的列表3450和注册用户的任何特殊需求3445。特殊需求的列表可以包括用户可在参观会场中的展台期间需要的要求(诸如语言、字幕、特殊访问等)的列表。在一些实施例中,字段可以由管理员用户输入,而在其他实施例中,用户可以在会场的用户界面自助服务终端中输入一个或多个字段。
尽管以上参照图34描述了注册用户数据记录的示例,但是可以使用添加、移除和/或组合字段的其他合适的数据记录。
根据本公开的一些方面,中心控制系统、装置或模块还可以提供或可以可替代地提供针对特定展台和/或会场的其他区域的人群信息。例如,该系统可以向注册用户指示期望的展台何时拥挤且等待时间长,或者不拥挤且等待时间短。在一些实施例中,该系统甚至可以建议要参观的展台和/或区域的次序,以确保注册用户可以在用户分配的时间量内参观用户期望的所有展台和/或区域。为此,中心控制系统(2104,图21)可以维持位置数据库,该位置数据库存储针对会场中的每个位置和/或展台的人群信息。在图35中示出了根据本公开的一方面的位置记录。
位置记录3500包括位置标识符字段3505、人群信息字段3510和感兴趣的用户字段3515。位置标识符字段3505是存储位置/展台的名称或一些其它字母数字标识符的字段。人群信息字段3510是除其他信息外还存储根据位置/展台的捕获的图像确定的在某些时间的人群的规模的列表或指向列表的指针。感兴趣的用户字段3515是存储有兴趣参观特定位置/展台的注册用户的标识符的列表、指向列表的指针或一些其他数据结构。
尽管以上参照图35讨论了根据本公开的一方面的由中心控制系统为位置/展台维持的位置记录,但是添加、移除、组合字段的位置记录被认为是本公开的一部分。
图36示出了根据本公开的一方面的由中心控制系统或者中心控制系统、装置或模块(例如,2104,图21)执行的示例性注册过程的流程图。在注册过程3600中,接收正在利用系统进行注册的用户的面部图像(3605)。例如,用户可以提供存储在用户用于注册的用户装置上的面部图像。在该情形下,过程3600可以发出命令(例如,通过无线通信),该命令引导用户装置使用与用户装置关联的图像捕获装置来捕获面部图像,并将该图像提供给过程3600。过程3600还可以接收用户的用户信息(3610)。个人信息可以包括但不限于年龄、地址、电子邮件地址、家庭电话号码、蜂窝电话号码、语言、残疾和其他特殊需求。根据一些方面,注册用户可以将信息输入到将信息提供给过程3600的个人装置。过程3600还可以接收组信息和子组信息(3615),其中,子组是来自该组的一个或多个用户的集合。
过程3600还可以接收用户的任何授权(3620)。授权可以包括对特定组和/或子组中的用户的位置信息的访问以及对收集和/或接收一个或多个其他用户的可消费物品的授权以及对一个或多个其他用户的图像的访问(3625)。过程3600还可以接收对用户的限制。如以上所讨论的,限制可以包括禁止参加特定展台和/或会场区域的限制以及对退出会场的限制。过程3600还可以接收用户感兴趣的一个或多个展台的列表(3630),以用于向用户提供参加感兴趣的展台的引导。另外,还可以通过过程3600来接收可以包括以上参照图14讨论的信息的至少一部分的任何其它信息。然而,该信息还可以包括可以期望的任何其他信息。
生成注册用户记录,该注册用户记录包括以上讨论的接收到的用户成员信息和捕获的面部图像(3635),并且将注册用户记录存储在用户数据库中(3640)。捕获的面部图像和注册用户的标识符被提供至面部识别装置或模型(3645),并且随后可以结束过程3600。
以上参照图36描述了根据本公开的实施例的用于注册用户的示例性过程。根据其它实施例,添加、组合、重新布置和/或移除一个或多个上述步骤的其他注册过程是可能的。
根据本公开的一些方面,系统和过程可以将与展台有关的信息提供给注册用户,以通过确保可以参观用户期望的所有展台来引导用户通过会场以最大化用户的享受。这可以包括向用户提供时间表或地图以引导用户前往会场以及/或者基于在整个会场内观察到的人群状况来更新时间表和/或地图。根据一些实施例,该系统可以仅提供关于与特定展台有关的人群信息的信息,以帮助用户确定接下来要参观哪些展台。
图37示出了由中心控制系统、装置或模块(例如,2104,图21)执行以用于通知注册用户关于会场中的展台和/或位置处的人群状态的示例性过程。过程3700从特定展台和/或位置的位置记录检索特定展台和/或位置的人群信息(3705)。人群信息可以是从存储在位置记录中的展台和/或位置中和/或附近的区域的捕获的图像确定的人群规模,如以上参照图34所述。将人群信息与预定的最小和最大人群规模阈值进行比较(3710)。如果人群规模小于最小阈值(3712),则过程1300确定对展台和/或位置感兴趣的一组注册用户,并通知该组中的注册用户中的每一个(3715)。根据一些实施例,感兴趣的用户的列表由系统来维持,并且通知来自该列表的顶部的预定数量的感兴趣的用户。例如,通过使用上述过程,在确定用户已参观该位置之后,可以移除该列表中的该注册用户。在一些其他实施例中,例如,通过使用上述过程,可以通知列表中的所有用户,并且在确定用户已经参观了该位置之后,将该用户从列表中移除。如果人群规模大于或等于最大阈值(3737),则通知感兴趣的用户展台和/或位置已达到或超过容纳人数。根据本公开的各个方面,可以经由例如SMS消息或电子邮件消息的消息将通知发送至手持装置。随后结束过程3700。
以上参照图37描述了根据本公开的实施例的用于通知注册用户展台和/或位置处的人群状况的示例性过程。根据其它实施例,添加、组合、重新布置和/或移除一个或多个上述步骤的其他通知过程是可能的。
图38示出了根据本公开的实施例的响应于接收到注册用户的面部图像和标识符由面部识别装置或模块(例如,2102,图21)执行的示例性过程。在过程3800中,面部识别装置或模块从中心控制系统或者中心控制装置或模块接收注册用户的面部图像和标识符(3805)。生成并存储面部识别记录(3810)。面部识别记录的生成可以包括例如执行图像的分析以生成可以在面部识别过程期间用于图像比较的面部参数,如以下进一步所讨论的。
以上参照图38描述了根据本公开的实施例的用于在面部识别系统中获得注册用户的面部图像的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略一个或多个上述步骤的用于获得面部图像的其他过程是可能的。
图39是根据本公开的一方面的用于面部识别记录的概念数据结构。面部识别记录3900包括注册用户的标识符3905、接收到的面部图像3910和用于面部识别比较的面部参数3915。标识符可以是例如注册用户的姓名和/或昵称,或者标识符可以是使图像与中心控制装置或模块存储的特定注册用户记录关联的数字或字母数字字符串。
尽管以上参照图39描述了根据本公开的实施例的示例性面部识别记录,但是根据其它实施例,添加、组合、重新布置和/或省略信息的其他面部识别记录是可能的。
图40中示出了根据本公开的实施例的执行面部识别过程的软件和/或硬件模块。面部识别系统4000包括接收模块4005、面部图像标识符模块4010、面部图像分析模块4015、面部识别模块4025和人群信息模块4030。
接收模块4005接收捕获的图像,并且处理捕获的图像以使图像符合执行用于面部识别分析的各种后续过程所需的参数。根据一些方面,图像处理可以包括例如焦点调整、颜色调整、边缘限定以及使图像符合后续模块的要求所需的其他图像调整。根据一些方面,接收模块还接收图像信息,诸如深度信息、相机信息和照明信息。接收模块4005在图像处理中使用图像信息以使该图像符合所要求的标准。
经处理的图像被提供至面部图像标识符模块4010,面部图像标识符模块4010标识该图像中的包括面部图像的部分。该标识可以使用边缘检测和其他各种搜索过程来标识图像的那些部分,这些部分包括可以对其应用面部识别的面部的图像。根据一些方面,面部图像标识符还可以执行一些图像处理以使包括面部图像的部分符合分析模块的要求。
面部图像分析模块4015接收图像中包括面部图像的部分,并且对图像的每个部分执行分析以生成其它模块所需的数据,从而生成所需信息。例如,图像分析模块可以生成执行为执行各种后续处理所需的边缘检测、颜色检测等所需的像素颜色和矢量数据。根据一些方面,面部图像分析模块4015还接收图像信息和/或完整图像以用于执行分析。由面部图像分析模块4015生成的信息被提供至面部识别模块4025和人群信息模块4030。
面部识别模块4025接收每个面部图像的信息,并且将每个面部图像的信息与每个面部识别记录中的面部图像的信息进行比较,以确定匹配,并返回与来自所捕获的图像的面部图像之一匹配达到预定的置信度的每个记录的标识符。为了促进该比较,记录可以包括面部图像数据,该面部图像数据被预先计算以通过消除分析每个参考图像的需要而提供更快的比较。
根据一些方面,人群信息模块4030接收图像信息,并且确定图像中检测到的参观者(是否被标识为注册用户)的数量。人群信息模块随后使用所确定的参观者数量来确定展台和/或位置处的人群规模的估计。
尽管以上说明描述了根据本公开的示例性实施例的面部识别系统的模块,但是根据其它实施例,添加、组合、重新布置和/或省略模块的其他面部识别模块是可能的。
图41示出了根据本公开的一方面的由面部识别系统4000执行以执行区域的捕获的图像中的面部识别的过程的流程图。在过程4100中,接收已知位置的图像(4105)。如以上所讨论的,接收到的图像可以被处理为使图像符合过程4100的要求。
标识接收到的(并且可选地,经处理的)图像的包括面部图像的部分(4110)。如以上所讨论的,每个部分还可以被处理为使面部图像符合面部识别过程的要求。执行对存储在面部识别记录中的面部图像的面部识别比较,以标识与面部图像匹配的记录(4115)。
图像中所示的位置与每个被标识的注册用户关联(4125)。用户和位置信息随后被提供至中心控制系统(4130)。确定与每个图像关联的每个展台和/或位置的人群信息(4135),并且每个位置的人群信息被提供至中心控制系统、装置或模块。随后可以结束过程4100。
以上参照图41描述了根据本公开的实施例的用于在面部识别系统中确定展台和/或位置的用户位置信息和人群信息的示例性过程。根据其它实施例,添加、组合、重新布置和/或省略一个或多个上述步骤的其他过程是可能的。
使用公开的计算机基础结构和功能来动态地递送媒体内容,可以导出以上的许多其他变化。注意,在整个说明书中对“一个方面”或“一方面”的引用意味着结合该方面描述的特定特征、结构或特性包括在本发明的至少一个方面中。因此,要强调并且应理解,在本说明书的各个部分中对“一方面”或“一个方面”或“替代方面”的两次或更多次引用不一定都指同一方面。此外,如本领域普通技术人员将认识到的,在本公开的一个或多个方面中,可以适当地组合所指的特定特征、结构或特性。
以下是可以使用所公开的发明的系统和方法来体现的附加点。
第一点是用于提供媒体内容的系统,包括:第一图像捕获装置,其捕获第一组捕获的图像,其中,第一组捕获的图像包括第一组图像特征;媒体内容回放装置;图像数据库,其使图像特征与标识符关联;关系数据库,其使标识符彼此关联;属性数据库,其使标识符与属性关联;媒体数据库,其使属性与媒体内容关联;以及媒体内容计算机系统,其被编程为:使用图像数据库根据第一组图像特征来生成第一组标识符,使用关系数据库根据第一组标识符来生成第二组标识符,使用属性数据库根据第二组标识符来生成导出的一组属性,使用媒体数据库根据导出的一组属性来生成一组媒体内容;以及在媒体内容回放装置上播放该组媒体内容的至少一部分。
第二点是第一点的系统,其中,根据第一组标识符和第二组标识符两者来生成导出的一组属性。
第三点是第一点的系统,其中,第一组标识符包括车牌号,其中,第二组标识符包括面部特征。
第四点是第三点的系统,其中,第二组标识符包括与车牌号关联的车辆内部的人和位置两者。
第五点是第一点的系统,还包括捕获第二组捕获的图像的第二图像捕获装置,其中,第二组捕获的图像包括第二组图像特征,其中,媒体内容计算机系统还被编程为:使用图像数据库根据第二组图像特征来生成标识符的关联组(a correlation set ofidentifiers);使用标识符的关联组来生成一组关系;以及将该组关系保存在关系数据库中。
第六点是第五点的系统,其中,第二组图像特征包括车牌号和面部特征两者。
第七点是第一点的系统,还包括:交易捕获装置,其捕获一组交易属性和捕获的交易标识符,其中,媒体内容计算机系统还被编程为:识别第一组捕获的图像中的交易;根据识别的交易来生成所生成的交易标识符;将所生成的交易标识符发送至交易捕获装置;从交易捕获装置接收该组交易属性;以及将该组交易属性保存到属性数据库。
第八点是第七点的系统,其中,所生成的交易标识符和所捕获的交易标识符两者包括时间戳值,其中,在将该组交易属性发送至媒体内容计算机系统之前,交易捕获装置使所生成的交易标识符与所捕获的交易标识符匹配。
第九点是第七点的系统,其中,媒体内容计算机系统通过标识多个第一组捕获的图像中的移动来识别第一组捕获的图像中的交易。
第十点是第七点的系统,其中,导出的一组属性包括该组交易属性的至少一部分。
第十一点是第一点的系统,其中,媒体内容计算机系统还被编程为将导出的一组属性的至少一部分发送至服务计算机系统。
第十二点是用于生成目标媒体内容的方法,包括:使用第一图像捕获装置来捕获第一组图像;标识第一组图像内的第一组捕获的图像特征;使用图像数据库根据被标识的第一组捕获的图像特征来导出第一组标识符;使用关系数据库根据第一组标识符来导出第二组标识符;使用属性数据库根据第二组标识符来导出第一组属性;使用媒体数据库根据第一组属性来导出一组媒体内容;以及在媒体内容回放装置上播放该组媒体内容的一部分。
第十三点是第十二点的方法,其中,标识第一组捕获的图像特征包括标识第一组图像内的车牌号,其中,导出第一组标识符包括使用图像数据库根据车牌号来导出车辆的标识符,其中,导出第二组标识符包括使用关系数据库从车辆的标识符导出车辆的一组乘员。
第十四点是第十三点的方法,还包括:使用第二图像捕获装置来捕获第二组图像;标识第二组图像内的第二组捕获的图像特征,其中,标识第二组捕获的图像特征包括标识第二组图像内的车牌号和标识第二组图像内的一组面部特征;使用图像数据库根据被标识的一组面部特征来导出一组乘员标识符;使用图像数据库根据车牌号来导出车辆的标识符;以及将车辆的标识符与被标识的一组面部特征之间的关系添加至关系数据库。
第十五点是第十三点的方法,还包括:标识第一组图像中的交易;根据被标识的交易从交易捕获装置检索一组交易属性;以及根据第二组标识符将该组交易属性添加至属性数据库。
第十六点是第十三点的方法,还包括:从第一组图像中的至少两个中导出车辆的平均速度,其中,媒体内容回放装置包括路侧标记或广告牌;以及根据平均速度和到路边广告牌的距离来导出时间,其中,播放该组媒体内容的所述部分包括根据导出的时间来延迟播放该组媒体内容的所述部分的时间。
第十七点是第十二点的方法,其中,导出第一组属性包括使用属性数据库根据第一组标识符的一部分和第二组标识符两者来导出第一组属性。
第十八点是第十二点的方法,还包括:在第一组图像内标识与媒体内容回放装置的交互;以及根据该交互在媒体内容回放装置上播放该组媒体内容的不同部分。
第十九点是第十八点的方法,其中,该交互包括从媒体内容回放装置移开视线的动作。
第二十点是第十九点的方法,还包括根据该交互来更新与第一组标识符和第二组标识符中的至少一者关联的一组属性。

Claims (59)

1.一种用于提供展台的媒体内容的系统,包括:
第一图像捕获装置,其被配置为获得至少一个用户的至少一个图像;
第二图像捕获装置,其被配置为获得所述展台的受众区域中的多个受众成员的图像;
中心控制系统,其被配置为接收所述至少一个用户的所述至少一个图像;
媒体内容回放装置;
处理器;以及
存储器,其与所述处理器数据通信,并且具有存储在其中的指令,所述指令在由所述处理器读取时指导所述处理器:
(a)通过在所述中心控制系统处存储所述至少一个用户的所述至少一个图像并基于所述至少一个用户的所述至少一个图像生成面部图像数据,向所述中心控制系统注册所述用户;
(b)从所述第二图像捕获装置接收所述多个受众成员的所述图像;
(c)分析所述多个受众成员的所述图像以生成受众成员标识符;
(d)从内容提供者装置检索与所述受众成员标识符中的每一个关联的当前的受众信息,其中所述当前的受众信息针对所述受众成员标识符中的每一个标识优选的媒体内容;
(e)基于检索到的当前的受众信息的所述优选的媒体内容的最大合计来选择要呈现的媒体内容;以及
(f)将所选择的媒体内容的媒体内容信息提供至所述媒体内容回放装置,
其中,所述媒体内容回放装置使用所提供的媒体内容信息播放所选择的媒体内容,
其特征在于,用于分析所述多个受众成员的所述图像的指令还包括这样的指令,其用于:
标识所述图像的包括面部图像的每个部分;以及
对所述图像的包括面部图像的每个部分执行面部识别,以标识与所述面部图像关联的受众成员标识符,其中执行面部识别包括将所述面部图像与所述面部图像数据进行比较,以标识与所述面部图像关联的受众成员标识符。
2.根据权利要求1所述的系统,还包括近距离传感器,其可操作以:
检测所述受众区域中的受众成员;以及
响应于所述检测,将近距离信号发送至所述第二图像捕获装置,其中,响应于所述近距离信号,所述第二图像捕获装置获得所述多个受众成员的所述图像。
3.根据权利要求2所述的系统,其中,所述第二图像捕获装置包括所述近距离传感器。
4.根据权利要求1所述的系统,其中,用于分析所述多个受众成员的所述图像的指令还包括这样的指令,其用于:
通过分析所述图像来获得与所述图像的包括面部图像的每个部分关联的每个受众成员的受众信息;以及
将每个关联的受众成员的所述受众信息添加到所述当前的受众信息,其中,所添加的受众信息包括物理属性信息。
5.根据权利要求1所述的系统,其中,用于分析所述多个受众成员的所述图像的指令还包括这样的指令,其用于:
对所述图像的包括面部图像部分的每个部分执行行为识别,以确定所述受众区域中的多个受众成员的人口统计学信息;并且
在所述当前的受众信息中包括每个面部图像部分的所述人口统计学信息。
6.根据权利要求1所述的系统,其中,用于分析所述多个受众成员的所述图像的指令包括这样的指令,其用于:
从所述图像的包括所述多个受众成员的面部图像的部分确定所述多个受众成员中的每一个的物理属性信息,以生成受众属性信息;并且
在所述当前的受众信息中包括所述受众属性信息。
7.根据权利要求1至3中任一项所述的系统,其中,所述指令包括这样的指令,其用于:
基于检索到的当前的受众信息,选择用于在由所述媒体内容回放装置回放所选择的媒体内容期间使用的回放参数;并且
在提供至所述媒体内容回放装置的所述媒体内容信息中包括所选择的媒体内容的标识符和所选择的回放参数。
8.根据权利要求7所述的系统,其中,所选择的回放参数包括从由隐藏式字幕、音频语言、和音量中的一个或多个组成的参数组选择的一个或多个参数。
9.根据权利要求1至3中任一项所述的系统,其中,所选择的媒体内容包括视频媒体内容和音频媒体内容中的至少一个。
10.根据权利要求1至3中任一项所述的系统,其中,所选择的媒体内容信息包括包含所选择的媒体内容的文件的标识符。
11.根据权利要求1至3中任一项所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
在由所述媒体内容回放装置回放所选择的媒体内容期间,接收由所述第二图像捕获装置捕获的所述受众区域的第二图像;
分析所述第二图像以生成当前的受众信息更新;
基于所述当前的受众信息更新来修改所确定的媒体内容,以生成媒体内容更新信息;以及
将所述媒体内容更新信息提供至所述媒体内容回放装置,
其中,所述媒体内容回放装置使用所述媒体内容更新信息来回放经修改的所确定的媒体内容。
12.根据权利要求1至3中任一项所述的系统,其中,检索到的受众信息包括与存储在所述内容提供者装置中的所述受众成员标识符中的至少一些关联的兴趣和要求,并且其中,基于检索到的兴趣和要求来选择所述媒体内容。
13.根据权利要求1至3中任一项所述的系统,其中,检索到的受众信息包括与存储在所述内容提供者装置中的所述受众成员标识符中的至少一些关联的人口统计学信息,并且其中,基于检索到的人口统计学信息来选择所述媒体内容。
14.根据权利要求1至3中任一项所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
从与所述受众成员标识符中的指定的一个受众标识符关联的受众成员的个人装置接收特定受众信息的输入;
将所述特定受众信息保存在所述内容提供者装置中,作为与所述受众成员标识符中的所述指定的一个受众标识符关联;
检索作为所述当前的受众信息的一部分的所述特定受众信息;以及
使用所述特定受众信息来选择所述媒体内容。
15.根据权利要求14所述的系统,其中,所存储的指令还指导处理器选择由检索到的受众信息中的最大数量的受众成员使用的音频语言,并选择由检索到的受众信息中的第二大数量的受众成员使用的隐藏式字幕轨道语言。
16.根据权利要求15所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
(a)分析所述多个受众成员的所述图像以确定所述图像的可包括特定组的视觉标识符的图像的每个部分;
(b)将所述图像的每个被标识的部分与一个特定组的所述视觉标识符进行比较,以将所述图像中的多个受众成员标识为所述组的成员;以及
(c)基于从所保存的组记录中检索到的组特性来确定所述媒体内容的媒体内容信息。
17.根据权利要求16所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
标识所述图像的至少一个部分中的多个像素中的每一个的颜色;
确定所述图像的所述至少一个部分中的每种颜色的多个像素的数量;以及
基于被确定为与特定组关联的颜色的所述多个像素的数量大于阈值,标识与所述受众中的至少一个受众成员关联的每个特定组,
其中,所述组特性包括所述特定组的组信息。
18.根据权利要求17所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
基于第一特定组的组特性选择音频语言;
基于第二特定组的组特性选择隐藏式字幕语言,其中,所述第一特定组的受众成员的数量大于所述第二特定组的受众成员的数量;以及
在提供至所述媒体内容回放装置的所述媒体内容信息中包括所选择的音频语言和所述隐藏式字幕语言。
19.根据权利要求18所述的系统,其中,所存储的指令在由一个或多个处理器读取时,还指导所述一个或多个处理器:
获得与所述图像的每个被标识的部分关联的每个被标识的组的组信息;以及
将每个被标识的组的所获得的组信息添加到当前的受众信息,以确定所述媒体内容回放装置要呈现的媒体内容,其中,所述一个或多个处理器基于所获得的组信息来选择媒体内容。
20.根据权利要求19所述的系统,其中,从由颜色、符号和标志组成的组选择每个被标识的组的所述视觉标识符。
21.根据权利要求20所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
基于所述组特性,确定用于在由所述媒体内容回放装置回放所选择的媒体内容期间使用的回放参数;并且
包括所确定的媒体内容的标识符和所确定的回放参数到所述媒体内容回放装置。
22.根据权利要求21所述的系统,其中,所确定的回放参数包括从由隐藏式字幕、音频语言、音量、分辨率、对比度、亮度和界面配置组成的参数组选择的至少一个参数。
23.根据权利要求17所述的系统,其中,所述媒体内容包括视频媒体内容和音频媒体内容中的至少一个。
24.根据权利要求23所述的系统,还包括:
图像数据库,其将图像特征与受众成员标识符关联;
关系数据库,其将所述受众成员标识符彼此关联;
属性数据库,其位于所述内容提供者装置上,并且将所述受众成员标识符与属性关联;以及
媒体数据库,其将属性与媒体内容关联;
其中,所述第二图像捕获装置捕获包括所述展台的所述多个受众成员的所述图像的第一组捕获的图像,其中,所述第一组捕获的图像包括第一组图像特征,并且
其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
(a)使用所述图像数据库根据所述第一组图像特征来生成第一组受众成员标识符;
(b)使用所述关系数据库根据所述第一组受众成员标识符来生成所述受众成员标识符;
(c)使用所述属性数据库根据所述受众成员标识符来生成导出的一组属性,其中,所述当前的受众信息包括所述导出的一组属性,以及
(d)根据所述导出的一组属性从所述媒体数据库选择所述媒体内容。
25.根据权利要求24所述的系统,其中,所存储的指令在由所述处理器读取时,还指导所述处理器根据所述第一组标识符和所述受众成员标识符两者来生成所述导出的一组属性。
26.根据权利要求24所述的系统,其中,所述第一组标识符包括车牌号,并且其中,所述受众成员标识符包括面部特征。
27.根据权利要求26所述的系统,其中,所述受众成员标识符包括与所述车牌号关联的车辆内的人和位置两者。
28.根据权利要求24所述的系统,还包括第三图像捕获装置,其被配置为捕获第二组捕获的图像,
其中,所述第二组捕获的图像包括第二组图像特征;并且
其中,所存储的指令在由所述处理器读取时,还指导所述处理器:
使用所述图像数据库根据所述第二组图像特征来生成标识符的关联组;
使用所述标识符的关联组来生成一组关系,并且
将所生成的一组关系保存在所述关系数据库中;其中,根据所生成的一组关系来生成所述受众成员标识符。
29.根据权利要求28所述的系统,其中,所述第二组图像特征包括车牌号和面部特征两者。
30.根据权利要求24所述的系统,还包括:
交易捕获装置,其捕获一组交易属性和捕获的交易标识符;
其中,所存储的指令在由所述一个或多个处理器读取时,还指导所述一个或多个处理器:
识别所述第一组捕获的图像中的交易;
根据所识别的交易来生成所生成的交易标识符;
将所生成的交易标识符发送至所述交易捕获装置;
从所述交易捕获装置接收所述一组交易属性;以及
将所述一组交易属性保存到所述属性数据库,其中,所述导出的一组属性包括所述一组交易属性。
31.根据权利要求30所述的系统,其中,所生成的交易标识符和所述捕获的交易标识符两者包括时间戳值,其中,在将所述一组交易属性发送至所述媒体内容计算机系统之前,所述交易捕获装置使所生成的交易标识符与所述捕获的交易标识符匹配。
32.根据权利要求30所述的系统,其中,所述媒体内容计算机系统通过标识多个所述第一组捕获的图像之中的运动来识别所述第一组捕获的图像中的交易。
33.根据权利要求30所述的系统,其中,所述导出的一组属性包括所述一组交易属性的至少一部分。
34.一种用于提供展台的媒体内容的方法,所述方法包括:
通过第一图像捕获装置获得至少一个用户的至少一个图像;
通过在中心控制系统处存储所述至少一个用户的所述至少一个图像并基于所述至少一个用户的所述至少一个图像生成面部图像数据,向所述中心控制系统注册所述用户;
从第二图像捕获装置捕获受众区域中的多个受众成员的图像;
通过处理器分析捕获的图像,以生成受众标识符;
通过所述处理器从内容提供者装置检索与所述受众标识符中的每一个关联的当前的受众信息,其中,所述当前的受众信息包括所述受众标识符中的每一个最感兴趣的媒体内容;
通过所述处理器基于检索到的当前的受众信息最大数量的受众成员最感兴趣的媒体内容来标识用于媒体内容呈现的媒体内容信息;
通过所述处理器将所述媒体内容信息提供至媒体内容回放装置;以及
通过所述媒体内容回放装置基于所述媒体内容信息来播放媒体内容,
其特征在于,分析捕获的图像的步骤包括:标识所述图像的包括面部图像的每个部分;以及对所述图像的每个部分执行面部识别,以标识与所述面部图像关联的受众成员标识符,其中执行面部识别包括将所述面部图像与所述面部图像数据进行比较,以标识与所述面部图像关联的受众成员标识符。
35.根据权利要求34所述的方法,还包括:检测受众成员,以及响应于所述检测发送近距离信号,其中,所述第二图像捕获装置响应于所述近距离信号来获得所述多个受众成员的所述图像。
36.根据权利要求34所述的方法,其中,检索当前的受众信息的步骤还包括:
从所述内容提供者装置获得与所述图像的每个部分关联的每个受众成员的受众信息;以及
将每个关联的受众成员的所述受众信息添加到所述当前的受众信息。
37.根据权利要求34所述的方法,其中,分析捕获的图像的步骤还包括:
对所述图像的每个部分执行行为识别,以确定所述受众区域中的多个受众成员的人口统计学信息;以及
在所述当前的受众信息中包括每个面部图像部分的所述人口统计学信息。
38.根据权利要求34所述的方法,其中,分析捕获的图像的步骤还包括:
标识所述图像的包括多个受众成员中的一个的面部图像的每个部分;
从所述图像的包括所述多个受众成员的面部图像的部分导出所述多个受众成员中的每一个的物理属性信息,以生成受众属性信息;以及
在所述当前的受众信息中包括所述受众属性信息。
39.根据权利要求34所述的方法,其中,标识所述媒体内容信息的步骤还包括:
确定用于触发所述媒体内容回放装置的操作的所述媒体内容;
确定用于在由所述媒体内容回放装置播放被标识的媒体内容期间使用的回放参数;以及
在所述媒体内容信息中包括所述被标识的媒体内容的标识符和所述回放参数。
40.根据权利要求34所述的方法,其中,标识所述媒体内容信息的步骤还包括:
确定要提供至所述媒体内容回放装置的所述媒体内容;
确定用于在由所述媒体内容回放装置播放被标识的媒体内容期间使用的回放参数;以及
在所述媒体内容信息中包括所述被标识的媒体内容的标识符和所述回放参数。
41.根据权利要求34所述的方法,还包括:
在播放被标识的媒体内容期间接收使用所述第二图像捕获装置捕获的所述受众区域的第二图像;
分析所述第二图像以生成当前的受众信息更新;
基于所述当前的受众信息更新来修改所述被标识的媒体内容,以生成媒体内容更新信息;以及
将所述媒体内容更新信息提供至所述媒体内容回放装置,以基于所述媒体内容更新信息来播放经修改的所确定的媒体内容。
42.根据权利要求34所述的方法:
其中,分析捕获的图像的步骤还包括通过所述处理器对捕获的图像执行图像分析,以标识与所述受众区域中的至少一组受众成员关联的视觉标识符;
其中,检索当前的受众信息的步骤包括从所述内容提供者装置检索与所述视觉标识符关联的组信息并且将检索到的成员信息添加到所述当前的受众信息;以及
其中,标识媒体内容信息的步骤包括根据检索到的成员信息来标识所述媒体内容信息。
43.根据权利要求42所述的方法,其中,分析捕获的图像的步骤还包括:
标识与所述受众成员的视觉标识符关联的所述图像的至少一个部分中的多个像素中的每一个的颜色;
确定所述图像的所述至少一个部分中的每种颜色的多个像素的数量;以及
基于与所述组关联的颜色的所述多个像素的所确定的数量大于阈值数量,标识一组受众成员;
其中,检索所述当前的受众信息的步骤包括将被标识的组的组信息添加到所述当前的受众信息。
44.根据权利要求42或43所述的方法,其中,分析捕获的图像的步骤还包括:
基于第一特定组的组特性选择音频语言;
基于第二特定组的组特性选择隐藏式字幕语言,其中,所述第一特定组的受众成员的数量大于所述第二特定组的受众成员的数量;以及
将所选择的音频语言和所选择的隐藏式字幕语言包括到提供至所述媒体内容回放装置的所述媒体内容更新信息。
45.根据权利要求42所述的方法,其中,检索当前的受众信息的步骤还包括:
获得所述图像的所述受众区域中的受众成员的每个组的组信息;以及
将受众成员的每个组的所述组信息添加到所述当前的受众信息。
46.根据权利要求42所述的方法,其中,分析捕获的图像的步骤还包括:
对所述图像的每个部分执行行为识别,以确定所述受众区域中的多个受众成员的人口统计学信息;以及
在所述当前的受众信息中包括每个面部图像部分的所述人口统计学信息。
47.根据权利要求34所述的方法,其中,标识所述媒体内容信息的步骤还包括:
确定用于触发所述媒体内容回放装置的操作的所述媒体内容;
确定用于在由所述媒体内容回放装置回放所确定的媒体内容期间使用的回放参数;以及
在所述媒体内容信息中包括所确定的媒体内容的标识符和所述回放参数。
48.根据权利要求34所述的方法,其中,标识所述媒体内容信息的步骤还包括:
确定要提供至所述媒体内容回放装置的所述媒体内容;
确定用于在由所述媒体内容回放装置回放所确定的媒体内容期间使用的回放参数;以及
在所述媒体内容信息中包括所确定的媒体内容的标识符和所述回放参数。
49.根据权利要求34所述的方法,
其中,捕获所述多个受众成员的所述图像的步骤包括使用所述第二图像捕获装置来捕获第一组图像,其中,所述第一组图像包括所述多个受众成员的所述图像,
其中,分析捕获的图像的步骤包括:
标识所述第一组图像内的第一组捕获的图像特征;
使用图像数据库根据被标识的所述第一组捕获的图像特征来导出第一组标识符;以及
使用关系数据库根据所述第一组标识符来导出所述受众标识符,
其中,检索与所述受众标识符关联的当前的受众信息的步骤包括使用属性数据库根据第二组标识符来导出第一组属性,以及将所述第一组属性添加到所述当前的受众信息;以及
其中,标识所述媒体内容信息的步骤包括根据导出的第一组属性来标识所述媒体内容信息。
50.根据权利要求49所述的方法,
其中,标识所述第一组捕获的图像特征包括标识所述第一组图像内的车牌号;
其中,导出所述第一组标识符包括使用所述图像数据库根据所述车牌号来导出车辆的标识符;以及
其中,导出所述第二组标识符包括使用所述关系数据库从所述车辆的所述标识符导出所述车辆的一组乘员。
51.根据权利要求50所述的方法,还包括:
使用第三图像捕获装置来捕获第二组图像;
标识所述第二组图像内的第二组捕获的图像特征;
其中,标识所述第二组捕获的图像特征包括标识所述第二组图像内的车牌号以及标识所述第二组图像内的一组面部特征;
使用所述图像数据库根据被标识的所述一组面部特征来导出一组乘员标识符;
使用所述图像数据库根据所述车牌号来导出所述车辆的所述标识符;以及
将所述车辆的所述标识符与被标识的所述一组面部特征之间的关系添加到所述关系数据库。
52.根据权利要求49至51中任一项所述的方法,还包括:
标识所述第一组图像中的交易;
根据被标识的交易从交易捕获装置检索一组交易属性;
根据所述第二组标识符将所述一组交易属性添加到所述属性数据库。
53.根据权利要求50或51所述的方法,还包括:
从所述第一组图像中的至少两个导出所述车辆的平均速度,其中,所述媒体内容回放装置包括标记;以及
根据所述平均速度和到所述标记的距离来导出时间,其中,播放所述一组媒体内容的所述部分包括根据导出的时间来延迟播放所述一组媒体内容的所述部分的时间。
54.根据权利要求49至51中任一项所述的方法,其中,导出第一组属性的步骤包括使用所述属性数据库根据所述第一组标识符的一部分和所述第二组标识符两者来导出所述第一组属性。
55.根据权利要求49至51中任一项所述的方法,还包括:
在所述第一组图像内标识与所述媒体内容回放装置的交互;以及
根据所述交互在所述媒体内容回放装置上播放所述一组媒体内容的不同部分。
56.根据权利要求55所述的方法,其中,所述交互包括从所述媒体内容回放装置移开视线的动作。
57.根据权利要求56所述的方法,还包括根据所述交互来更新与所述第一组标识符和所述第二组标识符中的至少一者关联的一组属性。
58.一种用于将展台的媒体内容提供给与所述展台关联的媒体内容回放装置的设备,所述设备包括:
处理器;以及
所述处理器可读的存储器,其存储指令,所述指令在由所述处理器读取时,指导所述处理器:
通过第一图像捕获装置获得至少一个用户的至少一个图像;
通过在中心控制系统处存储所述至少一个用户的所述至少一个图像并基于所述至少一个用户的所述至少一个图像生成面部图像数据,向所述中心控制系统注册所述用户;
从第二图像捕获装置捕获接近所述展台的受众区域中的多个受众成员的图像;
对捕获的图像执行面部识别,以获得面部识别信息;
使用所述面部识别信息检索存储在内容提供者装置上的当前的受众信息;
基于吸引检索到的当前的受众信息中的最大数量的受众成员的可用媒体内容来标识用于媒体内容呈现的媒体内容信息;以及
将所述媒体内容信息提供至所述媒体内容回放装置,
其特征在于,用于对捕获的图像执行面部识别的指令还包括这样的指令,其用于:
标识所述图像的包括面部图像的每个部分;以及
对所述图像的包括面部图像的每个部分执行面部识别,以标识与所述面部图像关联的受众成员标识符,其中执行面部识别包括将所述面部图像与所述面部图像数据进行比较,以标识与所述面部图像关联的所述受众成员标识符。
59.根据权利要求58所述的设备,其中,所述处理器可读的所述存储器还存储这样的指令,所述指令在由所述处理器读取时,还指导所述处理器:
确定所述受众区域中的受众中的受众成员的视觉标识符;
通过包括与所述视觉标识符关联的多个所述受众成员的组信息来生成所述当前的受众信息;以及
基于所包括的成员信息来标识要呈现的媒体内容的媒体内容信息。
CN201980047640.9A 2018-07-16 2019-07-11 用于生成目标媒体内容的系统和方法 Active CN112514404B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US16/036,625 US20200021875A1 (en) 2018-07-16 2018-07-16 Systems and methods for providing media content for an exhibit or display
US16/036,625 2018-07-16
US16/111,109 2018-08-23
US16/111,109 US20200021871A1 (en) 2018-07-16 2018-08-23 Systems and methods for providing media content for an exhibit or display
US16/142,435 2018-09-26
US16/142,435 US10484818B1 (en) 2018-09-26 2018-09-26 Systems and methods for providing location information about registered user based on facial recognition
US16/380,847 US10831817B2 (en) 2018-07-16 2019-04-10 Systems and methods for generating targeted media content
US16/380,847 2019-04-10
PCT/US2019/041431 WO2020018349A2 (en) 2018-07-16 2019-07-11 Systems and methods for generating targeted media content

Publications (2)

Publication Number Publication Date
CN112514404A CN112514404A (zh) 2021-03-16
CN112514404B true CN112514404B (zh) 2023-09-01

Family

ID=69138250

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980047640.9A Active CN112514404B (zh) 2018-07-16 2019-07-11 用于生成目标媒体内容的系统和方法

Country Status (5)

Country Link
US (2) US10831817B2 (zh)
EP (1) EP3824637A4 (zh)
CN (1) CN112514404B (zh)
AU (1) AU2019308162A1 (zh)
WO (1) WO2020018349A2 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10831817B2 (en) * 2018-07-16 2020-11-10 Maris Jacob Ensing Systems and methods for generating targeted media content
US11615134B2 (en) * 2018-07-16 2023-03-28 Maris Jacob Ensing Systems and methods for generating targeted media content
US10833886B2 (en) * 2018-11-07 2020-11-10 International Business Machines Corporation Optimal device selection for streaming content
WO2022251202A1 (en) * 2021-05-28 2022-12-01 Ensing Maris Systems and methods for generating targeted media content

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105765986A (zh) * 2013-11-26 2016-07-13 At&T知识产权部有限合伙公司 用于分析感官信息以估计观众反应的方法和系统
CN105934769A (zh) * 2013-04-29 2016-09-07 微软技术许可有限责任公司 媒体同步广告覆盖

Family Cites Families (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4769697A (en) 1986-12-17 1988-09-06 R. D. Percy & Company Passive television audience measuring systems
DE69815291T2 (de) 1997-01-17 2004-04-29 British Telecommunications P.L.C. Sicherheitsgerät und verfahren
US6072894A (en) 1997-10-17 2000-06-06 Payne; John H. Biometric face recognition for applicant screening
DE60119418T2 (de) 2000-03-22 2007-05-24 Kabushiki Kaisha Toshiba, Kawasaki Gesichtsbildaufnehmendes Erkennungsgerät und Passüberprüfungsgerät
GB0012132D0 (en) 2000-05-20 2000-07-12 Hewlett Packard Co Targeted information display
GB0408208D0 (en) 2004-04-13 2004-05-19 Globaleye Network Intelligence Area monitoring
US8190907B2 (en) 2004-08-11 2012-05-29 Sony Computer Entertainment Inc. Process and apparatus for automatically identifying user of consumer electronics
US9270841B2 (en) 2005-04-15 2016-02-23 Freeze Frame, Llc Interactive image capture, marketing and distribution
US20070024580A1 (en) 2005-07-29 2007-02-01 Microsoft Corporation Interactive display device, such as in context-aware environments
US20070271580A1 (en) 2006-05-16 2007-11-22 Bellsouth Intellectual Property Corporation Methods, Apparatus and Computer Program Products for Audience-Adaptive Control of Content Presentation Based on Sensed Audience Demographics
JP2007334623A (ja) 2006-06-15 2007-12-27 Toshiba Corp 顔認証装置、顔認証方法、および入退場管理装置
US8725567B2 (en) 2006-06-29 2014-05-13 Microsoft Corporation Targeted advertising in brick-and-mortar establishments
US20080004951A1 (en) 2006-06-29 2008-01-03 Microsoft Corporation Web-based targeted advertising in a brick-and-mortar retail establishment using online customer information
MXPA06013614A (es) 2006-11-24 2007-12-06 Global Sight S A De C V Sistemas de transmision de datos en forma remota y digital y localizacion satelital desde terminales moviles o fijas con camaras de vigilancia urbana para reconocimiento facial, detector de disparos, captura de personal de seguridad publica y persona
US20090217315A1 (en) * 2008-02-26 2009-08-27 Cognovision Solutions Inc. Method and system for audience measurement and targeting media
US8539357B2 (en) 2007-11-21 2013-09-17 Qualcomm Incorporated Media preferences
US9986293B2 (en) 2007-11-21 2018-05-29 Qualcomm Incorporated Device access control
US9575558B2 (en) 2007-12-05 2017-02-21 Hewlett-Packard Development Company, L.P. System and method for electronically assisting a customer at a product retail location
US7996422B2 (en) 2008-07-22 2011-08-09 At&T Intellectual Property L.L.P. System and method for adaptive media playback based on destination
US20100071003A1 (en) 2008-09-14 2010-03-18 Modu Ltd. Content personalization
US8700451B2 (en) 2008-10-29 2014-04-15 Vulcan Ip Holdings Inc. Systems and methods for tracking consumers
US20110044512A1 (en) 2009-03-31 2011-02-24 Myspace Inc. Automatic Image Tagging
US20110072452A1 (en) 2009-09-23 2011-03-24 Rovi Technologies Corporation Systems and methods for providing automatic parental control activation when a restricted user is detected within range of a device
US8791787B2 (en) 2009-12-11 2014-07-29 Sony Corporation User personalization with bezel-displayed identification
US8347325B2 (en) 2009-12-22 2013-01-01 Vizio, Inc. System, method and apparatus for viewer detection and action
US9875719B2 (en) 2009-12-23 2018-01-23 Gearbox, Llc Identifying a characteristic of an individual utilizing facial recognition and providing a display for the individual
US8712110B2 (en) 2009-12-23 2014-04-29 The Invention Science Fund I, LC Identifying a characteristic of an individual utilizing facial recognition and providing a display for the individual
US8589968B2 (en) 2009-12-31 2013-11-19 Motorola Mobility Llc Systems and methods providing content on a display based upon facial recognition of a viewer
KR20110137469A (ko) 2010-06-17 2011-12-23 오리엔탈종합전자(주) 얼굴 검출을 이용한 지능형 영상출입장치 및 그 출입제어방법
US9143881B2 (en) 2010-10-25 2015-09-22 At&T Intellectual Property I, L.P. Providing interactive services to enhance information presentation experiences using wireless technologies
TW201228361A (en) 2010-12-29 2012-07-01 Altek Corp Television system with face recognition, multimedia broadcast system and broadcast control method
US20130061258A1 (en) 2011-09-02 2013-03-07 Sony Corporation Personalized television viewing mode adjustments responsive to facial recognition
US20130194406A1 (en) 2012-01-31 2013-08-01 Kai Liu Targeted Delivery of Content
US20130219417A1 (en) 2012-02-16 2013-08-22 Comcast Cable Communications, Llc Automated Personalization
US9008370B2 (en) 2012-03-15 2015-04-14 Xerox Corporation Methods, systems and processor-readable media for tracking history data utilizing vehicle and facial information
US9055337B2 (en) 2012-05-17 2015-06-09 Cable Television Laboratories, Inc. Personalizing services using presence detection
US8965170B1 (en) 2012-09-04 2015-02-24 Google Inc. Automatic transition of content based on facial recognition
US9215020B2 (en) 2012-09-17 2015-12-15 Elwha Llc Systems and methods for providing personalized audio content
US20140140575A1 (en) 2012-11-19 2014-05-22 Mace Wolf Image capture with privacy protection
WO2014100519A1 (en) 2012-12-19 2014-06-26 Fanpix Llc Image capture, processing and delivery at group events
US9363155B1 (en) 2013-03-14 2016-06-07 Cox Communications, Inc. Automated audience recognition for targeted mixed-group content
CN105164619B (zh) 2013-04-26 2018-12-28 瑞典爱立信有限公司 检测注视用户以在显示器上提供个性化内容
CN103780970B (zh) 2013-08-20 2018-03-16 华为终端(东莞)有限公司 一种媒体播放的方法、装置和系统
US9210542B2 (en) 2013-12-09 2015-12-08 Nec Europe Ltd. Method and computer system for detecting crowds in a location tracking system
US9282367B2 (en) 2014-03-18 2016-03-08 Vixs Systems, Inc. Video system with viewer analysis and methods for use therewith
US9635392B2 (en) 2014-04-16 2017-04-25 Sony Corporation Method and system for displaying information
US20150319506A1 (en) 2014-04-30 2015-11-05 Netflix, Inc. Displaying data associated with a program based on automatic recognition
US9852445B2 (en) 2014-06-04 2017-12-26 Empire Technology Development Llc Media content provision
KR101602828B1 (ko) 2014-09-01 2016-03-14 유형근 얼굴인식형 인터랙티브 디지털 사이니지장치
US9449218B2 (en) 2014-10-16 2016-09-20 Software Ag Usa, Inc. Large venue surveillance and reaction systems and methods using dynamically analyzed emotional input
US9747276B2 (en) 2014-11-14 2017-08-29 International Business Machines Corporation Predicting individual or crowd behavior based on graphical text analysis of point recordings of audible expressions
WO2016103332A1 (ja) 2014-12-22 2016-06-30 株式会社 テクノミライ デジタルファインドセキュリティシステム、方法及びプログラム
US20160343237A1 (en) 2015-05-22 2016-11-24 Google Inc. Systems and methods of integrating sensor output of a mobile device with a security system
KR20170011862A (ko) 2015-07-24 2017-02-02 엘지전자 주식회사 디지털 사이니지 장치 및 그 제어 방법
CN105069437A (zh) 2015-08-14 2015-11-18 惠州Tcl移动通信有限公司 一种能够自动识别位置的智能系统及其实现方法
CN105069737A (zh) 2015-09-21 2015-11-18 无锡知谷网络科技有限公司 用于空港服务的移动服务终端、系统及数据处理的方法
CN105578229A (zh) 2015-12-15 2016-05-11 小米科技有限责任公司 电子设备控制方法和装置
US10685383B2 (en) * 2016-02-05 2020-06-16 Adobe Inc. Personalizing experiences for visitors to real-world venues
US20170289596A1 (en) 2016-03-31 2017-10-05 Microsoft Technology Licensing, Llc Networked public multi-screen content delivery
US20170295215A1 (en) 2016-04-08 2017-10-12 Microsoft Technology Licensing, Llc Audience targeted filtering of content sections
US10165333B2 (en) 2016-05-18 2018-12-25 Rovi Guide, Inc. Recommending media content based on the trajectory of the user
US10313751B2 (en) 2016-09-29 2019-06-04 International Business Machines Corporation Digital display viewer based on location
US20180357667A1 (en) 2017-06-07 2018-12-13 David R. Hall Systems and Methods for Interactive Media Communication
US20180357981A1 (en) 2017-06-13 2018-12-13 Misapplied Sciences, Inc. Coordinated multi-view display experiences
US10484818B1 (en) * 2018-09-26 2019-11-19 Maris Jacob Ensing Systems and methods for providing location information about registered user based on facial recognition
US10831817B2 (en) * 2018-07-16 2020-11-10 Maris Jacob Ensing Systems and methods for generating targeted media content

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105934769A (zh) * 2013-04-29 2016-09-07 微软技术许可有限责任公司 媒体同步广告覆盖
CN105765986A (zh) * 2013-11-26 2016-07-13 At&T知识产权部有限合伙公司 用于分析感官信息以估计观众反应的方法和系统

Also Published As

Publication number Publication date
WO2020018349A4 (en) 2020-06-04
CN112514404A (zh) 2021-03-16
US20210042347A1 (en) 2021-02-11
WO2020018349A3 (en) 2020-03-12
WO2020018349A2 (en) 2020-01-23
US10831817B2 (en) 2020-11-10
US20200019565A1 (en) 2020-01-16
EP3824637A4 (en) 2022-04-20
AU2019308162A1 (en) 2021-03-04
EP3824637A2 (en) 2021-05-26
US11157548B2 (en) 2021-10-26

Similar Documents

Publication Publication Date Title
CN112514404B (zh) 用于生成目标媒体内容的系统和方法
US12032624B2 (en) Systems and methods for generating targeted media content
US12086838B2 (en) Dynamic promotional layout management and distribution rules
US11881956B2 (en) Interactive sports apparel
US10395262B2 (en) Systems and methods for sensor data analysis through machine learning
US9338622B2 (en) Contextually intelligent communication systems and processes
US20140130076A1 (en) System and Method of Media Content Selection Using Adaptive Recommendation Engine
US20090089107A1 (en) Method and apparatus for ranking a customer using dynamically generated external data
CN105339969A (zh) 链接的广告
US20200320576A1 (en) Targeted Advertising Based On Demographic Features Extracted From Persons
GB2506575A (en) Content delivery system
JP2005300965A (ja) 情報通知方法、および、情報通知システム
US10484818B1 (en) Systems and methods for providing location information about registered user based on facial recognition
US20180150880A1 (en) Targeted digital content delivery for vehicles
US20180150878A1 (en) Targeted digital content delivery for retail locations
JP2008243095A (ja) 顔検出システム、および顔検出方法
WO2022251202A1 (en) Systems and methods for generating targeted media content
JP2024150183A (ja) 情報処理装置、情報生成システム、情報処理方法、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40044973

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant