CN107949849A - 缩减大数据集中数据密度的系统和方法 - Google Patents

缩减大数据集中数据密度的系统和方法 Download PDF

Info

Publication number
CN107949849A
CN107949849A CN201680033059.8A CN201680033059A CN107949849A CN 107949849 A CN107949849 A CN 107949849A CN 201680033059 A CN201680033059 A CN 201680033059A CN 107949849 A CN107949849 A CN 107949849A
Authority
CN
China
Prior art keywords
vector
point
unknown
video data
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680033059.8A
Other languages
English (en)
Other versions
CN107949849B (zh
Inventor
泽埃夫·诺伊迈尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Structural Data Co Ltd
Original Assignee
Structural Data Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Structural Data Co Ltd filed Critical Structural Data Co Ltd
Publication of CN107949849A publication Critical patent/CN107949849A/zh
Application granted granted Critical
Publication of CN107949849B publication Critical patent/CN107949849B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/786—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using motion, e.g. object motion or camera motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G06V20/47—Detecting features for summarising video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Library & Information Science (AREA)
  • Medical Informatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明提供用于识别未知内容的技术和系统。例如，可以确定从原点投射的多个向量中在参考数据点与未知数据点之间的向量的数量。向量的数量可用于估计第一向量(从原点到参考数据点)与第二向量(从原点到未知数据点)之间的角度。然后可以确定参考数据点与未知数据点之间的距离。使用确定的距离，可以从一组参考数据点中确定候选数据点。可以分析候选数据点以识别未知数据点。

Description

缩减大数据集中数据密度的系统和方法
相关申请的交叉引用
本申请主张2015年4月17日提交的美国临时申请No.62/149,193的权益，其全部内容以引用方式并入本文。
本申请涉及2010年5月27日提交的美国专利申请序列号12/788,748、2010年5月27日提交的美国专利申请序列号12/788,721、2013年11月25日提交的美国专利申请序列号14/089,003、2014年3月17日提交的专利申请序列号14/217,075、2014年3月17日提交的美国专利申请序列号14/217,039、2014年3月17日提交的美国专利申请序列号14/217,094、2014年3月17日提交的美国专利申请序列号14/217,375、2014年3月17日提交的美国专利申请序列号14/217,425、2014年3月17日提交的美国专利申请序列号14/217,435、2014年11月24日提交的美国专利申请序列号14/551,933以及2014年12月23日提交的美国专利申请序列号14/763,158，其全部内容以引用方式并入本文。
技术领域
本发明通常涉及有效地识别内容，同时限制识别内容所需的数据量。例如，提供各种技术和系统用于识别内容，同时缩减大数据集中的数据密度。
背景技术
管理密集数据集给出了重大挑战。例如，存储、索引和管理某些系统发挥功能所需的大量数据存在困难。出现这类问题的一个领域包括使用存储在大数据集中的参考数据来搜索和识别数据之间最接近的匹配的系统。实际数据点的存储构成数据库中很大程度的存储量。
发明内容
本发明的某些方面和特征涉及识别未知内容。例如，可以从原点投射(project)多个向量。可以确定在参考数据点与未知数据点之间的多个向量中的向量的数量。向量的数量可用于估计第一向量(从原点到参考数据点)与第二向量(从原点到未知数据点)之间的角度。然后可以确定参考数据点与未知数据点之间的距离。使用所确定的距离，可以从一组参考数据点中确定候选数据点。可以分析候选数据点以识别未知数据点。
本文描述的技术允许识别未知内容，同时缩减大数据集中的数据密度。例如，描述了用于提高存储和搜索大数据集的效率的系统和方法。这些技术可以应用于收获和操纵大量数据的任何系统。这类系统可以包括例如基于内容的自动搜索系统(例如，用于视频相关应用或其它合适应用的自动内容识别)、MapReduce系统、Bigtable系统、模式识别系统、面部识别系统、分类系统、计算机视觉系统、数据压缩系统、聚类分析，或任何其它合适的系统。
在一些实例中，使用本文描述的系统和方法执行的技术显著地减少了必须存储的数据量，以便搜索和查找未知和已知数据组之间的关系。例如，通过消除存储实际已知数据点的需求，可以减少必须存储的数据量。
根据至少一个实例，提供了一种用于识别由显示器显示的视频内容的系统。该系统包括一个或多个处理器。该系统还包括一个非暂时性机器可读存储介质，其包含当在一个或多个处理器上执行时使一个或多个处理器执行以下操作指令，包括：获得多个参考视频数据点；确定从原点到该多个参考视频数据点中的参考视频数据点的第一向量的长度；获得与由显示器呈现的视频内容相关联的未知视频数据点；确定从原点到未知视频数据点的第二向量的长度；从原点投射多个向量；确定参考视频数据点与未知视频数据点之间的多个向量的数量；估计第一向量与第二向量之间的角度，其中使用多个向量的数量来估计所述角度；确定参考视频数据点与未知视频数据点之间的距离，其中使用第一向量和第二向量的估计角度和确定长度来确定所述距离；从多个参考视频数据点识别一个或多个候选视频数据点，其中候选视频数据点是用于匹配未知视频数据点的候选，并且其中基于一个或多个参考视频数据点与未知视频数据点之间的确定距离来确定一个或多个候选视频数据点；以及识别由显示器呈现的视频内容，其中通过将未知视频数据点与一个或多个候选视频数据点进行比较来识别由显示器呈现的视频内容。
在另一实例中，提供了一种计算机实现的方法，包括：获得多个参考视频数据点；确定从原点到该多个参考视频数据点中的参考视频数据点的第一向量的长度；获得与显示器呈现的视频内容相关联的未知视频数据点；确定从原点到未知视频数据点的第二向量的长度；从原点投射多个向量；确定多个参考视频数据点与未知视频数据点之间的多个向量的数量；估计第一向量与第二向量之间的角度，其中使用多个向量的数量来估计所述角度；确定参考视频数据点与未知视频数据点之间的距离，其中使用第一向量和第二向量的估计角度和确定长度来确定所述距离；从多个参考视频数据点识别一个或多个候选视频数据点，其中候选视频数据点是用于匹配未知视频数据点的候选，并且其中基于一个或多个参考视频数据点与未知视频数据点之间的确定距离来确定一个或多个候选视频数据点；以及识别由显示器呈现的视频内容，其中通过将未知视频数据点与一个或多个候选视频数据点进行比较来识别由显示器呈现的视频内容。
在另一实例中，可以提供一种有形地体现在计算装置的非暂时性机器可读存储介质中的计算机程序产品。计算机程序产品可以包括被配置成使一个或多个数据处理器进行以下操作的指令：获得多个参考视频数据点；确定从原点到该多个参考视频数据点中的参考视频数据点的第一向量的长度；获得与由显示器呈现的视频内容相关联的未知视频数据点；确定从原点到未知视频数据点的第二向量的长度；从原点投射多个向量；确定参考视频数据点与未知视频数据点之间的多个向量的数量；估计第一向量与第二向量之间的角度，其中使用多个向量的数量来估计所述角度；确定参考视频数据点与未知视频数据点之间的距离，其中使用第一向量和第二向量的估计角度和确定长度来确定所述距离；从多个参考视频数据点识别一个或多个候选视频数据点，其中候选视频数据点是用于匹配未知视频数据点的候选，并且其中基于一个或多个参考视频数据点与未知视频数据点之间的确定距离来确定一个或多个候选视频数据点；以及识别由显示器呈现的视频内容，其中通过将未知视频数据点与一个或多个候选视频数据点进行比较来识别显示器呈现的视频内容。
在一些实施例中，多个参考视频数据点包括从一个或多个视频帧提取的视频数据。
在一些实施例中，多个投射向量是伪随机生成的。
在一些实施例中，确定参考视频数据点与未知视频数据点之间的多个向量的数量包括：确定多个向量中的每个向量是在参考视频数据点的第一向量的代数右边或是代数左边；确定多个向量中的每个向量是在未知视频数据点的第二向量的代数右边或是代数左边；以及确定参考视频数据点与未知视频数据点之间的多个向量的数量，其中多个向量的数量包括在第一向量的代数左边并在第二向量的代数右边的向量，或在第一向量的代数右边并在第二向量的代数左边的向量。
在一些实施例中，在确定参考视频数据点的第一向量的长度之后，并且在确定多个向量中的每个向量是在第一向量的代数右边或在其代数左边之后，丢弃参考视频数据点。
在一些实施例中，上述用于识别视频内容的方法、系统和计算机程序产品还包括：为确定为在参考视频数据点的第一向量的代数右边的每个向量存储第一二进制值；以及为确定为在参考视频数据点的第一向量的代数左边的每个向量存储第二二进制值。
在一些实施例中，上述用于识别视频内容的方法、系统和计算机程序产品还包括：为确定为在未知视频数据点的第二向量的代数右边的每个向量存储第一二进制值；以及为确定为在未知视频数据点的第二向量的代数左边的每个向量存储第二二进制值。
在一些实施例中，估计参考视频数据点的第一向量与未知视频数据点的第二向量之间的角度包括将常数乘以比率，其中该比率包括参考视频数据点与未知视频数据点之间的多个向量的数量除以多个向量的总数。
在一些实施例中，确定参考视频数据点与未知视频数据点之间的距离包括使用第一向量和第二向量的估计角度和确定长度来执行毕达哥拉斯恒等式计算(Pythagoreanidentity calculation)。
在一些实施例中，识别由显示器呈现的视频内容包括确定未知视频数据点与候选视频数据点之间的匹配，其中匹配是基于候选视频数据点作为一个或多个候选视频数据点中与未知视频数据点最接近的视频数据点的近似匹配。
根据至少另一个实例，可以提供一种识别一个或多个未知数据点的系统，其包括一个或多个处理器。该系统还包括一个非暂时性机器可读存储介质，其包含当在一个或多个处理器上执行时使一个或多个处理器执行以下操作的指令，包括：获得多个参考数据点；确定从原点到该多个参考数据点中的参考数据点的第一向量的长度；获得未知数据点；确定从原点到未知数据点的第二向量的长度；从原点投射多个向量；确定参考数据点与未知数据点之间的多个向量的数量；估计第一向量与第二向量之间的角度，其中使用多个向量的数量来估计所述角度；确定参考数据点与未知数据点之间的距离，其中使用第一向量和第二向量的估计角度和确定长度来确定所述距离；以及从多个参考数据点识别一个或多个候选数据点，其中候选数据点是用于匹配未知数据点的候选，并且其中基于一个或多个参考数据点与未知数据点之间的确定距离来确定一个或多个候选数据点。
在另一实例中，提供了一种计算机实现的方法，包括：获得多个参考数据点；确定从原点到该多个参考数据点中的参考数据点的第一向量的长度；获得未知数据点；确定从原点到未知数据点的第二向量的长度；从原点投射多个向量；确定参考数据点与未知数据点之间的多个向量的数量；估计第一向量与第二向量之间的角度，其中使用多个向量的数量来估计所述角度；确定参考数据点与未知数据点之间的距离，其中使用第一向量和第二向量的估计角度和确定长度来确定所述距离；以及从多个参考数据点识别一个或多个候选数据点，其中候选数据点是用于匹配未知数据点的候选，并且其中基于一个或多个参考数据点与未知数据点之间的确定距离来确定一个或多个候选数据点。
在另一实例中，可以提供有形地体现在电视系统的非暂时性机器可读存储介质中的计算机程序产品。计算机程序产品可以包括被配置成使一个或多个数据处理器进行以下操作的指令：获得多个参考数据点；确定从原点到该多个参考数据点中的参考数据点的第一向量的长度；获得未知数据点；确定从原点到未知数据点的第二向量的长度；从原点投射多个向量；确定参考数据点与未知数据点之间的多个向量的数量；估计第一向量与第二向量之间的角度，其中使用多个向量的数量来估计所述角度；确定参考数据点与未知数据点之间的距离，其中使用第一向量和第二向量的估计角度和确定长度来确定所述距离；以及从多个参考数据点识别一个或多个候选数据点，其中候选数据点是用于匹配未知数据点的候选，并且其中基于一个或多个参考数据点与未知数据点之间的确定距离来确定一个或多个候选数据点。
在一些实施例中，上述用于识别一个或多个未知数据点的方法、系统和计算机程序产品包括确定未知数据点与候选数据点之间的匹配，其中该匹配是基于候选数据点作为一个或多个候选数据点中与未知数据点最接近的数据点的近似匹配。
在一些实施例中，多个投射向量是伪随机生成的。
在一些实施例中，确定参考数据点与未知数据点之间的多个向量的数量包括：确定多个向量中的每个向量是在参考数据点的第一向量的代数右边或是代数左边；确定多个向量中的每个向量是在未知数据点的第二向量的代数右边或是代数左边；以及确定参考数据点与未知数据点之间的多个向量的数量，其中多个向量的数量包括在第一向量的代数左边并在第二向量的代数右边的向量，或在第一向量的代数右边并在第二向量的代数左边的向量。
在一些实施例中，在确定参考数据点的第一向量的长度之后，并且在确定多个向量中的每个向量是在第一向量的代数右边或在其代数左边之后，丢弃参考数据点。
在一些实施例中，上述用于识别一个或多个未知数据点的方法、系统和计算机程序产品还包括：为确定为在参考数据点的第一向量的代数右边的每个向量存储第一二进制值；以及为确定为在参考数据点的第一向量的代数左边的每个向量存储第二二进制值。
在一些实施例中，上述用于识别一个或多个未知数据点的方法、系统和计算机程序产品还包括：为确定为在未知数据点的第二向量的代数右边的每个向量存储第一二进制值；以及为确定为在未知数据点的第二向量的代数左边的每个向量存储第二二进制值。
在一些实施例中，估计参考数据点的第一向量与未知数据点的第二向量之间的角度包括将常数乘以比率，其中该比率包括参考数据点与未知数据点之间的多个向量的数量除以多个向量的总数。
在一些实施例中，确定参考数据点与未知数据点之间的距离包括使用第一向量和第二向量的估计角度和确定长度来执行毕达哥拉斯恒等式计算(Pythagorean identitycalculation)。
本内容并不旨在认同所要求保护的主题的关键或基本特征，也不旨在孤立地用以确定所要求保护的主题的范围。应通过参考本专利的整个说明书的适当部分，任何或所有附图以及每项权利要求来理解主题。
参考以下说明书、权利要求书和附图之后，前述以及其它特征和实施例将变得更加明显。
附图说明
以下参考下列附图详细描述本发明的说明性实施例：
图1是匹配系统的实例的框图。
图2是示出识别未知数据点的匹配系统的实例的框图。
图3是示出两个数据点以及两个数据点之间的向量距离的图。
图4是示出到两个数据点的两个向量以及向量之间的角度的图。
图5是示出如何确定两个向量的长度的图。
图6是示出如何确定两点之间的距离的图。
图7是示出相对于数据点的投射向量的图。
图8是示出相对于另一个数据点的投射向量的图。
图9是示出如何使用投射向量来确定两个向量之间的角度的图。
图10是另一个示出如何使用投射向量来确定两个向量之间的角度的图。
图11是示出通过匹配过程生成的数据的数据聚类的图。
图12是另一个示出通过匹配过程生成的数据的数据聚类的图。
图13是示出不均匀分布的投射向量的图。
图14是示出与由本文讨论的数据缩减技术匹配的数据相比较的匹配的实际数据的图。
图15是示出更均匀聚类的投射向量的图。
图16是示出与由本文讨论的数据缩减技术匹配的数据相比较的匹配的实际数据的图。
图17是示出识别显示的视频内容并提供相关内容的过程的实施例的流程图。
图18是用于识别由显示器观看的视频内容的匹配系统的实例的框图。
图19是视频捕获系统的实例的框图。
图20是用于收集由显示器呈现的视频内容的系统的实例的框图。
图21是示出识别显示的视频内容并提供相关内容的过程的另一个实施例的流程图。
图22是示出点位置和它们周围的路径点的图表。
图23是示出位于距查询点的距离内的一组点的图表。
图24是示出可能的点值的图表。
图25是示出分成指数型增长宽度的环的空间的图表。
图26是示出自相交路径和查询点的图表。
图27是示出三个连续点位置和它们周围的路径点的图表。
具体实施方式
在下面的描述中，为了说明的目的，阐述了具体细节以提供对本发明的实施例的全面理解。然而，显而易见的是，可以在没有这些具体细节的情况下实践各种实施例。附图和描述不是限制性的。
接下来的描述仅提供示例性实施例，并不旨在限制本发明的范围、适用性或配置。相反，接下来对示例性实施例的描述将为本领域技术人员提供实现示例性实施例的可用描述。应当理解，在不脱离如所附权利要求中阐述的本发明的精神和范围的情况下，可以对元件的功能和布置进行各种改变。
在以下描述中给出具体细节以提供对实施例的全面理解。然而，本领域普通技术人员将理解，可以在没有这些具体细节的情况下实践实施例。例如，电路、系统、网络、过程和其它组件可以以框图的形式被示出为组件，以便不会在不必要的细节上模糊实施例。在其它情况下，可以示出公知的电路、过程、算法、结构和技术，而不需要不必要的细节，以避免实施例模糊化。
另外，应注意，可以将各个实施例描述为过程，其被描绘成流程图、流程图解、数据流程图、结构图或框图。虽然流程图可以将操作描述为顺序过程，但是许多操作可以并行或同时执行。此外，可以重新布置操作的顺序。过程在其操作完成后终止，但是图中可能没有附加的步骤。过程可以对应于方法、函数、程序、子例程、子程序等。当过程对应于函数时，其终止可以对应于函数返回到调用函数或主函数。
术语“机器可读存储介质”或“计算机可读存储介质”包括但不限于便携式或非便携式存储装置、光学存储装备，以及能够存储、包含或携带指令和/或数据的各种其它介质。机器可读存储介质或计算机可读存储介质可以包括其中可以存储数据并且不包括无线地或通过有线连接进行传播的载波和/或暂时电子信号的非暂时性介质。非暂时性介质的实例可以包括但不限于磁盘或磁带、光学存储介质诸如光盘(CD)或数字通用盘(DVD)、闪存、存储器或存储装置。计算机程序产品可以包括代码和/或机器可执行指令，其可以表示程序、函数、子程序、程序、例程、子例程、模块、软件包、类，或指令、数据结构或程序语句的任何组合。代码段可以通过传递和/或接收信息、数据、类数组对象、参数或存储器内容而耦合到另一代码段或硬件电路。信息、参数、类数组对象、数据或其它信息可以使用包括存储器共享、消息传递、令牌传递、网络传输或其它传输技术的任何合适方式进行传递、转发或发送。
此外，实施例可以由硬件、软件、固件、中间件、微代码、硬件描述语言或其任何组合来实现。当在软件、固件、中间件或微代码中实现时，用于执行必要任务(例如，计算机程序产品)的程序代码或代码段可以存储在机器可读介质中。处理器可以执行必要的任务。
可以以各种配置提供一些附图中描绘的系统。在一些实施例中，系统可以配置成分布式系统，其中系统的一个或多个组件分布在云计算系统中的一个或多个网络上。
如下面进一步详细描述的，本发明的某些方面和特征涉及通过将未知数据点与一个或多个参考数据点进行比较来识别未知数据点。本文描述的系统和方法提高了存储和搜索用于识别未知数据点的大数据集的效率。例如，所述系统和方法允许识别未知数据点，同时缩减执行识别所需的大数据集的密度。所述技术可以应用于收获和操纵大量数据的任何系统。这些系统的说明性实例包括基于内容的自动搜索系统(例如，用于视频相关应用或其它合适应用的自动内容识别)、MapReduce系统、Bigtable系统、模式识别系统、面部识别系统、分类系统、计算机视觉系统、数据压缩系统、聚类分析或任何其它合适的系统。本领域普通技术人员将理解，本文描述的技术可以应用于存储与未知数据相比较的数据的任何其它系统。在自动内容识别(ACR)的背景下，例如，所述系统和方法减少必须存储的数据量，以便匹配系统搜索和查找未知数据组与已知数据组之间的关系。
仅作为实例而非限制，本文所述的一些实例使用自动音频和/或视频内容识别系统来进行说明。然而，本领域普通技术人员将理解，其它系统可以使用相同的技术。
使用大量数据的ACR系统和其它系统的一个重大挑战是管理系统发挥功能所需的数据量。使用基于视频的ACR系统作为一个实例，一个挑战包括尝试识别由数百万家庭中的一个家庭中的电视显示器显示的视频片段。另一个挑战包括需要建立和维护已知视频内容的数据库，以作为匹配对比的参考。建立和维护这样的数据库涉及收集和整理大量(例如数百、数千或更多)分布在全国范围内的电视节目，以及在许多其它潜在的内容来源中的更大数量的本地电视广播。可以使用将视频或音频的原始数据缩减为压缩的可搜索数据(例如，标记)的任何可用技术来执行整理。由于24小时、每周七天的操作时间表以及可能需要存储两周电视节目的滑动窗口，执行ACR所需的数据量也快速增长。收获和操纵大量数据的其它系统(诸如上述示例系统)中呈现出类似的挑战。
本文描述的系统和方法允许使用比常规技术所需的数据集进一步缩减的数据集来识别未知数据点。例如，需要生成、存储和比较以搜索和查找未知数据组与已知数据组之间的关系的数据量大大缩减(例如，取决于系统类型，大约一个数量级或其它数量)，从而提供了一种更有效的技术来存储和索引数据。
图1示出了可以识别未知内容的匹配系统100。例如，匹配系统100可以将未知数据点与参考数据点进行匹配，以识别未知数据点。匹配系统100包括客户端装置102和匹配服务器104。客户端装置包括匹配请求引擎106、输入装置108和输出装置110。输入装置108可以包括允许请求或其它信息输入到匹配请求引擎106的任何合适的装置。例如，输入装置108可以包括键盘、鼠标、语音识别输入装置、用于从无线装置(例如，从远程控制器、移动装置或其它合适的无线装置)接收无线输入的无线接口，或任何其它合适的输入装置。输出装置110可以包括可以呈现或以其它方式输出信息的任何合适的装置，诸如显示器、用于将无线输出发送到无线装置(例如，发送到移动装置或其它合适的无线装置)的无线接口、打印机，或其它合适的输出装置。
匹配请求引擎106可以将通信124发送到匹配服务器104的匹配引擎112。通信124可以包括对匹配引擎112以识别未知内容的请求。匹配引擎112可以通过将内容与参考数据库116中的参考数据进行匹配来识别未知内容。例如，未知内容可以包括一个或多个未知数据点，并且参考数据库116可以包括多个参考数据点。在一些实例中，未知内容可以包括由显示器(用于基于视频的ACR)呈现的未知视频数据、搜索查询(对于MapReduce系统、Bigtable系统或其它数据存储系统)、未知的面部图像(用于面部识别)、未知的图案图像(用于图案识别)或可以与参考数据的数据库匹配的任何其它未知数据。参考数据点可以源自于从数据源118接收的数据。例如，数据点可以从数据源118提供的信息中提取出来，并且可被索引并存储在数据库116中。
匹配引擎112可以向候选确定引擎114发送请求以从参考数据库116确定候选数据点。候选数据点是距未知数据点一定确定距离的参考数据点。候选确定引擎114可以将候选数据点返回到匹配引擎112。使用候选数据点，匹配引擎112可以确定最接近未知数据点的参考数据点。例如，如下面更详细地描述，路径追踪算法(path pursuit algorithm)可用于从候选数据点识别最接近的参考数据点。
图2示出了识别未知数据点的匹配系统200的组件。例如，匹配引擎212可以执行用于将未知内容(例如，未知媒体片段、搜索查询、面部图像或图案图像等)与已知内容的数据库(例如，已知媒体片段、存储在用于搜索的数据库中的信息、已知的面部或图案等)进行比较的匹配过程。例如，匹配引擎212接收使用参考数据库中的参考数据点204来识别的未知数据内容202(其可以被称为“提示”)。未知数据内容202也由候选确定引擎214接收。候选确定引擎214可以通过搜索参考数据库中的参考数据点204来进行搜索过程以识别候选数据点206。在一个实例中，搜索过程可以包括最近邻搜索过程(nearest neighbor searchprocess)以生成一组邻近值(距未知数据内容202的未知值一定距离。未知数据内容202和候选数据点206被输入到匹配引擎212进行匹配过程以生成匹配结果208。根据应用，匹配结果208可以包括由显示器呈现的视频数据、搜索结果、使用面部识别确定的面部、使用模式识别确定的模式，或任何其它结果。
在确定未知数据点(例如，未知数据内容202)的候选数据点206时，候选确定引擎214确定参考数据库中的未知数据点与参考数据点204之间的距离。距未知数据点一定距离的参考数据点被识别为候选数据点206。图3示出了两个数据点，包括数据点A(示出为数据点A302)和数据点B(示出为数据点B304)。数据点A302可以是参考数据点，数据点B304可以是未知数据点。数据点A302与数据点B304之间的距离d306也被示出。
使用二维向量空间作为实例描述一些实例，但是同样适用于其它向量空间维度。例如，虽然图3和其它图中所示的实例是以二维空间示出，本文描述的相同技术可以以任何维数应用。例如，其它向量维度包括1维、3维、26维、75维或任何其它向量空间维度。
可以使用各种技术来确定数据点之间的距离。例如，在N维空间中，确定两点A与B之间的距离的一种技术是使用以下等式：
A.A+B.B-2AB＝d^2.
其中A是从原点(例如，在点(0,0))到点A的向量，B是从原点到点B的向量。A.A是向量A与其自身的点积，并且B.B是向量B与其自身的点积。A.A和B.B的结果是标量值。
确定两个数据点A与B之间的距离的另一种技术可以包括使用以下等式：
A.A/2+B.B/2-A.B＝d2/2
用于确定两个或多个数据点之间的距离的另一种技术可以包括使用经过数据点的向量之间的角度。图4是具有从原点O(例如，在点(0,0))到数据点A302的向量402(称为向量A402)和从原点O到数据点B304的向量404(称为向量B404)的图。点A302可以位于坐标(A.x，A.y)处，并且点B304可以位于坐标(B.x，B.y)处。数据点A302的向量A402与数据点B304的向量B404之间的角度410可用于确定数据点A302与数据点B304之间的距离。角度410可以通过首先查找向量A402的标量长度406和向量B404的标量长度408，然后使用长度406和408来计算向量402与404之间的角度410而确定。
可以使用用于确定向量长度的任何合适的技术来确定标量长度406和408。图5所示的一个实例包括通过查找点积A.A502来查找向量A402(对于数据点A302)的标量长度406。点积A.A502是向量A402与其自身的点积。类似地，向量B404(对于数据点B304)的标量长度408可以通过查找作为向量B404与其自身的点积的点积B.B504来确定。
一旦确定了角度410以及标量长度406和408，就可以确定距离306。例如，图6是示出计算数据点A302与数据点B304之间的向量距离306的最后步骤的图。在一个说明性实例中，可以通过应用毕达哥拉斯恒等式使用以下等式来使用角度410而确定距离306：
d2＝(sin(θ)*B.B)2+(A.A-cosine(θ)*B.B)2，
其中θ是角度410。
本文描述了使用向量投射来确定数据点之间的距离的系统和方法，与上述技术相比，需要存储比较少的数据。考虑到点积A.A是从原点O到点A302的向量A402的长度，并且点积B.B是从原点O到点B304的向量B404的长度，这两个长度值(长度406和408)可以提前计算(例如，对于参考数据点)，并且每个长度406和408可以被存储为单个数字。保留实际点值的唯一原因是为了计算点积：A.B。应该存储实际的未知数据点值，因为在执行匹配过程时，它不能在运行时间之前获得。例如，在匹配过程期间需要未知数据点，以便与为参考数据点存储的数据进行比较。在使用电视内容的一个实例中，当电视发送呈现的视频数据时，匹配系统100和200接收未知数据点(例如，数据点B304)。然而，参考数据点(例如，参考数据点A302)可以在它们被用于确定之后可以用于使用投射向量来确定数据点向量(例如，向量A402和B404)之间的角度的信息之后被丢弃，如下面更详细描述。丢弃和不保留参考数据点的实际值，同时仍然能够计算参考数据点(点A)与未知数据点(点B)之间的距离是有利的。
点A302和B304具有来自原点(例如，(0,0))到相应点的向量402和404。候选确定引擎(例如，候选确定引擎114或214)的目标是查找点A302和B304之间的距离d306，以便识别候选数据点。在一些实例中，距离d306可以仅用向量A402(经过点A的向量)的长度、向量B404的长度(经过点B的向量)以及向量A402与向量B404之间的角度410来计算。
在一些实例中，可以存储向量A402与X轴的角度，然后可以计算角度410，但是这种方法的缺点将是随着维数增加，系统必须保持和存储每个维度的角度。结果是系统将存储如先前所需要的(例如，当存储所有参考数据点值时)尽可能多的定义每个点的数量的系统。
本文描述的系统和方法包括以规定维数生成多个投射。例如，可以在不同的方向上投射多个向量，诸如在向量A402和向量B404所在的空间周围。虽然本文描述的实例使用80个总投射向量作为说明性实例，但是本领域普通技术人员将会理解，可以生成任何数量的投射。投射向量可以用于确定两个向量(例如，向量A402与向量B404)之间的角度，这可以减少在由匹配引擎执行的匹配过程期间在运行时所需的数据量。使用投射技术，参考数据点可以在最初使用之后被丢弃，如下面进一步描述。
在简要描述使用投射的技术的一个说明性实例中，80个规则分布的向量可以以每十度进行投射，在这种情况下，投射之间的θ等于十。例如，如果向量A402与向量B404间隔103度，那么在向量A402与B404之间将有预期的五个投射。可能直观地看起来在向量A402与B404之间将有10个投射，但是有五个。例如，投射在两个方向上延伸，并且就角度而言，投射到第三象限中的投射将仍然在A与B“之间”。然而，为了本文讨论的实例的目的，每个投射可以被认为仅在一个象限中，因为这对于概念目的来说足够接近。在该实例中，由于80个投射向量中的5个向量落在向量A402与向量B404之间，因此可以确定向量A402与向量B404之间的角度为10度，如下面更详细描述。一旦确定了两个向量A402与B404之间的角度410以及向量A402和向量B404的长度，那么可以使用三角函数来计算点A302与B304之间的距离d306。进一步的细节是关于图7至图10提供。
图7至图10示出了通过使用投射向量来确定点之间的角度来查找两点之间的向量距离而不需要存储参考数据点的实际值或坐标的技术。生成任意数量的随机投射。在一个说明性实例中，围绕360度轴生成一组80个随机向量。
对于参考数据库中的每个参考数据点，匹配系统确定每个投射向量是在每个参考数据点的每个向量(例如，点A302的向量A402)的代数右边或是代数左边，诸如通过计算投射向量与向量(从原点到参考数据点)的点积，如下面参考图7和图8所述。投射向量和参考数据点的点积的结果可以存储为二进制字，并在接收到未知数据点时用以确定落在参考数据点与未知数据点之间的投射向量。除了确定投射向量相对于每个参考数据点的位置之外，还计算每个参考数据点向量(从原点到参考数据点)的相应长度。参考点向量的长度是向量与原点的距离，并且可以通过执行向量与其自身的点积来确定。匹配系统可以存储表示代数左边二进制数据和代数右边二进制数据的位以及参考数据点向量的长度(或距离)。在将未知数据点与参考数据点进行比较以识别候选数据点的运行时间期间，匹配系统仅需要将表示代数左边二进制数据和代数右边二进制数据(下面详细描述)的位以及每个参考数据点向量的长度加载到存储器中。因此，不需要加载实际的参考数据点，一旦为参考数据点确定了左边二进制数据和右边二进制数据以及向量长度，就可以丢弃参考数据点位。
当接收到未知数据点时(例如，当从电视机接收到视频数据点时)，匹配系统可以从为参考数据点存储的信息(例如，左边二进制数据和右边二进制数据以及参考数据点的向量长度)来确定候选数据点，例如通过搜索参考数据库中的最近邻点。然后，匹配系统可以确定投射向量是在未知数据点的向量的代数右边或是代数左边(例如，通过获取点积)来获得左边二进制值和右边二进制值。匹配系统还可以计算未知数据点向量的长度。可以使用落在参考数据点与未知数据点之间的投射向量来确定参考数据点的向量与未知数据点的向量之间的角度。
图7至图9示出了用于确定落在参考数据点A302与未知数据点B304之间的投射的技术。为了确定投射向量是否落在参考数据点A302与未知数据点B304之间，确定哪些投射是在点A302和点B304的代数左边，哪些投射是在点A302和点B304的代数右边。点A302的代数右边的投射和点B304的代数左边的投射落在点A302与B304之间。
例如，如图7所示，通过确定每个投射向量是在点A302(以及因此在向量A402)的代数右边或是在代数左边而相对于点A302来评估投射向量。在一个实例中，可以通过将投射向量和向量A402(从原点O到参考点A302)的点积来确定投射向量是在点A302的代数右边或是代数左边。例如，投射向量702和向量A402的点积等于正数，指示投射向量702是在点A302和向量A402的代数右边。可以为相对于点A302的投射向量702存储二进制值1，指示向量702是在点A302和向量A402的代数右边。作为另一实例，投射向量704和向量A404的点积等于负数，指示投射向量704是在点A302和向量A402的代数左边。可以为相对于点A的投射向量704存储二进制值0，指示它是在点A302和向量A的代数左边。可以为相对于点A302的所有投射向量执行相同的计算。如图7所示，在点A302(和向量A402)的代数左边的所有投射向量相对于点A302存储为二进制值0，并且在点A302(和向量A402)的代数右边的所有投射向量相对于点A302存储为二进制值1。本领域普通技术人员将理解，可以为在点A302右边的投射向量存储0值，并且可以为在点A302左边的投射向量存储1值。
图8示出了将相同的计算应用于点B304，导致为相对于点B304的投射向量存储相应的1和0。例如，通过确定每个投射向量是在点B304(以及因此在向量B404)的代数右边或是代数左边而相对于点B304来评估投射向量。在一个实例中，可以通过将投射向量和向量B404(从原点O到参考点B304)的点积来确定投射向量是在点B304的代数右边或是代数左边。例如，在点B304(和向量B404)的代数左边的所有投射向量相对于点B304存储为二进制值0，并且在点B304(和向量B404)的代数右边的所有投射向量存储相对于点B304存储二进制值为1。本领域普通技术人员将理解，可以为在点B304右边的投射向量存储0值，并且可以为在点B304左边的投射向量存储1值。
图9示出了落在点A302与点B304之间的投射向量。落在点A302与B304之间的投射向量包括在点A302的代数右边的投射(由A1值902示出)和在点B304的代数左边的投射(由B0值904示出)。落在点A302与点B304之间的投射向量可以通过取相对于点A302存储的80个二进制向量值与相对于点B304存储的80个二进制向量值的异或(XOR)来确定。XOR的结果生成具有A1值902和B0值904的投射向量，如图9所示。
图10示出了查找点A302与点B302之间的角度910所需的所有分量。然后可以基于点A302与B304之间的投射的数量来查找向量A402(数据点A302)与向量B404(数据点B304)之间的角度910。角度确定是近似的，但足够接近以获得点A302与B304之间的精确距离d。在一个实例中，参考数据点向量与未知数据点向量之间的近似角度通过将常数乘以比率来确定。该比率包括参考数据点与未知数据点之间的投射向量的数量除以投射向量的总数。常数可以是预定义的数字，例如180。例如，点A302与点B304之间的角度910包括异或运算的结果除以向量的总数(在该实例中为80)。
当提到计算未知数据点304与参考数据点(包括数据点A302)之间的距离时，在每个参考数据点的二进制数据(用于投射)与未知数据点的二进制数据值之间计算异或。如上所述，未知数据点(例如，数据点B304)与参考数据点(例如，数据点A302)的二进制数据之间的异或结果是未知数据点与参考数据点之间的投射数量。再次，导出的角度910等于数据点302与304之间的投射数量除以总投射数量(在该实例中为80)，再乘以180。然后可以通过使用等式执行毕达哥拉斯恒等式计算来计算导出的距离：
d2＝(sin(θ)*B.B)2+(A.A-cos(θ)*B.B)2
点积B.B表示向量B404的长度，并且点积A.A表示向量A402的长度。
一旦确定了从未知数据点B304到存储在参考数据库中的参考数据点的距离，可以如前所述确定候选数据点。然后可以通过其中一个候选数据点来识别未知数据点B304。例如，可以将参考数据点中的一个确定为与未知数据点B304的最接近匹配。然后，未知数据点B304可以被识别为与作为最接近的匹配查找到的候选数据点相同的数据。在一些实例中，可以使用最近邻方法来识别候选数据点，并且可以使用路径追踪算法来识别未知数据点。关于图23至图27来描述最近邻技术和路径追踪技术的细节。
使用上述向量投射技术，需要较少的数据来确定参考数据点与未知数据点之间的距离。这种技术可以用于在多个参考数据点之间查找候选数据点。如前所述，在接收到未知数据点之前，向量A402的长度(由点积A.A表示)已经是已知的，因此在运行时不需要确定生成候选数据点的距离。所需的唯一数据是参考数据点向量的长度(或距离)以及表示相对于参考数据点和未知数据点的投射向量的代数左边和右边二进制数据的位(其用于确定参考数据点与未知数据点向量之间的角度)。例如，由于为相对于点A302(在匹配过程之前)的所有投射向量和相对于点B304的所有投射向量计算了点积，所以除了参考数据点的向量长度之外，匹配系统可以存储每个参考数据点的每个投射的位，以及未知数据点的每个投射的位。因此，当将未知数据点与参考数据点进行比较以在运行时识别候选数据点时，匹配系统可以丢弃实际的参考数据点。
上面描述的向量投射技术的一个优点是所保存的精确数据量取决于需要多少投射来获得可接受的结果。例如，当与一个数据点相比较时，每个投射向存储器添加一位来使用，因此如果随机投射的数量是合理的数量诸如80，那么原始的75个字节的数据集(点)可以用10个字节的左/右二进制结构加上例如该点的向量的长度的2个字节，共12个字节来代替。这样的实例为存储器中的每个点节省了63个字节。因此，当计算大数据搜索和比较时，向量投射技术非常有利地缩减了数据大小，并且可以用于许多大规模应用。
图11示出了由匹配引擎执行的匹配过程生成的数据1101。数据1101可以表示引入数据，诸如参考数据和/或未知数据。在图11所示的实例中，数据点聚类不以投射向量为中心。例如，数据点聚类的位置用不以向量投射为中心的聚类原点来示出。相应的，投射向量集不利地远离数据聚类的统计中心。将向量投射的原点移动到向量空间的中间可以使投射更富成效并且可以生成最佳结果。
图12示出了通过匹配过程生成的数据1202，其可以类似于图11所示的数据1101。使用本领域技术人员熟知的统计方法，可以计算偏移以使投射向量居中，如图12所示。在该实例中，向量聚类在典型系统数据的代表性样本上重新居中。通过统计方式查找组中心，其用于将原点偏移到投射向量的中心。例如，可以确定数据聚类的统计平均值(或平均数)。统计平均值(或平均数)可用于使投射向量集居中于数据聚类的近似中间位置。使投射向量重新居中于数据聚类的中间区域改善了上述技术的结果。
可以随机地或伪随机地投射向量。伪随机投射包括呈分布式方式的预定投射。例如，机器可以多次生成相同的投射，但是投射可以看起来是随机的。随机投射是随机的，但本领域的技术人员将理解它们实际上是从正态分布中随机选择的。因此，并不是所有的空间定义都相同。如本领域技术人员已知的，可以采用蒙特卡罗方法(Monte Carlo method)来选择良好的随机或伪随机投射。一旦选择了合适的足够的随机投射，那么随机投射可用于许多距离确定(例如，以确定许多数据点向量之间的角度)，并且不需要改变它，除非期望增加或减少投射数量。由于这是概率计算，结果可能不是正确的答案，但会非常接近正确。技术人员将会明白，结果不一定是“正确的”，而仅仅是足够接近来为大数据应用提供有用的实用程序。为了测量足够的随机分布，执行直接合适性测试，如下面更详细讨论。
图13示出了生成待比较数据的一组投射向量的随机(或伪随机)过程的输出。在该实例中，随机过程已经生成过度聚类在一起的向量，其中向量之间的角距离(例如，间隙1302、1304和1306)过度不均匀。随机投射似乎过多聚类在某些值，使得距离或间隙1301、1302和1303显示太大的变化。向量的过度聚类会降低系统的整体精度。例如，当使用投射向量执行匹配或其它过程时，向量之间的不均匀的结果可以包括过多的平均误差。图13中的投射向量集因此不合适。
图15中示出了令人满意的分布式随机投射集的实例。例如，图15示出了生成要比较数据的一组投射向量的随机(或伪随机)处理的输出。在该实例中，随机过程已经生成充分均匀聚类的向量，其中向量之间的角距离(例如，间隙1502、1504和1506)是可接受的，并且当使用投射向量执行匹配或其它过程时平均误差将在预定阈值之下(如下面关于图16描述)。如下所述，阈值可以包括任何合适的误差值，诸如5％。
投射的合适性可以通过实验一次确定，并保留并用于随机或伪随机生成。例如，投射向量的合适性可以通过执行测试与现有系统相比之下的上述距离确定技术(使用投射来确定参考点和未知点的向量之间的角度)的充分的测试并比较结果来确定。可以使用5％误差的目标作为阈值来确定随机投射向量的合适性。本领域普通技术人员将理解，可以使用任何阈值百分比，这取决于具体应用和期望的所需质量。
图14是示出使用图13所示的投射向量的这种测试的结果1400的实例的图1400。图1400示出了被匹配的实际数据与通过本文所描述的使用向量投射的技术所匹配的数据的数据比较。在这个实例中，用于生成多维向量的随机投射没有充分均匀分布，如图13中二维绘制所见。实际数据与缩减数据之间的测量差等于11.9％。图14所示的数据结果相对于阈值误差过大。例如，使用5％的阈值，测试中使用的图13的随机向量不充分，因为11.9％的平均误差高于预定阈值5％。
在这种情况下，生成另一组投射以尝试获得令人满意的投射。图15的投射向量包括一组充分均匀分布的向量。例如，图16表示充分性测试的结果1600的实例，其包括使用本文所述的向量投射技术的实际匹配与匹配结果之间的可接受的误差差。图1600示出了被匹配的实际数据与本文所描述的使用向量投射的技术所匹配的数据的数据比较。在该实例中，用于生成多维向量的随机投射充分均匀分布，如图15中二维绘制所见。实际数据与缩减数据之间的测量差等于4.60％，其低于5％的阈值，表明图15所示的随机向量足以获得准确的结果。
图17示出了用于识别一个或多个未知数据点的过程1700的实施例。在一些方面，过程1700可由诸如匹配服务器104之类的计算装置执行。
过程1700被示出为逻辑流程图，其操作表示可以在硬件、计算机指令或其组合中实现的操作序列。在计算机指令的背景下，操作表示存储在一个或多个计算机可读存储介质上的计算机可执行指令，当由一个或多个处理器执行时，执行所述操作。通常，计算机可执行指令包括执行特定函数或实现特定数据类型的例程、程序、对象、组件、数据结构等。描述操作的顺序不旨在被解释为限制，并且任何数量的所描述的操作可以以任何顺序和/或并行地组合以实现该过程。
另外，过程1700可以在配置有可执行指令的一个或多个计算机系统的控制下执行，并且可以被实现为在一个或多个处理器上通过硬件或其组合集体执行的代码(例如，可执行指令、一个或多个计算机程序，或一个或多个应用程序)。如上所述，代码可以存储在机器可读存储介质上，例如以包括可由一个或多个处理器执行的多个指令的计算机程序的形式存储。机器可读存储介质可以是非暂时性的。
在1702中，过程1700包括获得多个参考数据点。在一些实施例中，多个参考数据点包括存储在参考数据库中的数据，如图1所示的参考数据库116。参考数据点可以包括可以与未知数据进行比较以识别未知数据的任何数据。
在1704中，过程1700包括确定从原点到多个参考数据点中的参考数据点的第一向量的长度。参考数据点可以包括数据点302，原点可以包括原点O，并且第一向量可以包括图3至图5中所示的参考数据点向量402。长度可以通过任何合适的技术来确定，诸如通过计算第一向量与其自身的点积。
在1706中，过程1700包括获得与由显示器呈现的内容相关联的未知数据点。在1708中，过程1700包括确定从原点到未知数据点的第二向量的长度。未知数据点可以包括数据点304，原点可以包括原点O，并且第二向量可以包括图3至图5中所示的未知数据点向量404。长度可以通过任何合适的技术来确定，诸如通过计算第二向量与其自身的点积。
在1710中，过程1700包括从原点投射多个向量。在一个实例中，多个投射向量可以包括图7至图10中所示的投射向量。可以随机地生成向量或者可以伪随机地生成向量，如关于图13至图16所讨论。
在1712中，过程1700包括确定参考数据点与未知数据点之间的多个向量的数量。在一些实施例中，确定参考数据点与未知数据点之间的多个向量的数量包括确定多个向量中的每个向量是在参考数据的第一向量的代数右边或是代数左边。确定多个向量的投射向量是在第一向量的代数右边或是代数左边可以包括在投射向量和第一向量上执行点积。确定参考数据点与未知数据点之间的多个向量的数量还包括确定多个向量中的每个向量是在未知数据点的第二向量的代数右边或是代数左边。也可以使用点积。确定参考数据点与未知数据点之间的多个向量的数量还包括确定参考数据点与未知数据点之间的多个向量的数量。多个向量的数量包括在第一向量的代数左边并在第二向量的代数右边的向量，或在第一向量的代数右边并在第二向量的代数左边的向量。图9中示出了一个实例作为具有存储的A1值902和B0值904的向量。
在一些实例中，过程1700还包括为确定为在参考数据点的第一向量的代数右边的每个向量存储第一二进制值，并且为确定为在参考数据点的第一向量的代数左边的每个向量存储第二二进制值。在一个实例中，第一二进制值可以是0，并且第二二进制值可以是1。在另一个实例中，第一二进制值可以是1，并且第二二进制值可以是0。
在一些实例中，过程1700还包括为确定为在未知数据点的第二向量的代数右边的每个向量存储第一二进制值，并且为确定为在未知数据点的第二向量的代数左边的每个向量存储第二二进制值。在一个实例中，第一二进制值可以是0，并且第二二进制值可以是1。在另一个实例中，第一二进制值可以是1，并且第二二进制值可以是0。
在一些实例中，在确定参考数据点的第一向量的长度之后，并且在确定多个向量的每个向量是在第一向量的代数右边或在其代数左边之后，丢弃参考数据点。例如，表示参考数据点的位可以从存储器中移除。丢弃参考数据点允许由匹配系统存储较少的信息。
在1714中，过程1700包括估计第一向量与第二向量之间的角度。使用多个向量的数量来估计该角度。例如，估计参考数据点的第一向量与未知数据点的第二向量之间的角度包括将常数乘以比率。该比率包括参考数据点与未知数据点之间的多个向量的数量除以多个向量的总数。常数可以包括预定值(例如，180、360或其它合适的数量)。
在1716中，过程1700包括确定参考数据点与未知数据点之间的距离。使用第一向量和第二向量的估计角度和确定长度来确定该距离。例如，确定参考数据点与未知数据点之间的距离包括使用第一向量和第二向量的估计角度和确定长度来执行毕达哥拉斯恒等式计算。
在1718中，过程1700包括从多个参考数据点识别一个或多个候选数据点。候选数据点是用于匹配未知数据点的候选。一个或多个候选数据点是基于一个或多个参考数据点与未知数据点之间的确定距离来确定的。例如，可以使用最近邻算法来基于距离确定候选。
在一些实施例中，过程1700包括确定未知数据点与候选数据点之间的匹配。匹配是基于候选数据点作为一个或多个候选数据点中与未知数据点最接近的数据点的近似匹配。在一些实施例中，过程1700可以通过将未知数据点与一个或多个候选数据点进行比较以识别未知数据点来确定匹配。在一些实例中，可以使用路径追踪算法来识别未知数据点。
由本文描述的系统和方法执行的技术可以应用于收获和操纵大量数据的任何系统。如上所述，这些系统的说明性实例包括基于内容的自动搜索系统(例如，用于视频相关应用或其它合适应用的自动内容识别)、MapReduce系统、Bigtable系统、模式识别系统、面部识别系统、分类系统、计算机视觉系统、数据压缩系统、聚类分析，或任何其它合适的系统。本领域普通技术人员将理解，本文描述的技术可以应用于存储与未知数据进行比较的数据的任何其它系统。
在自动内容识别(ACR)的背景下，例如，上述技术可以缩减必须存储的数据量，以便匹配系统搜索并查找未知和已知数据组之间的关系。例如，在本文描述的方法和系统的许多应用中，向量投射技术允许识别由显示器(例如，电视(TV)、智能电视、具有有线或卫星馈送的电视、互联网启用的视频机顶盒、移动装置，或任何其它观看装置)呈现的音频和/或视频信息的媒体片段。此外，片段识别系统可以准确地识别任何类型的片段是否正在广播，包括先前录制的节目，或包括商业消息。通过使用向量投射技术，基于视频的ACR系统可以缩减必须存储以供参考的视频数据量。
下面将电视节目的匹配视频片段用作为本文描述的向量投射技术的应用的一个实例。然而，本领域普通技术人员将理解，本文描述的技术和系统可以应用任何数量的大数据库搜索、分析和比较问题，在一般意义上也称为“大数据分析”。
图18示出了可以使用本文描述的向量投射技术来提高数据效率的视频匹配系统1800的实例。包括电视系统的客户端装置1802的电视(TV)客户端1806，可以解码与视频节目1828相关联的电视信号。TV客户端1806可以将视频的每一帧的解码内容放置在视频帧缓冲器以准备用于显示或进一步处理视频帧的像素信息。客户端装置1802可以是能够接收和解码视频信号的任何电视解码系统。客户端装置1802可以接收视频节目1828并将视频信息存储在视频缓冲器(未示出)中。客户端装置1802可以处理视频缓冲器信息并产生未知数据点(其可以被称为“提示”)，下面参照图20更详细地描述。电视客户端1806可以将未知数据点发送到视频匹配服务器1804，以与参考数据库1816中的参考数据点进行比较，类似于上述技术。
匹配系统1800可以通过首先从已知视频数据源1818收集数据样本来开始匹配视频片段的过程。例如，视频匹配服务器1804从多种视频数据源1818收集数据以构建并维护参考视频数据库1816。视频数据源1818可以包括电视节目、电影或任何其它合适的视频源。视频数据源1818可以作为空中广播、作为有线电视频道、作为来自互联网的流媒体以及从任何其它视频数据源提供。在一些实施例中，视频匹配服务器1804可以处理从视频数据源1818接收的视频，以生成并收集参考数据库1816中的参考视频数据点，如以下关于图18所描述。在一些实施例中，来自视频数据源1818的视频节目可以由参考视频节目摄取系统(未示出)来处理，该系统可以产生参考视频数据点并将它们发送到参考数据库1816进行存储。可以如上所述使用参考数据点来确定然后用于分析未知数据点的信息。例如，可以关于多个投射向量来分析参考数据点，以获得左二进制数据和右二进制数据。也可以确定与参考数据点相关的向量的长度。一旦为参考数据点确定了参考数据点向量的长度以及左二进制数据和右二进制数据，那么可以丢弃实际的参考数据点位。
视频匹配服务器1804可以将一段时间(例如，数天、数周、数月或任何其它合适的时间段)接收的每个视频节目的参考视频数据点存储在参考数据库1816中，直到确定必要的信息。视频匹配服务器1804可以构建并连续地或周期性地更新电视节目样本的参考数据库1816(例如，包括参考数据点，其也可以被称为提示或提示值)。在一些实例中，收集的数据是从周期性视频帧(例如，每第五个视频帧、每第十个视频帧、每第十五个视频帧，或其它适当编号的帧)采样的视频信息的压缩表示。在一些实例中，为每个节目源收集每帧数据的字节数(例如，25个字节、50个字节、75个字节、100个字节，或每帧的任何其它字节量)。可以使用任何数量的节目源来获得视频，诸如25个通道、50个通道、75个通道、100个通道、200个通道或任何其它数量的节目源。使用实例数据量，在三天内的24小时期间收集的总数据变得非常大。因此，丢弃实际的参考视频数据点位有利于缩减视频匹配服务器1804的存储负载。
在一个说明性实例中，图19示出了包括解码器的存储缓冲器1902的视频摄取捕获系统1900。解码器可以是视频匹配服务器1804或电视客户端1806的一部分。解码器可能不与实体电视显示面板或装置一起操作或不需要实体电视显示面板或装置。解码器可以解码，并且在需要时将数字视频节目解密成电视节目的未压缩位图表示。为了构建参考视频数据的参考数据库(例如，参考数据库1816)，视频匹配服务器1804可以获取从视频帧缓冲器读取的一个或多个视频像素阵列。视频像素阵列被称为视频块。视频块可以是任何任意的形状或图案，但是为了该特定实例的目的，将其描述为10×10像素阵列，其中包括水平的10个像素乘以垂直的10个像素。此外，为了该实例的目的，假设从视频帧缓冲器内提取均匀分布在缓冲器的边界内的25个像素块位置。
像素块(例如，像素块1904)的示例分配如图19所示。如上所述，像素块可以包括诸如10×10阵列的像素阵列。例如，像素块1904包括10×10像素阵列。像素可以包括颜色值，诸如红色值、绿色值和蓝色值。例如，示出了具有红-绿-蓝(RGB)颜色值的像素1906。像素的颜色值可以由每种颜色的八位二进制值表示。可以用于表示像素的颜色的其它合适的颜色值，包括亮度和色度(Y，Cb，Cr)值或任何其它合适的颜色值。
取每个像素块的平均值(或某些情况下的平均值)，并且创建并使用时间码(或时间戳)标记结果数据记录。例如，针对每个10×10像素块阵列查找平均值，在这种情况下，每二十五个显示缓冲器位置产生二十四位数据，每帧总共有600位像素信息。在一个实例中，计算像素块1904的平均值，并且由像素块平均值1908示出。在一个说明性实例中，时间码可以包括表示从1970年1月1日午夜开始的总用时(以秒为单位)的“新纪元时间”。例如，像素块平均值1908用时间码1912组装。新纪元时间是计算系统包括例如基于Unix的系统中被接受的惯例。称为元数据的关于视频节目的信息被附加到数据记录。元数据可以包括关于节目的任何信息，诸如节目标识符、节目时间、节目长度或任何其它信息。包括像素块的平均值、时间码和元数据的数据记录形成“数据点”(也称为“提示”)。数据点1910是参考视频数据点的一个实例。
识别未知视频片段的过程以类似于创建参考数据库的步骤开始。例如，图20示出了包括解码器的存储缓冲器2002的视频捕获系统2000。视频捕获系统2000可以是处理由显示器呈现的电视数据(例如，在互联网连接的电视监视器上，诸如智能电视、移动装置或其它电视观看装置)的客户端装置1802(例如，电视系统)的一部分。视频捕获系统2000可以利用与系统1900用于创建参考视频数据点1910的过程类似的过程来生成未知视频数据点2010。在一个实例中，TV客户端1806可以将未知视频数据点2010传送到视频匹配服务器1804以由匹配服务器1804识别。
如图20所示，视频块2004可以包括10×10像素阵列。可以从由显示器呈现的视频帧中提取视频块2004。可以从视频帧中提取多个这类像素块。在一个说明性实例中，如果从视频帧中提取了二十五个这类像素块，那么结果将是表示75维空间中的位置的点。可以对阵列的每个颜色值(例如，RGB颜色值，Y、Cr、Cb颜色值，或类似的)计算平均值。由平均像素值形成数据记录(例如，未知视频数据点2010)，并且将当前时间附加到数据。可以使用上述向量投射技术将一个或多个未知视频数据点发送到视频匹配服务器1804以与来自参考数据库1816的数据进行匹配。
本领域技术人员将知晓，存储实际参考数据点位值的参考数据库1816创建大搜索空间，将需要大量的计算资源来搜索和匹配数据。本文描述的向量投射技术提供了显着更有效的方式来搜索大数据库，而不需要实际存储表示参考数据点的大值(也称为参考数据提示)。
图21示出了用于识别视频内容(例如，由显示器显示的视频内容)的过程2100的实施例。在某些方面，过程2100可以由诸如视频匹配服务器1804的计算装置来执行。
过程2100被示为逻辑流程图，其操作表示可以在硬件、计算机指令或其组合中实现的操作序列。在计算机指令的背景下，操作表示存储在一个或多个计算机可读存储介质上的计算机可执行指令，当由一个或多个处理器执行时，执行所列举的操作。通常，计算机可执行指令包括执行特定函数或实现特定数据类型的例程、程序、对象、组件、数据结构等。描述操作的顺序不旨在被解释为限制，并且任何数量的所描述的操作可以以任何顺序和/或并行地组合以实现该过程。
另外，过程2100可以在配置有可执行指令的一个或多个计算机系统的控制下执行，并且可以被实现为在一个或多个处理器上通过硬件或其组合集体执行的代码(例如，可执行指令、一个或多个计算机程序，或一个或多个应用程序)。如上所述，代码可以存储在机器可读存储介质上，例如以包括可由一个或多个处理器执行的多个指令的计算机程序的形式存储。机器可读存储介质可以是非暂时性的。
在2102中，过程2100包括获得多个参考视频数据点。在一些实施例中，多个参考视频数据点包括从一个或多个视频帧提取的视频数据。参考视频数据点可以包括图19中所示的数据点1910，包括像素块的平均像素值、时间码和元数据。在一些实施例中，参考视频数据点可以不包括元数据和/或时间码。在一些实施例中，像素数据可以用于帧的每个像素，而不是像素块。
在2104中，过程2100包括确定从原点到多个参考视频数据点中的参考视频数据点的第一向量的长度。原点可以包括原点O，并且第一向量可以包括图3至图5中所示的参考数据点向量402。长度可以通过任何合适的技术来确定，例如通过计算第一向量与其自身的点积。
在2106中，过程2100包括获得与由显示器呈现的视频内容相关联的未知视频数据点。未知视频数据点可以包括图20中所示的数据点2010，包括与视频帧相关联的像素块的平均像素值和当前时间(称为时间码)。在一些实施例中，未知视频数据点可以不包括时间码。在一些实施例中，像素数据可以用于帧的每个像素，而不是像素块。
在2108中，过程2100包括确定从原点到未知视频数据点的第二向量的长度。原点可以包括原点O，并且第二向量可以包括图3至图5中所示的未知数据点向量404。长度可以通过任何合适的技术来确定，例如通过计算第二向量与其自身的点积。
在2110中，过程2100包括从原点投射多个向量。在一个实例中，多个投射向量可以包括图7至图10中所示的投射向量。可以随机地生成向量或者可以伪随机地生成向量，如关于图13至图16所讨论。
在2112中，过程2100包括确定参考视频数据点与未知视频数据点之间的多个向量的数量。在一些实施例中，确定参考视频数据点与未知视频数据点之间的多个向量的数量包括确定多个向量中的每个向量是在参考视频数据点的第一向量的代数右边或是代数左边。确定多个向量的投射向量是在第一向量的代数右边或是代数左边可以包括在投射向量和第一向量上执行点积。确定参考视频数据点与未知视频数据点之间的多个向量的数量还包括确定多个向量中的每个向量是在未知视频数据点的第二向量的代数右边或是代数左边。也可以使用点积。确定参考视频数据点与未知视频数据点之间的多个向量的数量还包括确定参考视频数据点与未知视频数据点之间的多个向量的数量。多个向量的数量包括在第一向量的代数左边并在第二向量的代数右边的向量，或在第一向量的代数右边并在第二向量的代数左边的向量。图9中示出了一个实例作为具有存储的A1值902和B0值904的向量。
在一些实例中，过程2100还包括为确定为在参考视频数据点的第一向量的代数右边的每个向量存储第一二进制值，并且为确定为在参考视频数据点的第一向量的代数左边的每个向量存储第二二进制值。在一个实例中，第一二进制值可以是0，并且第二二进制值可以是1。在另一个实例中，第一二进制值可以是1，并且第二二进制值可以是0。
在一些实例中，过程2100还包括为确定为未知视频数据点的第二向量的代数右边的每个向量存储第一二进制值，并且为确定为在未知视频数据点的第二向量的代数左边的每个向量存储第二二进制值。在一个实例中，第一二进制值可以是0，并且第二二进制值可以是1。在另一个实例中，第一二进制值可以是1，并且第二二进制值可以是0。
在一些实例中，在确定参考视频数据点的第一向量的长度之后，并且在确定多个向量的每个向量是在第一向量的代数右边或在其代数左边之后，丢弃参考视频数据点。例如，表示参考视频数据点的位可以从存储器中移除。丢弃参考时视频数据点允许由匹配系统存储较少的信息。
在2114中，过程2100包括估计第一向量与第二向量之间的角度。使用多个向量的数量来估计该角度。例如，估计参考视频数据点的第一向量与未知视频数据点的第二向量之间的角度包括将常数乘以比率。该比率包括参考视频数据点与未知视频数据点之间的多个向量的数量除以多个向量的总数。常数可以包括预定值(例如，180、360或其它合适的数量)。
在2116中，过程2100包括确定参考视频数据点与未知视频数据点之间的距离。使用第一向量和第二向量的估计角度和确定长度来确定该距离。例如，确定参考视频数据点与未知视频数据点之间的距离包括使用第一向量和第二向量的估计角度和确定长度来执行毕达哥拉斯恒等式计算。
在2118中，过程2100包括从多个参考视频数据点识别一个或多个候选视频数据点。候选视频数据点是用于匹配未知视频数据点的候选。一个或多个候选视频数据点是基于一个或多个参考视频数据点与未知视频数据点之间的确定距离来确定的。例如，可以使用最近邻算法来基于距离确定候选。
在2120中，过程2100包括识别由显示器呈现的视频内容。通过将未知视频数据点与一个或多个候选视频数据点进行比较来识别由显示器呈现的视频内容。例如，识别由显示器呈现的视频内容包括确定未知视频数据点和候选视频数据点之间的匹配。匹配是基于候选视频数据点作为一个或多个候选视频数据点中与未知视频数据点最接近的视频数据点的近似匹配。在一些实例中，可以使用路径追踪算法来识别呈现的视频内容。
现在详细描述前面提到的最近邻技术和路径追踪技术。给出使用模糊提示追踪视频传输的实例，但是通用概念可以应用于诸如上述的那些领域。
提出了一种有效的视频追踪方法。给定大量的视频片段，系统必须能够实时识别是从给定的查询视频输入中提取的什么片段以及在什么时间偏移。片段和偏移一起被称为位置。该方法被称为视频追踪，因为它必须能够有效地检测和适于暂停、快速转发、倒回、突然切换到其它片段并切换到未知片段。在能够追踪直播视频之前，处理数据库。视觉提示(少量像素值)以每恒定秒数从帧中获取，并放入专门的数据结构中(注意，这也可以实时完成)。视频追踪是通过从输入视频连续接收提示并更新关于其当前位置的一组观点或估计来执行。每个提示同意或者不同意所述估计，并进行调整以反映新的证据。如果对此的信心足够高，那么视频位置被认为是正确的。通过追踪一小组可能的“可疑”位置，可以有效地完成此操作。
描述了用于视频追踪的方法，但是使用数学构造来解释和研究。这个介绍的目的是为读者提供必要的工具来在两个领域之间进行翻译。视频信号由序列帧组成。每个都可以被认为是静止图像。每一个帧都是像素的栅格。每个像素由对应于该像素的颜色红色、绿色和蓝色(RGB)的三个强度值构成。在本文的术语中，提示是帧中的像素的子集的RGB值和相应的时间戳的列表。提示中的像素数明显小于帧中，通常在5个到15个之间。作为标量值的有序列表，提示值实际上是向量。该向量也称为点。
虽然这些点呈高维度，通常在15个到150个之间，但是它们可以被想象成呈二维的点。事实上，附图将作为二维图给出。现在，考虑一个视频的进展及其相应的提示点。通常，小的时间变化会产生像素值的小变化。像素点可以看作是帧之间“移动”了一点。在从帧到帧的这些微小的运动之后，提示遵循空间中的路径，如同弯曲的线上的珠子。
用这种类比的语言，在视频追踪中，接收到空间中的珠的位置(提示点)，并且查找珠所遵循的线部分(路径)。这因为两个事实变得更加困难。首先，珠子不完全遵循线，而是与其保持一定变化的未知距离。其次，线都缠结在一起。这些说明在第2节中作了准确的描述。下面描述的算法在两个概念性步骤中进行。当接收到提示时，它会查找足够靠近提示点的所有已知路径上的所有点；这些被称为可疑点。使用等球中的概率点位置算法(Probabilistic Point Location in Equal Balls algorithm)可以有效地完成此项。这些可疑点被添加到历史数据结构中，并且计算每个可疑点指示真实位置的概率。该步骤还包括移除充分不可能的可疑位置。这个历史更新过程确保一方面只保留一小段历史，而另一方面将不可能的位置永远删除。通用算法在算法1中给出，并如图22所示。
该文件以描述第1节中的等球中的概率点位置(PPLEB)算法开始。其用以有效地执行算法1中第5行。对可疑点执行快速搜索的能力对于这种方法的适用性至关重要。随后，在第2节中，描述了一个可能的统计模型，用于执行第6行和第7行。所描述的模型是设置的自然选择。还示出了如何非常有效地使用它。
第1节-等球中的概率点位置
以下节描述了用于执行等球中的概率点位置(PPLEB)的简单算法。在传统的PLEB(等球中的点位置)中，一个以在lR d和一个指定的半径为r的球中的一组n点x开始。该算法给出O(poly(n)))预处理时间以产生有效的数据结构。然后，给定查询点x，需要算法返回所有点x，使得||x－xi||≤r。该组的点，使得||x－xi||≤r几何地位于围绕查询x的半径为r的球内(见图23)。该关系称作为x，接近x，或作为x以及x是邻近的。
PPLEB的问题和最近邻搜索的问题是学术界受到很多关注的两个类似的问题。事实上，这些问题是计算几何领域首先研究的问题。许多不同的方法适应于其中环境维度小或恒定的情况。这些以不同的方式分割空间并递归地搜索各部分。这些方法包括KD树、覆盖树等。虽然在低维度上非常有效，但是当环境维度较大时，它们往往执行得很差。这被称为“维度灾难”。各种方法试图解决这个问题，同时克服维度灾难。本文使用的算法使用更简单和更快速版本的算法，并且可以依赖于局部敏感哈希(Local Sensitive Hashing)。
第1.1节局部敏感哈希
在局部敏感哈希的方案中，人员设计了一组哈希函数H，使得：
换句话说，如果x和y彼此接近，那么它们被映射到相同值h的概率显著更高。
为了清楚起见，让我们首先处理简化的场景，其中所有传入向量具有相同的长度r’，且后一种情况的原因将稍后变得清楚。首先，定义一个随机函数u∈U，其根据x与y之间的角度在它们之间分离。令是从单位球体Sd－1均匀选择的随机向量，并且令u(x)＝符号(见图24)。很容易验证Pru－U(u(x))≠u(y))＝0x,y/π。此外，对于圆上的任何点x、y、x'、y'，使得实现||x'-y'||≤2，||x-y||0x',y≤20x,y。定义p，使用以下等式：
函数族H被设置为u的t个独立副本的交叉乘积，即h(x)＝[u1(x),...,ut(x)]。直觉上可能想要有，如果h(x)＝h(y)，那么x和y可能彼此接近。让我们量化一下。首先，计算假正误差的预期数量nfp。这些是h(x)＝h(y)但||x-y||>2r的情况。查找到nfp不大于1的值t，即不期望出错的点。
E[nft]≤n(1-2p)t≤1
→t≥log(1/n)/log(1-2p)
现在，计算给定它们是近邻的h(x)＝h(y)的概率：
注意，这里必须具有2p<1，这需要这可能听起来不是很高的成功概率。的确，明显小于1/2。下一节将介绍如何将这一概率提高到1/2。
第1.2节点搜索算法
每个函数h将空间中的每个点映射到bucket。将关于哈希函数h的点x的bucket函数定义为Bh(x)≡{xi|h(xi)＝h(x)}。保持的数据结构是bucket函数[Bh1,...,Bhm]的实例。当搜索点x时，函数返回根据上一节，有两个理想的结果：
Pr(xi∈B(x)| ||xi-x||≤r)≥1/2
换句话说，当发现x的每个近邻的概率至少为1/2时，不太会找到许多非近邻。
第1.3节处理不同的半径输入向量
前面的章节仅涉及通过相同长度的向量搜索，即r'。现在描述的是如何将建构作为构建块来支持不同半径的搜索。如图25所示，空间分为指数增长宽度的环。由Ri表示的环i包括所有点xi，使得‖xi‖∈[2r(1+∈)i，2r(1+∈)i+1]。这样做实现了两个结果。首先，如果xi和xj属于相同的环，那么‖xj‖/(1+∈)≤‖xi‖≤‖xj‖(1+∈)。第二，任何搜索可以在最多1/∈这样的环中进行。此外，如果数据集中的最大长度向量为r'，那么系统中的总环数为O(log(r'/r))。
第2节路径追踪问题
在路径追踪问题中，空间中的固定路径连同粒子在时间点序列中的位置一起被给出。术语粒子、提示和点可互换使用。该算法需要输出粒子在路径上的位置。这会由于以下几个因素而变得更加困难：粒子仅大致遵循路径；路径可以是不连续的，并且自身相交很多次；粒子和路径位置都以时间点序列(每个不同)给出。
重要的是要注意，这个问题可以模拟追踪任何数量的路径上的粒子。这通过将路径连接到一个长路径中并将所得位置解释为各个路径上的位置来简单地完成。
更精确地，令路径P是参数曲线曲线参数将被称为时间。在任意时间点ti给出了我们已知的路径上的点，即给出了n对(ti,P(ti))。粒子遵循路径，但其位置在不同的时间点给出，如图26所示。此外，给出m对(t'j,x(t'j))，其中x(t'j)是时间t'j中粒子的位置。
第2.1节似然估计
由于粒子不完全遵循路径，并且由于路径可以自身相交很多次，所以通常不可能明确地识别粒子实际上在路径上的位置。因此，在所有可能的路径位置上计算概率分布。如果位置概率显著可能，那么假设粒子位置是已知的。以下部分将描述如何有效地完成此操作。
如果粒子遵循路径，那么粒子时间戳与P上对应点的偏移之间的时间差应该是相对固定的。换句话说，如果x(t')当前在路径上偏移t，那么它应该接近于P(t)。此外，τ秒前它应该已经偏移t-τ。因此，x(t'-τ)应该接近P(t-τ)(注意，如果粒子与路径相交，并且x(t')暂时接近P(t)，那么x(t'-τ)和P(t-τ)也将接近)。将相对偏移定义为Δ＝t-t'。注意，只要粒子遵循路径，相对偏移Δ保持不变。即，x(t')接近P(t'+Δ)。
通过以下计算得到最大似然相对偏移：
换句话说，最可能的相对偏移是粒子的历史最有可能的偏移。然而，如果没有统计模型，这个等式是无法解决的。该模型必须量化：遵循路径的紧密程度x；位置之间的x')umps"有多可能；路径和粒子曲线在测量点之间的平滑程度如何。
第2.2节时间折扣分箱
现在描述了用于估计似然函数的统计模型。该模型假设粒子离开路径的偏差在标准偏差ar下正常地分布。还假设在任何给定的时间点，存在一些非零概率是粒子将突然切换到另一条路径。这表现为过去时间点的指数折扣。除了作为建模观点的合理选择，该模型还具有有效更新的优点。对于某一恒定时间单位1：，将似然函数设置为与f成比例，f定义如下：
这里α<<1是比例系数，并且ζ＞0是在给定时间单位中粒子将跳转到路径上的随机位置的概率。
可以使用以下简单的观察来高效地更新函数f。
此外，由于α<<1，如果‖x(t'm)-P(ti)‖≥r，那么发生以下情况：
这是似然函数的重要属性，因为总更新现在可以仅在x(t'j)的近邻而不是整个路径上执行。S表示(ti,P(ti))的集合，使得‖x(t'm)-P(ti)‖≤r。发生以下等式：
这在下面的算法2.2中描述。项f用作还接收负整数指数的稀疏向量。集合S是路径上x(ti)的所有近邻的集合，并且可以使用PPLEB算法快速计算。很容易验证，如果x(ti)的近邻数由某一常数nnear界定，那么向量f中的非零数被限定在nnear/ζ，其只是较大的常数因子。如果高于某个阈值，那么算法的最后阶段是输出δ的特定值。
算法2有效似然更新
图22给出三个连续的点位置和它们周围的路径点。注意，底点和中间点单独都不足以识别路径的正确部分。然而，它们是一起的。添加顶点增加了粒子确实是路径最终(左)曲线的确定性。
在图23中，给定一组n(灰色)点，该算法给出查询点(黑色)，并返回位于距其距离r内的点集(圆内的点)。在传统的设置中，该算法必须返回所有这些点。在概率设置中，每个这样的点应仅以某一恒定概率返回。
图24示出了u(x1)，u(x2)和u(x)的值。直观地，如果虚线在x1与x2之间通过，那么函数u给予它们不同的值，否则给予相同的值。在随机方向上经过虚线确保这种发生的概率与x1和x2之间的角度成正比。
图25示出了通过将空间划分成环，使得环Ri在半径2r(1+∈)i与2r(1+∈)i+1之间，可以确保环内的任何两个向量是相同的长度最多为(1+∈)因子，并且任何搜索最多在1/∈环中执行。
图26示出了自相交路径和查询点(黑色)。它表明，没有粒子位置的历史，就不可能知道它在路径上的位置。
图27给出了三个连续的点位置和它们周围的路径点。注意，x(t1)和x(t2)都不足以单独识别路径的正确部分。然而，它们是一起的。添加x(t3)增加了粒子确实是路径最终(左)曲线的确定性。
可以根据具体要求进行实质性变更。例如，还可以使用定制硬件，和/或特定元件可以在硬件、软件(包括便携式软件，诸如小应用程序等)或两者中实现。此外，可以采用与其它访问或计算装置诸如网络输入/输出装置的连接。
在前述说明书中，参照本发明的具体实施方式对本发明的各方面进行了说明，但是本领域技术人员将认识到本发明不限于此。上述发明的各种特征和方面可以单独使用或共同使用。此外，在不脱离本说明书的更广泛的精神和范围的情况下，实施例可以用于超出本文所描述的任何数量的环境和应用中。因此，说明书和附图被认为是说明性的而不是限制性的。
在前述的描述中，为了说明的目的，以特定顺序描述了方法。应当理解，在替代实施例中，可以以与所描述的不同的顺序执行方法。还应当理解，上述方法可以由硬件组件执行，或者可以体现在机器可执行指令的序列中，机器可执行指令可用于使诸如通用或专用处理器之类的机器或者用指令编程的逻辑电路执行这些方法。这些机器可执行指令可以存储在一个或多个机器可读介质上，诸如CD-ROM或其它类型的光盘、软盘、ROM、RAM、EPROM、EEPROM、磁盘或光卡、闪存或适合于存储电子指令的其它类型的机器可读介质。或者，可以通过硬件和软件的组合来执行这些方法。
在将组件描述为被配置为执行某些操作的情况下，可以例如通过设计电子电路或其它硬件来执行操作，通过编程可编程电子电路(例如，微处理器或其它合适的电子电路)以执行操作，或其任何组合来实现这种配置。
尽管已经在本文中详细描述了本申请的说明性实施例，但是应当理解，本发明的概念可以以其它方式实施和使用，并且所附权利要求旨在被解释为包括这类变型，除了受限于现有技术。

Claims (20)

1.一种系统，包括：
一个或多个处理器；
一个或多个非暂时性机器可读存储介质，其包含当在所述一个或多个处理器上执行时使所述一个或多个处理器执行以下操作的指令，所述操作包括：
获得多个参考视频数据点；
确定从原点到所述多个参考视频数据点中的参考视频数据点的第一向量的长度；
获得与由显示器呈现的视频内容相关联的未知视频数据点；
确定从所述原点到所述未知视频数据点的第二向量的长度；
从所述原点投射多个向量；
确定所述参考视频数据点与所述未知视频数据点之间的所述多个向量的数量；
估计所述第一向量与所述第二向量之间的角度，其中使用所述多个向量的所述数量来估计所述角度；
确定所述参考视频数据点与所述未知视频数据点之间的距离，其中使用所述第一向量和所述第二向量的所述估计角度和所述确定长度来确定所述距离；
从所述多个参考视频数据点识别一个或多个候选视频数据点，其中候选视频数据点是用于匹配所述未知视频数据点的候选，并且其中基于一个或多个参考视频数据点与所述未知视频数据点之间的确定距离来确定所述一个或多个候选视频数据点；以及
识别由所述显示器呈现的所述视频内容，其中通过将所述未知视频数据点与所述一个或多个候选视频数据点进行比较来识别由所述显示器呈现的所述视频内容。
2.根据权利要求1所述的系统，其中所述多个参考视频数据点包括：从一个或多个视频帧提取的视频数据。
3.根据权利要求1所述的系统，其中所述多个投射向量是伪随机生成的。
4.根据权利要求1所述的系统，其中确定所述参考视频数据点与所述未知视频数据点之间的所述多个向量的所述数量包括：
确定所述多个向量中的每个向量是在所述参考视频数据点的所述第一向量的代数右边或是代数左边；
确定所述多个向量中的每个向量是在所述未知视频数据点的所述第二向量的代数右边或是代数左边；以及
确定所述参考视频数据点与所述未知视频数据点之间的所述多个向量的所述数量，其中所述多个向量的所述数量包括在所述第一向量的代数左边并在所述第二向量的代数右边的向量，或在所述第一向量的代数右边并在所述第二向量的代数左边的向量。
5.根据权利要求4所述的系统，其中在确定所述参考视频数据点的所述第一向量的所述长度之后，并且在确定所述多个向量中的每个向量是在所述第一向量的代数右边或在其代数左边之后，丢弃所述参考视频数据点。
6.根据权利要求5所述的系统，还包括当在所述一个或多个处理器上执行时使所述一个或多个处理器执行以下操作的指令，所述操作包括：
为确定为在所述参考视频数据点的所述第一向量的代数右边的每个向量存储第一二进制值；以及
为确定为在所述参考视频数据点的所述第一向量的代数左边的每个向量存储第二二进制值。
7.根据权利要求5所述的系统，还包括当在所述一个或多个处理器上执行时使所述一个或多个处理器执行以下操作的指令，所述操作包括：
为确定为在所述未知视频数据点的所述第二向量的代数右边的每个向量存储第一二进制值；以及
为确定为在所述未知视频数据点的所述第二向量的代数左边的每个向量存储第二二进制值。
8.根据权利要求1所述的系统，其中估计所述参考视频数据点的所述第一向量与所述未知视频数据点的所述第二向量之间的所述角度包括：将常数乘以比率，其中所述比率包括所述参考视频数据点与所述未知视频数据点之间的所述多个向量的所述数量除以所述多个向量的总数。
9.根据权利要求1所述的系统，其中确定所述参考视频数据点与所述未知视频数据点之间的所述距离包括：使用所述第一向量和所述第二向量的所述估计角度和所述确定长度来执行毕达哥拉斯恒等式计算。
10.根据权利要求1所述的系统，其中识别由所述显示器呈现的所述视频内容包括：确定所述未知视频数据点与候选视频数据点之间的匹配，其中所述匹配是基于所述候选视频数据点作为所述一个或多个候选视频数据点中与所述未知视频数据点最接近的视频数据点的近似匹配。
11.一种识别视频内容的方法，包括：
获得多个参考视频数据点；
确定从原点到所述多个参考视频数据点中的参考视频数据点的第一向量的长度；
获得与由显示器呈现的视频内容相关联的未知视频数据点；
确定从所述原点到所述未知视频数据点的第二向量的长度；
从所述原点投射多个向量；
确定所述参考视频数据点与所述未知视频数据点之间的所述多个向量的数量；
估计所述第一向量与所述第二向量之间的角度，其中使用所述多个向量的所述数量来估计所述角度；
确定所述参考视频数据点与所述未知视频数据点之间的距离，其中使用所述第一向量和所述第二向量的所述估计角度和所述确定长度来确定所述距离；
从所述多个参考视频数据点识别一个或多个候选视频数据点，其中候选视频数据点是用于匹配所述未知视频数据点的候选，并且其中基于一个或多个参考视频数据点与所述未知视频数据点之间的确定距离来确定所述一个或多个候选视频数据点；以及
识别由所述显示器呈现的所述视频内容，其中通过将所述未知视频数据点与所述一个或多个候选视频数据点进行比较来识别由所述显示器呈现的所述视频内容。
12.根据权利要求11所述的方法，其中确定所述参考视频数据点与所述未知视频数据点之间的所述多个向量的所述数量包括：
确定所述多个向量中的每个向量是在所述参考视频数据点的所述第一向量的代数右边或是代数左边；
确定所述多个向量中的每个向量是在所述未知视频数据点的所述第二向量的代数右边或是代数左边；以及
确定所述参考视频数据点与所述未知视频数据点之间的所述多个向量的所述数量，其中所述多个向量的所述数量包括在所述第一向量的代数左边并在所述第二向量的代数右边的向量，或在所述第一向量的代数右边并在所述第二向量的代数左边的向量。
13.根据权利要求12所述的方法，其中在确定所述参考视频数据点的所述第一向量的所述长度之后，并且在确定所述多个向量中的每个向量是在所述第一向量的代数右边或在其代数左边之后，丢弃所述参考视频数据点。
14.根据权利要求13所述的方法，还包括：
为确定为在所述参考视频数据点的所述第一向量的代数右边的每个向量存储第一二进制值；以及
为确定为在所述参考视频数据点的所述第一向量的代数左边的每个向量存储第二二进制值。
15.根据权利要求13所述的方法，还包括：
为确定为在所述未知视频数据点的所述第二向量的代数右边的每个向量存储第一二进制值；以及
为确定为在所述未知视频数据点的所述第二向量的代数左边的每个向量存储第二二进制值。
16.根据权利要求11所述的方法，其中估计所述参考视频数据点的所述第一向量与所述未知视频数据点的所述第二向量之间的所述角度包括：将常数乘以比率，其中所述比率包括所述参考视频数据点与所述未知视频数据点之间的所述多个向量的所述数量除以所述多个向量的总数。
17.根据权利要求11所述的方法，其中确定所述参考视频数据点与所述未知视频数据点之间的所述距离包括：使用所述第一向量和所述第二向量的所述估计角度和所述确定长度来执行毕达哥拉斯恒等式计算。
18.根据权利要求11所述的方法，其中识别由所述显示器呈现的所述视频内容包括：确定所述未知视频数据点与候选视频数据点之间的匹配，其中所述匹配是基于所述候选视频数据点作为所述一个或多个候选视频数据点中与所述未知视频数据点最接近的视频数据点的近似匹配。
19.一种识别一个或多个未知数据点的方法，包括：
获得多个参考数据点；
确定从原点到所述多个参考数据点中的参考数据点的第一向量的长度；
获得未知数据点；
确定从所述原点到所述未知数据点的第二向量的长度；
从所述原点投射多个向量；
确定所述参考数据点与所述未知数据点之间的多个向量的数量；
估计所述第一向量与所述第二向量之间的角度，其中使用所述多个向量的所述数量来估计所述角度；
确定所述参考数据点与所述未知数据点之间的距离，其中使用所述第一向量和所述第二向量的所述估计角度和所述确定长度来确定所述距离；以及
从所述多个参考数据点识别一个或多个候选数据点，其中候选数据点是用于匹配所述未知数据点的候选，并且其中基于一个或多个参考数据点与未知数据点之间的确定距离来确定所述一个或多个候选数据点。
20.根据权利要求19所述的方法，确定所述未知数据点与候选数据点之间的匹配，其中所述匹配是基于所述候选数据点作为所述一个或多个候选数据点中与所述未知数据点最接近的数据点的近似匹配。
CN201680033059.8A 2015-04-17 2016-04-15 缩减大数据集中数据密度的系统和方法 Active CN107949849B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562149193P 2015-04-17 2015-04-17
US62/149,193 2015-04-17
PCT/US2016/027691 WO2016168556A1 (en) 2015-04-17 2016-04-15 Systems and methods for reducing data density in large datasets

Publications (2)

Publication Number Publication Date
CN107949849A true CN107949849A (zh) 2018-04-20
CN107949849B CN107949849B (zh) 2021-10-08

Family

ID=55971188

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680033059.8A Active CN107949849B (zh) 2015-04-17 2016-04-15 缩减大数据集中数据密度的系统和方法

Country Status (8)

Country Link
US (1) US10482349B2 (zh)
EP (2) EP3284017B1 (zh)
CN (1) CN107949849B (zh)
AU (1) AU2016250276B2 (zh)
CA (1) CA2982797C (zh)
CL (1) CL2017002612A1 (zh)
MX (1) MX2017013128A (zh)
WO (1) WO2016168556A1 (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10375451B2 (en) 2009-05-29 2019-08-06 Inscape Data, Inc. Detection of common media segments
US9055335B2 (en) 2009-05-29 2015-06-09 Cognitive Networks, Inc. Systems and methods for addressing a media database using distance associative hashing
US10116972B2 (en) 2009-05-29 2018-10-30 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
US9449090B2 (en) 2009-05-29 2016-09-20 Vizio Inscape Technologies, Llc Systems and methods for addressing a media database using distance associative hashing
US10949458B2 (en) 2009-05-29 2021-03-16 Inscape Data, Inc. System and method for improving work load management in ACR television monitoring system
US8595781B2 (en) 2009-05-29 2013-11-26 Cognitive Media Networks, Inc. Methods for identifying video segments and displaying contextual targeted content on a connected television
US10192138B2 (en) 2010-05-27 2019-01-29 Inscape Data, Inc. Systems and methods for reducing data density in large datasets
US9838753B2 (en) 2013-12-23 2017-12-05 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US9955192B2 (en) 2013-12-23 2018-04-24 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
CA2973740C (en) 2015-01-30 2021-06-08 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
CN107949849B (zh) 2015-04-17 2021-10-08 构造数据有限责任公司 缩减大数据集中数据密度的系统和方法
US10080062B2 (en) 2015-07-16 2018-09-18 Inscape Data, Inc. Optimizing media fingerprint retention to improve system resource utilization
CA2992319C (en) 2015-07-16 2023-11-21 Inscape Data, Inc. Detection of common media segments
WO2017011792A1 (en) 2015-07-16 2017-01-19 Vizio Inscape Technologies, Llc Prediction of future views of video segments to optimize system resource utilization
AU2016291674B2 (en) 2015-07-16 2021-08-26 Inscape Data, Inc. Systems and methods for partitioning search indexes for improved efficiency in identifying media segments
JP7118998B2 (ja) 2017-04-06 2022-08-16 インスケイプ データ インコーポレイテッド メディア視聴データを使用してデバイスマップの精度を改善させるためのシステムおよび方法
US11010255B2 (en) * 2019-09-18 2021-05-18 International Business Machines Corporation Data storage strategy determination
CN111814760B (zh) * 2020-08-24 2021-06-01 湖南视觉伟业智能科技有限公司 人脸识别方法及系统
CN113987578B (zh) * 2021-10-28 2022-06-21 南京邮电大学 基于向量映射与滑动窗口扫描的空间点集隐私保护匹配方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7098959B2 (en) * 2002-09-10 2006-08-29 Kabushiki Kaisha Toshiba Frame interpolation and apparatus using frame interpolation
US20090028517A1 (en) * 2007-07-27 2009-01-29 The University Of Queensland Real-time near duplicate video clip detection method
CN101453649A (zh) * 2008-12-30 2009-06-10 浙江大学 压缩域视频流的关键帧提取方法
US7787696B2 (en) * 2000-08-28 2010-08-31 University Of North Carolina At Charlotte Systems and methods for adaptive sampling and estimating a systematic relationship between a plurality of points
WO2011090540A2 (en) * 2009-12-29 2011-07-28 Tv Interactive Systems, Inc. Method for identifying video segments and displaying contextually targeted content on a connected television
CN104268866A (zh) * 2014-09-19 2015-01-07 西安电子科技大学 基于运动信息与背景信息相结合的视频序列配准方法

Family Cites Families (270)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4697209A (en) 1984-04-26 1987-09-29 A. C. Nielsen Company Methods and apparatus for automatically identifying programs viewed or recorded
US4677466A (en) 1985-07-29 1987-06-30 A. C. Nielsen Company Broadcast program identification method and apparatus
US4739398A (en) 1986-05-02 1988-04-19 Control Data Corporation Method, apparatus and system for recognizing broadcast segments
US5019899A (en) 1988-11-01 1991-05-28 Control Data Corporation Electronic data encoding and recognition system
US5319453A (en) 1989-06-22 1994-06-07 Airtrax Method and apparatus for video signal encoding, decoding and monitoring
FR2648979B1 (fr) 1989-06-27 1996-09-06 Thomson Consumer Electronics Procede de segmentation du champ de mouvement d'une image et son application au codage d'images video
US5210820A (en) 1990-05-02 1993-05-11 Broadcast Data Systems Limited Partnership Signal recognition system and method
US5436653A (en) 1992-04-30 1995-07-25 The Arbitron Company Method and system for recognition of broadcast segments
US5721788A (en) 1992-07-31 1998-02-24 Corbis Corporation Method and system for digital image signatures
US6463585B1 (en) 1992-12-09 2002-10-08 Discovery Communications, Inc. Targeted advertisement using television delivery systems
US5557334A (en) 1993-01-12 1996-09-17 Visual Automation Systems, Inc. Apparatus for tracking the flow of video signals by incorporating patterns of machine readable signals which will appear at predetermined locations of a television picture
US5481294A (en) 1993-10-27 1996-01-02 A. C. Nielsen Company Audience measurement system utilizing ancillary codes and passive signatures
US5812286A (en) 1995-08-30 1998-09-22 Hewlett-Packard Company Automatic color processing to correct hue shift and incorrect exposure
US6035177A (en) 1996-02-26 2000-03-07 Donald W. Moses Simultaneous transmission of ancillary and audio signals by means of perceptual coding
US6025837A (en) 1996-03-29 2000-02-15 Micrsoft Corporation Electronic program guide with hyperlinks to target resources
US6473099B1 (en) 1996-06-03 2002-10-29 Webtv Networks, Inc. Automatically upgrading software over a satellite link
US5900905A (en) 1996-06-05 1999-05-04 Microsoft Corporation System and method for linking video, services and applications in an interactive television system
US5918223A (en) 1996-07-22 1999-06-29 Muscle Fish Method and article of manufacture for content-based analysis, storage, retrieval, and segmentation of audio information
US6647548B1 (en) 1996-09-06 2003-11-11 Nielsen Media Research, Inc. Coded/non-coded program audience measurement system
US20020120925A1 (en) 2000-03-28 2002-08-29 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6771316B1 (en) 1996-11-01 2004-08-03 Jerry Iggulden Method and apparatus for selectively altering a televised video signal in real-time
US6983478B1 (en) 2000-02-01 2006-01-03 Bellsouth Intellectual Property Corporation Method and system for tracking network use
US5826165A (en) 1997-01-21 1998-10-20 Hughes Electronics Corporation Advertisement reconciliation system
US6675383B1 (en) 1997-01-22 2004-01-06 Nielsen Media Research, Inc. Source detection apparatus and method for audience measurement
US6173271B1 (en) 1997-11-26 2001-01-09 California Institute Of Technology Television advertising automated billing system
US6804659B1 (en) 2000-01-14 2004-10-12 Ricoh Company Ltd. Content based web advertising
US6008802A (en) 1998-01-05 1999-12-28 Intel Corporation Method and apparatus for automatically performing a function based on the reception of information corresponding to broadcast data
US6064764A (en) 1998-03-30 2000-05-16 Seiko Epson Corporation Fragile watermarks for detecting tampering in images
US6950539B2 (en) 1998-09-16 2005-09-27 Digital Persona Configurable multi-function touchpad device
US7421723B2 (en) 1999-01-07 2008-09-02 Nielsen Media Research, Inc. Detection of media links in broadcast signals
US7051351B2 (en) 1999-03-08 2006-05-23 Microsoft Corporation System and method of inserting advertisements into an information retrieval system display
US6774917B1 (en) 1999-03-11 2004-08-10 Fuji Xerox Co., Ltd. Methods and apparatuses for interactive similarity searching, retrieval, and browsing of video
EP1195047B1 (en) 1999-03-18 2004-06-23 British Broadcasting Corporation Watermarking
US6973663B1 (en) 1999-03-29 2005-12-06 The Directv Group, Inc. Method and apparatus for detecting and viewing similar programs within a video system
US6381362B1 (en) 1999-04-08 2002-04-30 Tata America International Corporation Method and apparatus for including virtual ads in video presentations
US7178106B2 (en) 1999-04-21 2007-02-13 Sonic Solutions, A California Corporation Presentation of media content from multiple media sources
US6415438B1 (en) 1999-10-05 2002-07-02 Webtv Networks, Inc. Trigger having a time attribute
US7356830B1 (en) 1999-07-09 2008-04-08 Koninklijke Philips Electronics N.V. Method and apparatus for linking a video segment to another segment or information source
US6469749B1 (en) 1999-10-13 2002-10-22 Koninklijke Philips Electronics N.V. Automatic signature-based spotting, learning and extracting of commercials and other video content
US6993245B1 (en) 1999-11-18 2006-01-31 Vulcan Patents Llc Iterative, maximally probable, batch-mode commercial detection for audiovisual content
AU2748901A (en) 1999-12-15 2001-06-25 Yellowbrix, Inc. Context matching system and method
AU7233700A (en) 1999-12-23 2001-06-28 Access Devices Limited TV receiving and internet browsing apparatus
GB2375392B (en) 2000-01-07 2004-12-15 Cyberoptics Corp Phase profilometry system with telecentric projector
US6577346B1 (en) 2000-01-24 2003-06-10 Webtv Networks, Inc. Recognizing a pattern in a video segment to identify the video segment
US6675174B1 (en) 2000-02-02 2004-01-06 International Business Machines Corp. System and method for measuring similarity between a set of known temporal media segments and a one or more temporal media streams
US7028327B1 (en) 2000-02-02 2006-04-11 Wink Communication Using the electronic program guide to synchronize interactivity with broadcast programs
US7089240B2 (en) 2000-04-06 2006-08-08 International Business Machines Corporation Longest prefix match lookup using hash function
WO2001078401A2 (en) 2000-04-07 2001-10-18 America Online, Inc. Contextual programming
ES2244510T3 (es) 2000-05-26 2005-12-16 PAUL HETTICH GMBH &amp; CO. Elemento de fijacion rapida.
US6990453B2 (en) 2000-07-31 2006-01-24 Landmark Digital Services Llc System and methods for recognizing sound and music signals in high noise and distortion
US6774908B2 (en) 2000-10-03 2004-08-10 Creative Frontier Inc. System and method for tracking an object in a video and linking information thereto
US20060253330A1 (en) 2000-10-12 2006-11-09 Maggio Frank S Method and system for automatically substituting media content
EP1340377A2 (en) 2000-10-15 2003-09-03 Digital Networks North America, Inc. Method and system for dynamic ad placement
US7237250B2 (en) 2000-11-28 2007-06-26 Navic Systems, Inc. Promotion server using video on demand channel
US7210157B2 (en) 2000-12-18 2007-04-24 Koninklijke Philips Electronics N.V. Apparatus and method of program classification using observed cues in the transcript information
AU2002222406A1 (en) 2001-01-17 2002-07-30 Koninklijke Philips Electronics N.V. Robust checksums
WO2002062009A1 (en) 2001-01-30 2002-08-08 Digimarc Corporation Efficient interactive tv
US7584491B2 (en) 2001-04-25 2009-09-01 Sony Corporation System and method for managing interactive programming and advertisements in interactive broadcast systems
US20020162117A1 (en) 2001-04-26 2002-10-31 Martin Pearson System and method for broadcast-synchronized interactive content interrelated to broadcast content
US20030026422A1 (en) 2001-06-19 2003-02-06 Usa Video Interactive Corporation Method and apparatus for digitally fingerprinting videos
KR20040024870A (ko) 2001-07-20 2004-03-22 그레이스노트 아이엔씨 음성 기록의 자동 확인
US20030053655A1 (en) 2001-08-16 2003-03-20 Barone Samuel T. Digital data monitoring and logging in an ITV system
US7089575B2 (en) 2001-09-04 2006-08-08 Koninklijke Philips Electronics N.V. Method of using transcript information to identify and learn commercial portions of a program
US6968091B2 (en) 2001-09-18 2005-11-22 Emc Corporation Insertion of noise for reduction in the number of bits for variable-length coding of (run, level) pairs
US20030056010A1 (en) 2001-09-20 2003-03-20 Koninklijke Philips Electronics N.V. Downstream metadata altering
US20030105794A1 (en) 2001-11-09 2003-06-05 Jasinschi Radu S. Systems for sensing similarity in monitored broadcast content streams and methods of operating the same
US7064796B2 (en) 2001-12-21 2006-06-20 Eloda Inc. Method and system for re-identifying broadcast segments using statistical profiles
US6978470B2 (en) 2001-12-26 2005-12-20 Bellsouth Intellectual Property Corporation System and method for inserting advertising content in broadcast programming
US7136875B2 (en) 2002-09-24 2006-11-14 Google, Inc. Serving advertisements based on content
US7716161B2 (en) 2002-09-24 2010-05-11 Google, Inc, Methods and apparatus for serving relevant advertisements
CA2483104C (en) 2002-04-25 2011-06-21 Shazam Entertainment, Ltd. Robust and invariant audio pattern matching
AU2003280513A1 (en) 2002-07-01 2004-01-19 Microsoft Corporation A system and method for providing user control over repeating objects embedded in a stream
US20040045020A1 (en) 2002-08-29 2004-03-04 Witt Jeffrey Michael Commercial identification system
US7171402B1 (en) 2002-10-02 2007-01-30 Sony Computer Entertainment America Inc. Dynamic interactive content system
CA2504680C (en) * 2002-10-30 2014-04-01 Vidius Inc. A method and system for managing confidential information
US7738704B2 (en) 2003-03-07 2010-06-15 Technology, Patents And Licensing, Inc. Detecting known video entities utilizing fingerprints
US7809154B2 (en) 2003-03-07 2010-10-05 Technology, Patents & Licensing, Inc. Video entity recognition in compressed digital video streams
EP1463301A1 (en) 2003-03-19 2004-09-29 Thomson Licensing S.A. Method for identification of tokens in video sequences
US7032096B2 (en) 2003-04-22 2006-04-18 Hewlett-Packard Development Company, L.P. Memory management system and method using a hash table
US20040226035A1 (en) 2003-05-05 2004-11-11 Hauser David L. Method and apparatus for detecting media content
US20040240562A1 (en) 2003-05-28 2004-12-02 Microsoft Corporation Process and system for identifying a position in video using content-based video timelines
US8918316B2 (en) 2003-07-29 2014-12-23 Alcatel Lucent Content identification system
JP2005084770A (ja) 2003-09-05 2005-03-31 Sony Corp コンテンツ提供システムおよび方法、提供装置および方法、再生装置および方法、並びにプログラム
EP1668903A4 (en) 2003-09-12 2011-01-05 Nielsen Media Res Inc DEVICES AND METHOD FOR DIGITAL VIDEO SIGNATURES FOR USE WITH VIDEO PROGRAM IDENTIFICATION SYSTEMS
US7050068B1 (en) 2003-12-02 2006-05-23 Nvidia Corporation Generation of jittered sub-pixel samples using programmable sub-pixel offsets
CA2554306C (en) 2004-02-04 2014-04-08 Goldpocket Interactive, Inc. Synchronization and automation in an itv environment
AU2005214965B2 (en) 2004-02-17 2011-05-19 The Nielsen Company (Us), Llc Methods and apparatus to determine audience viewing of recorded programs
EP1730105B1 (en) 2004-02-26 2012-01-25 Mediaguide, inc. Method and apparatus for automatic detection and identification of broadcast audio or video programming signal
US8229751B2 (en) 2004-02-26 2012-07-24 Mediaguide, Inc. Method and apparatus for automatic detection and identification of unidentified Broadcast audio or video signals
US20050207416A1 (en) 2004-03-16 2005-09-22 Samsung Electronics Co. , Ltd. Apparatus and method for deploying efficient broadcast multicast services in a wireless network
US7131936B2 (en) 2004-03-17 2006-11-07 Schlosser Frank J Apparatus for training a body part of a person and method for using same
US8407752B2 (en) 2004-03-18 2013-03-26 Digimarc Corporation Synchronizing broadcast content with corresponding network content
US20050210501A1 (en) 2004-03-19 2005-09-22 Microsoft Corporation Method and apparatus for handling metadata
WO2005101998A2 (en) 2004-04-19 2005-11-03 Landmark Digital Services Llc Content sampling and identification
US7769756B2 (en) 2004-06-07 2010-08-03 Sling Media, Inc. Selection and presentation of context-relevant supplemental content and advertising
WO2005125198A2 (en) 2004-06-09 2005-12-29 Nielsen Media Research, Inc. Methods and apparatus to identify viewing information
KR100620452B1 (ko) 2004-08-09 2006-09-08 삼성전자주식회사 이미지 프로세싱 방법
EP2437508A3 (en) 2004-08-09 2012-08-15 Nielsen Media Research, Inc. Methods and apparatus to monitor audio/visual content from various sources
WO2006023770A2 (en) 2004-08-18 2006-03-02 Nielsen Media Research, Inc. Methods and apparatus for generating signatures
US7623823B2 (en) 2004-08-31 2009-11-24 Integrated Media Measurement, Inc. Detecting and measuring exposure to media content items
MX2007006164A (es) 2004-11-22 2007-09-19 Nielsen Media Res Inc Metodos y aparatos para identificaci??n de fuentes de medios y mediciones de consumo de medios con desplazamiento de tiempo.
US7545984B1 (en) 2004-12-16 2009-06-09 Nvidia Corporation Quantifying graphics image difference
EP1839122A2 (en) 2005-01-07 2007-10-03 Koninklijke Philips Electronics N.V. Method and electronic device for detecting a graphical object
WO2006086556A2 (en) 2005-02-08 2006-08-17 Landmark Digital Services Llc Automatic identfication of repeated material in audio signals
US20060195860A1 (en) 2005-02-25 2006-08-31 Eldering Charles A Acting on known video entities detected utilizing fingerprinting
US7804993B2 (en) 2005-02-28 2010-09-28 Applied Materials South East Asia Pte. Ltd. Method and apparatus for detecting defects in wafers including alignment of the wafer images so as to induce the same smear in all images
KR100694107B1 (ko) 2005-04-28 2007-03-12 삼성전자주식회사 휴대 기기의 컨텐츠 리스트를 제공하는 장치 및 방법
KR100707189B1 (ko) 2005-04-29 2007-04-13 삼성전자주식회사 동영상의 광고 검출 장치 및 방법과 그 장치를 제어하는컴퓨터 프로그램을 저장하는 컴퓨터로 읽을 수 있는 기록매체
US20070242880A1 (en) * 2005-05-18 2007-10-18 Stebbings David W System and method for the identification of motional media of widely varying picture content
US8893199B2 (en) 2005-06-22 2014-11-18 At&T Intellectual Property I, L.P. System and method of managing video content delivery
EP1750439A1 (en) 2005-08-03 2007-02-07 Thomson Licensing EPG content analyser
US7516074B2 (en) 2005-09-01 2009-04-07 Auditude, Inc. Extraction and matching of characteristic fingerprints from audio signals
US20070061831A1 (en) 2005-09-09 2007-03-15 Sbc Knowledge Ventures L.P. IPTV channel usage and video delivery path monitoring architecture
CA2622900C (en) 2005-09-15 2014-04-29 Biap, Inc. Self-contained mini-applications system and method for digital television
US20070083901A1 (en) 2005-10-12 2007-04-12 Bond Madison E System and method for customized program scheduling
JP4839771B2 (ja) 2005-10-20 2011-12-21 ソニー株式会社 ディジタル放送受信装置、ディジタル放送受信方法及びプログラム
US7933451B2 (en) 2005-11-23 2011-04-26 Leica Geosystems Ag Feature extraction using pixel-level and object-level analysis
US8756633B2 (en) 2005-12-19 2014-06-17 At&T Intellectual Property I, L.P Methods, systems, and computer program products for selectively facilitating internet content and/or alerts on a television crawl screen, closed caption and/or picture-in-picture area
US7639309B2 (en) 2005-12-20 2009-12-29 Broadcom Corporation Method and system for analog video noise reduction by blending FIR and IIR filtering
EP1967005B1 (en) 2005-12-23 2010-02-03 AMBX UK Limited Script synchronization using fingerprints determined from a content stream
JP4321518B2 (ja) 2005-12-27 2009-08-26 三菱電機株式会社 楽曲区間検出方法、及びその装置、並びにデータ記録方法、及びその装置
WO2007115224A2 (en) 2006-03-30 2007-10-11 Sri International Method and apparatus for annotating media streams
WO2007114796A1 (en) 2006-04-05 2007-10-11 Agency For Science, Technology And Research Apparatus and method for analysing a video broadcast
US7761491B2 (en) 2006-04-18 2010-07-20 Ecodisc Technology Ag Method for detecting a commercial in a video data stream by evaluating descriptor information
US7840540B2 (en) 2006-04-20 2010-11-23 Datascout, Inc. Surrogate hashing
US20070300280A1 (en) 2006-06-21 2007-12-27 Turner Media Group Interactive method of advertising
US7590998B2 (en) 2006-07-27 2009-09-15 Sharp Laboratories Of America, Inc. Television system having internet web browsing capability
US20080089551A1 (en) 2006-10-16 2008-04-17 Ashley Heather Interactive TV data track synchronization system and method
GB0623961D0 (en) 2006-11-30 2007-01-10 Univ St Andrews Video fingerprinting
US20080155627A1 (en) 2006-12-04 2008-06-26 O'connor Daniel Systems and methods of searching for and presenting video and audio
US8493510B2 (en) 2006-12-12 2013-07-23 Time Warner Inc. Method and apparatus for concealing portions of a video screen
US8196166B2 (en) 2006-12-21 2012-06-05 Verizon Patent And Licensing Inc. Content hosting and advertising systems and methods
US8494234B1 (en) 2007-03-07 2013-07-23 MotionDSP, Inc. Video hashing system and method
JP4525692B2 (ja) 2007-03-27 2010-08-18 株式会社日立製作所 画像処理装置、画像処理方法、画像表示装置
US8566164B2 (en) 2007-12-31 2013-10-22 Intent IQ, LLC Targeted online advertisements based on viewing or interacting with television advertisements
US20080276266A1 (en) 2007-04-18 2008-11-06 Google Inc. Characterizing content for identification of advertising
US9179086B2 (en) 2007-05-07 2015-11-03 Yahoo! Inc. System and method for providing dynamically updating applications in a television display environment
US8094872B1 (en) 2007-05-09 2012-01-10 Google Inc. Three-dimensional wavelet based video fingerprinting
EP2165541B1 (en) 2007-05-11 2013-03-27 Audinate Pty Ltd Systems, methods and computer-readable media for configuring receiver latency
US8488061B2 (en) 2007-05-17 2013-07-16 Dolby Laboratories Licensing Corporation Deriving video signatures that are insensitive to picture modification and frame-rate conversion
US8171030B2 (en) 2007-06-18 2012-05-01 Zeitera, Llc Method and apparatus for multi-dimensional content search and video identification
US8229227B2 (en) 2007-06-18 2012-07-24 Zeitera, Llc Methods and apparatus for providing a scalable identification of digital video sequences
US9438860B2 (en) 2007-06-26 2016-09-06 Verizon Patent And Licensing Inc. Method and system for filtering advertisements in a media stream
US8417037B2 (en) 2007-07-16 2013-04-09 Alexander Bronstein Methods and systems for representation and matching of video content
US8069414B2 (en) 2007-07-18 2011-11-29 Google Inc. Embedded video player
US8001571B1 (en) 2007-08-21 2011-08-16 Google Inc. Identifying programming information of a telecommunications provider
US8238669B2 (en) 2007-08-22 2012-08-07 Google Inc. Detection and classification of matches between time-based media
US8175333B2 (en) 2007-09-27 2012-05-08 Behavioral Recognition Systems, Inc. Estimator identifier component for behavioral recognition system
JP5341095B2 (ja) 2007-10-05 2013-11-13 ドルビー ラボラトリーズ ライセンシング コーポレイション メディア・コンテンツに信頼性よく対応するメディア・フィンガープリント
CA3105353A1 (en) 2007-10-10 2009-04-16 Optiscan Biomedical Corporation Fluid component analysis system and method for glucose monitoring and control
US8619877B2 (en) 2007-10-11 2013-12-31 Microsoft Corporation Optimized key frame caching for remote interface rendering
JP4424410B2 (ja) 2007-11-07 2010-03-03 ソニー株式会社 情報処理システム、情報処理方法
CN101162470B (zh) 2007-11-16 2011-04-20 北京交通大学 一种基于分层匹配的视频广告识别方法
US8776117B2 (en) 2007-12-28 2014-07-08 Verizon Patent And Licensing Inc. Method and apparatus for providing expanded displayable applications
GB2457694B (en) 2008-02-21 2012-09-26 Snell Ltd Method of Deriving an Audio-Visual Signature
US20090213270A1 (en) 2008-02-22 2009-08-27 Ryan Ismert Video indexing and fingerprinting for video enhancement
US20090235312A1 (en) 2008-03-11 2009-09-17 Amir Morad Targeted content with broadcast material
US8959202B2 (en) 2008-03-18 2015-02-17 Civolution B.V. Generating statistics of popular content
US8705873B2 (en) 2008-03-20 2014-04-22 Universite De Geneve Secure item identification and authentication system and method based on unclonable features
JP2011519454A (ja) 2008-04-13 2011-07-07 アイファロ メディア ゲーエムベーハー メディア資産管理
US8051444B2 (en) 2008-06-02 2011-11-01 Intent IQ, LLC Targeted television advertisements selected on the basis of an online user profile and presented with television programs or channels related to that profile
GB2460844B (en) 2008-06-10 2012-06-06 Half Minute Media Ltd Automatic detection of repeating video sequences
US8195689B2 (en) 2009-06-10 2012-06-05 Zeitera, Llc Media fingerprinting and identification system
US8189945B2 (en) 2009-05-27 2012-05-29 Zeitera, Llc Digital video content fingerprinting based on scale invariant interest region detection with an array of anisotropic filters
US8959108B2 (en) 2008-06-18 2015-02-17 Zeitera, Llc Distributed and tiered architecture for content search and content monitoring
US8335786B2 (en) 2009-05-28 2012-12-18 Zeitera, Llc Multi-media content identification using multi-level content signature correlation and fast similarity search
US8385644B2 (en) 2008-07-08 2013-02-26 Zeitera, Llc Digital video fingerprinting based on resultant weighted gradient orientation computation
US8634944B2 (en) 2008-07-10 2014-01-21 Apple Inc. Auto-station tuning
US8180712B2 (en) 2008-09-30 2012-05-15 The Nielsen Company (Us), Llc Methods and apparatus for determining whether a media presentation device is in an on state or an off state
GB2465141B (en) 2008-10-31 2014-01-22 Media Instr Sa Simulcast resolution in content matching systems
CN101742269A (zh) 2008-11-17 2010-06-16 华为技术有限公司 一种频道切换方法、装置和系统
JP5156594B2 (ja) 2008-11-19 2013-03-06 キヤノン株式会社 再生装置及びその制御方法
US10334324B2 (en) 2008-11-26 2019-06-25 Free Stream Media Corp. Relevant advertisement generation based on a user operating a client device communicatively coupled with a networked media device
US20100166257A1 (en) 2008-12-30 2010-07-01 Ati Technologies Ulc Method and apparatus for detecting semi-transparencies in video
CN102292726B (zh) 2009-01-23 2014-10-22 日本电气株式会社 视频标识符提取设备
US20100191689A1 (en) 2009-01-27 2010-07-29 Google Inc. Video content analysis for automatic demographics recognition of users and videos
US8200602B2 (en) 2009-02-02 2012-06-12 Napo Enterprises, Llc System and method for creating thematic listening experiences in a networked peer media recommendation environment
US8175413B1 (en) 2009-03-05 2012-05-08 Google Inc. Video identification through detection of proprietary rights logos in media
EP2415259B1 (en) 2009-04-01 2015-09-16 Marvell World Trade Ltd. Cadence detection in progressive video
WO2010135082A1 (en) 2009-05-19 2010-11-25 Dolby Laboratories Licensing Corporation Localized weak bit assignment
US8595781B2 (en) 2009-05-29 2013-11-26 Cognitive Media Networks, Inc. Methods for identifying video segments and displaying contextual targeted content on a connected television
US8930980B2 (en) 2010-05-27 2015-01-06 Cognitive Networks, Inc. Systems and methods for real-time television ad detection using an automated content recognition database
US10949458B2 (en) 2009-05-29 2021-03-16 Inscape Data, Inc. System and method for improving work load management in ACR television monitoring system
US9449090B2 (en) 2009-05-29 2016-09-20 Vizio Inscape Technologies, Llc Systems and methods for addressing a media database using distance associative hashing
US9055335B2 (en) 2009-05-29 2015-06-09 Cognitive Networks, Inc. Systems and methods for addressing a media database using distance associative hashing
US10375451B2 (en) 2009-05-29 2019-08-06 Inscape Data, Inc. Detection of common media segments
US10116972B2 (en) 2009-05-29 2018-10-30 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
WO2011008771A1 (en) 2009-07-14 2011-01-20 Vibrant Media, Inc. Systems and methods for providing keyword related search results in augmented content for text on a web page
US8392789B2 (en) 2009-07-28 2013-03-05 Texas Instruments Incorporated Method and system for decoding low density parity check codes
US20110041154A1 (en) 2009-08-14 2011-02-17 All Media Guide, Llc Content Recognition and Synchronization on a Television or Consumer Electronics Device
US20110055552A1 (en) 2009-09-02 2011-03-03 Max Planck Gesellschaft Zur Foerderung Der Wissenschaften Private, accountable, and personalized information delivery in a networked system
KR101420549B1 (ko) 2009-12-02 2014-07-16 퀄컴 인코포레이티드 쿼리 및 모델 이미지들에서 검출된 키포인트들을 클러스터링함에 따른 특징 매칭 방법, 디바이스 그리고 프로세서 판독가능 매체
US9264785B2 (en) 2010-04-01 2016-02-16 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
US20110251987A1 (en) 2010-04-13 2011-10-13 Buchheit Brian K Time-shifting a content streaming request
CN103069823A (zh) 2010-04-14 2013-04-24 斯文·里思米勒 与媒体广播的平台无关的交互性
US8522283B2 (en) 2010-05-20 2013-08-27 Google Inc. Television remote control data transfer
US20110289099A1 (en) 2010-05-20 2011-11-24 Rovi Technologies Corporation Method and apparatus for identifying video program material via dvs or sap data
US10192138B2 (en) * 2010-05-27 2019-01-29 Inscape Data, Inc. Systems and methods for reducing data density in large datasets
US9838753B2 (en) 2013-12-23 2017-12-05 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US8625902B2 (en) 2010-07-30 2014-01-07 Qualcomm Incorporated Object recognition using incremental feature extraction
CN102377960B (zh) 2010-08-24 2014-11-05 腾讯科技（深圳）有限公司 视频画面显示方法及装置
US8533141B2 (en) 2010-08-31 2013-09-10 Vibrant Media, Inc. Systems and methods for rule based inclusion of pixel retargeting in campaign management
US9118842B2 (en) 2010-09-16 2015-08-25 Intellectual Ventures Fund 83 Llc Producing focused videos from single captured video
JP5092000B2 (ja) 2010-09-24 2012-12-05 株式会社東芝 映像処理装置、方法、及び映像処理システム
WO2012057724A1 (en) 2010-10-26 2012-05-03 Thomson Licensing Systems for identifying audio information from a television data stream and related methods
US8863165B2 (en) 2010-11-01 2014-10-14 Gracenote, Inc. Method and system for presenting additional content at a media system
US20120294586A1 (en) 2010-11-18 2012-11-22 David John Weaver Controlling time-sensitive content in a time-shifted environment
US20120158511A1 (en) 2010-12-21 2012-06-21 Microsoft Corporation Provision of contextual advertising
US8793730B2 (en) 2010-12-30 2014-07-29 Yahoo! Inc. Entertainment companion content application for interacting with television content
US8396302B2 (en) 2011-01-11 2013-03-12 Intel Corporation Method of detecting logos, titles, or sub-titles in video frames
US9093120B2 (en) 2011-02-10 2015-07-28 Yahoo! Inc. Audio fingerprint extraction by scaling in time and resampling
EP2507790B1 (en) 2011-06-06 2014-01-22 Bridge Mediatech, S.L. Method and system for robust audio hashing.
BR112013031576A2 (pt) 2011-06-08 2017-03-21 Shazam Entertainment Ltd métodos e sistemas para realizar comparações de dados recebidos e prover um serviço de acompanhamento baseado nestas comparações.
WO2012170353A1 (en) 2011-06-10 2012-12-13 Shazam Entertainment Ltd. Methods and systems for identifying content in a data stream
US9077458B2 (en) 2011-06-17 2015-07-07 Microsoft Technology Licensing, Llc Selection of advertisements via viewer feedback
US9049073B2 (en) 2011-06-28 2015-06-02 Rovi Guides, Inc. Systems and methods for initializing allocations of transport streams based on historical data
WO2013046220A2 (en) 2011-06-28 2013-04-04 Tata Consultancy Services Limited A method and system for context-aware recommendation
CA2843382C (en) 2011-08-05 2020-10-27 Sony Corporation Receiving device, receiving method, program, and information processing system
US20150040074A1 (en) 2011-08-18 2015-02-05 Layar B.V. Methods and systems for enabling creation of augmented reality content
US20130054356A1 (en) 2011-08-31 2013-02-28 Jason Richman Systems and methods for contextualizing services for images
US8443408B2 (en) 2011-09-12 2013-05-14 Rogers Communications Inc. Method and system for managing bandwidth
US9866915B2 (en) 2011-11-28 2018-01-09 Excalibur Ip, Llc Context relevant interactive television
US8918804B2 (en) 2012-02-07 2014-12-23 Turner Broadcasting System, Inc. Method and system for a reward program based on automatic content recognition
TWI502977B (zh) 2012-02-13 2015-10-01 Acer Inc 影音播放裝置、影音處理裝置、系統以及方法
US20130263166A1 (en) 2012-03-27 2013-10-03 Bluefin Labs, Inc. Social Networking System Targeted Message Synchronization
US8769854B1 (en) 2012-04-10 2014-07-08 Vincent P. Battaglia Solid chassis rifle
US9703932B2 (en) 2012-04-30 2017-07-11 Excalibur Ip, Llc Continuous content identification of broadcast content
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
KR101315970B1 (ko) 2012-05-23 2013-10-08 (주)엔써즈 오디오 신호를 이용한 콘텐츠 인식 장치 및 방법
US9473780B2 (en) 2012-07-13 2016-10-18 Apple Inc. Video transmission using content-based frame search
US8823507B1 (en) 2012-09-19 2014-09-02 Amazon Technologies, Inc. Variable notification alerts
US9286912B2 (en) 2012-09-26 2016-03-15 The Nielsen Company (Us), Llc Methods and apparatus for identifying media
US8799957B2 (en) 2012-11-08 2014-08-05 Motorola Mobility Llc Electronic program guide with display of alternative-source multimedia program options and estimated availability parameters
US9495451B2 (en) 2013-01-07 2016-11-15 Gracenote, Inc. Identifying video content via fingerprint matching
US9146990B2 (en) 2013-01-07 2015-09-29 Gracenote, Inc. Search and identification of video content
CN103973441B (zh) 2013-01-29 2016-03-09 腾讯科技（深圳）有限公司 基于音视频的用户认证方法和装置
JP6017335B2 (ja) 2013-02-06 2016-10-26 株式会社東芝 パターン認識装置、その方法、及び、そのプログラム
US20140258375A1 (en) 2013-03-11 2014-09-11 Lsi Corporation System and method for large object cache management in a network
US20140270489A1 (en) 2013-03-12 2014-09-18 Microsoft Corporation Learned mid-level representation for contour and object detection
WO2014142758A1 (en) 2013-03-14 2014-09-18 Rocks International Group Pte Ltd An interactive system for video customization and delivery
CA2906199C (en) * 2013-03-15 2021-08-24 Cognitive Media Networks, Inc. Systems and methods for addressing a media database using distance associative hashing
WO2014144408A2 (en) 2013-03-15 2014-09-18 Nito, Inc. Systems, methods, and software for detecting an object in an image
US9165203B2 (en) 2013-03-15 2015-10-20 Arris Technology, Inc. Legibility enhancement for a logo, text or other region of interest in video
US9058522B2 (en) 2013-03-15 2015-06-16 Arris Technology, Inc. Logo presence detection based on blending characteristics
US9693117B2 (en) 2013-03-15 2017-06-27 The Nielsen Company (Us), Llc Systems, methods, and apparatus to identify linear and non-linear media presentations
CN103326953B (zh) 2013-03-28 2016-06-29 华为技术有限公司 一种基于令牌桶的流量限制方法和装置
US9143840B2 (en) 2013-05-20 2015-09-22 Veenome, Inc. Systems and methods for evaluating online videos
US9986307B2 (en) 2013-07-19 2018-05-29 Bottle Rocket LLC Interactive video viewing
GB201316196D0 (en) 2013-09-11 2013-10-23 Piksel Inc Triggering an action in a computer device
US20150100979A1 (en) 2013-10-07 2015-04-09 Smrtv, Inc. System and method for creating contextual messages for videos
US9325646B2 (en) 2013-10-28 2016-04-26 Verizon Patent And Licensing Inc. Providing contextual messages relating to currently accessed content
US9363551B2 (en) 2013-10-31 2016-06-07 Tencent Technology (Shenzhen) Company Limited TV program identification method, apparatus, terminal, server and system
US20150163545A1 (en) 2013-12-11 2015-06-11 Echostar Technologies L.L.C. Identification of video content segments based on signature analysis of the video content
US9955192B2 (en) 2013-12-23 2018-04-24 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
MX2016008483A (es) 2013-12-23 2017-01-11 Vizio Inscape Tech Llc Seguimiento de pixels y cookies para visualizacion de television por evento.
KR102229156B1 (ko) 2014-03-05 2021-03-18 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
US20150302890A1 (en) 2014-04-17 2015-10-22 Echostar Technologies L.L.C. Pausing and resuming media play
AU2015355209B2 (en) 2014-12-01 2019-08-29 Inscape Data, Inc. System and method for continuous media segment identification
US10275133B2 (en) 2015-01-16 2019-04-30 Taro Kaneko Moving image playback method, moving image playback device, and computer readable storage medium storing a moving image playback program
CA2973740C (en) 2015-01-30 2021-06-08 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
ES2905535T3 (es) 2015-03-27 2022-04-11 Twitter Inc Servicios de emisión de vídeo en vivo
CN107949849B (zh) 2015-04-17 2021-10-08 构造数据有限责任公司 缩减大数据集中数据密度的系统和方法
US20160314794A1 (en) 2015-04-27 2016-10-27 Soundhound, Inc. System and method for continuing an interrupted broadcast stream
US10431208B2 (en) 2015-06-01 2019-10-01 Sinclair Broadcast Group, Inc. Content presentation analytics and optimization
US10484329B2 (en) 2015-06-03 2019-11-19 Oath Inc. Computerized notification system and method for delivering breaking news content
AU2016291674B2 (en) 2015-07-16 2021-08-26 Inscape Data, Inc. Systems and methods for partitioning search indexes for improved efficiency in identifying media segments
WO2017011792A1 (en) 2015-07-16 2017-01-19 Vizio Inscape Technologies, Llc Prediction of future views of video segments to optimize system resource utilization
US10080062B2 (en) 2015-07-16 2018-09-18 Inscape Data, Inc. Optimizing media fingerprint retention to improve system resource utilization
US20170186042A1 (en) 2015-12-28 2017-06-29 Facebook, Inc. Systems and methods for promoting content items
US10225623B2 (en) 2016-06-07 2019-03-05 Comcast Cable Communications, Llc Non-temporal advertising

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7787696B2 (en) * 2000-08-28 2010-08-31 University Of North Carolina At Charlotte Systems and methods for adaptive sampling and estimating a systematic relationship between a plurality of points
US7098959B2 (en) * 2002-09-10 2006-08-29 Kabushiki Kaisha Toshiba Frame interpolation and apparatus using frame interpolation
US20090028517A1 (en) * 2007-07-27 2009-01-29 The University Of Queensland Real-time near duplicate video clip detection method
CN101453649A (zh) * 2008-12-30 2009-06-10 浙江大学 压缩域视频流的关键帧提取方法
WO2011090540A2 (en) * 2009-12-29 2011-07-28 Tv Interactive Systems, Inc. Method for identifying video segments and displaying contextually targeted content on a connected television
CN104268866A (zh) * 2014-09-19 2015-01-07 西安电子科技大学 基于运动信息与背景信息相结合的视频序列配准方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ARISTIDES GIONIS ET AL: "《VLDB"99：proceedings of the 25th international conference on very large data bases》", 30 September 1999 *
ZI HUANG ET AL: "Bounded Coordinate System Indexing for Real-time", 《ACM TRANSACTIONS ON INFORMATION SYSTEMS》 *
赵凡迪: "《基于空间邻域约束编码的视频目标跟踪研究》", 1 November 2014 *

Also Published As

Publication number Publication date
AU2016250276B2 (en) 2020-10-08
US10482349B2 (en) 2019-11-19
MX2017013128A (es) 2018-01-26
WO2016168556A1 (en) 2016-10-20
EP3284017B1 (en) 2024-03-27
NZ735930A (en) 2021-09-24
EP4375952A3 (en) 2024-06-19
CA2982797C (en) 2023-03-14
US20190188520A1 (en) 2019-06-20
CL2017002612A1 (es) 2018-04-02
CA2982797A1 (en) 2016-10-20
EP3284017C0 (en) 2024-03-27
BR112017022341A2 (pt) 2018-07-10
EP4375952A2 (en) 2024-05-29
CN107949849B (zh) 2021-10-08
EP3284017A1 (en) 2018-02-21
AU2016250276A1 (en) 2017-10-19

Similar Documents

Publication Publication Date Title
CN107949849A (zh) 缩减大数据集中数据密度的系统和方法
JP6891170B2 (ja) ステムリソース利用を最適化するための映像セグメントの将来の視聴予測
US10192138B2 (en) Systems and methods for reducing data density in large datasets
KR102660052B1 (ko) 시스템 리소스 활용을 향상시키기 위한 미디어 핑거프린트 보유의 최적화
US20190272646A1 (en) Feature trackability ranking, systems and methods
CN108351879A (zh) 用于提高识别媒体段的效率的划分搜索索引的系统和方法
CN116188821B (zh) 版权检测方法、系统、电子设备和存储介质
CN105144141A (zh) 用于使用距离关联性散列法对媒体数据库定址的系统和方法
EP3001871B1 (en) Systems and methods for addressing a media database using distance associative hashing
KR102601485B1 (ko) Acr 텔레비전 모니터링 시스템에서의 작업 부하 관리를 개선하기 위한 시스템 및 방법
NZ735930B2 (en) Systems and methods for reducing data density in large datasets
BR112017022341B1 (pt) Método de identificação de um ou mais pontos de dados desconhecidos e sistema

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1249246

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant