CN1628303A - 基于杂乱数据的多媒体对象元数据的快速检索 - Google Patents
基于杂乱数据的多媒体对象元数据的快速检索 Download PDFInfo
- Publication number
- CN1628303A CN1628303A CNA03803302XA CN03803302A CN1628303A CN 1628303 A CN1628303 A CN 1628303A CN A03803302X A CNA03803302X A CN A03803302XA CN 03803302 A CN03803302 A CN 03803302A CN 1628303 A CN1628303 A CN 1628303A
- Authority
- CN
- China
- Prior art keywords
- fingerprint
- multimedia object
- transmission
- metadata
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005540 biological transmission Effects 0.000 claims abstract description 85
- 238000000034 method Methods 0.000 claims abstract description 31
- 238000004590 computer program Methods 0.000 claims abstract description 3
- 230000008878 coupling Effects 0.000 claims description 30
- 238000010168 coupling process Methods 0.000 claims description 30
- 238000005859 coupling reaction Methods 0.000 claims description 30
- 230000000295 complement effect Effects 0.000 claims description 16
- 238000012544 monitoring process Methods 0.000 claims description 9
- 238000012806 monitoring device Methods 0.000 claims description 2
- 239000012634 fragment Substances 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 230000013011 mating Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 102100039121 Histone-lysine N-methyltransferase MECOM Human genes 0.000 description 1
- 101001033728 Homo sapiens Histone-lysine N-methyltransferase MECOM Proteins 0.000 description 1
- 101001056394 Homo sapiens Myelodysplastic syndrome 2 translocation-associated protein Proteins 0.000 description 1
- 101100131055 Homo sapiens RANGRF gene Proteins 0.000 description 1
- 101150095599 MDS3 gene Proteins 0.000 description 1
- 102100026313 Myelodysplastic syndrome 2 translocation-associated protein Human genes 0.000 description 1
- 102100027976 Ran guanine nucleotide release factor Human genes 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000002790 cross-validation Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000002203 pretreatment Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000013138 pruning Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/40—Data acquisition and logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/63—Querying
- G06F16/632—Query formulation
- G06F16/634—Query by example, e.g. query by humming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- Mathematical Physics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Computer Hardware Design (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
- Information Transfer Between Computers (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
当客户请求一个多媒体对象的元数据时，服务器(120)计算该多媒体对象的指纹，并将其与在基本数据库(121)中存储的项匹配。另外，服务器(120)监视一个或者多个传输通道，诸如无线电广播频道，并计算在这些通道上传输的传输指纹。把这些传输指纹与在基本数据库(121)中存储的指纹匹配，如果找到一个匹配，则把该识别的传输项添加到辅助数据库(122)中。优选地该项包括传输指纹。随后首先对辅助数据库(122)执行匹配，并仅在不成功时再对基本数据库(121)进行匹配。还包括这种方法和为执行该方法的计算机程序产品。
Description
技术领域
本发明涉及一种为多媒体对象获取元数据的方法，它通过把该多媒体对象的对象指纹与在基本数据库中存储的项相匹配而实现所述获取。
本发明另外涉及一个系统，它被安排用于为多媒体对象获取元数据，该系统包括匹配装置，用于把多媒体对象的对象指纹与在基本数据库中存储的项相匹配。
背景技术
使用人的指纹来识别一个人已经有一百多年了。从概念上说，可以把指纹视为是一个简短的概括，它对于每一个人来说是唯一的。近来，在多媒体处理的领域中出现一种日渐增加的兴趣，即计算诸如歌曲、音乐、图片、或电影的多媒体对象的指纹。为证明两个多媒体对象相同，不是比较多媒体对象自身，而只比较它们的指纹。多媒体对象的指纹是所涉及的对象的最相关的感性特征的表示。这种指纹有时也称为“(强壮的)杂乱数据(hashes)”。
在使用指纹技术的大多数系统中，大量多媒体对象的指纹连同它们相关的各自的元数据都存储在数据库中。术语“元数据”指的是诸如标题、艺术家、类型等的多媒体对象的信息。多媒体对象的无数据是通过计算它的指纹和使用计算的指纹作为查阅关键字或查询参数在数据库中执行查阅或查询来检索的。然后该查阅返回与该指纹关联的元数据。
在数据库中存储多媒体对象指纹来代替存储多媒体内容自身具有若干优点。现在列举几个：
1.减少对数据库的内存储器(memory)/外存储器(storage)的要求。
2.比较指纹要比比较多媒体对象自身更有效，因为指纹比对象小很多。
3.在数据库中检索来匹配指纹比检索查找完整的多媒体对象更高效，因为它涉及匹配较短的项。
4.检索匹配指纹更容易成功，因为多媒体对象的少量改变(诸如以不同格式编码或者改变位速率)不影响指纹。
产生多媒体对象的指纹的一种方法的例子在国际专利申请WO02/065782(代理人卷宗号PHNL010110)中以及在Jaap Haitsma，TonKaller和Job Oostveen在2001年9月在Brescia举行的Internationa1 Workshop on Content-Based Multimedia Indexing(关于基于内容的多媒体索引的研讨班)上发表的“Robust AudioHashing For Content Identification”(内容识别用的强壮的音频散列)中公开。
可以使用这一方法来提供音乐识别服务。假设一个人听到一首歌，而且他希望知道这首歌的诸如标题和艺术家的元数据。他拿出他的移动电话，建立起与服务器的连接。使用这一连接，该用户然后使用他的电话的话筒对这首歌拾音，以便在另一端的服务器可以听见它。服务器然后计算为这首歌的指纹，并执行数据库查阅来获取与该指纹关联的元数据。然后服务器例如通过SMS(短信息)给用户的移动电话发送一个带元数据的消息。
该元数据可以对该用户的电子邮件地址进行电子邮寄，或者通过消息速报服务以消息的形式发送给该用户。以这种方式，可以比移动电话有限潜在的功能所能作的处理提供更广泛的信息。然后移动电话可以例如收到表明标题和艺术家的SMS消息，以及有关更多信息已发送到该用户的电子邮件地址的一项声明。
为能够识别大量多媒体对象，带有指纹和元数据的数据库必须非常大，其数量级在几十万项。这使得管理数据库非常复杂。经常是在这种大规模的系统中，指纹数据库必须被分散在相当大数量的指纹服务器上以能够处理所有的检索请求和存储所有指纹。此外，该数据库必须保持为最新的。例如，在音频指纹的场合，必须添加新发行的歌曲的指纹。所需要的服务器和保持数据库为最新状态这两者都使得系统非常昂贵。
另外，因为在数据库中有大量的项，因此查询响应时间可能变得很长。
本发明的一个目的是提供一种根据导言的方法，其中要减少获取元数据的平均时间。
根据本发明以一种方法可实现这一目的，该方法的特征在于，为在传输通道上传输的另一个多媒体对象中的一部分计算传输指纹；将该传输指纹与在基本数据库中存储的指纹相匹配；在成功匹配时，把该另一个多媒体对象的项添加到辅助数据库中；通过将该指纹与在辅助数据库中存储的项相匹配而获得元数据；并且如果所述与辅助数据库的匹配失败则只通过与基本数据库的匹配来获取元数据。
当以这种方式填充时，辅助数据库只包含少量项，所有的项都是通过被监视的通道传输的对象。因此与辅助数据库的匹配将比与基本数据库的匹配快。只当在辅助数据库中未找到匹配时才在基本数据库中执行匹配。因为预期许多针对通过被监视的传输通道传输的多媒体对象的请求将会到来，其结果是许多请求可以仅使用较小的和较快的辅助数据库得到回答。所以，平均说来，匹配一个指纹所需要的时间减少。
在一个实施例中，所述方法另外包括接收多媒体对象的至少一部分，和对接收的部分计算指纹。在许多场合，根据本发明的方法由一个希望识别他所得知的多媒体对象的远端的第三方启动。因为该方法通过在数据库中匹配多媒体对象的指纹来获取元数据，因此必须以某种方式获得该多媒体对象的指纹。
在本实施例中，用户提供一部分多媒体对象，以便可以对该部分计算指纹。例如，用户可以记录几秒钟音频并传输这个记录下的音频，或者通过电话连接传输几秒钟音频。另一种替代方案是用户自己首先计算指纹，然后把该指纹传输到执行匹配的服务器，不过这一替代方案需要较复杂的客户机。
在另外一个实施例中，另外的多媒体对象的项包括传输指纹。在传输期间，多媒体对象将总是要作某些修改。这意味着传输指纹将总是与在基本数据库中的指纹稍微不同，尽管尚未不同到足以阻止匹配。然而，对象指纹很可能是对多媒体对象的一个低质量部分计算的，该多媒体对象的低质量部分例如是从无线电传输中通过空中以差的接收质量在移动电话中接收后通过移动电话连接而记录的。显然这将会在记录中引入许多另外的错误，从而导致更加不同的对象指纹。这将增加对象指纹可能与在基本数据库中的指纹过于不同以致不能成功匹配的风险，这是因为在无线电传输中固有的错误和源于低质量记录的错误。
在本实施例中，把对象指纹与传输指纹匹配，而不是与驻留在基本数据库中的指纹匹配。这至少消除了某些不成功匹配，因为对象指纹与辅助数据库中的指纹比起与基本数据库中的指纹来其差异要小。
在另一个实施例中，另外的多媒体对象的项包括在基本数据库中与传输指纹的项相匹配的指纹。这一实施例具有这时不需对整个另外的多媒体对象计算传输指纹的优点。在找到一个匹配后，在基本数据库中的项至少部分被复制到辅助数据库，以便对象指纹可以与其匹配。
在另一个实施例中，为在各传输通道上传输的多个另外的多媒体对象计算传输指纹。通过监视多个通道，增加了用户也正在监听的一个通道被监视的机会。在对辅助数据库增加一个相应的项以后，可以更快地回答由该用户对元数据的请求。
在另外一个实施例中，所述方法另外包括在传输监视记录文件中记录获得的元数据中的至少一部分和该传输通道的标识符。通过查询辅助数据库以查找与一个特别的传输通道关联的所有项，可以得到在该通道上的一个传输列表。该列表可以由版权交易所用来决定有多少版税应该付给特定的版权拥有者。
这种版税经常基于对一个特定的歌曲被广播的次数的估计，而该列表由公平的第三方提供精确的估计。无线电台可能高估或者低估它广播一个特定的歌曲的次数，或者不愿意提供足够的细节。当然这一列表对许多其他目的也能是有价值的。
在另外一个实施例中，本方法另外包括：在向辅助数据库中增加与一个特别传输通道关联的另外的多媒体对象的项时，从该辅助数据库中清除与该特别的传输通道关联的先前的项。以这种方式，辅助数据库只填入先前通过至少一个传输通道被传输的多媒体对象的项。以这种方式保持辅助数据库尽可能小。
另外的一个目的是提供根据导言的系统，其中可减少获取元数据的平均时间。
根据本发明，这一目的在下述系统中实现，所述系统的特征在于：传输监视装置，用于记录在一个传输通道上传输的另一个多媒体对象的一部分；取指纹装置，用于为该部分计算传输指纹；该匹配装置被配置为将传输指纹与在基本数据库中存储的指纹相匹配，在成功匹配时在辅助数据库中增加该另一个多媒体对象的项，并通过将该指纹与辅助数据库中存储的项相匹配来获取元数据，而如果对所述辅助数据库的匹配失败则只通过对基本数据库匹配来获得元数据。
在一个实施例中，该系统另外包括接收装置，用于接收多媒体对象的至少一部分，取指纹装置被安排为就所接收的部分计算对象指纹。
本发明另外涉及计算机程序产品，它被安排用于使处理器执行本发明的方法。
附图说明
参考附图中表示的实施例，本发明的这些以及其他方面将十分显然并且被说明。
图1原理表示安排用于识别多媒体对象的系统；
图2较为详细地原理表示用于本系统中的服务器和数据库；
图3原理表示服务器的另一个实施例。
在全部附图中，同样的参考号码指示相似的或相应的特征。在附图中指明的某些特征通常以软件实现，而作为这种代表的软件实体，诸如软件模块或者对象。
具体实施方式
图1原理表示安排用于识别多媒体对象的系统。该系统包括一个源100、移动电话110、电话网络115、服务器120和数据库121。源100提供多媒体对象101。优选地多媒体对象101包括音频信号，但视频信号也一样适合。这里所使用的术语多媒体对象指的是音乐、歌曲、电影、电视节目、图片等。
在图1的实施例中，源100是扬声器，虽然它当然可以是任何种类的信号源。例如，源100可以是音频装置，像无线电设备，或视频信号源。源100通常从另一源获得它所提供的多媒体对象101。例如，无线电设备从空中或者从电缆连接接收广播传输，并从该广播传输产生/提供音频信号。
用户收听多媒体对象101和希望对它有更多的了解，亦即他希望获得多媒体对象101的元数据。术语元数据指为多媒体对象的诸如标题、艺术家、类别等的信息。在许多情况下，这一元数据不与多媒体对象101一起提供。例如，多媒体对象101可以是酒馆或商场的背景音乐，或者是无线电台上广播传输的一部分。在无线电的情况下，经常很难确切地听到由DJ(主持人)或无线电节目主持人提供的元数据，即使这一元数据最终被发表的话。
为获得这一元数据，用户因而拿起他的移动电话110呼叫一个用于将他连接到服务器120的特别的电话号码。通常这涉及到诸如电话网络115这样的中间体。当连接到服务器120后，用户对准他的移动电话110，使得它拾取音频信号101。然后把信号101通过电话连接传输到服务器120。
然后服务器120为接收的信号101产生一个指纹。存在几种可以用来计算这种多媒体指纹的技术。国际专利WO 02/065782(代理人卷宗号PHNL010110)说明一种方法，它为多媒体对象例如音频片段产生多媒体指纹。把该音频片段在连续的(最好是重叠的)时间间隔内进行分割。对于每一个时间间隔，将频谱分割成频带。计算每一频带的强壮特性(例如能量)，并用各自的指纹比特表示。
这样，多媒体对象由包括级联的二进制值的指纹所表示，每一级联的值是对于一个时间间隔的。为识别该多媒体对象，当接收到具有一定长度的一部分，通常大约是3秒时，就计算指纹。然后把这一较小的指纹与完整的多媒体对象的指纹匹配(例如使用滑动窗技术)。注意，一个多媒体对象可以具有多个相关的指纹。
使用计算的指纹，服务器120然后执行在数据库121中的数据库查阅，所述数据库包含一些先前计算的指纹和相关的元数据组，以获得与该指纹关联的元数据。服务器120这样做的操作将在下面参考图2解释。
然后服务器120给用户的移动电话110发送一个带元数据的消息，诸如SMS消息。该元数据也可以向该用户的一个电子邮件地址进行电子邮寄，或者通过消息速报服务作为消息给该用户发送。以这种方式，可以比移动电话110有限潜在的功能所能处理的提供更广泛的信息。然后移动电话110可以接收例如表明标题和艺术家的SMS消息，以及有关更多信息已发送到该用户的电子邮件地址的声明。
当然，移动电话110可以容易地用允许给服务器120传输音频和/或视频数据的其他设备所替换。例如，可以使用连接到个人计算机的话筒。然后计算机从该话筒记录声音，并例如通过因特网作为电子邮件消息或者使用FTP、HTTP文件上载或相似的机制把该记录传输给服务器120。也可以使用带有记录装置的便携设备进行这种记录。然后可以把这种便携设备通过电话线或者网络连接与服务器相连。其他传输通道诸如因特网无线电允许直接记录和传输多媒体对象的一部分，因为该对象然后是以电子格式传输的。
图2较为详细地原理表示服务器120和数据库121。这里的服务器120包括输入模块201、取指纹模块202、数据库管理系统(DBMS)后端模块203、和响应模块204。
当用户与服务器120联系以便获取为一个特别的多媒体对象的元数据时输入模块201被激活。它优选连接到电话网络115，以便用户只要在他们的移动电话110上呼叫某个号码就能与服务器120联系。
输入模块201通过与移动电话110建立的连接接收音频片段并把该音频片段供给取指纹模块202。取指纹模块202根据接收的音频片段计算指纹。如上所述，用于计算多媒体指纹的一种方法在国际专利申请WO 02/065782(代理人卷宗号PHNL010110)中说明，但当然也可以使用用于计算多媒体指纹的任何方法。取指纹模块202然后把计算的指纹提供给DBMS后端模块203。
DBMS后端模块203对数据库121执行查询，以便从数据库121检索与计算的指纹关联的元数据组。如图2所示，数据库121包括指纹FP1、FP2、FP3、FP4和FP5和各相对应的相关元数据组MDS1、MDS2、MDS3、MDS4和MDS5。上述国际专利申请WO 02/065782(代理人卷宗号PHNL010110)说明各种策略以便在带有为完整的多媒体对象的数据库中检索对一个音频片段所计算出的指纹。一种在数据库中检索指纹的公开的方法使用抽取的指纹比特的可靠性信息。指纹比特的确定是通过计算一个信息信号的特征并给所属特征设定阈值(thresholding)以获得指纹比特而实现的。如果一个特征具有非常接近该阈值的值，则在该信号中的一个小的改变可以导致指纹比特具有相反值。使用特征值和阈值之间的差的绝对值来标记每一指纹比特为可靠或不可靠。随后使用该可靠性来改善实际检索过程。
可以以各种方式组织数据库121来优化查询时间和/或数据组织。当设计数据库121中的表时应该考虑取指纹模块202的输出。在图2所示的实施例中，数据库121包括一个单一的表，它具有包括各指纹和元数据组的项(记录)。
实现数据库121的另一种方式是建立几个表。第一表包含多个唯一的标识符(基本关键字)，每一个与各元数据组关联。可以根据各种音乐识别源获得这种表。可以把艺术家、标题和发行年代等综合起来的组合形成一个唯一的标识符，但不能保证这个标识符是唯一的，所以优选地要使用真正是全局唯一的值。
然后用包括每一多媒体对象的它的指纹和来自第一表的它的唯一的标识符的项建立第二表。如果一个元数据对象可以有多个指纹的话，则把所有这些指纹存储在第二表内，所有的都与该多媒体对象的一个唯一的标识符关联。
然后DBMS后端模块203把由取指纹模块202计算的指纹与在第二表内的指纹相匹配，得到一个标识符并把该标识符与第一表匹配以获得元数据。如果数据库211是SQL数据库，则可以根据该标识符“联合”(用SQL术语)这两个表。
DBMS后端模块203把查询结果提供给响应模块204，它把该结果例如作为SMS消息或者电子邮件消息传输给用户。如果由输入模块201接收的音频片段是由移动电话发送的，则可以通过呼叫者ID或者自动号码识别或者相似方法获得电话号码。然后输入模块201把呼叫号码供给响应模块204，以便把SMS消息发送到那个号码。
另外可选择的方案是，输入模块201可以接收其他的用于识别用户的手段，诸如由用户在与服务器120联系时提供的用户名或者电子邮件地址。为使用该服务可能需要登录，然后可以通过例如基于由用户提供的用户名检查用户的登录细节获得目的地地址。
维护数据库121的一个重要方面是如何收集足够数量的指纹和相关的元数据组以便能够正确识别可容许的数量的多媒体对象。
当然可以购买大量像CD这样的记录载体，直接从CD计算指纹。这是一种昂贵而费力的操作，因为计算指纹并把元数据添加到数据库121中难于自动进行。另外，人们不总是对CD的质量感兴趣，而也对降低的质量感兴趣，如果那对应用来说更适合的话。这意味着在可以把指纹放到数据库121中之前需要一个另外的预处理步骤。另外，还必须为在数据库121中存储有指纹的所有歌曲获得元数据。这甚至是比获取指纹自身更大的挑战。
国际专利申请号码PCT/IB02/04467(代理人卷宗号PHNL010844)说明一种维护具有指纹和相关元数据组的数据库的方法。从文件共享网络的客户中获得多媒体对象和相关的元数据组。为该多媒体对象计算指纹，并且连同元数据组一起添加到数据库中。以这种方式，可以从一个多媒体对象收集多个元数据组。使用诸如多数表决、决策树修剪或交叉确认等技术，可以计算出确定的元数据组。
以这种方式，不再必须主动出去购买例如CD上的内容或发现内容的元数据。通过利用从网络上文件共享的客户机上可得到的对象和元数据，可以以非常有效的方式收集签名和元数据。这些客户机已经连同元数据使对象可为任何人下载使用，所以购买这些对象变得不必要。通过收集多个元数据组并且应用过滤器或表决技术，可以从各种也许是不可靠的集合来构建精确的元数据组。
图3原理表示服务器120的另一个实施例。在数据库121(以下称为基本数据库121)旁边，现在还有一个辅助数据库122，也在DNMS模块203的控制下。辅助数据库122的组织优选地和基本数据库121相同。辅助数据库122可以存储在与基本数据库121不同的存储介质上，虽然这不是严格必须的。
在该实施例中给服务器120装备一个传输监视模块205，它连接到接收机301，接收机301安排用于从介质接收传输，所述介质诸如音频广播频道(例如无线电)、视频广播频道、流式因特网传输通道、或组播因特网传输通道。使用接收机301，传输监视模块205记录正通过一种传输介质传输的多媒体对象的至少一部分。模块205例如可以调谐到一个特定的无线电台或者电视台，或者连接到一个提供流式音频的特定的因特网主机。
然后把该记录的部分供给取指纹模块202以便为该记录的部分计算传输指纹。然后把传输指纹与在基本数据库121中的项匹配。如果找到匹配，则在辅助数据库122中为识别的传输建立一个项，有几种方式实现这一点。
一种方式是在辅助数据库122中建立一个项以复制在辅助数据库122中匹配项的至少一部分。例如，如上所述，可以在辅助数据库122中复制在基本数据库121的第二表中的匹配项的指纹和唯一标识符，以允许在必要时从第一表获得元数据。这可以保持第二数据库122尽可能地小，但是其缺点是后来的指纹仍然要与原来的指纹相匹配。
如果传输的指纹表示基本上是作为一个整体来进行传输的话，则另一个实施例是可能的。为此在要添加到第二数据库122中的项中包括该传输指纹。当然，这意味着传输监视模块205必须记录(几乎)整个传输并将其供给取指纹模块202。然后在第二数据库122中把对象指纹与传输指纹匹配。
优选地，在第二数据库122中添加与一个特别的传输通道关联的项时，从第二数据库122中要去除与该传输通道关联的先前的项。以这种方式，第二数据库122只由当前正经由至少一个传输通道而传输的多媒体对象的项所填充。这可以通过还在第二数据库中存储与这些项相关联的传输通道的一个标识符和去除具有和要被复制的项具有同样标识符的项来实现。
在图3的实施例中，监视着3个传输通道，并且FP1、FP2和FP3的匹配项已经被复制到辅助数据库122中。另外，传输通道标识符TC1、TC2和TC3已经被添加到在数据库122中用于所涉及的传输通道的项上。
通过以这种方式给第二数据库122收集多个项，就建立和保持正通过由传输监视模块205所监视的一个(或多个)传输通道而传输的多媒体对象的一个总览。如果另外有该(或多个)传输通道的标识符和可选地还有该项复制的时间印记连同这些项一起被存储，则可能为每一被监视的通道建立一个传输记录簿(记录文件)。
通过利用一个特定的传输通道查询第二数据库122中的所有项，可以得到在该通道上传输的列表。这一列表可以由版权交易所诸如美国作曲家、作者和出版商协会(ASCAP)或荷兰BUMA/Stemra使用以决定有多少版税应该付给特别的版权拥有者。这种版税常常基于一个特别的歌曲或电影被广播的估计次数，而这一列表提供了由公正的第三方给出的准确估计。无线电台或电视台可能高估或者低估它播放一个特别的歌曲的次数，或可能不愿意提供足够的细节。
当然这一列表也可以对许多其他目的有用。如果被监视的多媒体对象包括广告或者促销消息，则可以使用该列表来证明(或否定)一个特别的广告或消息在某一时间是否被广播。以这种方式，无线电台或电视台可以证明它遵守对广告商的合同责任。
现在稍微修改为由输入模块201接收到的多媒体对象的匹配过程。仍如上述计算指纹，但是在与基本数据库121匹配前，该指纹由DBMS模块203与在辅助数据库122中存储的项匹配。
当然，如果在辅助数据库122中找到匹配，则完全不再需要与基本数据库121匹配，因为辅助数据库122只包含从基本数据库121复制的项。然而，如果在辅助数据库122中未找到匹配，则(较大的)基本数据库121仍可能包含匹配项。
优选地，数据库120要装备高质量接收机301，以使记录的传输也具有高质量。这使得传输指纹与基本数据库121的匹配更可靠。在通过像无线电这样的传输介质传输期间，多媒体对象总是被稍微修改。这意味着传输指纹将与来自基本数据库121中的指纹稍有不同，尽管没有不同到足以阻止匹配的程度。
另一方面，对象指纹极有可能基于低到非常低的质量的记录而计算。如上所述，可以使用移动电话110向服务器120传输多媒体对象的记录。因为移动电话传输的非常低的质量，这将在记录中引入许多外加的错误，从而对象指纹将具有与在基本数据库121中的指纹很大程度的不同。这减少了与在基本数据库121中项的成功匹配的机会。
如果如上所述，传输指纹被包含在添加到辅助数据库中的项中的话，则对象指纹与传输指纹匹配，而不是与存放在基本数据库121中的指纹匹配。这至少消除了部分的不成功匹配，因为对象指纹与在辅助数据库中的指纹的不同要小于与在基本数据库中的指纹的不同。
用低质量记录计算的指纹很可能包含许多错误，从而减少在像基本数据库121这样的大数据库中的成功和正确的匹配。然而，如果使用像辅助数据库122这样的小数据库来匹配指纹的话，则可以容忍匹配中的低可靠性。辅助数据库122中的项不太可能是相似的，所以甚至当在指纹中有大量不可靠比特时，也很有可能至少有一个项适合的匹配。
DBMS后端模块203把查询结果供给响应模块204，后者如上面参考图2说明的那样处理它。
应该注意，上述实施例说明而不限制本发明，熟悉本技术领域的人将能够设计许多可替换的实施例而不离开所附权利要求的范围。
例如，多媒体对象101的指纹可选地由在移动电话110中的取指纹模块计算而不是由在服务器120中的取指纹模块202计算。以这种方式，只有指纹自身要传输给服务器120，而可以省略服务器120中的取指纹模块202。因为指纹通常比它用于计算的多媒体对象101的该部分要小，这可以相当显著地减少带宽。装备有取指纹模块的移动电话的构造和操作在国际专利申请WO 02/17135(代理人卷宗号PHNL000469)中解释。
数据库121可以分布在多个物理计算机系统上，以减少每一单个系统的工作负载。数据库121的内容也可以分布在文件共享网络中的多个客户机上，这在国际专利申请PCT/IB02/04605(代理人卷宗号PHNL010874)中解释。
数据库121的内容可以免费使用，或者只由付费订户使用。另外可选地，费用可以根据对数据库121进行的每一查询收取。响应于递交指纹而对客户返回的元数据的数量也可以改变：例如免费服务只返回艺术家和标题，并且基于订阅的服务可返回数据库中可用的全部元数据。
辅助数据库122实际上可以作为基本数据库121的一个或者多个表而实现，尽管这可能使对数据库的访问时间较慢，因为这时数据库的大小(优选地保持在工作存储器中)增加了。
在权利要求中，置于括号内的任何参考符号不应该被理解为是限制本发明。单词“包括”不排除在权利要求中所列的元件或者步骤之外的元件或者步骤的存在。冠于元件前面的单词“一个”不排除多个这种元件的存在。
本发明可以用包括几个不同元件的硬件、和用一个适当编程的计算机实现。在列举几种装置的设备权利要求中，可以由同一硬件实现几个这样的装置。不能仅以在相互不同的独立权利要求中叙述的某些措施这一事实表明不能使用这些措施的组合。
Claims (10)
1.一种通过把多媒体对象的对象指纹与在基本数据库中存储的项相匹配而获取多媒体对象的元数据的方法，其特征在于，为在传输通道上传输的另一个多媒体对象的一部分计算传输指纹；将该传输指纹与在基本数据库中存储的指纹相匹配；在匹配成功时，在辅助数据库中添加该另一个多媒体对象的一个项；以及通过将该指纹与在辅助数据库中存储的项相匹配来获取元数据，而如果所述与辅助数据库的匹配失败则只通过与基本数据库的匹配来获取元数据。
2.权利要求1所述的方法，另外包括接收多媒体对象的至少一部分和对所接收的部分计算对象指纹。
3.权利要求1所述的方法，其中，为所述另一个多媒体对象的项包括该传输指纹。
4.权利要求1所述的方法，其中，所述另一个多媒体对象的项包括在基本数据库中的一个与该传输指纹相匹配的项的指纹。
5.权利要求1所述的方法，其中，为在各个传输通道上传输的多个另外的多媒体对象计算传输指纹。
6.权利要求1所述的方法，还包括在传输监视记录文件中记录所获得的元数据的至少一部分和传输通道的标识符。
7.权利要求1所述的方法，另外包括在向辅助数据库中添加该另一个多媒体对象的与一个特定的传输通道关联的项时，从辅助数据库中清除与该特定传输通道关联的一个先前的项。
8.一个配置成用于获取多媒体对象的元数据的系统，包括匹配装置，用于将该多媒体对象的一个对象指纹与在基本数据库中存储的项相匹配，其特征在于，传输监视装置，用于记录在一个传输通道上传输的另一个多媒体对象的一部分，和取指纹装置，用于为该部分计算传输指纹，所述匹配装置被配置成将该传输指纹与在基本数据库中存储的指纹相匹配，在匹配成功时在辅助数据库中添加该另一个多媒体对象的一个项，并通过将该指纹与在辅助数据库中存储的项相匹配来获取元数据，而如果与辅助数据库的所述匹配失败则只通过对基本数据库的匹配来获取元数据。
9.权利要求8所述的系统，另外包括接收装置，用于接收多媒体对象的至少一部分，所述取指纹装置被配置成对所接收的部分计算对象指纹。
10.一种配置成用于为使处理器执行权利要求1的方法的计算机程序产品。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP02075501 | 2002-02-06 | ||
| EP02075501.3 | 2002-02-06 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN1628303A true CN1628303A (zh) | 2005-06-15 |
| CN100350412C CN100350412C (zh) | 2007-11-21 |
Family
ID=27675699
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CNB03803302XA Expired - Fee Related CN100350412C (zh) | 2002-02-06 | 2003-01-27 | 基于杂乱数据的多媒体对象元数据的快速检索 |
Country Status (9)
| Country | Link |
|---|---|
| US (1) | US20050144455A1 (zh) |
| EP (1) | EP1474760B1 (zh) |
| JP (1) | JP4298513B2 (zh) |
| KR (1) | KR20040081191A (zh) |
| CN (1) | CN100350412C (zh) |
| AT (1) | ATE312381T1 (zh) |
| AU (1) | AU2003202728A1 (zh) |
| DE (1) | DE60302651T2 (zh) |
| WO (1) | WO2003067467A1 (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101263474B (zh) * | 2005-04-22 | 2010-06-23 | 微软公司 | 用于构建数字音频标识符元素的权威数据库并标识媒体项的方法 |
| CN101807208A (zh) * | 2010-03-26 | 2010-08-18 | 上海全土豆网络科技有限公司 | 视频指纹快速检索方法 |
| CN101377774B (zh) * | 2007-08-31 | 2010-12-08 | 上海证券交易所 | 一种依据元数据对数据对象间关系预分析的系统及方法 |
| CN102084361A (zh) * | 2008-04-13 | 2011-06-01 | 艾法罗媒体有限责任公司 | 媒体资产管理 |
| WO2012163013A1 (zh) * | 2011-10-19 | 2012-12-06 | 华为技术有限公司 | 音乐查询方法和装置 |
| CN103593356A (zh) * | 2012-08-16 | 2014-02-19 | 丁瑞彭 | 基于多媒体信息指纹技术的信息搜索方法、系统和应用 |
| CN108694646A (zh) * | 2018-04-29 | 2018-10-23 | 杭州维善科技有限公司 | 一种平面设计交互订单系统 |
| CN108713321A (zh) * | 2016-02-29 | 2018-10-26 | 格雷斯诺特公司 | 利用视频多匹配检测和基于广播时间的消歧的媒体频道识别 |
| CN108830671A (zh) * | 2018-04-29 | 2018-11-16 | 杭州维善科技有限公司 | 一种平面设计交互订单方法 |
Families Citing this family (129)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6505160B1 (en) * | 1995-07-27 | 2003-01-07 | Digimarc Corporation | Connected audio and other media objects |
| US7711564B2 (en) | 1995-07-27 | 2010-05-04 | Digimarc Corporation | Connected audio and other media objects |
| US8121843B2 (en) * | 2000-05-02 | 2012-02-21 | Digimarc Corporation | Fingerprint methods and systems for media signals |
| US7248715B2 (en) * | 2001-04-06 | 2007-07-24 | Digimarc Corporation | Digitally watermarking physical media |
| US7046819B2 (en) | 2001-04-25 | 2006-05-16 | Digimarc Corporation | Encoded reference signal for digital watermarks |
| US7020304B2 (en) | 2002-01-22 | 2006-03-28 | Digimarc Corporation | Digital watermarking and fingerprinting including synchronization, layering, version control, and compressed embedding |
| US7824029B2 (en) | 2002-05-10 | 2010-11-02 | L-1 Secure Credentialing, Inc. | Identification card printer-assembler for over the counter card issuing |
| US7606790B2 (en) | 2003-03-03 | 2009-10-20 | Digimarc Corporation | Integrating and enhancing searching of media content and biometric databases |
| FR2865298B1 (fr) * | 2004-01-16 | 2010-01-15 | Musiwave Sa | Systeme et procede de reconnaissance de sequence sonore |
| US8953908B2 (en) | 2004-06-22 | 2015-02-10 | Digimarc Corporation | Metadata management and generation using perceptual features |
| US8694049B2 (en) * | 2004-08-06 | 2014-04-08 | Digimarc Corporation | Fast signal detection and distributed computing in portable computing devices |
| US7574451B2 (en) * | 2004-11-02 | 2009-08-11 | Microsoft Corporation | System and method for speeding up database lookups for multiple synchronized data streams |
| US7471677B2 (en) | 2005-01-31 | 2008-12-30 | Sharp Laboratories Of America, Inc. | Systems and methods for implementing a metadata station for an internet radio service |
| US7631095B2 (en) | 2005-02-16 | 2009-12-08 | Sharp Laboratories Of America, Inc. | Systems and methods for obtaining the metadata for an Internet radio station in a bandwidth-efficient manner |
| US11032017B2 (en) | 2005-10-26 | 2021-06-08 | Cortica, Ltd. | System and method for identifying the context of multimedia content elements |
| US10180942B2 (en) | 2005-10-26 | 2019-01-15 | Cortica Ltd. | System and method for generation of concept structures based on sub-concepts |
| US9489431B2 (en) | 2005-10-26 | 2016-11-08 | Cortica, Ltd. | System and method for distributed search-by-content |
| US10372746B2 (en) | 2005-10-26 | 2019-08-06 | Cortica, Ltd. | System and method for searching applications using multimedia content elements |
| US9529984B2 (en) | 2005-10-26 | 2016-12-27 | Cortica, Ltd. | System and method for verification of user identification based on multimedia content elements |
| US10191976B2 (en) | 2005-10-26 | 2019-01-29 | Cortica, Ltd. | System and method of detecting common patterns within unstructured data elements retrieved from big data sources |
| US9372940B2 (en) | 2005-10-26 | 2016-06-21 | Cortica, Ltd. | Apparatus and method for determining user attention using a deep-content-classification (DCC) system |
| US10380164B2 (en) | 2005-10-26 | 2019-08-13 | Cortica, Ltd. | System and method for using on-image gestures and multimedia content elements as search queries |
| US11019161B2 (en) | 2005-10-26 | 2021-05-25 | Cortica, Ltd. | System and method for profiling users interest based on multimedia content analysis |
| US9191626B2 (en) | 2005-10-26 | 2015-11-17 | Cortica, Ltd. | System and methods thereof for visual analysis of an image on a web-page and matching an advertisement thereto |
| US11361014B2 (en) | 2005-10-26 | 2022-06-14 | Cortica Ltd. | System and method for completing a user profile |
| US10691642B2 (en) | 2005-10-26 | 2020-06-23 | Cortica Ltd | System and method for enriching a concept database with homogenous concepts |
| US10742340B2 (en) | 2005-10-26 | 2020-08-11 | Cortica Ltd. | System and method for identifying the context of multimedia content elements displayed in a web-page and providing contextual filters respective thereto |
| US10949773B2 (en) | 2005-10-26 | 2021-03-16 | Cortica, Ltd. | System and methods thereof for recommending tags for multimedia content elements based on context |
| US9558449B2 (en) | 2005-10-26 | 2017-01-31 | Cortica, Ltd. | System and method for identifying a target area in a multimedia content element |
| US11216498B2 (en) | 2005-10-26 | 2022-01-04 | Cortica, Ltd. | System and method for generating signatures to three-dimensional multimedia data elements |
| US10360253B2 (en) | 2005-10-26 | 2019-07-23 | Cortica, Ltd. | Systems and methods for generation of searchable structures respective of multimedia data content |
| US9477658B2 (en) | 2005-10-26 | 2016-10-25 | Cortica, Ltd. | Systems and method for speech to speech translation using cores of a natural liquid architecture system |
| US10607355B2 (en) | 2005-10-26 | 2020-03-31 | Cortica, Ltd. | Method and system for determining the dimensions of an object shown in a multimedia content item |
| US10380267B2 (en) | 2005-10-26 | 2019-08-13 | Cortica, Ltd. | System and method for tagging multimedia content elements |
| US10585934B2 (en) | 2005-10-26 | 2020-03-10 | Cortica Ltd. | Method and system for populating a concept database with respect to user identifiers |
| US10776585B2 (en) | 2005-10-26 | 2020-09-15 | Cortica, Ltd. | System and method for recognizing characters in multimedia content |
| US11386139B2 (en) | 2005-10-26 | 2022-07-12 | Cortica Ltd. | System and method for generating analytics for entities depicted in multimedia content |
| US9031999B2 (en) | 2005-10-26 | 2015-05-12 | Cortica, Ltd. | System and methods for generation of a concept based database |
| US10698939B2 (en) | 2005-10-26 | 2020-06-30 | Cortica Ltd | System and method for customizing images |
| US8266185B2 (en) | 2005-10-26 | 2012-09-11 | Cortica Ltd. | System and methods thereof for generation of searchable structures respective of multimedia data content |
| US8818916B2 (en) | 2005-10-26 | 2014-08-26 | Cortica, Ltd. | System and method for linking multimedia data elements to web pages |
| US9639532B2 (en) | 2005-10-26 | 2017-05-02 | Cortica, Ltd. | Context-based analysis of multimedia content items using signatures of multimedia elements and matching concepts |
| US11003706B2 (en) | 2005-10-26 | 2021-05-11 | Cortica Ltd | System and methods for determining access permissions on personalized clusters of multimedia content elements |
| US10614626B2 (en) | 2005-10-26 | 2020-04-07 | Cortica Ltd. | System and method for providing augmented reality challenges |
| US10621988B2 (en) | 2005-10-26 | 2020-04-14 | Cortica Ltd | System and method for speech to text translation using cores of a natural liquid architecture system |
| US8326775B2 (en) | 2005-10-26 | 2012-12-04 | Cortica Ltd. | Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof |
| US9646005B2 (en) | 2005-10-26 | 2017-05-09 | Cortica, Ltd. | System and method for creating a database of multimedia content elements assigned to users |
| US11604847B2 (en) | 2005-10-26 | 2023-03-14 | Cortica Ltd. | System and method for overlaying content on a multimedia content element based on user interest |
| US10380623B2 (en) | 2005-10-26 | 2019-08-13 | Cortica, Ltd. | System and method for generating an advertisement effectiveness performance score |
| US9466068B2 (en) | 2005-10-26 | 2016-10-11 | Cortica, Ltd. | System and method for determining a pupillary response to a multimedia data element |
| US11403336B2 (en) | 2005-10-26 | 2022-08-02 | Cortica Ltd. | System and method for removing contextually identical multimedia content elements |
| US11620327B2 (en) | 2005-10-26 | 2023-04-04 | Cortica Ltd | System and method for determining a contextual insight and generating an interface with recommendations based thereon |
| US9953032B2 (en) * | 2005-10-26 | 2018-04-24 | Cortica, Ltd. | System and method for characterization of multimedia content signals using cores of a natural liquid architecture system |
| US10535192B2 (en) | 2005-10-26 | 2020-01-14 | Cortica Ltd. | System and method for generating a customized augmented reality environment to a user |
| US10635640B2 (en) | 2005-10-26 | 2020-04-28 | Cortica, Ltd. | System and method for enriching a concept database |
| US8312031B2 (en) | 2005-10-26 | 2012-11-13 | Cortica Ltd. | System and method for generation of complex signatures for multimedia data content |
| US9767143B2 (en) | 2005-10-26 | 2017-09-19 | Cortica, Ltd. | System and method for caching of concept structures |
| US20160321253A1 (en) | 2005-10-26 | 2016-11-03 | Cortica, Ltd. | System and method for providing recommendations based on user profiles |
| US10387914B2 (en) | 2005-10-26 | 2019-08-20 | Cortica, Ltd. | Method for identification of multimedia content elements and adding advertising content respective thereof |
| US9384196B2 (en) | 2005-10-26 | 2016-07-05 | Cortica, Ltd. | Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof |
| US9218606B2 (en) | 2005-10-26 | 2015-12-22 | Cortica, Ltd. | System and method for brand monitoring and trend analysis based on deep-content-classification |
| US10848590B2 (en) | 2005-10-26 | 2020-11-24 | Cortica Ltd | System and method for determining a contextual insight and providing recommendations based thereon |
| US10193990B2 (en) | 2005-10-26 | 2019-01-29 | Cortica Ltd. | System and method for creating user profiles based on multimedia content |
| DE102005062677A1 (de) * | 2005-12-23 | 2007-06-28 | Kramer, Tobias | System und ein Verfahren zum Verwalten von Musik-Daten |
| KR100774585B1 (ko) | 2006-02-10 | 2007-11-09 | 삼성전자주식회사 | 변조 스펙트럼을 이용한 음악 정보 검색 방법 및 그 장치 |
| US8527469B2 (en) * | 2006-10-13 | 2013-09-03 | Sony Corporation | System and method for automatic detection of duplicate digital photos |
| US10733326B2 (en) | 2006-10-26 | 2020-08-04 | Cortica Ltd. | System and method for identification of inappropriate multimedia content |
| CN101743512B (zh) | 2007-06-27 | 2012-09-05 | 杜比实验室特许公司 | 具有标识多媒体内容的签名指针的搜索树的渐进式构造 |
| US20090037431A1 (en) | 2007-07-30 | 2009-02-05 | Paul Martino | System and method for maintaining metadata correctness |
| US8805110B2 (en) | 2008-08-19 | 2014-08-12 | Digimarc Corporation | Methods and systems for content processing |
| US8428301B2 (en) * | 2008-08-22 | 2013-04-23 | Dolby Laboratories Licensing Corporation | Content identification and quality monitoring |
| US20170034586A1 (en) * | 2008-10-08 | 2017-02-02 | Wakingapp Ltd. | System for content matching and triggering for reality-virtuality continuum-based environment and methods thereof |
| US8533848B2 (en) * | 2009-02-18 | 2013-09-10 | Korea Advanced Institute Of Science And Technology | Method and system for producing multimedia fingerprint based on quantum hashing |
| CN102365871A (zh) * | 2009-04-03 | 2012-02-29 | 日本电气株式会社 | 分配系统、分配方法、变换装置及程序 |
| WO2010135623A1 (en) | 2009-05-21 | 2010-11-25 | Digimarc Corporation | Robust signatures derived from local nonlinear filters |
| US8620967B2 (en) * | 2009-06-11 | 2013-12-31 | Rovi Technologies Corporation | Managing metadata for occurrences of a recording |
| GB2477940A (en) * | 2010-02-18 | 2011-08-24 | Leo Yu-Leung Tong | Music usage information gathering |
| AU2011239567A1 (en) * | 2010-04-14 | 2012-12-06 | Sven Riethmueller | Platform-independent interactivity with media broadcasts |
| US8863165B2 (en) * | 2010-11-01 | 2014-10-14 | Gracenote, Inc. | Method and system for presenting additional content at a media system |
| US20120155663A1 (en) * | 2010-12-16 | 2012-06-21 | Nice Systems Ltd. | Fast speaker hunting in lawful interception systems |
| IT1403658B1 (it) * | 2011-01-28 | 2013-10-31 | Universal Multimedia Access S R L | Procedimento e mezzi per scandire e/o sincronizzare eventi audio/video |
| SG185833A1 (en) * | 2011-05-10 | 2012-12-28 | Smart Communications Inc | System and method for recognizing broadcast program content |
| KR101396413B1 (ko) | 2012-05-07 | 2014-05-19 | 주식회사 마크애니 | 디지털 핑거프린팅을 이용한 정보 제공 시스템 및 방법 |
| US20140013342A1 (en) * | 2012-07-05 | 2014-01-09 | Comcast Cable Communications, Llc | Media Content Redirection |
| GB201214842D0 (en) * | 2012-08-21 | 2012-10-03 | Omnifone Ltd | Content tracker |
| US9027048B2 (en) * | 2012-11-14 | 2015-05-05 | Bank Of America Corporation | Automatic deal or promotion offering based on audio cues |
| US10509824B1 (en) * | 2014-12-01 | 2019-12-17 | The Nielsen Company (Us), Llc | Automatic content recognition search optimization |
| US10904617B1 (en) * | 2015-02-19 | 2021-01-26 | Amazon Technologies, Inc. | Synchronizing a client device with media content for scene-specific notifications |
| CA2986763C (en) * | 2015-05-26 | 2020-06-23 | Lg Electronics Inc. | Broadcasting signal transmitting apparatus, broadcasting signal receiving apparatus, broadcasting signal transmitting method, and broadcasting signal receiving method |
| US11425439B2 (en) * | 2015-06-15 | 2022-08-23 | Piksel, Inc. | Processing content streaming |
| US10062413B2 (en) * | 2015-10-16 | 2018-08-28 | Tribune Broadcasting Company, Llc | Media-production system with social media content interface feature |
| WO2017105641A1 (en) | 2015-12-15 | 2017-06-22 | Cortica, Ltd. | Identification of key points in multimedia data elements |
| WO2017151443A1 (en) * | 2016-02-29 | 2017-09-08 | Myteamcalls Llc | Systems and methods for customized live-streaming commentary |
| US10063918B2 (en) | 2016-02-29 | 2018-08-28 | Gracenote, Inc. | Media channel identification with multi-match detection and disambiguation based on single-match |
| US9930406B2 (en) | 2016-02-29 | 2018-03-27 | Gracenote, Inc. | Media channel identification with video multi-match detection and disambiguation based on audio fingerprint |
| US11627350B2 (en) * | 2016-12-30 | 2023-04-11 | Tivo Solutions Inc. | Advanced trick-play modes for streaming video |
| WO2019012527A1 (en) | 2017-07-09 | 2019-01-17 | Cortica Ltd. | ORGANIZATION OF DEPTH LEARNING NETWORKS |
| US11134279B1 (en) * | 2017-07-27 | 2021-09-28 | Amazon Technologies, Inc. | Validation of media using fingerprinting |
| US10966001B2 (en) * | 2018-04-05 | 2021-03-30 | Tvu Networks Corporation | Remote cloud-based video production system in an environment where there is network delay |
| US11463747B2 (en) | 2018-04-05 | 2022-10-04 | Tvu Networks Corporation | Systems and methods for real time control of a remote video production with multiple streams |
| US11212431B2 (en) | 2018-04-06 | 2021-12-28 | Tvu Networks Corporation | Methods and apparatus for remotely controlling a camera in an environment with communication latency |
| US10839694B2 (en) | 2018-10-18 | 2020-11-17 | Cartica Ai Ltd | Blind spot alert |
| US20200133308A1 (en) | 2018-10-18 | 2020-04-30 | Cartica Ai Ltd | Vehicle to vehicle (v2v) communication less truck platooning |
| US11181911B2 (en) | 2018-10-18 | 2021-11-23 | Cartica Ai Ltd | Control transfer of a vehicle |
| US11126870B2 (en) | 2018-10-18 | 2021-09-21 | Cartica Ai Ltd. | Method and system for obstacle detection |
| US10748038B1 (en) | 2019-03-31 | 2020-08-18 | Cortica Ltd. | Efficient calculation of a robust signature of a media unit |
| US11270132B2 (en) | 2018-10-26 | 2022-03-08 | Cartica Ai Ltd | Vehicle to vehicle communication and signatures |
| US10789535B2 (en) | 2018-11-26 | 2020-09-29 | Cartica Ai Ltd | Detection of road elements |
| US11643005B2 (en) | 2019-02-27 | 2023-05-09 | Autobrains Technologies Ltd | Adjusting adjustable headlights of a vehicle |
| US11285963B2 (en) | 2019-03-10 | 2022-03-29 | Cartica Ai Ltd. | Driver-based prediction of dangerous events |
| US11694088B2 (en) | 2019-03-13 | 2023-07-04 | Cortica Ltd. | Method for object detection using knowledge distillation |
| US11132548B2 (en) | 2019-03-20 | 2021-09-28 | Cortica Ltd. | Determining object information that does not explicitly appear in a media unit signature |
| US12055408B2 (en) | 2019-03-28 | 2024-08-06 | Autobrains Technologies Ltd | Estimating a movement of a hybrid-behavior vehicle |
| US10796444B1 (en) | 2019-03-31 | 2020-10-06 | Cortica Ltd | Configuring spanning elements of a signature generator |
| US11222069B2 (en) | 2019-03-31 | 2022-01-11 | Cortica Ltd. | Low-power calculation of a signature of a media unit |
| US10776669B1 (en) | 2019-03-31 | 2020-09-15 | Cortica Ltd. | Signature generation and object detection that refer to rare scenes |
| US11593662B2 (en) | 2019-12-12 | 2023-02-28 | Autobrains Technologies Ltd | Unsupervised cluster generation |
| US10748022B1 (en) | 2019-12-12 | 2020-08-18 | Cartica Ai Ltd | Crowd separation |
| US11590988B2 (en) | 2020-03-19 | 2023-02-28 | Autobrains Technologies Ltd | Predictive turning assistant |
| US11827215B2 (en) | 2020-03-31 | 2023-11-28 | AutoBrains Technologies Ltd. | Method for training a driving related object detector |
| US11756424B2 (en) | 2020-07-24 | 2023-09-12 | AutoBrains Technologies Ltd. | Parking assist |
| US11284139B1 (en) * | 2020-09-10 | 2022-03-22 | Hulu, LLC | Stateless re-discovery of identity using watermarking of a video stream |
| US12049116B2 (en) | 2020-09-30 | 2024-07-30 | Autobrains Technologies Ltd | Configuring an active suspension |
| US11589100B1 (en) * | 2021-03-31 | 2023-02-21 | Amazon Technologies, Inc. | On-demand issuance private keys for encrypted video transmission |
| US11496776B1 (en) | 2021-07-19 | 2022-11-08 | Intrado Corporation | Database layer caching for video communications |
| US12110075B2 (en) | 2021-08-05 | 2024-10-08 | AutoBrains Technologies Ltd. | Providing a prediction of a radius of a motorcycle turn |
| WO2023205559A1 (en) * | 2022-04-22 | 2023-10-26 | Whdiyo Llc | Dynamic visual watermark for streaming video |
| US12052447B1 (en) | 2022-06-27 | 2024-07-30 | Amazon Technologies, Inc. | Dynamically moving transcoding of content between servers |
| US11910044B1 (en) * | 2022-06-30 | 2024-02-20 | Amazon Technologies, Inc. | Systems and methods for switching the processing of a live content stream to another datacenter |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5918223A (en) * | 1996-07-22 | 1999-06-29 | Muscle Fish | Method and article of manufacture for content-based analysis, storage, retrieval, and segmentation of audio information |
| US6201176B1 (en) * | 1998-05-07 | 2001-03-13 | Canon Kabushiki Kaisha | System and method for querying a music database |
| DE19948974A1 (de) * | 1999-10-11 | 2001-04-12 | Nokia Mobile Phones Ltd | Verfahren zum Erkennen und Auswählen einer Tonfolge, insbesondere eines Musikstücks |
| US6834308B1 (en) * | 2000-02-17 | 2004-12-21 | Audible Magic Corporation | Method and apparatus for identifying media content presented on a media playing device |
| US6453252B1 (en) * | 2000-05-15 | 2002-09-17 | Creative Technology Ltd. | Process for identifying audio content |
| DE10133333C1 (de) * | 2001-07-10 | 2002-12-05 | Fraunhofer Ges Forschung | Verfahren und Vorrichtung zum Erzeugen eines Fingerabdrucks und Verfahren und Vorrichtung zum Identifizieren eines Audiosignals |
-
2003
- 2003-01-27 WO PCT/IB2003/000260 patent/WO2003067467A1/en active IP Right Grant
- 2003-01-27 AT AT03701639T patent/ATE312381T1/de not_active IP Right Cessation
- 2003-01-27 KR KR10-2004-7012243A patent/KR20040081191A/ko not_active Application Discontinuation
- 2003-01-27 DE DE60302651T patent/DE60302651T2/de not_active Expired - Lifetime
- 2003-01-27 US US10/503,685 patent/US20050144455A1/en not_active Abandoned
- 2003-01-27 CN CNB03803302XA patent/CN100350412C/zh not_active Expired - Fee Related
- 2003-01-27 EP EP03701639A patent/EP1474760B1/en not_active Expired - Lifetime
- 2003-01-27 AU AU2003202728A patent/AU2003202728A1/en not_active Abandoned
- 2003-01-27 JP JP2003566746A patent/JP4298513B2/ja not_active Expired - Fee Related
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101263474B (zh) * | 2005-04-22 | 2010-06-23 | 微软公司 | 用于构建数字音频标识符元素的权威数据库并标识媒体项的方法 |
| CN101377774B (zh) * | 2007-08-31 | 2010-12-08 | 上海证券交易所 | 一种依据元数据对数据对象间关系预分析的系统及方法 |
| CN102084361A (zh) * | 2008-04-13 | 2011-06-01 | 艾法罗媒体有限责任公司 | 媒体资产管理 |
| CN101807208A (zh) * | 2010-03-26 | 2010-08-18 | 上海全土豆网络科技有限公司 | 视频指纹快速检索方法 |
| CN101807208B (zh) * | 2010-03-26 | 2015-05-20 | 上海全土豆网络科技有限公司 | 视频指纹快速检索方法 |
| WO2012163013A1 (zh) * | 2011-10-19 | 2012-12-06 | 华为技术有限公司 | 音乐查询方法和装置 |
| CN103593356A (zh) * | 2012-08-16 | 2014-02-19 | 丁瑞彭 | 基于多媒体信息指纹技术的信息搜索方法、系统和应用 |
| CN108713321A (zh) * | 2016-02-29 | 2018-10-26 | 格雷斯诺特公司 | 利用视频多匹配检测和基于广播时间的消歧的媒体频道识别 |
| CN108713321B (zh) * | 2016-02-29 | 2019-06-11 | 格雷斯诺特公司 | 利用多匹配检测和基于广播时间的消歧的媒体频道识别 |
| CN108694646A (zh) * | 2018-04-29 | 2018-10-23 | 杭州维善科技有限公司 | 一种平面设计交互订单系统 |
| CN108830671A (zh) * | 2018-04-29 | 2018-11-16 | 杭州维善科技有限公司 | 一种平面设计交互订单方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP1474760B1 (en) | 2005-12-07 |
| AU2003202728A1 (en) | 2003-09-02 |
| US20050144455A1 (en) | 2005-06-30 |
| KR20040081191A (ko) | 2004-09-20 |
| DE60302651T2 (de) | 2006-08-10 |
| JP2005517245A (ja) | 2005-06-09 |
| EP1474760A1 (en) | 2004-11-10 |
| ATE312381T1 (de) | 2005-12-15 |
| CN100350412C (zh) | 2007-11-21 |
| DE60302651D1 (de) | 2006-01-12 |
| JP4298513B2 (ja) | 2009-07-22 |
| WO2003067467A1 (en) | 2003-08-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN100350412C (zh) | 基于杂乱数据的多媒体对象元数据的快速检索 | |
| RU2422891C2 (ru) | Система и способ для ускорения поисков в базе данных для множественных синхронизированных потоков данных | |
| US10237067B2 (en) | Apparatus for voice assistant, location tagging, multi-media capture, transmission, speech to text conversion, photo/video image/object recognition, creation of searchable metatags/contextual tags, storage and search retrieval | |
| US6687671B2 (en) | Method and apparatus for automatic collection and summarization of meeting information | |
| CN1759396A (zh) | 改进的数据检索方法和系统 | |
| US9424349B2 (en) | Restoring program information for clips of broadcast programs shared online | |
| US10025841B2 (en) | Play list generation method and apparatus | |
| US20080189099A1 (en) | Customizable Delivery of Audio Information | |
| CN1607832A (zh) | 有关流媒体对象的推理信息 | |
| US20020099696A1 (en) | Fuzzy database retrieval | |
| US8634947B1 (en) | System and method for identifying digital files | |
| US20130138438A1 (en) | Systems and methods for capturing, publishing, and utilizing metadata that are associated with media files | |
| CN101055592A (zh) | 图像信息生成方法及装置 | |
| CN1997993A (zh) | 处理媒质文件的方法和系统 | |
| US20220321341A1 (en) | Apparatus/system for voice assistant, multi-media capture, speech to text conversion, photo/video image/object recognition, creation of searchable metatags/contextual tags, transmission, storage and search retrieval | |
| CN103593356A (zh) | 基于多媒体信息指纹技术的信息搜索方法、系统和应用 | |
| EP2267620A3 (en) | Digital audio track set recognition system | |
| CN101770474A (zh) | 一种基于历史检索记录检索的方法和装置 | |
| CN1672211A (zh) | 信号处理方法和装置 | |
| CN108228101B (zh) | 一种管理数据的方法和系统 | |
| Lampropoulou et al. | ALIMOS: A Middleware System for A ccessing Digital Music LI braries in MO bile S ervices | |
| Haitsma et al. | A New Technology To Identify Music |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20071121 Termination date: 20130127 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |