JPH08500471A - 放送セグメントを認識するための方法とシステム - Google Patents

放送セグメントを認識するための方法とシステム

Info

Publication number
JPH08500471A
JPH08500471A JP5519540A JP51954093A JPH08500471A JP H08500471 A JPH08500471 A JP H08500471A JP 5519540 A JP5519540 A JP 5519540A JP 51954093 A JP51954093 A JP 51954093A JP H08500471 A JPH08500471 A JP H08500471A
Authority
JP
Japan
Prior art keywords
segment
signature
match
broadcast
signatures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5519540A
Other languages
English (en)
Inventor
ディー. エリス,マイクル
エム. ダン,スチーブン
ダブリュ. フェリンガー,マイクル
ビー. ヤングラブ,ファンシー
エム. ジェームズ,デビッド
エル. クリフトン,デビッド
エス. ランド,リチャード
Original Assignee
セリディアン コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=25368063&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JPH08500471(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by セリディアン コーポレイション filed Critical セリディアン コーポレイション
Publication of JPH08500471A publication Critical patent/JPH08500471A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/37Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying segments of broadcast information, e.g. scenes or extracting programme ID
    • H04H60/372Programme
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/785Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using colour or luminescence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/56Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • H04H60/58Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of audio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/56Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • H04H60/59Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H2201/00Aspects of broadcast communication
    • H04H2201/90Aspects of broadcast communication characterised by the use of signatures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Television Systems (AREA)
  • Circuits Of Receivers In General (AREA)
  • Image Analysis (AREA)
  • Stereo-Broadcasting Methods (AREA)
  • Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

(57)【要約】 モニターされた放送セグメントを示すシグネチャと、既知の放送セグメントを示すデータベース (4 1 2) 内の放送セグメントシグネチャとを比較し、これらシグネチャが一致しているかどうかを判断する放送セグメント認識システム(10) および方法が提供される。かかる一致が有効であるかを判断するための基準が設けられている。1つの特徴では、放送オーディオ信号の複数の周波数バンド内のそれぞれの周波数バンドの値の一時的な変位部分を比較することにより、オーディオ放送信号を示すシグネチャを形成する。ビデオ信号によって示される画像 (1 4 2) のエッジのずれを補償するビデオ信号インターバルを示すシグネチャを発生するためのシステムおよび方法も提供されている。更に、相関性を示す放送信号のそれぞれのインターバルに対する差分ベクトル (1 5 0) を発生し、かかる相関性を減少するよう、これら差分ベクトル (1 5 0) のベクトル変換を実行することにより、相関性を示す放送信号のそれぞれのインターバルを特徴とするシグネチャを発生する。更に、シグネチャを含む値の信頼性を示す、対応するマスクワードと共にビデオ信号のインターバルを特徴とするシグネチャを発生する。互いに変位したビデオ信号の異なる部分を示す、このように形成された第1シグネチャのマスクワードと第 2 シグネチャのマスクワードとを比較し、マスクワードの値を定める。

Description

【発明の詳細な説明】 放送セグメントを認識するための方法とシステム 図面の簡単な説明 第1図は、放送信号の連続ストリーム(stream)をモニターするシステムを示 す。 第2図は、第1図に示されるシステムの地方局(Local Site)の1つの図面で ある。 第3図は、第2図の地方局における、一致動作中の、信号の流れを示す図面で ある。 第4図は、ビディオ フレーム信号を形成する方法を説明するための図面であ る。 第5Aと5B図は、ビディオ フレームの部分で、前者が正常エッジ状態、後 者がシフトエッジ状態を示す。 第6図は、ジッタ防止マスキング技術を説明するために参照される図面である 。 第7Aと7B図は、オーディオ付号発生システムを示すブロック図である。 第8図は、第7Aと7B図におけるオーディオ付号発生アッセンブリの動作を 説明するために参照される図面である。 第9図は、オッカレンス(occurrence)フィルターリング技術を説明するフロ ーチャートである。 第10図は、確認(confivmation)一致技術を説明する図面である。 第11図は、第2図の地方局における、関連の新しいセグメントを検出する時 の、信号の進出を示す図面である。 第12図は、第1の作動モードに従って、関連の新しいセグメントを検出する ため行われる一連のステップを示す。 第13図は、第2の作動モードに従って、関連の新しいセグメントを検出する ため行われる一連のステップを示す。 第14図は、第2の作動モードに従って、関連の新しいセグメントを検出する ため行われる一連のステップを示す。 第15図は、第14図に示されるプロセスを説明するのに用いるトリー(Tree )ダイアグラムである。 第16図は、第2図の地方局における、オーディオとビディオデータを捕える 間の、信号の流れを示す図である。 第17図は、第2図の地方局における、キー符号を発生している間の、信号の 流れを示す図である。 第18図は、キー符号を発生するために行われるステップを示すフローチャー トである。 好適実施例の詳細な説明 第1図は、本発明の実施例を応用することができるテレビジョン放送信号の連 続流を監視しかつ認識情報を提供するシステム10を図解する。ここに示された ように、システム10は、一般に、中央サイト12、中央サイト12内に配置さ れた1つ以上のワークステーシヨン14、及び1つ以上の地方サイト16を含む 。地方サイト16の各々は、相当する地理的領域内の放送を監視する。 中央サイト12は、例えば、電話線路を経由して、地方サイト16の各々と通 信して、既知の放送セグメント、及び潜在的に新、未知の放送セグメントに関す るデータを受信し、新放送セグメントに相当するセグメントシグネチャ(Signat ure、以下署名、記号、サイン、認識特性)及び検出情報を提供する。中央サイト 12は、受信データをコンパイルし、かつこれを報告書13に定式化し、この報 告書は、例えば、放送広告主に供給されることある。 中央サイト12は、また、放送データ、例えば、音声又は映像データをワーク ステーション14に供給し、ここで新及び未知セグメントが人間オペレータ又は 割当て識別コードによって識別される。もし1つのサイトが(コマーシャルのよ うな)着目の新セグメントとして放送の部分を識別し、それが(正規番組のよう な)他の或るものであるとき、欲されないセグメントを識別するワークステーシ ョンオペレータ時間が浪費される。また、もし既知セグメントがシステム10に よって正しく識別され得ないならば、それは新セグメントとして中央サイト12 によってワークステーション14に過って報告されることがあり、したがって更 にオペレータ時間を浪費する。オペレータを採用するコストは、顕著に増大し続 ける出費である。したがって、着目の新セグメントを正確に検出しかつ既知セグ メントを識別することによってこの出費を最少化することが望ましい。本発明は 、ワークステーションオペレータの援用で以て着目の既知セグメントを正確に識 別する増長能力ばかりでなく、潜在的には新セグメントを識別する必要性の最小 化を達成する信号認識用改善された方法及び装置を提供する。本発明の開示され た実施例においては、このような改善された方法及び装置はシステム10の地方 サイト16において実現される。 地方サイト16は、例えば、アンテナ18又はケーブルテレビジョンヘッドエ ンドステーシヨン(簡単化及び明確の目的のために示されていない)から無線放 送信号を受信するのに適応し、かつ日、時、持続時間、チャンネル、及び他の情 報によって既知の放送セグメントを認識し、識別する能力がある。地方サイト1 6は、また、潜在的新、未知セグメントの生起を認識し、かつこのサイトが中央 サイトにおけるワークステーションオペレータによってセグメントの識別が続行 中このような生起の記録を維持することができるように、一時的キーシグネーチ ャを発生する能力がある。システム10は3つの地方サイト16を図解するのみ であるが、このシステムはこのように制限されるのではなく、どんな数の地方サ イトをも利用されると云える。同様に、システム10は、第1図に示されたよう に2つのみのワークステーション14に制限されない。 第2図は、ブロック図の形で地方サイト16の1つを図解する。ここに示され たように、各地方サイト16は、フロントエンド部分20及びバックエンド部分 22を含む。フロントエンド部分20は1つ以上の無線放送変換器24、セグメ ント認識サブシステム26、センサ27、及びデータ捕獲サブシステム28を含 む。バックエンド部分22は、制御コンピュータ30及び少なくとも1つのディ スク駆動機構32を含む。 無線放送変換器24の各々は、それぞれのチャンネルにわたってテレビジョン 放送信号を受信し、受信信号を復調してベースバンド映像及び音声信号を提供す る。映像信号及び音声信号は、その後、セグメントサブシステム26に供給され 、ここで映像信号及び音声信号の各々に対するフレームシグネーチャが発生され 、これらはその後記憶シグネーチャと比較されて整合が存在するかどうかを決定 す る。明確の目的のために、映像及び音声シグネーチャは、ここでは個別に「サブ シグネーチャ」と称される。セグメント認識サブシステムは、また、映像フェー ド・ツー ・ブラック(fade-to-black)又は音声沈黙のような、信号事象を表 現するキューを作用じる。キューばかりでなく整合情報が制御コンピュータ30 に供給されて、受信信号が新セグメントを表現するかどうかを判定し、着目の新 セグメントを識別するに当たって中央サイトにおいて使用される映像及び音声情 報が捕獲されたかどうかを判定し、問題のある整合の妥当性を評価し、及びデー タベースに記憶するために整合情報をグループ化するのに供される。 センサ27は、フロントエンド20の動作温度を監視し、及び、動作温度が所 定最高動作温度を超える際に、その旨を指示する信号を制御コンピュータ30に 供給するのに適応する。更に特に、センサ27は、1つ以上の熱電対29からサ ブシステム26及び28に関する温度情報を受信し、このような受信情報を処理 してコンピュータ30に供給し、それであるから、もし過剰温度に遭遇すると、 サブシステム26及び28がターンオフされる。 データ捕獲サブシステム28は、セグメント認識サブシステム26を経て変換 器24から放送音声及び映像信号を受信し、これを圧縮しかつディジタル化する 。これらのディジタル化信号はサブシステム28内に含まれるバッファ内に、所 定時間間隔の中、記憶され、かつ要求に応じて制御コンピュータ30に供給され る。 制御コンピュータ30は、キーシグネーチャを選択し、整合情報を提供し、新 セグメントデータを処理し、中央サイト12と通信するのように適応している。 第3図は、典型的整合動作に対するデータの流れを図解する。ここに示された ように、変換器24の1つは、ベースバンド映像及び音声信号としてセグメント 認識サブシステム26に供給される放送信号の所望チャンネルを受信する。サブ システム26は、地方サイト16によって監視される各チャンネル毎に1つずつ 、複数のチャンネルボード402を含み、各々は相当するフレームサブシグネー チャを発生しかつベースバンド映像信号の各フレームをマスクするように働く。 加えて、各チャンネルボードはフレームサブシグネーチャを発生し、かつ相当す る音声信号の各区間中、映像信号のフレームを備えかつ映像サブシグネーチャと マスク語と同じ様式を有するマスク語を発生する。相当する区間、及び映像と音 声 サブシグネーチャに対する相当するデータ様式は、それらの処理を有利に容易化 することが、認められる。シグネーチャは、映像フィールド又はフィールドの組 合わせ、又はフレーム、又は別な風に、異なる区間から生成されることがあるこ と、及び映像、音声シグネーチャが同じ様式でなくてもよいことは、認められる 。チャンネルボード402は、また、受信ベースバンド映像信号の少なくとも1 つの実質的にブラックフィールド又はフレームの受信に基づく映像信号のフェー ド・ツー・ブラックばかりでなく、音声沈黙、沈黙を表現するベースバンド信号 レベルの低下を検出する。チャンネルボード402は、また、映像信号の急速変 化によって指示される映像シーン変化を検出するように働く。チャンネルボード 402によって生成される、これらの信号事象ばかりでなく、映像、音声シグネ ーチャ、及びマスク語は、セグメント認識コントローラ404によって受信され る。各地方サイト16は少なくとも1つの補助変換器24及びチャンネルボード 402を備え、それであるからもし変換器24及びチャンネルボード402の1 つが動作故障したとしても、セグメント認識コントローラ404は、補助チャン ネルボード及び変換器に命令を送り、これらが、次いで、不動作機器の機能を回 復する。 セグメント認識コントローラ404は、セグメントシグネーチャリングバッフ ァ406と通信し、新しく受信した、すなわち、現行時間に先行する所定時間区 間中に、各チャンネル毎に逐次配置されたセグメントシグネーチャを記憶する。 セグメント認識コントローラ404は、また、相関器420とこれに整合命令を 印加するために通信する。相関器420は、また、セグメントシグネーチャリン グバッファ406から適当なセグメントシグネーチャを、及びキーシグネーチャ データベース408からキーシグネーチャを供給される。相関器420は、要求 整合動作を遂行し、かつ整合結果を関連情報(例えば、相当する誤りカウント) と共に、セグメント認識コントローラ404に供給する。セグメント認識コント ローラ404は、制御コンピュータ30によって実現されたエキスパートモジュ ール414に各音声、映像シグネーチャ、及び信号通知事象毎に整合報告書を供 給する。 エキスパートシステム414は、各受信整合報告書を評価して、それが誤りで あるかどうかを決定する。或る状況においては、エキスパートシステム414は 、整合報告書評価において確認整合プロセスを利用する。その事象において、エ キスパートシステムは、コンピュータ30によってまた実現された確認整合モジ ュール422に確認整合要求を供給し、このモジュールは、この要求に応答して 、適当なセグメントシグネーチャを要求するセグメント認識コントローラ404 に信号を供給する。このような要求に応答して、セグメント認識コントローラは 、適当なセグメントシグネーチャを確認整合モジュール422へ供給する。加え て、確認整合モジュールは、エキスパートシステム414の制御の下にコンピュ ータ30のデータベース制御モジュール416によって維持されたデータベース 412から適当なキーシグネーチャを受信する。確認整合プロセスが完了すると 、確認整合モジュール422は、エキスパートシステム414に確認整合信号を 供給する。これに応答して、エキスパートシステム414は、データベース制御 モジュール416を通して、データベース412に整合情報、例えば、生起デー タを供給する。 ある状況下で、エキスパートシステム414は確認一致レスポンスを受ける前 に発生データを供給できる。これら状況下で許容できる一致がないと確認一致モ ジュール422が判断する場合、エキスパートシステム414はデータベース制 御装置416を介してデータベース412に一致解除信号を供給し、これにより 、先に供給された発生データが解除される。 ビデオシグネーチャの発生 チャンネルボード402の各々は、図4に示した技術に従って、各ビデオフレ ームに対し、順序付けられたシーケンスの要素x1、x2、・・・・・・x16状をし た差ベクトル150を最初に発生することにより、ビデオフレームシグネーチャ を発生する。図4に示すように、ビデオ信号のフレーム140は、バックポーチ 領域141と、ピクチャー領域142と、フロントポーチ領域143とを含む。 ピクチャー領域142の左側エッジ146は、バックポーチ領域141の右側エ ッジと境界を接しているが、ピクチャー領域142の右側エッジ147はフロン トポーチ領域143の左側エッジと境界を接している。 各フレームに対し32の所定のスーパーピクセル領域144が構成されるが、 そのうちの16のスーパーピクセル領域例が図4に示されている。各スーパーピ クセル領域144は長方形であり、ピクチャー領域142からの4つの垂直に隣 接する水平ラインの各々で、18〜21個のピクセルを含む。部分144は下記 により詳細に説明するように選択されており、この部分の平均輝度値が発生され る。各スーパーピクセル領域144は、それぞれの平均輝度値と比較するため、 第4図の点線148により表示された他のそれぞれの領域144と対をなしてい る。それぞれの平均輝度値のかかる各対は、差ベクトル150の対応する要素xn の値を発生するのに用いられる。例えば、対になったスーパーピクセル領域14 4bの平均輝度値からスーパーピクセル領域144aの選択された部分の平均輝 度値が引かれ、差ベクトル150の対応する要素xnの値が発生される。 その後、各差ベクトル150は、下記に説明するシーケンスのべクトル変換を 受け、これにより対応する16要素の変換されたベクトル、すなわち合成ベクト ルが生じる。次に、合成ベクトルの対応する要素の符号に応じて、各ビットがセ ットまたはリセットされた16ビットのフレームシグネーチャが発生される。更 に、合成ベクトルの各要素の値の絶対値は、(1) ガードバンド値よりも小さいか 、または(2)(下記に説明するように)ジッターを受け易いかどうかを判別する よう、合成ベクトルの各要素の値が検査される。いずれかの条件(1)または(2)が 得られると、それぞれの16ビットのマスクワードの対応するマスクビットがセ ットされる。 ビデオエッジ検出 再度第4図を参照すると、それぞれの平均輝度値を発生するのに使用される各 部分のピクセルが、フレームごとに対応するようにピクチャー領域142のエッ ジに対してスーパーピクセル領域144の位置を正確に決定しなければならない 。テレビコマーシャルのビデオ信号は、通常の、すなわち標準位置から水平にシ フトされて受信されることが多い。最もよく起きる水平方向のシフトは、テレビ 受像機を見ることによって判るように、右側へのシフトであり、この結果、第4 図のピクチャー領域142のエッジ146は右側へシフトする。左側への水平シ フトも生じることはあるが、かかる左側へのシフトの発生は右側へのシフトの発 生よりも大幅に少ない。ほとんどの水平シフトすなわちオフセットは、一般に視 聴 者によって判るほど大きいものではないが、各ビデオフレームのピクチャー領域 142のエッジをシフトし、よってシグネーチャの発生に使用されるスーパーピ クセル部分がシフトするので、フレームシグネーチャの発生に影響することがあ る。これを補償しない場合、このような効果はフレームシグネーチャを高信頼度 で発生するシステム10の能力を低下させ、よってシステムの制度全体に悪影響 を与える。 第3図のチャンネルボードの各々によって構成されるビデオエッジ検出モジュ ールは、受信したビデオ信号のピクチャー領域142のエッジのシフトを検出す るため設けられたものである。先に述べたように、右側への水平シフトのほうが より多い頻度で発生することが観察されているので、ビデオエッジ検出モジュー ルの説明にあたっては、右側への水平シフトが生じたものと仮定する。しかしな がら本発明は、このような右側への水平シフトのみに限定されるものでなく、左 側への水平シフトにも利用できるものである。 第5A図は、標準、すなわち通常のエッジ位置を有するビデオフレームを示す 。ここに示すように、ビデオフレームはバックポーチ部分と、ピクチャー領域と 、フロントポーチ部分を含む。第5B図は、右側への水平シフトしたビデオフレ ームを示し、このようなフレームでは、かかるシフトによりバックポーチ部分の 大きさが大きくなり、ピクチャー領域がその分だけ小さくなっている。 ビデオエッジ検出モジュールは、エッジ検出スーパーピクセル100が、通常 のエッジ位置のみならず、エッジがシフトし得る隣接するピクチャー領域も含む ように、第5A図および第5B図に示すように、ピクチャー領域とバックポーチ 領域との間の境界を横断するように、長方形のサンプリングエリアを有する少な くとも一つのエッジ検出スーパーピクセル100を置く。かかるエッジ検出スー パーピクセル100内からのビデオデータは、ピクチャー領域の左側エッジの位 置を決定するように処理される。各エッジ検出スーパーピクセル100は、各ス ーパーピクセル領域104の面積と同じ面積を有していることが好ましく、この 面積は、長さが約18〜21個のピクセル×高さが4個のピクセルの大きさであ ることが好ましい。このように、各エッジ検出スーパーピクセル100は、2本 以上のビデオラインからの部分を含む。スーパーピクセル100内のこれらビデ オラインの各々は、左側ピクチャーエッジの位置についてのデータを与える。有 利な実施例では、エッジ検出スーパーピクセル領域100の各々における各ライ ンから得られた左側エッジ位置が組み合わされて、ピクチャー領域の左側エッジ の推定位置が発生される。このように左側エッジ位置のデータのすべてを組み合 わせることにより、ビデオ信号内のノイズに悪影響を受けることがある1本のラ インのエッジ位置情報だけを用いて得られた推定値と比較して、より信頼性の高 い左側エッジの推定値が得られる。 従って、エッジ検出スーパーピクセル領域100のすべてにおけるビデオデー タラインの各々に対して得られた左側エッジの値を組み合わせることにより、ピ クチャーの左側エッジが得られる。このようにピクチャーの左側エッジを決定す る際は、ビデオデータラインから得られた極端な値を廃棄し、残った値を平均化 することが好ましい。好ましい実施例では、ピクチャーの左側エッジの2つの最 小値のみならず最高値も極端な値とみなし、このように廃棄する。信号ノイズが あると低い値が生じる傾向が大きいので、左側エッジのより低い値は廃棄する。 上記のように、ビデオ信号の各フレームには32のスーパーピクセル領域14 4が関連している。これらスーパーピクセル領域144の各々の中にはサンプリ ング領域102がある。このサンプリング領域102は、これよりビデオデータ を抽出してそれぞれのフレームシグネーチャを発生するのに使用する領域となっ ている。例えば、第5A図は、標準エッジ条件を有する一つのフレームに対する スーパーピクセル領域144内のサンプリング領域102の位置を示している。 スーパーピクセル領域144が18〜21個のピクセル×4本のラインの大きさ であると、サンプリング領域は4個のピクセル×4本のラインの大きさとなるよ うに選択することが好ましい。ピクチャーの左側エッジの水平シフトが上記のよ うに検出されると、サンプリングエリア102に対するかかるシフトの影響は、 第5B図に示すように検出された水平シフトに従ってサンプリング領域102を 変更することにより補償できる。すなわちピクチャーの左側エッジが通常の位置 からN個のピクセルだけ右側にシフトしたと測定される場合、サンプリング領域 102もN個のピクセルだけ右側にシフトしていることになる。 好ましい実施例では、ビデオエッジ検出モジュールはピクチャー領域の左側エ ッジを探すのに、エッジ検出スーパーピクセル領域100から所定の最小本数( 例えば約6〜8本)のビデオデータラインを使用することが好ましい。しかしな がら、バックポーチに隣接するピクチャー領域の部分が比較的暗い場合、エッジ 検出スーパーピクセル領域100のすべてにおいて得られたビデオデータのライ ンからピクチャー領域の左側エッジを正確に探すことは困難となる。このような 状況下では、ピクチャー領域の左側エッジに対して所定のデフォールト値を使用 する。 ピクチャーの左側エッジが領域100の外側となるように、水平方向のずれが エッジ検出スーパーピクセル領域100を越えて延びる場合、ビデオエッジ検出 モジュールは、左側エッジは発見されなかったものとみなす。このような状況で は、上記の所定のデフォールト値を使用する。更にある状況では、補償可能な値 よりも大きい水平方向のずれを検出できる。すなわち、サンプリング領域102 は水平方向のずれに対応する量だけシフトすることはできない。このような状況 では、サンプリング領域102は最大可能量だけシフトされる。 各ビデオラインに対してピクチャー領域の左側エッジを決定するため、ビデオ エッジ検出モジュールはそれぞれのピクセルの右側に2個のピクセルだけ離れた ピクセルとの間の所定量を越える輝度値のジャンプ値すなわち増加値の有無を探 すように、左側から右側へピクセルサンプルをスキャンする。かかるジャンプ値 が検出されると、現在テスト中のピクセルと右側へ3個のピクセルだけ離れたピ クセルとの間の輝度値の差が測定され、この輝度値の増加がノイズスパイクをフ ィルタで除くための所定の値に等しくなるように保証される。更に、隣接するピ クセルを検査する代わりに、検査中のピクセルの右側に2つのピクセルだけ離れ たピクセルを検査することにより、隣接するピクセルを検査した場合検出できな いはずのエッジを検出できる。すなわち、比較的暗いビデオシーンでは、エッジ ピクチャーの値の傾き(差)は、比較的明るいシーンの傾きよりも小さくなって いる。 ビデオエッジ検出モジュールは、実際に発生するエッジの1つまたは2つのピ クセルだけ前に、ピクチャーの左側エッジを置くことができる。ビデオエッジ検 出モジュールは、異なる放送の左側エッジ位置の差を補正し、絶対エッジ位置を 検出する必要がないので問題とはならない。 従って、ビデオエッジ検出モジュールは、信頼性のあるビデオフレームシグネ ーチャを受信ビデオ信号から得られるようにすることにより、システムの精度を 高める。更に、ビデオエッジ検出モジュールは、ローカルサイト16における付 加的ハードウェアを必要とすることなく、水平方向のずれを補償する。 ビデオプリプロセッシング ビデオフレームシグネーチャのある値の発生頻度が、ビデオフレームシグネー チャの他の値よりも多くなり、よってビデオフレームシグネーチャが所定の値に 集中化する(本願ではクランピングと称すことがある)傾向があるということが 判っている。かかるビデオフレームシグネーチャのクランピングは、いくつかの 問題を引き起こす可能性がある。第1に、クランピングシグネーチャと称される 、頻繁に発生するビデオフレームシグネーチャは、キーワードとして選択され易 い。この結果、このキーワードすなわちクランプシグネーチャは、これに関連す る多数のキーシグネーチャを有することがある。セグメント認識システム26の 相関器420は、それぞれのキーワードに対応するすべてのキーシグネーチャを サーチするので、クランプシグネーチャは相関器の処理時間を大幅に長くするこ とがある。この結果、ローカルサイト16のデータベース内に記憶できるデータ 量および/または処理可能な放送チャンネルの本数が制限されることがある。第 2に、 クランピングは誤った一致を増加し得る。すなわち、クランプシグネー チャのキーワードに関連するシグネーチャの数が増加するにつれ、これらシグネ ーチャのビットパターンが互いに接近し得る。この結果、信号ノイズまたはジッ ターに起因してセグメントシグネーチャ内の若干のわずかな変化が生じると、相 関器420は不正確な一致の報告をすることがある。 クランピングはシグネーチャ内の実際の情報量を減少すると考えることができ る。例えばビデオフレームシグネーチャのいずれも同じであるような状況では、 各シグネーチャの値は予め判っている。従ってこの状況では、次のビデオフレー ムシグネーチャの値はゼロビットで記述できる。他の極端な例では、すなわちビ デオフレームシグネーチャが完全にランダムであって、値が均一に分布している 場合、それぞれのシグネーチャを識別するのにシグネーチャ内のビデオのすべて が必要である。 かかるクランピングはビデオフレームシグネーチャの分布の均一性を高めるこ とにより、減少または最小にできる。例えばビデオフレームシグネーチャが均一 に分布している場合、各シグネーチャは同じ頻度で発生することになる。セグメ ント認識サブシステム26(第15図)のチャンネルボード402の各々は、よ り均一に分布したビデオフレームシグネーチャを発生するように、入力ビデオ信 号を予め処理する。すなわち、チャンネルボード402はベクトル変換を利用す ることにより入力ビデオ信号を変換する。このべクトル変換は各フレームのビッ ト間の相関性を減少することにより、ビデオフレームシグネーチャのクランピン グを減少または最小とするように、対応するクランピング情報に関する統計的デ ータを利用し、この結果、シグネーチャの分布がより均一となる。次に、チャン ネルボード402によって実行されるベクトル変換処理についてより詳細に説明 する。 本発明の有利な実施例では、第4図の差ベクトル150のベクトル変換を実行 するのに、ホテリング変換を使用する。この差ベクトルは、以下xで表示され、 16個の順番要素(x1、x2、……x16)を含む。このべクトル変換の結果 、ベクトルxのうちの要素x1、x2、……x16間の共変量が減少する。ホテ リング変換は次のように表すことができる。 y=A(x−m) ここでXは差べクトル150を示し、nはxのうちの要素の平均値を示すベク トルであり、Aは変換行列であり、yは変換されたベクトルxを示すベクトルで ある。一旦変換されたベクトルyが発生すると、ベクトルyの各要素の符号をフ レームシグネーチャのそれぞれのビット値に変換することにより、これよりフレ ームシグネーチャが得られる。すなわちベクトルyの正の要素には2進値1が割 り当てられるが、ベクトルyの負の要素には他の2進値が割り当てられる。 変換されたベクトルyにおける各要素は次のように表すことができる。 y(i)=Σ[A(i,j)(x(j)−m(j))],y=0〜15 yの共変量は次のように表すことができる。 [Cy]=yy’ =[A(x−m)] [A(x−m)]’ =A(x−m) (x−m)’A’ =A(Cx)A’ ここで、(’)はそれぞれのベクトルの転置行列を示す。行列Aにおける行が 行列Cxの正規化された固有ベクトル(xの共変量)として選択されている場合 、Cy行列は対角行列である。この選択の結果yより得られた、新しく形成され たフレームシグネーチャ(第10図)のビットは、相関化されていない。しかし ながらフレームシグネーチャ内で得られたビットは相関化されていないが、これ らは統計的にも独立したものではない。しかしながら互いの相互依存性が減少さ れている。 本発明の好ましい実施例では、変換行列Aは、定数であると仮定される。この 仮定は、入進ビデオ信号が広い意味での固定プロセスであり、よって、Cxおよ びmに対する値が一定であることを意味している。 変換行列Aの値を決定するために、ベクトルmおよび〔Cx〕の値を利用する 。これら値は次のように得ることができる。 m=(1/N)Σ(x),j=1〜N (4) かつ j=N [Cx]=[(1/N)Σ(xx’)]−mm’ (5) j=1 ここでNはmおよび[Cx]の値を決定するのに使用されるxのサンプル数を 示す。[Cx]の値を決定するにあたり、[Cx]の固有ベクトルを決定するこ とによって、変換行列Aを得ることができる。 フレームジッターに対する感受性を最小とするため、フレームシグネーチャを 多数回計算し、得られたシグネーチャを比較してそれらの差を得る。すなわち、 好ましい実施例では、−1、0および+1のピクセルの関連するビデオフレーム の水平のシフトが生じたかのように、フレームシグネーチャを決定する。これら 3つのシグネーチャワードの一つのビットまたは複数のビットが互いに変わって いる場合、対応するマスクビットをセットする。更に、変換した差の値が比較的 0に近い場合、これに対応するマスクビットをセットする。 上記のように、ビデオ信号に対してホテリング変換プロセスを用いる場合、比 較的大きなクランプシグネーチャをできるだけ細かく分けることはできない。す なわち、このプロセスで使用される共変量は、入力ビデオフレームのすべてから 得られたビデオデータに基づく一方、クランプ状のシグネーチャを有するフレー ムはすべてのフレームのうちの比較的少ないパーセントしか考慮していないので 、共変量に対するクランプ状のシグネーチャを有するフレームの有効寄与分はわ ずかとなることがある。フレームシグネーチャのこれらの比較的大きな集中化を より有効に防止する一つの方法は、同じシグネーチャ値を有し、平均頻度よりも 多い頻度で発生するフレームグループ(以下、クランプと称す)に対して別々の 変換を利用することである。かかる変換は、元のクランプに関連するクランプと ビットが逆の値を有するシグネーチャに関連するクランプも有効に破壊する。 単一変換プロセスを用いることにより、フレームシグネーチャの均一性が増し 、この結果それぞれのフレームシグネーチャに関連するビデオフレーム数は変換 プロセスを用いることによって得られるフレームシグネーチャの平均数により近 くなり、変換を用いないで得られたシグネーチャと比較して関連するより高い許 容可能な一致率を有する。 他方、異なるシグネーチャ値またはシグネーチャ値のレンジに対し、異なる変 換を使用すると、単一の変換を用いて得られた場合の均一性よりもフレームシグ ネーチャの分布の均一性を増すことができる。より詳細に説明すれば、かかる多 数変換を使用すると、入進シグネーチャワードがクランプに属しているか属して いないか、いずれかに分類される。すなわち、フレームシグネーチャの発生(す なわち所定のシグネーチャ値又は値のレンジに集中しているかどうか)の頻度が 高くなっているかどうか分類される。このような分類は、モデルテンプレートか らの入進フレームシグネーチャの距離、例えばハミング距離を測定することによ り行われる。入進フレームシグネーチャがモデルテンプレートフレームシグネー チャからの所定のハミング距離またはビット数内にある場合、複数の変換のうち の適当な一つを使ってそれぞれのシグネーチャを変換する。モデルテンプレート から1または2ビットのいずれかのハミング距離にあれば、シグネーチャの分布 が改善できる。2ビットの距離が好ましい。 受信されたフレームが異なる変換により発生された値の境界上にあるあるを有 するシグネーチャを発生する場合、使用される変換は後に受信される場合の同じ フレームのシグネーチャと一致するシグネーチャを発生することが重要である。 異なる時間に受信される同じフレームに対し、異なるシグネーチャを発生させる ようなノイズの影響に対する感受性を防止するためかかるボーダーラインのケー スでは、互いに異なる別の変化により発生されるシグネーチャ内の対応するビッ トに対する各対応するマスクワード内で、マスクビットをセットする双方の変換 を用いることにより、フレームシグネーチャを発生する。従って、1フレームの 情報内容を示す差ベクトルのベクトル変換を行うことにより、それらの要素間の 相関性を減少し、よって所定の値に集中するはずのフレームシグネーチャの分布 の均一性を改善することが可能である。特に有利な技術では、ベクトル要素間の 共変量を減少させ、それらの相関性を減少させるようにホテリング変換を使用す る。 ジッター防止マスキング ジッター防止マスキングモジュールは、チャンネルボード402の各々により 構成され、放送毎に異なることがあるビデオピクチャー内の水平方向のシフトお よび垂直方向のシフトに対し、ビデオフレームシグネーチャがあまり影響を受け なくなるようになっている。かかる水平方向のシフトおよび垂直方向のシフトは 、ハードウェアのタイミングの不安定性または送信ビデオ信号の不安定性に起因 して生じ得る。 より詳細に説明すればジッター防止マスキングモジュールは、送信ハードウェ アまたは受信ハードウェアにより生じ得るジッターおよび/またはシステムでの ずれとして知られている短期の水平方向のシフトおよび垂直方向のシフトの双方 を補償するものである。理解できるように、システム内のずれは先に述べたよう に、エッジ検出モジュールによっても補償できる。 上記のように、16ビットのシグネーチャワードおよびこれに対応する16ビ ットのマスクワードのいずれも、ビデオフレームごとに発生される。マスクワー ド内の各ビットは、シグネーチャワード内の1ビットに対応している。マスクワ ード内の1ビットをセットすることにより、ビデオフレームシグネーチャ内の対 応するビットを信頼できないものとみなさなければならないことを、ビデオフレ ームシグネーチャを利用しているシステム10の部分(第1図)に有効に警告で きる。例えばこの警告は、キーシグネーチャに対するキーワードおよびマッチワ ードを選択する際、および所定キーシグネーチャを使用して一致を探すためのエ ラースレッショルドのセットをする際に利用される。更に、マスクワード内でセ ットされるビットに対応するフレームシグネーチャワード内のビット上でエラー の発生が予想されるので、この警告は一致プロセス内のエラーカウントを決定す るのにセグメント認識サブシステム26の相関器420でも使用される。 ジッター防止マスキングモジュールは、各ピクセル領域および所定の数の(例 えば4つ)の隣接するスーパーピクセル領域に対するピクセル輝度値のそれぞれ の合計を発生する。有利な実施例では、隣接するスーパーピクセル領域は、シフ トアップされ、それぞれのスーパーピクセル領域の左側にシフトされた領域と、 シフトアップされ、それぞれのスーパーピクセル領域の右側にシフトされた領域 と、シフトダウンされ、それぞれのスーパーピクセル領域の左側にシフトされた 領域およびシフトダウンされ、それぞれのスーパーピクセル領域の右側にシフト された領域を含む。これら5つのスーパーピクセル領域、すなわちそれぞれのス ーパーピクセル領域および4つのシフトされたスーパーピクセル領域の各々から 、これら領域に含まれるピクセルの輝度値のそれぞれの合計が発生される。各ビ デオフレーム内に含まれる他の31個のスーパーピクセル領域に対して同様な値 が得られ、32個の値(各々はスーパーピクセル領域の対応するシフトグループ に対応する)の4つの組が発生する。その後、5つのビデオフレームシグネーチ ャが発生される。すなわち32個のシフトされていないスーパーピクセルを利用 することにより、一つのビデオフレームシグネーチャが発生され、32個のシフ トされたスーパーピクセルの4つの組の各々を利用することにより、4つのビデ オフレームシグネーチャが発生される。第6図は、一つのスーパーピクセルに対 して実行されるこのようなプロセス例を示している。すなわち主スーパーピクセ ル120からサンプリング領域を2ピクセルだけ上方に、更に2ピクセルだけ左 にシフトすることにより、スーパーピクセル領域122を位置させている。同様 に、サンプリング領域を2ピクセルだけ下方に、かつ左側にシフトし、2ピクセ ルだ け下方に、かつ右側にシフトし、更に2ピクセルだけ上方に、かつ右側にシフト することにより、スーパーピクセル領域124、126、128も得ている。 4つのシフトされたスーパーピクセル領域に対応するビデオフレームシグネー チャ内のいずれかのビットが、シフトされていない(主)スーパーピクセル領域 から得られたビデオフレームシグネーチャ内のビットと異なっている場合、この ビットはジッターを受け易いものと考えられ、この場合、このビットに対応する マスクビットをセットする。これらそれぞれのスーパーピクセル領域の各々を検 査することにより、ジッター防止マスキングモジュールは、シフトされたスーパ ーピクセルを得るのに使用されたシフトに対応するビデオピクチャのシフトがあ る場合、ビデオフレームシグネーチャワード内で得られた特定ビットの値が変わ っているかどうかを判断すると解される。 図6の巨大画素120を垂直および水平方向にシフトする量は変えることがで きる。ある程度までは、巨大画素120の垂直および水平方向のシフトが大きく なればなるほど、反ジッタモジュールによって補償されるビデオ信号の垂直およ び水平方向のシフトも大きくなる。しかしながら、主巨大画素120の垂直およ び/または水平方向のシフトがかなり大きいと、かなり多数のビットがマスクビ ット語に設定される。もしもマスク語に設定されるビットの数が大きすぎると、 対応するフレーム認識特性語が殆ど無意味な情報を含むようになるということを 理解されたい。例えば、主巨大画素120が水平および/または垂直方向にかな りの量だけシフトされると、それから得られる結果はビットの全てでなければ殆 どがジッタに感度をもつようになる。上記したように、本発明の一実施例によれ ば、主巨大画素120の各々が水平方向および垂直方向にそれぞれ2画素だけシ フトされる。本発明の別の有利な実施例によれば、各巨大画素120は水平方向 に右および左に1画素だけシフトされるが垂直方向にはシフトされない。 このように、反ジッタマスキングモジュールは、ジッタあるいはオフセットに 対して感度を有する各ビデオフレーム認識特性に含まれる対応ビットに対するマ スクビット語のなかにビットを設定する。さらに、エッジ検出モジュールと同様 に、反ジッタマスキングモジュールは、主としてセグメント認識サブシステム2 6のソフトウェアプログラム中に含まれ、各局地16に供給するための最小のコ ストを必要とする。 反ジッタマスキング技術は好ましくは保護帯域マスキング技術と共に実行され る。保護帯域マスキング技術においては、もし二つの対応する巨大画素領域の各 平均発光値の差の絶対値が所定の保護帯域値よりも小さいときには、所与のフレ ーム認識特性ビットのためのマスクビットがマスクされる。例えば、所与のビデ オ信号の発光値が0から256までの範囲内でディジタル化されるならば、実験 的保護帯域64が選択される。対応するベクトルエレメントのマスクビットが設 定されると、各認識特性ビットのマスクビットが設定される。すなわち、もし保 護帯域マスキングあるいは反ジッタマスキングのどちらかがそのようなマスクビ ットを設定すると、所与の認識特性ビットのマスクビットが設定される。 オーディオ認識特性発生 図7Aを参照すると、監視すべきオーディオデータの各放送チャネルの各チャ ネルボード(図3)に組み込まれたオーディオ認識特性発生組立体250によっ て、オーディオ認識特性が発生される。オーディオ認識特性発生組立体250は 、通常、オーディオ信号調整・サンプリング回路202と、A/D変換・入力バ ッファ回路204と、変換・認識特性抽出モジュール206と、出力回路208 とを含んでいる。より具体的に言えば、一つの放送チャネルからのベースバンド オーディオ信号が回路202に供給される。好適な実施例によれば、オーディオ ベースバンド信号は、ナイキスト判定基準を満足し、音楽および他の音に対する 音声信号内容を強勢するように、回路202によってローパスフィルタされる。 回路202は、テレビジョンオーディオ信号の圧倒的大多数が人間の音声を含ん でいるので、必要な情報内容を犠牲にすることなく処理とメモリ構成とを簡単化 する。回路202からの帯域制限信号が回路204に供給されてディジタル変換 される。回路204からのディジタル化されたオーディオは、変換・認識特性抽 出モジュール206に供給される。モジュール206はオーディオフレーム認識 特性と対応マスク語を発生するために高速フーリエ変換処理(FFT)を利用す る。オーディオ認識特性とマスク語とは出力回路208に供給され、セグメント 認識サブシステム26から出力するのに適当な形に変換される。オーディオ認識 特性発生組立体250は図7Bにおいてより詳細に示されているが、これについ ては 以下に説明する。 図7Bに示すように、オーディオ認識特性発生組立体250はアナログ部分( これはオーディオ信号調整・サンプリング回路202を含む)と、ディジタル部 分(これは回路204および208と、モジュール206とを含む)を含んでい る。この回路202は、自動利得制御(AGC)回路254と、スイッチキャパ シターフィルタ256と、サンプルホールド回路258とを含んでいる。さらに 具体的に言えば、一つの放送チャネルからのベースバンドオーディオ信号が自動 利得制御(AGC)回路254に供給されて比較的均一なオーディオパワーレベ ルを保つ。すなわち、高速フーリエ変換(FFT)処理が正常処理の間オーディ オパワーを蓄積するので、オーディオ入力パワーが比較的大きくなるのを防いで FFT処理されて出力信号のクリッピングを避ける。AGC回路254からの出 力信号はスイッチキャパシターフィルタ256に供給される。スイッチキャパシ ターフィルタ256は、好適な実施例においては、音声のパワー密度スペクトル が3kHzより高い周波数では急速に低下するので、ほぼ3200Hzの周波数で、 3dBロールオフする特性を有している。切換容量フィルタ256からの出力信号 はオーディオ信号捕捉(後述する)のために供給され、そしてさらに、サンプル ホールド回路258を介してA/D変換・入力バッファ回路204に供給される 。別の方法によれば、フィルタされないオーディオ信号がオーディオ信号捕捉の ために供給されてもよいということを理解されたい。 回路204は、アナログ・ディジタル変換器260と先入れ先出し(FIFO )バッファ262とを含む。サンプルホールド回路258からの出力信号は、タ イミング回路266からのビデオ水平同期パルス信号から派生するタイミングあ るいはサンプリング信号を受け取るアナログ・ディジタル変換器260に供給さ れる。好適実施例においては、そのサンプリング信号はおよそ15,260Hzの 周波数をもつ。その結果、変換器260は、受け取ったオーディオデータをおよ そ15,260Hzの抽出速度で抽出する。先入れ先出し回路262からの出力は 、変換・認識特性抽出モジュール206に含まれるオーディオ信号処理装置26 4に供給される。ディジタル信号処理装置264は、受け取ったオーディオ信号 を処理して、データ形式とタイミングがさらなる処理を簡単にするために、ビ デオフレーム認識特性とマスク語のそれぞれに相当するオーディオ認識特性とそ れに応じたマスク認識特性とを発生するように働く。ディジタル信号処理装置2 64のためのタイミング信号は、タイミング回路266から供給される。オーデ ィオ認識特性とそれに応じたマスク語とを含むディジタル信号処理装置264か らの出力信号は、出力回路208に供給される。 出力回路208は、先入れ先出し(FIFO)バッファ回路268と、マイク ロプロセッサ270と、デュアルポートRAM272と、インタフェース回路2 74とを含む。ディジタル信号処理装置264からの出力信号は、先入れ先出し (FIFO)バッファ268を介してマイクロプロセッサ270に供給される。 ディジタル信号処理装置264とマイクロプロセッサ270とはそれに関連する 処理速度が異なるかもしれないので、先入れ先出し回路268は、マイクロプロ セッサに供給するためのディジタル信号処理装置からのデータを一時蓄える。マ イクロプロセッサ270は、インテル80188であってよいが、一定の間隔で 先入れ先出し回路268から受け取ったオーディオ認識特性とマスク語のデータ を抽出するように働く。この抽出されたデータは、その後、デュアルポートRA M回路272を介してインタフェース回路274に供給される。インテル801 88マイクロプロセッサ270からの出力データ信号は、インタフェース回路2 74が16ビット形式のデータ信号を転送するように設計されているとき、8ビ ット形式であるので、デュアルポートRAM回路272は、受け取った8ビット データを一時蓄えてそこから16ビットデータを出力する。 次に、オーディオ認識特性とそれに応じたマスク認識特性との発生時にディジ タル信号処理装置264によってなされる処理を、より完全に記載する。 ディジタル信号処理装置264によってなされる処理は、ある完全な処理順序 がビデオフレーム毎に繰り返されるようなそれに応じたビデオフィールドに同期 する。より具体的には、ディジタル信号処理装置264は、先入れ先出し回路2 62から受け取ったオーディオデータの256語の隣合うものどうしを平均する ことと仮想語を零に設定することによって、その256語を128個の複合デー タ点に変換する。これによって、データ速度は秒あたりおよそ7.6キロのディ ジタルサンプル数に減じられる。FFT処理のための入力データ速度がエイリア シングを避けるような最小サンプリング周波数要求を満足することが理解されよ う。高速フーリエ変換における50%の重なりが、現在のフィールドのための新 しい128個の複合データ点とともに前回のフィールドのために形成された12 8個の複合データ点を使用することによって、得られる。このデータの重なりは 、境界点を含むウィンドウ内でのすべてのデータ点の公正な寄与を認める効果を もつ。 第8図はプロセッサ264が実行する一連の処理段階を一般に示す図である。 入力モジュール300が上記の複素データ点を発生し、次にウインドウモジュー ル302が複素データ点にウインドウ係数を掛ける。これは望ましい実施態様で は、ハニングすなわちコサイン2乗ウインドウ処理である。このコサイン2乗ウ インドウでは、オーディオ信号サンプルの振幅に、角度のコサインの2乗に比例 する係数を掛ける。この角度は対応するフレーム間隔内の各サンプルの時間位置 に対応する。この乗算により、フレーム間隔のどちらかの両端での信号のスパイ クが減り、オーディオデータ信号にある程度の規則性を与え、FFT処理の結果 を改善する。より特定して言うと、高速フーリエ変換処理は元来周期的信号に用 いられるよう設計されているので、変換される信号が実質的に周期的でなければ 、変換された信号がいくつかの周波数帯域に渡って不正確に広がる可能性がある 。コサイン2乗ウインドウに関連するようなウインドウ係数で複素データ点を処 理すると、このように信号が広がる傾向が小さくなる。前に説明したデータの平 均と重ね合わせ処理をコサイン2乗ウインドウ処理と共に用いれば、受信したオ ーディオ信号のフレーム対フレームのタイミング差を最小にする処理の基礎が与 えられ、対象とするオーディオスペクトルの各部への周波数の寄与が等しくなる 。 ウインドウモジュール302が生成する、乗算を行ったデータはFFTモジュ ール304により処理される。FFTモジュール304は適当な重みすなわちト イドル係数を用いて256複素点根−2DIF(周波数のデシメーション)変換 を行う。これはルックアップ表に記憶してよく、ルックアップ表は始動プロトコ ル中に制御計算機30(第2図)からディジタル信号プロセッサ264にダウン ロードされる。FFTモジュール304は256個の異なる帯域フィルタを効果 的に実現する。各帯域のオーディオ信号の振幅と位相の情報を表すFFTモジュ ール304からの出力は振幅2乗モジュール306に送られ、周波数スペクトル 内の各帯域のパワーすなわち振幅2乗値を得る。その結果、FFTモジュール3 04からの位相情報(これは、以下の処理には必要ない)はモジュール306に より放棄され、ここから供給されない。 振幅2乗モジュール306は、FFTモジュール304から出力される複素ス ペクトル点のパワーを表す振幅2乗値を生成する。対称であるため、パワースぺ クトルの最初の半分だけを計算する。2乗演算の結果は30ビットの数字と2ビ ットの符号で、そのうち16ビットだけが保存される。一般に値が小さいので飽 和スケーリング処理が行われ、上位16ビットは、所定の数のビット位置(例え ば6ビット位置)だけ各データ語を左にシフトした後保存される。シフトにより オーバーフローが起こると、得られた語は飽和値FFFF(16進)にセットさ れる。 振幅2乗モジュール306が生成した値を帯域選択モジュール308が処理し 、所定の数の帯域について周波数帯域値を選択する。帯域選択は、始動プロトコ ル中にディジタル信号プロセッサ264にダウンロードされた、ルックアップ表 に記憶されている所定の命令に従って行われる。望ましい実施態様では、16帯 域の周波数帯域値が選択され、有限インパルス応答(FIR)フィルタモジュー ル310により処理される。FIRフィルタ310は、受けた16周波数帯域値 のそれぞれについて15段階の有限インパルス応答フィルタリング操作を行う。 FIRフィルタ310の係数は、望ましい実施態様では低域フィルタリング操作 を行うよう選択されたハミングウインドウ係数であって、手動プロトコル中にデ ィジタル信号プロセッサ264にダウンロードされた、ルックアップ表から供給 される。 同時放送ビデオに関するオーディオ信号タイミングのシフトは放送テレビジョ ンで一般に起こることであって、オーディオ署名発生処理で無視すると、対応す るビデオ署名から位相が外れたオーディオ署名になりうる。これは、入ってくる セグメントをシステム10が合致させる正確度を落とす可能性がある。FIRモ ジュール310は、多数のテレビジョンフレームに渡ってオーディオスペクトル データを平均することにより署名の安定度を向上させ、正しい署名の合致を得る 可能性を増す。 多数のフレームに渡って周波数帯域値を平均することにより、モジュール31 0が行う処理はフレーム対フレームの相関を最大にすることにも役立つ。これに より、いくつかのフレームの間続く、ランと呼ばれる同様な署名のグループを作 る。ランレングスがあることにより、オーディオキー署名を発生することができ る。オーディオキー署名は、システム10が同じオーディオセグメントを再び受 信するとき合致しやすくなり、システムの精度と効率を高める。別の利点は、ノ イズ、量子化、丸めによる誤差は、次第に平均化されるために重要でなくなるこ とである。 次にクランピングモジュール311は、FIRフィルタ310からのフィルタ された出力信号を処理し、フィルタされた出力信号を所定の高と低の値の間にク ランプする。フィルタされた信号を所定の高の値にクランプすることによりその 後の処理中に起こる可能性のあるオーバーフローを防ぎ、フィルタされた信号を 所定の低の値にクランプすることによりゼロで割る可能性を防ぐ。所定のクラン ピング値は、これに従って選択される。例えば、クランプされる平均周波数帯域 値が0−FFFF(16進)の範囲の16ビット語で与えられれば、低いクラン ピング値はF(16進)を用い、高いクランピングの値は3FFF(16進)を 用いてよい。 次にクランピングモジュール311が生成する出力を正規化モジュール313 で処理し、クランピングモジュールにより得られた各値を所定の方法で正規化す る。この正規化を行うには、16のクランプされた帯域値のいくつかについて、 各周波数帯域の上と下の帯域での値の和で各帯域の個々の値を割る。しかし周波 数スペクトルの端では、端帯域の上か下のどちらかの帯域からの値を用いる(ま たは、1つの隣接帯域値だけを用いる)。しかし別の場合には、各帯域の正規化 された値を決定するのに、3帯域からの値を用いてよい。この正規化処理は次の ように表してよい。 正規化Bn=Bn/Badj (6) ただし、Bnは各帯域nのクランプされた値を表し、Badjは隣接帯域のクランプ された値を表す。次の表1は、望ましい実施態様における正規化された値を決 定するのに用いられる隣接帯域を示す。異なる周波数帯域の正規化処理に異なる 数の帯域を用いてBadjを生成することにより、オーディオ署名をキーワードの 中で、より平均して統計的に分配することができる。その結果、あるキーワード の周りのオーディオ信号のクランピングが減少する。 表Iはまた、テレビジョン音声信号の音声内容に主として基づくサイン(Sign ature)発生技術に対する周波数帯域の有益な選択をまとめ上げている。帯域1 ないし16のおのおのは、30Hzの帯域幅を有している。しかしながら、帯域及 び/又は帯域幅に関する異なった選択を採用し得ることがわかる。各帯域Bnに 対しBadjを生成する際、異なる周波数での時間遅れの差による如何なる歪をも 最小化することから、近くの帯域からの値を用いることが好ましい。即ち、 実質的に異なる周波数の信号は、実質的に異なる周波数遅延を体験できるが、相 対的に近接した周波数の信号は、一般に、同様の角度に遅延する。 正規化モジュール313によって生成される正規化帯域値は、次いで、サイン 発生モジュール312によって処理される。詳述すると、対応する音声フレーム 間隔のおのおのに対し、6つのこういった正規化帯域値は、6つの周波数帯域の おのおのに対し1つ設けられているサイン発生モジュール312に供給される。 サイン発生モジュール312は、6ビットの音声サインを生成すべく、ナウーゼ ン(NOW−THEN)処理技術を利用し、この結果、対応する周波数帯域の現 在値(即ちナウ値(NOW value))、及び所定のフレーム・オフセットによ って、現在のフレーム以前のフレームから生成された同一の周波数帯域の予め求 められた値(即ち、ゼン値(THEN value))に基づいて、各サインビット が得られる。更に詳述すると、受信された正規化周波数帯域値は、ナウーゼン円 形バッファ(NOW−THEN circular buffer)に書き込まれ、所定のフレ ームオフセットを利用して、ゼン値が得られる。フレームオフセットは、帯域か ら帯域にかけて変化し得る。しかしながら、有益な実施例に従って、6つの周波 数帯域のおのおのに対してゼン値を得るのに、8のフレームオフセットが利用さ れる。サイン発生モジュール312は、以下の関係に従って、各周波数帯域に対 して値DVALを生成する。 DVAL=(NOW−THEN)/(NOW+THEN) 現在のフレームに対する音声サイン中の16ビットのおのおのの値と、対応す るマスクワードのビット値とが、値DVALに従って決定される。即ち、対応す る帯域に対するDVALが0より大であれば、サインビットは0に設定され、さ もなくば、サインビットは1の値に設定される。同様に、対応する帯域に対する DVALの絶体値が、所定の保護帯域値GRDVALに比して大であれば、各マ スクビットを0の値に設定する。例えば、DVALが0〜7FFF(Hex)の範 囲を有すれば、GRDVALの異なった値は、受容可能な結果をもたらし得るが 、600(Hex)の保護帯域値を用いることができる。生成された音声サイン、 及び各フレーム間隔に対するその対応するマスクワードは、この後、前述した音 声デジタル信号プロセッサ264から供給される。 開示された技術は、所定のサインにおいて比較的多くの情報を含むと共に、サ インに含まれる情報の幾つかの型式に関するより優れたバランスをもたらすため に、複数の周波数帯域のおのおのに対して丁度良いときに置換された対応する周 波数帯域値を比較する、音声サインを生成するための前記技術は、周波数または 時間置換値にのみ基づく技術をりょうがする諸利点をもたらすことができること が認められる。エキスパート・システム エキスパート・システムは、制御コンピュータ30中に記憶されると共に、発 生フィルタとして識別される多数の「サブ−モジュール」またはプログラム、新 しいセグメント検出及び選択的捕獲レベルのサブ−モジュールを含んだソフトウ エア・モジュールである。エキスパート・システム内に含まれるこれらのサブ− モジュールのおのおのについて、ここで詳細に説明する。発生フィルタ 前述したように、発生一致データは、第1図によって図示されたようなレポー ト13中の編さん物に対して、各局所位置16から中央位置に供給される。こう して、システム10の全体の精度を向上させると共に、中央位置12のワークス テーション・オペレータによって費やされる時間を最小化するのに、局所位置1 6から供給された誤った一致データの量を低減することが望まれている。 基本的に、発生フィルタ・サブ−モジュールは、セグメント認識サブシステム 26から一致レポートを受信して、もしあれば、これらの受信した一致レポート のうちのどれが間違ったまたは誤った一致レポートであるのかを査定する。次い で、誤った一致レポートが中央位置12に伝送されるのを回避すべく、これらの 検出された誤った一致レポートは、制御コンピュータ30のデータベースから除 外される。 一致レポートが間違っているかどうかを査定すべく、発生フィルタは、複数の 所定の規則に従って、セグメント認識サブシステム26から受信した各一致レポ ートを検査する。これらの所定の規則の好ましい組について、第9図に図示した フローチャートを参照して説明する。 第9図のステップS10に示すように、受信した一致が明確に受容可能である かについて、決定がなされる。(1)それぞれのセグメントに対する音声サイン及 び映像サインの双方が一致しているか、または(2)それぞれのセグメントの開始 及び終了の双方が一時的に「強いキュー(Strong cues)」と符号すれば、一致 は明確に受容可能であるという、2つの条件のうちの少なくとも一方を満たせば 、一致は、明確に受容可能であると決定される。発生フィルタに用いられている キューは、発生フィルタによって査定中の特定の一致以外の受信した信号の特性 である。発生フィルタによって用いられる強いキューの例は、直前または次の信 号セグメントの一致と同様、フェード−ツー−ブラック(fade-to-black)(特 に、映像信号のフェード−ツー−ブラック)である。受信した一致が明確に受容 可能であると判明すれば、即ち、一致が前述した条件のうちの一方を満たしてい れば、一致結果は、ステップS20で示すように、制御コンピュータ30のデー タベースに記憶される。 一方、ステップS10でNOによって示されるように一致が明確に受容可能で あると判明しなければ、ステップS30で示すように、一致が「明確に」受容不 可能であるかについて決定がなされる。一致が明確に受容可能でなく(ステップ S10で決定されたように)、対応するセグメントの何れの終了においても強い キューを有せず、かつ、その対応するセグメントが、明確に受容不能であると判 明した一致を有する別のセグメントと実質的にオーバーラップすれば、一致は、 明確に受容不可能であると決定される。一致が明確に受容不可能であるとして決 定されれば、該一致は、ステップS40で示されるように、拒否され、この結果 、該一致に関する情報は、制御コンピュータ30のデータベースには記憶されな い。 しかしながら、ステップS30によって示されたように、一致が明確に受容不 可能であれば、それぞれのセグメントが1つの終了において強いキューを有する かについて、ステップS50において決定が行われる。それぞれのセグメントが その1つの終了にて強いキューを有することが決定されれば、以下においてより 詳細に説明する、ステップS60によって示される確認整合に、受信された一致 がかけられる。この状況では、以下において説明するように、ステップS90で 用いたものに比較して、厳しさの少ない許容範囲が、確認整合の際に利用される 。即ち、ステップS60の確認整合プロセスは、ステップS90の場合に比して 比 較的高い一致エラーを有するサイン間の一致を見い出すこととなり、この結果、 一致は、ステップS60で一層受容され易くなる。確認整合プロセスの結果は、 当該一致が拒否すべきかまたは受容すべきかを決定することとなる。 一方、ステップS50のNOによって示されるように、それぞれのセグメント が1つの終了で強いキューを有しなければ、それぞれのセグメントが、一般に誤 った一致であるセグメントのプロファイルと適合するかについて、ステップS7 0で、決定が行われる。それぞれのセグメントが、誤った一致のセグメントのプ ロファイルと適合すれば、ステップS80で示されるように、一致は拒否され、 該一致に関する情報は、制御コンピュータ30のデータベースには記憶されない 。 それぞれのセグメントが、誤った一致のセグメントのプロファイルと適合する か否かを決定すべく、それぞれのセグメントに対して、誤った一致比率Rが決定 される。この種の誤った一致比率は、複数の特性のそれぞれのものと関連する数 値比率を線型式に組み合わせることによって決定される。これらの特性は、以下 の項目を含むことが好ましい。 1.各セグメントのレングスL:比較的短いレングスをもつセグメントは間違っ た整合をしがちである。 2.キーシィグニチャーEのエントロピー:キーシィグニチャーのエントロピー はキーシィグニチャー中の整合ワード間の不一致の一つの指標であるとともに整 合ワード間の相間関係へ関係付けられる。キーシィグニチャーエントロピーは後 述するようにキーシィグニチャー発生器によって定められる。そして、キーシィ グニチャーエントロピーはその後、対応する整合リポートにそってセグメント認 識サブシステム26から供給される。比較的低いエントロピーを持つキーシィグ ニチャーは比較的高いエントロピーを持つそれに比べて、より間違った整合をし がちである。 3.相関エラ一閾値(correlator error threshold)T:比較的高いエラー閾値 をもつセグメントは間違った整合をしがちである。 4.整合ミスからの距離D:現実の相関エラーがカウントし、相関エラー閾値に 近い整合は間違った整合をしがちである。 5.評価された整合は音声信号又は画像信号のどちらに基づいているか(M): 画像信号に基づく整合は音声信号に基づいたものより間違った整合をしがちであ る。 偽のマッチングの割合を発生する方法に関する1つの実施例によれば、ゼロと 1の間の数値が、特性L、E、T、Dに割り当てられ(特性Mはこの実施例では りようされない)、割り当てられた値の線形な組合わせが形成され、次に示す偽 のマッチングの割合Rを発生する。 R=W1 L+W2 E+W3 T+W4 D ここに、W1からW4は、偽のマッチングの割合Rを決定するときに、それらの数 値の相対的な重要性を決定する各特性にそれぞれ割り当てられた数値の重みであ り、特性L、E、T、Dは変換されて、ゼロから1のスケールに正規化されてい る。テレビジョンコマーシャル認知システムの場合、Rの高いほうの値は、偽の マッチングが起こる確率が相対的に低いことを表しており、下の表IIに示すよう に、代表的な値が特性Lに対して割り当てられている。 この例では、エントロピーEがゼロから256のスケール計測されており、2 56は最大のエントロピーであることを表している。Eに対する正規化された代 表的な値は下の表IIIに示されている。 したがって、エントロピーの値が大きくなるほど、Eに割り当てられる値が高く なり、高いほうのエントロピーの値に対する偽のマッチングの起こり易さは減少 することが示されている。 さらにこの例では、20から60に及ぶエラーしきい値を表す特性Tは、下の 表IVに従ってゼロから1の値が割り当てられている。 表IVにより示されるように、高い値のエラーしきい値は、比較的低い値のTに割 り当てられており、比較的高いエラーしきい値に対する偽のマッチングの確率は 、相対的に低いことが示されている。 実際の相関器のエラーカウントとエラーしきい値との間の相違を表す特性Dの 代表的値は、下の表Vに従って値が割り当てられている。 つまり、実際の相関器のエラーカウントとエラーしきい値との間の相違が大きく なるほど、偽のマッチングの確率は小さくなる。 この例では、最終的に重みW1からW4に、下の表VIに記載されている値が割り 当てられる。 各重みの和は1.00になるように選ばれている。したがって、値L、E、T、 Dはそれぞれ正規化されていて、各値はそれぞれゼロから1の範囲に落ちるので あるから、偽のマッチングの割合Rも同様に(偽のマッチングの高い確率を表す )低い値のゼロから(偽のマッチングの低い確率を表す)高い値の1の範囲にお さまる。 ステップS70のNOで示されるように、ステップS70で、それぞれのセグ メントが、偽のマッチングになるセグメントのプロファイルに適合しなければ、 ステップS90で示すように、確認マッチング(confirmation matching)に所 属する。ステップS90の確認マッチングに利用される許容範囲は、前に注意し たようにS60で利用される許容範囲よりも厳しい。さらにS60のときのよう に、ステップS90の確認マッチングのプロセスの結果は、それぞれのマッチン グが受容されて、制御コンピュータ30のデータベースの中に格納されるか、そ れとも棄却されるかを決定することができる。 出現フィルタ(ocurrence filter)のべつの機能は、受信したマッチングが、 新しいセグメントを配置するキューあるいは他のマッチングを揃えるキューのい ずれかを決定することである。基本的には、マッチングがキューとして使用でき るか否かを判断するために使用されるプロセスは、受容できるマッチングか否か を決定するとき上に説明したプロセスと実質的に同一である。しかし、2つの例 外がある。すなわち、(1)続いて起こるマッチングが、前のマッチングに揃えら れることができる場合、あるいは後続のマッチングに基ずいて新しいセグメント を見つけることができる場合、受容不可能であるとして現れ、そしてどの強いキ ューにも近くないマッチングをキューとして使用できる。(2)1端において強い キューを持つが、偽のマッチングが起こる割合の高いセグメントは、上に説明し たようにキューとして使用されない。しかし、例外(2)では、確認マッチングは 後で受容可能なマッチングを指定しそのマッチングはデータベースに報告される 。 データ取得システム28の内部に含まれている記憶バッファは、予め定められ た制限量のデータしか保持できない。そのために、出現フィルタは、オーディオ データおよびビデオデータがセグメントに対して集めることができるように、適 時の方法で動作あるいは反応するが、たとえば、以下に説明する通りキャプチャ ーレベル1を持つ新しいセグメントのように、セグメントはこのようなデータの 集まりが必要である。 例えば、マッチング確認(これは、比較的時間を消費するものである)が必要 になる場合、マッチングか受入れ可能か否かを決定するために必要な情報が、発 生フィルタに課せられた制約時間内において、得られることはあまりない。即ち 、このマッチングを受入れ可能かどうかを決定するために必要なすべての情報は 、マッチングレポートがコントロールコンピュータ30に供給される時には得ら れ ない。このような問題を解決するために、マッチングが報告された時に、この発 生フィルタによって、各々のセグメントに対応するマッチングを受入れるべきか どうかを予じめ決定する。マッチングが予め受入れ可能(または、最終的に、受 入れ可能)な場合には、その旨をデータベースに報告し、これに対して、このマ ッチングが受入れ不可能な場合には、それをデータベースに留めておくものとす る。例えば、約数分経過した後に、これら予じめ定めた事項の結果を再考する。 この時間期間中、このマッチング確認処理が完了する。これらマッチング確認結 果に基いて、当初、コントロールコンピュータ30のデータベースに供給されて いなかったマッチングが、現在、受入れ可能であることがわかると、このマッチ ングを、データベースに受入れ可能なマッチングとして供給する。一方、当初か ら受入れ可能であることがわかっており、且つ、データベースに報告されていた マッチングが、現在、受入れ不可能であると決定されると、マッチング無効(撤 回)信号が発生され、対応のマッチングを削除するようになる。一般に、当初に おいて、確実に受入れ可能または受入れ不可能であるものと決定されているマッ チングは、これらの決定が誤りなくなった時以降、予じめ決められた時間には、 再考されない。しかし乍ら、マッチング用のオーディオまたはビディオサイン( 記るし)が、他の対応するビディオまたはオーディオサインに対してマッチング が見つかる前に、明らかに受入れ不可能であるとわかった場合には、それにも拘 らず、この最初のサインのマッチングを受け入れるものとする。この理由は、こ れら対応のビディオおよびオーディオサインの両方がすでにマッチングされてい るからである。 再び図3を参照して、エキスパートシステム414の発生フィルタによって、 セグメント認識サブシステム26からのマッチングレポートを受信すると共に、 このようなレポートは、マッチングに失敗したレポートであるかどうかを決定す る。 前述したように、或る状況の下では、マッチング確認を要求することもでき、 この要求の下で、セグメント認識サブシステム26ならびにデータベース412 からのキーサインを利用して、マッチング確認モジュール422によって、この マッチングが受入れ可能かどうかを決定する。このマッチング確認結果を所定時 間内に発生フィルタに供給する。この発生フィルタによって、受入れ可能である と決定されたマッチングをデータベース412に供給する。この発生フィルタに よって、後で受入れ不可能であるとわかるマッチングがデータベースヘ予じめ供 給されていた場合には、この発生フィルタは、マッチング無効信号をデータベー スコントロール416に送給して、これから関連するマッチングを削除する。マッチングの確認 マッチング確認モジュールは、コントロールコンピュータ(図2)内に設けて あり、且つ、これを利用して、上述した種々の条件の下で、発生フィルタに対し ての要求発生時に、受入れ可能性を質疑するマッチングを評価する。例として、 或る状況の下では、オーディオサブサインまたはビディオサブサイン(しかし、 これら両者ではない)が互いにマッチング(一致)する。この場合、この発生フ ィルタによって、マッチング確認を要求して、当初において、認識コントローラ においてマッチングしていなかったサブサインを、以下の時に、所定のキーサイ ンとマッチングしているものと見なせるかどうかを決定できる。即ち、マッチン グエラーの許容値より更に大きな標準値と比較する場合である。 このマッチング確認モジュールによって、マッチング処理が行われ、この処理 は、セグメント認識サブシステム26内のコントローラ(図3)によって利用さ れる処理に類似している。しかし乍ら、相関器で行われている、キーワードと、 オーディオ/ビディオサインの連続列とのマッチング処理とは異なり、このマッ チング確認モジュールによって、1つのキーサインに対して、放送セグメントの 1つの短かい長さのものをマッチング処理する。この結果として、このようなマ ッチング確認処理に併なうマッチング失敗は、相関器によるマッチング処理に併 なうものに比べて少なくなる。従って、このマッチング確認プロセスに対するエ ラー許容値は、受入れ不可能な失敗マッチングレートを増大させることなく、相 関器によるマッチング処理による許容値より、かなり低くできる。このようなエ ラー許容値を低くできることによって、このマッチング確認モジュールは、例え 、相関器によって受入れ不可能と決定されていても、サインまたはサブサインは マッチングしていたかどうかを決定できる。 再度、図3において、エキスパートシステム414の発生フィルタモジュール から、マッチング確認要求がマッチング確認モジュール422へ送給できる。こ のような要求には、セグメント識別番号、セグメント開始/終了時間、放送チャ ネルおよび所望の情報マッチング許容値が含まれている。このようなマッチング 要求信号を受信すると、このマッチング確認モジュールによって、所要時間に亙 り、セグメント認識サブシステム26からセグメントサインデータおよび、デー タベース412から関連したキーサインが要求される。このような要求情報を受 信した後で、このマッチング確認モジュール422は、単一のキーサインと放送 信号の要求された部分またはセグメントとを、所望のマッチング確認許容値に従 って比較し、更に、この比較動作が完了すると、比較結果(即ち、マッチング可 能または不可能)を発生フィルタモジュールに供給する。 このマッチング確認モジュールによって、このような比較処理が実行され、こ れは、図10に示したようなセグメントサインに沿ってこのキーサインを効果的 に移動し乍ら行なう。本質的には、期待されたマッチングゾーン内における初期 位置において、このキーサインはセグメントサインと整列すると共に、以下に示 したマッチング確認プロセスに基いてマッチングが実行される。これらマッチン グ確認のまとまりの各々もまた、キーサインを、元の位置からそれぞれ±1,2 ,3,・・・Nフレームだけオフセットした位置において整列させることによっ て実行される。即ち、図10において、Nは、予期されたマッチングゾーン内の 位置の一側においてチェックすべきフレームの数を表わす。また、m(o)は、 それぞれのキーワード(これは、マッチング確認において、簡単に、他のマッチ ングワードとして取扱われる)を表わし、およびm(x)は、x番目のマッチン グワード(ここで1≦x≦8)を表わす。一般に、マッチング確認モジュールに よって、(2N+1)回のマッチング動作のすべてにおいて、最小の合計エラー 計数を演算する。ここで、このモジュールによって、キーサインに永久的に割当 てられたエラースレッシュ・ホールド値の合計値と、キーサインとを比較すると 共に、マッチング確認許容値とを比較することによって、マッチングが発生した かを決定する。 特に、このマッチング確認モジュールによって利用されているアルゴリズムは 、多くの場合に、相関器420によって利用されているアルゴリズムに対応する 一 方、或る差異が存在している。これら差異を、図10を参照し乍ら、以下に詳述 する。 実行したマッチング確認の各々に対して、それぞれの部分エラーカウントPが 、このマッチングワードをセグメントサインからの対応のフレームサインとを比 較することによって、キーサインマッチングワードの各々に対して生成される。 次に、エラーカウント(個数)の合計値が、実行されたマッチングの各々に対す る最少の部分エラーカウントの数R(これには、8の典型値が含まれている)を 合計することによって決定される。好適実施例において、このキーワードは、単 に、もう1つのマッチングワードと考えられるので、各々のキーサインには9個 のマッチングワードが含まれている。従って、各マッチング処理に対する合計の エラーカウントを演算するに当り、最大の(最悪)のエラーカウントを有する部 分エラーカウントを利用しないようにする。これら実行したマッチングの各々に 対する合計のエラーカウントは、図7で示したような元の位置の配置の前後の両 方におけるN個のフレームに対して演算される。このN個の値を注意深く選択す る必要があり、その理由は、このN値が余りにも大きいと、失敗するマッチング が発生する一方、余りにも小さいと、受入れられるマッチングを検出できる。一 実施例において、このN値は、60の値を有する。最小値を有するエラーカウン トの合計値を、最終エラーカウント値として選択する。次に、この最終エラーカ ウントを調整して、放棄した部分エラーカウントのいずれかを捕獲する。一好適 実施例において、この調整は、以下の関係式を利用して実行される; 調整した最終エラーカウント=(最終エラーカウント)(8/R)。 マッチング確認モジュールによって、キーサインと組合わされたエラーカウン トまたはエラースレッシュホールドが、マッチング確認許容値によって特定化さ れるエラーカウントだけ増大して、エラースレッシュホールド値が得られる。次 に、このマッチング確認モジュールによって、この調整された最終エラーカウン トと、エラースレッシュホールド値とを比較する。この調整された最終エラーカ ウントがエラースレッシュホールド値より小さいか、または等しい場合には、マ ッチングが存在しているものとし、ここで、マッチング成立を表わした信号を、 マッチング確認モジュールから発生フィルタモジュールヘ送給する。他方、この 最終エラーカウントがこのスレッシュホールド値より大きい場合には、マッチン グが存在していないものとし、ここで、その旨を表わした信号が発生フィルタモ ジュールに送給される。新しいセグメントの検出 関心のある(例えばコマーシャル的に)新しいセグメントが受信されていたか どうかの決定を利用して、ワークステーションのオペレータに与えられた情報を 、そのような新しいセグメントの識別用に決める。再び図1に戻り、ローカルサ イト16によってセグメントが、関心のある完全に新しいセグメントとして識別 できる場合には、例えば、実際上、ワークステーションのオペレータでない場合 (これを、“にせ物”と称す)、これらセグメントを識別することは時間の無駄 である。このローカルサイト16によって、このセグメントを正確に描けない場 合には、例えば、関心の新しいセグメントに対して、オーディオ/ビディオ情報 の一部のみをオペレータに与え、このオペレータの時間が無駄となり、且つ、シ ステムの精度が減少する。 新しいセグメントの検出が、エキスパートシステムによって実行されると共に 、数種の明瞭なおよび不明瞭な指示に基いて最初に行われる。通常、明瞭な指示 が、セグメント認識サブシステム26から受信され、これには、例えば、ビデオ 黒レベルへのフェード、サブマッチレポート、オーディオミュートおよびシーン 変化を包含できる。他方、不明瞭な指示の例としては、セグメント継続時間であ る。これら指示の各々について、以下の新セグメント検出モジュールの動作に基 いて以下詳述する。 代表的には、コマーシャルは、各終了部において、ほぼ黒のレベルを有する、 少なくとも1つのビディオフィールドが放送されている。コマーシャルは、これ の各終了部に、僅か1つの黒のフィールドを有している筈なので、ビディオ信号 のいずれのフィールド上の黒レベルへのフェードが、各々のチャネルボードによ って、セグメント認識コントローラを介して新しいセグメント検出モジュールに 報告される。従って、コマーシャルの境界を、黒レベルへのフェードによって表 示することが可能となり、ここで、この境界は、通常、このような黒レベルへの フェードの開始または終了となる。しかし乍ら、或る場合には、実際のコマーシ ャルの境界が、この黒レベルへのフェードの中央に存在することもある。これは 、以下の場合に起る。即ち、ほぼ黒に近いシーンが黒として検出されるか、また は、実際の黒レベルへのフェード動作中に、ビディオ信号が、このフェードが完 了する前に、次のコマーシャルまで、フェード開始する場合である。このように 、コマーシャルの境界に相当しないと共に、新しいセグメント検出モジュールに よって検出できないような、黒レベルへのフェードが、時々発生するが、このよ うなスプリアスフェードの数は、オーディオミュートやシーン変化の数に比べれ ば、かなり少ないものであり、以下説明する。 エキスパートシステムの発生フィルタによって受入れられたマッチングを指示 として利用する。前述したように、セグメント認識サブシステム26によって、 失敗したマッチングのレポートを発生できるが、この発生フィルタは、失敗した マッチングレポートの大部分を識別できると共に、除去できる。この結果として 、発生フィルタによって受入れ可能であると決められたマッチングは、信頼性の ある指示である。このようなマッチングは、また、現在考慮中のセグメントの一 方の終端部または両端部上で、黒レベルへのフェードと組合せるか、または単独 で、比較的強力な指示と考えられる。 例えば、一般に、コマーシャルは、グループまたはポッドで放送され、一つの コマーシャルの終りは、次のコマーシャルの初まりに対応しているので、受入れ 可能なマッチングの検出は、コマーシャルが続いていると強力に表示されるもの である。受入れ可能であると決定されたマッチングは、また重要な指示(キュー )であり、これによって、エキスパートシステムに対して、新しい関心セグメン トが何れでも見つからないことを通知する。例えば、新セグメント検出モジュー ルによって、セグメント中に新しいセグメントを探し出し、これらセグメントは すでに受入れ可能なマッチングを有している。即ち、新しいセグメントと異なり 、エキスパートシステムによって組合わされた受入れ可能なマッチングをすでに 有したセグメントを、前述したように、オペレータによる分類のためワークステ ーション14の1つに送給する必要はない(この理由は、このような分類は、す でに検出されてしまったマッチングに対して、明らかに実行されているからであ る)。 通常、受入れ可能なマッチングの終端によって、次のセグメントの開始または 、本当の境界を表わす黒レベルへのフェードの開始を表わすが、このマッチング 指示は、正確に、時間的に知られていない。これらマッチングが連続して数フレ ーム中に発生するので、各マッチング(オーディオおよびビディオ)は、これと 組合わされたピーク幅を有し、これは、各マッチングに対する時間的な不確実性 に比例している。このような不確実性を補償するために、新セグメント検出モジ ュールによって、可能な場合には、何時でも、例えば、もう1つの受入れ可能な マッチングや黒レベルへのフェードのような他の強力な指示を利用して、各マッ チングを整列する。 仮の識別番号(ID’s)に基いたマッチングによって、永久ID’sに基い たマッチングによって表わされたセグメントとは異なるセグメントを表わすこと もできる。即ち、この仮のID’sに基づくマッチング(これらマッチングは、 ワークステーションオペレータによって分類されていない)は、セグメントの一 部分のみ表わすことができるのに対して、永久ID’sに基づくマッチングは、 ワークステーション14の1つにおけるオペレータによって、観察されると共に 、正しく判断されている。好適には、エキスパートシステムの新セグメント検出 モジュールによって、これらマッチング間を区別する。これらマッチングは、異 なるタイプのIDを有するサインと共に得られ、永久IDサインを有して得られ たマッチングに対して大きな重み付けされる。 ほぼ無音を表わすレベルまで、音声信号を低下させることを表わす音声ミュー ティングは、典型的には、コマーシャルの境目で発生する。しかし、音声ミュー ティングはコマーシャルと共に通常のプログラムのような非コマーシャル・セグ メントの全般にわたって極めて一般的なことなので、大多数の音声ミューティン グは、コマーシャルの境目を表示しない。従って、音声ミューティングに従って セグメントの両端を検出することは、注目対象のセグメントとして通常のプログ ラミングの相当量を選択したり、あるいは2つの部分的なセグメントヘ一つのコ マーシャルを間違って分割する恐れがあって、いずれも後で正しく一致しないも のとなる。従って、音声ミューティングは前述のフェード・ツー・ブラック又は 許容一致キューよりも相対的に弱いキューが考慮される。その結果、キューとし て音声ミューティングの使用を規制する必要があり、さもなければ過度のシャッ フ(Chaff)を発生させることになる。更に、音声ミューティングがコマーシャ ルの境目を示すときは、このコマーシャルの境目は音声ミューティングの開始又 は終了に正確に位置しないことがあり、その代わりに音声ミューティング内の定 義されていない何らかの位置に存在し得る。その結果、長い音声ミューティング は、典型的には、コマーシャルの開始及び終了の正確な位置が不確かなために、 キューとして使用できない。 シーンの切り替え、フレーム間で発生する映像の画面が突然変化することにな る。コマーシャルの境目で発生するシーンの切り替えに加え、複数のセグメント 内でのシーンの切り替えは一般的なことなので、シーンの切り替えには比較的に 弱いキューが考慮される。それでも、シーンの切り替えには大きな助けとなる。 例えば、境目でフェード・ツー・ブラックを有しない多くのコマーシャルは、そ の個所でもシーンの切り替えがある。シーンの切り替えそれ自身は前述のように 弱いキューとなるが、シーンの切り替えは、音声ミューティングと組合わせられ て強いキューを形成するようにしてもよい。例えば、シーンの切り替えを用いて 、音声ミューティング内のコマーシャルの境目を位置決めさせてもよい。暗黙キュー 更に重要な暗黙キューのうちの一つは、セグメントの長さである。典型的には 、コマーシャルは標準長即ち公称長により、例えば10、15、20、30、4 5、60、90又は120秒により放送される。これらのコマーシャルの長さの うちのいくつかは、他のものより頻繁に発生する。特に、特に30秒コマーシャ ルは、最も頻繁に発生すると考えられる。種々のコマーシャルの長さの発生頻度 は、以下のように表わされると考えられる。ただし、コマーシャルの長さt(秒 )の発生頻度をCLtにより表わす。 CL30>>CL15>>CL10>CL80> [CL20、CL120、CL90、CL45] 従って、例えば、10秒の長さのコマーシャルは、60秒の長さのコマーシャル より頻繁に発生すると考えられる。より頻繁に発生する長さのものの間隔は、よ り発生頻度の小さな長さのものの間隔より強力なキューを与えると考えられる。 通常のセグメント長からの偏移は、セグメント長のキューの一部でもある。具 体的には、注目対象のコマーシャル即ちセグメントは、このようなセグメントの 公称長(例えば30秒、15秒等)と殆ど一致しない。その代わりに、これらは 公称上では、対応する公称長よりやや短いか又は長い。セグメントは、典型的に は、対応する公称長より長いというよりか短い。即ち、注目対象の各コマーシャ ル即ちセグメントは所定のブロック時間内に収まるように制作されるので、公称 長よりやや短い注目対象のセグメントを有するようにすることは、それほど厄介 なことではないので、所定のブロック時間内に収まるように注目対象のセグメン トを編集する代わりに、フレーム(例えばフェード・ツー・ブラック)を付加し てもよい。対応する公称長より長いセグメントは、公称上では、エラーが放送局 又は受信局で発生した結果である。例えば、新しい注目対象のセグメントに関し て最も可能性のある長さの偏移は、約−0.13秒に位置するピークにより、約 0.0〜−0.2秒の間で存在すると考えられる。各セグメントにおいて、典型 的には、セグメントの長さはピークの公称長から更に偏移し、より可能性の低い セグメントは注目対象のセグメントである。理解されるように、セグメントが注 目対象のセグメントである確率は、セグメント長が公称長から減少するに従って 急速に減少する。 前述のように、注目対象のコマーシャル即ちセグメントは、典型的には、複数 グループ即ちポッド(pod)による放送であるから、新しい一つのセグメントを 検出したときは、これに新しい他のセグメントを隣接させてもよいことを表わし ている。従って、新たに検出されたセグメントは新しい他のセグメントを検出す るためのキューである。しかし、新しいキューの強さは、あるキューが新たに検 出されたセグメントは注目対象の新しいセグメントであるという可能性に依存し ているので、更に新しいセグメントに基づくキューに依存する。 所定の長さを有する新しいセグメントを検出する可能性は、注目対象のセグメ ント(換言すれば、シャッフ・セグメント)に対応していないある種のキューと 共に、選択した長さから独立しているとみなされる。前述のように、注目対象の 新しいセグメントとして、シャッフ・セグメントを解釈すると、システム10( 第1図)の処理時間を増加させるので、従って、複数のセグメント、できる限 り、注目対象の新しいセグメントに対応した可能性のある時間間隔即ちセグメン ト長を有する注目対象の新しい複数のセグメントを選択することが望ましい。 従って、先に言及したように、共通であると信じられる30秒の長さを持った セグメントを探索するためにオペレータ時間を費やすことは、それほど頻繁に起 こらないと信じられている45秒の長さのセグメントを待つオペレータ時間を費 やすよりもより生産性が高いと考えられる。オペレータ時間のこの配分が45秒 の新セグメントが30秒の新セグメントよりも検出されそうにないという意味を 持つ一方、その結果は運転コストを最小限にするとともに、全体的なシステムの 正確さとなる。 図11は、検出プロセスを実行するときの信号の流れを示す。与えられたチャ ンネルの所望の放送信号がそれぞれのコンバータ24の一つで受信され、ベース バンドの映像と音声の信号に変換され、チャンネルボード402に供給される。 チャンネルボード402は、関心のある新しいセグメントに付随するキューをセ グメント認識制御部404に与え、セグメント認識制御部404はまた相関器4 20から一致情報受ける。キューは一致報告とともにセグメント認識制御部40 4からエキスパートシステム414に供給される。エキスパートシステム414 は、受け取った情報を検討して、キューによって示される可能な新たなセグメン トが関心のある新セグメントかどうか決定する。もしも、示されたセグメントの どれかが関心のある新セグメントであると判った場合には、エキスパートシステ ム414はセグメント認識制御部404に信号を供給して、集められてエキスパ ートシステムに供給されたセグメント記号の各々を要求する。エキスパートシス テムで受け取ると、その新しいセグメント記号はデータベース制御部416を介 してデータベース412に供給される。さらに、エキスパートシステムからデー タベース412に供給された関連する信号としては、発生時間、チャンネル、セ グメント認識番号、キー記号及び音声と映像スレッショールド値を含む。さらに 、ある状況では、先に説明したように、エキスパートシステム414は初期A/ Vキャプチャーあるいはスレッショールド値信号をデータベース制御部416に 最終スレッショールド値を決定する前に供給してもよい。そのような状況で、も し初期スレッショールド値が正しくないと後で決定されると、エキス パートシステム414はスレッショールド値の変更あるいは無効の信号をデータ ベース制御部416に供給してデータベース412の内容を訂正する。 新セグメント検出モジュールの動作についてこれから説明する。 ひとつの動作ノードに従って、新セグメント検出モジュールは受けとった信号 のキューを走査して関心があるセグメントの標準長さのセグメントを検出する。 そのようなインターバルを持ち、以下に示す所定の基準を満たす検出された第1 のセグメントは関心のある新セグメントとして受け入れられる。そのような要求 を満たす第1のインターバルが受け入れられるので、それとは競合する引き続く 新セグメント(すなわち、同じ期間に発生する他のセグメント)は考慮されない 。従って、検出され受け入れられたセグメントは以後説明するようにキューが走 査された順に従う。 ノードが確立されているキューデキュー(cue deque)にキューがいかなるキ ューのオンーオフ遷移がある度に記憶される。これらのノードは時間ごとに分類 される。一致がキューとしての使用が受け入れられると決定された場合、一致は 発生フィルタによってデキュー(deque)に供給される。これらのキューは、デ キューの開始位置あるいは所望の時間を指定することにより走査される。もし、 時間が与えられると、所定の固定時間遅延(例えば、約80秒)後に発生したデ キューの最新点が初期走査時間として使用されキュー報告と比較されるように一 致報告における遅延を補償する。 キューは一回以上のパスでスキャンされ、好ましい実施例では、二回のパスが 採用される。最初のパスでは音声ミュート(audio mutes)を除く全てのキュー がスキャンされ、二回目のパスでは音声ミュートに基づくセグメントのキューが スキャンされる。このスキャンプロセスについてさらに詳細に説明する。 キューは時間利用二枝ループ(time utilizing two nested loops)を逆向き にスキャンされる。外側のループでは、デ・キュー(deque)はセグメントの末 尾(最後)に適切なキューのために逆向きにスキャンされ、内側のループではデ ・キューは新たなセグメントの先頭に適切なキューを探す為に現在の末尾位置か ら逆向きにスキャンされる。この様にして、両端にそれらしい(plausible)キ ューを有する全ての可能性を有する新たなセグメントが検知される。各々の時間 間隔 が評価され、個々の長さと関連したキュー形式が与えられ、対象となる受け入れ 可能な新たなセグメントを表すか否かが決定される。すなわち、新セグメント検 知モヂュールは、個々のセグメントに関して、キュー形式が受け入れ可能か否か を判別し、さらに、セグメントの長さがこれらのキューとの組合せで対象となる 受け入れ可能な新たなセグメントとなるか否かを決定する。 もし間隔が対象となる新たなセグメントと示された場合には、セグメント識別 番号が割当られ、一つの事象としてキュー・デキューに格納される。その後、選 択獲得レベルモジュールが適用されて、以下に述べる様に、適切な音声/映像獲 得レベル値が決定される。さらに、セグメント認識サブシステム26からセグメ ント・シグネチャー(segment signature)が得られ、対応するシグネチャーが 制御コンピュータ30のデータベース412に供給される。 図12には、新セグメント決定モジュールにより実行される上記ステップが図 示される。この図に示された様に、ステップS100で処理が始まり、このステ ップで受信された放送の所望の部分が検査されてキュー間の全ての間隔が位置決 めされる。その後、ステップS110に示した様に、ステップS100で位置決 めされた各間隔は対応する開始及び終了キューが適切か否かを決定するために検 査される。その後、ステップS120で示した様に、それぞれの端部にそれらし いキューを有する各間隔の受け入れの度合いが個々の間隔の名目長さ、この名目 長さからの変位、及び開始/終了キューの組合せから決定される。もし間隔が受 け入れ可能と決定された場合には、ステップS130に示された様に、音声/映 像獲得レベルが選択獲得レベルモジュールで決定される。さらに、対象となる新 たに受け入れられたセグメントはステップS140に示された様に制御コンピュ ータ30のデータベース412に供給される。もし、この場合とは異なり、ステ ップS120で、対応する間隔またはセグメントが拒絶された場合には、このセ グメントに対する更なる処理は行われない。 新たなセグメントが見つけられた後は、外側のループがリセットされ、新たに 検知されたセグメントについて最初から処理が続けられる。この外側のループは 、終了キューの可能性のあるものと既に検討されたキューに遭遇した時点で終了 する。これはキュー検査フラッグ(cue examined flags)を検査して決定される 。 すなわち、既に終了キューの可能性のあるキューとしてチェックされたデキュー の各ノードはキュー検査フラッグ・セット(cue examined flag set)を有する 。好ましい実施例では、二つのスキャンニング・パスがあるので、二つのキュー 検査フラッグが存在する。一方、内側ループは、現状の終了キューから如何なる 通常のセグメント(例えば、120秒)以上の量だけ長い時間離れたキューを見 つけた時点で終了する。 2つのパス(pass)を使い、音声のミュートに基づくセグメントに他のセグメ ントより低い優先度が与えられるようにする。より具体的には、好ましい実施例 において、第2のパスは第1のパスより30秒後のスキャン・ポイントにある。 これにより、第2のパスの音声ミュートに基づくセグメントのチェックの前に、 長さが30秒までの全ての、かつ、音声ミュートキューに基づいていないセグメ ントを捜し出すことが可能となる。その結果、より低い確率(又は受け入れられ る可能性のより少い)の音声ミュートセグメントが、例えば30秒までの長さを 有するマッチ(matches)と黒へのフェード(fades-to-black)に基づくセグメ ントの如くの、より高い発生確率のセグメントの検出の前に検出されることがな くなる。前述の如く、最初に検出されたセグメントは競合する可能性のあるセグ メントを考慮することなく使うことができる(後述の如く、競合は解消した方が 良いが)。そのような状況においては、前記したように2つのパスを使うことが 望ましい。更に、後述の如く、全ての音声ミュートに基づくセグメントは選択的 捕獲レベルモジュールにより捕獲レベル2を与えられ、そのようなセグメントが 以前に遭遇していないときは音声及び映像データが集められないようにしている ので、走査における遅延は一層長い値に設定される。これにより音声ミュートに 基づくセグメントによる高確率に基づくセグメントの阻止を更に最小化するであ ろう。 キューがセグメントの開始又は終了に適切か否かの決定は注意深い検討を必要 とする。例えば、発生キューの場合、後尾キューとして有用であるかも知れない 開始発生キューが、同時に別の発生の終りではないようにすることが必要であろ う。これは開始及び終了発生フラグの両方は設定されていないかチェックするこ とによって判別できる。別の例では、黒へのフェード(fade-to-black)が発生 と 関連しているか判定することが必要になる。この発生はキューの強さ(cupstren gth)を増加するのに使うことができる。即ち、もし黒へのフェードの開始がセ グメント後尾キューとしての可能性を検討されているなら、黒へのフェードの終 りが関連する発生の開始であるかどうか判定するために調べる必要がある。 1つのセグメントを新しいセグメントとして受け入れる許容性を決定するため の上記の新規なセグメント検出モジュールにおいて使用される特性についてより 詳細に説明する。 公称長からの最大許容偏差が決定される。そのような決定においてはしかしよ り頻繁に起こる公称長が望ましく、それらに比較的大きな偏位許容度を与え、新 しいセグメントの検出の機会を増加させる。公称長より小さい及び長い偏差に対 しては別の許容度が好ましくは与えられる。即ち、公称長より短い偏差に対する 許容誤差は典形的には公称長より長い偏差に対するよりも大きい。 各間隔に対するキューは考慮中のセグメントに対する公称長からの最大許容偏 差を調製するに使われる。これは各セグメントの終端上のキューを分析し各終端 のどのキューが最強かを決定することによりなされる。キューの発生が最強であ り、黒へのフェード及び音声ミュートがそれに続くと考えられる。即ち、許容誤 差はセグメントの両端上のキューの強さに従い調節される。 キューとしてのオーディオミュート(audio mute)のアンクリティカルな使用 はかなり多くの屑セグメント(chaff segment)を発生させる。しかしながら、 オーディオミュートに基づいたセグメントは、他端にかなり強いキューが存在し ているなら、一端でのキューとしてオーディオミュートと共に受け入れられる。 さらに、比較的短い長さのオーディオミュートはしばしば発生し、比較的長い長 さのオーディオミュートは普通、セグメントの終わりを正確に決定することを難 しくするので、所定の範囲内の長さのオーディオミュートだけが使用される。そ れにもかかわらず、それらすべてのオーディオミュートに基づいたセグメントは 選択キャプチャーモヂュールにより2のキャプチャレベルを与えられている。検 出される屑セグメントの数をさらに限定するために、もっと頻繁に起こるごくわ ずかの長さのセグメントだけがキューとしてのオーディオミュートに基づくもの として許容される。さらに、一端で一致(match)があり、他端でオーディオミ ュー トのあるセグメントが普通は受け入れられる一方、一端に新たに検出されたセグ メントがあり、他端で一致のあるセグメントは受け入れられない。なぜなら、新 たに検出されたセグメントはオーディオミュートキューに基づいているかも知れ ないからである。この場合、複数のセグメントは、両端でオーディオミュートキ ューに基づいている新たなセグメントとして検出されるかも知れない。それで、 一端で関連あるさらに追加された強いキュー、例えば、減衰ブラックキュー(fa de-to-black cue)なしで発生したキューに基づいたセグメントと、他端でのオ ーディオミュートキューに基づいたセグメントは使用されないかも知れない。 オーディオミュートはセグメントの分割で使用される。30秒の長さのコマー シャルは最も頻繁に起こるので、テレビジョン・コマーシャル・認識システムで は、その倍数に等しい長さ、例えば60,90,120秒といった長さのセグメ ントは、それぞれが30秒の長さの複数のセグメントに分割される。これらのセ グメントは分割キューとしてシーン変化に加えてオーディオミュートを用いるこ とで分割される。即ち、そのセグメントはオーディオミュートとシーン変化が存 在するかどうか決定するために30秒のインターバル毎に調べられ、それからそ のセグメントは分割される。このような方法でのセグメントの分割は、所定の値 、例えば60秒を越える長さの新たなセグメントが、たとえ上述したオーディオ ミュートとシーン変化が存在しなくても任意の位置で2つに分割されるといった 長いセグメントについて行われる分割とは異なる。 比較的多くの減衰ブラックが発生する時、あるいは、比較的長期に渡り減衰ブ ラックが検出される時、これは普通、比較的品質の劣った信号が検出されている ことを示す。 過度の減衰ブラックは入力での劣った信号かノイズの結果である。そのような 劣った品質の信号から新たなセグメントを検出する試みは常に屑セグメントの検 出をもたらす。そのような事態を正すため、そのような比較的高い発生頻度の減 衰ブラックを有すると決定された信号の部分からキューを受け入れることはない 。このように、受け入れられないキューは新たなセグメントのスタートやエンド キューとしては使用されない。 上記したようなキューの拒否は、幾つかのファクタ、例えば、減衰ブラック時 間の量、後述する減衰ブラックのオン・オフの変化回数、前に説明した内部ルー プの間の減衰ブラックの発生していない時間の量等を用いて実行される。これら ファクタの各々に対応する変数は適切なテイルキュー(tail cue)の検出に基づ いてイニシャライズされる(内部ループのスキャンニングをスタートする前に) 。 その後、内部ループがへッドキューに対してスキャンニングしている間、信号 がモニタされ、上記ファクタが検出される。もし、可能な新たなセグメントが検 出されるなら、各セグメントは上記ファクタがあるかどうか調べられる。もし、 セグメント内でのこれらのファクタの発生回数が所定の最大値(例えば、減衰ブ ラック時間の所定の最大値かつ/または減衰ブラックのオン・オフの変化回数の 所定最大値)を越えたら、そのセグメントは新たなセグメントとしては受け入れ られない。 第2の動作モードでは、新セグメント検出モヂュールは関心の対象となってい る新たなセグメントを検出するために図13に示された処理を実行する。第1ス テップS400では、新セグメント検出モヂュールはキューをスキャンし、新セ グメントに妥当と見なされる全てのインターバルを抽出し、後で再度調べるため に、可能セグメントのリストの中に置く。続いて、ステップS410で処理が所 定の選択された期間だけ遅延させられる。それは、衝突(conflicting)してい るセグメントのどれが受け入れられ、どれが棄てられるかが決定される前に、既 にリストに挙げられた可能セグメントとオーバラップするかもしれないセグメン トが検出される可能性を最大にするためである。その遅延期間は、例えば、少な くとも35秒であり、最も頻繁に起こる30秒のセグメントが、もしかするとオ ーバラップするセグメントについての不十分な情報により失われることがないよ うにされる。 この決定に要する遅れの後、処理はステップS420へ進み、各セグメントは リスト中の他の全セグメントと比較され互いにコンフリクトがあるか否かが調べ られる。もし、コンフリクトがあれば、ヒューリスティックが適用され、関連す る因子の線形の組み合わせに基づいてどのセグメントがより高い優先度を与えら れるべきかが決定される。そのような因子としては公称の長さ、関連キュー、及 び公称の長さからの偏りがある。一旦、コンフリクトのあるセグメントに優先度 が与えられると、より高い優先度のセグメントはデータベース(センター側のワ ークステーションで集中監視する)に報告され、低い優先度のセグメントは廃棄 される。しかし、さらにステップS430で示される遅れが生じた後で、廃棄セ グメントが再び調査され、受け取ったセグメントとの間のコンフリクトが依然残 っているかどうかが判定される。もし、コンフリクトがなければ、以前に廃棄さ れもはやコンフリクトしていないセグメントが、しきい値2(後述)のセグメン トとしてデータベースに報告される。 ステップS420における優先度付与処理におけるコンフリクト評価によって 、以前に廃棄されたセグメントを後で受け付ける様子が、次のように例示される 。あるセグメントAが重複していてBよりも後で現れ、セグメントBが重複して いてセグメントCの後で現れる場合を想定する。さらに、セグメントAとCは重 複しないものとする。もし、最初にセグメントBがセグメントAと比較されれば 、セグメントBはセグメントAより高い優先度を与えられ、セグメントAは拒絶 される。しかし、セグメントBはセグメントCと比較され、Cが選択されれば、 セグメントBもまた拒絶されるであろう。一旦、セグメントBが拒絶されると、 セグメントAはもはやコンフリクトせず、以前拒絶されていても今度は受け付け られる。 図14に示されるような、新セグメント検出モジュールの第3の動作モードに したがって、ステップS500においてキューが走査され、これまでに述べた原 理に従い、新たなセグメントとして受け付け可能なセグメントを確定する。次の ステップ510において、処理は、可能なすべての関係するセグメントの全てが 検出されることを確実にするように、例えば5分間程度遅らされる。したがって 、添付の図面のステップ520において、重複かつコンフリクトするセグメント は、さらに処理を継続するために関連セグメントの各グループの中に配置され、 例えば各グループを示す任意の番号で序列化した各セグメントのためのノードで 識別して処理される。 従って、ステップS530とS540において、二つのステップのヒューリス ティックが順次実行される。ステップS530において、新たなセグメント検出 モジュールは該当する種々のセグメント中で受け付け可能な部分を判定する。一 つの部分は、受け付けられた公称の長さに基づいてそれぞれ区別されたセグメン トの細分でもよくあるいは幾つかのセグメントをまとめたものでもよい。例えば 図15を参照すると、30秒毎の境界での明暗を有する120秒セグメントの分 岐ツリーが示されている。図15において120秒セグメントを分岐する可能性 は、ツリー構造の中に配置され、ルート600からリーフノード(例えばリーフ ノード602と604)への各経路は120秒セグメントをそれぞれ分岐する方 法を示す。番号30、60、90、120は、主たる120秒セグメントから形 成可能なセグメント長さ、あるいは秒単位の時間を示す。図から理解されるよう に、セグメントは2回以上現れることができる。 分岐ツリーに従って、与えられるセグメントを分岐する方法が定義されると、 ツリーは遷移し、各パス(すなわち、セグメントの可能な組み合わせ)は、受け 付け可能な分岐を判定するための所定の一組の規則に従って評価される。 あり得るスプリットの許容度を評価するのに使用される所定のルールは、主セ グメントおよびあり得るサブセグメントの公称長さと、選択的な獲得レベル決定 に関連して以下に説明するような、それらに対して決定されるオーディオ/ビデ オ(A/V)閾値とに基づいている。基本的には、これらルールは、A/V閾値 のスプリット、すなわち、注目するセグメントを異なるA/V閾値を有するサブ セグメントに分割することを避けるように設計される。これらルールはまた、ス プリットを30秒セグメントのような頻繁に遭遇する長さにするように設計され る。例えば、もしすべてのサブセグメントが1のA/V閾値を有するときは、A /V閾値2のセグメントは、複数のサブセグメントにスプリットされる。加えて 、45秒セグメントは、15秒セグメントや30秒セグメントのような、よりよ り頻繁に遭遇するセグメントに分割される。様々なルール自身は、その後の修正 を行えるように表に記憶される。 もし上記のルールの適用が幾つかの許容スプリットを結果として生じるならば 、なお競合するスプリットは、以下の追加ルールに従って優先順位が付けられる 。最初に、A/V閾値1のセグメントの最も長い持続時間を産み出すスプリット が、他のものより優遇される。もしそのとき2つ以上のスプリットが存在すれば 、それらスプリットは、通常発生するセグメントの長さが優遇されるように、ス プリ ット内の各セグメントの公称長さに基づいてポイントスケールで評価される。す なわち、各公称長さに対して毎秒ポイント値が指定され、それからセグメントの 長さで乗算されて各公称長さに対して総得点を蓄積する。例えば、もし30秒セ グメントに毎秒3ポイントが与えられる一方、15秒セグメントおよび45秒セ グメントにそれぞれ毎秒2ポイントおよび毎秒1ポイントが与えられるとすると 、30/15秒セグメントが120の得点合計であるのに対して、その45秒セ グメントは、45の得点合計を生じる。このことは、すなわち、そのスプリット を優遇している。このように、より通常に発生する長さのセグメントを生じるス プリットを優遇するように、得点が構成されている。もし上記のルールの適用後 に2つ以上のスプリットが残っているなら、そのときは任意の一方が選択される 。 いったんこのスプリット解析がステップS530で実行されると、時間的に重 なっている(相互に排他的である)複数のセグメントの中から最もありそうなセ グメントに優先度が与えられるステップS540で、競合解析が実行される。あ るスプリットの部分であるセグメントは、今個別的に検討される。競合するセグ メントの各対は、下記に説明した発見的学習にしたがって評価され、最上のもの が選択される。次いで比較することにより、単一の最も好適なセグメントが選択 される。もしこの選択が行われた後で、この選択と競合しない、それより好適で ないセグメントが存在すれば、それらも受け入れられる。 この発見的学習は、各セグメントの特性、すなわち、公称長さ、キュー(cues )および公称長さからの偏差の一次関数を発生する評価システムである。与えら れた特性の各値の得点は、下記の原則に基づいて指定される。発生キューは、単 一の黒へのフェードより強いと考えられる新セグメントキューよりずっと強いと 考えられる。公称長さからの偏差に関しては、公称長さより短いセグメントの方 が長いものより存在しそうであり、それらの長さが公称長さから隔たれば隔たる ほど、注目するセグメントを検出する可能性が低くなる。最も可能性のある偏差 は、0−0.2秒の間である。公称長さの場合は、前に述べたように、30秒セ グメントが最も頻繁に遭遇し、15秒、10秒および60秒の順で続く。一方、 20、45、90および120秒セグメントは、きわめてまれと考えられる。全 体として、キューは他の2つの特性より重く重み付けされる。しかし、公称長さ 特性の 頻度が唯一の考慮事項である場合は、特別な場合が発生する。すなわち、考慮中 の両セグメントが1のA/V閾値を有し、かつ、一方のセグメントが他方を含む ならば、一般に長い方のセグメントが好適とされ、そしてこれら2つのセグメン トの公称長さに応じて適当なポイント値が指定される。選択的捕獲レベル 選択捕獲レベルモジュールは、ローカルサイト16におけるチャフセグメント の処理を低減するのに役立ち、ワークステーション12の操作者の時間を浪費す るこれらの中央サイト12への報告を回避する。チャフセグメントは、エキスパ ートシステムによって興味の対象となる新たなセグメントであると、実際上異な る場合に発見されているセグメントである。例えば、チャフセグメントは、指示 により定められ、興味の対象となるセグメントと同じ長さを有する新たな摘要ま たは通常のプログラミングの一部でもよい。 チャフセグメントの処理は、システム(10:図1)の処理時間と運転コスト を増加する。すなわち、実際にはチャフセグメントであるが興味の対象となる新 たなセグメントであると発見されたセグメントは、ローカルサイト16から中央 サイト12を経てワークステーション14の一つに操作者による処理のために伝 送される。これにより、高いチャフ率は、操作者が新たなセグメントを分類する ために要する時間を実質的に増加する。このようにチャフセグメントを新たなセ グメントとして処理することはローカルサイト16と中央サイト12の間の通信 を都合の悪いことに増加し、ローカルサイト16で遂行されなければならない処 理を増加する。 選択捕獲レベルモジュールは、興味の対象となる可能性のある新たなセグメン トであると発見されたセグメントを2つのグループ、すなわち興味の対象となる セグメントになる可能性がより大きいセグメント(非チャフ)と興味の対象とな るセグメントになる可能性がより少ないセグメントに分類する。興味の対象とな る可能性がより大きいセグメントは、オーディオ/ビデオ(A/V)捕獲レベル 1に割り当てられ、興味の対象となる可能性のより少ないセグメントは、オーデ ィオ/ビデオ(A/V)捕獲レベル2に割り当てられる。興味の対象となる可能 性のある新たなセグメント、すなわちA/V獲得レベル1または2のいずれに割 り当てられているかを検出すると直ちに、以下に説明するように、これに対して キー記号が生成され記憶される。興味の対象となる新たなセグメントの検出と同 時に、(A/V)捕獲レベル1にあるセグメントに関するオーディオ/ビデオ( A/V)データが、中央サイトへの伝送のために直ちに集められる。他方、以前 に記憶されたキー記号が少なくとも一つ適合した後のみ、(A/V)捕獲レベル 2にあるセグメントに関するA/Vデータが集められる。すなわち、A/V捕獲 レベル2に割り当てられたセグメントは、それに関するA/Vデータが集められ る前に、少なくとも2回(一度はセグメントを新たなセグメントとして検出する ために、もう一度はキー記号との適合のために)ブロードキャストされ検出され る。そのキー記号が所定時間内に適合を生成しない場合は、それは、そのシステ ムから消去される。 集められたA/Vデータを有するセグメントのみが、それぞれのローカルサイ ト16から中央サイト12を経てワークステーション14の一つに供給される( 図1)。興味の対象となるセグメントの大部分は、1回以上ブロードキャストさ れ、チャフセグメントは、1回のみ検出される。それゆえに、A/V捕獲レベル 2を興味の対象となる可能性のより少ないセグメントに割り当てることにより、 かようなセグメントのキー記号が結果として適合するまでA/Vデータが集めら れることはなく、実質的な運転コストの節約が可能となる。 捕獲レベルをテレビジョン・コマーシャル認識システムに割り当てる技術にし たがって、新セグメントが下記の条件の一つを満たした場合に、新セグメントは 捕獲レベル2に割り当てられる。 1.新セグメントのいずれかの端の一つの指示(sole cue)が可聴弱音指示であ るならば、前述したように、可聴弱音がセグメント境界とセグメント内にたびた び生ずるために、可聴弱音指示に基づいて新セグメントは屑セグメントというよ うなものである。 2.新セグメントがコマーシャルのグループ、即ちポッド(pod)に近くないか 、接近していないならば、ほとんどのコマーシャルはグループ、即ちポッドとし て放送されるので、新セグメントはポッドに近いということである。新セグメン トから他の新セグメントへの時間内の接近、または一致したセグメントを決定す る ことによって、ポッドへの接近が有利に割り当てられる。割り当てられている新 セグメントに一致しているセグメントの接近が他の新セグメントへの接近よりも より信頼性のあるポッド接近を示すので、一致しているセグメントのために定め られた接近範囲よりも狭い接近範囲内にあるならば、他の新セグメントは接近だ けが考慮される。 3.通常長、即ち新セグメントの持続時間が時として生ずるコマーシャル長なら ば、例えば、20、45、90または120秒ならば、コマーシャルは時として このような長さを有するので、このような長さを有する新セグメントは屑セグメ ントのようなものである。 4.興味のある新セグメントとして、セグメントの受諾を決定するために採用し た所定長ずれ限界に近い量によって、新セグメントが通常長からそれるならば、 例えば、30秒コマーシャルのための低度長ずれ限界が、29秒よりも少ない持 続時間を有するセグメントが興味のある新セグメントではないと判断するような 1秒であるならば、約29.1秒の持続時間を有するセグメントはA/V捕獲レ ベル2が与えられる。新セグメントが通常長からずれるほど、屑セグメントのよ うである。 一方、捕獲レベル2が割り当てられないならば、可能性のある新セグメントが 捕獲レベル1に割り当てられる。 この時点で、条件1、3および4が容易に確かめられることが理解でき、興味 のある新セグメントが見つけられる。しかしながら、条件2にしたがって、新セ グメントがポッドに接近しているか否かの確定は、一致していること、および他 の新セグメントのために結果として受信した信号の評価を要することになる。し たがって、例えば、評価されている新セグメントがポッド内の第1セグメントな らば、新セグメントがポッドに接近しているということが直ぐにはわからない。 特徴のある実施例にしたがって、条件2を除き、捕獲レベル1のための全ての条 件を満たす新セグメントは、対応A/Vデータがデータベースに記憶されて後に 制御場所へ送信することを可能にするように、始めにA/V捕獲レベル1に一致 される。この決定は所定時間後、例えば、数分後に再び見直され、この時、セグ メントがポッドヘ接近していることが未だ見つからなければ、このセグメントの A/V捕獲レベルは捕獲レベル2に変更される。この手順は、条件2を得るとき に、決定されるために必要な全ての情報の完全な評価を待っているセグメントの A/Vデータの保存を可能にする。もし評価が遅れて、セグメントはA/V捕獲 レベル1に割り当たられるべきとした場合、A/Vデータは中心位置への送信の ためにまだ使用可能である。さもなければ、それはデータベースから削除される 。 上述の選択検索レベル技術の使用は、エキスパートシステムに、システム10 (図1)の許容できる処理負担を維持しつつ、どのセグメントが関心のあるセグ メントであるらしいかを決定する基準を緩やかにする。したがって、エキスパー トシステムは、それによって、新しい関心のあるセグメントとして、比較的より たくさんのセグメントの受諾を許す新しいセグメント基準を採用することが、た とえば、比較的広い長さ公差を採用することにより、可能になる。したがって、 緩和された基準を満足するのみの新しい関心のあるセグメントは、検出されるか 、さもなければ、取り逃がされる。結果として、総合的システムマッチング精度 は、良くなる。 図16は、音声/ビデオデータを捕獲する信号の流れを示している。図にある ように、ベースバンドビデオ/音声信号は、ケーブル431と439に沿ったセ グメント認識サブシステムのチャネルボード402からデータ捕獲サブシステム 28にそれぞれ供給されている。データ捕獲サブシステム28は、ビデオ捕獲ボ ード432、圧縮されたビデオリングバッファ430、データ捕獲コントローラ 434、圧縮された音声リングバッファ436、及び、音声捕獲ボード438を 含む。ケーブル431からの受信したベースバンドビデオ信号は、ビデオ捕獲ボ ード432に供給され、ビデオ捕獲ボード432は、連続的に新しく受信された ビデオ信号を圧縮された形で、圧縮されたビデオリングバッファ430に供給し 、圧縮されたビデオリングバッファ430は、最も最近受信した圧縮されたビデ オ信号の現在の記録、たとえば最後の3から7分の間、を保持する。同様に、ケ ーブル439からの音声ベースバンド信号は、音声捕獲ボード438に供給され 、音声捕獲ボード438は、連続的に新しく受信された音声信号を圧縮された形 で、圧縮された音声リングバッファ436に供給し、圧縮されたビデオリングバ ッファ430は、同じように現在の記録を保持する。 データ捕獲サブシステム28は、制御コンピュータ30と通信し、制御コンピ ュータ30は、順番に、エキスパートシステム414、データベース制御416 、データベース412、A/V収集制御440、およびディスク442を使用す る。例として、もし1のしきい値または捕獲値をもつ新しいコマーシァルが検出 されたら、エキスパートシステム414は、それを示す信号をデータベース制御 416に供給する。そう言った信号を受信すると、データベース制御416は、 音声とビデオデータそれぞれを送信することを要求するコマンド信号を、A/V 収集制御440へ供給する。A/V収集制御440は、順番に、相当する要求信 号をデータ捕獲制御434に、供給する。そのような信号を受信して、データ捕 獲制御434は、ビデオリングバッファ430と音声リングバッファ436に、 それぞれの制御信号を供給する。ここで、要求されたビデオおよび音声信号は、 データー捕獲制御434に供給される。要求されたビデオおよび音声信号は、そ のあと、データ捕獲制御434からA/V収集制御440へ供給される。A/V 収集制御440は、順番に、おなじ物を、ディスク442に、記憶のため供給す る。更に、A/V収集制御440は、音声/ビデオデータがそれぞれのセグメン トのために収集されたかどうかを示す信号といっしょに、セグメントの認識番号 を、データベース412に供給する。更に、まえに述べたある立場では、エキス パートシステム414は、データベース制御416に、無効信号を供給してもよ い。このような信号は、このあと、A/V制御440へ供給され、適切なA/V データファイルが消される。このような場合、A/V制御440は、データベー ス制御416へ、ファイルの消去を確認する信号を供給する。キーシグネチャー(key signature)発生 上記の如く、対象となる新しいセグメントが検出された場合、システム10は 、該キーワード及び8個のキーシグネチャーの照合ワードを、対応する、再ブロ ードキャストセグメントの為に供給されるセグメントシグネチャーのフレームシ グネチャーと比較若しくは照合することによって、同じセグメントの再ブロード キャストを認識する為に後に使用されるセグメントに対するキーシグネチャー( key signature)を供給する。 図17を参照すると、制御コンピュータ30は、キーシグネチャー生成モジュ ール410をインプリメントする。該モジュールは、セグメントシグネチャーと 呼ぶ、対象セグメントに対する連続フレームシグネチャーを受け取り、キーシグ ネチャーを生成する。そして、このキーシグネチャーは、セグメント認識サブシ ステム26に供給され、引き続く照合操作に使用される。 比較的大きい数の対象セグメント(例えば、コマーシャル)が各々のローカル サイト16(図2)に於いて受け取られ、このような各々のキーシグネチャーは 、必要メモリー量を最小限にするように、比較的小さいサイズであることが望ま しい。更に、キーシグネチャーは、偽照合(false matching)を回避しつつ、各 々のセグメントの再ブロードキャストの後に直ちに照合する。これにより、キー シグネチャー発生モジュール410は、サイズが十分小さく、かつ各々のセグメ ントの再ブロードキャストに於ける照合(match)の可能性を最大にするように 選択され構築されたキーシグネチャーを、偽照合の可能性を小さくしつつ、供給 する。 キーシグネチャー発生の為のセグメントシグネチャーは、モジュール410に よって処理されるために、音声及びビデオフレーム信号とが合成された形で受信 される。 そして、モジュール410は、受信したセグメントシグネチャーを、別個に処 理できるように、音声と、ビデオセグメントシグネチャーとに分割する。例えば 、キーシグネチャー発生モジュールは2つの別個の処理サイクルを実行しても良 い、即ち、1つは、ビデオセグメントシグネチャーに1つは音声セグメントシグ ネチャーにである。その結果、典型的には、少なくとも1つの音声キーシグネチ ャー(もしくはサブシグネチャー)及び、少なくとも1つのビデオキーシグネチ ャー(若しくはサブシグネチャー)が各々、同じデータフォーマットを持つセグ メントシグネチャーに対して供給される。 各々のキーシグネチャーは、好ましくは以下で詳細に説明する16の要素を含 む。 1.セグメント識別番号(セグメントID) この識別番号は、キーシグネチャーで識別されるセグメントをユニークに識別 し、例えば、テレビジョンに於いて、コマーシャル認識システムが、コマーシャ ルをより容易に対応する各々のキーシグネチャーに対応付ける為に用いられるで あろう。以下に述べるように、モジュール410は或る条件の下で、与えられた 1セグメントに対して、最大4個のビデオキーシグネチャーと4個の音声キーシ グネチャーを発生する。従って、そのセグメントIDは、5で割り切れる番号と 、そのセグメントに対して発生されたビデオ若しくは音声キーシグネチャーを示 す1から4の番号とから構成される。 2.キーワード 自身のセグメントシグネチャーを含むフレームシグネチャーの中から16ビッ トのキーワードが、各々のセグメントに対して選択される。上述したように、こ のキーワードは、セグメント認識システムによって、キーシグネチャーデータベ ースへのインデックスとして、使用され、照合を検出する迄に要する時間を短縮 している。 3.キーワードオフセット キーワードオフセットは、各々のセグメントの始めから、該キーワードまでの 距離を表す。本オフセットは、例えばセグメントの始めからのフレームの数の形 で或いは、該セグメントの始めからの時間で表されて良い。 4.マッチワード 各々のキーシグネチャーには、複数の(例えば8個の)16ビットのマッチワ ードが存在する。与えられたキーシグネチャーに対する複数のマッチワードは、 付随するキーワードが入力フレームと照合された後、照合操作の期間に、セグメ ント認識サブシステム26によって使用される。即ち、前述したように、受信さ れた各々のフレームシグネチャーは、記憶されている全てのキーワードと比較さ れる。入力されるフレームシグネチャーとキーワードとの間でのマッチングが検 出されると(例えば、フレームシグネチャーとキーワードとの対応するビット値 が最低15個一致すれば)、該キーワードに付随する全てのマッチワードは、以 下に述べるように、マッチワードオフセットとして決定される適切な入力フレー ムと比較される。 比較される、マスクされたフレームシグネチャーのビット数の半分と結合され た値とマッチしない非マスクビットの総数が、定められたエラーカウント数若し くは下記しきい値を越えない場合、マッチが検出される。キーワードとマッチワ ードを、該キーシグネチャーに対して選択する為の規準は以下で述べる。 5.マッチワードオフセット(整合語偏位)−各マッチワードにはマッチワード オフセットが存在する。各マッチワードオフセットはキーワードに対するそれぞ れのマッチワードの位置を示す。上述のキーワードオフセットと同様に、マッチ ワードオフセットは時間の差あるいはフレームの番号により表現できる。これら のマッチワードオフセットは、放送番組のどの到着フレームシグニチャーがキー ワードの整合が検出されたときにキーシグニチャーにおけるマッチワードと比較 するのに用いられるかを表示するために用いられる。 6.シグニチャー型式−シグニチャー型式はシグニチャーが音声サブシグニチャ ーか映像サブシグニチャーかを識別する。音声キーサブシグニチャーと映像キー サブシグニチャーとは同じフォーマットを有するので、この要素はこれらを区別 するために用いられる。 7.エラー計数値−エラー計数値あるいはエラー閾値は、キーシグニチャー生成 モジュールにより生成キーシグニチャー毎に生成され、整合プロセスにおいて考 えられる組合せが受け入れられないとして拒絶されるまでに許容できるエラーの 最大数を示す。エラー計数値は、生成されるキーシグニチャーの特定の性質、た とえば対応する番組の期待される信頼性やキーシグニチャーの錯誤整合が起こる 可能性など、に基づくものであってよい。エラー計数値を決定するために有利な 手法は、下に述べるように、マッチワードのために可能なビット整合の数を用い 、この数の端数を切り捨てて得られた数を可能な組合せの総数から差し引くこと である。この結果得られるエラー計数値は、錯誤整合をしやすいより短い番組の 場合より小さな値になる。ある条件下では(たとえば雑音のために)、相当する 番組の再放送をするまでキーシグニチャーが完全に整合できないことがあると評 価される。エラー計数値は、このような予測される不整合を補償して再放送番組 を検出するようにすることができる。 8.フレーム計数値−フレーム計数値は、キーシグニチャーに含まれるフレーム の数を示す。この値は、本実施例では8である。 9.長さ−各番組におけるフレームの数を示す。 10.整合規則−整合規則はキーシグニチャー生成モジュールによりデータベース 中の1個以上のキーシグニチャーによって表される番組ひとつづつに生成されて 、エキスパートシステム414がそのような番組のキーシグニチャーの整合を受 け入れるか否かを決定するために用いられるガイドラインになる。もし音声と映 像の両方のサブシグニチャーが共に錯誤整合する可能性が高ければ、整合規則は 整合を認めるには音声と映像のサブシグニチャーが両方共整合することを要求す る。一方、音声サブシグニチャーと映像サブシグニチャーのいずれもが錯誤整合 を起こしにくく、また整合もしにくいとされる場合には、整合規則は音声と映像 のいずれかのサブシグニチャーが整合すれば整合したと認める。 整合規則は、サブシグニチャーが錯誤整合を起こす可能性と共に、サブシグニ チャーが対応する番組の再放送を正しく整合する確率に基づいて決められる。正 しい整合の確率を評価する方法について以下に論じる。錯誤整合の確率あるいは 錯誤整合の商は、シグニチャーにおける情報量に逆比例する第1の値(すなわち 同じ値を有するビットの数が大きくなればなるほど第1の値が大きくなる)とシ グニチャーのための正規化したクランピング値である第2の値の平均値として決 められる。正規化クランピング値は、対象とするシグニチャーと同じキーワード を有するデータベースにおけるキーシグニチャーの数に、そのキーワードに対応 するフレームシグニチャー(またはそれについてのいずれか一個のビット順列) が作られるアプリオリーな確率を掛けることにより得られる。正規化クランピン グ値は与えられたキーワードの下に集められる(あるいはクランプされる)べき キーシグニチャーの傾向を表す。 11.マスクビットの組の数。この数は、キーワード及び全ての関連する適合ワー ドのために設定されている全てのマスクビットの総計を表している。 12.偽の適合の商。これは、セグメント記号と比較され、適合ルールと関連して 上記で説明された方法で決定されるときに、偽の適合を与えるそれぞれのキー記 号の可能性を表している。 13.シャープネス。ほぼ同一のセグメントにおける多数の連続したフレーム、例 えば1つの画面に相当するビデオ信号のフレーム、がしばしば存在する。そのよ うな、ほぼ同一の連続したフレームの集合は、ランと呼ばれる。シャープネスは 、キー記号が送出され、ランの両端の範囲を定めるのに用いられる、ランの終端 の フレーム記号のビットにおける変化のレートを表している。 14.他の相当するキーのサブ記号の適合可能性。前に述べたように、キー記号は 、2つのサブ記号、即ちオーディオのための1つとビデオのための1つ、に分割 してもよい。ここでは、適合可能性は、他の相当するサブ記号がそれぞれのセグ メントに適合する可能性を指している。例えば、セグメント認識サブシステム2 6が、特定のセグメントについてオーディオの適合を検出したが、ビデオの適合 を検出しないという状況が考えられる。この適合情報はその後エキスパートシス テムに供給され、そこでは、もしオーディオキーのサブ記号が、他のサブ記号( 即ち、ビデオサブ記号)の適合についての相対的に高い適合可能性が存在するこ とをそこで示すならば、おそらくエキスパートシステムはこれを適合として受け 入れない。というのは、ビデオキーのサブ記号も適合している必要があるからで ある。適合の可能性は、以下に述べるように、キーワードと適合ワードの選択の 過程において判定される。 15.サブ記号の数。この数は、キー記号発生モジュールがそれぞれのセグメント について発生したサブ記号の数を表している。ある状況においては、もしこれに よってもっと満足な適合が得られる可能性が増えるならば、前に述べたように、 キー記号発生モジュールは特定のセグメントについて多数の記号(またはサブ記 号)を発生する。例えば、もし作成された第1のキーのサブ記号が、低い偽の適 合可能性と低い真の適合可能性を有するのであれば、モジュール410は、セグ メントが真の一致の可能性を増やすために、さらにサブ記号を発生してもよい。 その場合は、さらにサブ記号を発生する段階において、モジュール410は、キ ーのサブ記号を発生するのに前に用いられたランからフレーム記号を排除する。 しかしながら、もし第1のキーのサブ記号についての偽の適合可能性が比較的高 ければ、サブ記号はもはや発生されない。というのは、そのことが偽の適合の可 能性を増大させるからである。さらに、モジュール410がビデオサブ記号の偽 の適合可能性が非常に高いと判断した場合には、ビデオサブ記号を発生させない ことを選択してもよい。好適実施例においては、キー記号発生モジュールは、4 つのキーオーディオ及びビデオサブ記号を発生できる。 16.予想ピーク幅。典型的には、キーワードと適合ワードの両方がフレーム記号 のランの中央から選択される。従って、セグメント認識サブシステム26は、連 続するフレームのための任意のキー記号に基づいて、多数の適合を検出できる。 そのような連続して検出された適合の数は、ピーク幅として示される。キー記号 発生モジュールは、セグメント記号におけるラン構造を試験し、そこから予想ピ ーク幅値を発生する。 前述したように、入力セグメント(incoming segment)の各フレームは、関連 するフレーム・シグネチャ(frame signature)を有する。キー・シグネチャ発 生器モジュールがこれらのフレーム・シグネチャの各々を調べ、各キー・シグネ チャ(key signature)に対する一つの許容可能なキーワードおよび8個のマッ チワード(matchword)を選択する。そのような選択がなされている間、キー・ シグネチャ発生器モジュール410は次の基準を用いる。 1.選択されたフレーム・シグネチャの分布。マッチワードは、セグメント・シ グネチャ中に等しく分布されたフレーム・シグネチャの中から選択されるべきで ある。そのような選択は、疑似マッチングの可能性を低減する。たとえば、二以 上のコマーシャルが同じようなシーンを有する場合、等しく分布されたフレーム ・シグネチャの中からマッチワードを選択することは、少なくとも数個のマッチ ワードが同じようなシーン外にあるフレーム・シグネチャから選択されることを 引き起こしがちである。マッチワードの分布は、それらの間の時間またはフレー ム間隔での正規化された分離として量子化される。しかしながら、セグメントの 端に近いフレームからのシグネチャは、それらが選択される実行が各セグメント 内に含まれることを保証するため、および(たとえば、自動利得制御における固 有遅延による)信号レベルの変動によりなりやすい信号を用いることを避けるた めに、避けられるべきである。さらに、エキスパート・システムが対応するキー ・シグネチャに基づいて一致を評価するのに利用できる時間を最大にするために 、キーワードはセグメントの始点近くのフレームから選択されることが好ましい 。キーワードおよびマッチ・ワードともに、実行の中心またはその近くのシグネ チャから選択されるべきである。この考察は、以下に述べるように、一致確率基 準によって実行される。 2.発生されるべきある特定のフレーム・シグネチャ値の可能性。セグメント認 識サブシステム26によって発生されるフレーム・シグネチャは、フレーム・シ グネチャのすべての可能な値の中で等しく分布されないが、その代わりに、他の 同様なフレーム・シグネチャとクランプされ得る。このことは、一致ルールと関 連して上述したフレーム・シグネチャのプライオリ分布と対応し、また、十分多 くのフレーム・シグネチャを集めることによって、および各ポテンシャル・フレ ーム・シグネチャに対する正規化された発生確率を決定するためにそれらの全体 分布を決定することによって、決定される。フレーム・シグネチャのクランピン グは、疑似マッチングを起こさせるとともに、相関器プロセッシング・ロードを かなり増加する。その結果、フレーム・シグネチャを選択している間、キー・シ グネチャ発生器モジュールは、クランプされたフレーム・シグネチャと比べると 、クランプされないフレーム・ジクネチャを好む。それによって、同様な値をも つキー・シグネチャの数を最小とする。 3.予め確立されたキーワードの分布。キー・シグネチャ発生器モジュール41 0は、予め発生されてセグメント認識サブシステム26のデータベースに格納さ れたキーワードの分布を考慮に入れる。一例として、ある特定のキーワードに対 して、キー・シグネチャ発生器モジュールは、このキーワードに関連する発生さ れたキー・シグネチャの数を考慮に入れる。そのようなキーワードが既に多くの 数のキー・シグネチャに関連している場合は、そのようなキーワードは、より少 ない数のキー・シグネチャと関連するキーワードと比較して、選択されそうもな い。したがって、このファクタは、上述したファクタ2のように、クランピング を最小にするために用いられ、生じる疑似一致の数を減らし、相関器プロセッシ ング・ロードを低減する。しかしながら、上述のファクタ2と異なって、このフ ァクタは放送信号に依存する。たとえば、同じようなデータ内容を有するいくつ かのコマーシャルが受信された場合、同じキーワードをもついくつかのキー・シ グネチャが発生され得る。これは、上述のファクタ2と異なり、セグメント認識 サブシステム26によらないが、放送データの関数であり、正規化された発生頻 度として決定される。ファクタ2とファクタ3とは掛けられて、クランピングに よる一つの与えられたキーワードの不適当を示す単一のファクタをもたらす。 4.ランレングス 例えば約5フレーム未満の比較的短いランは長いランに比べ て整合をとり難いことが知られている。一方、例えば約10フレームを越える比 較的長いランとしても受容できる整合の確率はそれほど高くならないことが知ら れている。しかし、このような比較的長いランは比較的低いエントロピーのキー シィグニチャーを生成することを許容する。従って、比較的短くなくかつ比較的 長くないランを用いることが望ましい。実施例では、キーシィグニチャー発生モ ジュールが約5乃至10フレームのレングスをもつランを使用する。従って、前 述の基準に基づき正規化された数(normalized figure)が各ランレングスに割 り当てられる。 5.整合確率 一旦受容できるレングスのランが定められたら、キーシィグニチ ャー発生モジュール410はフレームシィグニチャーの確率を評価する。各フレ ームシィグニチャーは、キーワード整合プロセスにおける対応するセグメントの 再放送(rebrodecast)の間、大変よく一致する。更に詳しく説明すると、キー ワードはフレームシィグニチャーとして選択される。このとき、このセグメント のオフセットnは、±gフレームシィグニチャーの所定の保護周波数帯内のセグ メントの再放送にほぼ一致する。キーワード整合手順においてオフセットmのフ レームシィグニチャーを持つ整合(すなわち、全16ビット若しくはこの16ビ ットのうちの少なくとも15ビットの整合)の確率をpk(m,n)とすると、 この確率pk(m,n)は次のとおり定義される。 pk(m,n)=15*PM+Σ[PM/P(i)],i=0から15 ここに、PMは全ビットについての整合の確率であり、次のとおり定義される。 PM=積(product) [P(i)],i=0から15 そして、P(i)はiが0から15のときのフレームシィグニチャーとポテンシ ャルキーワードのビット(i)の整合の確率である。P(i)は、ポテンシャル キーワードの各マスクビットと比較されたフレームシィグニチャーとに基づいて 定められることが理解される。 更には、次のことが理解される。すなわち、オフセットnのポテンシャルキー ワードが、オフセットaからオフセットbの与えられたインターバルにそった1 またはそれ以上のフレームシィグニチャーに整合する確率をpk(a:b,n) とすると、これは以下の関係に基づいている。 pk(a:a+1,n)=pk(a,n)+pk(a+1,n) −[pk(a,n)*pk(a+1,n)] よって、以下のことがわかる。 pk(a:b,n)=pk(a:b−1,n)+pk(b,n) −[pk(a:b−1,n)*pk(b,n)] これにより、オフセットnにおける与えられたポテンシャルキーワードがインタ ーバル±gを越えるフレームシィグニチャーの少なくとも1つに整合する確率を 容易に定義することができる。この確率はpk(n−g:n+g,n)と表され る。保護周波数帯士gを定める一つの有利なテクニックは確率pk(n−g:n +g,n)を計算する。このとき、gの値をゼロから確率pk(n−g,n)ま で増加させるか又は確率pk(n+g,n)を所定のしきい値より小さくする。 これにより、ランの中心付近のポテンシャルキーワードがランの端付近のそれに 比べてより高い確率に効果的に一致することを保証する。セグメントシィグニチ ャーにおいて受容できるラン中の全てのポテンシャルキーワードのこのような各 確率を定めることによって、前述の方法によって定められた整合確率に基づき、 各ポテンシャルキーワードに一つの数字が割り当てられる。 メリットの相対的形態は、受れ入れ可能なランのフレーム番号から選択される ポテンシャル・マッチワードに対しても割り当てられる。メリットの形態は、マ ッチワードがマッチング・プロセス中に利用されるような方法に従って決定され る。即ち、オフセットnでの各ポテンシャル・マッチワードのビット数を予想し て、対応ラン内で各々のオフセットmにおいてフレーム・シグネチャとマッチさ せ、それから、ラン全体を通して平均化して、メリットの形態としてラン全体を 通してマッチすると予想されるビットの平均数を引き出す。オフセットnにおけ るポテンシャル・マッチワードとオフセットmにおけるフレーム・シグネチャと の間でマッチすると予想されるビット数bm(m,n)は次の式で決定される。 bm(m,n)=Σ[P(i)], i=0から15 ここで、P(i)はビット(i)のマッチ可能性であり、キーワードマッチ可 能性の決定の場合と同様な方法で得られる。マッチが予想されるビット数の平均 bm(m,n)はオフセットaからオフセットbまでのラン・レングスを通して 次の式で決定される。 bm(a:b,n)=Σ[bm(m,n)]/(b−a+1), m=aからb ランの境界aとbがキーワード・マッチ可能性の決定と同様な方法で決定される 。 6.エントロピ−キー・シグネチャ発生モジュールは比較的高いエントロピを持 ったセグメント・シグネチャからマッチワードを選ぶ。即ち、マッチワードの各 各は他の選択されたマッチワードのデータ内容とは似ていないデータ内容を持っ ている。高いエントロピ・マッチワードを選択してマッチワード間の関連を最小 にして、間違ったマッチ可能性を減少する。マッチワード間のデータ内容の標準 化された非類似性を、マッチワード間で違いがあるビット数をカウントすること によって決定することができる。 7.ラン・シャープネス−好ましくはキー・シグネチャ発生モジュールがキーワ ードを選択し、フレーム・ラン内からの8つのマッチワードはシグネチャ値を持 ったフレーム・シグネチャによって境界を定められており、その・シグネチャ値 はラン内の隣接するフレームのフレーム・シグネチャから実質的に異なっている 。境界フレーム・シグネチャとラン内の隣接・シグネチャとの間のビット値の差 はラン・シャープネスに対する標準化されたメリットの側面を引き出すのに用い られる。 キーワードまたはマッチワードを選択するときの上記8つの要因の各々を常に 最適化できるとは限らないということが認識される。したがって、キーワードま たはマッチワードが考慮されるから、キー・シグネチャ発生モジュールは上記し たように7つの要因の各々に対する標準化されたメリット値を割り当てる。キー ワード選択について、各キーワード重み付け要素がパラメータ・ファイルから得 られ、また、対応する標準化メリット値と掛け算される。その積は、各キーワー ドのメリット値全体に作用するように加算される。マッチワード選択については 、標準化されたメリット要因に重み付けをして結合するという同じ過程が用いら れ、パラメータ・ファイルからの各々異なった重み付け要素が利用される。 パラメータファイルは経験的に得られている。1つの技術によれば、始めに全 ての重み係数は同一に設定され、キー記号は、各基準の関連重要性を評価するた めにキ−記号発生器において発生される。この処理は、結果の蓄積及び評価が得 られるまで繰り返し行われ、最も有効な重み係数が確認され得る。 種々のパラメータファイルが、ビデオ及びオーディオ記号の種々の特性を確認す るために使用される。パラメータファイルはさらに、比較的短いセグメントとし て観察されたセグメント長の機能としての誤差閾値のための最大許容値を含み、 例えばほぼ10秒より短いようなセグメントは、例えば30秒かそれ以上という 比較的長いセグメントよりも不整合と言えよう。 キー記号発生器モジュールによって利用される基本的ステップは、第18図に 示される。該図面に示されるように、キーワードや整合ワードとして使用するこ とを意図され、かつ確定されたランからのフレーム記号は、ステップS200及 びS210にそれぞれ示されるように得られる。従って、ステップ220におい て、前に述べた最大許容誤差閾値のようは絶対候補と共に、各キーワード及び整 合ワード候補のための全メリット値を比較することによって、最も望ましいキー ワード及び整合ワードが選択される。選択されたキーワード及び整合ワードから 、ステップ230に示すように、対応キー記号が創造される。その後、ステップ 240で、それに整合の可能性を増すために更にキー記号が生成されるべきか否 かが決定される。もし、そのステップ240での決定が断定的であれば、ステッ プ200からステップ230が繰り返されることによって、種々のランを利用し て付加的キー記号が生成される。一方、付加的キー記号が不必要の場合には、ス テップ240のNOでされるように、ステップ230で創造されたキー記号のた めの整合ルールが、ステップ250に示すようにそのキー記号と纏められ、かつ 組み合わせられる。 再び第17図を参照すれば、キー記号の生成に続く典型的信号データが示され 、その信号は先づセグメント確認副システム26と制御コンピュータ30との間 に伝送される。更に具体的に述べれば、変換器24のそれぞれの1つによって、 望ましい放送信号が受信され、望ましいチャンネルに伝送される。ビデオ及びオ ーディオ基本信号は、受信した基本信号の各フレーム記号及び対応マスクワード を生成するように構成されたセグメント確認副システム26のチューナ24から 対 応する1つのチャンネルボード402へ供給される。このようなフレーム記号及び マスクワードは、セグメント確認副システム2 6のセグメント確認制御器4 04へ 供給される。 キー・シグネチャが生成されなければならないように、該当の新たなセグメン トが受信されたことが判定できる前に、セグメント認識コントローラ4 0 4は前 述されたように、現存のキー・シグネチャと受信したフレームシグネチャとがマ ッチするかを試みる。セグメント認識コントローラ4 0 4は、制御コンピュータ3 0に含まれるエクスパートシステムモジュール4 1 4にキュー(マッチレポート を含む)を供給する。このエクスパートシステムは該当の新セグメントを検出す るのに用いられる。 その後、エクスパートシステム4 1 4は要求信号をセグメント認識コントロー ラ4 0 4に供給する。マッチはしなかったが該当の新セグメントになるかもしれ ないセグメントのセグメント・シグネチャのためである。その供給に応答して、 セグメント認識コントローラ4 0 4はセグメント・リング・バッファ4 0 6から相 当するセグメント・シグネチャを検索し、またエクスパート・システム・モジュ ールにそのセグメント・シグネチャを供給する。もし、エクスパートシステム4 1 4が相当するセグメントが該当セグメントであると判定すると、エクスパート システムは、それに関係するすべての情報(例えば、セグメント・シグネチャ、 識別番号、チャネル及び日の時間)を、データベース制御モジュール4 1 6を介 して、制御コンピュータ3 0によって構成されるキー・シグネチャ生成器4 1 0に 供給する。キー・シグネチャ生成器4 1 0は、前述した方法で受信セグメントの ための新たなキー・シグネチャを生成し、その新たなキー署名をデータベース制 御モジュール4 1 6を介して、セグメント認識コントローラ4 0 4に供給し、次い で、そのキー・シグネチャをキー・シグネチャ・データベース4 0 8に供給する 。さらに、該当の新セグメントに関する情報はデータベース制御コントローラモ ジュール4 1 6からデータベース4 1 2に供給される。 本明細書を通して用いられている用語、「確率(probability)」は、発生する事 象の絶対可能性(Iikelihood)のみならず、事象(event)の相対可能性すなわち発 生頻度の両方を言いい。正規化した値か、さもなければ、例えば2以上の事 象の相対可能性の非定量化表現として表されてもよい。ここで用いられている用 語、「ブロードキャスト(broadcast)」は、データ及び情報の広範な分散のための 他のモードのみならず、ケーブル、衛星またはその他のものにより空中に拡散さ れるラジオ、テレビジョン放送のような情報の広範な流布のための種々のモード のことを言う。 ビデオフレームまたはフィールドインターバルを、シグネチャの生成の目的と 、テレビジョンコマーシャル認識システムに関するその他の目的とに対する開示 されている実施例において用いたが、フレームまたはフィールドインターバルの 使用は、単なる便宜のためであることを認められたい。異なるインターバルをシ グネチャ生成のため、及びかかる他の目的のために選択してもよいことを解され たい。例えば、シグネチャは、フレームの組み合わせまたはフィールドの組み合 わせ、ないしは、ビデオ信号におけるフレームまたはフィールド情報のサブセッ トから生成してもよい。そのオーディオのインターバルはビデオインターバルと 対応する必要はなく、任意に選択されてよい。ラジオ放送セグメントを認識する ためのシステムによれば、任意のインターバルがシグネチャ生成及びその他の目 的のために用いられてもよい、ただし、選択されたインターバルの中に十分な情 報が含まれていることが前提である。 この発明の実施例を、認識テレビジョン放送コマーシャルについて述べたが、 この発明による放送セグメントの連続パターン認識のシステムと方法は、他の目 的にも用いられる。例えば、ロイアリティ支払いの決定のため、更には視聴者測 定サーベイに参加する視聴者メンバーによって受信されたプログラム、コマーシ ャル又は他のセグメントを決定するため、どのようなプログラム、歌又は他の作 品が放送されていたかを決定する目的に用いられる。 この発明のシステムと方法は、全体にあるいは一部に、アナログ又はディジタ ル回路又はその両方を用いて実施できるし、そのための要素とステップは、多種 のシステムとサブシステム形態(configuration)及びデバイスによって実施又は 実行できるし、更に種々のステップと要素はハード又はソフトウェアに基礎をお くプロセッサを用いて実行又は実施できる。 この発明の格別の実施例について、図面を参照して詳細に説明してきたが、こ の発明は、それ等特別の実施例に限定されるものではなく、特許請求の範囲に規 定された発明の範囲と精神を離れないで、種々の変更と改変が可能である。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 フェリンガー,マイクル ダブリュ. アメリカ合衆国 80304 コロラド州ボウ ルダー(番地なし) (72)発明者 ヤングラブ,ファンシー ビー. アメリカ合衆国 80304 コロラド州ボウ ルダー(番地なし) (72)発明者 ジェームズ,デビッド エム. アメリカ合衆国 80526 コロラド州フォ ート コリンズ(番地なし) (72)発明者 クリフトン,デビッド エル. アメリカ合衆国 80303 コロラド州ボウ ルダー(番地なし) (72)発明者 ランド,リチャード エス. アメリカ合衆国 80026 コロラド州ラフ ァイエット(番地なし) 【要約の続き】 共にビデオ信号のインターバルを特徴とするシグネチャ を発生する。互いに変位したビデオ信号の異なる部分を 示す、このように形成された第1シグネチャのマスクワ ードと第 2 シグネチャのマスクワードとを比較し、マ スクワードの値を定める。

Claims (1)

  1. 【特許請求の範囲】 1.放送セグメント認識の方法であって、 認識されるべき複数の放送セグメントの各々に対するシグネチャ(signature )を生成するステップ、 放送セグメントシグネチャのデータベースを形成するために上記各シグネチャ を蓄積するステップ、 放送セグメントをモニターするステップ、 モニターされた放送セグメントを現わすシグネチャを形成するステップ、 モニターされた放送セグメントを現わすシグネチャを、データベースの放送セ グメントシグネチャの少くとも1つと比較して、それ等が一致するかどうかを決 定するステップ、 モニターされる放送セグメントの一致の有効性を、少くとも次の1つ、つまり 、 (a)モニターされる放送セグメントが一時的に予め決められた信号イベント (events)によって拘束されているかどうかを決定すること、 (b)モニターされる放送セグメントが、予め決められた基準に従って一致が 許容される他のモニターされる放送セグメントとオーバーラップするかどうかを 決定すること、 (c)一致が、誤った一致セグメントの予め決められたプロフィールに合致す るかどうかを決定すること、 の内の1つを実行することによって評価するステップ、 を有する放送セグメント認識の方法。 16.放送セグメント認識システムであって、 認識されるべき複数の放送セグメントの各々に対するシグネチャを生成する手 段、 放送セグメントシグネチャのデータベースを形成するために上記各シグネチャ を蓄積する手段、 放送セグメントをモニターする手段、 モニターされた放送セグメントを現わすシグネチャを形成する手段、 モニターされた放送セグメントを現わすシグネチャを、複数のデータベースの 放送セグメントシグネチャの各々と比較して、第1エラー・トレランス・レベル からみて、それ等が一致するかどうかを決定する手段、 予め決められた評価基準では、許容が疑問とされる一致の範囲に、上記一致が あるかどうかを評価し、もし、一致がその範囲にあるとすれば、 第1のエラー・トレランス(tolerance)・レベルに対して許容される一致の 程度より比較的高いエラーレベルを有する第2のエラー・トレランス・レベルを 用いて、モニターされた放送セグメントを現わす記号を、データベースの一致放 送セグメント記号と比較する手段、 を有する放送セグメント認識システム。
JP5519540A 1992-04-30 1993-04-30 放送セグメントを認識するための方法とシステム Pending JPH08500471A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US07/876,578 US5436653A (en) 1992-04-30 1992-04-30 Method and system for recognition of broadcast segments
US876,578 1992-04-30
PCT/US1993/004082 WO1993022875A1 (en) 1992-04-30 1993-04-30 Method and system for recognition of broadcast segments

Publications (1)

Publication Number Publication Date
JPH08500471A true JPH08500471A (ja) 1996-01-16

Family

ID=25368063

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5519540A Pending JPH08500471A (ja) 1992-04-30 1993-04-30 放送セグメントを認識するための方法とシステム

Country Status (12)

Country Link
US (5) US5436653A (ja)
EP (2) EP1261155B1 (ja)
JP (1) JPH08500471A (ja)
AT (2) ATE232036T1 (ja)
AU (3) AU678163B2 (ja)
CA (2) CA2504552C (ja)
DE (2) DE69334130T2 (ja)
DK (1) DK1261155T3 (ja)
ES (1) ES2284777T3 (ja)
HK (1) HK1051938A1 (ja)
PT (1) PT1261155E (ja)
WO (1) WO1993022875A1 (ja)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001211136A (ja) * 1999-11-15 2001-08-03 Fujitsu Ten Ltd ディジタル放送受信機及びセグメント数検出装置
JP2001313960A (ja) * 2000-04-27 2001-11-09 Sony Corp 信号処理装置及び方法
JP2010519832A (ja) * 2007-02-27 2010-06-03 ランドマーク、ディジタル、サーヴィセズ、エルエルシー 放送データを監視および認識するためのシステムおよび方法
WO2010084714A1 (ja) 2009-01-23 2010-07-29 日本電気株式会社 画像識別子抽出装置
WO2010084713A1 (ja) 2009-01-23 2010-07-29 日本電気株式会社 画像識別子抽出装置
WO2010087124A1 (ja) 2009-01-29 2010-08-05 日本電気株式会社 特徴量選択装置
WO2010103848A1 (ja) 2009-03-13 2010-09-16 日本電気株式会社 画像識別子照合装置
WO2010119657A1 (ja) 2009-04-14 2010-10-21 日本電気株式会社 画像識別子抽出装置
WO2010146786A1 (ja) 2009-06-16 2010-12-23 日本電気株式会社 画像識別子照合装置
US8060372B2 (en) 2007-02-20 2011-11-15 The Nielsen Company (Us), Llc Methods and appratus for characterizing media
US8259806B2 (en) 2006-11-30 2012-09-04 Dolby Laboratories Licensing Corporation Extracting features of video and audio signal content to provide reliable identification of the signals
US8744193B2 (en) 2009-03-13 2014-06-03 Nec Corporation Image signature extraction device
JP5991488B2 (ja) * 2011-02-10 2016-09-14 日本電気株式会社 相違領域検出システム及び相違領域検出方法
US9947327B2 (en) 2008-01-29 2018-04-17 The Nielsen Company (Us), Llc Methods and apparatus for performing variable block length watermarking of media
US9972332B2 (en) 2007-11-12 2018-05-15 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US10133956B2 (en) 2009-03-13 2018-11-20 Nec Corporation Image signature extraction device

Families Citing this family (550)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US6081750A (en) * 1991-12-23 2000-06-27 Hoffberg; Steven Mark Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
USRE47908E1 (en) 1991-12-23 2020-03-17 Blanding Hovenweep, Llc Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US10361802B1 (en) 1999-02-01 2019-07-23 Blanding Hovenweep, Llc Adaptive pattern recognition based control system and method
US6400996B1 (en) 1999-02-01 2002-06-04 Steven M. Hoffberg Adaptive pattern recognition based control system and method
US5903454A (en) 1991-12-23 1999-05-11 Hoffberg; Linda Irene Human-factored interface corporating adaptive pattern recognition based controller apparatus
USRE48056E1 (en) 1991-12-23 2020-06-16 Blanding Hovenweep, Llc Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US6418424B1 (en) 1991-12-23 2002-07-09 Steven M. Hoffberg Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
USRE46310E1 (en) 1991-12-23 2017-02-14 Blanding Hovenweep, Llc Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US6850252B1 (en) 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US5436653A (en) * 1992-04-30 1995-07-25 The Arbitron Company Method and system for recognition of broadcast segments
US6301369B2 (en) 1992-07-31 2001-10-09 Digimarc Corporation Image marking to permit later identification
US5721788A (en) 1992-07-31 1998-02-24 Corbis Corporation Method and system for digital image signatures
US5903317A (en) * 1993-02-14 1999-05-11 Orad Hi-Tech Systems Ltd. Apparatus and method for detecting, identifying and incorporating advertisements in a video
DE59402618D1 (de) * 1993-08-31 1997-06-05 Rundfunkschutzrechte Ev Verfahren und einrichtung zum detektieren unerwünschter videoszenen
US5768426A (en) 1993-11-18 1998-06-16 Digimarc Corporation Graphics processing system employing embedded code signals
US6122403A (en) 1995-07-27 2000-09-19 Digimarc Corporation Computer system linked by using information in data objects
US6449377B1 (en) 1995-05-08 2002-09-10 Digimarc Corporation Methods and systems for watermark processing of line art images
US6757406B2 (en) 1993-11-18 2004-06-29 Digimarc Corporation Steganographic image processing
US5822436A (en) * 1996-04-25 1998-10-13 Digimarc Corporation Photographic products and methods employing embedded information
US6944298B1 (en) 1993-11-18 2005-09-13 Digimare Corporation Steganographic encoding and decoding of auxiliary codes in media signals
US6614914B1 (en) 1995-05-08 2003-09-02 Digimarc Corporation Watermark embedder and reader
US5748763A (en) 1993-11-18 1998-05-05 Digimarc Corporation Image steganography system featuring perceptually adaptive and globally scalable signal embedding
US7171016B1 (en) 1993-11-18 2007-01-30 Digimarc Corporation Method for monitoring internet dissemination of image, video and/or audio files
US5841978A (en) 1993-11-18 1998-11-24 Digimarc Corporation Network linking method using steganographically embedded data objects
US6611607B1 (en) 1993-11-18 2003-08-26 Digimarc Corporation Integrating digital watermarks in multimedia content
US6516079B1 (en) 2000-02-14 2003-02-04 Digimarc Corporation Digital watermark screening and detecting strategies
US6983051B1 (en) 1993-11-18 2006-01-03 Digimarc Corporation Methods for audio watermarking and decoding
US7313251B2 (en) 1993-11-18 2007-12-25 Digimarc Corporation Method and system for managing and controlling electronic media
US6345104B1 (en) 1994-03-17 2002-02-05 Digimarc Corporation Digital watermarks and methods for security documents
US7724919B2 (en) * 1994-10-21 2010-05-25 Digimarc Corporation Methods and systems for steganographic processing
US6560349B1 (en) * 1994-10-21 2003-05-06 Digimarc Corporation Audio monitoring using steganographic information
US8094949B1 (en) 1994-10-21 2012-01-10 Digimarc Corporation Music methods and systems
US20030213001A1 (en) * 1994-11-07 2003-11-13 Index Systems, Inc. Method and apparatus for transmitting and downloading setup information
US6583825B1 (en) * 1994-11-07 2003-06-24 Index Systems, Inc. Method and apparatus for transmitting and downloading setup information
US5708477A (en) * 1994-12-01 1998-01-13 Forbes; Scott Jared Video signal identifier for controlling a VCR and television based on the occurrence of commercials
EP0872120A1 (en) * 1995-03-07 1998-10-21 Interval Research Corporation System and method for selective recording of information
US7486799B2 (en) * 1995-05-08 2009-02-03 Digimarc Corporation Methods for monitoring audio and images on the internet
US7805500B2 (en) 1995-05-08 2010-09-28 Digimarc Corporation Network linking methods and apparatus
US7224819B2 (en) 1995-05-08 2007-05-29 Digimarc Corporation Integrating digital watermarks in multimedia content
US6760463B2 (en) * 1995-05-08 2004-07-06 Digimarc Corporation Watermarking methods and media
US5864358A (en) * 1995-06-26 1999-01-26 Matsushita Electric Industrial Co., Ltd. Method for switching programs in digital broadcasting and digital broadcast receiving apparatus
US7289643B2 (en) 2000-12-21 2007-10-30 Digimarc Corporation Method, apparatus and programs for generating and utilizing content signatures
US6411725B1 (en) 1995-07-27 2002-06-25 Digimarc Corporation Watermark enabled video objects
US7711564B2 (en) 1995-07-27 2010-05-04 Digimarc Corporation Connected audio and other media objects
US6505160B1 (en) 1995-07-27 2003-01-07 Digimarc Corporation Connected audio and other media objects
US6577746B1 (en) 1999-12-28 2003-06-10 Digimarc Corporation Watermark-based object linking and embedding
US7562392B1 (en) 1999-05-19 2009-07-14 Digimarc Corporation Methods of interacting with audio and ambient music
US6829368B2 (en) 2000-01-26 2004-12-07 Digimarc Corporation Establishing and interacting with on-line media collections using identifiers in media signals
US5905522A (en) * 1995-08-31 1999-05-18 Microsoft Corporation Resource allocation method for interactive televideo system
GB9519087D0 (en) * 1995-09-19 1995-11-22 Cursor Positioning Sys Ltd Navigation and tracking system
US5767893A (en) * 1995-10-11 1998-06-16 International Business Machines Corporation Method and apparatus for content based downloading of video programs
EP0880840A4 (en) * 1996-01-11 2002-10-23 Mrj Inc DEVICE FOR CONTROLLING ACCESS AND DISTRIBUTION OF DIGITAL PROPERTY
US20030056103A1 (en) 2000-12-18 2003-03-20 Levy Kenneth L. Audio/video commerce application architectural framework
US5870754A (en) * 1996-04-25 1999-02-09 Philips Electronics North America Corporation Video retrieval of MPEG compressed sequences using DC and motion signatures
US8180844B1 (en) 2000-03-18 2012-05-15 Digimarc Corporation System for linking from objects to remote resources
US7505605B2 (en) * 1996-04-25 2009-03-17 Digimarc Corporation Portable devices and methods employing digital watermarking
JP3625344B2 (ja) * 1996-11-05 2005-03-02 株式会社ビデオリサーチ 視聴チャンネル検出装置
US6381341B1 (en) 1996-05-16 2002-04-30 Digimarc Corporation Watermark encoding method exploiting biases inherent in original signal
US5987150A (en) * 1996-08-30 1999-11-16 Intel Corporation Video capturing using on-screen graphics
US8306811B2 (en) * 1996-08-30 2012-11-06 Digimarc Corporation Embedding data in audio and detecting embedded data in audio
US6088455A (en) * 1997-01-07 2000-07-11 Logan; James D. Methods and apparatus for selectively reproducing segments of broadcast programming
US20030093790A1 (en) * 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US20060280437A1 (en) * 1999-01-27 2006-12-14 Gotuit Media Corp Methods and apparatus for vending and delivering the content of disk recordings
US20020120925A1 (en) * 2000-03-28 2002-08-29 Logan James D. Audio and video program recording, editing and playback systems using metadata
US7055166B1 (en) * 1996-10-03 2006-05-30 Gotuit Media Corp. Apparatus and methods for broadcast monitoring
US6002443A (en) * 1996-11-01 1999-12-14 Iggulden; Jerry Method and apparatus for automatically identifying and selectively altering segments of a television broadcast signal in real-time
AU5197998A (en) * 1996-11-01 1998-05-29 Jerry Iggulden Method and apparatus for automatically identifying and selectively altering segments of a television broadcast signal in real-time
US6771316B1 (en) 1996-11-01 2004-08-03 Jerry Iggulden Method and apparatus for selectively altering a televised video signal in real-time
US7269330B1 (en) 1996-11-01 2007-09-11 Televentions, Llc Method and apparatus for controlling a video recorder/player to selectively alter a video signal
US5999689A (en) 1996-11-01 1999-12-07 Iggulden; Jerry Method and apparatus for controlling a videotape recorder in real-time to automatically identify and selectively skip segments of a television broadcast signal during recording of the television signal
US5893062A (en) 1996-12-05 1999-04-06 Interval Research Corporation Variable rate video playback with synchronized audio
US6263507B1 (en) 1996-12-05 2001-07-17 Interval Research Corporation Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data
US8640160B2 (en) * 1997-01-06 2014-01-28 At&T Intellectual Property I, L.P. Method and system for providing targeted advertisements
US7587323B2 (en) 2001-12-14 2009-09-08 At&T Intellectual Property I, L.P. System and method for developing tailored content
US8677384B2 (en) 2003-12-12 2014-03-18 At&T Intellectual Property I, L.P. Methods and systems for network based capture of television viewer generated clickstreams
US6675383B1 (en) 1997-01-22 2004-01-06 Nielsen Media Research, Inc. Source detection apparatus and method for audience measurement
CA2196930C (en) * 1997-02-06 2005-06-21 Nael Hirzalla Video sequence recognition
GB9705999D0 (en) * 1997-03-22 1997-05-07 Philips Electronics Nv Video signal analysis and storage
US5940135A (en) * 1997-05-19 1999-08-17 Aris Technologies, Inc. Apparatus and method for encoding and decoding information in analog signals
US6427012B1 (en) * 1997-05-19 2002-07-30 Verance Corporation Apparatus and method for embedding and extracting information in analog signals using replica modulation
ES2190578T3 (es) * 1997-06-23 2003-08-01 Liechti Ag Metodo para la compresion de grabaciones de ruido ambiental, metodo para la deteccion de los elementos de programa de las mismas, dispositivo y programa de ordenador para su aplicacion.
US5959683A (en) * 1997-06-26 1999-09-28 Xerox Corporation System to remove artifacts in a digital image derived from a television signal
US6031581A (en) * 1997-06-26 2000-02-29 Xerox Corporation System for removing color bleed in a television image adapted for digital printing
GB2327167A (en) * 1997-07-09 1999-01-13 Register Group Limited The Identification of television commercials
US6112053A (en) * 1997-07-14 2000-08-29 General Electric Company Television viewership monitoring system employing audio channel and synchronization information
US20060026048A1 (en) * 1997-08-08 2006-02-02 Kolawa Adam K Method and apparatus for automated selection, organization, and recommendation of items based on user preference topography
GB9722324D0 (en) 1997-10-22 1997-12-17 Cambridge Positioning Sys Ltd Positioning system for digital telephone networks
US6961954B1 (en) 1997-10-27 2005-11-01 The Mitre Corporation Automated segmentation, information extraction, summarization, and presentation of broadcast news
US6173271B1 (en) * 1997-11-26 2001-01-09 California Institute Of Technology Television advertising automated billing system
IL122498A0 (en) * 1997-12-07 1998-06-15 Contentwise Ltd Apparatus and methods for manipulating sequences of images
US5973723A (en) * 1997-12-12 1999-10-26 Deluca; Michael Joseph Selective commercial detector and eliminator apparatus and method
US20050028194A1 (en) * 1998-01-13 2005-02-03 Elenbaas Jan Hermanus Personalized news retrieval system
ES2141039B1 (es) * 1998-01-30 2000-10-16 Mayo Audiovisual S A Sistema automatico de deteccion y reconocimiento de anuncios televisados.
DE19810114A1 (de) * 1998-03-09 1999-09-16 Stefan Weigelt Suchverfahren für Musikstücke, insbesondere für Rundfunkempfangsgeräte
JPH11298795A (ja) * 1998-04-14 1999-10-29 Sony Corp 制御信号発生回路
US7689532B1 (en) 2000-07-20 2010-03-30 Digimarc Corporation Using embedded data with file sharing
EP1043853B1 (en) * 1998-05-12 2005-06-01 Nielsen Media Research, Inc. Audience measurement system for digital television
US7644282B2 (en) 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
US6163510A (en) * 1998-06-30 2000-12-19 International Business Machines Corporation Multimedia search and indexing system and method of operation using audio cues with signal thresholds
US6100941A (en) * 1998-07-28 2000-08-08 U.S. Philips Corporation Apparatus and method for locating a commercial disposed within a video data stream
JP2000101439A (ja) * 1998-09-24 2000-04-07 Sony Corp 情報処理装置および方法、情報記録装置および方法、記録媒体、並びに提供媒体
US6320623B1 (en) * 1998-11-13 2001-11-20 Philips Electronics North America Corporation Method and device for detecting an event in a program of a video and/ or audio signal and for providing the program to a display upon detection of the event
JP2000165806A (ja) * 1998-11-30 2000-06-16 Sony Corp 情報処理装置および方法、並びに提供媒体
JP4026100B2 (ja) * 1998-11-30 2007-12-26 ソニー株式会社 情報処理装置および方法、並びに記録媒体
US6934461B1 (en) * 1999-01-05 2005-08-23 Interval Research Corporation Low attention recording, with particular application to social recording
US7421723B2 (en) * 1999-01-07 2008-09-02 Nielsen Media Research, Inc. Detection of media links in broadcast signals
US6906743B1 (en) * 1999-01-13 2005-06-14 Tektronix, Inc. Detecting content based defects in a video stream
US6185527B1 (en) 1999-01-19 2001-02-06 International Business Machines Corporation System and method for automatic audio content analysis for word spotting, indexing, classification and retrieval
US7904187B2 (en) 1999-02-01 2011-03-08 Hoffberg Steven M Internet appliance system and method
US20040255336A1 (en) * 1999-03-30 2004-12-16 Gotuit Video, Inc. Methods and apparatus for simultaneous program viewing
US7362946B1 (en) * 1999-04-12 2008-04-22 Canon Kabushiki Kaisha Automated visual image editing system
US6332120B1 (en) * 1999-04-20 2001-12-18 Solana Technology Development Corporation Broadcast speech recognition system for keyword monitoring
US8095796B2 (en) 1999-05-19 2012-01-10 Digimarc Corporation Content identifiers
US7406214B2 (en) 1999-05-19 2008-07-29 Digimarc Corporation Methods and devices employing optical sensors and/or steganography
US8874244B2 (en) 1999-05-19 2014-10-28 Digimarc Corporation Methods and systems employing digital content
US7302574B2 (en) * 1999-05-19 2007-11-27 Digimarc Corporation Content identifiers triggering corresponding responses through collaborative processing
US8055588B2 (en) * 1999-05-19 2011-11-08 Digimarc Corporation Digital media methods
US6871180B1 (en) 1999-05-25 2005-03-22 Arbitron Inc. Decoding of information in audio signals
GB9912724D0 (en) 1999-06-01 1999-08-04 Cambridge Positioning Sys Ltd Radio positioning system
US20050038819A1 (en) * 2000-04-21 2005-02-17 Hicken Wendell T. Music Recommendation system and method
US7013301B2 (en) * 2003-09-23 2006-03-14 Predixis Corporation Audio fingerprinting system and method
US6519564B1 (en) * 1999-07-01 2003-02-11 Koninklijke Philips Electronics N.V. Content-driven speech-or audio-browser
US8326584B1 (en) 1999-09-14 2012-12-04 Gracenote, Inc. Music searching methods based on human perception
US7174293B2 (en) * 1999-09-21 2007-02-06 Iceberg Industries Llc Audio identification system and method
US7194752B1 (en) * 1999-10-19 2007-03-20 Iceberg Industries, Llc Method and apparatus for automatically recognizing input audio and/or video streams
US6941275B1 (en) 1999-10-07 2005-09-06 Remi Swierczek Music identification system
US7155735B1 (en) 1999-10-08 2006-12-26 Vulcan Patents Llc System and method for the broadcast dissemination of time-ordered data
US6469749B1 (en) * 1999-10-13 2002-10-22 Koninklijke Philips Electronics N.V. Automatic signature-based spotting, learning and extracting of commercials and other video content
CA2809775C (en) * 1999-10-27 2017-03-21 The Nielsen Company (Us), Llc Audio signature extraction and correlation
AU1173701A (en) * 1999-11-11 2001-06-06 Contentwise Ltd., Method and system for global broadcast monitoring
US6993245B1 (en) 1999-11-18 2006-01-31 Vulcan Patents Llc Iterative, maximally probable, batch-mode commercial detection for audiovisual content
US6721488B1 (en) * 1999-11-30 2004-04-13 Koninklijke Philips Electronics N.V. Method and apparatus to identify sequential content stored on a storage medium
WO2001045103A1 (en) * 1999-12-14 2001-06-21 Koninklijke Philips Electronics N.V. Method and apparatus to identify content stored on a storage medium
US6397041B1 (en) 1999-12-22 2002-05-28 Radio Propagation Services, Inc. Broadcast monitoring and control system
US6757682B1 (en) 2000-01-28 2004-06-29 Interval Research Corporation Alerting users to items of current interest
US6675174B1 (en) 2000-02-02 2004-01-06 International Business Machines Corp. System and method for measuring similarity between a set of known temporal media segments and a one or more temporal media streams
US6593976B1 (en) * 2000-02-14 2003-07-15 Koninklijke Philips Electronics N.V. Automatic return to input source when user-selected content reappears in input source
US6737957B1 (en) 2000-02-16 2004-05-18 Verance Corporation Remote control signaling using audio watermarks
US6834308B1 (en) 2000-02-17 2004-12-21 Audible Magic Corporation Method and apparatus for identifying media content presented on a media playing device
US20020062481A1 (en) 2000-02-25 2002-05-23 Malcolm Slaney Method and system for selecting advertisements
US7661116B2 (en) 2000-02-25 2010-02-09 Vulcan Patents Llc Auction for targeted content
US8910199B2 (en) * 2000-02-25 2014-12-09 Interval Licensing Llc Targeted television content display
GB2360581A (en) * 2000-03-15 2001-09-26 Television Monitoring Services Quantification of brand exposure on screen
US20060015925A1 (en) * 2000-03-28 2006-01-19 Gotuit Media Corp Sales presentation video on demand system
US20040255334A1 (en) * 2000-03-28 2004-12-16 Gotuit Audio, Inc. Methods and apparatus for seamlessly changing volumes during playback using a compact disk changer
US6968564B1 (en) * 2000-04-06 2005-11-22 Nielsen Media Research, Inc. Multi-band spectral audio encoding
AU2001246797A1 (en) * 2000-04-10 2001-10-23 Contentwise Ltd. Method and system for managing multimedia databases
US7305104B2 (en) * 2000-04-21 2007-12-04 Digimarc Corporation Authentication of identification documents using digital watermarks
US20060217828A1 (en) * 2002-10-23 2006-09-28 Hicken Wendell T Music searching system and method
JP4300697B2 (ja) * 2000-04-24 2009-07-22 ソニー株式会社 信号処理装置及び方法
US8121843B2 (en) 2000-05-02 2012-02-21 Digimarc Corporation Fingerprint methods and systems for media signals
US7617509B1 (en) 2000-06-23 2009-11-10 International Business Machines Corporation Method and system for automated monitoring of quality of service of digital video material distribution and play-out
US8219545B2 (en) * 2000-07-27 2012-07-10 Goldhar/Jaffe Technology Development Corporation Indigenous authentication and searching system and method
US6757828B1 (en) * 2000-07-27 2004-06-29 Jonathan E. Jaffe Indigenous authentication for sensor-recorders and other information capture devices
US7853664B1 (en) 2000-07-31 2010-12-14 Landmark Digital Services Llc Method and system for purchasing pre-recorded music
JP3775186B2 (ja) 2000-08-10 2006-05-17 日本電気株式会社 放送確認システム、放送確認装置および方法、放送確認プログラムを記録した記録媒体
US20020059629A1 (en) * 2000-08-21 2002-05-16 Markel Steven O. Detection and recognition of data receiver to facilitate proper transmission of enhanced data
ES2414650T3 (es) 2000-08-23 2013-07-22 Gracenote, Inc. Procedimiento y sistema para la obtención de información
WO2002017627A2 (en) * 2000-08-25 2002-02-28 Intellocity Usa, Inc. Personalized remote control
US20020057286A1 (en) * 2000-08-25 2002-05-16 Markel Steven O. Device independent video enhancement scripting language
US8205237B2 (en) 2000-09-14 2012-06-19 Cox Ingemar J Identifying works, using a sub-linear time search, such as an approximate nearest neighbor search, for initiating a work-based action, such as an action on the internet
GB2384596A (en) * 2000-10-23 2003-07-30 Ntt Comm Corp Musical composition recognition method and system, storage medium where musical composition program is stored, commercial recognition method and system,
US7277766B1 (en) * 2000-10-24 2007-10-02 Moodlogic, Inc. Method and system for analyzing digital audio files
US6748360B2 (en) 2000-11-03 2004-06-08 International Business Machines Corporation System for selling a product utilizing audio content identification
US6604072B2 (en) 2000-11-03 2003-08-05 International Business Machines Corporation Feature-based audio content identification
US6574594B2 (en) 2000-11-03 2003-06-03 International Business Machines Corporation System for monitoring broadcast audio content
US7085613B2 (en) * 2000-11-03 2006-08-01 International Business Machines Corporation System for monitoring audio content in a video broadcast
US7031921B2 (en) * 2000-11-03 2006-04-18 International Business Machines Corporation System for monitoring audio content available over a network
US7562012B1 (en) 2000-11-03 2009-07-14 Audible Magic Corporation Method and apparatus for creating a unique audio signature
US6999715B2 (en) * 2000-12-11 2006-02-14 Gary Alan Hayter Broadcast audience surveillance using intercepted audio
US20020072982A1 (en) * 2000-12-12 2002-06-13 Shazam Entertainment Ltd. Method and system for interacting with a user in an experiential environment
US20020080976A1 (en) * 2000-12-14 2002-06-27 Schreer Scott P. System and method for accessing authorized recordings
US7266704B2 (en) 2000-12-18 2007-09-04 Digimarc Corporation User-friendly rights management systems and methods
US20020114299A1 (en) * 2000-12-27 2002-08-22 Daozheng Lu Apparatus and method for measuring tuning of a digital broadcast receiver
US8458754B2 (en) * 2001-01-22 2013-06-04 Sony Computer Entertainment Inc. Method and system for providing instant start multimedia content
US20070300258A1 (en) * 2001-01-29 2007-12-27 O'connor Daniel Methods and systems for providing media assets over a network
CN1235408C (zh) * 2001-02-12 2006-01-04 皇家菲利浦电子有限公司 生成和匹配多媒体内容的散列
US8706023B2 (en) * 2008-01-04 2014-04-22 3D Radio Llc Multi-tuner radio systems and methods
CA2742644C (en) * 2001-02-20 2016-04-12 Caron S. Ellis Multiple radio signal processing and storing method and apparatus
US8909128B2 (en) * 2008-04-09 2014-12-09 3D Radio Llc Radio device with virtually infinite simultaneous inputs
US8699995B2 (en) * 2008-04-09 2014-04-15 3D Radio Llc Alternate user interfaces for multi tuner radio device
US8868023B2 (en) 2008-01-04 2014-10-21 3D Radio Llc Digital radio systems and methods
US7359889B2 (en) 2001-03-02 2008-04-15 Landmark Digital Services Llc Method and apparatus for automatically creating database for use in automated media recognition system
TW558901B (en) * 2001-03-22 2003-10-21 United Video Properties Inc Personal video recorder systems and methods
US8949878B2 (en) * 2001-03-30 2015-02-03 Funai Electric Co., Ltd. System for parental control in video programs based on multimedia content information
US7363278B2 (en) * 2001-04-05 2008-04-22 Audible Magic Corporation Copyright detection and protection system and method
US7248715B2 (en) * 2001-04-06 2007-07-24 Digimarc Corporation Digitally watermarking physical media
US7039585B2 (en) 2001-04-10 2006-05-02 International Business Machines Corporation Method and system for searching recorded speech and retrieving relevant segments
US7046819B2 (en) 2001-04-25 2006-05-16 Digimarc Corporation Encoded reference signal for digital watermarks
US7325249B2 (en) * 2001-04-30 2008-01-29 Aol Llc Identifying unwanted electronic messages
US6785656B2 (en) * 2001-06-05 2004-08-31 Xm Satellite Radio, Inc. Method and apparatus for digital audio playback using local stored content
US20050005308A1 (en) * 2002-01-29 2005-01-06 Gotuit Video, Inc. Methods and apparatus for recording and replaying sports broadcasts
US8572640B2 (en) * 2001-06-29 2013-10-29 Arbitron Inc. Media data use measurement with remote decoding/pattern matching
US6963543B2 (en) 2001-06-29 2005-11-08 Qualcomm Incorporated Method and system for group call service
US7529659B2 (en) * 2005-09-28 2009-05-05 Audible Magic Corporation Method and apparatus for identifying an unknown work
US6968337B2 (en) * 2001-07-10 2005-11-22 Audible Magic Corporation Method and apparatus for identifying an unknown work
US7877438B2 (en) * 2001-07-20 2011-01-25 Audible Magic Corporation Method and apparatus for identifying new media content
US8972481B2 (en) 2001-07-20 2015-03-03 Audible Magic, Inc. Playlist generation method and apparatus
AU2002346116A1 (en) * 2001-07-20 2003-03-03 Gracenote, Inc. Automatic identification of sound recordings
US20030054757A1 (en) * 2001-09-19 2003-03-20 Kolessar Ronald S. Monitoring usage of media data with non-program data elimination
US20030070179A1 (en) * 2001-10-04 2003-04-10 Ritz Peter B. System and method for connecting end user with application based on broadcast code
US6961467B2 (en) * 2001-10-17 2005-11-01 Intel Corporation Identifying image content
US20030135623A1 (en) * 2001-10-23 2003-07-17 Audible Magic, Inc. Method and apparatus for cache promotion
US7012653B1 (en) * 2001-11-30 2006-03-14 Bellsouth Intellectual Property Corporation Program restart and commercial ending notification method and system
US7870089B1 (en) * 2001-12-03 2011-01-11 Aol Inc. Reducing duplication of embedded resources on a network
US7496604B2 (en) * 2001-12-03 2009-02-24 Aol Llc Reducing duplication of files on a network
US20030110500A1 (en) * 2001-12-06 2003-06-12 Rodriguez Arturo A. Prediction-based adaptative control of television viewing functionality
US7120922B2 (en) * 2001-12-11 2006-10-10 Scientific-Atlanta, Inc. Time-adaptive control of television viewing functionality
US7212979B1 (en) 2001-12-14 2007-05-01 Bellsouth Intellectuall Property Corporation System and method for identifying desirable subscribers
US9967633B1 (en) 2001-12-14 2018-05-08 At&T Intellectual Property I, L.P. System and method for utilizing television viewing patterns
US20110178877A1 (en) 2001-12-14 2011-07-21 Swix Scott R Advertising and content management systems and methods
US7086075B2 (en) 2001-12-21 2006-08-01 Bellsouth Intellectual Property Corporation Method and system for managing timed responses to A/V events in television programming
US7064796B2 (en) * 2001-12-21 2006-06-20 Eloda Inc. Method and system for re-identifying broadcast segments using statistical profiles
US7337455B2 (en) * 2001-12-31 2008-02-26 Koninklijke Philips Electronics N.V. Method, apparatus, and program for evolving algorithms for detecting content in information streams
US8086491B1 (en) 2001-12-31 2011-12-27 At&T Intellectual Property I, L. P. Method and system for targeted content distribution using tagged data streams
US20030131350A1 (en) * 2002-01-08 2003-07-10 Peiffer John C. Method and apparatus for identifying a digital audio signal
US7020304B2 (en) 2002-01-22 2006-03-28 Digimarc Corporation Digital watermarking and fingerprinting including synchronization, layering, version control, and compressed embedding
US20070113250A1 (en) * 2002-01-29 2007-05-17 Logan James D On demand fantasy sports systems and methods
EP1474761A2 (en) 2002-02-05 2004-11-10 Koninklijke Philips Electronics N.V. Efficient storage of fingerprints
US8150235B2 (en) 2002-02-08 2012-04-03 Intel Corporation Method of home media server control
US20030154493A1 (en) * 2002-02-14 2003-08-14 Kagle Jonathan C. Identifying unique broadcasts
US7461392B2 (en) * 2002-07-01 2008-12-02 Microsoft Corporation System and method for identifying and segmenting repeating media objects embedded in a stream
US6766523B2 (en) 2002-05-31 2004-07-20 Microsoft Corporation System and method for identifying and segmenting repeating media objects embedded in a stream
US8601504B2 (en) * 2002-06-20 2013-12-03 Verance Corporation Secure tracking system and method for video program content
CN100426861C (zh) * 2002-07-01 2008-10-15 微软公司 对嵌于媒介流中的重复对象提供用户控制的系统和方法
US20040091111A1 (en) * 2002-07-16 2004-05-13 Levy Kenneth L. Digital watermarking and fingerprinting applications
US20040013405A1 (en) * 2002-07-18 2004-01-22 Christiansen Robert D Method for preparing/printing video scene indices
US8176508B2 (en) * 2002-08-02 2012-05-08 Time Warner Cable Method and apparatus to provide verification of data using a fingerprint
SE524162C2 (sv) * 2002-08-23 2004-07-06 Rickard Berg Förfarande för att behandla signaler
US20060129822A1 (en) * 2002-08-26 2006-06-15 Koninklijke Philips Electronics, N.V. Method of content identification, device, and software
EP1403783A3 (en) * 2002-09-24 2005-01-19 Matsushita Electric Industrial Co., Ltd. Audio signal feature extraction
US8959016B2 (en) 2002-09-27 2015-02-17 The Nielsen Company (Us), Llc Activating functions in processing devices using start codes embedded in audio
US7222071B2 (en) 2002-09-27 2007-05-22 Arbitron Inc. Audio data receipt/exposure measurement with code monitoring and signature extraction
US20040062520A1 (en) * 2002-09-27 2004-04-01 Koninklijke Philips Electronics N.V. Enhanced commercial detection through fusion of video and audio signatures
US9711153B2 (en) * 2002-09-27 2017-07-18 The Nielsen Company (Us), Llc Activating functions in processing devices using encoded audio and detecting audio signatures
FR2845179B1 (fr) * 2002-09-27 2004-11-05 Thomson Licensing Sa Procede de regroupement d'images d'une sequence video
CN1685703A (zh) * 2002-09-30 2005-10-19 皇家飞利浦电子股份有限公司 “指纹”的提取
EP2442566A3 (en) 2002-10-15 2012-08-08 Verance Corporation Media Monitoring, Management and Information System
CN1774922A (zh) 2002-10-23 2006-05-17 尼尔逊媒介研究股份有限公司 用于压缩音频/视频数据的数字数据插入装置和方法
CN1711531A (zh) * 2002-11-12 2005-12-21 皇家飞利浦电子股份有限公司 采指纹多媒体内容
JP4218319B2 (ja) * 2002-11-19 2009-02-04 日本電気株式会社 映像閲覧システムおよび方法
JP4228662B2 (ja) * 2002-11-19 2009-02-25 日本電気株式会社 映像閲覧システムおよび方法
US8204353B2 (en) 2002-11-27 2012-06-19 The Nielsen Company (Us), Llc Apparatus and methods for tracking and analyzing digital recording device event sequences
AU2003283783A1 (en) * 2002-12-20 2005-05-11 Koninklijke Philips Electronics N.V. Video content detection
US7483835B2 (en) * 2002-12-23 2009-01-27 Arbitron, Inc. AD detection using ID code and extracted signature
EP1584048A1 (en) * 2003-01-06 2005-10-12 Koninklijke Philips Electronics N.V. Method and apparatus for similar video content hopping
US20040153647A1 (en) * 2003-01-31 2004-08-05 Rotholtz Ben Aaron Method and process for transmitting video content
US8332326B2 (en) 2003-02-01 2012-12-11 Audible Magic Corporation Method and apparatus to identify a work received by a processing system
EP1593217A4 (en) 2003-02-10 2009-04-01 Nielsen Media Res Inc METHOD AND DEVICE FOR ADAPTIVELY COLLECTING INVESTIGATOR INFORMATION DATA
US7509550B2 (en) * 2003-02-13 2009-03-24 Janusz Rajski Fault diagnosis of compressed test responses
US7437640B2 (en) * 2003-02-13 2008-10-14 Janusz Rajski Fault diagnosis of compressed test responses having one or more unknown states
ATE532133T1 (de) * 2003-02-13 2011-11-15 Mentor Graphics Corp Komprimieren von testantworten unter verwendung eines kompaktors
JP3901106B2 (ja) * 2003-02-19 2007-04-04 ソニー株式会社 受信装置およびその設定方法
US7809154B2 (en) 2003-03-07 2010-10-05 Technology, Patents & Licensing, Inc. Video entity recognition in compressed digital video streams
US20050177847A1 (en) * 2003-03-07 2005-08-11 Richard Konig Determining channel associated with video stream
US7738704B2 (en) * 2003-03-07 2010-06-15 Technology, Patents And Licensing, Inc. Detecting known video entities utilizing fingerprints
US7694318B2 (en) * 2003-03-07 2010-04-06 Technology, Patents & Licensing, Inc. Video detection and insertion
US20040237102A1 (en) * 2003-03-07 2004-11-25 Richard Konig Advertisement substitution
US20050149968A1 (en) * 2003-03-07 2005-07-07 Richard Konig Ending advertisement insertion
US7320009B1 (en) 2003-03-28 2008-01-15 Novell, Inc. Methods and systems for file replication utilizing differences between versions of files
US20040226035A1 (en) * 2003-05-05 2004-11-11 Hauser David L. Method and apparatus for detecting media content
US7590695B2 (en) 2003-05-09 2009-09-15 Aol Llc Managing electronic messages
US7509180B2 (en) * 2003-05-23 2009-03-24 Microsoft Corporation Extending digital rights management and authentication to audio speakers
US7289533B2 (en) * 2003-06-06 2007-10-30 Quake Global, Inc. Universal subscriber communicator module
US20040260682A1 (en) * 2003-06-19 2004-12-23 Microsoft Corporation System and method for identifying content and managing information corresponding to objects in a signal
WO2005006768A1 (en) * 2003-06-20 2005-01-20 Nielsen Media Research, Inc Signature-based program identification apparatus and methods for use with digital broadcast systems
US7739602B2 (en) 2003-06-24 2010-06-15 Aol Inc. System and method for community centric resource sharing based on a publishing subscription model
US7386047B2 (en) * 2003-08-19 2008-06-10 Radio Computing Services, Inc. Method for determining the likelihood of a match between source data and reference data
WO2005036877A1 (en) * 2003-09-12 2005-04-21 Nielsen Media Research, Inc. Digital video signature apparatus and methods for use with video program identification systems
JP3885786B2 (ja) * 2003-09-12 2007-02-28 ソニー株式会社 情報信号の処理装置および処理方法、並びにその処理方法を実行させるためのプログラム
WO2005032128A1 (en) * 2003-09-25 2005-04-07 Koninklijke Philips Electronics, N.V. Simple program guide
US9055239B2 (en) 2003-10-08 2015-06-09 Verance Corporation Signal continuity assessment using embedded watermarks
US20060239501A1 (en) 2005-04-26 2006-10-26 Verance Corporation Security enhancements of digital watermarks for multi-media content
US7369677B2 (en) 2005-04-26 2008-05-06 Verance Corporation System reactions to the detection of embedded watermarks in a digital host content
US20070039018A1 (en) * 2005-08-09 2007-02-15 Verance Corporation Apparatus, systems and methods for broadcast advertising stewardship
US7788696B2 (en) * 2003-10-15 2010-08-31 Microsoft Corporation Inferring information about media stream objects
WO2005041109A2 (en) * 2003-10-17 2005-05-06 Nielsen Media Research, Inc. Methods and apparatus for identifiying audio/video content using temporal signal characteristics
US8239446B2 (en) * 2003-11-19 2012-08-07 Sony Computer Entertainment America Llc Content distribution architecture
US20050108754A1 (en) * 2003-11-19 2005-05-19 Serenade Systems Personalized content application
CA2556697C (en) 2004-02-17 2018-01-09 Nielsen Media Research, Inc. Methods and apparatus for monitoring video games
EP1730105B1 (en) 2004-02-26 2012-01-25 Mediaguide, inc. Method and apparatus for automatic detection and identification of broadcast audio or video programming signal
US8229751B2 (en) * 2004-02-26 2012-07-24 Mediaguide, Inc. Method and apparatus for automatic detection and identification of unidentified Broadcast audio or video signals
US20050193426A1 (en) * 2004-02-27 2005-09-01 Raja Neogi System and method to control fingerprint processing in a media network
US8738763B2 (en) 2004-03-26 2014-05-27 The Nielsen Company (Us), Llc Research data gathering with a portable monitor and a stationary device
US7483975B2 (en) 2004-03-26 2009-01-27 Arbitron, Inc. Systems and methods for gathering data concerning usage of media data
US8688248B2 (en) * 2004-04-19 2014-04-01 Shazam Investments Limited Method and system for content sampling and identification
US7793319B2 (en) * 2004-04-27 2010-09-07 Gateway, Inc. System and method for improved channel surfing
US20150051967A1 (en) 2004-05-27 2015-02-19 Anonymous Media Research, Llc Media usage monitoring and measurment system and method
US20050267750A1 (en) * 2004-05-27 2005-12-01 Anonymous Media, Llc Media usage monitoring and measurement system and method
JP4387408B2 (ja) * 2004-06-18 2009-12-16 パナソニック株式会社 Avコンテンツ処理装置、avコンテンツ処理方法、avコンテンツ処理プログラムおよびavコンテンツ処理装置に用いる集積回路
EP1779565A4 (en) * 2004-07-02 2012-01-25 Nielsen Media Res Inc METHOD AND APPARATUS FOR IDENTIFYING CONSIDERATION INFORMATION ASSOCIATED WITH A DIGITAL MEDIA DEVICE
US8130746B2 (en) 2004-07-28 2012-03-06 Audible Magic Corporation System for distributing decoy content in a peer to peer network
US8521828B2 (en) 2004-07-30 2013-08-27 The Invention Science Fund I, Llc Themes indicative of participants in persistent communication
US9704502B2 (en) * 2004-07-30 2017-07-11 Invention Science Fund I, Llc Cue-aware privacy filter for participants in persistent communications
US9779750B2 (en) * 2004-07-30 2017-10-03 Invention Science Fund I, Llc Cue-aware privacy filter for participants in persistent communications
US20080092031A1 (en) * 2004-07-30 2008-04-17 Steven John Simske Rich media printer
US8977250B2 (en) * 2004-08-27 2015-03-10 The Invention Science Fund I, Llc Context-aware filter for participants in persistent communication
US20060212149A1 (en) * 2004-08-13 2006-09-21 Hicken Wendell T Distributed system and method for intelligent data analysis
MX2007002071A (es) * 2004-08-18 2007-04-24 Nielsen Media Res Inc Metodos y aparatos para generar firmas.
US7386542B2 (en) * 2004-08-30 2008-06-10 The Mitre Corporation Personalized broadcast news navigator
US7826708B2 (en) * 2004-11-02 2010-11-02 Microsoft Corporation System and method for automatically customizing a buffered media stream
WO2006055971A2 (en) * 2004-11-22 2006-05-26 Nielsen Media Research, Inc Methods and apparatus for media source identification and time shifted media consumption measurements
US20060155754A1 (en) * 2004-12-08 2006-07-13 Steven Lubin Playlist driven automated content transmission and delivery system
US7567899B2 (en) * 2004-12-30 2009-07-28 All Media Guide, Llc Methods and apparatus for audio recognition
US20060167458A1 (en) * 2005-01-25 2006-07-27 Lorenz Gabele Lock and release mechanism for a sternal clamp
GB0502844D0 (en) 2005-02-11 2005-03-16 Univ Edinburgh Storing digital content for access using a captured image
US20060195860A1 (en) * 2005-02-25 2006-08-31 Eldering Charles A Acting on known video entities detected utilizing fingerprinting
GB2423882A (en) * 2005-03-01 2006-09-06 Half Minute Media Ltd Acting on known video entities detected utilizing fingerprinting
GB2423881B (en) * 2005-03-01 2011-03-09 Half Minute Media Ltd Detecting known video entities taking into account regions of disinterest
JP2008532200A (ja) * 2005-03-04 2008-08-14 ミュージックアイピー コーポレイション 再生リストを作成するためのスキャンシャッフル
US20060242667A1 (en) * 2005-04-22 2006-10-26 Petersen Erin L Ad monitoring and indication
US7690011B2 (en) * 2005-05-02 2010-03-30 Technology, Patents & Licensing, Inc. Video stream modification to defeat detection
US20060271947A1 (en) * 2005-05-23 2006-11-30 Lienhart Rainer W Creating fingerprints
US7613736B2 (en) * 2005-05-23 2009-11-03 Resonance Media Services, Inc. Sharing music essence in a recommendation system
US8020004B2 (en) 2005-07-01 2011-09-13 Verance Corporation Forensic marking using a common customization function
US8781967B2 (en) 2005-07-07 2014-07-15 Verance Corporation Watermarking in an encrypted domain
US8577684B2 (en) 2005-07-13 2013-11-05 Intellisist, Inc. Selective security masking within recorded speech utilizing speech recognition techniques
US8296846B2 (en) * 2005-08-19 2012-10-23 Cpacket Networks, Inc. Apparatus and method for associating categorization information with network traffic to facilitate application level processing
US8346918B2 (en) * 2005-08-19 2013-01-01 Cpacket Networks, Inc. Apparatus and method for biased and weighted sampling of network traffic to facilitate network monitoring
US7890991B2 (en) 2005-08-19 2011-02-15 Cpacket Networks, Inc. Apparatus and method for providing security and monitoring in a networking architecture
US8024799B2 (en) * 2005-08-19 2011-09-20 Cpacket Networks, Inc. Apparatus and method for facilitating network security with granular traffic modifications
US8665868B2 (en) * 2005-08-19 2014-03-04 Cpacket Networks, Inc. Apparatus and method for enhancing forwarding and classification of network traffic with prioritized matching and categorization
US7882554B2 (en) * 2005-08-19 2011-02-01 Cpacket Networks, Inc. Apparatus and method for selective mirroring
US7937756B2 (en) * 2005-08-19 2011-05-03 Cpacket Networks, Inc. Apparatus and method for facilitating network security
US20070106405A1 (en) * 2005-08-19 2007-05-10 Gracenote, Inc. Method and system to provide reference data for identification of digital content
US7698008B2 (en) 2005-09-08 2010-04-13 Apple Inc. Content-based audio comparisons
US8594429B2 (en) * 2005-10-11 2013-11-26 Hewlett-Packard Development Company, L.P. Method and apparatus for processing a video stream
EP2261927B1 (en) 2005-10-21 2017-12-13 Nielsen Media Research, Inc. Portable People multimedia audience Meter PPM using eavesdropping of the bluetooth interface of a smartphone headset.
US8326775B2 (en) 2005-10-26 2012-12-04 Cortica Ltd. Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof
US10776585B2 (en) 2005-10-26 2020-09-15 Cortica, Ltd. System and method for recognizing characters in multimedia content
US10691642B2 (en) 2005-10-26 2020-06-23 Cortica Ltd System and method for enriching a concept database with homogenous concepts
US10607355B2 (en) * 2005-10-26 2020-03-31 Cortica, Ltd. Method and system for determining the dimensions of an object shown in a multimedia content item
US11003706B2 (en) 2005-10-26 2021-05-11 Cortica Ltd System and methods for determining access permissions on personalized clusters of multimedia content elements
US10621988B2 (en) 2005-10-26 2020-04-14 Cortica Ltd System and method for speech to text translation using cores of a natural liquid architecture system
US10742340B2 (en) 2005-10-26 2020-08-11 Cortica Ltd. System and method for identifying the context of multimedia content elements displayed in a web-page and providing contextual filters respective thereto
US10372746B2 (en) 2005-10-26 2019-08-06 Cortica, Ltd. System and method for searching applications using multimedia content elements
US11403336B2 (en) 2005-10-26 2022-08-02 Cortica Ltd. System and method for removing contextually identical multimedia content elements
US10585934B2 (en) 2005-10-26 2020-03-10 Cortica Ltd. Method and system for populating a concept database with respect to user identifiers
US8818916B2 (en) 2005-10-26 2014-08-26 Cortica, Ltd. System and method for linking multimedia data elements to web pages
US10614626B2 (en) 2005-10-26 2020-04-07 Cortica Ltd. System and method for providing augmented reality challenges
US11019161B2 (en) 2005-10-26 2021-05-25 Cortica, Ltd. System and method for profiling users interest based on multimedia content analysis
US11216498B2 (en) 2005-10-26 2022-01-04 Cortica, Ltd. System and method for generating signatures to three-dimensional multimedia data elements
US11032017B2 (en) 2005-10-26 2021-06-08 Cortica, Ltd. System and method for identifying the context of multimedia content elements
ES2386977T3 (es) * 2005-11-29 2012-09-10 Google Inc. Aplicaciones sociales e interactivas para medios masivos
CN101371472B (zh) * 2005-12-12 2017-04-19 尼尔逊媒介研究股份有限公司 对声音/视觉装置进行无线计量的系统和方法
US9015740B2 (en) 2005-12-12 2015-04-21 The Nielsen Company (Us), Llc Systems and methods to wirelessly meter audio/visual devices
CN101496039A (zh) * 2005-12-20 2009-07-29 奥比融公司 进行调查操作的方法和系统
US7627878B2 (en) * 2005-12-23 2009-12-01 Eloda Inc. Method and System for automated auditing of advertising
US20070149114A1 (en) * 2005-12-28 2007-06-28 Andrey Danilenko Capture, storage and retrieval of broadcast information while on-the-go
US20090006337A1 (en) * 2005-12-30 2009-01-01 Mediaguide, Inc. Method and apparatus for automatic detection and identification of unidentified video signals
ATE515844T1 (de) * 2006-02-22 2011-07-15 Media Evolution Technologies Inc Verfahren und gerät zum erzeugen von digitalen audiosignaturen
CA2947649C (en) 2006-03-27 2020-04-14 The Nielsen Company (Us), Llc Methods and systems to meter media content presented on a wireless communication device
US7735101B2 (en) 2006-03-28 2010-06-08 Cisco Technology, Inc. System allowing users to embed comments at specific points in time into media presentation
MX2007015979A (es) 2006-03-31 2009-04-07 Nielsen Media Res Inc Metodos, sistemas y aparato para medicion de multiples fines.
US20080036917A1 (en) * 2006-04-07 2008-02-14 Mark Pascarella Methods and systems for generating and delivering navigatable composite videos
US8151291B2 (en) 2006-06-15 2012-04-03 The Nielsen Company (Us), Llc Methods and apparatus to meter content exposure using closed caption information
US20090324199A1 (en) * 2006-06-20 2009-12-31 Koninklijke Philips Electronics N.V. Generating fingerprints of video signals
US8019162B2 (en) * 2006-06-20 2011-09-13 The Nielsen Company (Us), Llc Methods and apparatus for detecting on-screen media sources
US8433915B2 (en) * 2006-06-28 2013-04-30 Intellisist, Inc. Selective security masking within recorded speech
EP2038743A4 (en) 2006-07-12 2009-08-05 Arbitron Inc METHOD AND SYSTEMS FOR CONFIRMATION AND BONUS CONFORMITY
DE102006032543A1 (de) * 2006-07-13 2008-01-17 Nokia Siemens Networks Gmbh & Co.Kg Verfahren und System zur Reduzierung des Empfangs unerwünschter Nachrichten
US7881547B2 (en) * 2006-07-28 2011-02-01 Genesis Microchip Inc. Video window detector
US9398350B1 (en) 2006-08-08 2016-07-19 CastTV Inc. Video matching service to offline counterpart
US8745684B1 (en) 2006-08-08 2014-06-03 CastTV Inc. Facilitating video search
US7693872B2 (en) * 2006-08-17 2010-04-06 Anchorfree, Inc. Software web crowler and method therefor
US20080051029A1 (en) * 2006-08-25 2008-02-28 Bradley James Witteman Phone-based broadcast audio identification
US20080155627A1 (en) * 2006-12-04 2008-06-26 O'connor Daniel Systems and methods of searching for and presenting video and audio
US20080147497A1 (en) * 2006-12-13 2008-06-19 Tischer Steven N Advertising and content management systems and methods
US10885543B1 (en) 2006-12-29 2021-01-05 The Nielsen Company (Us), Llc Systems and methods to pre-scale media content to facilitate audience measurement
CN101627422B (zh) * 2007-01-25 2013-01-02 奥比融公司 研究数据收集
US8645987B2 (en) * 2007-04-13 2014-02-04 Power-Link Software Systems, Inc. Advertisement airing audit system and associated methods
US10489795B2 (en) 2007-04-23 2019-11-26 The Nielsen Company (Us), Llc Determining relative effectiveness of media content items
US8458737B2 (en) * 2007-05-02 2013-06-04 The Nielsen Company (Us), Llc Methods and apparatus for generating signatures
US20080274687A1 (en) * 2007-05-02 2008-11-06 Roberts Dale T Dynamic mixed media package
US7912894B2 (en) * 2007-05-15 2011-03-22 Adams Phillip M Computerized, copy-detection and discrimination apparatus and method
US8849432B2 (en) * 2007-05-31 2014-09-30 Adobe Systems Incorporated Acoustic pattern identification using spectral characteristics to synchronize audio and/or video
JP2008306549A (ja) * 2007-06-08 2008-12-18 Canon Inc 無線制御局、及び無線端末局の制御方法、当該制御方法をコンピュータに実行させるためのコンピュータプログラム
US8559516B2 (en) * 2007-06-14 2013-10-15 Sony Corporation Video sequence ID by decimated scene signature
US8006314B2 (en) 2007-07-27 2011-08-23 Audible Magic Corporation System for identifying content of digital data
US9483405B2 (en) 2007-09-20 2016-11-01 Sony Interactive Entertainment Inc. Simplified run-time program translation for emulating complex processor pipelines
EP2073460A1 (en) * 2007-12-17 2009-06-24 Alcatel Lucent Method for forwarding packets, a related packet forwarding system, a related classification device and a related popularity monitoring device
US20090165049A1 (en) 2007-12-19 2009-06-25 United Video Properties, Inc. Methods and devices for presenting and interactive media guidance application
US8285718B1 (en) * 2007-12-21 2012-10-09 CastTV Inc. Clustering multimedia search
US8930003B2 (en) 2007-12-31 2015-01-06 The Nielsen Company (Us), Llc Data capture bridge
AU2008347134A1 (en) 2007-12-31 2009-07-16 Arbitron, Inc. Survey data acquisition
CA2717723C (en) * 2008-03-05 2016-10-18 The Nielsen Company (Us), Llc Methods and apparatus for generating signatures
CA2660674A1 (en) * 2008-03-27 2009-09-27 Crim (Centre De Recherche Informatique De Montreal) Media detection using acoustic recognition
US8503991B2 (en) * 2008-04-03 2013-08-06 The Nielsen Company (Us), Llc Methods and apparatus to monitor mobile devices
US8245262B2 (en) * 2008-04-07 2012-08-14 Samsung Electronics Co., Ltd. System and method for synchronization of television signals associated with multiple broadcast networks
US8805689B2 (en) 2008-04-11 2014-08-12 The Nielsen Company (Us), Llc Methods and apparatus to generate and use content-aware watermarks
US8947207B2 (en) 2008-04-29 2015-02-03 Quake Global, Inc. Method and apparatus for a deployable radio-frequency identification portal system
US8259938B2 (en) * 2008-06-24 2012-09-04 Verance Corporation Efficient and secure forensic marking in compressed
CN102132574B (zh) 2008-08-22 2014-04-02 杜比实验室特许公司 内容识别和质量监测
CN102132341B (zh) * 2008-08-26 2014-11-26 杜比实验室特许公司 鲁棒的媒体指纹
US7730061B2 (en) * 2008-09-12 2010-06-01 International Business Machines Corporation Fast-approximate TFIDF
US8108887B2 (en) 2008-10-30 2012-01-31 The Nielsen Company (Us), Llc Methods and apparatus for identifying media content using temporal signal characteristics
US9124769B2 (en) 2008-10-31 2015-09-01 The Nielsen Company (Us), Llc Methods and apparatus to verify presentation of media content
US10631068B2 (en) 2008-11-26 2020-04-21 Free Stream Media Corp. Content exposure attribution based on renderings of related content across multiple devices
US8180891B1 (en) 2008-11-26 2012-05-15 Free Stream Media Corp. Discovery, access control, and communication with networked services from within a security sandbox
US9986279B2 (en) 2008-11-26 2018-05-29 Free Stream Media Corp. Discovery, access control, and communication with networked services
US9519772B2 (en) 2008-11-26 2016-12-13 Free Stream Media Corp. Relevancy improvement through targeting of information based on data gathered from a networked device associated with a security sandbox of a client device
US10567823B2 (en) 2008-11-26 2020-02-18 Free Stream Media Corp. Relevant advertisement generation based on a user operating a client device communicatively coupled with a networked media device
US10334324B2 (en) 2008-11-26 2019-06-25 Free Stream Media Corp. Relevant advertisement generation based on a user operating a client device communicatively coupled with a networked media device
US10977693B2 (en) 2008-11-26 2021-04-13 Free Stream Media Corp. Association of content identifier of audio-visual data with additional data through capture infrastructure
US10419541B2 (en) 2008-11-26 2019-09-17 Free Stream Media Corp. Remotely control devices over a network without authentication or registration
US9026668B2 (en) 2012-05-26 2015-05-05 Free Stream Media Corp. Real-time and retargeted advertising on multiple screens of a user watching television
US9386356B2 (en) 2008-11-26 2016-07-05 Free Stream Media Corp. Targeting with television audience data across multiple screens
US9961388B2 (en) 2008-11-26 2018-05-01 David Harrison Exposure of public internet protocol addresses in an advertising exchange server to improve relevancy of advertisements
US10880340B2 (en) 2008-11-26 2020-12-29 Free Stream Media Corp. Relevancy improvement through targeting of information based on data gathered from a networked device associated with a security sandbox of a client device
US9154942B2 (en) 2008-11-26 2015-10-06 Free Stream Media Corp. Zero configuration communication between a browser and a networked media device
US9390167B2 (en) 2010-07-29 2016-07-12 Soundhound, Inc. System and methods for continuous audio matching
NO331287B1 (no) * 2008-12-15 2011-11-14 Cisco Systems Int Sarl Fremgangsmate og anordning for gjenkjenning av ansikter i en videostrom
US20110066437A1 (en) * 2009-01-26 2011-03-17 Robert Luff Methods and apparatus to monitor media exposure using content-aware watermarks
WO2010102404A1 (en) * 2009-03-11 2010-09-16 Ravosh Samari Digital signatures
US8199651B1 (en) 2009-03-16 2012-06-12 Audible Magic Corporation Method and system for modifying communication flows at a port level
US8769584B2 (en) 2009-05-29 2014-07-01 TVI Interactive Systems, Inc. Methods for displaying contextually targeted content on a connected television
US9071868B2 (en) * 2009-05-29 2015-06-30 Cognitive Networks, Inc. Systems and methods for improving server and client performance in fingerprint ACR systems
US9449090B2 (en) 2009-05-29 2016-09-20 Vizio Inscape Technologies, Llc Systems and methods for addressing a media database using distance associative hashing
US10949458B2 (en) 2009-05-29 2021-03-16 Inscape Data, Inc. System and method for improving work load management in ACR television monitoring system
US10116972B2 (en) 2009-05-29 2018-10-30 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
US10375451B2 (en) 2009-05-29 2019-08-06 Inscape Data, Inc. Detection of common media segments
US8620967B2 (en) * 2009-06-11 2013-12-31 Rovi Technologies Corporation Managing metadata for occurrences of a recording
US20110041154A1 (en) * 2009-08-14 2011-02-17 All Media Guide, Llc Content Recognition and Synchronization on a Television or Consumer Electronics Device
US8510769B2 (en) * 2009-09-14 2013-08-13 Tivo Inc. Media content finger print system
US8161071B2 (en) 2009-09-30 2012-04-17 United Video Properties, Inc. Systems and methods for audio asset storage and management
US8677400B2 (en) * 2009-09-30 2014-03-18 United Video Properties, Inc. Systems and methods for identifying audio content using an interactive media guidance application
US20110078020A1 (en) * 2009-09-30 2011-03-31 Lajoie Dan Systems and methods for identifying popular audio assets
US8245249B2 (en) * 2009-10-09 2012-08-14 The Nielson Company (Us), Llc Methods and apparatus to adjust signature matching results for audience measurement
JP4786739B2 (ja) * 2009-10-21 2011-10-05 株式会社東芝 情報処理装置および映像コンテンツデータ再生方法
US8682145B2 (en) 2009-12-04 2014-03-25 Tivo Inc. Recording system based on multimedia content fingerprints
US20110137976A1 (en) * 2009-12-04 2011-06-09 Bob Poniatowski Multifunction Multimedia Device
US8886531B2 (en) * 2010-01-13 2014-11-11 Rovi Technologies Corporation Apparatus and method for generating an audio fingerprint and using a two-stage query
US20110173185A1 (en) * 2010-01-13 2011-07-14 Rovi Technologies Corporation Multi-stage lookup for rolling audio recognition
US9134875B2 (en) 2010-03-23 2015-09-15 VoteBlast, Inc. Enhancing public opinion gathering and dissemination
US8732605B1 (en) 2010-03-23 2014-05-20 VoteBlast, Inc. Various methods and apparatuses for enhancing public opinion gathering and dissemination
US9020415B2 (en) 2010-05-04 2015-04-28 Project Oda, Inc. Bonus and experience enhancement system for receivers of broadcast media
KR101582436B1 (ko) * 2010-05-04 2016-01-04 샤잠 엔터테인먼트 리미티드 미디어의 동기화 방법 및 시스템
US8433759B2 (en) 2010-05-24 2013-04-30 Sony Computer Entertainment America Llc Direction-conscious information sharing
US9838753B2 (en) 2013-12-23 2017-12-05 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US10192138B2 (en) 2010-05-27 2019-01-29 Inscape Data, Inc. Systems and methods for reducing data density in large datasets
US9047371B2 (en) 2010-07-29 2015-06-02 Soundhound, Inc. System and method for matching a query against a broadcast stream
US10210160B2 (en) 2010-09-07 2019-02-19 Opentv, Inc. Collecting data from different sources
US9699503B2 (en) 2010-09-07 2017-07-04 Opentv, Inc. Smart playlist
US8949871B2 (en) 2010-09-08 2015-02-03 Opentv, Inc. Smart media selection based on viewer user presence
US9607131B2 (en) 2010-09-16 2017-03-28 Verance Corporation Secure and efficient content screening in a networked environment
US20120084435A1 (en) * 2010-10-04 2012-04-05 International Business Machines Corporation Smart Real-time Content Delivery
US8667520B2 (en) 2011-07-06 2014-03-04 Symphony Advanced Media Mobile content tracking platform methods
US10142687B2 (en) 2010-11-07 2018-11-27 Symphony Advanced Media, Inc. Audience content exposure monitoring apparatuses, methods and systems
US9027051B2 (en) 2010-12-31 2015-05-05 Accenture Global Services Limited Determining whether an advertisement aired in accordance with predefined airing specifications
JP2014512128A (ja) * 2011-03-31 2014-05-19 ティーヴィータック リミテッド カメラ対応装置を用いた背景シーンにおけるビデオディスプレイからのビデオ信号の検出、インデックス作成、及び比較のための装置、システム、方法、及び媒体
WO2012137654A1 (ja) * 2011-04-05 2012-10-11 ヤマハ株式会社 情報提供システム、識別情報解決サーバおよび携帯端末装置
US9035163B1 (en) 2011-05-10 2015-05-19 Soundbound, Inc. System and method for targeting content based on identified audio and multimedia
WO2013012952A1 (en) 2011-07-18 2013-01-24 Viggle Inc System and method for tracking and rewarding media and entertainment usage including substanitally real time rewards
US8861937B2 (en) 2011-08-31 2014-10-14 The Nielsen Company (Us), Llc Methods and apparatus to access media
US20130097007A1 (en) * 2011-10-12 2013-04-18 Joseph Brewer Media posting system and method
US9973398B1 (en) 2011-10-31 2018-05-15 Reality Analytics, Inc. System and method for discriminating remote site origination of communication signals transmitted through a network based on envelope characteristics
US9813310B1 (en) 2011-10-31 2017-11-07 Reality Analytics, Inc. System and method for discriminating nature of communication traffic transmitted through network based on envelope characteristics
US8682026B2 (en) 2011-11-03 2014-03-25 Verance Corporation Efficient extraction of embedded watermarks in the presence of host content distortions
US8533481B2 (en) 2011-11-03 2013-09-10 Verance Corporation Extraction of embedded watermarks from a host content based on extrapolation techniques
US8923548B2 (en) 2011-11-03 2014-12-30 Verance Corporation Extraction of embedded watermarks from a host content using a plurality of tentative watermarks
US8615104B2 (en) 2011-11-03 2013-12-24 Verance Corporation Watermark extraction based on tentative watermarks
US8745403B2 (en) 2011-11-23 2014-06-03 Verance Corporation Enhanced content management based on watermark extraction records
US9696336B2 (en) 2011-11-30 2017-07-04 The Nielsen Company (Us), Llc Multiple meter detection and processing using motion data
US9547753B2 (en) 2011-12-13 2017-01-17 Verance Corporation Coordinated watermarking
US9323902B2 (en) 2011-12-13 2016-04-26 Verance Corporation Conditional access using embedded watermarks
US8538333B2 (en) 2011-12-16 2013-09-17 Arbitron Inc. Media exposure linking utilizing bluetooth signal characteristics
US8977194B2 (en) 2011-12-16 2015-03-10 The Nielsen Company (Us), Llc Media exposure and verification utilizing inductive coupling
US20130262184A1 (en) * 2012-03-30 2013-10-03 Arbitron Inc. Systems and Methods for Presence Detection and Linking to Media Exposure Data
US8825188B2 (en) 2012-06-04 2014-09-02 Troy Christopher Stone Methods and systems for identifying content types
US9628829B2 (en) 2012-06-26 2017-04-18 Google Technology Holdings LLC Identifying media on a mobile device
US9118951B2 (en) 2012-06-26 2015-08-25 Arris Technology, Inc. Time-synchronizing a parallel feed of secondary content with primary media content
US10957310B1 (en) 2012-07-23 2021-03-23 Soundhound, Inc. Integrated programming framework for speech and text understanding with meaning parsing
US8989503B2 (en) * 2012-08-03 2015-03-24 Kodak Alaris Inc. Identifying scene boundaries using group sparsity analysis
US9282366B2 (en) 2012-08-13 2016-03-08 The Nielsen Company (Us), Llc Methods and apparatus to communicate audience measurement information
US9571606B2 (en) 2012-08-31 2017-02-14 Verance Corporation Social media viewing system
US9058806B2 (en) 2012-09-10 2015-06-16 Cisco Technology, Inc. Speaker segmentation and recognition based on list of speakers
US20140075469A1 (en) 2012-09-13 2014-03-13 Verance Corporation Content distribution including advertisements
US8726304B2 (en) 2012-09-13 2014-05-13 Verance Corporation Time varying evaluation of multimedia content
US8869222B2 (en) 2012-09-13 2014-10-21 Verance Corporation Second screen content
US9081778B2 (en) 2012-09-25 2015-07-14 Audible Magic Corporation Using digital fingerprints to associate data with a work
US9992729B2 (en) 2012-10-22 2018-06-05 The Nielsen Company (Us), Llc Systems and methods for wirelessly modifying detection characteristics of portable devices
US9106953B2 (en) 2012-11-28 2015-08-11 The Nielsen Company (Us), Llc Media monitoring based on predictive signature caching
CA2875354C (en) 2012-11-30 2018-04-10 The Nielsen Company (Us), Llc Multiple meter detection and processing using motion data
US8886011B2 (en) 2012-12-07 2014-11-11 Cisco Technology, Inc. System and method for question detection based video segmentation, search and collaboration in a video processing environment
US9195649B2 (en) 2012-12-21 2015-11-24 The Nielsen Company (Us), Llc Audio processing techniques for semantic audio recognition and report generation
US9183849B2 (en) 2012-12-21 2015-11-10 The Nielsen Company (Us), Llc Audio matching with semantic audio recognition and report generation
US9158760B2 (en) 2012-12-21 2015-10-13 The Nielsen Company (Us), Llc Audio decoding with supplemental semantic audio recognition and report generation
US20140187268A1 (en) * 2012-12-28 2014-07-03 Arbitron Inc. Apparatus, System and Method for Location Detection and User Identification for Media Exposure Data
US9841492B2 (en) 2013-02-25 2017-12-12 Quake Global, Inc. Ceiling-mounted RFID-enabled tracking
CA2902912C (en) 2013-02-26 2022-02-01 Quake Global, Inc. Methods and apparatus for automatic identification wristband
US9262794B2 (en) 2013-03-14 2016-02-16 Verance Corporation Transactional video marking system
US9819798B2 (en) 2013-03-14 2017-11-14 Intellisist, Inc. Computer-implemented system and method for efficiently facilitating appointments within a call center via an automatic call distributor
US9325381B2 (en) 2013-03-15 2016-04-26 The Nielsen Company (Us), Llc Methods, apparatus and articles of manufacture to monitor mobile devices
US9251549B2 (en) 2013-07-23 2016-02-02 Verance Corporation Watermark extractor enhancements based on payload ranking
US9208334B2 (en) 2013-10-25 2015-12-08 Verance Corporation Content management using multiple abstraction layers
US9300991B2 (en) 2013-11-13 2016-03-29 International Business Machines Corporation Use of simultaneously received videos by a system to generate a quality of experience value
US9507849B2 (en) 2013-11-28 2016-11-29 Soundhound, Inc. Method for combining a query and a communication command in a natural language computer system
US9955192B2 (en) 2013-12-23 2018-04-24 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US9426525B2 (en) 2013-12-31 2016-08-23 The Nielsen Company (Us), Llc. Methods and apparatus to count people in an audience
US9292488B2 (en) 2014-02-01 2016-03-22 Soundhound, Inc. Method for embedding voice mail in a spoken utterance using a natural language processing computer system
US11295730B1 (en) 2014-02-27 2022-04-05 Soundhound, Inc. Using phonetic variants in a local context to improve natural language understanding
CN106170988A (zh) 2014-03-13 2016-11-30 凡瑞斯公司 使用嵌入式代码的交互式内容获取
US9699499B2 (en) 2014-04-30 2017-07-04 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9564123B1 (en) 2014-05-12 2017-02-07 Soundhound, Inc. Method and system for building an integrated user profile
US9179184B1 (en) * 2014-06-20 2015-11-03 Google Inc. Methods, systems, and media for detecting a presentation of media content on a display device
US9641892B2 (en) * 2014-07-15 2017-05-02 The Nielsen Company (Us), Llc Frequency band selection and processing techniques for media source detection
US9369780B2 (en) * 2014-07-31 2016-06-14 Verizon Patent And Licensing Inc. Methods and systems for detecting one or more advertisement breaks in a media content stream
US9729912B2 (en) * 2014-09-22 2017-08-08 Sony Corporation Method, computer program, electronic device, and system
CA2973740C (en) 2015-01-30 2021-06-08 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
MX2017013128A (es) 2015-04-17 2018-01-26 Inscape Data Inc Sistemas y metodos para reducir densidad de los datos en grandes conjuntos de datos.
WO2016172363A1 (en) 2015-04-24 2016-10-27 Cyber Resonance Corporation Methods and systems for performing signal analysis to identify content types
WO2017011768A1 (en) 2015-07-16 2017-01-19 Vizio Inscape Technologies, Llc Systems and methods for partitioning search indexes for improved efficiency in identifying media segments
JP6903653B2 (ja) 2015-07-16 2021-07-14 インスケイプ データ インコーポレイテッド 共通メディアセグメントの検出
US10080062B2 (en) 2015-07-16 2018-09-18 Inscape Data, Inc. Optimizing media fingerprint retention to improve system resource utilization
CA2992529C (en) 2015-07-16 2022-02-15 Inscape Data, Inc. Prediction of future views of video segments to optimize system resource utilization
US10271107B2 (en) 2015-11-26 2019-04-23 The Nielsen Company (Us), Llc Accelerated television advertisement identification
US11195043B2 (en) 2015-12-15 2021-12-07 Cortica, Ltd. System and method for determining common patterns in multimedia content elements based on key points
US11037015B2 (en) 2015-12-15 2021-06-15 Cortica Ltd. Identification of key points in multimedia data elements
DE102016204055B4 (de) * 2016-03-11 2019-04-04 Universität Ulm Verfahren und Vorrichtung zur Erzeugung einer digitalen Signatur
US10754978B2 (en) 2016-07-29 2020-08-25 Intellisist Inc. Computer-implemented system and method for storing and retrieving sensitive information
JP7118998B2 (ja) 2017-04-06 2022-08-16 インスケイプ データ インコーポレイテッド メディア視聴データを使用してデバイスマップの精度を改善させるためのシステムおよび方法
US11760387B2 (en) 2017-07-05 2023-09-19 AutoBrains Technologies Ltd. Driving policies determination
US11899707B2 (en) 2017-07-09 2024-02-13 Cortica Ltd. Driving policies determination
FR3072807B1 (fr) 2017-10-23 2021-05-07 Hl2 Group Procede et equipement de reconnaissance de detonation par filtrage selectif
US10891971B2 (en) 2018-06-04 2021-01-12 The Nielsen Company (Us), Llc Methods and apparatus to dynamically generate audio signatures adaptive to circumstances associated with media being monitored
US10846544B2 (en) 2018-07-16 2020-11-24 Cartica Ai Ltd. Transportation prediction system and method
US10887031B2 (en) * 2018-08-03 2021-01-05 Gracenote, Inc. Vehicle-based media system with audio ad and navigation-related action synchronization feature
US11275933B2 (en) 2018-08-24 2022-03-15 Genpact Luxembourg S.Á R.L Systems and methods for segmentation of report corpus using visual signatures
US11126870B2 (en) 2018-10-18 2021-09-21 Cartica Ai Ltd. Method and system for obstacle detection
US10839694B2 (en) 2018-10-18 2020-11-17 Cartica Ai Ltd Blind spot alert
US20200133308A1 (en) 2018-10-18 2020-04-30 Cartica Ai Ltd Vehicle to vehicle (v2v) communication less truck platooning
US11181911B2 (en) 2018-10-18 2021-11-23 Cartica Ai Ltd Control transfer of a vehicle
US11244176B2 (en) 2018-10-26 2022-02-08 Cartica Ai Ltd Obstacle detection and mapping
US10748038B1 (en) 2019-03-31 2020-08-18 Cortica Ltd. Efficient calculation of a robust signature of a media unit
US10789535B2 (en) 2018-11-26 2020-09-29 Cartica Ai Ltd Detection of road elements
US11643005B2 (en) 2019-02-27 2023-05-09 Autobrains Technologies Ltd Adjusting adjustable headlights of a vehicle
US11285963B2 (en) 2019-03-10 2022-03-29 Cartica Ai Ltd. Driver-based prediction of dangerous events
US11694088B2 (en) 2019-03-13 2023-07-04 Cortica Ltd. Method for object detection using knowledge distillation
US11132548B2 (en) 2019-03-20 2021-09-28 Cortica Ltd. Determining object information that does not explicitly appear in a media unit signature
US10776669B1 (en) 2019-03-31 2020-09-15 Cortica Ltd. Signature generation and object detection that refer to rare scenes
US10789527B1 (en) 2019-03-31 2020-09-29 Cortica Ltd. Method for object detection using shallow neural networks
US10796444B1 (en) 2019-03-31 2020-10-06 Cortica Ltd Configuring spanning elements of a signature generator
US11222069B2 (en) 2019-03-31 2022-01-11 Cortica Ltd. Low-power calculation of a signature of a media unit
US20230274623A1 (en) * 2019-10-17 2023-08-31 D-Box Technologies Inc. Method and system for synchronizing a viewer-effect signal of a media content with a media signal of the media content
US10748022B1 (en) 2019-12-12 2020-08-18 Cartica Ai Ltd Crowd separation
US11593662B2 (en) 2019-12-12 2023-02-28 Autobrains Technologies Ltd Unsupervised cluster generation
US11590988B2 (en) 2020-03-19 2023-02-28 Autobrains Technologies Ltd Predictive turning assistant
US11827215B2 (en) 2020-03-31 2023-11-28 AutoBrains Technologies Ltd. Method for training a driving related object detector
US11756424B2 (en) 2020-07-24 2023-09-12 AutoBrains Technologies Ltd. Parking assist

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58175157A (ja) * 1982-04-06 1983-10-14 Mitsubishi Electric Corp 音声始端検出装置
JPS60224341A (ja) * 1984-04-20 1985-11-08 Nippon Telegr & Teleph Corp <Ntt> 音声符号化方法
JPS60236331A (ja) * 1984-04-26 1985-11-25 エー.シー.ニールセン コムパニー 番組識別方法及びシステム
JPS6136797A (ja) * 1984-07-30 1986-02-21 松下電器産業株式会社 音声セグメンテ−シヨン法
JPS6324786A (ja) * 1986-05-02 1988-02-02 コントロール データ コーポレーション 放送セグメントの認識方法および装置
JPS6356091A (ja) * 1986-08-26 1988-03-10 Video Res:Kk テレビ・コマーシャル放送確認方法
JPS6384396A (ja) * 1986-09-29 1988-04-14 Video Res:Kk 視聴率測定用テレビ・センサ
JPH01177796A (ja) * 1988-01-08 1989-07-14 Video Res:Kk テレビ放送同一性判別方式
JPH02500875A (ja) * 1987-06-24 1990-03-22 エムシーエス パートナーズ 放送情報分類システムおよび方法
JPH03173291A (ja) * 1989-11-15 1991-07-26 Control Data Corp <Cdc> ビデオ信号もしくはtv送信フレームからデジタルサインを生成する方法及び放送ビデオセグメントの連続パターン認識装置
JPH03289829A (ja) * 1990-04-06 1991-12-19 Video Res:Kk Cm自動確認装置
JPH04355800A (ja) * 1991-06-04 1992-12-09 Sharp Corp 音声認識装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2766374A (en) * 1951-07-25 1956-10-09 Internat Telementer Corp System and apparatus for determining popularity ratings of different transmitted programs
US3919479A (en) * 1972-09-21 1975-11-11 First National Bank Of Boston Broadcast signal identification system
US4025851A (en) * 1975-11-28 1977-05-24 A.C. Nielsen Company Automatic monitor for programs broadcast
US4230990C1 (en) * 1979-03-16 2002-04-09 John G Lert Jr Broadcast program identification method and system
US4450531A (en) * 1982-09-10 1984-05-22 Ensco, Inc. Broadcast signal recognition system and method
US4547804A (en) * 1983-03-21 1985-10-15 Greenberg Burton L Method and apparatus for the automatic identification and verification of commercial broadcast programs
US4967273A (en) * 1983-03-21 1990-10-30 Vidcode, Inc. Television program transmission verification method and apparatus
DE3318919C2 (de) * 1983-05-25 1985-03-21 TeleMetric S.A., Internationale Gesellschaft für Fernsehzuschauerforschung, Zug Verfahren und Vorrichtung zum Erfassen von Daten über das Fernseheinschaltverhalten von Fernsehzuschauern
JPS6085753U (ja) * 1983-11-18 1985-06-13 日本ビクター株式会社 磁気テ−プ記録再生装置
FR2559002B1 (fr) * 1984-01-27 1986-09-05 Gam Steffen Procede et dispositif de detection d'une information audiovisuelle diffusee par un emetteur
US4677466A (en) * 1985-07-29 1987-06-30 A. C. Nielsen Company Broadcast program identification method and apparatus
US4697207A (en) * 1985-09-30 1987-09-29 Ampex Corporation System for generating a synchronizing signal in response to two timing reference signals
US4718106A (en) * 1986-05-12 1988-01-05 Weinblatt Lee S Survey of radio audience
US4750034A (en) * 1987-01-21 1988-06-07 Cloeck En Moedigh Bioscoopreclame B.V. Apparatus for monitoring the replay of audio/video information carriers
DE3720882A1 (de) * 1987-06-24 1989-01-05 Media Control Musik Medien Verfahren und schaltungsanordnung zum automatischen wiedererkennen von signalfolgen
US4945412A (en) * 1988-06-14 1990-07-31 Kramer Robert A Method of and system for identification and verification of broadcasting television and radio program segments
US4931871A (en) * 1988-06-14 1990-06-05 Kramer Robert A Method of and system for identification and verification of broadcasted program segments
US4955070A (en) * 1988-06-29 1990-09-04 Viewfacts, Inc. Apparatus and method for automatically monitoring broadcast band listening habits
US5023929A (en) * 1988-09-15 1991-06-11 Npd Research, Inc. Audio frequency based market survey method
US5019899A (en) * 1988-11-01 1991-05-28 Control Data Corporation Electronic data encoding and recognition system
US4857999A (en) * 1988-12-20 1989-08-15 Peac Media Research, Inc. Video monitoring system
US5436653A (en) * 1992-04-30 1995-07-25 The Arbitron Company Method and system for recognition of broadcast segments

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58175157A (ja) * 1982-04-06 1983-10-14 Mitsubishi Electric Corp 音声始端検出装置
JPS60224341A (ja) * 1984-04-20 1985-11-08 Nippon Telegr & Teleph Corp <Ntt> 音声符号化方法
JPS60236331A (ja) * 1984-04-26 1985-11-25 エー.シー.ニールセン コムパニー 番組識別方法及びシステム
JPS6136797A (ja) * 1984-07-30 1986-02-21 松下電器産業株式会社 音声セグメンテ−シヨン法
JPS6324786A (ja) * 1986-05-02 1988-02-02 コントロール データ コーポレーション 放送セグメントの認識方法および装置
JPS6356091A (ja) * 1986-08-26 1988-03-10 Video Res:Kk テレビ・コマーシャル放送確認方法
JPS6384396A (ja) * 1986-09-29 1988-04-14 Video Res:Kk 視聴率測定用テレビ・センサ
JPH02500875A (ja) * 1987-06-24 1990-03-22 エムシーエス パートナーズ 放送情報分類システムおよび方法
JPH01177796A (ja) * 1988-01-08 1989-07-14 Video Res:Kk テレビ放送同一性判別方式
JPH03173291A (ja) * 1989-11-15 1991-07-26 Control Data Corp <Cdc> ビデオ信号もしくはtv送信フレームからデジタルサインを生成する方法及び放送ビデオセグメントの連続パターン認識装置
JPH03289829A (ja) * 1990-04-06 1991-12-19 Video Res:Kk Cm自動確認装置
JPH04355800A (ja) * 1991-06-04 1992-12-09 Sharp Corp 音声認識装置

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001211136A (ja) * 1999-11-15 2001-08-03 Fujitsu Ten Ltd ディジタル放送受信機及びセグメント数検出装置
JP4618868B2 (ja) * 1999-11-15 2011-01-26 富士通テン株式会社 ディジタル放送受信機及びセグメント数検出装置
JP2001313960A (ja) * 2000-04-27 2001-11-09 Sony Corp 信号処理装置及び方法
JP4507351B2 (ja) * 2000-04-27 2010-07-21 ソニー株式会社 信号処理装置及び方法
US8259806B2 (en) 2006-11-30 2012-09-04 Dolby Laboratories Licensing Corporation Extracting features of video and audio signal content to provide reliable identification of the signals
US8626504B2 (en) 2006-11-30 2014-01-07 Dolby Laboratories Licensing Corporation Extracting features of audio signal content to provide reliable identification of the signals
US8060372B2 (en) 2007-02-20 2011-11-15 The Nielsen Company (Us), Llc Methods and appratus for characterizing media
JP2010519832A (ja) * 2007-02-27 2010-06-03 ランドマーク、ディジタル、サーヴィセズ、エルエルシー 放送データを監視および認識するためのシステムおよび方法
US10964333B2 (en) 2007-11-12 2021-03-30 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US10580421B2 (en) 2007-11-12 2020-03-03 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US9972332B2 (en) 2007-11-12 2018-05-15 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US11562752B2 (en) 2007-11-12 2023-01-24 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US9947327B2 (en) 2008-01-29 2018-04-17 The Nielsen Company (Us), Llc Methods and apparatus for performing variable block length watermarking of media
US10741190B2 (en) 2008-01-29 2020-08-11 The Nielsen Company (Us), Llc Methods and apparatus for performing variable block length watermarking of media
CN102292745A (zh) * 2009-01-23 2011-12-21 日本电气株式会社 图像签名提取设备
US8170341B2 (en) 2009-01-23 2012-05-01 Nec Corporation Image signature extraction device
WO2010084713A1 (ja) 2009-01-23 2010-07-29 日本電気株式会社 画像識別子抽出装置
WO2010084714A1 (ja) 2009-01-23 2010-07-29 日本電気株式会社 画像識別子抽出装置
US9042656B2 (en) 2009-01-23 2015-05-26 Nec Corporation Image signature extraction device
WO2010087124A1 (ja) 2009-01-29 2010-08-05 日本電気株式会社 特徴量選択装置
US8620087B2 (en) 2009-01-29 2013-12-31 Nec Corporation Feature selection device
WO2010103848A1 (ja) 2009-03-13 2010-09-16 日本電気株式会社 画像識別子照合装置
US10133956B2 (en) 2009-03-13 2018-11-20 Nec Corporation Image signature extraction device
US8270724B2 (en) 2009-03-13 2012-09-18 Nec Corporation Image signature matching device
US8744193B2 (en) 2009-03-13 2014-06-03 Nec Corporation Image signature extraction device
WO2010119657A1 (ja) 2009-04-14 2010-10-21 日本電気株式会社 画像識別子抽出装置
US8861871B2 (en) 2009-04-14 2014-10-14 Nec Corporation Image signature extraction device
JP2012123832A (ja) * 2009-04-14 2012-06-28 Nec Corp 画像識別子抽出装置
JP2012099158A (ja) * 2009-04-14 2012-05-24 Nec Corp 画像識別子抽出装置
JP2012099160A (ja) * 2009-04-14 2012-05-24 Nec Corp 画像識別子抽出装置
JP2012099159A (ja) * 2009-04-14 2012-05-24 Nec Corp 画像識別子抽出装置
WO2010146786A1 (ja) 2009-06-16 2010-12-23 日本電気株式会社 画像識別子照合装置
JP5991488B2 (ja) * 2011-02-10 2016-09-14 日本電気株式会社 相違領域検出システム及び相違領域検出方法

Also Published As

Publication number Publication date
EP1261155A2 (en) 2002-11-27
EP0748563A1 (en) 1996-12-18
AU4226093A (en) 1993-11-29
EP1261155B1 (en) 2007-03-28
AU747044B2 (en) 2002-05-09
AU3427297A (en) 1997-11-06
AU678163B2 (en) 1997-05-22
DE69332671D1 (de) 2003-03-06
US5504518A (en) 1996-04-02
HK1051938A1 (en) 2003-08-22
CA2134748A1 (en) 1993-11-11
US5436653A (en) 1995-07-25
ES2284777T3 (es) 2007-11-16
DE69334130T2 (de) 2007-12-13
EP0748563B1 (en) 2003-01-29
CA2134748C (en) 2005-07-26
US5612729A (en) 1997-03-18
DE69334130D1 (de) 2007-05-10
AU747044C (en) 2004-05-06
CA2504552A1 (en) 1993-11-11
EP0748563A4 (ja) 1996-12-27
EP1261155A3 (en) 2003-09-10
CA2504552C (en) 2009-01-20
ATE358366T1 (de) 2007-04-15
DK1261155T3 (da) 2007-08-06
US5572246A (en) 1996-11-05
US5621454A (en) 1997-04-15
AU4716100A (en) 2000-09-14
PT1261155E (pt) 2007-07-03
WO1993022875A1 (en) 1993-11-11
AU718227B2 (en) 2000-04-13
ATE232036T1 (de) 2003-02-15

Similar Documents

Publication Publication Date Title
JPH08500471A (ja) 放送セグメントを認識するための方法とシステム
JP4418748B2 (ja) ストリームに繰り返し埋め込まれたメディアオブジェクトを識別し、セグメント化するためのシステムおよび方法
US7170566B2 (en) Family histogram based techniques for detection of commercials and other video content
EP0248533B1 (en) Method, apparatus and system for recognising broadcast segments
US6469749B1 (en) Automatic signature-based spotting, learning and extracting of commercials and other video content
US20090279840A1 (en) Image Digesting Apparatus
EP0161512B1 (en) Program identification system
US6633651B1 (en) Method and apparatus for recognizing video sequences
US20020178410A1 (en) Generating and matching hashes of multimedia content
US4605958A (en) Method and apparatus for detecting the channel to which an electronic receiver system is tuned
US7742680B2 (en) Apparatus and method for processing signals
GB2457694A (en) Audio-visual signature, method of deriving a signature and method of comparing audio-visual data
MXPA03004846A (es) Aparato y metodo para medir la sintonizacion de un receptor de difusion digital.
US5987150A (en) Video capturing using on-screen graphics
CA2628654C (en) Method and system for updating a broadcast segment recognition database
EP0938199A2 (en) Means for determining available reception frequencies in a receiver for the reception of digital broadcasts
US20030084459A1 (en) Method and apparatus for modifying a media database with broadcast media
WO1998035495A2 (en) Multichannel television sound stereo and surround sound encoder
JPH036130A (ja) 受信放送局選択装置
WO2004034708A1 (en) Method and apparatus for separately providing additional information on each object in digital broadcasting image