JP4008929B2 - テレビ・コマーシャル自動識別装置 - Google Patents

Description

本発明は、テレビ・コマーシャル自動識別装置に係り、特に、テレビ（以下、ＴＶという。）コマーシャル（以下、ＣＭという。）の放送に対し、ＴＶ・ＣＭデータ作成の音声比較とＣＭ放送報告書の作成により、ＴＶ・ＣＭ放送データを自動的に提供するためのテレビ・コマーシャル自動識別装置に関する。

日本の民間ＴＶ放送は現在終日おこなわれ、一般に、放送時間の１８％（自主規制）程度がＣＭである。例えば、ＴＶ局５局が対象であれば、２４時間中９０％はＣＭが放送されている事になる。
従来、ＴＶ、ラジオ等のＣＭの電子的な自動識別は各種発表されているが（特許文献１−３）、ＣＭマスター（放送されるＣＭと画像、音声等で比較するデータ）を自動的に生成する事が必要である。
また、ＴＶ放送局の放送システムは複雑な装置及びシステムを経由して、番組やＴＶ・ＣＭ等の信号送出が行なわれて来た。デジタルＴＶ放送が始まり、機器構成及び送出システムも、例えば、アナログＴＶ放送とのサイマル放送・非サイマル放送、ＨＤＴＶ放送、ＳＤＴＶ放送等に対応して多様化する。さらに、映像フォーマットも、アップコンバータ又はダウンコンバータを用いて、同じＴＶ・ＣＭ素材でも、１０８０ｉ，４８０ｉ，４８０ｐ，７２０ｐ等の各種の映像フォーマットとしてデジタルＴＶ放送が可能である。特に、ＴＶ・ＣＭは、製作から、元素材コピー、ＣＭバンク登録、マスターでの送出、放送での多チャンネル・デジタル化等の各段階において、デジタル機器の採用により、映像・音声の圧縮が行なわれ、例えば、元素材に入っている映像同期信号と音声信号の位相差が生じるようになる。
そこで、ＣＭ自動識別方法をシステムとして全国展開する時に、システムデザインが重要な要素となる。

特許第１９３７２１３号 特許第２５８５０４１号 特許第３４４７３３３号

従来のＣＭ自動識別は、アナログＴＶ放送に対応するが、今後、デジタルＴＶ放送の映像フォーマットや、映像音声圧縮データ等への自動識別の対応が必要となる。
また、一般に、ＴＶ・ＣＭは１本のマスター素材からコピーされ、各放送局のＣＭバンクに登録され、放送スケジュールにより、同じ放送局で繰り返し複数回、全国で放送されている事が多く、また、ネットワークを通じ、同一時間で複数局同時に放送される事もある。
本発明は、以上の点に鑑み、ＴＶ・ＣＭを、アナログＴＶ放送、デジタルＴＶ放送、地上波、衛星放送等の放送手段や、映像フォーマット（アナログ又はデジタル等）に関わらずに、自動的に識別することを目的とする。
また、本発明は、特に、ＣＭ放送の検出のために利用される放送画面の切り替え（変化）を効果的に検出することを目的とする。
さらに、本発明は、特に、ＣＭ放送の特定に利用される、音声データの圧縮及び比較を効果的に実現することを目的とする。

本発明の第１の解決手段によると、
テレビ放送の映像信号に基づき、フレーム同期信号、水平同期信号を出力するための同期分離回路と、
テレビ放送の映像信号に基づき、画像が所定の閾値より変化したことを検出し、画像変化信号を作成するための画像変化信号作成部と、
テレビ放送の音声信号に基づき、音声エンベロープ信号を作成するための音声エンベロープ作成回路と、
前記同期分離回路からの水平同期信号を音声データサンプリングパルスとして用い、前記音声エンベロープ作成回路からの音声エンベロープ信号を、水平同期信号により同期した音声デジタルデータに変換する音声Ａ／Ｄコンバータと、
前記同期分離回路からのフレーム同期信号、前記画像変化信号作成部からの画像変化信号、前記音声エンベロープ作成回路からの音声エンベロープ信号及び前記音声Ａ／Ｄコンバータからの音声デジタルデータを入力し、テレビ放送からＣＭ放送を検出して、ＣＭ放送のＴＶ局の識別情報、時刻情報、ＣＭ長、フレーム内の音声を平均化した音声平均化データ（Ｓｉ）を含むＣＭ切り出しデータを作成するＣＰＵを備え、
前記ＣＰＵは、音声エンベロープ信号及び画像変化信号に基づき無音期間を検出し、該無音期間を検出したときイベント信号を発生し、
前記ＣＰＵは、イベント信号のシーケンス番号を定めたイベント番号、イベント信号が発生したときの内部カウンタ値であるイベントアドレス、イベント信号発生時の時刻情報、を含むイベントカウンタメモリデータを作成し、
前記ＣＰＵは、あるイベントカウンタメモリデータを他のイベントカウンタメモリデータと比較し、いずれか２つのイベントカウンタメモリデータのイベントアドレス又は時刻情報の差が、予め定められた各ＣＭ長に対するＣＭ切り出し時間幅の範囲内のいずれかに該当するかを判断し、
前記ＣＰＵは、該イベントアドレス又は時刻情報の差が、いずれかのＣＭ長のＣＭ切り出し時間幅の範囲内であれば、その該当するＣＭ長を特定し、
前記ＣＰＵは、イベントカウンタメモリデータ及びＣＭ長により特定されるフレームの音声デジタルデータを圧縮して音声平均化データ（Ｓｉ）を計算し、特定されたＣＭ長と予め設定されたＴＶ局の識別情報及び時刻情報とを用いてＣＭ切り出しデータを作成し、
前記ＣＰＵは、作成したＣＭ切り出しデータを転送する
ＣＭ自動識別装置が提供される。

本発明によると、
前記ＣＰＵは、音声エンベロープ信号の無音期間を検出した間に、画像変化信号が入力され且つ無音期間の長さが予め定められたフレーム同期信号のカウント値以上であるとき、イベント信号を発生することができる。
本発明によると、さらに、
各ＣＭ長に対応して最小切り出しフレーム数と最大切り出しフレーム数の範囲であるＣＭ切り出し時間幅を記憶したＣＭ切り出し時間幅メモリを備え、
前記ＣＰＵは、イベントカウンタメモリデータを、それぞれ別個のメモリに対応させて記憶し、イベント信号発生毎に、前記ＣＭ切り出し時間幅メモリを参照し、いずれか２つのメモリ内のイベントカウンタメモリデータのイベントアドレスの差が、ＣＭ切り出し時間幅のいずれかに該当するかあるかどうかを判断し、該当する場合、ＣＭ切り出し信号を発生して、該イベント信号発生より過去に発生したイベント信号のメモリ内容を消去することができる。

本発明によると、さらに、
前記音声平均化データ（Ｓｉ）は、音声デジタルデータに基づき、次式１で計算したものとすることができる。

本発明によると、さらに、
前記画像変化信号作成部は、
Ｙ、Ｒ、Ｂ信号毎のＡ／Ｄコンバータ回路及び信号処理部を備え、
各前記信号処理部は、複数のフレームメモリ、各フレームメモリに対応する複数のマップデータ作成部、複数の前記マップデータ作成部間のマップデータを比較する信号比較部
を有し、
入力されたＹ信号、Ｒ信号、Ｂ信号毎に、
各前記フレームメモリは、前記Ａ／Ｄコンバータ回路で高速サンプリングデジタル化された画像データを、時間順に記憶し、
各前記マップデータ作成部は、各前記フレームメモリから画像データを読み出し、１フレームを分割した各エリア内の平均ピクセルデータをエリア別に作成したマップデータを時間順に記憶し、
前記信号比較部は、時間が隣接する二つの前記マップデータ作成部間の各エリア毎の平均ピクセルデータの差を求め、その差が所定の閾値を越えた場合に画像変化があると判定して画像変化信号を発生することができる。

本発明によると、さらに、
Ｙ，Ｒ，Ｂ信号毎に各エリア毎のマップ内比較閾値を予め定めたＹ，Ｒ，Ｂ信号毎のマップを備え、Ｙ，Ｒ，Ｂ信号毎且つエリア毎にマップ内比較閾値により画像変化を判定することができる。
本発明によると、
さらにＹ，Ｒ，Ｂ信号毎に比較レベルを予め定めたマップを備え、Ｙ，Ｒ，Ｂ信号毎に、各エリア毎の差が前記マップ内比較閾値を越えたエリア数を求め、そのエリア数が前記比較レベルを超えた場合に画像変化があると判定することができる。
本発明によると、さらに、
Ｙ，Ｒ，Ｂ信号全てに画像変化がある場合、又は、Ｙ，Ｒ，Ｂ信号ひとつに画像変化がある場合、画像変化信号を出力することができる。

本発明の第２の解決手段によると、
上述のようなＣＭ自動識別装置を、受信電波に対応して複数有し、
さらに、デジタルテレビ信号をアナログテレビ信号に変換して、いずれかひとつ又は複数の前記複数のＣＭ自動識別装置に出力するセットトップボックスと、
前記複数のＣＭ自動識別装置を制御して、前記複数のＣＭ自動識別装置からのＣＭ切り出しデータを外部装置へ送信するための機器制御通信用コンピュータと
を備えた
電波地域別受信サイトが提供される。

本発明の第３の解決手段によると、
ＴＶ局の識別情報、時刻情報、ＣＭ長、音声平均化データ（Ｓｉ）を含むＣＭ切り出しデータを記憶したＣＭ切り出しファイルと、
過去に放送されたＣＭデータ又は放送される予定のＣＭデータについて、ＴＶ局の識別情報、時刻情報、ＣＭ長、ＣＭを特定する固有情報であるＣＭ特定データ、ＣＭ音声を圧縮したデータである音声パターン偏差（ＳＳｉ）、を含むＣＭマスター登録データを記憶したＣＭマスター登録ファイルと、
ＴＶ局の識別情報、時刻情報、ＣＭ長、ＣＭ特定データ、ＣＭ音声を圧縮したデータである音声パターン偏差（ＳＳｉ）、を含む新ＣＭマスター登録データを記憶した新ＣＭマスター登録ファイルと、
ＴＶ局の識別情報、時刻情報、ＣＭ長、一致率、ＣＭ特定データを含むＣＭ比較結果データを記憶したＣＭ比較結果ファイルと、
ＣＭ切り出しデータについて前記ＣＭマスター登録ファイルを検索してＣＭを特定し、前記新ＣＭマスター登録ファイル又は前記ＣＭ比較結果ファイルにデータを記憶するための演算部と
を備え、
前記演算部は、
ＣＭ切り出しデータを入力して、該ＣＭ切り出しデータを前記ＣＭ切り出しファイルに記憶し、
前記ＣＭ切り出しファイルからＣＭ切り出しデータを順次読み取り、ＣＭ切り出しデータ中の音声平均化データ（Ｓｉ）に基づき、該音声平均化データの標準偏差によりデータサイズを圧縮した音声パターン偏差データ（ＳＳｉ）に変換し、ＣＭ切り出しデータから計算した音声パターン偏差データ（ＳＳｉ）と、前記ＣＭマスター登録ファイルから読み取ったＣＭマスター登録データ内の音声パターン偏差（ＳＳｉ）とを順次比較して一致率を計算し、
該一致率に基づき一致と判断した場合、ＣＭ切り出しデータのＴＶ局の識別情報及び時刻情報、計算された一致率、ＣＭマスター登録データのＣＭ特定データを用いてＣＭ比較結果データを作成し、該データをＣＭ比較結果ファイルに書き込む。
上述のようなＣＭ自動識別装置が提供される。
前記音声平均データ（Ｓｉ）は、次式２により音声標準偏差（Ｓｄ）に変換してから、次式３により音声パターン偏差（ＳＳｉ）に圧縮したものであることができる。

本発明によると、さらに、
前記演算部は、ＣＭの一致度を、次式４で計算し、ＣＭの一致度が規定値以上であれば、ＣＭが特定されたと判断することができる。

本発明によると、さらに、
すべてのＣＭマスター登録データと比較して、一致率に基づきすべて不一致と判断した場合、一致率を所定値とし、ＣＭ特定データをブランク又はプリセット値として、ＣＭ比較結果データを作成し、前記ＣＭ比較結果ファイルに記憶し、
ＣＭ切り出しデータのＴＶ局の識別情報及び時刻情報、ＣＭ特定データをブランク又はプリセット値として、音声パターン偏差データ（ＳＳｉ）をＣＭ切り出しデータにより計算された値に設定して新ＣＭマスター登録データを作成し、該データを新ＣＭマスター登録ファイルに書き込むことができる。

本発明の第４の解決手段によると、
Ｙ、Ｒ、Ｂ信号毎のＡ／Ｄコンバータ回路と、
前記Ａ／Ｄコンバータ回路に対応して、複数のフレームメモリ、各フレームメモリに対応する複数のマップデータ作成部、複数の前記マップデータ作成部間のマップデータを比較する信号比較部を有する、Ｙ、Ｒ、Ｂ信号毎の信号処理部を備え、
入力されたＹ信号、Ｒ信号、Ｂ信号毎に、
各前記フレームメモリは、前記Ａ／Ｄコンバータ回路で高速サンプリングデジタル化された画像データを、時間順に記憶し、
各前記マップデータ作成部は、各前記フレームメモリから画像データを読み出し、１フレームを分割した各エリア内の平均ピクセルデータをエリア別に作成したマップデータを時間順に記憶し、
前記信号比較部は、時間が隣接する二つの前記マップデータ作成部間の各エリア毎の平均ピクセルデータの差を求め、その差が所定の閾値を越えた場合に画像変化があると判定して画像変化信号を発生する
画像変化信号作成部が提供されることができる。

本発明によると、さらに、
Ｙ，Ｒ，Ｂ信号毎に各エリア毎のマップ内比較閾値を予め定めたＹ，Ｒ，Ｂ信号毎のマップを備え、Ｙ，Ｒ，Ｂ信号毎且つエリア毎にマップ内比較閾値により画像変化を判定することができる。
本発明によると、
さらにＹ，Ｒ，Ｂ信号毎に比較レベルを予め定めたマップを備え、Ｙ，Ｒ，Ｂ信号毎に、各エリア毎の差が前記マップ内比較閾値を越えたエリア数を求め、そのエリア数が前記比較レベルを超えた場合に画像変化があると判定することができる。
本発明によると、さらに、
Ｙ，Ｒ，Ｂ信号全てに画像変化がある場合、又は、Ｙ，Ｒ，Ｂ信号ひとつに画像変化がある場合、
画像変化信号を出力することができる。

本発明の第５の解決手段によると、
演算部は、テレビ放送信号のフレーム内の音声を平均化した前記音声平均化データ（Ｓｉ）を、音声デジタルデータに基づき、次式１で計算し、

演算部は、前記音声平均化データ（Ｓｉ）を、次式２により音声標準偏差（Ｓｄ）に変換してから、次式３により音声パターン偏差（ＳＳｉ）に圧縮するようにした音声データ処理方法が提供される。

本発明によると、さらに、
前記演算部は、テレビ放送信号から計算した音声パターン偏差データ（ＳＳｉ）と、複数のマスター登録データ内の音声パターン偏差（ＳＳｉ）とを順次比較した一致率を、次式４で計算し、一致度が規定値以上であれば、そのマスター登録データが特定されたと判断することができる。

本発明によると、ＴＶ・ＣＭをＴＶ放送方式に関わらずＣＭを自動切り出し、新素材ＣＭ、既知素材ＣＭか判定し、複数電波エリアをネットワークで結ぶ事により、ＴＶ放送されるＴＶ・ＣＭのＣＭ素材を識別し、ＣＭ素材のデータベース化を自動的に行うことができる。これにより、放送実績確認、素材別の実績報告書作成のコストダウンを図る事で、ＴＶ放送関係マーケティング活動に必要なデータを提供することが可能となる。
本発明によると、放送の画像変化を効果的に検出することができる。
また、本発明によると、例えば、音声信号のエネルギーの積分を行ない、水平同期信号のタイミングで、サンプリングされた音声データをフレームＳＹＮＣ信号期間毎で平均化・高圧縮化した音声データと、ＣＭ素材の自動切り出し、自動音声認識、新素材の自動登録を行うことができる。

１．ハード構成
図１は、ＣＭ自動識別システムの構成図である。
ＣＭ自動識別システムは、電波地域別受信サイト１―１〜１―ｎ、ネットワーク２０１、ＣＭ比較センターコンピュータ３０１を備える。
電波地域別受信サイト１―１〜１―ｎは、電波エリア内に設置されて、ＣＭを自動識別し、ＣＭ切り出しデータを作成する（詳細は後述）。日本では、電波行政は３２地区と県域放送局があり、ＴＶ・ＣＭの調査は、ＣＭ放送を実施している放送局（ＣＡＴＶ局を含んでもよい。）に限定することができる。しかし、デジタル地上波ＴＶ放送局も放送が開始され調査対象となり、また、ＢＳ、ＣＳ等のデジタル衛星ＴＶ放送局も調査対象ＴＶ局となるが、これらの放送は、日本では全国で視聴可能である。よってアナログ放送及びデジタル放送を含む所望の放送について、１箇所に集合した電波地域別受信サイト１―１の中で調査を集約することができる。

ネットワーク２０１は、電話交換網、移動体通信網、インターネット等のネットワークである。
センターコンピュータ３０１は、ＣＭの比較及び特定を行うもので、例えば、電波地域別受信サイト１―１〜１―ｎで切り出されたＣＭ切り出しデータと、ＣＭマスター登録ファイル等の内部ファイルとの比較演算等を実行する（詳細は後述）。
ＣＭ自動識別システムの特徴及びＣＭ識別の運用は、主に、次の通りである。
・ ＴＶ放送の中からＣＭの時間長を含めたＣＭ特定。
・ ＣＭのデータ比較技術（本装置は音声データで行なう）。
・ ＣＭ特定データ比較の為の高速化で音声データ高圧縮。
・ マスター本登録の簡素化。
・ 最終確定までの運用の合理化。

図２に、電波地域別受信サイト１―１の構成図を示す。他の電波地域別受信サイト１―２〜１―ｎも同様の構成である。
電波地域別受信サイト１―１は、アナログＴＶ放送受像用及びデジタルＴＶ放送受像用のタイプを含み、それぞれ、アンテナ（アンテナ線）、自動ＣＭ識別装置１０−１〜ｎ、機器制御通信用コンピュータ１０−７１、デジタルＴＶ放送受信用ＳＴＢ（セットトップボックス）１０−１０ｍ〜１０ｎ、ＵＳＢインターフェース（双方向通信）１０−８１〜８ｎ、ハードディスク読み出しインターフェース（双方向通信）１０−９１〜９ｎ、モデム（ＭＯＤＥＭ）１０−６１を備える。
例えば、自動ＣＭ識別装置１０−ｎは、ＣＭスキャナー１０−０ｎ、タイムゼネレータ１０−１ｎ、ＨＤＤ（ハードディスク）レコーダ１０−２ｎ、ＶＴＲ１０−３ｎ、アンテナ入力端子１０−４ｎ、映像・音声入力端子１０−５ｎを備える。
なお、タイムゼネレータ１０−１ｎは、年月日、時刻を例えば「２００４ ０８：３１ １２：２３：３０」の様に時計データとして、映像の上部、下部、横部等の適宜の位置に挿入する機器である。また、ＨＤＤレコーダ１０−２１は、ＴＶ放送の映像、音声を録画、再生を行う。

各電波地域別受信サイト１―１〜ｎは、自動ＣＭ識別装置１０−１〜ｎを、設置電波地区でＣＭを放送しているＴＶ放送のチャンネル数（放送局）分（ここではｎ台）を備える。即ち、それぞれの自動ＣＭ識別装置１０−１〜ｎは、アナログＴＶ放送及びデジタルＴＶ放送の必要な受信数に対応する。各自動ＣＭ識別装置１０−１〜ｎは、機器制御通信用コンピュータ１０−７１及び通信用ＭＯＤＥＭ１０−６１を通じ、センターコンピュータ３０１と通信を行う。

機器制御通信用コンピュータ１０−７１は、前記複数のＣＭ自動識別装置を制御し、また、複数のＣＭ自動識別装置からのＣＭ切り出しデータを適宜のタイミングで外部装置へ送信する。機器制御通信コンピュータ１０−７１は、ＣＭ切り出しデータを記憶する記憶部を備え、一度に複数のデータを送信してもよい。

図３に、ＣＭスキャナーの構成図を示す。
次に、自動ＣＭ識別装置１０―１内のＣＭスキャナー１０−０１について説明する。他のＣＭスキャナー１０−０２〜０ｎも同様の構成である。ＣＭスキャナー１０−０１はアナログＴＶ放送受信部１０１−１、映像信号入力部１０１−２、音声信号入力部１０１−３、画像出力部１０１−４、音声出力部１０１−５、切り分け器１０１−６、同期分離回路１０１−７、画像変化信号作成部１０１−８、Ａ／Ｄコンバータ１０１−９、音声帯域通過回路１０１−１０、音声エンベロープ作成回路１０１−１１、時計回路１０１−１２、ＣＰＵ１０１−１４を備える。
アナログＴＶ放送受信部１０１−１は、地上波ＴＶ放送等のアナログＴＶ放送を受信する。
映像信号入力部１０１−２及び音声信号入力部１０１−３は、デジタルＴＶ放送をセットトップボックス１０１−１０ｎでフォーマット変換した映像及び音声を入力する。
画像出力部１０１−４は、タイムゼネレータ図２、１０１−１１に送る映像信号を出力し、音声出力部１０１−５は、ＨＤＤレコーダ１０１−２１、ＶＴＲ１０１−３１に送る音声信号（例、ステレオ音声）を出力する。
切り分け器１０１−６は、入力される放送がアナログ又はデジタルＴＶ放送を切り分けるものであり、スイッチＳＷ１の切り替えでＴＶ放送受信形態（アナログ、デジタル）の選択を行っている。
同期分離回路１０１−７は、映像信号のサンプリングと、ＣＭ時間長測定等に使用する音声データサンプリングパルス発生のために、垂直及び水平同期信号、フレーム信号作成用奇数・偶数判別信号を出力する。同期分離回路１０１−７で、複合映像信号より水平及び垂直同期信号を作成し、また、奇数・偶数判別信号をＡＮＤ回路を用いてフレームＳＹＮＣ信号を作成し、ＣＰＵ１０１−１４に供給する。
画像変化信号作成部１０１−８は、映像信号が入力され、Ｙ，Ｒ，Ｂ成分毎に映像を比較して、画像が変化したことを判断して、画像変化信号を出力する。さらに、画像変化信号作成部１０１−８は、同期分離回路１０１−７の出力を、画像変化信号作成用Ｙ信号・Ｒ信号・Ｇ信号のフレームメモリ画像のリード・ライト信号として利用している。
音声帯域通過回路１０１−１０、音声エンベロープ作成回路１０１−１１、時計回路１０１−１２、Ａ／Ｄコンバータ１０１−９により、音声信号の音声エンベロープ及び水平同期信号でサンプリングされた、音声デジタルデータを出力する。例えば、音声帯域通過回路１０１−１０内のＨ．Ｐ．Ｆ、Ｌ．Ｐ．Ｆを用いた音声帯域通過フイルターで音声のバス音等を除き、音声信号を音声エンベロープ作成回路１０１−１１で音声波形を積分・整流回路（エンベロープ）にし、出力信号をＣＰＵ回路１０１−１４に出力し無音期間の時間測定を行う。
時計回路１０１−１２は、ＣＭデータに付加する年月日、時分秒を作成する。全サイトの時計装置は、正確な時間が必用であるので、ＣＰＵ１０１−１４を通じ自動で電波時計等のシステムを利用し日本標準時間に校正している。

動作の概要は次の通りである。なお、詳細動作は後述する。
アナログＴＶ受信部１０１−１及び映像信号入力部１０１−２、音声信号入力部１０１−３からの映像・音声信号は、切り分け器１０１−６のＳＷ１でアナログ、デジタルＴＶ放送の選択を行い、映像信号は同期分離回路１０１−７及び画像変化信号作成部１０１−８に供給され、一方、音声信号は音声帯域通過回路１０１−１０に供給される。
音声信号は、音声帯域通過回路１０１−１０、音声エンベロープ作成回路１０１−１１を経て音声エンベロープ信号として、またＡ／Ｄコンバータ１０１−９を経て、水平同期信号（音声データサンプリングパルス）でサンプリングされた音声デジタルデータとして、ＣＰＵ１０１−１４に供給される。
一方映像信号は、画像変化信号作成部１０１−８に導かれ、フレーム毎にＹ信号、Ｒ信号、Ｂ信号それぞれの比較を行い、変化量が基準値より大きい場合には画像変化信号を作成する。なお、同期分離回路１０１−０７で分離された垂直及び水平同期信号は、音声信号のサンプリング、画像変化信号作成部１０１−８及びＣＰＵ１０１−１４等の各種の制御信号として利用する。
ＣＰＵ１０１−１４では、ＣＭ切り出し条件等の各種基準データをメモリに初期設定しており、画像変化信号、フレーム同期信号、音声エンベロープ信号等の各入力信号に基づき、イベント信号の作成、ＣＭ切り出しデータ作成等の処理を行う。ＣＰＵ１０１−１４は、音声信号のサンプリング、１フレーム内音声データの平均化、ＣＭ切り出しデータの作成（後述、図４参照）等を行う。これら動作は、ＵＳＢインターフェース１０１−８１を介して制御される。

図４に、ＣＭ切り出しデータのフォーマットを示す。
ＣＭ切り出しデータは、ＣＭ放送のＴＶ局の識別情報（種類、地区、ＴＶ局番号、機器番号等）、時刻情報、ＣＭ長、予備データ、フレーム内の音声を平均化した音声平均化データ（Ｓｉ）を含む。
図５に、ＣＭ切り出し時間幅ファイル１０１−１４１のフォーマットを示す。
ＣＭ切り出し時間幅ファイル１０１−１４１は、各ＣＭ長に対して、標準フレーム数、ＣＭ切り出し時間幅を記憶する。例えば、日本のＴＶ・ＣＭは、ＣＭ長は１５秒、３０秒のＣＭが大多数であるが、時々、長短時間のＣＭも存在し、ＣＭ時間長の設定は任意に出来る様に設計されている。
図６に、イベントカウンタメモリ１０１−１４２のフォーマットを示す。
イベントカウンタメモリ１０１−１４２は、発生したイベント信号毎に、あらかじめ設定された機器番号、発生シーケンス番号であるイベント番号、ＣＭ切り出しカウンタのカウンタ値であるイベントアドレス、時刻情報を記憶する。なお、記憶されるデータとして、例えば、カウンタドレスは、４桁では、最大１ｆｆｆで８１９１カウント、２７３秒まで音声データ格納可能であり、実時間時計データは、＊＊＊＊年＊＊月＊＊日＊＊時＊＊分＊＊秒とすることができる。
ＣＰＵ１０１−１４は、ＣＭ切り出しカウンタ１０１−１４３、ＣＭ切り出し時間幅ファイル１０１−１４１及びイベントカウンタメモリ１０１−１４２を、内部又は外部の適宜の記憶手段に備える。

図７に、ＣＭ比較センターの構成図を示す。
ＣＭ比較センターは、ＭＯＤＥＭ―１〜ｎ ３１１〜３１ｎ、通信制御装置３２１、主制御部３２２、ＣＭ検索比較演算部３２３、記憶部３２４を備える。
記憶部３２４は、ＣＭ切り出しファイル３２４１、ＣＭマスター登録ファイル３２４２、ＣＭ比較結果ファイル３２４３、新ＣＭマスター登録ファイル３２４４を備える。
図８に、ＣＭ切り出しファイル３２４１のフォーマットを示す。
ＣＭ切り出しファイル３２４１は、ＴＶ局の識別情報、時刻情報、ＣＭ長、音声平均化データ（Ｓｉ）を含むＣＭ切り出しデータを記憶する。
図９に、ＣＭマスター登録ファイル３２４２のフォーマットを示す。
ＣＭマスター登録ファイル３２４２は、過去に放送されたＣＭデータ又は放送される予定のＣＭデータについて、ＴＶ局の識別情報、時刻情報、ＣＭ長、ＣＭを特定する固有情報であるＣＭ特定データ（業種、メーカ番号、銘柄、ＣＭ番号、ＣＭ長、登録ＣＭ名等）、ＣＭ音声を圧縮したデータである音声パターン偏差（ＳＳｉ）、を含むＣＭマスター登録データを記憶する。
図１０に、ＣＭ比較結果ファイル３２４３のフォーマットを示す。
ＣＭ比較結果ファイル３２４３は、ＴＶ局の識別情報、時刻情報、ＣＭ長、一致率、ＣＭ特定データを含むＣＭ比較結果データを記憶する。
図１１に、新ＣＭマスター登録ファイル３２４４のフォーマットを示す。
新ＣＭマスター登録ファイル３２４４は、ＴＶ局の識別情報、時刻情報、ＣＭ長、ＣＭ特定データ、ＣＭ音声を圧縮したデータである音声パターン偏差（ＳＳｉ）、を含む新ＣＭマスター登録データを記憶する。
なお、これら各ファイルには、予備データ、データ識別番号等を適宜追加することができる。また、各ファイルには、放送状態分類として、例えば、ネットＣＭ、ステーションブレークＣＭ、ＰＴ（Ｐａｒｔｉｃｉｐａｔｉｎｇ Ａｎｎｏｕｎｃｅｍｅｎｔ）ＣＭ、提供番組ＣＭ、番組宣伝用ＣＭ等に分類することができる。調査結果は、全てのＣＭに地区名、放送局名、放送時間、ＣＭ分類、放送状態分類等を適宜付加することができる。

２．動作
（１）電波地域別受信サイト（ＣＭスキャナー）
図１２は、ＣＭ自動識別方法によるＣＭ比較についての概念図（ＣＭスキャナー側）である。
まず、ＣＭスキャナー側の動作について説明する。
入力信号である映像信号及び音声信号は、切り分け器１０１−６からの出力信号である。映像信号に基づき、同期分離回路１０１−７及びＡＮＤ回路等によりフレームＳＹＮＣ信号が作成され、ＣＰＵ１０１−１４に入力される。また、映像信号に基づき、後述のように、画像変化信号作成部１０１−８により画像変化信号が作成され、ＣＰＵ１０１−１４に入力される。さらに、映像信号に基づき、同期分離回路１０１−７により水平同期信号が抽出され、音声データサンプリングパルスとしてＡ／Ｄコンバータ１０１−９に入力される。
一方、音声信号に基づき、音声帯域通過回路１０１−１０及び音声エンベロープ作成回路１０１−１１等により音声エンベロープ信号（音声アナログ信号）が作成され、ＣＰＵ１０１−１４に入力される。また、音声信号に基づき、Ａ／Ｄコンバータ１０１−９により水平同期信号により同期した音声データが作成され、ＣＰＵ１０１−１４に入力される。

図１３に、イベント信号作成部の説明図を示す。また、図１４に、イベント信号作成タイミングチャートを示す。
ＣＰＵ１０１−１４は、音声エンベロープ信号と画像変化信号とフレームＳＹＮＣを入力し、イベント信号を作成する。これらの信号を用いて作成されたイベント信号は、ＣＰＵ１０１−１４で、ＣＭ切り出し基準データ条件と一致すれば、ＣＭ切り出しデータを作成する。
ＣＰＵ１０１−１４は、音声アナログ信号に基づき、無音期間信号を検出する。具体的には、後述するように、無音期間を検出した間に、画像変化信号が入力され且つ無音期間の長さがフレームＳＹＮＣ信号の予め定められたカウント値以上であるとき、イベント信号を発生する。無音期間の長さは、ＣＰＵ１０１−１４内のイベント信号作成部のカウンタにより、フレームＳＹＮＣ期間の倍数で任意に設定可能であるが、ここでは、一例として最小９カウント（≒３００ｍＳＥＣ）以上と設定し、以上の条件が合致した時、イベント信号を作成している。

図１５に、ＣＭ切り出し処理についてのフローチャートを示す。
ＣＰＵ１０１−１４は、イベント信号発生した場合（Ｓ１０１）、図６に示すイベントカウンタのデータを作成し、イベント信号発生順にイベントカウンタメモリ群（イベントカウンタメモリ１０１−１４２）にイベントカウンタデータを順に書き込む（Ｓ１０５）。具体的には、機器番号は、ＣＰＵ１０１−１４内に予め設定された値とする。イベント番号は、イベント信号の発生に応じたシーケンス番号を定めたものである。イベントアドレス（イベントＡＤＤ）は、ＣＰＵ１０１−１４内部のＣＭ切り出しカウンタによりフレーム同期信号をカウントし、イベント信号が発生したときのカウンタ値である（Ｓ１０３）。時刻情報は、時計回路１０１−１２から得られたイベント信号発生時である。なお、イベントカウンタメモリデータに対応して音声デジタルデータが適宜の記憶部に記憶されている。
つぎに、ＣＰＵ１０１−１４は、イベントカウンタメモリの各データエントリを第１メモリ、第２メモリ・・・第ｎメモリに対応させ、イベント信号発生毎に、いずれか２つのメモリ内のデータのイベントアドレスを計算し（Ｓ１０９）、その差が、図５のＣＭ切り出し時間幅（最小切り出しフレーム数と最大切り出しフレーム数の間）以内であるかどうかを判断する（Ｓ１１１）。ステップＳ１０９において、各メモリの時間計算はイベント信号が発生した時、イベントカウンタデータが記憶されているすべてのメモリ間のカウンタドレスの時間計算を行い、図５の全ての切り出し時間幅の検証を行っている。ＣＰＵ１０１−１４は、ステップＳ１１１の判断により、イベント信号発生時の２つのメモリのデータのイベントアドレスの差が、いずれかのＣＭ長の時間幅以内であれば、該当するＣＭ長、標準フレーム数を特定し、ＣＰＵ１０１−１４は、図４のＣＭ切り出しデータを作成する（Ｓ１１３）。この処理では、ＣＭ切り出しデータを内部に予め設定されたプリセット値により、種類、地区、ＴＶ局番号、号機等の各装置の属性を設定し、時計回路１０１−１２により西暦年月日時刻を設定する。さらに、ＣＰＵは、図５のＣＭ切り出しファイル１０１−４１から得られたＣＭ長を設定し、そのフレーム長の音声データをとして音声平均化データ（Ｓｉ）を設定する。ここで、音声平均化データ（Ｓｉ）は、音声デジタル信号により、計算式１で計算することにより、音声圧縮を行い作成したものである。例えば、ＣＭ長が１５秒、標準フレーム数が４５０フレームであれば、４５０バイトの容量とすることができる。
ＣＭ切り出し信号を発生させた該当メモリは、その比較対象メモリである過去のメモリのデータ消去を行う。（Ｓ１１５）。例えば、メモリー（ｉ）と（ｖ）を比較し、図５のいずれかのＣＭ切り出し時間幅以内に両メモリのイベントアドレスの差が該当した時、ＣＭ切り出し信号を発生し、その後、メモリー（ｖ）より、過去のメモリ（ｉ）（ｉｉ）（ｉｉｉ）（ｉｖ）の消去を行う制御している。
イベントカウンタメモリ群は、イベント信号で図６のイベントカウンタメモリ１０１−１４２にデータを書き込んだのち、例えば１２０秒監視タイマーで時間監視を行い、１２０秒経過したメモリは消去を行っている。（Ｓ１１７、Ｓ１１９）。
ＣＰＵ１０１−１４は、適宜のタイミングで、作成されたＣＭ切り出しデータを、制御通信用コンピュータ１０１−７１によりＣＭ比較センター３０１に転送する。

（２）ＣＭ比較センターコンピュータ側
図１６に、ＣＭ自動識別方法によるＣＭ比較についての概念図（ＣＭ比較センター側）を示す。
つぎに、ＣＭ比較センター側の動作について説明する。
ＣＭ比較センター３０１は、電波地域別受信サイト１−１〜ｎからネットワーク２０１を経て、図４のＣＭ切り出しデータを受ける。ＣＭ比較センター３０１は、ＣＭ切り出しデータを記憶部のＣＭ切り出しファイル３２４１に記憶する。ＣＭ検索比較演算部３２３は、ＣＭ切り出しデータを順次読み取り、音声平均化（Ｓｉ）部（表１−１）と地区、局番号、時計データ部（表１−２）に振り分ける。ＣＭ検索比較演算部３２３は、音声平均化（Ｓｉ）については、再度、後述の計算式２により音声標準偏差（Ｓｄ）に変換してから、後述の計算式３により音声パターン偏差（ＳＳｉ）に圧縮する。一方、比較対照となるＣＭマスター登録データー（図９）は記憶部のＣＭマスター登録ファイル３２４２に格納されている。このデータは、例えば、過去に放送されたＣＭデータ（又は放送される予定のＣＭデータ）である。ＣＭ検索比較演算部３２３は、ＣＭ切り出しデータから計算した音声パターン偏差ＳＳｉと、図９のＣＭマスター登録データ内の各音声データ（表２−１）（ＳＳｉ）とを、順次、音声パターン偏差比較部に於いて後述の計算式４で計算を行い、ＣＭの一致又は不一致を計算する。
ある登録データについて不一致であれば次のアドレスのデータを順次読み出し、すべてのデータを比較して、すべて不一致の時は、図１０及び図１１のファイルにデータを書き込む。具体的には、図１０は、ＣＭ切り出しファイル３２４１から読みとったＣＭ切り出しデータの表１−２のデータを用いて設定し、一致率を０とし、ＣＭ特定データは、ＣＭマスター登録データの表２−２のデータを適宜用いて設定する。図１１は、ＣＭ切り出しファイル３２４１から読みとったＣＭ切り出しデータの表１−２のデータを用いて設定し、本登録コードはブランク又はプリセット値に設定し、音声パターン偏差ＳＳｉはＣＭ切り出しデータ（ＣＭ切り出しファイル３２４１の表１−１）により計算された値を設定する。一方、一致であれば、図９のデータ読み出しは停止して、図１０のＣＭ比較結果ファイル３２４３にデータを新しく書き込む。具体的には、ＣＭ切り出しファイル３２４１から読みとったＣＭ切り出しデータの表１−２のデータを用いて設定し、一致率に音声パターン偏差比較部により計算式４で計算された値を設定し、ＣＭ特定データは、ＣＭマスター登録データの表２−２のデータを適宜用いて設定する。

３．詳細構成
（画像変化信号作成）
図１７に、画像変化信号作成部１０１―０８の構成図を示す。
図１８及び図１９に、画像変化信号の作成についての説明図（１）、（２）を示す。マップ１〜３は、Ｙ信号（輝度信号（明るさ））、Ｒ信号（赤色成分の色温度（位相角）を除いた絶対値レベル）、Ｂ信号（青色成分の色温度（位相角）を除いた絶対値レベル）毎のマップ内比較閾値を記憶し、また、マップ４は、Ｙ、Ｒ、Ｂ信号の比較レベルを記憶する。ＣＰＵ１０１−１４は、これらマップを記憶する。
画像変化信号作成部１０１―０８は、Ｙ信号Ａ／Ｄコンバータ回路１０１−８７、Ｒ信号Ａ／Ｄコンバータ回路１０１−８８、Ｂ信号Ａ／Ｄコンバータ回路１０１−８９、ＯＲ回路１０１−８６を備え、各Ｙ，Ｒ，Ｂ信号は、フレームメモリＡ、Ｂ，Ｃ １０１−８７０〜８７２、マップデータ作成部１０１−８７３−１〜３、エリア別信号比較部１０１−８７４を有する。
入力されたＹ信号、Ｒ信号、Ｂ信号は、それぞれＹ信号、Ｒ信号、Ｂ信号Ａ／Ｄコンバータ回路１０１−８７、１０１−８８、１０１−８９で高速サンプリングデジタル化され、それぞれ各フレームメモリＡ〜Ｃに書き込まれる。フレームメモリＡ〜Ｃに書き込まれる数値は、例えば、映像・色信号のＡ／Ｄコンバータの最大値８Ｂｉｔ＝２５５である。マップデータ作成部１０１−８７３−１〜３は、書き込まれたフレームメモリのデータを読み出してから、マップ５の様に（一例としてＹ信号を図示）、ＴＶ画面１について１フレームをＹ、Ｒ、Ｂの信号別に１０×１０の１００のエリア内平均ピクセルデータをエリア別に作成し、記憶する。つぎに、エリア別信号比較部１０１−８７４は、マップ１，２，３により、定められた閾値を、Ｙ，Ｒ，Ｂ信号のフレーム毎に比較し、さらにマップ４の比較レベルと比較することで閾値を越えた場合に画像変化信号を発生する（以下に詳述）。

図２０に、画像変化信号検出のタイミングチャートを示す。以下に、図１７〜図２０により、動作説明を行う。ここでは、Ｙ信号について説明するが、Ｒ、Ｂ信号も同様である。
先ずＣＰＵ１０１−１４は、映像信号をフレームメモリＡ，Ｂ，Ｃ，の順に書きこむ。たとえば、ＣＰＵ１０１−１４は、Ｙ信号用フレームメモリ１０１−８７０〜８７２に、フレーム単位で順次高速サンプリング及びデジタル化された映像信号を、１ピクセル＝ｘ／２５５に表現されるデータとして書きこむ。マップデータ作成部１０１−８７３−１は、ＣＰＵ１０１−１４の制御により、フレームメモリＡ１０１−８７０に書きこまれたフレーム１の映像信号は、タイミングチャートで示すフレーム２の、マップデータ（ｉ）の読み出し期間で読み出し、マップ５に示すように、ＴＶ映像信号の有効画像エリアを、垂直及び水平を１０×１０分割にする演算を行い、計１００エリアを設けたエリア内平均映像信号比較データに変換し、内部のマップデータメモリに書きこむ。マップデータ作成部１０１−８７３−１〜３は、マップ５のエリア別マップデータを、マップデータメモリ１０１−８７３−１，２，３の順序でフレームメモリＡ，Ｂ，Ｃ毎に作成する。作成されたエリア別マップデータはタイミングチャート中、メモリ比較タイミング（ｉｉｉ）（ｉ）で、比較部１０１−８７４により、マップデータメモリ１０１−８７３−３とマップデータメモリ１０１−８７３−１のエリア別マップデータが、順次比較される。予め設定されている閾値（エリア別データ Ｘ／２５５）は、マップ１，２，３に書かれている数字（任意）である。比較部１０１−８７４が、あるフレームでのマップデータメモリ１０１−８７３−３（マップ５）と次フレームでのマップデータメモリ１０１−８７３−１（マップ６）のエリア別マップデータの１０×１０のエリアを比較した演算結果がマップ７である。比較部１０１−８７４は、エリア毎にマップ１の閾値と比較し、閾値以上の差があるエリアが、１００エリアの内マップ４の表以上のエリアあれば、画像変化があったとして画像変化信号を出力する。なお、この図では、ＯＲ回路１０１−８６により、Ｙ信号、Ｒ信号、Ｂ信号の３信号の中で１つでも画像変化があったとされれば画像変化信号として利用するが、ＡＮＤ回路に代えて３信号の全てに画像変化がある場合に画像変化信号を出力としても良い。
なお、マップ１，２，３で、Ｙ，Ｒ，Ｂ信号比較閾値は任意に設定が可能である。また、マップ１〜３で中心部の閾値は比較結果条件を厳しく、周辺部を甘くしているのは、ニュース、劇映画、ドラマ等で周囲音声が少なく無音状態が多く発生する画面が多いシーン（例えばアナウンサーがニュース原稿を読んでいるシーン）を仮定すると、画面の中心部に画像変化が少ない場合が多く、このような場合でもイベント信号作成がＣＭ切り出し要求事項に有効に働くようにするためである。
また、マップデータは、１０×１０以外にも適宜の数のエリアとしてもよく、適宜の比較エリアマップ閾値を作成して自由に比較レベルの変更は可能であり、更にマップ４の閾値を変更して画像変化信号の出力条件を変更することも可能である。

（音声データ圧縮処理）
音声信号に関しては、エンベローブ信号に基づき、Ａ／Ｄコンバータ１０１−９により水平同期でサンプリングされた音声デジタルデータ（Ｈｄ）をＣＰＵ１０１−１４内部でフレームＳＹＮＣ信号により再度圧縮を行い（計算式１）、１フレーム・１データ（Ｓｉ）として、音声デジタルデータを作成する。
ＣＰＵ１０１−１４では、ＣＭ切り出し信号が発生した時、例えば、水平同期信号で量子化数８ビット、１フレーム５２５回、秒１５７５０回のサンプリングを行い、フレームＳＹＮＣ信号で、計算式１により、１フレーム内で、音声データの平均化データ（Ｓｉ）を計算する。

たとえば、１フレーム間の平均データに変換を行う場合、上記フレーム毎に作られた音声データは計算式１にて秒３０回のデータに変換すれば、１５秒ＣＭ＝４５０バイト、３０秒ＣＭ＝９００バイトになる。
なお、水平同期信号で細部にデータを作成しているのは、アナログ放送とデジタル放送には映像・音声共に、遅延発生時間がサイマル放送でも発生し（音声、画像共に一定時間ではない）、圧縮を２段階、即ち、水平同期サンプリング、１フレーム平均化を行っている。

ＣＭ切り出しデータの音声平均データ（Ｓｉ）は、表１−１の音声データマスター（ＳＳｉ）に合わせるように、計算式２及び３で、音声標準偏差データＳｄから音声パターン偏差ＳＳｉまで圧縮を行う。

例えば、音声パターン偏差（ＳＳｉ）は、１５秒ＣＭ＝７５バイト、３０秒ＣＭ＝１５０バイト、
４５秒ＣＭ＝１３５０バイトまで圧縮される。

つぎに、ＣＭ切り出しデータの音声パターン偏差データ（ＳＳ１ｉ）とＣＭマスター登録データの音声パターン偏差データ（ＳＳ２ｉ）とを、計算式４で計算することにより比較する。ＣＭの一致度が規定値以上であれば、ＣＭが特定されたと判断する。

本発明は、ＴＶコマーシャルの取引・放送監視・ＴＶ視聴率と組み合わせたコマーシャル放送予定スケジュールの製作、放送後のＴＶ視聴率と組み合わせたＧＲＰ（Ｇｒｏｓｓ Ｒａｔｉｎｇ Ｐｏｉｎｔ、 キャンペーン期間の中で提供したＣＭの視聴率の総和）計算等において、ＴＶ・ＣＭを自動的に識別することが必用な各種処理に適用することができる。

ＣＭ自動識別システムの構成図 電波地域別受信サイト１―１の構成図 ＣＭスキャナーの構成図 ＣＭ切り出しデータのフォーマット ＣＭ切り出し時間幅ファイル１０１−１４１のフォーマット イベントカウンタメモリ１０１−１４２のフォーマット ＣＭ比較センターの構成図 ＣＭ切り出しファイル３２４１のフォーマット ＣＭマスター登録ファイル３２４２のフォーマット ＣＭ比較結果ファイル３２４３のフォーマット 新ＣＭマスター登録ファイル３２４４のフォーマット ＣＭ自動識別方法によるＣＭ比較についての概念図（ＣＭスキャナー側） イベント信号作成部の説明図。 イベント信号作成タイミングチャート ＣＭ切り出し処理についてのフローチャート ＣＭ自動識別方法によるＣＭ比較についての概念図（ＣＭ比較センター側） 画像変化信号作成部１０１―０８の構成図 画像変化信号の作成についての説明図（１） 画像変化信号の作成についての説明図（２） 画像変化信号検出のタイミングチャート

符号の説明

１―１〜１―ｎ 電波地域別受信サイト
２０１ ネットワーク
３０１ ＣＭ比較センターコンピュータ
１０−１〜ｎ 自動ＣＭ識別装置
１０−７１ 機器制御通信用コンピュータ
１０−１０ｍ〜１０ｎ デジタルＴＶ放送受信用ＳＴＢ（セットトップボックス）
１０−８ｎ ＵＳＢインターフェース（双方向通信）
１０−９１〜９ｎ ハードディスク読み出しインターフェース（双方向通信）
１０−６１ モデム（ＭＯＤＥＭ）
１０−０ｎ ＣＭスキャナー
１０−１ｎ タイムゼネレータ
１０−２ｎ ＨＤＤ（ハードディスク）レコーダ
１０−３ｎ ＶＴＲ
１０−４ｎ アンテナ入力端子
１０−５ｎ 映像・音声入力端子

Claims (13)

1. テレビ放送の映像信号に基づき、フレーム同期信号、水平同期信号を出力するための同期分離回路と、
   テレビ放送の映像信号に基づき、画像が所定の閾値より変化したことを検出し、画像変化信号を作成するための画像変化信号作成部と、
   テレビ放送の音声信号に基づき、音声エンベロープ信号を作成するための音声エンベロープ作成回路と、
   前記同期分離回路からの水平同期信号を音声データサンプリングパルスとして用い、前記音声エンベロープ作成回路からの音声エンベロープ信号を、水平同期信号により同期した音声デジタルデータに変換する音声Ａ／Ｄコンバータと、
   前記同期分離回路からのフレーム同期信号、前記画像変化信号作成部からの画像変化信号、前記音声エンベロープ作成回路からの音声エンベロープ信号及び前記音声Ａ／Ｄコンバータからの音声デジタルデータを入力し、テレビ放送からＣＭ放送を検出して、ＣＭ放送のＴＶ局の識別情報、時刻情報、ＣＭ長、フレーム内の音声を平均化した音声平均化データ（Ｓｉ）を含むＣＭ切り出しデータを作成するＣＰＵとを備え、
   前記ＣＰＵは、音声エンベロープ信号及び画像変化信号に基づき無音期間を検出し、該無音期間を検出したときイベント信号を発生し、
   前記ＣＰＵは、イベント信号のシーケンス番号を定めたイベント番号、イベント信号が発生したときの内部カウンタ値であるイベントアドレス、イベント信号発生時の時刻情報、を含むイベントカウンタメモリデータを作成し、
   前記ＣＰＵは、あるイベントカウンタメモリデータを他のイベントカウンタメモリデータと比較し、いずれか２つのイベントカウンタメモリデータのイベントアドレス又は時刻情報の差が、予め定められた各ＣＭ長に対するＣＭ切り出し時間幅の範囲内のいずれかに該当するかを判断し、
   前記ＣＰＵは、該イベントアドレス又は時刻情報の差が、いずれかのＣＭ長のＣＭ切り出し時間幅の範囲内であれば、その該当するＣＭ長を特定し、
   前記ＣＰＵは、イベントカウンタメモリデータ及びＣＭ長により特定されるフレームの音声デジタルデータを圧縮して音声平均化データ（Ｓｉ）を計算し、特定されたＣＭ長と予め設定されたＴＶ局の識別情報及び時刻情報とを用いてＣＭ切り出しデータを作成し、
   前記ＣＰＵは、作成したＣＭ切り出しデータを転送する
   テレビ・コマーシャル自動識別装置。
2. 前記ＣＰＵは、音声エンベロープ信号の無音期間を検出した間に、画像変化信号が入力され且つ無音期間の長さが予め定められたフレーム同期信号のカウント値以上であるとき、イベント信号を発生する、請求項１に記載のテレビ・コマーシャル自動識別装置。
3. 各ＣＭ長に対応して最小切り出しフレーム数と最大切り出しフレーム数の範囲であるＣＭ切り出し時間幅を記憶したＣＭ切り出し時間幅メモリを備え、
   前記ＣＰＵは、イベントカウンタメモリデータを、それぞれ別個のメモリに対応させて記憶し、イベント信号発生毎に、前記ＣＭ切り出し時間幅メモリを参照し、いずれか２つのメモリ内のイベントカウンタメモリデータのイベントアドレスの差が、ＣＭ切り出し時間幅のいずれかに該当するかあるかどうかを判断し、該当する場合、ＣＭ切り出し信号を発生して、該イベント信号発生より過去に発生したイベント信号のメモリ内容を消去する、請求項１又は２に記載のテレビ・コマーシャル自動識別装置。
4. 前記音声平均化データ（Ｓｉ）は、音声デジタルデータに基づき、次式１で計算したものである、請求項１乃至３のいずれかに記載のテレビ・コマーシャル自動識別装置。
   

   
5. 前記画像変化信号作成部は、
   Ｙ、Ｒ、Ｂ信号毎のＡ／Ｄコンバータ回路及び信号処理部を備え、
   各前記信号処理部は、複数のフレームメモリ、各フレームメモリに対応する複数のマップデータ作成部、複数の前記マップデータ作成部間のマップデータを比較する信号比較部
   を有し、
   入力されたＹ信号、Ｒ信号、Ｂ信号毎に、
   各前記フレームメモリは、前記Ａ／Ｄコンバータ回路で高速サンプリングデジタル化された画像データを、時間順に記憶し、
   各前記マップデータ作成部は、各前記フレームメモリから画像データを読み出し、１フレームを分割した各エリア内の平均ピクセルデータをエリア別に作成したマップデータを時間順に記憶し、
   前記信号比較部は、時間が隣接する二つの前記マップデータ作成部間の各エリア毎の平均ピクセルデータの差を求め、その差が所定の閾値を越えた場合に画像変化があると判定して画像変化信号を発生する、請求項１乃至４のいずれかに記載のテレビ・コマーシャル自動識別装置。
6. Ｙ，Ｒ，Ｂ信号毎に各エリア毎のマップ内比較閾値を予め定めたＹ，Ｒ，Ｂ信号毎のマップを備え、Ｙ，Ｒ，Ｂ信号毎且つエリア毎にマップ内比較閾値により画像変化を判定する、請求項５に記載のテレビ・コマーシャル自動識別装置。
7. さらにＹ，Ｒ，Ｂ信号毎に比較レベルを予め定めたマップを備え、Ｙ，Ｒ，Ｂ信号毎に、各エリア毎の差が前記マップ内比較閾値を越えたエリア数を求め、そのエリア数が前記比較レベルを超えた場合に画像変化があると判定する、請求項５又は６に記載のテレビ・コマーシャル自動識別装置。
8. Ｙ，Ｒ，Ｂ信号全てに画像変化がある場合、又は、Ｙ，Ｒ，Ｂ信号ひとつに画像変化がある場合、画像変化信号を出力する、請求項５乃至７のいずれかに記載のテレビ・コマーシャル自動識別装置。
9. 請求項１乃至８のいずれかに記載されたＣＭ自動識別装置を、受信電波に対応して複数有し、
   さらに、デジタルテレビ信号をアナログテレビ信号に変換して、いずれかひとつ又は複数の前記複数のＣＭ自動識別装置に出力するセットトップボックスと、
   前記複数のＣＭ自動識別装置を制御して、前記複数のＣＭ自動識別装置からのＣＭ切り出しデータを外部装置へ送信するための機器制御通信用コンピュータと
   を備えた
   電波地域別受信サイト。
10. ＴＶ局の識別情報、時刻情報、ＣＭ長、音声平均化データ（Ｓｉ）を含むＣＭ切り出しデータを記憶したＣＭ切り出しファイルと、
    過去に放送されたＣＭデータ又は放送される予定のＣＭデータについて、ＴＶ局の識別情報、時刻情報、ＣＭ長、ＣＭを特定する固有情報であるＣＭ特定データ、ＣＭ音声を圧縮したデータである音声パターン偏差（ＳＳｉ）、を含むＣＭマスター登録データを記憶したＣＭマスター登録ファイルと、
    ＴＶ局の識別情報、時刻情報、ＣＭ長、ＣＭ特定データ、ＣＭ音声を圧縮したデータである音声パターン偏差（ＳＳｉ）、を含む新ＣＭマスター登録データを記憶した新ＣＭマスター登録ファイルと、
    ＴＶ局の識別情報、時刻情報、ＣＭ長、一致率、ＣＭ特定データを含むＣＭ比較結果データを記憶したＣＭ比較結果ファイルと、
    ＣＭ切り出しデータについて前記ＣＭマスター登録ファイルを検索してＣＭを特定し、前記新ＣＭマスター登録ファイル又は前記ＣＭ比較結果ファイルにデータを記憶するための演算部と
    を備え、
    前記演算部は、
    ＣＭ切り出しデータを入力して、該ＣＭ切り出しデータを前記ＣＭ切り出しファイルに記憶し、
    前記ＣＭ切り出しファイルからＣＭ切り出しデータを順次読み取り、ＣＭ切り出しデータ中の音声平均化データ（Ｓｉ）に基づき、該音声平均化データの標準偏差によりデータサイズを圧縮した音声パターン偏差データ（ＳＳｉ）に変換し、ＣＭ切り出しデータから計算した音声パターン偏差データ（ＳＳｉ）と、前記ＣＭマスター登録ファイルから読み取ったＣＭマスター登録データ内の音声パターン偏差（ＳＳｉ）とを順次比較して一致率を計算し、
    該一致率に基づき一致と判断した場合、ＣＭ切り出しデータのＴＶ局の識別情報及び時刻情報、計算された一致率、ＣＭマスター登録データのＣＭ特定データを用いてＣＭ比較結果データを作成し、該データをＣＭ比較結果ファイルに書き込む
    請求項１乃至８のいずれかに記載されたテレビ・コマーシャル自動識別装置。
11. 音声パターン偏差（ＳＳｉ）は、前記音声平均データ（Ｓｉ）を次式２により音声標準偏差（Ｓｄ）に変換してから、次式３によりさらに圧縮したものである、請求項１０に記載されたテレビ・コマーシャル自動識別装置。
    

    
12. 前記演算部は、ＣＭの一致度を、次式４で計算し、ＣＭの一致度が規定値以上であれば、ＣＭが特定されたと判断する、請求項１０又は１１に記載されたテレビ・コマーシャル自動識別装置。
    
    

    
13. すべてのＣＭマスター登録データと比較して、一致率に基づきすべて不一致と判断した場合、一致率を所定値とし、ＣＭ特定データをブランク又はプリセット値として、ＣＭ比較結果データを作成し、前記ＣＭ比較結果ファイルに記憶し、
    ＣＭ切り出しデータのＴＶ局の識別情報及び時刻情報、ＣＭ特定データをブランク又はプリセット値として、音声パターン偏差データ（ＳＳｉ）をＣＭ切り出しデータにより計算された値に設定して新ＣＭマスター登録データを作成し、該データを新ＣＭマスター登録ファイルに書き込む、請求項１０乃至１２のいずれかに記載されたテレビ・コマーシャル自動識別装置。

Images