JP2001298709A - 動画像記録再生装置 - Google Patents

Abstract

(57)【要約】 【課題】 シーンチェンジにより区切られたシーン群か
ら、特定の信号を含むか含まないかに関わらず、ＣＭ部
分を検出してＣＭ部分の抽出、削除することが可能な動
画像記録再生装置を提供する。 【解決手段】 記録された動画信号を再生する再生部２
４と、動画信号からシーンチェンジ位置を検出するシー
ンチェンジ検出部２６と、動画信号から画像に含まれる
文字列を検出する文字検出部２７と、検出された文字列
によって、シーンチェンジで区切られたシーン群をＣＭ
部分として検出するＣＭ検出部２８とを備え、動画信号
に含まれる文字情報を検出してＣＭ情報を検出する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、録画されたＴＶ
（テレビ）画像を再生可能な動画像記録再生装置に関
し、特に、ＴＶ画像からＣＭ（コマーシャル）部分を検
出してＣＭ部分を抽出したり、ＣＭ部分を削除すること
が可能な動画像記録再生装置に関する。

【０００２】

【従来の技術】動画像記録再生装置を用いて録画したＴ
Ｖ画像を再生する時に、ＣＭ部分を飛ばしたり、ＣＭ部
分のみを抽出したりすることが頻繁に行われている。な
お、本明細書において、「動画像記録再生装置」とは、
テレビ放送信号を録画・再生するビデオデッキや、パー
ソナルコンピューターをいうものとする。

【０００３】ＴＶ画像からＣＭ部分を検出する方法とし
て、例えば特開平８−９６４４１号公報には、音声多重
放送を利用したものや、特定の信号が含まれているＣＭ
に対する検出方法が開示されている。

【０００４】また、特開平６−１５３１４６号公報
（「動画像のシーンチェンジ検出装置及び検出方法」）
には、シーンチェンジ検出を行う方法が開示されてい
る。この方法は、画面を複数の領域に分割し、それぞれ
の領域について画像間の相関値と動きベクトルとを求
め、また、画面内の色について画像間の相関を求めて、
色の相関と動きの相関との結果から、シーンチェンジを
検出する。

【０００５】さらに、特開平９−８１６８９号公報や特
開平９−８３７８９号公報には、静止画像から文字を検
出する方法も開示されている。

【０００６】

【発明が解決しようとする課題】しかしながら、上述し
たＣＭ検出方法では、音声多重放送や特定の信号が含ま
れているＴＶ画像のＣＭを検出することしかできず、そ
のような特定の信号を含まないＴＶ画像からはＣＭを検
出することができない。

【０００７】また、上述したシーンチェンジ検出方法に
おいては、番組からＣＭへの画面の切り替わり、または
ＣＭからＣＭへの画面の切り替わりは検出できるが、検
出されたシーンがＣＭであるかどうかを区別することは
できない。

【０００８】本発明はこのような従来技術の課題を解決
するためになされたものであり、シーンチェンジによっ
て区切られたシーン群から、特定の信号を含むか含まな
いかに関わらず、ＣＭ部分を検出して、ＣＭ部分の抽出
およびＣＭ部分の削除を行うことができる動画像記録再
生装置を提供することを目的とする。

【０００９】

【課題を解決するための手段】本発明の動画像記録再生
装置は、動画像を動画信号として記録する記録部と、記
録された動画信号を再生する再生部と、該動画信号から
シーンチェンジ位置を検出するシーンチェンジ検出部
と、該動画信号から画像に含まれる文字列を検出する文
字検出部と、検出された文字列によって、シーンチェン
ジで区切られたシーン群をコマーシャル部分として検出
しており、そのことにより上記目的が達成される。

【００１０】本発明の動画像記録再生装置は、ユーザの
操作を入力する入力部と、該入力部に入力されたユーザ
の操作に従って再生方法を制御する制御部とをさらに備
えていてもよい。

【００１１】前記コマーシャル検出部は、検出された文
字列と、企業データベースに記録された企業名および企
業関連キーワードの少なくとも一方とを比較して、一致
した場合にコマーシャル部分として検出することができ
る。

【００１２】前記コマーシャル検出部は、シーンチェン
ジ間の時間によって、シーン群をコマーシャル部分とし
て検出してもよい。

【００１３】前記再生部は、検出されたコマーシャル部
分を削除した動画像を再生可能である。

【００１４】前記再生部は、検出されたコマーシャル部
分のみを抽出した動画像を再生可能である。

【００１５】本発明の動画像記録再生装置は、検出され
た文字列を用いて、文字検索によるシーン検索が可能で
ある。

【００１６】前記文字検出部は、記録された動画像から
全ての文字列を検出してもよい。

【００１７】前記文字検出部は、シーンチェンジ毎に、
そのシーンチェンジから一定時間の間のみ、記録された
動画像から文字列を検出してもよい。

【００１８】以下、本発明の作用について説明する。

【００１９】本発明にあっては、記録された動画信号か
らシーンチェンジ検出部によってシーンチェンジ位置を
検出し、文字検出部によって画像に含まれる文字情報を
文字列として検出することが可能である。そして、コマ
ーシャル（ＣＭ）検出部により、シーンチェンジで区切
られたシーンに含まれる文字列によって、そのシーンが
ＣＭの一部であるかどうかを判断し、そのシーンを含む
１または２以上のシーン群をＣＭ部分として検出するこ
とが可能である。よって、本発明の動画像記録再生装置
では、音声多重放送や特定の信号が含まれているＴＶ画
像でなくても、ＣＭを検出することが可能となる。

【００２０】ＣＭ検出部では、例えば、検出された文字
列と企業データベースに記録された企業名とを比較し
て、一致した場合にＣＭ部分として検出することができ
る。または、検出された文字列と企業データベースに記
録された企業関連キーワードとを比較して、一致した場
合にＣＭ部分として検出することができる。または、検
出された文字列と、企業データベースに記録された企業
名および企業関連キーワードの両方とを比較して、一致
した場合にＣＭ部分として検出することができる。

【００２１】ところで、日本では、ＣＭの長さが決まっ
ているので、シーンチェンジ間の時間が所定時間である
場合に、そのシーン群をＣＭ部分として検出してもよ
い。さらに、日本では、一般にＣＭが２本以上続けて放
映されるので、このようなＣＭ候補が２つ以上続く場合
に、ＣＭ部分として検出してもよい。

【００２２】入力部から入力されるユーザの操作によっ
て、検出されたＣＭ部分を削除した動画像、または検出
されたＣＭ部分のみを抽出した動画像等を再生可能であ
る。さらに、文字検出部により動画像に含まれる文字情
報を文字列として検出することができるので、文字検索
によるシーン検索が可能である。

【００２３】文字検出部は、記録された動画像から全て
の文字列を検出することにより、多くの情報が得られ、
その情報を用いることが可能である。または、シーンチ
ェンジ毎に、そのシーンチェンジから一定時間の間の
み、記録された動画像から文字列を検出してもよく、Ｃ
Ｍ検出を効率良く行って装置の負担を減らすことが可能
である。

【００２４】

【発明の実施の形態】はじめに、本発明の概要を説明す
る。

【００２５】本発明では、ＴＶ画像からシーンチェンジ
位置を検出し、シーン毎に含まれる文字列（文字情報）
と企業データベースとから、その文字列を含むシーンを
ＣＭの一部であると認識する。そして、そのシーンを含
むシーン群をＣＭ部分であると判断して、ＣＭ情報を含
んだ動画信号を記録することができる。

【００２６】このＣＭ情報を含んだ動画信号からは、Ｃ
Ｍ部分をカットした映像（動画像）、またはＣＭ部分の
みを抽出した映像を再生することが可能である。

【００２７】以下、本発明の実施の形態について、図面
を参照しながら説明する。なお、以下では、ＴＶで放送
されている映像をＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕ
ｒｅＣｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）フォ
ーマットで記録部に記録し、記録された映像に対してＣ
Ｍ検出を行うことが可能なデジタル動画像記録再生装置
の例について説明する。しかしながら、本発明は、ＴＶ
放送をＭＰＥＧフォーマットで記録して再生する例に限
らず、他のフォーマットで記録する動画像記録再生装置
についても適用することができる。

【００２８】図１は、本発明の一実施形態である動画像
記録再生装置の構成を示すブロック図である。

【００２９】この動画像記録再生装置は、各部分の演算
を司る中央処理部２３を中心として、表示部１１と、各
種操作ボタンを備えている入力部１２と、電波として送
られてきた放送映像を読み込む映像信号読み込み部２１
と、映像読み込み部２１によって読み込まれた映像を記
録部２５に記録する録画部２２と、録画部２２によって
記録部２５に記録された映像のシーンチェンジを検出す
るシーンチェンジ検出部２６と、録画部２２によって記
録された映像シーンから文字列を検出する文字検出部２
７と、録画部２２によって記録された映像シーンからＣ
Ｍ部分を検出するＣＭ検出部２８と、記録部２５に記録
された映像を再生する機能を有する再生部２４とが接続
されている。

【００３０】この動画像記録再生装置の各構成要素につ
いて、簡単に説明する。入力部１２は、電源ＯＮボタン
と、ＴＶチャンネル切り替えボタンと、動画像の記録、
再生および停止ボタンと、ＣＭ検出、削除および抽出ボ
タンとを備えている。シーンチェンジ検出部２６は、映
像読み込み時、映像記録時またはＣＭ検出時のいずれか
の時点で、シーンチェンジを検出する。映像読み込み部
２１は、例えば、映像を受信するアンテナとテレビチュ
ーナのセット等である。記録部２５は、映像読み込み部
２１によって読み込まれた映像を記録する録画映像記録
手段２５１と、ＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕ
ｒｅ）番号とを記録するシーンチェンジＧＯＰ番号記録
手段２５２と、文字検出されたＧＯＰ番号を記録する文
字検出ＧＯＰ番号記録手段２５３と、企業名や企業関連
データ等の企業データがあらかじめ入っている企業デー
タ記録手段２５４と、シーンチェンジとＧＯＰ番号と文
字情報とを記録するシーンチェンジ＆文字検出ＧＯＰ番
号記録手段２５５と、シーンに含まれる文字列（文字情
報）が含まれている文字情報込み録画映像記録手段２５
６とを備えている。ここで、ＧＯＰとは、通常０．１秒
程度の映像をグループ化したものであり、数フレームの
符号化されたピクチャー（画面）からなる単位をいう。
記録部２５は、例えば、ハードディスクドライブ、ビデ
オデッキまたはＤＶＤドライブ等である。また、表示部
１１はＴＶのモニターやパーソナルコンピューターのデ
ィスプレイ等であり、録画部２２は映像読み込み部２１
により得られた映像を記録部２５に記録する装置であ
り、再生部２４は映像読み込み部２１によって得られた
映像や記録部２５に記録されている映像を表示部１１に
映し出す装置である。中央処理部２３は中央処理装置
（ＣＰＵ）等であり、中央処理部には、入力部に入力さ
れたユーザの操作に従って再生方法を制御する制御部も
含まれる。なお、動画像記録再生装置の各構成要素の詳
細な機能については後述する。

【００３１】図２に、映像を記録するためのＭＰＥＧフ
ォーマットを示す。この図２を参照して、ＭＰＥＧフォ
ーマットについて簡単に説明する。

【００３２】ＭＰＥＧフォーマットに符号化するとは、
放送されてきた映像をそのままの形で記録するのではな
く、何らかの圧縮操作を施して、図２に示すようなフォ
ーマットで記録することである。ＭＰＥＧ形式で圧縮さ
れた映像は、図２に示すように、複数のＧＯＰから構成
される。ここで、それぞれのＧＯＰには、最初から数え
て第何番目のＧＯＰであるかを区別することができるよ
うに、ＧＯＰ１、ＧＯＰ２、ＧＯＰ３、・・・等のよう
に、番号が付けてあるものとする。Ｉピクチャーはフレ
ーム内符号化画像を表し、Ｂピクチャーはすでに符号化
された時間的に前後の２フレームから予測する双方向予
測符号化画像を表し、Ｐピクチャーはすでに符号化され
た時間的に前のフレームから予測するフレーム間順方向
予測符号化画像を表す。なお、Ｉピクチャーはイントラ
ピクチャー、ＰピクチャーおよびＢピクチャーは非イン
トラピクチャーである。１枚のピクチャーは、輝度と２
つの色差信号に分離して符号化するコンポーネント符号
化されている。

【００３３】次に、シーンチェンジ検出部２６について
説明する。

【００３４】このシーンチェンジ検出部２６は、録画映
像記録手段２５１に記録されたＭＰＥＧ形式の画像（動
画信号）から、各ＧＯＰに含まれているＩピクチャーを
検索していく。そして、シーンチェンジが行われたＩピ
クチャーを抽出し、抽出したＩピクチャーを含むＧＯＰ
番号をシーンチェンジＧＯＰ番号記録手段２５２に記録
していく機能を有している。

【００３５】図３に、シーンチェンジＧＯＰ番号記録手
段２５２のフォーマットを示す。このシーンチェンジＧ
ＯＰ番号記録手段２５２は、図３に示すようなフォーマ
ットとなっており、シーン番号Ｓとそのシーンが開始す
るＧＯＰの番号Ｇ（Ｓ）とが記録されている。シーン番
号Ｓは１から始まる。

【００３６】なお、シーンチェンジの検出方法として
は、上述した特開平６−１５３１４６号公報に記載され
ている方法や、特願平１１−８４９０２号に記載されて
いる方法等、従来から知られているものを使用すること
ができる。特願平１１−８４９０２号には、入力された
ＭＰＥＧ形式の映像情報を、連続映像を表すＧＯＰ構造
を保持したまま、間欠映像情報に変換するデータ変換装
置におけるカット検出方法およびイベント検出方法が開
示されている。

【００３７】図４は、シーンチェンジ検出部２６の処理
を示すフローチャートである。この図４を参照して、シ
ーンチェンジ検出部２６の処理について説明する。

【００３８】まず、ステップＳ１０１において、シーン
チェンジ検出部２６を起動する。起動タイミングは、放
送番組を録画映像記録手段２５１に記録し終わった直後
でもよいし、録画が終了してから一定時間が経過した直
後でもよい。

【００３９】起動されたシーンチェンジ検出部２６は、
ステップＳ１０２において、シーンチェンジＧＯＰ番号
記録手段２５２にシーン番号１をセットし、開始ＧＯＰ
番号１をセットする。

【００４０】次に、ステップＳ１０３において、シーン
チェンジ検出部２６は、変数Ｓに２をセットし、変数ｇ
に１をセットし、変数Ｇ（Ｓ）にｇ＋１０をセットす
る。

【００４１】次に、ステップＳ１０４において、シーン
チェンジ検出部２６は、録画映像記録手段２５１から第
ｇ番目のＧＯＰのＩピクチャーを読み込む。

【００４２】次に、ステップＳ１０５において、シーン
チェンジ検出部２６は、録画映像記録手段２５１から第
Ｇ（Ｓ〕番目のＧＯＰのＩピクチャーを読み込む。

【００４３】次に、ステップＳ１０６において、シーン
チェンジ検出部２６は、ステップＳ１０４、ステップＳ
１０５で読み込んだ第ｇ番目のＧＯＰのＩピクチャー
と、第Ｇ（Ｓ）番目のＧＯＰのＩピクチャーとの差を変
数Ａにセットする。このときの差の検出方法としては、
例えば、従来の技術として上述した特開平６−１５３１
４６号公報に記載されている方法が挙げられる。この方
法では、Ｉピクチャーで表される画面を複数の領域に分
割し、それぞれの領域について画像間の相関値と動きベ
クトルとを求め、また、画面内の色について画像間の相
関を求めて、色の相関と動きの相関の結果から差を求め
る。

【００４４】次に、ステップＳ１０７において、ステッ
プＳ１０６でセットした変数Ａの値がある一定値以上で
あればステップＳ１０８に進み、Ａの値が一定値未満で
あればステップＳ１１２へ進む。

【００４５】ステップＳ１１２では、Ｇ（Ｓ）を１つイ
ンクリメントして、ステップＳ１０５へ進む。

【００４６】一方、ステップＳ１０８では、シーンチェ
ンジＧＯＰ番号記録手段２５２に、第Ｓ番目のシーンチ
ェンジＧＯＰ番号としてＧ（Ｓ）をセットする。

【００４７】次に、ステップＳ１０９において、変数Ｓ
を１つインクリメントする。

【００４８】次に、ステップＳ１１０において、変数ｇ
にＧ（Ｓ）をセットする。

【００４９】次に、ステップＳ１１１において、変数Ｇ
（Ｓ）にｇ＋１０をセットし、ステップＳ１０４に戻
る。

【００５０】上記フローをまとめると、シーンチェンジ
検出部２６は、まず第１番目のＧＯＰのＩピクチャーと
第１１番目のＧＯＰのＩピクチャーを読み込み、この２
つのＩピクチャーの差を変数Ａにセットする。ステップ
Ｓ１０７において、２つのＩピクチャーの差がある一定
値以上でない場合には、次に、第１番目のＧＯＰのＩピ
クチャーと第１２番目のＧＯＰのＩピクチャーとを比べ
て、これらの２つのピクチャーの差をＡにセットする。
ステップＳ１０７において、Ａがある一定値以上であれ
ば、第１２番目のＧＯＰのＩピクチャーをシーンチェン
ジフレームとしてシーンチェンジＧＯＰ番号記録手段２
５２に書き込むという処理を行っている。そして、例え
ば、第１１番目のＧＯＰのＩピクチャーがシーンチェン
ジフレームとして登録されたとすると、今度は第１１番
目のＧＯＰのＩピクチャーと第２１番目のＧＯＰのＩピ
クチャーとを比較して処理を繰り返すという処理を行
う。

【００５１】上記フローのポイントは、（１）シーンチ
ェンジフレーム間のＧＯＰの数は１０個以上である、
（２）１０個以上離れているＧＯＰのＩピクチャーを比
較し、それらの差がある一定値以上離れていればシーン
チェンジしたとみなす、ということである。

【００５２】すなわち、シーンチェンジフレームとして
検出されたＩピクチャーを含むＧＯＰを、常に数個（本
実施形態では１０個）のＧＯＰ以上進んだＧＯＰのＩピ
クチャーと比較して差を求め、この差が一定値以上であ
れば、シーンチェンジフレームとみなしている。また、
Ａがある一定値以上であれば、シーンチェンジフレーム
と見なすという処理におけるＡの値については、シーン
チェンジ検出部２６がどのような精度でシーンチェンジ
を検出したいかに依存している。なお、上記シーンチェ
ンジフレーム間のＧＯＰの数やＩピクチャーの差Ａの値
は、ユーザーが任意に設定可能である。

【００５３】以上の処理結果として、シーンチェンジＧ
ＯＰ番号記録手段２５２中に図３に示したようなデータ
ベースが作成される。

【００５４】次に、文字検出部２７について説明する。
文字検出部２７は、録画映像記録手段２５１に記録され
たＭＰＥＧ形式の画像から、ＧＯＰに含まれている文字
列を検出して、その文字列が検出されたＧＯＰ番号を文
字検出ＧＯＰ番号記録手段２５３に記録していく機能を
有している。

【００５５】図５に、文字検出ＧＯＰ番号記録手段２５
３のフォーマットを示す。この文字検出ＧＯＰ番号記録
手段２５３は、図５に示すようなフォーマットとなって
おり、文字検出ＧＯＰ番号Ｇと検出された文字列Ｃ
（Ｇ）とが記録されている。検出する文字は１画面中に
何文字でもよい。

【００５６】なお、文字検出方法としては、上述した特
開平９−８１６８９号公報に記載されている方法や、特
開平９−８３７８９号公報に記載されている方法等を使
用することができる。

【００５７】図６は、録画映像記録手段２５１に記録さ
れた映像シーンの文字列を順次検索する処理を示すフロ
ーチャートである。この図６を参照して文字検出部２７
の処理について説明する。

【００５８】まず、ステップＳ２０１において、文字検
出部２７を起動する。この起動タイミングは、放送番組
を録画映像記録手段２５１に記録し終わった直後でもよ
いし、録画が終了してからある一定の時間が経過した直
後でもよい。

【００５９】起動された文字検出部２７は、ステップＳ
２０２において、変数Ｇに１をセットし、変数ｎに１を
セットし、変数Ｃ（ｎ）にｎｕｌｌをセットする。ここ
で、変数Ｃ（ｎ）は複数の文字を含むことができる文字
行列であり、ｎｕｌｌは文字が何もないことを意味す
る。

【００６０】次に、ステップＳ２０３において、文字検
出部２７は、録画映像記録手段２５１から第Ｇ番目のＧ
ＯＰを読み込む。

【００６１】次に、ステップＳ２０４において、文字検
出部２７は、ステップＳ２０３で読み込まれたＧＯＰか
ら文字列を検索する。

【００６２】次に、ステップＳ２０５では、ステップＳ
２０４で検索を行った結果、ステップＳ２０３で読み込
まれたＧＯＰに文字列Ｃ（Ｇ）が含まれている場合には
ステップＳ２０６に進み、ＧＯＰに文字が含まれていな
い場合にはステップＳ２０９に進む。

【００６３】ステップＳ２０６では、検出した文字列Ｃ
（Ｇ）とＣ（ｎ）とを比較して、両者が同じであればス
テップＳ２０９に進み、違う場合にはステップＳ２０７
に進む。

【００６４】次に、ステップＳ２０７において、変数ｎ
に変数Ｇの値をセットする。

【００６５】次に、ステップＳ２０８において、文字検
出ＧＯＰ番号記録手段２５３に、文字が検出されたＧＯ
Ｐ番号Ｇと文字Ｃ（Ｇ）をセットする。

【００６６】次に、ステップＳ２０９において、変数Ｇ
を１０インクリメントし、ステップＳ２０３に戻る。

【００６７】上記フローをまとめると、文字検出部２７
は、まず第１番目のＧＯＰを読み込んで文字を検索す
る。そして、ＧＯＰに文字が検出された場合には、検出
された文字列Ｃ（Ｇ）を文字検出ＧＯＰ番号記録手段２
５３に書き込む。一方、文字が検出されなかった場合に
は、第１１番目のＧＯＰを検索する。そして、例えば、
第１番目のＧＯＰにおいて文字が検出されて文字列を登
録しており、第１１番目のＧＯＰにおいて文字が検出さ
れた場合、第１１番目のＧＯＰで検出された文字列と、
登録された第１番目のＧＯＰの文字列とを比較する。そ
して、両者が同じ文字列であれば登録せず、違う文字列
であれば、文字検出ＧＯＰ番号記録手段２５３に書き込
むという処理を行う。

【００６８】上記フローのポイントは、（１）初期ＧＯ
Ｐから数フレーム毎（本実施形態では１０フレーム）に
順次文字列を検索していく、（２）検出された文字列
が、前のフレームにおいて検出された文字列と違う場合
のみ、文字検出ＧＯＰ番号記録手段２５３にＧＯＰ番号
と文字列とを記録する、ということである。

【００６９】すなわち、初期フレームから１０フレーム
毎に全ての文字列を検索していき、録画映像記録手段２
５１に記録されている映像の全ての文字列を検出して、
文字データベースを作成する。なお、上記検索フレーム
の間隔は、ユーザーが任意に設定可能である。

【００７０】図６のフローチャートでは、録画映像記録
手段２５１に記録された全ての映像シーンに対して文字
列を順次検索しているが、シーンチェンジ毎にシーンチ
ェンジからある一定時間の間のみ、文字列を検索するよ
うにしてもよい。

【００７１】図７は、シーンチェンジが検出された付近
のＧＯＰ中に含まれる文字列を検索する処理を示すフロ
ーチャートである。この図７を参照して、文字検出部２
７の処理について説明する。

【００７２】まず、ステップＳ３０１において、文字検
出部２７を起動する。起動タイミングは、放送番組を録
画映像記録手段２５１に記録し終わった直後でもよい
し、録画が終了してからある一定の時間が経過した直後
でもよい。

【００７３】起動された文字検出部２７は、ステップＳ
３０２において、変数Ｓに１をセットする。

【００７４】次に、ステップＳ３０３において、文字検
出部２７は、変数Ｇに１をセットし、変数ｎに１をセッ
トし、変数Ｃ（ｎ）にｎｕｌｌをセットする。ここで、
変数Ｃ（ｎ）は複数の文字を含むことができる文字行列
であり、ｎｕｌｌは文字が何もないことを意味する。

【００７５】次に、ステップＳ３０４において、文字検
出部２７は、シーンチェンジＧＯＰ番号記録手段２５２
から、シーン記録番号Ｓの開始ＧＯＰ番号Ｇ（Ｓ）と、
シーン記録番号Ｓ＋１の開始ＧＯＰ番号Ｇ（Ｓ＋１）を
読み込む。

【００７６】次に、ステップＳ３０５において、文字検
出部２７は、録画映像記録手段２５１から第Ｇ（Ｓ）番
目のＧＯＰを読み込む。

【００７７】次に、ステップＳ３０６において、文字検
出部２７は、ステップＳ３０５で読み込まれたＧＯＰか
ら文字を検索する。

【００７８】次に、ステップＳ３０７では、ステップＳ
３０６で検索を行った結果、ステップＳ３０５で読み込
まれたＧＯＰに文字列Ｃ（Ｇ）が含まれている場合には
ステップＳ３０８に進み、ＧＯＰに文字が含まれていな
い場合にはステップＳ３１１に進む。

【００７９】ステップＳ３０８では、検出した文字列Ｃ
（Ｇ）とＣ（ｎ）とを比較して、両者が同じであればス
テップＳ３１１に進み、違う場合にはステップＳ３０９
に進む。

【００８０】次に、ステップＳ３０９においては、変数
ｎに変数Ｇの値をセットする。

【００８１】次に、ステップＳ３１０においては、文字
検出ＧＯＰ番号記録手段２５３に、文字が検出されたＧ
ＯＰ番号Ｇ（Ｓ）と文字列Ｃ（Ｇ）とをセットする。

【００８２】次に、ステップＳ３１１において、変数Ｇ
を１０インクリメントし、変数Ｇ（Ｓ）を１０インクリ
メントする。

【００８３】次に、ステップＳ３１２において、１０イ
ンクリメントされたＧＯＰ番号Ｇ（Ｓ）と、１シーン先
の開始ＧＯＰ番号Ｇ（Ｓ＋１）のＧＯＰ番号を比較し
て、Ｇ（Ｓ）の方が大きい場合にはステップＳ３１４に
進み、Ｇ（Ｓ）の方が小さい場合にはステップＳ３１３
に進む。

【００８４】次に、ステップＳ３１３において、ステッ
プＳ３１１でインクリメントされた変数Ｇが６００より
大きい場合にはステップＳ３１４に進み、変数Ｇが６０
０よりも小さい場合にはステップＳ３０４に戻る。

【００８５】次に、ステップＳ３１４において、Ｓを１
つインクリメントして、ステップＳ３０３に戻る。

【００８６】上記フローをまとめると、文字検出部２７
は、まずシーン１の第１番目のＧＯＰを読み込んで文字
を検索する。そして、ＧＯＰに文字が検出された場合に
は、検索された文字列Ｃ（Ｇ）を文字検出ＧＯＰ番号記
録手段２５３に書き込む。一方、文字が検出されなかっ
た場合には、第１１番目のＧＯＰを検索する。このと
き、第１１番目のＧＯＰが次のシーンに含まれるＧＯＰ
であれば、次のシーンの開始ＧＯＰの文字を検索する。
そして、例えば、第１番目のＧＯＰにおいて文字が検出
されて文字列を登録しており、第１１番目のＧＯＰにお
いて文字が検出された場合、検出された文字列と、登録
された第１番目のＧＯＰの文字列とを比較する。そし
て、両者が同じ文字列であれば登録せず、違う文字列で
あれば、文字検出ＧＯＰ番号記録手段２５３に書き込む
という処理を行う。

【００８７】もし、１シーンの最初の６０個のＧＯＰ中
に文字がない場合は、次のシーンに検索が移る。

【００８８】上記フローのポイントは、（１）シーンチ
ェンジごとに、シーンチェンジからある一定区間のＧＯ
Ｐを検索する、（２）検出された文字列が、前のフレー
ムにおいて検出された文字列と違う場合のみ、文字検出
ＧＯＰ番号記録手段２５３にＧＯＰ番号と文字列とを記
録する、ということである。

【００８９】すなわち、シーンチェンジが行われる毎に
文字列を検索していき、シーンチェンジ付近での文字デ
ータベースを作成する。なお、上記シーンチェンジ付近
の検索フレームの数は、ユーザーが任意に設定可能であ
る。

【００９０】以上の処理結果として、文字検出ＧＯＰ番
号記録手段２５３中に、図５に示したようなデータベー
スが作成される。

【００９１】次に、ＣＭ検出部２８について説明する。
このＣＭ検出部２８は、録画映像記録手段２５１に記録
されている映像シーンから、上記シーンチェンジ検出部
２６で作成されたシーンチェンジＧＯＰ番号記録手段２
５２中のデータと、文字検出部２７で検出された文字検
出ＧＯＰ番号記録手段２５３中のデータと、企業データ
がデータベース化されている企業データ記録手段２５４
を用いてＣＭ情報を検出する機能を有している。

【００９２】ここで、日本におけるＣＭには以下のよう
な特徴がある。

【００９３】第１に、１５秒、３０秒、４５秒、６０秒
というように、長さがきまっているということである。

【００９４】第２に、一般に、２本以上続けてＣＭが放
映されるということである。

【００９５】図８に、シーンチェンジ＆文字検出ＧＯＰ
番号記録手段２５５のフォーマットを示す。シーンチェ
ンジ＆文字検出ＧＯＰ番号記録手段２５５は、図８に示
すようなフォーマットとなっており、シーン番号Ｓと、
そのシーンが開始するＧＯＰおよび文字が検出されたＧ
ＯＰの番号Ｇと、検出された文字列Ｃとが記録されてい
る。このシーンチェンジ＆文字検出ＧＯＰ番号記録手段
２５５は、シーンチェンジＧＯＰ番号記録手段２５２と
文字検出ＧＯＰ番号記録手段２５３とから作成され、作
成時にはＧＯＰ番号の小さい順に整列される。

【００９６】文字情報込み録画映像記録手段２５６は、
録画映像記録手段２５１から複製され、シーン番号とＧ
ＯＰ番号と文字情報とが文字情報込み録画映像記録手段
２５６に追記される。文字情報込み録画映像記録手段２
５６の作成タイミングは、文字検出ＧＯＰ番号記録手段
２５３が作成されるときでもよいし、文字検出ＧＯＰ番
号記録手段２５３の作成時から一定時間が経過した直後
でもよい。

【００９７】図９に、企業データ記録手段２５４のフォ
ーマットを示す。企業データ記録手段２５４は、図９に
示すようなフォーマットとなっており、企業名ＫＮと、
その企業に関連の深いキーワードＫＷとが記録されてい
る。この企業データ記録手段２５４は、予め多数のデー
タが記録されており、新たに追記や削除が可能なデータ
ベースである。

【００９８】図１０は、ＣＭを検出する処理を示すフロ
ーチャートである。この図１０を参照してＣＭ検出部２
８の処理を説明する。

【００９９】まず、ステップＳ４０１において、ＣＭ検
出部２８を起動する。

【０１００】起動されたＣＭ検出部２８は、ステップＳ
４０２において、変数ＣＬに１をセットする。

【０１０１】次に、ステップＳ４０３において、ＣＭ検
出部２８は、シーンチェンジ＆文字検出ＧＯＰ番号記録
手段２５５から第ＣＬ行の文字列Ｃ（ＣＬ）を読み込
む。

【０１０２】次に、ステップＳ４０４において、読み込
んだ文字列Ｃ（ＣＬ）と企業データ記録手段２５４中の
企業名ＫＮとを比較する。

【０１０３】次に、ステップＳ４０５では、文字列Ｃ
（ＣＬ）が企業名と一致する場合にはステップＳ４０６
に進み、一致しない場合にはステップＳ４０８に進む。

【０１０４】ステップＳ４０６では、文字列Ｃを含むシ
ーンＳがＣＭ特徴を有するシーン群に含まれる場合には
ステップＳ４０７に進み、含まれない場合にはステップ
Ｓ４０８に進む。

【０１０５】ＣＭ特徴を有するシーン群の検出は、例え
ば以下のようにして行う。

【０１０６】日本におけるＣＭの特徴は、ＣＭ長が１５
秒、３０秒、４５秒および６０秒のいずれかであり、一
般に、２つ以上続けて放映されるということである。そ
こで、シーンＳを含む前後数シーンの合計時間が１５
秒、３０秒、４５秒および６０秒のいずれかであればＣ
Ｍ候補となり、ＣＭ候補が数個続くのであればＣＭ特徴
を持つと言うことができる。具体的には、シーンＳの長
さをＬ（Ｓ）として、 Ｔｉｍｅ（Ｌ（ｉ），Ｌ（ｊ））＝１本のＣＭの長さ
（１５秒または３０秒または４５秒または６０秒）であ
り、 Ｔｉｍｅ（Ｌ（ｉ−１），Ｌ（ｊ））＝１本のＣＭの長
さ（１５秒または３０秒または４５秒または６０秒）で
あり、 ・・・ Ｔｉｍｅ（Ｌ（ｉ−ｍ），Ｌ（ｊ））＝１本のＣＭの長
さ（１５秒または３０秒または４５秒または６０秒）で
あり、 Ｔｉｍｅ（Ｌ（ｉ），Ｌ（ｊ＋１）＝１本のＣＭの長さ
（１５秒または３０秒または４５秒または６０秒）であ
り、 ・・・ Ｔｉｍｅ（Ｌ（ｉ），Ｌ（ｊ＋ｎ）＝１本のＣＭの長さ
（１５秒または３０秒または４５秒または６０秒）であ
り、 Ｔｉｍｅ（Ｌ（ｉ−１），Ｌ（ｊ＋１））＝１本のＣＭ
の長さ（１５秒または３０秒または４５秒または６０
秒）であり、 ・・・ Ｔｉｍｅ（Ｌ（ｉ−ｍ），Ｌ（ｊ＋ｎ））＝１本のＣＭ
の長さ（１５秒または３０秒または４５秒または６０
秒） を満たすシーン群が存在するかどうかをチェックする。
ここで、Ｔｉｍｅ（Ａ，Ｂ）はシーンＡからシーンＢま
での長さを計算する関数であり、ｉ≦Ｓ≦ｊであり、ｍ
およびｎは２以上の整数である。

【０１０７】これは、Ｓを含むシーン群の長さの合計
が、１５秒、３０秒、４５秒または６０秒であることを
示している。この関係を満たすのであれば、シーンＳを
含むシーン群はＣＭ特徴の１つを有するのでＣＭ候補と
なり、ＣＭ候補が２つ以上続く場合には、ＣＭ特徴を有
するシーン群であると言える。なお、ＣＭ特徴を検出す
るタイミングは、放送番組を録画し終わった直後でもよ
いし、録画が終了してからある一定時間が経過した直後
でもよい。

【０１０８】次に、ステップＳ４０７において、ＣＭ検
出部２８は、検出されたＣＭ情報を文字情報込み録画映
像記録手段２５６に追記する。

【０１０９】次に、ステップＳ４０８において、変数Ｃ
Ｌを１つインクリメントしてステップＳ４０３に戻る。

【０１１０】上記フローのポイントは、（１）シーンチ
ェンジ＆文字検出ＧＯＰ番号記録手段２５５に作成され
たデータベースにおいて、企業データベースと一致する
文字列がある場合には、その文字列を含むシーンはＣＭ
シーン群の１シーン候補である、（２）連続したシーン
群の長さの合計が１５秒、３０秒、４５秒および６０秒
のいずれかであれば、そのシーン群はＣＭ候補である、
（３）上記（２）で検出されるＣＭ候補が２つ以上続く
場合には、それらのＣＭ候補はＣＭ特徴を持つと言え
る、（４）上記（１）における１シーンが上記（３）に
おけるＣＭ特徴を有するシーン群に含まれるのであれ
ば、そのシーンはＣＭ情報を有する、（５）検出された
ＣＭ情報を文字情報込み録画映像記録手段２５６に追記
する、ということである。よって、画像中の文字列が企
業データベース中の企業名と一致し、且つ、そのシーン
がＣＭ特徴を有するシーン群に含まれるならば、ＣＭ情
報として、シーン番号とＧＯＰ番号と文字情報とを文字
情報込み録画映像記録手段２５６に追記する。

【０１１１】文字情報込み録画映像記録手段２５６は、
録画映像記録手段２５１と同様の映像記録部とＣＭ情報
記録部とを含み、ＣＭ情報記録部は図１１に示すような
フォーマットを有する。ここでは、図１１に示すよう
に、シーン番号ＳとＧＯＰ番号ＧとＣＭ企業名と検出文
字列とが記録されている。

【０１１２】なお、上記説明では、ＣＭ候補を検出する
ために文字列と企業名とを比較しているが、企業名以外
にも製品名などの企業と関連するキーワードを用いて、
ＣＭ候補を検出してもよい。また、新たに検出された企
業に関連するキーワードや、インターネット等の他の手
段から得られたキーワードを企業データベースに追記し
ていくことにより、新しい企業データを作成することが
できる。

【０１１３】次に、再生部２４について説明する。上述
したような方法により、ＣＭ情報が含まれている文字情
報込み録画映像記録手段２５６が作成されるので、再生
部２４は、文字情報込み録画映像記録手段２４からＣＭ
部分のみをスキップして映像を再生することが可能であ
る。また、再生部２４は文字情報込み録画映像記録手段
２４からＣＭ部分のみを抽出して映像を再生することが
可能である。

【０１１４】上述したような方法により、文字情報込み
録画映像記録手段２５６にＣＭ情報が含まれている文字
情報込み録画映像記録が作成される。そして、再生部２
４は、入力部１２から入力されたユーザーの指示によ
り、中央処理部２３に含まれる制御部の制御に従って、
文字情報込み録画映像記録手段２５６からＣＭ部分のみ
を抽出して映像を再生することが可能である。

【０１１５】さらに、入力部１２から文字を入力するこ
とにより、その文字に関連したシーンを検索することが
可能である。例えば、「パソコン」と入力することで、
パーソナルコンピューターに関連するシーンやＣＭを検
出、再生することが可能である。

【０１１６】

【発明の効果】以上詳述したように、本発明によれば、
音声多重放送または特定の信号を含む映像であるかどう
かに拘わらず、録画された映像からＣＭ部分を検出し
て、ＣＭ部分を削除したり、ＣＭ部分のみを抽出して映
像を再生することが可能な動画像記録再生装置を提供す
ることができる。

【０１１７】さらに、本発明によれば、録画された映像
に含まれる文字情報を抽出することができるため、この
文字情報をシーンの見出しタイトル等に利用することが
可能である。よって、見出し検索を文字で行うことが可
能な動画像記録再生装置を提供することができる。

【図面の簡単な説明】

【図１】本発明の一実施形態である動画像記録再生装置
の概略構成を示すブロック図である。

【図２】映像を記録するためのＭＰＥＧフォーマットを
示す図である。

【図３】本発明の一実施形態である動画像記録再生装置
において、シーンチェンジＧＯＰ番号記録手段のフォー
マットを示す図である。

【図４】本発明の一実施形態である動画像記録再生装置
において、シーンチェンジ検出部の処理フローを示す図
である。

【図５】本発明の一実施形態である動画像記録再生装置
において、文字検出ＧＯＰ番号記録手段のフォーマット
を示す図である。

【図６】本発明の一実施形態である動画像記録再生装置
において、文字検出部の処理フローを示す図である。

【図７】本発明の一実施形態である動画像記録再生装置
において、文字検出部の他の処理フローを示す図であ
る。

【図８】本発明の一実施形態である動画像記録再生装置
において、シーンチェンジ＆文字検出ＧＯＰ番号記録手
段のフォーマットを示す図である。

【図９】本発明の一実施形態である動画像記録再生装置
において、企業データ記録手段のフォーマットを示す図
である。

【図１０】本発明の一実施形態である動画像記録再生装
置において、ＣＭ検出部の処理フローを示す図である。

【図１１】本発明の一実施形態である動画像記録再生装
置において、文字情報込み録画映像記録手段に含まれる
ＣＭ情報記録手段のフォーマットを示す図である。

【符号の説明】

１１ 表示部 １２ 入力部 ２１ 映像読み込み部 ２２ 録画部 ２３ 中央処理部 ２４ 再生部 ２５ 記録部 ２６ シーンチェンジ検出部 ２７ 文字検出部 ２８ ＣＭ検出部 ２５１ 録画映像記録手段 ２５２ シーンチェンジＧＯＰ番号記録手段 ２５３ 文字検出ＧＯＰ番号記録手段 ２５４ 企業データ記録手段 ２５５ シーンチェンジ＆文字検出ＧＯＰ番号記録手段 ２５６ 文字情報込み録画映像記録手段

Claims (9)

【特許請求の範囲】
1. 【請求項１】 動画像を動画信号として記録する記録部
   と、 記録された動画信号を再生する再生部と、 該動画信号からシーンチェンジ位置を検出するシーンチ
   ェンジ検出部と、 該動画信号から画像に含まれる文字列を検出する文字検
   出部と、 検出された文字列によって、シーンチェンジで区切られ
   たシーン群をコマーシャル部分として検出するコマーシ
   ャル検出部とを備えた動画像記録再生装置。
2. 【請求項２】 ユーザの操作を入力する入力部と、 該入力部に入力されたユーザの操作に従って再生方法を
   制御する制御部とをさらに備えている請求項１に記載の
   動画像記録再生装置。
3. 【請求項３】 前記コマーシャル検出部は、検出された
   文字列と、企業データベースに記録された企業名および
   企業関連キーワードの少なくとも一方とを比較して、一
   致した場合にコマーシャル部分として検出する請求項１
   または請求項２に記載の動画像記録再生装置。
4. 【請求項４】 前記コマーシャル検出部は、シーンチェ
   ンジ間の時間によって、シーン群をコマーシャル部分と
   して検出する請求項１乃至請求項３のいずれかに記載の
   動画像記録再生装置。
5. 【請求項５】 前記再生部は、検出されたコマーシャル
   部分を削除した動画像を再生可能である請求項１乃至請
   求項４のいずれかに記載の動画像記録再生装置。
6. 【請求項６】 前記再生部は、検出されたコマーシャル
   部分のみを抽出した動画像を再生可能である請求項１乃
   至請求項４のいずれかに記載の動画像記録再生装置。
7. 【請求項７】 検出された文字列を用いて、文字検索に
   よるシーン検索が可能である請求項１乃至請求項６のい
   ずれかに記載の動画像記録再生装置。
8. 【請求項８】 前記文字検出部は、記録された動画信号
   から全ての文字列を検出する請求項１乃至請求項７のい
   ずれかに記載の動画像記録再生装置。
9. 【請求項９】 前記文字検出部は、シーンチェンジ毎
   に、そのシーンチェンジから一定時間の間のみ、記録さ
   れた動画信号から文字列を検出する請求項１乃至請求項
   ７のいずれかに記載の動画像記録再生装置。