JPH10285503A

JPH10285503A - 録画方法および録画装置

Info

Publication number: JPH10285503A
Application number: JP9082597A
Authority: JP
Inventors: Yuji Ando; 裕司安藤
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1997-04-01
Filing date: 1997-04-01
Publication date: 1998-10-23

Abstract

(57)【要約】【課題】番組の放送時刻がずれても、その録画を確実
に行う。【解決手段】コントローラ２６は、テレビジョン放送
の音声に基づいて、その放送がコマーシャルかどうかを
判定している。そして、コマーシャルが終了すると、テ
レビジョン放送の画像および音声の記録を行うように、
録画装置２７を制御する。その後、コントローラ２６
は、次のコマーシャルが開始されるまでに、判定器２５
から、入力画像が所定の検索画像にマッチングする旨の
判定結果を受信することができなかった場合、処理を中
止するように、録画装置２７を制御する。また、コント
ローラ２６は、次のコマーシャルが開始されるまでに、
判定器２５から、入力画像が検索画像にマッチングする
旨の判定結果を受信することができた場合、録画装置２
７による画像および音声の記録が開始されてから、あら
かじめ設定してある録画時間が経過するのを待って、そ
の記録を終了させる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、録画方法および録
画装置に関し、特に、例えば、動画像から、所望の画面
を検索し、その画面からの録画などを行うことができる
ようにする録画方法および録画装置に関する。

【０００２】

【従来の技術】例えば、テレビジョン放送による番組な
どの、ＶＴＲ（ビデオテープレコーダ）による予約録画
は、その番組のチャンネルや、その開始時刻、終了時刻
などを指定することによってすることができる。また、
最近では、これらの情報を、いわゆるＧコードによって
入力することができるようになっている。

【０００３】

【発明が解決しようとする課題】ところで、予約録画を
しようとする番組の前の番組が、例えば、野球やサッカ
ーなどのスポーツ番組である場合においては、試合時間
が長びき、番組が延長されることがある。この場合、予
約録画をしようとする番組の放送時刻がずれ、その番組
全体の録画をすることができなくなる。

【０００４】そこで、番組は、通常、オープニングのテ
ーマ曲などが放送されてから開始され、また、連続ドラ
マなどの番組のオープニングでは、常に同一の画面が放
送されることから、その画面を検出して、録画を開始す
ることができれば、放送時刻のずれに影響されることな
く、番組全体の録画が可能となり、便利である。

【０００５】本発明は、このような状況に鑑みてなされ
たものであり、動画像から、所望の画面を検索し、その
画面からの録画などを行うことができるようにするもの
である。

【０００６】

【課題を解決するための手段】請求項１に記載の録画方
法は、入力画像の録画を、第１のタイミングで開始し、
入力画像が所定の画像とマッチングするかどうかを判定
し、入力画像の録画を開始してから、第２のタイミング
までに、所定の画像とマッチングする入力画像が得られ
た場合、第１のタイミングから所定の録画時間が経過し
た後に録画を終了し、所定の画像とマッチングする入力
画像が得られなかった場合、入力画像の録画を中止し、
その録画を、第１のタイミングで再開することを特徴と
する。

【０００７】請求項７に記載の録画装置は、入力画像が
所定の画像とマッチングするかどうかを判定する判定手
段と、判定手段の判定結果に対応して、入力画像の録画
を行う録画手段とを備えることを特徴とする。

【０００８】請求項１に記載の録画方法においては、入
力画像の録画を、第１のタイミングで開始し、入力画像
が所定の画像とマッチングするかどうかを判定し、入力
画像の録画を開始してから、第２のタイミングまでに、
所定の画像とマッチングする入力画像が得られた場合、
第１のタイミングから所定の録画時間が経過した後に録
画を終了し、所定の画像とマッチングする入力画像が得
られなかった場合、入力画像の録画を中止し、その録画
を、第１のタイミングで再開するようになされている。

【０００９】請求項７に記載の録画装置においては、判
定手段は、入力画像が所定の画像とマッチングするかど
うかを判定し、録画手段は、判定手段の判定結果に対応
して、入力画像の録画を行うようになされている。

【００１０】

【発明の実施の形態】以下に、本発明の実施の形態を説
明するが、その前に、特許請求の範囲に記載の発明の各
手段と以下の実施の形態との対応関係を明らかにするた
めに、各手段の後の括弧内に、対応する実施の形態（但
し、一例）を付加して、本発明の特徴を記述すると、次
のようになる。

【００１１】即ち、請求項７に記載の録画装置は、画像
の録画を行う録画装置であって、所定の画像を記憶する
記憶手段（例えば、図８に示すフレームメモリ部２２な
ど）と、入力画像が所定の画像とマッチングするかどう
かを判定する判定手段（例えば、図８に示す判定器２５
など）と、判定手段の判定結果に対応して、入力画像の
録画を行う録画手段（例えば、図８に示す録画装置２７
など）とを備えることを特徴とする。

【００１２】請求項８に記載の録画装置は、所定の画像
を参照画像として、入力画像の動きベクトルを検出する
とともに、その動きベクトルにしたがって入力画像の動
き補償を行ったときの残差を算出する動きベクトル検出
手段（例えば、図８に示す動き検出器２３や２４など）
をさらに備え、判定手段が、動きベクトル検出手段が出
力する動きベクトルおよび残差に基づいて、入力画像が
所定の画像とマッチングするかどうかを判定することを
特徴とする。

【００１３】請求項１２に記載の録画装置は、録画手段
が入力画像の録画を所定の時間だけ行う場合において、
その所定の時間を入力するための入力手段（例えば、図
６に示す録画時間設定ボタン２０など）をさらに備える
ことを特徴とする。

【００１４】なお、勿論この記載は、各手段を上記した
ものに限定することを意味するものではない。

【００１５】図１は、本発明を適用したパーソナルコン
ピュータの一実施の形態の構成例を示している。

【００１６】このパーソナルコンピュータ（以下、適
宜、パソコンという）は、ＡＶ（Audio Visual）システ
ムとしての、例えばチューナ５を内蔵し、また、ビデオ
カメラ１４やＶＴＲ１６との間で、画像や音声のやりと
りが可能な、いわゆるＡＶパソコンで、例えば、番組の
予約録画などや、その編集などを容易に行うことができ
るようになされている。

【００１７】即ち、マイクロプロセッサ１は、ハードデ
ィスク１２に記録されたオペレーティングシステムの制
御の下、同じくハードディスク１２に記録されたアプリ
ケーションプログラムを実行することで、例えば、番組
の予約録画処理や、また、外部から入力された画像、音
声の編集処理などの所定の処理を行う。メインメモリ２
は、マイクロプロセッサ１が実行するプログラムや、マ
イクロプロセッサ１の動作上必要なデータを記憶する。
フレームバッファ３は、例えば、ＤＲＡＭ（Dynamic Ra
ndom Access Memory）などで構成され、マイクロプロセ
ッサ１が生成した画像などを記憶する。バスブリッジ４
は、内部バスと、例えばＰＣＩ（Peripheral Component
Interconnect）ローカルバスなどの拡張バスとの間で
のデータのやりとりを制御する。

【００１８】以上のマイクロプロセッサ１、メインメモ
リ２、フレームバッファ３、およびバスブリッジ４は、
相互に、内部バスを介して接続されており、残りのブロ
ックは、拡張バスを介して相互に接続されている。な
お、バスブリッジ４は、内部バスと拡張バスとの両方に
接続されている。

【００１９】チューナ５は、例えば、地上波や衛星回
線、ＣＡＴＶ網を利用して放送されているテレビジョン
放送信号を受信する。モデム６は、電話回線を介しての
通信を制御する。即ち、例えば、モデム６は、電話回線
を通じて、図示せぬインターネットのプロバイダが有す
るサーバと通信を行い、これにより、ユーザは、電子メ
ール（E-mail）やＷＷＷ（World Wide Web）サーバが提
供するホームページなどのサービスを受けることができ
るようになされている。

【００２０】Ｉ／Ｏ（Input/Output）インターフェイス
７は、キーボード８やマウス９の操作に対応した操作信
号を出力する。キーボード８は、所定のデータやコマン
ドを入力するときに、マウス９は、ディスプレイ（コン
ピュータディスプレイ）１７に表示されるカーソルを移
動させたり、また、位置を指示したりするときなどに、
それぞれ操作される。

【００２１】補助記憶インターフェイス１０は、ＣＤ−
Ｒ（Compact Disc Recodable）１１やハードディスク
（ＨＤ（Hard Disk））１２などに対するデータの読み
書きを制御する。ＣＤ−Ｒ１１には、例えば、編集後の
画像や音声などが記録される。ハードディスク１２に
は、オペレーティングシステムや、番組の予約録画その
他処理をマイクロプロセッサ１に実行させるためのアプ
リケーションプログラムなどが記憶されている。さら
に、ハードディスク１２には、予約録画した番組を圧縮
符号化したデータなども記録される。

【００２２】圧縮部１３は、そこに入力される画像や音
声を、例えば、ＭＰＥＧの規格に準拠して圧縮符号化す
る。なお、圧縮部１３では、拡張バスを介して供給され
るデータや、伸張部１５を介して供給されるデータ、さ
らには、外部の装置である、例えば、ビデオカメラ１４
から供給されるデータなどを圧縮することができるよう
になされている。

【００２３】ビデオカメラ１４では、例えば、編集対象
とする画像などが撮影される。圧縮部１３は、ビデオカ
メラ１４とのインターフェイスを有しており、これによ
り、ビデオカメラ１４が出力する画像や音声を圧縮部１
３に入力することができるようになされている。

【００２４】伸張部１５は、圧縮部１３で符号化（圧
縮）されたデータを復号化（伸張）して出力する。な
お、伸張部１５は、必要に応じて、フレームバッファ３
に記憶された画像に、復号化した画像をオーバレイして
出力する。ここで、フレームバッファ３から伸張部１５
への画像データの供給は、図１の実施の形態では、それ
らの間で直接行われるようになされているが、その他、
内部バス、バスブリッジ４、および拡張バスを介して行
うことも可能である。但し、フレームバッファ３から伸
張部１５への画像データの供給を、内部バス、バスブリ
ッジ４、および拡張バスを介して行う場合には、内部バ
スや拡張バスの能力が低いと、データが渋滞するおそれ
がある。

【００２５】ＶＴＲ１６は、伸張部１５が出力する画像
や音声を、必要に応じて記録する。ディスプレイ１７
は、伸張部１５が出力する画像を、必要に応じて表示す
る。なお、伸張部１５が出力する画像の表示は、コンピ
ュータ用のディスプレイであるディスプレイ１７の他、
ＴＶ(TeleVision)モニタなどによっても行うことができ
るようになされている。

【００２６】次に、図１のパソコンにおいて、番組の予
約録画を行う場合の処理について説明する。

【００２７】なお、本明細書中において、番組とは、新
聞や雑誌などのいわゆるテレビ番組欄に放送時刻などが
記載されている、視聴者が本来視聴しようとする、例え
ば、ドラマ番組や、スポーツ番組、ニュース番組などの
放送を意味し、コマーシャルとは、それら以外の、いわ
ゆる番組のスポンサの宣伝、広告などのための放送を意
味するものとする。

【００２８】番組の予約録画をする場合においては、ま
ずその録画予約を行う必要があるが、ここでは、録画予
約を、その予約録画を行う番組の任意の画面（シーン）
を指定することによって行うことができるようになされ
ている。

【００２９】予約録画を行う番組の画面を指定する方法
としては、種々の方法が考えられるが、ここでは、例え
ば、インターネットを利用する場合について説明する。

【００３０】最近急速に普及しているインターネットに
おいては、ＷＷＷシステムが構築され、種々の情報発信
者がホームページと呼ばれる形で各種の情報を発信して
いる。テレビジョン放送局でも、例えば、図２に示すよ
うな番組の宣伝のためのホームページを提供している。
なお、図２は、１９９７年３月１４日において、ＵＲＬ
（Uniform Resource Locator）として、http://www.nt
v.co.jp/program.htmlを指定したときに得られたホーム
ページを示している。

【００３１】いま、モデム６を介して、図２に示したよ
うなホームページを受信して、ディスプレイ１７に表示
したとする。この場合において、所望の番組の表示部分
を、マウス９でクリックすると、その表示部分にリンク
が張られたホームページを受信することができる。

【００３２】図３は、図２に示したホームページのうち
の、「金曜ロードショー」の表示部分をクリックしたと
きに得られるホームページを示している。このホームペ
ージにおいては、番組名「金曜ロードショー」におい
て、今後放送予定の作品名（ここでは、映画名）などが
表示されている。

【００３３】各作品の表示部分は、その作品の内容が表
示されたホームページにリンクが張られており、図４お
よび図５は、図３に示したホームページのうちの「天空
の城ラピュタ」の表示部分をマウス９でクリックして得
られるホームページを示している。なお、図５は、図４
に続く図である。

【００３４】図４および図５のホームページにおいて
は、作品（映画）の解説や見どころ、ストーリ、放送日
時の他に、その作品のあるシーン（画像）が表示されて
いる。

【００３５】このように番組のシーンが表示されている
ホームページが表示されると、ＷＷＷブラウザにおいて
は、例えば、図６に示すように、番組を録画する録画時
間を設定するための録画時間設定ボタン２０が表示され
る。

【００３６】即ち、ホームページを表示するためには、
例えば、Netscape社のNetscape Navigator（商標）や、
NCSAのMosaic（商標）、Microsoft社のInternet Explor
er（商標）などのＷＷＷブラウザと呼ばれるアプリケー
ションが必要であり、上述したホームページは、このＷ
ＷＷブラウザにおいて表示される。そして、本実施の形
態では、図４および図５に示したような番組のシーンが
表示されているホームページが表示されると、例えば、
ＷＷＷブラウザ上に、録画時間設定ボタン２０が表示さ
れる（図６）。

【００３７】ここで、図６の実施の形態では、録画時間
設定ボタン２０は、録画時間として、３０分、１時間、
１時間３０分、２時間を設定する４つのボタンから構成
されているが、録画時間は、これら以外の任意の時間に
設定するようにすることも可能である。ここでは、１つ
の番組の放送時間が、一般に、３０分、１時間、１時間
３０分、または２時間のうちのいずれかであることが多
いことから、そのような時間に対応する４つのボタン
で、録画時間設定ボタン２０を構成してある。

【００３８】ユーザは、図４および図５に示したホーム
ページにおいて、その詳細が表示されている作品名「天
空の城ラピュタ」の録画を希望する場合、録画時間設
定ボタン２０のうちの、希望する録画時間（一般には、
録画を希望する番組の放送時間）に対応するボタンを、
マウス９でクリックする。

【００３９】録画時間設定ボタン２０のうちのいずれか
がクリックされると、マイクロプロセッサ１は、そのク
リックされたボタンに対応する録画時間と、ホームペー
ジ上の番組のシーン（画像データ）とを、ハードディス
ク１２に転送して記録させる。さらに、マイクロプロセ
ッサ１は、例えば、図４および図５に示したホームペー
ジから、予約録画をする番組の放送チャンネルを認識
し、やはりハードディスク１２に記録させる。

【００４０】その後、例えば、キーボード８などを操作
して、番組の予約録画を行うように設定をしておくと、
図１のパソコンでは、例えば、図７のフローチャートに
したがった予約録画処理が行われる。

【００４１】即ち、マイクロプロセッサ１は、チューナ
５を制御することにより、録画予約がなされた放送チャ
ンネルを受信させ、その後、ステップＳ１において、後
述するフラグＦを、例えば、０にセットする。そして、
ステップＳ２に進み、チューナ５の受信内容がコマーシ
ャル（ＣＭ）であるかどうかが、マイクロプロセッサ１
によって判定される。

【００４２】ここで、受信内容がコマーシャルであるか
どうかを判別する方法としては、例えば、特開平４−２
１４２５０号公報などに開示されているように、コマー
シャル時において、テレビジョン放送信号における音声
信号が、いわゆる２カ国語放送でないことが多いことを
利用するものなどがある。

【００４３】ステップＳ２において、チューナ５の受信
内容がコマーシャルであると判定された場合、ステップ
Ｓ２に戻り、コマーシャルが終了するまで待ち時間がお
かれる。そして、ステップＳ２において、チューナ５の
受信内容がコマーシャルでないと判定された場合、即
ち、コマーシャルが終了して、何らかの番組の放送が開
始された場合、そのタイミング（第１のタイミング）
で、チューナ５の受信内容（何らかの番組）の記録が開
始される。

【００４４】即ち、この場合、マイクロプロセッサ１
は、ステップＳ２からＳ３に進み、時間のカウントを開
始する。そして、マイクロプロセッサ１は、チューナ５
で受信された番組のうちの画像と、上述の録画予約時に
ハードディスク１２に記録された画像（以下、適宜、検
索画像という）とを比較し、ステップＳ４において、チ
ューナ５で受信された画像が、検索画像と同一のもので
あるか、近似しているものであるか、あるいは検索画像
を拡大または縮小したものであるかどうか（以下、いず
れかに該当する場合を、２つの画像がマッチングすると
いう）を判定する。

【００４５】ステップＳ４において、チューナ５で受信
された画像が、検索画像とマッチングすると判定された
場合、ステップＳ５に進み、マイクロプロセッサ１は、
フラグＦに、それらがマッチングした旨を示す１をセッ
トして、ステップＳ６に進む。また、ステップＳ４にお
いて、チューナ５で受信された画像が、検索画像とマッ
チングしないと判定された場合、ステップＳ５をスキッ
プして、ステップＳ６に進み、チューナ５の受信内容が
圧縮部１３に転送され、そこで、圧縮符号化された後、
ハードディスク１２に転送されて記録される。

【００４６】その後、ステップＳ７に進み、ステップＳ
２における場合と同様にして、チューナ５の受信内容が
コマーシャルであるかどうかが判定される。ステップＳ
７において、チューナ５の受信内容がコマーシャルでな
いと判定された場合、即ち、番組の放送が継続している
場合、ステップＳ４に戻り、以下、同様の処理が行われ
る。

【００４７】また、ステップＳ７において、チューナ５
の受信内容がコマーシャルであると判定された場合、ス
テップＳ８に進み、フラグＦが１であるかどうかが、マ
イクロプロセッサ１によって判定される。ステップＳ８
において、フラグＦが１でないと判定された場合、即
ち、コマーシャルが終了して、ハードディスク１２への
番組の記録（録画）が開始されてから、次のコマーシャ
ルが開始されるタイミング（第２のタイミング）までの
間に放送された番組の画像の中から、検索画像とマッチ
ングする画像が得られなかった場合、ステップＳ９に進
み、ハードディスク１２への番組の記録が中止され（こ
の場合、いままでの記録内容も消去される）、ステップ
Ｓ２に戻り、以下、同様の処理が繰り返される。

【００４８】即ち、コマーシャルが終了して、ハードデ
ィスク１２への番組の記録が開始されてから、次のコマ
ーシャルが開始されるまでの間に放送された番組の画像
の中から、検索画像とマッチングする画像を検索するこ
とができなかった場合は、その間に記録を行った番組
は、録画予約がなされた番組ではないとして、消去され
る。

【００４９】また、ステップＳ８において、フラグＦが
１であると判定された場合、即ち、コマーシャルが終了
して、ハードディスク１２への番組の記録が開始されて
から、次のコマーシャルが開始されるタイミングまでの
間に放送された番組の画像の中から、検索画像とマッチ
ングする画像が得られた場合、ステップＳ１０に進み、
ステップＳ３でカウント（計時）が開始された時間が、
録画時間に等しくなったかどうかが、マイクロプロセッ
サ１で判定される。

【００５０】ステップＳ１０において、ステップＳ３で
カウントが開始された時間が、録画時間に等しくなって
いないと判定された場合、ステップＳ１１に進み、ステ
ップＳ６における場合と同様に、チューナ５の受信内容
が圧縮符号化されて記録され、ステップＳ１０に戻る。
即ち、コマーシャルが終了して、ハードディスク１２へ
の番組の記録が開始されてから、次のコマーシャルが開
始されるまでの間に放送された番組の画像の中から、検
索画像とマッチングする画像を検索することができた場
合は、その間に記録を行った番組が、録画予約がなされ
た番組であるとして、その後も、記録が続行される。

【００５１】そして、ステップＳ１０において、ステッ
プＳ３でカウントが開始された時間が、録画時間に等し
くなったと判定された場合、即ち、コマーシャルの終了
後に開始された、検索画像とマッチングする画像を含む
番組の記録が、録画時間だけ行われた場合、予約録画処
理を終了する。

【００５２】以上のように、番組の画像から、予約録画
を行おうとする番組の画面である検索画像を検索し、そ
の画像を含む番組の記録が、録画時間だけ行われるの
で、予約録画をしようとする番組の前の番組が延長さ
れ、予約録画をしようとする番組の放送時刻がずれて
も、その番組全体の録画をすることができる。

【００５３】また、ユーザは、番組の放送開始時刻や終
了時刻などを入力することなく、容易に、番組の録画予
約を行うことができる。

【００５４】なお、例えば、特に、連続ドラマ番組など
については、オープニングのテーマ曲などが放送される
ときの画面は、毎回同一であることが多いので、そのオ
ープニングの画面を、検索画像として記憶しておくこと
により、コマーシャルを検出しなくても、検索画像とマ
ッチングするシーンを検出して録画を開始すれば、番組
全体の録画をすることができる。

【００５５】但し、最近のドラマ番組では、オープニン
グのテーマ曲を放送する前に、その内容の一部が放送さ
れる場合があり、この場合、オープニングの画面を、検
索画像として記憶しておき、検索画像とマッチングする
シーンを検出して録画を開始したのでは、その前に放送
された内容を録画することができない。そこで、図７の
フローチャートに示したように、コマーシャルの終了後
に録画を開始するようにすることで、オープニングのテ
ーマ曲を放送する前に、その内容の一部が放送される場
合にも対処することが可能となる。

【００５６】また、上述の場合においては、インターネ
ットを利用して検索画像を得るようにしたが、検索画像
は、録画予約をしようとする番組の中の１シーンであれ
ば良く、従って、例えば、上述のオープニングのテーマ
曲が放送されるときのシーンや、また、番組の終了前に
放送される次回の予告シーンなどを、検索画像とするこ
とも可能である。

【００５７】なお、例えば、ビデオＣＤ（Compact Dis
c）と同程度の画質および音質を実現するとした場合、
一般には、１時間の番組の記録を行うときで、ハードデ
ィスク１２には、６５０Ｍバイト程度の容量が要求され
る。

【００５８】次に、図８は、上述のような予約録画処理
を行う図１のパソコンを機能的に表したブロック図であ
る。

【００５９】フレームメモリ部２１は、ＦＭ（フレーム
メモリ）２１Ａおよび２１Ｂから構成され、チューナ５
で受信された番組の画像を記憶するようになされてい
る。フレームメモリ部２１に記憶された画像は、動き検
出器２３および２４に供給されるようになされている。

【００６０】ここで、チューナ５からの画像は、ＦＭ２
１Ａまたは２１Ｂのうちの一方に記憶され、この場合、
他方に記憶されている画像が読み出され、動き検出器２
３および２４に供給されるようになされている。そし
て、チューナ５からの次の画像は、ＦＭ２１Ａまたは２
１Ｂのうちの他方に記憶され、この場合、一方に記憶さ
れている画像が読み出され、動き検出器２３および２４
に供給されるようになされている。以下、同様にして、
フレームメモリ２１に対しては、画像の読み書きが行わ
れるようになされている。なお、このような画像の読み
書きの制御は、コントローラ２６によって行われるよう
になされている。

【００６１】フレームメモリ部２２は、１以上のフレー
ムメモリ、即ち、ここでは、ＦＭ２２₁乃至ＦＭ２２_Nか
ら構成され、最大でＮ画面分の検索画像を記憶するよう
になされている。フレームメモリ部２２に記憶された検
索画像は、コントローラ２６の制御の下に読み出され、
動き検出器２３および２４に供給されるようになされて
いる。

【００６２】動き検出器２３は、フレームメモリ部２２
からの検索画像を参照画像として、フレームメモリ部２
１からの画像（以下、適宜、入力画像という）の動きベ
クトルを検出するとともに、その動きベクトルにしたが
って、入力画像の動き補償を行ったときの残差を算出
し、判定器２５に出力するようになされている。

【００６３】即ち、例えば、いま、検索画像について、
横×縦が１６×１６画素で構成される領域としてのマク
ロブロックを考えて、そのマクロブロックの最も左上か
ら、右方向にｉ番目で、下方向にｊ番目の位置にある画
素の画素値をＲ_i,jと表す。さらに、入力画像につい
て、その最も左上から右または下方向にｘ軸またはｙ軸
をそれぞれ考え、点（ｘ，ｙ）を最も左上の画素とし
て、マクロブロックを想定した場合に、そのマクロブロ
ックの最も左上から、右方向にｉ番目で、下方向にｊ番
目の位置にある画素の画素値をＳ_x+i,y+jと表す。

【００６４】この場合、次式で示されるｄ（ｘ，ｙ）
が、ｘ，ｙそれぞれを１ずつ変化させて求められる。

【００６５】

【数１】・・・（１）

【００６６】そして、動き検出器２３では、式（１）の
ｄ（ｘ，ｙ）が最小になるときの（ｘ，ｙ）が動きベク
トルとして検出され、さらに、そのときのｄ（ｘ，ｙ）
が残差として算出される。

【００６７】以上の処理が、参照画像を構成するすべて
のマクロブロックについて行われる。

【００６８】動き検出器２４も、基本的には、動き検出
器２３と同様に、フレームメモリ部２２からの検索画像
を参照画像として、フレームメモリ部２１からの画像の
動きベクトルを検出するとともに、その動きベクトルに
したがって、入力画像の動き補償を行ったときの残差を
算出し、判定器２５に出力するようになされている。

【００６９】但し、動き検出器２４では、次式で示され
るｄ（ｘ，ｙ）が、ｘ，ｙそれぞれを１ずつ変化させて
求められる。

【００７０】

【数２】・・・（２）なお、式（２）におけるＭＳ（ｘ，ｙ）またはＭＲ
（０，０）それぞれは、次式で表される入力画像または
検索画像を構成するマクロブロックの画素値の平均値、
即ち、直流成分を表す。

【数３】・・・（３）なお、式（３）における右辺の分数の分母である２５６
は、マクロブロックを構成する画素数（１６×１６）を
意味する。

【００７１】従って、動き検出器２４においては、式
（２）において、マクロブロックを構成する各画素値か
ら、その直流成分を除いて、残差ｄ（ｘ，ｙ）が算出さ
れるので、入力画像と検索画像とが、輝度のみ異なる同
一の画像である場合に、両者が同一の画像（輝度も同じ
画像）である場合と同様の動きベクトルと残差を得るこ
とが可能となる。即ち、動き検出器２４では、輝度が異
なることによる影響のない動きベクトルおよび残差を得
ることができる。

【００７２】なお、動き検出器２３および２４では、画
像データのうち、例えば、輝度のデータのみを用いて処
理を行うようにすることもできるし、輝度の他に、色差
のデータについても、同様の処理を行うようにすること
が可能である。

【００７３】判定器２５は、コントローラ２６の制御の
下、動き検出器２３および２４の出力に基づいて、入力
画像が検索画像にマッチングするかどうかを判定するよ
うになされている。

【００７４】即ち、すべてのマクロブロックについて、
動きベクトルが（０，０）であり、かつ残差が０である
場合には、入力画像は検索画像と完全に一致するが、人
間が見れば、入力画像と検索画像とが一致すると認めら
れる場合であっても、通常は、入力画像にノイズが含ま
れていたり、入力画像の信号の劣化などによりその画質
が変化していたりするので、動きベクトルが（０，０）
となり、かつ残差が０となるのは稀である。

【００７５】そこで、判定器２５は、動きベクトルや残
差を、所定の閾値と比較し、それらが所定の閾値以下で
あった場合に、入力画像が検索画像とマッチングすると
判定し、その判定結果を、コントローラ２６に出力する
ようになされている。なお、判定器２５で用いられる閾
値は、コントローラ２６により設定することができるよ
うになされている。

【００７６】また、判定器２５は、入力画像が、検索画
像を拡大または縮小したものである場合も、入力画像が
検索画像とマッチングすると判定するようになされてい
る。即ち、例えば、すべてのマクロブロックについて、
動きベクトルが所定の許容誤差の範囲内の値となり、か
つ残差が所定の閾値以下であった場合、判定器２５で
は、入力画像が、検索画像を拡大または縮小したもので
あるとして、入力画像が検索画像とマッチングすると判
定されるようになされている。

【００７７】コントローラ２６は、フレームメモリ部２
１および２２、並びに判定器２５を制御するようになさ
れている。また、コントローラ２６には、チューナ５で
受信された音声が供給されるようになされており、そこ
では、その音声に基づいて、チューナ５の受信内容がコ
マーシャルかどうかが判定されるようになされている。
さらに、コントローラ２６は、自身が行うチューナ５の
受信内容がコマーシャルかどうかの判定結果、および判
定器２５からの判定結果に基づいて、録画装置２７を制
御するようにもなされている。

【００７８】録画装置２７には、チューナ５で受信され
た画像および音声が供給されるようになされている。録
画装置２７は、これらの画像および音声を、コントロー
ラ２６の制御の下に圧縮符号化して記録するようになさ
れている。

【００７９】なお、フレームメモリ部２１および２２
は、図１のメインメモリ２やハードディスク１２に、動
き検出器２３および２４、判定器２５、並びにコントロ
ーラ２６は、図１のマイクロプロセッサ１に、録画装置
２７は、図１の圧縮部１３およびハードディスク１２
に、それぞれ対応する。

【００８０】次に、その動作について説明する。

【００８１】なお、フレームメモリ部２２には、検索画
像が既に記憶され、また、コントローラ２６は録画時間
を既に認識しているものとする。

【００８２】チューナ５で受信された画像（入力画像）
は、フレームメモリ部２１および録画装置２７に、音声
はコントローラ２６および録画装置２７に供給される。
フレームメモリ部２１では、そこに供給される入力画像
が記憶され、さらに、コントローラ２６の制御の下に１
フレーム単位など読み出されて動き検出器２３および２
４に供給される。

【００８３】フレームメモリ部２１からの入力画像の読
み出しに同期して、フレームメモリ部２２からも、そこ
に記憶された検索画像が、コントローラ２６の制御の下
に読み出され、動き検出器２３および２４に供給され
る。動き検出器２３並びに２４では、上述したような動
き検出処理が行われ、その結果得られる動きベクトルお
よび残差が、判定器２５に供給される。判定器２５で
は、動きベクトル２３および２４の出力に基づき、入力
画像が検索画像にマッチングするかどうかが判定され、
その判定結果がコントローラ２６に供給される。

【００８４】コントローラ２６は、そこに入力される音
声に基づいて、チューナ５の受信内容がコマーシャルか
どうかを判定しており、その判定結果に基づき、コマー
シャルが終了すると、録画装置２７を、画像および音声
の圧縮符号化およびその記録を行うように制御する。そ
して、コントローラ２６は、次のコマーシャルが開始さ
れるまでに、判定器２５から、入力画像が検索画像にマ
ッチングする旨の判定結果を受信することができなかっ
た場合、処理を中止するように、録画装置２７を制御す
る。

【００８５】また、コントローラ２６は、次のコマーシ
ャルが開始されるまでに、判定器２５から、入力画像が
検索画像にマッチングする旨の判定結果を受信すること
ができた場合、録画装置２７による画像および音声の記
録が開始されてから、あらかじめ認識している録画時間
が経過するのを待って、その記録を終了させる。

【００８６】なお、フレームメモリ部２２に複数の検索
画像が記憶されている場合には、例えば、次のコマーシ
ャルが開始されるまでに、そのうちのいずれか１つとマ
ッチングする入力画像が検出されたときや、そのすべて
のマッチングする入力画像が検出されたときなどに、録
画装置２７による画像および音声の記録を、録画時間が
経過するまで続行するようにすることが可能である。

【００８７】以上、本発明を、番組の録画を行う装置に
適用した場合について説明したが、本発明は、画像を記
録するあらゆる場合に適用可能である。

【００８８】即ち、例えば、画像の編集を行い、その編
集結果を記録する場合、従来においては、通常、編集点
を、時刻やタイムコードで指定したり、また、ユーザが
画像を見て、編集点となるシーンを探し出す必要があっ
た。このような場合に本発明を適用し、編集点となるシ
ーンを検索画像として設定すれば、容易に、対応する画
像を見つけ出し、そこからの記録を行うことが可能とな
る。

【００８９】また、上述の場合においては、入力画像が
検索画像とマッチングしたときに、記録を行うようにし
たが、逆に、入力画像が検索画像とマッチングしなくな
ったときに、記録を行うようにすることも可能である。
このような手法は、例えば、いわゆる監視カメラなどに
有用である。即ち、この場合、例えば、監視する部屋な
どの風景を検索画像として設定すれば、その部屋に人間
が侵入したりして、何らかの変化があったときのみ記録
を行うことができる。これにより、監視カメラの撮影画
像を連続して記録する場合に比較して、より長時間の記
録が可能となる。

【００９０】さらに、本実施の形態では、いわゆるＡＶ
パソコンによる画像の記録を行う場合を対象としたが、
本発明は、その他、例えば、大容量のハードディスクを
有するテレビジョン受像機において番組予約を行う場合
などにも適用可能である。

【００９１】また、本実施の形態では、画像をＭＰＥＧ
符号化して記録するようにしたが、画像の符号化方式
は、これに限定されるものではない。さらに、画像は、
符号化せずに記録するようにすることも可能である。

【００９２】また、本実施の形態では、録画を、コマー
シャルの終了後に開始するようにしたが、録画は、任意
のタイミングで開始することが可能である。同様に、録
画を開始してから、検索画像とマッチングする入力画像
の入力がなかった場合に録画を中止するタイミングも、
コマーシャルの開始時の他、任意のタイミングとするこ
とが可能である。

【００９３】さらに、入力画像が検索画像とマッチング
するかどうかの判定は、入力画像が供給されるたびに行
う他、数フレームの入力画像が供給されるごとに１回だ
け行うようにすることが可能である。

【００９４】

【発明の効果】請求項１に記載の録画方法によれば、入
力画像の録画が、第１のタイミングで開始され、入力画
像が所定の画像とマッチングするかどうかが判定され
る。そして、入力画像の録画を開始してから、第２のタ
イミングまでに、所定の画像とマッチングする入力画像
が得られた場合、第１のタイミングから所定の録画時間
が経過した後に録画が終了される。また、所定の画像と
マッチングする入力画像が得られなかった場合、入力画
像の録画が中止され、第１のタイミングで再開される。
従って、例えば、テレビジョン放送番組などの予約録画
などにおいて、その番組の放送開始時刻がずれても、そ
の録画を確実に行うことが可能となる。

【００９５】請求項７に記載の録画装置によれば、入力
画像が所定の画像とマッチングするかどうかが判定さ
れ、その判定結果に対応して、入力画像の録画が行われ
る。従って、例えば、入力画像が所定の画像とマッチン
グした場合に、その録画を行ったり、逆に、マッチング
しなかった場合に、録画を行ったりすることなどが可能
となる。

【図面の簡単な説明】

【図１】本発明を適用したパーソナルコンピュータの一
実施の形態の構成を示すブロック図である。

【図２】ホームページを、ディスプレイ上に表示した中
間調画像を示す写真である。

【図３】ホームページを、ディスプレイ上に表示した中
間調画像を示す写真である。

【図４】ホームページを、ディスプレイ上に表示した中
間調画像を示す写真である。

【図５】ホームページを、ディスプレイ上に表示した中
間調画像を示す写真である。

【図６】録画時間設定ボタン２０を説明するための図で
ある。

【図７】予約録画処理を説明するためのフローチャート
である。

【図８】予約録画処理を行う図１のパーソナルコンピュ
ータを機能的に表したブロック図である。

【符号の説明】

１マイクロプロセッサ，２メインメモリ，３
フレームバッファ，４バスブリッジ，５チュー
ナ，６モデム，７Ｉ／Ｏインターフェイス，
８キーボード，９マウス，１０補助記憶イン
ターフェイス，１１ＣＤ−Ｒ，１２ハードディス
ク，１３圧縮部，１４ビデオカメラ，１５
伸張部，１６ＶＴＲ，１７コンピュータディス
プレイ，２０録画時間設定ボタン，２１フレー
ムメモリ部，２１Ａ，２１Ｂフレームメモリ，２２
フレームメモリ部，２２₁乃至２２_N フレームメモ
リ，２３，２４動き検出器，２５判定器，２
６コントローラ，２７録画装置

Claims

【特許請求の範囲】

【請求項１】画像の録画を行う録画方法であって、入力画像の録画を、第１のタイミングで開始し、前記入力画像が所定の画像とマッチングするかどうかを
判定し、前記入力画像の録画を開始してから、第２のタイミング
までに、前記所定の画像とマッチングする前記入力画像
が得られた場合、前記第１のタイミングから所定の録画
時間が経過した後に録画を終了し、前記所定の画像とマ
ッチングする前記入力画像が得られなかった場合、前記
入力画像の録画を中止し、その録画を、前記第１のタイ
ミングで再開することを特徴とする録画方法。
【請求項２】前記入力画像は、テレビジョン放送の番
組であり、前記第１のタイミングは、コマーシャルが終了したタイ
ミングであり、前記第２のタイミングは、次のコマーシャルが開始され
るタイミングであることを特徴とする請求項１に記載の
録画方法。
【請求項３】前記所定の画像を参照画像として、前記
入力画像の動きベクトルを検出し、その動きベクトルに
したがって前記入力画像の動き補償を行ったときの残差
に基づいて、前記入力画像が前記所定の画像とマッチン
グするかどうかを判定することを特徴とする請求項１に
記載の録画方法。
【請求項４】前記入力画像が複数の所定の画像のうち
の１以上とマッチングするかどうかを判定することを特
徴とする請求項１に記載の録画方法。
【請求項５】前記入力画像が所定の画像とマッチング
するかどうかを、それぞれの画素値から直流成分を除い
たものどうしを比較することによって判定することを特
徴とする請求項１に記載の録画方法。
【請求項６】前記入力画像が前記所定の画像と同一の
ものである場合、近似しているものである場合、および
前記所定の画像を拡大または縮小したものである場合、
前記入力画像が前記所定の画像とマッチングすると判定
することを特徴とする請求項１に記載の録画方法。
【請求項７】画像の録画を行う録画装置であって、所定の画像を記憶する記憶手段と、入力画像が前記所定の画像とマッチングするかどうかを
判定する判定手段と、前記判定手段の判定結果に対応して、前記入力画像の録
画を行う録画手段とを備えることを特徴とする録画装
置。
【請求項８】前記所定の画像を参照画像として、前記
入力画像の動きベクトルを検出するとともに、その動き
ベクトルにしたがって前記入力画像の動き補償を行った
ときの残差を算出する動きベクトル検出手段をさらに備
え、前記判定手段は、前記動きベクトル検出手段が出力する
前記動きベクトルおよび残差に基づいて、前記入力画像
が前記所定の画像とマッチングするかどうかを判定する
ことを特徴とする請求項７に記載の録画装置。
【請求項９】前記動きベクトル検出手段は、前記入力
画像と所定の画像それぞれの画素値から直流成分を除い
たものどうしを比較することによって、前記動きベクト
ルを検出することを特徴とする請求項８に記載の録画装
置。
【請求項１０】前記記憶手段は、複数の所定の画像を
記憶することが可能であり、前記判定手段は、入力画像が前記複数の所定の画像のう
ちの１以上とマッチングするかどうかを判定することを
特徴とする請求項７に記載の録画装置。
【請求項１１】前記判定手段は、前記入力画像が前記
所定の画像と同一のものである場合、近似しているもの
である場合、および前記所定の画像を拡大または縮小し
たものである場合、前記入力画像が前記所定の画像とマ
ッチングすると判定することを特徴とする請求項７に記
載の録画装置。
【請求項１２】前記録画手段が前記入力画像の録画を
所定の時間だけ行う場合において、その所定の時間を入力するための入力手段をさらに備え
ることを特徴とする請求項７に記載の録画装置。