JP2000324499A - 画像処理装置及びシーンチェンジ検出方法 - Google Patents
画像処理装置及びシーンチェンジ検出方法Info
- Publication number
- JP2000324499A JP2000324499A JP13366599A JP13366599A JP2000324499A JP 2000324499 A JP2000324499 A JP 2000324499A JP 13366599 A JP13366599 A JP 13366599A JP 13366599 A JP13366599 A JP 13366599A JP 2000324499 A JP2000324499 A JP 2000324499A
- Authority
- JP
- Japan
- Prior art keywords
- image correlation
- scene change
- value
- image
- correlation value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/142—Detection of scene cut or scene change
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】
【課題】 動画像のシーンチェンジを検出する画像処理
装置及びシーンチェンジ検出方法に関し、正確なシーン
チェンジ検出及びフレーム・シーンチェンジとフィール
ド・シーンチェンジとを区別して検出する。 【解決手段】 ディジタル化した入力画像信号を１フレ
ーム遅延させる為のメモリ４と、現フレームの入力画像
信号とメモリ４から読出した前フレームの画像信号との
画素対応の差分の絶対値を累積加算して第１の画像相関
値を出力す第１の画像相関演算部１と、この第１の画像
相関値のフレーム間の差分を求めて第２の画像相関値と
して出力する第２の画像相関演算部２と、この第２の画
像相関値を第１の閾値Ｔｈ１と比較して、この第１の閾
値Ｔｈ１を超えた時にシーンチェンジ検出信号を出力す
る比較部３とを備えている。更にシーンチェンジ検出時
に、第２の画像相関値と第２の閾値とを比較して、フレ
ーム・シーンチェンジとフィールド・シーンチェンジと
を区別して検出できる。
装置及びシーンチェンジ検出方法に関し、正確なシーン
チェンジ検出及びフレーム・シーンチェンジとフィール
ド・シーンチェンジとを区別して検出する。 【解決手段】 ディジタル化した入力画像信号を１フレ
ーム遅延させる為のメモリ４と、現フレームの入力画像
信号とメモリ４から読出した前フレームの画像信号との
画素対応の差分の絶対値を累積加算して第１の画像相関
値を出力す第１の画像相関演算部１と、この第１の画像
相関値のフレーム間の差分を求めて第２の画像相関値と
して出力する第２の画像相関演算部２と、この第２の画
像相関値を第１の閾値Ｔｈ１と比較して、この第１の閾
値Ｔｈ１を超えた時にシーンチェンジ検出信号を出力す
る比較部３とを備えている。更にシーンチェンジ検出時
に、第２の画像相関値と第２の閾値とを比較して、フレ
ーム・シーンチェンジとフィールド・シーンチェンジと
を区別して検出できる。
Description
【０００１】
【発明の属する技術分野】本発明は、動画像信号を入力
してシーンチェンジを検出する画像処理装置及びシーン
チェンジ検出方法に関する。
してシーンチェンジを検出する画像処理装置及びシーン
チェンジ検出方法に関する。
【０００２】
【従来の技術】動画像信号を圧縮処理して伝送或いは蓄
積する各種の符号化方式が知られている。例えば、ＭＰ
ＥＧ（Ｍoving Ｐicture Ｅxperts Ｇroup）による標
準化された符号化方式は、予測符号化と動き補償等を行
うものであり、予測符号化は、フレーム間符号化とフレ
ーム内符号化との組合せ又はそれらの選択切替えを行う
ものである。
積する各種の符号化方式が知られている。例えば、ＭＰ
ＥＧ（Ｍoving Ｐicture Ｅxperts Ｇroup）による標
準化された符号化方式は、予測符号化と動き補償等を行
うものであり、予測符号化は、フレーム間符号化とフレ
ーム内符号化との組合せ又はそれらの選択切替えを行う
ものである。
【０００３】一般に、動画像は、フレーム間の相関が大
きいものであり、従って、フレーム間符号化により情報
量を少なくすることができる。しかし、シーンチェンジ
時は、フレーム間の相関が小さくなるから、フレーム間
符号化による情報量は増加する。そこで、シーンチェン
ジを検出してフレーム内符号化に切替える方式が採用さ
れている。このシーンチェンジを検出する為には、フレ
ーム間の画素対応の差分を求め、この差分が或る閾値を
超えた時に、フレーム間の相関が小さくなったと判定
し、この相関の小さい画素数をカウントして、所定値を
超える画素数の場合に、シーンチェンジと判定する構成
が知られている。又フレーム間の画素対応の差分の絶対
値の累積和を求め、この累積和が或る閾値を超えた時に
シーンチェンジと判定する方式も知られている。
きいものであり、従って、フレーム間符号化により情報
量を少なくすることができる。しかし、シーンチェンジ
時は、フレーム間の相関が小さくなるから、フレーム間
符号化による情報量は増加する。そこで、シーンチェン
ジを検出してフレーム内符号化に切替える方式が採用さ
れている。このシーンチェンジを検出する為には、フレ
ーム間の画素対応の差分を求め、この差分が或る閾値を
超えた時に、フレーム間の相関が小さくなったと判定
し、この相関の小さい画素数をカウントして、所定値を
超える画素数の場合に、シーンチェンジと判定する構成
が知られている。又フレーム間の画素対応の差分の絶対
値の累積和を求め、この累積和が或る閾値を超えた時に
シーンチェンジと判定する方式も知られている。
【０００４】又動画像は、通常のテレビ画像の場合のイ
ンターレース方式と、コンピュータのモニタの場合のノ
ンインターレース方式とがある。例えば、図１１の
（Ａ）はノンインターレース（順次走査）方式の場合を
示し、１画面を順次水平走査線ＨＬによって走査するも
ので、この水平走査線ＨＬ上の画素の輝度信号を時間軸
上に投影した場合、図１１の（Ｃ）に示すものとなり、
時間軸上ではフレーム間隔、即ち、１／３０秒又は１／
２９．９７秒の間隔で配置された状態となる。
ンターレース方式と、コンピュータのモニタの場合のノ
ンインターレース方式とがある。例えば、図１１の
（Ａ）はノンインターレース（順次走査）方式の場合を
示し、１画面を順次水平走査線ＨＬによって走査するも
ので、この水平走査線ＨＬ上の画素の輝度信号を時間軸
上に投影した場合、図１１の（Ｃ）に示すものとなり、
時間軸上ではフレーム間隔、即ち、１／３０秒又は１／
２９．９７秒の間隔で配置された状態となる。
【０００５】又図１１の（Ｂ）はインターレース（飛び
越し走査）方式の場合を示し、１画面を１本おきの奇フ
ィールドの水平走査線ＯＬと、偶フィールドの水平走査
線ＥＬとにより１フレームが形成される。そして、奇フ
ィールドの水平走査線ＯＬ上の画素の輝度信号と、偶フ
ィールドの水平走査線ＥＬ上の画素の輝度信号とを時間
軸上に投影した場合、図１１の（Ｄ）に示すものとな
り、時間軸上ではフィールド間隔、即ち、１／６０秒又
は１／５９．９４秒の間隔で配置された状態となる。
越し走査）方式の場合を示し、１画面を１本おきの奇フ
ィールドの水平走査線ＯＬと、偶フィールドの水平走査
線ＥＬとにより１フレームが形成される。そして、奇フ
ィールドの水平走査線ＯＬ上の画素の輝度信号と、偶フ
ィールドの水平走査線ＥＬ上の画素の輝度信号とを時間
軸上に投影した場合、図１１の（Ｄ）に示すものとな
り、時間軸上ではフィールド間隔、即ち、１／６０秒又
は１／５９．９４秒の間隔で配置された状態となる。
【０００６】図１２はフレーム・シーンチェンジとフィ
ールド・シーンチェンジとの説明図であり、インターレ
ース方式の場合、奇フィールドと偶フィールドとにより
フレームが形成されるから、このフレーム間でシーンチ
ェンジが生じるフレーム・シーンチェンジと、奇フィー
ルドと偶フィールドとの間でシーンチェンジが生じるフ
ィールド・シーンチェンジとがある。なお、ノンインタ
ーレース方式の場合は、フレーム・シーンチェンジのみ
となる。
ールド・シーンチェンジとの説明図であり、インターレ
ース方式の場合、奇フィールドと偶フィールドとにより
フレームが形成されるから、このフレーム間でシーンチ
ェンジが生じるフレーム・シーンチェンジと、奇フィー
ルドと偶フィールドとの間でシーンチェンジが生じるフ
ィールド・シーンチェンジとがある。なお、ノンインタ
ーレース方式の場合は、フレーム・シーンチェンジのみ
となる。
【０００７】
【発明が解決しようとする課題】従来のフレーム間差分
を基にシーンチェンジを検出する構成に於いては、カメ
ラのパンやチルトの場合、又は波立つ水面シーン等の場
合に、フレーム間差分が大きくなる。従って、従来例の
ように、フレーム間差分を基にシーンチェンジを検出す
る場合に誤検出が多くなる問題があった。又インターレ
ース方式の場合に、符号化処理等の画像処理に於いて
は、フレーム・シーンチェンジとフィールド・シーンチ
ェンジとを区別してシーンチェンジ検出を行うことが望
ましいものであり、その場合は、フィールド単位でシー
ンチェンジ検出の演算を行う必要が生じる。従って、フ
レーム・シーンチェンジ検出に比較してフィールド・シ
ーンチェンジ検出には高速処理が必要となり、それに伴
ってコストアップとなる問題がある。本発明は、正確な
シーンチェンジ検出を行うと共に、フレーム・シーンチ
ェンジかフィールド・シーンチェンジかを区別して検出
することを目的とする。
を基にシーンチェンジを検出する構成に於いては、カメ
ラのパンやチルトの場合、又は波立つ水面シーン等の場
合に、フレーム間差分が大きくなる。従って、従来例の
ように、フレーム間差分を基にシーンチェンジを検出す
る場合に誤検出が多くなる問題があった。又インターレ
ース方式の場合に、符号化処理等の画像処理に於いて
は、フレーム・シーンチェンジとフィールド・シーンチ
ェンジとを区別してシーンチェンジ検出を行うことが望
ましいものであり、その場合は、フィールド単位でシー
ンチェンジ検出の演算を行う必要が生じる。従って、フ
レーム・シーンチェンジ検出に比較してフィールド・シ
ーンチェンジ検出には高速処理が必要となり、それに伴
ってコストアップとなる問題がある。本発明は、正確な
シーンチェンジ検出を行うと共に、フレーム・シーンチ
ェンジかフィールド・シーンチェンジかを区別して検出
することを目的とする。
【０００８】
【課題を解決するための手段】本発明の画像処理装置
は、（１）動画像の入力画像信号を基にシーンチェンジ
を検出する画像処理装置であって、入力画像信号のフレ
ーム間の第１の画像相関値を求める第１の画像相関演算
部１と、第１の画像相関値についてのフレーム間の第２
の画像相関値を求める第２の画像相関演算部２と、第２
の画像相関値と第１の閾値とを比較してシーンチェンジ
検出信号を出力する比較部３とを備えている。
は、（１）動画像の入力画像信号を基にシーンチェンジ
を検出する画像処理装置であって、入力画像信号のフレ
ーム間の第１の画像相関値を求める第１の画像相関演算
部１と、第１の画像相関値についてのフレーム間の第２
の画像相関値を求める第２の画像相関演算部２と、第２
の画像相関値と第１の閾値とを比較してシーンチェンジ
検出信号を出力する比較部３とを備えている。
【０００９】又（２）画像処理装置の第１の画像相関演
算部１は、入力画像信号の前フレームと現フレームとの
画素対応の差分を求める差回路と、この差回路の出力信
号の絶対値を求める絶対値回路と、この絶対値回路の出
力信号を１フレーム期間について累積加算して第１の画
像相関値として出力する累積加算器とを含む構成を有す
るものである。
算部１は、入力画像信号の前フレームと現フレームとの
画素対応の差分を求める差回路と、この差回路の出力信
号の絶対値を求める絶対値回路と、この絶対値回路の出
力信号を１フレーム期間について累積加算して第１の画
像相関値として出力する累積加算器とを含む構成を有す
るものである。
【００１０】又（３）画像処理装置の第１の画像相関演
算部１は、入力画像信号の前フレームと現フレームとの
画素対応の差分を求める差回路と、この差回路の出力信
号の絶対値を求める絶対値回路と、この絶対値回路の出
力信号を閾値と比較する比較器と、この比較器の出力信
号を１フレーム期間について累積加算して第１の画像相
関値として出力する累積加算器とを含むことができる。
算部１は、入力画像信号の前フレームと現フレームとの
画素対応の差分を求める差回路と、この差回路の出力信
号の絶対値を求める絶対値回路と、この絶対値回路の出
力信号を閾値と比較する比較器と、この比較器の出力信
号を１フレーム期間について累積加算して第１の画像相
関値として出力する累積加算器とを含むことができる。
【００１１】又（４）画像処理装置の第２の画像相関演
算部２は、第１の画像相関演算部１からの前フレームの
第１の画像相関値を記憶するメモリと、このメモリから
読出した前フレームの第１の画像相関値と現フレームの
第１の画像相関値との差分を第２の画像相関値として出
力する差回路とを含むものである。
算部２は、第１の画像相関演算部１からの前フレームの
第１の画像相関値を記憶するメモリと、このメモリから
読出した前フレームの第１の画像相関値と現フレームの
第１の画像相関値との差分を第２の画像相関値として出
力する差回路とを含むものである。
【００１２】又（５）画像処理装置の比較部３は、第２
の画像相関演算部２からの第２の画像相関値と第１の閾
値とを比較する第１比較器と、この第１比較器からのシ
ーンチェンジ検出信号を１フレーム遅延させる遅延回路
と、この遅延回路により遅延されたシーンチェンジ検出
信号によって、第２の画像相関値と第２の閾値とを比較
して、フレーム・シーンチェンジ検出信号又はフィール
ド・シーンチェンジ検出信号を出力する第２比較器とを
含むことができる。
の画像相関演算部２からの第２の画像相関値と第１の閾
値とを比較する第１比較器と、この第１比較器からのシ
ーンチェンジ検出信号を１フレーム遅延させる遅延回路
と、この遅延回路により遅延されたシーンチェンジ検出
信号によって、第２の画像相関値と第２の閾値とを比較
して、フレーム・シーンチェンジ検出信号又はフィール
ド・シーンチェンジ検出信号を出力する第２比較器とを
含むことができる。
【００１３】又（６）前記比較器に於いて、第２の画像
相関値と比較する第１の閾値を前フレームに於ける第１
の画像相関値の大きさに対応して変化させる構成を備え
ることができる。
相関値と比較する第１の閾値を前フレームに於ける第１
の画像相関値の大きさに対応して変化させる構成を備え
ることができる。
【００１４】又（７）本発明のシーンチェンジ検出方法
は、動画像の入力画像信号を基にシーンチェンジを検出
する方法であって、入力画像信号の現フレームと前フレ
ームとの画素対応の差分の累積加算により第１の画像相
関値を求め、次に、第１の画像相関値のフレーム間差分
により第２の画像相関値を求め、次に、第２の画像相関
値が第１の閾値を超えている時にシーンチェンジ検出と
する過程を含むものである。
は、動画像の入力画像信号を基にシーンチェンジを検出
する方法であって、入力画像信号の現フレームと前フレ
ームとの画素対応の差分の累積加算により第１の画像相
関値を求め、次に、第１の画像相関値のフレーム間差分
により第２の画像相関値を求め、次に、第２の画像相関
値が第１の閾値を超えている時にシーンチェンジ検出と
する過程を含むものである。
【００１５】又（８）第２の画像相関値を第１の閾値と
比較してシーンチェンジの有無を検出し、シーンチェン
ジ検出時に、次フレームの第２の画像相関値と第２の閾
値とを比較し、この第２の閾値を超えた時はフレーム・
シーンチェンジは判定し、超えない時はフィールド・シ
ーンチェンジと判定する過程を含むものである。即ち、
第２の画像相関値が２フレーム連続で大きい値となる場
合はフレーム・シーンチェンジの場合であり、１フレー
ムおいて大きい値となる場合はフィールド・シーンチェ
ンジの場合である。
比較してシーンチェンジの有無を検出し、シーンチェン
ジ検出時に、次フレームの第２の画像相関値と第２の閾
値とを比較し、この第２の閾値を超えた時はフレーム・
シーンチェンジは判定し、超えない時はフィールド・シ
ーンチェンジと判定する過程を含むものである。即ち、
第２の画像相関値が２フレーム連続で大きい値となる場
合はフレーム・シーンチェンジの場合であり、１フレー
ムおいて大きい値となる場合はフィールド・シーンチェ
ンジの場合である。
【００１６】又（９）第２の画像相関値と比較する第１
の閾値を、前フレームに於ける第１の画像相関値の大き
さに対応して、設定値より小さい値に変更する過程を含
むことができる。
の閾値を、前フレームに於ける第１の画像相関値の大き
さに対応して、設定値より小さい値に変更する過程を含
むことができる。
【００１７】
【発明の実施の形態】図１は本発明の第１の実施の形態
の要部説明図であり、１は第１の画像相関演算部、２は
第２の画像相関演算部、３は比較部、４はフレームメモ
リを示す。このフレームメモリ４は、入力画像信号を１
フレーム分蓄積し、画像相関演算部１に前フレームの画
像信号として入力する為のもので、１フレーム分の遅延
回路と等価のものである。
の要部説明図であり、１は第１の画像相関演算部、２は
第２の画像相関演算部、３は比較部、４はフレームメモ
リを示す。このフレームメモリ４は、入力画像信号を１
フレーム分蓄積し、画像相関演算部１に前フレームの画
像信号として入力する為のもので、１フレーム分の遅延
回路と等価のものである。
【００１８】入力画像信号は、階調数に対応したビット
数のディジタル化された画像信号であり、第１の画像相
関演算部１と、フレームメモリ４とに入力され、前述の
ように、フレームメモリ４には１フレーム分の画像信号
が蓄積される。そして、このフレームメモリ４から読出
した画像信号が前フレームの画像信号として画像相関演
算部１に入力される。従って、第１の画像相関演算部１
には、現フレームと前フレームとの画像信号が入力され
る。
数のディジタル化された画像信号であり、第１の画像相
関演算部１と、フレームメモリ４とに入力され、前述の
ように、フレームメモリ４には１フレーム分の画像信号
が蓄積される。そして、このフレームメモリ４から読出
した画像信号が前フレームの画像信号として画像相関演
算部１に入力される。従って、第１の画像相関演算部１
には、現フレームと前フレームとの画像信号が入力され
る。
【００１９】第１の画像相関演算部１は、現フレームと
前フレームとの画像信号の画面上の同一位置の画素対応
の輝度信号の差分の絶対値の１画面内の累積加算値を第
１の画像相関値として出力する。又第２の画像相関演算
部２は、第１の画像相関値のフレーム間の差分を第２の
画像相関値として出力する。比較部３は、第２の画像相
関値と第１の閾値Ｔｈ１と比較し、この第１の閾値Ｔｈ
１を第２の画像相関値が超えた時に、シーンチェンジの
検出信号を出力するものである。
前フレームとの画像信号の画面上の同一位置の画素対応
の輝度信号の差分の絶対値の１画面内の累積加算値を第
１の画像相関値として出力する。又第２の画像相関演算
部２は、第１の画像相関値のフレーム間の差分を第２の
画像相関値として出力する。比較部３は、第２の画像相
関値と第１の閾値Ｔｈ１と比較し、この第１の閾値Ｔｈ
１を第２の画像相関値が超えた時に、シーンチェンジの
検出信号を出力するものである。
【００２０】図２は本発明の実施の形態の画像処理装置
の説明図であり、１１はＡＤ変換器（Ａ／Ｄ）、１２は
符号化処理部、１３は第１の画像相関演算部１と第２の
画像相関演算部２と比較部３とを含むシーンチェンジ検
出部、１４は出力処理部、１５はフレーム内符号化部、
１６はフレーム間符号化部を示す。
の説明図であり、１１はＡＤ変換器（Ａ／Ｄ）、１２は
符号化処理部、１３は第１の画像相関演算部１と第２の
画像相関演算部２と比較部３とを含むシーンチェンジ検
出部、１４は出力処理部、１５はフレーム内符号化部、
１６はフレーム間符号化部を示す。
【００２１】テレビカメラ等からのアナログ画像信号を
ＡＤ変換器１１により解像度に対応したサンプリング周
波数のサンプリングクロック信号によりサンプリング
し、階調数に対応したビット数のディジタル信号に変換
して、符号化処理部１２に入力する。符号化処理部１２
は、フレーム内符号化部１５とフレーム間符号化部１６
とを含む場合を示している。なお、動き補償部，離散コ
サイン変換部，量子化部等を含む構成が一般的であり、
これらの図示は省略している。又出力処理部１４は、符
号化画像信号を伝送路に送出する場合、送信フォーマッ
トの編集やバッファメモリを介して一定速度で送信する
構成等を含み、蓄積する場合は、画像蓄積媒体に対応し
た処理を行うものである。
ＡＤ変換器１１により解像度に対応したサンプリング周
波数のサンプリングクロック信号によりサンプリング
し、階調数に対応したビット数のディジタル信号に変換
して、符号化処理部１２に入力する。符号化処理部１２
は、フレーム内符号化部１５とフレーム間符号化部１６
とを含む場合を示している。なお、動き補償部，離散コ
サイン変換部，量子化部等を含む構成が一般的であり、
これらの図示は省略している。又出力処理部１４は、符
号化画像信号を伝送路に送出する場合、送信フォーマッ
トの編集やバッファメモリを介して一定速度で送信する
構成等を含み、蓄積する場合は、画像蓄積媒体に対応し
た処理を行うものである。
【００２２】シーンチェンジ検出部１３は、符号化処理
部１２に入力された画像信号を基に、シーンチェンジを
検出し、その検出信号を符号化処理部１２に入力する。
それにより、符号化処理部１２は、フレーム間符号化部
１６からフレーム内符号化部１５に切替えて、画像信号
の符号化を行うものである。
部１２に入力された画像信号を基に、シーンチェンジを
検出し、その検出信号を符号化処理部１２に入力する。
それにより、符号化処理部１２は、フレーム間符号化部
１６からフレーム内符号化部１５に切替えて、画像信号
の符号化を行うものである。
【００２３】図３は本発明の実施の形態の第１の画像相
関演算部の説明図であり、２１−１〜２１−ｎは差回
路、２２−１〜２２−ｎは絶対値回路、２３は累積加算
器を示し、ＮＰ１〜ＮＰｎは現フレームの画素信号（画
素の輝度信号）、ＥＰ１〜ＥＰｎは前フレームの画素信
号（画素の輝度信号）を示し、ｎは１画面の画素数を示
す。
関演算部の説明図であり、２１−１〜２１−ｎは差回
路、２２−１〜２２−ｎは絶対値回路、２３は累積加算
器を示し、ＮＰ１〜ＮＰｎは現フレームの画素信号（画
素の輝度信号）、ＥＰ１〜ＥＰｎは前フレームの画素信
号（画素の輝度信号）を示し、ｎは１画面の画素数を示
す。
【００２４】現フレームの画素信号ＮＰ１〜ＮＰｎと前
フレームの画素信号ＥＰ１〜ＥＰｎとの差分を差回路２
１−１〜２１−ｎにより求め、絶対値回路２２−１〜２
２−ｎにより絶対値を求め、累積加算器２３により累積
加算して第１の相関値を出力する。この場合、差回路２
１−１〜２１−ｎと絶対値回路２２−１〜２２−ｎとは
画素対応に設けた場合を示すが、各フレームの画素信号
は、時系列上に配列されることになるから、それぞれ１
個の差回路と絶対値回路と、この絶対値回路の出力信号
を１フレーム期間にわたって累積加算する累積加算器と
により構成することができる。
フレームの画素信号ＥＰ１〜ＥＰｎとの差分を差回路２
１−１〜２１−ｎにより求め、絶対値回路２２−１〜２
２−ｎにより絶対値を求め、累積加算器２３により累積
加算して第１の相関値を出力する。この場合、差回路２
１−１〜２１−ｎと絶対値回路２２−１〜２２−ｎとは
画素対応に設けた場合を示すが、各フレームの画素信号
は、時系列上に配列されることになるから、それぞれ１
個の差回路と絶対値回路と、この絶対値回路の出力信号
を１フレーム期間にわたって累積加算する累積加算器と
により構成することができる。
【００２５】この第１の画像相関値は、現フレームと前
フレームと差分に対応した値となるから、シーンチェン
ジのみでなく、波面等の１画面中の画素対応の変化があ
る画面や、テレビカメラのズーミング等の画面の場合に
も大きい値となる。従って、この第１の画像相関値のみ
でシーンチェンジ検出を行うと誤検出を生じる可能性が
大きいものである。そこで、第２の画像相関演算部２に
より第２の画像相関値を求めて、第１の閾値Ｔｈ１と比
較するものである。
フレームと差分に対応した値となるから、シーンチェン
ジのみでなく、波面等の１画面中の画素対応の変化があ
る画面や、テレビカメラのズーミング等の画面の場合に
も大きい値となる。従って、この第１の画像相関値のみ
でシーンチェンジ検出を行うと誤検出を生じる可能性が
大きいものである。そこで、第２の画像相関演算部２に
より第２の画像相関値を求めて、第１の閾値Ｔｈ１と比
較するものである。
【００２６】図４は本発明の実施の形態の第２の画像相
関演算部の説明図であり、３１はメモリ、３２は差回路
を示す。第１の画像相関演算部１からの第１の画像相関
値を、メモリ３１と差回路３２とに入力する。メモリ３
１は１フレーム分遅延させる為のものであり、遅延回路
により構成することも可能である。従って、差回路３２
は、現フレームの第１の画像相関値と前フレームの第１
の画像相関値との差分を求めることになり、この差分を
第２の画像相関値として出力する。
関演算部の説明図であり、３１はメモリ、３２は差回路
を示す。第１の画像相関演算部１からの第１の画像相関
値を、メモリ３１と差回路３２とに入力する。メモリ３
１は１フレーム分遅延させる為のものであり、遅延回路
により構成することも可能である。従って、差回路３２
は、現フレームの第１の画像相関値と前フレームの第１
の画像相関値との差分を求めることになり、この差分を
第２の画像相関値として出力する。
【００２７】この第２の画像相関値は正又は負の値とな
るが、この第２の画像相関値の絶対値に対して第１の閾
値Ｔｈ１を超えているか否かを比較部３（図１参照）に
於いて比較する。或いは、正又は負の値の第２の画像相
関値を、第１の閾値Ｔｈ１として、正の閾値Ｔｈ１と負
の閾値Ｔｈ１とにより比較して、それぞれの閾値を超え
ているか否か判定する構成とすることもできる。そし
て、第２の画像相関値が第１の閾値Ｔｈ１を超えている
場合に、シーンチェンジの検出信号として出力する。こ
のシーンチェンジの検出信号により、符号化処理部１２
（図２参照）に於けるフレーム間符号化からフレーム内
符号化に切替えることになる。又はこのシーンチェンジ
検出信号により、連続している動画像のインデックス作
成を行うことも可能となる。
るが、この第２の画像相関値の絶対値に対して第１の閾
値Ｔｈ１を超えているか否かを比較部３（図１参照）に
於いて比較する。或いは、正又は負の値の第２の画像相
関値を、第１の閾値Ｔｈ１として、正の閾値Ｔｈ１と負
の閾値Ｔｈ１とにより比較して、それぞれの閾値を超え
ているか否か判定する構成とすることもできる。そし
て、第２の画像相関値が第１の閾値Ｔｈ１を超えている
場合に、シーンチェンジの検出信号として出力する。こ
のシーンチェンジの検出信号により、符号化処理部１２
（図２参照）に於けるフレーム間符号化からフレーム内
符号化に切替えることになる。又はこのシーンチェンジ
検出信号により、連続している動画像のインデックス作
成を行うことも可能となる。
【００２８】図５は本発明の他の実施の形態の第１の画
像相関演算部の説明図であり、図３と同一符号は同一部
分を示し、２４−１〜２４−ｎは閾値Ｔｈａと比較する
比較器を示す。この実施の形態に於いても、各フレーム
の画素信号は、時系列上に配列されることになるから、
差回路と絶対値回路と比較器とは、図示のように、画素
対応に設けることなく、それぞれ１個とすることができ
る。又比較器２４−１〜２４−ｎは、絶対値回路２２−
１〜２２−ｎの出力信号を、閾値Ｔｈａに相当する下位
の所定数ビットを下位方向にシフトした値を出力する構
成とすることも可能である。従って、差回路と絶対値回
路と比較器との機能を、プロセッサの演算機能を適用し
て実現することも可能である。
像相関演算部の説明図であり、図３と同一符号は同一部
分を示し、２４−１〜２４−ｎは閾値Ｔｈａと比較する
比較器を示す。この実施の形態に於いても、各フレーム
の画素信号は、時系列上に配列されることになるから、
差回路と絶対値回路と比較器とは、図示のように、画素
対応に設けることなく、それぞれ１個とすることができ
る。又比較器２４−１〜２４−ｎは、絶対値回路２２−
１〜２２−ｎの出力信号を、閾値Ｔｈａに相当する下位
の所定数ビットを下位方向にシフトした値を出力する構
成とすることも可能である。従って、差回路と絶対値回
路と比較器との機能を、プロセッサの演算機能を適用し
て実現することも可能である。
【００２９】又絶対値回路２２−１〜２２−ｎの出力信
号の中の閾値Ｔｈａを超えた値のみを累積加算器２３に
より累積加算することにより、第１画像相関値が極端に
大きくなることを回避することができる。それによっ
て、演算回路に於けるオーバーフローを防止することが
できる。
号の中の閾値Ｔｈａを超えた値のみを累積加算器２３に
より累積加算することにより、第１画像相関値が極端に
大きくなることを回避することができる。それによっ
て、演算回路に於けるオーバーフローを防止することが
できる。
【００３０】図６は本発明の第２の実施の形態の要部説
明図であり、４１は第１の画像相関演算部、４２は第２
の画像相関演算部、４３は比較部、４４はフレームメモ
リ、Ｔｈ１，Ｔｈ２は第１，第２の閾値を示す。図１と
同様の構成であるが、比較部４３が第１の閾値Ｔｈ１と
第２の画像相関値とを比較してシーンチェンジを検出し
た場合、次のフレームの第２の画像相関値と第２の閾値
Ｔｈ２と比較して、フレーム・シーンチェンジかフィー
ルド・シーンチェンジかを判定する構成を有する点が相
違する。
明図であり、４１は第１の画像相関演算部、４２は第２
の画像相関演算部、４３は比較部、４４はフレームメモ
リ、Ｔｈ１，Ｔｈ２は第１，第２の閾値を示す。図１と
同様の構成であるが、比較部４３が第１の閾値Ｔｈ１と
第２の画像相関値とを比較してシーンチェンジを検出し
た場合、次のフレームの第２の画像相関値と第２の閾値
Ｔｈ２と比較して、フレーム・シーンチェンジかフィー
ルド・シーンチェンジかを判定する構成を有する点が相
違する。
【００３１】図７は本発明の第２の実施の形態の比較部
の説明図であり、５１は第１比較器、５２は第２比較
器、５３は１フレーム分の遅延回路（Ｄ）、Ｔｈ１，Ｔ
ｈ２は第１，第２の閾値を示す。なお、第１，第２の閾
値Ｔｈ１，Ｔｈ２を同一の閾値とすることも可能であ
る。遅延回路５３は１フレーム分の遅延を与えるもので
あるから、メモリによって構成することも勿論可能であ
る。
の説明図であり、５１は第１比較器、５２は第２比較
器、５３は１フレーム分の遅延回路（Ｄ）、Ｔｈ１，Ｔ
ｈ２は第１，第２の閾値を示す。なお、第１，第２の閾
値Ｔｈ１，Ｔｈ２を同一の閾値とすることも可能であ
る。遅延回路５３は１フレーム分の遅延を与えるもので
あるから、メモリによって構成することも勿論可能であ
る。
【００３２】又第１比較器５１の機能は、図１の比較部
３の機能と同様に、第２の画像相関値と第１の閾値Ｔｈ
１と比較して、シーンチェンジを検出するものである。
このシーンチェンジ検出信号を遅延回路５３により１フ
レーム分遅延させて、第２比較器５２にイネーブル信号
として加える。従って、第１比較器５１によりシーンチ
ェンジ検出を行ったフレームの次のフレームについて第
２比較器５２により第２の画像相関値と第２の閾値Ｔｈ
２と比較し、この第２の閾値Ｔｈ２を超えた場合は、奇
フィールドと偶フィールドとの間にシーンチェンジが発
生したことを示すフィールド・シーンチェンジ検出信号
を出力し、第２の閾値Ｔｈ２を超えない場合は、フレー
ム間にシーンチェンジが発生したことを示すフレーム・
シーンチェンジ検出信号を出力する。
３の機能と同様に、第２の画像相関値と第１の閾値Ｔｈ
１と比較して、シーンチェンジを検出するものである。
このシーンチェンジ検出信号を遅延回路５３により１フ
レーム分遅延させて、第２比較器５２にイネーブル信号
として加える。従って、第１比較器５１によりシーンチ
ェンジ検出を行ったフレームの次のフレームについて第
２比較器５２により第２の画像相関値と第２の閾値Ｔｈ
２と比較し、この第２の閾値Ｔｈ２を超えた場合は、奇
フィールドと偶フィールドとの間にシーンチェンジが発
生したことを示すフィールド・シーンチェンジ検出信号
を出力し、第２の閾値Ｔｈ２を超えない場合は、フレー
ム間にシーンチェンジが発生したことを示すフレーム・
シーンチェンジ検出信号を出力する。
【００３３】図８は本発明の実施の形態のノンインター
レース方式に於けるシーンチェンジ検出の説明図であ
り、（Ａ）に示すフレーム番号ａ，ａ＋１，ａ＋２，・
・・・のフレームに於いて、画像相関値１，２（第１，
第２の画像相関値）とシーンチェンジの検出とを、シー
ンチェンジ前後の画面の動きが少ない場合を（Ｂ）、シ
ーンチェンジ前後の画面の動きが大きい場合を（Ｃ）と
して示す。
レース方式に於けるシーンチェンジ検出の説明図であ
り、（Ａ）に示すフレーム番号ａ，ａ＋１，ａ＋２，・
・・・のフレームに於いて、画像相関値１，２（第１，
第２の画像相関値）とシーンチェンジの検出とを、シー
ンチェンジ前後の画面の動きが少ない場合を（Ｂ）、シ
ーンチェンジ前後の画面の動きが大きい場合を（Ｃ）と
して示す。
【００３４】即ち、（Ｂ）に示す場合、静止状態に近い
動きの少ない画面では、フレーム間差分が小さいので、
第１の画像相関値１は「小」として示すように小さい値
となる。そして、フレーム間の変化も少ないから、第２
の画像相関値２も「小」として示すように小さい値とな
る。例えば、フレーム番号ａ＋３，ａ＋４間にシーンチ
ェンジがある場合、フレーム番号ａ＋４の現フレーム
と、フレーム番号ａ＋３の前フレームとのフレーム間差
分は大きくなり、第１の画像相関値１は「大」として示
すように大きくなる。
動きの少ない画面では、フレーム間差分が小さいので、
第１の画像相関値１は「小」として示すように小さい値
となる。そして、フレーム間の変化も少ないから、第２
の画像相関値２も「小」として示すように小さい値とな
る。例えば、フレーム番号ａ＋３，ａ＋４間にシーンチ
ェンジがある場合、フレーム番号ａ＋４の現フレーム
と、フレーム番号ａ＋３の前フレームとのフレーム間差
分は大きくなり、第１の画像相関値１は「大」として示
すように大きくなる。
【００３５】このシーンチェンジ後の画面も静止状態に
近い動きの少ない場合、第１の画像相関値１は小さい値
となる。そして、第１の画像相関値１が「大」となる
と、第２の画像相関値２は、フレーム番号ａ＋３，ａ＋
４に於ける第１の画像相関値１の差分により「＋大」と
して示すように正の大きい値となる。従って、この第２
の画像相関値２と第１の閾値Ｔｈ１とを比較することに
より、シーンチェンジを検出することができる。
近い動きの少ない場合、第１の画像相関値１は小さい値
となる。そして、第１の画像相関値１が「大」となる
と、第２の画像相関値２は、フレーム番号ａ＋３，ａ＋
４に於ける第１の画像相関値１の差分により「＋大」と
して示すように正の大きい値となる。従って、この第２
の画像相関値２と第１の閾値Ｔｈ１とを比較することに
より、シーンチェンジを検出することができる。
【００３６】又このフレーム番号ａ＋４の次のフレーム
番号ａ＋５に於いては、前述のように、シーンチェンジ
後の画面が静止状態に近い動きの少ないものであるか
ら、第１の画像相関値１は「小」として示すように小さ
い値となる。その場合、第２の画像相関値２は、フレー
ム番号ａ＋４，ａ＋５に於ける第１の画像相関値１の差
分に相当するから、「−大」として示すように、大きい
負の値となる。即ち、シーンチェンジがあった場合の先
頭フレームに於ける第２の画像相関値が「＋大」として
示すように大きくなるから、前述のように、第１の閾値
Ｔｈ１と比較することにより、シーンチェンジ検出を行
うことができる。
番号ａ＋５に於いては、前述のように、シーンチェンジ
後の画面が静止状態に近い動きの少ないものであるか
ら、第１の画像相関値１は「小」として示すように小さ
い値となる。その場合、第２の画像相関値２は、フレー
ム番号ａ＋４，ａ＋５に於ける第１の画像相関値１の差
分に相当するから、「−大」として示すように、大きい
負の値となる。即ち、シーンチェンジがあった場合の先
頭フレームに於ける第２の画像相関値が「＋大」として
示すように大きくなるから、前述のように、第１の閾値
Ｔｈ１と比較することにより、シーンチェンジ検出を行
うことができる。
【００３７】又（Ｃ）に示す場合、フレーム番号ａ，ａ
＋１，ａ＋２，・・・に対応してフレーム番号をｂ，ｂ
＋１，ｂ＋２，・・・として示し、シーンチェンジが発
生する前は、動きが激しい画面であることにより、第１
の画像相関値１は「中」として示すように、動きが少な
い場合に比較して大きい値となる。しかし、第２の画像
相関値２は、第１の画像相関値１のフレーム間差分に相
当するから、「小」として示すように小さい値となる。
＋１，ａ＋２，・・・に対応してフレーム番号をｂ，ｂ
＋１，ｂ＋２，・・・として示し、シーンチェンジが発
生する前は、動きが激しい画面であることにより、第１
の画像相関値１は「中」として示すように、動きが少な
い場合に比較して大きい値となる。しかし、第２の画像
相関値２は、第１の画像相関値１のフレーム間差分に相
当するから、「小」として示すように小さい値となる。
【００３８】フレーム番号ｂ＋３，ｂ＋４（フレーム番
号ａ＋３，ａ＋４に相当）間にシーンチェンジがある
と、第１の画像相関値２は「大」として示すように大き
い値となる。それ以降のフレームでは、動きが激しい画
面であることにより、「中」として示す値となる。又第
２の画像相関値２は、フレーム番号ｂ＋３，ｂ＋４に於
ける第１の画像相関値１の差分に相当するから「＋大」
として示すように大きくなる。従って、第１の閾値Ｔｈ
１と比較することにより、シーンチェンジを検出するこ
とができる。
号ａ＋３，ａ＋４に相当）間にシーンチェンジがある
と、第１の画像相関値２は「大」として示すように大き
い値となる。それ以降のフレームでは、動きが激しい画
面であることにより、「中」として示す値となる。又第
２の画像相関値２は、フレーム番号ｂ＋３，ｂ＋４に於
ける第１の画像相関値１の差分に相当するから「＋大」
として示すように大きくなる。従って、第１の閾値Ｔｈ
１と比較することにより、シーンチェンジを検出するこ
とができる。
【００３９】このシーンチェンジ後の第１の画像相関値
１も「中」として示すように比較的大きい値となる。そ
して、フレーム番号ｂ＋５に於いては、フレーム番号ａ
＋４の前フレームの第１の画像相関値１と、現フレーム
の第１の画像相関値１との差分に相当する第２の画像相
関値２は「−大」として示すように負の大きい値とな
る。即ち、シーンチェンジがあった場合の先頭フレーム
に於ける第２の画像相関値が「＋大」として示すように
正の大きい値となるから、前述のように、第１の閾値Ｔ
ｈ１と比較することにより、シーンチェンジ検出を行う
ことができる。
１も「中」として示すように比較的大きい値となる。そ
して、フレーム番号ｂ＋５に於いては、フレーム番号ａ
＋４の前フレームの第１の画像相関値１と、現フレーム
の第１の画像相関値１との差分に相当する第２の画像相
関値２は「−大」として示すように負の大きい値とな
る。即ち、シーンチェンジがあった場合の先頭フレーム
に於ける第２の画像相関値が「＋大」として示すように
正の大きい値となるから、前述のように、第１の閾値Ｔ
ｈ１と比較することにより、シーンチェンジ検出を行う
ことができる。
【００４０】図９は本発明の実施の形態のインターレー
ス方式に於けるシーンチェンジの説明図であり、フレー
ム番号ｃ，ｃ＋１，ｃ＋２，・・・について、第１の画
像相関値１と第２の画像相関値２とシーンチェンジの検
出とを示す。例えば、フレーム番号ｃ＋４の奇フィール
ドと偶フィールドとの間にシーンチェンジが発生した場
合、フレーム番号ｃ＋３の前フレームとフレーム番号ｃ
＋４の現フレームとのフレーム間差分を基に求めた第１
の画像相関値１は「大」として示すように大きい値とな
る。次のフレーム番号ｃ＋５の奇フィールドは、フレー
ム番号ｃ＋４の奇フィールドとシーンが異なることによ
り、フレーム番号ｃ＋５に於ける第１の画像相関値１も
「大」として示すように大きい値となる。
ス方式に於けるシーンチェンジの説明図であり、フレー
ム番号ｃ，ｃ＋１，ｃ＋２，・・・について、第１の画
像相関値１と第２の画像相関値２とシーンチェンジの検
出とを示す。例えば、フレーム番号ｃ＋４の奇フィール
ドと偶フィールドとの間にシーンチェンジが発生した場
合、フレーム番号ｃ＋３の前フレームとフレーム番号ｃ
＋４の現フレームとのフレーム間差分を基に求めた第１
の画像相関値１は「大」として示すように大きい値とな
る。次のフレーム番号ｃ＋５の奇フィールドは、フレー
ム番号ｃ＋４の奇フィールドとシーンが異なることによ
り、フレーム番号ｃ＋５に於ける第１の画像相関値１も
「大」として示すように大きい値となる。
【００４１】又第２の画像相関値２は、フレーム番号ｃ
＋４に於いて「＋大」となり、前述のように、第１の閾
値Ｔｈ１と比較することにより、シーンチェンジを検出
することができる。そして、次のフレーム番号ｃ＋５に
於いては、フレーム番号ｃ＋４，ｃ＋５に於ける第１の
画像相関値１が共に「大」として示す大きい値であるか
ら、それらの差分は「小」として示すように小さい値と
なる。そして、フレーム番号ｃ＋６に於ける第２の画像
相関値２は、フレーム番号ｃ＋５に於ける第１の画像相
関値が「大」であるが、フレーム番号ｃ＋６に於ける第
１の画像相関値１は「小」として示すように小さい値と
なるから、「−大」として示すように大きい値となる。
＋４に於いて「＋大」となり、前述のように、第１の閾
値Ｔｈ１と比較することにより、シーンチェンジを検出
することができる。そして、次のフレーム番号ｃ＋５に
於いては、フレーム番号ｃ＋４，ｃ＋５に於ける第１の
画像相関値１が共に「大」として示す大きい値であるか
ら、それらの差分は「小」として示すように小さい値と
なる。そして、フレーム番号ｃ＋６に於ける第２の画像
相関値２は、フレーム番号ｃ＋５に於ける第１の画像相
関値が「大」であるが、フレーム番号ｃ＋６に於ける第
１の画像相関値１は「小」として示すように小さい値と
なるから、「−大」として示すように大きい値となる。
【００４２】そこで、図６に示す比較部４３は、図７に
示すように、第１の閾値Ｔｈ１と第２の閾値Ｔｈ２とに
より第２の画像相関値を比較し、第１比較器５１に於い
て第２の画像相関値が第１の閾値Ｔｈ１を超えた時にシ
ーンチェンジ検出信号を出力し、このシーンチェンジ検
出信号を１フレーム遅延させて第２比較器５２のイネー
ブル信号とし、第２の画像相関値と第２の閾値Ｔｈ２と
を比較し、第２の閾値Ｔｈ２を超えた時、即ち、図８の
フレーム番号ａ＋４，ａ＋５又はｂ＋４，ｂ＋５のよう
に、シーンチェンジ検出後のフレームに於ける第２の画
像相関値が大きい値を示す時は、フレーム・シーンチェ
ンジ検出信号を出力する。又第２の画像相関値が第２の
閾値Ｔｈ２を超えない場合、即ち、図９のフレーム番号
ｃ＋４，ｃ＋５のように、シーンチェンジ検出後のフレ
ームに於ける第２の画像相関値が小さい値を示す時は、
フィールド・シーンチェンジ検出信号を出力する。
示すように、第１の閾値Ｔｈ１と第２の閾値Ｔｈ２とに
より第２の画像相関値を比較し、第１比較器５１に於い
て第２の画像相関値が第１の閾値Ｔｈ１を超えた時にシ
ーンチェンジ検出信号を出力し、このシーンチェンジ検
出信号を１フレーム遅延させて第２比較器５２のイネー
ブル信号とし、第２の画像相関値と第２の閾値Ｔｈ２と
を比較し、第２の閾値Ｔｈ２を超えた時、即ち、図８の
フレーム番号ａ＋４，ａ＋５又はｂ＋４，ｂ＋５のよう
に、シーンチェンジ検出後のフレームに於ける第２の画
像相関値が大きい値を示す時は、フレーム・シーンチェ
ンジ検出信号を出力する。又第２の画像相関値が第２の
閾値Ｔｈ２を超えない場合、即ち、図９のフレーム番号
ｃ＋４，ｃ＋５のように、シーンチェンジ検出後のフレ
ームに於ける第２の画像相関値が小さい値を示す時は、
フィールド・シーンチェンジ検出信号を出力する。
【００４３】従って、図６，図７に示す構成により、ノ
ンインターレース方式とインターレース方式との何れの
方式に対しても、フレーム・シーンチェンジを検出する
ことができると共に、インターレース方式に於けるフィ
ールド・シーンチェンジを検出することができる。又第
２の画像相関値が、正負の値となるから、絶対値として
第２の閾値Ｔｈ２と比較するか、又は正の第２の閾値と
負の第２の閾値と比較する構成とし、又シーンチェンジ
検出フレームの次のフレームに於ける第２の画像相関値
と第２の閾値との比較を行うと共に、更に次のフレーム
に於ける第２の画像相関値と第２の閾値との比較を行う
構成を付加し、第２の画像相関値が、第２の閾値を超え
た後、１フレーム分おいたフレームに於いて第２の閾値
を超えた時にフィールド・シーンチェンジ検出を行うよ
うにすることも可能である。
ンインターレース方式とインターレース方式との何れの
方式に対しても、フレーム・シーンチェンジを検出する
ことができると共に、インターレース方式に於けるフィ
ールド・シーンチェンジを検出することができる。又第
２の画像相関値が、正負の値となるから、絶対値として
第２の閾値Ｔｈ２と比較するか、又は正の第２の閾値と
負の第２の閾値と比較する構成とし、又シーンチェンジ
検出フレームの次のフレームに於ける第２の画像相関値
と第２の閾値との比較を行うと共に、更に次のフレーム
に於ける第２の画像相関値と第２の閾値との比較を行う
構成を付加し、第２の画像相関値が、第２の閾値を超え
た後、１フレーム分おいたフレームに於いて第２の閾値
を超えた時にフィールド・シーンチェンジ検出を行うよ
うにすることも可能である。
【００４４】又前述の第１の閾値Ｔｈ１と第２の閾値Ｔ
ｈ２とは同一の値とすることも可能であり、又第１の閾
値Ｔｈ１を第１の画像相関値の大きさに対応して変更す
ることができる。例えば、現フレーム番号をｋとする
と、前フレーム番号は（ｋ−１）となるから、前フレー
ムの第１の画像相関値をＦ（ｋ−１）とし、係数をα
（０≦α＜１）として、設定値を第１の閾値をＴｈ１、
変更した第１の閾値をＴｈ１’とすると、Ｔｈ１’＝Ｔ
ｈ１−Ｆ（ｋ−１）・αの演算により、第１の閾値Ｔｈ
１’を設定値Ｔｈ１より小さい値に変更して、シーンチ
ェンジ検出を行うことができる。
ｈ２とは同一の値とすることも可能であり、又第１の閾
値Ｔｈ１を第１の画像相関値の大きさに対応して変更す
ることができる。例えば、現フレーム番号をｋとする
と、前フレーム番号は（ｋ−１）となるから、前フレー
ムの第１の画像相関値をＦ（ｋ−１）とし、係数をα
（０≦α＜１）として、設定値を第１の閾値をＴｈ１、
変更した第１の閾値をＴｈ１’とすると、Ｔｈ１’＝Ｔ
ｈ１−Ｆ（ｋ−１）・αの演算により、第１の閾値Ｔｈ
１’を設定値Ｔｈ１より小さい値に変更して、シーンチ
ェンジ検出を行うことができる。
【００４５】即ち、第１の画像相関値が大きいことは、
シーンチェンジの可能性が大きいことを示すから、第２
の画像相関値と比較する第１の閾値Ｔｈ１を低い値に変
更して、シーンチェンジ検出を確実に行わせるものであ
る。なお、変更した第１の閾値Ｔｈ１’の変化が余り大
きくならないように、係数αは１より小さく、０に近い
値を選定することができる。又この第１の閾値Ｔｈ１’
は、比較的簡単な演算処理で得ることができる。又図示
を省略しているが、リードオンリメモリ等を用い、第１
の画像相関値をアドレスとしてアクセスし、第１の閾値
Ｔｈ１’を読出す構成を適用することも可能である。
シーンチェンジの可能性が大きいことを示すから、第２
の画像相関値と比較する第１の閾値Ｔｈ１を低い値に変
更して、シーンチェンジ検出を確実に行わせるものであ
る。なお、変更した第１の閾値Ｔｈ１’の変化が余り大
きくならないように、係数αは１より小さく、０に近い
値を選定することができる。又この第１の閾値Ｔｈ１’
は、比較的簡単な演算処理で得ることができる。又図示
を省略しているが、リードオンリメモリ等を用い、第１
の画像相関値をアドレスとしてアクセスし、第１の閾値
Ｔｈ１’を読出す構成を適用することも可能である。
【００４６】図１０は本発明の実施の形態の画像相関値
の説明図であり、（Ａ）は第１の画像相関値、（Ｂ）は
７回のシーンチェンジ時の第２の画像相関値を実測値を
示し、横軸は０〜４０００のフレーム番号、縦軸は画素
数に従って正規化した画像相関値を示す。（Ａ）に於け
る第１の画像相関値の最初のピークは、前フレームが零
であることによるフレーム間差分によるものであり、又
（Ｂ）に示す第２の画像相関値もそれに対応して大きい
値となる。又第２の画像相関値は、第１の画像相関値の
フレーム間差分に相当するから、正負の値となる。そし
て、第１の画像相関値が画面の動きに対応して大きく変
化するが、第２の画像相関値は、シーンチェンジ時の
み、正負の大きい値となり、動きの激しい画面の場合
は、ノイズ状の小さい値となる。
の説明図であり、（Ａ）は第１の画像相関値、（Ｂ）は
７回のシーンチェンジ時の第２の画像相関値を実測値を
示し、横軸は０〜４０００のフレーム番号、縦軸は画素
数に従って正規化した画像相関値を示す。（Ａ）に於け
る第１の画像相関値の最初のピークは、前フレームが零
であることによるフレーム間差分によるものであり、又
（Ｂ）に示す第２の画像相関値もそれに対応して大きい
値となる。又第２の画像相関値は、第１の画像相関値の
フレーム間差分に相当するから、正負の値となる。そし
て、第１の画像相関値が画面の動きに対応して大きく変
化するが、第２の画像相関値は、シーンチェンジ時の
み、正負の大きい値となり、動きの激しい画面の場合
は、ノイズ状の小さい値となる。
【００４７】本発明は、前述の各実施の形態にのみ限定
されるものではなく、種々付加変更することが可能であ
る。例えば、第１の画像相関値は、１画面の全画素対応
のフレーム間差分ではなく、１画素おき等の１画面の画
素の間引き処理により演算量を削減することも可能であ
る。又符号化処理部に於けるフレーム間差分を求める機
能を利用して第１の画像相関値を求めることも可能であ
る。又前述のように、プロセッサの演算機能によって、
前述のシーンチェンジ検出の機能を実現することも可能
である。
されるものではなく、種々付加変更することが可能であ
る。例えば、第１の画像相関値は、１画面の全画素対応
のフレーム間差分ではなく、１画素おき等の１画面の画
素の間引き処理により演算量を削減することも可能であ
る。又符号化処理部に於けるフレーム間差分を求める機
能を利用して第１の画像相関値を求めることも可能であ
る。又前述のように、プロセッサの演算機能によって、
前述のシーンチェンジ検出の機能を実現することも可能
である。
【００４８】
【発明の効果】以上説明したように、本発明は、画素対
応のフレーム間差分を累積加算した値に相当する第１の
画像相関値を求め、この第１の画像相関値のフレーム間
差分に相当する第２の画像相関値を求め、この第２の画
像相関値と第１の閾値Ｔｈ１と比較して、この第１の閾
値Ｔｈ１を超えた時に、シーンチェンジ検出とするもの
で、動きの激しい画面の場合に第１の画像相関値が大き
くなったとしても、実際のシーンチェンジでない場合
は、第１の画像相関値のフレーム間差分に相当する第２
の画像相関値が小さい値となり、第１の閾値Ｔｈ１を超
えないことになり、従って、誤検出が生じない利点があ
る。
応のフレーム間差分を累積加算した値に相当する第１の
画像相関値を求め、この第１の画像相関値のフレーム間
差分に相当する第２の画像相関値を求め、この第２の画
像相関値と第１の閾値Ｔｈ１と比較して、この第１の閾
値Ｔｈ１を超えた時に、シーンチェンジ検出とするもの
で、動きの激しい画面の場合に第１の画像相関値が大き
くなったとしても、実際のシーンチェンジでない場合
は、第１の画像相関値のフレーム間差分に相当する第２
の画像相関値が小さい値となり、第１の閾値Ｔｈ１を超
えないことになり、従って、誤検出が生じない利点があ
る。
【００４９】又インターレース方式に於ける奇フィール
ドと偶フィールドとの間にシーンチェンジが発生してい
る場合でも、第２の画像相関値が第２の閾値Ｔｈ２より
大きくなるフレームがシーンチェンジ検出フレームに連
続しているか否かによって、フレーム・シーンチェンジ
とフィールド・シーンチェンジとを検出することができ
るから、ノンインターレース方式に対するシーンチェン
ジ検出と兼用することも可能となる。従って、動画像イ
ンデックス作成や画像信号の符号化に於けるフレーム内
符号化への切替えを、正確なシーンチェンジ検出によっ
て行うことができる。
ドと偶フィールドとの間にシーンチェンジが発生してい
る場合でも、第２の画像相関値が第２の閾値Ｔｈ２より
大きくなるフレームがシーンチェンジ検出フレームに連
続しているか否かによって、フレーム・シーンチェンジ
とフィールド・シーンチェンジとを検出することができ
るから、ノンインターレース方式に対するシーンチェン
ジ検出と兼用することも可能となる。従って、動画像イ
ンデックス作成や画像信号の符号化に於けるフレーム内
符号化への切替えを、正確なシーンチェンジ検出によっ
て行うことができる。
【図１】本発明の第１の実施の形態の要部説明図であ
る。
る。
【図２】本発明の実施の形態の画像処理装置の説明図で
ある。
ある。
【図３】本発明の実施の形態の第１の画像相関演算部の
説明図である。
説明図である。
【図４】本発明の実施の形態の第２の画像相関演算部の
説明図である。
説明図である。
【図５】本発明の他の実施の形態の第１の画像相関演算
部の説明図である。
部の説明図である。
【図６】本発明の第２の実施の形態の要部説明図であ
る。
る。
【図７】本発明の第２の実施の形態の比較部の説明図で
ある。
ある。
【図８】本発明の実施の形態のノンインターレース方式
に於けるシーンチェンジ検出の説明図である。
に於けるシーンチェンジ検出の説明図である。
【図９】本発明の実施の形態のインターレース方式に於
けるシーンチェンジ検出の説明図である。
けるシーンチェンジ検出の説明図である。
【図１０】本発明の実施の形態の画像相関値の説明図で
ある。
ある。
【図１１】ノンインターレースとインターレースとの説
明図である。
明図である。
【図１２】フレーム・シーンチェンジとフィールド・シ
ーンチェンジとの説明図である。
ーンチェンジとの説明図である。
１ 第１の画像相関演算部 ２ 第２の画像相関演算部 ３ 比較部 ４ フレームメモリ Ｔｈ１ 第１の閾値
───────────────────────────────────────────────────── フロントページの続き (72)発明者 浜野 崇 神奈川県川崎市中原区上小田中４丁目１番 １号 富士通株式会社内 (72)発明者 酒井 潔 神奈川県川崎市中原区上小田中４丁目１番 １号 富士通株式会社内 Ｆターム(参考） 5C059 KK25 LB13 MA00 MA04 MA05 MB04 NN27 NN43 PP26 RC17 RC38 SS01 TA32 TB04 TC14 TD12 UA02 UA38 5L096 BA08 DA02 FA34 GA08 GA51 HA02 JA11
Claims (9)
- 【請求項１】 動画像の入力画像信号を基にシーンチェ
ンジを検出する画像処理装置に於いて、 前記入力画像信号のフレーム間の第１の画像相関値を求
める第１の画像相関演算部と、 前記第１の画像相関値のフレーム間の差分に相当する第
２の画像相関値を求める第２の画像相関演算部と、 前記第２の画像相関値と第１の閾値とを比較してシーン
チェンジ検出信号を出力する比較部とを備えたことを特
徴とする画像処理装置。 - 【請求項２】 前記第１の画像相関演算部は、入力画像
信号の前フレームと現フレームとの画素対応の差分を求
める差回路と、該差回路の出力信号の絶対値を求める絶
対値回路と、該絶対値回路の出力信号を１フレーム期間
について累積加算して第１の画像相関値として出力する
累積加算器とを含むことを特徴とする請求項１記載の画
像処理装置。 - 【請求項３】 前記第１の画像相関演算部は、入力画像
信号の前フレームと現フレームとの画素対応の差分を求
める差回路と、該差回路の出力信号の絶対値を求める絶
対値回路と、該絶対値回路の出力信号と閾値とを比較し
て該閾値を超えた前記絶対値回路出力信号を出力する比
較器と、該比較器の出力信号を１フレーム期間について
累積加算して第１の画像相関値を出力する累積加算器と
を含むことを特徴とする請求項１記載の画像処理装置。 - 【請求項４】 前記第２の画像相関演算部は、前記第１
の画像相関演算部からの前フレームの第１の画像相関値
を記憶するメモリと、該メモリから読出した前フレーム
の第１の画像相関値と現フレームの第１の画像相関値と
の差分を第２の画像相関値として出力する差回路とを含
むことを特徴とする請求項１記載の画像処理装置。 - 【請求項５】 前記比較部は、前記第２の画像相関値と
前記第１の閾値とを比較して第１の閾値を超えた時にシ
ーンチェンジ検出信号を出力する第１比較器と、該第１
比較器からのシーンチェンジ検出信号を１フレーム分遅
延させる遅延回路と、該遅延回路により遅延されたシー
ンチェンジ検出信号によって、前記第２の画像相関値と
第２の閾値とを比較し、該第２の閾値を超えない時にフ
ィールド・シーンチェンジ検出信号を出力し、該第２の
閾値を超えた時にフレーム・シーンチェンジ検出信号を
出力する第２比較器とを含むことを特徴とする請求項１
記載の画像処理装置。 - 【請求項６】 前記比較部は、前記第２の画像相関値と
比較する前記第１の閾値を前フレームに於ける前記第１
の画像相関値の大きさに対応して変化させる構成を備え
たことを特徴とする請求項１記載の画像処理装置。 - 【請求項７】 動画像の入力画像信号を基にシーンチェ
ンジを検出する方法に於いて、 前記入力画像信号の現フレームと前フレームとの画素対
応の差分の累積加算により第１の画像相関値を求め、 該第１の画像相関値のフレーム間差分により第２の画像
相関値を求め、 該第２の画像相関値が第１の閾値を超えている時にシー
ンチェンジ検出とする過程を含むことを特徴とするシー
ンチェンジ検出方法。 - 【請求項８】 前記第２の画像相関値を第１の閾値と比
較してシーンチェンジの有無を検出し、シーンチェンジ
検出時に、次のフレームに於ける前記第２の画像相関値
と第２の閾値と比較し、シーンチェンジ検出後のフレー
ムの第２の画像相関値が前記第２の閾値を超えた時にフ
レーム・シーンチェンジと判定し、超えない時にフィー
ルド・シーンチェンジと判定する過程を含むことを特徴
とする請求項７記載のシーンチェンジ検出方法。 - 【請求項９】 前記第２の画像相関値と比較する前記第
１の閾値を、前フレームに於ける前記第１の画像相関値
の大きさに対応して、設定値より小さくなるように変更
する過程を含むことを特徴とする請求項７又は８記載の
シーンチェンジ検出方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13366599A JP2000324499A (ja) | 1999-05-14 | 1999-05-14 | 画像処理装置及びシーンチェンジ検出方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13366599A JP2000324499A (ja) | 1999-05-14 | 1999-05-14 | 画像処理装置及びシーンチェンジ検出方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000324499A true JP2000324499A (ja) | 2000-11-24 |
Family
ID=15110065
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13366599A Withdrawn JP2000324499A (ja) | 1999-05-14 | 1999-05-14 | 画像処理装置及びシーンチェンジ検出方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000324499A (ja) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003299104A (ja) * | 2002-04-03 | 2003-10-17 | Mitsubishi Electric Corp | 符号化装置、および符号化方法 |
| KR20040006065A (ko) * | 2002-07-09 | 2004-01-24 | 삼성전자주식회사 | 장면전환검출장치 및 그 방법 |
| KR100441963B1 (ko) * | 2001-03-26 | 2004-07-27 | 주식회사 코난테크놀로지 | 장면전환 검출방법 |
| JP2005241997A (ja) * | 2004-02-26 | 2005-09-08 | Sega Corp | 音声解析装置、音声解析方法及び音声解析プログラム |
| JP2008085540A (ja) * | 2006-09-27 | 2008-04-10 | Sony Corp | プログラム、検出方法、及び検出装置 |
| JP2008098734A (ja) * | 2006-10-06 | 2008-04-24 | Sharp Corp | 動画像符号化装置、プログラム及び動画像符号化方法 |
| WO2008082188A1 (en) * | 2006-12-29 | 2008-07-10 | Lime Bt Solution Co., Ltd | Cognitive method for object of moving picture |
| US7558424B2 (en) | 2006-02-17 | 2009-07-07 | Fujitsu Microelectronics Limited | Scene change determination device/method and data transfer device/method |
| JP2010177731A (ja) * | 2009-01-27 | 2010-08-12 | Nikon Corp | 画像再生装置及び撮像装置 |
| US8254677B2 (en) | 2006-09-27 | 2012-08-28 | Sony Corporation | Detection apparatus, detection method, and computer program |
-
1999
- 1999-05-14 JP JP13366599A patent/JP2000324499A/ja not_active Withdrawn
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100441963B1 (ko) * | 2001-03-26 | 2004-07-27 | 주식회사 코난테크놀로지 | 장면전환 검출방법 |
| JP2003299104A (ja) * | 2002-04-03 | 2003-10-17 | Mitsubishi Electric Corp | 符号化装置、および符号化方法 |
| KR20040006065A (ko) * | 2002-07-09 | 2004-01-24 | 삼성전자주식회사 | 장면전환검출장치 및 그 방법 |
| JP2005241997A (ja) * | 2004-02-26 | 2005-09-08 | Sega Corp | 音声解析装置、音声解析方法及び音声解析プログラム |
| US7680660B2 (en) | 2004-02-26 | 2010-03-16 | Sega Corporation | Voice analysis device, voice analysis method and voice analysis program |
| US7558424B2 (en) | 2006-02-17 | 2009-07-07 | Fujitsu Microelectronics Limited | Scene change determination device/method and data transfer device/method |
| JP2008085540A (ja) * | 2006-09-27 | 2008-04-10 | Sony Corp | プログラム、検出方法、及び検出装置 |
| JP4662169B2 (ja) * | 2006-09-27 | 2011-03-30 | ソニー株式会社 | プログラム、検出方法、及び検出装置 |
| US8254677B2 (en) | 2006-09-27 | 2012-08-28 | Sony Corporation | Detection apparatus, detection method, and computer program |
| JP2008098734A (ja) * | 2006-10-06 | 2008-04-24 | Sharp Corp | 動画像符号化装置、プログラム及び動画像符号化方法 |
| WO2008082188A1 (en) * | 2006-12-29 | 2008-07-10 | Lime Bt Solution Co., Ltd | Cognitive method for object of moving picture |
| JP2010177731A (ja) * | 2009-01-27 | 2010-08-12 | Nikon Corp | 画像再生装置及び撮像装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3563422B2 (ja) | フィルム／ビデオ検出器 | |
| US5387947A (en) | Motion vector detecting method of a video signal | |
| JP4001400B2 (ja) | 動きベクトル検出方法及び動きベクトル検出装置 | |
| US6816617B2 (en) | Motion vector searcher and motion vector search method as well as moving picture coding apparatus | |
| US6931064B2 (en) | Motion picture data converter, and computer product | |
| JPH09130812A (ja) | 重複ビデオフィールドの検出方法及び装置、画像エンコーダ | |
| KR20100103838A (ko) | 적응적 조사영역을 갖는 모션추정 장치 및 방법 | |
| JP2005287047A (ja) | 行ベクトルおよび列ベクトルを用いた動きベクトル検出 | |
| JP2004040815A (ja) | 映像信号のフィルムモード検出装置及び方法 | |
| JP2000512091A (ja) | 動作ベクトル処理 | |
| JPH05328333A (ja) | 動きベクトル検出装置 | |
| JP2008048243A (ja) | 画像処理装置、画像処理方法および監視カメラ | |
| US5602591A (en) | System for generating a weighting coefficient using inter-frame difference signals at a center pixel for detecting motion information and at pixels surrounding the center pixel and quantizing the difference signal at the center pixel | |
| JP2000324499A (ja) | 画像処理装置及びシーンチェンジ検出方法 | |
| EP1149496B1 (en) | Progressive/interlace and redundant field detection for encoder | |
| JP3272466B2 (ja) | 動画像解析装置 | |
| US6408101B1 (en) | Apparatus and method for employing M-ary pyramids to enhance feature-based classification and motion estimation | |
| JPWO2005004489A1 (ja) | ブロック歪検出装置及びブロック歪検出方法、並びに映像信号処理装置 | |
| EP1460854A1 (en) | Moving picture compression/coding apparatus and motion vector detection method | |
| WO2000005899A1 (en) | Image encoding system | |
| JP4495881B2 (ja) | ブロック歪み除去装置 | |
| EP0654941A2 (en) | Motion detection circuit and method using spatial information | |
| JP2678066B2 (ja) | ディジタル信号処理装置 | |
| KR20010002659A (ko) | 디인터레이싱 장치 및 방법 | |
| JPH1023420A (ja) | 動き検出方法および動き検出装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20060801 |