JPH0636026A - 動画像処理装置 - Google Patents
動画像処理装置Info
- Publication number
- JPH0636026A JPH0636026A JP4185303A JP18530392A JPH0636026A JP H0636026 A JPH0636026 A JP H0636026A JP 4185303 A JP4185303 A JP 4185303A JP 18530392 A JP18530392 A JP 18530392A JP H0636026 A JPH0636026 A JP H0636026A
- Authority
- JP
- Japan
- Prior art keywords
- scene change
- signal
- scene
- moving image
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
(57)【要約】
【目的】本発明は、動画像素材から正確なシーン検出、
有効なインデックス情報の抽出を可能とする。 【構成】動画像の各色信号（ＲＧＢ）をデジタル画像デ
ータに変換した後、フレーム単位での輝度信号（Ｙ）と
第一及び第二の色相信号（Ｃ１，Ｃ２）に分離する画像
入力部１と、分離されたフレーム間の輝度信号（Ｙ）に
基づいてシーン変化の検出を行なう第一のシーン変化検
出部２と、分離されたフレーム間の第一の色相信号（Ｃ
１）に基づいてシーン変化の検出を行なう第二のシーン
変化検出部３と、分離されたフレーム間の第二の色相信
号（Ｃ２）に基づいてシーン変化の検出を行なう第三の
シーン変化検出部４と、第一、第二及び第三のシーン変
化検出部２〜４によるシーン検出結果に基づいて動画像
のシーン変化を判定する動画像シーン変化判定部５とを
具備して構成する。
有効なインデックス情報の抽出を可能とする。 【構成】動画像の各色信号（ＲＧＢ）をデジタル画像デ
ータに変換した後、フレーム単位での輝度信号（Ｙ）と
第一及び第二の色相信号（Ｃ１，Ｃ２）に分離する画像
入力部１と、分離されたフレーム間の輝度信号（Ｙ）に
基づいてシーン変化の検出を行なう第一のシーン変化検
出部２と、分離されたフレーム間の第一の色相信号（Ｃ
１）に基づいてシーン変化の検出を行なう第二のシーン
変化検出部３と、分離されたフレーム間の第二の色相信
号（Ｃ２）に基づいてシーン変化の検出を行なう第三の
シーン変化検出部４と、第一、第二及び第三のシーン変
化検出部２〜４によるシーン検出結果に基づいて動画像
のシーン変化を判定する動画像シーン変化判定部５とを
具備して構成する。
Description
【０００１】
【産業上の利用分野】本発明は、動画像素材を扱う動画
像処理装置に関する。
像処理装置に関する。
【０００２】
【従来の技術】近年、オフィス等においては、テキス
ト、画像、動画等を含む種々の情報を統一して処理する
マルチメディア処理やそれらの各種情報間を関係付けて
処理するハイパーメディア処理の要求が強くなってい
る。特に、時系列情報である動画像は、プレゼンテーシ
ョンにおける表現手段としては従来の静的メディアであ
る文書情報などと比べて非常に優れており、有効な利用
が望まれている。しかし、動画像は、その情報量が膨大
であるため、内容検索／把握に多大の時間を要し、計算
機内でハンドリングするには非常に不便である。従っ
て、動画像ハンドリングには、その動画像に特徴的な情
報を提示することが必要であり、それにより、従来の文
書情報と同様に取り扱うことが可能である。このような
インデックス（検索）情報としては、シーンの変わり目
（変化点）が有効である。
ト、画像、動画等を含む種々の情報を統一して処理する
マルチメディア処理やそれらの各種情報間を関係付けて
処理するハイパーメディア処理の要求が強くなってい
る。特に、時系列情報である動画像は、プレゼンテーシ
ョンにおける表現手段としては従来の静的メディアであ
る文書情報などと比べて非常に優れており、有効な利用
が望まれている。しかし、動画像は、その情報量が膨大
であるため、内容検索／把握に多大の時間を要し、計算
機内でハンドリングするには非常に不便である。従っ
て、動画像ハンドリングには、その動画像に特徴的な情
報を提示することが必要であり、それにより、従来の文
書情報と同様に取り扱うことが可能である。このような
インデックス（検索）情報としては、シーンの変わり目
（変化点）が有効である。
【０００３】シーンの自動検出方法には、フレーム間の
輝度変化量の大小で変化点を判定する第１の方法と、各
色チャネルヒストグラムのフレーム間の変化量の大小で
変化点を判定する第２の方法が考案されている。
輝度変化量の大小で変化点を判定する第１の方法と、各
色チャネルヒストグラムのフレーム間の変化量の大小で
変化点を判定する第２の方法が考案されている。
【０００４】まず第１の方法としては、フレーム単位で
輝度ヒストグラムを算出し、これを隣接フレーム間で差
分絶対値を求めその累積値を特徴量とし、その大小でシ
ーン変化を判定するものがある。つまり、フレーム内の
空間情報をなくしフレーム単位の輝度変化量に注目する
ことで、その変化量が大きい場合をシーン変化として検
出する。しかし、第１の方法では、フレーム全体として
の輝度変化が緩やかであるが色相変化が激しいシーン変
化に対しては、検出不可能であった。
輝度ヒストグラムを算出し、これを隣接フレーム間で差
分絶対値を求めその累積値を特徴量とし、その大小でシ
ーン変化を判定するものがある。つまり、フレーム内の
空間情報をなくしフレーム単位の輝度変化量に注目する
ことで、その変化量が大きい場合をシーン変化として検
出する。しかし、第１の方法では、フレーム全体として
の輝度変化が緩やかであるが色相変化が激しいシーン変
化に対しては、検出不可能であった。
【０００５】また、第２の方法としては、各色チャネル
（ＲＧＢ）で独立にフレーム内でヒストグラムを算出
し、隣接フレーム間で差分の絶対値をとり、各色分布の
類似度からフレーム間で相関がある場合を連続シーン、
逆に相関が無い場合をシーン変化と判定するものがあ
る。
（ＲＧＢ）で独立にフレーム内でヒストグラムを算出
し、隣接フレーム間で差分の絶対値をとり、各色分布の
類似度からフレーム間で相関がある場合を連続シーン、
逆に相関が無い場合をシーン変化と判定するものがあ
る。
【０００６】図８（ａ）〜（ｃ）に第２の方法について
の説明図を示す。各フレーム内でブロック（ｌ×ｍ）
［ｌ，ｍ≧１なる整数］を単位として（図８（ａ））、
各色チャンネル（ＲＧＢ）で独立にヒストグラムを算出
し（図８（ｂ））、隣接フレーム間で差分の絶対値をと
り、ブロック単位の評価値とする。これら各ブロックの
評価値をフレーム内で平均し、シーン変化判定の特徴量
（Ｔn ）とする。この特徴量と予め定めた閾値（Ｔｈ）
を比較することで、シーン変化を判定する。判定条件を
次式で示す。 Ｔn ≧Ｔｈ：シーン変化 …（１−１） Ｔn ＜Ｔｈ：連続シーン …（１−２）
の説明図を示す。各フレーム内でブロック（ｌ×ｍ）
［ｌ，ｍ≧１なる整数］を単位として（図８（ａ））、
各色チャンネル（ＲＧＢ）で独立にヒストグラムを算出
し（図８（ｂ））、隣接フレーム間で差分の絶対値をと
り、ブロック単位の評価値とする。これら各ブロックの
評価値をフレーム内で平均し、シーン変化判定の特徴量
（Ｔn ）とする。この特徴量と予め定めた閾値（Ｔｈ）
を比較することで、シーン変化を判定する。判定条件を
次式で示す。 Ｔn ≧Ｔｈ：シーン変化 …（１−１） Ｔn ＜Ｔｈ：連続シーン …（１−２）
【０００７】しかし、この場合は、各色チャネル（ＲＧ
Ｂ）に輝度信号と色相信号が混合しており、輝度変化が
非常に大きい場合や、Ｒｅｄ，Ｇｒｅｅｎ，Ｂｌｕｅの
各色軸に沿った方向で色変化が生じた場合にしか「シー
ン変化」と判定することができないため、正確なシーン
検出は困難であった。つまり、輝度変化はあるが色相変
化がほとんど無い場合や、色相変化があるがＲｅｄ，Ｇ
ｒｅｅｎ，Ｂｌｕｅの各色軸に沿った方向での変化が小
さい場合には、特徴量Ｔn が小さな値を示し、シーン変
化と判定することができなかった。この結果の一例を図
８（ｃ）に示す。
Ｂ）に輝度信号と色相信号が混合しており、輝度変化が
非常に大きい場合や、Ｒｅｄ，Ｇｒｅｅｎ，Ｂｌｕｅの
各色軸に沿った方向で色変化が生じた場合にしか「シー
ン変化」と判定することができないため、正確なシーン
検出は困難であった。つまり、輝度変化はあるが色相変
化がほとんど無い場合や、色相変化があるがＲｅｄ，Ｇ
ｒｅｅｎ，Ｂｌｕｅの各色軸に沿った方向での変化が小
さい場合には、特徴量Ｔn が小さな値を示し、シーン変
化と判定することができなかった。この結果の一例を図
８（ｃ）に示す。
【０００８】
【発明が解決しようとする課題】このように従来のシー
ン検出を行う動画像処理装置では、輝度信号だけに基づ
いた特徴量や色信号（輝度信号と色相信号が混合したＲ
ＧＢ信号）に基づいた特徴量を基にシーン検出を行うた
め、第１の方法では輝度変化がなく色相変化がある場合
に取りこぼしがあった。また、第２の方法では、色相変
化が無いにもかかわらず特定色の色分布変化の累積結果
がある一定値を越えることで誤検出が生じたり、逆に、
色分布変化が有るにも拘らず特定の色信号軸の色変化と
一致しない場合などにおいてはシーン変化と見なさず取
りこぼしがあり、正確なシーン検出が不可能であった。
ン検出を行う動画像処理装置では、輝度信号だけに基づ
いた特徴量や色信号（輝度信号と色相信号が混合したＲ
ＧＢ信号）に基づいた特徴量を基にシーン検出を行うた
め、第１の方法では輝度変化がなく色相変化がある場合
に取りこぼしがあった。また、第２の方法では、色相変
化が無いにもかかわらず特定色の色分布変化の累積結果
がある一定値を越えることで誤検出が生じたり、逆に、
色分布変化が有るにも拘らず特定の色信号軸の色変化と
一致しない場合などにおいてはシーン変化と見なさず取
りこぼしがあり、正確なシーン検出が不可能であった。
【０００９】本発明は前記のような点に鑑みてなされた
もので、、動画像素材から正確なシーン検出が可能であ
り、かつ有効なインデックス情報の抽出が可能な動画像
処理装置を提供することを目的とする。
もので、、動画像素材から正確なシーン検出が可能であ
り、かつ有効なインデックス情報の抽出が可能な動画像
処理装置を提供することを目的とする。
【００１０】
【課題を解決するための手段】本発明の動画像処理装置
は、動画像の各色信号（ＲＧＢ）をデジタル画像データ
に変換した後、フレーム単位での輝度信号（Ｙ）と第一
及び第二の色相信号（Ｃ１，Ｃ２）に分離する画像入力
手段と、前記画像入力手段によって得られたフレーム間
の輝度信号（Ｙ）に基づいてシーン変化の検出を行なう
第一のシーン変化検出手段と、前記画像入力手段によっ
て得られたフレーム間の第一の色相信号（Ｃ１）に基づ
いてシーン変化の検出を行なう第二のシーン変化検出手
段と、前記画像入力手段によって得られたフレーム間の
第二の色相信号（Ｃ２）に基づいてシーン変化の検出を
行なう第三のシーン変化検出手段と、前記第一、第二及
び第三のシーン変化検出手段によるシーン検出結果に基
づいて前記動画像のシーン変化を判定する動画像シーン
変化判定手段とを具備したものである。
は、動画像の各色信号（ＲＧＢ）をデジタル画像データ
に変換した後、フレーム単位での輝度信号（Ｙ）と第一
及び第二の色相信号（Ｃ１，Ｃ２）に分離する画像入力
手段と、前記画像入力手段によって得られたフレーム間
の輝度信号（Ｙ）に基づいてシーン変化の検出を行なう
第一のシーン変化検出手段と、前記画像入力手段によっ
て得られたフレーム間の第一の色相信号（Ｃ１）に基づ
いてシーン変化の検出を行なう第二のシーン変化検出手
段と、前記画像入力手段によって得られたフレーム間の
第二の色相信号（Ｃ２）に基づいてシーン変化の検出を
行なう第三のシーン変化検出手段と、前記第一、第二及
び第三のシーン変化検出手段によるシーン検出結果に基
づいて前記動画像のシーン変化を判定する動画像シーン
変化判定手段とを具備したものである。
【００１１】
【作用】このような構成によれば、輝度情報と色相情報
でそれぞれ独立にシーン変化検出が行なわれ、それらの
結果からシーン変化の判定を行うので、種々の動画像素
材に対しても人間の色知覚と整合した正確なシーン検出
が可能である。また、モノクロ動画像がカラー動画像に
混在した入力素材に対しても、シーン変化検出機構を切
り替える必要がなく、正確なシーン検出が可能である。
つまり、膨大な情報の中から、正確でかつ適切な内容把
握が容易になる利点を有している。従って、動画像検索
を有効なインデックス情報に基づいて行なうことが可能
なため、ユーザにおける経験と勘に頼っていた動画像編
集が容易かつ短時間に行なわれ、従来に比べて編集効率
が格段に向上する。
でそれぞれ独立にシーン変化検出が行なわれ、それらの
結果からシーン変化の判定を行うので、種々の動画像素
材に対しても人間の色知覚と整合した正確なシーン検出
が可能である。また、モノクロ動画像がカラー動画像に
混在した入力素材に対しても、シーン変化検出機構を切
り替える必要がなく、正確なシーン検出が可能である。
つまり、膨大な情報の中から、正確でかつ適切な内容把
握が容易になる利点を有している。従って、動画像検索
を有効なインデックス情報に基づいて行なうことが可能
なため、ユーザにおける経験と勘に頼っていた動画像編
集が容易かつ短時間に行なわれ、従来に比べて編集効率
が格段に向上する。
【００１２】
【実施例】以下、図面を参照しながら本発明の一実施例
について説明する。図１は同実施例に係わる本動画処理
装置の構成を示すブロック図、図２は図１中に示す画像
入力部１の詳細な構成を示すブロック図、図３は図１中
に示す第一のシーン変化検出部２の詳細な構成を示すブ
ロック図、図４は図１中に示す第二のシーン変化検出部
３の詳細な構成を示すブロック図、図５は図１中に示す
シーン変化判定部５の詳細な構成を示すブロック図であ
る。
について説明する。図１は同実施例に係わる本動画処理
装置の構成を示すブロック図、図２は図１中に示す画像
入力部１の詳細な構成を示すブロック図、図３は図１中
に示す第一のシーン変化検出部２の詳細な構成を示すブ
ロック図、図４は図１中に示す第二のシーン変化検出部
３の詳細な構成を示すブロック図、図５は図１中に示す
シーン変化判定部５の詳細な構成を示すブロック図であ
る。
【００１３】図１に示すように、動画処理装置は、画像
入力部１、第一のシーン変化検出部２、第二のシーン変
化検出部３、第三のシーン変化検出部４、シーン変化判
定部５、動画像編集部６から構成される。
入力部１、第一のシーン変化検出部２、第二のシーン変
化検出部３、第三のシーン変化検出部４、シーン変化判
定部５、動画像編集部６から構成される。
【００１４】画像入力部１は、動画像信号（ＲＧＢ）１
０ａ，１０ｂ，１０ｃを入力してデジタルデータに変換
した後、輝度信号（Ｙ）と色相信号（Ｃ１，Ｃ２）に信
号変換し、フレーム単位のデジタル輝度信号（Ｙ）２０
ａ、及び第一、第二のデジタル色相信号（Ｃ１，Ｃ２）
２０ｂ，２０ｃを出力する。第一のシーン変化検出部２
は、画像入力部１から出力されたデジタル輝度信号２０
ａを入力し、シーン変化を検出し、第一のシーン変化検
出信号３０ａを出力する。また、第二のシーン変化検出
部３は、第一のデジタル色相信号２０ｂを入力し、シー
ン変化を検出し、第二のシーン変化検出信号３０ｂを出
力する。さらに、第三のシーン変化検出部４は、第二の
デジタル色相信号２０ｃを入力し、シーン変化を検出
し、第三のシーン変化検出信号３０ｃを出力する。シー
ン変化判定部５は、第一のシーン変化検出部２、第二の
シーン変化検出部３、及び第三のシーン変化検出部４か
らそれぞれ出力された、第一、第二、第三のシーン変化
検出信号３０ａ，３０ｂ，３０ｃを入力し、シーン変化
を判定し、シーン変化判定信号４０を出力する。動画像
編集部６は、シーン変化判定信号４０と、画像入力部１
から出力されたデジタル輝度信号２０ａ及び第一、第二
のデジタル色相信号２０ｂ，２０ｃを入力し、所望の編
集処理を行う。
０ａ，１０ｂ，１０ｃを入力してデジタルデータに変換
した後、輝度信号（Ｙ）と色相信号（Ｃ１，Ｃ２）に信
号変換し、フレーム単位のデジタル輝度信号（Ｙ）２０
ａ、及び第一、第二のデジタル色相信号（Ｃ１，Ｃ２）
２０ｂ，２０ｃを出力する。第一のシーン変化検出部２
は、画像入力部１から出力されたデジタル輝度信号２０
ａを入力し、シーン変化を検出し、第一のシーン変化検
出信号３０ａを出力する。また、第二のシーン変化検出
部３は、第一のデジタル色相信号２０ｂを入力し、シー
ン変化を検出し、第二のシーン変化検出信号３０ｂを出
力する。さらに、第三のシーン変化検出部４は、第二の
デジタル色相信号２０ｃを入力し、シーン変化を検出
し、第三のシーン変化検出信号３０ｃを出力する。シー
ン変化判定部５は、第一のシーン変化検出部２、第二の
シーン変化検出部３、及び第三のシーン変化検出部４か
らそれぞれ出力された、第一、第二、第三のシーン変化
検出信号３０ａ，３０ｂ，３０ｃを入力し、シーン変化
を判定し、シーン変化判定信号４０を出力する。動画像
編集部６は、シーン変化判定信号４０と、画像入力部１
から出力されたデジタル輝度信号２０ａ及び第一、第二
のデジタル色相信号２０ｂ，２０ｃを入力し、所望の編
集処理を行う。
【００１５】次に、図１中に示す画像入力部１につい
て、図２に示す詳細ブロック図を基に説明する。図２に
示すように画像入力部１は、Ａ／Ｄ変換回路１１、信号
変換回路１２、第一のフレームメモリ（Ａ）１３ａ、第
一のフレームメモリ（Ｂ）１３ｂ、第二のフレームメモ
リ（Ａ）１４ａ、第二のフレームメモリ（Ｂ）１４ｂ、
第三のフレームメモリ（Ａ）１５ａ、及び第三のフレー
ムメモリ（Ｂ）１５ｂによって構成されている。
て、図２に示す詳細ブロック図を基に説明する。図２に
示すように画像入力部１は、Ａ／Ｄ変換回路１１、信号
変換回路１２、第一のフレームメモリ（Ａ）１３ａ、第
一のフレームメモリ（Ｂ）１３ｂ、第二のフレームメモ
リ（Ａ）１４ａ、第二のフレームメモリ（Ｂ）１４ｂ、
第三のフレームメモリ（Ａ）１５ａ、及び第三のフレー
ムメモリ（Ｂ）１５ｂによって構成されている。
【００１６】Ａ／Ｄ変換回路１１は、入力信号（ＲＧ
Ｂ）１０ａ，１０ｂ，１０ｃを入力し、それぞれ各チャ
ネル独立に８ビットのデジタルデータに変換し、信号変
換回路１２に出力する。信号変換回路１２は、以下の変
換式で（Ｒ，Ｇ，Ｂ→Ｙ，Ｃ１，Ｃ２）変換を行い、デ
ジタル輝度信号（Ｙ）及び第一、第二のデジタル色相信
号（Ｃ１，Ｃ２）を、それぞれ第一、第二、第三のフレ
ームメモリ１３ａ，１３ｂ，１４ａ，１４ｂ，１５ａ，
１５ｂに出力する。
Ｂ）１０ａ，１０ｂ，１０ｃを入力し、それぞれ各チャ
ネル独立に８ビットのデジタルデータに変換し、信号変
換回路１２に出力する。信号変換回路１２は、以下の変
換式で（Ｒ，Ｇ，Ｂ→Ｙ，Ｃ１，Ｃ２）変換を行い、デ
ジタル輝度信号（Ｙ）及び第一、第二のデジタル色相信
号（Ｃ１，Ｃ２）を、それぞれ第一、第二、第三のフレ
ームメモリ１３ａ，１３ｂ，１４ａ，１４ｂ，１５ａ，
１５ｂに出力する。
【００１７】
【数１】
【００１８】第一のフレームメモリ１３ａ，１３ｂは、
フレーム単位のデジタル輝度信号（Ｙ）２０ａを、ま
た、第二のフレームメモリ１４ａ，１４ｂは、フレーム
単位の第一のデジタル色相信号（Ｃ１）２０ｂを、さら
に、第三のフレームメモリ１５ａ，１５ｂは、フレーム
単位の第二のデジタル色相信号（Ｃ１）２０ｂを、記憶
しており、それぞれ読み出される。また、Ａ／Ｄ変換回
路１１のサンプリングレートは、取り込む画像サイズに
依存するが、例えば１２ＭＨｚとする。第一、第二、第
三のフレームメモリ１３ａ，１３ｂ，１４ａ，１４ｂ，
１５ａ，１５ｂは、それぞれダブルフレームメモリの構
成であり、画面サイズ／解像度にメモリ容量が決められ
る。例えば、パーソナルコンピュータのＶＧＡ(Video G
raphics Array)対応の画面表示を標準に考えると、（６
４０×４８０）であり、９００ＫＢ／フレームのメモリ
容量となる。
フレーム単位のデジタル輝度信号（Ｙ）２０ａを、ま
た、第二のフレームメモリ１４ａ，１４ｂは、フレーム
単位の第一のデジタル色相信号（Ｃ１）２０ｂを、さら
に、第三のフレームメモリ１５ａ，１５ｂは、フレーム
単位の第二のデジタル色相信号（Ｃ１）２０ｂを、記憶
しており、それぞれ読み出される。また、Ａ／Ｄ変換回
路１１のサンプリングレートは、取り込む画像サイズに
依存するが、例えば１２ＭＨｚとする。第一、第二、第
三のフレームメモリ１３ａ，１３ｂ，１４ａ，１４ｂ，
１５ａ，１５ｂは、それぞれダブルフレームメモリの構
成であり、画面サイズ／解像度にメモリ容量が決められ
る。例えば、パーソナルコンピュータのＶＧＡ(Video G
raphics Array)対応の画面表示を標準に考えると、（６
４０×４８０）であり、９００ＫＢ／フレームのメモリ
容量となる。
【００１９】次に、図１に示す第一のシーン変化検出部
１について、図３に示す詳細ブロック図を基に説明す
る。第一のフレームメモリ１３ａ，１３ｂから出力され
たデジタル輝度信号２０ａ（Ｙｉｊ）は、第一の平均値
算出回路２１に入力される（ここで、ｉｊは正整数）。
第一の平均値算出回路２１は、デジタル輝度画像信号２
０ａ（Ｙｉｊ）を基に、（２４×２４）ブロック単位内
で平均値を算出し、以下の（３）式で表される平均輝度
信号（Ｉｘｙn ）を求める。 Ｉｘｙn ＝ ΣＹｉｊ／（２４×２４） …（３）
１について、図３に示す詳細ブロック図を基に説明す
る。第一のフレームメモリ１３ａ，１３ｂから出力され
たデジタル輝度信号２０ａ（Ｙｉｊ）は、第一の平均値
算出回路２１に入力される（ここで、ｉｊは正整数）。
第一の平均値算出回路２１は、デジタル輝度画像信号２
０ａ（Ｙｉｊ）を基に、（２４×２４）ブロック単位内
で平均値を算出し、以下の（３）式で表される平均輝度
信号（Ｉｘｙn ）を求める。 Ｉｘｙn ＝ ΣＹｉｊ／（２４×２４） …（３）
【００２０】ここで、平均輝度を求めるブロックの大き
さ（ｌ×ｍ）（ｌ，ｍ≧１なる整数）は任意であるが、
例えば画像圧縮の国際標準方式におけるＤＣＴ（Discre
te Cosine Transform)の処理単位である（８×８）の整
数倍とする。
さ（ｌ×ｍ）（ｌ，ｍ≧１なる整数）は任意であるが、
例えば画像圧縮の国際標準方式におけるＤＣＴ（Discre
te Cosine Transform)の処理単位である（８×８）の整
数倍とする。
【００２１】第一のフレームメモリ（Ａ）１３ａに記憶
されたデータに基づく平均輝度信号は、バッファメモリ
２２に格納される。また、第一のフレームメモリ（Ｂ）
１３ｂに記憶されたデータに基づく平均輝度信号も同様
に、第一の平均値算出回路２１で平均値が算出される。
この結果（現フレームに対応した平均輝度信号）は、バ
ッファメモリ２２に格納されている（前フレームに対応
した）平均輝度信号と同期をとって、減算回路２３に入
力される。
されたデータに基づく平均輝度信号は、バッファメモリ
２２に格納される。また、第一のフレームメモリ（Ｂ）
１３ｂに記憶されたデータに基づく平均輝度信号も同様
に、第一の平均値算出回路２１で平均値が算出される。
この結果（現フレームに対応した平均輝度信号）は、バ
ッファメモリ２２に格納されている（前フレームに対応
した）平均輝度信号と同期をとって、減算回路２３に入
力される。
【００２２】減算回路２３は、現フレームと前フレーム
が対応する位置のブロック単位で平均輝度信号の差分絶
対値を算出し、第一の特徴量信号２８（△Ｉｘｙn ）を
出力する。第一の特徴量信号２８（△Ｉｘｙn ）は以下
の式で表される。 △Ｉｘｙn ＝｜Ｉｘｙn −Ｉｘｙn-1 ｜ …（４）
が対応する位置のブロック単位で平均輝度信号の差分絶
対値を算出し、第一の特徴量信号２８（△Ｉｘｙn ）を
出力する。第一の特徴量信号２８（△Ｉｘｙn ）は以下
の式で表される。 △Ｉｘｙn ＝｜Ｉｘｙn −Ｉｘｙn-1 ｜ …（４）
【００２３】次に、第一の比較回路３１は、第一の特徴
量信号２８を基に、シーン変化候補領域を抽出する。シ
ーン変化候補領域は、第一の特徴量信号２８と予め定め
た第一の閾値信号Ｔｈ１とを比較することによって決定
される。シーン変化候補領域の抽出は、第一の特徴量信
号２８（△Ｉｘｙn ）と第一の閾値信号Ｔｈ１から、以
下の条件で決定される。 △Ｉｘｙn ≧Ｔｈ１：シーン変化候補領域 …（５−１） △Ｉｘｙn ＜Ｔｈ１：非シーン変化候補領域 …（５−２）
量信号２８を基に、シーン変化候補領域を抽出する。シ
ーン変化候補領域は、第一の特徴量信号２８と予め定め
た第一の閾値信号Ｔｈ１とを比較することによって決定
される。シーン変化候補領域の抽出は、第一の特徴量信
号２８（△Ｉｘｙn ）と第一の閾値信号Ｔｈ１から、以
下の条件で決定される。 △Ｉｘｙn ≧Ｔｈ１：シーン変化候補領域 …（５−１） △Ｉｘｙn ＜Ｔｈ１：非シーン変化候補領域 …（５−２）
【００２４】ここで、第一の比較回路２４は、シーン変
化候補領域の時「１」、非シーン変化候補領域の時
「０」を示すシーン変化候補領域信号５０を出力する。
また、図６に、典型的な各種シーンのブロック内平均輝
度のフレーム間差分の絶対値のヒストグラムを示す。
化候補領域の時「１」、非シーン変化候補領域の時
「０」を示すシーン変化候補領域信号５０を出力する。
また、図６に、典型的な各種シーンのブロック内平均輝
度のフレーム間差分の絶対値のヒストグラムを示す。
【００２５】次に、第一の特徴量信号２８とシーン変化
候補領域信号５０とからシーン変化の判定を行なう。ま
ず、シーン変化候補領域の第一の特徴量信号を選択的に
取得するために、セレクタ２５は、第一の特徴量信号２
８と固定信号「０」を入力し、シーン変化候補領域信号
５０に応じて制御される。つまり、シーン変化候補領域
信号が「１」の場合（シーン変化候補領域）、セレクタ
２５は、第一の特徴量信号２８をそのままセレクタ２５
は出力し、一方、シーン変化候補領域信号が「０」の場
合（非シーン変化候補領域）、固定信号「０」を出力す
る。
候補領域信号５０とからシーン変化の判定を行なう。ま
ず、シーン変化候補領域の第一の特徴量信号を選択的に
取得するために、セレクタ２５は、第一の特徴量信号２
８と固定信号「０」を入力し、シーン変化候補領域信号
５０に応じて制御される。つまり、シーン変化候補領域
信号が「１」の場合（シーン変化候補領域）、セレクタ
２５は、第一の特徴量信号２８をそのままセレクタ２５
は出力し、一方、シーン変化候補領域信号が「０」の場
合（非シーン変化候補領域）、固定信号「０」を出力す
る。
【００２６】このようにして得られた第一の選択特徴量
信号６０は、第二の平均値算出回路２６に入力される。
第二の平均値算出回路２６は、フレーム内でのシーン変
化候補領域にだけ対応した平均輝度の差分絶対値の平均
値を算出し、第二の特徴量信号２９（Ｓn ）として出力
する。例えば、図７（ａ）に示す例では、斜線を施した
ブロックがシーン変化候補領域であり、これら７ブロッ
クについての第一の特徴量信号２８（△Ｉｘｙn ）を加
算することで、第二の特徴量信号２９（Ｓn ）が決ま
る。
信号６０は、第二の平均値算出回路２６に入力される。
第二の平均値算出回路２６は、フレーム内でのシーン変
化候補領域にだけ対応した平均輝度の差分絶対値の平均
値を算出し、第二の特徴量信号２９（Ｓn ）として出力
する。例えば、図７（ａ）に示す例では、斜線を施した
ブロックがシーン変化候補領域であり、これら７ブロッ
クについての第一の特徴量信号２８（△Ｉｘｙn ）を加
算することで、第二の特徴量信号２９（Ｓn ）が決ま
る。
【００２７】次に、第二の特徴量信号２９を基に、シー
ン変化の判定を行う。シーン変化の判定は、第二の比較
回路２７において、第二の特徴量信号２９と予め定めた
第二の閾値信号Ｔｈ２から決定され、第一のシーン変化
検出信号３０ａとして出力される。判定条件は、第二の
特徴量信号２９（Ｓn ）と第二の閾値信号Ｔｈ２から次
の式で示される。 Ｓn ≧Ｔｈ２：シーン変化 …（６−１） Ｓn ＜Ｔｈ２：連続シーン …（６−２） ここで、第一のシーン変化検出信号３０ａは、シーン変
化の時「１」、連続シーンの時「０」を出力する。
ン変化の判定を行う。シーン変化の判定は、第二の比較
回路２７において、第二の特徴量信号２９と予め定めた
第二の閾値信号Ｔｈ２から決定され、第一のシーン変化
検出信号３０ａとして出力される。判定条件は、第二の
特徴量信号２９（Ｓn ）と第二の閾値信号Ｔｈ２から次
の式で示される。 Ｓn ≧Ｔｈ２：シーン変化 …（６−１） Ｓn ＜Ｔｈ２：連続シーン …（６−２） ここで、第一のシーン変化検出信号３０ａは、シーン変
化の時「１」、連続シーンの時「０」を出力する。
【００２８】以上の判定条件でシーン検出を行なうと、
輝度信号を用いた従来の方式では正確な検出が困難であ
った「背景部の輝度変化が小さいシーン変化」や「動き
が激しい連続シーン」が正確に検出可能である。
輝度信号を用いた従来の方式では正確な検出が困難であ
った「背景部の輝度変化が小さいシーン変化」や「動き
が激しい連続シーン」が正確に検出可能である。
【００２９】次に、図１に示す第二のシーン変化検出部
３について、図４に示す詳細ブロック図を基に説明す
る。第二のフレームメモリ１４ａから出力された第一の
デジタル色相信号２０ｂ（Ｃ１ｉｊ）は、ヒストグラム
算出回路３１に入力される。ヒストグラム算出回路３１
は、第一のデジタル色相信号２０ｂを１６段階のレベル
に分割し、各段階の頻度数を計算し、各段階毎にバッフ
ァメモリに格納する。また、ヒストグラム算出回路３１
は、第二のフレームメモリ（Ｂ）１４ｂに基づく各段階
毎の頻度数も同様に算出する。
３について、図４に示す詳細ブロック図を基に説明す
る。第二のフレームメモリ１４ａから出力された第一の
デジタル色相信号２０ｂ（Ｃ１ｉｊ）は、ヒストグラム
算出回路３１に入力される。ヒストグラム算出回路３１
は、第一のデジタル色相信号２０ｂを１６段階のレベル
に分割し、各段階の頻度数を計算し、各段階毎にバッフ
ァメモリに格納する。また、ヒストグラム算出回路３１
は、第二のフレームメモリ（Ｂ）１４ｂに基づく各段階
毎の頻度数も同様に算出する。
【００３０】この結果（現フレームに対応したヒストグ
ラム）は、バッファメモリ３２に格納されている（前フ
レームに対応した）ヒストグラムと同期をとって、減算
回路３３に入力される。減算回路３３は、現フレームと
前フレームのヒストグラムの差分絶対値を各段階毎に算
出し、加算回路３４に出力する。ｘ段階のヒストグラム
の差分絶対値（△Ｃ１ｘn ）は、以下の式で表される。
（但しｘは、１≦ｘ≦１６なる整数） △Ｃ１ｘn ＝｜Ｃ１ｘn −Ｃ１ｘn-1 ｜ …（７） ここで、Ｃ１ｘn とＣ１ｘn-1 は、それぞれｎフレーム
と（ｎ−１）フレームのｘ段階に所属する頻度数を示
す。
ラム）は、バッファメモリ３２に格納されている（前フ
レームに対応した）ヒストグラムと同期をとって、減算
回路３３に入力される。減算回路３３は、現フレームと
前フレームのヒストグラムの差分絶対値を各段階毎に算
出し、加算回路３４に出力する。ｘ段階のヒストグラム
の差分絶対値（△Ｃ１ｘn ）は、以下の式で表される。
（但しｘは、１≦ｘ≦１６なる整数） △Ｃ１ｘn ＝｜Ｃ１ｘn −Ｃ１ｘn-1 ｜ …（７） ここで、Ｃ１ｘn とＣ１ｘn-1 は、それぞれｎフレーム
と（ｎ−１）フレームのｘ段階に所属する頻度数を示
す。
【００３１】加算回路３４は、各段階毎のヒストグラム
の差分絶対値を加算する。本実施例の場合は、１６個の
データを累積する。従って、第一のデジタル色相信号２
０ｂに基づく色相ヒストグラムのフレーム間差分絶対値
の累積信号３６（Ｈ１n ）は、以下の式で算出される。 Ｈ１n ＝Σ△Ｃ１ｘn …（８）
の差分絶対値を加算する。本実施例の場合は、１６個の
データを累積する。従って、第一のデジタル色相信号２
０ｂに基づく色相ヒストグラムのフレーム間差分絶対値
の累積信号３６（Ｈ１n ）は、以下の式で算出される。 Ｈ１n ＝Σ△Ｃ１ｘn …（８）
【００３２】以上のようにして得られた第一のデジタル
色相信号２０ｂに基づく色相ヒストグラムのフレーム間
差分絶対値の累積信号３６は、比較回路３５に入力され
る。比較回路３５は、予め定めた閾値信号Ｔｈ３と累積
信号３６とを比較判定することでシーン変化の検出を行
い、第二のシーン変化検出信号３０ｂを出力する。判定
条件は、第一のデジタル色相信号２０ｂに基づく色相ヒ
ストグラムのフレーム間差分絶対値の累積信号３６（Ｈ
１n ）と、閾値信号Ｔｈ３から次の式で示される。 Ｈ１n ≧Ｔｈ３：シーン変化 …（９−１） Ｈ１n ＜Ｔｈ３：連続シーン …（９−２） ここで、第二のシーン変化検出信号３０ｂは、シーン変
化の時「１」、連続シーンの時「０」を出力する。
色相信号２０ｂに基づく色相ヒストグラムのフレーム間
差分絶対値の累積信号３６は、比較回路３５に入力され
る。比較回路３５は、予め定めた閾値信号Ｔｈ３と累積
信号３６とを比較判定することでシーン変化の検出を行
い、第二のシーン変化検出信号３０ｂを出力する。判定
条件は、第一のデジタル色相信号２０ｂに基づく色相ヒ
ストグラムのフレーム間差分絶対値の累積信号３６（Ｈ
１n ）と、閾値信号Ｔｈ３から次の式で示される。 Ｈ１n ≧Ｔｈ３：シーン変化 …（９−１） Ｈ１n ＜Ｔｈ３：連続シーン …（９−２） ここで、第二のシーン変化検出信号３０ｂは、シーン変
化の時「１」、連続シーンの時「０」を出力する。
【００３３】なお、第三のシーン変化検出部４は、第二
のシーン変化検出部３において、第二のデジタル色相信
号２０ｃ（Ｃ２ｉｊ）を入力することで同様に実現でき
るので、説明を省略する。第三のシーン変化検出部４
は、第二のデジタル色相信号２０ｃに基づく色相ヒスト
グラムのフレーム間差分絶対値の累積信号（Ｈ２n ）と
閾値信号Ｔｈ４から次の式で示される判定条件で、第三
のシーン変化検出信号３０ｃを出力する。 Ｈ２n ≧Ｔｈ４：シーン変化 …（１０−１） Ｈ２n ＜Ｔｈ４：連続シーン …（１０−２） ここで、第三のシーン変化検出信号３０ｃは、シーン変
化の時「１」、連続シーンの時「０」を出力する。
のシーン変化検出部３において、第二のデジタル色相信
号２０ｃ（Ｃ２ｉｊ）を入力することで同様に実現でき
るので、説明を省略する。第三のシーン変化検出部４
は、第二のデジタル色相信号２０ｃに基づく色相ヒスト
グラムのフレーム間差分絶対値の累積信号（Ｈ２n ）と
閾値信号Ｔｈ４から次の式で示される判定条件で、第三
のシーン変化検出信号３０ｃを出力する。 Ｈ２n ≧Ｔｈ４：シーン変化 …（１０−１） Ｈ２n ＜Ｔｈ４：連続シーン …（１０−２） ここで、第三のシーン変化検出信号３０ｃは、シーン変
化の時「１」、連続シーンの時「０」を出力する。
【００３４】次に、図１に示すシーン変化判定部５につ
いて、図５に示す詳細ブロック図を基に説明する。第
一、第二、及び第三のシーン変化検出信号３０ａ，３０
ｂ，３０ｃは、それぞれ第一、第二及び第三の乗算回路
５１ａ，５１ｂ，５１ｃに入力される。第一、第二及び
第三の乗算回路５１ａ，５１ｂ，５１ｃは、予め設定し
た重み係数α１，α２，α３とそれぞれ乗算し、システ
ムの目的に応じて重み付けされた第一、第二及び第三の
修正シーン変化検出信号を出力する。
いて、図５に示す詳細ブロック図を基に説明する。第
一、第二、及び第三のシーン変化検出信号３０ａ，３０
ｂ，３０ｃは、それぞれ第一、第二及び第三の乗算回路
５１ａ，５１ｂ，５１ｃに入力される。第一、第二及び
第三の乗算回路５１ａ，５１ｂ，５１ｃは、予め設定し
た重み係数α１，α２，α３とそれぞれ乗算し、システ
ムの目的に応じて重み付けされた第一、第二及び第三の
修正シーン変化検出信号を出力する。
【００３５】本実施例では、例えばα１＝０．５，α２
＝０．２５，α３＝０．２５とする。加算回路５２は、
第一、第二及び第三の乗算回路５１ａ，５１ｂ，５１ｃ
からそれぞれ出力された第一、第二及び第三の修正シー
ン変化検出信号を加算し、総合シーン変化検出信号５４
を比較回路５３に出力する。
＝０．２５，α３＝０．２５とする。加算回路５２は、
第一、第二及び第三の乗算回路５１ａ，５１ｂ，５１ｃ
からそれぞれ出力された第一、第二及び第三の修正シー
ン変化検出信号を加算し、総合シーン変化検出信号５４
を比較回路５３に出力する。
【００３６】比較回路５３は、総合シーン変化検出信号
５４と、予め定めた閾値信号Ｙｈ５とからシーン変化判
定信号４０を出力する。ここで、シーン変化判定信号４
０は、シーン変化の時「１」、連続シーンの時「０」で
出力される。
５４と、予め定めた閾値信号Ｙｈ５とからシーン変化判
定信号４０を出力する。ここで、シーン変化判定信号４
０は、シーン変化の時「１」、連続シーンの時「０」で
出力される。
【００３７】以上の判定条件でシーン検出を行った例を
図７（ｂ）に示す。従来の方式では正確な検出が困難で
あった「色相変化があまり無く、輝度変化がある場合」
や「特定色（ＲＧＢ）以外の色相変化がある場合」が正
確に検出可能である。従って、種々の動画像素材に対し
ても、正確なシーン検出が可能であり、本方式を用いる
ことで、有効なインデックス情報が利用可能な動画像編
集システムが構築できる。
図７（ｂ）に示す。従来の方式では正確な検出が困難で
あった「色相変化があまり無く、輝度変化がある場合」
や「特定色（ＲＧＢ）以外の色相変化がある場合」が正
確に検出可能である。従って、種々の動画像素材に対し
ても、正確なシーン検出が可能であり、本方式を用いる
ことで、有効なインデックス情報が利用可能な動画像編
集システムが構築できる。
【００３８】次に本発明の応用例について説明する。前
記実施例では、入力信号として、コンポーネント信号
（ＲＧＢ）の例を示したが、種々のビデオフォーマット
のビデオ信号を用いることができる。例えば、各種のコ
ンポジット信号（ＮＴＳＣ，ＰＡＬ，ＳＥＣＡＭ）もデ
コーダ部により、コンポーネント信号に変換することで
同様に処理することができる。信号変換回路の変換式
は、種々の変換式を用いることが可能であり、例えば、
ＰＡＬで用いられる次式で変換しても良い。
記実施例では、入力信号として、コンポーネント信号
（ＲＧＢ）の例を示したが、種々のビデオフォーマット
のビデオ信号を用いることができる。例えば、各種のコ
ンポジット信号（ＮＴＳＣ，ＰＡＬ，ＳＥＣＡＭ）もデ
コーダ部により、コンポーネント信号に変換することで
同様に処理することができる。信号変換回路の変換式
は、種々の変換式を用いることが可能であり、例えば、
ＰＡＬで用いられる次式で変換しても良い。
【００３９】
【数２】 また、以上は線形変換式であるが、非線形変換を行うこ
とで、（例えば均等色空間（Ｌ*ａ*ｂ*）への変換）よ
り人間の知覚に整合した結果が得られる。
とで、（例えば均等色空間（Ｌ*ａ*ｂ*）への変換）よ
り人間の知覚に整合した結果が得られる。
【００４０】また、第一のシーン変化検出部２の第一の
平均値算出回路２１では、（２４×２４）のブロック単
位で平均値を算出したが、ブロックの大きさ（ｌ×ｍ）
［ｌ，ｍ：正整数］は自由に選んでよい。さらに、第二
の特徴量算出回路２６は、シーン変化候補領域だけに対
応した第一の特徴量の平均値を求め第二の特徴量とした
が、複数の特徴量を算出しても良い。例えば、シーン変
化候補領域の第一の特徴量の平均値と分散値を求め、こ
れら両者の特徴量の関係から判定を行っても良い。
平均値算出回路２１では、（２４×２４）のブロック単
位で平均値を算出したが、ブロックの大きさ（ｌ×ｍ）
［ｌ，ｍ：正整数］は自由に選んでよい。さらに、第二
の特徴量算出回路２６は、シーン変化候補領域だけに対
応した第一の特徴量の平均値を求め第二の特徴量とした
が、複数の特徴量を算出しても良い。例えば、シーン変
化候補領域の第一の特徴量の平均値と分散値を求め、こ
れら両者の特徴量の関係から判定を行っても良い。
【００４１】第二のシーン変化検出部３は、フレーム単
位の色相ヒストグラムとしたが、ブロック単位の色相ヒ
ストグラムを算出し、それらの結果を基にフレーム内の
特徴量を算出しても良い。また、第一のシーン変化検出
部２と同じ方法で第二のシーン変化検出信号３０ｂを生
成しても良い。
位の色相ヒストグラムとしたが、ブロック単位の色相ヒ
ストグラムを算出し、それらの結果を基にフレーム内の
特徴量を算出しても良い。また、第一のシーン変化検出
部２と同じ方法で第二のシーン変化検出信号３０ｂを生
成しても良い。
【００４２】第三のシーン変化検出部４は、第二のシー
ン変化検出部２と同じとしたが、第二のシーン変化検出
部２と異なってもよいし、また、第一のシーン変化検出
部２と同じでも良い。
ン変化検出部２と同じとしたが、第二のシーン変化検出
部２と異なってもよいし、また、第一のシーン変化検出
部２と同じでも良い。
【００４３】シーン変化判定部５での各シーン変化検出
信号３０ａ，３０ｂ，３０ｃの重み付け（α１，α２，
α３）も種々の値が選択できる。一般的には、α１より
α２を小さくし、α２とα３を異なるようにするが、輝
度信号の重み付け（α１）を小さくしても良い。
信号３０ａ，３０ｂ，３０ｃの重み付け（α１，α２，
α３）も種々の値が選択できる。一般的には、α１より
α２を小さくし、α２とα３を異なるようにするが、輝
度信号の重み付け（α１）を小さくしても良い。
【００４４】また、シーン変化検出信号３０ａ，３０
ｂ，３０ｃは、１ビットの信号としたが、多値情報信号
としても良い。つまり、各閾値信号を複数個設定し、第
一，第二及び第三のシーン変化検出信号３０ａ，３０
ｂ，３０ｃを多値信号とすることで、後段のシーン変化
判定部５での重み付けがさらに有効になり、より正確な
シーン検出が可能となる。以上、本発明の主旨を逸脱し
ない範囲で種々の変更を行っても良い。
ｂ，３０ｃは、１ビットの信号としたが、多値情報信号
としても良い。つまり、各閾値信号を複数個設定し、第
一，第二及び第三のシーン変化検出信号３０ａ，３０
ｂ，３０ｃを多値信号とすることで、後段のシーン変化
判定部５での重み付けがさらに有効になり、より正確な
シーン検出が可能となる。以上、本発明の主旨を逸脱し
ない範囲で種々の変更を行っても良い。
【００４５】
【発明の効果】以上のように、本発明によれば、色信号
を輝度信号と第一及び第二の色相信号に分離し、それぞ
れ独立にシーン検出を行い、それらの結果からシーン変
化の総合判定を行うため、従来では誤検出や取りこぼし
がある動画像素材に対しても、正確なシーン検出が可能
となる。また、モノクロ動画像がカラー動画像に混在し
た入力素材に対しても、輝度情報と色相情報を分離して
行っているので、正確なシーン検出が可能である。従っ
て、動画情報の登録／検索が簡単に行え、かつ、動画像
編集の編集効率が高い動画像処理装置を提供できるもの
である。
を輝度信号と第一及び第二の色相信号に分離し、それぞ
れ独立にシーン検出を行い、それらの結果からシーン変
化の総合判定を行うため、従来では誤検出や取りこぼし
がある動画像素材に対しても、正確なシーン検出が可能
となる。また、モノクロ動画像がカラー動画像に混在し
た入力素材に対しても、輝度情報と色相情報を分離して
行っているので、正確なシーン検出が可能である。従っ
て、動画情報の登録／検索が簡単に行え、かつ、動画像
編集の編集効率が高い動画像処理装置を提供できるもの
である。
【図１】本発明の一実施例に係わる動画像処理装置の構
成を示すブロック図。
成を示すブロック図。
【図２】図１に示す動画像処理装置の画像入力部１の詳
細な構成を示すブロック図。
細な構成を示すブロック図。
【図３】図１に示す動画像処理装置の第一のシーン変化
検出部２の詳細な構成を示すブロック図。
検出部２の詳細な構成を示すブロック図。
【図４】図１に示す動画像処理装置の第二のシーン変化
検出部３の詳細な構成を示すブロック図。
検出部３の詳細な構成を示すブロック図。
【図５】図１に示す動画像処理装置のシーン変化判定部
５の詳細な構成を示すブロック図。
５の詳細な構成を示すブロック図。
【図６】典型的な各種シーンのブロック内平均輝度のフ
レーム間差分の絶対値のヒストグラムを示す図。
レーム間差分の絶対値のヒストグラムを示す図。
【図７】本発明のシーン変化検出方式を説明するための
図。
図。
【図８】従来のシーン変化検出方式を説明するための
図。
図。
１…画像入力部、２…第一のシーン変化検出部、３…第
二のシーン変化検出部、４…第三のシーン変化検出部、
５…シーン変化判定部、６…動画像編集部、１０ａ，１
０ｂ，１０ｃ…入力信号、２０ａ…輝度信号、２０ｂ…
第一の色相信号、３０ａ１…第一のシーン変化検出信
号、３０ｂ…第二のシーン変化検出信号、３０ｃ…第三
のシーン変化検出信号、４０…シーン変化判定信号、１
１…Ａ／Ｄ変換回路、１２…信号変換回路、１３ａ…第
一のフレームメモリ（Ａ）、１３ｂ…第一のフレームメ
モリ（Ｂ）、１４ａ…第二のフレームメモリ（Ａ）、１
４ｂ…第二のフレームメモリ（Ｂ）、１５ａ…第三のフ
レームメモリ（Ａ）、１５ｂ…第三のフレームメモリ
（Ｂ）、２１…第一の平均値算出回路、２２…バッファ
メモリ、２３…減算回路、２４…第一の比較回路、２５
…セレクタ、２６…第二の平均値算出回路、２７…第二
の比較回路、２８…第二の平均値算出回路、２９…第二
の平均値算出回路、３１…ヒストグラム算出回路、３２
…バッファメモリ、３３…減算回路、３４…加算回路、
３５…比較回路、３６…第二の平均値算出回路、５１ａ
…第一の乗算回路、５１ｂ…第二の乗算回路、５１ｃ…
第三の乗算回路、５２…加算回路、５３…比較回路、５
４…総合シーン変化検出信号。
二のシーン変化検出部、４…第三のシーン変化検出部、
５…シーン変化判定部、６…動画像編集部、１０ａ，１
０ｂ，１０ｃ…入力信号、２０ａ…輝度信号、２０ｂ…
第一の色相信号、３０ａ１…第一のシーン変化検出信
号、３０ｂ…第二のシーン変化検出信号、３０ｃ…第三
のシーン変化検出信号、４０…シーン変化判定信号、１
１…Ａ／Ｄ変換回路、１２…信号変換回路、１３ａ…第
一のフレームメモリ（Ａ）、１３ｂ…第一のフレームメ
モリ（Ｂ）、１４ａ…第二のフレームメモリ（Ａ）、１
４ｂ…第二のフレームメモリ（Ｂ）、１５ａ…第三のフ
レームメモリ（Ａ）、１５ｂ…第三のフレームメモリ
（Ｂ）、２１…第一の平均値算出回路、２２…バッファ
メモリ、２３…減算回路、２４…第一の比較回路、２５
…セレクタ、２６…第二の平均値算出回路、２７…第二
の比較回路、２８…第二の平均値算出回路、２９…第二
の平均値算出回路、３１…ヒストグラム算出回路、３２
…バッファメモリ、３３…減算回路、３４…加算回路、
３５…比較回路、３６…第二の平均値算出回路、５１ａ
…第一の乗算回路、５１ｂ…第二の乗算回路、５１ｃ…
第三の乗算回路、５２…加算回路、５３…比較回路、５
４…総合シーン変化検出信号。
Claims (6)
- 【請求項１】 動画像の各色信号（ＲＧＢ）をデジタル
画像データに変換した後、フレーム単位での輝度信号
（Ｙ）と第一及び第二の色相信号（Ｃ１，Ｃ２）に分離
する画像入力手段と、 前記画像入力手段によって得られたフレーム間の輝度信
号（Ｙ）に基づいてシーン変化の検出を行なう第一のシ
ーン変化検出手段と、 前記画像入力手段によって得られたフレーム間の第一の
色相信号（Ｃ１）に基づいてシーン変化の検出を行なう
第二のシーン変化検出手段と、 前記画像入力手段によって得られたフレーム間の第二の
色相信号（Ｃ２）に基づいてシーン変化の検出を行なう
第三のシーン変化検出手段と、 前記第一、第二及び第三のシーン変化検出手段によるシ
ーン検出結果に基づいて前記動画像のシーン変化を判定
する動画像シーン変化判定手段と、 を具備したことを特徴とする動画像処理装置。 - 【請求項２】 前記第一のシーン変化検出手段は、 前記輝度信号（Ｙ）のフレーム間のデータに基づいて第
一の特徴量を算出する第一の特徴量算出手段と、 前記第一の特徴量算出手段によって得られた第一の特徴
量に基づいて、フレーム中のシーン変化の候補領域を抽
出するシーン変化候補領域抽出手段と、 前記シーン変化候補領域抽出手段によって得られたシー
ン変化候補領域、及び前記第一の特徴量に基づいて第二
の特徴量を算出する第二の特徴量算出手段と、 前記第二の特徴量算出手段によって得られた第二の特徴
量をもとに、シーン変化を判定する第一のシーン変化判
定手段と、 を具備したことを特徴とする請求項１記載の動画像処理
装置。 - 【請求項３】 前記第二及び第三のシーン変化検出手段
は、前記第一のシーン変化検出手段と同一の構成である
ことを特徴とする請求項１記載の動画像処理装置。 - 【請求項４】 前記第二のシーン変化検出手段は、 前記第一の色相信号（Ｃ１）のフレーム間のデータに基
づく、色相ヒストグラムのフレーム間差分の絶対値の累
積を特徴量としてシーン変化の検出を行なうことを特徴
とする請求項１記載の動画像処理装置。 - 【請求項５】 前記第三のシーン変化検出手段は、前記
第二のシーン変化検出手段と同一の構成であることを特
徴とする請求項１記載の動画像処理装置。 - 【請求項６】 前記シーン変化判定手段は、 前記第一、第二及び第三のシーン変化検出手段による検
出結果に対する加重平均に基づいてシーン変化の判定を
行うことを特徴とする請求項１記載の動画像処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4185303A JPH0636026A (ja) | 1992-07-13 | 1992-07-13 | 動画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4185303A JPH0636026A (ja) | 1992-07-13 | 1992-07-13 | 動画像処理装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH0636026A true JPH0636026A (ja) | 1994-02-10 |
Family
ID=16168501
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4185303A Pending JPH0636026A (ja) | 1992-07-13 | 1992-07-13 | 動画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0636026A (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0944639A (ja) * | 1995-08-02 | 1997-02-14 | Nippon Telegr & Teleph Corp <Ntt> | 映像ブロック分類方法及び装置 |
| JPH09270006A (ja) * | 1996-04-03 | 1997-10-14 | Toshiba Corp | 動画像処理方法 |
| JP2001155169A (ja) * | 1999-11-24 | 2001-06-08 | Nec Corp | ビデオ画像の分割、分類、および要約のための方法およびシステム |
| JP2003196662A (ja) * | 2001-12-27 | 2003-07-11 | Ntt Data Corp | カット検出装置およびそのプログラム |
| JP2006349909A (ja) * | 2005-06-15 | 2006-12-28 | Seiko Epson Corp | 画像表示装置とその制御方法 |
| JP2008124611A (ja) * | 2006-11-09 | 2008-05-29 | Nippon Hoso Kyokai <Nhk> | 動画像評価装置 |
| KR101430256B1 (ko) * | 2013-02-27 | 2014-09-22 | 부경대학교 산학협력단 | 디지털 감시 카메라 시스템을 위한 적응적 임계값을 사용하는 자동 장면 전환 검출 방법 |
| JP2018514118A (ja) * | 2015-03-17 | 2018-05-31 | ネットフリックス・インコーポレイテッドＮｅｔｆｌｉｘ， Ｉｎｃ． | ビデオプログラムのセグメントの検出 |
| WO2019082268A1 (ja) * | 2017-10-24 | 2019-05-02 | 三菱電機株式会社 | 画像処理装置及び画像処理方法 |
-
1992
- 1992-07-13 JP JP4185303A patent/JPH0636026A/ja active Pending
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0944639A (ja) * | 1995-08-02 | 1997-02-14 | Nippon Telegr & Teleph Corp <Ntt> | 映像ブロック分類方法及び装置 |
| JPH09270006A (ja) * | 1996-04-03 | 1997-10-14 | Toshiba Corp | 動画像処理方法 |
| JP2001155169A (ja) * | 1999-11-24 | 2001-06-08 | Nec Corp | ビデオ画像の分割、分類、および要約のための方法およびシステム |
| JP2003196662A (ja) * | 2001-12-27 | 2003-07-11 | Ntt Data Corp | カット検出装置およびそのプログラム |
| JP2006349909A (ja) * | 2005-06-15 | 2006-12-28 | Seiko Epson Corp | 画像表示装置とその制御方法 |
| JP4701851B2 (ja) * | 2005-06-15 | 2011-06-15 | セイコーエプソン株式会社 | 画像表示装置とその制御方法 |
| JP2008124611A (ja) * | 2006-11-09 | 2008-05-29 | Nippon Hoso Kyokai <Nhk> | 動画像評価装置 |
| JP4589291B2 (ja) * | 2006-11-09 | 2010-12-01 | 日本放送協会 | 動画像評価装置 |
| KR101430256B1 (ko) * | 2013-02-27 | 2014-09-22 | 부경대학교 산학협력단 | 디지털 감시 카메라 시스템을 위한 적응적 임계값을 사용하는 자동 장면 전환 검출 방법 |
| JP2018514118A (ja) * | 2015-03-17 | 2018-05-31 | ネットフリックス・インコーポレイテッドＮｅｔｆｌｉｘ， Ｉｎｃ． | ビデオプログラムのセグメントの検出 |
| US10452919B2 (en) | 2015-03-17 | 2019-10-22 | Netflix, Inc. | Detecting segments of a video program through image comparisons |
| WO2019082268A1 (ja) * | 2017-10-24 | 2019-05-02 | 三菱電機株式会社 | 画像処理装置及び画像処理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP1986128B1 (en) | Image processing apparatus, imaging apparatus, image processing method, and computer program | |
| Aner et al. | Video summaries through mosaic-based shot and scene clustering | |
| EP1431912B1 (en) | Method and system for determining an area of importance in an archival image | |
| Gargi et al. | Evaluation of video sequence indexing and hierarchical video indexing | |
| JP2006510072A (ja) | 一様なカラーセグメントを検出するための方法及びシステム | |
| KR100865248B1 (ko) | 비디오 신호에서의 자막 검출 | |
| JP2004040808A (ja) | 場面転換検出装置及びその方法 | |
| JP3131560B2 (ja) | 動画像処理システムにおける動画像情報検出装置 | |
| JP2007088814A (ja) | 撮像装置、画像記録装置および撮像制御プログラム | |
| US8306123B2 (en) | Method and apparatus to improve the convergence speed of a recursive motion estimator | |
| JPH0636026A (ja) | 動画像処理装置 | |
| US8311269B2 (en) | Blocker image identification apparatus and method | |
| US7679676B2 (en) | Spatial signal conversion | |
| JP2978039B2 (ja) | 動画像のカット画面検出方法 | |
| KR100249826B1 (ko) | 디지털 동영상 데이터 자동분할장치 및 그 방법 | |
| KR101098300B1 (ko) | 공간 신호 변환 | |
| JPH07236153A (ja) | 動画像のカット点検出およびカット画面グループ検出装置 | |
| Latecki et al. | Extraction of key frames from videos by optimal color composition matching and polygon simplification | |
| JPH0636030A (ja) | 動画像処理装置 | |
| JP2000194727A (ja) | 動画像検索装置、動画像検索方法、及び動画像検索プログラムを記録した記録媒体 | |
| JP3332202B2 (ja) | カメラワーク算出方法及び装置 | |
| KR20100118811A (ko) | 감시 카메라 시스템의 관리를 위한 장면 전환 검출 방법과 장면 전환 검출 신뢰도 산출 방법 및 소프트웨어 | |
| KR100311739B1 (ko) | 동영상장면변환검출방법 | |
| GB2428924A (en) | Automatic detection of still frames in video content | |
| JPH0729007A (ja) | 映像特徴処理方法 |