JPH0993527A - 映像インデックス作成装置 - Google Patents

Abstract

(57)【要約】 【課題】 シーンチェンジ検出時に取り込んだ代表画像
を、適切に選び直して上で映像インデックスを作成でき
る映像インデックス作成装置を提供する。 【解決手段】 まず、入力映像を映像格納部１０７に格
納すると共に、シーンチェンジ検出部１０１によりシー
ンチェンジを検出し、その検出時に入力映像から代表画
像を取り込み、代表画像格納部１０４に格納する。次
に、操作により制御部１１１が映像再生部１０８に命令
して、映像格納部１０７から指定のシーンチェンジ前後
の映像を再生する。次に、操作により再生映像の中から
最も価値の高い画像を選択し、その静止画像を置き換え
画像取り込み部１１０により取り込み、代表画像格納部
１０４の代表画像と置き換える。この置き換えがなされ
た代表画像群から映像インデックス生成部１０５にて映
像インデックスを生成し、インデックス印刷部１１３に
てビデオリスト等の映像インデックスを印刷する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、映像中のシーンチ
ェンジを手がかりに取り込んだ静止画像を代表画像とす
るに際し、映像中から別途、取り込んだ任意のフレーム
の静止画像を代表画像として選び直した上で、選び直し
た代表画像からなる映像インデックスを作成できる環境
を実現する映像インデックス作成装置に関するものであ
り、映像インデックス制作業、映像ライブラリ業、映像
ＣＤ−ＲＯＭ製造業、ビデオ製造業、電子出版業など、
映像インデックスの制作ならびに映像インデックスを利
用したサービスに関わる広範囲の産業分野で好適に利用
し得るものである。

【０００２】

【従来の技術】従来の映像インデックス作成装置では、
映像が時間的に急激に変化する部分である所謂シーンチ
ェンジを手がかりに、シーンチェンジ検出時に取り込ん
だ１フレームの静止画像をそのまま代表画像として採用
している。映像ライブラリ業に代表される映像インデッ
クスを利用する業者は、自社の映像資産や製品を、顧客
に広く宣伝する目的から、ハードコピーとして印刷され
たディスプレイに表示される映像インデックスを使っ
て、ビデオリストとして配布する試みを検討している。

【０００３】

【発明が解決しようとする課題】ところで、上記のビデ
オリストに印刷あるいは表示される代表画像は、必ずし
もシーンチェンジ検出時の画像である必要はなく、むし
ろカット全体を代表する画像、あるいは、シーンの中で
一番価値の高い画像、すなわち、美しい、あるいは迫力
のある、あるいは貴重な瞬間等の画像であることが有効
である。

【０００４】しかしながら、上記従来の映像インデック
ス作成装置で作成されるインデックスは、シーンチェン
ジ検出時の画像であり、必ずしも一連のシーン中で一番
価値の高い画像とはなっていないということが大きな問
題となっていた。

【０００５】本発明は、上記従来技術の問題点の解決す
るためのものであり、映像の中から取り込んだ任意の適
切なフレームの静止画像を代表画像として選び直した上
で、選び直した価値の高い代表画像からなる映像インデ
ックスを作成できる環境を実現する映像インデックス装
置を提供することを目的とするものである。

【０００６】

【課題を解決するための手段】上記の目的を達成するた
め、本発明では、映像が時間的に急激に変化する部分で
あるところのシーンチェンジを含む映像に対して映像イ
ンデックス作成を行う映像インデックス作成装置におい
て、シーンチェンジを検出する手段と、前記シーンチェ
ンジの検出時における１フレーム以上の静止画像を取り
込む手段と、前記取り込んだ１フレーム以上の静止画像
を代表画像として表示する手段と、前記シーンチェンジ
の前後の映像を再生する手段と、前記再生した映像の中
の１フレームの静止画像を取り込む手段と、前記取り込
んだ１フレームの静止画像を前記代表画像の１フレーム
と置き換える手段と、を具備することを特徴とする映像
インデックス作成装置を用いる。

【０００７】上記の映像インデックス作成装置において
は、表示された代表画像によりシーンの選択操作を可能
にするとともに映像を再生する手段が再生した映像を表
示して該映像の中の１フレームの静止画像の選択操作を
可能にする手段を具備し、前記映像を再生する手段は、
前記選択操作を可能にする手段で選択されたシーンを表
す代表画像が属するシーンチェンジの前後の映像を再生
し、前記再生した映像の中の１フレームの静止画像を取
り込む手段は、前記選択操作を可能にする手段で選択さ
れた１フレームの静止画像を取り込むようにするのが、
その操作性を良くする点で好適である。

【０００８】また、以上の映像インデックス作成装置に
おいて、シーンチェンジの前後の映像を再生する手段
は、シーンチェンジの検出時の時点情報に基づいて外部
から入力映像を提供する手段を制御して指定のシーンチ
ェンジの前後の映像を再生するのが、装置の構成を簡単
にする上で好適である。

【０００９】本発明では、シーンチェンジ前後の映像を
再生し、その再生映像の中から最も価値の高い１フレー
ム以上の静止画像を選択可能とし、そこで選択された静
止画像を取り込んで１フレーム以上の代表画像と置き換
えることにより、代表画像の変更機能を実現し、各シー
ンの中から選択された最も価値の高い画像からなるビデ
オリスト等の映像インデックスを作成することができる
ようにする。

【００１０】

【発明の実施の形態】以下に、本発明の実施の形態例に
ついて、図面を用いて詳しく説明する。

【００１１】図１に、本発明の一実施の形態例の構成を
ブロック図で示す。本実施の形態例は、以下の各部より
成る。

【００１２】（１）シーンチェンジ検出部 シーンチェンジ検出部１０１には、外部から入力映像信
号とタイムコードが入力される。このシーンチェンジ検
出部１０１では、入力映像が時間的に急激に変化する部
分であるところのシーンチェンジを常時監視し、シーン
チェンジを検出すると、その検出信号を代表画面取り込
み部１０３へ出力するとともに、その時点のタイムコー
ド情報を、シーンチェンジ情報格納部１０２へ出力す
る。シーンチェンジの検出方法としては、例えば、連続
するあるいは近接するフレーム間の輝度（カラー映像の
場合はＲ，Ｇ，Ｂのそれぞれの輝度）の変化を統計的な
処理によって求め、その値がある閾値より大きい場合に
シーンチェンジが発生したとする例等が知られている。
このため、このシーンチェンジ検出部１０１は、入力映
像に対して１フレーム以上の映像を蓄積する手段を備え
ている。

【００１３】（２）シーンチェンジ情報格納部 シーンチェンジ情報格納部１０２では、シーンチェンジ
検出部１０１からのタイムコード情報を格納する。さら
に、格納したタイムコード情報を制御部１１１へ出力す
る。

【００１４】（３）代表画像取り込み部 代表画像取り込み部１０３では、シーンチェンジ検出部
１０１からシーンチェンジ検出信号が入力されると、入
力映像信号から、例えば、その直後の１フレーム（１フ
レーム以上であってもかまわない）の代表画像を取り込
み、取り込んだ代表画像データを、代表画像格納部１０
４へ出力する。

【００１５】（４）代表画像格納部 代表画像格納部１０４では、代表画像取り込み部１０３
からの代表画像データを格納するとともに、置き換え画
像取り込み部１１０からの置き換え画像データが送られ
てきた場合には、その置き換え画像データで代表画像デ
ータを置き換えて格納する。さらに、格納した代表画像
群を、映像インデックス生成部１０５へ出力する。

【００１６】（５）映像インデックス生成部 映像インデックス生成部１０５では、制御部１１１から
の映像インデックス生成命令に従って、代表画像格納部
１０４に格納された代表画像群から構成される映像イン
デックスを生成し、表示部１０９ならびにインデックス
印刷部１１３へ出力する。

【００１７】（６）映像取り込み部 映像取り込み部１０６では、入力映像信号を取り込ん
で、映像データを映像格納部１０７へ出力する。

【００１８】（７）映像格納部 映像格納部１０７では、映像取り込み部１０６からの映
像データを格納する。さらに、格納した映像データを、
映像再生部１０８へ出力する。

【００１９】（８）映像再生部 映像再生部１０８では、制御部１１１からの映像再生命
令に従って、映像格納部１０７に格納された映像情報を
再生し、表示部１０９ならびに置き換え画像取り込み部
１１０へ送出する。

【００２０】（９）表示部 表示部１０９では、映像再生部１０８からの再生映像、
映像インデックス生成部１０５で生成された映像インデ
ックス、ならびに、制御部１１１からの操作パネルやボ
タン情報等を表示する。

【００２１】（１０）置き換え画像取り込み部 置き換え画像取り込み部１１０では、映像再生操作によ
って表示される再生映像の中から、制御部１１１からの
置き換え画像取り込み命令に従って置き換え画像を取り
込み、代表画像格納部１０４に対して、対応する代表画
像との置き換えを行って、置き換えられた新しい代表画
像を出力する。

【００２２】（１１）制御部 制御部１１１では、操作入力部１１２からの操作情報に
従って、映像再生部１０８へ映像再生命令ならびにシー
ンチェンジ格納部１０２に格納されているシーンチェン
ジ情報を送るとともに、置き換え画像取り込み部１１０
へ代表画像置き換え命令を送り、さらに、映像インデッ
クス生成部１０５へ映像インデックス生成命令を送る。
また、表示部１０９へ、操作に必要となる操作パネルや
ボタン等の情報を出力する。

【００２３】（１２）操作入力部 操作入力部１１２では、マウスやキーボード等の入力デ
バイスから、操作情報を制御部１１１へ入力する。

【００２４】（１３）インデックス印刷部 インデックス印刷部１１３では、映像インデックス生成
部１０５で生成された映像インデックスを印刷する。

【００２５】以下に、映像インデックス作成操作の例
を、図２の映像インデックス作成操作画面の例を用いて
説明する。

【００２６】図２において、ディスプレイの画面２０１
には、再生映像表示ウィンドウ２０２、映像インデック
ス表示ウィンドウ２０３、操作パネル２０４、ならび
に、置き換え画像選択ボタン２０５が表示されている。
この例では、操作パネル２０４に表示されているボタン
は７種類で、左から、逆方向早送り、逆方向再生、逆方
向コマ送り、停止、順方向コマ送り、順方向再生、順方
向早送りを、それぞれ表わしている。

【００２７】まず、映像インデックス表示ウィンドウ２
０３の中から、変更したい代表画像を、マウス等を用い
て選択する。この操作により、映像格納部１０７に格納
されている映像の再生準備が行われ、再生映像表示ウィ
ンドウ２０２には、選択された代表画像に対応するフレ
ーム画像の表示の準備がなされる。

【００２８】次に、操作者が操作パネル２０４の各ボタ
ンをマウス等で選択して再生等の操作をすると、制御部
１１１から映像再生命令ならびにシーンチェンジ格納部
１０２に格納されているシーンチェンジ情報が映像再生
部１０８ヘ送られ、映像再生部１０８は、選択された代
表画像が属するシーンチェンジの前後の映像を映像格納
部１０７から再生する。再生された映像の各フレーム画
像は表示部１０９のディスプレイ画面２０１上の再生映
像表示ウィンドウ２０２に表示される。

【００２９】次に、操作者は、その再生され表示された
フレーム画像の中から代表画像として最適な画像を探
す。操作パネル２０４の操作により、映像の中から、代
表画像として最適な画像を再生映像表示ウィンドウ２０
２に表示した状態で停止させる。操作者は、再生映像表
示ウィンドウ２０２に表示された画像が代表画像として
適切であることを確認したのち、マウス等により置き換
え画像選択ボタン２０５を選択する。この操作により、
制御部１１１から置き換え画像取り込み部１１０へ置き
換え画像取り込み命令が送られ、この命令により取り込
まれた画像が代表画像と置き換えられ、改めて代表画像
格納部１０４に格納される。また、これと同時に、映像
インデックス生成部１０５へ映像インデックス生成命令
が送られ、映像インデックスの修正が行われる。

【００３０】以上が本実施の形態例の説明である。な
お、本実施の形態例においては、代表画像を、取り込ん
だ１フレームの静止画像と置き換える例を示したが、ひ
とつのシーンの中で２枚以上の静止画像と置き換えるこ
とも考えられる。これは、置き換える静止画像を複数選
択した上で置き換え実行を行うように、操作手続きを変
更することによって実現できる。

【００３１】また、本実施の形態例において、映像を一
旦蓄積し、蓄積された映像を改めて再生しながらインデ
ックスの生成を行う例を示したが、映像は、必ずしも装
置内に蓄積する必要はなく、代表画像を対応するタイム
コードに基づいて入力映像を提供するビデオデッキ等を
制御し、インデックス生成を行うこともできる。

【００３２】

【発明の効果】以上の説明で明らかなように、本発明に
よれば、シーンチェンジの検出により取り込んだ代表画
像を、指定されたシーンのシーンチェンジ前後の映像を
再生しその中から適切な画像を選択して置き換えられる
ようにしたので、顧客が映像ライブラリ等の映像資産の
中から、所望の映像およびシーンを選び出す作業が容易
になるという効果が期待できる。

【図面の簡単な説明】

【図１】本発明による映像インデックス作成装置の一実
施の形態例を示すブロック図である。

【図２】上記実施の形態例における映像インデックス作
成装置の操作画面の例を示す図である。

【符号の説明】

１０１…シーンチェンジ検出部 １０２…シーンチェンジ情報格納部 １０３…代表画像取り込み部 １０４…代表画像格納部 １０５…映像インデックス生成部 １０６…映像取り込み部 １０７…映像格納部 １０８…映像再生部 １０９…表示部 １１０…置き換え画像取り込み部 １１１…制御部 １１２…操作入力部 １１３…インデックス印刷部 ２０１…ディスプレイ画面 ２０２…再生映像表示ウィンドウ ２０３…映像インデックス表示ウィンドウ ２０４…操作パネル ２０５…置き換え画像選択ボタン

───────────────────────────────────────────────────── フロントページの続き (72)発明者 阿久津 明人 東京都千代田区内幸町１丁目１番６号 日 本電信電話株式会社内 (72)発明者 浜田 洋 東京都千代田区内幸町１丁目１番６号 日 本電信電話株式会社内

Claims (3)

【特許請求の範囲】
1. 【請求項１】 映像が時間的に急激に変化する部分であ
   るところのシーンチェンジを含む映像に対して映像イン
   デックス作成を行う映像インデックス作成装置におい
   て、 シーンチェンジを検出する手段と、 前記シーンチェンジの検出時における１フレーム以上の
   静止画像を取り込む手段と、 前記取り込んだ１フレーム以上の静止画像を代表画像と
   して表示する手段と、 前記シーンチェンジの前後の映像を再生する手段と、 前記再生した映像の中の１フレームの静止画像を取り込
   む手段と、 前記取り込んだ１フレームの静止画像を前記代表画像の
   １フレームと置き換える手段と、 を具備することを特徴とする映像インデックス作成装
   置。
2. 【請求項２】 表示された代表画像によりシーンの選択
   操作を可能にするとともに映像を再生する手段が再生し
   た映像を表示して該映像の中の１フレームの静止画像の
   選択操作を可能にする手段を具備し、 前記映像を再生する手段は、前記選択操作を可能にする
   手段で選択されたシーンを表す代表画像が属するシーン
   チェンジの前後の映像を再生し、 前記再生した映像の中の１フレームの静止画像を取り込
   む手段は、前記選択操作を可能にする手段で選択された
   １フレームの静止画像を取り込むことを特徴とする請求
   項１記載の映像インデックス作成装置。
3. 【請求項３】 シーンチェンジの前後の映像を再生する
   手段は、シーンチェンジの検出時の時点情報に基づいて
   外部から入力映像を提供する手段を制御して指定のシー
   ンチェンジの前後の映像を再生することを特徴とする請
   求項１または請求項２記載の映像インデックス作成装
   置。