JP3258924B2 - Scene management device, scene management method, and recording medium - Google Patents

Scene management device, scene management method, and recording medium

Info

Publication number
JP3258924B2
JP3258924B2 JP04560697A JP4560697A JP3258924B2 JP 3258924 B2 JP3258924 B2 JP 3258924B2 JP 04560697 A JP04560697 A JP 04560697A JP 4560697 A JP4560697 A JP 4560697A JP 3258924 B2 JP3258924 B2 JP 3258924B2
Authority
JP
Japan
Prior art keywords
scene
image
representative frame
index
representative
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP04560697A
Other languages
Japanese (ja)
Other versions
JPH10243323A (en
Inventor
茂樹 原田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP04560697A priority Critical patent/JP3258924B2/en
Publication of JPH10243323A publication Critical patent/JPH10243323A/en
Application granted granted Critical
Publication of JP3258924B2 publication Critical patent/JP3258924B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Image Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、動画の編集に際
し、動画データをシーン単位で管理するシーン管理装
置、シーン管理方法及び記録媒体に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a scene management device, a scene management method, and a recording medium for managing moving image data in scene units when editing moving images.

【0002】[0002]

【従来の技術】動画は複数のシーン(場面)が集まって
構成されると考えることができる。そこで、動画を編集
するためには、必要なシーンをいかに素早く、また間違
いなく探せるかということが重要になってくる。
2. Description of the Related Art A moving image can be considered to be composed of a plurality of scenes (scenes). Therefore, in order to edit a moving image, it is important to find a necessary scene quickly and without fail.

【0003】従来、動画ファイルを管理する方法とし
て、その動画データを構成する複数のフレーム画像のう
ち、1フレーム(例えば先頭フレーム画像)を代表フレ
ーム画像として抽出する。そして、その代表フレーム画
像を圧縮して縮小画像することによりインデックス画像
を作成する。このように作成した複数のインデックス画
像をマルチ画面表示して、操作者に選択させる方法が知
られている。例えば、特開平4ー295685号公報に
は、複数の動画データが記録されたビデオテープに対
し、各動画データの開始位置のフレーム画像に対応した
縮小画像をマルチ画面表示するためのデータを記録する
方法が開示されている。また、特開平3ー292572
号公報では、動画データを構成する複数のフレーム画像
の中からカット点を検出し、そのカット点の前又は後の
フレーム画像をインデックス画像とする手法が開示され
ている。カット点とは、例えばカメラアングルが変化し
た点のことである。
Conventionally, as a method of managing a moving image file, one frame (for example, a leading frame image) is extracted as a representative frame image from a plurality of frame images constituting the moving image data. Then, an index image is created by compressing and reducing the representative frame image. A method is known in which a plurality of index images created in this manner are displayed on a multi-screen and an operator selects the index image. For example, in Japanese Patent Application Laid-Open No. Hei 4-295885, data for displaying a reduced image corresponding to a frame image at a start position of each moving image data on a multi-screen is recorded on a video tape on which a plurality of moving image data are recorded. A method is disclosed. Also, Japanese Patent Application Laid-Open No. 3-292572
Japanese Patent Application Laid-Open Publication No. H11-163873 discloses a technique in which a cut point is detected from a plurality of frame images constituting moving image data, and a frame image before or after the cut point is used as an index image. The cut point is, for example, a point at which the camera angle changes.

【0004】[0004]

【発明が解決しようとする課題】しかしながら、動画の
編集においては、操作者が各シーンのインデックス画像
を見て、そのシーンがどのような内容のものであるか判
断する必要がある。そのため、異なるシーンで複数の類
似したインデックス画像が作成された場合、誤ったイン
デックス画像を選択してしまう可能性が高い。また、誤
ってインデックス画像を選択しないようにするために
は、類似したインデックス画像のうち、どのインデック
ス画像が希望のシーンに対応するものであるかを確認す
る必要があるが、この確認のためには類似したインデッ
クス画像に対応するシーンを再生して判断しなければな
らない。従って、動画のシーン管理に手間を要し、処理
効率が低下するという問題がある。
However, in editing a moving image, it is necessary for an operator to see the index image of each scene and determine what kind of content the scene has. Therefore, when a plurality of similar index images are created in different scenes, there is a high possibility that an incorrect index image will be selected. Also, in order not to select an index image by mistake, it is necessary to confirm which of the similar index images corresponds to a desired scene. Must be judged by reproducing the scene corresponding to the similar index image. Therefore, there is a problem that it takes time to manage the scene of the moving image, and the processing efficiency is reduced.

【0005】本発明は上記問題点を解決するためになさ
れたものであって、その目的は、シーン単位に分割され
た動画データから、所望のシーンを容易かつ確実に選択
することができ、処理効率を向上することができるシー
ン管理装置、シーン管理方法を提供することにある。
SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and an object of the present invention is to enable a desired scene to be easily and reliably selected from moving image data divided into scene units. An object of the present invention is to provide a scene management device and a scene management method capable of improving efficiency.

【0006】[0006]

【課題を解決するための手段】上記目的を達成するた
め、請求項1の発明は、動画データをシーン単位で管理
するシーン管理装置において、画像を表示するための表
示手段と、各シーンを構成する複数のフレーム画像から
所定のフレーム画像を代表フレーム画像として抜き出し
てその代表フレーム画像に基づいてインデックス画像を
作成するインデックス作成部と、これら代表フレーム画
像の類似性を判定する判定部と、シーン検索時におい
て、各シーンのインデックス画像を表示手段に表示させ
るとともに、類似性があると判定された代表フレーム画
像のインデックス画像には、類似するインデックス画像
が存在することを示すマーカを表示させる表示制御部と
を備えたシーン管理装置をその要旨とする。
According to a first aspect of the present invention, there is provided a scene management apparatus for managing moving image data in units of scenes, comprising: display means for displaying images; An index creation unit that extracts a predetermined frame image as a representative frame image from a plurality of frame images to be created and creates an index image based on the representative frame image; a determination unit that determines the similarity of these representative frame images; A display control unit that displays an index image of each scene on the display unit and displays a marker indicating that a similar index image exists in the index image of the representative frame image determined to have similarity. The gist is a scene management device including the above.

【0007】請求項2の発明は、表示制御部は、シーン
検索時にインデックス画像を表示する際、類似性がある
と判定された代表フレーム画像のインデックス画像に
は、当該代表フレーム画像に類似する代表フレーム画像
を持つシーンの件数を表示することをその要旨とする。
According to a second aspect of the present invention, when the display control unit displays the index image at the time of the scene search, the display control unit includes, in the index image of the representative frame image determined to have similarity, a representative image similar to the representative frame image. The gist is to display the number of scenes having a frame image.

【0008】請求項3の発明は、動画データをシーン単
位で管理するシーン管理装置において、画像を表示する
ための表示手段と、各シーンを構成する複数のフレーム
画像から所定のフレーム画像を代表フレーム画像として
抜き出してその代表フレーム画像に基づいてインデック
ス画像を作成するインデックス作成部と、これら代表フ
レーム画像間の相互の類似性を判定する判定部と、相互
に類似性のある代表フレーム画像を有するシーンについ
て、各シーンを構成する複数のフレーム画像より所定数
のフレーム画像を抜き出して副インデックス画像を作成
する副インデックス作成部と、シーン検索時において、
各シーンのインデックス画像を前記表示手段に表示させ
るとともに、類似性があると判定された代表フレーム画
像のインデックス画像が選択された場合には、当該シー
ンのインデックス画像と所定数の副インデックス画像と
を切り換えて表示する表示制御部とを備えたシーン管理
装置をその要旨とする。
According to a third aspect of the present invention, there is provided a scene management apparatus for managing moving image data on a scene basis, wherein a display means for displaying an image and a predetermined frame image from a plurality of frame images constituting each scene are represented by a representative frame. An index creation unit that extracts an image and creates an index image based on the representative frame image, a determination unit that determines mutual similarity between these representative frame images, and a scene having a mutually similar representative frame image A sub-index creating unit that extracts a predetermined number of frame images from a plurality of frame images constituting each scene to create a sub-index image;
When the index image of each scene is displayed on the display means and an index image of a representative frame image determined to have similarity is selected, the index image of the scene and a predetermined number of sub-index images are compared. A gist of the present invention is a scene management device including a display control unit for switching and displaying.

【0009】請求項4の発明は、判定部は、各シーンの
代表フレーム画像を所定数のブロックに分割し、各ブロ
ックの画素成分のヒストグラムを算出し、2つのシーン
の代表フレーム画像について、対応するブロックのヒス
トグラムに基づいて両ブロックの画素成分の差分絶対値
が所定の閾値以下であるブロックを類似ブロックとして
求め、類似ブロックの数が所定の数より多い場合に2つ
のシーンの代表フレーム画像に類似性があると判定する
ことをその要旨とする。
According to a fourth aspect of the present invention, the determining section divides the representative frame image of each scene into a predetermined number of blocks, calculates a histogram of the pixel components of each block, and calculates a histogram of the representative frame image of the two scenes. A block in which the absolute value of the difference between the pixel components of the two blocks is equal to or smaller than a predetermined threshold is determined as a similar block based on the histogram of the blocks to be processed, and when the number of similar blocks is larger than the predetermined number, a representative frame image of two scenes The gist is to determine that there is similarity.

【0010】請求項5の発明は、判定部は、各シーンの
代表フレーム画像の画素成分の合計値を算出し、2つの
シーンの代表フレーム画像の画素成分の差分値が所定の
閾値以下となる代表フレーム画像の組を選択し、選択さ
れた組の各代表フレーム画像を所定数のブロックに分割
し、各ブロックの画素成分のヒストグラムを算出し、両
代表フレーム画像について、対応するブロックのヒスト
グラムに基づいて両ブロックの画素成分の差分絶対値が
所定の閾値以下であるブロックを類似ブロックとして求
め、類似ブロックの数が所定の数より多い場合に2つの
シーンの代表フレーム画像に類似性があると判定するこ
とをその要旨とする。
According to a fifth aspect of the present invention, the determining section calculates the total value of the pixel components of the representative frame image of each scene, and the difference value between the pixel components of the representative frame image of the two scenes is equal to or less than a predetermined threshold value. A representative frame image set is selected, each representative frame image of the selected set is divided into a predetermined number of blocks, a histogram of pixel components of each block is calculated, and for both representative frame images, a histogram of a corresponding block is calculated. A block in which the absolute value of the difference between the pixel components of the two blocks is equal to or smaller than a predetermined threshold value is determined as a similar block. The gist is to judge.

【0011】請求項6の発明は、副インデックス作成部
は、類似性があると判定された代表フレーム画像を含む
シーンについて、それらのシーンを構成するフレーム画
像の数を均等に分割した位置におけるフレーム画像に基
づいて副インデックス画像を作成することをその要旨と
する。
According to a sixth aspect of the present invention, the sub-index creating section is configured to determine, for a scene including a representative frame image determined to have similarity, a frame at a position where the number of frame images constituting the scene is equally divided. The gist is to create a sub-index image based on an image.

【0012】請求項7の発明は、副インデックス作成部
は、類似性があると判定された代表フレーム画像を含む
シーンについて、それらのシーンを構成する複数のフレ
ーム画像から所定間隔をおいて抽出したフレーム画像に
基づいて副インデックス画像を作成することをその要旨
とする。
According to a seventh aspect of the present invention, the sub-index creating section extracts scenes including a representative frame image determined to be similar at predetermined intervals from a plurality of frame images constituting the scene. The gist is to create a sub-index image based on a frame image.

【0013】請求項8の発明は、表示制御部は、シーン
検索時に表示されたインデックス画像の中から、類似性
があると判定された代表フレーム画像のインデックス画
像が選択された場合に、該インデックス画像と共に、該
インデックス画像の代表フレーム画像と類似性のある代
表フレーム画像のインデックス画像をマルチ画面表示す
ることをその要旨とする。
According to an eighth aspect of the present invention, when the index image of the representative frame image determined to have similarity is selected from the index images displayed at the time of the scene search, the display control section determines the index. The gist of the present invention is to display an index image of a representative frame image similar to the representative frame image of the index image together with the image on a multi-screen.

【0014】請求項9の発明は、動画データをシーン単
位で管理するシーン管理装置において、各シーンを構成
する複数のフレーム画像から所定のフレーム画像を代表
フレーム画像として抜き出してその代表フレーム画像に
基づいてインデックス画像を作成するインデックス作成
部と、各シーンの代表フレーム画像を所定数のブロック
に分割し、各ブロックの画素成分のヒストグラムを算出
し、2つのシーンの代表フレーム画像について、対応す
るブロックのヒストグラムに基づいて両ブロックの画素
成分の差分絶対値が所定の閾値以下であるブロックを類
似ブロックとして求め、類似ブロックの数が所定の数よ
り多い場合に2つのシーンの代表フレーム画像に類似性
があると判定する判定部とを備えたシーン管理装置をそ
の要旨とする。
According to a ninth aspect of the present invention, in a scene management apparatus for managing moving image data in scene units, a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and the image is determined based on the representative frame image. An index creation unit for creating an index image by dividing the representative frame image of each scene into a predetermined number of blocks, calculating a histogram of the pixel components of each block, and calculating the histogram of the corresponding frame for the representative frame images of the two scenes. A block in which the absolute value of the difference between the pixel components of both blocks is equal to or smaller than a predetermined threshold is determined as a similar block based on the histogram, and when the number of similar blocks is larger than the predetermined number, the similarity between the representative frame images of the two scenes is high. The gist is a scene management device including a determination unit that determines that there is a scene.

【0015】請求項10の発明は、動画データをシーン
単位で管理するシーン管理装置において、各シーンを構
成する複数のフレーム画像から所定のフレーム画像を代
表フレーム画像として抜き出してその代表フレーム画像
に基づいてインデックス画像を作成するインデックス作
成部と、各シーンの代表フレーム画像の画素成分の合計
値を算出し、2つのシーンの代表フレーム画像の画素成
分の差分値が所定の閾値以下となる代表フレーム画像の
組を選択し、選択された組の各代表フレーム画像を所定
数のブロックに分割し、各ブロックの画素成分のヒスト
グラムを算出し、両代表フレーム画像について、対応す
るブロックのヒストグラムに基づいて両ブロックの画素
成分の差分絶対値が所定の閾値以下であるブロックを類
似ブロックとして求め、類似ブロックの数が所定の数よ
り多い場合に2つのシーンの代表フレーム画像に類似性
があると判定する判定部とを備えたシーン管理装置をそ
の要旨とする。
According to a tenth aspect of the present invention, in a scene management apparatus for managing moving image data in scene units, a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and based on the representative frame image. An index creation unit for creating an index image by calculating a total value of pixel components of a representative frame image of each scene, and a difference value of a pixel component of the representative frame image of the two scenes being equal to or less than a predetermined threshold value Is selected, each representative frame image of the selected set is divided into a predetermined number of blocks, a histogram of the pixel components of each block is calculated, and both representative frame images are calculated based on the histograms of the corresponding blocks. A block in which the difference absolute value of the pixel component of the block is equal to or less than a predetermined threshold is regarded as a similar block Because, the scene management unit number and a and determination unit a similarity in the representative frame image of the two scenes when more than a predetermined number of similar blocks as its gist.

【0016】[0016]

【0017】請求項11の発明は、動画データをシーン
単位で管理するシーン管理方法において、各シーンを構
成する複数のフレーム画像から所定のフレーム画像を代
表フレーム画像として抜き出してその代表フレーム画像
に基づいてインデックス画像を作成するインデックス作
成処理と、これら代表フレーム画像の類似性を判定する
判定処理と、シーン検索時に各シーンのインデックス画
像を表示する際、類似性があると判定された代表フレー
ム画像のインデックス画像には、類似するインデックス
画像が存在することを示すマーカを表示する表示処理と
を備えたシーン管理方法をその要旨とする。
According to an eleventh aspect of the present invention, in the scene management method for managing moving image data on a scene basis, a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and based on the representative frame image. An index creation process for creating an index image by performing indexing, a determination process for determining the similarity between these representative frame images, and displaying an index image of each scene during a scene search. The gist of the present invention is a scene management method including a display process of displaying a marker indicating that a similar index image exists in an index image.

【0018】請求項12の発明は、表示処理は、シーン
検索時にインデックス画像を表示する際、類似性がある
と判定された代表フレーム画像のインデックス画像に
は、当該代表フレーム画像に類似する代表フレーム画像
を持つシーンの件数を表示することをその要旨とする。
According to a twelfth aspect of the present invention, in the display processing, when an index image is displayed during a scene search, a representative frame image determined to have similarity includes a representative frame image similar to the representative frame image. The gist is to display the number of scenes having images.

【0019】[0019]

【0020】請求項13の発明は、判定処理は、各シー
ンの代表フレーム画像を所定数のブロックに分割し、各
ブロックの画素成分のヒストグラムを算出し、2つのシ
ーンの代表フレーム画像について、対応するブロックの
ヒストグラムに基づいて両ブロックの画素成分の差分絶
対値が所定の閾値以下であるブロックを類似ブロックと
して求め、類似ブロックの数が所定の数より多い場合に
2つのシーンの代表フレーム画像に類似性があると判定
することをその要旨とする。
According to a thirteenth aspect of the present invention, in the determining process, the representative frame image of each scene is divided into a predetermined number of blocks, a histogram of the pixel components of each block is calculated, and the corresponding frame image of the two scenes is calculated. A block in which the absolute value of the difference between the pixel components of the two blocks is equal to or smaller than a predetermined threshold is determined as a similar block based on the histogram of the blocks to be processed, and when the number of similar blocks is larger than the predetermined number, a representative frame image of two scenes The gist is to determine that there is similarity.

【0021】請求項14の発明は、判定処理は、各シー
ンの代表フレーム画像の画素成分の合計値を算出し、2
つのシーンの代表フレーム画像の画素成分の差分値が所
定の閾値以下となる代表フレーム画像の組を選択し、選
択された組の各代表フレーム画像を所定数のブロックに
分割し、各ブロックの画素成分のヒストグラムを算出
し、両代表フレーム画像について、対応するブロックの
ヒストグラムに基づいて両ブロックの画素成分の差分絶
対値が所定の閾値以下であるブロックを類似ブロックと
して求め、類似ブロックの数が所定の数より多い場合に
2つのシーンの代表フレーム画像に類似性があると判定
することをその要旨とする。
According to a fourteenth aspect of the present invention, in the determining process, a total value of pixel components of a representative frame image of each scene is calculated.
Selecting a set of representative frame images in which the difference value of the pixel components of the representative frame images of the two scenes is equal to or less than a predetermined threshold, dividing each representative frame image of the selected set into a predetermined number of blocks, and A histogram of the component is calculated, and for both representative frame images, a block in which the absolute value of the difference between the pixel components of both blocks is equal to or less than a predetermined threshold is determined as a similar block based on the histogram of the corresponding block. The gist is to judge that the representative frame images of the two scenes have similarity when the number is larger than the number.

【0022】請求項15の発明は、副インデックス作成
処理は、類似性があると判定された代表フレーム画像を
含むシーンについて、それらのシーンを構成するフレー
ム画像の数を均等に分割した位置におけるフレーム画像
に基づいて副インデックス画像を作成することをその要
旨とする。
According to a fifteenth aspect of the present invention, in the sub-index creating process, for a scene including a representative frame image determined to have similarity, a frame at a position where the number of frame images constituting the scene is equally divided The gist is to create a sub-index image based on an image.

【0023】請求項16の発明は、副インデックス作成
処理は、類似性があると判定された代表フレーム画像を
含むシーンについて、それらのシーンを構成する複数の
フレーム画像から所定間隔をおいて抽出したフレーム画
像に基づいて副インデックス画像を作成することをその
要旨とする。
According to a sixteenth aspect of the present invention, in the sub-index creating process, scenes including representative frame images determined to have similarity are extracted at predetermined intervals from a plurality of frame images constituting the scenes. The gist is to create a sub-index image based on a frame image.

【0024】[0024]

【0025】請求項17の発明は、動画データをシーン
単位で管理するシーン管理方法において、各シーンを構
成する複数のフレーム画像から所定のフレーム画像を代
表フレーム画像として抜き出してその代表フレーム画像
に基づいてインデックス画像を作成するインデックス作
成処理と、各シーンの代表フレーム画像を所定数のブロ
ックに分割し、各ブロックの画素成分のヒストグラムを
算出し、2つのシーンの代表フレーム画像について、対
応するブロックのヒストグラムに基づいて両ブロックの
画素成分の差分絶対値が所定の閾値以下であるブロック
を類似ブロックとして求め、類似ブロックの数が所定の
数より多い場合に2つのシーンの代表フレーム画像に類
似性があると判定する判定処理とを備えたシーン管理方
法をその要旨とする。
According to a seventeenth aspect of the present invention, in the scene management method for managing moving image data on a scene basis, a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and based on the representative frame image. An index creation process of creating an index image by dividing the representative frame image of each scene into a predetermined number of blocks, calculating a histogram of the pixel components of each block, and calculating the histogram of the corresponding frame of the representative frame image of the two scenes. A block in which the absolute value of the difference between the pixel components of both blocks is equal to or smaller than a predetermined threshold is determined as a similar block based on the histogram, and when the number of similar blocks is larger than the predetermined number, the similarity between the representative frame images of the two scenes is high. The gist is a scene management method including a determination process of determining that there is a scene. .

【0026】請求項18の発明は、動画データをシーン
単位で管理するシーン管理方法において、各シーンを構
成する複数のフレーム画像から所定のフレーム画像を代
表フレーム画像として抜き出してその代表フレーム画像
に基づいてインデックス画像を作成す類で作成処理と、
各シーンの代表フレーム画像の画素成分の合計値を算出
し、2つのシーンの代表フレーム画像の画素成分の差分
値が所定の閾値以下となる代表フレーム画像の組を選択
し、選択された組の各代表フレーム画像を所定数のブロ
ックに分割し、各ブロックの画素成分のヒストグラムを
算出し、両代表フレーム画像について、対応するブロッ
クのヒストグラムに基づいて両ブロックの画素成分の差
分絶対値が所定の閾値以下であるブロックを類似ブロッ
クとして求め、類似ブロックの数が所定の数より多い場
合に2つのシーンの代表フレーム画像に類似性があると
判定する判定処理とを備えたシーン管理方法をその要旨
とする。
According to an eighteenth aspect of the present invention, in the scene management method for managing moving image data in scene units, a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and based on the representative frame image. To create an index image,
The total value of the pixel components of the representative frame image of each scene is calculated, and a set of representative frame images in which the difference value of the pixel components of the representative frame images of the two scenes is equal to or less than a predetermined threshold is selected. Each representative frame image is divided into a predetermined number of blocks, a histogram of the pixel components of each block is calculated, and for both the representative frame images, the absolute value of the difference between the pixel components of both blocks is determined based on the histogram of the corresponding block. A block that is less than or equal to a threshold is determined as a similar block, and when the number of similar blocks is greater than a predetermined number, a determination process that determines that the representative frame images of the two scenes are similar is provided. And

【0027】[0027]

【0028】[0028]

【0029】[0029]

【発明の実施の形態】以下、本発明を具体化した一実施
形態を図面を用いて説明する。図1は、本実施形態にお
ける動画編集装置10を示すブロック図である。映像再
生手段1は、映像記録媒体2に記録されている動画デー
タを再生するものであり、VTR(ビデオテープレコー
ダ)やレーザディスク装置等で構成される。表示手段3
は、映像再生手段1から出力される映像信号を表示する
ものであり、CRTディスプレイ等で構成される。
DESCRIPTION OF THE PREFERRED EMBODIMENTS One embodiment of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram illustrating a moving image editing apparatus 10 according to the present embodiment. The video reproducing means 1 reproduces moving image data recorded on the video recording medium 2, and is composed of a VTR (video tape recorder), a laser disk device and the like. Display means 3
Displays a video signal output from the video reproducing means 1, and is constituted by a CRT display or the like.

【0030】動画編集装置10は、A/D(アナログ−
デジタル)変換器11、メモリ12、D/A(デジタル
−アナログ)変換器13、表示手段14、記憶媒体1
5、制御手段16及び入力手段17等を備える。動画編
集装置10は、例えばコンピュータにビデオキャプチャ
ボード等を装着したもので構成することができる。
The moving picture editing apparatus 10 has an A / D (analog-
Digital) converter 11, memory 12, D / A (digital-analog) converter 13, display means 14, storage medium 1
5, a control unit 16 and an input unit 17 are provided. The moving image editing apparatus 10 can be configured by, for example, a computer provided with a video capture board or the like.

【0031】A/D(アナログ−デジタル)変換器11
は、映像再生手段1から出力されるアナログの映像信号
をデジタル信号に変換する。メモリ12は、A/D変換
器11によって変換されたデジタル信号を格納するメモ
リであり、複数のフレーム画像の画像データを記憶する
ことができる。また、メモリ12は、シーン検索時に、
後述する記憶媒体15から読み出されたインデックス画
像を記憶し、マルチ画面表示するために使用される。
A / D (analog-digital) converter 11
Converts an analog video signal output from the video reproducing means 1 into a digital signal. The memory 12 is a memory that stores the digital signal converted by the A / D converter 11, and can store image data of a plurality of frame images. Also, the memory 12 stores
The index image read from the storage medium 15 described later is stored and used for multi-screen display.

【0032】D/A(デジタル−アナログ)変換器13
は、メモリ12に記憶された画像データを、アナログの
映像信号に変換し、表示手段14に出力する。表示手段
14は、前記表示手段3と同様に、CRTディスプレイ
等で構成され、アナログ映像信号に基づいて表示を行
う。
D / A (digital-analog) converter 13
Converts the image data stored in the memory 12 into an analog video signal and outputs it to the display unit 14. The display means 14, like the display means 3, is constituted by a CRT display or the like, and performs display based on an analog video signal.

【0033】記憶媒体15は、シーンのインデックス画
像を記憶するもので、ハードディスクや光ディスク等で
構成される。入力手段17は、操作者の指示を入力する
ものであり、マウスやキーボード等で構成される。
The storage medium 15 stores an index image of a scene, and is composed of a hard disk, an optical disk, or the like. The input means 17 is for inputting an operator's instruction, and includes a mouse, a keyboard, and the like.

【0034】制御手段16は本装置全体の制御を司るも
のであり、インデックス作成部、副インデックス作成
部、判定部、表示制御部を構成する。制御手段16は入
力手段17を介して入力された指示に基づいて、後述す
るようにシーン検出や、シーンの代表画像の類似性のチ
ェックあるいは記憶媒体15へのデータの入出力等の制
御を行う。
The control means 16 controls the overall operation of the present apparatus, and comprises an index creation section, a sub-index creation section, a determination section, and a display control section. The control unit 16 controls the detection of a scene, the similarity of a representative image of a scene, the input / output of data to / from the storage medium 15, and the like, as described later, based on an instruction input through the input unit 17. .

【0035】記録媒体18には、制御手段16に後述す
る制御を実行させるためのプログラムが記録されてい
る。次に、本構成の動画編集装置において、まず、映像
記憶媒体2に記録されている映像ソースをシーン単位に
管理するためインデックス画像を作成する方法を図2の
フローチャートを用いて説明する。
The recording medium 18 stores a program for causing the control means 16 to execute the control described later. Next, a method of creating an index image for managing a video source recorded on the video storage medium 2 in units of scenes in the moving image editing apparatus of the present configuration will be described with reference to the flowchart of FIG.

【0036】映像再生手段1から出力された映像信号
は、A/D変換器11においてデジタル信号に変換さ
れ、フレーム単位でメモリ12に取り込まれる。ステッ
プ51にて制御手段16はメモリ12に取り込まれた画
像データを解析し、カット点を検出する。カット点を検
出する方法としては、多くの手法が提案されており、こ
こでは一例を簡単に説明する。連続して取り込まれた2
つのフレーム画像の各画素の輝度成分の差分をとり、そ
の合計を計算する。この値が所定の閾値以上であれば、
シーンの変化があったとする。差分の評価方法として
は、差分の発生した画素数で評価してもよく、さらに
は、差分値の時間微分を用いた方法で評価してもよい。
The video signal output from the video reproducing means 1 is converted into a digital signal by the A / D converter 11 and is taken into the memory 12 on a frame basis. In step 51, the control means 16 analyzes the image data taken in the memory 12 and detects a cut point. Many methods have been proposed as a method for detecting a cut point, and an example will be briefly described here. 2 taken continuously
The difference of the luminance component of each pixel of one frame image is obtained, and the sum is calculated. If this value is equal to or greater than a predetermined threshold,
Suppose there is a scene change. As a method of evaluating the difference, the evaluation may be performed based on the number of pixels in which the difference has occurred, and further, the evaluation may be performed using a method using time differentiation of the difference value.

【0037】カット点が検出された場合には、ステップ
52において、シーンの先頭のフレーム画像を代表フレ
ーム画像として抽出し、その代表フレーム画像のデータ
を圧縮することにより縮小してインデックス画像を作成
する。
If a cut point is detected, at step 52, the leading frame image of the scene is extracted as a representative frame image, and the data of the representative frame image is compressed to reduce the size of the image to create an index image. .

【0038】ステップ53でそのシーンの映像記録媒体
2での記録位置とともに記憶媒体15に記憶する。ま
た、後述する類似したインデックス画像の検査用に、縮
小前の先頭フレーム画像(代表フレーム画像)も記憶媒
体15に記憶しておく。
In step 53, the scene is stored in the storage medium 15 together with the recording position of the scene on the video recording medium 2. In addition, a leading frame image (representative frame image) before reduction is also stored in the storage medium 15 for inspection of a similar index image described later.

【0039】以上の処理により、映像記憶媒体2に記録
されている動画データをシーン単位に分割管理すること
ができる。次に、上述の方法で作成したインデックス画
像に関し、類似しているインデックス画像があるかを否
かをチェックする。類似データの検査方法としては、ス
テップ54にて最初に大まかな類似性の判定を行い、次
にステップ54にて類似性があると判断されたインデッ
クス画像に対し、ステップ55においてより詳細な類似
性の判定を行うという手順で進める。この詳細な方法に
ついては後でより詳しく述べる。
With the above processing, the moving image data recorded on the video storage medium 2 can be divided and managed in scene units. Next, it is checked whether or not there is a similar index image regarding the index image created by the above method. As an inspection method of similar data, first, in step 54, rough similarity is determined, and then, in step 55, a more detailed similarity determination is performed on the index image determined to be similar in step 54. The procedure proceeds as follows. This detailed method will be described in more detail later.

【0040】類似画像のチェックにより、シーンの代表
フレーム画像間で類似したものが検出された場合には、
ステップ56において、各シーンについて副インデック
ス画像を作成する。つまり、映像記録媒体2から類似性
の検出されたシーンを再生し、このシーンを構成する複
数のフレーム画像から所定の数のフレーム画像を抜き出
すと共に、抜き出したフレーム画像のデータを圧縮する
ことにより縮小して副インデックス画像を作成する。本
形態において抜き出すフレーム画像の数は、シーンの長
さに関係なく一定とする。ステップ57において、作成
された副インデックス画像は、記憶媒体15に書き込ま
れる。
When similar images are detected between the representative frame images of the scene by checking the similar images,
In step 56, a sub-index image is created for each scene. That is, a scene in which similarity is detected is reproduced from the video recording medium 2, a predetermined number of frame images are extracted from a plurality of frame images constituting the scene, and data of the extracted frame image is compressed to reduce the size. To create a sub-index image. In this embodiment, the number of extracted frame images is constant regardless of the length of the scene. In step 57, the created sub-index image is written to the storage medium 15.

【0041】次に、制御手段16が実行する類似画像の
判定方法の詳細について図3,4のフローチャートを用
いて説明する。まず、ステップ61において、記憶媒体
15に記憶された類似性検査用のフレーム画像それぞれ
に対し、各画素の輝度成分の合計を計算し、ステップ6
2で任意の二枚のフレーム画像を選択する。
Next, the details of the similar image determination method executed by the control means 16 will be described with reference to the flowcharts of FIGS. First, in step 61, for each similarity inspection frame image stored in the storage medium 15, the sum of the luminance components of each pixel is calculated.
In step 2, any two frame images are selected.

【0042】ステップ63で、選択された二枚のフレー
ム画像の輝度成分の差を計算する。ステップ64ではこ
の差分値が所定の閾値未満であるか否かを判定する。差
分値が閾値未満である場合には、ステップ65で類似画
像である可能性が高いとし、図5に示すような類似デー
タ格納テーブル20にそれぞれのシーン番号を登録した
後、ステップ66へ進む。図6は類似データ格納テーブ
ル20に登録されるシーンの代表フレーム画像の例を示
し、例えば、シーン1とシーン4とにおいて、先頭フレ
ーム画像1−1と先頭フレーム画像4−1とを類似する
代表フレーム画像として登録する。
In step 63, the difference between the luminance components of the two selected frame images is calculated. In step 64, it is determined whether or not the difference value is less than a predetermined threshold. If the difference value is smaller than the threshold value, it is determined that there is a high possibility that the image is a similar image in step 65, and the respective scene numbers are registered in the similar data storage table 20 as shown in FIG. FIG. 6 shows an example of a representative frame image of a scene registered in the similar data storage table 20. For example, in scene 1 and scene 4, the representative frame image 1-1 and the representative frame image 4-1 are similar. Register as a frame image.

【0043】ステップ64で差分値が閾値以上であると
判定すると、ステップ66において、すべての代表フレ
ーム画像の組合せについて処理が終了したかどうかを判
定する。すべての組合せについて処理が終了したと判定
すると、図3の処理を終了する。ステップ66におい
て、未処理の代表フレーム画像の組合せがあると判定す
ると、ステップ62に戻り、次の代表フレーム画像の組
を選択する。
If it is determined in step 64 that the difference value is equal to or larger than the threshold value, it is determined in step 66 whether the processing has been completed for all the combinations of the representative frame images. When it is determined that the processing has been completed for all combinations, the processing in FIG. 3 ends. If it is determined in step 66 that there is a combination of unprocessed representative frame images, the process returns to step 62, and the next pair of representative frame images is selected.

【0044】図3に示す処理に従って、記憶媒体15に
書き込んである全ての代表フレーム画像に対して行い、
大まかなレベルでの類似性をチェックしておく。これに
より、詳細な類似性チェックを全代表フレーム画像に対
して行う必要がなくなるため、処理の高速化を図ること
が可能になる。
According to the processing shown in FIG. 3, the processing is performed on all the representative frame images written in the storage medium 15,
Check for similarities at a high level. This eliminates the necessity of performing a detailed similarity check on all representative frame images, so that the processing can be speeded up.

【0045】次に、上述の方法で選別された代表フレー
ム画像間における、より詳細な類似性のチェックを行
う。この方法として、まず、ステップ71において、図
3の類似性の判定処理で類似性が高いと判定された代表
フレーム画像のうち、2枚を選択する。そして、図7に
示すように、代表フレーム画像25を複数のブロック2
6に分割する。
Next, a more detailed similarity check is performed between the representative frame images selected by the above-described method. As this method, first, in step 71, two of the representative frame images determined to have high similarity in the similarity determination processing of FIG. 3 are selected. Then, as shown in FIG. 7, the representative frame image 25 is
Divide into six.

【0046】次のステップ72において、分割した各ブ
ロックを構成する画素の輝度成分のヒストグラムを求め
る。ステップ73において、2枚の代表フレーム画像の
同一領域のブロック間でヒストグラムの差分を計算し、
その絶対値の合計を求める。
In the next step 72, a histogram of the luminance components of the pixels constituting each divided block is obtained. In step 73, the difference between the histograms between the blocks in the same region of the two representative frame images is calculated,
Find the sum of the absolute values.

【0047】ステップ74では、この差分の合計値が所
定の閾値より小さいかどうかを判定する。差分の合計値
が所定の閾値より小さい場合には、ステップ75で類似
ブロックの数をカウントした後、ステップ76に進む。
In step 74, it is determined whether or not the sum of the differences is smaller than a predetermined threshold. If the sum of the differences is smaller than the predetermined threshold value, the process proceeds to step 76 after counting the number of similar blocks in step 75.

【0048】ステップ76では、すべてのブロックにつ
いて処理が終了したかどうかを判定する。ステップ76
で未処理のブロックがあると判定すると、次の処理対象
ブロックを選択した後、ステップ73に戻る。
In step 76, it is determined whether the processing has been completed for all blocks. Step 76
If it is determined that there is an unprocessed block, the process returns to step 73 after selecting the next block to be processed.

【0049】ステップ76ですべてのブロックについて
処理が終了したと判定すると、ステップ77において、
類似ブロックとしてカウントされたブロックの数が所定
の閾値より多いかどうかを判定する。類似ブロック数
が、閾値より少なかった場合には、これらの2つの画像
には、類似性がないとし、ステップ79に進む。類似ブ
ロック数が閾値以上の場合には、代表フレーム画像間に
類似性があるとし、ステップ78において、最終的な類
似画像として図5と同様なテーブルに登録した後、ステ
ップ79へ進む。
When it is determined in step 76 that the processing has been completed for all blocks, in step 77,
It is determined whether the number of blocks counted as similar blocks is greater than a predetermined threshold. If the number of similar blocks is smaller than the threshold value, it is determined that these two images have no similarity, and the process proceeds to step 79. If the number of similar blocks is equal to or greater than the threshold value, it is determined that there is similarity between the representative frame images, and in step 78, the final similar image is registered in a table similar to that in FIG.

【0050】ステップ79では、処理すべき2枚の代表
フレーム画像の組がすべて終了したかどうかを判定す
る。ステップ79ですべての組が終了したと判定する
と、図4の処理を終了し、ステップ79で未処理の組が
あると判定すると、次の2枚の代表フレーム画像を指定
してステップ71に戻る。
In step 79, it is determined whether or not all sets of two representative frame images to be processed have been completed. If it is determined in step 79 that all sets have been completed, the processing in FIG. 4 is ended. If it is determined in step 79 that there is an unprocessed set, the next two representative frame images are designated and the process returns to step 71. .

【0051】図4の類似判定処理によって、代表フレー
ム画像が類似していると判定されたシーンについては、
副インデックス画像を作成するための処理を行う。つま
り、類似性があると判断されたシーンを映像再生手段1
によって再生し、このシーンを構成する複数のフレーム
画像から所定の数のフレーム画像を抜き出し、縮小して
副インデックス画像を作成する。
For scenes in which the representative frame images are determined to be similar by the similarity determination processing in FIG.
A process for creating a sub index image is performed. That is, the scene determined to have similarity is displayed in the video playback unit 1.
, A predetermined number of frame images are extracted from a plurality of frame images constituting the scene, and reduced to create a sub-index image.

【0052】例えば、シーンの先頭から1/4,1/
2,3/4の位置のフレーム画像及び最終フレーム画像
の4フレームを抜き出して、これらのフレーム画像に基
づいて副インデックス画像を作成する。
For example, 1/4, 1 /
Four frames of the frame image at the position of 2, 3/4 and the final frame image are extracted, and a sub-index image is created based on these frame images.

【0053】この抜き出すフレーム数は、4に限らず操
作者が設定できるようにしてもよい。ただし、ここで抜
き出すフレームの数は、シーンの長さに関係なく一定と
する。これにより、各シーンの内容を、シーンの長さに
関係なく同じ時間で確認することができる。作成された
副インデックス画像は、代表フレーム画像のインデック
ス画像と同様に記憶媒体15に記憶される。類似性の判
定が終了した場合、記憶媒体15に書き込んである代表
フレーム画像は消去される。
The number of frames to be extracted is not limited to four, but may be set by the operator. However, the number of frames extracted here is constant regardless of the length of the scene. Thus, the contents of each scene can be confirmed at the same time regardless of the length of the scene. The created sub-index image is stored in the storage medium 15 in the same manner as the index image of the representative frame image. When the similarity determination is completed, the representative frame image written in the storage medium 15 is deleted.

【0054】上述のように、代表フレーム画像の類似判
定処理を、おおまかな類似判定処理と詳細な類似判定処
理との2段階にすることにより、類似画像の検査の演算
量を減らすことができる。尚、類似性の判定方法に関し
ては、上述の方法に限定するものではなく、他の手法を
用いてもよい。
As described above, by performing the similarity determination processing of the representative frame image in two stages, that is, the rough similarity determination processing and the detailed similarity determination processing, the amount of calculation for the similarity image inspection can be reduced. The method of determining similarity is not limited to the above-described method, and another method may be used.

【0055】次に、シーン検索時の動作について説明す
る。シーン検索時には、各シーンの代表フレーム画像か
ら作成したインデックス画像を記憶媒体15からメモリ
12に読み出し、図8に示すように表示手段14の画面
上に読み出したインデックス画像30〜38等をマルチ
画面表示する。
Next, the operation at the time of a scene search will be described. At the time of a scene search, the index image created from the representative frame image of each scene is read from the storage medium 15 to the memory 12, and the index images 30 to 38 and the like read on the screen of the display unit 14 are displayed on a multi-screen as shown in FIG. I do.

【0056】なお、マルチ画面表示は、全てのシーンの
インデックス画像を表示してもよい。また、マルチ画面
表示は、各シーンのインデックス画像記録時に属性デー
タ(例えば明るい画像)を登録しておき、この属性デー
タで検索した結果選択されたシーンに対応するインデッ
クス画像のみを表示してもよい。シーンのインデックス
画像をマルチ画面表示することにより、そのシーンが大
まかにどのような内容であるかが判断できる。
In the multi-screen display, index images of all scenes may be displayed. In the multi-screen display, attribute data (for example, a bright image) may be registered when an index image of each scene is recorded, and only an index image corresponding to a scene selected as a result of a search using the attribute data may be displayed. . By displaying the index image of a scene on a multi-screen, it is possible to roughly determine the content of the scene.

【0057】また、あらかじめ類似する代表フレーム画
像が検出されたものに関しては、図8に示すように、類
似するインデックス画像が存在することを示すマーカ
(斜線で示す)で囲む等の強調表示を行う。これによっ
て、操作者はそのインデックス画像には類似したシーン
が存在することを容易に認識することができる。例え
ば、図8ではインデックス画像30,36,38がマー
カ30A,36A,38Aによって強調表示され、イン
デックス画像30,36,38に対して類似画像が存在
する。
In addition, as for a frame in which a similar representative frame image has been detected in advance, as shown in FIG. 8, highlighting such as enclosing with a marker (shown by oblique lines) indicating the existence of a similar index image is performed. . Thus, the operator can easily recognize that a similar scene exists in the index image. For example, in FIG. 8, index images 30, 36, and 38 are highlighted by markers 30A, 36A, and 38A, and similar images exist for index images 30, 36, and 38.

【0058】更に操作者が、マーカで囲まれたインデッ
クス画像を選択すると、そのシーンに対し既に抽出され
ている所定数の副インデックス画像が、同じ領域に例え
ば1秒おきにブラウジング(切り換え)表示される。こ
れにより、操作者は、類似したインデックス画像があっ
た場合にも、より詳細な内容を確認することができ、シ
ーンの選択間違いをすることを防ぐことができ、所望の
シーンを確実に選択することができる。
Further, when the operator selects an index image surrounded by markers, a predetermined number of sub-index images already extracted for the scene are browsed (switched) and displayed in the same area, for example, every one second. You. Thereby, even when there is a similar index image, the operator can check more detailed contents, prevent mistakes in scene selection, and reliably select a desired scene. be able to.

【0059】また、マーカにて強調表示されたインデッ
クス画像の上部にはそのインデックス画像に対する類似
画像が他に何件あったかを表示する領域を設けられ、類
似画像の件数が付帯表示される。この表示領域を選択す
ると、図9に示すように、そのシーンのインデックス画
像と共に類似していると判定されたシーンのインデック
ス画像のみを選択し、マルチ画面表示される。この中で
1つのインデックス画像を選択すれば、前記と同様にそ
のシーンの副インデックス画像をブラウジング表示でき
る。図9は、例えば、図8のインデックス画像36の表
示領域38Bを選択した結果を示し、インデックス画像
36と、同インデックス画像36に類似するシーンのイ
ンデックス画像40〜44のみがマルチ画面表示されて
いる。
An area is provided above the index image highlighted by the marker to display how many other similar images exist for the index image, and the number of similar images is additionally displayed. When this display area is selected, as shown in FIG. 9, only the index image of the scene determined to be similar to the index image of the scene is selected, and the multi-screen display is performed. If one index image is selected, the sub-index image of the scene can be browsed and displayed in the same manner as described above. FIG. 9 shows, for example, the result of selecting the display area 38B of the index image 36 in FIG. 8, and only the index image 36 and the index images 40 to 44 of scenes similar to the index image 36 are displayed on the multi-screen. .

【0060】以上の方法により、効率よく類似画像の中
からシーンを選択することができる。なお、上記実施形
態では、1つのシーンから抜き出して作成する副インデ
ックス画像の数を一定にするとしたが、シーンを構成す
る複数のフレーム画像から所定間隔おきにフレーム画像
を抽出し、その抽出したフレーム画像に基づいて副イン
デックス画像を作成してもよい。例えば、類似画像があ
ると判定された全てのシーンに対し、先頭のフレーム画
像から時間に換算して2秒おきのフレーム画像を抽出
し、そのフレーム画像に基づいて副インデックス画像を
作成してもよい。また、10秒以下の長さのシーンに関
しては時間に換算して2秒おきに、10秒以上の長さの
シーンに関しては、シーンを5分割にした位置のフレー
ム画像を抽出し、そのフレーム画像に基づいてインデッ
クス画像を作成するようにしてもよい。所定の時間間隔
でインデックス画像を作成する場合には、各シーンによ
ってブラウジング時間は異なってくるが、長いシーンに
対しては、詳細な内容確認ができる。
According to the above method, a scene can be efficiently selected from similar images. In the above embodiment, the number of sub-index images created by extracting from one scene is fixed. However, frame images are extracted at predetermined intervals from a plurality of frame images constituting the scene, and the extracted frame images are extracted. A sub-index image may be created based on an image. For example, for all scenes determined to have similar images, frame images are extracted every two seconds from the first frame image in terms of time and sub-index images are created based on the frame images. Good. For scenes having a length of 10 seconds or less, a frame image at a position obtained by dividing the scene into five is extracted every 2 seconds in terms of time, and for a scene having a length of 10 seconds or more, the frame image is extracted. May be created based on the index image. When an index image is created at a predetermined time interval, the browsing time differs depending on each scene, but detailed contents can be confirmed for a long scene.

【0061】また上記実施形態では、シーンのカット検
出や類似性の判定処理に画素の輝度成分を用いたが、こ
れに限るものではなく、色成分を用いてもよいし、輝度
成分及び色成分の両方を用いてもよい。
In the above-described embodiment, the luminance component of the pixel is used for the scene cut detection and the similarity determination processing. However, the present invention is not limited to this, and a color component may be used. Both may be used.

【0062】さらに、上記実施形態では、代表フレーム
画像としてシーンの先頭フレーム画像を使用したが、シ
ーンの途中や最後のフレーム画像を代表フレーム画像と
してもよい。
Further, in the above embodiment, the first frame image of the scene is used as the representative frame image. However, the middle frame or the last frame image of the scene may be used as the representative frame image.

【0063】また、上記実施形態では、類似画像が存在
すると判定されたシーンに対してのみ、インデックス画
像に加えて副インデックス画像を作成するようにした
が、類似画像が存在しないシーンを含むすべてのシーン
に対して、インデックス画像に加えて副インデックス画
像を作成するようにしてもよい。この場合には、図2に
おけるステップ54,55の処理を省略し、ステップ5
6の処理に代えて、各インデックス画像に対して副イン
デックス画像を作成すればよい。そして、シーン検索時
には、操作者が、所定のインデックス画像を選択する
と、そのシーンに対し既に抽出されている所定数の副イ
ンデックス画像が、同じ領域に例えば1秒おきにブラウ
ジング(切り換え)表示される。これにより、操作者
は、各シーンのより詳細な内容を確認することができ
る。
In the above embodiment, a sub-index image is created in addition to an index image only for a scene for which it is determined that a similar image exists. A sub-index image may be created for a scene in addition to the index image. In this case, the processing of steps 54 and 55 in FIG.
A sub-index image may be created for each index image instead of the process of step 6. Then, at the time of a scene search, when the operator selects a predetermined index image, a predetermined number of sub-index images already extracted for the scene are browsed (switched) and displayed in the same area, for example, every one second. . Thereby, the operator can confirm more detailed contents of each scene.

【0064】[0064]

【発明の効果】以上詳述したように、本発明によれば、
動画データをシーン単位に分割し、そのインデックス画
像を表示してシーン管理を行う手法において、類似した
インデックス画像が存在する場合にこれを示すマーカを
表示するようにしたので、動画編集時に、類似するイン
デックス画像が存在することを容易に認識することがで
きる。
As described in detail above, according to the present invention,
In the technique of dividing the moving image data into scene units and displaying the index images and performing scene management, when a similar index image is present, a marker indicating this is displayed. The presence of the index image can be easily recognized.

【0065】また、本発明によれば、マーカが表示され
たインデックス画像を選択すると、そのシーンから抽出
した副インデックス画像を切り換えて表示することがで
きるため、動画編集時に、誤ったシーンを選択するのを
防ぐことができる。
Also, according to the present invention, when an index image on which a marker is displayed is selected, a sub-index image extracted from the scene can be switched and displayed. Can be prevented.

【0066】また、本発明によれば、各シーンから抽出
したインデックス画像を表示する際に、類似したインデ
ックス画像が存在する場合にその件数を表示し、更にこ
れを選択することにより、類似したインデックス画像の
みをマルチ画面表示することができるので、効率よくシ
ーンの選択及び管理を行うことができる。
Further, according to the present invention, when displaying index images extracted from each scene, if there are similar index images, the number thereof is displayed, and by selecting this, the similar index images are displayed. Since only images can be displayed on a multi-screen, scene selection and management can be performed efficiently.

【0067】さらに、本発明によれば、類似したインデ
ックス画像を持つシーンから所定数の副インデックス画
像を生成するため、これを切り換え表示する際、シーン
の長さに関係なくその内容を確認でき、効率の良い動画
編集が可能である。
Further, according to the present invention, since a predetermined number of sub-index images are generated from scenes having similar index images, when switching and displaying the sub-index images, the contents can be confirmed regardless of the scene length. Efficient video editing is possible.

【0068】さらに、本発明によれば、類似したインデ
ックス画像を持つ各シーンから所定の時間間隔でインデ
ックス画像を生成するため、これを切り換え表示する
際、時間の長いシーンの内容を詳細に確認することがで
きる。
Further, according to the present invention, an index image is generated at predetermined time intervals from each scene having a similar index image. Therefore, when switching and displaying the index image, the contents of the long scene are confirmed in detail. be able to.

【0069】また、本発明によれば、シーンの代表フレ
ーム画像の類似性を判定する際に、大まかな類似判定を
行うことにより画像を分類した後、選別された画像に対
し、詳細な類似判定検査を行うため、高速に画像の類似
性を検査することができる。
According to the present invention, when determining the similarity of a representative frame image of a scene, the images are classified by performing a rough similarity determination, and then a detailed similarity determination is performed on the selected images. Since the inspection is performed, the similarity of the images can be inspected at high speed.

【図面の簡単な説明】[Brief description of the drawings]

【図1】実施形態の動画編集装置を示すブロック図FIG. 1 is a block diagram showing a moving image editing apparatus according to an embodiment.

【図2】インデックス画像の作成処理を示すフローチャ
ート
FIG. 2 is a flowchart showing a process of creating an index image.

【図3】大まかな類似性の判定処理を示すフローチャー
FIG. 3 is a flowchart showing a rough similarity determination process;

【図4】詳細な類似性の判定処理を示すフローチャートFIG. 4 is a flowchart showing detailed similarity determination processing;

【図5】類似シーンの管理テーブルを示す説明図FIG. 5 is an explanatory diagram showing a management table of similar scenes;

【図6】シーンの代表フレーム画像を示す説明図FIG. 6 is an explanatory diagram showing a representative frame image of a scene.

【図7】詳細な類似性の判定時のブロック分けを示す図
である。
FIG. 7 is a diagram showing block division at the time of determining detailed similarity;

【図8】すべてのインデックス画像のマルチ画面表示を
示す説明図
FIG. 8 is an explanatory diagram showing a multi-screen display of all index images.

【図9】類似するインデックス画像のマルチ画面表示を
示す説明図
FIG. 9 is an explanatory diagram showing a multi-screen display of similar index images.

【符号の説明】[Explanation of symbols]

1…映像再生手段 2…映像記録媒体 3…表示手段 11…A/D変換器 12…メモリ 13…D/A変換器 14…表示手段 15…記憶媒体 16…インデックス作成部、判定部、副インデックス作
成部、表示制御部としての制御手段 17…入力手段 18…記録媒体
DESCRIPTION OF SYMBOLS 1 ... Video reproduction means 2 ... Video recording medium 3 ... Display means 11 ... A / D converter 12 ... Memory 13 ... D / A converter 14 ... Display means 15 ... Storage medium 16 ... Index creation part, judgment part, sub-index Control means as creation unit and display control unit 17 Input means 18 Recording medium

Claims (18)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 動画データをシーン単位で管理するシー
ン管理装置において、 画像を表示するための表示手段と、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成するイ
ンデックス作成部と、 これら代表フレーム画像の類似性を判定する判定部と、 シーン検索時において、各シーンのインデックス画像を
前記表示手段に表示させるとともに、類似性があると判
定された代表フレーム画像のインデックス画像には、類
似するインデックス画像が存在することを示すマーカを
表示させる表示制御部とを備えたシーン管理装置。
1. A scene management apparatus for managing moving image data on a scene basis, comprising: display means for displaying images; extracting a predetermined frame image from a plurality of frame images constituting each scene as a representative frame image; An index creation unit that creates an index image based on a representative frame image; a determination unit that determines the similarity of these representative frame images; and a display unit that displays an index image of each scene on a scene search. A scene management device comprising: a display control unit configured to display a marker indicating that a similar index image is present in an index image of a representative frame image determined to have a characteristic.
【請求項2】 前記表示制御部は、シーン検索時にイン
デックス画像を表示する際、類似性があると判定された
代表フレーム画像のインデックス画像には、当該代表フ
レーム画像に類似する代表フレーム画像を持つシーンの
件数を表示する請求項1に記載のシーン管理装置。
2. The display control unit according to claim 1, wherein when displaying the index image during the scene search, the index image of the representative frame image determined to have similarity has a representative frame image similar to the representative frame image. The scene management device according to claim 1, wherein the number of scenes is displayed.
【請求項3】 動画データをシーン単位で管理するシー
ン管理装置において、 画像を表示するための表示手段と、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成するイ
ンデックス作成部と、 これら代表フレーム画像間の相互の類似性を判定する判
定部と、相互に類似性のある代表フレーム画像を有するシーンに
ついて、各シーンを構成する複数のフレーム画像より
定数のフレーム画像を抜き出して副インデックス画像を
作成する副インデックス作成部と、 シーン検索時において、各シーンのインデックス画像を
前記表示手段に表示させるとともに、類似性があると判
定された代表フレーム画像のインデックス画像が選択さ
れた場合には、当該シーンのインデックス画像と所定数
の副インデックス画像とを切り換えて表示する表示制御
部とを備えたシーン管理装置。
3. A scene management device for managing moving image data in scene units, comprising: display means for displaying images; and extracting a predetermined frame image as a representative frame image from a plurality of frame images constituting each scene. An index creation unit that creates an index image based on a representative frame image, a determination unit that determines mutual similarity between these representative frame images, and a scene having a representative frame image that is similar to each other.
A sub-index creating unit that extracts a predetermined number of frame images from a plurality of frame images constituting each scene to create a sub-index image; and displays the index image of each scene on the display unit during a scene search. And a display control unit for switching between the index image of the representative frame image determined to have similarity and the predetermined number of sub-index images and displaying the index image of the scene when the index image is selected. apparatus.
【請求項4】 前記判定部は、各シーンの代表フレーム
画像を所定数のブロックに分割し、各ブロックの画素成
分のヒストグラムを算出し、2つのシーンの代表フレー
ム画像について、対応するブロックのヒストグラムに基
づいて両ブロックの画素成分の差分絶対値が所定の閾値
以下であるブロックを類似ブロックとして求め、類似ブ
ロックの数が所定の数より多い場合に2つのシーンの代
表フレーム画像に類似性があると判定する請求項1〜請
求項3のいずれかに記載のシーン管理装置。
4. The determining unit divides a representative frame image of each scene into a predetermined number of blocks, calculates a histogram of pixel components of each block, and calculates a histogram of a corresponding block of the representative frame images of two scenes. Is determined as a similar block based on the above, the similarity between the representative frame images of the two scenes is obtained when the number of similar blocks is larger than the predetermined number. The scene management device according to any one of claims 1 to 3, wherein it is determined that
【請求項5】 前記判定部は、各シーンの代表フレーム
画像の画素成分の合計値を算出し、2つのシーンの代表
フレーム画像の画素成分の差分値が所定の閾値以下とな
る代表フレーム画像の組を選択し、選択された組の各代
表フレーム画像を所定数のブロックに分割し、各ブロッ
クの画素成分のヒストグラムを算出し、両代表フレーム
画像について、対応するブロックのヒストグラムに基づ
いて両ブロックの画素成分の差分絶対値が所定の閾値以
下であるブロックを類似ブロックとして求め、類似ブロ
ックの数が所定の数より多い場合に2つのシーンの代表
フレーム画像に類似性があると判定する請求項1〜請求
項3のいずれかに記載のシーン管理装置。
5. The determining unit calculates a total value of pixel components of a representative frame image of each scene, and calculates a total value of pixel components of the representative frame images of the two scenes. A set is selected, each representative frame image of the selected set is divided into a predetermined number of blocks, a histogram of the pixel components of each block is calculated, and for both representative frame images, both blocks are determined based on the histograms of the corresponding blocks. A block in which the absolute value of the difference between the pixel components is less than or equal to a predetermined threshold is determined as a similar block, and when the number of similar blocks is larger than the predetermined number, it is determined that the representative frame images of the two scenes have similarity. The scene management device according to claim 1.
【請求項6】 前記副インデックス作成部は、類似性が
あると判定された代表フレーム画像を含むシーンについ
て、それらのシーンを構成するフレーム画像の数を均等
に分割した位置におけるフレーム画像に基づいて副イン
デックス画像を作成する請求項3〜請求項5のいずれか
に記載のシーン管理装置。
6. The sub-index creating unit, for scenes including representative frame images determined to have similarity, based on the frame images at positions obtained by equally dividing the number of frame images constituting those scenes. The scene management device according to claim 3, wherein a sub-index image is created.
【請求項7】 前記副インデックス作成部は、類似性が
あると判定された代表フレーム画像を含むシーンについ
て、それらのシーンを構成する複数のフレーム画像から
所定間隔をおいて抽出したフレーム画像に基づいて副イ
ンデックス画像を作成する請求項3〜請求項5のいずれ
かに記載のシーン管理装置。
7. The sub-index creating unit, for a scene including a representative frame image determined to have similarity, based on a frame image extracted at a predetermined interval from a plurality of frame images constituting the scene. The scene management device according to any one of claims 3 to 5, wherein the sub-index image is created by using a sub-index image.
【請求項8】 前記表示制御部は、シーン検索時に表示
されたインデックス画像の中から、類似性があると判定
された代表フレーム画像のインデックス画像が選択され
た場合に、該インデックス画像と共に、該インデックス
画像の代表フレーム画像と類似性のある代表フレーム画
像のインデックス画像をマルチ画面表示する請求項1〜
請求項7のいずれかに記載のシーン管理装置。
8. The display control unit, when an index image of a representative frame image determined to have similarity is selected from the index images displayed at the time of the scene search, together with the index image. An index image of a representative frame image similar to the representative frame image of the index image is displayed on a multi-screen.
The scene management device according to claim 7.
【請求項9】 動画データをシーン単位で管理するシー
ン管理装置において、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成するイ
ンデックス作成部と、 各シーンの代表フレーム画像を所定数のブロックに分割
し、各ブロックの画素成分のヒストグラムを算出し、2
つのシーンの代表フレーム画像について、対応するブロ
ックのヒストグラムに基づいて両ブロックの画素成分の
差分絶対値が所定の閾値以下であるブロックを類似ブロ
ックとして求め、類似ブロックの数が所定の数より多い
場合に2つのシーンの代表フレーム画像に類似性がある
と判定する判定部とを備えたシーン管理装置。
9. A scene management device for managing moving image data in scene units, wherein a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and an index image is created based on the representative frame image. An index creating unit that divides a representative frame image of each scene into a predetermined number of blocks, calculates a histogram of pixel components of each block,
For a representative frame image of one scene, a block in which the absolute value of the difference between the pixel components of both blocks is equal to or less than a predetermined threshold is determined as a similar block based on the histogram of the corresponding block, and the number of similar blocks is larger than the predetermined number And a determining unit for determining that the representative frame images of the two scenes are similar.
【請求項10】 動画データをシーン単位で管理するシ
ーン管理装置において、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成するイ
ンデックス作成部と、 各シーンの代表フレーム画像の画素成分の合計値を算出
し、2つのシーンの代表フレーム画像の画素成分の差分
値が所定の閾値以下となる代表フレーム画像の組を選択
し、選択された組の各代表フレーム画像を所定数のブロ
ックに分割し、各ブロックの画素成分のヒストグラムを
算出し、両代表フレーム画像について、対応するブロッ
クのヒストグラムに基づいて両ブロックの画素成分の差
分絶対値が所定の閾値以下であるブロックを類似ブロッ
クとして求め、類似ブロックの数が所定の数より多い場
合に2つのシーンの代表フレーム画像に類似性があると
判定する判定部とを備えたシーン管理装置。
10. A scene management apparatus for managing moving image data in scene units, wherein a predetermined frame image is extracted as a representative frame image from a plurality of frame images constituting each scene, and an index image is created based on the representative frame image. An index creating unit that calculates the total value of the pixel components of the representative frame images of the respective scenes, and selects a set of representative frame images in which the difference value of the pixel components of the representative frame images of the two scenes is equal to or less than a predetermined threshold. Divides each representative frame image of the selected set into a predetermined number of blocks, calculates a histogram of pixel components of each block, and calculates a histogram of pixel components of both blocks based on the histograms of the corresponding blocks for both representative frame images. A block whose difference absolute value is equal to or smaller than a predetermined threshold is determined as a similar block, and the similar block is determined. Scene management unit number and a and determination unit a similarity in the representative frame image of the two scenes when more than a predetermined number of.
【請求項11】 動画データをシーン単位で管理するシ
ーン管理方法において、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成するイ
ンデックス作成処理と、 これら代表フレーム画像の類似性を判定する判定処理
と、 シーン検索時に各シーンのインデックス画像を表示する
際、類似性があると判定された代表フレーム画像のイン
デックス画像には、類似するインデックス画像が存在す
ることを示すマーカを表示する表示処理とを備えたシー
ン管理方法。
11. A system for managing moving image data in scene units.
In the frame management method, a predetermined frame is obtained from a plurality of frame images constituting each scene.
Frame image as a representative frame image and its representative
Creating an index image based on a frame image
Index creation processing and determination processing for determining the similarity of these representative frame images
And display the index image of each scene when searching for scenes
The representative frame image determined to have similarity
Similar index images exist in dex images
Display processing for displaying a marker indicating that
Management method.
【請求項12】 前記表示処理は、シーン検索時にイン
デックス画像を表示する際、類似性があると判定された
代表フレーム画像のインデックス画像には、当該代表フ
レーム画像に類似する代表フレーム画像を持つシーンの
件数を表示する請求項11に記載のシーン管理方法。
12. The display process according to claim 1, wherein said display processing is performed during scene search.
When displaying a dex image, it was determined that there was similarity
The index image of the representative frame image includes the representative file.
Of a scene with a representative frame image similar to the frame image
The scene management method according to claim 11, wherein the number of cases is displayed.
【請求項13】 前記判定処理は、各シーンの代表フレ
ーム画像を所定数のブロックに分割し、各ブロックの画
素成分のヒストグラムを算出し、2つのシーンの代表フ
レーム画像について、対応するブロックのヒストグラム
に基づいて両ブロックの画素成分の差分絶対値が所定の
閾値以下であるブロックを類似ブロックとして求め、類
似ブロックの数が所定の数より多い場合に2つのシーン
の代表フレーム画像に類似性があると判定する請求項1
1または請求項12に記載のシーン管理方法。
13. The determination process according to claim 1, wherein the representative frame of each scene is determined.
Image is divided into a predetermined number of blocks,
A histogram of elementary components is calculated, and a representative file of the two scenes is calculated.
For a frame image, the histogram of the corresponding block
The absolute value of the difference between the pixel components of both blocks is determined based on
Blocks that are less than or equal to the threshold are determined as similar blocks,
Two scenes when the number of similar blocks is greater than a predetermined number
And determining that the representative frame images have similarity.
The scene management method according to claim 1 or 12.
【請求項14】 前記判定処理は、各シーンの代表フレ
ーム画像の画素成分の合計値を算出し、2つのシーンの
代表フレーム画像の画素成分の差分値が所定の閾値以下
となる代表フレーム画像の組を選択し、選択された組の
各代表フレーム画像を所定数のブロックに分割し、各ブ
ロックの画素成分のヒストグラムを算出し、両代表フレ
ーム画像について、対応するブロックのヒストグラムに
基づいて両ブロックの画素成分の差分絶対値が所定の閾
値以下であるブロックを類似ブロックとして求め、類似
ブロックの数が所定の数より多い場合に2つのシーンの
代表フレーム画像に類似性があると判定する請求項11
または請求項12に記載のシーン管理方法。
14. The determination process according to claim 1, wherein the representative frame of each scene is determined.
The total value of the pixel components of the
The difference value of the pixel component of the representative frame image is equal to or less than a predetermined threshold
Select a set of representative frame images to be
Each representative frame image is divided into a predetermined number of blocks.
A histogram of the pixel components of the lock is calculated, and both representative frames are calculated.
Of the corresponding block
The absolute value of the difference between the pixel components of both blocks is
Find blocks that are less than or equal to the value as similar blocks,
If the number of blocks is greater than a predetermined number,
12. The image processing apparatus according to claim 11, wherein it is determined that the representative frame images have similarity.
Alternatively, the scene management method according to claim 12.
【請求項15】 前記副インデックス作成処理は、類似
性があると判定された代表フレーム画像を含むシーンに
ついて、それらのシーンを構成するフレーム 画像の数を
均等に分割した位置におけるフレーム画像に基づいて副
インデックス画像を作成する請求項13または請求項1
4に記載のシーン管理方法。
15. The sub-index creation processing is similar to
Scenes containing representative frame images determined to have
The number of frame images that make up those scenes.
Based on the frame image at the equally divided positions,
13. An index image is created according to claim 13 or claim 1.
5. The scene management method according to item 4.
【請求項16】 前記副インデックス作成処理は、類似
性があると判定された代表フレーム画像を含むシーンに
ついて、それらのシーンを構成する複数のフレーム画像
から所定間隔をおいて抽出したフレーム画像に基づいて
副インデックス画像を作成するようにした請求項11〜
請求項14のいずれかに記載のシーン管理方法。
16. The sub-index creation processing is similar to the sub-index creation processing.
Scenes containing representative frame images determined to have
About the multiple frame images that make up those scenes
Based on the frame image extracted at a predetermined interval from
11. The sub-index image is created.
The scene management method according to claim 14.
【請求項17】 動画データをシーン単位で管理するシ
ーン管理方法において、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成するイ
ンデックス作成処理と、 各シーンの代表フレーム画像を所定数のブロックに分割
し、各ブロックの画素成分のヒストグラムを算出し、2
つのシーンの代表フレーム画像について、対応するブロ
ックのヒストグラムに基づいて両ブロックの画素成分の
差分絶対値が所定の閾値以下であるブロックを類似ブロ
ックとして求め、類似ブロックの数が所定の数より多い
場合に2つのシーンの代表フレーム画像に類似性がある
と判定する判定処理とを備えたシーン管理方法。
17. A system for managing moving image data in scene units.
In the frame management method, a predetermined frame is obtained from a plurality of frame images constituting each scene.
Frame image as a representative frame image and its representative
Creating an index image based on a frame image
Index creation processing and dividing the representative frame image of each scene into a predetermined number of blocks
Then, a histogram of the pixel components of each block is calculated, and 2
For the representative frame image of one scene,
Of the pixel components of both blocks based on the histogram of the
Blocks whose absolute difference is less than or equal to a predetermined threshold
And the number of similar blocks is greater than a predetermined number
If the representative frame images of the two scenes are similar
A scene management method comprising:
【請求項18】 動画データをシーン単位で管理するシ
ーン管理方法において、 各シーンを構成する複数のフレーム画像から所定のフレ
ーム画像を代表フレーム画像として抜き出してその代表
フレーム画像に基づいてインデックス画像を作成す類で
作成処理と、 各シーンの代表フレーム画像の画素成分の合計値を算出
し、2つのシーンの代表フレーム画像の画素成分の差分
値が所定の閾値以下となる代表フレーム画像の組を選択
し、選択された組の各代表フレーム画像を所定数のブロ
ックに分割し、各ブロックの画素成分のヒストグラムを
算出し、両代表フレーム画像について、対応するブロッ
クのヒストグラムに基づいて両ブロックの画素成分の差
分絶対値が所定の閾値以下であるブロックを類似ブロッ
クとして求め、類似ブロックの数 が所定の数より多い場
合に2つのシーンの代表フレーム画像に類似性があると
判定する判定処理とを備えたシーン管理方法。
18. A system for managing moving image data in scene units.
In the frame management method, a predetermined frame is obtained from a plurality of frame images constituting each scene.
Frame image as a representative frame image and its representative
Create index images based on frame images.
Creation processing and calculation of the total value of the pixel components of the representative frame image of each scene
And the difference between the pixel components of the representative frame images of the two scenes
Select a set of representative frame images whose values are less than a predetermined threshold
Each representative frame image of the selected set is
The histogram of pixel components of each block.
Calculated for both representative frame images.
Difference between pixel components of both blocks based on the histogram of
Blocks whose absolute value is less than
If the number of similar blocks is larger than the predetermined number,
If the representative frame images of the two scenes are similar
A scene management method comprising: a determination process.
JP04560697A 1997-02-28 1997-02-28 Scene management device, scene management method, and recording medium Expired - Fee Related JP3258924B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP04560697A JP3258924B2 (en) 1997-02-28 1997-02-28 Scene management device, scene management method, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP04560697A JP3258924B2 (en) 1997-02-28 1997-02-28 Scene management device, scene management method, and recording medium

Publications (2)

Publication Number Publication Date
JPH10243323A JPH10243323A (en) 1998-09-11
JP3258924B2 true JP3258924B2 (en) 2002-02-18

Family

ID=12724027

Family Applications (1)

Application Number Title Priority Date Filing Date
JP04560697A Expired - Fee Related JP3258924B2 (en) 1997-02-28 1997-02-28 Scene management device, scene management method, and recording medium

Country Status (1)

Country Link
JP (1) JP3258924B2 (en)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000098949A (en) * 1998-09-22 2000-04-07 Inner Brain Kk Animation display method
JP3269037B2 (en) * 1998-12-09 2002-03-25 三洋電機株式会社 Image playback device
WO2001037560A1 (en) * 1999-11-15 2001-05-25 Matsushita Electric Industrial Co., Ltd. Video searching method and video searching apparatus
KR100512138B1 (en) * 2000-03-08 2005-09-02 엘지전자 주식회사 Video Browsing System With Synthetic Key Frame
US7224892B2 (en) 2001-06-26 2007-05-29 Canon Kabushiki Kaisha Moving image recording apparatus and method, moving image reproducing apparatus, moving image recording and reproducing method, and programs and storage media
KR100474429B1 (en) * 2001-12-28 2005-03-08 삼성전자주식회사 Moving picture player and method for providing thumbnail search picture
KR100453966B1 (en) * 2002-01-09 2004-10-20 엘지전자 주식회사 Method for dispaying representative picture plane of broadcasting program
KR100487330B1 (en) * 2002-10-18 2005-05-03 엘지전자 주식회사 Apparatus for generating thumbnail image of digital video
KR100487374B1 (en) * 2002-10-18 2005-05-03 엘지전자 주식회사 Apparatus for generating thumbnail image of digital video
KR20040034132A (en) * 2002-10-21 2004-04-28 주식회사 디지털앤디지털 Apparatus for display a representative image of a title
JP2005086680A (en) * 2003-09-10 2005-03-31 Matsushita Electric Ind Co Ltd Method, program, and device for displaying image
KR20050109847A (en) * 2004-05-17 2005-11-22 주식회사 이노티브 System for providing image of electronic publication
KR100698184B1 (en) 2005-05-10 2007-03-22 엘지전자 주식회사 Television receiver and method for searching screen by multi recorded image
JP5479230B2 (en) * 2010-05-31 2014-04-23 楽天株式会社 INFORMATION DISPLAY PROGRAM, COMPUTER-READABLE RECORDING MEDIUM CONTAINING INFORMATION DISPLAY PROGRAM, INFORMATION DISPLAY METHOD, INFORMATION DISPLAY DEVICE, AND INFORMATION PROVIDING SYSTEM

Also Published As

Publication number Publication date
JPH10243323A (en) 1998-09-11

Similar Documents

Publication Publication Date Title
US6157744A (en) Method and apparatus for detecting a point of change in a moving image
JP2994177B2 (en) System and method for locating boundaries between video segments
JP4241709B2 (en) Image processing device
US6546185B1 (en) System for searching a particular character in a motion picture
JP3361587B2 (en) Moving image search apparatus and method
JP3258924B2 (en) Scene management device, scene management method, and recording medium
KR100266769B1 (en) Image recording device
US8250068B2 (en) Electronic album editing system, electronic album editing method, and electronic album editing program
JP2003507793A (en) System and method for performing region-based image retrieval using color-based segmentation
JP4490214B2 (en) Electronic album display system, electronic album display method, and electronic album display program
JP4327827B2 (en) Video recording / reproducing system and video recording / reproducing method
JPH06149902A (en) Animation image recording medium, animation image recorder and animation image reproducing device
JP2002223412A (en) Image processor, image processing system, image processing method, storage medium, and program software
EP0636994B1 (en) Method of and apparatus for retrieving dynamic images and method of and apparatus for managing images
US6272279B1 (en) Editing method of moving images, editing apparatus and storage medium storing its editing method program
EP0899666B1 (en) Image processing apparatus displaying a catalog of different types of data in different manner
US7170935B2 (en) Image processing apparatus and method, and computer-readable memory
US7417690B2 (en) Video processing system and video processing method
JP4154012B2 (en) Recording medium storing program for realizing image display method and image composition apparatus
JP3469122B2 (en) Video segment classification method and apparatus for editing, and recording medium recording this method
JP2003069946A (en) Video analyzer, video analysis method, video analysis program and its program recording medium
JP3379453B2 (en) Caption region detection method and device, and moving image search method and device
JP3067043B2 (en) Automatic video cutting method
JP3157928B2 (en) Video pick-up device
JP3024574B2 (en) Video search device

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees