JP4354806B2 - 動画像管理装置及び方法 - Google Patents

動画像管理装置及び方法 Download PDF

Info

Publication number
JP4354806B2
JP4354806B2 JP2003509457A JP2003509457A JP4354806B2 JP 4354806 B2 JP4354806 B2 JP 4354806B2 JP 2003509457 A JP2003509457 A JP 2003509457A JP 2003509457 A JP2003509457 A JP 2003509457A JP 4354806 B2 JP4354806 B2 JP 4354806B2
Authority
JP
Japan
Prior art keywords
representative image
image
moving image
representative
attribute information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003509457A
Other languages
English (en)
Other versions
JP2004534458A (ja
JP2004534458A5 (ja
Inventor
洋 東條
英智 相馬
正 中村
雅文 下田代
正紀 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Canon Inc
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc, Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Canon Inc
Publication of JP2004534458A publication Critical patent/JP2004534458A/ja
Publication of JP2004534458A5 publication Critical patent/JP2004534458A5/ja
Application granted granted Critical
Publication of JP4354806B2 publication Critical patent/JP4354806B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/738Presentation of query results
    • G06F16/739Presentation of query results in form of a video summary, e.g. the video summary being a video sequence, a composite still image or having synthesized frames
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/326Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is a video-frame or a video-field (P.I.P.)
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/90Tape-like record carriers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Processing Or Creating Images (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Description

本発明は、記憶媒体上に記録された動画像データを一つ又は複数の代表画像によって管理する動画データ管理装置及び方法に関するものである。
従来より、記憶媒体上に記録された動画像を代表画像によって管理する方法が提案されている。特許文献1では、一般的な動画や静止画の再生機における代表画像の利用方法が開示されており、特に静止画や動画などの選択を行う際の簡易表示などに代表画像を用いることが記載されている。また、特許文献2、特許文献3では、動画の区間に対して代表画像を割り当てておき、代表画像を用いて再生指示の対象となる区間を選択する方法が開示されている。
このような代表画像の利用形態が一般的になるにつれて、その利用形態も多様化してきている。たとえば、代表画像を用いた画像管理を上記のような再生装置だけでなく、編集装置にも適用することが考えられる。
しかしながら、例えば、同じ動画像部分に対する代表画像であっても、再生する際のユーザインターフェースに適した代表画像と、編集時のユーザインターフェースに適した代表画像ではそれぞれ異なる。従って、編集装置をはじめとした様々な機種において同じ代表画像を用いようとすると以下のような問題が生じる。
例えば、図1において、11は一連の動画像を示す。この動画像のうち、区間(a)には、バッターが構えてヒットを放つ一連の動作が撮影されているものとする。代表画像12と代表画像13は同じ区間(a)に関する代表画像である。代表画像12は区間(a)の先頭のフレームから作成されており、バッターが構えた時の画像である。また、代表画像13は、バッターがヒットを放った時の画像であり、区間(a)の内容を把握するのには最も適した代表画像であるといえる。
一般に一つの区間に対しては一つの代表画像が割り当てられるので、実際には代表画像12か13のいずれかが区間(a)の代表画像として登録される。こうして登録された代表画像は例えば再生装置用のインデックス画像として用いることができる。しかしながら、代表画像13が登録された場合は、再生装置において代表画像選択時に時間的に前の状態から再生が始まることになり、ユーザは違和感を覚えてしまう。一方、代表画像12が登録された場合には、編集装置においてこれを使用した際に、区間(a)の内容をその画像だけでは正確に把握できず、不便である。すなわち、図1の例で言えば、バッターがヒットをした場面なのか、空振りしてしまった場面なのか、代表画像12からでは判別することができない。このように、動画中の同一区間に対する適切な代表画像は、使用される機器の目的によって異なるものとなる。
従来は、再生用や編集用など、動画データの用途や利用形態ごとに、代表画像の割り当てや管理を行う必要があった。そのため、動画や静止画ごと、または機器や利用形態ごとに、代表画像の情報を冗長に保有する必要があり、また、その代表画像などの情報を利用する処理のためのプログラムコードを別々に保有する必要がある、という問題点があった。すなわち、種々の動画データ処理において代表画像を利用する場合に、その利用する装置やプログラムごとに、代表画像などの情報を個別に管理することになっていた。このため、代表画像のデータなどが個別に格納されるという無駄が生じていた。したがって、適切な代表画像を用いた際の操作性を維持しようとすれば、代表画像の管理が繁雑となってしまうという問題がある。
特許第03081304号公報 特開平11−176137号公報 特開2000−322875号公報
本発明は上記の課題に鑑みてなされたものであり、代表画像に種別属性を持たせることにより、種々の動画データ処理の実行において代表画像を用いた動画データの操作性を向上するとともに、代表画像の管理を簡易化することを目的とする。
本発明によれば、上記の目的は、以下の構成を備えた装置動画像管理装置を提供することにより達成される。すなわち、
記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する装置であって、
動画像中の任意の区間もしくは全体を代表する代表画像を記録する手段と、
前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する手段と、
前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する手段と
前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する手段と、
使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択手段とを備え、
前記選択手段により選択された前記代表画像のうちから所望の代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈する。
本発明の他の態様によれば、上記の目的は以下の構成を備えた動画像管理装置によって達成される。すなわち、
記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する装置であって、
動画像中の任意の区間もしくは全体を代表する代表画像を生成する生成手段と、
前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する第1記録手段と、
前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する第2記録手段と
前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する手段と、
使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択手段とを備える。
また、本発明の他の態様によれば、上記の目的は、以下の動画像管理方法により達成され、その動画像管理方法は、
記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する方法であって、
動画像中の任意の区間もしくは全体を代表する代表画像を記録する工程と、
前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する工程と、
前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する工程と
前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する工程と、
使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択工程とを備え、
前記選択工程で選択された前記代表画像のうちから所望の代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈する。
また、本発明の他の態様によれば、上記の目的は、以下の動画像管理方法により達成され、その動画像管理方法は、
記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する方法であって、
動画像中の任意の区間もしくは全体を代表する代表画像を生成する生成工程と、
前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する第1記録工程と、
前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する第2記録工程と
前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する手段と、
使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択手段とを備える。
本発明の他の特徴及び利点は添付の図面を参照してなされる以下の説明により明らかとなろう。なお、各図を通して、同一の参照符号は同一もしくは類似の部分を示す。
以上説明したように、本発明によれば、代表画像に種別属性を持たせることにより、種々の動画データ処理の実行において代表画像を用いた動画データの操作性が向上するとともに、代表画像の管理が簡易化される。
以下、添付の図面を参照して本発明の好適な実施形態を説明する。
本実施形態は、代表画像を利用する方式において、代表画像関連の情報を一括して管理/利用できるようにするために、その情報を共有可能とすると共に、その利用形態などに応じて、その代表画像関連の情報の区別もしくは共有ができるような冗長な情報を持たせることに特徴がある。これにより、代表画像などの情報を一元化して記録・保存でき、無駄が省かれるようになる。また、本実施形態によれば、個々の装置やプログラムでの独特な機能の実現のために必要な情報を代表画像などの情報に含ませることにより、それらの機能の実現を可能にする。また、代表画像に関連する情報の格納時にその配置、方式などを、その代表画像関連の情報の利用形態や方式に応じて、異ならせることができることに特徴がある。
図2は、本実施形態における動画像処理装置の制御構成を示すブロック図である。図2において、201はCPUであり、本実施形態の動画像管理装置における各種制御を実行する。202はROMであり、本装置の立ち上げ時に実行されるブートプログラムや各種データを格納する。203はRAMであり、CPU201が処理するための制御プログラムを格納するとともに、CPU201が各種制御を実行する際の作業領域を提供する。204はキーボード、205はマウスであり、ユーザによる各種入力操作環境を提供する。
206は外部記憶装置であり、ハードディスクやフロッピー(登録商標)ディスク、光ディスク、磁気ディスク、光磁気ディスク、磁気テープ、不揮発性の半導体メモリ(フラッシュメモリ等)等で構成される。207は表示器であり、ディスプレイなどで構成され、画像編集時のユーザインターフェースや、画像編集の結果等をユーザに対して表示する。208はネットワークインターフェースであり、ネットワーク上の各機器との通信を可能とする。209はビデオインターフェースであり、ビデオカメラ210や、VTR212からの動画の取り込みを可能とする。また、211は上記の各構成を接続するバスである。
なお、上記の構成においてビデオカメラ210、VTR212や外部記憶装置206は装置に内蔵あるいは直接接続されたものに限らず、ネットワーク上に配置されたもので代用してもよい。
図3は、本実施形態における動画像処理装置の機能構成を示すブロック図である。300はユーザ操作部であり、ユーザによる指示や入力を、キーボード204及びマウス205などを介して、取得するものである。301は動画入力部であり、ビデオI/F209を介してビデオカメラ210、VTR212などの動画像を読み出し、本装置に入力するものである。302は動画ファイル蓄積部であり、外部記憶装置206で構成され、動画入力部301によって入力された動画像をファイルの形式で蓄積するものである。
303はサムネイル作成部であり、動画ファイル蓄積部302に蓄積されている動画像を表示器207に提示し、ユーザに所望の区間と当該区間中のフレーム画像を指定させ、指定されたフレーム画像を元に縮小画像(以下、サムネイル画像)を作成し、指定された区間等の情報とともに動画ファイル蓄積部302に蓄積させる。すなわち、サムネイル作成部303により、ユーザは表示器207に提示された動画像を参照して動画像中の区間とその区間を代表するフレームをユーザ操作部300を介して指定することができる。そして、指定されたフレーム画像に基づくサムネイル画像が指定された区間などの情報と共に動画ファイル蓄積部302中に格納される。
304は、ブラウズ部であり、動画ファイル蓄積部302よりサムネイルを読み出して、表示器207を介して表示するとともに、ユーザによって選択されたサムネイルに対応した動画像を再生する。305は編集部であり、動画ファイル蓄積部302中の動画像の編集を行う。また、その編集の途中経過や結果は、表示器207を介して表示される。
なお、上述の各部の機能は、CPU201がROM202に格納された制御プログラムを実行することにより実現される。或いは、外部記憶装置206より適宜RAM203に制御プログラムをロードして、CPU201がこれを実行するようにしてもよい。
<1.サムネイル格納方法>
図4は、本実施形態における動画ファイル中のサムネイル格納形態の一例を示す概略図である。
400は動画ファイル蓄積部302によって記憶媒体上に記憶された動画ファイルである。なお、動画像の1ファイルとする単位は特に限定されるものではなく、例えば、撮像装置の録画ボタンを押してから停止させるまでのショットを単位としてもよいし、TV放送における番組を1つの単位としてもかまわない。動画像ファイル400は、管理情報などが記録されるヘッダ401、動画像データそのものが記録される動画像402、主にサムネイルが記録されるフッタ403の3つの部分からなる。
ヘッダ401には、動画ファイルのデータサイズ・動画像データの形式・作成された日時などの情報が記録される動画ファイル管理情報404と、1枚のサムネイル405が記録される。フッタ403は、サムネイルを複数枚記録が可能なサムネイル領域407と、各サムネイルのインデックス情報が記録されるインデックス領域406とを具備する。
図5は、図4のフッタ403中のインデックス領域406における1インデックス分のデータ構造例を示した図である。Start PointとEnd Pointは、それぞれ、当該サムネイルが代表している動画像中の区間の開始点と終了点である。開始点及び終了点は動画の区間を特定できればその形態は特に限定されるものではないが、例えば、タイムコードまたはフレームIDなどで記述するのが好ましいであろう。Thumbnail Type IDには、当該サムネイルの用途を示すIDが記述される。本実施形態では、サムネイルの使用目的ごとにThumbnail Type IDが定められており、たとえば以下のように定義される。
Thumbnail Type ID=1:ブラウザ用
Thumbnail Type ID=2:動画編集用
Thumbnail Type ID=3:印刷用
上記例は、サムネイルを使用するアプリケーションのタイプごとにIDを規定したものである。
また、Thumbnail Offsetには、インデックスが指し示すサムネイルへのオフセットが記述される。
図6A,6Bは図4のヘッダ401中のサムネイル405、フッタ403中のサムネイル領域407における1つのサムネイルのデータ構造例を示した図である。図6Aにおいて、Thumbnail Headerにはサムネイル画像の管理情報などが記述される。また、Thumbnail Imageには、サムネイル画像データそのものが記述される。また、図6Bには、上記Thumbnail Headerのデータ構造例が示されている。Thumbnail Image Offsetには、このThumbnail Headerの先頭からサムネイル画像の格納位置へのオフセットが記述される。Thumbnail Image Sizeには、サムネイル画像のサイズが記述される。Thumbnail Key Relative Pointには、サムネイルの基になった動画像中のフレームの位置を、前記Start Pointからの相対位置によって記述する。
<サムネイルの登録処理>
図7は、本実施形態によるサムネイル登録の動作例を示したフローチャートである。
まず、ステップS100において、動画入力部301は動画を入力し、動画ファイル蓄積部302へ図4に示した動画ファイル400の形式で記録する。このとき、ヘッダ401中のサムネイルを格納する領域とフッタの領域を予約領域(予め決められた物理領域)として確保しておく。例えば光ディスクであれば内周部分に予約領域が確保される。次に、ステップS101において、ユーザによってサムネイルの指定がなされたかを判定する。ここでいうサムネイルの指定とは、サムネイルの元となる動画中の任意のフレーム、そのサムネイルが代表することになる動画像中の区間、サムネイルの使用目的、重要なサムネイルかどうか、などを指定することであり、このステップS101において、装置の機能を用いて利用者が指定するものである。利用者が設定を行う場合としては、この設定モードに装置を設定し、動画中の所望の区間をキーボードやマウスで指示して再生を行い、その再生中にサムネイルにしたい映像が表示された時点でキーボードやマウスなどでサムネイルとするフレームを指示する方式が挙げられる。この場合、指示されたフレームがサムネイルの元となる画像であり、指示された所望の区間がそのサムネイルが代表する動画像中の区間となる。なお、このようなサムネイルの設定方式には上記利用者が設定するものや、自動的に装置が設定するものなど、いろいろな方式が考えられるが、本発明では、そのいずれの方法であってもかまわない。また、サムネイルの使用目的、重要なサムネイルかどうかの指定は、所定のユーザインターフェースを介して、キーボード或いはマウスによって指定するようにすればよい。
次に、ステップS102において、重要なサムネイルであるとの指定があるかを判定する。重要なサムネイルであるとは、動画ファイル全体をもっともよく表しているサムネイルであることを意味する。ユーザによって重要なサムネイルであると指定がなされている場合は、ステップS103へ進み、サムネイルに採用すべく指定されたフレームの位置を動画ファイルの先頭からの相対位置に直し、Thumbnail Key Relative Pointを得る。次に、ステップS104において、指定されたフレームからサムネイルを生成し、ステップS103で算出したThumbnail Key Relative Pointとサムネイルの画像サイズ(Thumbnail Image Size)、サムネイル画像の格納位置までの相対距離の情報(Thumbnail Image Offset)をヘッダとしたサムネイルをヘッダ401中に記録する。このとき、ヘッダ401を記憶媒体上のアクセスが比較的容易で高速に行える位置、例えば、光ディスクの場合、内周部分に格納する。そして、ステップS101の判断へ戻る。
一方、ステップS102において重要なサムネイルであると指定されていなかった場合はステップS105へ進む。ステップS105において、動画ファイル400中のフッタ403のインデックス領域406の未使用領域に新たなインデックスを確保する。次に、ステップS106において、サムネイル領域407の未使用領域に新たなサムネイルを確保する。次に、ステップS107において、ステップS106で確保されたサムネイルへのオフセット値を算出する。
次に、ステップS108において、指定されているサムネイルのタイプを判定する。これは、ユーザによって指定された使用目的をもとに判定する。本実施形態では、使用目的としてブラウジング用、動画編集用、印刷用のいずれかがユーザによって指定されており、指定されたタイプに従って処理をステップS109〜S111に分岐し、対応するThumbnail Type IDを設定する。これは、上述したThumbnail Type IDをテーブルとして保持しておき、これを参照することで設定が可能である。本実施形態では、使用目的が、ブラウズ用であれば、Thumbnail Type ID=1(S109)、動画編集用であれば、Thumbnail Type ID=2(S110)、印刷用であれば、Thumbnail Type ID=3(S111)が設定される。ここでは、3つのTypeを示したが、これらは一例であって、もちろんこれらに限定されるものではない。
次に、ステップS112において、ステップS107で算出したオフセット(Thumbnail Offset)、ステップS108からS111において設定したThumbnail Type ID、ユーザにより指定された区間を示す開始点 (Start Point)と終了点 (End Point)、からなるインデックスを生成し、フッタ403に格納する。
次に、ステップS113において、サムネイルに採用したフレームの位置を、区間の先頭からの相対位置に直し、Thumbnail Key Relative Pointを得る。ステップS114においては、ステップS101で指定されたフレームを縮小してサムネイルを生成し、ステップS113で算出したThumbnail Key Relative Pointと当該サムネイルの画像サイズ(Thumbnail Image Size)とサムネイル画像の格納位置までの相対距離情報(Thumbnail Image Offset)をThumbnail Header(図6A)として、当該サムネイル画像とともに、フッタ403に格納する。次に、ステップS101へ戻り、再びサムネイルの指定がなされれば、ステップS102からステップS114を繰り返す。なお、フッタ403、特にサムネイル領域407は記憶媒体上の連続した領域に格納することが好ましい。
また、ステップS101において、サムネイルの指定がなされていなければステップS115へ進み、ここで登録処理の終了が指示されていれば本処理を終了する。登録処理の終了が指示されていなければ、ステップS101に戻り、上記処理が繰り返されることになる。
以上の処理によって、重要なサムネイルを記憶媒体上でアクセスを容易で高速に行なえる位置(例えば光ディスクの場合であればその内周部分)に格納することができ、また、使用目的の異なるサムネイルはThumbnail Type IDによって区別できるので、これらサムネイルを同一ファイルに格納することが可能となり、管理が容易となる。
<サムネイル活用処理>
上述のサムネイル登録処理によって登録されたサムネイルを活用する際の処理について説明する。
まず、サムネイルがブラウザで活用される場合について述べる。図8A,Bは、ブラウザのユーザ・インターフェースの一例を示す図である。図8Aにおいて、801はブラウザの表示領域全体である。802はサムネイルを並べて表示する領域であり、サムネイルは順番に最上列から始まって、左から右へと列ごとに表示されている。803はスクロールバーであり、これをスクロールすることでサムネイル表示領域802に一度に表示し切れないサムネイルを、順に表示させることができる。804はポインタであり、ユーザはユーザ操作部300の操作によってポインタ804を動かし、サムネイル表示領域802中の所望のサムネイルを指定することができる。ポインタ804でサムネイルが選択されると、図8Bに示すような動画再生画面805に切り替わり、動画の再生が始まる。
以上のブラウザでのサムネイルの活用を実現するための処理について、以下に説明する。図9A、Bは本動画像管理装置のブラウザ動作時における処理を示すフローチャートである。なお図9A、Bで示される処理は、当該動画像管理装置においてブラウザ処理が起動され、ブラウズすべき動画ファイルが指定された場合に実行される。なお、ブラウズすべき動画ファイルの指定に際しては、図8Aのサムネイル表示領域に各動画ファイルの全体を代表するサムネイル(各動画ファイルのヘッダに格納されているサムネイル)を並べて表示し、ポインタ804によって所望のサムネイルを指示することで、所望の動画ファイルを選択できる。所望の動画ファイルが選択されると図9A、Bに示す処理が起動される。
まず、ステップS201において、ブラウズ部304は、動画ファイル蓄積部302によって蓄積された動画ファイルのうち、上記操作によって選択された動画ファイル400中のヘッダ401を読み込む。そして、その動画ファイル管理情報404からファイルサイズなどの各種の基本的な管理情報を得て、これをメモリ(RAM203)中に保持する。次に、ステップS202において、フッタ403中のインデックス領域406を読み込み、メモリ(RAM203)中に保持する。次にステップS203において、上記ステップS202で保持したインデックス領域406に含まれるインデックスを開始位置(図5に示したStart Point)で昇順にソートする。これは、後述するサムネイル表示を時系列順に並べるためである。
次に、ステップS204において、スクロールバー803のバーの現在位置から、サムネイルの表示開始枚数Nを得る。例えば、スクロールバー803が上端にあれば(図8に示した状態)、表示開始枚数N=1となる。従って1枚目のサムネイルから表示が開始されることになる。
次に、先頭のインデックスから順に以下のステップS205〜S212を実行することにより、N枚目以降のブラウズ用のサムネイルをサムネイル表示領域802に表示する。
まず、ステップS205において、インデックスのサムネイルがブラウジング用のサムネイルかどうかをチェックする。これは、当該インデックスの中のThumbnail Type IDを確認することでチェックできる。上述のようにThumbnail Type ID=1〜3が規定されているものとすると、Thumbnail Type ID=1が設定されているサムネイルがブラウジング用のサムネイルであると判断できる。なお、処理の開始時はソート後の先頭のインデックスからチェックをはじめる。
ステップS205でブラウザ用のサムネイルであると判定されたならば、次のステップS206に進む。ステップS206において枚数C(ブラウザ用のサムネイルのうちの何番目か)をカウントする。そして、ステップS207において、カウントされた枚数Cが表示開始枚数N未満であるかどうか(C<N)をチェックする。これは、N枚目未満のサムネイルは表示せず、読み飛ばすための処理である。
ここで、Cが表示開始枚数N以上であれば、次のステップS208において、サムネイル表示のため、サムネイル画像を読み込む。次にステップS209において、サムネイル画像をサムネイル表示領域802に表示し、ステップS210へ進む。一方、ステップS205において、ブラウジング用のサムネイルでないと判定された場合、または、ステップS207においてN枚目未満であると判定された場合は、そのままステップS210へ進む。
ステップS210では、次のサムネイルを処理すべく、次のインデックスへ処理対象を移す。ここで、直前の処理が最終のインデックスに対するものであって、次のインデックスが存在しない場合は、処理をステップS213へ進める。次のインデックスが存在する場合は、ステップS212に進み、サムネイル表示領域802で表示可能なサムネイルの枚数を超えたかどうかをチェックする。例えば、図8に示した例では、サムネイルの表示可能枚数は9枚である。ここで、表示可能枚数を超えていなければステップS205へ処理を戻す。すなわち、処理すべきインデックスがなくなるか表示可能枚数を越えるまで、ステップS205〜S210の処理を行って、インデックスを順にチェックしていく。
処理すべきインデックスがなくなった場合、或いはサムネイルの表示枚数がサムネイル表示領域802の表示可能枚数を超えた場合は、ステップS213へ進む。ステップS213では、ユーザによってスクロールバーが操作されたかどうかをチェックし、操作されていれば、ステップS204からステップS212の処理を繰り返すことによって、操作後のスクロールバーの位置に相当するサムネイルを表示する。操作されていなければ、ステップS214に進む。
次にステップS214において、ユーザによってサムネイル表示領域802に表示されたサムネイルのうちの一つが選択されたかどうかを判定する。サムネイルが選択されていれば、ステップS215に進み、選択されたサムネイルに対応するインデックスからStart Pointを読み出す。次に、ステップS216において、Start Pointから動画の再生を開始し、動画再生画面805に動画を表示する。その後、処理をステップS217に進める。一方、ステップS214でサムネイルが選択されていない場合は、そのままステップS217へ進む。
ステップS217では、ブラウズ部304によるブラウジングを終了する指示がなされたかどうかを判定し、終了が指示されていなければステップS213に戻る。終了が指示されていれば本処理を終了する。
なお、上記の例では、サムネイルが選択された場合に、対応するインデックスからStart Pointを取得して、当該位置より再生を開始したが、これに限らない。選択されたサムネイルに対応するインデックスからStart Point及びEnd Pointを取得して、当該区間のみを再生するようにしてもよい。
以上、説明を簡単にするために1つの動画ファイル内をブラウジングする例で説明したが、複数の動画ファイルに対して、サムネイルの選択を行う場合であっても、同様に各動画ファイルに対してサムネイルを表示する処理を繰り返すことで実現可能である。
以上の処理により、ブラウザ部304は、サムネイル領域407からブラウジング用のサムネイルのみを取り出して活用することが可能となる。
次に、サムネイルが動画編集で活用される場合について述べる。本例では、予め、編集用のサムネイルが各動画ファイルに付加され、これら動画ファイルの編集用のサムネイルを利用して、複数のファイル内に散らばっているお気に入りのシーンを集めて一つの動画データもしくは複数の動画ファイルの再生指示情報を記述したプレイリストを作る場合を想定する。図10は、編集部305による動画編集時のユーザ・インターフェースの例である。1000は編集作業ウィンドウであり、編集作業を行う領域である。1001は再生ウィンドウであり、選択した動画ファイルまたは、編集結果を再生して確認するものである。1002は動画ファイルウィンドウであり、各動画ファイルのヘッダにあるサムネイルの一覧を表示するものである。1003は、再生ウィンドウ1001で再生させる動画を操作するものであり、左の操作ボタンより「再生・一時停止・停止・巻き戻し・早送り」の操作が可能である。
1004はシーン指定ウィンドウであり、選択した動画ファイルを並べ、各動画の採用する区間を指定するための領域である。なお、各動画ファイルの表示には、ユーザが認識できるようにサムネイル画像が重ねて表示してある。1005はシーン指定バーであり、これを操作することによって、選択したクリップ(斜線部分)の開始点と終了点を指定することが可能である。そのために、このシーン指定バー1005が操作されている間は、再生ウインドウ1001には、操作されているシーン指定バー1005で指し示されている部分に該当する動画中のフレームの内容が表示されるようになっており、再生ウインドウ1001に表示された画像を確認し、シーン指定バー1005を操作することで、開始点と終了点を正確に指定できるようになる。
1006はポインタであり、ユーザはユーザ操作部300を操作することによってポインタ1006を動かし、各種ボタンの選択や動作の指定を行うことができる。操作の手順としては、動画ファイルウィンドウ1002から動画ファイルを選択して、再生したい順番にシーン指定ウィンドウ1004へドラッグ&ドロップする。そして、シーン指定バー1005を用いて、開始点と終了点の修正を行う。このとき、ユーザは必要に応じて操作部1003を操作することにより再生ウィンドウ1001で動画を再生させて、確認を随時行うことができる。
図11は、編集部305による動画編集時のサムネイル表示の動作を示すフローチャートである。なお、図11の処理は、当該動画像管理装置において動画像編集処理が実行された際に起動される。
まず、ステップS300において、編集部305は動画ファイル蓄積部302より、全動画ファイルのヘッダ401を読み込む。次に、ステップS301において、各ファイルのヘッダ401中のサムネイル405を読み込む。そして、ステップS302において、ヘッダ中のサムネイルを各動画ファイルの代表画像として、動画ファイルウィンドウ1002に表示する。
次に、ステップS303において動画ファイルが選択されたかどうかを判定する。本実施形態では、ポインタ1006の操作により動画ファイルウィンドウ1002から動画ファイルがシーン指定ウィンドウ1004へドラッグ&ドロップされたかを判定する。動画ファイルが選択された場合は、ステップS304に進み、ユーザによって選択された動画ファイル中のフッタのインデックス領域406を読み込む。そして、シーン指定ウィンドウ1004に当該動画ファイルを表すためのバー表示を行なう。このとき、選択された動画ファイルに対する指定範囲は、当該動画像の全体となる。また、この時点では、シーン指定ウィンドウ1004に示された動画ファイルのバー表示には、当該動画ファイルの代表サムネイルが表示される。一方、ステップS303において動画ファイルの選択がなされていないと判断されたときは、ステップS304をスキップする。
次に、ステップS305において、ユーザが、その動画ファイルに関してシーン指定ウィンドウ1004においてシーン指定バー1005によるシーンの範囲指定を行ったかをチェックする。指定されていれば、ステップS306〜ステップS311により、ユーザが指定した範囲内に存在する編集用のサムネイルを抽出し、表示する。
まず、ステップS306において、(処理の開始時であれば先頭の)インデックス中のStart PointとEnd Pointを参照して、Start PointとEnd Pointによって示される区間がユーザ指定範囲内であるかどうかを判定する。範囲内であれば、ステップS307へ進み、当該インデックスに対応するサムネイルが編集用のサムネイルかどうかを判定する。これは、インデックスの中のThumbnail Type IDを確認することでチェックすることができる。上述のようにThumbnail Type IDが規定されている場合、Thumbnail Type ID=2のとき、編集用のサムネイルであると判断できる。編集用のサムネイルであれば、処理はステップS310へ進む。
一方、ステップS306において当該インデックスの対応する区間がユーザ指定範囲内でないと判定されたとき、または、ステップS307において編集用のサムネイルではないと判定されたときは、ステップS308へ進み、次のインデックスを対象とする。ステップS309で次のインデックスが存在するか否かを判定し、存在するのであればステップS306とステップS307の処理を繰り返す。
さて、ステップS307の条件を満たしたとき、処理はステップS310へ進み、当該インデックスに対応するサムネイル画像の読み込みを行う。そして、次のステップS311において、サムネイル画像の表示を行う。例えば、図10に示したようにシーン指定ウィンドウ1004中で、シーンを示すバーに対応するサムネイルを重ねて表示させる。これによって、範囲指定されたシーンがどのようなシーンであるか、ユーザに認識しやすくする。その後、ステップS308へ進み、次のインデックスを対象として上述の処理を繰り返す。
以上のような処理により、ユーザから指示された範囲に含まれる全ての区間の編集用サムネイルがシーンを示すバーに重ねて表示される。なお、この場合のサムネイルの表示範囲は2つのシーン指定バー1005によって挟まれた領域であり、サムネイルの表示に対してその挟まれた領域の大きさが不足する場合は、サムネイルの一部を重ねて表示させる、或いはスクロールバーを表示してスクロール可能とする等すればよい。
ステップS305においてユーザからのシーン範囲指示が行われなかった場合、或いはステップS309において処理対象とすべきインデックスがなくなった場合は、ステップS312へ進む。ステップS312では、動画編集作業の終了が指示されたかどうかを判定する。終了の指示がなければ(作業中であれば)ステップS303へ戻り、上記の処理を繰り返す。一方、編集作業の終了が指示されれば、本処理を終える。
以上の処理により、編集部305は、ファイル選択用には、ヘッダに格納されている重要なサムネイルを用いることができ、サムネイル領域407から選択された範囲に対応した動画編集用のサムネイルのみを取り出して、活用することが可能となる。
なお、上記実施形態においては、サムネイルの活用方法としてブラウズ、動画編集の2つを例としてあげたが、もちろん、この2つに限定されるものではなく、例えば、選択されたサムネイルに対応するフレーム画像を印刷する等、さまざまな活用方法に利用可能である。例えば、選択されたサムネイルに対応するフレーム画像を印刷する場合は、図12のフローチャートに示すような処理を実行する。まず、各動画ファイルのヘッダ401からサムネイルを取得して一覧表示し、所望の動画ファイル(動画データ)をユーザに指定させる(S401)。指定された画像データに対応するサムネイル(フッタに記録されたサムネイル)のうち、Thumbnail Type IDが「3」のサムネイルを抽出して表示する(S402、S403)。以降の処理では、それらのうちから選択されたサムネイルの基となったフレームを印刷する。すなわち、指定されたサムネイルの図6に示したThumbnail Key Relative Pointによって特定されるフレームの画像を取得し(S404、S405、S406)、これを印刷のために出力することになる(S407)。よって、図3の動画像処理装置に印刷部など他の機能を追加することも可能である。なお、S403で表示されたサムネイルの選択行われず、終了が指示された場合は、本処理を終了する(S404、S408)。
なお、上記実施形態においては、サムネイルを活用する機能としてブラウズ部、編集部の2つを保有しているが、上記の印刷部などの他の機能も含め、3つ以上の機能を持たせてもよいし、あるいはどれかひとつでのみであっても構わないし、あるいは別の機能の組み合わせでも構わない。
なお、上記実施形態においては、図3に示した動画像処理装置は一つの装置の中に、動画入力部301、サムネイル作成部303、ブラウズ部304、編集部305の全てが含まれていたが、上記の印刷部などの他の機能も含め、それぞれの機能ごと、或いは、いくつかの機能の組み合わせごとに、別の装置として構成されても構わない。このときは、記憶媒体を介して、或いは、IEEE1394などの通信手段を介して、サムネイルを含んだ動画ファイルを各装置間でやり取りすればよい。
なお、上記実施形態においては、ヘッダのサムネイルについては、インデックスが存在しないために、Start Point, End Point, Thumbnail Type ID を保有しないが、これらを管理情報として保有するようにしても構わない。この場合、サムネイルの使用目的を示す番号等が格納され、各種アプリケーションにおいて利用することができる。
なお、上記実施形態においては、ヘッダに記録されたサムネイル(ファイルを代表するサムネイル)は、フッタには記録されないが、これをヘッダとフッタに重複して記録するようにしても構わない。
また、1つのサムネイルを複数の用途(例えば、ブラウズ用と編集用等)に用いる場合は、Thumnail Type ID を適切な値に決めることにより、それを指示することができる。また、サムネイルは、用途に従って、適切に用いられる。例えば、ブラウズする際のサムネイルとしては、シーンの先頭の映像を使い、編集する場合にはシーンを代表する映像を使う等の使い分けが自由にできるようになる。
以上説明したように本実施形態によれば、利用目的の異なるサムネイルを1つのファイルに格納することが可能となるのでその管理が容易となる。また、使用時には、サムネイルに付与された種別情報(Thumbnail Type ID)を参照することにより、その目的に応じたサムネイルのみを利用することが可能となる。
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記憶した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
プログラムコードを供給するための記憶媒体としては、例えば、フロッピィディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROMなどを用いることができる。
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
多くの、広範な実施形態が、本発明の精神及び範囲から逸脱することなくなし得ることが明らかであり、本発明は特定の実施形態によって限定されるものではなく、特許請求の範囲の規定によって限定されるべきである。
本願に組み込まれその一部を構成する添付の図面は、本発明の実施形態を表すものであり、明細書の説明とともに本発明の原理を説明するのに提供される。
代表画像を活用する際における問題点を説明するための図である。 本実施形態における動画像処理装置の制御構成を示すブロック図である。 本実施形態における動画像処理装置の機能構成を示すブロック図である。 本実施形態における動画ファイル中のサムネイル格納形態の一例を示す概略図である。 図4のフッタ403中のインデックス領域406における1インデックス分のデータ構造例を示した図である。 図4のヘッダ401中のサムネイル405、フッタ403中のサムネイル領域407における1つのサムネイルのデータ構造例を示した図である。 図4のヘッダ401中のサムネイル405、フッタ403中のサムネイル領域407における1つのサムネイルのデータ構造例を示した図である。 本実施形態によるサムネイル登録の動作例を示したフローチャートである。 ブラウザ実行時ののユーザ・インターフェースの一例を示す図である。 ブラウザ実行時ののユーザ・インターフェースの一例を示す図である。 本動画像管理装置のブラウザ動作時における処理を示すフローチャートである。 本動画像管理装置のブラウザ動作時における処理を示すフローチャートである。 編集部305による動画編集時のユーザ・インターフェースの例である。 編集部305による動画編集時のサムネイル表示の動作を示すフローチャートである。 印刷操作におけるサムネイルの活用を説明するフローチャートである。

Claims (42)

  1. 記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する装置であって、
    動画像中の任意の区間もしくは全体を代表する代表画像を記録する手段と、
    前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する手段と、
    前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する手段と
    前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する手段と、
    使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択手段とを備え、
    前記選択手段により選択された前記代表画像のうちから所望の代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈することを特徴とする動画像管理装置。
  2. 前記代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈し、その使用目的に応じた機能を、選択された区間もしくは全体に対し適用することを特徴とする請求項に記載の動画像管理装置。
  3. 前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報と、前記属性情報を、記憶媒体上に記録する際に、代表画像単位にまとめて、連続した特定の場所に記録しておくことを特徴とする請求項に記載の動画像管理装置。
  4. 前記代表画像の基になった画像の存在する位置を指し示す情報と、前記代表画像を、記憶媒体上に記録する際に、代表画像単位にまとめて、特定の場所に記録しておくことを特徴とする請求項に記載の動画像管理装置。
  5. 前記特定の場所は、記憶媒体上の連続した領域であることを特徴とする請求項に記載の動画像管理装置。
  6. 使用者により重要な代表画像であるとの指定がなされた場合には、その代表画像は動画像データのヘッダ部に記録し、重要な代表画像であるとの指定がなされなかった場合には、その代表画像は動画像データのフッタ部に記録することを特徴とする請求項1乃至5のいずれか1項に記載の動画像管理装置。
  7. 前記代表画像の使用目的を表す情報を属性情報として記録する手段において、 前記属性情報は、使用目的ごとに予め規定された識別番号であることを特徴とする請求項乃至のいずれか1項に記載の動画像管理装置。
  8. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す手段は、
    前記属性情報がブラウズ操作に対応することを示す代表画像を選び出すものであり、
    代表画像を表示する表示手段を備え、
    前記使用目的に応じた機能を、選択された区間もしくは全体に適用するとは、前記表示手段で表示された代表画像の中から所望の代表画像が指定された場合、代表画像に付与されている区間情報に基づいて対応する動画像を再生する再生手段であることを特徴とする請求項に記載の動画像管理装置。
  9. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す手段は、
    所望の動画像について編集対象区間が指定された場合に、前記属性情報が編集操作に対応することを示し、かつ該編集対象区間内に対象区間が存在する代表画像を選び出すものであり、
    前記対象区間が存在する代表画像を表示する表示手段を備えることを特徴とする請求項に記載の動画像管理装置。
  10. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す手段は、
    所望の動画像中の所望のフレームを印刷する印刷操作において、前記所望の動画像に対応する代表画像より前記属性情報が印刷操作に対応することを示す代表画像を選び出すものであり、
    前記属性情報が印刷操作に対応することを示す代表画像を表示する表示手段を備え、
    前記表示手段で表示された代表画像の中から所望の代表画像が指定された場合、指定使用目的に応じた機能を、選択された区間もしくは全体に対し適用するとは、前記表示手段で表示された代表画像の中から所望の代表画像が指定された場合、前記代表画像の基になった画像の存在する位置を指し示す情報を参照して、所望のフレームを印刷のために出力する出力手段であることを特徴とする請求項に記載の動画像管理装置。
  11. 記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する装置であって、
    動画像中の任意の区間もしくは全体を代表する代表画像を生成する生成手段と、
    前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する第1記録手段と、
    前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する第2記録手段と
    前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する手段と、
    使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択手段とを備えたことを特徴とする動画像管理装置。
  12. 前記代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈し、その使用目的に応じた機能を、選択された区間もしくは全体に対し適用することを特徴とする請求項11に記載の動画像管理装置。
  13. 前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報と、前記属性情報を、記憶媒体上に記録する際に、代表画像単位にまとめて、連続した特定の場所に記録しておくことを特徴とする請求項11に記載の動画像管理装置。
  14. 前記代表画像の基になった画像の存在する位置を指し示す情報と、前記代表画像を、記憶媒体上に記録する際に、代表画像単位にまとめて、特定の場所に記録しておくことを特徴とする請求項13に記載の動画像管理装置。
  15. 前記特定の場所は、連続した領域であることを特徴とする請求項14に記載の動画像管理装置。
  16. 使用者により重要な代表画像であるとの指定がなされた場合には、その代表画像は動画像データのヘッダ部に記録し、重要な代表画像であるとの指定がなされなかった場合には、その代表画像は動画像データのフッタ部に記録することを特徴とする請求項11乃至15のいずれか1項に記載の動画像管理装置。
  17. 前記代表画像の使用目的を表す情報を属性情報として記録する手段において、前記属性情報は、使用目的ごとに予め規定された識別番号であることを特徴とする請求項11乃至16のいずれかに記載の動画像管理装置。
  18. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す手段は、前記属性情報がブラウズ操作に対応することを示す代表画像を選び出すものであり、
    代表画像を表示する表示手段とを備え、
    前記使用目的に応じた機能を、選択された区間もしくは全体に適用するとは、前記表示手段で表示された代表画像の中から所望の代表画像が指定された場合、代表画像に付与されている区間情報に基づいて対応する動画データを再生する再生手段であることを特徴とする請求項12に記載の動画像管理装置。
  19. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す手段は、
    所望の動画像について編集対象区間が指定された場合に、前記属性情報が編集操作に対応することを示し、かつ該編集対象区間内に対象区間が存在する代表画像を選び出すものであり、
    前記対象区間が存在する代表画像を表示する表示手段を備えることを特徴とする請求項11に記載の動画像管理装置。
  20. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す手段は、
    所望の動画像中の所望のフレームを印刷する印刷操作において、前記所望の動画像に対応する代表画像より前記属性情報が印刷操作に対応することを示す代表画像を選び出すものであり、
    前記属性情報が印刷操作に対応することを示す代表画像を表示する表示手段を備え、
    前記表示手段で表示された代表画像の中から所望の代表画像が指定された場合、指定使用目的に応じた機能を、選択された区間もしくは全体に対し適用するとは、前記表示手段で表示された代表画像の中から所望の代表画像が指定された場合、前記代表画像の基になった画像の存在する位置を指し示す情報を参照して、所望のフレームを印刷のために出力する出力手段であることを特徴とする請求項12に記載の動画像管理装置。
  21. 記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する方法であって、
    動画像中の任意の区間もしくは全体を代表する代表画像を記録する工程と、
    前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する工程と、
    前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する工程と
    前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する工程と、
    使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択工程とを備え、
    前記選択工程で選択された前記代表画像のうちから所望の代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈することを特徴とする動画像管理方法。
  22. 前記代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈し、その使用目的に応じた機能を、選択された区間もしくは全体に対し適用することを特徴とする請求項21に記載の動画像管理方法。
  23. 前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報と、前記属性情報を、記憶媒体上に記録する際に、代表画像単位にまとめて、連続した特定の場所に記録しておくことを特徴とする請求項21に記載の動画像管理方法。
  24. 前記代表画像の基になった画像の存在する位置を指し示す情報と、前記代表画像を、記憶媒体上に記録する際に、代表画像単位にまとめて、特定の場所に記録しておくことを特徴とする請求項23に記載の動画像管理方法。
  25. 前記特定の場所は、記憶媒体上の連続した領域であることを特徴とする請求項24に記載の動画像管理方法。
  26. 使用者により重要な代表画像であるとの指定がなされた場合には、その代表画像は動画像データのヘッダ部に記録し、重要な代表画像であるとの指定がなされなかった場合には、その代表画像は動画像データのフッタ部に記録することを特徴とする請求項21乃至25のいずれか1項に記載の動画像管理方法。
  27. 前記代表画像の使用目的を表す情報を属性情報として記録する工程において、 前記属性情報は、使用目的ごとに予め規定された識別番号であることを特徴とする請求項21乃至26のいずれか1項に記載の動画像管理方法。
  28. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す工程は、
    前記属性情報がブラウズ操作に対応することを示す代表画像を選び出すものであり、
    代表画像を表示する表示工程を備え、
    前記使用目的に応じた機能を、選択された区間もしくは全体に適用するとは、前記表示工程で表示された代表画像の中から所望の代表画像が指定された場合、代表画像に付与されている区間情報に基づいて対応する動画像を再生する再生工程であることを特徴とする請求項22に記載の動画像管理方法。
  29. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す工程は、
    所望の動画像について編集対象区間が指定された場合に、前記属性情報が編集操作に対応することを示し、かつ該編集対象区間内に対象区間が存在する代表画像を選び出すものであり、
    前記対象区間が存在する代表画像を表示する表示工程を備えることを特徴とする請求項21に記載の動画像管理方法。
  30. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す工程は、
    所望の動画像中の所望のフレームを印刷する印刷操作において、前記所望の動画像に対応する代表画像より前記属性情報が印刷操作に対応することを示す代表画像を選び出すものであり、
    前記属性情報が印刷操作に対応することを示す代表画像を表示する表示工程を備え、
    前記表示工程で表示された代表画像の中から所望の代表画像が指定された場合、指定使用目的に応じた機能を、選択された区間もしくは全体に対し適用するとは、前記表示工程で表示された代表画像の中から所望の代表画像が指定された場合、前記代表画像の基になった画像の存在する位置を指し示す情報を参照して、所望のフレームを印刷のために出力する出力工程であることを特徴とする請求項22に記載の動画像管理方法。
  31. 記憶媒体上に記録された動画像に対し、複数の代表画像を対応付けて管理する方法であって、
    動画像中の任意の区間もしくは全体を代表する代表画像を生成する生成工程と、
    前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報を前記代表画像に対応付けて記録する第1記録工程と、
    前記代表画像の基になった画像の存在する位置を指し示す情報を前記代表画像に対応付けて記録する第2記録工程と
    前記代表画像の使用目的を表す情報を属性情報として前記代表画像に対応付けて記録する手段と、
    使用目的に応じた前記代表画像を前記属性情報に基づいて選択する選択手段とを備えたことを特徴とする動画像管理方法。
  32. 前記代表画像が利用者によって指定された場合に、その代表画像が指し示す区間もしくは全体が選択されたと解釈し、その使用目的に応じた機能を、選択された区間もしくは全体に対し適用することを特徴とする請求項31に記載の動画像管理方法。
  33. 前記代表画像が代表する動画像内の区間もしくは全体を指し示す情報と、前記属性情報を、記憶媒体上に記録する際に、代表画像単位にまとめて、連続した特定の場所に記録しておくことを特徴とする請求項31に記載の動画像管理方法。
  34. 前記代表画像の基になった画像の存在する位置を指し示す情報と、前記代表画像を、記憶媒体上に記録する際に、代表画像単位にまとめて、特定の場所に記録しておくことを特徴とする請求項33に記載の動画像管理方法。
  35. 前記特定の場所は、連続した領域であることを特徴とする請求項34に記載の動画像管理方法。
  36. 使用者により重要な代表画像であるとの指定がなされた場合には、その代表画像は動画像データのヘッダ部に記録し、重要な代表画像であるとの指定がなされなかった場合には、その代表画像は動画像データのフッタ部に記録することを特徴とする請求項31乃至35のいずれか1項に記載の動画像管理方法。
  37. 前記代表画像の使用目的を表す情報を属性情報として記録する工程において、前記属性情報は、使用目的ごとに予め規定された識別番号であることを特徴とする請求項31乃至36のいずれか1項に記載の動画像管理方法。
  38. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す工程は、前記属性情報がブラウズ操作に対応することを示す代表画像を選び出すものであり、
    代表画像を表示する表示工程とを備え、
    前記使用目的に応じた機能を、選択された区間もしくは全体に適用するとは、前記表示工程で表示された代表画像の中から所望の代表画像が指定された場合、代表画像に付与されている区間情報に基づいて対応する動画データを再生する再生工程であることを特徴とする請求項32に記載の動画像管理方法。
  39. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す工程は、
    所望の動画像について編集対象区間が指定された場合に、前記属性情報が編集操作に対応することを示し、かつ該編集対象区間内に対象区間が存在する代表画像を選び出すものであり、
    前記対象区間が存在する代表画像を表示する表示工程を備えることを特徴とする請求項31に記載の動画像管理方法。
  40. 前記使用目的に応じた前記代表画像を前記属性情報に基づいて選び出す工程は、
    所望の動画像中の所望のフレームを印刷する印刷操作において、前記所望の動画像に対応する代表画像より前記属性情報が印刷操作に対応することを示す代表画像を選び出すものであり、
    前記属性情報が印刷操作に対応することを示す代表画像を表示する表示工程を備え、
    前記表示工程で表示された代表画像の中から所望の代表画像が指定された場合、指定使用目的に応じた機能を、選択された区間もしくは全体に対し適用するとは、前記表示工程で表示された代表画像の中から所望の代表画像が指定された場合、前記代表画像の基になった画像の存在する位置を指し示す情報を参照して、所望のフレームを印刷のために出力する出力工程であることを特徴とする請求項32に記載の動画像管理方法。
  41. 請求項21乃至40のいずれか1項に記載の動画像管理方法における各工程をコンピュータに実行させるための制御プログラムを格納したコンピュータ読み取り可能な記憶媒体。
  42. 請求項21乃至40のいずれか1項に記載の動画像管理方法における各工程をコンピュータに実行させるための制御プログラム。
JP2003509457A 2001-05-31 2002-05-29 動画像管理装置及び方法 Expired - Fee Related JP4354806B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001165382 2001-05-31
PCT/JP2002/005228 WO2003003371A1 (en) 2001-05-31 2002-05-29 Moving image management apparatus and method

Publications (3)

Publication Number Publication Date
JP2004534458A JP2004534458A (ja) 2004-11-11
JP2004534458A5 JP2004534458A5 (ja) 2006-01-05
JP4354806B2 true JP4354806B2 (ja) 2009-10-28

Family

ID=19008051

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003509457A Expired - Fee Related JP4354806B2 (ja) 2001-05-31 2002-05-29 動画像管理装置及び方法

Country Status (6)

Country Link
US (1) US7123264B2 (ja)
EP (1) EP1393319B1 (ja)
JP (1) JP4354806B2 (ja)
KR (1) KR100679575B1 (ja)
CN (1) CN100498966C (ja)
WO (1) WO2003003371A1 (ja)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3774662B2 (ja) * 2000-12-27 2006-05-17 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、プログラム、及び記録媒体
WO2003003371A1 (en) 2001-05-31 2003-01-09 Canon Kabushiki Kaisha Moving image management apparatus and method
JP4194272B2 (ja) * 2001-12-28 2008-12-10 キヤノン株式会社 動画像管理装置及び方法
JP4110946B2 (ja) * 2002-11-26 2008-07-02 ソニー株式会社 撮像装置、撮像装置の印刷方法
JP3924787B2 (ja) * 2003-02-27 2007-06-06 ソニー株式会社 記録装置、ファイル管理方法、ファイル管理方法のプログラム、ファイル管理方法のプログラムを記録した記録媒体
WO2005032119A1 (de) * 2003-09-26 2005-04-07 Thomson Licensing Verfahren zum speichern eines bildes mit vorschaubild
JP3816488B2 (ja) * 2003-12-26 2006-08-30 株式会社リコー 情報記録装置と情報記録媒体と情報記録方法とプログラム
KR100781157B1 (ko) * 2004-07-27 2007-11-30 삼성테크윈 주식회사 효율적 재생 동작을 위한 디지털 카메라의 제어 방법, 및 이 방법을 채용한 디지털 카메라
JP2006080723A (ja) * 2004-09-08 2006-03-23 Sony Corp 記録装置および記録方法、再生装置および再生方法、並びにプログラム
US7694213B2 (en) 2004-11-01 2010-04-06 Advanced Telecommunications Research Institute International Video content creating apparatus
KR100679024B1 (ko) * 2004-12-13 2007-02-05 삼성전자주식회사 썸네일 이미지를 이용하여 멀티미디어 컨텐츠를 재생 및편집하는 장치
KR100654445B1 (ko) 2004-12-17 2006-12-06 삼성전자주식회사 멀티미디어 컨텐츠에 대한 썸네일 리스트를 제공하는 장치및 그 방법
JP2006303635A (ja) * 2005-04-15 2006-11-02 Sony Corp 表示装置、表示制御方法および表示制御プログラム、記録再生装置、ならびに、再生装置
JP4745726B2 (ja) * 2005-06-13 2011-08-10 キヤノン株式会社 ファイル管理装置及びその制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体
US20070098281A1 (en) * 2005-10-31 2007-05-03 International Business Machines Corporation Damping rotational vibration in a multi-drive tray
JP4894252B2 (ja) * 2005-12-09 2012-03-14 ソニー株式会社 データ表示装置、データ表示方法及びデータ表示プログラム
US20070204238A1 (en) * 2006-02-27 2007-08-30 Microsoft Corporation Smart Video Presentation
KR101235805B1 (ko) * 2006-05-26 2013-02-21 삼성전자주식회사 기록 매체 및 이 기록 매체에 형성되어 있는 영상 파일을재생하는 방법
JP4998026B2 (ja) 2007-03-15 2012-08-15 ソニー株式会社 画像処理装置、撮像装置、および画像表示制御方法、並びにコンピュータ・プログラム
JP2010524124A (ja) * 2007-04-13 2010-07-15 トムソン ライセンシング メディア資産管理のためにフレーム精度の画像を規定するシステム及び方法
JP2008299090A (ja) * 2007-05-31 2008-12-11 Brother Ind Ltd 画像表示装置
JP4505760B2 (ja) * 2007-10-24 2010-07-21 ソニー株式会社 情報処理装置および方法、プログラム、並びに、記録媒体
US8730231B2 (en) * 2007-11-20 2014-05-20 Image Metrics, Inc. Systems and methods for creating personalized media content having multiple content layers
KR101038918B1 (ko) * 2008-09-08 2011-06-03 주식회사 지티에스이엔씨건축사사무소 촬영대상의 벡터정보 생성 장치와 시스템 및 그 생성 방법
JP5247356B2 (ja) * 2008-10-29 2013-07-24 キヤノン株式会社 情報処理装置およびその制御方法
JP5483863B2 (ja) * 2008-11-12 2014-05-07 キヤノン株式会社 情報処理装置およびその制御方法
US9736251B1 (en) * 2009-04-17 2017-08-15 Ca, Inc. Capture and replay of RDP session packets
US20100303440A1 (en) * 2009-05-27 2010-12-02 Hulu Llc Method and apparatus for simultaneously playing a media program and an arbitrarily chosen seek preview frame
JP2011254240A (ja) * 2010-06-01 2011-12-15 Sony Corp 画像処理装置、画像処理方法およびプログラム
US8861890B2 (en) 2010-11-24 2014-10-14 Douglas Alan Lefler System and method for assembling and displaying individual images as a continuous image
KR101952260B1 (ko) 2012-04-03 2019-02-26 삼성전자주식회사 다수의 동영상 썸네일을 동시에 표시하기 위한 영상 재생 장치 및 방법
US9769546B2 (en) 2013-08-01 2017-09-19 Hulu, LLC Preview image processing using a bundle of preview images
JP6292862B2 (ja) * 2013-12-19 2018-03-14 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0381304A (ja) 1989-08-25 1991-04-05 Matsushita Electric Ind Co Ltd フタロシアニンポリマーおよびその製造方法
US5440401A (en) * 1990-09-14 1995-08-08 Eastman Kodak Company Image database incorporating low resolution index image data
US5963670A (en) * 1996-02-12 1999-10-05 Massachusetts Institute Of Technology Method and apparatus for classifying and identifying images
JPH10187583A (ja) 1996-12-27 1998-07-21 Canon Inc データ通信装置及び方法
JP3276596B2 (ja) * 1997-11-04 2002-04-22 松下電器産業株式会社 動画像編集装置
JPH11154240A (ja) * 1997-11-20 1999-06-08 Nintendo Co Ltd 取込み画像を用いて画像を作成するための画像作成装置
US6734876B2 (en) * 1997-11-28 2004-05-11 Minolta Co. ,Ltd. Image display apparatus
JPH11176137A (ja) 1997-12-15 1999-07-02 Matsushita Electric Ind Co Ltd 光ディスク媒体およびその記録方法およびその記録装置
JP3597690B2 (ja) * 1998-01-21 2004-12-08 株式会社東芝 デジタル情報記録再生システム
JP4462654B2 (ja) * 1998-03-26 2010-05-12 ソニー株式会社 映像素材選択装置及び映像素材選択方法
KR100301003B1 (ko) 1998-05-25 2001-09-06 윤종용 광 디스크에 썸네일 이미지를 기록하고 재생하는 방법 및 그 장치
KR100305730B1 (ko) 1998-06-22 2001-11-30 구자홍 재기록가능기록매체의메뉴데이터및화면의구성방법
JP2000209580A (ja) 1999-01-13 2000-07-28 Canon Inc 画像処理装置およびその方法
JP2000287119A (ja) * 1999-01-26 2000-10-13 Canon Inc 通信装置、通信方法、通信システム、通信システム制御方法、撮影装置、表示装置及び記憶媒体
DE60025406T2 (de) * 1999-03-02 2006-09-21 Hitachi Denshi K.K. Laufbilderinformationsanzeigeverfahren und -gerät
JP3376314B2 (ja) 1999-05-12 2003-02-10 株式会社東芝 デジタル映像情報媒体、デジタル映像情報記録再生装置およびデジタル映像情報処理方法
US7038736B2 (en) 2000-09-21 2006-05-02 Canon Kabushiki Kaisha Moving image processing apparatus and method, and computer readable memory
JP3774662B2 (ja) 2000-12-27 2006-05-17 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、プログラム、及び記録媒体
WO2003003371A1 (en) 2001-05-31 2003-01-09 Canon Kabushiki Kaisha Moving image management apparatus and method
US7391436B2 (en) 2001-08-28 2008-06-24 Canon Kabushiki Kaisha Image processing apparatus with comparing of difference of camera operation information between image data of plural sections in input image data

Also Published As

Publication number Publication date
KR20040015254A (ko) 2004-02-18
EP1393319A1 (en) 2004-03-03
CN1531734A (zh) 2004-09-22
CN100498966C (zh) 2009-06-10
JP2004534458A (ja) 2004-11-11
US20040189692A1 (en) 2004-09-30
WO2003003371A1 (en) 2003-01-09
KR100679575B1 (ko) 2007-02-07
US7123264B2 (en) 2006-10-17
EP1393319B1 (en) 2013-10-02

Similar Documents

Publication Publication Date Title
JP4354806B2 (ja) 動画像管理装置及び方法
JP4194272B2 (ja) 動画像管理装置及び方法
JP3787529B2 (ja) 光ディスク記録再生装置
JP3890246B2 (ja) 撮像装置
US8009961B2 (en) Electronic apparatus, playback management method, display control apparatus, and display control method
US20040008970A1 (en) Enhanced bookmarks for digital video playback
JP2007181150A (ja) 画像記録装置、画像記録方法及びプログラム
US20080008056A1 (en) Recording apparatus having playlist editing function
JP2001028722A (ja) 動画像管理装置及び動画像管理システム
JP4892074B2 (ja) 電子機器、画像出力方法及びプログラム
JP2006166208A (ja) コマ分類情報付与装置及びプログラム
JPH1051733A (ja) 動画像編集方法および動画像編集装置および動画像編集手順を有するプログラムコードを記録する記録媒体
KR20080036946A (ko) 기록 장치, 기록 방법, 재생 장치, 재생 방법, 프로그램 및기록 매체
JP2008059220A (ja) データ管理装置、カメラ、データ管理プログラム、データ管理方法
JP2006279118A (ja) 画像再生装置及びプログラム
JP2006157324A (ja) 画像再生装置およびプログラム
US7532802B2 (en) Apparatus and program for image reproduction
JP2005318618A (ja) 動画像管理装置及び方法
JP2009253769A (ja) 撮像装置、撮像装置の制御方法及びプログラム
JP2000209541A (ja) 動画像再生装置、及び動画像再生プログラムが記憶された記憶媒体
JP2000050204A (ja) 映像表示編集処理方法および装置並びに記録媒体
JP2008311847A (ja) 表示制御装置、表示制御方法、プログラム
JP4021449B2 (ja) 動画像編集方法および動画像編集装置
JP2011193386A (ja) 電子機器及び画像処理方法
JP5060394B2 (ja) 情報処理装置及び情報処理方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050526

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050526

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090203

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090706

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090730

R150 Certificate of patent or registration of utility model

Ref document number: 4354806

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120807

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120807

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130807

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees