CN1610904A - 运动图像数据管理设备和方法 - Google Patents

运动图像数据管理设备和方法 Download PDF

Info

Publication number
CN1610904A
CN1610904A CNA028263790A CN02826379A CN1610904A CN 1610904 A CN1610904 A CN 1610904A CN A028263790 A CNA028263790 A CN A028263790A CN 02826379 A CN02826379 A CN 02826379A CN 1610904 A CN1610904 A CN 1610904A
Authority
CN
China
Prior art keywords
presentation graphics
thumbnail
moving image
segment
selecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA028263790A
Other languages
English (en)
Other versions
CN1610904B (zh
Inventor
东条洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN1610904A publication Critical patent/CN1610904A/zh
Application granted granted Critical
Publication of CN1610904B publication Critical patent/CN1610904B/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/738—Presentation of query results
    • G06F16/739—Presentation of query results in form of a video summary, e.g. the video summary being a video sequence, a composite still image or having synthesized frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74—Browsing; Visualisation therefor
    • G06F16/745—Browsing; Visualisation therefor the internal structure of a single video sequence
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/032—Electronic editing of digitised analogue information signals, e.g. audio or video signals on tapes
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2508—Magnetic discs
    • G11B2220/2512—Floppy disks
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2525—Magneto-optical [MO] discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/60—Solid state media
    • G11B2220/61—Solid state media wherein solid state memory is used for storing A/V content
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/90—Tape-like record carriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

本申请涉及运动图像数据管理设备和方法。该设备管理与记录在存储介质上的运动图像相应的一个或者多个代表性图像。基于在运动图像中指定的任意片断中按照所需的选择基础选择的帧图像，该设备产生对应于该片断的缩略图，并记录该缩略图。与该运动图像对应的该缩略图的存储相应于表示指定片断的片断信息、指示被选定的帧图像的位置的位置信息以及表示选择基础的类型ID。在按照这种方式登记的缩略图中，通过参考类型ID相应于处理目的选择一个缩略图，并呈现给用户。由于作为缩略图产生时的信息的选择基础被保存为缩略图的属性，能够呈现对于处理来说合适的缩略图，从而可以改善使用缩略图进行的处理的可操作性。

Description

运动图像数据管理设备和方法
技术领域
本发明涉及运动图像数据管理设备以及利用一个或者多个代表性图像管理记录在存储介质上的运动图像数据的方法。
背景技术
传统上，已经提出了利用代表性图像管理记录在存储介质上的运动图像的方法。日本专利No.03081304公开了在一般的运动/静止图像再现设备中使用代表性图像，尤其公开了使用代表性图像来通过选择静止或者运动图像来简化显示。另外，日本公开待审专利申请No.Hei11-176137和No.2000-22875公开了给一个运动图像片断分配一个代表性图像，并利用该代表性图像选择一个片断作为指定再现目标。
由于通常使用这样的代表性图像，代表性图像的使用的种类增加了。例如，除了上述再现设备之外，使用所述图像的图像管理同样可以应用于编辑设备。但是，即使对于运动图像的同一片断，适合再现时的用户界面的代表性图像和适合编辑时的用户界面的代表性图像是不同的。因此，如果在包括编辑设备的各种不同的设备中要使用相同的代表性图像，则会产生下述问题。
例如，在图1中，附图标记11表示一段运动图像。在此运动图像11中，在一个片断(a)中，记录了从击球手拿着球棒准备好到击球的运动。附图标记12和13表示关于该同一运动(a)的代表性图像：代表性图像12是从片断(a)的首帧(head frame)产生的，是击球手准备好的图像；代表性图像13是从该片断的一个中间帧产生的，是击球手击球的图像。代表性图像13可以是表示该片断(a)的内容的最适合的代表性图像。
一般，为一个片断指定一个代表性图像并登记下来。因此，代表性图像12和13中的一个被实际登记为片断(a)的代表性图像。该登记的代表性图像可以用作例如再现设备的索引图像。但是，如果登记的是该代表性图像13，当在再现设备中选择了该代表性图像时，运动图像的再现会从击球之前的状态开始(从片断(a)的开头开始再现)，从而用户会感觉不自然。另一方面，如果登记的是代表性图像12，则在编辑设备中使用该图像时不方便：无法利用该图像12准确地把握片断(a)的内容。也就是，在图1的例子中，从该代表性图像12无法判断该片断(a)表现的是击球手击球的场景还是击球手打球但是失手的场景。这样，运动图像的某个片断的合适的代表性图像要取决于所使用的设备的目的。
传统上，需要根据运动图像数据的目的和用途比如再现和编辑来分配和管理代表性图像。因此，要根据目的比如编辑或者再现、根据是运动图像还是静止图像，或者根据设备或者用途，冗余地保存关于代表性图像的信息。另外，对于各代表性图像，必须分别保存利用各代表性图像的信息的处理程序代码。也就是，当在各种运动图像数据处理中使用代表性图像时，由设备或者程序分别管理各代表性图像的信息。因此，要管理多个设备和程序，这很浪费。更加浪费的是，还要单独存储代表性图像数据。为了在使用代表性图像时保持运动图像数据处理的可操作性，代表性图像的管理变得复杂了。
发明内容
本发明就是考虑到上述问题而作出的，目的在于改善利用代表性图像的各种运动图像数据处理的可操作性，并通过向代表性图像添加有关作为代表性图像的原型(original)的帧的选择的信息作为该代表性图像的属性，来简化代表性图像的管理。
根据本发明，前述目的是通过一种管理与运动图像相应的一个或者多个代表性图像的设备实现的。该设备包括：存储与该运动图像相应的代表性图像的装置，该代表性图像是基于从运动图像中选择的一个帧图像产生的；用于存储与所述代表性图像相应的片断信息和属性信息的装置，所述片断信息表示所述运动图像中的一个片断，所述属性信息表示所述帧图像的选择基础(selection base)。
根据本发明的另一方面，前述目的是通过一种管理与运动图像相应的一个或者多个代表性图像的方法而实现的。该方法包括：存储与该运动图像相应的代表性图像的步骤，该代表性图像是基于从运动图像中选择的一个帧图像产生的；存储与所述代表性图像相应的片断信息和属性信息的步骤，所述片断信息表示所述运动图像中的一个片断，所述属性信息表示所述帧图像的选择基础(selection base)。
从下面结合附图所作的说明中，本发明的其它特征和优点将变得更加清楚。附图中，相同的附图标记表示相同的名称或者类似的部件。
附图说明
附图构成说明书的一部分，用于与说明书一起说明本发明的实施例，解释本发明的原理。附图中：
图1是说明使用代表性图像时的问题的示意图；
图2的框图表示根据一个实施例的运动图像处理设备的控制结构；
图3的框图表示根据该实施例的运动图像处理设备的功能构造；
图4的示意图表示根据该实施例，在运动图像文件中的缩略图存储状态的一个例子；
图5的表格表示图4中的脚注(footer)406中的索引区406中的一个索引的数据结构的一个例子；
图6A和6B的表格表示图4中的首部(header)401中的缩略图的数据结构和脚注403中的缩略图区407中的一个缩略图的例子；
图7是一个流程图，表示根据该实施例的缩略图登记操作的一个例子；
图8A和8B是浏览器执行时的用户界面的例子；
图9A和9B是流程图，表示运动图像处理设备中在进行浏览器操作时的处理；
图10是由编辑单元305进行运动图像编辑时的用户界面的例子；
图11是一个流程图，表示由编辑单元305进行运动图像编辑时的缩略图显示操作；
图12是将帧分为块的例子。
具体实施方式
下面结合附图详细说明本发明的优选实施例。
在本实施例中，在利用代表性图像的方法中，为了以更为简单的方式管理/利用代表性图像以及与代表性图像有关的信息，每一个代表性图像具有在产生该图像时的信息。通过使用该信息，多种设备和控制方法可以访问适合相应的处理的代表性图像，并根据目的等来选择要使用的代表性图像。注意，代表性图像产生时的信息指的是表示相应运动图像片断中的作为该代表性图像的原型的图像的数据，或者相应的运动图像片断中的图像类型(动态运动等)。代表性图像产生时的信息包括关于作为代表性图像原型的帧的选择(选择基础)的信息。
根据本实施例，由于提供了代表性图像产生时的信息，可以以集中的方式记录和保持多个代表性图像，从而避免了浪费(例如，可以将对应于多种目的的多个代表性图像作为一个文件管理)。另外，由于可以通过访问代表性图像的选择基础(selection base)来选择合适的代表性图像来在每一个设备或者程序中实现特定的功能，该功能的可操作性得到了改善。另外，在存储信息时，信息等的布置可以根据有关该代表性图像的信息的目的或者方法来确定。也就是，可以根据重要性将重要缩略图(首部)、索引区和缩略图区(脚注)在存储介质上的位置安排到易于访问的位置。
在下面，将详细描述本实施例的运动图像处理设备。
图2是一个框图，图示了根据本实施例的运动图像处理设备的控制结构。在图2中，附图标记201表示在该运动图像处理设备中执行各种控制的CPU。附图标记202表示在该设备启动时在其中执行引导程序并在其中存储各种数据的ROM。附图标记203表示在其中存储由CPU处理的控制程序并为CPU201的各种控制的执行提供工作区的RAM。附图标记204表示键盘，205是鼠标。键盘和鼠标为用户的各种输入操作提供一个环境。
附图标记206表示外部存储设备，包括硬盘、软盘、光盘、磁光盘、磁光带、磁带、非易失性半导体存储器(例如闪存)等。附图标记207表示显示单元，包括CRT显示器、LCD等，为用户显示各种处理的结果等。附图标记208表示网络接口，使得能够与网络上的相应设备通信。附图标记209表示视频接口，从摄像机210和VTR212读取运动图像。附图标记211表示互连上述各部件的总线。
注意，可以用布置在网络上的设备取代所述摄像机210、VTR212和外部存储设备206。
图3是一个框图，表示本实施例的运动图像处理设备的功能构造。附图标记300表示用户操作单元，通过键盘204、鼠标205等获取用户的指定或者输入。附图标记301表示运动图像输入单元，其从摄像机210、VTR212等通过视频接口209读取运动图像，并将图像输入到运动图像处理设备中。附图标记302表示运动图像存储单元，包括外部存储设备206，其以文件格式保存由运动图像输入单元301输入的运动图像。
附图标记303表示缩略图产生单元，其将存储在运动图像存储单元302中的运动图像呈现到显示单元207上，从而用户能够指定所需的片断和该片断中的帧图像。该缩略图产生单元303基于指定的帧图像产生一个缩减的图像(以下称为“缩略图”)，并将其作为运动图像文件与关于该指定片断的信息等一起存储到运动图像文件存储单元302中。也就是，通过缩略图产生单元303，用户能够参考呈现在显示单元207上的运动图像，通过用户操作单元300指定该运动图像中的片断以及代表该片断的帧。然后，基于指定的帧图像的缩略图图像被连同关于该指定片断的信息等一同插入到所述运动图像文件中，并且该文件被存储到所述运动图像存储单元302中。注意，整个运动图像可以被指定为一个片断。
附图标记304表示一个浏览单元，其从运动图像文件存储单元302读出缩略图并通过所述显示单元207进行显示，并再现对应于由用户选择的缩略图的运动图像。在这种情况下再现运动图像时，仅再现被选择的缩略图所代表的片断，或者再现被选择的缩略图代表的片断以及随后的运动图像。附图标记305表示编辑单元，其对保存在运动图像文件存储单元302中的运动图像进行编辑。另外，通过显示单元207显示编辑的进程和结果。
注意，上述各部件的功能是由CPU201执行存储在ROM202中的控制程序而实现的。或者可以这样安排：控制程序适当地从外部存储设备206载入到RAM203中，并由CPU201执行。
(1.缩略图存储方法)
图4是一个示意图，表示在本实施例的运动图像文件中，缩略图存储状态的一个例子。
附图标记400表示由运动图像文件存储单元302存储在存储介质上的运动图像文件。注意，存储单元不限于一个运动图像文件，该单元还可以是从按下图像感测设备的记录按钮到停止图像感测的一个镜头，或者是一段电视广播节目。该运动图像文件400包括一个首部401、一个运动图像402和一个脚注403。该首部中记录管理信息或者类似信息，该运动图像中记录运动图像数据本身，脚注中主要记录缩略图。
在首部401中，记录关于运动图像文件的数据尺寸、格式、信息日期或者类似信息的运动图像文件管理信息，以及缩略图405的一个图像。脚注403具有一个缩略图区401和一个索引区405。缩略图区中可以记录多个缩略图，索引区中记录关于各缩略图的索引信息。
图5是一个表格，表示图4中的脚注中的索引区406中的一个索引的数据结构的一个例子。
“开始点”和“结束点”是缩略图所代表的运动图像片断的开始点和结束点。开始点和结束点的形式没有特别的限制，只要所述点指出运动图像中的片断就行。但是，最好以时间码或者帧ID描述所述点。注意，在将整个运动图像指定为一个片断的情况下，开始点表示该运动图像的首帧，结束点表示该运动图像的末帧。
在“缩略图类型ID”中，在产生缩略图时由图像选择基础(imageselection base)确定一个ID。在本实施例中，为缩略图确定的缩略图类型ID如下：
缩略图类型ID＝1：片断中的首帧；
缩略图类型ID＝2：片断中的中间帧；
缩略图类型ID＝3：片断中的末帧；
缩略图类型ID＝4：片断中的动态运动帧；
缩略图类型ID＝5：片断中的轻微运动帧；
缩略图类型ID＝6：片断中的对象出现帧；
缩略图类型ID＝7：片断中的对象消失帧；
缩略图类型ID＝8：片断中的高图像质量帧；
缩略图类型ID＝9：不包括在片断中的图像。
在此例子中，基于片断中的帧的类型定义ID。这些ID表示作为缩略图原型的帧的选择基础。
另外，在图5的“缩略图偏移”中，描述到由索引指示的缩略图的偏移(对应于该索引的缩略图在缩略图区中的位置)。
图6A和6B的表格表示图4中首部401中的缩略图405的数据结构和脚注403中的缩略图区407中的一个缩略图的例子。在图6A中，在“缩略图首部”中，描述缩略图图像的管理信息或者类似信息。另外，在“缩略图图像”中，描述缩略图图像数据本身。另外，图6B表示了图6A所示的“缩略图首部”的数据结构的一个例子。在“缩略图图像偏移”中，描述到缩略图图像存储位置的偏移。在“缩略图关键相对点”中，将运动图像中作为缩略图原型的帧位置描述为相对于“开始点”的相对位置。注意，在图像不被包括在片断中的情况下，缩略图类型ID＝9，由于没有使用片断中的图像，可以描述特定的值比如最大值。
(缩略图登记处理)
图7是一个流程图，表示该实施例的缩略图登记操作的一个例子。首先，在步骤S100，运动图像输入单元301输入一个运动图像，并将其以图4所示的运动图像文件格式记录到运动图像文件存储单元302中。此时，确保一个用于存储首部401中的缩略图的区域和一个用于脚注403的区域，作为保留区。下一步，在步骤S101，判断是否由用户进行了缩略图指定。缩略图指定装置指定运动图像中的任意帧作为缩略图的原型、指定该缩略图代表的运动图像片断、指定用于选择作为缩略图原型的运动图像帧的选择基础(selection base)，并指定该缩略图是否重要，等等。所述选择基础对应于图5中所述的缩略图类型ID。另外，重要缩略图是代表运动图像文件并登记为缩略图405的缩略图。
该缩略图指定由用户使用所述设备的功能进行。例如，在用户手动设置的情况下：(1)用户将设备设置到进行缩略图指定的预定模式，然后(2)指定运动图像中所需的片断，然后(3)进行该片断的再现，然后(4)当显示出用户想要产生缩略图的图像时，用户向设备输入预定的指令。在这种情况下，上述开始点和结束点是由在所述运动图像中指定的片断确定的。另外，用键盘和/或鼠标进行所需片断和要产生缩略图的图像的指定。另外，通过输入要在此时使用的选择基础，确定所述缩略图类型ID。
或者可以这样安排：基于用户指定的选择基础，从用户指定的片断中自动选择一个图像来产生一个缩略图，比如一个具有动态变化的图像或者一个变化小的图像。另外，可以这样安排：将该片断的开头、中间或者末尾的帧指定为一个选择基础，并且，作为缩略图的基础图像，如果指定了开头的话，则使用该片断的首帧，如果指定了末尾的话，就使用该片断的末帧，如果指定了中间的话，就使用通过上述步骤(1)到(4)指定的帧。
如上所述，可以通过各种方法，比如用户的指定和设备的自动指定，来指定作为缩略图原型的运动图像帧的指定。本发明可以应用于任何所述方法。但是，在图7的流程图中，应用了使用首帧、中间帧和末帧作为选择基础的方法。
接下来，在步骤S102，判断是否指定了该缩略图是重要的。如上所述，在本实施例中，重要缩略图的意思是代表整个运动图像文件的缩略图。如果用户进行了重要缩略图的指定，则过程前进到步骤S103，在这里，将指定用来产生缩略图的帧位置修正为一个相对于运动图像文件的开头的相对位置，从而获得“缩略图关键相对点”。接下来，在步骤S104，在首部401中记录一个缩略图405作为首部，该缩略图具有在步骤S103计算的“缩略图关键相对点”、缩略图图像尺寸和有关到该缩略图图像的存储位置的相对距离的信息(缩略图图像偏移)。在此时，首部401可以存储到存储介质上的相对来说容易快速访问的位置，例如，在使用光盘时，存储到内侧部分，从而能够实现运动图像文件选择的高速索引显示。然后，过程返回到步骤S101的判断。注意，由于在以后的操作中在选择运动图像文件时需要一个重要缩略图，可以这样安排：在重要缩略图的登记完成之前(在步骤S115的过程不转到“是”分支)，当前的过程不结束。在没有存储重要缩略图的情况中，对于本领域普通技术人员来说，显然，存储在脚注中的任何一个缩略图，例如，一开始存储的缩略图(脚注的开头)，可以被存储。在这种情况下，在完成上述处理时没有必要检查重要缩略图的登记是否完成。
另一方面，如果在步骤S102判断出没有进行重要缩略图的指定，则过程前进到步骤S105。在步骤S105，确保在运动图像文件400的脚注403的索引区406的未使用区中得到一个新索引。接下来，在步骤S106，在缩略图区407的未使用区中确保一个新缩略图。接下来，在步骤S107，计算到在步骤S106得到的缩略图的偏移值。
接下来，在步骤S108，根据所述选择基础(在本实施例中，是指缩略图基础图像的位置是在缩略图所代表的片断的开头、中间还是末尾)确定指定的缩略图的类型。根据在步骤S108所确定的类型，过程分支为步骤S109到S111，并设置相应的缩略图类型ID。缩略图类型ID的设置可以这样进行：将上述缩略图类型ID保存到一个表格中，并访问该表格。在本实施例中，如果选择基础是片断中的首帧，则设置为缩略图类型ID＝1(步骤S109)；如果选择基础是片断中的中间帧，则设置为缩略图类型ID＝2(S110)；如果选择基础是片断的末帧，则设置为缩略图类型ID＝3(S111)。在本实施例中，类型数量是三个。但是，本发明不限于这个数。
接下来，在步骤S112，产生一个索引并存储到所述脚注403中，该索引具有在步骤S107计算的偏移(缩略图偏移)、在步骤S108到S111设置的缩略图类型以及表示由用户指定的片断的开始点和结束点。此时，脚注403的索引区406可以被存储到存储介质上的相对容易快速访问的位置，例如，在使用光盘时，存储到内侧部分，从而能够实现脚注中的缩略图的高速选择。另外，最好将索引区406记录在存储介质上的一个连续区中。
接下来，在步骤S113，将被采用为缩略图的帧的位置修正为相对于该片断的首部的相对位置，获得缩略图关键相对点。在步骤S114，连同在步骤S113计算的缩略图关键相对点以及作为首部的缩略图的图像尺寸一起，将通过将指定的帧缩略而得到的缩略图存储到脚注403中，将关于到缩略图图像的存储位置的相对距离的信息存储到“缩略图图像偏移”中。此时，脚注403的缩略图区407可以被存储到存储介质上的相对容易快速访问的位置，例如，在使用光盘时，存储到内侧部分，从而能够实现脚注中的缩略图的高速显示。接下来，过程返回步骤S101，如果再次指定缩略图，则重复步骤S102到S114的处理。
另外，如果在步骤S101判断出没有进行缩略图的指定，则过程前进到步骤S115。在该步骤，如果判断出发出了结束登记处理的指令，则过程结束。如果判断出没有发出结束登记处理的指令，则过程返回步骤S101，重复上述处理。
通过上述处理，任何重要缩略图、索引和缩略图图像都可以被存储到存储介质上的容易快速访问的位置。另外，由于可以用缩略图类型ID区分用于不同目的的缩略图，或者尽管目的相同但针对不同的设备功能特征的缩略图，可以将这些缩略图存储到同一个文件中，从而简化管理。
(缩略图的使用处理)
下面说明使用用上述缩略图登记处理登记的缩略图时的处理。
[浏览器的使用]
首先，描述在浏览器中使用缩略图。图8A和8B是浏览器的用户界面的例子。图8A图示了当预定的选择操作选择了要浏览的运动图像文件时的显示状态。相应地，图8A中的各缩略图被登记在选中的文件的脚注中。所述预定选择操作的意思是，例如，如图8A所示显示一个在各运动图像文件的头部中登记为重要缩略图的缩略图列表，并通过指定所需的缩略图来选择一个运动图像文件。在图8A中，附图标记801表示浏览器的整个显示区域。附图标记802表示显示按阵列排列的缩略图的区域。缩略图从最顶上的行开始从左向右显示。附图标记803表示一个滚动条。在缩略图不能一次显示在缩略图显示区802中的情况下，可以通过拖曳滚动条来顺序显示它们。附图标记804表示一个指针。用户通过在用户操作单元300上的操作来移动该指针804，从而在缩略图显示区802中指定所要的缩略图。当指针804选中缩略图时，显示屏图像改变为如图8B所示的运动图像再现屏幕图像805，并开始再现运动图像。
在下面，将要描述实现在浏览器中使用缩略图的处理。图9A和9B是表示在本实施例的运动图像处理设备中进行浏览器操作时的处理的流程图。注意，图9A和9B所示的处理是在运动图像处理设备中启动浏览器处理并且指定了要浏览的运动图像文件时执行的。注意，在指定要浏览的运动图像文件后，代表相应运动图像文件的缩略图(存储在相应运动图像文件中的缩略图)被显示在图8A的缩略图显示区802中。然后，通过用指针804指定所需的缩略图来选择所需的运动图像文件。当选择了所需的运动图像文件时，启动如图9A和9B所示的处理。
首先，在步骤S201，浏览单元304从存储在运动图像文件存储单元302中的运动图像文件中读出由上述操作选择的运动图像文件400的首部401。然后，浏览单元从运动图像文件管理信息404获取各种基本管理信息比如文件大小，并将所述信息存储到存储器(RAM203)中。接下来，在步骤S202，该单元读脚注403中的索引区406，并将其存储到存储器(RAM203)中。接下来，在步骤S203，该单元从开始位置起按照升序对包括在在步骤S202保存的索引区406中的索引进行排序，以便在后面描述的缩略图的显示按照时间顺序。接下来，在步骤S204，从滚动条803的当前滚动条位置获得缩略图显示开始序号N(表示最顶上的行的左端第N个缩略图)。例如，如果滚动条903在上端(如图8所示)，则显示开始序号N＝1。相应地，显示从第一个缩略图开始。
接下来，通过从首索引顺序执行步骤S205到S212的处理，从第N个缩略图开始在缩略图显示区802中显示用于浏览的缩略图。
首先，在步骤S205，基于登记缩略图时的选择基础检查缩略图是否适合测览。即使在同样的浏览用途中，作为浏览操作的合适的索引的缩略图的基础可能随设备而不同。在本实施例中，浏览单元304判断出片断中的首帧适合作为索引缩略图。为了检查它是否是片断中的首帧，检查缩略图类型ID＝1是否成立。注意，在开始处理时，在排序后从开头开始进行检查。
如果在步骤S205判断出是用于浏览器的缩略图，则过程前进到步骤S206。在步骤S206，对数量C计数(在用于浏览器的缩略图中的次序)。在步骤S207，检查计数的数量C是否小于显示开始序号N(C＜N)。这个处理是为了不显示就跳过序号N之前的缩略图。
如果数量C等于或者大于显示开始序号N，则将该缩略图图像读出用于步骤S208的缩略图显示。接下来，在步骤S209，在缩略图显示区802中显示缩略图图像，过程前进到步骤S210。另一方面，如果在步骤S205判断出缩略图不是用于浏览的，或者在步骤S207判断出数量C小于序号N，则过程前进到步骤S210。
在步骤S210，处理对象移动到下一个索引，以处理下一个缩略图。在刚刚处理的是最后一个索引而没有下一个索引的情况下，过程前进到步骤S213。如果存在下一个索引，则过程前进到步骤S212，在这里，检查该数量是否超过了缩略图显示区802中可显示的缩略图的数量。例如，在图8A的例子中，可显示的缩略图的数量是9。因此，如果C＞＝9成立，则可以判断已经显示了可显示的缩略图。
如果该数量没有超过可显示的缩略图的数量，则过程返回步骤S205。也就是，执行步骤S205到S210的处理以顺序检查各索引，直到没有要处理的索引，或者直到该数量超过可显示的缩略图的数量。
如果没有要处理的索引或者该数量超过了在缩略图显示区802中可显示的缩略图的数量，则过程前进到步骤S213。在步骤S213，检查用户是否操作了滚动条。如果操作了滚动条，则重复步骤S204到S212的处理，从而显示一个对应于被操作的滚动条的位置的缩略图。如果没有操作滚动条，则过程前进到步骤S214。
接下来，在步骤S214，判断用户是否选择了显示在缩略图显示区802中的缩略图中的一个。如果已经选择了一个缩略图，则过程前进到步骤S215，在这里，从对应于所选中的缩略图的索引读出开始点。接下来，在步骤S216，从该开始点开始运动图像的再现，在运动图像再现屏幕图像805中显示该运动图像。之后，过程前进到步骤S217。另一方面，如果在步骤S214判断出没有选择一个缩略图，则过程前进到步骤S217。
在步骤S217，判断是否发出了结束浏览单元304的浏览的指令。如果判断没有发出结束的指令，则过程返回步骤S213。如果判断出发出了结束的指令，则过程结束。
注意，在上述例子中，当选择一个缩略图时，从相应的索引获取开始点，从该位置开始再现，并在运动图像数据的末尾继续。但是，再现不限于这种方案。可以这样安排：从对应于所选中的缩略图的索引获取开始点和结束点，仅仅再现该片断。注意，可以提供一个停止或者暂停按钮，这样，运动图像的再现可以在任何地方停止。
在上述说明中，为了说明的简明起见，在一个运动图像文件中进行浏览。但是，即使在多个运动图像文件中的缩略图选择中，可以通过重复上述处理来针对各运动图像文件显示一个缩略图，从而进行选择。
通过上述处理，浏览单元304仅仅从缩略图区407读出用于浏览的缩略图并使用之。也就是，使用缩略图的设备或者处理能够利用产生缩略图时的信息(缩略图类型ID)选择对于处理来说合适的缩略图，从而能够利用缩略图。
[运动图像编辑中的使用]
下面描述在运动图像编辑中对缩略图的使用。图10是由编辑单元305进行运动图像编辑时的用户界面的一个例子。附图标记1000表示一个在其中执行编辑操作的编辑操作窗口。附图标记1001表示在其中再现选中的运动图像文件或者编辑的结果以进行检查的再现窗口。附图标记1002表示运动图像文件窗口，用于显示各运动图像文件的首部中的缩略图(重要缩略图)列表。附图标记1003表示用于对再现窗口1001中再现的运动图像进行操作的操作按钮，从左边开始是用于“再现、暂停、停止、快退、快进”操作的按钮。
附图标记1004表示一个场景指定窗口，其中，按阵列排列选定的运动图像文件，用于在各运动图像中指定片断。注意，为了用户识别方便，缩略图图像叠加显示在相应的运动图像文件区中。在图中，排列了由缩略图“太阳”和“棒球运动员”代表的文件。附图标记1005表示一个场景指定条。通过操作该场景指定条，可以指定选中的剪辑(阴影部分)的开始点和结束点。
附图标记1006表示一个指针。用户通过操作用户操作单元300而移动该指针1006，从而指定对各种按钮的选择、指定操作。在一种操作方法中，从运动图像文件窗口1002中选择一个运动图像文件，并拖放到场景指定窗口1004中以进行再现。然后，使用场景指定条1005修正开始点和结束点。此时，根据需要，用户通过操作操作单元1003而在再现窗口1001中进行运动图像再现，从而检查该图像。
图11是一个流程图，表示用编辑单元305进行运动图像编辑时的缩略图显示操作。注意，在运动图像处理设备中进行运动图像编辑处理时启动图11中的处理。
首先，在步骤S300，编辑单元305从运动图像文件存储单元302中读出所有运动图像文件的首部401。接下来，在步骤S301，编辑单元读出各文件的首部401中的缩略图405。然后在步骤S302，编辑单元在运动图像文件窗口1002中显示首部中的缩略图(也就是重要缩略图)，作为各运动图像文件的代表性图像。
接下来，在步骤S303，判断是否选择了一个运动图像文件。在本实施例中，判断是否有运动图像文件通过指针1006的操作被从运动图像文件窗口1002拖放到场景指定窗口1004。如果选择了运动图像文件，则过程前进到步骤S304，在这里，从用户选择的运动图像文件的脚注中读出索引区406。另一方面，如果在步骤S303判断出没有进行运动图像文件的选择，则跳过步骤S304。
接下来，在步骤S305，检查用户是否在场景指定窗口1004中通过场景指定条1005针对该运动图像指定了一个场景范围。如果进行了场景指定，则在步骤S306到S311抽出和显示在用户指定的范围内存在的用于编辑的缩略图。
首先，在步骤S306，访问索引(在开始处理时，是首索引)中的开始点和结束点，并判断由所述开始点和结束点指定的片断是否在用户指定的范围内。如果在该范围内，则过程前进到步骤S307，在这里，基于该缩略图的选择基础来判断对应于该索引的缩略图是否是一个对编辑来说适合的缩略图。即使在同样的编辑用途中，适合编辑中的索引的缩略图的基础也可能随设备而不同。本实施例中的编辑单元305确定该片断中的一个中间帧作为适合编辑的缩略图。为了检查其是否是该片断中的一个中间帧，检查缩略图类型ID＝2是否成立。如果它是一个适合编辑的缩略图，则过程前进到步骤S310。
另一方面，如果在步骤S306判断出对应于该索引的片断不在用户指定的范围内，或者如果在步骤S307判断出该缩略图不是用于编辑的，则过程前进到步骤S308处理下一个索引。在步骤S309，判断是否存在下一个索引。如果存在下一个索引，则重复步骤S306和S307的处理。
如果步骤S307的条件得到满足，则过程前进到步骤S310，在这里，读出对应于该索引的缩略图图像。然后在步骤S311，显示该缩略图图像。例如，如图10所示，在场景指定窗口1004中，在表示场景的条上叠加显示缩略图图像。通过这种显示，用户容易识别指定范围中的场景。之后，过程前进到步骤S308，对下一个索引重复上述处理。
通过上述处理，在指示场景的条上叠加显示用户指定的范围中的所有片断中的适合用户编辑的缩略图。注意，缩略图显示范围是由场景指定条1005指定的一个区域。如果指定条之间的区域的大小不够，则可以重叠部分缩略图，或者可以显示一个滚动条来进行可滚动的显示。
如果在步骤S305判断出用户没有指定场景范围，或者如果在步骤S309判断出没有要处理的索引，则过程前进到步骤S312。在步骤S312，判断是否发出了结束运动图像编辑操作的指令。如果没有发出结束编辑操作的指令(执行运动图像编辑)，则过程返回步骤S303，重复上述处理。另一方面，如果判断出发出了结束编辑操作的指令，则过程结束。
通过上述处理，在选择文件时，编辑单元305可以使用存储在首部中的重要缩略图，并仅仅使用缩略图区407中对应于指定范围的用于运动图像编辑的缩略图。
注意，在上述实施例中，描述了使用缩略图图像进行浏览和运动图像编辑。但是，用途不限于这两种操作。相反，缩略图图像可以用于各种目的，比如对应于选定的缩略图的帧图像的打印。
例如，如果打印对应于一个选定缩略图的帧图像，则从对应于指定图像数据的缩略图(记录在脚注中的缩略图)中抽取适合打印的缩略图，并显示为候选打印帧，然后打印作为被选中的缩略图的原型的帧。即使在同样的打印用途中，适合打印的缩略图的基础也随设备而不同。例如，如果片断中的一个轻微运动帧和一个高图像质量帧被当作适合打印的帧处理，则检查缩略图类型ID＝5或者缩略图类型ID＝8是否成立。当指定一个帧时，获取并打印指定的缩略图的如图6所示的缩略图关键相对点指定的帧的图像。因此，可以向图3的运动图像处理设备添加另一个功能比如打印单元。
注意，在上述实施例中，提供了浏览单元和编辑单元作为利用缩略图的功能。但是，可以仅仅使用上述功能中的包括上述打印单元的一个，或者其它多种功能。
注意，在上述实施例中，图3所示的运动图像处理设备是包括运动图像输入单元301、缩略图产生单元303、浏览单元304和编辑单元305的单个设备。但是，该运动图像处理设备可以构建为多个具有各自的功能的设备，包括其它单元比如上述打印单元，或者构建为具有几种功能的组合的设备。在这种情况下，可以通过存储介质或者通信手段比如IEEE1394在各设备之间传输包括缩略图的运动图像文件400(图4)。
注意，在上述实施例中，由于没有用于首部缩略图的索引，首部缩略图没有开始点、结束点和缩略图类型ID。但是，这些信息也可以保存为管理信息。
注意，在上述实施例中，记录在首部中的缩略图(代表文件的缩略图)没有记录在脚注中。但是，该缩略图也可以被记录在首部中和脚注中。
注意，在从多个选择基础产生的缩略图相同的情况下(例如片断中的一个中间帧和一个动态运动帧相同)，这些缩略图可以被登记为具有不同的缩略图类型ID，或者可以准备一个缩略图类型ID(例如缩略图类型ID＝10：片断中的中间和动态运动帧)。在后一种情况下，由于不需要登记相同的缩略图，可以提高数据使用的效率。注意，可以安排为这样：可以为一个缩略图登记多个选择基础(缩略图类型ID)。
注意，在上述实施例中，缩略图的登记是由用户的指令确定的，但它也可以是自动的。例如，为了自动抽取片断中的动态运动帧，如图12所示，将当前帧和前一帧在竖向和横向分割为多个块。在每一个块中，计算RGB平均值，在当前帧和前一帧之间，获取各RGB通道中的差异平方和，作为帧间相似性距离。一个举例的表达式如下：
[表达式1]
Σ i = 1 k { ( P 1 iR - P 2 iR ) 2 + ( P 1 iG - P 2 iG ) 2 + ( P 1 iB - P 2 iB ) 2 }
其中：
i：被处理的块；
K：分割的块的数量；
P1iR：前一帧的第i个块的R通道平均值；
P1iG：前一帧的第i个块的G通道平均值；
P1iB：前一帧的第i个块的B通道平均值；
P2iR：当前帧的第i个块的R通道平均值；
P2iG：当前帧的第i个块的G通道平均值；
P2iB：当前帧的第i个块的B通道平均值。
当帧间相似性距离小时，所述帧就是相似的；如果该距离大，所述帧就不相似。由于运动是动态的，帧间的相似性降低，帧间相似性距离等于或者大于一个阈值的帧就可以被判定为动态运动帧。
如上所述，根据本实施例，由于对应于多种目的和选择基础的多个缩略图可以被存储为一个文件，可以容易地管理缩略图。另外，使用缩略图时，通过参考添加到缩略图的在产生缩略图时的选择基础(缩略图类型ID)，只有与要使用该缩略图的目的和设备特征相应的缩略图可以被使用。
另外，还可以通过向一个系统或者设备提供一种保存用于实现上述实施例的功能的软件程序代码的存储介质，并由该系统或者设备的计算机(例如CPU、MPU)读出和执行存储在该存储介质中的程序代码来实现。
在这种情况下，从存储介质读出的程序代码本身实现本实施例的功能，从而该存储介质构成本发明。
另外，该存储介质，比如软盘、硬盘、光盘、磁光盘、CD-ROM、CD-R、DVD、磁带、非易失性存储卡和ROM，可以用来提供所述程序代码。
另外，除了通过由计算机执行所述程序代码实现根据上述实施例的前述功能之外，本发明包括这样一种情况：在计算机上工作的OS(操作系统)等根据所述程序代码的指定执行部分或者全部实际处理，从而实现上述实施例的功能。
另外，本发明还包括这样一种情况：在将从存储介质读出的程序代码写入一个被插入到计算机中的功能扩展板中，或者写入一个设置在连接到该计算机的功能扩展单元中的存储器中之后，该功能扩展板或者功能扩展单元中的CPU等根据程序代码的指定执行部分或者全部实际处理，从而实现上述实施例的功能。
如上所述，根据本发明，通过向代表性图像添加关于代表性图像的产生的信息作为其属性，改善了使用代表性图像的各种运动图像处理的可操作性，可以简化代表性图像的管理。
由于在本发明的实质精神范围内可以作出许多不同的实施例，因此应当理解，本发明不限于这里的具体实施例，而应由所附权利要求限定。

Claims (32)

1.一种管理与运动图像相应的一个或者多个代表性图像的设备，包括：
存储与该运动图像相应的代表性图像的装置，该代表性图像是基于从所述运动图像中选择的一个帧图像产生的；
用于存储与所述代表性图像相应的片断信息和属性信息的装置，所述片断信息表示所述运动图像中的一个片断，所述属性信息表示所述帧图像的选择基础。
2.如权利要求1所述的设备，其特征在于：所述运动图像、所述代表性图像、所述片断信息和所述属性信息被存储为一个文件。
3.如权利要求1所述的设备，还包括：用于存储表示与所述代表性图像相应的所述帧图像的位置的位置信息的装置。
4.如权利要求3所述的设备，还包括：
第一指定装置，用于指定运动图像中的所需片断；和
产生装置，用于：基于在所述第一指定装置指定的所述片断中根据来自运动图像的所述选择基础选择的帧图像，产生一个对应于所述片断的代表性图像；产生表示所述运动图像中的所述片断的片断信息；产生表示所述被选择的帧图像在所述运动图像中的位置的位置信息；以及，产生表示所述被指定的选择基础的属性信息。
5.如权利要求4所述的设备，其特征在于，所述代表性图像是通过缩减所述帧图像而获得的缩略图。
6.如权利要求1所述的设备，还包括选择装置，用于根据所述属性信息从对应于所需的运动图像存储的代表性图像中选择一个与处理目的相应的代表性图像。
7.如权利要求1所述的设备，其特征在于，所述片断信息和所述属性信息由代表性图像记录在特定的连续部分中。
8.如权利要求7所述的设备，其特征在于，所述特定部分是存储介质上的一个连续区。
9.如权利要求4所述的设备，还包括：
第二指定装置，用于指定多个选择基础中的一个，
其中，所述产生装置基于根据所述第二指定装置指定的选择基础而选择的帧图像产生所述代表性图像。
10.如权利要求9所述的设备，其特征在于，所述多个选择基础包括所述被指定的片断中的首帧图像、该片断中的末帧图像和该片断中除了首帧和末帧图像之外的所需的帧图像。
11.如权利要求9所述的设备，其特征在于，所述属性信息是分配给所述多个选择基础中的每一个的标识号。
12.如权利要求6所述的设备，还包括应用装置，用于：如果指定了所述选择装置选择的代表性图像中的一个，则对所述被指定的代表性图像对应的所述片断信息所指示的片断中的运动图像应用对应于所述处理目的的处理。
13.如权利要求12所述的设备，其特征在于，在浏览操作时，所述选择装置通过参考所述属性信息而选择适合于浏览操作的代表性图像，其中，如果指定了所述选择装置选择的代表性图像中的一个，则所述应用装置基于所指定的代表性图像对应的片断信息来再现所述运动图像。
14.如权利要求12所述的设备，其特征在于，在打印运动图像中的所需帧图像的打印操作时，所述选择装置通过参考所述属性信息而选择适合于打印的代表性图像，其中，如果指定了所述选择装置选择的代表性图像中的一个，则所述应用装置产生和输出打印数据，以打印输出所指定的代表性图像所对应的位置信息所指示的帧图像。
15.如权利要求12所述的设备，其特征在于，在编辑操作时，如果指定了所需运动图像中的要编辑的一个片断，则通过参考所述属性信息和所述片断信息，所述选择装置选择一个适合于编辑操作并具有与要编辑的片断相应的片断的代表性图像。
16.一种管理与运动图像相应的一个或者多个代表性图像的方法包括：
存储与该运动图像相应的代表性图像的步骤，该代表性图像是基于从运动图像中选择的一个帧图像产生的；
存储与所述代表性图像相应的片断信息和属性信息的步骤，所述片断信息表示所述运动图像中的一个片断，所述属性信息表示所述帧图像的选择基础。
17.如权利要求16所述的方法，其特征在于：所述运动图像、所述代表性图像、所述片断信息和所述属性信息被存储为一个文件。
18.如权利要求16所述的方法，还包括：用于存储表示与所述代表性图像相应的所述帧图像的位置的位置信息的步骤。
19.如权利要求18所述的方法，还包括：
第一指定步骤，用于指定运动图像中的所需片断；和
产生步骤，用于：基于在所述第一指定装置指定的所述片断中根据来自运动图像的所述选择基础选择的帧图像，产生一个对应于所述片断的代表性图像；产生表示所述运动图像中的所述片断的片断信息；产生表示所述被选择的帧图像在所述运动图像中的位置的位置信息；以及，产生表示所述被指定的选择基础的属性信息。
20.如权利要求19所述的方法，其特征在于，所述代表性图像是通过缩减所述帧图像而获得的缩略图。
21.如权利要求16所述的方法，还包括选择步骤，用于根据所述属性信息从对应于所需的运动图像存储的代表性图像中选择一个与处理目的相应的代表性图像。
22.如权利要求16所述的方法，其特征在于，所述片断信息和所述属性信息由代表性图像记录在特定的连续部分中。
23.如权利要求22所述的方法，其特征在于，所述特定部分是存储介质上的一个连续区。
24.如权利要求19所述的方法，还包括：
第二指定步骤，用于指定多个选择基础中的一个，
其中，在所述产生步骤，基于根据所述第二指定步骤指定的选择基础而选择的帧图像产生所述代表性图像。
25.如权利要求24所述的方法，其特征在于，所述多个选择基础包括所述被指定的片断中的首帧图像、该片断中的末帧图像和该片断中除了首帧和末帧图像之外的所需的帧图像。
26.如权利要求24所述的方法，其特征在于，所述属性信息是分配给所述多个选择基础中的每一个的标识号。
27.如权利要求21所述的方法，还包括应用步骤，用于：如果指定了在所述选择步骤选择的代表性图像中的一个，则对所述被指定的代表性图像对应的所述片断信息所指示的片断中的运动图像应用对应于所述处理目的的处理。
28.如权利要求27所述的方法，其特征在于，在浏览操作时，在所述选择步骤通过参考所述属性信息而选择适合于浏览操作的代表性图像，其中，如果指定了在所述选择步骤选择的代表性图像中的一个，则在所述应用步骤基于所指定的代表性图像对应的片断信息来再现所述运动图像。
29.如权利要求27所述的方法，其特征在于，在打印运动图像中的所需帧图像的打印操作时，在所述选择步骤通过参考所述属性信息而选择适合于打印的代表性图像，其中，如果指定了在所述选择步骤选择的代表性图像中的一个，则在所述应用步骤产生和输出打印数据，以打印输出所指定的代表性图像所对应的位置信息所指示的帧图像。
30.如权利要求27所述的方法，其特征在于，在编辑操作时，如果指定了所需运动图像中的要编辑的一个片断，则通过参考所述属性信息和所述片断信息，在所述选择步骤选择一个适合于编辑操作并具有与要编辑的片断相应的片断的代表性图像。
31.一种程序，使计算机执行如权利要求16到30之一所述的方法。
32.一种存储程序的计算机可读介质，所述程序用于使计算机执行如权利要求16到30之一所述的方法。
CN028263790A 2001-12-28 2002-12-10 运动图像数据管理设备和方法 Expired - Fee Related CN1610904B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP401351/2001 2001-12-28
JP2001401351A JP4194272B2 (ja) 2001-12-28 2001-12-28 動画像管理装置及び方法
PCT/JP2002/012921 WO2003058498A1 (en) 2001-12-28 2002-12-10 Moving image data management apparatus and method

Publications (2)

Publication Number Publication Date
CN1610904A true CN1610904A (zh) 2005-04-27
CN1610904B CN1610904B (zh) 2011-12-21

Family

ID=19189764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN028263790A Expired - Fee Related CN1610904B (zh) 2001-12-28 2002-12-10 运动图像数据管理设备和方法

Country Status (6)

Country Link
US (3) US6965701B2 (zh)
EP (1) EP1459212B1 (zh)
JP (1) JP4194272B2 (zh)
KR (1) KR100602315B1 (zh)
CN (1) CN1610904B (zh)
WO (1) WO2003058498A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101611451A (zh) * 2006-12-22 2009-12-23 苹果公司 媒体项的二维时线显示
CN102780831A (zh) * 2005-12-28 2012-11-14 索尼株式会社 图像回放设备和显示方法、图像记录设备和方法
CN102789799A (zh) * 2006-12-22 2012-11-21 苹果公司 媒体项的二维时线显示
CN101197984B (zh) * 2006-12-07 2013-03-13 索尼株式会社 图像处理设备和图像处理方法
CN101438593B (zh) * 2006-03-10 2013-08-14 Lg电子株式会社 基于缩略图像的视频浏览
CN101296385B (zh) * 2007-04-27 2014-03-05 三星电子株式会社 显示运动图像的方法及图像回放装置
CN107925741A (zh) * 2015-08-20 2018-04-17 索尼公司 图像处理方法、图像处理设备和程序

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3774662B2 (ja) * 2000-12-27 2006-05-17 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、プログラム、及び記録媒体
US7466901B2 (en) * 2002-04-17 2008-12-16 Samsung Electronics Co., Ltd. Recording medium containing thumbnail recorded thereon, recording apparatus and method therefor, and reproducing apparatus and method therefor
US8112711B2 (en) * 2003-10-06 2012-02-07 Disney Enterprises, Inc. System and method of playback and feature control for video players
JP4340528B2 (ja) * 2003-12-16 2009-10-07 パイオニア株式会社 情報再生装置、情報再生方法及び情報再生用プログラム並びに情報記録媒体
JP3816488B2 (ja) 2003-12-26 2006-08-30 株式会社リコー 情報記録装置と情報記録媒体と情報記録方法とプログラム
JP4328265B2 (ja) * 2004-06-25 2009-09-09 株式会社ソニー・コンピュータエンタテインメント 動画像処理装置、動画像処理方法、及びプログラム
JP2006197561A (ja) * 2004-12-17 2006-07-27 Matsushita Electric Ind Co Ltd データ記録方法及び装置
KR101114110B1 (ko) * 2005-02-01 2012-02-21 엘지전자 주식회사 압축률을 이용한 애니메이션 파일의 썸네일 생성 방법
KR100659882B1 (ko) * 2005-02-22 2006-12-20 엘지전자 주식회사 디지털 방송 시스템의 방송 녹화 장치 및 방송 검색 장치
US8724969B2 (en) 2005-05-23 2014-05-13 Open Text S.A. Method, system and computer program product for editing movies in distributed scalable media environment
US9648281B2 (en) * 2005-05-23 2017-05-09 Open Text Sa Ulc System and method for movie segment bookmarking and sharing
US8141111B2 (en) 2005-05-23 2012-03-20 Open Text S.A. Movie advertising playback techniques
US8145528B2 (en) 2005-05-23 2012-03-27 Open Text S.A. Movie advertising placement optimization based on behavior and content analysis
JP4594835B2 (ja) * 2005-09-09 2010-12-08 オリンパスメディカルシステムズ株式会社 画像表示装置
JP4079169B2 (ja) * 2005-10-06 2008-04-23 コニカミノルタビジネステクノロジーズ株式会社 画像処理装置、その装置を備える画像処理システム、画像処理方法およびコンピュータを画像処理装置として機能させるためのプログラム
US20070136268A1 (en) * 2005-12-09 2007-06-14 Microsoft Corporation Just in time loading list
KR100782212B1 (ko) * 2005-12-28 2007-12-05 엘지전자 주식회사 피브이알에서의 프로그래스바를 이용한 녹화물 주요 장면안내 장치 및 방법
JP5156646B2 (ja) * 2006-05-29 2013-03-06 ジーブイビービー ホールディングス エス．エイ．アール．エル． 動画編集システムおよび動画編集方法
JP5025217B2 (ja) * 2006-10-02 2012-09-12 京セラ株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP4240330B2 (ja) * 2006-10-24 2009-03-18 ソニー株式会社 データベース作成方法、データベース作成プログラム、データベース作成装置及び映像コンテンツ記録装置
US8943410B2 (en) 2006-12-22 2015-01-27 Apple Inc. Modified media presentation during scrubbing
US8020100B2 (en) * 2006-12-22 2011-09-13 Apple Inc. Fast creation of video segments
US7992097B2 (en) 2006-12-22 2011-08-02 Apple Inc. Select drag and drop operations on video thumbnails across clip boundaries
US9142253B2 (en) 2006-12-22 2015-09-22 Apple Inc. Associating keywords to media
US8276098B2 (en) 2006-12-22 2012-09-25 Apple Inc. Interactive image thumbnails
US8739073B2 (en) * 2007-05-15 2014-05-27 Microsoft Corporation User interface for document table of contents
KR20090017170A (ko) * 2007-08-14 2009-02-18 삼성전자주식회사 미디어 파일 관리 방법 및 장치
US9704532B2 (en) * 2008-01-14 2017-07-11 Apple Inc. Creating and viewing preview objects
JP5247356B2 (ja) * 2008-10-29 2013-07-24 キヤノン株式会社 情報処理装置およびその制御方法
JP5483863B2 (ja) * 2008-11-12 2014-05-07 キヤノン株式会社 情報処理装置およびその制御方法
KR101560690B1 (ko) * 2008-11-27 2015-10-16 동부대우전자 주식회사 디지털 녹화기의 썸네일 생성 장치 및 방법
JP5098976B2 (ja) * 2008-11-28 2012-12-12 国立大学法人お茶の水女子大学 行動分析支援システム及び行動分析支援プログラム
US8682136B2 (en) * 2010-08-03 2014-03-25 Blackberry Limited Representing video content
JP2012039522A (ja) * 2010-08-10 2012-02-23 Sony Corp 動画像処理装置、動画像処理方法およびプログラム
US8621351B2 (en) 2010-08-31 2013-12-31 Blackberry Limited Methods and electronic devices for selecting and displaying thumbnails
EP2423921A1 (en) * 2010-08-31 2012-02-29 Research In Motion Limited Methods and electronic devices for selecting and displaying thumbnails
US9483167B2 (en) * 2010-09-29 2016-11-01 Adobe Systems Incorporated User interface for a touch enabled device
US9229636B2 (en) 2010-10-22 2016-01-05 Adobe Systems Incorporated Drawing support tool
US10031641B2 (en) 2011-09-27 2018-07-24 Adobe Systems Incorporated Ordering of objects displayed by a computing device
US8938116B2 (en) * 2011-12-08 2015-01-20 Yahoo! Inc. Image cropping using supervised learning
KR101952260B1 (ko) 2012-04-03 2019-02-26 삼성전자주식회사 다수의 동영상 썸네일을 동시에 표시하기 위한 영상 재생 장치 및 방법
KR20130137458A (ko) * 2012-06-07 2013-12-17 삼성전자주식회사 디스플레이 장치 및 방법
KR102099776B1 (ko) * 2013-07-23 2020-04-10 주식회사 케이티 클립 동영상을 생성하는 장치 및 방법, 그리고 미리보기 동영상을 제공하는 서버
JP6292862B2 (ja) * 2013-12-19 2018-03-14 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP5917635B2 (ja) * 2014-02-05 2016-05-18 富士フイルム株式会社 コンテンツ管理システム、管理コンテンツ生成方法、管理コンテンツ再生方法、プログラムおよび記録媒体
JP6354206B2 (ja) * 2014-02-27 2018-07-11 ブラザー工業株式会社 情報処理プログラムおよび情報処理装置
WO2018212013A1 (ja) * 2017-05-18 2018-11-22 ソニー株式会社 情報処理装置、情報処理方法および情報処理プログラム
KR102027297B1 (ko) * 2018-02-23 2019-10-02 (주)온넷시스템즈코리아 장면 기반 동영상 네비게이션 장치
US11082752B2 (en) * 2018-07-19 2021-08-03 Netflix, Inc. Shot-based view files for trick play mode in a network-based video delivery system

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6274156A (ja) * 1985-09-27 1987-04-04 Olympus Optical Co Ltd 画像登録検索装置
JPH0381304A (ja) 1989-08-25 1991-04-05 Matsushita Electric Ind Co Ltd フタロシアニンポリマーおよびその製造方法
JP3081304B2 (ja) 1991-09-20 2000-08-28 大日本印刷株式会社 画像検索方法
KR100215586B1 (ko) * 1992-11-09 1999-08-16 모리시타 요이찌 다이제스트 화상 자동생성 장치 및 다이제스트 화상 자동생성 방법
JPH08249348A (ja) * 1995-03-13 1996-09-27 Hitachi Ltd 映像検索方法および装置
JP3407840B2 (ja) * 1996-02-13 2003-05-19 日本電信電話株式会社 映像要約方法
US5963204A (en) * 1996-09-20 1999-10-05 Nikon Corporation Electronic camera with reproduction and display of images at the same timing
US5953008A (en) * 1996-10-01 1999-09-14 Nikon Corporation Source file editing apparatus
JP3250467B2 (ja) * 1996-10-04 2002-01-28 松下電器産業株式会社 映像要約方法および映像表示方法
JP3662129B2 (ja) * 1997-11-11 2005-06-22 松下電器産業株式会社 マルチメディア情報編集装置
US6052492A (en) * 1997-12-09 2000-04-18 Sun Microsystems, Inc. System and method for automatically generating an image to represent a video sequence
JPH11176137A (ja) 1997-12-15 1999-07-02 Matsushita Electric Ind Co Ltd 光ディスク媒体およびその記録方法およびその記録装置
JPH11259507A (ja) * 1998-03-12 1999-09-24 Nippon Telegr & Teleph Corp <Ntt> 映像検索方法および映像検索プログラムを格納した記録媒体
EP1005043B1 (en) * 1998-10-28 2005-08-24 Hitachi, Ltd. Information recording medium, motion-picture voice recording/reproducing apparatus, and motion-picture voice recording/reproducing method
JP2000148771A (ja) * 1998-11-06 2000-05-30 Sony Corp 画像処理装置および方法、並びに提供媒体
US6912327B1 (en) * 1999-01-28 2005-06-28 Kabushiki Kaisha Toshiba Imagine information describing method, video retrieval method, video reproducing method, and video reproducing apparatus
EP1185106A4 (en) * 1999-01-29 2006-07-05 Mitsubishi Electric Corp METHOD FOR ENCODING IMAGE CHARACTERISTICS AND IMAGE SEARCHING METHOD
US6408301B1 (en) * 1999-02-23 2002-06-18 Eastman Kodak Company Interactive image storage, indexing and retrieval system
JP4227241B2 (ja) * 1999-04-13 2009-02-18 キヤノン株式会社 画像処理装置及び方法
US6424795B1 (en) * 1999-07-05 2002-07-23 Hitachi, Ltd. Method and apparatus for recording and reproducing video data, and recording medium
JP3376314B2 (ja) 1999-05-12 2003-02-10 株式会社東芝 デジタル映像情報媒体、デジタル映像情報記録再生装置およびデジタル映像情報処理方法
JP2001306619A (ja) * 2000-04-19 2001-11-02 Hitachi Ltd データ表示方法及びその実施装置並びにその処理プログラムを記録した記録媒体
JP2001312730A (ja) * 2000-05-01 2001-11-09 Sony Corp 情報処理装置および方法、並びにプログラム格納媒体
JP2002007478A (ja) * 2000-06-19 2002-01-11 Fuji Xerox System Service Co Ltd 視聴覚コンテンツ提供装置および方法
US7038736B2 (en) * 2000-09-21 2006-05-02 Canon Kabushiki Kaisha Moving image processing apparatus and method, and computer readable memory
JP4765155B2 (ja) * 2000-09-28 2011-09-07 ソニー株式会社 オーサリング・システム及びオーサリング方法、並びに記憶媒体
JP3774662B2 (ja) * 2000-12-27 2006-05-17 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、プログラム、及び記録媒体
JP2002335473A (ja) * 2001-05-10 2002-11-22 Webstream:Kk 動画コンテンツの検索情報抽出システム、検索情報抽出方法、検索情報保存システム、動画コンテンツのストリーミング配信方法
CN100498966C (zh) * 2001-05-31 2009-06-10 佳能株式会社 运动图像管理装置和方法
US20030043279A1 (en) * 2001-09-04 2003-03-06 Alardin Development Corporation Video surveillance system

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102780831A (zh) * 2005-12-28 2012-11-14 索尼株式会社 图像回放设备和显示方法、图像记录设备和方法
US9066016B2 (en) 2005-12-28 2015-06-23 Sony Corporation Apparatus, method, and program for selecting image data using a display
US9807307B2 (en) 2005-12-28 2017-10-31 Sony Corporation Apparatus, method, and program for selecting image data using a display
CN101438593B (zh) * 2006-03-10 2013-08-14 Lg电子株式会社 基于缩略图像的视频浏览
CN101197984B (zh) * 2006-12-07 2013-03-13 索尼株式会社 图像处理设备和图像处理方法
CN101611451A (zh) * 2006-12-22 2009-12-23 苹果公司 媒体项的二维时线显示
CN102789799A (zh) * 2006-12-22 2012-11-21 苹果公司 媒体项的二维时线显示
CN101611451B (zh) * 2006-12-22 2015-01-28 苹果公司 媒体项的二维时线显示
CN101296385B (zh) * 2007-04-27 2014-03-05 三星电子株式会社 显示运动图像的方法及图像回放装置
US9058840B2 (en) 2007-04-27 2015-06-16 Samsung Electronics Co., Ltd. Method of displaying moving image and image playback apparatus to display the same
CN107925741A (zh) * 2015-08-20 2018-04-17 索尼公司 图像处理方法、图像处理设备和程序
CN107925741B (zh) * 2015-08-20 2021-03-16 索尼公司 图像处理方法、图像处理设备和程序

Also Published As

Publication number Publication date
US20070058876A1 (en) 2007-03-15
JP4194272B2 (ja) 2008-12-10
KR100602315B1 (ko) 2006-07-18
WO2003058498A1 (en) 2003-07-17
US6965701B2 (en) 2005-11-15
US7269290B2 (en) 2007-09-11
US7155064B2 (en) 2006-12-26
EP1459212B1 (en) 2014-07-23
US20040268223A1 (en) 2004-12-30
EP1459212A4 (en) 2007-05-23
US20050201628A1 (en) 2005-09-15
JP2003196297A (ja) 2003-07-11
KR20040073529A (ko) 2004-08-19
CN1610904B (zh) 2011-12-21
EP1459212A1 (en) 2004-09-22

Similar Documents

Publication Publication Date Title
CN1610904A (zh) 运动图像数据管理设备和方法
CN1531734A (zh) 运动图像管理装置和方法
CN100462960C (zh) 创作装置和创作方法
CN1196328C (zh) 数字图像编辑方法和系统
US20180004395A1 (en) Information processing apparatus display control method and program
EP2315111B1 (en) Method and apparatus for browsing media content and executing functions related to media content
CN1774027A (zh) 数据处理装置、信息处理系统、选择程序及可读记录介质
CN1697509A (zh) 用户接口控制设备、用户接口控制方法以及计算机程序
CN101031058A (zh) 图像显示方法和视频回放装置
CN1505394A (zh) 具有节目播放表生成功能的图像处理装置
CN1722218A (zh) 电子设备，及用于电子设备和图形用户界面的显示控制方法
CN1640121A (zh) 动画数据生成系统、动画数据生成方法和动画数据生成程序以及信息记录介质
CN1705364A (zh) 用户简表编辑设备、方法和程序
CN1670679A (zh) 显示控制设备、显示控制方法以及记录介质
CN1909101A (zh) 再现装置、再现方法和内容再现系统
JP2010055431A (ja) 表示処理装置および表示処理方法
CN1773507A (zh) 特征向量生成装置，搜索装置，特征向量生成方法和搜索方法
CN1941865A (zh) 偏好信息处理系统、记录装置、信息处理装置和通信方法
CN1577599A (zh) 具有播放列表编辑功能的记录设备
CN1241386C (zh) 数码相机、图像处理装置、图像处理方法、图像处理系统
CN1956090A (zh) 电子设备、再生管理方法、显示控制设备及显示控制方法
CN1058595C (zh) 以正常播放速度提供慢速运动影像的方法和装置
CN1622212A (zh) 记录设备、再现设备、记录方法、再现方法及其记录介质
CN1695371A (zh) 影像阅览系统及方法
JP2005318618A (ja) 動画像管理装置及び方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20111221

Termination date: 20171210