CN101267523B - 处理运动图像的设备、成像设备、图像显示控制方法 - Google Patents

处理运动图像的设备、成像设备、图像显示控制方法 Download PDF

Info

Publication number
CN101267523B
CN101267523B CN2008100853808A CN200810085380A CN101267523B CN 101267523 B CN101267523 B CN 101267523B CN 2008100853808 A CN2008100853808 A CN 2008100853808A CN 200810085380 A CN200810085380 A CN 200810085380A CN 101267523 B CN101267523 B CN 101267523B
Authority
CN
China
Prior art keywords
image
facial
data
thumbnail image
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2008100853808A
Other languages
English (en)
Other versions
CN101267523A (zh
Inventor
江波户聪
对尾健二
田渕达人
小林幸
冲崎祯仁
增田茂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101267523A publication Critical patent/CN101267523A/zh
Application granted granted Critical
Publication of CN101267523B publication Critical patent/CN101267523B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及信息处理设备、成像设备、图像显示控制方法及计算机程序。用来处理图像的设备包括：输入单元，用来输入用户操作信息；记录介质，用来记录运动图像数据；数据处理器，用来响应对输入单元的输入而获取在记录介质上记录的数据并产生显示数据；及显示单元，用来显示该显示数据。数据处理器从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表。

Description

处理运动图像的设备、成像设备、图像显示控制方法
对于相关申请的交叉引用
本发明包含涉及于2007年3月15日在日本专利局提交的日本专利申请JP 2007-066169的主题，该申请的全部内容通过引用包括在这里。 
技术领域
本发明涉及一种信息处理设备、一种成像设备、一种图像显示控制方法及一种计算机程序。更具体地说，本发明涉及用来在缩略图图像的列表中显示从由例如摄像机拾取的大量运动图像数据中选择的图像、并且响应来自缩略图图像列表的、用户对缩略图图像的指定在缩略图图像的位置处开始运动图像播放处理的一种信息处理设备、一种成像设备、一种图像显示控制方法及一种计算机程序。 
背景技术
诸如数字照相机和数字摄像机之类的成像设备和诸如数字万用盘(DVD)播放机之类的图像处理设备的多种具有在视频显示单元或监视器屏幕上显示在记录介质上存储的图像数据的列表的功能。 
例如，播放运动图像的设备，如成像设备或DVD播放机，以菜单形式显示运动图像和章节的标题，并且使得用户能够从用来播放的显示数据中选择播放内容。例如，成像设备拾取运动图像；并且，在拍摄处理的一个循环中，即从拍摄操作的开始到拍摄操作的结束，捕获作为一个场景的运动图像数据；及显示从每个场景选择的代表性图像的缩小图像(缩略图图像)。成像设备显示在记录介质上记录的多个场景(运动图像数据)的缩略图图像的列表。场景也称作剪辑。 
例如，日本公开专利公报No.Hei 10-028250公开了一种显示从每个场景选择的代表性图像的缩小图像(缩略图图像)的技术。 
由于监视器显示形成在记录介质上存储的每个图像数据文件的图像数据的缩小图像(缩略图图像)，所以用户在某种程度上了解捕获的图像。 
单个缩略图图像在相关技术中的DVD播放机或摄像机上显示的缩略图图像的列表中以每个场景为单位显示。更明确地说，从拍摄操作开始到拍摄操作结束的运动图像数据作为一个场景被处理。代表性图像从一个场景中选择。例如，选择一个场景的开头图像，并且然后显示选择的图像的缩略图图像。 
各种运动图像数据(场景)记录在记录介质上。运动图像数据在时间长度方面随场景而变，例如短场景可以是几秒长，并且例如长场景可以是一个小时长。可能有时难以确定在场景中拍摄了什么。当显示缩略图图像的列表时，每个场景的开头图像的静止图像被选择，并且以缩小的尺寸显示。用户可能经常难以从开头图像了解图像数据的内容。单独显示开头图像不一定使用户能够了解运动图像呈现什么。 
当播放场景从缩略图图像列表中选择时，选择的场景从其开始处播放。用户真正感兴趣的场景的一部分可能典型地出现在场景的中部中而不是在场景的开始处。在这样一种情况下，用户开始播放，然后进行快进操作，并通过连续地观察播放屏幕或快进屏幕搜索感兴趣的数据位置。 
日本公开专利公报No.Hei 06-153157公开了一种在显示按时间序列顺序抽取的索引图像的情况下允许图像被搜索的技术。这种技术要求事先进行索引产生处理。以恒定的间隔从在记录介质上记录的图像数据中获得图像，以便产生索引图像。产生的索引图像然后再次记录在记录介质上。产生索引图像占用时间。在记录介质上记录的所产生的索引图像减小在记录介质上可用的存储器容量。 
发明内容
由摄像机拍摄的多种对象典型地包含人员。为了了解拍摄数据的内容和场景，每个人的面部起重要作用。检测包含在记录介质上记录的每个场景中的每个人员的面部的图像帧(画面)，并且然后从检测的图像抽取人员的面部。由抽取的面部图像产生缩略图图像。产生的缩略图图像然后按时间序列顺序作为时间序列面部缩略图图像被显示。 
在显示时间序列面部缩略图图像的情况下，用户正确地了解每个场景的内容和剪辑。播放处理可以在指定的面部缩略图图像的任一缩略图图像处开始。由此提供以用户友好方式工作的图像处理设备、成像设备、图像显示控制方法及计算机程序。 
按照本发明的一个实施例，一种用来处理图像的设备包括：输入单元，用来输入用户操作信息；记录介质，用来记录运动图像数据；数据处理器，用来响应对输入单元的输入而获取在记录介质上记录的数据并产生显示数据；及显示单元，用来显示该显示数据。数据处理器从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表。 
记录介质可以记录用来管理在记录介质上记录的图像信息的图像信息管理文件。数据处理器可以从在记录介质上记录的图像信息管理文件获得与在形成作为运动图像记录单位的场景的每个帧中面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。 
数据处理器通过分析作为运动图像记录单位记录在记录介质上的场景可以获得在形成场景的帧中与面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。 
数据处理器通过选择用作要显示在时间-序列缩略图图像列表中的面部缩略图图像的源数据的帧内压缩编码图像可以产生面部缩略图图像。 
输入单元可以包括在显示单元上的触摸面板。数据处理器可以从指定在显示单元上显示的时间序列面部缩略图图像列表上的面部缩略图图像的用户输入面部缩略图图像指定信息，并且从与指定面部缩略图图像相对应的图像位置播放图像。 
数据处理器可以在显示单元上显示作为场景的代表性图像的场景索引作为时间序列面部缩略图图像列表的源数据，并且如果更新场景索引，则响应场景索引的更新而更新时间序列面部缩略图图像列表。 
按照本发明的一个实施例，一种成像设备包括：成像单元，用来拾取图像；输入单元，用来输入用户操作信息；记录介质，用来记录运动图像数据；数据处理器，用来响应对输入单元的输入而获取在记录介质上记录的数据并产生显示数据；及显示单元，用来显示该显示数据。数据处理器从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表。 
成像设备还可以包括用来检测人面部图像的面部区是否包含在从成像单元获得的图像数据中的面部检测器。在检测到面部时，数据处理器把面部图标与拾取图像一起显示在显示单元上，以指示已经检测到面部。 
按照本发明的一个实施例，一种用来控制图像显示的图像处理设备的方法包括以下步骤：把用户操作信息输入到输入单元；通过响应对输入单元的输入而获取在记录介质上记录的数据和产生显示数据来处理数据；及在显示单元上显示该显示数据。所述处理数据的步骤包括从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表。 
所述处理数据的步骤可以包括从在记录介质上记录的图像信息 管理文件获得与在形成作为运动图像记录单位的场景的每个帧中面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。 
所述处理数据的步骤可以包括通过分析作为运动图像记录单位记录在记录介质上的场景获得与在形成场景的每个帧中面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。 
所述处理数据的步骤可以包括通过选择用作要显示在时间序列缩略图图像列表中的面部缩略图图像的源数据的帧内压缩编码图像产生面部缩略图图像。 
输入单元可以包括在显示单元上的触摸面板，并且所述处理数据的步骤可以包括从指定在显示单元上显示的时间序列面部缩略图图像列表上的面部缩略图图像的用户输入面部缩略图图像指定信息，和从与指定的面部缩略图图像相对应的图像位置播放图像。 
所述处理数据的步骤可以包括在显示单元上显示作为场景的代表性图像的场景索引，作为时间序列面部缩略图图像列表的源数据；和如果更新场景索引，则响应场景索引的更新而更新时间序列面部缩略图图像列表。 
按照本发明的一个实施例，一种用来控制图像显示的成像设备的方法包括以下步骤：拾取图像；把用户操作信息输入到输入单元；检测人面部图像的面部区是否包含在获得的图像数据中；如果已经检测到面部，则把面部图标与拾取图像一起显示在显示单元上，以指示已经检测到面部；及从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表。 
按照本发明的一个实施例，一种用来使图像处理设备控制图像显示的计算机程序包括以下步骤：检测用户操作信息的输入；通过响应用户操作信息的输入而获取在记录介质上记录的数据和产生显示数 据来处理数据；及显示该显示数据。所述处理数据的步骤包括从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及显示按时间序列顺序排列的所产生的缩略图图像的列表。 
按照本发明的一个实施例，一种使成像设备控制图像显示的计算机程序包括以下步骤：拾取图像；检测用户操作信息的输入；检测人面部图像的面部区是否包含在拾取的图像数据中；如果已经检测到面部，则把面部图标与拾取图像一起显示在显示单元上，以指示已经检测到面部；及从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表。 
一种按照本发明的一个实施例的计算机程序可以以计算机可读形式供给到执行各种程序代码的通用计算机系统中的记录介质。计算机系统由此响应计算机程序借助于以计算机可读形式供给的计算机程序进行处理。 
从以下参照附图对本发明实施例的描述，本发明的这些和其它目的、特征及优点将显而易见。在本说明书中的术语“系统”是指多个设备的逻辑集合，并且每个设备的元件不必装在同一壳体中。 
按照本发明的实施例，设置为运动图像记录单位的每个场景的时间序列面部缩略图图像数据(面部索引)被产生，并且显示在显示单元上。用户基于在拍摄数据中的人员的面部图像可容易地了解每个场景的内容。通过指定时间序列面部缩略图图像，用户可从作为指定的面部缩略图图像的源的图像帧开始播放图像。用户因而可立即播放用户想要播放的场景。 
附图说明
图1示出按照本发明的一个实施例作为图像处理设备的例子的成像设备； 
图2示出在显示单元上呈现的屏幕的切换操作； 
图3示出在显示单元上显示的面部索引屏幕； 
图4示出在面部索引屏幕上显示的缩略图图像的产生处理； 
图5示出在显示单元上显示的面部图标的例子； 
图6是示出面部索引屏幕的产生处理和显示处理的流程图； 
图7是示出在显示单元上显示的面部索引屏幕和其它屏幕的切换操作的流程图；及 
图8是示出在运动图像的记录时面部检测信息的记录处理和记录停止处理的流程图。 
具体实施方式
下面参照附图详细地描述按照本发明实施例的信息处理设备、成像设备、图像显示控制方法及计算机程序。 
下面参照图1的方块图，描述作为信息处理设备的一个例子的成像设备100。当拍摄开始信号从作为用户操作单元的键输入单元106输出到微处理器110时，微处理器110通过把控制信号输出到相关元件开始拍摄处理。由微处理器110控制的、都在透镜单元101中的聚焦机构、快门机构及孔径光阑机构捕获对象的图像，并且把图像供给到电荷耦合装置(CCD)102上。 
CCD102把图像光电地转换成电信号(图像信号)形式的对象图像，并且把图像信号输出到照相机信号处理器103。照相机信号处理器103处理图像信号。例如，照相机信号处理器103对于图像信号进行相关双采样(CDS)处理、自动增益控制(AGC)处理、模数(A/D)转换处理、自动聚焦(AF)处理、自动曝光(AE)处理、自动白平衡(AWB)处理等等。 
包括面部检测器114的照相机信号处理器103检测人面部的面部区是否包含在拍摄图像的帧数据中。在相关技术中的现有面部检测算法可以用于面部检测处理。 
已经经历照相机信号处理器103的各种调节的图像数据与面部 检测器114的面部检测结果一起输出到记录和播放部件104和显示器109。拍摄图像作为直达图像(through image)显示在显示器109上。如果面部由面部检测器114检测到，则面部图标显示在直达图像上，指示已经检测到面部。面部图标的显示例子将在以后描述。 
记录和播放部分104按照预定压缩方法压缩数据，并且把压缩数据记录到记录介质105上。记录介质的记录方法包括使数据按照运动图像专家组(MPEG)-4AVC/H.264压缩的高清晰度视频记录方法、或使数据按照MPEG-2压缩的标准清晰度(SD)视频记录方法。产生包含与压缩图像信息相对应的管理信息的图像信息管理文件(如AV索引文件)，并且将其存储到记录介质105上。 
图像信息管理文件(AV索引文件)也包含每个场景的元数据。元数据包含来自照相机信号处理器103中的面部检测器114的面部检测信息。面部检测信息指示是否已经检测到人面部。如果检测到人面部，则把指示人面部的面部区的坐标信息包含在面部检测信息中。包含作为在拍摄时的元数据的面部检测信息的图像信息管理文件(AV索引文件)被记录到记录介质105上。 
微处理器110接收来自键输入单元106的键操作信息和响应在显示器109上呈现的图形用户界面(GUI)上的键操作的用户操作信息。微处理器110响应用户指令进行处理。显示器109包括液晶显示器(LCD)触摸面板，并且显示准备接收用户操作信息的GUI。在键输入单元106上的键称作“硬键”，并且在显示器109上显示的GUI上的操作键称作“软键”。 
微处理器110经电源121从电池120或交流电源供电。微处理器110控制成像设备100的各种处理。微处理器110根据需要控制功率控制信号，并且对其它元件进行功率供给控制。微处理器110对来自键输入单元106上的硬键的输入信号或来自显示器109上的GUI上的软键的输入信号进行模数转换，由生成的转换数字值确定选择的键，并响应确定结果进行各种处理。微处理器110包括中央处理单元(CPU)111、随机存取存储器(RAM)112及只读存储器(ROM) 113，并且按照预存储程序进行处理。 
在接收到响应在键输入单元106上的硬键或在显示器109上显示的GUI上的软键的播放命令时，微处理器110把成像设备100切换到视频信号播放模式。微处理器110经记录和播放部件104读取在记录介质105上记录的数据，对于读取数据进行译码处理，并把译码数据经重叠处理器108显示到显示器109上。 
屏幕显示(OSD)处理器107解释从微处理器110输入的命令，并且通过扫描单元把在视频RAM(VRAM)上产生的显示信号传输到重叠处理器108。例如，屏幕显示处理器107产生要重叠在GUI信息和手动信息上的、与视频信号不同的数据，并且把产生的数据传输到重叠处理器108。重叠处理器108把来自屏幕显示处理器107的显示信号重叠到记录视频信号或播放视频信号之一上，并且把生成信号输出到显示器109。 
在成像设备100中的微处理器110按照用户指令产生在记录介质105上记录的图像数据的缩略图图像列表，并且在显示器109上显示缩略图图像列表。微处理器110从在记录介质105上记录的每个场景中选择包含人面部的图像，产生包含选择的面部的图像的缩略图图像，并把产生的缩略图图像作为时间序列缩略图图像显示在显示器109上。 
作为在照相机信号处理器103中的面部检测器114，在图1的微处理器110中由虚线框包围的面部检测器114′确定人面部的面部区是否包含在每个图像中。如果面部检测信息在向记录介质105上的拍摄数据的记录处理中包含在图像信息管理文件(AV索引文件)中，则微处理器110不需要面部检测器114′。如果包含面部检测信息的图像信息管理文件不存在，则微处理器110对从记录介质105读取的图像数据可以进行面部检测处理。在这样一种情况下，成像设备100包括面部检测器114′。在微处理器110中的面部检测器114′因而用来在没有包含面部检测结果的图像信息管理文件的情况下处理数据。 
微处理器110从响应缩略图图像的图像位置开始播放图像，该缩 略图图像响应关于在显示器109上显示的时间序列面部缩略图图像数据的用户选择信息的输入而被选择。场景是指从运动图像的拍摄开始至运动图像的拍摄结束的图像数据。与各种场景相对应的多条图像数据存储在记录介质105上。图像数据在时间长度方面随场景而变。一个场景可能几秒长，并且另一个场景可能一小时长或甚至更长。 
在成像设备100中的微处理器110从在记录介质105上存储的场景中获取由用户指定的场景的图像数据，通过分析图像信息管理文件选择包含面部图像的帧，从选择的帧中抽取面部区，产生面部缩略图图像，按场景的时间序列顺序把面部缩略图图像排列成面部索引图像，及把面部索引图像输出到显示器109。与作为运动图像记录数据单位的一个场景相对应的时间序列面部缩略图图像列表的显示数据称作“面部索引屏幕”。下面参照图2描述在显示器109上的面部索引屏幕的例子和在显示器109上的显示数据的切换。 
在成像设备100中的显示器109显示四种类型的屏幕，即等待屏幕(a)、主菜单屏幕(b)、面部索引屏幕(c)及运动图像播放屏幕(d)。 
微处理器110接收并确定在成像设备100上键输入单元106(硬键)的键操作信息或在包含在显示器109上显示的各种键的GUI(软键)的键操作信息，并且切换屏幕。 
在图2中，与作为运动图像记录数据单位的一个场景相对应的时间序列面部缩略图图像列表在面部索引屏幕(c)上作为显示数据整体或部分显示。面部索引屏幕是面部区的缩略图图像(缩小图像的)的时间序列面部缩略图图像数据。面部区从图像抽取，该图像包含从作为运动图像记录数据单位的一个场景中选择的面部。 
当已经发出显示面部索引屏幕(c)的请求时，微处理器110产生要显示在面部索引屏幕上的缩略图图像。缩略图图像临时存储在微处理器110中的RAM112上，同时输出到显示器109以被显示。在面部索引屏幕(c)上使用的缩略图图像不记录在记录介质105上。记录介质105的容量不用来存储缩略图图像。微处理器110获取压缩 图像(按照运动图像专家组(MPEG)-4AVC/H.264压缩的高清晰度(HD)视频或按照MPEG-2压缩的标准清晰度(SD)视频)，抽取帧内压缩编码图像(也称作I-画面、I-帧或I-VOP)，缩小帧内压缩编码图像，及按顺序在面部索引列表区域中排列缩小的图像。在面部索引屏幕(c)上显示的缩略图图像的产生方法将在以后描述。 
下面描述在图2的显示器109上显示的等待屏幕(a)、主菜单屏幕(b)、面部索引屏幕(c)及运动图像播放屏幕(d)和屏幕的切换操作。 
通过选择在等待屏幕(a)上显示的初始位置软键201和在成像设备100上布置的初始位置硬键之一进行在等待屏幕(a)与主菜单屏幕(b)之间的切换操作。 
通过选择在主菜单屏幕(b)上的关闭软键202进行从主菜单屏幕(b)到等待屏幕(a)的切换操作。 
通过选择在成像设备100上布置的面部索引硬键进行从等待屏幕(a)到面部索引屏幕(c)的切换操作。 
通过选择在成像设备100上布置的面部索引硬键和在主菜单屏幕(b)上的面部索引软键203之一进行从主菜单屏幕(b)到面部索引屏幕(c)的切换操作。 
通过选择在面部索引屏幕(c)上的关闭软键进行从面部索引屏幕(c)到等待屏幕(a)的切换操作。 
到面部索引屏幕(c)的屏幕切换可以直接从等待屏幕(a)到面部索引屏幕(c)或从等待屏幕(a)到主菜单屏幕(b)然后到面部索引屏幕(c)而进行。 
时间序列面部缩略图图像显示在面部索引屏幕(c)上。时间序列面部缩略图图像通过按时间序列顺序排列从包含面部图像的帧中抽取的面部区的面部缩略图图像而组织，该面部图像从作为运动图像记录数据单位的一个场景中选择。当用户指定面部缩略图图像之一时，成像设备100开始从由其导出指定面部缩略图图像的图像帧播放运动图像。 
运动图像在运动图像播放屏幕(d)上播放。图1的微处理器110在存储器(RAM112)上存储包含在面部索引屏幕(c)上显示的面部缩略图图像的场景的时间信息，使每个缩略图图像标记有时间。更明确地说，时间信息包括在包含帧内压缩编码图像的场景中的每个面部缩略图图像的位置信息、和每个面部缩略图图像从场景开头起的过去时间信息。这些信息也从图像信息管理文件(AV索引文件)获取。 
当用户通过用用户的手指触摸在面部索引屏幕(c)上显示的面部缩略图图像而指定面部缩略图图像时，微处理器110基于在指定位置处的坐标数据辨别触摸的缩略图图像。微处理器110对于指定的缩略图图像从管理文件的元数据获得在场景中缩略图图像的位置信息(时间信息)，并且从该位置开始播放运动图像。 
从运动图像播放屏幕(d)到面部索引屏幕(c)的切换操作通过选择在运动图像播放屏幕(d)上显示的返回键204和停止键205之一或在成像设备100上的面部索引硬键而进行。 
稍后将参照图3详细地描述面部索引屏幕(c)。面部索引屏幕(c)包括场景索引显示区域301和面部索引显示区域302。 
场景索引显示区域301显示从作为运动图像记录数据单位的一个场景选择的代表性图像。用户通过操作场景索引后退键303a和场景前进键303b可切换代表性图像。在场景索引显示区域301上显示的代表性图像是例如在场景开头处的缩略图图像。 
面部索引显示区域302显示从静止图像抽取的面部的缩略图图像的列表，该静止图像作为包含面部区从场景(运动图像数据)中选择，在场景索引显示区域301上显示的缩略图图像属于该场景。 
面部索引显示区域302显示面部索引后退/前进键306a和306b。用户通过选择面部索引后退/前进键306a和306b之一可切换时间不同但场景相同的缩略图图像。如果多个面部区包含在单个静止图像中，则多个面部图像布置在面部索引显示区域302上。 
通过选择在场景索引显示区域301上的场景索引后退/前进键303a和303b，同样切换在面部索引显示区域302上显示的面部索引。 
在面部索引屏幕(c)上显示的面部缩略图图像的产生处理下面参照图4详细地描述。如以前描述的那样，微处理器110响应显示面部索引屏幕(c)的显示请求产生要显示在面部索引屏幕(c)上的缩略图图像，并且在把产生的缩略图图像输出到显示器109的同时把缩略图图像临时存储在RAM112上。 
微处理器110获取压缩图像(按照运动图像专家组(MPEG)-4AVC/H.264压缩的高清晰度(HD)视频或按照MPEG-2压缩的标准清晰度(SD)视频)，抽取帧内压缩编码图像，缩小帧内压缩编码图像，并按顺序在面部索引列表区域中排列缩小的图像。 
例如，形成图4的场景的MPEG数据400可被得到。MPEG数据400包含按照不同格式压缩的帧(画面)。更明确地说，可以包括帧内压缩编码图像(I-画面)、B帧(B画面)、P帧(P画面)等等。出自这些编码数据的可译码数据是帧内压缩编码图像。 
为了产生缩略图图像，帧内压缩编码图像从MPEG数据中选择，并被使用。更明确地说，微处理器110从在用作面部索引屏幕的源的场景中包含的各种格式的编码数据中选择包含面部图像区的帧内压缩编码图像。微处理器110译码帧内压缩编码图像，从译码图像抽取面部区，并产生面部缩略图图像。 
图4示出包含面部区的选择的帧内压缩编码图像401。 
在图4的步骤S1中，微处理器110基于在管理文件402中的元数据选择用于缩略图图像的图像(帧内压缩编码图像)401。微处理器110基于图像信息管理文件(AV索引文件)402的元数据确定是否包含面部区。包含面部区的帧不一定是帧内压缩编码图像。如果包含面部区的帧不是帧内压缩编码图像，则把面部检测帧以后的最近帧内压缩编码图像选作缩略图产生源图像。 
如以上讨论的那样，如果数据不包含帧内压缩编码图像，则微处理器110分析在面部检测处理中的场景，由此确定每个帧的面部区的存在与否。 
微处理器110在步骤S2中译码包含如此选择的面部区的图像帧 401(帧内压缩编码图像)。在步骤S3中，微处理器110从译码图像帧中抽取面部区，并且产生面部区的缩略图图像，即面部缩略图图像。 
从图像信息管理文件(AV索引文件)402获得每个帧的面部区坐标信息。如果数据不包含这样一种管理文件，则微处理器110分析场景，由此确定面部区的位置。如此构造的缩略图图像按时间序列顺序排列，并且然后输出到显示器109。 
记录介质105可以是硬盘驱动器(HDD)和存储器卡之一，并且在记录介质105上记录的图像可以是HD视频。在记录介质上存储的数据是例如按照MPEG-4AVC/H.264压缩的数据，并且可以是按照AVCHD(注册商标)标准记录的视频。在这样一种情况下，记录流管理文件(一组具有扩展名“.BDM”、“.MPL”及“.CPI”的管理文件，一般管理与DVD视频格式的VIDEO_TS.IFO文件相对应的记录介质)被记录在一起，并且使用这些记录流管理文件的处理成为可能的。微处理器110读取记录流管理文件和图像信息管理文件(AV索引文件)以便比较。微处理器110因而获得包含面部区的图像帧的位置和在帧中的面部区的坐标信息。 
如果在记录介质105上记录的图像是SD图像，则在记录介质上存储的数据是按照MPEG-2压缩的数据。如果记录介质105是硬盘或存储器卡之一，则不包含记录流管理文件。微处理器110跟踪在MPEG2视频信号中事先写在扩展区域上的记录流信息，并且把记录流信息与图像信息管理文件(AV索引文件)相比较，以便得到包含面部区的图像帧的位置。如果记录介质105是DVD-R、DVD+R、DVD-RW及DVD+RW之一，则也记录符合AVCHD(注册商标)标准、用于SD视频的DVD视频标准、DVD视频记录标准及DVD+VR标准之一的记录流管理文件。通过把记录流管理文件与图像信息管理文件(AV索引文件)相比较，微处理器110在技术上可获得包含面部区的图像帧的位置。用来把图像记录到DVD介质上的每个标准不包括用来记录面部信息的图像信息管理文件(AV索引文件)。用来记录面部信息的图像信息管理文件(AV索引文件)可以写到记录介 质上，尽管这样一种操作在每个标准外。可选择地，微处理器110通过分析场景可以确定面部区位置。 
如以前参照图2和3描述的那样，面部索引屏幕显示包含从作为运动图像记录数据单位的一个场景中选择的面部区的时间序列面部缩略图图像的列表。当用户选择缩略图图像之一时，微处理器110以作为播放开始点的指定缩略图图像而开始播放运动图像。 
当HD视频被记录到HDD和存储器卡及DVD介质之一上时，微处理器110从记录流管理文件获得帧内压缩编码图像的位置信息(距离数据开头的时间信息)。当SD视频记录在HDD和存储器卡之一上时，微处理器110分析视频信号流，并且获得与在记录流管理文件中包含的面部区相对应的帧内压缩编码图像的位置信息(距离数据开头的时间信息)。位置信息被存储到RAM112上。使用位置信息，微处理器110立即确定缩略图图像的位置，并且从指定的缩略图图像开始播放运动图像。当停止运动图像的播放时，微处理器110返回到指示场景停止的时间和位置的面部索引屏幕。 
参照图1，对其照相机信号处理器103已经进行各种处理的图像数据与来自面部检测器114的面部检测信息一起输出到记录和播放部件104和显示器109。显示器109接收拍摄图像作为直达图像。如果面部检测器114检测到任何面部，则显示指示已经从直达图像检测到面部图像的面部图标。下面参照图5描述面部图标。 
图5示出在显示器109上显示的拍摄图像(直达图像)。在照相机信号处理器103中的面部检测器114分析面部区是否包含在拍摄图像中。如果面部检测器114已经检测到面部区，则显示指示在直达图像中已经检测到面部区的面部图标501。面部图标501可以以各种模式显示。例如，当在屏幕上检测到面部区时，面部图标501可以闪烁。面部检测信息(包括关于在每个帧中是否已经检测到面部区的信息和在已经检测到面部的情况下面部区的位置(坐标)信息)被记录成与图像数据相对应的图像信息管理文件(AV索引文件)的元数据。 
下面参照图6-8的流程图描述由本发明的实施例的信息处理设备 执行的处理。 
图6是示出面部索引屏幕的产生处理和显示处理的流程图。 
图7是示出在显示单元上显示的面部索引屏幕和其它屏幕的切换序列的流程图。 
图8是示出在运动图像的记录时面部检测信息的记录处理和记录停止处理的流程图。 
参照图6，描述面部索引屏幕的产生和显示处理。在起数据处理器作用的微处理器110的控制下进行面部索引屏幕的产生和显示处理。 
在步骤S101中，从存储各种场景(运动图像记录数据单位)的记录介质获得作为用于面部索引的源的场景的数据区域。在步骤S102中，作为面部索引产生的源的场景的索引图像显示在场景索引显示区域301上。场景的索引图像与在场景的视频流的开头处的帧内压缩编码图像的缩小图像相对应。在步骤S103中，在图像信息管理文件(AV索引文件)中搜索可应用于面部索引产生的元数据(面部索引元数据)。 
面部索引元数据包含指示在面部检测帧中的面部区的场景和位置(坐标)信息中包含的帧中已经检测到人面部的信息。 
在步骤S104中，微处理器110确定是否从图像信息管理文件(AV索引文件)已经检测到面部索引元数据。如果在图像信息管理文件(AV索引文件)中没有检测到面部索引元数据，则不能产生面部索引，并且退出处理。如果在图像信息管理文件中已经检测到面部索引元数据，则处理转到步骤S105。产生面部索引缩略图。这个处理是参照图4讨论的处理。在MPEG数据中包含的帧内压缩编码图像被选择和使用。更明确地说，微处理器110从在作为面部索引屏幕的源的场景中包含的各种格式的编码数据中选择包含面部图像区的帧内压缩编码图像，译码面部图像区，抽取面部区，并产生面部缩略图图像。 
在步骤S106中，微处理器110确定产生的面部索引是否与场景的结束帧相对应或者到达在显示屏幕上显示的最后面部索引。例如， 在图3中，八个面部索引显示在面部索引屏幕上，并且微处理器110确定是否已经完成八个面部索引的缩略图的产生。 
如果对于在步骤S106中的确定的回答是肯定的(是)，则处理结束。如果对于在步骤S106中的确定的回答是否定的(否)，则处理转到步骤S107。微处理器110从面部索引元数据中搜索连续帧。处理返回到步骤S104以重复相同的处理。通过该处理，图3的面部索引屏幕被产生，并且显示在显示器109上。 
参照图7，描述在显示单元上显示的面部索引屏幕和其它屏幕的切换序列。该处理与在参照图2讨论的显示器109上显示的每个屏幕的切换操作相对应。该处理也在图1的成像设备100中起数据处理器作用的微处理器110的控制下进行。借助于所显示的图3的面部索引屏幕进行在图7的流程图中所示的处理。 
在步骤S201中，起数据处理器作用的微处理器110检测用户操作输入。当在信息处理设备上布置的硬键或在显示器109上呈现的GUI上的软键被选择时，可以进入操作输入。当在步骤S202中检测到用于切换屏幕的事件触发时，微处理器110转到步骤S203。微处理器110确定事件是否是“关闭”事件。换句话说，微处理器110确定是否选择在图2的每个屏幕上的关闭软键。 
如果关闭软键被选择，换句话说，如果关闭事件被触发，则微处理器110把显示器109设置到等待屏幕。处理因而结束。如果在步骤S203中确定事件不是关闭事件，则处理转到步骤S204。微处理器110确定事件是否是“缩略图触摸事件”，即确定在图3的面部索引屏幕上显示的面部缩略图是否被用户触摸。如果在步骤S204中确定事件是“缩略图触摸事件”，则处理转到步骤S215。微处理器110把用作由用户指定的面部缩略图的源的帧辨别为播放开始帧。这个播放开始位置辨别处理基于从图像信息管理文件获得的元数据或在视频流中包含的记录流管理数据而进行。 
在步骤S216中，微处理器110开始从在步骤S215中确定的播放开始位置播放运动图像，并且在步骤S217中产生面部索引。该面部 索引产生处理是在播放停止处在面部索引屏幕上显示数据的数据产生处理。 
如果在步骤S204中确定事件不是“缩略图触摸事件”，则处理转到步骤S205。微处理器110确定事件是否是“场景前进事件”。在选择参照图3讨论的场景索引前进键303b的瞬时，产生场景前进事件。 
如果在步骤S205中确定事件是“场景前进事件”，则微处理器110在步骤S206中使场景前进，即更新在图3的场景索引显示区域301上显示的场景索引。在步骤S207中，微处理器110产生与更新的场景索引相对应的场景的面部索引，并且显示产生的面部索引。 
如果在步骤S205中确定事件不是“场景前进事件”，则处理转到步骤S208。微处理器110确定事件是否是“场景后退事件”。当选择图3的场景索引后退键303a时，触发场景后退事件。如果在步骤S208中确定事件是“场景后退事件”，则微处理器110在步骤S209中使场景后退，即更新在图3的场景索引显示区域301上显示的场景索引。微处理器110产生与在步骤S207中更新的场景索引相对应的场景的面部索引，并且显示产生的面部索引。 
如果在步骤S208中确定事件不是“场景后退事件”，则处理转到步骤S210。微处理器110确定事件是否是“面部索引前进事件”。当选择图3的面部索引前进键306b时，触发面部索引前进事件。 
如果在步骤S210中确定事件是“面部索引前进事件”，则处理转到步骤S211。微处理器110确定显示的面部索引是否是对于场景的最后数据部分产生的索引。如果在步骤S211中确定显示的面部索引不是对于场景的最后数据部分产生的索引，则处理转到步骤S212。微处理器110基于在当前显示的面部索引以后的场景形成帧产生面部索引，并且显示产生的面部索引。如果在步骤S211中确定显示的面部索引是对于场景的最后数据部分产生的索引，则微处理器110返回步骤S201。 
如果在步骤S210中确定事件不是“面部索引前进事件”，则处理转到步骤S213。微处理器110确定事件是否是“面部索引后退事件”。 当选择图3的面部索引后退键306a时，触发面部索引后退事件。 
如果在步骤S213中确定事件是“面部索引后退事件”，则处理转到步骤S214。微处理器110确定显示的面部索引是否是响应场景的数据开头部分产生的索引。如果在步骤S214中确定显示的面部索引不是响应场景的数据开头部分产生的索引，则处理转到步骤S212。微处理器110基于在当前显示的面部索引之前的场景形成帧产生面部索引，并且显示产生的面部索引。如果在步骤S214中确定显示面部索引是响应场景的数据开头部分产生的索引，则处理返回步骤S201。因而进行包括图3的面部索引屏幕的更新处理的各种处理。 
下面参照图8，描述在运动图像的记录时面部检测信息的记录处理和记录停止处理。在面部检测信息的记录处理和记录停止处理中，图1的成像设备100拍摄运动图像，并且把拍摄的运动图像记录到记录介质105上。面部检测信息由在照相机信号处理器103中的面部检测器114和记录和播放部件104产生。图1的成像设备100一般由起数据处理器作用的微处理器110控制。图8的处理是在当前正在进行运动图像的记录的前提下开始的处理序列。 
在运动图像的记录时，微处理器110在步骤S301中检测用户操作输入。当选择在信息处理设备上布置的硬键或在显示器109上呈现的GUI上的软键时，可以进入操作输入。在步骤S302中检测到用来切换屏幕的事件触发时，微处理器110转到步骤S303。微处理器110确定事件是否是“记录结束事件”。 
如果在步骤S303中确定事件不是“记录结束事件”，则处理转到步骤S304。微处理器110确定事件是否是“面部检测事件”。当操作在成像设备100上布置的用来设置是否进行面部检测处理的面部检测命令开关时，触发面部检测事件。如果在步骤S304中确定事件是“面部检测事件”，则微处理器110在步骤S305中进行面部检测处理。在图1的照相机信号处理器103中的面部检测器114在照相机信号处理器103的RAM上存储每个帧的面部索引元数据，即，指示在场景中包含的帧中已经检测到人面部的信息和面部检测帧的位置(坐标)信息。 
为了防止面部索引元数据增大到巨大的数据量，微处理器110只有当检测到所检测到的面部数量的变化时才把面部索引元数据存储在RAM上，而不是把所有帧的面部索引元数据存储在RAM上。 
如果在步骤S303中确定事件是“记录结束事件”，则处理转到步骤S306以停止记录运动图像。在步骤S307中，微处理器110确定在记录的场景中是否存在面部检测信息。如果在步骤S307中确定在记录场景中存在面部检测信息，则微处理器110把由在照相机信号处理器103中的面部检测器114存储在RAM上的数据记录在图像信息管理文件(AV索引文件)中，作为每个帧的面部索引元数据。在RAM上存储的数据包含指示在场景中包含的帧中已经检测到人面部的信息和面部检测帧的位置(坐标)信息。微处理器110在步骤S309中更新图像信息管理文件，并且把更新的图像信息管理文件记录到记录介质上。处理由此结束。 
如果在步骤S307中确定在记录场景中不存在面部检测信息，则微处理器110在步骤S309中用除面部索引元数据之外的管理数据更新图像信息管理文件而不记录面部索引元数据，并且把更新的图像信息管理文件记录到记录介质上。 
已经参照具体实施例描述了本发明。可进行修改和变更而不脱离本发明的范围对于本领域的技术人员来说是显而易见的。本发明的实施例仅为了示例目的而讨论，而不是为了限制本发明。本发明的范围仅通过参考附属于其的权利要求书而确定。 
使用硬件、软件或两者的组合可以进行上述处理步骤序列。如果处理步骤使用软件进行，则记录软件的处理序列的程序可以安装到在专用硬件的计算机中的存储器上，或者可以安装到执行各种处理的通用计算机上。程序可以预记录在记录介质上。程序可以从记录介质安装。可选择地，程序可以经诸如局域网(LAN)之类的网络接收，并且安装到在计算机中诸如硬盘之类的记录介质上。 
处理步骤如以上描述的那样可以按时间序列顺序进行。可选择地，处理步骤可以根据需要或依据进行每个处理的设备的能力并行或 者分开进行。在本说明书中，术语系统是指多个设备的逻辑集合，并且每个设备的元件不必装在单一壳体中。 
本领域的技术人员应该理解，依据设计要求和其它因素可以做出各种修改、组合、子组合及变更，只要它们在附属权利要求书或其等效物的范围内即可。 

Claims (15)

1.一种用来处理运动图像的设备，包括：
输入单元，用来输入用户操作信息；
记录介质，用来记录运动图像数据；
数据处理器，用来响应对输入单元的输入而获取在记录介质上记录的数据并产生显示数据；及
显示单元，用来显示该显示数据，
其中，数据处理器从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表，并且
其中，数据处理器从一用户输入面部缩略图图像指定信息，该用户指定了在显示单元上显示的时间序列面部缩略图图像列表上的面部缩略图图像，并且数据处理器从与指定的面部缩略图图像相对应的图像位置播放图像。
2.根据权利要求1所述的设备，其中，记录介质记录用来管理在记录介质上记录的图像信息的图像信息管理文件，并且
其中，数据处理器从在记录介质上记录的图像信息管理文件获得与在形成作为运动图像记录单位的场景的每个帧中面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。
3.根据权利要求1所述的设备，其中，数据处理器通过分析作为运动图像记录单位而记录在记录介质上的场景获得与在形成场景的帧中面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。
4.根据权利要求1所述的设备，其中，数据处理器通过选择用作要显示在时间序列缩略图图像列表中的面部缩略图图像的源数据的帧内压缩编码图像来产生面部缩略图图像。
5.根据权利要求1所述的设备，其中，输入单元包括在显示单元上的触摸面板。
6.根据权利要求1所述的设备，其中，数据处理器在显示单元上显示作为场景的代表性图像的场景索引，作为时间序列面部缩略图图像列表的源数据；并且如果更新场景索引，则响应场景索引的更新而更新时间序列面部缩略图图像列表。
7.一种成像设备，包括：
成像单元，用来拾取运动图像；
输入单元，用来输入用户操作信息；
记录介质，用来记录运动图像数据；
数据处理器，用来响应对输入单元的输入而获取在记录介质上记录的数据并产生显示数据；及
显示单元，用来显示该显示数据，
其中，数据处理器从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表，并且
其中，数据处理器从一用户输入面部缩略图图像指定信息，该用户指定了在显示单元上显示的时间序列面部缩略图图像列表上的面部缩略图图像，并且数据处理器从与指定的面部缩略图图像相对应的图像位置播放图像。
8.根据权利要求7所述的成像设备，还包括用来检测人面部图像的面部区是否包含在从成像单元获得的图像数据中的面部检测器，
其中，在检测到面部时，数据处理器把面部图标与拾取图像一起显示在显示单元上，以指示已经检测到面部。
9.一种图像处理设备控制运动图像显示的方法，包括以下步骤：
把用户操作信息输入到输入单元；
通过响应对输入单元的输入而获取在记录介质上记录的数据和产生显示数据来处理数据；及
在显示单元上显示该显示数据，
其中，所述处理数据的步骤包括从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表，并且
其中，所述处理数据的步骤包括从一用户输入面部缩略图图像指定信息，该用户指定了在显示单元上显示的时间序列面部缩略图图像列表上的面部缩略图图像，和数据处理器从与指定的面部缩略图图像相对应的图像位置播放图像。
10.根据权利要求9所述的方法，其中，所述处理数据的步骤包括从在记录介质上记录的图像信息管理文件获得与在形成作为运动图像记录单位的场景的每个帧中面部区的存在与否和面部区的位置有关的信息，选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。
11.根据权利要求9所述的方法，其中，所述处理数据的步骤包括通过分析作为运动图像记录单位记录在记录介质上的场景获得与在形成场景的每个帧中面部区的存在与否和面部区的位置有关的信息、选择包含人面部图像的帧，及产生从选择的帧中抽取的面部区的缩略图图像。
12.根据权利要求9所述的方法，其中，所述处理数据的步骤包括通过选择用作要显示在时间序列缩略图图像列表中的面部缩略图图像的源数据的帧内压缩编码图像来产生面部缩略图图像。
13.根据权利要求9所述的方法，其中，输入单元包括在显示单元上的触摸面板。
14.根据权利要求9所述的方法，其中，所述处理数据的步骤包括在显示单元上显示作为场景的代表性图像的场景索引，作为时间序列面部缩略图图像列表的源数据；和如果更新场景索引，则响应场景索引的更新而更新时间序列面部缩略图图像列表。
15.一种成像设备控制图像显示的方法，包括以下步骤：
拾取运动图像；
把用户操作信息输入到输入单元；
检测人面部图像的面部区是否包含在拾取的运动图像中；
如果已经检测到面部，则把面部图标与拾取的运动图像一起显示在显示单元上，以指示已经检测到面部；
从作为运动图像记录单位记录在记录介质上的场景中选择包含人面部图像的帧，产生从选择的帧中抽取的面部区的缩略图图像，及在显示单元上显示按时间序列顺序排列的所产生的缩略图图像的列表；以及
从一用户输入面部缩略图图像指定信息，该用户指定了在显示单元上显示的时间序列面部缩略图图像列表上的面部缩略图图像，并由数据处理器从与指定的面部缩略图图像相对应的图像位置播放图像。
CN2008100853808A 2007-03-15 2008-03-14 处理运动图像的设备、成像设备、图像显示控制方法 Active CN101267523B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2007066169A JP4998026B2 (ja) 2007-03-15 2007-03-15 画像処理装置、撮像装置、および画像表示制御方法、並びにコンピュータ・プログラム
JP2007-066169 2007-03-15

Publications (2)

Publication Number Publication Date
CN101267523A CN101267523A (zh) 2008-09-17
CN101267523B true CN101267523B (zh) 2013-03-13

Family

ID=39527482

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008100853808A Active CN101267523B (zh) 2007-03-15 2008-03-14 处理运动图像的设备、成像设备、图像显示控制方法

Country Status (6)

Country Link
US (2) US8760554B2 (zh)
EP (1) EP1970908B1 (zh)
JP (1) JP4998026B2 (zh)
KR (1) KR20080084725A (zh)
CN (1) CN101267523B (zh)
TW (1) TWI472228B (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009081699A (ja) * 2007-09-26 2009-04-16 Toshiba Corp 電子機器および顔画像抽出制御方法
CN103475837B (zh) 2008-05-19 2017-06-23 日立麦克赛尔株式会社 记录再现装置及方法
JP4683103B2 (ja) * 2008-09-22 2011-05-11 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
JP4623201B2 (ja) 2008-10-27 2011-02-02 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
KR101499978B1 (ko) * 2008-11-14 2015-03-06 주식회사 케이티 썸네일 이미지 및 관련 정보를 표시하는 방법 및 장치
JP5366522B2 (ja) * 2008-12-05 2013-12-11 株式会社ニコンシステム 画像表示装置及び画像表示装置を有するデジタルカメラ
JP5144487B2 (ja) * 2008-12-15 2013-02-13 キヤノン株式会社 主顔選択装置、その制御方法、撮像装置及びプログラム
JP2010213136A (ja) * 2009-03-12 2010-09-24 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP4640515B2 (ja) * 2009-03-25 2011-03-02 日本ビクター株式会社 サムネイル生成装置、サムネイル生成方法、及びサムネイル生成プログラム
JP2010252008A (ja) * 2009-04-15 2010-11-04 Olympus Imaging Corp 撮影装置、表示装置、再生装置、撮影方法、および表示方法
JP5369947B2 (ja) * 2009-07-09 2013-12-18 ソニー株式会社 撮像装置、画像処理方法及びプログラム
US8897602B2 (en) * 2009-07-22 2014-11-25 Aptina Imaging Corporation Imaging system with multiframe scaler
JP2011035837A (ja) * 2009-08-05 2011-02-17 Toshiba Corp 電子機器および画像データの表示方法
JP2011239075A (ja) 2010-05-07 2011-11-24 Sony Corp 表示装置、表示方法及びプログラム
KR101110725B1 (ko) * 2010-06-16 2012-02-27 엠텍비젼 주식회사 썸네일 이미지를 이용한 후보 이미지 제시 방법 및 이를 수행하는 이미지 신호 처리 장치와 촬상 장치
CN102948157B (zh) * 2010-06-22 2016-05-11 富士胶片株式会社 立体图像显示设备及立体图像显示方法
JP5740972B2 (ja) * 2010-09-30 2015-07-01 ソニー株式会社 情報処理装置および情報処理方法
US8643746B2 (en) 2011-05-18 2014-02-04 Intellectual Ventures Fund 83 Llc Video summary including a particular person
US8929588B2 (en) * 2011-07-22 2015-01-06 Honeywell International Inc. Object tracking
JP5491585B2 (ja) * 2011-08-12 2014-05-14 キヤノン株式会社 表示制御装置、制御方法、及びプログラム
JP6046931B2 (ja) * 2011-08-18 2016-12-21 キヤノン株式会社 撮像装置およびその制御方法
CN102890694A (zh) * 2011-09-22 2013-01-23 北京师科阳光信息技术有限公司 一种时间轴系统及其实现方法
JP2013225214A (ja) * 2012-04-20 2013-10-31 Sharp Corp 画像形成装置
US9508119B2 (en) * 2012-07-13 2016-11-29 Blackberry Limited Application of filters requiring face detection in picture editor
JP6098133B2 (ja) * 2012-11-21 2017-03-22 カシオ計算機株式会社 顔構成部抽出装置、顔構成部抽出方法及びプログラム
CN103974142B (zh) * 2013-01-31 2017-08-15 深圳市快播科技有限公司 一种视频播放方法及系统
JP2014209707A (ja) * 2013-03-25 2014-11-06 パナソニック株式会社 映像再生装置および映像再生方法
CN104519262B (zh) * 2013-09-27 2018-04-27 腾讯科技（深圳）有限公司 获取视频数据的方法、装置及终端
US9449231B2 (en) * 2013-11-13 2016-09-20 Aol Advertising Inc. Computerized systems and methods for generating models for identifying thumbnail images to promote videos
US9977590B2 (en) * 2013-12-18 2018-05-22 Lg Electronics Inc. Mobile terminal and method for controlling the same
JP6308106B2 (ja) * 2014-11-14 2018-04-11 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3189963B2 (ja) 1992-11-05 2001-07-16 ソニー株式会社 動画像再生装置
JP3636830B2 (ja) 1996-07-10 2005-04-06 株式会社日立製作所 インテリジェントビデオカメラ及びインテリジェントスチルカメラ
US20010040560A1 (en) * 1998-08-20 2001-11-15 Alan Amron Video display document
US6408301B1 (en) * 1999-02-23 2002-06-18 Eastman Kodak Company Interactive image storage, indexing and retrieval system
JP2001167110A (ja) * 1999-12-08 2001-06-22 Matsushita Electric Ind Co Ltd 画像検索方法及びその装置
JP2002027363A (ja) * 2000-07-04 2002-01-25 Sanyo Electric Co Ltd サムネイル作成装置
EP1260934A3 (en) * 2001-05-22 2004-04-14 Matsushita Electric Industrial Co., Ltd. Surveillance recording device and method
JP4778158B2 (ja) * 2001-05-31 2011-09-21 オリンパス株式会社 画像選出支援装置
JP4354806B2 (ja) 2001-05-31 2009-10-28 キヤノン株式会社 動画像管理装置及び方法
TW544634B (en) * 2001-10-05 2003-08-01 Newsoft Technology Corp Thumbnail sequence generation system and method
US6801642B2 (en) * 2002-06-26 2004-10-05 Motorola, Inc. Method and apparatus for limiting storage or transmission of visual information
GB2395852B (en) 2002-11-29 2006-04-19 Sony Uk Ltd Media handling system
GB2395853A (en) * 2002-11-29 2004-06-02 Sony Uk Ltd Association of metadata derived from facial images
JP4230870B2 (ja) * 2003-09-25 2009-02-25 富士フイルム株式会社 動画記録装置、動画記録方法、及びプログラム
JP4340806B2 (ja) * 2004-03-22 2009-10-07 富士フイルム株式会社 画像処理装置、方法及びプログラム
JP2005332376A (ja) * 2004-04-22 2005-12-02 Fuji Xerox Co Ltd 情報処理装置、システム、情報処理方法およびプログラム
JP4973188B2 (ja) * 2004-09-01 2012-07-11 日本電気株式会社 映像分類装置、映像分類プログラム、映像検索装置、および映像検索プログラム
JP3925812B2 (ja) 2004-11-11 2007-06-06 ソニー株式会社 再生装置および方法
JP2006191302A (ja) * 2005-01-05 2006-07-20 Toshiba Corp 電子カメラ装置とその操作案内方法
JP4429182B2 (ja) * 2005-01-25 2010-03-10 キヤノン株式会社 動画再生装置及び撮像装置
JP4685465B2 (ja) * 2005-02-01 2011-05-18 パナソニック株式会社 監視記録装置
JP4532320B2 (ja) * 2005-03-29 2010-08-25 株式会社日立国際電気 画像表示装置
US20060227871A1 (en) 2005-03-31 2006-10-12 Madhukar Budagavi Video thumbnail method
WO2006118119A1 (ja) * 2005-04-26 2006-11-09 Matsushita Electric Industrial Co., Ltd. 情報記録再生装置、情報記録再生方法、情報記録再生プログラム及び情報記録再生プログラムを記録したコンピュータ読み取り可能な記録媒体
JP4538386B2 (ja) * 2005-07-06 2010-09-08 富士フイルム株式会社 対象画像記録装置および撮像装置ならびにそれらの制御方法
JP2007041927A (ja) 2005-08-04 2007-02-15 Olympus Imaging Corp 画像検索プログラム、画像検索装置、画像検索方法及び記録媒体
JP2007041987A (ja) * 2005-08-05 2007-02-15 Sony Corp 画像処理装置および方法、並びにプログラム
JP4350725B2 (ja) * 2005-08-05 2009-10-21 キヤノン株式会社 画像処理方法、画像処理装置、及び、画像処理方法をコンピュータに実行させるためのプログラム
JP2007066169A (ja) 2005-09-01 2007-03-15 Sanyo Electric Co Ltd 携帯電話装置及び携帯電話装置の制御方法
US8315463B2 (en) * 2006-11-14 2012-11-20 Eastman Kodak Company User interface for face recognition

Also Published As

Publication number Publication date
JP4998026B2 (ja) 2012-08-15
CN101267523A (zh) 2008-09-17
TW200904181A (en) 2009-01-16
US20080225155A1 (en) 2008-09-18
EP1970908A3 (en) 2010-09-15
EP1970908A2 (en) 2008-09-17
TWI472228B (zh) 2015-02-01
EP1970908B1 (en) 2018-08-01
JP2008228134A (ja) 2008-09-25
US8760554B2 (en) 2014-06-24
US9143691B2 (en) 2015-09-22
KR20080084725A (ko) 2008-09-19
US20130293739A1 (en) 2013-11-07

Similar Documents

Publication Publication Date Title
CN101267523B (zh) 处理运动图像的设备、成像设备、图像显示控制方法
CN101267522B (zh) 信息处理装置、成像装置、图像显示控制方法
EP2710594B1 (en) Video summary including a feature of interest
JP4525558B2 (ja) 情報処理装置、撮像装置、および情報処理方法、並びにコンピュータ・プログラム
US20080260255A1 (en) Image processing apparatus, imaging apparatus, image processing method, and computer program
WO2012158588A1 (en) Video summary including a particular person
US20120087636A1 (en) Moving image playback apparatus, moving image management apparatus, method, and storage medium for controlling the same
JP5292399B2 (ja) コンテンツ編集装置
JP6214762B2 (ja) 画像検索システム、検索画面表示方法
JP2008199330A (ja) 動画像管理装置
JP2006311322A (ja) テレビジョン表示装置
KR101481689B1 (ko) 숫자정보를 이용한 멀티미디어 컨텐츠 탐색방법 및 장치
KR20080035892A (ko) 이미지 샷을 이용하여 썸네일 서치를 지원하는 ｄｖｒ 시스템, 영상 재생 장치, 영상 재생 방법 및 기록매체
JP2012227615A (ja) 記録再生装置
JP2014086815A (ja) 電子機器
US20150229786A1 (en) Communication device and control method of communication device
JP2005276383A (ja) 画像ファイル記録再生装置及び画像ファイル記録再生プログラム
KR20080003381U (ko) 이미지 샷을 이용하여 썸네일 서치를 지원하는 영상 재생장치
JP2016167716A (ja) 撮像装置
JP2008160187A (ja) カメラ装置およびカメラ装置における再生制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant