CN100496097C - 图像显示控制装置及其控制方法和控制程序 - Google Patents

图像显示控制装置及其控制方法和控制程序 Download PDF

Info

Publication number
CN100496097C
CN100496097C CNB2007100916643A CN200710091664A CN100496097C CN 100496097 C CN100496097 C CN 100496097C CN B2007100916643 A CNB2007100916643 A CN B2007100916643A CN 200710091664 A CN200710091664 A CN 200710091664A CN 100496097 C CN100496097 C CN 100496097C
Authority
CN
China
Prior art keywords
image
facial expression
face
control apparatus
display control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2007100916643A
Other languages
English (en)
Other versions
CN101056362A (zh
Inventor
张贻彤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN101056362A publication Critical patent/CN101056362A/zh
Application granted granted Critical
Publication of CN100496097C publication Critical patent/CN100496097C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G06V40/175—Static expression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00381—Input by recognition or interpretation of visible user gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2158—Intermediate information storage for one or a few pictures using a detachable storage unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0084—Digital still camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3205—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of identification information, e.g. name or ID code
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3253—Position information, e.g. geographical position at time of capture, GPS data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开一种图像显示控制装置及其控制方法和控制程序。为了显示具有所需面部表情的面部图像部分，执行从对象图像中对面部图像部分进行检测的处理。当检测到多个面部图像部分时，对于每一面部图像部分进行面部表情分析。具有事先指定的面部表情的面部图像部分被放大并通过显示屏整个显示。

Description

图像显示控制装置及其控制方法和控制程序
技术领域
本发明涉及图像显示控制装置及其控制方法和控制程序。
背景技术
数字静物相机具有形成在其后表面上的液晶显示屏。成像(拾取)所获取的图像显示在液晶显示屏上。由于优选地，数字静物相机的尺寸较小，液晶显示屏的尺寸也相对较小。由于小的显示屏难以从整个对象图像中确认想要的图像部分，某些数字静物相机可显示对象图像的各部分。数字静物相机的例子包括用于利用图像部分的尺寸从对象图像中显示想要的图像部分的相机(例如JP-A-2003-209683)，用于通过摄影者手动选择想要的图像部分并且显示所选图像部分的相机(JP-A-2005-102175)，用于拍摄面部从而使其尺寸恒定不变的相机(JP-A-11-84481)，以及利用面部维度、面部表情等作为自动恢复系统中的恢复信息的相机(JP-A-2001-167110)。
在对多个人物进行成像获得对象图像的情况中，用户希望看到的图像部分不必是最大的人物图像的部分。在某些情况中，用户可能确认至少一特定人物图像，即使该人物图像较小。
发明内容
本发明的目的在于显示具有所需面部表情的面部图像部分以及特定目标图像部分。
根据第一本发明的一种图像显示控制装置的特征在于，包括：面部表情指定设备，其指定需要注意的面部表情；值得注意面部表情检测设备，其从对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分；以及显示控制设备，其控制显示设备，从而将所述的值得注意面部表情检测设备所检测到的面部图像部分在其显示屏上显示为对应于一帧的图像。
第一发明还提供了一种适于该图像显示控制装置的控制方法。即，在这个方法中，面部表情指定设备指定需要注意的面部表情；值得注意面部表情检测设备从对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分；以及显示控制设备控制显示设备，从而将所述的值得注意面部表情检测设备所检测到的面部图像部分在其显示屏上显示为对应于一帧的图像。
第一发明还提供一种用于实现上述的控制图像显示控制装置的方法的程序。
根据第一发明，指定需要注意的面部表情。从对象图像中检测具有所指定的面部表情的面部图像部分。将所检测到的面部图像部分在显示设备的显示屏上显示为对应于一帧的图像。由于在显示屏上显示了需要注意的面部图像部分，使用者容易确认面部图像部分。
图像显示控制装置可进一步包括面部图像检测设备，其从对象图像中检测面部图像部分。在该情况下，所述的值得注意面部表情检测设备响应于所述面部图像检测设备检测到多个面部图像部分这一情况，检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分。
当所述的值得注意面部表情检测设备检测到多个面部图像部分时，所述显示控制设备将这些面部图像部分一次一个地显示为对应于一帧的图像，或者在显示屏的不同区域上分别显示两个或更多的面部图像部分。
所述面部表情指定设备所指定的面部表情是以下至少一个：例如，好的面部表情、坏的面部表情、闭眼的面部表情。
图像显示控制装置可进一步包括成像设备，其对对象进行成像并输出表示对象图像的图像数据。在此情况下，所述的值得注意面部表情检测设备从所述成像设备输出的图像数据所表示的对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分。在此情况下，图像显示控制装置可进一步包括记录控制设备，其将从所述成像设备输出的图像数据和表示由所述的值得注意面部表情检测设备所检测到的面部图像部分的数据互相进行关联，并且在记录介质上记录所述数据。
图像显示控制装置可进一步包括读取设备，其从记录有表示对象图像的图像数据的记录介质中读取图像数据。在此情况中，所述的值得注意面部表情检测设备从所述成像设备输出的图像数据所表示的对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分。
根据第二发明的图像显示控制装置的特征在于，包括：目标检测设备，其从对象图像中检测目标图像部分；确定设备，其确定由所述目标检测设备所检测到的目标图像部分是否包括特定目标图像部分；以及显示控制设备，其控制显示设备，从而响应于所述确定设备确定包括特定目标图像部分这一情况，将所述特定目标图像部分在其显示屏上显示为对应于一帧的图像。
第二发明还提供了一种适于该图像显示控制装置的控制方法。即，在该方法中，目标检测设备从对象图像中检测目标图像部分；确定设备确定由所述目标检测设备所检测到的目标图像部分是否包括特定目标图像部分；以及显示控制设备控制显示设备，从而响应于所述确定设备确定包括特定目标图像部分这一情况，将所述特定目标图像部分在其显示屏上显示为对应于一帧的图像。
第二发明还提供了一种用于实现控制图像显示控制装置的方法的程序。
根据第二发明，从对象图像中检测目标图像部分。确定所检测到的目标图像部分是否包括特定目标图像部分。当确定包括特定目标图像部分时，将所述特定目标图像部分在显示屏上显示为对应于一帧的图像。可以在显示屏上显示来自目标图像部分的特定目标图像部分。将面部图像部分视作目标图像部分，例如，特定目标图像部分可视作所需人面部(自己的面部、其孩子的面部、或者其熟人的面部)或所需宠物(猫、狗等等)的图像部分。
当所述目标检测设备检测到多个目标图像部分时，例如，所述确定设备确定由所述目标检测设备所检测到的目标图像部分是否包括特定目标图像部分。
当所述确定设备确定所述多个目标图像部分包括多个特定目标图像部分时，例如，所述显示控制设备在显示屏上显示最大的特定目标图像部分、将特定目标图像部分一次一个地显示为对应于一帧的图像、或者在显示屏的不同区域上分别显示两个或更多的特定目标图像。
图像显示控制装置可进一步包括成像设备，其对对象进行成像，并且输出表示对象图像的图像数据。在此情况下，所述目标检测设备从所述成像设备输出的图像数据所表示的对象图像中检测目标图像部分。在此情况下，图像显示控制装置可进一步包括记录控制设备，其将从所述成像设备输出的图像数据和表示由所述目标检测设备所检测到的目标图像部分的数据相互进行关联，并且在记录介质上记录所述数据。
图像显示控制装置可进一步包括读取设备，其从记录有表示对象图像的图像数据的记录介质中读取图像数据。在此情况下，所述的目标检测设备从所述成像设备输出的图像数据所表示的对象图像中检测目标图像部分。
通过下面的本发明的详细描述，并结合附图，本发明的上面的和其他的目的、特征、方面及优点将变得更加明显。
附图说明
图1是显示出数字静物相机的电气配置的框图；
图2是显示用于记录处理的流程的流程图；
图3和图4分别显示了对象图像的例子；
图5显示了放大的面部图像部分的例子；
图6显示了图像文件的文件结构；
图7和图8是分别显示用于记录处理的过程的流程图；以及
图9是显示用于再现处理的过程的流程图。
具体实施方式
图1是显示出数字静物相机的电气配置的框图，其显示出了本发明的实施例。
数字静物相机的整个操作受到CPU1的管理。
来自诸如快门释放按钮的操作开关、模式开关(成像模式、再现模式等等)、菜单按钮或OK按钮的输出信号被输入到CPU 1。储存操作程序、预定数据等的存储器3连接到CPU 1。当存储卡18储存操作程序时，读取存储卡18上记录的操作程序，并将其安装在数字静物相机上，以执行操作，这将在稍后描述。此外，CPU 1控制用于控制成像镜头7的位置的镜头控制电路4、用于控制光阑8的f-光阑值的光阑驱动电路5、以及用于控制成像(拾取)设备9的成像设备控制电路6。
当设置成像模式时，由成像镜头7汇聚的光束在通过光阑8之后入射到成像设备9的光接收表面上。在成像设备9的光接收表面上形成对象图像。表示对象图像的视频信号被从成像设备9输出，且被输入到模拟信号处理电路10。视频信号经过模拟信号处理电路10中的预定模拟信号处理，例如伽玛校正和白平衡校正，并被输入到模数转换电路11。在模数转换电路11中，模拟视频信号被转换成数字图像数据。转换得到的数字图像数据被输入到CPU 1，在这里，调整成像镜头7的位置、光阑8的f-光阑值、快门速度等等。
从模数转换电路11输出的数字图像数据还被输入到数字信号处理电路12。在数字信号处理电路12中，数字图像数据经过预定信号处理，诸如亮度数据和色差数据的产生。在当前实施例中，可以从对象图像中检测出面部图像部分。因此，数字静物相机设置有面部检测电路13。从数字信号处理电路12输出的图像数据被输入到面部检测电路13，在这里，从通过成像获得的对象图像中检测面部图像部分。在当前实施例中，不仅可以检测出面部图像部分，还可以检测出具有想要的面部表情的面部图像部分、与特定人物相关的面部图像部分等等。后面将详细描述该处理。
从数字信号处理电路12输出的图像数据仅在通过存储器14之后被输入到显示控制电路15。在显示控制电路15中，控制显示设备16，由此使得对象图像(或者检测到的面部图像部分等)显示在显示设备16的显示屏上。
当按下快门释放按钮时，如上所述方式从数字信号处理电路12输出的图像数据被施加给存储器14，并且暂时储存于其中。从存储器14中读出图像数据，并且将图像数据加到记录/读出控制电路17。记录/读出控制电路17在存储卡18上记录表示对象图像的图像数据。
当设置再现模式时，由记录/读出控制电路17读取存储卡18上记录的图像数据。读取的图像数据被通过存储器14施加到显示控制电路15。显示控制电路15控制显示设备16，由此使得存储卡18上记录的图像数据所表示的对象图像显示在显示设备16的显示屏上。
在根据当前实施例的数字静物相机中，即使在再现时也能检测出面部图像部分。从存储卡18读取的图像数据被通过记录/读出控制电路17、存储器14和数字信号处理电路12输入到面部检测电路13。在面部检测电路13中，从读取的图像数据所表示的对象图像中检测面部图像部分。
图2是显示用于记录处理的过程的流程图。
该处理是这样的：之前先指定面部表情，然后找到并显示具有所指定的面部表情的面部图像部分。将通过按下菜单按钮来指定面部表情，例如，在显示设备16的显示屏上显示菜单，然后从面部表情列表中选择面部表情。面部表情的例子包括好的面部表情(笑脸)、坏的面部表情(怒脸)以及闭眼的面部表情。事先为每一面部表情确定眼睛的形状、眉毛的形状、嘴的形状等等。
当按下快门释放按钮时，以上述方式获得的图像数据被暂时储存在存储器14中(步骤21)。
图3图示说明了存储器14中储存的图像数据所表示的对象图像的例子。
假定通过成像而获得的对象图像30包括人物图像21、32、33和34。
回到图2，从存储器14读取图像数据，将图像数据输入到面部检测电路13。面部检测电路13从通过成像而获得的对象图像30中检测面部图像部分(步骤22)。
图4图示说明了经过面部检测处理的对象图像的例子。
如上所述，对象图像30包括人物图像31、32、33和34。通过进行面部检测处理，检测出人物图像31、32、33和34的面部图像部分41、42、43和44。
再回到图2，当对象图像30中存在面部图像部分时(步骤23中的“否”)，确认面部图像部分的数量是否是1(步骤25)。如果面部图像部分的数量为1，则将这一个面部图像部分处理为对应于一帧的图像，并放大并且通过显示设备16的显示屏来整个显示(步骤29)。
如果面部图像部分的数量不为1(步骤25中的“否”)，对每一面部图像部分进行面部表情分析(步骤26)。作为面部表情分析的结果，从多个面部图像部分中检测出具有事先指定的面部表情的面部图像部分(步骤27)。检测出的面部图像部分被放大，并通过显示设备16的显示屏来整个显示(步骤28)。
再参看图4，当事先指定笑的面部表情从而显示具有该面部表情的面部图像部分时，以及面部图像部分41、42、43和44中的面部图像部分41被检测为具有指定面部表情的一个面部图像部分时，该面部图像部分41被放大。放大的图像51被显示在显示设备16的显示屏50上。尽管放大的图像51还包括面部图像部分41的外部周围的图像部分，当然，排除了显示包括面部图像部分41的外部周围的部分在内的图像51的必要性。由此显示具有指定面部表情的面部图像部分。
当存在具有指定面部表情的多个面部图像部分时，可以通过显示屏50来整个显示最大的面部图像部分。作为另一选择，可通过显示屏50按顺序来整个显示多个面部图像部分。可替换地，显示屏可被划分成多个区域，以在各区域中分别显示所检测到的面部图像部分(具有指定面部表情)。
当对象图像中不存在面部图像部分时，在显示设备16的显示屏上显示通过成像所获得的整个对象图像(步骤24)。
当显示面部图像部分等时，在存储卡18上记录表示对象图像的图像数据(步骤29)。由于使用者可以确认具有指定面部表情的面部图像部分，可以响应于来自使用者的记录命令的发布(例如按下OK按钮)而在存储卡18上记录表示对象图像的图像数据。
图6显示了在存储卡18上记录的图像文件的文件结构(数据结构)的例子。
图像文件由CPU 1生成。
图像文件包括文件头记录区域和图像数据记录区域。
包括该图像文件的管理信息的文件头被记录在文件头记录区域中。以上述方式检测出的表示面部图像部分(具有指定面部表情的面部图像部分)在对象图像中的位置的面部图像位置数据以及表示指定面部表情的面部表情数据也被记录在文件头记录区域中。还可以记录表示特定人的面部图像部分的位置的数据和表示特定人的数据。
表示整个对象图像的对象图像数据被记录在图像数据记录区域中。
由于面部图像位置数据被记录在文件头记录区域中，当再现图像数据记录区域中记录的对象图像数据时，可以规定所检测到的面部图像部分。由于面部表情数据也被记录在文件头记录区域中，可以确认所检测到的面部图像部分具有什么面部表情。
图7是显示用于记录处理的过程的流程图，其显示了另一个实施例。
用于处理的过程是用于从面部图像部分中检测出特定人(例如使用者自己、使用者的孩子、使用者的朋友等等)的面部图像部分并且显示所检测出的面部图像部分。当然，表示特定人的面部图像部分的图像数据被事先储存在存储器3中。而且，特定人应该是由使用者使用菜单按钮等事先指定的。在该处理中，与图2所示处理步骤相同的处理步骤将被赋予相同的附图标记，且因此，不冉重复对其的描述。
当检测到多个面部图像部分时(步骤25中的“否”)，执行每一检测到的面部图像部分是否与事先指定的特定人的面部图像部分相符的确定处理(步骤61)。
当没有面部图像部分与特定人的面部图像部分相符时(步骤62中的“是”)，与特定人的面部图像部分不相符但被检测为面部图像部分的面部图像部分被放大，并且显示在显示屏上(步骤63)。当检测到多个面部图像部分时，显示最大的面部图像部分。可替换地，可按顺序显示多个面部图像部分。可替换地，显示屏可被划分成多个区域，用于在各区域分别显示面部图像部分。
当存在与特定人的面部图像部分相符的面部图像部分时(步骤62中的“否”)，确认相符合的面部图像部分的数量是否是1(步骤64)。当与特定人的面部图像部分相符合的面部图像部分的数量为1时(步骤64中的“是”)，该面部图像部分被放大并显示在显示屏上(步骤67)。当有多个面部图像部分与特定人的面部图像部分相符合时(步骤64中的“否”)，选择相符合的最大的一个面部图像部分(步骤65)。所选择的面部图像部分被显示在放大的显示屏上(步骤66)。由此，显示了所需的特定人的面部图像部分。即使不显示最大面部图像部分，也可以按顺序显示与特定人面部图像部分相符合的面部图像部分。可替换地，显示屏可被划分成多个区域，以用于在各区域分别显示与特定人的面部图像部分相符合的面部图像部分。
图8是显示用于记录处理的过程的流程图，其显示了又一实施例。
用于记录处理的过程是用于进行图2所示处理和图7所示处理的组合的处理，并且显示与特定人面部图像部分相符合的面部图像部分中具有指定面部表情的面部图像部分。在该处理中，与图2或图7中所示处理步骤相同的处理步骤将被赋予相同的附图标记，因此，不再重复对其的描述。
当面部图像检测处理所检测到的面部图像部分中没有与特定人面部图像部分相符合的面部图像部分时(步骤62中的“是”)，将所有检测到的面部图像部分设置为面部表情分析的对象(步骤71)。当存在与特定人面部图像部分相符合的面部图像部分时(步骤62中的“否”)，并且当存在相符合的多个面部图像部分时，将所有相符合的面部图像部分都设置为面部表情分析的对象(步骤72)。
对这样设置的面部图像部分进行面部表情分析(步骤73)，并且将具有指定面部表情的面部图像部分在显示屏上显示为对应于一帧的图像，如前所述(步骤27和28)。
图9是显示出用于再现处理的过程的流程图。
在图9中，与图8中所示的处理步骤相同的处理步骤将被赋予相同的附图标记，且因此，不再重复对其的描述。尽管在上述的实施例中，特定人的面部图像部分的检测处理和具有指定面部表情的面部图像部分的检测处理是在成像处理中进行的，特定人的面部图像部分的检测处理以及具有指定面部表情的面部图像部分的检测处理在当前实施例中是在再现处理中进行的。
假定特定人和面部表情都已经被指定。
从存储卡中读取图像数据(步骤81)，进行读取的图像数据所表示的对象图像的面部图像部分的检测处理(步骤22)。此后，进行指定的特定人的面部图像部分的检测处理和具有指定面部表情的面部图像部分的检测处理，如上所述，并且显示所找到的面部图像部分。可以看到使用者所感兴趣的图像部分，例如，使用者孩子的图像以及具有好的面部表情的图像。
尽管在上述实施例中，显示了面部图像部分，可以不仅显示面部图像部分，还显示整个特定人物的图像。作为另一选择，可以只显示动物和汽车图像中的特定类型的图像。
尽管详细描述和图示说明了本发明，但很明显，这只是说明和示例的方式，并不是限定的方式，本发明的精神和范围只由所附权利要求的条款进行限定。

Claims (7)

1.一种图像显示控制装置，包括：
面部表情指定设备，其指定需要注意的面部表情；
值得注意面部表情检测设备，其从对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分；以及
显示控制设备，其控制显示设备，从而将所述的值得注意面部表情检测设备所检测到的面部图像部分在其显示屏上显示为对应于一帧的图像，
其中，当所述的值得注意面部表情检测设备检测到多个面部图像部分时，所述显示控制设备在显示屏上显示最大的面部图像部分，将这些面部图像部分一次一个地显示为对应于一帧的图像，或者在显示屏的不同区域上分别显示两个或更多的面部图像部分。
2.根据权利要求1所述的图像显示控制装置，进一步包括：
面部图像检测设备，其从对象图像中检测面部图像部分，
所述的值得注意面部表情检测设备响应于所述面部图像检测设备检测到多个面部图像部分这一情况，而检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分。
3.根据权利要求1所述的图像显示控制装置，其中：
所述面部表情指定设备所指定的面部表情是以下至少一个：好的面部表情、坏的面部表情、闭眼的面部表情。
4.一种控制图像显示控制装置的方法，其中：
面部表情指定设备指定需要注意的面部表情；
值得注意面部表情检测设备从对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分；以及
显示控制设备控制显示设备，从而将所述的值得注意面部表情检测设备所检测到的面部图像部分在其显示屏上显示为对应于一帧的图像，
其中，当所述的值得注意面部表情检测设备检测到多个面部图像部分时，所述显示控制设备在显示屏上显示最大的面部图像部分，将这些面部图像部分一次一个地显示为对应于一帧的图像，或者在显示屏的不同区域上分别显示两个或更多的面部图像部分。
5.一种图像显示控制装置，包括：
面部表情指定设备，其指定需要注意的面部表情；
值得注意面部表情检测设备，其从对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分；
显示控制设备，其控制显示设备，从而将所述的值得注意面部表情检测设备所检测到的面部图像部分在其显示屏上显示为对应于一帧的图像；以及
成像设备，其对对象进行成像并输出表示对象图像的图像数据，
所述的值得注意面部表情检测设备从所述成像设备输出的图像数据所表示的对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分，
所述图像显示控制装置进一步包括：记录控制设备，其将从所述成像设备输出的图像数据和表示由所述的值得注意面部表情检测设备所检测到的面部图像部分的数据互相进行关联，并且在记录介质上记录所述图像数据和表示由所述的值得注意面部表情检测设备所检测到的面部图像部分的数据。
6.根据权利要求5所述的图像显示控制装置，进一步包括：
读取设备，其从记录有表示对象图像的图像数据的记录介质中读取图像数据，
所述的值得注意面部表情检测设备从所述成像设备输出的图像数据所表示的对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分。
7.一种控制图像显示控制装置的方法，其中：
面部表情指定设备指定需要注意的面部表情；
值得注意面部表情检测设备从对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分；
显示控制设备控制显示设备，从而将所述的值得注意面部表情检测设备所检测到的面部图像部分在其显示屏上显示为对应于一帧的图像；以及
成像设备对对象进行成像并输出表示对象图像的图像数据，
所述的值得注意面部表情检测设备从所述成像设备输出的图像数据所表示的对象图像中检测具有由所述面部表情指定设备所指定的面部表情的面部图像部分，
记录控制设备将从所述成像设备输出的图像数据和表示由所述的值得注意面部表情检测设备所检测到的面部图像部分的数据互相进行关联，并且在记录介质上记录所述图像数据和表示由所述的值得注意面部表情检测设备所检测到的面部图像部分的数据。
CNB2007100916643A 2006-04-14 2007-04-03 图像显示控制装置及其控制方法和控制程序 Expired - Fee Related CN100496097C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006111532 2006-04-14
JP2006111532A JP4431547B2 (ja) 2006-04-14 2006-04-14 画像表示制御装置ならびにそれらの制御方法およびそれらの制御プログラム

Publications (2)

Publication Number Publication Date
CN101056362A CN101056362A (zh) 2007-10-17
CN100496097C true CN100496097C (zh) 2009-06-03

Family

ID=38604470

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2007100916643A Expired - Fee Related CN100496097C (zh) 2006-04-14 2007-04-03 图像显示控制装置及其控制方法和控制程序

Country Status (4)

Country Link
US (1) US20070242149A1 (zh)
JP (1) JP4431547B2 (zh)
KR (1) KR20070102404A (zh)
CN (1) CN100496097C (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103069818A (zh) * 2010-05-31 2013-04-24 富士胶片株式会社 立体图像控制设备以及控制其操作的方法和程序

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8615112B2 (en) * 2007-03-30 2013-12-24 Casio Computer Co., Ltd. Image pickup apparatus equipped with face-recognition function
JP4959535B2 (ja) * 2007-12-13 2012-06-27 株式会社日立製作所 撮像装置
JP5036612B2 (ja) * 2008-03-28 2012-09-26 三洋電機株式会社 撮像装置
JP5482654B2 (ja) * 2008-07-17 2014-05-07 日本電気株式会社 撮像装置、撮像方法及びプログラム
JP5434096B2 (ja) * 2009-01-27 2014-03-05 株式会社ニコン デジタルカメラ
JP5457092B2 (ja) * 2009-07-03 2014-04-02 オリンパスイメージング株式会社 デジタルカメラ及びデジタルカメラの合成画像表示方法
JP4900739B2 (ja) * 2009-09-04 2012-03-21 カシオ計算機株式会社 電子写真立て、その制御方法及びプログラム
JP5449550B2 (ja) * 2010-06-22 2014-03-19 富士フイルム株式会社 立体画像表示装置、立体画像表示方法、立体画像表示プログラムおよび記録媒体
JP5751898B2 (ja) * 2011-04-05 2015-07-22 キヤノン株式会社 情報処理装置、情報処理方法、プログラム及び記憶媒体
CN102638654B (zh) * 2012-03-28 2015-03-25 华为技术有限公司 一种输出多画面的方法、装置及设备
CN106331586A (zh) * 2015-06-16 2017-01-11 杭州萤石网络有限公司 一种智能家居视频监控方法和系统
US11792188B2 (en) * 2020-08-05 2023-10-17 Bank Of America Corporation Application for confirming multi-person authentication

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001285787A (ja) * 2000-03-31 2001-10-12 Nec Corp 映像録画方法およびそのシステムとその記録媒体
US7453506B2 (en) * 2003-08-25 2008-11-18 Fujifilm Corporation Digital camera having a specified portion preview section
JP2006115406A (ja) * 2004-10-18 2006-04-27 Omron Corp 撮像装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103069818A (zh) * 2010-05-31 2013-04-24 富士胶片株式会社 立体图像控制设备以及控制其操作的方法和程序
CN103069818B (zh) * 2010-05-31 2015-08-26 富士胶片株式会社 立体图像控制设备以及控制其操作的方法和程序
US9357205B2 (en) 2010-05-31 2016-05-31 Fujifilm Corporation Stereoscopic image control apparatus to adjust parallax, and method and program for controlling operation of same

Also Published As

Publication number Publication date
KR20070102404A (ko) 2007-10-18
US20070242149A1 (en) 2007-10-18
JP4431547B2 (ja) 2010-03-17
JP2007288382A (ja) 2007-11-01
CN101056362A (zh) 2007-10-17

Similar Documents

Publication Publication Date Title
CN100496097C (zh) 图像显示控制装置及其控制方法和控制程序
US8115816B2 (en) Image capturing method, control method therefor, and program
CN102158650B (zh) 图像处理设备和图像处理方法
US8780229B2 (en) Image photographing apparatus and method of controlling the same
CN101325658B (zh) 成像设备和成像方法
CN101399916B (zh) 摄像设备和摄像方法
CN100546344C (zh) 数字相机、图像回放装置、面部图像显示装置及其控制方法
CN101079964B (zh) 图像再现设备、图像再现方法及图像捕捉设备
US8704914B2 (en) Apparatus to automatically tag image and method thereof
JP2007174378A (ja) 画像ファイリング方法及びデジタルカメラ及び画像ファイリング処理プログラム及び動画記録再生装置
JP4732303B2 (ja) 撮像装置
JP2007110193A (ja) 画像処理装置
CN101365063B (zh) 电子照相机以及视场图像再现装置
US20110074540A1 (en) Control system and method for interface of electronic device
JPH07131746A (ja) 電子カメラ
CN102100062A (zh) 成像设备、成像方法和程序
JP2003092701A (ja) 撮像装置
JP2009077277A (ja) 外部記録媒体管理システム、外部記録媒体管理装置、外部記録媒体管理方法、及びプログラム
JP2009017030A (ja) 画像撮像装置、撮像制御方法
JP2013121097A (ja) 撮像装置及び方法、並びに画像生成装置及び方法、プログラム
JP2010200079A (ja) 撮影制御装置
JP2010237911A (ja) 電子機器
JP2008172485A (ja) ストリームデータ生成装置及び再生装置
US8345124B2 (en) Digital camera controlled by a control circuit
JP4872564B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090603