CN101661558A - 图像处理装置和图像处理方法及摄像装置 - Google Patents

图像处理装置和图像处理方法及摄像装置 Download PDF

Info

Publication number
CN101661558A
CN101661558A CN200910167564A CN200910167564A CN101661558A CN 101661558 A CN101661558 A CN 101661558A CN 200910167564 A CN200910167564 A CN 200910167564A CN 200910167564 A CN200910167564 A CN 200910167564A CN 101661558 A CN101661558 A CN 101661558A
Authority
CN
China
Prior art keywords
image
gravity
center
attention
zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200910167564A
Other languages
English (en)
Inventor
长谷川雄一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101661558A publication Critical patent/CN101661558A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872—Repositioning or masking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/66—Analysis of geometric attributes of image moments or centre of gravity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了图像处理装置、图像处理方法和摄像装置。该图像处理装置包括：检测装置，用于检测多个注目图像的每一个的重心，多个注目图像是原图像所包括的图像中的被关注图像；计算装置，用于由多个注目图像的每一个的重心计算总体重心，总体重心是多个注目图像的全部的重心；以及确定装置，用于确定原图像中的区域使得从该区域的相对边缘中的一个边缘到总体重心的距离与从该区域的相对边缘中的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感，其中，检测装置检测多个注目图像的每一个的注目程度，以及计算装置以注目程度作为权重，由多个注目图像的每一个的重心计算总体重心。本发明可以容易地切出具有优选构图的图像。

Description

图像处理装置和图像处理方法及摄像装置
本申请是申请日为2007年9月4日、申请号为200710149581.1、发明名称为“图像处理装置和图像处理方法、计算机程序及摄像装置”的专利申请的分案申请，其全部内容结合于此作为参考。
技术领域
本发明涉及图像处理装置和图像处理方法以及摄像装置，更具体地，涉及适于能够简单切出优选构图的图像的图像处理装置和图像处理方法以及摄像装置。
背景技术
对目标进行摄像并记录(存储)图像(照片)作为数据的数码相机被广泛使用。
当稍后查看用数码相机随意拍摄的诸如纪念照片、团体照片、快照、或风景照片的照片时，可能会感到照片的构图不是很满意。
在多数情况下，如果将诸如人物、动物、或静物的目标图像切出以配置在照片的期望位置上，则照片会具有优选构图。一旦通过将来自数码相机的图像的数据(下文称作图像数据)捕获到个人计算机中并使个人计算机执行具有切出功能的程序，就执行用于这种切出的处理。
众所周知，相机内的摄像单元切换拍照方向，并且相机执行用于通过划分目标区域而获得的各个单位测距区域的测距，将表示短距离的区域作为主目标区域，并控制摄像单元的拍照方向以将主目标区域置于屏幕的中心，同时，控制变焦以示出固定大小或更大的目标(例如，参见JP-A-20000-98456)。
发明内容
使用个人计算机切出图像的过程中，用户不得不执行各种复杂操作。
用户有时要花费时间来判断如何从原始照片中适当地切出图像。如果用户不具有审美感觉，则难以作出该判断。
因此，期望可以简单地切出具有优选构图的图像。
根据本发明的实施例，提供了一种图像处理装置，其包括：检测装置，用于检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像；计算装置，用于由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心；以及确定装置，用于确定原图像中的区域使得从该区域的相对边缘中的一个边缘到总体重心的距离与从该区域的相对边缘中的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感，其中，检测装置检测多个注目图像的每一个的注目程度，以及计算装置以注目程度作为权重，由多个注目图像的每一个的重心计算总体重心。
可在图像处理装置中进一步设置用于从原图像中切出由确定装置确定的区域中的图像并生成新图像的生成装置。
可在图像处理装置中进一步设置用于将由生成装置生成的新图像的像素数转换为预定像素数的转换装置。
可使确定装置确定矩形区域使得从该矩形区域的垂直或水平相对的边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感。
可使确定装置确定具有与原图像的纵横比相同的纵横比的矩形区域。
可使确定装置确定原图像中最大大小的区域。
可使确定装置确定该区域使得比率采用1∶1至1∶2.2的任意值。
可使确定装置确定该区域使得比率为1∶2。
可使确定装置确定原图像中的区域，使得从该区域的垂直相对边缘的一个边缘到总体重心的距离与从该区域的垂直相对边缘的另一个边缘到总体重心的距离的比率为1∶2。
可使确定装置确定该区域使得比率为黄金比例。
可使确定装置确定原图像中的区域使得从该区域的垂直相对边缘的一个边缘到总体重心的距离与从该区域的垂直相对边缘的另一个边缘到总体重心的距离的比率为黄金比例。
根据本发明的另一实施例，提供了一种图像处理方法，其包括以下步骤：检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像；由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心；以及确定原图像中的区域使得从该区域的相对边缘中的一个边缘到总体重心的距离与从该区域的相对边缘中的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感，其中，计算总体重心的处理包括：检测多个注目图像的每一个的注目程度，并且以注目程度作为权重，由多个注目图像的每一个的重心计算总体重心。
根据本发明的再一实施例，提供了一种摄像装置，其包括：检测装置，用于检测多个注目图像中每一的重心，多个注目图像为原图像所包括的图像中的被关注图像；计算装置，用于由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心；以及确定装置，用于确定原图像中的区域使得从该区域的相对边缘中的一个边缘到总体重心的距离与从该区域的相对边缘中的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感，其中，检测装置检测多个注目图像的每一个的注目程度，以及计算装置以注目程度作为权重，由多个注目图像的每一个的重心计算总体重心。
根据本发明的又一实施例，检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像；由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心；以及确定原图像中的区域使得从该区域的相对边缘中的一个边缘到总体重心的距离与从该区域的相对边缘中的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感。
如上所述，根据本发明的实施例，可以以优选构图形成图像。
根据本发明的实施例，可以容易地切出具有优选构图的图像。
附图说明
图1是示出根据本发明实施例的数码相机的示图；
图2是示出根据实施例的数码相机的示图；
图3是示出数码相机的结构实例的框图；
图4是示出由执行计算机程序的控制CPU实现的功能单元结构的框图；
图5是用于解释用于构图校正处理的实例的流程图；
图6是示出数码相机的显示单元和输入单元的示图；
图7是示出原图像的实例的示图；
图8是示出原图像、注目图像、总体重心、以及将被切出区域的实例的示图；
图9是用于解释将被切出的区域的示图；
图10是用于解释将被切出的区域的示图；
图11是用于解释将被切出的区域的示图；
图12是用于解释将被切出的区域的示图；
图13是示出切出后的图像的实例的示图；
图14是示出数码相机的显示单元和输入单元的示图；
图15是示出数码相机的显示单元和输入单元的示图；
图16是示出原图像的实例的示图；
图17是示出切出后的图像的实例的示图；
图18是示出原图像的实例的示图；
图19是示出切出后的图像的实例的示图；
图20是用于解释用于构图校正处理的另一实例的流程图；
图21是示出数码相机的显示单元和输入单元的示图；
图22是示出数码相机的显示单元和输入单元的示图；以及
图23是示出个人计算机的结构实例的框图
具体实施方式
将在下文中说明本发明的实施例。如下描述本发明的元素和在说明书或附图中描述或示出的实施例之间的对应关系。该描述旨在确认在说明书或附图中描述或示出了支持本发明的实施例。因此，即使存在在说明书或附图中进行描述或示出但在这里没有描述为对应于本发明元件的实施例的实施例，也不一定表示该实施例不对应于该元件。相反，即使该实施例在这里被描述为对应于本发明元件的实施例，也并不表示该实施例不对应于除该元件之外的元件。
根据本发明实施例图像处理装置包括：检测装置(例如，图4中的注目图像重心检测单元91)，用于检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像；计算装置(例如，图4中的总体重心计算单元92)，用于由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心；以及确定装置(例如，图4中的切出区域确定单元93)，用于确定原图像中的区域使得从该区域的相对边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感。
可在图像处理装置中进一步设置用于从原图像中切出由确定装置确定的区域中的图像并生成新图像的生成装置(例如，图4中的图像切出和生成单元94)。
可在图像处理装置中进一步设置用于将由生成装置生成的新图像的像素数转换为预定像素数的转换装置(例如，图3中的像素数转换引擎54)。
根据本发明另一实施例的图像处理方法包括以下步骤：检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像(例如，图5中的步骤S14)；由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心(例如，图5中的步骤S15)；以及确定原图像中的区域使得从该区域的相对边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感(例如，图5中的步骤S16)。
根据本发明又一实施例的计算机程序使计算机执行以下步骤：检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像(例如，图5中的步骤S14)；由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心(例如，图5中的步骤S15)；以及确定原图像中的区域使得从该区域的相对边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感(例如，图5中的步骤S16)。
根据本发明再一实施例的摄像装置包括：检测装置(例如，图4中的注目图像重心检测单元91)，用于检测多个注目图像中每一个的重心，多个注目图像为原图像所包括的图像中的被关注图像；计算装置(例如，图4中的总体重心计算单元92)，用于由多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心；以及确定装置(例如，图4中的切出区域确定单元93)，用于确定原图像中的区域使得从该区域的相对边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感。
图1和图2是示出根据本发明实施例的数码相机1的示图。如图1所示，数码相机1根据用户操作拍摄目标并将目标的静止图像的图像(照片)存储(记录)为图像数据。
数码相机1校正拍摄并存储为图像数据的图像的构图。
如图2所示，数码相机1校正作为图像数据存储(记录)在介质11中的图像的构图，介质11为结合非易失性半导体存储器等的存储卡并被插入数码相机1。将由数码相机1或其它数码相机拍摄的图像的图像数据存储(记录)在介质11中。
介质11不限于结合非易失性半导体存储器等的存储卡，其可以是诸如硬盘的磁盘、诸如DVD(数字通用盘)的光盘或磁光盘等。介质11可以可拆卸地插入或可内置在数码相机1中。
图3是示出数码相机1的结构实例的框图。数码相机1包括光学系统31、成像器32、信号处理单元33、RAM(随机存取存储器)34、显示单元35、以及输入单元36。
光学系统31包括镜头和光圈。光学系统31将目标的光学图像聚焦在成像器32的光接收单元上。成像器32包括CCD(电荷耦合器件)图像传感器或CMOS(互补金属氧化物半导体)图像传感器。成像器32将聚焦在光接收单元上的目标的光学图像转换为电信号，并将通过转换获得的图像的电信号提供给信号处理单元33。
信号处理单元33由其上设置有多个电子部件的基板、系统IC(集成电路)等组成。信号处理单元33对由成像器32提供的图像的电信号施加各种类型的信号处理以生成图像数据。信号处理单元33对图像数据施加各种类型的信号处理。RAM 34包括DRAM(动态随机存取存储器)并临时存储将在信号处理单元33中经受信号处理的图像数据。
显示单元35包括LCD(液晶显示器)或有机EL(电致发光)显示器。显示单元35根据信号处理单元33的控制显示各种图像。
输入单元36包括按钮、开关、或叠合设置在显示单元35上的触摸面板。输入单元36将对应于用户操作的信号提供给信号处理单元33。
信号处理单元33从插入数码相机1的介质11中读出图像数据或使介质11存储(记录)图像数据。
信号处理单元33包括相机信号处理引擎51、JPEG(联合图像专家组)引擎52、注目图像检测引擎53、像素数转换引擎54、图像显示引擎55、控制CPU(中央处理单元)56、图像信号总线57、控制信号总线58、外部介质控制器59、输入接口60、以及数据总线61。
通过传送作为图像数据的信号的图像信号的图像信号总线57，相机信号处理引擎51、JPEG引擎52、注目图像检测引擎53、像素数转换引擎54、图像显示引擎55、控制CPU 56、数据总线61、以及RAM 34相互连接。
相机信号处理引擎51、JPEG引擎52、注目图像检测引擎53、像素数转换引擎54、以及图像显示引擎55的每一个通过图像信号总线57将图像数据提供给RAM 34并使RAM 34临时存储图像数据，或者通过图像信号总线57从RAM 34中读出临时存储在RAM34中的图像数据。
通过传送控制信号的控制信号总线58，相机信号处理引擎51、JPEG引擎52、注目图像检测引擎53、像素数转换引擎54、图像显示引擎55、以及控制CPU 56相互连接。
控制CPU 56通过控制信号总线58获得控制信号并将其提供给相机信号处理引擎51、JPEG引擎52、注目图像检测引擎53、像素数转换引擎54、以及图像显示引擎55的每一个。
通过数据总线61，控制CPU 56、外部介质控制器59、以及输入接口60相互连接。
控制CPU 56通过数据总线61控制外部介质控制器59，并使外部介质控制器59将通过图像信号总线57和数据总线61提供的图像数据存储在介质11中或从介质11中读出存储在介质11中的图像数据。
在通过控制信号总线58施加的控制CPU 56的控制下，相机信号处理引擎51对由成像器32提供的的图像的电信号施加各种类型的信号处理，例如，转换为数字信号、噪声去除、以及白平衡调节。相机信号处理引擎51使RAM 34临时存储通过对电信号施加信号处理所获得的图像数据。
在通过控制信号总线58施加的控制CPU 56的控制下，JPEG引擎52从RAM 34读出由相机信号处理引擎51提供并临时存储在RAM 34中的图像数据，并在JPEG系统中对图像数据进行编码。JPEG引擎52通过图像信号总线57和数据总线61将编码图像数据提供给外部介质控制器59。这种情况下，外部介质控制器59使介质11存储(记录)在JPEG系统中编码的图像数据。
在通过控制信号总线58施加的控制CPU 56的控制下，JPEG引擎52通过图像信号总线57和数据总线61获得通过外部介质控制器59从介质11读出的在JPEG系统中编码的图像数据，并对在JPEG系统中编码的图像数据进行解码。JPEG引擎52使RAM 34临时存储解码的图像数据。
在通过控制信号总线58施加的控制CPU 56的控制下，注目图像检测引擎53通过图像信号总线57从RAM 34中读出临时存储在RAM 34中的图像数据，并检测包括在读出的图像数据的图像中的注目图像。即，注目图像检测引擎53检测在作为图像数据读出的图像所包括的图像中的作为被关注图像的注目图像。注目图像是诸如人或显眼对象的被关注的人或物(注目物)。
换句话说，注目图像检测引擎53检测图像数据的图像所包含的图像中的显眼图像或吸引人关注的图像的注目图像。
更具体地，例如，注目图像检测引擎53检测面部图像作为注目图像。例如，注目图像检测引擎53检测具有与图像数据的图像所包括的图像中的其它图像的形状、颜色、大小或图样不同的形状、颜色、大小或图样的图像作为注目图像。
不仅可将预定目标的图像检测作为注目图像，而且还可将图像中的显眼区域或吸引人关注的区域的图像检测作为注目图像。通过用户可通过输入单元61上的操作直接指定注目图像。
注目图像检测引擎53通过图像信号总线57或控制信号总线58将表示图像数据的图像中的注目图像范围的数据提供给控制CPU56。
在通过控制信号总线58施加的控制CPU 56的控制下，像素数转换引擎54通过图像信号总线57从RAM 34中读出临时存储在RAM 34中的图像数据，并对图像数据施加用于转换图像像素数的处理。像素数转换引擎54通过图像信号总线57将图像的图像数据(其像素数被转换)提供给RAM 34并使RAM 34临时存储图像数据。
在通过控制信号总线58施加的控制CPU 56的控制下，图像显示引擎55通过图像信号总线57从RAM 34中读出临时存储在RAM34中的图像数据，生成对应于读出的图像数据和显示单元35的图像数据，并将图像数据提供给显示单元35并使显示单元35显示对应于读出的图像数据的图像。根据控制CPU 56的控制，图像显示引擎55使显示单元35显示GUI(图形用户界面)图像。
控制CPU 56为内置型CPU或内置在系统IC中的CPU。控制CPU 56执行存储在内置在数码相机1中的ROM(只读存储器)或RAM中的程序，并根据与通过输入接口60和数据总线61提供的用户操作相对应的来自输入单元36的信号通过控制信号总线58获得控制信号。控制CPU 56通过控制信号总线58将控制信号提供给相机信号处理引擎51、JPEG引擎52、注目图像检测引擎53、像素数转换引擎54、图像显示引擎55、外部介质控制器59、以及输入接口60以控制这些装置。
外部介质控制器59控制包括插入数码相机1的介质11中的图像数据的各种数据的存储(记录)，并控制存储(记录)在插入数码相机1的介质11中的各种数据的读出。当介质11为磁盘、光盘等时，设置未示出的驱动器。外部介质控制器59通过该驱动器控制介质11中的数据的记录和读出。
输入接口60从输入单元36接收信号并将接收的信号整形为预定系统的信号以通过数据总线61将来自输入单元36的信号提供给控制CPU 56。
图4是示出通过执行程序的控制CPU 56实现的功能单元的结构的框图。通过执行程序的控制CPU 56实现图像读取单元71、构图校正单元72、像素数转换控制单元73、显示控制单元74、以及存储控制单元75。
图像读取单元71读取将经受构图校正的原图像，其中，原图像为拍摄图像或作为图像数据存储在介质11中的图像。
构图校正单元72校正读取的原图像的构图。构图校正单元72从读取的原图像中切出具有优选构图的图像。
构图校正单元72包括注目图像重心检测单元91、总体重心计算单元92、切出区域确定单元93、以及图像切出和生成单元94。
注目图像重心检测单元91检测作为读取的原图像所包含的图像中的被关注图像的多个注目图像的每一个的重心。总体重心计算单元92根据多个注目图像的每一个的重心计算总体重心，该总体重心为多个注目图像的全部的重心。
切出区域确定单元93基于总体重心确定原图像中具有优选构图的图像的区域。更具体地，切出区域确定单元93确定原图像中的区域使得从该区域的相对边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感。
图像切出和生成单元94从原图像中切出确定区域的图像并生成新图像。
构图校正单元72将生成的新图像，即，以优选构图切出的图像提供给像素数转换控制单元73。
像素数转换控制单元73使像素数转换引擎54将确定为优选构图的图像的像素数转换为预定的像素数。例如，像素数转换控制单元73使像素数转换引擎54将确定为优选构图的图像的像素数转换为与原图像相同的像素数。
显示控制单元74控制图像显示引擎55，以使显示单元35显示原图像或确定为优选构图并且其像素数已被转换的图像。
存储控制单元75控制外部介质控制器59，以使介质11存储确定为优选构图并且其像素数已被转换的图像的图像数据。
将参照图5中的流程图解释用于构图校正处理的实例。在步骤S11中，图像读取单元71读取将经受构图校正的原图像。
例如，当拍摄图像的构图被校正时，图像读取单元71将由相机信号处理引擎51提供的图像数据存储在RAM 34的存储区域中的用于存储将经受构图校正的原图像的特定存储区域中，从而读取作为拍摄图像的原图像。
例如，当校正存储在介质11中的图像数据的图像构图时，图像读取单元71使外部介质控制器59从介质11中读取存储在介质11中的图像数据。当读出的图像数据在JPEG系统中进行编码时，图像读取单元71使JPEG引擎52对图像数据进行解码。图像读取单元71将以这种方式从介质11中读出的图像数据存储在RAM 34的存储区域中的用于存储将经受构图校正的原图像的特定存储区域中，从而读取原图像。
在步骤S12中，显示控制单元74控制图像显示引擎55，以使显示单元35显示原图像。
如图6所示，数码相机1的显示单元35显示原图像101。
如图6所示，在数码相机1的表面中，在设置显示单元35的数码相机1的表面上，排列有构图校正按钮102、包括向上按钮、向下按钮、向右按钮、以及向左按钮的十字按钮103、确定按钮104、以及菜单按钮105。构图校正按钮102、十字按钮103、确定按钮104、以及菜单按钮105组成输入单元36。
在步骤S13中，构图校正单元72基于根据用户的操作通过输入接口60和数据总线61由输入单元36提供的信号判定用户是否按下了构图校正按钮102以及是否指示了原图像101的构图校正。
当在步骤S13中判定用户按下了构图校正按钮102并且指示了原图像101的构图校正，则处理前进到步骤S14。构图校正单元72的注目图像重心检测单元91检测原图像101上的多个注目图像的每一个的重心和注目程度。
注目程度为表示注目图像的显眼程度或吸引人关注程度的值。
将更加详细地解释步骤S14。注目图像重心检测单元91使注目图像检测引擎53检测包含在原图像101中的注目图像并通过图像信号总线57或控制信号总线58将表示原图像101中注目图像的范围和注目图像的特征量的数据提供给控制CPU 56。
例如，当面部图像被检测作为注目图像时，注目图像检测引擎53检测原图像101像素中的肤色的预定范围内的色相的像素，并指定配置像素的区域中预定大小以上的区域的图像。此外，注目图像检测引擎53判定眼睛图像和嘴图像是否包括在指定图像中，从而判定该图像是否为面部图像。
注目图像检测引擎53将表示以这种方式检测的面部图像的注目图像的范围提供给控制CPU 56。
例如，这种情况下，注目图像检测引擎53将表示面部图像大小的数据作为注目图像的特征量提供给控制CPU 56。
例如，如图7所示，当原图像101中包括七个人的图像时，如图8所示，检测作为包含在原图像101中的七个人的面部图像的注目图像131-1至131-7。例如，当如图8所示检测矩形范围中的面部图像的注目图像131-1至131-7时，将表示注目图像131-1至131-7的矩形范围和大小的数据提供给控制CPU 56。
例如，当检测原图像101所包括的图像中的具有不同于其它图像的形状、颜色、大小或图样的图像的注目图像时，注目图像重心检测单元91使注目图像检测引擎53检测包括在原图像101中的图像的轮廓，并检测每个轮廓被检测的图像的表示诸如形状、颜色、大小、和图样的特征的特征量。注目图像检测引擎53基于每个图像的特征量检测作为具有更多特征图像的注目图像。例如，注目图像检测引擎53将检测的特征量和预先确定的阈值进行比较，并检测具有等于或大于(或小于)阈值的特征量的图像作为注目图像。
注目图像检测引擎53将表示以这种方式检测的注目图像范围的数据提供给控制CPU 56。
在这种情况下，注目图像检测引擎53将表示注目图像特征量的数据或对应于特征量的数据(例如，表示通过标准化特征量所获得的值的数据)提供给控制CPU 56。
注目图像重心检测单元91从表示由注目图像检测引擎53提供的原图像101中注目图像范围的数据中计算原图像101上的多个注目图像的每一个的重心，从而检测注目图像的重心。注目图像重心检测单元91从表示由注目图像检测引擎53提供的注目图像特征量的数据中计算表示注目图像的注目程度的数据，从而检测注目图像的注目程度。
例如，当检测图8所示矩形范围内的面部图像的注目图像131-1至131-7时，为每个注目图像131-1至131-7检测与每个注目图像131-1至131-7的矩形范围的中心位置相对应的重心。
为每个注目图像131-1至131-7检测注目程度。
例如，为每个注目图像131-1至131-7检测满足下面等式(3)的关系的相等(相同值)的注目程度。
此外，为注目图像131-1至131-7的每一个检测不同值的注目程度。更具体地，为每个注目图像131-1至131-7检测对应于注目图像131-1至131-7的各一个的矩形范围大小的注目程度。在这种情况下，以从注目图像131-1至注目图像131-7的顺序检测表示注目图像更显眼的较大值的注目程度。
注目图像检测引擎53可以检测每个注目图像的重心和注目程度。
返回参照图5，在步骤S15中，构图校正单元72的总体重心计算单元92通过以检测的注目程度对重心进行加权从多个注目图像的每一个的重心中计算作为多个注目图像的全部的重心的总体重心。
当总共有N个注目图像时，由(xk，yk)(k＝1，2，...，N)表示原图像101坐标上的每个注目图像重心的位置，以及由wk表示每个注目图像的注目程度，通过等式(1)和等式(2)计算总体重心位置(xc，yc)的x坐标上的坐标值xc以及y坐标上的坐标值yc。等式(1)和等式(2)中的注目程度wk满足由等式(3)表示的条件。
x c = 1 N Σ k = 1 N w k x k · · · ( 1 )
y c = 1 N Σ k = 1 N w k y k · · · ( 2 )
Σ k = 1 N w k = N · · · ( 3 )
在图8所示的实例中，从作为面部图像的注目图像131-1至131-7的每一个的重心和注目程度中计算总体重心132的位置(xc，yc)。
在步骤S14中，可以检测每个注目图像的位置(例如，范围)及注目程度，以及在步骤S15中，可以从每个注目图像的位置和注目程度中计算总体重心132。
在步骤S16中，构图校正单元72的切出区域确定单元93确定将从原图像101中切出的区域使得总体重心132置于该区域中预先确定的位置上。更具体地，在步骤S16中，切出区域确定单元93确定将在原图像101中切出的区域使得从将被切出的区域的相对边缘的一个边缘到总体重心132的距离与从该将被切出的区域的相对边缘的另一个边缘到总体重心132的距离的比率采用预先确定的值以产生美感。
例如，如图8所示，基于总体重心132确定将被切出的区域133。
为了解释的更加详细，如图9所示，切出区域确定单元93确定矩形的将被切出的区域133，使得总体重心132水平方向上的位置与区域133水平方向上的中心一致，并且总体重心132垂直方向上的位置在距离区域133顶端1/2.6的位置上。换句话说，切出区域确定单元93确定将被切出的区域133使得通过总体重心132以大约1∶1.618的黄金比例划分区域133的垂直方向，区域133的纵横比与原图像101的纵横比一致，并且区域133的面积最大。
换句话说，切出区域确定单元93确定矩形区域133使得从矩形区域133的左侧边缘到总体重心132的距离与从其右侧边缘到总体重心132的距离的比率为1∶1，从矩形区域133的上侧边缘到总体重心132的距离与从其下侧边缘到总体重心132的距离的比率为黄金比例1∶1.618，并且区域133具有与原图像101相同的纵横比以及具有原图像101范围内最大的面积。
如图10所示，可以确定将被切出的区域133使得总体重心132在区域133的中心。如图11所示，可以确定将被切出的区域133使得在区域133中总体重心132水平方向上的位置为以区域133的左侧边缘为基准预先确定的m:1-m(0≤m≤1)，并且在区域133中总体重心132垂直方向上的位置为以区域133的上侧边缘为基准预先确定的n:1-n(0≤n≤1)。
此外，如图12所示，可以确定将被切出的区域133使得总体重心132适合通过以1∶1.2∶1的水平方向上的划分比率以及以1∶1.2∶1的垂直方向上的划分比率划分区域133所获得的区域的中心区域(图12中由点线表示的区域)。换句话说，可以确定将被切出的区域133使得从矩形区域133的垂直和水平相对的边缘的一个边缘到总体重心132的距离与从另一个边缘到总体重心132的距离的比率采用从1∶1到1∶2.2的任何值。
在这种情况下，期望包括在将被切出的区域133中的图像的构图。例如，可以说，与包括在预定区域(其中，总体重心132在通过以1∶1.2∶1的水平方向上的划分比率以及以1∶1.2∶1的垂直方向上的划分比率划分预定区域所得到的区域的中心区域外部的位置上)中的图像构图相比，当总体重心132位于区域133的中心时，包括在区域133中的图像的构图是满意的。这是因为注目图像太靠近预定区域所包括的图像中的边缘，在预定区域中，总体重心132的位置在通过以1∶1.2∶1的水平方向上的划分比率以及以1∶1.2∶1的垂直方向上的划分比率划分预定区域所得到的区域的中心区域外部的位置上。
特别地，当确定将被切出的区域133使得从矩形区域133的垂直或水平相对的边缘的一个边缘到总体重心132的距离与从另一个边缘到总体重心132的距离的比率采用值1∶2时，形成所谓的三等分构图。将被切出的区域133的图像构图是满意的。
然而，当比率超过1∶2.2时，构图就变得不合适了。
返回参照图5，在步骤S17中，构图校正单元72判定是否所有的注目图像都包括在确定的区域133中。例如，在步骤S17中，构图校正单元72判定是否所有的面部图像的注目图像131-1至131-7都包括在将被切出的区域133中。
当在步骤S17中判定所有的注目图像没有包括在确定的区域133中时，不期望切出不包括所有注目图像的图像，因此，处理返回到步骤S16并重复上述处理。在这种情况下，在步骤S16中，切出区域确定单元93确定原图像101中将被切出的区域使得从将被切出的区域的相对边缘的一个边缘到总体重心132的距离与从该区域的相对边缘的另一个边缘到总体重心132的距离的比率采用预先确定的值以产生美感，该值不同于步骤S16中上一次的值。
因此，可以确定包括所有注目图像的将被切出的区域133。
当在步骤S17中判定所有的注目图像都包括在确定的区域133中时，处理前进到步骤S18，在步骤S18中，构图校正单元72的图像切出和生成单元94从原图像101中切出确定区域133的图像并生成切出后的图像。所生成的切出后的图像被作为图像数据存储在RAM 34中。
例如，如图8所示，当为原图像101上的面部图像的每个注目图像131-1至131-7检测重心和注目程度时，计算总体重心132的位置，并确定将被切出的区域133，在步骤S18中，如图13所示，切出和生成单元94从原图像101中切出将被切出的区域133的图像并生成切出后的图像151。
在步骤S19中，像素数转换控制单元73使像素数转换引擎54将具有优选构图的切出后的图像151的像素数转换为与原图像101相同的像素数。在这种情况下，像素数转换引擎54将切出后的图像151的长度和宽度的每一个中的大小和像素数转换为与原图像101的长度和宽度的每一个中的大小和像素数相同。
像素数转换控制单元73可以使像素数转换引擎54将以优选构图形成的切出后的图像151的像素数转换为预先确定的任意像素数。
像素数转换控制单元73可以使像素数转换引擎54将以优选构图形成的切出后的图像151的像素数转换为由用户预先指定的像素数。
在步骤S20中，显示控制单元74控制图像显示引擎55，以使显示单元35显示切出后的图像151。例如，如图14所示，在数码相机1的显示单元35上显示切出后的图像151。
在这种情况下，显示控制单元74控制图像显示引起55，以使显示单元35连同切出后的图像151一起显示用于指示保存切出后的图像151的按钮171以及用于指示取消保存切出后的图像151(丢弃切出后的图像151)的按钮172。
当用户查看显示在显示单元35上的切出后的图像151并喜欢切出后的图像151时，用户操作按钮171。当用户不喜欢切出后的图像151时，用户操作按钮172。
在步骤S21中，存储控制单元75基于根据用户的操作通过输入接口60和数据总线61由输入单元36提供的信号判定是否指示了切出后的图像151的保存。
例如，在步骤S21中，当轻扣叠加设置在显示单元35上的触摸面板区域中显示按钮171的位置时或当通过十字按钮103聚焦按钮171并按下确定按钮104以操作按钮171时，存储控制单元75判定指示了切出后的图像151的保存。例如，在步骤S21中，当轻扣叠加设置在显示单元35上的触摸面板区域中显示按钮172的位置时或当通过十字按钮103聚焦按钮172并按下确定按钮104以操作按钮172时，存储控制单元75判定指示了取消切出后的图像151的保存(丢弃切出后的图像151)以及没有指示切出后的图像151的保存。
当在步骤S21中判定指示了切出后的图像151的保存时，处理前进到步骤S22。存储控制单元75控制外部介质控制器59，以使介质11存储被确定为优选构图并且其像素数被转换的以及存储在RAM 34中的切出后的图像151的图像数据。这里，处理结束。
可通过JPEG引擎52在JPEG系统中对切出后的图像151进行编码，然后将其作为图像数据存储在介质11中。
另一方面，当在步骤S21中判定没有指示切出后的图像151的保存时，处理跳过步骤S22并直接结束，而没有使介质11存储切出后的图像151的图像数据。
当在步骤S13中判定没有指示校正原图像101的构图时，由于不需要校正构图，所以处理跳过步骤S14至S22结束。
以这种方式，可以轻松地获得形成为优选构图的切出后的图像151，该图像通过校正原图像101的构图而获得，并存储切出后的图像151。
如图15所示，通过存储切出后的图像151，如同原图像101，可以任意使显示单元35显示期望的切出后的图像151。用户可以任意观看切出后的图像151。
可将从原图像101的确定区域133中切出的切出后的图像151的图像数据直接存储在介质11中，而不需要转换切出后的图像151的像素数。
图16是示出原图像101的另一实例的示图。图17是示出通过参照图5中的流程图解释的构图校正处理从图16中的原图像101生成的切出后的图像151的另一实例的示图。图18是示出原图像101的又一实例的示图。图19是示出通过参照图5的流程图解释的构图校正处理从图18中的原图像101生成的切出后的图像151的又一实例的示图。
如图16至图19所示，可以容易地从不满意构图中形成的原图像101中切出在更好构图中形成的切出后的图像151。
过去，经常删除因为“差的构图”而被认为“失败照片”的照片(原图像101)。然而，如果重新切出该照片(原图像101)以形成“满意构图”，就不必放弃以许多努力拍摄的照片。
不仅在拍摄之后立刻将拍摄照片的构图校正为“满意构图”而且在拍摄之后的任何时候可将拍摄照片的构图校正为“满意构图”而不不执行复杂的选择和操作。因此，不需要在拍摄时对构图太在意，并且可以随意拍摄照片。
在确定原图像101的区域133之后，可将确定133的图像显示在显示单元35上，而不切出区域133的图像。因此，可将原图像101显示为具有满意构图的图像并允许用户查看图像而不增加图像数据。
还可以集中校正作为图像数据存储在介质11中的多个原图像101的构图。
图20是用于解释当选择通过按下菜单按钮105而显示的菜单命令时执行的构图校正处理的另一实例的流程图。当集中校正作为图像数据存储在介质11中的多个原图像101的构图时，该处理用于构图校正。
在步骤S51中，显示控制单元74控制图像显示引擎55，以使显示单元35显示用于接受用于构图校正的指示的屏幕。例如，在步骤S51中，如图21所示，在显示单元35上显示用于接受用于构图校正的指示的屏幕201，其上配置有诸如“执行构图校正？”的文字。在屏幕201上，配置用于指示作为图像数据存储在介质11中的所有原图像101的构图校正的按钮202以及用于指示取消构图校正的按钮203。
在步骤S52中，构图校正单元72基于根据用户的操作通过输入接口60和数据总线61由输入单元36提供的信号判断是否指示了作为图像数据存储在介质11中的所有原图像101的构图校正。
例如，在步骤S52中，当在叠加设置在显示单元35上的触摸面板区域中轻扣显示按钮202的位置时或由十字按钮103聚焦按钮202并按下确定按钮104来操作按钮202时，构图校正单元72判定指示了作为图像数据存储在介质11中的所有原图像101的构图校正。例如，在步骤S52中，当在叠加设置在显示单元35上的触摸面板区域中轻扣显示按钮203的位置时或由十字按钮103聚焦按钮203并按下确定按钮104来操作按钮203时，构图校正单元72判定指示了取消构图校正且没有指示构图校正。
当在步骤S52中判定指示了作为图像数据存储在介质11中的所有原图像101的构图校正时，如图22所示，在显示单元35上显示表示正在执行用于构图校正处理的屏幕221，其上配置有诸如“正在执行构图校正”的文字，并且处理前进到步骤S53。图像读取单元71从介质11中读取将经受构图校正的原图像101。
例如，在步骤S53中，图像读取单元71使外部介质控制器59从介质11中读出存储在介质11中的图像数据。当在JPEG系统中对读出的图像数据进行编码时，图像读取单元71使JPEG引擎52解码图像数据。图像读取单元71将以这种方式从介质11中读出的图像数据存储在RAM 34的存储区域中的用于存储将经受构图校正的原图像101的特定存储区域中，从而读取原图像101。
由于步骤S54至S56分别与图5中的步骤S14至S16相同，所以省略这些步骤的解释。
由于步骤S57和S58分别与图5中的步骤S18和S19相同，所以省略这些步骤的解释。
由于步骤S59与图5中的步骤S22相同，所以省略该步骤的解释。
在步骤60中，构图校正单元72判断是否校正了作为图像数据存储在介质11中的所有原图像101的构图。例如，在步骤60中，构图校正单元72通过将由图像读取单元71通知的作为图像数据存储在介质11中的原图像101的总数目与通过步骤S54至S59中的处理校正构图的原图像101的数目进行比较，判断是否校正了作为图像数据存储在介质11中的所有原图像101的构图。
当在步骤S60中判定没有校正作为图像数据存储在介质11中的所有原图像101的构图时，由于仍然剩余其构图应该被校正的原图像101，所以处理前进到步骤S61。图像读取单元71从介质11中读取将经受构图校正的下一个原图像101。处理返回到步骤S54。将下一个原图像101作为目标重复上述处理。
当在步骤S60中判定校正了作为图像数据存储在介质11中的所有原图像101的构图时，处理结束。
当在步骤S52中判定没有指示所有原图像101的构图校正时，由于不需要校正构图，所以处理跳过步骤S53至S61结束。
以这种方式，可以集中校正作为图像数据存储在介质11中的多个原图像101的构图。换句话说，可以轻松地切出以通过校正作为图像数据存储在介质11中的多个原图像的每一个的构图而获得的优选构图形成的切出后的图像151，以及可以保存切出后的图像151。
因此，如同原图像101，可以使显示单元35任意显示通过校正作为图像数据存储在介质11中的原图像101的构图而获得的切出后的图像151。用户可以任意观看这种切出后的图像151。
不仅可以将本发明应用于数码相机1，而且可以应用于处理图像的装置(例如，拍摄图像的装置)、显示图像的装置、以及保存图像的装置。具体地，可将本发明应用于便携式电话、便携式图像再生装置、静态图像再生装置或图像记录装置，存储拍摄的图像等的存储装置、提供图像的服务器等。
图像可以为静止图像或运动图像。例如，当校正作为运动图像的原图像的构图时，如果将上述处理应用于预先确定的时间间隔的帧以确定区域使得以确定的区域作为基准区域根据运动图像上时间的流逝而连续改变。
这样，当从原图像中切出具有优选构图的图像时，可以获得具有优选构图的图像。当检测原图像所包括的图像中的被关注图像的多个注目图像的每一个的重心时，从多个注目图像的每一个的重心中计算总体重心，该总体重心为多个注目图像的全部的重心，以及确定原图像中的区域使得从该区域的相对边缘的一个边缘到总体重心的距离与从该区域的相对边缘的另一个边缘到总体重心的距离的比率采用预先确定的值以产生美感，可以轻松地切出具有优选构图的图像。
上述系列处理可由硬件执行或可由软件执行。当通过软件执行该系列处理时，将形成软件的程序安装在嵌入专用硬件的计算机中或通过从程序记录介质安装各种程序能够执行各种功能的计算机中，例如，通用个人计算机。
图23是示出根据程序执行系列处理的个人计算机的结构实例的框图。CPU(中央处理单元)301根据存储在ROM(只读存储器)302或存储单元308中的程序执行各种处理。在RAM(随机存取存储器)303中适当存储由CPU 301执行的程序、数据等。CPU 301、ROM 302、以及RAM 303通过总线304相互连接。
输入/输出接口305也经由总线304连接至CPU 301。包括键盘、鼠标、以及麦克风的输入单元306和包括显示器和扬声器的输出单元307连接至输入/输出接口305。CPU 301响应于从输入单元306输入的命令执行各种处理。CPU 301将处理结果输出至输出单元307。
连接至输入/输出接口305的存储单元308包括硬盘并存储由CPU 301执行的程序和各种数据。通信单元309经由诸如互联网和局域网的网络与外部装置进行通信。
程序可经由通信单元309获得并存储在存储单元308中。
当诸如磁盘、光盘、磁光盘或半导体存储器的可移动介质311被插入连接至输入/输出接口305的驱动器310时，驱动器310驱动可移动介质311并获得记录在可移动介质311中的程序、数据等。必要时将获得的程序和数据传送至存储单元308并存储在其中。
如图23所示，存储安装在计算机中并可由计算机执行的程序的程序记录介质包括作为封装介质的可移动介质311(例如，磁盘(包括软盘)、光盘(包括CD-ROM(光盘只读存储器))和DVD((数字通用盘)，包括磁光盘)或半导体存储器)、临时或永久存储程序的ROM 302、以及形成存储单元308的硬盘。必要时，使用诸如局域网、互联网，和数字卫星广播的有线或无线通信介质经由作为接口的通信单元309(例如，路由器和调制解调器)执行程序记录介质中程序的存储。
在本说明书中，描述存储在程序记录介质中的程序的步骤不仅包括根据所描述的顺序以时序执行的处理，而且还包括尽管不总是以时序执行而并行或单独执行的处理。
本发明的实施例不限于上述实施例。在不背离本发明精神的情况下，可以进行多种修改。
本领域的技术人员应该理解，根据设计要求和其它因素，可以有多种修改、组合、再组合和改进，均应包含在本发明的权利要求或等同物的范围之内。

Claims (13)

1.一种图像处理装置，包括：
检测装置，用于检测多个注目图像的每一个的重心，所述多个注目图像是原图像所包括的图像中的被关注图像；
计算装置，用于由所述多个注目图像的每一个的重心计算总体重心，所述总体重心是所述多个注目图像的全部的重心；以及
确定装置，用于确定所述原图像中的区域，使得从所述区域的相对边缘中的一个边缘到所述总体重心的距离与从所述区域的相对边缘中的另一个边缘到所述总体重心的距离的比率采用预先确定的值以产生美感，
其中，所述检测装置检测所述多个注目图像的每一个的注目程度，以及所述计算装置以所述注目程度作为权重，由所述多个注目图像的每一个的重心计算所述总体重心。
2.根据权利要求1所述的图像处理装置，还包括生成装置，用于从所述原图像中切出由所述确定装置确定的所述区域中的图像并生成新图像。
3.根据权利要求2所述的图像处理装置，还包括转换装置，用于将由所述生成装置生成的所述新图像的像素数转换为预定像素数。
4.根据权利要求1所述的图像处理装置，其中，所述确定装置确定矩形的所述区域，使得从所述矩形区域的垂直或水平相对的边缘中的一个边缘到所述总体重心的距离与从所述区域的相对边缘中的另一个边缘到所述总体重心的距离的比率采用预先确定的值以产生美感。
5.根据权利要求4所述的图像处理装置，其中，所述确定装置确定具有与所述原图像的纵横比相同的纵横比的所述矩形区域。
6.根据权利要求5所述的图像处理装置，其中，所述确定装置确定具有所述原图像中最大大小的所述区域。
7.根据权利要求1所述的图像处理装置，其中，所述确定装置确定所述区域，使得所述比率采用1∶1至1∶2.2中的任意值。
8.根据权利要求1所述的图像处理装置，其中，所述确定装置确定所述区域，使得所述比率为1∶2。
9.根据权利要求8所述的图像处理装置，其中，所述确定装置确定所述原图像中的所述区域，使得从所述区域的垂直相对的边缘中的一个边缘到所述总体重心的距离与从所述区域的垂直相对的边缘中的另一个边缘到所述总体重心的距离的比率为1∶2。
10.根据权利要求1所述的图像处理装置，其中，所述确定装置确定所述区域，使得所述比率为黄金比例。
11.根据权利要求10所述的图像处理装置，其中，所述确定装置确定所述原图像中的所述区域，使得从所述区域的垂直相对的边缘中的一个边缘到所述总体重心的距离与从所述区域的垂直相对的边缘中的另一个边缘到所述总体重心的距离的比率为黄金比例。
12.一种图像处理方法，包括以下步骤：
检测多个注目图像的每一个的重心，所述多个注目图像是原图像所包括的图像中的被关注图像；
由所述多个注目图像的每一个的重心计算总体重心，所述总体重心是所述多个注目图像的全部的重心；以及
确定所述原图像中的区域，使得从所述区域的相对边缘中的一个边缘到所述总体重心的距离与从所述区域的相对边缘中的另一个边缘到所述总体重心的距离的比率采用预先确定的值以产生美感，
其中，计算所述总体重心的处理包括：检测所述多个注目图像的每一个的注目程度，并且以所述注目程度作为权重，由所述多个注目图像的每一个的重心计算所述总体重心。
13.一种摄像装置，包括：
检测装置，用于检测多个注目图像的每一个的重心，所述多个注目图像是原图像所包括的图像中的被关注图像；
计算装置，用于由所述多个注目图像的每一个的重心计算总体重心，所述总体重心是所述多个注目图像的全部的重心；以及
确定装置，用于确定所述原图像中的区域，使得从所述区域的相对边缘中的一个边缘到所述总体重心的距离与从所述区域的相对边缘中的另一个边缘到所述总体重心的距离的比率采用预先确定的值以产生美感，
其中，所述检测装置检测所述多个注目图像的每一个的注目程度，以及所述计算装置以所述注目程度作为权重，由所述多个注目图像的每一个的重心计算所述总体重心。
CN200910167564A 2006-09-04 2007-09-04 图像处理装置和图像处理方法及摄像装置 Pending CN101661558A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006238917A JP2008061184A (ja) 2006-09-04 2006-09-04 画像処理装置および方法、プログラム、並びに撮像装置
JP2006238917 2006-09-04

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CNA2007101495181A Division CN101141565A (zh) 2006-09-04 2007-09-04 图像处理装置和图像处理方法、计算机程序及摄像装置

Publications (1)

Publication Number Publication Date
CN101661558A true CN101661558A (zh) 2010-03-03

Family

ID=39188688

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200910167564A Pending CN101661558A (zh) 2006-09-04 2007-09-04 图像处理装置和图像处理方法及摄像装置
CNA2007101495181A Pending CN101141565A (zh) 2006-09-04 2007-09-04 图像处理装置和图像处理方法、计算机程序及摄像装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CNA2007101495181A Pending CN101141565A (zh) 2006-09-04 2007-09-04 图像处理装置和图像处理方法、计算机程序及摄像装置

Country Status (5)

Country Link
US (1) US8306358B2 (zh)
JP (1) JP2008061184A (zh)
KR (1) KR20080021519A (zh)
CN (2) CN101661558A (zh)
TW (1) TW200818061A (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101655765A (zh) * 2008-08-22 2010-02-24 深圳富泰宏精密工业有限公司 利用虚拟方向键进行操作的电子装置及相应的操作方法
CN101546307B (zh) * 2008-09-17 2011-01-12 厦门市美亚柏科信息股份有限公司 一种基于边缘重心特征的图像检索系统及其图像检索方法
KR20100058280A (ko) * 2008-11-24 2010-06-03 삼성전자주식회사 휴대 단말기를 이용한 영상 촬영 방법 및 장치
KR101642402B1 (ko) * 2010-02-01 2016-07-25 삼성전자주식회사 촬영 구도를 유도하는 디지털 영상 촬영 장치 및 방법
JP6500535B2 (ja) 2015-03-23 2019-04-17 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
JP6504899B2 (ja) * 2015-04-21 2019-04-24 キヤノン株式会社 制御装置、光学機器、撮像装置および制御方法
CN108206910B (zh) * 2016-12-20 2021-04-06 北京小米移动软件有限公司 图像拍摄的方法及装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62169284A (ja) 1986-01-22 1987-07-25 Fujitsu Ltd 画像の位置合わせ方式
JPH08110603A (ja) 1994-10-12 1996-04-30 Konica Corp 色調整方法および装置
JP3936351B2 (ja) 1995-01-11 2007-06-27 富士通株式会社 音声応答サービス装置
JP2000098456A (ja) 1998-09-28 2000-04-07 Minolta Co Ltd オート構図機能を有するカメラ
US6654506B1 (en) * 2000-01-25 2003-11-25 Eastman Kodak Company Method for automatically creating cropped and zoomed versions of photographic images
US6545743B1 (en) * 2000-05-22 2003-04-08 Eastman Kodak Company Producing an image of a portion of a photographic image onto a receiver using a digital image of the photographic image
US6748097B1 (en) * 2000-06-23 2004-06-08 Eastman Kodak Company Method for varying the number, size, and magnification of photographic prints based on image emphasis and appeal
US7212668B1 (en) * 2000-08-18 2007-05-01 Eastman Kodak Company Digital image processing system and method for emphasizing a main subject of an image
US6697502B2 (en) * 2000-12-14 2004-02-24 Eastman Kodak Company Image processing method for detecting human figures in a digital image
US6847733B2 (en) * 2001-05-23 2005-01-25 Eastman Kodak Company Retrieval and browsing of database images based on image emphasis and appeal
JP4405750B2 (ja) 2003-05-28 2010-01-27 キヤノン株式会社 画像編集装置
US7574016B2 (en) * 2003-06-26 2009-08-11 Fotonation Vision Limited Digital image processing using face detection information
JP2005033508A (ja) 2003-07-14 2005-02-03 Minolta Co Ltd 撮像装置
US7382903B2 (en) * 2003-11-19 2008-06-03 Eastman Kodak Company Method for selecting an emphasis image from an image collection based upon content recognition
US20080019575A1 (en) * 2006-07-20 2008-01-24 Anthony Scalise Digital image cropping using a blended map

Also Published As

Publication number Publication date
CN101141565A (zh) 2008-03-12
US8306358B2 (en) 2012-11-06
JP2008061184A (ja) 2008-03-13
KR20080021519A (ko) 2008-03-07
TW200818061A (en) 2008-04-16
US20080069468A1 (en) 2008-03-20

Similar Documents

Publication Publication Date Title
US7224851B2 (en) Method and apparatus for registering modification pattern of transmission image and method and apparatus for reproducing the same
CN102158650B (zh) 图像处理设备和图像处理方法
TWI253860B (en) Method for generating a slide show of an image
US8605958B2 (en) Method and apparatus for generating meta data of content
CN101415077B (zh) 构图判定设备和构图判定方法
US8600191B2 (en) Composite imaging method and system
EP1855459B1 (en) Apparatus and method for photographing a business card in a portable terminal
CN101516001B (zh) 数字拍摄设备及其控制方法和记录介质
TWI554096B (zh) 包含興趣特徵之視訊摘要
KR101795601B1 (ko) 영상 처리 장치, 영상 처리 방법, 및 컴퓨터 판독가능 저장매체
CN101661558A (zh) 图像处理装置和图像处理方法及摄像装置
US9704279B2 (en) Image processing device, image processing method, program, and recording medium
JP5106355B2 (ja) 表情判定装置、その制御方法、撮像装置及びプログラム
CN101843092A (zh) 成像设备和方法以及程序
JP2005303991A (ja) 撮像装置、撮像方法、及び撮像プログラム
CN110876079B (zh) 视频处理方法、装置和设备
CN107430780A (zh) 用于基于视频内容特性的输出创建的方法
CN102426573A (zh) 内容分析装置和方法
JP2008035125A (ja) 撮像装置、画像処理方法およびプログラム
CN113438508B (zh) 视频数据处理方法、装置、设备、介质及程序产品
KR101838792B1 (ko) 콘텐츠에 대한 사용자의 감정을 공유하는 방법 및 장치
TWI744962B (zh) 資訊處理裝置、資訊處理系統、資訊處理方法、及程式產品
US10043299B2 (en) Image processing apparatus for generating a new moving image from a moving image
KR102066857B1 (ko) 객체 영상 트랙킹 스트리밍 시스템 및 이를 이용한 스트리밍 방법
JP2008090570A (ja) 情報処理装置及び情報処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20100303