CN101084670A

CN101084670A - 信息处理设备、方法和程序

Info

Publication number: CN101084670A
Application number: CNA2005800440886A
Authority: CN
Inventors: 龙头正幸
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2004-12-24
Filing date: 2005-12-22
Publication date: 2007-12-05
Also published as: US20080152226A1; JP2006180403A; KR20070086615A; TW200634427A; WO2006068314A1

Abstract

个人计算机(12)执行信息处理程序(43)，以开始拍摄过程。在拍摄过程中，提取电路(48)从HDD(42)中读取缩略图像数据。提取电路(48)分析该缩略图像数据，并提取包括人脸的部分图像。显示器(13)在画面窗口(60)上同时显示出从初始图像数据创建的该图像的全部(全图像)(63)和由提取电路(48)提取的部分图像(64)。

Description

信息处理设备、方法和程序

技术领域

本发明涉及一种用于图像捕获系统的信息处理设备、信息处理方法和信息处理程序，其可用于专业从事存储拍摄和商业拍摄的照相工作室。

背景技术

近年来，拍摄后立即可接收图像打印指令的图像捕获系统已经用于专门从事存储拍摄和商业拍摄的照相工作室。这样的图像捕获系统具有一个如个人计算机的信息处理设备和一个显示器。该信息处理设备用来处理数字相机捕获的图像，该显示器用于显示捕获的图像和这些图像的打印指令信息(参见日本未决公开专利申请号为2002-139805的文件)。

在日本未决公开专利申请2002-139805文件中公开的图像捕获系统中，对于每一个相机，颜色、色调、饱和度、清晰度等校正条件都是预先确定的，并且按照这样的校正条件，所需的图像通过对图像进行处理而有效地获得。在上述图像捕获系统中，捕获的图像画面被显示在客户可观察到的个人计算机的显示器上。通过回看显示在显示器上的图像，用户来考虑是否要再照一张。

当用户发出打印存储画面的指令时，他们最关注整个图像的布局和图像中脸部的表情。为了不进行不必要的拍摄，在拍摄的过程中，必须始终通过回看整个图像的布局和图像中脸部的表情，来决定是否应该继续拍摄。然而，在日本未决公开专利申请2002-139805文件中描述的系统仅仅在显示器上显示出整体被捕获的图像。为了重新观察图像中脸部的表情，必须要进行额外的工作，比如操作个人计算机的键盘或鼠标，以放大显示出的图像。因此，很难即时地回看到图像中脸部的表情。

考虑到上述情况，本发明的目的是提供一种信息处理设备、信息处理方法和信息处理程序，以使回看整个图像的布局和图像中脸部的表情变得容易，无需复杂的工作。

发明内容

为了实现上述目的和其他目的，本发明的信息处理设备包括一提取器和一显示控制器。该提取器分析由拍摄得到的图像数据，然后从捕获的图像中提取出包括人脸的部分图像。该显示控制器在显示器的同一个屏幕上显示出提取的部分图像和该图像的全部。

优选使提取器提取部分图像，而显示控制器在捕获图像之后立即显示出部分图像和该图像的全部。还优选提取器分析通过减少图像数据而得到的减少的图像数据，以提取出部分图像。还优选从减少的图像数据创建部分图像而用于显示。

在本发明的一个优选实施例中，当部分图像没有被提取时，显示图像的中心部分，而不显示部分图像。当多个部分图像被提取时，从多个部分图像中选择出想要的一个而显示在显示器上。在本发明的另一个优选实施例中，当多个部分图像被提取时，首先显示具有提取目标最大可能性的部分图像。

本发明的信息处理方法包括提取步骤和显示步骤。提取步骤为在分析图像数据之后，从图像中提取出包括人脸的部分图像。显示步骤为在显示器的同一个屏幕上显示出部分图像和该图像的全部。

本发明的信息处理程序使个人计算机实施提取步骤和显示步骤。提取步骤为在分析图像数据之后，从图像中提取包括人脸的部分图像。显示步骤为在显示器的同一个屏幕上显示出部分图像和该图像的全部。

按照本发明的信息处理设备、方法和程序，提取器在分析图像数据之后，从该图像中提取出包括人脸的部分图像，并且显示控制器在显示器的同一个屏幕上同时显示出提取的部分图像和全图像。因此，无须复杂的工作，便能够回看全图像的布局和该图像中的脸部表情。

附图说明

图1是包括个人计算机的图像捕获系统的结构示意图，本发明应用于该个人计算机中；

图2是数码相机的结构方框图；

图3是个人计算机的结构方框图；

图4是显示在个人计算机的显示器上的用户管理窗口的说明图；

图5是在其上显示出包括人脸的部分图像和整个图像的画面窗口的说明图；

图6是在其上显示出图像的中心部分和整个图像的画面窗口的说明图；

图7是本发明信息处理程序的流程图。

具体实施方式

图1中，在专门从事如结婚照的储存拍摄和商业拍摄的照相工作室中提供了图像捕获系统2。该图像捕获系统2将用数码相机10得到的图像数据，或者记录在如存储卡或CD-R的记录介质11上的图像数据输入到个人计算机(在下面简称为PC)12中，并在PC 12的显示器13上显示出图像，以接收该图像的打印指令。记录在记录介质11上的图像数据包括在照相胶片上被数字化为TIFF或JPEG格式的图像。随后，图像捕获系统2按照打印的指令，通过照相工作室中装备的打印机14或试验室15中装备的试验室打印机16进行打印。

数码相机10、打印机14和试验室打印机16都连接到PC12上，比如通过与IEEE1394或USB(万能串行总线)、无线局域网等相适应的通信电缆连接，并且它们与PC 12相互交换数据。记录介质11通过专门的驱动器与PC 12交换数据。

在图2中，CPU 20通过数据总线21与数码相机10的全部组件连接，并且全面控制数码相机10的操作。ROM 22存储着数码相机10操作所必需的各种程序和数据。CPU 20从ROM 22读取这些程序和数据，以执行各种处理。CPU 20按照操作部件24的操作，对数码相机10的每一个组件进行操作。操作部件24由快门释放按钮和设置按钮构成，用来设定焦距比数、快门速度、变焦倍数、ISO感光度等。

由已知的摄影镜头、CCD和A/D转换器构成一个成像部件25。该成像部件25通过CCD将由摄影镜头形成的物体的光学图像进行光电转换。然后，将图像信号转换为图像数据，并且输出。从成像部件25输出的图像数据被暂存在RAM 23中。在进行比如白平衡校正等图像处理前，该图像数据是原始图像数据(CCD RAW数据)。一个像素由RGB数据构成，每一个颜色数据由12个比特表示。

图像处理电路26从RAM 23中读取原始图像数据，将每一种颜色的12比特像素数据转换为8比特的像素数据，并将其应用于白平衡校正、γ校正和YC转换，以输出初始图像数据。该图像处理电路26对初始图像数据的像素进行减薄，以得到比如1280×960个像素的减少的图像数据(在后面称之为缩略图像数据)。

压缩/解压缩电路27按照JPEG格式对初始图像和缩略图像的图像数据进行压缩。被压缩/解压缩电路27压缩的图像数据一旦被写入RAM 23中，随后就被介质控制器28记录在存储卡29中。

在LCD驱动器31的控制下，LCD 30在拍摄的过程中，连续显示出物体的全图像，或者再现出从存储卡29读取的图像，显示出再现的图像。经由上面提到的通信电缆或无线局域网，通信界面(I/F)32将从成像部件25输出的原始图像数据，和被压缩/解压缩电路27压缩的初始图像和缩略图像的图像数据(在后面称之为压缩图像数据)发送到PC 12中。

在图3中，CPU 40通过数据总线41与PC 12的全部组件连接，并全面控制着PC 12的操作。硬盘驱动器(HDD)42存储着信息处理程序(在后面简称为程序)43，以及操作PC 12所必需的各种程序和数据。存储在HDD 42中的数据包括从数码相机10送出的图像数据，和与该图像数据一起存储的用户管理数据。该用户管理数据包含用户的个人信息、打印指令信息等。

程序43允许PC 12执行所有的程序，包括用数码相机10拍照，从记录介质11输入图像数据，向用户显示图像而供其选择供打印的图像，对图像数据实施颜色校正、层次校正等，接收打印指令，将其发送到试验室，及产生索引照片，以检验得到的照片。程序43被记录在记录介质11上，如CD-ROM、DVD-ROM等，并且预先从记录介质11上被安装到HDD 42中。

CPU 40从HDD 42将程序和数据下载到工作存储器RAM 44中，以执行各种处理。CPU 40按照从键盘和鼠标构成的操作部件45输入的指令，来操作PC 12的每一个组件。

在显示器驱动器46的控制下，显示器13显示出用户管理窗口50(参见图4)或画面窗口60(参见图5和图6)。在下面将要详细说明这些窗口50和60。通信I/F 47接收来自数码相机10或记录介质11的图像数据，并向打印机14或试验室打印机16送出打印的指令。

当按照操作部件45的操作启动程序43时，显示器13就显示出如图4所示的用户管理窗口50。在用户管理窗口50上，按照从操作部件45输入的操作指令进行新用户注册、更正或删除已注册的信息，以及搜寻已注册的用户。用户管理窗口50具有一个列表51，该列表51显示出拍摄日期、拍摄场景(婚礼、儿童等)、每次处理的进程，以及该图像捕获系统2的用户的个人信息(指令ID、接收ID、姓名和电话号码)。在用户管理窗口50的上部区域，显示出所选择的用户信息52。在列表51上，由光标53(由阴影表示)显示出所选择的用户与其他用户的区别。

在用户管理窗口50的下部区域，提供了按钮54(分别有“拍摄”、“输入”、“选择”、“定制”、“排版”、“校正”、“试验室打印”、“工作室打印”和“检验”按钮)。把指针55放在这些按钮中的一个上面，并点击鼠标，将导致移向相应的处理过程，且窗口切换到相应的过程。

当选择“拍摄”按钮时，由数码相机10开始拍摄的过程，以帮助拍摄。如图3所示，CPU 40的提取电路48被激活而开始拍摄过程。提取电路48从HDD 42中读取缩略图像的被压缩图像数据，并将其解压。提取电路48分析该缩略图像数据，然后从该图像中提取出包括人脸的部分图像64。具体地说，提取电路48分析缩略图像数据中的每一个像素的色调，并提取出表示皮肤颜色的像素。然后，提取电路48将该图像中皮肤颜色像素的比例和形状与表示模特面部比例和形状的模板数据进行比较。基于此比较，提取电路48计算出分值，看多少皮肤颜色像素与模板数据相匹配。当计算的分值大于预定值时，就将脸部颜色像素的收集作为人脸。提取电路48提取被当作脸部的部分，和当作部分图像64的周边。提取电路48还使用公知的模式识别技术来提取人脸，在该技术中搜寻脸部的特殊部分，如眼睛或嘴。在此情况下，通过使用表示眼或嘴的形状或位置的样本数据，用上面提到的同样方式来计算出分值。而且，还能够使用加上表示特定人(比如新娘)特征的数据的模板数据或样品数据，来计算出多少皮肤颜色像素与该模板数据或样本数据相匹配的分值。

另外，在拍摄的过程中，显示器13显示出如图5所示的画面窗口60。该画面窗口60显示出拍摄参数信息61，比如数码相机10的ISO感光度或焦距比数、缩略图像的列表62、从HDD 42读取的初始图像创建的整个图像(在下面称之为全图像)63，以及由提取电路48提取的部分图像64。

当提取电路48提取了多个部分图像64时，通过在其上点击指针55而被选择的脸部便被显示为部分图像64。而且，当提取了多个部分图像64时，在画面窗口60上首先显示出具有提取目标的最大可能性的部分图像64(最希望被观察的图像)，比如多个部分图像64中最大的一个。除了具有最大尺寸的部分图像64以外，可能首先显示涉及整个脸部、眼睛或嘴的比例、形状或位置具有最高分值，或者涉及特定人具有最高分值的部分图像。

同时，在照片中不出现人的目标，如商业拍摄的情况下，提取电路48不提取部分图像64。在该情况下，显示器13不显示部分图像64，而显示图像的中心部分(在后面简称为中心图像)。通过用预先确定的剪裁框剪裁该图像来得到该中心图像65。

返回参照图4，当选择“输入”按钮时，输入的过程开始。在输入过程中，从记录介质11输入图像数据，并将其存储在HDD 42中。当选择“选择”按钮时，开始选择的过程。在选择过程中，在显示器13上显示出图像，来作为预览图像，并且由用户选择出将要打印的图像。

当选择“定制”按钮时，开始定制的过程。在定制过程中，输入在选择过程中选择的该图像的打印尺寸和打印数量。当选择“排版”按钮时，开始排版的过程。在排版过程中，所选的每一个图像都按照预先确定的布局排列，并产生初始的照相册。当选择“校正”按钮时，开始校正过程。在校正过程中，对图像进行颜色校正、层次校正等，以使最终的照片具有装备该图像捕获系统2的照相工作室所推荐的质量。

当选择“试验室打印”按钮时，开始试验室打印的过程。在试验室打印过程中，向试验室15的试验室打印机16发出以在定制过程中设定的尺寸和数量，来打印在选择过程中选择的图像的命令。当选择“工作室打印”按钮时，开始工作室打印的过程。在工作室打印过程中，向打印机14发出打印的命令。当选择“检验”按钮时，开始检验的过程。在检验过程中，当发送由试验室15的试验室打印机16产生的相片时，产生检索照片，以用来检验照片。

下面，参照图7所示的流程图，来说明由PC 12进行的信息处理程序。首先，操作操作部件45而启动程序43，以在显示器13上显示出用户管理窗口50。在该用户管理窗口50上，进行新用户注册、修正或删除已注册的信息，和搜寻已注册的用户。

当选择“拍摄”按钮开始拍摄过程时，激活CPU 40的提取电路48。当用数码相机10进行拍摄时，产生原始图像数据、初始图像的压缩图像数据和缩略图像，并且被记录在存储卡29中。被记录在存储卡29上的这些数据从通信I/F 47输入，以被记录在HDD 42上。然后，从HDD 42中将缩略图像的被压缩图像数据读取到提取电路48中，并被解压。由提取电路48分析该缩略图像数据，并且从该图像中提取包括人脸的部分图像64。

在显示器13上的画面窗口60中，与全图像63一起显示出被放大的部分图像64。当提取电路48提取出多个部分图像64时，首先显示具有提取目标最大可能性的部分图像64。在此情况下，通过点击指针55将部分图像64切换到所选择的一个上面。

同时，当提取电路48没有提取部分图像64时，显示器13不显示部分图像64，而显示出中心图像65。重复此信息处理操作程序，直至执行过程从该拍摄过程移至另一个为止，或者直至该程序43完成。

当用数码相机10完成拍摄时，选择每一个过程来执行。然后，按照来自用户的打印指令，由打印机14或试验室打印机16实施打印。在付款以后将照片交给用户。

在PC 12中，通过分析由拍摄得到的图像数据，提取电路48提取出包括人脸的部分图像64，并且在显示器13的同一个屏幕上显示出被提取的部分图像64和全图像63。由此，无须复杂的工作，便能很容易地回看全图像的布局和该图像中脸部的表情，比如操作键盘或鼠标来放大显示的图像。在本发明中，分析缩略图像数据，以提取部分图像64。与原始图像数据或初始图像数据相比，缩略图像数据的数据量比较小。因此，用于分析的时间被缩短。除此以外，在显示器13上将由缩略图像数据创建的图像显示为部分图像64。因此，用于显示所花费的时间也被缩短。

当提取电路48没有提取部分图像64时，显示器13不显示部分图像64，而显示中心图像65。由此，没有人像的商业拍摄在屏幕上看起来也是适当的。当提取电路48提取出多个部分图像64时，从多个部分图像64中选择将在显示器13上显示的部分图像64。由此，便很容易回看图像中每一个脸部的表情。而且，当提取电路48提取多个部分图像64时，在画面窗口60上首先显示出具有提取目标最大可能性的部分图像64。由此，便避免了不必要的操作，如手工选择将要显示的部分图像64。

注意：显示器13可由触摸板构成，以方便操作。由此，用户能够通过触摸显示器13的屏幕来执行各种选择操作。

对于部分图像64和中心图像65的显示尺寸没有特别的规定，然而，其显示尺寸优选由全图像63的显示尺寸和观看程度来确定。

在上述实施例中，只是在拍摄过程中，部分图像64和全图像63一起显示在显示器13的同一个屏幕上。然而，部分图像64可在其它过程中显示，如输入过程、选择过程等。

工业实用性

本发明的信息处理设备、信息处理方法和信息处理程序适合于在专门从事存储拍摄和商业拍摄的照相工作室中使用的图像捕获系统。

Claims

1、一种信息处理设备，用于接收显示器上显示的图像的打印指令，所述图像是由数码相机捕获的，并作为图像数据被存储在存储器中，所述信息处理设备包括：

一提取器，用于在分析所述图像数据之后，从所述图像中提取包括人脸的部分图像；以及

一显示控制器，用于在所述显示器的同一屏幕上显示由所述提取器提取的所述部分图像和所述图像的全部。

2、如权利要求1所述的信息处理设备，其中：所述提取器提取所述部分图像，而所述显示控制器在捕获所述图像之后立即显示出所述部分图像和所述图像的全部。

3、如权利要求1所述的信息处理设备，其中：所述提取器分析通过减少所述图像数据得到的减少的图像数据。

4、如权利要求1所述的信息处理设备，其中：所述显示控制器显示出由减少所述图像数据而得到的减少的图像数据创建的所述部分图像。

5、如权利要求1所述的信息处理设备，其中：当所述提取器没有提取所述部分图像时，所述显示控制器不显示所述部分图像，而显示所述图像的中心部分。

6、如权利要求1所述的信息处理设备，进一步包括：

一选择器，当所述提取器提取所述多个部分图像时，用于选择出多个部分图像中的一个而被显示在所述显示器上。

7、如权利要求1所述的信息处理设备，其中：当所述提取器提取所述多个部分图像时，所述显示控制器首先显示多个部分图像中具有提取目标最大可能性的部分图像。

8、一种信息处理方法，用于接收显示器上显示的图像的打印指令，所述图像由数码相机捕获，并被作为图像数据存储在存储器中，所述信息处理方法包括如下步骤：

在分析所述图像数据之后，从所述图像中提取包括人脸的部分图像；以及

在所述显示器的同一个屏幕上，显示出提取的所述部分图像和所述图像的全部。

9、如权利要求8所述的信息处理方法，其中：在所述图像被捕获之后，立即进行所述提取步骤和所述显示步骤。

10、如权利要求8所述的信息处理方法，其中：所述提取步骤对由减少所述图像数据得到的减少的图像数据进行分析。

11、如权利要求8所述的信息处理方法，其中：所述显示步骤显示出通过减少所述图像数据得到的减少的图像数据创建的所述部分图像。

12、如权利要求8所述的信息处理方法，其中：当所述提取步骤没有提取所述部分图像时，所述显示步骤不显示所述部分图像，而显示所述图像的中心部分。

13、如权利要求8所述的信息处理方法，进一步包括如下步骤：

当所述提取步骤提取所述多个部分图像时，从多个部分图像中选择出一个而显示在所述显示器上。

14、如权利要求8所述的信息处理方法，其中：当所述提取步骤提取多个部分图像时，所述显示步骤首先显示多个部分图像中具有提取目标最大可能性的部分图像。

15、一种信息处理程序，用于使个人计算机接收显示器上显示的图像的打印指令，所述图像由数码相机捕获，并被作为图像数据存储在存储器中，所述信息处理程序包括如下步骤：

在所述显示器的同一个屏幕上显示提取的所述部分图像和所述图像的全部。

16、如权利要求15所述的信息处理程序，其中：在捕获所述图像之后，立即进行所述提取步骤和所述显示步骤。

17、如权利要求15所述的信息处理程序，其中：所述提取步骤对通过减少所述图像数据而得到的减少的图像数据进行分析。

18、如权利要求15所述的信息处理程序，其中：所述显示步骤显示通过减少所述图像数据得到的减少的图像数据创建的所述部分图像。

19、如权利要求15所述的信息处理程序，其中：当所述提取步骤没有提取所述部分图像时，所述显示步骤不显示所述部分图像，而显示所述图像的中心部分。

20、如权利要求15所述的信息处理程序，进一步包括如下步骤：

当所述提取步骤提取多个部分图像时，在多个部分图像中选择出一个而显示在所述显示器上。

21、如权利要求15所述的信息处理程序，其中：当所述提取步骤提取所述多个部分图像时，所述显示步骤首先显示多个部分图像中具有提取目标最大可能性的部分图像。