CN101887447B - 图像检索装置和图像检索方法 - Google Patents

图像检索装置和图像检索方法 Download PDF

Info

Publication number
CN101887447B
CN101887447B CN2010101685366A CN201010168536A CN101887447B CN 101887447 B CN101887447 B CN 101887447B CN 2010101685366 A CN2010101685366 A CN 2010101685366A CN 201010168536 A CN201010168536 A CN 201010168536A CN 101887447 B CN101887447 B CN 101887447B
Authority
CN
China
Prior art keywords
associated images
images
image
data
element information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2010101685366A
Other languages
English (en)
Other versions
CN101887447A (zh
Inventor
伊藤健世
藤井贵史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Imaging Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Imaging Corp filed Critical Olympus Imaging Corp
Publication of CN101887447A publication Critical patent/CN101887447A/zh
Application granted granted Critical
Publication of CN101887447B publication Critical patent/CN101887447B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明提供图像检索装置和图像检索方法。图像检索装置(1)具有：检索图像选择部(27)，其从所记录的图像数据中选择检索图像数据；检索图像显示处理部(27)，其进行将所选择的检索图像数据显示在显示部上的处理；关联图像选出部(27)，其在选出与各图像数据相对应的各要素项目的要素信息中的至少任1个要素信息同与检索图像数据相对应的要素信息一致的预定数量的关联图像数据时，以在该预定数量的关联图像数据中选出各要素项目的要素信息的组合不同的至少1个图像数据的方式来选出预定数量的关联图像数据；以及关联图像显示处理部(27)，其进行将所选出的预定数量的关联图像数据作为显示对象显示在显示部(19)上的处理。

Description

图像检索装置和图像检索方法
技术领域
本发明涉及检索图像的图像检索装置和图像检索方法。
背景技术
最近的数字照相机伴随存储器的大容量化能记录超过1000张的图像，可不用关注存储容量而进行摄影。然而，由于能记录的张数增加，在再现时必须处理庞大张数的图像，存在从摄影图像中检索期望图像的作业需要花费时间的情况。因此，要求效率良好的图像检索。
另一方面，以往，作为用于获得期望信息的检索装置，公知的是进行使用关键字的检索的检索装置。例如，在日本特开2005-191621号公报中公开了这样的电视播放接收装置：附加优先位次来登记多个关键字，根据该关键字的优先位次检索播放节目的图像数据。并且，在日本特开平4-90054号公报(美国专利第5367672)中公开了这样的图像存储检索装置：对图像赋予多个关键字来存储，根据所输入的检索用的关键字进行图像检索。
另外，在将在上述的日本特开2005-191621号公报或日本特开平4-90054号公报(美国专利第5367672)中公开的使用关键字的检索方法应用于数字照相机中的图像检索的情况下，由于检索单单关键字(要素信息)与用户指定的图像一致的图像，会产生仅检索并显示相同图像的情况。在例如将被摄体的种类设定为要素信息的情况下，当对相同被摄体连续拍摄了多张时，对各图像分别设定有相同的要素信息。这里，当这些多个图像在要素信息一致的情况下全部进行检索和显示时，用户必须阅览若干张拍摄了相同被摄体的相似图像，存在不能进行效率良好的检索的问题。
发明内容
本发明的一方式涉及的图像检索装置检索与所选择的图像数据相关联的其他图像数据，所述图像检索装置的特征在于，具有：图像记录部，其记录多个图像数据；要素信息记录部，其记录与记录在所述图像记录部内的各图像数据相对应的、与所述各图像数据相关的多个要素项目的要素信息；检索图像选择部，其从记录在所述图像记录部内的图像数据中选择检索图像数据；检索图像显示处理部，其进行将由所述检索图像选择部所选择的检索图像数据显示在显示部上的处理；关联图像选出部，其在选出与所述各图像数据相对应的各要素项目的要素信息中的至少任1个要素信息同与所述检索图像数据相对应的要素信息一致的预定数量的关联图像数据时，以在该预定数量的关联图像数据中包含至少1个所述各要素项目的要素信息的组合不同的图像数据的方式来进行选出；以及关联图像显示处理部，其进行将由所述关联图像选出部所选出的预定数量的关联图像数据作为显示对象显示在所述显示部上的处理。
本发明的另一方式涉及的图像检索方法检索与所选择的图像相关联的其他图像，所述图像检索方法的特征在于，所述图像检索方法包含：从所记录的多个图像中选择检索图像，进行显示所选择的所述检索图像的处理，当根据与所记录的各图像相对应的、和所述各图像相关的多个要素项目的要素信息，选出与所述各图像相对应的各要素项目的要素信息中的至少任1个要素信息同与所述检索图像相对应的要素信息一致的预定数量的关联图像时，以在该预定数量的关联图像中包含至少1个所述各要素项目的要素信息的组合不同的图像的方式来进行选出，进行显示所选出的所述预定数量的关联图像的处理。
关于以上所述、以及本发明的其他目的、特征、优点及技术上和产业上的意义，对照附图阅读以下本发明的详细说明，将会进一步了解。
附图说明
图1是示出数字照相机的前面侧的概略立体图。
图2是示出数字照相机的背面侧的概略立体图。
图3是示出数字照相机的结构例的概略框图。
图4是示出图像检索画面的一例的图。
图5是示出实施方式1中的检索图像显示画面的一例的图。
图6是示出要素信息的一例的说明图。
图7是说明实施方式1中的关联图像的分组的说明图。
图8是示出实施方式1中的数字照相机的处理进程的流程图。
图9是示出实施方式1中的显示关联图像决定处理的详细处理进程的流程图。
图10是示出继图8之后的处理进程的流程图。
图11是示出历史显示处理的详细处理进程的流程图。
图12是说明实施方式2中的显示关联图像的决定原理的图。
图13是示出实施方式2中的数字照相机的处理进程的流程图。
图14是示出实施方式2中的显示关联图像决定处理的详细处理进程的流程图。
图15是示出继图13之后的处理进程的流程图。
图16是示出实施方式3中的检索图像显示画面的一例的图。
图17是说明实施方式3中的显示关联图像决定原理的图。
图18是示出实施方式3中的数字照相机的处理进程的流程图。
图19是示出实施方式3中的显示关联图像决定处理的详细处理进程的流程图。
图20是示出继图18之后的处理进程的流程图。
图21是示出实施方式4中的检索图像显示画面的一例的图。
图22是示出实施方式4中的显示关联图像决定处理的详细处理进程的流程图。
具体实施方式
以下，参照附图详细说明本发明的优选实施方式。在本实施方式中，列举将本发明的图像检索装置应用于数字照相机的情况为例进行说明。另外，本发明不受该实施方式的限定。并且，在各附图的记载中，对相同部分标注相同标号来示出。
图1是示出数字照相机1的前面侧的概略立体图，图2是示出数字照相机1的背面侧的概略立体图。如图1所示，数字照相机1在照相机机身3的前表面配设有摄像镜头4，在照相机机身3的内部具有拍摄通过该摄像镜头4入射的被摄体像的摄像部100(参照图3)。并且，在照相机机身3的上表面配设有用于指示摄影时机的快门释放按钮5和电源按钮6。
另一方面，在照相机机身3的背面，如图2所示，具有显示各种画面的显示部19、以及菜单按钮7、十字按钮8、确定按钮9、变焦按钮(TW按钮)10、模式拨盘11之类的操作部件等。十字按钮8用于指示上下左右的各方向。确定按钮9用于确定操作内容等。变焦按钮(TW按钮)10在摄影动作时作为变更摄影倍率的变焦按钮发挥作用，在再现动作时作为再现图像的放大显示和缩小显示等的显示切换按钮发挥作用。模式拨盘11用于切换数字照相机1的动作模式等。
另外，尽管未图示，然而在照相机机身3的侧面设有以自由拆装的方式安装移动型记录介质(外部存储器22；参照图3)的卡槽。并且，在照相机机身3的侧面设有配备了数据的输入端子的未图示的通信连接器，可通过通信电缆与外部设备有线连接。该通信连接器使用USB(Universal Serial Bus，通用串行总线)标准等各种形式，一般用法是例如将数字照相机1与个人计算机(PC)等外部设备连接来将图像数据发送到外部设备。
当在该数字照相机1中操作电源按钮6来接通电源、操作模式拨盘11将动作模式切换到摄影模式时，数字照相机1处于能摄影的状态。在该摄影模式中，通过摄像镜头4入射的被摄体像按照每1帧(例如1/30秒)被输出，作为实时取景图像实时显示在显示部19上。这里，作为摄影模式，准备有例如通常的摄影模式和运动模式、风景摄影用的风景模式、肖像模式、短时间连续拍摄被摄体的连拍模式之类的各种摄影模式。用户操作模式拨盘11来选择与摄影场景对应的摄影模式，在观看实时取景图像的同时，操作快门释放按钮5来进行静态图像和动态图像的摄影。并且在电源接通时，用户操作模式拨盘11来将动作模式切换到再现模式，在显示部19上显示(再现)由数字照相机1所拍摄的摄影图像来进行欣赏。或者，在操作模式拨盘11来将动作模式切换到检索模式的情况下，可检索过去拍摄的摄影图像并可显示该摄影图像。
下面，说明该数字照相机1的结构。图3是示出数字照相机1的结构例的概略框图。如图3所示，数字照相机1具有：摄像光学系统101，摄像元件102，摄像处理部103，A/D转换电路104，图像处理部15，压缩解压缩部16，图像缓冲存储器17，显示处理部18，显示部19，记录部20，有线接口(I/F)23，无线接口(I/F)24，操作部25，集音部26，CPU27，闪存29等。CPU27作为检索图像选择部、检索图像显示处理部、关联图像选出部、关联图像显示处理部、检索历史显示处理部以及显示切换处理部发挥作用。在该数字照相机1中，包含摄像光学系统101、摄像元件102、摄像处理部103以及A/D转换电路104等的结构构成摄像部100。
摄像光学系统101包含摄像镜头4(参照图1)、光圈、快门等，将入射的被摄体像成像在摄像元件102上。摄像元件102是例如CCD(Charge Coupled Device，电荷耦合器件)或CMO S(Complementary MetalOxide Semiconductor，互补型金属氧化物半导体)等固体摄像元件，经由摄像光学系统101接收来自被摄体的光束，进行光电转换并输出模拟电信号。摄像处理部103对从摄像元件102所输出的模拟电信号进行CDS(Correlated Double Sampling，相关双采样)或AGC(Automatic GainControl，自动增益控制)等模拟信号处理。A/D转换电路104对从摄像处理部103输入的模拟电信号实施A/D转换处理来转换成数字电信号，获得图像数据。
图像缓冲存储器17例如在将从A/D转换电路104所输出的作为显示对象的帧的图像数据显示在显示部19上时，暂时缓存(记录)该图像数据。并且，图像缓冲存储器17在将从记录部20(内置存储器21或外部存储器22)所读出的摄影图像的图像数据显示在显示部19上时，暂时缓存(记录)该图像数据。并且，图像缓冲存储器17在将从A/D转换电路104所输出的摄影图像的图像数据记录到记录部20内时，暂时缓存(记录)该图像数据。
图像处理部15对从摄像部100所输出的图像数据实施各种图像处理，并进行转换成适合于记录用或显示用等的图像数据的处理。例如，图像处理部15进行对摄影图像的图像数据进行缩小处理来生成显示用的小图像(缩略图)的图像数据(缩略图数据)的处理等。
并且，图像处理部15从摄影图像的图像数据中提取特征信息。例如，进行公知技术即美国专利第7324670等所公开的脸检测处理来提取特征信息。该脸检测处理是这样的处理：例如，应用模式匹配(pattern matching)来检测图像数据中的脸的区域(脸区域)，根据该脸区域的检测结果检测左右眼和鼻、唇等各脸器官。在实施方式1中，图像处理部15进行该脸检测处理，根据脸检测结果检测例如检测出的脸的数量。然后，计数检测出的脸的数量并作为特征信息来提取。并且，图像处理部15对图像数据进行图像处理来识别风景(背景)，检测显现在图像中的例如山和河、海、建筑物等并作为特征信息来提取。
压缩解压缩部16在将摄影图像的图像数据记录在记录部20内时，以及在显示记录在记录部20内的摄影图像的图像数据时等，进行基于例如JPEG(Joint Photographic Experts Group，联合图像专家组)方式等的图像数据的压缩处理和解压缩处理。
显示处理部18驱动显示部19，进行将显示对象的图像数据显示在显示部19上的处理。例如在摄影模式中，通过使显示部19更新显示按照每1帧从摄像元件102取入且由图像处理部15进行了图像处理的图像数据，来进行实时取景图像的显示。另一方面，在再现模式中，使显示部19显示从记录部20读出且由图像处理部15进行了图像处理的摄影图像的图像数据。显示部19除了显示摄影图像和实时取景图像以外，还用于显示数字照相机1的各种设定信息等，由TFT液晶面板等各种显示装置实现。
无线接口24是用于在与外部装置之间进行无线的图像数据收发的连接接口。该无线接口24例如应用依据基于无线USB(WUSB)方式、超宽带(UWB)无线连接方式、IrDA(infrared Data Association，红外数据协会)方式的光无线连接等各种通信标准的接口。
有线接口23是用于在与经由通信电缆进行有线连接的外部装置之间进行图像数据的传送(收发)的连接接口。该有线接口23例如应用依据USB标准或IEEE1394标准等的接口。
记录部20由内置存储器21和外部存储器22构成。该内置存储器21和外部存储器22使用可更新记录的闪存或ROM等各种半导体存储器、内置或者通过数据通信端子连接的硬盘、存储卡等记录介质及其读写装置等来实现。然后，内置存储器21和外部存储器22可适当采用所述的各种记录装置中与用途对应的记录装置，或者可组合使用。该记录部20作为图像记录部，记录由摄像部100所拍摄的摄影图像的图像数据。并且，除了记录图像数据以外，在记录部20内还记录在摄影时等预定时机由集音部26收集、且进行了录音处理后的声音数据等。
操作部25用于受理例如摄影时机的指示、摄影模式和再现模式、检索模式等数字照相机1的动作模式的切换操作、摄影条件的设定操作等、由用户进行的各种操作，将操作信号通知给CPU27。例如，操作部25使用被分配了各种功能的按钮开关、拨盘、各种传感器等来实现。该操作部25包含图1和图2所示的快门释放按钮5和电源按钮6、以及图2所示的菜单按钮7、十字按钮8、确定按钮9、变焦按钮10、模式拨盘11。
集音部26是用于收集声音等由被摄体发出的声音的集音装置(麦克风)，将所收集的声音信号输出到CPU27。
CPU27根据来自操作部25的操作信号等从闪存29中读出照相机程序并执行该程序，进行针对构成数字照相机1的各部的指示和数据的传送等，对数字照相机1的动作进行统一控制。例如，进行驱动摄像光学系统101来控制AF动作和变焦动作等的处理、以及控制摄像部100的摄影动作来生成摄影图像的图像数据的处理。并且，将图像编号按摄影顺序分配给摄影图像，进行将所生成的图像数据与该图像编号和摄影时的时刻信息(摄影日期时刻信息)一起记录在记录部20内的处理。并且，进行对摄影图像设定要素信息并登记在闪存29的图像要素信息数据库291内的处理、以及在检索模式中将作为检索图像进行了画面显示的摄影图像的图像编号作为检索历史设定在检索历史信息293内的处理。并且，进行根据由集音部26所收集的声音信号生成声音数据的处理、记录所生成的声音数据的处理、设定摄影时的各种摄影条件的处理、将图像数据显示在显示部19上的处理。并且，进行从未图示的扬声器输出声音数据的处理、经由有线接口23或无线接口24控制数据的输入输出的处理等、控制数字照相机1的各种动作的处理和用于实现数字照相机1具有的各种功能的处理。
闪存29是可电擦除的非易失性存储器，预先记录有用于使数字照相机1动作、实现该数字照相机1具有的各种功能的各种照相机程序、以及在该照相机程序的执行中使用的数据等。该闪存29作为要素信息记录部记录要素信息数据库291。在该要素信息数据库291内登记有与记录在记录部20内的全部摄影图像的图像数据相关的要素信息。
在实施方式1中，在摄影图像的生成时，针对该摄影图像，设定例如4种要素项目“日期”、“摄影模式”、“人物的有无(以下简单表记为“人物”)”、“被摄体的种类”(以下简单表记为“被摄体”)的值(要素信息)。对各摄影图像设定的该4个要素项目各方的要素信息与分配给摄影图像的图像编号相对应地登记在要素信息数据库291内。例如，CPU27从摄影日期时刻信息中提取日期，将其设定为要素项目“日期”的要素信息。并且，CPU27将在摄影时设定的摄影模式，即上述通常的摄影模式和运动模式、风景摄影用的摄影模式、肖像模式之类的摄影模式设定为要素项目“摄影模式”的要素信息。并且，CPU27将由图像处理部15所提取的特征信息设定为“人物”和“被摄体”。即例如，图像处理部15进行脸检测处理，将从该图像数据中检测出的脸的数量设定为要素项目“人物”的要素信息。并且，图像处理部15将在该图像数据中识别出并检测出的风景设定为要素项目“被摄体”的要素信息。
并且，闪存29作为检索历史记录部记录检索历史信息293，管理检索模式下的摄影图像的检索历史。例如，在检索历史信息293内，按检索顺序记录有过去在检索模式下作为检索图像进行了画面显示的摄影图像的图像编号。
下面，说明按以上构成的数字照相机1的动作模式之一即检索模式。
图4是示出在将模式拨盘11切换到检索模式时显示在显示部19上的图像检索画面的一例的图。在该图像检索画面上，如图4所示，以缩略图形式显示再现对象的图像数据。例如，将记录在记录部20内的全部摄影图像的图像数据作为再现对象，在图像检索画面上，按摄影顺序配置有各摄影图像的缩略图I11并将其进行一览显示。并且，在图像检索画面的下方配置有时间序列条SB11。该时间序列条SB11使用条B11的长度表示记录在记录部20内的图像数据的摄影期间，并使用条B11上的滑块S11表示以缩略图形式显示的各图像数据在整个摄影期间中的时间范围。摄影期间是由最老的摄影日期时刻信息和最新的摄影日期时刻信息决定的期间。
在该图像检索画面中，用户操作十字按钮8，在使光标C11移动到期望的缩略图的状态下操作确定按钮9，从而进行检索图像的选择操作。例如，当在图4所示的状态下操作了确定按钮9时，缩略图I111的摄影图像被选择为检索图像。
图5是示出在实施方式1中选择了检索图像时显示在显示部19上的检索图像显示画面的一例的图。如图5所示，检索图像显示画面在画面中央具有检索图像显示部W21，显示在图像检索画面中所选择的检索图像。并且，检索图像显示画面在检索图像显示部W21的下方具有关联图像显示区域E21。在该关联图像显示区域E21内，从例如摄影日期时刻早的摄影图像开始每预定数(例如5个)地依次排列从记录在记录部20内的全部摄影图像的图像数据中作为检索图像的关联图像而被选出的、且被决定为显示对象的关联图像(以下称为“显示关联图像”)的图像数据，并以缩略图形式显示这些图像数据。这里，显示关联图像包含检索图像。例如在图5中，在左端显示了在图4所选择的检索图像即显示关联图像的缩略图I21。
在该检索图像显示画面中，用户操作十字按钮8，在使光标C21移动到期望的缩略图的状态下操作确定按钮9，进行显示关联图像的选择操作。另外，假定在关联图像显示区域E21中在左端的缩略图I211处配置了光标C21的状态(图5的状态)时通过十字按钮8指示了左方向。在该情况下，将摄影日期时刻比该左端的显示关联图像早的5个显示关联图像新作为显示对象，配置各显示关联图像的缩略图，更新关联图像显示区域E21的显示。同样，当在右端的缩略图处配置了光标C21的状态时通过十字按钮8指示了右方向的情况下，将摄影日期时刻比该右端的显示关联图像新的5个显示关联图像新作为显示对象，配置各显示关联图像的缩略图，更新关联图像显示区域E21的显示。
这里，说明实施方式1中的显示关联图像的决定原理。图6是示出图5所示的关联图像显示区域E21的缩略图I211～I214的显示关联图像和在决定该显示关联图像时选出的关联图像的要素信息的一例的说明图。如图6所示，在作为检索图像的左端的缩略图I211的显示关联图像的要素信息内设定了“08/12/2”作为“日期”、设定了“风景模式”作为“摄影模式”、设定了“0人”作为“人物”、以及设定了“海/山”作为“被摄体”。
在实施方式1中，在选择了检索图像的时间点进行从记录在记录部20内的全部摄影图像中选出关联图像来决定显示关联图像的处理(显示关联图像决定处理)。在该显示关联图像决定处理中，从除了检索图像以外的全部摄影图像中选出至少任1个要素项目与检索图像的要素信息一致的摄影图像作为关联图像。并且，根据针对所选出的关联图像设定的要素信息对关联图像进行分组，针对分组后的关联图像，决定代表关联图像。
图7是说明实施方式1中的关联图像的分组的说明图。这里，在图7中，作为关联图像I31～I35，示出图像编号为“147”、“195”、“281”、“618”、“733”的摄影图像的要素信息。如图7所示，在实施方式1中，将所选出的关联图像I31～I35中、各要素项目的要素信息的组合一致的关联图像(各要素项目的要素信息相互之间完全一致的关联图像)I31、I32、I34、I35分配到相同组G31来进行分组。然后，将这样分组后的4张关联图像中的例如摄影日期时刻最新的关联图像I35作为代表关联图像。这里，摄影日期时刻的先后是根据例如与该图像数据一起记录在记录部20内的摄影日期时刻信息进行判定的。另外，可以根据图像编号的大小来判定摄影日期时刻的先后。并且，作为代表关联图像的关联图像不限于摄影日期时刻是最新的关联图像，例如可以适当决定摄影日期时刻最早的关联图像。与此相对，如图7中虚线所示，“摄影模式”和“人物”的要素信息E31、E33与该4张关联图像I31、I32、I34、I35不同的关联图像I33未被分进组。
最终，将从分成组后的关联图像中所决定的代表关联图像、以及未分进组的关联图像和检索图像作为显示关联图像。
然后，将这样作为显示关联图像的图像数据按摄影顺序每预定数量(例如5个)以缩略图形式显示在检索图像显示画面的关联图像显示区域中。即，图6所示的图像编号“315”的显示关联图像(缩略图I212)由于各要素项目的要素信息与作为检索图像的图像编号“278”的显示关联图像(缩略图I211)的要素信息完全一致，因而被选择并被决定。并且，图像编号“357”、“424”、“491”的各关联图像由于除“摄影模式”以外的要素项目与检索图像的要素信息一致，因而作为关联图像被选出，而且由于各要素项目的要素信息的组合一致，因而被分进一个组。然后，摄影日期时刻是最新的图像编号“491”的关联图像被作为代表关联图像(缩略图I213)。
在阅览过去拍摄的摄影图像的情况下，有时根据该检索图像会想起例如拍入有与检索图像相同的被摄体的摄影图像或拍入有与检索图像相同的摄影场景的摄影图像之类的与检索图像相关联的摄影图像。这里，在对摄影图像设定“日期”、“摄影模式”、“人物”、“被摄体”之类的要素项目的要素信息的情况下，可选出上述的关联图像。然而，在根据针对摄影图像设定的要素信息选出关联图像的情况下，单单将一个或多个要素信息一致的摄影图像作为关联图像，会产生光是将类似的摄影图像作为关联图像来选出的情况。
与此相对，在实施方式1中，如上所述，在显示检索图像时，可将至少任1个要素项目的要素信息与该检索图像一致的摄影图像作为关联图像来提示。并且此时，将各要素项目的要素信息完全一致的关联图像分成一组，并可提示其中的一个关联图像。具体地说，可将显示关联图像决定成，针对在检索图像显示画面中在关联图像显示区域内以缩略图形式显示的预定数量(在实施方式中是5个)的显示关联图像所设定的各要素项目的要素信息的组合不完全相同。
图8是示出实施方式1中的数字照相机1的处理进程的流程图。如图8所示，在数字照相机1中，当操作了电源按钮6而指示电源接通(ON)时(步骤a1：是)，向数字照相机1的各部提供电源，经过内部电路的初始化处理等，移到与所选择的动作模式对应的处理。在选择了检索模式以外的动作模式的情况下(步骤a3：否)，移到与该动作模式对应的模式处理(步骤a5)，之后，回到步骤a3。
然后，当作为动作模式选择了检索模式时(步骤a3：是)，CPU27首先将图4所例示的图像检索画面显示在显示部19上，执行将预定数量的摄影图像的缩略图按摄影顺序配置来进行一览显示的处理(步骤a7)。接下来，受理检索图像的选择操作。然后，在选择了一览显示后的缩略图中的1个、且输入了检索图像的选择操作的情况下(步骤a9：是)，CPU27将所选择的检索图像的图像编号追加到检索历史信息293来进行更新(步骤a11)。之后，进行显示关联图像决定处理(步骤a13)。图9是示出实施方式1中的显示关联图像决定处理的详细处理进程的流程图。
如图9所示，在显示关联图像决定处理中，CPU27首先从要素信息数据库291中读出对检索图像设定的要素信息(步骤b1)。然后，CPU27依次参照在要素信息数据库291内设定的除了摄影图像以外的全部摄影图像的要素信息(步骤b3)，判定有无至少任1个要素项目与在步骤b1所读出的检索图像的要素信息一致的摄影图像。然后，在判定为有的情况下(步骤b5：是)，将该任1个要素项目一致的摄影图像作为关联图像来选出(步骤b7)。
在参照除了检索图像以外的全部摄影图像的要素信息而选出了关联图像的情况下，接下来，CPU27判定有无各要素项目的要素信息的组合相互间一致的关联图像。然后，CPU27在判定为有的情况下(步骤b9：是)，将这些关联图像分成一组，将摄影日期时刻是最新的关联图像作为代表关联图像(步骤b11)。然后，CPU27将在步骤b11所决定的代表关联图像、以及在步骤b11未被分进组的关联图像和检索图像决定为显示关联图像(步骤b13)。之后，回到图8的步骤a13，转移到步骤a15。
另一方面，在步骤b9判定为无的情况下(步骤b9：否)，CPU27将在步骤b7所选出的关联图像和检索图像决定为显示关联图像(步骤b15)。之后，回到图8的步骤a13，转移到步骤a15。
并且，在步骤b5判定为无的情况下(步骤b5：否)，CPU27将检索图像作为显示关联图像(步骤b17)。之后，回到图8的步骤a13，转移到步骤a15。
然后，在步骤a15中，CPU27将图5所例示的检索图像显示画面显示在显示部19上，在画面中央的检索图像显示部上对检索图像进行显示处理，并将从例如摄影日期时刻早的检索图像起预定数量(例如5个)的显示关联图像作为显示对象，进行将其缩略图配置在关联图像显示区域内进行显示的处理。
之后，CPU27进行与用户操作对应的处理。即，如图10所示，在操作了十字按钮8的情况下(步骤a17：是)，CPU27检测关联图像显示区域中的当前的光标位置(步骤a19)。然后，在光标未配置在关联图像显示区域的左端或右端的情况下(步骤a21：否)，CPU27使光标朝通过十字按钮8操作的方向移动，更新关联图像显示区域的显示(步骤a23)。
另一方面，在光标配置在关联图像显示区域的左端或右端的情况下(步骤a21：是)，CPU27根据通过十字按钮8操作的方向(右或左)决定新成为显示对象的预定数量(例如5个)显示关联图像(步骤a25)。然后，CPU27配置显示对象的各显示关联图像的缩略图，更新关联图像显示区域的显示(步骤a27)。
并且，在操作了确定按钮9的情况下(步骤a29：是)，CPU27将光标位置的显示关联图像的图像编号追加到检索历史信息293来进行更新(步骤a31)。之后转移到图8的步骤a13，进行将该显示关联图像用作检索图像的处理。
并且，在输入了历史显示操作的情况下(步骤a33：是)，CPU27进行历史显示处理(步骤a35)。例如，将检索模式下的菜单按钮7的操作分配为历史显示操作，在操作了菜单按钮7的情况下，转移到步骤a35。另外，分配历史显示操作的操作部件不限于菜单按钮7。并且，也可以准备历史显示操作用的专用操作部件。图11是示出历史显示处理的详细处理进程的流程图。
如图11所示，在历史显示处理中，CPU27首先读出在检索历史信息293内设定的图像编号(步骤c1)。在检索历史信息293内未设定有图像编号(是空)、没有在过去作为检索图像进行了画面显示的摄影图像的情况下(步骤c3：否)，进行在显示部19上显示没有检索历史的消息的处理(步骤c5)，之后回到图10的步骤a35，转移到步骤a37。
另一方面，在检索历史信息293内设定有图像编号、有过去作为检索图像进行了画面显示的摄影图像的情况下(步骤c3：是)，CPU27执行根据所读出的图像编号将相应的摄影图像的缩略图按检索顺序进行一览显示的处理(步骤c7)。并且此时，将光标配置在例如摄影顺序是开头的缩略图处。
之后，在操作了十字按钮8的情况下(步骤c9：是)，CPU27使光标移动到配置在通过十字按钮8操作了的方向上的缩略图来更新显示(步骤c11)。并且，CPU27受理摄影图像的选择操作。然后，在选择了在步骤c7进行了一览显示的缩略图中的1个、且输入了摄影图像的选择操作的情况下(步骤c13：是)，回到图10的步骤a35，转移到步骤a37。在未对摄影图像进行选择操作的情况下(步骤c13：否)，转移到步骤c15。
并且，在输入了历史显示结束操作的情况下(步骤c15：是)，回到图10的步骤a35，转移到步骤a37。在未输入历史显示结束操作的情况下(步骤c15：否)，回到步骤c9。
然后，在图10的步骤a37中，CPU27根据在步骤a35的历史显示处理中是否有摄影图像的选择操作而使处理分支。在有摄影图像的选择操作的情况下(步骤a37：是)，CPU27转移到图8的步骤a13，进行将该摄影图像作为检索图像的处理，之后转移到步骤a15。在没有摄影图像的选择操作的情况下(步骤a37：否)，转移到步骤a39。
在步骤a39中，CPU27判定动作模式的切换操作。然后，在动作模式被切换到摄影模式或再现模式等其他动作模式的情况下(步骤a39：是)，转移到图8的步骤a5，进行与该动作模式对应的模式处理。在未切换动作模式的情况下(步骤a39：否)，移到步骤a41。
然后，在步骤a41中，CPU27监视电源断开指示，在操作了电源按钮6而指示了电源断开(OFF)的情况下(步骤a41：是)，结束处理。在该情况下，停止向数字照相机1的各部的电源供给，数字照相机1转移到电源断开状态。在未指示电源断开的情况下(步骤a41：否)，回到步骤a17，受理用户操作。
如以上说明那样，根据实施方式1，可从除了检索图像以外的全部摄影图像中选出至少任1个要素项目与检索图像的要素信息一致的摄影图像作为关联图像。并且，可根据对所选出的关联图像设定的要素信息，将各要素项目的要素信息的组合一致的关联图像分成一组，可将其中的1方(例如摄影日期时刻最新的关联图像)作为代表关联图像。然后，可将代表关联图像、以及未被分进组的关联图像和检索图像作为显示关联图像，与检索图像一起进行画面显示。因此，取得了可效率良好地检索与检索图像相关联的关联图像的效果。
下面，说明实施方式2。图12是说明实施方式2中的显示关联图像决定原理的图。这里，在图12中，示出记录在记录部20内的摄影图像中的成为关联图像的摄影图像(至少任1个要素项目与未图示的检索图像的要素信息一致的摄影图像)。另外，图12的关联图像与在实施方式1中图7所例示的关联图像相同，示出图像编号“147”、“195”、“281”、“618”、“733”的摄影图像的要素信息。
在上述的实施方式2中，在选择了检索图像的时间点选出该检索图像的关联图像并决定显示关联图像。然后，根据检索图像的选择操作和十字按钮8的操作如上所述从事先决定好的显示关联图像中决定成为显示对象的显示关联图像。与此相对，在实施方式2中，根据检索图像的选择操作和十字按钮8的操作每次决定显示关联图像来进行显示。具体地说，在决定显示关联图像时，根据选出方向依次将各摄影图像用作参照对象，在成为参照对象的摄影图像的至少任1个要素项目与未图示的检索图像的要素信息一致的情况下，将该摄影图像作为关联图像来选出。然后，在对所选出的关联图像设定的各要素项目的要素信息的组合与已决定为本次要进行显示的显示关联图像的要素信息不一致的情况下，将该关联图像用作显示关联图像。在一致的情况下，将所选出的关联图像分组成其显示关联图像。
这里，在根据检索图像的选择操作决定显示关联图像的情况下，将选出方向作为摄影顺序的方向，按摄影顺序将各摄影图像依次作为参照对象。另一方面，在根据十字按钮8的操作决定显示关联图像的情况下，根据十字按钮8的操作方向(右或左)决定选出方向。即，在十字按钮8的操作方向是右方向的情况下，将选出方向作为摄影顺序的方向，将与上次显示在关联图像显示区域内的显示关联图像的摄影日期时刻相比摄影顺序在后的各摄影图像依次作为参照对象。另一方面，在十字按钮8的操作方向是左方向的情况下，将选出方向作为摄影顺序的反方向，将与上次显示在关联图像显示区域内的显示关联图像的摄影日期时刻相比摄影顺序在前的各摄影图像依次作为参照对象。
例如，假定依次参照摄影图像的要素信息，在将图12所示的图像编号“147”的摄影图像作为参照对象时，将该摄影图像作为关联图像Ir41来选出。然后，假定已决定本次要进行显示的显示关联图像1个也未决定。在该情况下，将关联图像Ir41作为显示关联图像Id41。并且，假定接下来将图像编号“195”的摄影图像作为关联图像Ir42来选出。这里，对关联图像Ir42设定的各要素项目的要素信息的组合与先前已决定的显示关联图像Id41的要素信息一致。在该情况下，将关联图像Ir42分到与显示关联图像Id41相同的组G41来进行分组。
并且，假定接下来将图像编号“281”的摄影图像作为关联图像Ir43来选出。在该情况下也一样，将对关联图像Ir43设定的各要素项目的要素信息的组合与先前已决定的显示关联图像Id41的要素信息进行比较。这里，如图12中虚线所示，“摄影模式”和“人物”的要素信息E41、E43与显示关联图像Id41的要素信息不同，不一致。因此，将关联图像Ir43作为显示关联图像Id42。
图13是示出实施方式2中的数字照相机1的处理进程的流程图。另外，在图13中，对于与实施方式1相同的处理过程标注相同标号。在实施方式2中，如图13所示，在检索模式下输入了检索图像的选择操作的情况下(步骤a9：是)，CPU27将所选择的检索图像的图像编号追加到检索历史信息293来进行更新(步骤a11)，之后接下来进行显示关联图像决定处理(步骤d13)。图14是示出实施方式2中的显示关联图像决定处理的详细处理进程的流程图。
如图14所示，在显示关联图像决定处理中，CPU27首先从要素信息数据库291中读出对检索图像设定的要素信息(步骤e1)。然后，CPU27将在记录部20内记录有图像数据、且在要素信息数据库291内设定有要素信息的各摄影图像根据选出方向依次作为参照对象(步骤e3)。在选择了检索图像、且作为图13的步骤d13执行本处理的情况下，将选出方向作为摄影顺序的方向，从摄影日期时刻最早的摄影图像开始将各摄影图像依次作为参照对象。另一方面，在后述的图15的步骤a17操作了十字按钮8、且作为图15的步骤d25执行本处理的情况下，根据与十字按钮8的操作方向(右或左)对应的选出方向，将各摄影图像依次作为参照对象。
然后，CPU27根据在步骤e3作为参照对象的摄影图像的要素信息，判定至少任1个要素项目与在步骤e1所读出的检索图像的要素信息是否一致。在不一致的情况下(步骤e5：否)，转移到步骤e15。然后，在一致的情况下(步骤e5：是)，CPU27将参照对象的摄影图像作为关联图像来选出(步骤e7)。
接下来，在有已决定本次要进行显示的显示关联图像、且有各要素项目的要素信息的组合与在步骤e7所选出的关联图像一致的显示关联图像的情况下(步骤e9：是)，CPU27将该关联图像分组成相应的已决定的显示关联图像(步骤e11)。之后转移到步骤e15。在没有各要素项目的要素信息的组合一致的显示关联图像的情况下(步骤e9：否)，CPU27将该关联图像决定为显示关联图像(步骤e13)。之后转移到步骤e15。
然后，在步骤e15中，CPU27判定是否决定了预定数量n(例如n＝5)的显示关联图像，在已决定了预定数量n(例如n＝5)的显示关联图像的情况下(步骤e15：是)，回到图13的步骤d13，之后转移到步骤d15。
另一方面，在还未决定预定数量n(例如n＝5)的显示关联图像的情况下(步骤e15：否)，接下来CPU27判定成为参照对象的摄影图像的有无。在选出方向是摄影顺序的方向时，在本次已成为参照对象的摄影图像的摄影日期时刻是最新的情况下不存在下次要成为参照对象的摄影图像(步骤e17：否)，因而回到图13的步骤d13，转移到步骤a15。或者，在选出方向是与摄影顺序相反的方向时，在本次已成为参照对象的摄影图像的摄影日期时刻是最早的情况下不存在下次要成为参照对象的摄影图像(步骤e17：否)，回到图13的步骤d13，转移到步骤d15。在存在要成为参照对象的摄影图像的情况下(步骤e17：是)，回到步骤e3，进行将顺序上的下一个摄影图像作为参照对象的处理。
然后，在步骤d15中，CPU27将检索图像显示画面显示在显示部19上，在画面中央的检索图像显示部上对检索图像进行显示处理，并执行将在步骤d13的显示关联图像决定处理中已决定为要在本次进行显示的显示关联图像的缩略图配置在关联图像显示区域内并进行显示的处理。
之后，CPU27进行与用户操作对应的处理。在实施方式2中，如图15所示，在操作了十字按钮8(步骤a17：是)、且在步骤a19检测出的当前的光标位置是关联图像显示区域的左端或右端的情况下(步骤a21：是)，转移到步骤d25。然后，在步骤d25中，CPU27将通过十字按钮8操作的方向(右或左)作为选出方向进行显示关联图像决定处理。该显示关联图像决定处理与图14所示的处理进程一样地进行。然后，CPU27配置在步骤d25的显示关联图像决定处理中已决定为要在本次进行显示的显示关联图像的缩略图，更新关联图像显示区域的显示(步骤d27)。
并且，在操作了确定按钮9的情况下(步骤a29：是)，CPU27将光标位置的显示关联图像的图像编号追加到检索历史信息293来进行更新(步骤a31)，之后转移到图13的步骤d13，进行将该显示关联图像用作检索图像的处理。
并且，在输入了历史显示操作的情况下(步骤a33：是)，CPU27进行历史显示处理(步骤a35)。然后，在步骤a35的历史显示处理中有摄影图像的选择操作的情况下(步骤a37：是)，CPU27转移到图13的步骤d13，进行将该摄影图像作为检索图像的处理。
如以上说明那样，根据实施方式2，在显示检索图像时，可将至少任1个要素项目的要素信息与该检索图像一致的摄影图像作为关联图像来提示。并且此时，将各要素项目的要素信息完全一致的关联图像分成一组，并可提示其中的一个。因此，可取得与实施方式1相同的效果。
下面，说明实施方式3。图16是示出在实施方式3中在检索模式时显示在显示部19上的检索图像显示画面的一例的图。检索图像显示画面的画面结构与实施方式1相同，具有检索图像显示部W61和关联图像显示区域E61。并且，在图16中，在关联图像显示区域E61内一并示出作为缩略图I611～I615而配置的各显示关联图像的要素信息的一例。
并且，图17是说明实施方式3中的显示关联图像的决定原理的图。在图17中，示出从记录在记录部20内的摄影图像中所选出的关联图像Ir71～Ir77(至少任1个要素项目与未图示的检索图像的要素信息一致的摄影图像)的一例。
在实施方式3中，在根据检索图像的选择操作和十字按钮8的操作决定显示关联图像时，首先，根据选出方向将预定数量n(例如n＝5)的关联图像作为提取关联图像来提取。然后，在针对所提取的提取关联图像所设定的各要素项目的要素信息的组合完全一致的情况下，从与最末尾(第n个：在图17中是右端第5个)的提取关联图像相比选出顺序在后的关联图像中搜索要素信息的组合与各提取关联图像不同的关联图像。这里，与实施方式2一样，在根据检索图像的选择操作决定显示关联图像的情况下，将选出方向用作摄影顺序的方向。另一方面，在根据十字按钮8的操作决定显示关联图像的情况下，根据十字按钮8的操作方向(右或左)决定选出方向。即，在十字按钮8的操作方向是右方向的情况下，将选出方向用作摄影顺序的方向，在十字按钮8的操作方向是左方向的情况下，将选出方向用作摄影顺序的反方向。
例如，如图17所示，假定从所选出的关联图像Ir71～Ir77中提取关联图像Ir71～Ir75作为提取关联图像。这里，针对各提取关联图像Ir71～Ir75所设定的各要素项目的要素信息的组合完全一致。因此，依次参照与最末尾的提取关联图像Ir75相比选出顺序在后的关联图像Ir76、Ir77…的要素信息。首先，参照选出顺序在提取关联图像Ir75的后面一个的关联图像Ir76的要素信息，将其与提取关联图像Ir71～Ir75的要素信息进行比较，而关联图像的Ir76的各要素项目的要素信息的组合与各提取关联图像Ir71～Ir75一致。因此，参照选出顺序在再后面一个的关联图像Ir77。该关联图像Ir77如图所17中虚线所示，“摄影模式”和“人物”的要素信息E71、E73与各提取关联图像Ir71～Ir75的要素信息不同，不一致。其结果，搜索出关联图像Ir77。
在这样搜索出要素信息的组合与各提取关联图像不同的关联图像Ir77的情况下，将第1～第3个提取关联图像Ir71～Ir73分别作为第1～第3个显示关联图像Id71～Id73。并且，将从第5(n)个提取关联图像到搜索位置的前面一个的关联图像(在图17的例子中是提取关联图像Ir75和关联图像Ir76)分配到与第4(n-1)个提取关联图像Ir74相同的组G71内来进行分组，将例如摄影日期时刻最新的关联图像作为第4个显示关联图像Id74。然后，将搜索位置的关联图像Ir77作为第5个显示关联图像Id75。
然后，这样被作为显示关联图像的图像数据以缩略图形式显示在检索图像显示画面的关联图像显示区域中。即，如图16所示，在关联图像显示区域E61中以缩略图形式显示的关联图像中、左侧4个缩略图I611～I614的各显示关联图像各自的各要素项目的要素信息的组合分别一致。与此相对，右端的缩略图I615的显示关联图像的各要素项目的要素信息与该4个缩略图I611～I614的要素信息不同。这样，在实施方式3中，将配置在关联图像显示区域E61内的各缩略图的显示关联图像中、各要素项目的要素信息的组合相互一致的显示关联图像的数量限制为4个。然后，决定成使显示关联图像中的至少1个要素信息的组合与其他显示关联图像的各要素项目的要素信息的组合不同。
图18是示出实施方式3中的数字照相机1的处理进程的流程图。另外，在图18中，对于与实施方式1相同的处理步骤，标注相同标号。在实施方式3中，如图18所示，当在检索模式下输入了检索图像的选择操作的情况下(步骤a9：是)，CPU27将所选择的检索图像的图像编号追加到检索历史信息293来进行更新(步骤a11)。之后，从要素信息数据库291中读出对检索图像所设定的要素信息(步骤g13)。
接下来，CPU27根据选出方向依次参照在记录部20内记录有图像数据、且在要素信息数据库291内设定有要素信息的全部摄影图像(步骤g15)。然后，选出至少任1个要素项目与在步骤g13所读出的检索图像的要素信息一致的摄影图像作为关联图像(步骤g17)。另外，在作为在选择了检索图像的情况下的处理而执行本处理的情况下，将选出方向用作摄影顺序的方向，依次参照各摄影图像。另一方面，在作为在后述的图20的步骤a17中操作了十字按钮8的情况下的处理而执行本处理的情况下，根据与十字按钮8的操作方向(右或左)对应的选出方向，依次参照各摄影图像。
接下来，CPU27进行显示关联图像决定处理(步骤g19)。图19是示出实施方式3中的显示关联图像决定处理的详细处理进程的流程图。如图19所示，在显示关联图像决定处理中，首先，CPU27根据在图18的步骤g17所选出的关联图像，并根据选出方向提取预定数量n(例如n＝5)的关联图像作为提取关联图像(步骤h1)。具体地说，在根据检索图像的选择操作而决定显示关联图像的情况下，按选出方向即摄影顺序提取预定数量的关联图像。另一方面，在根据十字按钮8的操作而决定显示关联图像的情况下，根据与十字按钮8的操作方向(右或左)对应的选出方向，在选出方向是摄影顺序的情况下，提取与上次在关联图像显示区域内显示的显示关联图像的摄影日期时刻相比摄影顺序在后的各关联图像。另一方面，在选出方向是摄影顺序的反方向的情况下，提取与上次在关联图像显示区域内显示的显示关联图像的摄影日期时刻相比摄影顺序在前的各关联图像。
接下来，CPU27判定所提取的各提取关联图像的要素信息的组合是否完全一致。然后，CPU27在不一致、且要素信息的组合1个也不相同的情况下(步骤h3：否)，转移到步骤h15，将在步骤h1所提取的提取关联图像作为显示关联图像。之后，回到图18的步骤g19，转移到步骤g21。
另一方面，在步骤h3判定为一致的情况下(在各要素项目的要素信息相互完全一致的情况下)(步骤h3：是)，CPU27根据选出方向依次参照与最末尾(第n个)的提取关联图像相比选出顺序在后的关联图像的要素信息，搜索要素信息的组合与各提取关联图像不同的关联图像(步骤h5)。然后，在搜索到的情况下(步骤h7：是)，CPU27将从第n个提取关联图像到检索位置的前面一个的关联图像与第n-1个提取关联图像分成一组，将例如摄影日期时刻最新的关联图像作为第n-1个提取关联图像来进行置换(步骤h9)。接下来，CPU27将搜索位置的关联图像作为第n个提取关联图像来进行置换(步骤h11)。
之后转移到步骤h15，CPU27将在步骤h9和步骤h11中第n-1个和第n个被置换了的提取关联图像作为显示关联图像。之后，回到图18的步骤g19，转移到步骤g21。
并且，在未搜索出要素信息不同的关联图像的情况下(步骤h7：否)，在显示部19上进行要显示的关联图像(显示关联图像)的要素信息完全相同的消息的显示处理(步骤h13)。之后，转移到步骤h15，将在步骤h1所提取的提取关联图像作为显示关联图像。之后，回到图18的步骤g19，转移到步骤g21。
然后，在步骤g21中，CPU21将图16所例示的检索图像显示画面显示在显示部19上，在画面中央对检索图像进行显示处理，并执行将在步骤g19的显示关联图像决定处理中已决定为本次要进行显示的显示关联图像的缩略图配置在关联图像显示区域内并进行显示的处理。
之后，CPU27进行与用户操作对应的处理。在实施方式3中，如图20所示，在操作了十字按钮8(步骤a17：是)、且在步骤a19检测出的当前的光标位置是关联图像显示区域的左端或右端的情况下(步骤a21：是)，转移到步骤g25。然后，在步骤g25中，CPU27将通过十字按钮8操作的方向(右或左)作为选出方向进行显示关联图像决定处理。该显示关联图像决定处理与图19所示的处理进程一样进行。然后，CPU27配置在步骤g25的显示关联图像决定处理中已决定本次要进行显示的显示关联图像的缩略图，更新关联图像显示区域的显示(步骤g27)。
并且，在操作了确定按钮9的情况下(步骤a29：是)，CPU27将光标位置的显示关联图像的图像编号追加到检索历史信息293来进行更新(步骤a31)，之后转移到图18的步骤g13，进行将该显示关联图像作为检索图像的处理。
并且，在输入了历史显示操作的情况下(步骤a33：是)，CPU27进行历史显示处理(步骤a35)。然后，在步骤a35的历史显示处理中有摄影图像的选择操作的情况下(步骤a37：是)，CPU27转移到图18的步骤g13，进行将该摄影图像作为检索图像的处理。
如以上说明那样，根据实施方式3，在显示检索图像时，可将至少任1个要素项目的要素信息与该检索图像一致的摄影图像作为关联图像来提示。此时，即使在要素信息的组合一致的关联图像连续的情况下，也能在检索图像显示画面的关联图像显示区域中，提示要素信息的组合不同的至少1个关联图像。因此，可取得与实施方式1相同的效果。
下面，说明实施方式4。图21是示出在实施方式4中在检索模式时显示在显示部19上的检索图像显示画面的一例的图。检索图像显示画面的画面结构与实施方式1相同，具有检索图像显示部W81和关联图像显示区域E81。并且，在图21中，一并示出与在关联图像显示区域E81内配置为缩略图I81的图像编号“624”的显示关联图像分到同一组、且成为不显示的图像编号“625”、“626”、“627”的各关联图像。
在实施方式4中，对各连拍图像赋予例如连拍编号，以便能识别在连拍模式下进行了连拍摄影的1组连拍图像。然后，在将这样被赋予了连拍编号的连拍图像作为关联图像来选出的情况下，将这些连拍图像分成一组，可将其中的1方(例如摄影日期时刻最早的开头的连拍图像)用作代表关联图像。例如在图21中，将连拍图像即图像编号“624”、“625”、“626”、“627”这4张关联图像中、图像编号“624”的开头的连拍图像用作代表关联图像。
作为处理进程，取代在实施方式1中图8所示的步骤a13的显示关联图像决定处理，进行图22所示的显示关联图像决定处理。另外，在图22中，对于与实施方式1相同的处理步骤，标注相同标号。
在实施方式4的显示关联图像决定处理中，如图22所示，CPU27在步骤b7选出了关联图像之后，判定有无在连拍模式下所拍摄的连拍图像。然后，当在步骤b7所选出的关联图像中包含有连拍图像的情况下(步骤i9：是)，CPU27将这些连拍图像分成一组，例如将开头的连拍图像用作代表关联图像(步骤i11)。然后，CPU27将在步骤i11所决定的代表关联图像、以及在步骤i11未被分进组的关联图像和检索图像决定为显示关联图像(步骤i13)。
另一方面，在步骤i9判定为无连拍图像的情况下，CPU27将在步骤b7所选出的关联图像和检索图像决定为显示关联图像(步骤i15)。
如以上说明那样，根据实施方式4，在显示检索图像时，可将至少任1个要素项目的要素信息与该检索图像一致的摄影图像作为关联图像来提示。并且，在所选出的关联图像中包含有连拍图像的情况下，可将这些连拍图像分成一组，将其中的1方(例如摄影日期时刻最早的连拍图像)用作代表关联图像。因此，可取得与实施方式1相同的效果。
另外，在上述实施方式4中，将在连拍模式下进行了连拍摄影的1组连拍图像分成一组，通过将其中的1方用作代表关联图像来决定显示关联图像。与此相对，也可以根据摄影日期时刻信息将摄影间隔是预定值(例如3秒)以下时所拍摄的摄影图像作为连续拍摄的连续图像来分成一组。然后，可以通过将其中的1方用作代表关联图像来决定显示关联图像。
并且，在上述的各实施方式中，作为对摄影图像设定的要素信息的要素项目，例示出“日期”、“摄影模式”、“人物”、“被摄体”这4种，然而不限于此，也可以适当变更要设定的要素项目的数量。
例如，可以通过对图像数据进行图像处理来提取运动会或生日、圣诞节之类的事件的种类，或者通过根据摄影日期时刻等进行判别来提取，并设定为要素信息。并且，可以使用公知的图像识别处理来识别图像数据中的脸的性别和表情、年龄，并设定为要素信息。或者，可以预先登记人物的脸。然后，可以使用公知的图像识别处理来识别拍入于图像数据中的登记人物的脸，将所识别出的登记人物设定为要素信息。或者，可以根据像素值判定各摄影图像的亮度程度(亮/暗)或色调来识别图像的气氛，设定为要素信息。
并且，也可以根据例如用户操作以可选择的方式构成要设定的要素信息的要素项目。然后，在受理了由用户进行的要素项目的选择操作的情况下，可以根据记录在记录部20内的图像数据，从各图像数据中识别、提取进行了选择操作的要素项目的要素信息并设定。
并且，在上述的各实施方式中，按时间序列顺序(摄影顺序)选出关联图像来决定显示关联图像，并将其显示在检索图像显示画面的关联图像显示区域内。与此相对，可以根据例如用户操作预先选择优先位次高的要素信息，从包含优先位次被设定得高的要素信息的摄影图像中依次选出关联图像。在该情况下，CPU27作为优先位次设定部，根据用户操作设定优先位次高的要素信息，将设定信息记录在闪存29内。这里假定例如作为优先位次高的要素信息，选择了作为要素项目“摄影模式”的要素信息的“肖像模式”。在该情况下，CPU27先参照“摄影模式”设定了“肖像模式”的摄影图像的要素信息来选出关联图像。或者，假定作为变形例在将上述的图像的气氛作为要素信息来针对各摄影图像进行设定的情况下，选择“明亮”作为优先位次高的要素信息。在该情况下，CPU27先参照作为要素信息被设定了“明亮”的摄影图像的要素信息来选出关联图像。在如上述的各实施方式那样按时间序列顺序选出关联图像来决定显示关联图像的情况下，会发生这样的情况：要阅览按时间序列顺序在后面的关联图像需要花费时间。根据本变形例，由于可适当设定优先位次高的要素信息，因而可效率更加良好地检索与检索图像相关联的关联图像。
并且，本发明不限于上述的各实施方式，通过将各实施方式中公开的多个构成要素适当组合，可形成各种发明。例如，可以从实施方式所示的全部构成要素中去除若干构成要素来形成。或者，可以将不同的实施方式所示的构成要素适当组合来形成。
并且，在上述的各实施方式中，说明了将本发明的图像检索装置应用于数字照相机的情况，然而不限于此。例如，可以应用于带有照相机的便携电话机和游戏机、音乐播放器、录音装置、笔记本个人计算机等。并且，图像检索装置不限于具有摄像部100(照相机)的结构的装置，还可以应用于例如记录有图像、以及针对图像所设定的各要素项目的要素信息(要素信息数据库)的个人计算机。
根据本发明，可根据与各图像数据相关的各要素项目的要素信息，选出至少任1个要素信息与检索图像数据的要素信息一致的预定数量的关联图像数据，以使该预定数量的关联图像数据各自的要素信息的组合至少有1个不同。因此，取得可效率良好地检索与检索图像数据相关联的关联图像数据的效果。

Claims (10)

1.一种图像检索装置，该图像检索装置检索与所选择的图像数据相关联的其他图像数据，该图像检索装置的特征在于具有：
图像记录部，其记录多个图像数据；
要素信息记录部，其记录与记录在所述图像记录部内的各图像数据相对应的、与所述各图像数据相关的多个要素项目的要素信息；
检索图像选择部，其从记录在所述图像记录部内的图像数据中选择检索图像数据；
检索图像显示处理部，其进行将由所述检索图像选择部所选择的检索图像数据显示在显示部上的处理；
关联图像选出部，其在选出与所述各图像数据相对应的各要素项目的要素信息中的至少任1个要素信息同与所述检索图像数据相对应的要素信息一致的预定数量的关联图像数据时，以在该预定数量的关联图像数据中包含至少1个所述各要素项目的要素信息的组合不同的图像数据的方式来进行选出；以及
关联图像显示处理部，其进行将由所述关联图像选出部所选出的预定数量的关联图像数据作为显示对象显示在所述显示部上的处理。
2.根据权利要求1所述的图像检索装置，其特征在于，所述关联图像选出部限制与所述各图像数据相对应的所述各要素项目的要素信息中的至少任1个要素信息同所述检索图像数据的要素信息一致的图像数据中、所述要素信息的组合一致的图像数据的数量，来选出所述预定数量的关联图像数据。
3.根据权利要求2所述的图像检索装置，其特征在于，所述关联图像选出部选出与所述各图像数据相对应的所述各要素项目的要素信息中的至少任1个要素信息同所述检索图像数据的要素信息一致的预定数量的关联图像数据，在该选出的预定数量的关联图像数据的所述要素信息的组合全部一致的情况下，将所述预定数量的关联图像数据中的至少1个关联图像数据置换为所述要素信息的组合与已选出的所述关联图像数据不同的别的关联图像数据来进行选出。
4.根据权利要求1所述的图像检索装置，其特征在于，所述关联图像选出部执行如下处理：将与所述各图像数据相对应的所述各要素项目的要素信息中的至少任1个要素信息同所述检索图像数据的要素信息一致的图像数据中、所述要素信息的组合一致的图像数据分配到同一组来进行分组，在进行了该分组的情况下，将分配到同一组的图像数据中的1个图像数据作为所述关联图像数据来选出。
5.根据权利要求1所述的图像检索装置，其特征在于，所述关联图像显示处理部与由所述检索图像显示处理部进行的所述检索图像数据的显示处理同时，对所述预定数量的关联图像数据进行显示处理。
6.根据权利要求1所述的图像检索装置，其特征在于，所述检索图像选择部根据由所述关联图像显示处理部进行了显示处理的所述关联图像数据的选择操作，将被进行了该选择操作的关联图像数据选择为新的检索图像数据。
7.根据权利要求1所述的图像检索装置，其特征在于，所述图像检索装置具有优先位次设定部，该优先位次设定部设定所述各要素项目的要素信息的优先位次，
所述关联图像选出部优先参照记录在所述图像记录部内的图像数据中、包含由所述优先位次设定部设定了高的优先位次的要素信息的图像数据，来选出所述预定数量的关联图像数据。
8.根据权利要求1所述的图像检索装置，其特征在于，所述关联图像显示处理部使所述预定数量的关联图像数据排列来进行显示处理，
所述图像检索装置具有操作部，该操作部用于将所述预定数量的关联图像数据中的处于选择状态的关联图像数据依次变更为排列在相邻位置的其他关联图像数据，
所述检索图像选择部在所述关联图像数据的选择操作时将选择状态的关联图像数据选择为所述新的检索图像数据。
9.根据权利要求1所述的图像检索装置，其特征在于，所述图像检索装置具有：
检索历史记录部，其记录由所述检索图像选择部过去选择为检索图像数据的图像数据的检索历史；
检索历史显示处理部，其根据记录在所述检索历史记录部内的检索历史，进行将所述过去被选择为检索图像数据的图像数据显示在显示部上的处理；以及
显示切换处理部，其切换由所述检索图像显示处理部进行的所述检索图像数据的显示处理和由所述检索历史显示处理部进行的所述过去被选择为检索图像数据的图像数据的显示处理。
10.一种图像检索方法，该图像检索方法检索与所选择的图像相关联的其他图像，所述图像检索方法的特征在于包含以下步骤：
从所记录的多个图像中选择检索图像，
进行显示所选择的所述检索图像的处理，
当根据与所记录的各图像相对应的、和所述各图像相关的多个要素项目的要素信息，选出与所述各图像相对应的各要素项目的要素信息中的至少任1个要素信息同与所述检索图像相对应的要素信息一致的预定数量的关联图像时，以在该预定数量的关联图像中包含至少1个所述各要素项目的要素信息的组合不同的图像的方式来进行选出，
进行显示所选出的所述预定数量的关联图像的处理。
CN2010101685366A 2009-05-11 2010-05-11 图像检索装置和图像检索方法 Expired - Fee Related CN101887447B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009-114544 2009-05-11
JP2009114544 2009-05-11

Publications (2)

Publication Number Publication Date
CN101887447A CN101887447A (zh) 2010-11-17
CN101887447B true CN101887447B (zh) 2012-07-25

Family

ID=43063117

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010101685366A Expired - Fee Related CN101887447B (zh) 2009-05-11 2010-05-11 图像检索装置和图像检索方法

Country Status (3)

Country Link
US (1) US20100287502A1 (zh)
JP (1) JP2010287220A (zh)
CN (1) CN101887447B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012008643A (ja) * 2010-06-22 2012-01-12 Fuji Xerox Co Ltd 文書処理装置、縮小画像生成装置、縮小画像表示装置及びプログラム
JP2012065129A (ja) * 2010-09-16 2012-03-29 Panasonic Corp 撮像装置
US20120086723A1 (en) * 2010-10-08 2012-04-12 John Fairfield Dynamic Cropping of Visual Content
JP5737977B2 (ja) * 2011-02-03 2015-06-17 キヤノン株式会社 画像再生装置、その画像再生方法およびプログラム
JP5785453B2 (ja) 2011-07-08 2015-09-30 キヤノン株式会社 表示制御装置及び表示制御方法、プログラム並びに記憶媒体
JP2013114485A (ja) * 2011-11-29 2013-06-10 Ge Medical Systems Global Technology Co Llc 医療用画像表示システム
KR101812585B1 (ko) * 2012-01-02 2017-12-27 삼성전자주식회사 Ｕｉ 제공 방법 및 이를 적용한 영상 촬영 장치
USD754161S1 (en) 2012-11-26 2016-04-19 Nero Ag Device with a display screen with graphical user interface
US20140149932A1 (en) * 2012-11-26 2014-05-29 Nero Ag System and method for providing a tapestry presentation
US9110943B2 (en) 2013-01-31 2015-08-18 Google Inc. Identifying an image for an entity
JP5532180B1 (ja) * 2013-10-03 2014-06-25 富士ゼロックス株式会社 画像処理装置及びプログラム
CN105338237A (zh) * 2014-08-06 2016-02-17 腾讯科技（深圳）有限公司 图像处理方法及装置
JP6149015B2 (ja) 2014-09-10 2017-06-14 富士フイルム株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
CN104794220A (zh) * 2015-04-28 2015-07-22 百度在线网络技术（北京）有限公司 信息搜索方法和信息搜索装置
CN105243153A (zh) * 2015-10-23 2016-01-13 广州飞米电子科技有限公司 照片分类方法、拍摄模式的识别方法及装置、电子设备
CN111177450B (zh) * 2019-12-31 2021-03-23 视辰信息科技(上海)有限公司 一种图像检索云识别方法、系统及计算机可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1760971A (zh) * 2004-10-13 2006-04-19 奥林巴斯株式会社 图像显示装置、照相机及它们的显示方法
CN101408888A (zh) * 2007-10-09 2009-04-15 奥林巴斯映像株式会社 图像处理装置、检索装置和照相机

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5123088A (en) * 1988-06-27 1992-06-16 Nippon Telegraph And Telephone Corp. Method and apparatus for creating and displaying navigators for guiding to related image information
GB9022250D0 (en) * 1990-10-12 1990-11-28 Glaxo Group Ltd Medicaments
US6667751B1 (en) * 2000-07-13 2003-12-23 International Business Machines Corporation Linear web browser history viewer
JP4547214B2 (ja) * 2004-09-10 2010-09-22 富士フイルム株式会社 電子アルバム表示システム、電子アルバム表示方法、及びプログラム
JP4792985B2 (ja) * 2006-01-18 2011-10-12 カシオ計算機株式会社 カメラ装置、撮影条件設定方法、及び、プログラム
JP4914778B2 (ja) * 2006-09-14 2012-04-11 オリンパスイメージング株式会社 カメラ
JP2008217117A (ja) * 2007-02-28 2008-09-18 Fujifilm Corp 画像検索方法及び画像検索システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1760971A (zh) * 2004-10-13 2006-04-19 奥林巴斯株式会社 图像显示装置、照相机及它们的显示方法
CN101408888A (zh) * 2007-10-09 2009-04-15 奥林巴斯映像株式会社 图像处理装置、检索装置和照相机

Also Published As

Publication number Publication date
US20100287502A1 (en) 2010-11-11
JP2010287220A (ja) 2010-12-24
CN101887447A (zh) 2010-11-17

Similar Documents

Publication Publication Date Title
CN101887447B (zh) 图像检索装置和图像检索方法
CN103957356B (zh) 电子设备以及电子设备的图像取得方法
CN101355631B (zh) 图像处理装置及数字式照相机
CN101567976B (zh) 图像拍摄设备
US6704465B2 (en) Image processing apparatus and its processing method, storage medium, and image file format
CN101496395B (zh) 摄像设备和图像显示控制方法
CN101676913A (zh) 图像检索装置、数字照相机以及图像检索方法
CN101790035A (zh) 照相机、图像显示装置、图像显示方法以及程序
EP0920184B1 (en) Electronic camera system
US20120047459A1 (en) Information processing apparatus
CN103973965A (zh) 图像拍摄设备、图像拍摄方法以及图像拍摄程序
CN113099119B (zh) 摄像装置以及图像处理方法
JP4413285B2 (ja) 電子カメラ
US20020057294A1 (en) Information processing apparatus
US20020021362A1 (en) Information processing apparatus and recording medium
US7177860B2 (en) Information processing system, method and recording medium for controlling same
CN103581512B (zh) 拍摄装置和方法
US7254776B2 (en) Information processing apparatus
JP6704301B2 (ja) 撮像装置、及び撮像表示システム
JP7101285B2 (ja) 表示装置
CN103095975B (zh) 摄像装置、外部设备、摄像装置系统、语言设定方法及程序
JP4571111B2 (ja) 情報処理装置および記録媒体
CN104159018B (zh) 图像获取装置及其图像处理方法
JP5564897B2 (ja) 画像表示装置
JP2009302886A (ja) 撮像装置、撮像制御プログラム、画像再生装置及び画像再生制御プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151125

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan, Japan

Patentee before: Olympus Imaging Corp.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120725

Termination date: 20210511

CF01 Termination of patent right due to non-payment of annual fee