CN1551017A - 图像检索装置、方法、程序及存储有该程序的存储介质 - Google Patents

图像检索装置、方法、程序及存储有该程序的存储介质 Download PDF

Info

Publication number
CN1551017A
CN1551017A CNA2004100422368A CN200410042236A CN1551017A CN 1551017 A CN1551017 A CN 1551017A CN A2004100422368 A CNA2004100422368 A CN A2004100422368A CN 200410042236 A CN200410042236 A CN 200410042236A CN 1551017 A CN1551017 A CN 1551017A
Authority
CN
China
Prior art keywords
image
retrieval
classification
preserve
similarity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2004100422368A
Other languages
English (en)
Inventor
和田利昭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN1551017A publication Critical patent/CN1551017A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
    • G06V10/7515Shifting the patterns to accommodate for positional errors

Abstract

本发明提供一种图像检索装置、图像检索方法及图像检索程序。图像检索装置具有:图像输入单元(11);求得表示图像的特征的属性值的单元(18);至少保存了一个图像和属性值的单元(8);从所保存的图像中检索与参照图像相似的图像的单元(25);将被检索出的图像的缩小图像进行显示的单元(13);使图像检索的要求者从所显示的缩小图像中选择与参照图像相似的图像的单元(14);对被保存的图像设置新的类别,对每个被选择的图像将表示和参照图像相似的符号赋予该组的单元(23);与类别相对应,赋予表示相似的可靠度的数值的单元(20)。由此,不需要进行烦琐的关键字赋予操作,便可以进行简单且遗漏少的非常精确的图像检索。

Description

图像检索装置、方法、程序及存储有该程序的存储介质
技术领域
本发明涉及从存储有图像的图像数据库检索出所希望的图像的图像检索装置、图像检索方法、图像检索程序及存储了该程序的存储介质。
背景技术
在检索图像的方法中,从大的方面来分,公知有以下两种方法。
第1种方法为:人们预先对图像赋予反映其内容的关键字,在进行检索时,从图像数据库中将被赋予了与用户所输入的关键字相同的关键字的图像提取出来进行提示。
在该方法中,存在有对每个图像赋予恰当的关键字的操作很麻烦的问题。另外,在用户和赋予关键字的人为不同的人的情况下,即使在概念上为相同的,但也会有参照关键字和在图像数据库中所使用的关键字不一致的情况,因而还存在着发生检索遗漏的问题。
第2种方法为:信息处理装置利用将图像所具有的色彩及形状、纹理等图像的物理特征进行定量化的属性值自动地进行检索,将参照图像和各属性值进行比较,从图像数据库中将相似性高的图像作为检索结果提取出来进行提示。
该方法是根据规定的算法将属性值进行比较,作为相似度高被提取出的图像,在人的视觉上并不一定感觉为与参照图像的相似性高,还有多种情况被人感觉为其相似性低,因此指出了其检索精度低的问题。
作为避免上述问题的技术,提出了对于被赋予了数据库中的同样的关键字的图像的集合,求出其特征量向量和重要度,将关键字转换为属性值,以该属性值为基准进行图像检索的方法(例如,参照专利文件1)。
另外,作为其他的技术,提出了根据赋予给图像的关键字来实施检索,采用检索结果的图像的属性值来实施相似检索的方法(例如,参照专利文件2)。
【专利文件1】
特开2002-140372号公报
【专利文件2】
特开10-28920号公报
但是,在专利文件1所记述的方法中,由于按以往那样必须由用户对图像赋予关键字,因而在赋予关键字的操作上需要花费很大劳动。另外,由于被赋予了同样关键字的图像的特征量向量的分布,在特征空间上不能得到充分的定域化的保证,因而不能保证精确的相似图像的检索。
另外,由于在专利文件2所记述的方法中也采用关键字,因而将关键字赋予给图像就成为很大的负担。并且,即使具有同样关键字的图像,也有图像的属性值有很大差异的情况,因而即使根据属性值来检索相似图像,也未必可以解决检索精确度低的问题。
发明内容
本发明就是鉴于这些情况而产生的,其目的在于提供一种不需要费时费力的关键字赋予操作、可以简便且遗漏少地进行精确的图像检索的图像检索程序、存储了该程序的存储介质、图像检索装置及图像检索方法。
为了解决上述的问题,本发明之1是一种图像检索装置,其特征在于,具有:输入图像的图像输入单元;求得将所输入的图像的特征定量化的属性值的属性值获得单元;至少保存一个所述图像和该图像的属性值的图像保存单元;将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的第1检索单元;将所述被检索的第1图像的缩小图像进行显示的检索图像显示单元;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择单元;对所述图像保存单元所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,对所述被选择的每个第2图像赋予表示与该类别相似的符号的符号赋予单元;和对应所述类别,赋予表示相似的可靠度的数值的数值分配单元。
本发明之2的图像检索装置是,在上述的图像检索装置中,所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索与所述第2参照图像相似的至少一个第3图像,并具有:根据赋予给每个所述被检索出的第3图像的类别的所述符号和所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择单元;和从所述图像保存单元所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的第2检索单元。
本发明之3的图像检索装置是,在上述的图像检索装置中,所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索出与所述第2参照图像相似的至少一个第3图像,所述检索图像显示单元将被检索出的第3图像的缩小图像进行显示,所述图像选择单元使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像,根据赋予给每个所述被选择的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择单元;和从所述图像保存单元所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的第2检索单元。
本发明之4的图像检索装置,具有:输入图像的图像输入单元;求得将所输入的图像的特征定量化的属性值的属性值获得单元;至少保存一个所述图像和该图像的属性值的图像保存单元;将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索出与所述第1参照图像相似的至少一个第1图像的第1检索单元;将所述被检索的第1图像的缩小图像进行显示的检索图像显示单元;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择单元;对所述图像保存单元所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的数值的数据区域的类别,对应所述类别,将表示和所述第1参照图像相似的可靠度的数值赋予所述被选择的每个第2图像的数值分配单元。
本发明之5的图像检索装置是,在上述的图像检索装置中,所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索出与所述第2参照图像相似的至少一个第3图像,并具有:根据赋予给每个所述被检索出的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择单元;和从所述图像保存单元所保存的图像中检索出表示所述被选择的类别的相似的可靠度的数值在规定值以上的图像的第2检索单元。
本发明之6的图像检索装置是,在上述的图像检索装置中,所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索与所述第2参照图像相似的至少一个第3图像,所述检索图像显示单元将被检索出的第3图像的缩小图像进行显示,所述图像选择单元使图像检索的要求者从所述被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像,并具有根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择单元;和从所述图像保存单元所保存的图像中检索出表示所述被选择的类别的相似的可靠度的数值在规定值以上的图像的第2检索单元。
本发明之7的图像检索装置是,在上述的图像检索装置中,具有:根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组单元;和判断在所述的组内从属于该组的图像数为规定数以上的组的分组判断单元;从所述图像保存单元所保存的图像中检索被分类为从属于所述被判断的组的图像的第3检索单元。
本发明之8的图像检索装置是,在上述的图像检索装置中,具有:根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组单元;判断在所述的组内从属于该组的图像数为规定数以上的组的分组判断单元;和从所述图像保存单元所保存的图像中检索被分类为从属于所述被判断的组的图像的第3检索单元。
本发明之9的图像检索装置是,在上述的图像检索装置中,所述第1检索单元具有:通过将所述第1参照图像的所述属性值和所述图像保存单元所保存的图像的所述属性值进行比较,计算出图像的相似度,来判断图像的相似的相似判断单元。
本发明之10的图像检索装置是,在上述的图像检索装置中,所述第1检索单元具有:将所述第2参照图像的所述属性值和所述图像保存单元所保存的图像的所述属性值进行比较,计算出图像的相似度,判断图像的相似的相似判断单元。
本发明之11的图像检索装置是,在上述的图像检索装置中,所述第1检索单元具有:按照所述相似度大的顺序对所述图像保存单元所保存的图像进行排序的图像排序单元。
本发明之12的图像检索装置是,在上述的图像检索装置中,所述数字分配单元具有:根据表示所述被选择的第2图像的所述属性值的分布状态的统计量来计算出表示所述相似的可靠度的数值的数值计算单元。
本发明之13是一种图像检索方法,其特征在于,具有:输入图像的图像输入步骤;求得将所输入的图像的特征定量化的属性值的属性值获得步骤;至少保存一个所述图像和该图像的属性值的图像保存步骤;将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索出与所述第1参照图像相似的至少一个第1图像的检索步骤;将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;对在所述图像保存步骤所保存的所有的图像,重新设置用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,将表示与该类别相似的符号赋予所述被选择的每个第2图像的符号赋予步骤;和对应所述类别,赋予表示相似的可靠度的数值的数值分配步骤。
本发明之14的图像检索方法是,在上述的图像检索方法中,具有:将从在所述图像输入步骤所输入的图像或在所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索出与所述第2参照图像相似的至少一个第3图像的检索步骤;根据赋予给每个所述被检索的第3图像的类别的所述符号和所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;和从在所述图像保存步骤所保存的图像中检索出被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
本发明之15的图像检索方法是,在上述的图像检索方法中,具有:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;将被检索的第3图像的缩小图像进行显示的步骤;使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;根据赋予给每个所述被选择的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
本发明之16是一种图像检索方法,其特征在于,具有:输入图像的图像输入步骤;求得将所输入的图像的特征定量化的属性值的属性值获得步骤;至少保存一个所述图像和该图像的属性值的图像保存步骤;将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;和对在所述图像保存步骤所保存的所有的图像,重新设置用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,对应所述类别,将表示和所述第1参照图像的相似的可靠度的数值赋予所述被选择的每个第2图像的数值分配步骤。
本发明之17的图像检索方法是,在上述的图像检索方法中,具有:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;根据赋予给每个所述被检索出的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;从在所述图像保存步骤所保存的图像中检索出表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
本发明之18的图像检索方法是,在上述的图像检索方法中,具有:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;将被检索出的第3图像的缩小图像进行显示的步骤;使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和根据在所述图像保存步骤所保存的图像的可靠度,检索表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
本发明之19的图像检索方法是,在上述的图像检索方法中,具有:根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组步骤;判断在所述的组内从属于该组的图像数为规定数以上的组的分组判断步骤;和从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
本发明之20的图像检索方法是,在上述的图像检索方法中,具有:根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组步骤;判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
本发明之21是一种图像检索程序,其特征在于,使计算机执行以下的步骤:输入图像的图像输入步骤;求得将所输入的图像的特征定量化的属性值的属性值获得步骤;至少保存一个所述图像和该图像的属性值的图像保存步骤;将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;对在所述图像保存步骤所保存的所有的图像,重新设置用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,将表示与该类别相似的符号赋予所述被选择的每个第2图像的符号赋予步骤;对应所述类别,赋予表示相似的可靠度的数值的数值分配步骤。
本发明之22的图像检索程序是,在上述的图像检索程序中,使计算机执行以下的步骤:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;根据赋予给每个所述被选择的第3图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的图像的检索步骤。
本发明之23的图像检索程序是,在上述的图像检索程序中,使计算机执行以下的步骤:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;将被检索出的第3图像的缩小图像进行显示的步骤;使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;根据赋予给每个所述被选择出的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的图像的检索步骤。
本发明之24是一种图像检索程序,其特征在于,使计算机执行以下的步骤:输入图像的图像输入步骤;求得将所输入的图像的特征定量化的属性值的属性值获得步骤;至少保存一个所述图像和该图像的属性值的图像保存步骤;将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;将所述被检索出的第1图像的缩小图像进行显示的检索图像显示步骤;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;和对在所述图像保存步骤所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的数值的数据区域的类别,对应所述类别,将表示和所述第1参照图像的相似的可靠度的数值赋予所述被选择的每个第2图像的数值分配步骤。
本发明之25的图像检索程序是,在上述的图像检索程序中,使计算机执行以下的步骤:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;根据赋予给每个所述被选择的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;和从在所述图像保存步骤所保存的图像中检索表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
本发明之26的图像检索程序是,在上述的图像检索程序中,使计算机执行以下的步骤:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;将被检索的第3图像的缩小图像进行显示的步骤;使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和根据在所述图像保存步骤所保存的图像的可靠度,检索表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
本发明之27的图像检索程序是,在上述的图像检索程序中,使计算机执行以下的步骤:根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组步骤;判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
本发明之28的图像检索程序是,在上述的图像检索程序中,使计算机执行以下的步骤:根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组步骤;判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
本发明之29是一种存储了程序的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:输入图像的图像输入步骤;求得将所输入的图像的特征定量化的属性值的属性值获得步骤;至少保存一个所述图像和该图像的属性值的图像保存步骤;将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;将所述被检索出的第1图像的缩小图像进行显示的检索图像显示步骤;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;和对在所述图像保存步骤所保存的所有的图像,重新设置作为赋予用于表示和所述第1参照图像是否相似的符号的数据区域的类别,对所述被选择的每个第2图像赋予表示与该类别相似的符号的符号赋予步骤;对应所述类别,赋予表示相似的可靠度的数值的数值分配步骤。
本发明之30的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;根据赋予给每个所述被检索的第3图像的类别的所述符号和所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;和从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
本发明之31的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:将从所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;将被检索的第3图像的缩小图像进行显示的步骤;使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;根据赋予给每个所述被选择的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
本发明之32的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:输入图像的图像输入步骤;求得将所输入的图像的特征定量化的属性值的属性值获得步骤;至少保存一个所述图像和该图像的属性值的图像保存步骤;将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;对在所述图像保存步骤所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,对应所述类别,对所述被选择的每个第2图像赋予表示和所述第1参照图像的相似的可靠度的数值的数值分配步骤。
本发明之33的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;根据赋予给每个所述被检索的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的可靠度的数值为规定值以上的图像的检索步骤。
本发明之34的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;将被检索的第3图像的缩小图像进行显示的步骤;使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和从在所述图像保存步骤所保存的图像中检索出被赋予了表示与所述被选择的类别相似的可靠度的数值为规定值以上的图像的检索步骤。
本发明之35的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组步骤;判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
本发明之36的图像检索程序的存储介质是,在上述的图像检索程序的存储介质中,存储了使计算机执行以下的步骤的程序:根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组步骤;判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
附图说明
图1为表示应用本发明的图像检索方法的图像检索装置的结构的方框图。
图2为表示登录原图像时的图像检索装置的各功能的关联的图。
图3为表示登录原图像时的概略的处理顺序的流程图。
图4为表示索引数据的结构的图。
图5为表示对原图像赋予符号时的图像检索装置的各功能的关联的图。
图6为表示将符号赋予原图像时的概略的处理顺序的流程图。
图7为表示符号区域的结构的图。
图8为表示第1实施例的图像检索装置的图像检索方法的各功能的关联的图。
图9为表示图像检索方法的概略的处理顺序的流程图。
图10为加法运算方法的说明图。
图11为表示第2实施例的图像检索装置的图像检索方法的各功能的关联的图。
图12为表示图像检索方法的概略的处理顺序的流程图。
图13为表示第3实施例的图像检索装置的图像检索方法的各功能的关联的图。
图14为表示图像检索方法的各功能的关联的图。
图15为表示分组的顺序图。
图中:1-图像检索装置,4-图像处理部,5-属性处理部,6-符号处理部,7-分组分析部,8-图像DB,9-缓冲存储器,11-图像输入部,12-索引图像作成部,13-图像显示部,14-图像选择部,18-属性处理部,19-属性分析部,20-相似度计算部,23-符号赋予部,24-符号加法运算部,25-符号检索部,26-加权处理部,28-原图像区域,29-索引图像区域,30-索引数据区域,33-参照图像存储器,34-备用索引存储器,37d-属性值区域,37e-符号区域,41-分组处理部,42-分组判断部,43-参数检索部,
具体实施方式
【第1实施例】
图1为表示本发明的第1实施例的图像检索装置的结构的方框图。以下将成为检索对象的图像称为「原图像」。
图像检索装置1由以下部分构成:处理图像数据的图像处理部4、处理图像的属性数据的属性处理部5、处理表示图像是否属于该类别的符号的符号处理部6、进行图像的分组分析的分组分析部7、为原图像的存储区域的图像DB8、及为其他的数据存储区域的缓冲存储器9。
在图像处理部4中,设置有:图像输入部11、索引图像作成部12、图像显示部13及图像选择部14。
图像输入部11从图像输入装置(未图示)中将原图像输入到图像检索装置1中。索引图像作成部12作成图像DB8所存储的原图像的缩小图像的索引图像。图像显示部13将索引图像及原图像显示到显示装置(未图示)。图像选择部14辅助用户的图像选择操作。
在属性处理部5中,设置有:属性处理部18、属性分析部19及相似度计算部20。
属性处理部18求得原图像的属性值。属性分析部19从属属性处理部18,从原图像中提取出各种属性值。相似度计算部20根据属性值来计算判断图像彼此之间是否相似的指数。
在符号处理部6中,设置有:符号赋予部23、符号加法运算部24、符号检索部25及加权处理部26。
符号赋予部23以图像显示部13所显示的索引图像为基准,对于在图像选择部所选择的所有原图像,作为与参照图像相似的图像赋予相同的符号。在原图像与参照图像相似的情况下,对于被赋予给各原图像的符号区域的特定的位数,作为从属相似参照图像的类别,例如将「1」赋予该参照图像。另外,在原图像与该参照图像不相似的情况下,例如对上述符号区域的相同类别的位数赋予「0」。符号加法运算部24对于多个原图像进行符号的加法运算。符号检索部25检索规定的符号为「1」的原图像。加权处理部26设定符号的加法运算所使用的加权系数,并进行附加加权的乘法运算。
在分组分析部7中,设置有:分组处理部41、分组判断部42及参数检索部43。
分组处理部41根据属性值将图像分类为组。分组判断部42判断是否存在定域化的分组。参数检索部43检索具有规定的属性的图像。
在图像DB8中,设置有:原图像区域28、索引图像区域29及索引数据区域30。
在原图像区域28中储存有成为检索对象的原图像。在索引图像区域29中储存有将原图像缩小的索引图像。在索引数据区域30中储存有用于访问原图像、索引图像的地址和原图像的属性值等的信息。
在缓冲存储器9内,具有:在图像检索时做为基准的图像的参照图像进行储存的参照图像存储器33及将在检索的中间阶段中所选择的原图像的储存地址等进行储存的备用索引存储器34。
【动作】
下面,对本图像检索装置1的动作进行说明。
用户作为在准备阶段的操作,对图像检索装置1进行原图像的登录。
图2为表示在登录原图像时的图像检索装置的各功能的关联的图,
图3为表示在登录原图像时的概略的处理顺序的流程图。
图像输入部11从图像输入装置(未图示)中读取原图像(步骤S1)。
然后,图像输入部11在将所读取的原图像储存到DB8的原图像区域28内的同时,起动属性处理部18。
属性处理部18将控制变量P设定为初始值1,起动第P个属性分析部19(步骤S2)。
第P个属性分析部19对所读取的原图像求得第P个属性值(步骤S3)。在这里,所谓原图像的属性值,是指将原图像所表示的色彩、形状、纹理等的图像的物理属性进行数值化的值。因此,在这里所说的属性值,是对色彩、形状等的物理结构要素进行定量化所表现的量,不是基于人的主观感觉的要素的值。
属性处理部18将第P个属性分析部19所求得的属性值P储存到索引数据区域30所保存的索引数据37的属性值区域内(步骤S4)。
图4为表示索引数据37的结构的图。
在索引数据37中,设置有:特定原图像的图像ID37a、表示储存了原图像的原图像区域28内的地址的原图像地址37b、表示存储了为原图像的缩小图像的索引图像的索引图像区域29内的地址的索引图像地址37c、存储了多个原图像的属性值的属性值区域37d、及将与被赋予原图像的类别相对应的符号和所有的符号数进行储存的符号区域37e。
在本说明书中所说的「类别」,是指用于识别和要求者在视觉上判断为与所提示的参照图像相同的图像的符号,对应在后面所述的每个参照图像而确定。所谓原图像属于第J个类别,是指要求者在视觉上判断为所提示的第J个参照图像与该原图像相似,符号区域37e的「符号J」成为1。
接下来,调查是否求得了规定数N的所有属性值(步骤S5)。并且,在还没有求得规定数N的属性值的情况下(步骤S5否),计算出控制变量P(步骤S6),重复步骤S3~S4的处理。
在求得了规定数N的属性值的情况下(步骤S5是),索引图像作成部12根据原图像制作成为原图像的缩小图像的索引图像,在存储到索引图像区域29内的同时,更新索引数据37的索引图像地址37c(步骤S7)。
接下来,调查是否完成了所有的原图像的登录(步骤S8)。在还剩有应登录的图像的情况下(步骤S8否),重复步骤S1~S7的处理。
在完成了所有的原图像的登录的情况下(步骤S8是),结束图像的登录处理。另外,原图像的登录没有必要一次完成,根据需要可反复进行。
接下来,用户对登录到图像检索装置1的每个原图像赋予符号。在这里,在本发明中所说的「符号」,具有和以往的关键字相似的概念,但比关键字具有更广泛的上位概念。即、关键字根据「语言」来表示图像的特征,对此,「符号」并不限定通过语言来进行概念化,而是根据图像的视觉上的相似性来进行组化的。被判断为相似的图像表现为属于同样的类别,将1储存到符号区域37e的相同的位数上。除去符号区域37e的符号数的各位数表示各个类别。
图5为表示将符号赋予原图像的情况下的图像检索装置的各功能的关联的图,图6为表示将符号赋予原图像的情况下的概略的处理顺序的流程图。
用户准备好成为把符号赋予原图像时的基准的参照图像(步骤S10)。在这里,参照图像为替代以往的关键字的图像,在以下的处理中,将表示与参照图像是否相似的符号赋予原图像。
图像输入部11从图像输入装置(未图示)读取参照图像(步骤S11)。然后,图像输入部11将所读取的参照图像储存到缓冲存储器9的参照图像存储器33内。另外,参照图像也可以不从图像输入装置(未图示)读取,而从图像DB8的原图像区域28所储存的原图像中进行选择。
相似度计算部20从参照图像存储器33中取出参照图像,并对该参照图像计算上述的属性值(步骤S12)。即、根据上述的步骤S3、S4的顺序,得到在属性分析部19所处理的多个属性值。
相似度计算部20根据索引数据区域30所储存的索引数据37,计算出相似度,并特定与参照图像相似的原图像(步骤S13)。相似的判断,是通过比较参照图像和原图像的多个属性值1~M来进行的。例如,将属性值1~M设定为参数的函数,如果参照图像的函数值和原图像的函数值接近的话,就可以判断该原图像与参照图像相似。然后,按照该相似度的大小顺序,对原图像进行排序。
图像显示部13从索引图像区域29中取出按相似度大小顺序所特定的索引图像,只将规定数显示到显示装置上(未图示)(步骤S14)。然后,对用户输出进行选择的敦促指示。
用户看到所显示的索引图像,选择多个(一个或0个均可)被判断为与参照图像相似的原图像(步骤S15)。图像选择部14在辅助用户的选择操作的同时,取得关于被选择的图像的信息。
符号赋予部23将符号赋予对被选择的原图像的索引数据37的符号区域37e(步骤S16)。
图7为表示符号区域37e的结构的图。符号赋予部23通过在被选择的原图像的符号区域37e中的「符号数」内加1而得到M,同时在新设定的「符号M」的位置上记入数字「1」。另外,符号赋予部23通过在没有被选择的原图像的符号区域37e的「符号数」内加1而得到M,同时在新设定的「符号M」的位置记入数字「0」。
在对一个种类的参照图像可以附加多个符号的情况下,进行是否完成了符号赋予的判断(步骤S17)。
即使是一个种类的参照图像,在图像中包括多个被摄体的情况下,可以分别对每个被摄体赋予不同的符号。另外,通过变更着眼点,即使只拍摄了单一的被摄体,也可以赋予多个符号。例如,可以将色彩和形状作为不同物来赋予符号。然后,在没有完成符号赋予的情况下(步骤S17否),重复步骤S15~S16的处理。
在完成了符号赋予的情况下(步骤S17是),计算在后面所述的符号加法运算处理中所采用的加权系数。
加权处理部26对于在「符号M」的位置上被记载了「1」的图像,参照索引数据37中的属性值区域37d。并定义将属性值1~N作为要素的属性值向量Xi(i=1~K)。在这里,K表示在「符号M」的位置上被记载了「1」的图像的数为K。
然后,将属性值向量Xi的各要素(属性值)作为xij(j=1~N),对每个属性值计算在公式(1)中所表示的分布σj(步骤S18)。
【公式1】
σ j = Σ i = 1 K ( x ij - x ‾ j ) 2 K …公式(1)
在这里:
K:图像数、    xij:属性值向量xi的要素
N:属性值数    xj:第j个的属性值的平均值
接下来,加权处理部26根据分布σj(j=1~N)计算出加权系数(步骤S19),这时,在分布大的情况下,将加权系数定为小的值、在分布小的情况下、将加权系数定为大的值来进行计算。
在分布大时,表示在「符号M」的位置上被记载了「1」的图像的属性值的不均衡性较大。因此,要考虑到波及到相似度的属性值的影响、换言之,相似度的可靠性较低。为此,考虑到该位置的符号对相似度的有用程度相对较低,将加权系数定为相对小的值比较妥当。
于此相反,在分布小时,表示在「符号M」的位置上被记载了「1」的图像的属性值的不均衡较小。因此,要考虑到波及到相似度的属性值的影响、换言之,相似度的可靠性较高。为此,考虑该位置的符号对相似度的有用程度相对较高,将加权系数定为相对大的值比较妥当。
另外,加权系数如果满足上述关系的话,例如,也可以用分布的倒数来进行定义,一般来讲,也可以设定将分布σj(j=1~N)定为参数的函数、根据该函数值来进行定义。另外,即使不采用分布,也可以求得表示属性值的不均衡的统计量,并根据该值计算出加权系数。例如,也可以采用最大值和最小值的差。
另外,在计算加权系数时,为了排除属性值之间的个体差,最好在将各个属性值归一化后,再进行上述的运算。将所计算出的与类别M有关的加权系数存储到索引数据区域内。
接下来,调查是否结束了符号赋予操作(步骤S20)。例如,调查是否结束了对所有的参照图像的符号赋予处理。
然后,在还剩有未处理的参照图像的情况下(步骤S20否),重复步骤S12~S19的处理。在结束了对所有的参照图像的符号赋予处理的情况下(步骤S20是),结束本符号赋予处理。
另外,虽然在本实施方式中是采用符号「1」、「0」,但本发明并不限于该方式。符号也可以是英文字母、特殊符号,并不要求是具有特殊意义的符号。另外,由符号1~M所表示的是什么样的被摄体或被摄体的性质是不必要的信息。在这一点上,和必须在关键字自身包含特定的意思内容的关键字方式有本质上的不同。
另外,本实施方式的特征是,不仅根据属性值来定量地判断是否相似,并且还将人在视觉上所判断的与参照图像相似的结果作为符号加以利用。一般来讲,图像是否相似,主要取决于主观的因素。于是,通过构成为不局限于根据将图像数值化的物理数据的机械判断,而同时参照人的视觉判断,可以提供与使用检索装置1的用户的主观愿望相近的结果。
并且,在本实施方式中,在每次读取参照图像、实施符号赋予处理时,在图7中所示的「符号数」内所记载的数字就被增加1,使赋予符号的数据区域,即类别增加。这就意味着其构成为:对图像附加特征的符号信息随着反复进行和参照图像相似的图像的选择而增加。因此,可达到越是增加相似判断的次数,检索精确度就越好的效果。
另一方面,虽然本实施方式的特点为不使用关键字,但从步骤S10到S16可以应用在以往的关键字检索中的关键字赋予。通过将同样的关键字赋予到从步骤S10到S15所选择的图像中,与对每个图像分别赋予关键字的情况相比,可更简单地进行关键字赋予。
下面,对图像的检索方法进行说明。
图8为表示第1实施例的图像检索装置的图像检索方法的各功能的关联的图,图9为表示该图像检索方法的概略的处理顺序的流程图。
用户准备好与希望检索的图像相似的参照图像。图像输入部11从图像输入装置(未图示)中读取参照图像(步骤S21)。然后,图像输入部11在将所读取的参照图像储存到缓冲存储器9的参照图像存储器33内。另外,参照图像也可以不从图像输入装置(未图示)中读取,事先选择参照图像存储器33所储存的参照图像,另外,也可以将在原图像区域28所储存的原图像作为参照图像来进行选择。
相似度计算部20从参照图像存储器33中取出参照图像,并对该参照图像计算上述的属性值(步骤S22)。即、根据上述的步骤S3、S4的顺序,得到在属性分析部19所处理的多个属性值。
相似度计算部20根据在索引数据区域30所储存的索引数据37,选择与参照图像相似的原图像(步骤S23)。
相似的判断,是根据将参照图像和原图像分别作为多个属性值1~N的函数所求得的相似度的大小来进行的。例如,将属性值1~N进行归纳,将参照图像的属性值向量设为V,把第h个原图像的属性值向量设为Uh,采用公式(2)来计算相似度Dh。
Dh=(Uh-V)·(Uh-V)              …公式(2)
另外,运算符“·”表示在公式(3)中所示的向量的积。
W·V=W1×V1+W2×V2+…WN×VN    …公式(3)
公式(2)的Dh表示第h个原图像的属性向量和参照图像的属性向量之间的欧几里德距离的2次方,为相似性的指标。即、距离越近(Dh小),相似度就越大。
另外,对各属性进行加权来计算距离,通过将其作为属性值,校正各属性值的特性的差异(例如色彩和形状),可成为更妥当的相似性的指标。
在该情况下,将在各属性中表示加权的加权向量作为W,由公式(4)表示相似度Dh。
Dh=(W*Uh-W*V)·(W*Uh-W*V)         …公式(4)
另外,“*”为将在公式(5)中所示的每两个向量的要素相乘的值作为要素的向量的运算符。
W*V=(W1×V1、W2×V2、…WN×VN)    …公式(5)
作为加权,可以通过进行为了计算在步骤S18、S19中所示的加权系数的运算处理来求得。例如,使用从多个样品图像中所求得的各属性值样品的分布的倒数等。
然后,相似度计算部20按照相似度高的顺序将所选择的多个原图像(以下称为「一次选择图像」)的索引数据37进行分类,作为备用索引数据,储存到备用索引存储器34内。
符号加法运算部24在一次选择图像内将一直到相似度高的上位的第K个图像作为对象,从备用索引存储器34中取出索引数据37,加上被赋予了符号区域37e的同样符号的数据(在本实施例中为「1」或「0」)。然后,加权处理部26用加权系数乘以该加法运算结果,计算出计数值(步骤S24)。
图10为加法运算方法的说明图。
图10表示了与上位K个原图像(Image 1~K)相对应的符号区域37e的符号1~M。符号加法运算部24将数据加到每个符号1~M。即、在每个符号1~M中求得与该符号所表示的类别相似的原图像的个数。在图10的下段表示了加法运算的结果。
接下来,加权处理部26计算出用加权系数乘以该加法运算结果的新的加法运算值。在这里使用的加权系数为在步骤S18、S19中所求得的值,对每个符号1~M决定了值。在图10的最下段表示了修正后的新的加法运算值。
即、在符号1中,当初的加法运算值15通过乘以加权系数0.7变化为新的加法运算值10.5。同样,在符号2中,当初的加法运算值19通过乘以加权系数1.1变化为新的加法运算值20.9。
符号加法运算部24根据新的加法运算值选定直到上位第T个大的符号。如果T=3的话,如图10所示,符号2、符号4和符号M就被选定(步骤S25)。
这表示被认为与参照图像「很」相似的原图像具备有很多由符号2、符号4和符号M所表示的视觉上的特征。即、判断具有符号2、符号4和符号M所表示的视觉上的特征的原图像与参照图像相似的可能性很大。
另外,在本实施方式中,是将符号和加权分开进行处理,但作为符号也可以不为0,1、也可以将包含了加权的符号作为符号。在该情况下,将被附加了加权的符号储存到符号区域37e内,在检索时,只要在加法运算部24对每个符号进行加上其值的处理,就可以完成加权附加处理,从而可以不需要加权处理部26。
符号检索部25根据索引数据33,检索被选定的T个符号内的至少S个以上的符号为「1」的原图像。然后,将根据符号所检索的图像定为在上述原图像中作为一次选择图像而没有被选择的图像。即、在提取出根据属性值所选择的原图像的基础上,将根据符号所检索的原图像作为与参照图像相似的图像来提取出(步骤S26)。另外,将这样根据符号来选择图像的方式称为符号检索方式。
图像显示部13将一次选择图像和通过符号检索方式所提取出的图像的索引图像作为检索结果显示到显示装置(未图示)上(步骤S27)。
根据第1实施例的图像检索装置,由于将基于属性值的检索和符号检索合并起来检索相似图像,因而就可以提高检索精确度。即、基于属性值的检索由于根据色彩、形状等的物理结构要素来判断相似,因而只靠此基准所选定的相似图像,未必是人在视觉上所感到的相似的图像。因此,通过将采用人的主观的感觉要素来判断相似的符号检索方式合并起来应用,就可以减少相似图像检索的遗漏,提高检索精确度。
另外,由于采用了基于属性值的加权系数,因而可以高精确度地进行相似图像的检索。
【第2实施例】
下面对本发明的第2实施例的图像检索装置进行说明。由于第2实施例的图像检索装置的结构和上述的图1所示的第1实施例的图像检索装置的结构相同,因而对同样的部分附以相同的符号,省略图示及详细的说明。
图11为表示第2实施例的图像检索装置的图像检索方法的各功能的关联的图。图12为表示其图像检索方法的概略的处理顺序的流程图。
用户准备好与希望检索的图像相似的参照图像。图像输入部11从图像输入装置(未图示)读取参照图像(步骤S31)。然后,图像输入部11将所读取的参照图像储存到缓冲存储器9的参照图像存储器33内。另外,参照图像也可以不从图像输入装置(未图示)中读取,事先选择参照图像存储器33所储存的参照图像,另外,也可以将原图像区域28所储存的原图像作为参照图像来进行选择。
相似度计算部20从参照图像存储器33中取出参照图像,并对该参照图像计算上述的属性值(步骤S32)。即、根据上述的步骤S3、S4的顺序,得到在属性分析部19所处理的多个属性值。
相似度计算部20根据索引数据区域30所储存的索引数据37,选择与参照图像相似的原图像(步骤S33)。相似的判断,用和所述第1实施例同样的方法来进行。
然后,相似度计算部20按照相似度高的顺序将所选择的多个一次选择图像的索引数据37进行分类,并储存到备用索引存储器34内。
图像显示部13将一次选择图像的索引图像作为检索结果显示到显示装置上(未图示)(步骤S34)。
用户看到所显示的索引图像,选择多个(一个或0个均可)被判断为与参照图像相似的原图像(步骤S35),图像选择部14在辅助用户的选择操作的同时,取得有关被选择的图像的信息。另外,将0个选择作为和选择了所显示的全部的图像一样来进行处理。
符号加法运算部24将用户所选择的原图像作为对象,从备用索引存储器34中取出索引数据37,加上符号区域37e的同样符号的数据,加权处理部26用加权系数乘以该加法运算值,计算出计数值(步骤S36)。另外,由于加法运算方法和在第1实施例的检索方法中所述的方法同样,因而省略其详细说明。
符号加法运算部24选定直到所加的结果数字大的上位第T个符号(步骤S37)。
符号检索部25根据索引数据37,检索被选定的T个符号内的至少S个以上的符号为「1」的原图像。然后,将根据符号所检索的图像定为在上述原图像中作为一次选择图像而没有被选择的图像。(步骤S38)。
图像显示部13将一次选择图像和通过符号检索方式所提取出的原图像的索引图像作为检索结果显示到显示装置(未图示)上(步骤S39)。
根据第2实施例的图像检索装置,由于根据人的视觉从一次选择图像中选择相似图像、并根据该被选择的图像应用符号检索方式,因而可以更加提高符号检索的相似图像检索的精确度。
【第3实施例】
下面对本发明的第3实施例的图像检索装置进行说明。由于第3实施例的图像检索装置的结构和上述的图1所示的第1实施例的图像检索装置的结构相同,因而对同样的部分附以相同的符号,省略图示及详细的说明。
图13为表示第3实施例的图像检索装置的图像检索方法的各功能的关联的图,图14为表示其图像检索方法的概略的处理顺序的流程图。
用户准备好与希望检索的图像相似的参照图像。图像输入部11从图像输入装置(未图示)读取参照图像(步骤S51)。然后,图像输入部11在将所读取的参照图像储存到缓冲存储器9的参照图像存储器33内。另外,参照图像也可以不从图像输入装置(未图示)中读取,事先选择参照图像存储器33所储存的参照图像,另外,也可以将原图像区域28所储存的原图像作为参照图像来进行选择。
相似度计算部20从参照图像存储器33中取出参照图像,并对该参照图像计算上述的属性值(步骤S52)。即、根据上述的步骤S3、S4的顺序,得到在属性分析部19所处理的多个属性值。
相似度计算部20根据索引数据区域30所储存的索引数据37,选择与参照图像相似的原图像(步骤S53)。相似的判断方法和步骤S23同样。
然后,相似度计算部20按照相似度高的顺序将所选择的多个原图像(以下称为「一次选择图像」)的索引数据37进行分类,并作为备用索引数据储存到备用索引存储器34内。
符号加法运算部24将一次选择图像内的相似度高的上位第K个图像作为对象,从备用索引存储器34中取出索引数据37,加上被赋予了符号区域37e的同样符号的数据(在本实施例中为「1」或「0」)。然后,加权处理部26用加权系数乘以该加法运算结果,计算出计数值(步骤S54)。计数值的计算方法和步骤S24相同。
符号加法运算部24对新的加法运算值选定直到上位第T个大的符号。如果T=3的话,如图10所示,选定符号2和符号4、符号M(步骤S55)。
符号检索部25根据索引数据33,检索被选定的T个符号内的至少S个以上的符号为「1」的原图像。然后,将根据符号所检索的图像定为在上述原图像中作为一次选择图像而没有被选择的图像。即、在提取出根据属性值所选择的原图像的基础上,将根据符号所检索的原图像作为与参照图像相似的图像来提取出(步骤S56)。
分组处理部41根据属性值,将一次选择图像和通过符号检索方式所提取出的图像分类为组(分组)(步骤S57)。
图15为表示分组的顺序的图。
设定分组处理的基准值的最小距离D和组的最小要素数Nmin(步骤T1)。
调查所有的备用图像从属于哪一个组Ci(步骤T2)。然后,在有不从属于任何组Ci的备用图像的情况下(步骤T2否),从备用图像中选择两个图像(步骤T3)。然后调查是否为至少一方的图像不从属于任何的组CI的组合(步骤T4)。
在备用图像的两个组合内,在有至少一方的图像不从属于任何的组Ci的组合的情况下(步骤T2是),计算这两个图像(图像A及图像B)的属性值的距离XAB(步骤T5)。
在这里,根据公式(6)来定义图像A及图像B的属性值的距离XAB的2次方。
XAB 2=(XA-XB)2                …(6)
XA:图像A的属性值向量
XB:图像B的属性值向量
然后,选择属性值的距离XAB变为最小的图像A、B的组合(步骤T6)。即、在这里所选择的图像A、B,为从属于同样的组的可能性最高的组合。
将属性值的距离XAB和为基准值的最小距离D进行比较(步骤T7)。
在属性值的距离XAB小于为基准值的最小距离D的情况下(步骤T7是),就判断在这里所选择的图像A、B从属于同样的组。
在这里,调查图像A、B中的一方是否从属于任何一个组(步骤T8)。
在图像A、B中的任何一方从属于组Ci的情况下(步骤T8是),将另外一方的图像也作为应从属于组Ci登录到组Ci中(步骤T9)。然后,再次实施步骤T2以后的处理。
在图像A、B中的任何一方不从属于组Ci的情况下(步骤T8否),将图像A、B登录到新的组Ci中(步骤T10)。然后,再次实施步骤T2以后的处理。
在属性值的距离XAB大于基准值的最小距离D的情况下(步骤T7否),判断为在这里所选择的图像A、B不从属于同样的组。因此,将在图像A、B内不从属于组的图像登录到新的组Ci中(步骤T11)。这时,在图像A、B任何一方都不从属于组的情况下,将各个图像登录到别的新的组中。然后,再次实施步骤T2以后的处理。
在备用图像的所有的图像都从属于任何一个组Ci的情况下(步骤T2是),结束分组处理。
在以上的分组处理之后,分组判断部42调查是否存在定域化的组(步骤S58)。即、在从属于组的要素数(图像数)大于最小要素数Nmin、且从属于该组的所有的图像的属性值在规定的范围内存在有某个组的情况下,就判断该组为定域组,将这些组作为备用组。
即、在所提取出的图像内,存在多个具有特征型属性值的图像的情况下,作为相似的图像,重新检索具有与该特征性属性值接近的属性值的图像。
在存在定域化的组的情况下(步骤S58是),参数检索部43调查属于备用组的图像的属性值,检索具有在该属性值的分布范围内所包含的属性值的原图像(步骤S59)。并且,将所检索的图像作为在原图像中在步骤S56中而没被选择的图像。
在这里,所谓属性值的分布范围,是指可以判断从属于该组的属性值的范围。例如,是指检索与从属于该组的图像的特征向量的重心的距离在规定值以下的原图像。
图像显示部13将利用一次选择图像、通过符号检索方式所提取出的图像、及分组所检索的图像作为检索结果显示到显示装置(未图示)上(步骤S60)。另外,分组处理为利用了统计学的方法,众所周知在上述以外还有很多的方法。也可以利用在本实施方式中所说明的以外的分组方法。
根据第3实施例的图像检索装置,由于将基于属性值的检索和符号检索合并起来检索相似图像,并将基于分组的图像检索加在一起来应用,因而就可以减少相似图像检索的遗漏,可以更加提高检索精确度。
根据以上所说明的各实施例,与以往的赋予关键字的操作相比,由于为引入了「符号」的概念的结构,因而可以大幅度地减轻赋予操作的劳动。另外,由于赋予的符号没有必要为关键字,因而在检索时也没有选定关键字的烦恼。另外,由于在以往的相似图像检索方法的基础上,将符号检索合并起来使用,因而可以提高相似图像的检索精确度。
另外,由于采用基于分组的图像检索,因而可以减少相似图像检索的遗漏,可以更加提高检索精确度。
还有,在上述的各实施例中所说明的功能,并不局限于采用硬件来构成,也可以通过采用软件使计算机读取具备各功能的程序来实现。另外,也可以为适宜地选择软件、硬件中的任何一方来构成各功能。
并且,也可以通过使计算机读取未图示的存储介质所储存的程序来实现各功能。在这里,本实施方式的存储介质,只要是可以存储程序、且计算机可读取的存储介质,其存储形式也可以为任何一种方式。
另外,本发明并不限于上述的实施方式,在实施阶段,在不脱离其技术构思的范围内可以将结构要素进行变形并具体化。另外,通过把在上述实施例中所公开的多个结构要素进行恰当的组合,可以构成各种的发明。例如,也可以从实施例所示的整体结构要素中削减几个结构要素。并且也可以将不同的实施例的结构进行恰当的组合。
根据本发明,可以不需要付出很多劳动的关键字赋予的操作,可以进行简单的、遗漏少的、非常精确的图像检索。

Claims (36)

1.一种图像检索装置,其特征在于,具有:
输入图像的图像输入单元;
求得将所输入的图像的特征定量化的属性值的属性值获得单元;
至少保存一个所述图像和该图像的属性值的图像保存单元;
将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的第1检索单元;
将所述被检索的第1图像的缩小图像进行显示的检索图像显示单元;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择单元;
对所述图像保存单元所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,对所述被选择的每个第2图像赋予表示与该类别相似的符号的符号赋予单元;
对应所述类别,赋予表示相似的可靠度的数值的数值分配单元。
2.根据权利要求1所述的图像检索装置,其特征在于,
所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索与所述第2参照图像相似的至少一个第3图像,
并具有根据赋予给每个所述被检索出的第3图像的类别的所述符号和所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择单元;和
从所述图像保存单元所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的第2检索单元。
3.根据权利要求1所述的图像检索装置,其特征在于,
所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索出与所述第2参照图像相似的至少一个第3图像,
所述检索图像显示单元将被检索出的第3图像的缩小图像进行显示,
所述图像选择单元使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像,
并具有:根据赋予给每个所述被选择的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择单元;和
从所述图像保存单元所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的第2检索单元。
4.一种图像检索装置,其特征在于,具有:
输入图像的图像输入单元;
求得将所输入的图像的特征定量化的属性值的属性值获得单元;
至少保存一个所述图像和该图像的属性值的图像保存单元;
将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索出与所述第1参照图像相似的至少一个第1图像的第1检索单元;
将所述被检索的第1图像的缩小图像进行显示的检索图像显示单元;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择单元;
对所述图像保存单元所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的数值的数据区域的类别,对应所述类别,将表示和所述第1参照图像相似的可靠度的数值赋予所述被选择的每个第2图像的数值分配单元。
5.根据权利要求4所述的图像检索装置,其特征在于,
所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索出与所述第2参照图像相似的至少一个第3图像,
并具有:根据赋予给每个所述被检索出的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择单元;和
从所述图像保存单元所保存的图像中检索出表示所述被选择的类别的相似的可靠度的数值在规定值以上的图像的第2检索单元。
6.根据权利要求4所述的图像检索装置,其特征在于,
所述第1检索单元将从所述图像输入单元所输入的图像或所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从所述图像保存单元所保存的图像中检索与所述第2参照图像相似的至少一个第3图像,
所述检索图像显示单元将被检索出的第3图像的缩小图像进行显示,
所述图像选择单元使图像检索的要求者从所述被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像,
并具有:根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择单元;和
从所述图像保存单元所保存的图像中检索出表示所述被选择的类别的相似的可靠度的数值在规定值以上的图像的第2检索单元。
7.根据权利要求2或5所述的图像检索装置,其特征在于,具有:
根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组单元;和
判断在所述的组内从属于该组的图像数为规定数以上的组的分组判断单元;
从所述图像保存单元所保存的图像中检索被分类为从属于所述被判断的组的图像的第3检索单元。
8.根据权利要求3或6所述的图像检索装置,其特征在于,具有:
根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组单元;
判断在所述的组内从属于该组的图像数为规定数以上的组的分组判断单元;和
从所述图像保存单元所保存的图像中检索被分类为从属于所述被判断的组的图像的第3检索单元。
9.根据权利要求1至8中任意一项所述的图像检索装置,其特征在于,
所述第1检索单元具有:通过将所述第1参照图像的所述属性值和所述图像保存单元所保存的图像的所述属性值进行比较,计算出图像的相似度,来判断图像的相似的相似判断单元。
10.根据权利要求2、3、5、6、7及8中任意一项所述的图像检索装置,其特征在于,
所述第1检索单元具有:将所述第2参照图像的所述属性值和所述图像保存单元所保存的图像的所述属性值进行比较,计算出图像的相似度,判断图像的相似的相似判断单元。
11.根据权利要求9或10所述的图像检索装置,其特征在于,
所述第1检索单元具有:按照所述相似度大的顺序对所述图像保存单元所保存的图像进行排序的图像排序单元。
12.根据权利要求1至11中任意一项所述的图像检索装置,其特征在于,
所述数字分配单元具有:根据表示所述被选择的第2图像的所述属性值的分布状态的统计量来计算出表示所述相似的可靠度的数值的数值计算单元。
13.一种图像检索方法,其特征在于,具有:
输入图像的图像输入步骤;
求得将所输入的图像的特征定量化的属性值的属性值获得步骤;
至少保存一个所述图像和该图像的属性值的图像保存步骤;
将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索出与所述第1参照图像相似的至少一个第1图像的检索步骤;
将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;
对在所述图像保存步骤所保存的所有的图像,重新设置用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,将表示与该类别相似的符号赋予所述被选择的每个第2图像的符号赋予步骤;
对应所述类别,赋予表示相似的可靠度的数值的数值分配步骤。
14.根据权利要求13所述的图像检索方法,其特征在于,具有:
将从在所述图像输入步骤所输入的图像或在所述图像保存单元所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索出与所述第2参照图像相似的至少一个第3图像的检索步骤;
根据赋予给每个所述被检索的第3图像的类别的所述符号和所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;和
从在所述图像保存步骤所保存的图像中检索出被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
15.根据权利要求13所述的图像检索方法,其特征在于,具有:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
将被检索的第3图像的缩小图像进行显示的步骤;
使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;
根据赋予给每个所述被选择的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;
从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
16.一种图像检索方法,其特征在于,具有:
输入图像的图像输入步骤;
求得将所输入的图像的特征定量化的属性值的属性值获得步骤;
至少保存一个所述图像和该图像的属性值的图像保存步骤;
将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;
将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;
对在所述图像保存步骤所保存的所有的图像,重新设置用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,对应所述类别,将表示和所述第1参照图像的相似的可靠度的数值赋予所述被选择的每个第2图像的数值分配步骤。
17.根据权利要求16所述的图像检索方法,其特征在于,具有:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
根据赋予给每个所述被检索出的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;
从在所述图像保存步骤所保存的图像中检索出表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
18.根据权利要求16所述的图像检索方法,其特征在于,具有:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
将被检索出的第3图像的缩小图像进行显示的步骤;
使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;
根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和
根据在所述图像保存步骤所保存的图像的可靠度,检索表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
19.根据权利要求14或17所述的图像检索方法,其特征在于,具有:
根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组步骤;
判断在所述的组内从属于该组的图像数为规定数以上的组的分组判断步骤;和
从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
20.根据权利要求15或18所述的图像检索方法,其特征在于,具有:
根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组步骤;
判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和
从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
21.一种图像检索程序,其特征在于,使计算机执行以下的步骤:
输入图像的图像输入步骤;
求得将所输入的图像的特征定量化的属性值的属性值获得步骤;
至少保存一个所述图像和该图像的属性值的图像保存步骤;
将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;
将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;
对在所述图像保存步骤所保存的所有的图像,重新设置用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,将表示与该类别相似的符号赋予所述被选择的每个第2图像的符号赋予步骤;
对应所述类别,赋予表示相似的可靠度的数值的数值分配步骤。
22.根据权利要求21所述的图像检索程序,其特征在于,使计算机执行以下的步骤:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
根据赋予给每个所述被选择的第3图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;
从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的图像的检索步骤。
23.根据权利要求21所述的图像检索程序,其特征在于,使计算机执行以下的步骤:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
将被检索出的第3图像的缩小图像进行显示的步骤;
使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;
根据赋予给每个所述被选择出的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;
从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的图像的检索步骤。
24.一种图像检索程序,其特征在于,使计算机执行以下的步骤:
输入图像的图像输入步骤;
求得将所输入的图像的特征定量化的属性值的属性值获得步骤;
至少保存一个所述图像和该图像的属性值的图像保存步骤;
将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;
将所述被检索出的第1图像的缩小图像进行显示的检索图像显示步骤;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;
对在所述图像保存步骤所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的数值的数据区域的类别,对应所述类别,将表示和所述第1参照图像的相似的可靠度的数值赋予所述被选择的每个第2图像的数值分配步骤。
25.根据权利要求24所述的图像检索程序,其特征在于,使计算机执行以下的步骤:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
根据赋予给每个所述被选择的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;
从在所述图像保存步骤所保存的图像中检索表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
26.根据权利要求24所述的图像检索程序,其特征在于,使计算机执行以下的步骤:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
将被检索的第3图像的缩小图像进行显示的步骤;
使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;
根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和
根据在所述图像保存步骤所保存的图像的可靠度,检索表示所述被选择的类别的相似的可靠度的数值为规定值以上的图像的检索步骤。
27.根据权利要求22或25所述的图像检索程序,其特征在于,使计算机执行以下的步骤:
根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组步骤;
判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和
从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
28.根据权利要求23或26所述的图像检索程序,使计算机执行以下的步骤:
根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组步骤;
判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和
从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
29.一种存储了程序的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
输入图像的图像输入步骤;
求得将所输入的图像的特征定量化的属性值的属性值获得步骤;
至少保存一个所述图像和该图像的属性值的图像保存步骤;
将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;
将所述被检索出的第1图像的缩小图像进行显示的检索图像显示步骤;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;和
对在所述图像保存步骤所保存的所有的图像,重新设置作为赋予用于表示和所述第1参照图像是否相似的符号的数据区域的类别,对所述被选择的每个第2图像赋予表示与该类别相似的符号的符号赋予步骤;
对应所述类别,赋予表示相似的可靠度的数值的数值分配步骤。
30.根据权利要求29所述的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
根据赋予给每个所述被检索的第3图像的类别的所述符号和所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;和
从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
31.根据权利要求29所述的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
将从所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
将被检索的第3图像的缩小图像进行显示的步骤;
使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;
根据赋予给每个所述被选择的第4图像的类别的所述符号和所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和
从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的符号的图像的检索步骤。
32.一种存储了程序的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
输入图像的图像输入步骤;
求得将所输入的图像的特征定量化的属性值的属性值获得步骤;
至少保存一个所述图像和该图像的属性值的图像保存步骤;
将在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第1参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第1参照图像相似的至少一个第1图像的检索步骤;
将所述被检索的第1图像的缩小图像进行显示的检索图像显示步骤;
使图像检索的要求者从所述被显示的缩小图像中选择与所述第1参照图像相似的至少一个第2图像的图像选择步骤;
对在所述图像保存步骤所保存的所有的图像,重新设置作为用于赋予表示和所述第1参照图像是否相似的符号的数据区域的类别,对应所述类别,对所述被选择的每个第2图像赋予表示和所述第1参照图像的相似的可靠度的数值的数值分配步骤。
33.根据权利要求32所述的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
根据赋予给每个所述被检索的第3图像的类别的所述数值,至少选择一个用于检索与所述第2参照图像相似的图像的类别的类别选择步骤;
从在所述图像保存步骤所保存的图像中检索被赋予了表示与所述被选择的类别相似的可靠度的数值为规定值以上的图像的检索步骤。
34.根据权利要求32所述的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
将从在所述图像输入步骤所输入的图像或在所述图像保存步骤所保存的图像中所选择的图像作为第2参照图像,根据所述属性值,从在所述图像保存步骤所保存的图像中检索与所述第2参照图像相似的至少一个第3图像的检索步骤;
将被检索的第3图像的缩小图像进行显示的步骤;
使图像检索的要求者从被显示的缩小图像中选择与所述第2参照图像相似的至少一个第4图像的步骤;
根据赋予给每个所述被选择的第4图像的类别的所述数值,至少选择一个用于进一步检索与所述第2参照图像相似的图像的类别的类别选择步骤;和
从在所述图像保存步骤所保存的图像中检索出被赋予了表示与所述被选择的类别相似的可靠度的数值为规定值以上的图像的检索步骤。
35.根据权利要求30或33所述的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
根据该图像的所述属性值,将所述第3图像至少分类为一个组的分组步骤;
判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和
从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
36.根据权利要求31或34所述的存储介质,其特征在于,存储了使计算机执行以下的步骤的程序:
根据该图像的所述属性值,将所述第4图像至少分类为一个组的分组步骤;
判断在所述组内从属于该组的图像数为规定数以上的组的分组判断步骤;和
从在所述图像保存步骤所保存的图像中检索被分类为从属于所述被判断的组的图像的检索步骤。
CNA2004100422368A 2003-05-08 2004-05-08 图像检索装置、方法、程序及存储有该程序的存储介质 Pending CN1551017A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP130670/2003 2003-05-08
JP2003130670A JP4388301B2 (ja) 2003-05-08 2003-05-08 画像検索装置、画像検索方法、画像検索プログラム及びそのプログラムを記録した記録媒体

Publications (1)

Publication Number Publication Date
CN1551017A true CN1551017A (zh) 2004-12-01

Family

ID=33506112

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA2004100422372A Pending CN1551018A (zh) 2003-05-08 2004-05-08 图像检索装置及图像检索程序
CNA2004100422368A Pending CN1551017A (zh) 2003-05-08 2004-05-08 图像检索装置、方法、程序及存储有该程序的存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CNA2004100422372A Pending CN1551018A (zh) 2003-05-08 2004-05-08 图像检索装置及图像检索程序

Country Status (3)

Country Link
US (1) US20050036712A1 (zh)
JP (1) JP4388301B2 (zh)
CN (2) CN1551018A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100392657C (zh) * 2006-05-10 2008-06-04 南京大学 数字图像检索中的主动半监督相关反馈方法
CN100462978C (zh) * 2007-04-18 2009-02-18 北京北大方正电子有限公司 一种图像检索方法及系统
CN101459801A (zh) * 2007-12-11 2009-06-17 索尼株式会社 信息处理装置、方法和程序
US8135239B2 (en) 2006-02-01 2012-03-13 Sony Corporation Display control apparatus, display control method, computer program, and recording medium
CN105430222A (zh) * 2008-02-08 2016-03-23 奥林巴斯株式会社 图像再现系统及图像再现方法
CN112131424A (zh) * 2020-09-22 2020-12-25 深圳市天维大数据技术有限公司 一种分布式图像分析方法及系统

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050273702A1 (en) * 2004-06-04 2005-12-08 Jeff Trabucco Creation and management of common interest community web sites
US20100005385A1 (en) * 2004-06-04 2010-01-07 Arts Council Silicon Valley Systems and methods for maintaining a plurality of common interest community web sites
JP4587173B2 (ja) * 2005-04-18 2010-11-24 キヤノン株式会社 画像表示装置及びその制御方法、プログラム、並びに記録媒体
JP4767718B2 (ja) * 2006-02-24 2011-09-07 富士フイルム株式会社 画像処理方法および装置ならびにプログラム
TWI322362B (en) * 2006-11-29 2010-03-21 Quanta Comp Inc Data transmitting and receiving system and method
JP4951373B2 (ja) * 2007-03-13 2012-06-13 株式会社リコー 画像検索装置、画像検索方法、及びコンピュータプログラム
JP5096776B2 (ja) * 2007-04-04 2012-12-12 キヤノン株式会社 画像処理装置及び画像検索方法
JP4989308B2 (ja) 2007-05-16 2012-08-01 キヤノン株式会社 画像処理装置及び画像検索方法
US8447128B2 (en) * 2008-04-07 2013-05-21 Fujifilm Corporation Image processing system
US8676001B2 (en) 2008-05-12 2014-03-18 Google Inc. Automatic discovery of popular landmarks
JP5385624B2 (ja) * 2009-01-30 2014-01-08 富士フイルム株式会社 画像キーワード付与装置および画像検索装置ならびにそれらの制御方法
JP2010250630A (ja) * 2009-04-17 2010-11-04 Seiko Epson Corp 画像サーバー、画像検索システムおよび画像検索方法
JP2010250657A (ja) * 2009-04-17 2010-11-04 Seiko Epson Corp 印刷装置、画像処理装置、画像処理方法およびコンピュータープログラム
JP2010250635A (ja) * 2009-04-17 2010-11-04 Seiko Epson Corp 画像サーバー、画像検索方法および画像管理方法
US8396287B2 (en) 2009-05-15 2013-03-12 Google Inc. Landmarks from digital photo collections
US9390149B2 (en) 2013-01-16 2016-07-12 International Business Machines Corporation Converting text content to a set of graphical icons
JP6377917B2 (ja) * 2014-03-04 2018-08-22 日本放送協会 画像検索装置及び画像検索プログラム
CN105354228B (zh) * 2015-09-30 2019-06-21 小米科技有限责任公司 相似图搜索方法及装置
CN108268533B (zh) * 2016-12-30 2021-10-19 南京烽火天地通信科技有限公司 一种用于图像检索的图像特征匹配方法
CN109033393B (zh) * 2018-07-31 2021-06-01 Oppo广东移动通信有限公司 贴纸处理方法、装置、存储介质及电子设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3026712B2 (ja) * 1993-12-09 2000-03-27 キヤノン株式会社 画像検索方法及びその装置
US5913205A (en) * 1996-03-29 1999-06-15 Virage, Inc. Query optimization for visual information retrieval system
US6285995B1 (en) * 1998-06-22 2001-09-04 U.S. Philips Corporation Image retrieval system using a query image
US6418430B1 (en) * 1999-06-10 2002-07-09 Oracle International Corporation System for efficient content-based retrieval of images
US6826316B2 (en) * 2001-01-24 2004-11-30 Eastman Kodak Company System and method for determining image similarity
JP4363792B2 (ja) * 2001-03-23 2009-11-11 富士通株式会社 情報検索システムおよび方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8135239B2 (en) 2006-02-01 2012-03-13 Sony Corporation Display control apparatus, display control method, computer program, and recording medium
CN100392657C (zh) * 2006-05-10 2008-06-04 南京大学 数字图像检索中的主动半监督相关反馈方法
CN100462978C (zh) * 2007-04-18 2009-02-18 北京北大方正电子有限公司 一种图像检索方法及系统
CN101459801A (zh) * 2007-12-11 2009-06-17 索尼株式会社 信息处理装置、方法和程序
CN105430222A (zh) * 2008-02-08 2016-03-23 奥林巴斯株式会社 图像再现系统及图像再现方法
CN112131424A (zh) * 2020-09-22 2020-12-25 深圳市天维大数据技术有限公司 一种分布式图像分析方法及系统

Also Published As

Publication number Publication date
JP2004334594A (ja) 2004-11-25
US20050036712A1 (en) 2005-02-17
JP4388301B2 (ja) 2009-12-24
CN1551018A (zh) 2004-12-01

Similar Documents

Publication Publication Date Title
CN1551017A (zh) 图像检索装置、方法、程序及存储有该程序的存储介质
CN1109994C (zh) 文件处理装置与记录媒体
CN1194319C (zh) 对表格式数据进行查找、列表及分类的方法和装置
CN1320485C (zh) 图像检索装置和图像检索装置的关键词赋予方法
CN1138222C (zh) 在线数据库挖掘的方法和设备
CN101069184A (zh) 信息处理装置和方法、及程序
CN1282313C (zh) 信息终端装置
CN1577328A (zh) 基于视觉的文档分割
CN1902911A (zh) 节目推荐装置、节目推荐装置的节目推荐方法以及计算机程序
CN1190963C (zh) 数据处理装置和方法,学习装置和方法
CN1268710A (zh) 数据库检索装置及方法
CN1696959A (zh) 特定被摄体检测装置
CN1750004A (zh) 信息处理装置和方法,记录媒体,以及程序
CN1669052A (zh) 使用三维物体模型的图像匹配系统、图像匹配方法以及图像匹配程序
CN1239793A (zh) 基于字符分类检索字符串的装置和方法
CN1164069A (zh) 可换存储媒体和控制方法及计算机系统
CN100346339C (zh) 图像检索方法及图像检索装置
CN1900959A (zh) 设计制造的支援装置、支援程序和支援方法
CN1285058C (zh) 图像检索装置和图像检索方法
CN1251128C (zh) 文字列匹配装置和文字列匹配方法
CN1144004A (zh) 多个客户机共有的数据库系统、数据更新方法及面向文字处理装置的应用
CN1313561A (zh) 信息结构化及应用产生的方法及其装置
CN1777890A (zh) 支持使用关键字的数据注册/搜索的设备、以及报告预备支持设备和程序
CN101064028A (zh) 基于qfd、triz的产品创新设计系统
CN1156779C (zh) 文献检索的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication