CN103678458A - 用于图像分析的方法和系统 - Google Patents

用于图像分析的方法和系统 Download PDF

Info

Publication number
CN103678458A
CN103678458A CN201310412767.0A CN201310412767A CN103678458A CN 103678458 A CN103678458 A CN 103678458A CN 201310412767 A CN201310412767 A CN 201310412767A CN 103678458 A CN103678458 A CN 103678458A
Authority
CN
China
Prior art keywords
image
image file
matching
condition
search condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310412767.0A
Other languages
English (en)
Inventor
B·A·克里特
S·K·雷科希特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN103678458A publication Critical patent/CN103678458A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及用于图像分析的方法和系统,具体地,涉及电子图像的组织。通过对响应于采用搜索条件和与所要标识的对象相关联的至少一个图像的搜索的搜索结果进行分析而标识图像内的对象。响应于经标识对象以及与经标识对象相关的分类条件,对图像进行分类。呈现包括经分类图像在内的包含经标识对象的图像。

Description

用于图像分析的方法和系统
技术领域
本发明涉及用于图像分析的方法和计算机程序产品。具体而言,本发明涉及标识图像对象以及将标识的对象与图像相匹配以进行分类的系统和方法。
背景技术
现有技术描述
数字摄影和数字图像的存储已经司空见惯。就包含巨量存储图像的许多图像库而言,存在对于高效地滤过不期望的图像以及搜索和标识感兴趣的图像的需求。目前,通过搜索机制按图像的关联元数据或本地数据来标识图像,其中该元数据或本地数据包含关于图像的记录信息,诸如记录的图像全球定位坐标。通过搜索手段,能够标识图像集之中的特定图像,而无需个别地手工筛选图像。
然而,这种搜索机制具有相当的局限性。考虑到只有记录在元数据中的特征才能被搜索,包含有限的元数据的图像通常无法标识。当期望搜索包含多个不期望对象的图像中的特定对象时,还会遇到其他问题。
发明内容
用于将对象和查询结果与图像相匹配以进行标识和分类的方法及计算机程序产品。
在一个方面,提供一种用于图像分类的方法。响应于第一组搜索条件的输入而返回第一结果集。该搜索条件包括至少一个属性,该属性与取自同处理单元通信的数据存储设备中的图像集的图像文件相关。将第一结果集与每个图像文件相比较以便匹配搜索条件。对第一结果集应用分类条件。更具体而言,针对匹配图像内的对象匹配而动态地搜索该图像集,其中匹配图像匹配于搜索条件和分类条件。基于图像匹配而对图像文件进行分类。将经分类图像文件匹配与包含匹配于搜索条件的至少一个对象的经分类图像文件中的每个图像匹配一起呈现。相应地,使用搜索条件对描绘匹配对象的图像进行分类。
在另一方面,提供一种用于在图像文件内标识对象的方法。响应于搜索条件以及一个或多个图像文件的输入,在一组至少一个图像文件内动态地搜索一个或多个对象。更具体而言,在一组至少一个图像文件中动态地搜索与关于一个或多个对象的属性的用户选定条件相匹配的所述一个或多个对象。在满足搜索条件的至少一个所述图像文件中标识出一个或多个感兴趣的对象。呈现每个匹配图像文件。更具体而言,呈现所述匹配图像文件内的经标识对象。相应地,使用搜索条件在图像中标识感兴趣的对象。
在又一方面,提供一种用于与电子图像数据一同使用的计算机程序产品。该计算机程序产品包括非瞬时性计算机可读存储介质,该存储介质具有在其上体现的计算机可读程序代码,该程序代码在执行时致使计算机实现用于对电子图像数据进行分类的方法。该计算机程序产品响应于第一组搜索条件的输入而返回第一结果集,该第一组搜索条件包含与取自数据存储设备中的图像集的图像文件相关的至少一个属性,该数据存储设备与处理单元通信。该计算机程序产品将第一结果集与图像文件相比较以匹配搜索条件。继而对第一结果集应用分类条件。更具体而言,该计算机程序产品针对匹配图像内的对象匹配而动态地搜索所述图像集,其中匹配图像匹配于搜索条件和分类条件。该计算机程序产品基于对象匹配来对图像文件进行分类,以及将经分类图像文件匹配呈现在可视化显示器上,其中经分类图像文件中的每个图像匹配包含与搜索条件相匹配的至少一个对象。相应地,该计算机程序产品响应于关于对象标识的搜索条件来对电子图像数据进行分类。
在另一方面,提供一种用于与电子图像一同使用的计算机程序产品。该计算机程序产品包括非瞬时性计算机可读存储介质,该存储介质具有在其上体现计算机可读程序代码,该程序代码在执行时致使计算机实现用于在图像中标识一个或多个对象的方法。该计算机程序产品响应于搜索条件以及一个或多个图像文件的输入,在与处理单元通信的数据存储设备中的至少一个图像文件内动态地搜索与关于对象的属性的用户选定条件相匹配的一个或多个对象。该计算机程序产品在满足搜索条件的至少一个所述图像文件中标识一个或多个感兴趣的对象。该计算机程序产品呈现每个匹配图像文件。更具体而言,该计算机程序产品绘制在匹配图像文件内的标识的对象。相应地,该计算机程序产品响应于搜索条件以及一个或多个图像文件而在图像内标识一个或多个对象。
本发明的其他特征和优势将从以下结合附图对本发明目前优选实施方式的详细描述中变得显而易见。
附图说明
本文所参照的附图构成本说明书的一部分。除非另有明确所指,附图中所示的特征仅为本发明的一些实施方式而非本发明所有实施方式的示例说明。不另外做出与此相反的暗示。
图1为图示基于分类条件结果来对图像进行分类的方法的流程图。
图2为用于图像搜索和分类机制的本发明实施方式的框图。
图3为图示用于标识图像中的对象的方法的流程图。
图4为用于具有经标识对象的图像的本发明实施方式的框图。
图5为图示用于搜索匹配图像的方法的流程图。
图6为用于对存储的图像数据进行对象标识和分类的系统的框图。
图7描绘了示出用于实现本发明实施方式的系统的框图。
具体实施方式
不难理解,总体在本文附图中描述和图示的本发明的组件能够以多种不同的配置来布置和设计。因此,对于如附图中所呈现的本发明的装置、系统和方法的实施方式的以下详细描述并不旨在限定本发明要求保护的范围,而仅仅代表本发明的选定实施方式。
本说明书中所描述的功能单元以工具、模块和/或管理器标记。所述功能单元可实现于可编程硬件设备之中,诸如实现于现场可编程门阵列、可编程阵列逻辑、可编程逻辑设备等。所述功能单元还可实现在用于由各种类型的处理单元来执行的软件中。可执行代码的标识的功能单元可例如包含一个或多个物理或逻辑计算机指令块,所述块可例如组织成对象、流程、功能或其他构造。然而可执行的标识的功能单元并不需要物理地放置在一起,而是可以包含存储于不同位置的不同指令,当这些指令在逻辑地结合在一起时,构成所述功能单元并实现该功能单元的宣称用途。
实际上,可执行代码的功能单元可以是单一指令或许多指令,并且甚至可分布在若干个不同的代码段上,分布在不同的应用之间,以及分布在若干个存储器设备上。类似地,操作数据在此可标识和阐释在功能单元内,并且能够以任何适当形式来体现,以及组织在任何适当类型的数据结构之内。可将操作数据收集成为单一数据集,或者可将其分布在包括不同存储设备在内的不同位置上,并且操作数据可至少部分地作为系统或网络上的电子信号而存在。
贯穿本说明书中所提及的“选择的实施方式”、“一个实施方式”或“实施方式”是指联系该实施方式描述的特定特征、结构或特性被包括在本发明的至少一个实施方式中。因此,在整个本说明书中各处出现的短语“选择的实施方式”、“在一个实施方式中”或“在实施方式中”并不一定是指同一实施方式。
此外,所描述的特征、结构或特性能够以任何适当方式结合于一个或多个实施方式中。在以下描述中,提供了许多具体细节,诸如模块、管理器的示例等,以便提供对本发明实施方式的透彻理解。然而,相关领域技术人员将意识到,本发明可在无需一个或多个所述具体细节的情况下,或者以其他方法、组件、材料等来实施。在其他情况下,未详细示出或描述众所周知的结构、材料或操作,以避免模糊本发明的各个方面。
通过参考附图,将获得对本发明的所示实施方式的最佳理解,其中贯穿全文以相似标号来标出相似部件。以下描述旨在仅通过示例的方式给出,并且仅仅示例说明与在此要求保护的本发明相一致的设备、系统和过程的某些选定的实施方式。
在以下对实施方式的描述中参照附图,其中附图作为本文的一部分,并且以图示说明的方式示出可在其中实践本发明的特定实施方式。应当理解,由于可在不偏离本发明范围的情况下做出结构改变,因此亦可采用其他实施方式。
图1为基于搜索和分类条件来分类图像的流程图(100)。首先,在存储器(例如,本地或远程数据存储)中存储一组图像(102)。在给定的时间,可请求包含特定条件的图像或一组图像。在一个实施方式中,关于所述条件的规范不是显而易见的、可标识的或在图像的元数据中。提供搜索条件(104)。在一个实施方式中,该搜索条件包括:包含对象的图像、包含元数据的图像、形式为描述对象的文本属性的条件和/或形式为文本规范的条件。标识并收集搜索的结果。相应地,该搜索条件支持图像和/或文本描述形式的输入。
分析所述一组存储的图像(106)。更具体而言,自主地标识图像内的对象。基于搜索结果而标识匹配于搜索条件的图像(108)。如果图像的元数据匹配于搜索结果,或者如果至少一个图像内的一个或多个经标识对象匹配于搜索结果,则认为图像是匹配的。在一个实施方式中,如果在搜索条件中存在输入的图像,并且在包含匹配对象的图像中的对象与作为搜索条件而输入的图像中的对象为相同的对象,则认为该对象与搜索结果相匹配。如果搜索条件包括文本描述,则该对象还可符合该文本描述,以便被认为是匹配的。在一个实施方式中,查询采用对逻辑运算符的使用,该逻辑运算符将确定图像对象与文本描述的包含合取(inclusive conjunction)或互斥合取(exclusive conjunction)。基于分类条件结果来对任何匹配图像进行分类(108)。在一个实施方式中,通过对认为匹配的图像和认为不匹配的图像进行分组,来分类匹配图像。在另一实施方式中,输入分类条件,并且基于输入的分类条件来对所述图像进行分类和/或排序。相应地,基于匹配于搜索条件结果的对象而将图像标识为匹配,并对其进行分类。
图2为图示搜索和分类界面的框图(200)。在可视化显示器(250)上示出了输入区域,包括用以输入搜索条件的区域(202)、用以上传和输入图像的区域(204)以及用以输入分类条件的区域(206)。在一个实施方式中,分别提供用以添加附加搜索条件和分类条件的区域(212)和(214)。类似地,在一个实施方式中,可在该界面内提供一个域用于传图像元数据。如图所示,提供用以显示存储器中所存储的待分析的图像的区域(208)。在另一实施方式中,提供用以显示被认为匹配的图像的区域(210)。界面(200)为一个示例而不应视为限制。相应地,提供用以输入各种搜索和分类条件的界面。
图3为图示用于搜索包含特定对象的图像的方法的流程图(300)。在本地或远程数据存储中存储图像或视频(302)。包含感兴趣的对象的感兴趣的图像或视频充当输入(304)。还提供基于文本的搜索条件来限定针对目标对象的图像或视频搜索(306)。在一个实施方式中,采用元数据作为输入(308)。例如,可使用输入图像的GPS坐标作为元数据输入。收集搜索结果并标识输入图像或视频内所含的对象(310)。在一个实施方式中,通过使用图像识别软件和/或向远程服务器发送的查询来标识所述对象。在一个实施方式中,将经标识对象的基于文本的名称与图像一起可视化地显示。在另一实施方式中,将经标识对象的基于文本的名称添加至输入图像的元数据。以包含匹配于搜索条件的经标识对象的图像的形式返回匹配图像(312)。将匹配图像呈现在可视化显示器上(314),并且在一个实施方式中,将其呈现在可视化显示器上使得匹配于搜索条件的经标识对象得到凸显。在一个实施方式中,将相关搜索结果添加至匹配图像的元数据(316)。在另一实施方式中,将存储的图像进行分类,包括将匹配图像和非匹配图像分开。相应地,标识和显示图像或视频中匹配于搜索条件的对象。
图4为描绘包含所要标识的对象的图像的框图(400)。图像可包含多个对象,并且在本示例中标识了4个对象(402)-(408)。在一个实施方式中,搜索结果在显示时作为标签(422)-(428)叠加在图像中。通过搜索来分析所有对象,并且在本示例中,对象(404)和(408)被认为与搜索条件相匹配。由于图像(410)包含至少一个匹配于搜索条件的对象,因此将该图像确定为匹配图像,并且在显示时凸显对象(404)和(408)。在一个实施方式中,搜索条件包含多个对象要求,并且仅当在图像内标识出所有的对象要求时才认为该图像是匹配的。相应地,提供可视化显示器来凸显和显示匹配图像中的匹配对象。
图5为图示用于图像标识的搜索过程的流程图(500)。在输入可包括图像和/或基于文本的规范的搜索条件时,提取关联于该图像的信息(502),并且在多个区域中进行搜索。在一个实施方式中,从图像提取的信息可包括但不限于:基于位置的坐标(例如,关联于图像的全球定位坐标)、附加于图像的元数据和/或图像中的已识别对象(例如,任何物理对象的历史图案)。任何提取的信息与包括基于文本的规范在内的任何输入的搜索条件相结合用于进行搜索。搜索多个来源,包括但不限于在不同服务器中可用的网站资源(504)、社交网站数据(506)和/或关联于在远程服务器上发现的图像中的物理对象的元数据(508)。收集所有相关资源(510)。使用输入的搜索条件来搜索所述资源(512)。在一个实施方式中,显示所发现的任何搜索结果(514)。在一个实施方式中,将搜索结果作为叠层与输入的图像一同显示,或者在一个实施方式中,与存储于数据存储中的图像一同显示。相应地,搜索各种来源以标识关联于图像的相关信息。
所属技术领域的技术人员知道,本发明的各个方面可以实现为系统、方法或计算机程序产品。因此,本发明的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、驻留软件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。此外,在一些实施例中,本发明的各个方面还可以实现为在一个或多个计算机可读介质中的计算机程序产品的形式,该计算机可读介质中包含计算机可读的程序代码。
可以采用一个或多个计算机可读介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或设备,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储设备、磁存储设备、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者设备使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者设备使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
下面将参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述本发明。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机程序指令实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些计算机程序指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。
也可以把这些计算机程序指令存储在计算机可读介质中,这些指令使得计算机、其它可编程数据处理装置、或其他设备以特定方式工作,从而,存储在计算机可读介质中的指令就产生出包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的指令的制造品(article of manufacture)。
也可以把所述计算机程序指令加载到计算机、其他可编程数据处理装置或其他设备上,以致使在该计算机、其他可编程装置或其他设备上执行一系列操作步骤,从而产生计算机实现的过程,以便让执行于该计算机或其他可编程装置上的所述指令提供用于实现流程图和/或框图中的一个或多个方框中规定的功能/动作的过程。
图6为用于对存储的图像数据进行标识和分类的系统(600)。提供与包含图像数据(622)的数据存储(620)通信的客户端(602),其具有跨总线(606)与存储器(608)通信的处理单元(604)。该客户端还包含功能单元(610),该功能单元(610)具有随其嵌入的工具。该工具包括但不限于:搜索管理器(612)、标识管理器(614)和呈现管理器(616)。在一个实施方式中,功能单元(610)的工具中还包括分类管理器(618)。
搜索管理器跨网络(605)与至少一个服务器(650)通信,通过返回第一结果集来响应于包括至少一个属性的搜索条件的输入,该属性与取自图像数据(622)的图像文件中的对象相关。虽然分别示出了两个服务器(650)和(660),但是跨网络(605)可采用任何数目的服务器。服务器(650)包括处理单元(652),该处理单元(652)跨总线(656)与存储器(654)通信,并且与数据存储(670)通信。标识管理器(614)标识满足搜索条件的图像文件中的一个或多个感兴趣的对象。呈现管理器(616)呈现满足搜索条件的图像文件。在一个实施方式中,分类管理器(618)通过对匹配于搜索条件的一组图像进行分类来响应分类条件。呈现管理器(616)继而呈现由分类管理器(618)所分类的经分类图像。
现参照图7的框图,关于实现本发明的实施方式来描述附加细节。该计算机系统包括一个或多个处理器,诸如处理器(702)。该处理器(702)连接至通信基础结构(704)(例如,通信总线、跨接条或网络)。
计算机系统可包括显示接口(706),该显示接口(706)转发来自通信基础结构(704)(或者来自未示出的帧缓冲器)的图形、文本和其他数据,以供在显示单元(708)上显示。计算机系统还包括主存储器(710),优选地为随机存取存储器(RAM),并且还可包括二级存储器(712)。该二级存储器(712)可例如包括硬盘驱动器(714)和/或可移除存储驱动器(716),该可移除存储驱动器(716)例如表示软盘驱动器、磁带驱动器或光盘驱动器。可移除存储驱动器(716)以本领域一般技术人员所熟知的方式,从和/或向可移除存储单元(718)读取和/或写入。可移除存储单元(718)例如表示由可移除存储驱动器(716)读取和写入的软盘、压缩盘、磁带或光盘等。应当理解,可移除存储单元(718)包括在其中存储有计算机软件和/或数据的计算机可读介质。
在备选的实施方式中,二级存储器(712)可包括其他类似的装置用于允许将计算机程序或其他指令加载至该计算机系统中。此类装置例如可包括可移除存储单元(720)和接口(722)。此类装置的示例可包括程序包和包接口(诸如见于视频游戏设备中的包接口)、可移除存储器芯片(诸如EPROM或PROM)和关联的插座、以及允许从可移除存储单元(720)向计算机系统传输软件和数据的其他可移除存储单元(720)和接口(722)。
计算机系统还可包括通信接口(724)。通信接口(724)允许在计算机系统与外部设备之间传输软件和数据。通信接口(724)的示例可包括调制解调器、网络接口(诸如以太网卡)、通信端口或者PCMCIA插槽和卡等。经由通信接口(724)传输的软件和数据的形式为信号,该信号例如可以是电子信号、电磁信号、光信号或其他能够由通信接口(724)接收的信号。这些信号经由通信路径(即,信道)(726)提供至通信接口(724)。该通信路径(726)传送信号并且可使用电线或电缆、光纤、电话线、蜂窝电话链路、射频(RF)链路和/或其他通信信道来实现。
在本文件中,使用术语“计算机程序介质”、“计算机可用介质”以及“计算机可读介质”来泛指诸如主存储器(710)和二级存储器(712)、可移除存储驱动器(716)以及安装在硬盘驱动器(714)中的硬盘等介质。
计算机程序(亦称为计算机控制逻辑)存储在主存储器(710)和/或二级存储器(712)中。还可经由通信接口(724)来接收计算机程序。此类计算机程序在运行时使计算机系统能够执行如本文所讨论的本发明的特征。尤其是,计算机程序在运行时使处理器(702)能够执行计算机系统的特征。相应地,此类计算机程序表示计算机系统的控制器。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本文所使用的术语仅以描述特定实施方式为目的,而并不旨在对本发明做出限制。本文所使用的单数形式“一个”、“一种”和“该”还旨在包括复数形式,除非上下文另有明确所指。还应理解,术语“包含”和/或“包括”在用于本说明书中时,规定存在宣称的特征、整数、步骤、操作、元件和/或组件,但并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。
以下权利要求中的所有装置或步骤加功能元件的对应结构、材料、动作和等同物旨在包括用于结合其他具体要求保护的元件来执行功能的任何结构、材料或动作。本发明的描述出于图示说明和描述的目的而展示,但并不旨在成为穷举性的或限于本发明的公开形式。
在不偏离本发明的范围和精神的前提下,许多修改和变更对于本领域一般技术人员而言显而易见。为了最佳地解释本发明原理和实际应用,以及为了使本领域其他一般技术人员能够针对具有适合于设想的特定用途的各种修改的各个实施方式而理解本发明,从而选择了该实施方式并对其进行了描述。相应地,增强型云计算模型支持关于数据集群的灵活性,其包括但不限于,针对数据而派生一个或多个群落,以及响应于接收新数据而动态形成或重新形成一个或多个群落。
备选实施方式
应当认识到,虽然出于示例说明的目的而对本发明的特定实施方式做出了描述,但是可在不偏离本发明的精神和范围的前提下做出多种修改。相应地,本发明的保护范围仅由以下权利要求及其等效项所限定。

Claims (25)

1.一种方法,包括:
响应于第一组搜索条件的输入而返回第一结果集,所述第一组搜索条件包括与取自数据存储设备中的图像集的图像文件相关的至少一个属性,所述数据存储设备与处理单元通信,
将所述第一结果集与每个图像文件相比较,以匹配所述搜索条件;
对所述第一结果集应用分类条件,包括针对匹配图像内的对象匹配而动态地搜索所述图像集,其中所述匹配图像匹配于所述搜索条件和所述分类条件;
基于所述对象匹配而对所述图像文件进行分类;以及
呈现经分类的图像文件匹配,其中经分类的所述图像文件中的每个图像匹配包含匹配于所述搜索条件的至少一个对象。
2.根据权利要求1所述的方法,还包括:标识每个对象匹配的文本数据,所述文本数据匹配于所述搜索条件。
3.根据权利要求2所述的方法,还包括:对所述匹配图像内的所述对象匹配应用标注,应用的所述标注凸显所述匹配图像内的所述匹配对象。
4.根据权利要求1所述的方法,其中所述第一组搜索条件还包括至少一个图像。
5.根据权利要求1所述的方法,还包括响应于所述搜索条件,对所述匹配图像进行分类。
6.根据权利要求1所述的方法,还包括:自主地向经分类的所述图像添加元数据,所述元数据包括从所述第一结果集获得的信息。
7.一种方法,包括:
响应于搜索条件以及一个或多个图像文件的输入,在匹配于关于一个或多个对象的属性的用户选定条件的一组至少一个图像文件内动态地搜索所述一个或多个对象;以及
在满足所述搜索条件的至少一个所述图像文件中标识一个或多个感兴趣的对象;以及
呈现每个匹配图像文件,包括呈现所述匹配图像文件内的经标识对象。
8.根据权利要求7所述的方法,其中搜索所述一个或多个对象包括从一个或多个输入的所述图像文件提取一个或多个图像对象,并将所述提取的对象作为所述搜索条件来应用。
9.根据权利要求8所述的方法,还包括:对所述匹配图像文件中的匹配图像对象应用凸显。
10.根据权利要求8所述的方法,还包括:对提取的以及匹配的图像对象应用二级图像作为叠层。
11.根据权利要求7所述的方法,还包括:在对一个或多个提取的所述对象的标识后,自主地针对与所述一个或多个提取的对象相关的信息而执行搜索查询,以及呈现经过滤的搜索查询结果。
12.根据权利要求11所述的方法,还包括:将所述相关的信息附加至包含所述对象的所述图像文件的所述元数据。
13.一种用于与图像集一起使用以进行分类的计算机程序产品,所述计算机程序产品包括:
非瞬时性计算机可读存储介质,其具有随其体现的计算机可读程序代码,所述计算机可读程序代码在被执行时致使计算机:
响应于第一组搜索条件的输入而返回第一结果集,所述第一组搜索条件包含与取自数据存储设备中的图像集的图像文件相关的至少一个属性,所述数据存储设备与处理单元通信,
将所述第一结果集与所述图像文件进行比较,以匹配所述搜索条件;
对所述第一结果集应用分类条件,包括所述计算机针对匹配图像内的对象匹配而动态地搜索所述图像集,其中所述匹配图像匹配于所述搜索条件和所述分类条件;
基于所述对象匹配而对所述图像文件进行分类;以及
将经分类的所述图像文件匹配呈现在可视化显示器上,其中经分类的所述图像文件中的每个图像匹配包含匹配于所述搜索条件的至少一个对象。
14.根据权利要求13所述的计算机程序产品,还包括:所述计算机程序产品标识每个对象匹配的文本数据,所述文本数据匹配于所述搜索条件。
15.根据权利要求14所述的计算机程序产品,还包括:所述计算机程序产品对所述匹配图像内的所述对象匹配应用标注,应用的标注用于凸显所述图像内的所述匹配对象。
16.根据权利要求13所述的计算机程序产品,其中所述第一组搜索条件还包括至少一个图像。
17.根据权利要求13所述的计算机程序产品,还包括:所述计算机程序产品响应于所述搜索条件而对所述匹配图像进行分类。
18.根据权利要求13所述的计算机程序产品,还包括:所述计算机程序产品自主地向经分类的所述图像添加元数据,所述元数据包括从所述第一结果集获得的信息。
19.一种用于与至少一个图像一起使用以进行对象标识的计算机程序产品,所述计算机程序产品包括:
非瞬时性计算机可读存储介质,其具有随其体现的计算机可读程序代码,所述计算机可读程序代码在被执行时致使计算机:
响应于搜索条件以及一个或多个图像文件的输入,在与处理单元通信的数据存储设备中的、匹配于关于对象的属性的用户选定条件的一组至少一个图像文件内动态地搜索一个或多个对象;以及
在满足所述搜索条件的至少一个所述图像文件中标识一个或多个感兴趣的对象;以及
呈现每个匹配图像文件,包括绘制所述匹配图像文件内的经标识对象。
20.根据权利要求19所述的计算机程序产品,其中对所述一个或多个对象的搜索包括,所述计算机程序产品从输入的所述图像文件提取一个或多个图像对象并且对每个提取的对象应用所述搜索。
21.根据权利要求20所述的计算机程序产品,还包括:所述计算机程序产品对图像文件中的每个匹配图像对象应用凸显。
22.根据权利要求20所述的计算机程序产品,还包括:所述计算机程序产品对所述提取的以及匹配的图像对象应用二级图像作为叠层。
23.根据权利要求19所述的计算机程序产品,还包括:所述计算机程序产品在对所述对象的标识之后自主地执行针对与所述对象相关的信息的搜索查询,以及所述计算机程序产品将经过滤的搜索查询结果呈现在所述可视化显示器上。
24.根据权利要求23所述的计算机程序产品,还包括:所述计算机程序产品将所述相关的信息附加至包含所述对象的所述图像文件的所述元数据。
25.一种方法,包括:
响应于搜索条件的输入而返回第一结果集,所述搜索条件包括与取自数据存储设备中的图像集的图像文件中的对象相关的至少一个属性,所述数据存储设备与处理单元通信;
在满足所述搜索条件的至少一个所述图像文件中标识一个或多个感兴趣的对象;以及
对所述一组至少一个图像应用分类条件,包括响应于经标识的所述对象匹配于所述搜索条件和所述分类条件,对所述组图像进行分类;
呈现经分类的所述图像文件,其中每个返回的图像包含匹配于所述搜索条件的至少一个对象。
CN201310412767.0A 2012-09-13 2013-09-11 用于图像分析的方法和系统 Pending CN103678458A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/613,217 2012-09-13
US13/613,217 US20140072226A1 (en) 2012-09-13 2012-09-13 Searching and Sorting Image Files

Publications (1)

Publication Number Publication Date
CN103678458A true CN103678458A (zh) 2014-03-26

Family

ID=50233341

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310412767.0A Pending CN103678458A (zh) 2012-09-13 2013-09-11 用于图像分析的方法和系统

Country Status (2)

Country Link
US (2) US20140072226A1 (zh)
CN (1) CN103678458A (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150006325A1 (en) * 2013-06-27 2015-01-01 Lucy Ma Zhao Product search using user selections in images systems and methods
US10346700B1 (en) * 2016-05-03 2019-07-09 Cynny Spa Object recognition in an adaptive resource management system
CN111125501B (zh) * 2018-10-31 2023-07-25 北京字节跳动网络技术有限公司 用于处理信息的方法和装置
CN112270297B (zh) * 2020-11-13 2024-05-31 杭州睿琪软件有限公司 用于显示识别结果的方法和计算机系统
CN117112816B (zh) * 2023-10-20 2024-02-02 浙江啄云智能科技有限公司 安检图像的排序方法、装置、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020087546A1 (en) * 2000-01-31 2002-07-04 Michael Slater Apparatus, methods, and systems for digital photo management
CN1879162A (zh) * 2004-08-30 2006-12-13 索尼株式会社 图像信息记录设备和图像信息显示设备
CN1952935A (zh) * 2006-09-22 2007-04-25 南京搜拍信息技术有限公司 综合利用图像及文字信息的搜索系统及搜索方法
US20080288369A1 (en) * 2007-02-26 2008-11-20 Hunter Reginald W Next Generation Eyewear Retailing
US20080313050A1 (en) * 2007-06-05 2008-12-18 Basir Otman A Media exchange system
US20100135584A1 (en) * 2006-08-23 2010-06-03 Microsoft Corporation Image-Based Face Search

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8301159B2 (en) * 2004-12-31 2012-10-30 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US8214310B2 (en) * 2005-05-18 2012-07-03 International Business Machines Corporation Cross descriptor learning system, method and program product therefor
US7711187B2 (en) * 2005-09-13 2010-05-04 Walter Wafler Method for selection and display of images
US7689933B1 (en) * 2005-11-14 2010-03-30 Adobe Systems Inc. Methods and apparatus to preview content
WO2008073366A2 (en) * 2006-12-08 2008-06-19 Sobayli, Llc Target object recognition in images and video
US8676001B2 (en) * 2008-05-12 2014-03-18 Google Inc. Automatic discovery of popular landmarks
US8352465B1 (en) * 2009-09-03 2013-01-08 Google Inc. Grouping of image search results
US8495057B2 (en) * 2010-05-17 2013-07-23 Microsoft Corporation Image searching with recognition suggestion
US20110304774A1 (en) * 2010-06-11 2011-12-15 Microsoft Corporation Contextual tagging of recorded data
US8332429B2 (en) * 2010-06-22 2012-12-11 Xerox Corporation Photography assistant and method for assisting a user in photographing landmarks and scenes
KR20120010433A (ko) * 2010-07-26 2012-02-03 엘지전자 주식회사 영상표시기기의 동작 방법
US8447752B2 (en) * 2010-09-16 2013-05-21 Microsoft Corporation Image search by interactive sketching and tagging
US8781234B2 (en) * 2010-10-01 2014-07-15 Intel Corporation Optimized fast hessian matrix computation architecture
US20130208990A1 (en) * 2010-10-22 2013-08-15 Nec Corporation Image comparison device, image comparison method, image comparison system, server, terminal, terminal control method, and terminal control program
US20120109884A1 (en) * 2010-10-27 2012-05-03 Portool Ltd. Enhancement of user created documents with search results
KR101029160B1 (ko) * 2011-02-07 2011-04-13 (주)올라웍스 이미지 데이터베이스에 신규 이미지 및 이에 대한 정보를 추가하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
US10185769B2 (en) * 2011-06-08 2019-01-22 Facebook, Inc. Presenting images as search results
US9001147B2 (en) * 2011-11-14 2015-04-07 W.W. Grainger, Inc. System and method for using an image to provide search results
US8661049B2 (en) * 2012-07-09 2014-02-25 ZenDesk, Inc. Weight-based stemming for improving search quality

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020087546A1 (en) * 2000-01-31 2002-07-04 Michael Slater Apparatus, methods, and systems for digital photo management
US20080306921A1 (en) * 2000-01-31 2008-12-11 Kenneth Rothmuller Digital Media Management Apparatus and Methods
CN1879162A (zh) * 2004-08-30 2006-12-13 索尼株式会社 图像信息记录设备和图像信息显示设备
US20100135584A1 (en) * 2006-08-23 2010-06-03 Microsoft Corporation Image-Based Face Search
CN1952935A (zh) * 2006-09-22 2007-04-25 南京搜拍信息技术有限公司 综合利用图像及文字信息的搜索系统及搜索方法
US20080288369A1 (en) * 2007-02-26 2008-11-20 Hunter Reginald W Next Generation Eyewear Retailing
US20080313050A1 (en) * 2007-06-05 2008-12-18 Basir Otman A Media exchange system

Also Published As

Publication number Publication date
US20140072227A1 (en) 2014-03-13
US20140072226A1 (en) 2014-03-13

Similar Documents

Publication Publication Date Title
US10025950B1 (en) Systems and methods for image recognition
JP6811645B2 (ja) 画像検索装置及び画像検索方法
CN111008321A (zh) 基于逻辑回归推荐方法、装置、计算设备、可读存储介质
KR101777238B1 (ko) 영상 트렌드 검출 및 큐레이션을 위한 방법 및 시스템
US9524337B2 (en) Apparatus, system, and method for detecting complex issues based on social media analysis
CN103678458A (zh) 用于图像分析的方法和系统
US9477664B2 (en) Method and apparatus for querying media based on media characteristics
CN111563382A (zh) 文本信息的获取方法、装置、存储介质及计算机设备
CN104520848A (zh) 按照出席者搜索事件
Yang et al. A multimedia semantic retrieval mobile system based on HCFGs
CN111339406A (zh) 个性化推荐方法、装置、设备及存储介质
US8705800B2 (en) Profiling activity through video surveillance
CN109934194A (zh) 图片分类方法、边缘设备、系统及存储介质
CN112818195A (zh) 数据获取方法、装置、系统及计算机存储介质
US10891580B2 (en) Service design assistance system and service design assistance method
CN112925899A (zh) 排序模型建立方法、案件线索推荐方法、装置及介质
CN107609020B (zh) 一种基于标注的日志分类的方法和装置
US20240169000A1 (en) Information processing method and apparatus, device, and medium
CN108255888B (zh) 一种数据处理方法及系统
US20160170983A1 (en) Information management apparatus and information management method
JP2019067359A (ja) 2モードネットワークにおけるサブネットワークパターンの視覚的探索のためのシステム及び方法、プログラム、及びコンピュータ装置
CN105955991A (zh) 一种搜索结果聚合及定位的方法和装置
CN113220843A (zh) 确定信息关联关系的方法、装置、存储介质和设备
JP7119550B2 (ja) 2モードネットワークにおける検索結果の視覚的探索のためのシステム及び方法、プログラム、及びコンピュータ装置
KR102588238B1 (ko) 컨텐츠 제작 어플리케이션 및 상기 컨텐츠 제작 어플리케이션 구동 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140326