CN104850616A - 检索辅助系统、检索辅助方法以及检索辅助程序 - Google Patents

Abstract

本发明涉及检索辅助系统、检索辅助方法以及检索辅助程序。检索辅助系统具有：积存商品图像数据的数据库(16)；针对输入图像数据，从数据库(16)取得与表示关于输入图像数据的图像的特征的图像特征信息相同或者类似的图像特征信息的商品图像数据的检索部(13)；设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件的条件设定部(18，32)，检索部(13)根据由条件设定部(18，32)设定的检索条件，进行商品图像数据的检索，与由检索部(13)取得的商品图像数据一并输出与该商品图像数据所对应的商品不同的其他商品涉及的信息。

Description

检索辅助系统、检索辅助方法以及检索辅助程序

本申请是申请日为2012年6月21日、申请号为201080058662.4、发明名称为“检索辅助系统、检索辅助方法以及检索辅助程序”的母案的分案。

技术领域

本发明涉及检索辅助系统、检索辅助方法以及检索辅助程序。本申请基于2009年12月24日在日本提交的特愿2009-292857号申请并主张优先权，在此引用其内容。

背景技术

目前，正在应用一种在用户通过互联网等网络检索对象物(例如商品等)，并进一步购买时辅助进行用户要检索的对象物的选择、决定的系统(例如，参照专利文献1)。

例如，用户在互联网中使用各种检索引擎，输入对象物的名称(例如商品名等)或者对象物的特征，来检索相应对象物。另外，根据需要，用户检索销售上述的相应对象物的店铺。

并且，具有上述那样的检索引擎的服务器装置在检索到的店铺中，经由互联网将对应用户喜好的对象物的图像或者其价格提示给用户的终端，或者提供相关对象物等，由此来对用户的对象物的检索进行辅助。

另外，近年来，在购买商品时不去进行当面销售的零售店而是从互联网上的虚拟商城的虚拟商店购买商品的情况变多。

其结果为，即使在附近没有大型零售店的地域，也可在家里从多种类的每个种类的多个商品中购买喜欢的商品。(例如参照专利文献2)。

专利文献1：日本特开2004-246585号公报

专利文献2：日本特开2002-150138号公报

发明内容

然而，在上述现有例等中，由于用户在检索对象物时，输入表示对象物的名称等的文本数据、或者从为了检索用而预先准备的对象物的图像中进行选择，所以例如在用户仅有对象物的图像信息却不知道对象物的名称的情况下，存在用户无法检索实际想要检索的对象物、或者与检索的对象物类似的对象物这一问题。

本发明涉及的实施方式的目的在于，提供一种能够进行用户想要检索的对象物的检索的检索辅助系统、检索辅助方法以及检索辅助程序。

根据本发明的实施方式的检索辅助系统，可以构成为，具有：商品信息数据库，其存储图像介质中被组合使用的商品项目的图像特征信息；组合信息数据库，其按上述商品项目，存储和与该商品项目组合使用的其他商品项目的组合信息；类似项目检索部，其从上述商品信息数据库取得具有与输入图像的图像特征信息相同或者类似的图像特征信息的商品项目；组合检索部，其从上述组合信息数据库检索与由上述类似项目检索部取得的商品项目组合使用的其他商品项目；和条件设定部，其设定包含与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述类似项目检索部和上述组合检索部中的至少一个根据由上述条件设定部设定的上述检索条件来进行检索。

根据本发明的实施方式的检索辅助方法，可以构成为，具有：类似项目检索过程，从商品信息数据库取得具有与输入图像的图像特征信息相同或者类似的图像特征信息的商品项目；组合检索过程，从组合信息数据库检索与由上述类似项目检索过程取得的商品项目组合使用的其他商品项目；和条件设定过程，设定包含与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述类似项目检索过程和上述组合检索过程中的至少一个根据由上述条件设定过程设定的上述检索条件来进行检索。

根据本发明的实施方式的检索辅助程序，能够使计算机执行包括如下过程的动作：类似项目检索过程，从商品信息数据库取得具有与输入图像的图像特征信息相同或者类似的图像特征信息的商品项目；组合检索过程，从组合信息数据库检索与由上述类似项目检索过程取得的商品项目组合使用的其他商品项目；和条件设定过程，设定包含与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述类似项目检索过程和上述组合检索过程中的至少一个根据由上述条件设定过程设定的上述检索条件进行检索。

根据本发明的实施方式的检索辅助系统，可以构成为，具有：数据库，其积存商品图像数据；检索部，其针对输入图像数据，从上述数据库取得与表示关于该输入图像数据的图像的特征的图像特征信息相同或者类似的图像特征信息的商品图像数据；和条件设定部，其设定包含与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述检索部根据由上述条件设定部设定的上述检索条件来进行上述商品图像数据的检索，与由上述检索部取得的商品图像数据一并输出与该商品图像数据所对应的商品不同的其他商品涉及的信息。

根据本发明的实施方式的检索辅助方法，可以构成为，具有：条件设定过程，设定包含与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件；检索过程，针对输入图像数据，从数据库检索与表示关于该输入图像数据的图像的特征的图像特征信息相同或者类似的图像特征信息的商品图像数据，根据由上述条件设定过程设定的上述检索条件，取得上述商品图像数据；和与由上述检索过程取得的商品图像数据一并输出与该商品图像数据所对应的商品不同的其他商品涉及的信息的过程。

根据本发明的实施方式中的检索辅助程序，能够使计算机执行包括如下过程的动作：条件设定过程，设定包含与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件；检索过程，针对输入图像数据，从数据库中检索与表示关于该输入图像数据的图像的特征的图像特征信息相同或者类似的图像特征信息的商品图像数据，根据由上述条件设定过程设定的上述检索条件，取得上述商品图像数据；和与由上述检索过程取得的商品图像数据一并输出与该商品图像数据所对应的商品不同的其他商品涉及的信息的过程。

根据本发明的实施方式中的检索辅助系统，可以构成为，具有：数据库，其积存有与用户检索的对象物相关的对象物图像数据；提取部，其提取所输入的输入图像数据的检索部分；检索部，其对表示关于上述检索部分的图像数据的图像的特征的图像特征信息与表示上述数据库中的关于上述对象物图像数据的图像的特征的图像特征信息进行比较，并针对上述检索部分的图像数据，从上述数据库取得上述对象物图像数据中的一致或者类似度高的上述对象物图像数据；和条件设定部，其设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述检索部根据由上述条件设定部设定的上述检索条件，进行上述商品图像数据的检索。

根据本发明的实施方式中的检索辅助方法，可以构成为，具有:提取过程，在输入的输入图像数据中提取对象物的检索部分；条件设定过程，设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件；和检索过程，比较上述检索部分内的图像数据与积存在数据库中的对象物图像数据，针对上述检索部分内的图像数据，从上述数据库提取一致或者类似度高的上述对象物图像数据，根据由上述条件设定部设定的上述检索条件，进行上述商品图像数据的提取。

根据本发明的实施方式中的检索辅助程序，能够使计算执行包括如下过程的动作：提取过程，在所输入的输入图像数据中提取对象物的检索部分；条件设定过程，设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件；和检索过程，比较上述检索部分内的图像数据与积存在数据库中的对象物图像数据，针对上述检索部分内的图像数据，从上述数据库检索一致或者类似度高的上述对象物图像数据，根据由上述条件设定部设定的上述检索条件，进行上述商品图像数据的提取。

根据本发明的实施方式中的检索辅助系统，可以构成为，具有：组合商品数据库，其将从图像介质取得的商品项目的属性信息按相同的类别积存；组合信息数据库，其按上述商品项目存储和与该商品项目组合使用的不同类别的其他商品项目的组合信息；商品项目数据库，其积存销售中的销售商品项目的属性信息；类似项目检索部，其针对由用户输入的商品的图像数据和该图像数据的属性信息，从上述组合商品数据库选择相同或者类似的商品项目的候补组；组合检索部，其对应上述候补组中的上述商品项目的每一个，从上述组合信息数据库中检索与该商品项目组合的其他商品项目；商品项目检索部，其针对用户从上述商品项目与上述其他商品项目的组合中选择的组合中的上述其他商品项目的图像数据，根据该图像数据的属性信息，从上述商品项目数据库中检索相同或者类似的上述销售商品项目的图像数据，并作为推荐商品而输出；条件设定部，其设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述类似项目检索部、上述组合检索部、上述商品项目检索部中的至少一个根据由上述条件设定部设定的上述检索条件进行检索。

根据本发明的实施方式中的检索辅助方法，可以构成为，具有：类似项目检索过程，针对由用户输入的商品的图像数据和该图像数据的属性信息，从按相同的类别积存从图像介质取得的商品项目的属性信息的组合商品数据库中，选择相同或者类似的商品项目的上述候补组；组合检索过程，对应上述候补组中的上述商品项目的每一个，从按上述商品项目存储有和与该商品项目组合使用的不同类别的其他商品项目的组合信息的组合信息数据库中检索与该商品项目组合的其他商品项目；商品项目检索过程，根据用户从上述商品项目与上述其他商品项目的组合中选择的组合中的上述其他商品项目的图像数据和该图像数据的属性信息，从积存上述销售商品项目的属性信息的商品项目数据库中检索相同或者类似的销售商品项目，并作为推荐商品输出；和条件设定过程，设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述类似项目检索过程、上述组合检索过程、上述商品项目检索过程中的至少一个根据由上述条件设定过程设定的上述检索条件进行检索。

根据本发明的实施方式中的检索辅助程序，能够使计算机执行包括如下过程的动作：类似项目检索过程，针对由用户输入的商品的图像数据和该图像数据的属性信息，从按相同类别积存从图像介质取得的商品项目的属性信息的组合商品数据库中，选择相同或者类似的商品项目的上述候补组；组合检索过程，对应上述候补组中的上述商品项目的每一个，从按上述商品项目存储有和与该商品项目组合使用的不同类别的其他商品项目的组合信息的组合信息数据库中检索与该商品项目组合的其他商品项目；商品项目检索过程，根据用户从上述商品项目与上述其他商品项目的组合中选择的组合中的上述其他商品项目的图像数据和该图像数据的属性信息，从积存上述销售商品项目的属性信息的商品项目数据库中检索相同或者类似的销售商品项目，并作为推荐商品输出；和条件设定过程，设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、与状况相关的状况信息中的至少一个的检索条件，上述类似项目检索过程、上述组合检索过程、上述商品项目检索过程中的至少一个根据由上述条件设定过程设定的上述检索条件进行检索。

根据本发明的实施方式，能够容易地检索到用户想要检索的对象物或者与该对象物类似的对象物。

附图说明

图1是表示检索辅助系统的构成例的框图。

图2A是表示存储在图1的数据库16中的商品表的构成例的概念图。

图2B是表示存储在图1的数据库16中的商品表的构成例的概念图。

图3是表示存储在图1的数据库16中的用户登记表的构成例的概念图。

图4是表示检索辅助系统中的商品检索的动作例的流程图。

图5是表示检索辅助系统中的嗜好信息收集的动作例的流程图。

图6是表示检索辅助系统的构成例的变形例的框图。

图7是表示检索辅助系统的构成例的框图。

图8是记录了图7中的商品项目数据库26的类别1(衬衫)的组合商品项目的属性信息的表。

图9是记录了图7中的商品项目数据库26的类别2(裤子)的组合商品项目的属性信息的表。

图10是记录了图7中的商品项目数据库26的类别3(短外套)的组合商品项目的属性信息的表。

图11是表示销售中的类别1的销售商品项目和从与其类似的图像介质中收集的类别1的组合商品项目的对应的表。

图12是表示销售中的类别2的销售商品项目和从与其类似的图像介质收集的类别2的组合商品项目的对应的表。

图13是表示销售中的类别3的销售商品项目和从与其类似的图像介质收集的类别3的组合商品项目的对应的表。

图14是表示图7中的组合信息数据库28中的、从图像介质收集的组合商品项目的各类别间的组合的表。

图15是记录图7中的组合商品图像信息数据库29的类别1(衬衫)的组合商品项目的属性信息的表。

图16是记录了图7中的组合商品图像信息数据库29的类别2(裤子)的组合商品项目的属性信息的表。

图17是记录了图7中的组合商品图像信息数据库29的类别3(短外套)的组合商品项目的属性信息的表。

图18是表示图7的检索辅助系统的动作例的流程图。

图19是表示图7的历史数据库31中的用户表的构成的概念图。

图20是表示图7的历史数据库31中的购买历史表的构成的概念图。

图21是说明基于Graph-Cut法的图像数据的分割的概念图。

具体实施方式

＜第1实施方式＞

以下，参照附图对本发明的一个实施方式的检索辅助系统进行说明。图1是表示本实施方式的检索辅助系统的构成例的框图。

在该图中，检索辅助系统具有检索服务器1和经由由互联网等构成的信息通信网I与上述检索服务器1连接的用户终端2。

在此，用户终端2是用户所具有的终端，分别根据用户固有的用户识别信息而被识别。

以下，在本实施方式中，作为用户想要检索的对象物，以时尚商品、服装、鞋、项链、帽子等商品的检索以及购买为例进行说明。此外，在本实施方式中并不局限于时尚商品、服装、鞋、项链、帽子等商品，还可以应用于电气产品、家具、绘画等能够经由互联网或者网络检索的对象物。另外，对于本实施方式中的对象物，作为一个例子可举出商品、物品、电气产品、家具、绘画、包含店铺、公司的建筑物、植物、动物、不动产(包括公寓的外观、内装、户型等)、风景等。

检索服务器1是辅助上述用户在互联网上的店铺等检索商品的服务器，该检索服务器1具备提取部11、种类判定部12、检索部13、组合提取部14、嗜好提取部15、数据库16、收发部17以及条件设定部18。

在数据库16中，如图2A所示那样，存储有对应于识别各商品的商品识别信息，该商品的名称、该商品的图像数据、即商品图像数据(对象物图像数据)、从商品图像数据提取出的特征信息、销售该商品的店铺信息、该商品的价格、与和该商品组合的其他商品的组合信息、表示商品的种类(服装、鞋、帽子、项链等商品种类(genre))的种类识别信息、和作为表示使用用途的属性信息的用途信息被建立对应的商品表。在该数据库16中，依次积存有例如来自在检索辅助系统中登记成会员的店铺的商品的信息。上述特征信息是指对颜色、形状、图案、纹理等要素进行数值数据(例如，与要素数目对应的维度的向量)化后的信息。另外，在以用户想要检索的商品的图像、与积存在数据库16中的商品图像(对象物图像)为基础，直接比较该各个图像的情况下，还可省略种类判定部12。

另外，作为用途信息，可设定时间(time)信息、场所(place)信息以及状况(occasion)信息等。对于时间信息，设定年月日、时间、早晨、上午、下午、晚上、季节(春、夏、秋、冬、全年)、国民节假日、儿童节以及女儿节等节日等与时间相关的信息。对于场所信息，设定国内、海外(亚洲、欧美等地名)、公园、修养地(resort)、城市、海、山、高原、高级餐厅等与场所相关的信息。另外，对于状况信息，有上班、上学、打工、去修养地、去城市、欢迎会、送别会、国内旅行、海外旅行、驾驶、远足、自行车旅游、步行、年终联欢会、新年会、联合会、相亲、离婚商谈、葬礼、幼儿园入园典礼、幼儿园毕业典礼、入学典礼(自己或孩子)，毕业典礼(自己或孩子)、登山、海水浴、去高原、结婚典礼的招待会、入职联欢会、毕业联欢会、结婚纪念日、生日、烧烤、高级餐厅等的信息。另外，对于状况信息，还可以结合情况设定要穿着的服装种类。例如，作为该种类，有传统服饰、女性化服饰、便服、运动装、华丽服装、职业装、正装、雅致服饰、甜美服饰、酷的服饰、休闲装、清凉商务装、暖商务装、戏服、流行服饰等。另外，作为状况信息，还可以使用作为表示天气的信息的天气信息、例如，晴、阴、雨、雪、台风、暴风等。此外，作为状况信息，还可以使用心理信息作为与深层心理相关的信息，例如没精神、忧郁、暗淡、不安、悲伤、快乐(欢快的心情)、高兴、温和、平稳、激烈等。另外，作为状况信息，还可以使用与给周围的印象相关的影响信息，例如，质朴、黑暗、开朗、温柔、文雅、干净、健康、有女人味、有男人味、知性、有亲切感、爽快等。图2B表示与商品对应的用途信息(日期时间信息、场所信息、状况信息)的一个例子。

另外，条件设定部18还可以构成为，对作为日期时间信息而被输入的日期，根据月日划分成在内部预先设定的春夏秋冬的范围，将输入的日期变更为季节使用。例如，将3月15日～6月14日划为春天，将6月15日～9月14日划为夏天，将9月15日～12月14日划为秋天，将12月15日～3月14日划为冬天，作为日期时间信息若被输入8月10日，条件设定部18则判定为夏季，并将该季节作为用途信息使用。

另外，条件设定部18还可以构成为，根据时间范围划分早晨、上午、下午、晚上的时间段，将输入的时间变更为时间段来使用。例如，将上午4时0分～上午6时59分划分为早晨，将上午7时0分～上午11时59分划分为上午，将下午0时0分～下午4时59分划分为下午，将下午5时0分～上午3时59分划分为晚上，作为日期时间信息若被输入上午10时0分，条件设定部18则判定为上午的时间段，将该时间段作为用途信息使用。

上述用途信息在用户终端2的显示画面上显示为组合框(例如，组合了文字输入用的矩形区域(文本框)与项目选择列表(列表框))，利用指示设备(pointing device)从该组合框中选择上述用途信息。例如，若通过鼠标点击来选择，则用户终端2将通过点击而被选择的组合框中的用途信息的项目设为用户所选择的用途信息。显示在该用户终端2的显示画面上的组合框的图像信息可以被构成为，作为应用程序被预先安装于用户终端2、或者在检索处理的应用程序被启动时，用户终端2从检索服务器1读入组合框的图像信息。

上述提取部11经由收发部17输入用户从用户终端2发送来的输入图像数据(由用户提供的图像数据)，来提取该输入图像数据内的检索部分。更详细而言，提取部11提取该输入图像数据内的商品的图像区域的轮廓(检索部分)，生成轮廓图像数据(检索部分的图像数据)。这里，在轮廓图像数据的提取处理中，轮廓是指图像的浓度值急剧变化的部分，为了提取该部分进行微分运算。但是，在数字图像中，数据以恒定间隔分散地排列，因此用取相邻像素间的差的运算(差分)进行近似微分，将像素的浓度急剧变化的部分作为轮廓提取出。

种类判定部12根据上述轮廓图像数据，从预先存储在数据库16中的商品的轮廓数据表中的样板图像数据中，检索与轮廓图像数据对应的样板图像数据，并与该样板图像数据对应地读入在数据库16中设定的种类识别信息。该样板图像数据优选通过从多个角度拍摄各种类的多数商品，并作为用于与轮廓进行比较的样板被预先存储在数据库16的上述轮廓数据表中。

检索部13为了从上述种类识别信息所对应的种类的存储区域中进行类似的图像数据的提取，进行检索图像数据的特征提取，该检索图像数据是进行了输入图像数据中的轮廓提取后的数据。检索部13从数据库16中的上述商品表的具有与被判定出的种类对应的种类识别信息的图像数据中检索与基于该特征提取而得到的特征信息一致或类似度高的特征信息，对类似度高的商品，按照类似度从高到低的顺序提取预先设定数目的商品的图像数据。在此，在未设有种类判定部12的情况下，检索部13比较进行了输入图像数据中的轮廓提取的商品的图像与商品表全体中的商品图像数据，对进行了上述轮廓提取的商品的图像提取类似度高的商品图像数据。

另外，条件设定部18经由收发部17读入用户从用户终端2与输入图像数据一起发送的用途信息，将该用途信息设定在内部，并且向检索部13输出。

并且，检索部13在按上述类似度从高到低的顺序提取商品图像数据时，从具有由条件设定部18输入的用途信息的图像数据中，按类似度从高到低的顺序提取商品图像数据。

由此，检索部13从商品表中，检索与输入图像数据类似且具有用户设定的用途信息的商品。其结果，检索部13能够从商品表中提取用户喜欢的形状、并且与用户要使用的用途对应的商品。

另外，检索部13将与检索到的商品图像数据对应的商品信息(对象物信息)从商品表读出，向用户的用户终端2发送。其中，上述的商品信息是包含名称(商品名)、销售与商品图像数据对应的商品的销售店铺、该店铺的URL、该店铺的电话号码、地址以及商品的价格中的至少一个的信息。

嗜好提取部15随机从上述商品表中提取预先设定的数目的、用户检索出的商品的种类所包含的其他商品(与用户检索出的商品相同种类的商品)的图像数据，并向用户终端2发送。

用户终端2将从检索服务器1发送的图像数据显示在未图示的显示画面上。

另外，嗜好提取部15输入从用户终端2发送的对各商品(例如，存储在数据库16中的商品图像数据)的评价结果(例如，喜欢或不喜欢的判定结果等)，按每一个用户将包含形状、颜色、图案、纹理中的至少一个的嗜好信息写入并记录在数据库16的图3所示的用户登记表中。

在此，在上述用户登记表中，与用户识别信息对应地存储有表示过去购买了什么样的商品的购买信息(包含购买的商品识别信息、购买时间、购买店铺、购买价格等)、嗜好提取部15提取的嗜好信息以及表示用户具有的积分数的积分信息。该积分在购买商品的支付时，能够与现金同样使用。

即、在上述的店铺信息中附加有打折券信息，用户利用该打折券信息购买检索到的商品的情况下，检索服务器1将与该商品相关的购买信息存储在数据库16的上述用户登记表中。并且，检索服务器1将与购买的商品的价格对应的积分作为上述积分信息的积分数针对上述用户登记表内的对象用户进行累计。此外，嗜好提取部15还可以从上述购买信息中按种类提取嗜好信息。

组合提取部14检索将与提取出的商品组合购买的可能性高的其他种类的商品预先与嗜好信息对应存储的组合信息所对应的商品，并向用户的终端发送。

接下来，使用图1以及图4，说明本实施方式中的检索辅助系统的动作。图4是说明本实施方式中的检索辅助系统的动作例的流程图。在以下的说明中，对设有种类判定部12的情况进行说明。在未设有种类判定部12的情况下，种类判定部12的处理被从流程图省略。

用户利用与用户终端2连接的彩色扫描仪等从杂志等读取穿着喜欢的服装的模特的图像、或者利用数码照相机拍摄、或者从互联网下载图像(步骤S1)。

然后，用户将读取到的图像、拍摄的图像、或者下载的图像作为输入图像数据输入用户终端2，根据该输入图像数据中多种类的商品的有无(步骤S2)，来判定是否选择想要检索的商品的图像的区域。其中，上述输入图像数据可以预先存储于用户终端2，也可以预先存储于外部的终端。

此时，例如，在要检索裙子的商品名以及销售中的店铺时，如果是仅反映出裙子的输入图像数据，则将处理进入至步骤S4。

另一方面，在不仅有裙子部分的图像，还拍摄了模特整体的情况下，将处理进入至步骤S3。

然后，用户利用安装于用户终端2的图像处理的工具(只要是在输入图像数据中能够进行描线的加工的工具即可)，在输入图像数据中用线等划出裙子区域部分的图像来进行图像选择(步骤S3)，然后将处理进入至步骤4。

另外，此时，用户将检索上述输入图像数据时使用的用途信息，例如，日期时间信息、场所信息以及状况信息中的至少一个，对用户终端2输入。

用户终端2将用户输入的输入图像数据(包括进行了图像选择的数据)和用途信息与自身的用户识别信息一并作为检索委托信号经由信息通信网I向检索服务器1发送(步骤S4)。

此外，在上述的步骤S2中，用户终端2将输入图像数据(模特整体图像)暂时发送到检索服务器1。检索服务器1判定在从用户终端2接收的输入图像数据中是否包含有多个种类的商品，将其判定出的多个种类的商品作为图像提取出。并且，检索服务器1还可以将其提取出的多个种类的图像的数据向用户终端2发送。该情况下，在步骤S3中，用户从多个种类的图像的数据中，进行想要检索的种类的商品的图像的数据的选择，并将处理进入到步骤S4，其中，多个种类的图像的数据是从从检索服务器1接收到的输入图像数据中提取出的。

接下来，检索服务器1中的收发部17若从用户终端2接收到上述检索委托信号，则将上述的输入图像数据向提取部11输出，将登记信息向条件设定部18输出。

提取部11进行从收发部17输入的输入图像数据中的商品图像的轮廓提取(检索部分的提取)。

此时，在输入图像数据中任意的区域中均未被划线的情况下，提取部11进行输入图像数据整体的轮廓图像数据的提取，另一方面，如果有被划线的区域部分，则进行该区域部分的图像的轮廓图像数据的提取。

然后，种类判定部12根据上述轮廓图像数据，从预先存储在数据库16中的与商品的种类对应的轮廓数据表中，检索与轮廓图像数据对应的样板图像数据，从轮廓数据表读入与该样板图像数据对应的种类识别信息。(步骤S5)。此时，作为向用户发送的提取结果，检索部13将计数的商品的数清零。

检索部13对应上述轮廓图像数据中的轮廓内部，在输入图像数据中进行检索的图像数据(检索图像数据)的特征提取，从数据库16的商品表中检索与检索图像数据的特征信息(例如，基于颜色、形状的各信息)类似的商品图像数据(步骤S6)。

此时，检索部13求出特征信息的各要素(例如，如果特征信息是基于颜色的信息，则是蓝、红、黄等)的向量的距离，进行是否与该距离一致、该距离近或远的类似度的计算。此外，将该距离近的设为类似度高，并提取类似度最高的商品。在此，在已经作为类似度最高的商品被提取，而作为内部的比较完成文件被存储的商品以外，提取在商品表中剩下的商品中类似度最高的商品图像数据。

接下来，检索部13对在条件设定部18中设定的用途信息和与提取出的商品图像数据对应的商品的用途信息进行比较，进行是否一致的判定(步骤S7)。

此时，检索部13例如分别对用途信息的多个项目(日期时间信息、场所信息、状况信息)、与在条件设定部18中设定的用途信息的各项目进行比较，在每个项目中至少一个一致的情况下，判定为提取出的商品的用途信息与在条件设定部18中登记的用途信息一致。另外，检索部13将进行了比较的商品、即作为类似度高的而被提取出的商品写入内部的比较完成文件，并将处理进入至步骤S9(步骤S8)。

然后，检索部13将用途信息一致的商品的商品识别信息作为提取结果存储在内部的提取文件中(写入)，并且使表示提取结果的商品的数目的提取数增加一个。另一方面，当用途信息不一致时，检索部13不进行将该商品的商品识别信息向提取文件写入的处理以及使提取数增加一个的处理，将处理进入至步骤S9(步骤S7)。

检索部13进行提取数是否与预先设定的、向用户发送的商品数一致的判定(步骤S9)，在提取数与向用户发送的商品数一致的情况下，将处理进入到步骤S10，另一方面，在提取数与向用户发送的商品数不一致时，将处理进入至步骤S6。

接下来，检索部13从提取文件中读出检索到的商品的商品识别信息，并从商品表中读出与该商品识别信息对应的商品的商品信息(包含商品名、商品的价格、商品图像数据销售店铺、URL、店铺的电话号码以及地址中的至少一个的信息)，经由收发部17向用户的用户终端2发送(步骤S10)。在此，作为一个例子，收发部17读出在从用户终端2发送检索委托信号时附加的用户终端2的网络上的地址(address)，对该地址发送上述商品信息。

然后，用户终端2在显示画面上显示从商品销售检索服务器1发送的、检索结果的商品名、图像数据、店铺以及价格的信息。

此外，在上述的步骤S5中，检索服务器1还可以仅在数据库16中的用户登记表中检测出检索委托信号所包含的用户识别信息已经被登记在上述用户登记表中的情况下，根据检索委托信号所包含的输入图像数据，从数据库16提取检索对象的商品图像数据。另外，检索服务器1在检测出检索委托信号所包含的用户识别信息未被登记在上述用户登记表中的情况下，例如，将表示需要基于用户识别信息的用户登记的意思向用户终端2发送即可。

由此，用户通过将喜欢的商品的图像数据以及该商品的用途的信息、即用途信息从用户终端2向检索服务器1发送，作为检索服务器1的提取结果可获得喜欢的商品或者与该商品类似的商品的商品名、表示销售中的店铺的店铺信息、该商品的价格等信息。

在上述本实施方式中，虽然说明了用户从用户终端2对检索委托信息附加用途信息发送的构成，但也可以构成为，条件设定部18判定从输入图像数据中检索的商品的材质(棉、毛、丝、羊绒等)，根据该材质进行作为日期时间信息的季节(春、夏、秋、冬)等的判定、或者根据颜色等提取状况信息等条件作为检索条件使用。

另外，条件设定部18还可以构成为，从输入图像数据提取人物，从该人物的背景图像中提取检索条件作为检索条件使用。该情况下，例如，条件设定部18具有用途数据提取用数据库，能够确定背景图像中的树，从该用途数据提取用数据库中检索相同的图像，根据花以及叶的状态判定季节、或者根据背景图像中的文字数据判定场所信息等。

另外，在上述本实施方式中，虽然说明了将用途信息作为商品表中的各商品的属性信息附加的情况，但还可以按用途信息的类别(category)的分类构成商品表。例如，可以构成春用、夏用、秋用以及冬用的各个商品表来使用。该情况下，检索部13选择与由用户终端2在检索委托信息中附加的登记信息对应的商品表，从选择出的商品表中检索与输入图像数据类似的商品，从而能够缩短检索时间。

在此，在店铺信息中附加有打折券信息，利用该打折券信息，购买检索到的商品的情况下，商品销售检索服务器1对该对象店铺收取与商品的价格对应的金额。

接下来，使用图1以及图5说明本实施方式的检索服务器1提取用户的嗜好信息，根据该嗜好信息对上述检索到的商品提示能够组合的其他商品的处理。图5是说明收集用户的嗜好信息，根据该嗜好信息介绍其他商品的动作例的流程图。

嗜好提取部15提取与用户检索到的商品相同的种类，例如用户检索到的商品为鞋的情况下，从商品表中提取预先设定的数量的鞋(步骤S11)，并将该商品图像数据和商品识别信息向用户终端2发送(步骤S12)。

此时，检索服务器1对用户发送的各种类的商品是颜色、形状、图案等不同的特征的商品，其被设定为时尚导购能够提取用户的嗜好信息的商品。

然后，用户终端2若从检索服务器1接收到嗜好提取用的商品的商品图像数据，则在显示画面上依次显示该商品的商品图像数据(显示图像)。

此时，在上述显示画面所显示的显示图像上，用户在喜欢所显示的商品图像数据的商品的情况下，利用鼠标等输入工具点击“好按钮”，另一方面，在不喜欢所显示的商品图像数据的商品的情况下，利用鼠标等点击“不好按钮”来进行选择(步骤S13)。

当选择“好按钮”或者“不好按钮”时，用户终端2在显示画面上显示下一个商品的商品图像数据，对接收到的全部商品图像数据或者规定数目持续这些处理，直到用户的好坏判定的选择结束为止。

当对上述的商品图像数据的好坏判定结束时，用户终端2按商品识别信息将与商品的好坏判定数据对应的判定结果信息附加自身的用户识别信息后向检索服务器1发送(步骤S14)。

当输入判定结果信息时，收发部17判定附加的用户识别信息是否已经被登记在用户登记表中，如果已经被登记，则对嗜好提取部15输出上述判定结果信息。

接下来，嗜好提取部15当被输入了判定结果信息时，从数据库16中的嗜好信息表中选择与好坏判定的模式对应的嗜好信息。

在此，好坏判定的模式是指，与按照预先决定的顺序排列的商品识别信息对应的好判定以及不好判定的数据模式。

然后，嗜好提取部15将取得的嗜好信息与用户识别信息对应地写入数据库16中的用户登记表来存储(步骤S15)。

接下来，组合提取部14从数据库16中的组合信息表中选择与上述的嗜好信息对应的商品的组合信息。在该组合信息表中，当提取了对鞋的嗜好信息时，组合提取部14例如在该组合信息表中在与该嗜好对应的服装、包、帽子等中选择对应的组合信息。

在该组合信息表中，预先存储有与嗜好对应的服饰的类别间的要素(鞋、衣服、包、帽子等)间的组合。

然后，组合提取部14提取与从组合信息表中选择的组合信息一致或者类似的、衣服、包、帽子等商品图像数据(已经说明过的使用特征信息(组合嗜好信息)的类似商品检索的提取处理)(步骤S16)，在仅有一个给模特配鞋并穿戴好所选择的衣服、包、帽子等的着装图像数据的组合的情况下，将单数的种类向用户终端2发送、或者在有多个组合的情况下，对各组合附加组合识别信息后，将多个种类向用户终端2发送(步骤S17)。

当接收到着装图像数据时，用户终端2在显示画面上显示该着装图像数据。由此，用户能够针对已经检索或购买的商品，取得与自身的嗜好对应的时尚组合的信息。

在此，用户如上述那样进行好坏判定，从而用户终端2使好坏判定数据对应于每个组合识别信息，并附加自身的用户识别信息作为判定结果信息，向检索服务器1发送。

并且，当输入判定结果信息时，收发部17判定附加的用户识别信息是否已经被登记在用户登记表中，如果已经被登记，则对嗜好提取部15输出上述判定结果信息。

嗜好提取部15根据与输入的组合识别信息对应的好坏判定模式，生成组合嗜好信息。该组合嗜好信息对应鞋的形状、颜色、图案、纹理等，由受到好判定的其他衣服、包、帽子等的形状、颜色、图案、纹理的组合构成，在每当用户购买商品时进行学习，提高了在进行与组合信息所包含的各商品类似的商品的提取时所使用的组合嗜好信息与用户的嗜好吻合的准确度。

即，接下来，当用户根据该组合的着装图像数据购买了包时，检索针对包的嗜好信息，即可获得与该嗜好信息对应的鞋、衣服、帽子等组合嗜好信息，因此各用户的嗜好被依次锁定。

另外，作为挑战组合(如用户普通不会选择那样的组合、或者是与上述嗜好信息不同的组合)，时尚向导可以从商品表中随机选择一些与从嗜好信息中选择的组合信息相反的组合信息所对应的商品，将该所选择的商品在着装图像数据的生成时插入一些组合。

由此，具有使用户的嗜好多元化，增加进一步购买希望的可能性。

另外，本实施方式的检索辅助系统如图6所示，还可以构成为具备使用户终端2构成为具备与上述的提取部11具有相同的提取功能的提取部11a的用户终端2a、和除去提取部11的检索服务器1a。该情况下，提取部11a以用户终端2a取得的输入图像数据、或者存储在用户终端2a中的输入图像数据为基础，提取该输入图像数据的检索部分(例如，商品部分)，仅将相当于检索部分的图像数据作为输入图像数据向检索服务器1a发送即可。另外，除了提取部11a以外，均与上述的实施方式相同，故省略说明。这样，用户仅将输入图像数据中的相当于检索部分的图像数据作为要发送的图像数据向检索服务器1a发送即可，例如，无需将相当于用户的脸部分或其他人的脸部分的图像数据向检索服务器1a发送。

此外，不仅能够将本实施方式中的检索辅助系统对衣服、鞋等商品应用，还可以对上述对象物应用。另外，例如，本实施方式中的检索辅助系统还可以应用于在住宿设施(宾馆、旅馆等)、餐厅等中提供的服务。例如，在上述的住宿设施中，本实施方式的检索辅助系统能够在选择房间户型的组合、窗的风景的组合、房间或者其户型与窗的风景的组合等时应用。另外，例如在上述餐厅等中，本实施方式的检索辅助系统能够在选择餐厅的室内装饰的组合、窗的风景的组合、音乐的组合、室内装饰与窗的风景的组合、室内装饰与音乐的组合、窗的风景与音乐的组合等时应用。

＜第2实施方式＞

以下，参照附图说明本发明的一个实施方式的检索辅助系统。

以往，在购买组合了多个不同种类的商品的组合商品时，或者、在从上述虚拟商店的大量商品群中进行选择时，用户根据自己收集(通过互联网等访问)信息进行商品的选择、购买。

例如，在购买组合了多个不同种类(类别)的商品的组合商品(例如，服饰、组合家具、组合家电等)时，在不实际去零售店的情况下，无法直接向店员咨询哪种组合是合适的。

另外，在对用户自身购买的商品或者要购买的商品进行组合的情况下，在从上述虚拟商店的大量商品群中选择非常匹配的商品时，无法向组合商品的向导一一确认，由于用户自身无法选择而不能进行购买。

作为上述情况的一个例子，当在服饰中选择与用户购买的短外套匹配的裤子或者衬衫时，用户根据自己从杂志或顾问(销售员、专家、熟人)取得的信息来进行选择、购买。

例如，想要在服饰中选择与用户购买的短外套匹配的裤子或者衬衫，但无法向一流的时尚向导确认而担心选择不好的组合，而放弃匹配的裤子、衬衫的购买。

在此，服饰表示人直接穿在身体上(人穿戴)的衣服、佩戴物(装饰品、包、鞋、帽子等)的全部。

本实施方式在用户检索对象物时，能够通过信息提供等来辅助检索。

例如，在组合商品的购买中，针对用户要购买的或者已经购买的商品，能够从商品群中提取与进行了组合的情况匹配的商品，并将提取出的商品推荐给用户，来辅助用户购买组合商品。

图7是表示本实施方式的检索辅助系统的构成例的框图。本实施方式是在购买由多个类别的销售商品项目构成的商品项目组合中的任意类别的销售商品项目时，按照通过将被推荐为与已经购买的销售商品项目为较佳组合的商品项目组合中的、其余的类别的销售商品项目提示为推荐商品，以使用户从众多的销售商品项目中容易选择被推荐为与要购买的销售商品项目为较佳组合的销售商品项目的方式进行辅助的系统。在以下的说明中将服饰中的各商品(西装夹克、衬衫、裤子等类别的商品)全部作为商品项目，将虚拟商店实际销售中的商品项目作为销售商品项目，将在后述的图像介质中被组合的商品项目分别作为组合商品项目进行说明。

在该图中，检索辅助系统由商品检索辅助装置100和一个或者多个用户终端200构成。商品检索辅助装置100具有控制部21、类似项目检索部22、组合检索部23、商品检索部24、收发部25、商品项目数据库26、商品项目图像数据库27、组合信息数据库28、组合商品图像信息数据库29、组合商品图像数据库30以及条件设定部32。用户终端200例如是在各用户的各家庭中设置的、具有互联网浏览器的个人计算机。商品检索辅助装置100、用户终端200通过包括互联网的信息通信网I而连接。

商品项目数据库26按商品项目的种类，具有多个表结构的存储区域。

即、商品项目数据库26如图8所示那样，具有按作为类别1的衬衫的商品项目的识别信息A1～An存储有销售中的销售商品项目的属性信息的表结构的存储区域。

另外，同样地，商品项目数据库26如图9所示那样，具有按作为类别2的裤子的商品项目的识别信息B1～Bn存储有对应的销售商品项目的属性信息的表结构的存储区域。

另外，同样地，商品项目数据库26如图10所示那样，具有按作为类别3的短外套的商品项目的识别信息C1～Cn存储有对应的销售商品项目的属性信息的表结构的存储区域。

此外，商品项目数据库26虽然未图示，除了上述各类别以外，还具有分别存储作为服饰的其他类别的鞋、女式衬衫、包等多个表的存储区域。

另外，在商品项目数据库26的各表中，作为属性信息之一，设有类似商品项目的栏，与销售商品项目相同或者类似的组合商品图像信息数据库29中的商品项目分别如图11(类别1-衬衫)、图12(类别2-裤子)以及图13(类别3-短外套)所示那样，被对应存储为各销售商品项目的各自类似的商品项目的组。

在此，在商品项目数据库26(类别1～类别3)中，作为属性信息，有作为相同或者类似建立了对应的组合商品项目(后述的组合商品图像信息数据库29中的商品项目)的识别信息、从销售商品项目的图像数据中提取出的图像的特征数据、销售商品项目的价格以及品牌等销售信息、在第1实施方式中说明的用途信息等。对于图像的特征数据的种类以及取得方法将在后面说明。

商品项目图像数据库27将存储在商品项目数据库26中的各类别的每一个销售商品项目的图像数据与上述各销售商品项目的识别信息分别对应地存储。

组合信息数据库28将在时尚杂志、时尚目录以及互联网上的图像介质中模特等组合穿戴的服饰商品、即组合穿着的商品项目的每一个设为组合商品项目，并使组合商品项目与组合的组合商品项目的各对应关系的组合对应各自的识别编号而存储。在例如在时尚杂志中模特穿着识别信息a1-1的衬衫、识别信息b1-2的裤子、识别信息c1-7的短外套的各商品项目的情况下，如图14的组合信息数据库28中的第一行所示，识别信息a1-1与识别信息b1-2与识别信息c1-7的组合商品项目以组的方式建立对应而被存储。

该组合信息为时尚设计师组合制作的商品项目的组合、时尚向导将时尚设计师设计的商品项目的组合作为组合商品项目的组合。因此，每一个组合商品项目均为被挑选的组合，如果是这种组合，则在实际穿着时，看到该时尚的人不会感到不协调而自然接受的可能性较高。

组合商品图像信息数据库29将从时尚杂志、时尚目录和互联网上的设计师集锦信息等图像介质(提示有杂志的照片、插图等图像的资料或者装置)取得的服饰中的组合商品项目分类别积存。在此，组合商品图像信息数据库29例如由图15、图16以及图17所示的表结构构成。

图15中作为类别1将衬衫作为组合商品项目积存，图16中作为类别2将裤子作为组合商品项目积存，图17中作为类别3将短外套作为组合商品项目积存。在组合商品图像信息数据库29中，组合商品项目附有识别信息，按识别信息存储有对应的组合商品项目的属性信息。该属性信息例如是类似的销售商品项目的识别信息、从组合商品项目的图像数据中提取出的图像的特征数据、组合商品项目的价格以及品牌等的销售信息、在第1实施方式中说明的用途信息等。关于特征数据的种类以及取得方法将在后面说明。

另外，在组合商品图像信息数据库29的各表中设有作为属性信息之一的类似商品项目栏，与组合商品项目相同或者类似的商品项目数据库26中的商品项目如图15(类别1-衬衫)、图16(类别2-裤子)以及图17(类别3-短外套)所示，被建立对应而存储。

在上述组合商品图像信息数据库29中，图15的表中，识别信息a1-1～a1-q作为与销售商品项目A1相同或者类似的组合商品项目而被存储，识别信息a2-1～a2-k作为与销售商品项目A2相同或者类似的组合商品项目而被存储，依次地，识别信息an-1～an-m作为与销售商品项目An相同或者类似的组合商品项目而被存储。

同样地，在组合商品图像信息数据库29中，图16的表中，识别信息b1-1～b1-m作为与销售商品项目B1相同或者类似的组合商品项目而被存储，识别信息b2-1～b2-r作为与销售商品项目B2相同或者类似的组合商品项目而被存储，依次地，直至识别信息bn-1～bn-q为止作为与销售商品项目Bn相同或者类似的组合商品项目而被存储。

同样地，在组合商品图像信息数据库29中，图17的表中，识别信息c1-1～c1-q作为与销售商品项目C1相同或者类似的组合商品项目而被存储，识别信息c2-1～c2-k作为与销售商品项目B2相同或者类似的组合商品项目而被存储，依次地，直到识别信息cn-1～cn-m为止作为与销售商品项目Cn相同或者类似的组合商品项目而被存储。

组合商品图像数据库30将存储在组合商品图像信息数据库29中的各类别的每一个组合商品项目的图像数据与上述各组合商品项目的识别信息分别对应存储。

另外，上述的商品项目数据库26、商品项目图像数据库27、组合信息数据库28、组合商品图像信息数据库29以及组合商品图像数据库30还可以根据性别、年代不同、时尚的趋势(例如，如果是男性，则可以分便服(Casual)、保守系、兄长系、成熟系、街头系、里原(原宿)系、流行系、另一方面，如果是女性，则分为女人(GAL)系、姐妹系、保守系、少女系、名媛系等)等来分类。

这样分类的情况下，在进行向导的处理之前，需要从用户取得性别、年龄段(十几岁、二十几岁、三十几岁、…等)、时尚的趋势等作为分类的信息。

返回图7，控制部21通过自己管理的虚拟商店被用户终端200访问而起动，取得性别、年龄段以及时尚的趋势等分类信息、或将对后述的组合项目进行显示以及选择操作的处理程序(通过用户终端的浏览器等而动作)向用户终端200发送。在此，控制部21与用户终端200经由信息通信网I和收发部25进行各数据的收发。用户终端200通过内部的浏览器起动上述处理程序，进行图像显示或者选择销售商品项目或者组合商品项目的处理中的与商品检索辅助装置100的数据收发。

另外，控制部21若从用户终端200接收到对上述画面数据的回答数据，则从与其性别、年龄段以及时尚的趋势对应的多个商品项目数据库26中选择任意一个商品项目的表，并且将表示组合商品项目的类别的类别信息，例如衬衫、裤子、短外套、鞋等文字信息、或者图像信息经由收发部25以及信息通信网I向用户终端200发送。

另外，控制部21若接收到从用户终端200发送的、表示用户选择的类别的种类，例如衬衫的类别信息，则选择作为商品项目数据库26的将衬衫(类别1)作为类别的图8所示的表，读入该表中的商品项目的识别信息A1～An，将到识别编号A1～An为止的商品项目的图像数据从商品项目图像数据库27中读出，转换成缩略图像的图像数据(使图像数据的位数减少)，分别附加对应的销售商品项目的识别编号后，向用户终端200发送。

另外，控制部21在用户根据缩略图像选择购买的销售商品项目的识别编号被输入时，进行针对订货的接受订货的处理，并且，将输入的识别编号向类似项目检索部22发送。在此，接受订货处理是对用户终端200请求与作为属性信息存储的价格对应的费用请求、接受订货的销售商品项目的在库确认、向用户输入的地址的销售商品项目发货手续等。

条件设定部32将从用户终端200发送的用途信息与用户选择的缩略图像的识别编号一并经由收发部25读入，将该用途信息对内部设定并且向类似项目检索部22输出。该条件设定部32的构成以及动作与第1实施方式中的条件设定部18相同。

类似项目检索部22从组合商品图像信息数据库29的表(类别1)中检索与输入的销售商品项目的识别编号一致的识别编号被记载(设定)在类似商品项目栏中的多个组合商品项目，将与上述销售商品项目相同或者类似的组合商品项目作为类似商品项目提取，并向组合检索部23输出。此时，类似项目检索部22从组合商品图像信息数据库29的表(类别1)中选择与输入的销售商品项目的识别编号一致的识别编号被记载在类似商品项目栏中的多个组合商品项目，并且，选择具有与在条件设定部32中设定的用途信息相同的用途信息的商品项目作为类似商品项目提取。

即、类似项目检索部22比较在条件设定部32中设定的用途信息、与在组合商品图像信息数据库29中的商品项目的用途信息，进行是否一致的判定。此时，类似项目检索部22例如比较各用途信息的多个项目(日期时间信息、场所信息、状况信息)、与在条件设定部32中设定的用途信息的各项目，在各自的项目中至少一个一致的情况下，判定为提取的商品的用途信息、与在条件设定部18中登记的用途信息一致。

组合检索部23从组合信息数据库28中检索与从类似项目检索部22输入的识别编号的类似商品项目分别对应的、不同类别例如裤子(类别2)的商品项目，提取对应的组合商品项目，将该组合的识别信息作为第2组合商品项目向控制部21输出。

另外，控制部21与每一个识别信息对应地从组合商品图像数据库30中读出从组合检索部23输入的类似商品项目的识别信息、与第2组合商品项目的识别信息的多个组合的识别信息所对应的图像数据，并向用户终端200发送，若输入了用户选择的组合中的组合商品项目的识别信息，则将接收到的识别信息向商品检索部24输出。

商品检索部24从商品项目数据库26中检索与输入的第2组合商品项目的识别信息对应的、实际销售中的销售商品项目，作为与用户购买的销售商品项目组合的不同类别的推荐销售商品项目，通过识别信息从商品项目图像数据库27中读出该推荐销售商品项目的图像数据，并向用户终端200发送。

另外，商品检索部24也可以将被设为推荐商品的销售商品项目的金额与用户购买的销售商品项目的金额进行比较，判定是否是设定的范围(例如，购买的组合商品的金额的0.5～2倍以内)，如果在购买金额以下，则向用户终端200发送，如果在范围外，则不发送推荐商品。

接下来，参照图7以及图18说明本实施方式的检索辅助系统的动作。图18是表示图7中的检索辅助系统的动作例的流程图。以下，将用户输入的商品作为商品项目说明，将虚拟商店中实际销售的商品作为销售商品项目(商品项目数据库26中的商品项目)说明，将从选择商品的组合时使用的图像介质中提取的商品作为组合商品项目(组合商品图像信息数据库29中的商品项目)说明。

当通过用户的操作，用户终端200经由信息通信网I访问商品检索辅助装置100管理的虚拟商店时，控制部21将用于取得性别、年龄段以及时尚的趋势的信息、和显示后述的组合项目、或者进行所显示的图像的选择操作的处理程序向用户终端200发送。在用户终端200内，在互联网浏览器内通过上述处理程序具备图像显示处理部与选择处理部，显示从商品检索辅助装置100发送的图像数据，或者进行图像数据的编辑处理、图像数据的选择处理。

然后，当控制部21从用户终端200接收到输入上述画面数据的对性别、年龄段以及时尚趋势的回答数据(例如，从分别显示在画面上的多个选项选择的数据)时，从与该性别、年龄段以及时尚趋势对应的商品项目数据库26的多个表选择对应的表，并且，将表示销售商品项目的类别的类别信息，例如衬衫、裤子、短外套、鞋等文字信息或者图像信息经由收发部25以及信息通信网I向用户终端200发送。

当输入文字信息或者图像信息时，用户终端200按照上述处理程序，在显示部显示基于文字信息或者图像信息的类别(例如、衬衫、裤子、短外套等)，进行催促用户选择购买哪一个的显示(例如，“请选择”等)。

若用户选择了任一类别，则用户终端200将表示用户选择的类别的类别信息，例如将表示衬衫的类别信息向商品检索辅助装置100发送(步骤F1)。

即，若接收到用户想要购买的商品项目的类别信息，控制部21则从图8至图10所示的商品项目数据库26的表中，选择将衬衫作为类别(类别1)的图8所示的表，读入该表中的所有销售商品项目的识别信息A1～An，并从商品项目图像数据库27中读出到识别编号A1～An为止的销售商品项目的图像数据，作为缩略图像的图像数据，对缩略图像的每一个附加对应的销售商品项目的识别编号后向用户终端200发送。

当缩略图像的图像数据被提供时，用户终端200在显示部显示识别编号A1～An的销售商品项目的缩略图像(步骤F2)。

并且，用户终端200在用户选择了所显示的缩略图像的任意一个，并且用户输入了用途信息时，将选择的缩略图像的识别信息和用途信息向商品检索辅助装置100发送。

当接收到所选择的缩略图像的识别信息以及用途信息时，作为用户从缩略图像选择为购买对象的销售商品项目，控制部21进行接受对该识别编号的销售商品项目、即衬衫的订货的接受订货处理，并且，将输入的识别编号向类似项目检索部22发送。

并且，类似项目检索部22例如若被输入了用户购买的销售商品项目的识别编号A1，则将对与该识别编号A1一致或者类似的商品项目记载了识别编号A1，并且用途信息一致的商品项目作为由单数或者多个商品项目构成的候补组，从图15至图17所示的组合商品图像信息数据库29的表中提取(步骤F3)。此外，在商品图像信息数据库29中，也包含与例如在识别信息栏中记载了识别信息A1，并在类似商品项目栏中记载A1的、商品项目数据库26中记载的商品相同的商品。

在此，类似项目检索部22当销售商品项目的识别编号A1被输入时，例如从组合商品图像信息数据库29中提取在属性数据中的类似商品项目栏中记载有识别编号A1的上述识别编号a1-1～a1-q的组合商品项目作为类似的组合商品项目的候补组，并向组合检索部23输出。

组合检索部23从图14所示的组合信息数据库28中检索与从类似项目检索部22输入的上述候补组中的识别编号的组合商品项目分别对应的、不同类别例如裤子的组合商品项目，并提取对应的裤子的组合商品项目(例如，图14所示的a1-1、a1-2、a1-3、…所对应的b1-2、b2-3、b1-4、…)，作为第2组合商品项目，并将该组合中的每一个的识别信息向控制部21输出(步骤F4)。

在此，被推荐为与用户购买的销售商品项目组合的销售商品项目的类别可以预先与购买的商品对应设定，还可以最初使用户从多个类别中选择。

在此，组合检索部23在提取出与用户购买的销售商品项目组合的销售商品项目后，从该提取出的组合的销售商品项目中，选择与在条件设定部32中设定的用途信息一致的销售商品项目，并将该选择出的销售商品项目作为最终组合的销售商品项目。

然后，控制部21与各识别信息对应地从组合商品图像数据库30中读出从组合检索部23输入的组合商品项目的识别信息和第2组合商品项目的识别信息的多个(候补组所对应的组合商品项目数)组合的识别信息分别对应的图像数据，对各组合商品项目的图像数据附加各自的识别信息向用户终端200发送。

当组合商品项目(与衬衫对应)的识别信息和第2组合商品项目(与裤子对应)的识别信息的多个组合的识别信息和与其对应的图像数据被输入时，用户终端200在显示部显示各组合的图像数据(步骤F5)。

另外，在显示画面的端部，显示有多个由CG(Computer Graphics：计算机图形学)制作的对应于各个体型的三维人类图像，通过选择任意一个，用户终端200使组合商品项目的衬衫以及裤子与上述人类的图像重叠显示。另外，用户终端200也可以利用用户安装的网络照相机通过未图示的拍摄装置拍摄用户自身的脸，进行根据该拍摄的图像数据将用户选择的脸的区域重叠在上述CG的人类图像的脸的部分来显示的图像处理。

接下来，若用户从显示于用户终端200的显示部的多个组合中，利用指示设备等选择了任意一个(步骤F6)，例如若选择了识别信息a1-1与识别信息b1-2的组合，用户终端200则将用户选择的组合中的第2组合商品项目(与裤子对应)的识别信息b1-2向商品检索辅助装置100发送。

若经由控制部21输入了上述第2组合商品项目的识别信息b1-2，商品检索部24则检索与商品项目数据库26的裤子的类别对应的图9所示的表(步骤F7)，提取与该识别信息b1-2对应的识别信息B1、即销售商品项目(步骤F8)。

并且，控制部21从商品项目图像数据库27检索并读出与商品检索部24提取的组合销售商品项目的识别信息B1对应的图像数据。

另外，控制部21从商品项目图像数据库27检索并读出用户购买的识别信息A1所对应的图像数据，与识别信息B1的销售商品项目的图像数据一并向用户终端200发送。

当销售商品项目的图像数据从商品检索辅助装置100被供给时，用户终端200将该被供给的组合的图像数据显示于显示部(步骤F9)。

此时，与上述步骤F5同样地，在显示画面的端部显示有多个利用CG制作的对应于各个体型的三维的人类图像，通过选择该三维的人类图像的任意一个(例如，与自己的体型接近的人类图像)，用户终端200将销售商品项目的衬衫(识别信息A1)以及裤子(识别信息B1)与上述选择的三维的人类图像重叠显示。另外，用户终端200还可以利用安装的网页(web)摄像头拍摄用户的脸，将用户选择的脸的区域重叠显示在上述人类图像的脸的部分。

并且，当用户从显示画面的选择项选择了购买或者不购买作为识别信息B1的销售商品项目的推荐商品(步骤F10)时，用户终端200将识别信息A1以及识别信息B1与表示购买或者不购买的信息一并向商品检索辅助装置100发送。

当识别信息A1以及识别信息B1与表示购买或者不购买的信息一并被输入时，在购买的情况下，与识别信息A1的销售商品项目的情况下同样，控制部21进行接受订货处理。

另外，还可以对商品检索辅助装置100设置图7中以虚线表示的历史数据库31。

历史数据库31由构成图19所示的表结构的用户表和各用户的如图20所示的表结构的购买历史表构成。

图19的用户表被构成为，对进行了会员登记的用户或者购买了销售商品项目的用户，将赋予各用户的、用于识别各用户的用户识别信息、和与该用户识别编号对应的、至少是用户的姓名以及用户的用户邮件地址建立对应。

另外，图20的购买历史表被按各用户设置，通过上述用户识别信息而被识别，与访问虚拟商店的访问日期时间对应地，将在访问日期时间购买的销售商品项目的识别信息、检索到但未购买的销售商品项目的识别信息、和针对购买的销售商品项目进行了推荐但未购买的组合商品项目的识别信息作为历史存储。若没有购买的销售商品项目，则存储“-”。对该用户表以及购买历史表的数据的写入处理如以下所示那样由控制部21进行。

例如当用户从用户终端200访问虚拟商店，在会员登记的页面输入姓名以及邮件地址进行会员登记时，控制部21对该用户赋予用户识别信息并追加登记在用户表中。

然后，控制部21在用户选择的类别内检索销售商品项目，在购买了该销售商品项目情况下，将购买的销售商品项目存储到已经购买的商品项目的识别信息的区域中，另一方面，在检索到但未购买的情况下，将检索到的销售商品项目的识别信息存储到检索到但未购买的商品项目的识别信息的区域中。

另外，若用户购买了作为与上述购买的销售商品项目组合的推荐商品的销售商品项目，控制部21则在上述购买历史表中，将购买的销售商品项目存储在已经购买的商品项目的识别信息的区域中，另一方面，在未购买上述推荐商品的销售商品项目的情况下，则存储在进行了推荐但未购买的商品项目的识别信息的区域中。

并且，在用户再次访问虚拟商店，检索销售商品项目的情况下，控制部21根据用户输入的用户识别信息，从历史数据库31中选择该用户的购买历史表，并根据该销售商品项目的识别信息检索所选择的购买历史表。

此时，在已经购买的商品项目的识别信息的区域中检出用户正在检索的销售商品项目的识别信息的情况下，控制部21对相同的销售商品项目附加购买的日期时间并向用户终端200发送，使其显示在显示画面来向用户通知已经购买的组合商品化项目。

另外，在检索到但未购买的商品项目的识别信息的区域中检出正在检索的销售商品项目的识别信息的情况下，控制部21附加检索到相同的销售商品项目的日期时间并向用户终端200发送，并使其显示在显示画面上来向用户通知“是之前您检索到的商品项目，不就是您喜欢的类型吗”等刺激购买意欲的信息。

另外，在进行了推荐但未购买的商品项目的识别信息的区域中检出正在检索的销售商品项目的识别信息的情况下，控制部21附加推荐了相同的销售商品项目的日期、和那时购买的销售商品项目的图像数据，并向用户终端200发送，并使它们显示于显示画面来向用户通知“是与您之前购买的商品项目组合较佳的商品项目”等刺激购买意欲的信息。

接下来，对特征数据进行说明。如图8至图10以及图15至图17所示那样，特征数据是例如按R(红)G(绿)B(蓝)的颜色空间对服饰的质地的花纹进行二维傅立叶变换后的数据。控制部21利用二维傅立叶变换生成该特征数据的要素数据RD、GD以及BD。此时，如果销售商品项目或者组合商品项目是衬衫或短外套，则将衣服的横向宽度或者肩宽度作为二维傅立叶变换时的长度的基准值，来取得各销售商品项目以及组合商品项目间的处理中的数据匹配。

另外，如果是裤子，则将腰部分的横向宽度作为二维傅立叶变换时的长度的基准值，来取得各销售商品项目以及组合商品项目间的处理中的数据匹配。

即、为了根据特征数据，确认类似性，准确地判定花纹的大小等，需要以装饰品的任意位置的尺寸为基准值，将整体各部的尺寸规格化，以取得同一类别内的组合商品的二维傅立叶变换结果的匹配。在拍摄进行二维傅立叶变换的图像数据时，将衬衫、短外套以及裤子等放在平的地板上，弄平坦后通过数码照相机等进行拍摄。

另外，作为特征数据的要素数据的形状是指，例如如果是衬衫、短外套，则是袖对肩宽度的长度的比，如果是裤子，则是渡巾(裤子从裤裆下部以中线向两边测量的长度)与下摆宽的比。

接下来，虽然是纹理，但放大具有最大面积的质地部分，进行质地的形状的二维傅立叶变换。此时，使放大率恒定，取得从不同的组合项目间的图像数据获得的二维傅立叶变换的数据的匹配性。

如上述那样，虚拟商店的店员拍摄服饰的图像数据，并根据该拍摄的图像数据在控制部21中如上述那样进行傅立叶变换等，从销售中的销售商品项目的图像数据收集特征数据、还从自时尚目录或互联网等图像介质收集的组合商品项目的图像数据中收集属性数据。

并且，对于具有类似性的组合商品项目，以实际销售中的销售商品项目的特征数据为集合的重心数据，来进行从图像介质收集的组合商品项目的聚类。在此，控制部21求出例如由从店员输入的图像介质收集的组合商品项目的各图像数据的特征数据构成的比较特征向量、与由实际销售中的销售商品项目的各图像数据的特征数据构成的基准特征向量的距离，进行将具有与各销售商品项目与各个其他组合商品项目的基准特征向量相比距离近的特征向量的组合商品项目作为被设为接近的与销售商品项目有类似性的集合的处理，生成图15、图16以及图17的表中组合商品项目与类似商品项目栏的销售商品项目的对应关系。

同样地，生成图8、图9以及图10的表中的销售商品项目与类似商品项目栏的组合商品项目的对应关系。即，图8、图9以及图10中的表的类似商品项目栏中所记载的识别信息是针对所对应的识别信息的销售中的销售商品项目，与其他正被销售的销售商品项目相比特征向量的距离短、即具有类似性的组合商品项目的识别信息。

在此，控制部21可以例如在图8、图9、图10的各图中的类似商品项目栏中，按照特征向量的距离从短到长的顺序，即、类似性从高到低的顺序进行排列并存储。由此，在选择与销售商品项目最类似的组合商品项目的情况下，类似项目检索部22能够根据图15至图17从自图像介质收集的组合商品项目中容易地提取最类似的组合商品项目或者从类似度高的开始至第h个(h被预先设定)为止。

另外，也可以在检索类似的组合商品项目时每次都计算类似度，而不是如上述那样，预先对销售商品项目的各基准特征向量、与从具有较近距离的比较特征向量的图像介质收集的组合商品项目的特征数据进行比较来进行聚类，并设置记载类似商品项目的识别信息的栏。

例如，在步骤F3中的从与销售商品项目类似的图像介质取得的组合商品项目的检索中，类似项目检索部22可以构成为，根据上述基准特征向量与比较特征向量的距离计算类似度(特征向量的距离越短类似度越高)，来提取与销售商品项目具有类似性的从图像介质收集的组合商品项目。

此时，同样地，在步骤F7中的与从图像介质取得的组合商品项目类似的销售商品项目的检索中，商品检索部24可以构成为，根据上述基准特征向量与比较特征向量的距离计算类似度，来提取从图像介质收集的与组合商品项目具有类似性的销售商品项目。

另外，类似项目检索部22以及商品检索部24还可以计算销售商品项目、与从图像介质收集的组合商品项目的距离，来提取类似度最高的，或者从类似度高的开始提取至第h个为止。

如上述那样，根据本实施方式，在用户检索对象物的情况下，通过信息提供等能够辅助检索。

例如，如上述那样，在组合商品的购买中，针对用户要购买或者已经购买的商品，从销售中的商品群提取与进行了组合的情况匹配的商品，将提取出的商品推荐给用户，因此在从互联网的虚拟商店中的众多商品中选择匹配的商品时，无需自己烦恼相配还是不配，能够容易地选择组合商品。

另外，在上述本实施方式中，对将用途信息作为组合商品图像信息数据库29的各商品项目的属性信息之一而附加的情况进行了说明，但还可以按用途信息的类别的分类构成组合商品图像信息数据库29。例如，可以构成春用、夏用、秋用以及冬用的各个商品表来使用。该情况下，类似项目检索部22选择与附加在来自用户终端200的检索委托中的登记信息对应的商品图像信息数据库29，从所选择的商品图像信息数据库29检索与被委托检索的商品项目类似的商品项目，从而能够缩短检索时间。

＜第3实施方式＞

在第2实施方式中，商品检索辅助装置100通过缩略图像将销售商品项目向用户终端200发送，使用户在用户终端200的画面上进行选择。

在第3实施方式中，可以构成为，用户访问虚拟商店后，将使用扫描仪等从图像介质读入的、或者在互联网下载的想要购买的服饰的图像数据作为商品项目的图像数据向用户终端200输入，用户终端200将该图像数据向商品检索辅助装置100发送，商品检索辅助装置100提取与该图像数据的组合商品项目类似的销售商品项目。提取销售商品项目后的动作与在第2实施方式中用户从缩略图像选择了销售商品项目后的动作相同。

第3实施方式的商品检索辅助装置100的构成与第2实施方式相同。以下，仅对与第2实施方式不同的动作进行说明。

当用户通过用户终端200访问虚拟商店时，商品检索辅助装置100起动，控制部21将对用户终端200进行是从缩略图像选择销售商品项目、还是根据用户输入的服饰的图像数据从商品项目数据库26提取类似的销售商品项目的询问的输入画面(利用鼠标等点击选择项来进行检索)的图像信息向用户终端200发送。

并且，当用户决定从缩略图像选择要购买的商品，由此从用户终端200输入表示通过缩略图像进行选择的响应信号时，控制部21与第2实施方式同样地、对每一个图像数据附加销售商品项目的识别信息，将多个销售商品项目的缩略图像向用户终端200发送。其后的、用户从缩略图像选择了任意一个后的处理与第2实施方式的处理相同。

另一方面，当用户选择根据自己输入的图像数据，从商品项目数据库26提取类似的销售商品项目时，用户终端200将表示根据用户输入的图像数据进行选择的响应信号对商品检索辅助装置100发送。由此，控制部21将输入图像数据的输入画面的信息向用户终端200发送。

用户利用扫描仪使用户终端200读入想要购买的服饰的图像数据(时尚杂志或者时尚目录等纸质图像介质)、或者使用户终端200读入通过数码照相机进行拍摄而拍摄到的图像数据、或通过互联网而得的图像数据。

当读入图像数据时，在用户终端200中的输入画面的图像数据显示区域中，该图像数据如图21所示那样被显示在显示部，用户利用虚线H1选择图像数据的想要购买的服饰部分、例如想要提取的衬衫部分的区域，并利用虚线H2包围想要提取的衬衫部分的外周部(该衬衫的外周部附近的部分)，从而进行想要提取的衬衫部分整体的背景图像的部分的选择。并且，用户在用户终端200的显示部的显示画面上，从组合框的类别(例如，衬衫)的一览中选择类别名，通过由用户点击显示画面中的发送按钮，用户终端200检测出发送图像数据的处理的请求，将画有虚线H1以及虚线H2的服饰的图像数据、未划线的服饰的图像数据、表示所选择的服饰的类别名的类别信息向商品检索辅助装置100发送。

并且，当接收到画有虚线H1以及虚线H2的服饰的图像数据、和未画虚线的服饰的图像数据时，控制部21对上述服饰的图像数据，利用Graph-Cut法进行衬衫部分与衬衫以外的部分的分割处理，来提取衬衫部分。

即、控制部21将具有与在衬衫部分所画虚线H1的像素相同的像素值的区域、和具有与在衬衫部分以外所画虚线H2的像素相同的像素值的区域的边界作为基于灰度的误差函数的误差为最小的位置求出，由此进行分割。

在此，控制部21若提取出衬衫的部分，则如已经说明的那样，进行二维傅立叶变换，并且提取作为特征数据中的要素的形状数据，来作为检测对象特征数据输出。

并且，控制部21从商品项目数据库26选择所提取出的服饰的类别所对应的表，例如在本实施方式中提取衬衫的表。

在选择衬衫的表后，控制部21计算由表的各销售商品项目的特征数据构成的基准特征向量、与由上述检测对象特征数据构成的对象特征向量的距离，将预先设定的距离以下的具有与检测对象特征数据类似的特征数据的销售商品项目从上述衬衫的表中提取至被判定为类似的上位第h个为止，例如提取至上位第5个为止。在此，控制部21在特征数据中，难以从用户发送的图像数据提取纹理，因此在根据特征数据生成特征向量时，从向量的要素中除去纹理后，计算要比较的两者的特征向量的距离。

接下来，控制部21根据该上位5个识别信息，将每一个销售商品项目的图像数据从商品项目图像数据库27读出，作为缩略图像分别与识别信息对应地向用户终端200发送。这以后的处理与在通过第2实施方式中的图18的流程图中的步骤F2发送缩略图像后的处理相同。

＜第4实施方式＞

在第3实施方式中，从存储销售中的销售商品项目的商品项目数据库26中检索与用户输入的商品项目的图像数据相同或者同样的销售商品项目，将检索出的销售商品项目向用户提示，并且，进行推荐与检索出的销售商品项目组合的其他种类的销售商品项目的处理。

在第4实施方式中，进行检索与用户已经具有的服饰组合的销售商品项目的动作。

用户利用数码照相机拍摄自己具有的服饰、例如衬衫，并由用户终端200利用数码照相机读入上述衬衫的图像数据。

然后，当用户通过用户终端200访问虚拟商店时，商品检索辅助装置100起动，控制部21将进行用户是从缩略图像选择销售商品项目、或者是根据用户输入的服饰的图像数据，从商品项目数据库26提取类似的销售商品项目、或者是对用户输入的图像数据的服饰推荐组合的销售商品项目的询问的输入画面(利用鼠标等点击选择项来检索)的图像信息，向用户终端200发送。

然后，当用户决定从缩略图像选择要购买的商品，从而从用户终端200输入了表示根据缩略图像进行选择的响应信号时，控制部21与第2实施方式同样地、对每一个图像数据附加销售商品项目的识别信息，将多个销售商品项目的缩略图像向用户终端200发送。其后的、用户从缩略图像选择任意一个后的处理与第2实施方式的处理相同。

另一方面，当用户选择根据自己输入的图像数据，从商品项目数据库26提取销售商品项目时，用户终端200将表示根据用户输入的图像数据进行选择的响应信号对商品检索辅助装置100发送。这以后的处理与第3实施方式的处理相同。

另外，当用户选择推荐与自己输入的图像数据的服饰组合的其他类别的销售商品项目时，用户终端200将表示选择了推荐与用户输入的图像数据的服饰组合的销售商品项目的响应信号对商品检索辅助装置100发送。

以下，对这以后的第4实施方式的、推荐与用户输入的图像数据的服饰组合的销售商品项目的处理进行说明。第4实施方式的商品检索辅助装置100的构成与第2实施方式相同。以下，仅说明与第1以及第3实施方式不同的动作。

如上述那样，当用户选择了推荐与自己输入的图像数据的服饰组合的销售商品项目时，用户终端200将表示推荐与用户输入的图像数据的服饰组合的销售商品项目的响应信号对商品检索辅助装置100发送。由此，控制部21将输入图像数据以及用途信息的输入画面的信息向用户终端200发送。

用户利用数码照相机等拍摄装置拍摄希望推荐组合的销售商品项目的自己所具有的服饰(例如衬衫)的图像数据，并使用户终端200从该拍摄装置读入拍摄了上述服饰的图像数据。

当用户终端200读入的图像数据被显示于显示部时，用户在上述图像数据显示区域附近的类别输入栏中，从组合框中选择并输入显示在图像数据显示区域中的图像数据的服饰的类别。另外，用户从组合框选择并输入用户终端200的显示部中的图像数据显示区域附近的用途信息。

然后，当用户利用鼠标等指示设备选择了输入画面中的发送按钮时，用户终端200检测出请求了发送处理图像数据的处理的情况，将显示在图像数据显示区域中的图像数据与表示上述类别的类别信息以及用途信息一并向商品检索辅助装置100发送。

当图像数据被输入时，控制部21对图像数据的服饰、例如衬衫的图像数据进行二维傅立叶变换，并且，提取作为特征数据中的要素的形状数据，并作为检测对象特征数据与类别信息一并向类似项目检索部22输出。另外，控制部21还将与图像数据以及类别信息一并被供给的用途信息向条件设定部32输出。由此，条件设定部32将检索类似的商品项目时所使用的用途信息设定在内部，并对类似项目检索部22输出。

然后，类似项目检索部22从组合商品图像信息数据库29中选择与提取的服饰的类别对应的表，例如选择衬衫的表。

在选择衬衫的表后，类似项目检索部22计算由表的各组合商品项目的特征数据构成的基准特征向量、与由上述检测对象特征数据构成的对象特征向量的距离，针对预先设定的距离以下的具有与检测对象特征数据类似的特征数据的组合商品项目，从上述衬衫的表中按与在条件设定部32中设定的用途信息一致并判定为类似的距离从短到长的顺序提取至上位第h个为止，例如至上位第5个为止的组合商品项目。在此，控制部21在特征数据中难以从用户发送的图像数据中提取纹理，因此在根据特征数据生成特征向量时，从向量的要素中除去纹理，生成基准特征向量以及检测对象特征向量。

然后，类似项目检索部22将检索出的类似度为上位第5个为止的组合商品项目、例如5个衬衫的识别信息向组合检索部23输出。

当组合商品项目的识别信息被输入时，组合检索部23在组合信息数据库28中，读出与所输入的组合商品项目的5个识别信息分别对应存储的其他类别、例如裤子的组合项目的识别信息。

接下来，组合检索部23将5个衬衫与裤子的组合中的各识别信息的组合对控制部21发送。其后的处理与图18的流程图中的步骤F5以后的处理相同。

＜第5实施方式＞

在组合商品图像信息数据库29中，还可以与识别信息对应存储从过去的例如10年前、或者20年前等旧时尚杂志或者时尚目录等收集的、旧款服饰的图像数据的属性数据。

另外，在组合商品图像数据库30中，旧款服饰的图像数据与上述识别信号对应存储。

并且，对应过去的时尚杂志或者时尚目录等中的组合商品项目的组合，将图14所示的不同类别间的组合商品项目的组合的表作成在组合信息数据库28中。

如上述那样，通过构成组合商品图像信息数据库、组合商品图像数据库30以及组合信息数据库28，在销售与过去的设计相似的新的销售商品项目时，能够利用过去的设计中的组合，从目前销售中的销售商品项目中，容易地提取与过去的设计相似的新组合商品项目组合的销售商品项目。

在本实施方式中作为商品项目以服饰为例进行了说明，但还能够容易地应用于组合多个不同种类(类别)的商品的组合商品，例如，组合家具、组合家电等所有商品。

此外，在上述各实施方式中，还可以将用于实现检索服务器1、1a、以及商品检索辅助装置100的各部的功能的程序记录在计算机可读的记录介质中，使计算机系统读入记录在该记录介质中的程序并执行，从而进行商品检索的辅助处理。其中，这里所谓的“计算机系统”包括OS、周边设备等硬件。另外，“计算机系统”包括具备主页提供环境(或者显示环境)的WWW系统。另外，“计算机可读的记录介质”是指，软盘、光磁盘、ROM、CD-ROM等可移动介质、内置在计算机系统中的硬盘等存储装置。另外，“计算机可读的记录介质”还包括如在经由互联网等网络、电话线路等通信线路发送程序的情况下作为服务器、客户端的计算机系统内部的易失性存储器(RAM)那样，将程序保持一定时间的介质。

另外，上述程序还可以从在存储装置等中保存该程序的计算机系统经由传送介质、或者通过传送介质中的传送波向其他计算机系统传送。在此，传送程序的“传送介质”是指，如互联网等网络(通信网)、电话线路等通信线路(通信线)那样具有传送信息的功能的介质。另外，上述程序还可以实现前述功能的一部分。另外也可以是通过与计算机系统中已经记录的程序的组合能够实现前述功能的程序、即所谓的差分文件(差分程序)。产业上的利用可能性

本发明适用于在用户经由互联网进行对象物的检索时，辅助检索的对象物的选择、决定的检索辅助系统以及与其类似的技术中，能够根据该对象物的图像数据进行用户想要检索的对象物的检索。

图中符号说明：

1…检索服务器；2…用户终端；11…提取部；12…种类判定部；13…检索部；14…组合提取部；15…嗜好提取部；16…数据库；17…收发部；18、32…条件设定部；21…控制部；22…类似项目检索部；23…组合检索部；24…商品检索部；25…收发部；26…商品项目数据库；27…商品项目图像数据库；28…组合信息数据库；29…组合商品图像信息数据库；30…组合商品图像数据库；31…历史数据库；100…商品检索辅助装置；200…用户终端；I…信息通信网。

Claims (11)

1.一种检索辅助系统，其特征在于，

该检索辅助系统具有：

组合商品数据库，其将从图像介质取得的商品项目的属性信息按相同类别进行积存；

组合信息数据库，其按上述商品项目存储和与该商品项目组合使用的不同类别的其他商品项目的组合信息；

商品项目数据库，其积存销售中的销售商品项目的属性信息；

类似项目检索部，其针对由用户输入的商品的图像数据和该图像数据的属性信息，从上述组合商品数据库选择相同或者类似的商品项目的候补组；

组合检索部，其对应上述候补组中的每一个上述商品项目，从上述组合信息数据库中检索与该商品项目组合的其他商品项目；

商品项目检索部，其针对用户从上述商品项目与上述其他商品项目的组合中选择出的组合中的上述其他商品项目的图像数据，根据该图像数据的属性信息，从上述商品项目数据库中检索相同或者类似的上述销售商品项目的图像数据，并作为推荐商品进行输出；和

条件设定部，其设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、以及与状况相关的状况信息中的至少一个的检索条件，

上述类似项目检索部、上述组合检索部、上述商品项目检索部中的至少一个根据由上述条件设定部设定的上述检索条件来进行检索。

2.根据权利要求1所述的检索辅助系统，其特征在于，

该检索辅助系统还具有控制部，当用户输入上述商品项目的类别时，该控制部利用缩略图像来显示该类别的商品项目，

上述控制部向上述类似项目检索部通知用户选择的上述商品项目。

3.根据权利要求1或者权利要求2所述的检索辅助系统，其特征在于，

在上述组合商品数据库中，从上述图像介质取得的商品项目按类似的种类被预先分组，并按该组进行存储，

上述类似项目检索部将属于与被用户输入的商品项目相同的组的商品项目作为商品项目的候补组进行提取。

4.根据权利要求1或者权利要求2所述的检索辅助系统，其特征在于，

在上述组合商品数据库中，按从上述图像介质取得的商品项目对应地存储有属性信息，

上述类似项目检索部根据用户选择的商品项目的属性信息，从上述组合商品数据库中检索具有类似性的商品项目，并将检索结果作为上述商品项目的候补组进行提取。

5.根据权利要求1至权利要求4中任意一项所述的检索辅助系统，其特征在于，

在上述商品项目数据库中，预先对应地存储有与上述组合商品数据库中的商品项目相同或者类似的组合商品项目，

上述商品项目检索部将与用户选择的组合中的上述其他商品项目相同或者类似的上述销售商品项目作为上述推荐商品进行提取。

6.根据权利要求1至权利要求4中任意一项所述的检索辅助系统，其特征在于，

在上述商品项目数据库中，与上述组合商品数据库对应的商品项目按商品项目的种类与属性信息对应地存储，

上述类似项目检索部根据用户选择的其他商品项目的属性信息，从上述商品项目数据库中检索具有类似性的上述销售商品项目，并将检索结果作为上述推荐商品进行提取。

7.根据权利要求1至权利要求6所述的检索辅助系统，其特征在于，

该检索辅助系统还具有购买历史数据库，该购买历史数据库对应识别上述用户的识别信号，存储该用户已经购买的商品项目，

上述控制部对购买了组合商品项目的用户赋予上述识别信号，对应该识别信号，使推荐的商品项目和表示是否已经购买了该商品项目的信息存储于上述购买历史数据库。

8.根据权利要求7所述的检索辅助系统，其特征在于，

当上述用户选择了上述商品项目时，在上述历史数据库中与上述用户的识别信息对应地存储的上述推荐商品中未购买的推荐商品与上述商品项目相同或者类似的情况下，上述控制部将与过去购买的组合项目进行组合较好的情况通知给上述用户。

9.根据权利要求7或者权利要求8所述的检索辅助系统，其特征在于，

在上述用户选择了上述商品项目时，在上述历史数据库中与上述用户的识别信息对应地存储的上述推荐商品中已经购买的推荐商品与上述商品项目相同或者类似的情况下，上述控制部将与过去购买的销售商品项目相同或者类似的情况向上述用户通知。

10.根据权利要求1至权利要求9中任意一项所述的检索辅助系统，其特征在于，

上述商品项目为服饰品，

检索辅助系统输出在按各体型对应的人类图像中合成了上述服饰品的图像而得的、使人类穿戴了上述装饰品的合成图像。

11.一种检索辅助方法，其特征在于，

该检索辅助方法具有：

类似项目检索过程，针对由用户输入的商品的图像数据和该图像数据的属性信息，从按相同的类别积存从图像介质取得的商品项目的属性信息的组合商品数据库中，选择相同或者类似的商品项目的上述候补组；

组合检索过程，对应上述候补组中的每一个上述商品项目，从按上述商品项目存储有和与该商品项目组合使用的不同类别的其他商品项目的组合信息的组合信息数据库中，检索与该商品项目组合的其他商品项目；

商品项目检索过程，根据用户从上述商品项目与上述其他商品项目的组合中选择的组合中的上述其他商品项目的图像数据和该图像数据的属性信息，从积存上述销售商品项目的属性信息的商品项目数据库中检索相同或者类似的销售商品项目，并作为推荐商品进行输出；和

条件设定过程，设定包括与日期时间相关的日期时间信息、与场所相关的场所信息、以及与状况相关的状况信息中的至少一个的检索条件，

上述类似项目检索过程、上述组合检索过程、上述商品项目检索过程中的至少一个根据由上述条件设定过程设定的上述检索条件来进行检索。