CN109948702A - 一种基于卷积神经网络的服装分类和推荐模型 - Google Patents

一种基于卷积神经网络的服装分类和推荐模型 Download PDF

Info

Publication number
CN109948702A
CN109948702A CN201910210676.6A CN201910210676A CN109948702A CN 109948702 A CN109948702 A CN 109948702A CN 201910210676 A CN201910210676 A CN 201910210676A CN 109948702 A CN109948702 A CN 109948702A
Authority
CN
China
Prior art keywords
clothes
classification
convolutional neural
neural networks
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910210676.6A
Other languages
English (en)
Inventor
霍玉洁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Central South University
Original Assignee
Central South University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Central South University filed Critical Central South University
Priority to CN201910210676.6A priority Critical patent/CN109948702A/zh
Publication of CN109948702A publication Critical patent/CN109948702A/zh
Pending legal-status Critical Current

Links

Abstract

本发明为一种基于卷积神经网络的服装分类和相似推荐模型,属于深度学习和数据挖掘领域。随着服装电子商务的兴起,越来越多的人通过网络购买服装,但是现有的购物网站中往往存在分类准确度低和搜索不准确问题,并且在对用户进行服装相似推荐时,不能很好的满足用户的的需求,因而研究一种可以精确的对服装进行分类并为用户推荐相似服装的要求,便成为当前购物网站研究的重点和难点。本发明提出的基于卷积神经网络的服装分类及推荐模型,它通过改进相应的算法实现服装的精确分类识别,并通过计算图片的相似性,将最相似这5个图片推荐给用户。利用该模型能够精确的对服装进行分类和相似推荐。

Description

一种基于卷积神经网络的服装分类和推荐模型
技术领域
本发明为一种基于卷积神经网络的服装分类和推荐模型,属于深度学习和数据挖掘领域。
背景技术
随着电子商务平台的快速发展,开始兴起了服装电子商务,即人们津津乐道的网上购买服装,网上购买服装逐渐成了一种潮流,在这些电子商务平台网站上会有很多服装图片,并且每幅图片都配有文字说明。但是由于服装文字描述的片面性和主观性,因此服装的文字描述并不能很好的表达出服装的图片信息。因此如何准确的提取图片特征进而进行精确分类,对相似服装的推荐,服装的搜素等应用有很重要的研究价值。另一方面,随着移动设备的迅速发展,人们通过手机拍下行人身上或实体店中的衣服,通过上传网络搜索同款或相似款式的衣服,通常会出现推荐准确度低和搜索不准确的问题。
目前的服装分类算法基本上存在两个局限性:一是传统的服装检测算法无法取得满意的结果;其次,传统算法不能提供令人满意的分类效果,特别是对于类似属性的分类。目前我国在服装识别方面做的研究较少,近几年深度学习发展态势迅猛,这为服装分类识别与相似服装推荐模型的设计和构建提供了新的思路。虽然现在存在一些服装分类与推荐模型,但是在服装分类方面也没有很好的表现,在分类精确度上不够高,对于服装目标提取不够准确,分析其原因主要有两点:一是数据预处理没有做好,不能准确提取目标图片;二是针对数据对卷积神经网络加大训练,没有形成自己的神经网络模型,导致分类准确度没有明显提高。于是针对这两个问题,提出基于卷积神经网络模型的服装分类和相似推荐模型。该模型可以对服装进行精确提取,并进一步对服装进行分类,最后通过图片相似性计算,计算出相似的商品,推荐给用户。
发明内容
本发明基于卷积神经网络的服装分类和推荐模型,该模型具体流程如下:
①搜集各大网站的服装图片数据,构建服装数据集。由于服装图片背景的复杂性,需要对图片数据集上图片特征进行特征分析。
②在对服装图片信息进行特征分析后,需要提取服装特征即在复杂背景当中准确的将服装提取出来。在提取服装特征前需要使用图像分割算法对图像进行分割,方便提取目标服装。
③对分割后的服装图像进行特征提取,我们再对比多种特征检测算法后,提出一种肤色检测算法,排除掉对服装提取中干扰最大的肤色特征,通过使用背景特定像素替代肤色区域,这样提取的服装会更加精确,为进一步分类奠定基础。
④通过针对现有服装分类算法的两个局限点,我们提出一种利用语义分析对经过多人认可的服装描述语句进行分析统计,提出了具体的分类类别,结合各网络结构的优势,提出一种全新的网络结构,用于对服装的精确分类,并通过实验验证网络结构的优越性。
⑤根据图片相似性计算,计算出相似的商品,并从相似度最高的推荐商品中选取前5个推荐给通过用户,便于用户进行选择。
具体实施方式
为使本发明的目的、内容和优点更加清楚,下面结合附图对本发明具体实施步骤作进一步详细的说明。
本发明构建了基于卷积神经网络的服装分类和推荐模型,通过构建卷积神经网络,基于网络模型进行服装的分类和相似服装的推荐,解决了服装分类中存在的分类不精确、搜索不准确,推荐商品不符合用户需求的问题。具体而言,本发明包含以下步骤:
Step1:建立服装图片数据集
通过收集各大网站的服装图片数据,建立服装数据库,并对收集到的图片进行特征分析,具体特征分析公式如下:
其中,Edgelet(p)表示Edgelet在图像I中p处的特征值,Ml(ui+p)表示图像边缘方向,nl(ui+p)表示图形强度。
Step2:对服装图像进行分割
通过对服装图像进行分割,我们采用GrabCut算法对图像进行分割,基本想法是将图像映射到RGB 颜色空间中形成S-T图。S代表前景像素,而T则代表背景像素,将目标与背景分割开来。当Gibbs能量达到近似最小值时标志图像分割完成,此时分割出来的图片即为目标服装。图像分割公式如下:
其中V表示分割边界信息权值的边界项。γ为常数,β由图像的对比度决定。
Step3:服装特征提取
将分割后的服装信息进行特征提取,通过提取关键的服装信息,进而为下一步的服装分类识别奠定基础,进行图像特征提取的公式如下:
其中,(x,y)表示像素点的标准差,G(x,y)表示像素点(x,y)的梯度幅值,Gx(x,y)表示横坐标x的梯度,Gy(x,y)表示纵坐标y的梯度值。通过计算图像像素各点的横纵坐标的梯度值对图像特征进行提取然后对图像进行分析。
Step4:对提取的服装特征进行分类
通过对多种网络模型进行分析结合残差网络对VGG模型进行改进结合残差学习,多层感知机网络思想以及Inception单元思想,对网络模型进行改进,并将改进后的模型通过对比试验验证模型分类的精确度,从而根据试验结果得出结论,具体的网络模型卷积层结构如下:
其中,f代表输入,g代表卷积核,m和n分别为卷积核的尺寸,通过对网络模型进行改进,避免了模型过拟合,在模型训练时,对最后几个全连接层使用损失函数技术,随机去除一部分神经元,通过对改进后的模型进行实验对比,进行验证模型在服装分类上表现的强大的优势,同时通过对服装的精确提取,为进一步的服装推荐奠定基础。
Step5:相似服装推荐
通过聚类算法的思想,将测试图片输入到分类模型中,在确定图片类别后,提取测试图片全连接层最后一层的特征值,再对所有图片的特征值进行提取,利用聚类算法计算测试图片特征值得相似度,选择相似度最高的5张图片作为推荐,推荐给用户。一般采用全局误差函数来表示聚类算法的准则函数,按如下公式计算:
其中,E表示误差,q表示数据对象,mi表示类簇Ci的中心,k表示聚类个数。通过聚类分析给用户推荐最相似的5种服装商品。
附图说明
图1本发明的服装特征提取流程图
图2本发明的相似服装推荐流程图。

Claims (4)

1.基于卷积神经网络的服装分类和推荐模型,针对当前购物网站通过卖家上传服装图片并配备相应介绍文字推销产品,由此带来的网站对服装分类和搜索不准确的问题,基于卷积神经网络模型设计出高精度的服装分类模型,并给用户进行相似服装的推荐。
2.根据权利要求1所述的方法,需要构建服装图片数据集,精确提取服装信息并构建服装分类网络模型。
3.根据权利要求1所述的方法以及2构建的卷积神经网络模型,对服装图片数据集进行精确分类。
4.根据权利要求3所建立网络识别模型,在最后一层全连接层的特征值,进行图片相似性计算,计算出最相似的5个商品,然后将这5个商品推荐给用户。
CN201910210676.6A 2019-03-20 2019-03-20 一种基于卷积神经网络的服装分类和推荐模型 Pending CN109948702A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910210676.6A CN109948702A (zh) 2019-03-20 2019-03-20 一种基于卷积神经网络的服装分类和推荐模型

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910210676.6A CN109948702A (zh) 2019-03-20 2019-03-20 一种基于卷积神经网络的服装分类和推荐模型

Publications (1)

Publication Number Publication Date
CN109948702A true CN109948702A (zh) 2019-06-28

Family

ID=67010491

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910210676.6A Pending CN109948702A (zh) 2019-03-20 2019-03-20 一种基于卷积神经网络的服装分类和推荐模型

Country Status (1)

Country Link
CN (1) CN109948702A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111444974A (zh) * 2020-04-02 2020-07-24 成都三零凯天通信实业有限公司 一种基于零样本识别的服装分类方法
CN112560540A (zh) * 2019-09-10 2021-03-26 Tcl集团股份有限公司 一种美妆穿搭推荐方法及装置
CN113221928A (zh) * 2020-01-21 2021-08-06 海信集团有限公司 服装分类信息显示装置、方法及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112560540A (zh) * 2019-09-10 2021-03-26 Tcl集团股份有限公司 一种美妆穿搭推荐方法及装置
CN113221928A (zh) * 2020-01-21 2021-08-06 海信集团有限公司 服装分类信息显示装置、方法及存储介质
CN113221928B (zh) * 2020-01-21 2023-07-18 海信集团有限公司 服装分类信息显示装置、方法及存储介质
CN111444974A (zh) * 2020-04-02 2020-07-24 成都三零凯天通信实业有限公司 一种基于零样本识别的服装分类方法

Similar Documents

Publication Publication Date Title
CN109948425B (zh) 一种结构感知自注意和在线实例聚合匹配的行人搜索方法及装置
CN107918780B (zh) 一种基于关键点检测的衣服种类和属性分类方法
CN110110181B (zh) 一种基于用户风格和场景偏好的服装搭配推荐方法
TWI623842B (zh) Image search and method and device for acquiring image text information
CN107506793B (zh) 基于弱标注图像的服装识别方法及系统
CN100578508C (zh) 交互式图像搜索系统和方法
CN110246011B (zh) 可解释时尚服装个性化推荐方法
CN107679960B (zh) 一种基于服装图像和标签文本双模态内容分析的个性化服装的推荐方法
CN106021603A (zh) 一种基于分割和特征匹配的服装图像检索方法
CN107273517A (zh) 基于图嵌入学习的图文跨模态检索方法
Zhang et al. Unsupervised difference representation learning for detecting multiple types of changes in multitemporal remote sensing images
CN103810299A (zh) 基于多特征融合的图像检索方法
CN106688011A (zh) 用于多类别物体检测的方法和系统
CN111784845B (zh) 基于人工智能的虚拟试穿方法、装置、服务器及存储介质
CN109948702A (zh) 一种基于卷积神经网络的服装分类和推荐模型
CN110580489B (zh) 一种数据对象的分类系统、方法以及设备
WO2023011382A1 (zh) 推荐方法、推荐模型训练方法及相关产品
CN114332680A (zh) 图像处理、视频搜索方法、装置、计算机设备和存储介质
CN115131698B (zh) 视频属性确定方法、装置、设备及存储介质
CN110457677A (zh) 实体关系识别方法及装置、存储介质、计算机设备
CN107832338A (zh) 一种识别核心产品词的方法和系统
CN109284760A (zh) 一种基于深度卷积神经网络的家具检测方法及装置
CN109583498A (zh) 一种基于低秩正则化特征增强表征的时尚兼容度预测方法
CN110413825B (zh) 面向时尚电商的街拍推荐系统
CN107622071B (zh) 通过间接相关反馈在无查源下的衣服图像检索系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190628