CN108734520A - 一种基于机器学习的玉石价格评估方法及装置 - Google Patents
一种基于机器学习的玉石价格评估方法及装置 Download PDFInfo
- Publication number
- CN108734520A CN108734520A CN201810507857.0A CN201810507857A CN108734520A CN 108734520 A CN108734520 A CN 108734520A CN 201810507857 A CN201810507857 A CN 201810507857A CN 108734520 A CN108734520 A CN 108734520A
- Authority
- CN
- China
- Prior art keywords
- jade
- feature vector
- price
- vector
- training set
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0278—Product appraisal
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于机器学习的玉石价格评估方法及装置,方法包括:获取玉石图片中的玉石数据;利用感知哈希算法,根据玉石图片,获取玉石图片的感知哈希特征向量;利用颜色简化算法对玉石图片进行处理,获得颜色简化后的玉石图片;并统计颜色简化后的玉石图片对应的颜色分布直方图向量;将除价格以外的玉石数据、感知哈希特征向量以及颜色分布直方图向量组合作为特征向量X;将特征向量X及其对应的价格分为训练集和测试集;利用训练集中的数据训练玉石价格评估模型;使用测试集中的数据评价训练好的玉石价格评估模型;将客户输入的待评估玉石数据输入玉石价格评估模型,获得待评估玉石的评估价格。应用本发明实施例,可以提升用户体验。
Description
技术领域
本发明涉及一种玉石价格的评估方法,更具体涉及一种基于机器学习的玉石价格评估方法及装置。
背景技术
随着我国经济的发展和人民生活水平的提高,越来越多的人渴望购买玉石产品,因此,中国珠宝玉石行业取得了巨大发展,中国也成为而来世界上最大的玉石消费市场。但是,在玉石市场高速发展的同时也出现了很多不好的现象:玉石市场上玉石产品良莠不齐,个别商家以次充好、以假乱真、随意标价等。另外,普通消费者很难具备全面的玉石鉴定知识,普通消费者很难挑选到货真价实的玉石产品。由于玉石价格普遍较高,如果错买一次会导致较大的经济损失。
目前,通常由玉石领域的专家对玉石进行鉴定,但是,普通消费者很难具备全面的玉石鉴定知识,专家的鉴定费用也是一笔巨大的开销,而且专家不可能陪伴每一位消费者进行消费。因此,现有技术存在不能方便的进行玉石鉴定的技术问题,导致用户的体验不佳。
发明内容
本发明所要解决的技术问题在于提供了一种基于机器学习的玉石价格评估方法及装置。
本发明是通过以下技术方案解决上述技术问题的:
本发明实施例提供了一种基于机器学习的玉石价格评估方法,所述方法包括:
步骤1:获取玉石图片中的玉石数据,其中,所述玉石数据至少包括:颜色、重量、和真实价格;
步骤2:利用感知哈希算法,根据所述玉石图片,获取所述玉石图片的感知哈希特征向量;
步骤3:利用颜色简化算法对所述玉石图片进行处理,获得颜色简化后的玉石图片;并统计所述颜色简化后的玉石图片对应的颜色分布直方图向量;
步骤4:将除价格以外的玉石数据、所述感知哈希特征向量以及所述颜色分布直方图向量组合作为特征向量X;
将所述特征向量X及其对应的价格分为训练集和测试集;
步骤5:利用所述训练集中的数据训练玉石价格评估模型;
步骤6:使用所述测试集中的数据评价训练好的玉石价格评估模型;
步骤7:将客户输入的待评估玉石数据输入玉石价格评估模型,获得待评估玉石的评估价格。
可选的,所述玉石数据还包括:
品牌、样式、材料以及尺寸。
可选的,所述步骤2包括:
读取所述玉石数据中的每一条记录,然后根据所述玉石图片对应的URL下载图片,然后使用感知哈希算法获取下载的玉石图片的感知哈希特征,其中,
感知哈希算法具体步骤包括:
第一步:缩小所述玉石图片的尺寸;
第二步:简化所述玉石图片的色彩;
第三步:计算所述玉石图片的灰度平均值;
第四步:将每个像素的灰度与所述灰度平均值进行比较,将大于或者等于所述灰度平均值的像素的灰度值记为‘1’;小于灰度平均值的,记为‘0’;
第五步:将第四步中的所有比较结果组合在一起构成的字符串作为感知哈希特征。
可选的,所述步骤4包括:
将所述特征向量X的集合集分成M个子集,将所述M个子集中的M-1个子集分别作为训练集,将除所述训练集之外的子集作为测试集,其中M为正整数。
可选的,所述步骤5中,训练玉石价格评估模型是在步骤4中所得的训练集上,使用机器学习中的K近邻算法、梯度提升决策树方法和多元非线性回归拟合方法构构建的玉石价格评估模型,不断地调整算法中的参数,将评估准确率取最大值时的模型作为最终的玉石价格评估模型。
可选的,所述K近邻算法包括:
针对所述测试集中的每一特征向量,根据当前组合加权向量,利用K近邻算法,从所述训练集中选择出K个与当前特征向量最相似特征向量;
并根据所述K个与当前特征向量最相似特征向量的真实价格的平均值,获取所述当前特征向量对应的评估价格,其中,所述组合加权向量为,每一特征向量中的各个元素对应的权重的集合。
可选的,利用K近邻算法,从所述训练集中选择出K个与当前特征向量最相似特征向量,包括:
利用公式,
计算训练集中的特征向量与测试集中的特征向量的相似度,其中,
similarity(Xi,Xj)为训练集中的特征向量与测试集中的特征向量的相似度;wo为与品牌对应的权重;brandj为训练集中的特征向量对应的品牌特征值;brandi为测试集中的特征向量对应的品牌特征值;w1为与样式对应的权重;w2为与重量对应的权重;w3为与材质对应的权重;w4为与长度对应的权重;w5为与宽度对应的权重;w6为与厚度对应的权重;w7为与内半径对应的权重;w8为与汉明距离对应的权重;w9为与颜色直方图向量的相似度对应的权重;stylej为训练集中的特征向量对应的样式特征值;stylei为测试集中的特征向量对应的样式特征值;weightj为训练集中的特征向量对应的重量特征值;weighti为测试集中的特征向量对应的重量特征值;materialj为训练集中的特征向量对应的材料特征值;materiali为测试集中的特征向量对应的材料特征值;lengthj为训练集中的特征向量对应的长度特征值;lengthi为测试集中的特征向量对应的长度特征值;widthj为训练集中的特征向量对应的宽度特征值;widthi为测试集中的特征向量对应的宽度特征值;thicknessj为训练集中的特征向量对应的厚度特征值;thicknessi为测试集中的特征向量对应的厚度特征值;inner_radiusj为训练集中的特征向量对应的内尺寸特征值;inner_radiusi为测试集中的特征向量对应的内尺寸特征值;hamming_dist(phashj,phashi)为测试集中的特征向量对应的感知哈希特征与所述训练集中的特征向量对应的感知哈希特征之间的汉明距离;cos<Hj,Hi>为测试集中的特征向量对应的颜色分布直方图向量与训练集中的特征向量对应的颜色分布直方图向量之间的相似度;phashj为训练集中的特征向量对应的感知哈希特征;phashi为测试集中的特征向量对应的感知哈希特征;Hj为训练集中的特征向量对应的颜色分布直方图向量;Hi为测试集中的特征向量对应的颜色分布直方图向量;
按照所述测试集中的特征向量与所述训练集中的训练集中的特征向量之间的相似度从大到小的顺序进行排序,将所述排序结果中前K个顺序次序对应的测试集中的特征向量与所述训练集中的训练集中的特征向量之间的相似度作为选择出的K个与所述测试集中的特征向量最相似训练集中的特征向量。
可选的,所述根据所述K个与当前特征向量最相似特征向量的真实价格的平均值,获取所述当前特征向量对应的评估价格,包括:
利用公式,获取述当前特征向量对应的评估价格,其中,
prediction_price(Xi)为当前特征向量对应的评估价格;Xi为测试集中的特征向量;Xj为训练集中的特征向量;i为测试集中的特征向量的序号;j为训练集中的特征向量的序号;∑为求和函数;real_price()为训练集中的特征向量对应的真实价格;Topk()为K个与所述测试集中的特征向量最相似训练集中的特征向量;max()为最大值求解函数;similarity(Xi,Xj)为所述测试集中的特征向量与所述训练集中的特征向量之间的相似度。
可选的,所述步骤6包括:
利用公式,
获取每一评估价格对应的特征值,其中,
correct_prediction(Xi)为序号为i的评估价格对应的特征值;prediction_price(Xi)为评估价格;real_price(Xi)为与评估价格对应的真实价格;L为第一预设阈值;
利用公式,计算训练的玉石价格评价模型的精度,其中,
accuracy为训练的玉石价格评价模型的精度;correct_prediction(Xi)为每一评估价格对应的特征值;N为评估价格的数量。
可选的,所述步骤7包括:
获取客户输入的待评估玉石数据对应的玉石数据、感知哈希特征向量以及颜色分布直方图向量;
将待评估玉石数据对应的玉石数据、感知哈希特征向量以及颜色分布直方图向量的组合作为第二特征向量;
针对所述第二特征向量,根据步骤5训练的玉石价格评估模型,评估所述客户输入的待评估玉石数据对应的评估价格。本发明相比现有技术具有以下优点:
应用本发明实施例,利用获取的玉石数据对应的真实价格,训练出玉石数据对应的组合加权向量,并将价格评估准确率大于第二预设阈值的组合加权向量作为目标组合加权向量,相对于现有技术中利用人工进行玉石价格的评估,评估起来更加方便,提升了用户体验。
附图说明
图1为本发明实施例提供的一种基于机器学习的玉石价格评估系统的结构示意图。
具体实施方式
下面对本发明的实施例作详细说明,本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。
本发明实施例提供了一种基于机器学习的玉石价格评估方法,所述方法包括:
步骤1:获取玉石图片中的玉石数据,其中,所述玉石数据至少包括:颜色、重量、和真实价格。
具体的,所述玉石数据还包括:品牌、样式、材料以及尺寸。
示例性的,可通过网络爬虫技术抓取网店中的玉石数据,将这些玉石数据存储到数据库中,
玉石数据,其中,玉石数据包括但不仅限于,品牌、样式、颜色、重量、材料、尺寸和价格。例如,获取的玉石数据-1可以包含URL-1(Uniform Resource Locator,统一资源定位符)、品牌-1、样式-1、颜色-1、重量-1、材料-1、尺寸-1和价格-1;获取的玉石数据-2包含URL-2、品牌-2、样式-2、颜色-2、重量-2、材料-2、尺寸-2和价格-2;获取的玉石数据-3包含URL-3、品牌-3、样式-3、颜色-3、重量-3、材料-3、尺寸-3和价格-3。
步骤2:利用感知哈希算法,根据所述玉石图片,获取所述玉石图片的感知哈希特征向量。
具体的,可以读取所述玉石数据中的每一条记录,然后根据所述玉石图片对应的URL下载图片,然后使用感知哈希算法获取下载的玉石图片的感知哈希特征,其中,感知哈希算法具体步骤包括:第一步:缩小所述玉石图片的尺寸;第二步:简化所述玉石图片的色彩;第三步:计算所述玉石图片的灰度平均值;第四步:将每个像素的灰度与所述灰度平均值进行比较,将大于或者等于所述灰度平均值的像素的灰度值记为‘1’;小于灰度平均值的,记为‘0’;第五步:将第四步中的所有比较结果组合在一起构成的字符串作为感知哈希特征。
示例性的,可以读取步骤1中获取的玉石数据中的每一条记录,通过对应的URL网络上获取玉石图片:玉石图片-1、玉石图片-2、玉石图片-3。
获取每一玉石图片的感知哈希特征的过程如下:
针对每一图片进行如下操作,以玉石图片-1为例,利用图像缩放算法将玉石图片-1的缩小到8*8像素。以去除图片的细节,只保留结构、明暗等基本信息,摒弃不同尺寸、比例带来的图片差异。将缩放后的玉石图片-1转换为灰度图。再将玉石图片-1对应的灰度图中每个像素的灰度,与玉石图片-1对应的灰度图中各像素的灰度平均值进行比较;若像素点的灰度值大于或者等于灰度平均值的,将该像素的灰度值记为‘1’;若像素点的灰度值小于灰度平均值的,将该像素的灰度值记为‘0’。再将获取的各个灰度值,按照预设的顺序进行排列,得到一个长度为64个字符的字符串,该字符串即为若玉石图片-1的感知哈希特征,感知哈希特征也可以被称为“指纹信息”或者“感知哈希特征”。
需要说明的是,各个玉石图片对应的字符串中的各个字符的排列顺序是一致的。
步骤3:利用颜色简化算法对所述玉石图片进行处理,获得颜色简化后的玉石图片;并统计所述颜色简化后的玉石图片对应的颜色分布直方图向量。
以玉石图片-1为例,玉石图片-1是由红绿蓝三原色组成的图片,将其每个单通道灰度图的颜色类别数由256缩减到4个,则每个通道灰度图中的点(x,y)转换后的颜色值为:
U(x,y)=V(x,y)/(256/4)
其中,V(x,y)为颜色简化前,单通道灰度图中点(x,y)处的颜色值;U(x,y)为颜色简化后,单通道灰度图中点(x,y)处的颜色值。
在实际应用中,设图片宽度为width,图片高度为height,单位为像素,则x∈[0,width-1],y∈[0,height-1];4为颜色简化后的单通道灰度图中颜色的类别数。则获取的玉石图片-1中每一像素点的颜色值,按照红、绿、蓝三通道的顺序排列,可以为(0,0,0)、或者(0,0,1)、…、或者(3,3,3),也就是说,每一个像素点的颜色值的取值可以有64种组合。
然后将图像中点(x,y)处的颜色之和定义为点(x,y)处三个通道的灰度值之和,记为S(x,y),则有:
S(x,y)=R(x,y)+G(x,y)+B(x,y),其中,
S(x,y)为像素点坐标(x,y)处的三个通道的灰度值之和;R(x,y)为像素点坐标(x,y)处R通道的灰度值;G(x,y)为像素点坐标(x,y)处G通道的灰度值;B(x,y)为像素点坐标(x,y)处B通道的灰度值。
再预设变量T(x,y)(i)为像素点坐标(x,y)处RGB三个颜色通道的灰度值之和,如果像素点坐标(x,y)处RGB三个颜色通道的灰度值之和等于预设值i时,T(x,y)(i)取值为1;如果像素点坐标(x,y)处RGB三个颜色通道的灰度值之和不等于预设值i时,T(x,y)(i)取值为0,则i的取值可以为i∈[0,63]。
再利用公式,计算玉石图片-1中灰度值之和为i的像素点的个数,其中,
hi为玉石图片-1中灰度值之和为i的像素点的个数;width为图像的宽度,height为图像的高度,单位为像素。
由于i的取值可以为i∈[0,63],则共有64个hi。
表1为在i取不同的值时,玉石图片-1中灰度值之和为i的像素点的个数的结果;如表1所示,
表1
将表2中最后一栏的数字提取出来,便可以得到此图的颜色分布直方图向量:H=(74141,230,0,0,8,...,53929)。
针对每一玉石数据都要按照上述方式进行处理。
步骤4:将除价格以外的玉石数据、所述感知哈希特征向量以及所述颜色分布直方图向量组合作为特征向量X;将所述特征向量X及其对应的价格分为训练集和测试集。
将本步骤中获取的每一玉石数据、玉石图片的感知哈希特征以及颜色分布直方图向量,组成玉石数据的特征向量X,例如,玉石数据-1的特征向量可以为:
X=(brand,style,weight,material,length,width,thickness,inner_radius,phash,H),其中,
Brand为玉石数据-1对应的品牌,style为玉石数据-1对应的样式,weight为玉石数据-1对应的重量,length为玉石数据-1对应的长度,width为玉石数据-1对应的宽度,thickness为玉石数据-1对应的厚度,inner_radius为玉石数据-1对应的内半径,phash为玉石数据-1对应的感知哈希特征,H为玉石数据-1对应的颜色分布直方图向量。
具体的,可以将所述特征向量X的集合集分成M个子集,将所述M个子集中的M-1个子集分别作为训练集,将除所述训练集之外的子集作为测试集,其中M为正整数。
示例性的,将S101步骤中获取的每一个玉石数据的特征向量X的集合作为一个集合,然后将该集合切分成M个子集,将M个子集中的M-1个子集的集合作为训练集,除M-1个子集之外的子集作为测试集。
步骤5:利用所述训练集中的数据训练玉石价格评估模型;
具体的,可以在在步骤4中所得的训练集上,使用机器学习中的K近邻算法、梯度提升决策树方法和多元非线性回归拟合方法构构建的玉石价格评估模型,不断地调整算法中的参数,将评估准确率取最大值时的模型作为最终的玉石价格评估模型。
所述K近邻算法包括:针对所述测试集中的每一特征向量,根据当前组合加权向量,利用K近邻算法,从所述训练集中选择出K个与当前特征向量最相似特征向量;并根据所述K个与当前特征向量最相似特征向量的真实价格的平均值,获取所述当前特征向量对应的评估价格,其中,所述组合加权向量为,每一特征向量中的各个元素对应的权重的集合。
示例性的,以测试集中的特征向量-1为例。根据当前的组合加权向量,W=(w0,w1,...,w9),计算特征向量-1与训练集中的特征向量-8之间的相似度,该过程所利用的公式为,
其中,similarity(Xi,Xj)为特征向量-1与特征向量-8之间的相似度;wo为与品牌对应的权重;brandj为特征向量-8对应的品牌特征值;brandi为特征向量-1对应的品牌特征值;w1为与样式对应的权重;w2为与重量对应的权重;w3为与材质对应的权重;w4为与长度对应的权重;w5为与宽度对应的权重;w6为与厚度对应的权重;w7为与内半径对应的权重;w8为与汉明距离对应的权重;w9为与颜色直方图向量的相似度对应的权重;stylej为特征向量-8对应的样式特征值;stylei为特征向量-1对应的样式特征值;weightj为特征向量-8对应的重量特征值;weighti为特征向量-1对应的重量特征值;materialj为特征向量-8对应的材料特征值;materiali为特征向量-1对应的材料特征值;lengthj为特征向量-8对应的长度特征值;lengthi为特征向量-1对应的长度特征值;widthj为特征向量-8对应的宽度特征值;widthi为特征向量-1对应的宽度特征值;thicknessj为特征向量-8对应的厚度特征值;thicknessi为特征向量-1对应的厚度特征值;inner_radiusj为特征向量-8对应的内尺寸特征值;inner_radiusi为特征向量-1对应的内尺寸特征值;hamming_dist(phashj,phashi)为特征向量-1对应的感知哈希特征与特征向量-8对应的感知哈希特征之间的汉明距离;cos<Hj,Hi>为特征向量-1对应的颜色分布直方图向量与特征向量-8对应的颜色分布直方图向量之间的相似度;phashj为特征向量-8对应的感知哈希特征;phashi为特征向量-1对应的感知哈希特征;Hj为特征向量-8对应的颜色分布直方图向量;Hi为特征向量-1对应的颜色分布直方图向量。
可以理解的是,品牌、样式、等对应的特征值可以为预设的,另外,重量特征值可以为玉石对应的重量;长度特征值可以为玉石对应的长度,依此类推。
然后计算训练集中的每一特征向量,与特征向量-1之间的相似度。再按照特征向量-1与所述训练集中的各个特征向量之间的相似度从大到小的顺序进行排序,将所述排序结果中前K个顺序次序对应的训练集中的特征向量作为选择出的K个与所述特征向量-1最相似的特征向量。
利用公式,获取当前特征向量,特征向量-1对应的评估价格,
其中,prediction_price(Xi)为当前特征向量对应的评估价格;Xi为特征向量-1;Xj为K个与特征向量-1最相似的特征向量中的第j个特征向量,且j∈[0,K];i为特征向量-1的序号;j为K个与特征向量-1最相似的特征向量中第j个特征向量的序号;∑为求和函数;real_price()为K个与特征向量-1最相似的特征向量中第j个特征向量对应的真实价格;Topk()为K个与特征向量-1最相似特征向量;max()为最大值求解函数;similarity(Xi,Xj)为特征向量-1与K个特征向量中的第j个特征向量之间的相似度。
再针对测试集中的每一特征向量,计算该特征向量对应的评估价格,如特征向量-1对应的评估价格可以为评估价格-1;如特征向量-2对应的评估价格可以为评估价格-2;如特征向量-3对应的评估价格可以为评估价格-3。
步骤6:使用所述测试集中的数据评价训练好的玉石价格评估模型。
具体的,可以利用公式,
获取每一评估价格对应的特征值,其中,
correct_prediction(Xi)为序号为i的评估价格对应的特征值;prediction_price(Xi)为评估价格;real_price(Xi)为与评估价格对应的真实价格;L为第一预设阈值;
利用公式,计算训练的玉石价格评价模型的精度,其中,
accuracy为训练的玉石价格评价模型的精度;correct_prediction(Xi)为每一评估价格对应的特征值;N为评估价格的数量。
示例性的,以特征向量-1对应的评估价格可以为评估价格-1,以及特征向量-1对应的玉石数据-1中的真实价格-1为例。
计算评估价格-1与真实价格-1之间的差值,获取差值-1,根据差值-1,利用以下公式,
计算评估价格-1对应的特征值-1,其中,
correct_prediction(Xi)为评估价格-1的特征值;prediction_price(Xi)为评估价格-1;real_price(Xi)为真实价格-1;L为第一预设阈值,第一预设阈值可以为,
0.1*real_price(Xi)。
如果评估-1对应的特征值为1.
针对测试集中的每一个特征向量的评估价格以及真实价格计算,每一个评估价格对应的特征值。
如果,获取的各个评估价格的特征值分别为:
1、0、1、0、1、0。
利用公式,计算训练的玉石价格评价模型的精度,如果计算的比例为0.5。
示例性的,如果第二预设阈值为0.4,则本步骤中计算的精度大于第二预设阈值,执行步骤7;如果第二预设阈值为0.8,则本步骤中计算的精度小于第二预设阈值,则使用梯度提升决策树方法调整当前组合加权向量中元素的值,然后继续训练玉石价格评估模型。
步骤7:将客户输入的待评估玉石数据输入玉石价格评估模型,获得待评估玉石的评估价格。
具体的,可以获取客户输入的待评估玉石数据对应的玉石数据、感知哈希特征向量以及颜色分布直方图向量;将待评估玉石数据对应的玉石数据、感知哈希特征向量以及颜色分布直方图向量的组合作为第二特征向量;针对所述第二特征向量,根据步骤5训练的玉石价格评估模型,评估所述客户输入的待评估玉石数据对应的评估价格。
示例性的,将步骤6中用到的当前组合加权向量作为目标组合加权向量,然后利用当前组合加权向量对获取的待评估玉石数据进行价格评估。
评估的过程可以为:
获取待评估玉石数据对应的第二特征向量,根据目标组合加权向量,计算训练集中的每一特征向量与第二特征向量的相似度,将获取的相似度按照从大到小的顺序排列,将前K个顺序次序对应的真实价格的平均值作为第二特征向量对应的评估价格。
应用本发明图1所示实施例,利用获取的玉石数据对应的真实价格,训练出玉石数据对应的组合加权向量,并将价格评估准确率大于第二预设阈值的组合加权向量作为目标组合加权向量,相对于现有技术中利用人工进行玉石价格的评估,评估起来更加方便,提升了用户体验。
图1为本发明实施例提供的一种基于机器学习的玉石价格评估系统的结构示意图,如图1所示,
该系统可以包括云端和客户端两大部分,其中,云端包括:数据处理模块、玉石图片的感知哈希特征提取模块、玉石图片颜色简化及直方图特征提取模块、多因素非线性回归模块、模型评价模块、玉石价格评价模块。客户端可以包括:手机端、PC端、WEB端。
需要说明的是,数据处理模块、玉石图片的感知哈希特征提取模块、玉石图片颜色简化及直方图特征提取模块、多因素非线性回归模块、模型评价模块、玉石价格评价模块的功能与本发明图1所示实施例相对应。
当用户将待评估的玉石图片上传到云端后,云端利用训练好的模型,对待评估的玉石图片对应的玉石进行价格评估,然后将评估好的价格返回到客户端。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于机器学习的玉石价格评估方法,其特征在于,所述方法包括:
步骤1:获取玉石图片中的玉石数据,其中,所述玉石数据至少包括:颜色、重量、和真实价格;
步骤2:利用感知哈希算法,根据所述玉石图片,获取所述玉石图片的感知哈希特征向量;
步骤3:利用颜色简化算法对所述玉石图片进行处理,获得颜色简化后的玉石图片;并统计所述颜色简化后的玉石图片对应的颜色分布直方图向量;
步骤4:将除价格以外的玉石数据、所述感知哈希特征向量以及所述颜色分布直方图向量组合作为特征向量X;
将所述特征向量X及其对应的价格分为训练集和测试集;
步骤5:利用所述训练集中的数据训练玉石价格评估模型;
步骤6:使用所述测试集中的数据评价训练好的玉石价格评估模型;
步骤7:将客户输入的待评估玉石数据输入玉石价格评估模型,获得待评估玉石的评估价格。
2.根据权利要求1所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述玉石数据还包括:
品牌、样式、材料以及尺寸。
3.根据权利要求1所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述步骤2包括:
读取所述玉石数据中的每一条记录,然后根据所述玉石图片对应的URL下载图片,然后使用感知哈希算法获取下载的玉石图片的感知哈希特征,其中,
感知哈希算法具体步骤包括:
第一步:缩小所述玉石图片的尺寸;
第二步:简化所述玉石图片的色彩;
第三步:计算所述玉石图片的灰度平均值;
第四步:将每个像素的灰度与所述灰度平均值进行比较,将大于或者等于所述灰度平均值的像素的灰度值记为‘1’;小于灰度平均值的,记为‘0’;
第五步:将第四步中的所有比较结果组合在一起构成的字符串作为感知哈希特征。
4.根据权利要求1所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述步骤4包括:
将所述特征向量X的集合集分成M个子集,将所述M个子集中的M-1个子集分别作为训练集,将除所述训练集之外的子集作为测试集,其中M为正整数。
5.根据权利要求1所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述步骤5中,训练玉石价格评估模型是在步骤4中所得的训练集上,使用机器学习中的K近邻算法、梯度提升决策树方法和多元非线性回归拟合方法构构建的玉石价格评估模型,不断地调整算法中的参数,将评估准确率取最大值时的模型作为最终的玉石价格评估模型。
6.根据权利要求5所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述K近邻算法包括:
针对所述测试集中的每一特征向量,根据当前组合加权向量,利用K近邻算法,从所述训练集中选择出K个与当前特征向量最相似特征向量;
并根据所述K个与当前特征向量最相似特征向量的真实价格的平均值,获取所述当前特征向量对应的评估价格,其中,所述组合加权向量为,每一特征向量中的各个元素对应的权重的集合。
7.根据权利要求6所述的一种基于机器学习的玉石价格评估方法,其特征在于,利用K近邻算法,从所述训练集中选择出K个与当前特征向量最相似特征向量,包括:
利用公式,
计算训练集中的特征向量与测试集中的特征向量的相似度,其中,
similarity(Xi,Xj)为训练集中的特征向量与测试集中的特征向量的相似度;wo为与品牌对应的权重;brandj为训练集中的特征向量对应的品牌特征值;brandi为测试集中的特征向量对应的品牌特征值;w1为与样式对应的权重;w2为与重量对应的权重;w3为与材质对应的权重;w4为与长度对应的权重;w5为与宽度对应的权重;w6为与厚度对应的权重;w7为与内半径对应的权重;w8为与汉明距离对应的权重;w9为与颜色直方图向量的相似度对应的权重;stylej为训练集中的特征向量对应的样式特征值;stylei为测试集中的特征向量对应的样式特征值;weightj为训练集中的特征向量对应的重量特征值;weighti为测试集中的特征向量对应的重量特征值;materialj为训练集中的特征向量对应的材料特征值;materiali为测试集中的特征向量对应的材料特征值;lengthj为训练集中的特征向量对应的长度特征值;lengthi为测试集中的特征向量对应的长度特征值;widthj为训练集中的特征向量对应的宽度特征值;widthi为测试集中的特征向量对应的宽度特征值;thicknessj为训练集中的特征向量对应的厚度特征值;thicknessi为测试集中的特征向量对应的厚度特征值;inner_radiusj为训练集中的特征向量对应的内尺寸特征值;inner_radiusi为测试集中的特征向量对应的内尺寸特征值;hamming_dist(phashj,phashi)为测试集中的特征向量对应的感知哈希特征与所述训练集中的特征向量对应的感知哈希特征之间的汉明距离;cos<Hj,Hi>为测试集中的特征向量对应的颜色分布直方图向量与训练集中的特征向量对应的颜色分布直方图向量之间的相似度;phashj为训练集中的特征向量对应的感知哈希特征;phashi为测试集中的特征向量对应的感知哈希特征;Hj为训练集中的特征向量对应的颜色分布直方图向量;Hi为测试集中的特征向量对应的颜色分布直方图向量;
按照所述测试集中的特征向量与所述训练集中的训练集中的特征向量之间的相似度从大到小的顺序进行排序,将所述排序结果中前K个顺序次序对应的测试集中的特征向量与所述训练集中的训练集中的特征向量之间的相似度作为选择出的K个与所述测试集中的当前特征向量最相似训练集中的特征向量。
8.根据权利要求7所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述根据所述K个与当前特征向量最相似特征向量的真实价格的平均值,获取所述当前特征向量对应的评估价格,包括:
利用公式,获取述当前特征向量对应的评估价格,其中,
prediction_price(Xi)为当前特征向量对应的评估价格;Xi为测试集中的特征向量;Xj为训练集中的特征向量;i为测试集中的特征向量的序号;j为训练集中的特征向量的序号;∑为求和函数;real_price()为训练集中的特征向量对应的真实价格;Topk()为K个与所述测试集中的特征向量最相似训练集中的特征向量;max()为最大值求解函数;similarity(Xi,Xj)为所述测试集中的特征向量与所述训练集中的特征向量之间的相似度。
9.根据权利要求1所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述步骤6包括:
利用公式,
获取每一评估价格对应的特征值,其中,
correct_prediction(Xi)为序号为i的评估价格对应的特征值;prediction_price(Xi)为评估价格;real_price(Xi)为与评估价格对应的真实价格;L为第一预设阈值;
利用公式,计算训练的玉石价格评价模型的精度,其中,
accuracy为训练的玉石价格评价模型的精度;correct_prediction(Xi)为每一评估价格对应的特征值;N为评估价格的数量。
10.根据权利要求1所述的一种基于机器学习的玉石价格评估方法,其特征在于,所述步骤7包括:
获取客户输入的待评估玉石数据对应的玉石数据、感知哈希特征向量以及颜色分布直方图向量;
将待评估玉石数据对应的玉石数据、感知哈希特征向量以及颜色分布直方图向量的组合作为第二特征向量;
针对所述第二特征向量,根据步骤5训练的玉石价格评估模型,评估所述客户输入的待评估玉石数据对应的评估价格。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810507857.0A CN108734520B (zh) | 2018-05-24 | 2018-05-24 | 一种基于机器学习的玉石价格评估方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810507857.0A CN108734520B (zh) | 2018-05-24 | 2018-05-24 | 一种基于机器学习的玉石价格评估方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108734520A true CN108734520A (zh) | 2018-11-02 |
CN108734520B CN108734520B (zh) | 2021-03-05 |
Family
ID=63936171
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810507857.0A Active CN108734520B (zh) | 2018-05-24 | 2018-05-24 | 一种基于机器学习的玉石价格评估方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108734520B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112116398A (zh) * | 2020-09-27 | 2020-12-22 | 广州华多网络科技有限公司 | 一种宝石估价方法及相关设备 |
CN113139830A (zh) * | 2021-03-25 | 2021-07-20 | 深圳市雅昌艺术网股份有限公司 | 一种艺术品估值系统的估值计算方法 |
CN113435942A (zh) * | 2021-07-09 | 2021-09-24 | 杭州睿胜软件有限公司 | 评估矿物价格的方法和计算机系统 |
CN115393349A (zh) * | 2022-10-26 | 2022-11-25 | 长春工程学院 | 一种用于对长白玉进行质量评价的方法和系统 |
CN116994248A (zh) * | 2023-09-25 | 2023-11-03 | 支付宝(杭州)信息技术有限公司 | 纹理检测处理方法及装置 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030031869A1 (en) * | 2000-12-15 | 2003-02-13 | Vagarali Suresh Shankarappa | Jadeite and its production |
WO2008045613A2 (en) * | 2006-10-11 | 2008-04-17 | Rosy Blue Dmcc | Diamond valuation method, apparatus and computer readable medium product |
CN102216760A (zh) * | 2008-10-09 | 2011-10-12 | 欧珀生产商澳大利亚有限公司 | 用于宝石的评定、估价、分级的改进装置和方法 |
US20150169633A1 (en) * | 2011-03-03 | 2015-06-18 | Yangli Hector Yee | Ranking over hashes |
CN105657514A (zh) * | 2015-11-20 | 2016-06-08 | 乐视移动智能信息技术(北京)有限公司 | 一种在移动设备浏览器中视频播放关键信息的方法及装置 |
CN107292660A (zh) * | 2017-05-22 | 2017-10-24 | 北京速信科技有限公司 | 一种基于大数据的珠宝艺术品价值评估方法及系统 |
CN107480850A (zh) * | 2017-06-29 | 2017-12-15 | 葛杰光 | 一种利用综合数值对珠宝产品品质进行数据化度量系统 |
CN107507015A (zh) * | 2017-06-29 | 2017-12-22 | 葛杰光 | 一种新型珠宝价值评估系统 |
CN107967334A (zh) * | 2017-11-30 | 2018-04-27 | 睿视智觉(深圳)算法技术有限公司 | 一种基于图像的珠宝首饰分类方法及相似产品查询方法 |
-
2018
- 2018-05-24 CN CN201810507857.0A patent/CN108734520B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030031869A1 (en) * | 2000-12-15 | 2003-02-13 | Vagarali Suresh Shankarappa | Jadeite and its production |
WO2008045613A2 (en) * | 2006-10-11 | 2008-04-17 | Rosy Blue Dmcc | Diamond valuation method, apparatus and computer readable medium product |
CN102216760A (zh) * | 2008-10-09 | 2011-10-12 | 欧珀生产商澳大利亚有限公司 | 用于宝石的评定、估价、分级的改进装置和方法 |
US20150169633A1 (en) * | 2011-03-03 | 2015-06-18 | Yangli Hector Yee | Ranking over hashes |
CN105657514A (zh) * | 2015-11-20 | 2016-06-08 | 乐视移动智能信息技术(北京)有限公司 | 一种在移动设备浏览器中视频播放关键信息的方法及装置 |
CN107292660A (zh) * | 2017-05-22 | 2017-10-24 | 北京速信科技有限公司 | 一种基于大数据的珠宝艺术品价值评估方法及系统 |
CN107480850A (zh) * | 2017-06-29 | 2017-12-15 | 葛杰光 | 一种利用综合数值对珠宝产品品质进行数据化度量系统 |
CN107507015A (zh) * | 2017-06-29 | 2017-12-22 | 葛杰光 | 一种新型珠宝价值评估系统 |
CN107967334A (zh) * | 2017-11-30 | 2018-04-27 | 睿视智觉(深圳)算法技术有限公司 | 一种基于图像的珠宝首饰分类方法及相似产品查询方法 |
Non-Patent Citations (2)
Title |
---|
杨天祺等: "改进卷积神经网络在分类与推荐中的实例应用", 《计算机应用研究》 * |
杨迪威等: "神经网络在翡翠评估中的应用", 《宝石和宝石学杂志》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112116398A (zh) * | 2020-09-27 | 2020-12-22 | 广州华多网络科技有限公司 | 一种宝石估价方法及相关设备 |
CN113139830A (zh) * | 2021-03-25 | 2021-07-20 | 深圳市雅昌艺术网股份有限公司 | 一种艺术品估值系统的估值计算方法 |
CN113435942A (zh) * | 2021-07-09 | 2021-09-24 | 杭州睿胜软件有限公司 | 评估矿物价格的方法和计算机系统 |
WO2023279944A1 (zh) * | 2021-07-09 | 2023-01-12 | 杭州睿胜软件有限公司 | 评估矿物价格的方法和计算机系统 |
CN115393349A (zh) * | 2022-10-26 | 2022-11-25 | 长春工程学院 | 一种用于对长白玉进行质量评价的方法和系统 |
CN115393349B (zh) * | 2022-10-26 | 2023-01-06 | 长春工程学院 | 一种用于对长白玉进行质量评价的方法和系统 |
CN116994248A (zh) * | 2023-09-25 | 2023-11-03 | 支付宝(杭州)信息技术有限公司 | 纹理检测处理方法及装置 |
CN116994248B (zh) * | 2023-09-25 | 2024-03-15 | 支付宝(杭州)信息技术有限公司 | 纹理检测处理方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN108734520B (zh) | 2021-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108734520A (zh) | 一种基于机器学习的玉石价格评估方法及装置 | |
CN111062757B (zh) | 基于多路径寻优匹配的信息推荐方法及系统 | |
CN104346370B (zh) | 图像搜索、获取图像文本信息的方法及装置 | |
CN103714349B (zh) | 一种基于颜色和纹理特征的图像识别方法 | |
CN101290634B (zh) | 一种识别重复缩略图的方法、装置及在搜索引擎中的应用 | |
CN103324759B (zh) | 一种瓷砖智能识别设备 | |
CN103020265B (zh) | 图像检索的方法和系统 | |
CN106599925A (zh) | 一种基于深度学习的植物叶片识别系统与方法 | |
CN101730835A (zh) | 涂料颜色数据库的创建方法、使用数据库的检索方法、及其系统、程序和记录介质 | |
CN108830294A (zh) | 一种图像数据的增广方法 | |
Caetano et al. | A probabilistic model for the human skin color | |
CN105005565B (zh) | 现场鞋底痕迹花纹图像检索方法 | |
CN103366178A (zh) | 一种用于对目标图像进行颜色分类的方法与设备 | |
CN104282008B (zh) | 对图像进行纹理分割的方法和装置 | |
CN104852892B (zh) | 一种新型物联网网站系统的自主登录方法 | |
CN103578098B (zh) | 在商品图片中提取商品主体的方法和装置 | |
CN109740572A (zh) | 一种基于局部彩色纹理特征的人脸活体检测方法 | |
CN108960382A (zh) | 一种彩色条码及其颜色校准方法 | |
CN109359499A (zh) | 一种用于脸部分类的方法和装置 | |
CN102184250A (zh) | 基于彩色图像匹配的服装面料样品检索方法 | |
CN103917990A (zh) | 使用本征图像进行数字图像信号压缩的系统和方法 | |
CN107168968A (zh) | 面向情感的图像色彩提取方法及系统 | |
CN108984576A (zh) | 一种基于卷积神经网络的专利文献获取方法及系统 | |
CN103514595B (zh) | 图像显著区域检测方法 | |
Merugu et al. | Sub-scene target detection and recognition using deep learning convolution neural networks |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20200911 Address after: 230000 2nd floor, No.4 workshop, intelligent equipment science and Technology Park, no.3963 Susong Road, Hefei Economic and Technological Development Zone, Anhui Province Applicant after: Hefei Huaiyue Technology Co.,Ltd. Address before: 236000 Anhui city of Hefei Province Economic and Technological Development Zone Cuiwei Road No. 6 Haiheng building room 6012 Applicant before: HRG INTERNATIONAL INSTITUTE FOR RESEARCH & INNOVATION |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |