CN104794573B - 产品评估任务中的结果估计方法及众包众测平台 - Google Patents
产品评估任务中的结果估计方法及众包众测平台 Download PDFInfo
- Publication number
- CN104794573B CN104794573B CN201510189051.8A CN201510189051A CN104794573B CN 104794573 B CN104794573 B CN 104794573B CN 201510189051 A CN201510189051 A CN 201510189051A CN 104794573 B CN104794573 B CN 104794573B
- Authority
- CN
- China
- Prior art keywords
- mrow
- crowdsourcing
- task
- product evaluation
- people
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 114
- 238000000034 method Methods 0.000 title claims abstract description 19
- 230000014509 gene expression Effects 0.000 claims description 13
- 239000011159 matrix material Substances 0.000 claims description 9
- 238000012512 characterization method Methods 0.000 claims description 6
- 238000009826 distribution Methods 0.000 claims description 3
- 238000005314 correlation function Methods 0.000 claims 1
- 239000000047 product Substances 0.000 description 66
- 238000002360 preparation method Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000013065 commercial product Substances 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种产品评估任务中的结果估计方法及众包众测平台，包括步骤：在搜集到众包人上传上来的个人评估后，执行迭代算法，最终输出待评价产品的准确评估结果。本发明可以通过迭代学习估计出众包人的评估准确度，从而提高了在众包和众测平台中产品评估任务的评估准确度，进而提升了众包及众测平台的总体可信度和应用价值。
Description
技术领域
本发明涉及网络领域，具体地，涉及一种在众包、众测平台中产品评估任务的评估方法众包众测平台。
背景技术
随着互联网技术的广泛普及，众包平台孕育而生。众包，即任务发起人通过众包平台将问题通过公开招标的方式发给一群解决问题的群体(众包人)。在互联网普及的今天，这种过程通常以互联网为媒介进行。众包、众测平台帮助企业或个人完成调研、设计以及数据采集。众包人利用自己的技能知识来帮助任务发起人解决相关问题，同时能根据任务发起人对其回答的满意程度来获得相应报酬。平台通过整合众包人的回答来得到问题的答案。
众包、众测平台需要处理的任务有许多种，有设计方面相对主观的任务，也有评判、录入等相对客观的任务。在以前的工作中，着重解决的是众包、众测平台对识别和分类问题的处理方法。David R.Karger等人2013年的Proceedings of the ACM SIGMETRICS/international conference on Measurement and modeling of computer systems发表的“efficient crowdsourcing for multi-class labeling”中提出的方法很好地解决了上述的问题。
但是众包、众测平台需要处理的问题除了识别分类这一类问题之外，还包括产品评估任务，属于打分类问题。打分类问题是指问题答案是一个连续的分数区间。对于这一类问题，通常的做法是取所有众包人回答的算术平均值作为问题的答案。但是这种做法忽视了众包人能力的不同，即在估计答案的阶段，能力强的众包人的回答和能力弱的众包人的回答被一视同仁。这种做法可能导致整合的答案与正确答案相差较远。
发明内容
针对现有技术中的缺陷，本发明的目的是提供一种产品评估任务中的结果估计方法及众包众测平台。
根据本发明提供的一种产品评估任务中的结果估计方法，包括如下步骤：
步骤1：准备m个产品评估任务，m个产品评估任务的标准评估值的集合表示T，其中，ti表示第i个产品评估任务的标准评估值，ti∈[a,b]，[a,b]为产品评估任务的评价区间，[m]表示1至m的序号取值；
步骤2：将m个产品评估任务分配给n个众包人，n个众包人的评估准确度的集合表示为W，其中，wj表示第j个众包人的评估准确度，[n]表示1至n的序号取值；
步骤3：根据众包人对产品评估任务给出的回答，得到回答矩阵A；
步骤4：对回答矩阵A通过加权最大相关算法WMCE进行运算，得到任务评估结果。
优选地，所述步骤2包括如下步骤：
将m个产品评估任务按照正则随机二分图规则分配分给n个众包人，表示为：
G＝(T∪W,E)
其中，G表示二分图，T表示m个产品评估任务的标准评估值的集合，W表示n个众包人的评估准确度的集合，E表示产品评估任务的分配，(T∪W,E)表示T∪W所对应的点与E所对应的边组成的二分图，∪表示顶点取并集；
如果第i个产品评估任务分配给了第j个众包人，那么(ti,wj)∈E，其中，(ti,wj)表示ti,wj连成的边；T的度为l，即一个产品评估任务被随机分配给了l个众包人，W的度为r，即一个众包人接到r个产品评估任务，l的取值范围为1至n，r的取值范围为1至m。
优选地，所述步骤3包括如下步骤：
将众包人给出的回答，组成回答矩阵A：
A＝[Aij]m×n
其中，Aij为第j个众包人对于第i个产品评估任务的回答，且Aij∈{[a,b]∪null}，null表示不存在；若第i个产品评估任务没有分配给第j个众包人，则Aij＝null。
优选地，所述步骤4包括如下步骤：
步骤S1：设置最大迭代次数hmax，初始化表征众包人的评估准确度的参数向量其中，1n为n维全1向量；
步骤S2：重复执行步骤i和步骤ii直至收敛或迭代次数超过最大迭代次数hmax；
步骤i：对m个产品评估任务，执行如下计算式：
其中，表示第h次迭代中第i个产品评估任务的评估值，表示与第i个产品评估任务关联的众包人，表示第h次迭代中第j个众包人的评估准确度的估计值，R(x,Aij)表示x与A的相关度，x表示评估值的变量；
步骤ii：对n个众包人，执行如下计算式：
其中，表示第h+1次迭代中第j个众包人的评估准确度的估计值，r表示一个众包人接收到的产品评估任务数量，表示与第j个众包人关联的产品评估任务，表示第h次迭代中第i个任务的评估值与答案A的相关度；
步骤S3：输出评估向量作为任务评估结果：
其中，表示达到最终迭代次数后的产品评估任务的评估值。
优选地，对于产品评估任务的评价区间在连续区间[a,b]中的产品评估任务，用相关度函数R(x,y)表征众包人的回答之间的相关度，定义如下：
其中，c为一个常数，x、y为自变量。
根据本发明提供的一种众包众测平台，包括相互连接的任务收集模块、任务下发模块、任务评估模块，所述任务评估模块通过上述的产品评估任务中的结果估计方法得到产品评估任务的任务评估结果。
优选地，所述产品评估任务为室内定位任务。
与现有技术相比，本发明具有如下的有益效果：
1、本发明利用迭代学习的方式来完成众包、众测平台对产品评估任务中评估值的获取，即在每次迭代中，先估计出任务的评估值，再结合估计的值于众包人的个人评估计算各个众包人的评估准确度，如此反复直至收敛。在迭代学习的过程中，能力强的众包人会被逐渐甄别出来，他的评估会愈受重视；能力弱的众包人也会被逐渐甄别出来，他的评估会愈被忽视。
2、本发明解决了传统的多数投票方法没有考虑众包人个体差异的缺点，最后的产品估计值的精度会有较大幅度的提升。具体地，本发明可以应用于网络众包、众测平台的产品评估中。本发明利用众包模式的特点，提高了众包、众测平台的产品评估任务的结果准确度。众包、众测平台的工作模式由任务提供者、平台和众包人组成，首先由任务提供者将任务提交给众包、众测平台，平台在接收到任务后，将任务按一定规则下发至众包人处，并等待众包人按一定规则作答后的结果，收集到众包人提供的结果后，以一定的规则得到最终的评估结果，将其反馈至任务提供者。现有的最终评估值的得到方法为取平均的方法，但其忽略了众包人的个体差异，本发明主要针对的是任务的发放规则以及答案的得到规则，根据现有众包产品评估方法的不足，本发明考虑了众包人个体评估准确度的差异，提出了一种新的众包产品评估方法。
3、本发明通过代学习估计出众包人的评估准确度进而提高任务答案的精度。本发明提出了WMCE算法，不仅可以应用于众包、众测平台中的产品评估任务，还可以应用于众包平台中的其他打分类任务，例如商品推荐与室内定位等。
4、本发明能在得出产品最终评估值的同时得到众包众包人的评估准确度，可以作为个人信息储存在平台服务器中，供以后使用，同时也可以作为有偿众包平台的费用支付依据之一。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1为加权最大相关算法WMCE(Weighted Maximum Correlation Estimate)的流程图。
图2为众包系统流程图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明，但不以任何形式限制本发明。应当指出的是，对本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进。这些都属于本发明的保护范围。
本发明提供了一种在众包和众测平台中产品评估任务的评估结果的获得方法，在搜集到众包人上传上来的个人评估后，执行本方法中的加权最大相关算法WMCE，最终输出待评价产品的准确评估结果。本发明可以通过迭代学习估计出众包人的评估准确度，从而提高了在众包和众测平台中产品评估任务的评估准确度，进而提升了众包及众测平台的总体可信度和应用价值。
根据本发明提供的一种众包众测平台，包括相互连接的任务收集模块、任务下发模块、任务评估模块，所述任务评估模块通过上述的产品评估任务中的结果估计方法得到产品评估任务的任务评估结果。优选地，所述产品评估任务为室内定位任务。
所述产品评估任务中的结果估计方法，包括如下步骤：
步骤1：准备m个产品评估任务，m个产品评估任务的标准评估值的集合表示T，其中，ti表示第i个产品评估任务的标准评估值，ti∈[a,b]，[a,b]为产品评估任务的评价区间，[m]表示1至m的序号取值；
步骤2：将m个产品评估任务分配给n个众包人，n个众包人的评估准确度的集合表示为W，其中，wj表示第j个众包人的评估准确度，[n]表示1至n的序号取值；
步骤3：根据众包人对产品评估任务给出的回答，得到回答矩阵A；
步骤4：对回答矩阵A通过加权最大相关算法WMCE进行运算，得到任务评估结果。
优选地，所述步骤2包括如下步骤：
将m个产品评估任务按照正则随机二分图规则分配分给n个众包人，表示为：
G＝(T∪W,E)
其中，G表示二分图，T表示m个产品评估任务的标准评估值的集合，W表示n个众包人的评估准确度的集合，E表示产品评估任务的分配，(T∪W,E)表示T∪W所对应的点与E所对应的边组成的二分图，∪表示顶点取并集；
如果第i个产品评估任务分配给了第j个众包人，那么(ti,wj)∈E，其中，(ti,wj)表示在二分图中ti,wj连成的边；T的度为l，即一个产品评估任务被随机分配给了l个众包人，W的度为r，即一个众包人接到r个产品评估任务，l的取值范围为1至n，r的取值范围为1至m。
优选地，所述步骤3包括如下步骤：
将众包人给出的回答，组成回答矩阵A：
A＝[Aij]m×n
其中，Aij为第j个众包人对于第i个产品评估任务的回答，且Aij∈{[a,b]∪null}，null表示不存在；若第i个产品评估任务没有分配给第j个众包人，则Aij＝null。
优选地，所述步骤4包括如下步骤：
步骤S1：设置最大迭代次数hmax，初始化表征众包人的评估准确度的参数向量其中，1n为n维全1向量；
步骤S2：重复执行步骤i和步骤ii直至收敛或迭代次数超过最大迭代次数hmax；
步骤i：对m个产品评估任务，执行如下计算式：
其中，表示第h次迭代中第i个产品评估任务的评估值，表示与第i个产品评估任务关联的众包人，表示第h次迭代中第j个众包人的评估准确度的估计值，R(x,Aij)表示x与A的相关度，x表示评估值的变量；
步骤ii：对n个众包人，执行如下计算式：
其中，表示第h+1次迭代中第j个众包人的评估准确度的估计值，r表示一个众包人接收到的产品评估任务数量，表示与第j个众包人关联的产品评估任务，表示第h次迭代中第i个任务的评估值与答案A的相关度；
步骤S3：输出评估向量作为任务评估结果：
其中，表示达到最终迭代次数后的产品评估任务的评估值。
优选地，对于产品评估任务的评价区间在连续区间[a,b]中的产品评估任务，用相关度函数R(x,y)表征众包人的回答之间的相关度，定义如下：
其中，c为一个常数，x、y为自变量。
以上对本发明的具体实施例进行了描述。需要理解的是，本发明并不局限于上述特定实施方式，本领域技术人员可以在权利要求的范围内做出各种变形或修改，这并不影响本发明的实质内容。
Claims (5)
1.一种产品评估任务中的结果估计方法，其特征在于，包括如下步骤：
步骤1：准备m个产品评估任务，m个产品评估任务的标准评估值的集合表示T，T＝{ti}i∈[m]，其中，ti表示第i个产品评估任务的标准评估值，ti∈[a,b]，[a,b]为产品评估任务的评价区间，[m]表示1至m的序号取值；
步骤2：将m个产品评估任务分配给n个众包人，n个众包人的评估准确度的集合表示为W，W＝{wj}j∈[n]，其中，wj表示第j个众包人的评估准确度，[n]表示1至n的序号取值；
步骤3：根据众包人对产品评估任务给出的回答，得到回答矩阵A；
步骤4：对回答矩阵A通过加权最大相关算法WMCE进行运算，得到任务评估结果；
所述步骤3包括如下步骤：
将众包人给出的回答，组成回答矩阵A：
A＝[Aij]m×n
其中，Aij为第j个众包人对于第i个产品评估任务的回答，且Aij∈{[a,b]∪null}，null表示不存在；若第i个产品评估任务没有分配给第j个众包人，则Aij＝null；
所述步骤4包括如下步骤：
步骤S1：设置最大迭代次数hmax，初始化表征众包人的评估准确度的参数向量其中，1n为n维全1向量；
步骤S2：重复执行步骤i和步骤ii直至收敛或迭代次数超过最大迭代次数hmax；
步骤i：对m个产品评估任务，执行如下计算式：
<mrow>
<msubsup>
<mover>
<mi>t</mi>
<mo>^</mo>
</mover>
<mi>i</mi>
<mrow>
<mo>(</mo>
<mi>h</mi>
<mo>)</mo>
</mrow>
</msubsup>
<mo>=</mo>
<mi>arg</mi>
<munder>
<mi>max</mi>
<mrow>
<mi>x</mi>
<mo>&Element;</mo>
<mo>&lsqb;</mo>
<mi>a</mi>
<mo>,</mo>
<mi>b</mi>
<mo>&rsqb;</mo>
</mrow>
</munder>
<munder>
<mo>&Sigma;</mo>
<mrow>
<mi>j</mi>
<mo>&Element;</mo>
<mo>&part;</mo>
<mi>i</mi>
</mrow>
</munder>
<msubsup>
<mover>
<mi>q</mi>
<mo>^</mo>
</mover>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mi>h</mi>
<mo>)</mo>
</mrow>
</msubsup>
<mi>R</mi>
<mrow>
<mo>(</mo>
<mi>x</mi>
<mo>,</mo>
<msub>
<mi>A</mi>
<mrow>
<mi>i</mi>
<mi>j</mi>
</mrow>
</msub>
<mo>)</mo>
</mrow>
</mrow>
其中，表示第h次迭代中第i个产品评估任务的评估值，表示与第i个产品评估任务关联的众包人，表示第h次迭代中第j个众包人的评估准确度的估计值，R(x,Aij)表示x与A的相关度，x表示评估值的变量；
步骤ii：对n个众包人，执行如下计算式：
<mrow>
<msubsup>
<mover>
<mi>q</mi>
<mo>^</mo>
</mover>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mi>h</mi>
<mo>+</mo>
<mn>1</mn>
<mo>)</mo>
</mrow>
</msubsup>
<mo>=</mo>
<mfrac>
<mn>1</mn>
<mi>r</mi>
</mfrac>
<munder>
<mo>&Sigma;</mo>
<mrow>
<mi>i</mi>
<mo>&Element;</mo>
<mo>&part;</mo>
<mi>j</mi>
</mrow>
</munder>
<mi>R</mi>
<mrow>
<mo>(</mo>
<msubsup>
<mover>
<mi>t</mi>
<mo>^</mo>
</mover>
<mi>i</mi>
<mrow>
<mo>(</mo>
<mi>h</mi>
<mo>)</mo>
</mrow>
</msubsup>
<mo>,</mo>
<msub>
<mi>A</mi>
<mrow>
<mi>i</mi>
<mi>j</mi>
</mrow>
</msub>
<mo>)</mo>
</mrow>
</mrow>
其中，表示第h+1次迭代中第j个众包人的评估准确度的估计值，r表示一个众包人接收到的产品评估任务数量，表示与第j个众包人关联的产品评估任务，表示第h次迭代中第i个任务的评估值与答案A的相关度；
步骤S3：输出评估向量作为任务评估结果：
<mrow>
<mover>
<mi>t</mi>
<mo>^</mo>
</mover>
<mo>=</mo>
<msup>
<mover>
<mi>t</mi>
<mo>^</mo>
</mover>
<mrow>
<mo>(</mo>
<msub>
<mi>h</mi>
<mi>max</mi>
</msub>
<mo>)</mo>
</mrow>
</msup>
</mrow>
其中，表示达到最终迭代次数后的产品评估任务的评估值。
2.根据权利要求1所述的产品评估任务中的结果估计方法，其特征在于，所述步骤2包括如下步骤：
将m个产品评估任务按照正则随机二分图规则分配分给n个众包人，表示为：
G＝(T∪W,E)
其中，G表示二分图，T表示m个产品评估任务的标准评估值的集合，W表示n个众包人的评估准确度的集合，E表示产品评估任务的分配，(T∪W,E)表示T∪W所对应的点与E所对应的边组成的二分图，∪表示顶点取并集；
如果第i个产品评估任务分配给了第j个众包人，那么(ti,wj)∈E，其中，(ti,wj)表示ti,wj连成的边；T的度为l，即一个产品评估任务被随机分配给了l个众包人，W的度为r，即一个众包人接到r个产品评估任务，l的取值范围为1至n，r的取值范围为1至m。
3.根据权利要求1所述的产品评估任务中的结果估计方法，其特征在于，对于产品评估任务的评价区间在连续区间[a,b]中的产品评估任务，用相关度函数R(x,y)表征众包人的回答之间的相关度，定义如下：
<mrow>
<mi>R</mi>
<mrow>
<mo>(</mo>
<mi>x</mi>
<mo>,</mo>
<mi>y</mi>
<mo>)</mo>
</mrow>
<mo>=</mo>
<mfenced open = "{" close = "">
<mtable>
<mtr>
<mtd>
<mn>0</mn>
</mtd>
<mtd>
<mrow>
<mi>i</mi>
<mi>f</mi>
<mo>|</mo>
<mi>x</mi>
<mo>-</mo>
<mi>y</mi>
<mo>|</mo>
<mo>></mo>
<mfrac>
<mn>1</mn>
<msqrt>
<mi>c</mi>
</msqrt>
</mfrac>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<mn>1</mn>
<mo>-</mo>
<mi>c</mi>
<msup>
<mrow>
<mo>(</mo>
<mi>x</mi>
<mo>-</mo>
<mi>y</mi>
<mo>)</mo>
</mrow>
<mn>2</mn>
</msup>
</mrow>
</mtd>
<mtd>
<mrow>
<mi>o</mi>
<mi>t</mi>
<mi>h</mi>
<mi>e</mi>
<mi>r</mi>
<mi>w</mi>
<mi>i</mi>
<mi>s</mi>
<mi>e</mi>
</mrow>
</mtd>
</mtr>
</mtable>
</mfenced>
<mo>,</mo>
</mrow>
其中，c为一个常数，x、y为自变量。
4.一种众包众测平台，包括任务收集模块、任务下发模块、任务评估模块，其特征在于，所述任务评估模块通过权利要求1所述的产品评估任务中的结果估计方法得到产品评估任务的任务评估结果。
5.根据权利要求4所述的众包众测平台，其特征在于，所述产品评估任务为室内定位任务。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510189051.8A CN104794573B (zh) | 2015-04-17 | 2015-04-17 | 产品评估任务中的结果估计方法及众包众测平台 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510189051.8A CN104794573B (zh) | 2015-04-17 | 2015-04-17 | 产品评估任务中的结果估计方法及众包众测平台 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104794573A CN104794573A (zh) | 2015-07-22 |
| CN104794573B true CN104794573B (zh) | 2018-05-29 |
Family
ID=53559359
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510189051.8A Expired - Fee Related CN104794573B (zh) | 2015-04-17 | 2015-04-17 | 产品评估任务中的结果估计方法及众包众测平台 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104794573B (zh) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107122786B (zh) * | 2016-02-25 | 2021-01-08 | 华为技术有限公司 | 一种众包学习方法及装置 |
| CN106339852A (zh) * | 2016-08-10 | 2017-01-18 | 南京邮电大学 | 具有偏好的众包任务分配方法 |
| CN107871196A (zh) * | 2016-09-28 | 2018-04-03 | 郑州大学 | 一种基于滑动任务窗的众包质量评估方法 |
| RU2743898C1 (ru) | 2018-11-16 | 2021-03-01 | Общество С Ограниченной Ответственностью "Яндекс" | Способ выполнения задач |
| RU2744032C2 (ru) | 2019-04-15 | 2021-03-02 | Общество С Ограниченной Ответственностью "Яндекс" | Способ и система для определения результата выполнения задачи в краудсорсинговой среде |
| RU2744038C2 (ru) | 2019-05-27 | 2021-03-02 | Общество С Ограниченной Ответственностью «Яндекс» | Способ и система для определения результата для задачи, выполняемой в краудсорсинговой среде |
| RU2019128272A (ru) | 2019-09-09 | 2021-03-09 | Общество С Ограниченной Ответственностью «Яндекс» | Способ и система для определения производительности пользователя в компьютерной краудсорсинговой среде |
| RU2019135532A (ru) | 2019-11-05 | 2021-05-05 | Общество С Ограниченной Ответственностью «Яндекс» | Способ и система для выбора метки из множества меток для задачи в краудсорсинговой среде |
| RU2020107002A (ru) | 2020-02-14 | 2021-08-16 | Общество С Ограниченной Ответственностью «Яндекс» | Способ и система приема метки для цифровой задачи, исполняемой в краудсорсинговой среде |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102928815A (zh) * | 2012-11-01 | 2013-02-13 | 无锡清华信息科学与技术国家实验室物联网技术中心 | 一种室内定位中的鲁棒用户轨迹估计的方法、装置及智能通讯设备 |
| CN103324620A (zh) * | 2012-03-20 | 2013-09-25 | 北京百度网讯科技有限公司 | 一种对标注结果进行纠偏的方法和装置 |
| CN103647671A (zh) * | 2013-12-20 | 2014-03-19 | 北京理工大学 | 一种基于Gur Game的群智感知网络管理方法及其系统 |
| CN103870990A (zh) * | 2014-03-31 | 2014-06-18 | 上海交通大学 | 移动群智感知系统中覆盖问题的激励机制实现方法 |
| WO2014107268A1 (en) * | 2013-01-03 | 2014-07-10 | Qualcomm Incorporated | Methods, apparatuses and system for inter-access point distance estimation |
| EP2784734A1 (en) * | 2013-03-28 | 2014-10-01 | Wal-Mart Stores, Inc. | System and method for high accuracy product classification with limited supervision |
-
2015
- 2015-04-17 CN CN201510189051.8A patent/CN104794573B/zh not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103324620A (zh) * | 2012-03-20 | 2013-09-25 | 北京百度网讯科技有限公司 | 一种对标注结果进行纠偏的方法和装置 |
| CN102928815A (zh) * | 2012-11-01 | 2013-02-13 | 无锡清华信息科学与技术国家实验室物联网技术中心 | 一种室内定位中的鲁棒用户轨迹估计的方法、装置及智能通讯设备 |
| WO2014107268A1 (en) * | 2013-01-03 | 2014-07-10 | Qualcomm Incorporated | Methods, apparatuses and system for inter-access point distance estimation |
| EP2784734A1 (en) * | 2013-03-28 | 2014-10-01 | Wal-Mart Stores, Inc. | System and method for high accuracy product classification with limited supervision |
| CN103647671A (zh) * | 2013-12-20 | 2014-03-19 | 北京理工大学 | 一种基于Gur Game的群智感知网络管理方法及其系统 |
| CN103870990A (zh) * | 2014-03-31 | 2014-06-18 | 上海交通大学 | 移动群智感知系统中覆盖问题的激励机制实现方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104794573A (zh) | 2015-07-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104794573B (zh) | 产品评估任务中的结果估计方法及众包众测平台 | |
| Anselin et al. | Interpolation of air quality measures in hedonic house price models: spatial aspects | |
| Tang et al. | Factors affecting effectiveness and efficiency of analyzing stakeholders' needs at the briefing stage of public private partnership projects | |
| Salerno | What we know about the efficiency of higher education institutions: The best evidence | |
| CN104599084B (zh) | 一种群体计算的质量控制方法及装置 | |
| CN103262118B (zh) | 属性值估计装置和属性值估计方法 | |
| Ahn | The analytic hierarchy process with interval preference statements | |
| Mohammadi et al. | A hybrid quality function deployment and cybernetic analytic network process model for project manager selection | |
| Glaunes et al. | Template estimation form unlabeled point set data and surfaces for computational anatomy | |
| Kuriyama et al. | A latent segmentation approach to a Kuhn–Tucker model: An application to recreation demand | |
| CN104573359A (zh) | 一种基于任务难度与标注者能力的众包标注数据整合方法 | |
| CN103745472B (zh) | 基于条件三重马尔可夫场的sar图像分割方法 | |
| CN107341611A (zh) | 一种基于卷积神经网络的业务流程推荐方法 | |
| CN106599194A (zh) | 标签确定方法及装置 | |
| CN104732546B (zh) | 区域相似性和局部空间约束的非刚性sar图像配准方法 | |
| CN116244512B (zh) | 一种基于图结构数据的军事体能训练智能推荐方法 | |
| Halme et al. | Non-convex value efficiency analysis and its application to bank branch sales evaluation | |
| CN107679501A (zh) | 一种基于标签自提纯的深度学习方法 | |
| Chen et al. | Collusion-proof result inference in crowdsourcing | |
| Yevu et al. | Evaluation model for influences of driving forces for electronic procurement systems application in Ghanaian construction projects | |
| Maharani et al. | Comparison of topsis and maut methods for recipient determination home surgery | |
| CN110750572A (zh) | 一种科技成果启发式评价的自适应方法和装置 | |
| CN105956875A (zh) | 基于大数据与市价匹配的农业科技成果估价方法及系统 | |
| Karimov et al. | Comparing neural style transfer and gradient-based algorithms in brushstroke rendering tasks | |
| Zhao et al. | Model averaging in a multiplicative heteroscedastic model |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| EXSB | Decision made by sipo to initiate substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180529 |