CN110297975B - 推荐策略的评估方法、装置、电子设备和存储介质 - Google Patents

推荐策略的评估方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN110297975B
CN110297975B CN201910562441.3A CN201910562441A CN110297975B CN 110297975 B CN110297975 B CN 110297975B CN 201910562441 A CN201910562441 A CN 201910562441A CN 110297975 B CN110297975 B CN 110297975B
Authority
CN
China
Prior art keywords
recommendation
information
user
evaluation
recommended content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910562441.3A
Other languages
English (en)
Other versions
CN110297975A (zh
Inventor
赵华腾
赵颂扬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201910562441.3A priority Critical patent/CN110297975B/zh
Publication of CN110297975A publication Critical patent/CN110297975A/zh
Application granted granted Critical
Publication of CN110297975B publication Critical patent/CN110297975B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0637Strategic management or analysis, e.g. setting a goal or target of an organisation; Planning actions based on goals; Analysis or evaluation of effectiveness of goals

Abstract

本发明实施例提供一种推荐策略的评估方法、装置、电子设备和存储介质。该方法包括:获取至少两组推荐信息,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同;显示至少两组推荐信息;接收用户输入的对至少两组推荐信息的评估信息;向服务器发送评估信息,评估信息用于指示服务器根据评估信息,生成至少两组推荐信息对应的推荐策略的评估结果。本申请提供的推荐策略的评估方法引入了真实用户对推荐策略的评估,提高了评估结果的置信度。

Description

推荐策略的评估方法、装置、电子设备和存储介质
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种推荐策略的评估方法、装置、电子设备和存储介质。
背景技术
推荐系统是通过对用户画像进行建模,主动给用户推荐能够满足其兴趣和需求的内容,从而实现个性化推荐的系统。那么为了提高用户对推荐给自己的资源的满意度,就需要对推荐系统使用的不同推荐策略进行评估。
现有技术中,主要根据用户对推荐系统生成的推荐信息的点击次数、点击通过率,来对推荐策略进行评估。例如,点击次数多或点击通过率高的推荐策略为较优策略。但该种方式无法了解到用户侧对于该推荐系统的真实想法和意见,使得评估结果的置信度低。
发明内容
本发明实施例提供一种推荐策略的评估方法、装置、电子设备和存储介质,提高了推荐策略的评估结果的置信度。
第一方面,本发明实施例提供一种推荐策略的评估方法,包括:
获取至少两组推荐信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;
显示所述至少两组推荐信息;
接收所述用户输入的对所述至少两组推荐信息的评估信息;
向服务器发送所述评估信息,以使所述服务器根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果。
第二方面,本发明实施例提供一种推荐策略的评估方法,包括:
接收终端设备发送的对至少两组推荐信息的评估信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;
根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果。
第三方面,本发明实施例提供一种推荐策略的评估装置,包括:
处理模块,用于获取至少两组推荐信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;
显示模块,用于显示所述至少两组推荐信息;
收发模块,用于接收所述用户输入的对所述至少两组推荐信息的评估信息;
所述收发模块,还用于向服务器发送所述评估信息,以使所述服务器根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果。
第四方面,本发明实施例提供一种推荐策略的评估装置,包括:
收发模块,接收终端设备发送的对至少两组推荐信息的评估信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;
处理模块,根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果。
第五方面,本发明实施例提供一种电子设备,包括:
存储器;
处理器;以及
计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行以实现第一方面、第二方面所述的方法。
第六方面,本发明实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行以实现第一方面、第二方面所述的方法。
本发明实施例通过获取至少两组推荐信息,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同;显示至少两组推荐信息;接收用户输入的对至少两组推荐信息的评估信息;向服务器发送评估信息,评估信息用于指示服务器根据评估信息生成至少两组推荐信息对应的推荐策略的评估结果。本发明提供的推荐策略的评估方法引入了真实用户对推荐策略进行分评估,了解到用户侧对于推荐策略的真实想法和意见,提高了评估结果的置信度。
附图说明
图1是本发明实施例的一种应用场景示意图;
图2为本发明实施例提供的推荐策略的评估方法流程图;
图3为本发明实施例提供的一种显示页面的示意图;
图4为本发明实施例提供的评估结果页面的示意图;
图5为本发明另一实施例提供的推荐策略的评估方法流程图;
图6为本发明实施例提供的另一种显示页面的示意图;
图7为本发明实施例提供的另一种显示页面的示意图;
图8为本发明实施例提供的一推荐策略的评估装置的结构示意图;
图9为本发明实施例提供的另一推荐策略的评估装置的结构示意图;
图10为本发明实施例提供的电子设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是本发明实施例的一种应用场景示意图。在该应用场景中,可以包括推荐装置10和推荐策略的评估装置11。如图1所示,推荐装置10与评估装置11之间通信连接。推荐装置10与推荐装置11之间的关系可以理解为C/S架构模式。其中,推荐装置10可以是服务器,服务器中存储有不同用户的画像特征,以及若干的推荐策略和推荐资源。具体的,推荐装置可以是各种类型的推荐装置,例如,资讯推荐装置、商品推荐装置、应用软件推荐装置等。本实施例中的推荐策略的评估装置11可以为终端设备,该终端设备可以但不限于为具有显示功能的电脑、Ipad、智能手机等设备。应理解,下述实施例中以推荐装置10为服务器、推荐策略的评估装置11为终端设备为例进行说明。
本发明实施例提供的推荐策略的评估方法,旨在解决现有技术的如上技术问题。
下面以具体地实施例对本发明的技术方案以及本发明的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本发明的实施例进行描述。
图2为本发明实施例提供的推荐策略的评估方法流程图。本发明实施例针对现有技术的如上技术问题,提供了推荐策略的评估方法,下面从终端设备和服务器交互的角度对推荐策略的评估方法进行说明,该方法具体步骤如下:
步骤201、终端设备获取至少两组推荐信息,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同。
本实施例中的推荐策略可以为推荐算法,采用该推荐算法,以及结合用户信息可以为该用户生成推荐信息。其中,用户信息可以为用户画像,该用户画像可以为根据用户的历史行为数据得到的,本实施例中对如何获取用户画像的方法不做限制,其可以根据现有技术中的方法获取。
可选的,每组推荐信息可以包括至少一条推荐内容,推荐内容可以为新闻、商品、频道、节目或应用软件等。
现有技术中的服务器在为用户推荐信息时,可以根据用户的标识结合特定的推荐策略生成为用户推荐的推荐信息,其中,用户的标识是对用户进行唯一识别的信息,例如可以为用户的账号、名称等。本实施例中模拟服务器为用户生成推荐信息的方式,根据用户的用户信息和推荐策略生成推荐信息。应理解,用户可以为终端设备对应的用户。本实施例中为了比较不同的推荐策略的推荐效果,可以采用不同的推荐策略,针对用户的用户信息生成对应的推荐信息,以实现评估推荐策略的推荐效果。例如,推荐策略的推荐效果可以为用户是否喜欢推荐策略生成的推荐信息。
本实施例中获取了至少两组推荐信息,其中,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同。应理解,每组推荐信息是均是根据终端对应的用户信息和一种推荐策略生成的。
可选的,本实施例中可以将至少两组推荐信息中的其中一组推荐信息作为实验组,剩余的各组推荐信息作为对照组。
示例性的,本实施例中的用户为用户A,需要进行推荐效果评估的推荐策略分别为推荐策略1和推荐策略2。对应的,推荐信息1'可以是根据推荐策略1和用户A的用户信息生成的,推荐信息2'可以是根据推荐策略2和用户A的用户信息生成的。可以将推荐信息1'作为实验组,将推荐信息2'作为对照组。
可选的,本实施例中生成推荐信息的可以为终端设备,也可以为服务器。对应的,终端设备或服务器中存储有不同的推荐策略,其中,推荐策略可以为至少两个。
当终端设备生成推荐信息时,终端设备直接根据至少两个推荐策略和用户的用户信息,生成至少两组推荐信息。
当服务器生成推荐信息时,可选的,服务器可以接收终端设备发送的推荐请求,其中,推荐请求包括:用户的标识。服务器中存储有多个用户对应的用户信息,服务器可以根据用户的标识获取用户的用户信息。在获取用户的用户信息后,服务器可以根据至少两个推荐策略和用户的用户信息生成至少两组推荐信息,且将至少两组推荐信息反馈给终端设备,以使终端设备获取该至少两组推荐信息。
步骤202、终端设备显示至少两组推荐信息。
终端设备在获取至少两组推荐信息后,就会将至少两组推荐信息以与APP(Application,应用程序)端类似或相同的显示效果在终端设备的显示界面上进行显示。
可选的,将至少两组推荐信息进行显示可以为:将至少两组推荐信息在同一显示页面上进行显示。如此设置,可以方便用户对至少两组推荐信息的进行对比评估。
可选的,显示页面包括至少两个展示区域。将至少两组推荐信息在同一显示页面上进行显示可以为:将至少两组推荐信息分别在同一显示页面的至少两个展示区域进行显示。
下面以两个展示区域为例本发明实施例中的显示方式进行说明,需要说明的是,本发明实施例可以不局限于两个展示区域,也可以是三个、四个甚至更多的展示区域。图3为本发明实施例提供的一种显示页面的示意图。如图3所示,显示页面包括第一展示区域x1和第二展示区域x2,则可以将推荐信息n1在第一展示区域x1进行显示,将推荐信息n2在第二展示区域x2进行显示。可以想到的是,也可以将推荐信息n1在第二展示区域x2进行显示,将推荐信息n2在第一展示区域x1进行显示。
应理解,展示区域的数量应当与推荐策略的数量(即与推荐信息的组数量)相同,对于展示区域应当显示哪种推荐策略下的推荐信息,可以根据不同的组合方式进行组合。
可选的,至少两个展示区域按照预设排列规则设置在同一显示页面上。例如,如图3所示,显示页面包括第一展示区域x1和第二展示区域x2,则第一展示区域x1和第二展示区域x2可以按照并排的方式,即左右排列的方式显示在同一页面上,当然,也可以按照上下排列的方式显示在同一页面上。
步骤203、终端设备接收用户输入的对至少两组推荐信息的评估信息。
本实施例中的显示页面上显示有评估信息的输入区域。示例性的,每组推荐信息的评估信息的输入区域可以在每组推荐信息的展示区域中,本实施例中对输入区域的位置、大小和形式不做限制。
可选的,用户可以采用文字方式输入评估信息,也可以采用语音输入的方式输入评估信息。应理解,至少两组推荐信息的评估信息可以为分别对每组推荐信息的评估信息,也可以是对至少两组推荐信息的对比分析信息。本实施例中对用户输入评估信息的方式、类型不做限制。
步骤204、终端设备向服务器发送评估信息,以使服务器根据评估信息得到至少两组推荐信息对应的推荐策略的评估结果。
对应的,服务器接收终端设备发送的评估信息。
如图3所示,本实施例中每组推荐信息中可以包含有多条推荐内容。用户输入的评估信息可以为对每组推荐信息中包含的每条推荐内容的评估信息,也可以为对每组推荐信息的整体的评估信息。
可选的,本实施例中的评估信息包括:对每组推荐信息的整体画风的评价信息和原因说明信息。
步骤205、服务器根据评估信息得到至少两组推荐信息对应的推荐策略的评估结果。
可选的,本实施例中可以将至少两组推荐信息的整体画风的评价信息和原因说明信息作为:至少两组推荐信息对应的推荐策略的评估结果,并将保存该评估结果。
可选的,本实施例中的服务器可以为具有显示功能的设备,在接收到终端设备发送的评估信息后,可以生成评估结果页面,其中,评估结果页面包括至少两组推荐信息的整体画风的评价信息和原因说明信息。
图4为本发明实施例提供的评估结果页面的示意图。如图4所示,序号1和序号2分别代表两个不同的推荐策略,召回状态包括是否成功召回推荐信息,整体画风的评价信息和原因说明信息是:用户输入的对每组推荐信息的整体画风的评价信息以及对二者对比后的详细原因说明信息。
示例性的,用户对图3中所示的推荐信息n1和推荐信息n2的整体画风的评价信息为“n1较好”,原因说明信息为“n1整体内容偏娱乐风格,是我的兴趣点内容,但重复内容较多”。
本实施例中,服务器根据评估结果页面中的每组推荐信息的整体画风的评价信息和原因说明信息,确定至少两个推荐策略中的目标推荐策略,目标推荐策略为:至少两个推荐策略中整体画风的评价排序第一的推荐策略。
示例性的,由于根据推荐信息n1和推荐信息n2的整体画风的评价信息可以确定推荐信息n1的整体画风的评价排序为第一,则可以将上述推荐信息n1对应的推荐策略确定为目标推荐策略。
可选的,本实施例中的每组推荐信息的整体画风的评价信息还可以为评价分数,根据评价分数由高到低的排序,可以将排序第一的推荐信息对应的推荐策略确定为目标推荐策略。
本发明实施例提供额推荐策略的评估方法包括:获取至少两组推荐信息,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同;显示至少两组推荐信息;接收用户输入的对至少两组推荐信息的评估信息;向服务器发送评估信息,评估信息用于指示服务器根据评估信息,生成至少两组推荐信息对应的推荐策略的评估结果。本实施例提供的推荐策略的评估方法引入了真实用户对推荐策略进行分评估,了解到用户侧对于推荐策略的真实想法和意见,提高了评估结果的置信度。进一步的,本实施例中能够模拟真实的推荐装置生成推荐信息过程,达到模拟推荐装置对真实用户进行个性化推荐的效果,使得整个推荐过程更加贴近于APP端的推荐过程。
下面结合图5-图7对本实施例中的终端显示推荐信息的显示页面进行说明。图5为本发明另一实施例提供的推荐策略的评估方法流程图。在上述实施例的基础上,本实施例提供的推荐策略的评估方法中,显示页面上包括:与每组推荐信息中的每条推荐内容对应的第一控件,其中,第一控件用于对对应的推荐内容进行满意度评价。
对应的,本实施例中在将至少两组推荐信息在显示界面上进行显示后,推荐策略的评估方法还可以包括如下步骤:
步骤501、响应于用户对第一控件的触发动作,确定与第一控件的对应的推荐内容。
具体的,第一展示区域和第二展示区域的每组推荐信息中的每条推荐内容均对应设置有第一控件,第一控件的位置可以设置在相应的推荐内容的上方、下方、左方或者右方。本实施例对此不做具体限定。
相应的,用户可以在对第一展示区域和第二展示区域中的每条推荐内容进行满意度的评价。
在一种实现方式中,如图3所示,第一展示区域和第二展示区域中的每条推荐内容的右方均设置有一个第一控件C,如果用户对该条推荐内容满意,则选中该组件C,如果用户对该条推荐信息不满意,则可以不选中该组件C。
在另一种实现方式中,图6为本发明实施例提供的另一种显示页面的示意图。如图6所示,第一展示区域和第二展示区域中的每条推荐内容的下方分别设置有至少两个组件,分别为表示满意的组件C1,表示不满意的组件C2,应理解,第一控件包括组件C1和组件C2。如果用户对该条推荐内容满意,则选中表示满意的组件C1,如果用户对该条推荐内容不满意,则选中表示不满意的组件C2。可选的,还可以在该条推荐内容周围显示一个文字输入框,用于在用户选中了表示不满意的组件C2后,使用户输入不满意的原因说明信息。其中,黑色实心圆点代表选中,空心圆点代表未选中。
可选的,数据库中会预先存储有第一控件的标识信息与每条推荐内容的对应关系。具体的,用户在显示界面上选中表示满意的组件C1后,显示屏幕的处理器会首先根据这一触发动作,获取到该表示满意的组件C1在显示屏幕上的坐标值,进而根据该表示满意的组件C1在显示屏幕上的坐标值就可以确定该表示满意的组件C1的标识信息,再根据预先存储的第一控件的标识信息与每条推荐内容的对应关系,可以得到该表示满意的组件C1对应的推荐内容。
步骤502、记录并保存用户对第一控件对应的推荐内容的满意度评价信息。
可选的,在确定了与该表示满意的组件C1对应的推荐信息后,可以在数据库中记录并保存用户对第一控件对应的推荐内容的满意度评价信息。示例性的,该推荐内容的满意度评价信息为满意。同样的,在确定了与该表示不满意的组件C2对应的推荐内容后,可以在数据库中记录该推荐内容的满意度评价信息为不满意。可选的,还可以记录用户输入的不满意或满意的原因说明信息。
在上述实施例的基础上,本实施例提供的一种推荐策略的评估方法中,显示页面还包括:用于隐藏第一控件的第二控件K2。在将至少两组推荐信息在显示界面上进行显示后,推荐策略的评估方法还可以包括如下步骤:
步骤503、响应于用户对第二控件的触发动作,隐藏第一控件。
应理解,步骤503是与步骤501-502择一选择的方式,即在触发第二控件后,则步骤501-502中对第一控件的操作步骤不执行。
具体的,如图3、图6所示,终端设备在将至少两组推荐信息在显示界面上进行显示时,会默认将所有第一控件都进行显示。可选的,假设用户不想逐条都对每条推荐内容进行评价,则可以在显示屏幕上触发第二控件K2,终端设备在接收到这一触发信号后,会首先计算该触发信号在显示屏幕上的坐标值,进而根据计算得到的第二控件K2的坐标值,和预先存储的控件的标识信息与坐标值的对应关系,确定第二控件K2的标识信息。
可选的,在确定了第二控件K2的标识信息后,会进一步获取当前显示页面上所有的第一控件的标识信息。终端设备在获取到所有第一控件的标识信息后,隐藏所有的第一控件。示例性的,图7为本发明实施例提供的另一种显示页面的示意图。图7相对应于图3,终端设备将显示页面上显示的所有的第一控件隐藏。
在上述实施例的基础上,本实施例提供的一种推荐策略的评估方法中,显示页面包括:隐藏推荐内容中的图像的第三控件。在将至少两组推荐信息在显示界面上进行显示后,推荐策略的评估方法还包括如下步骤:
步骤504、响应于用户对第三控件的触发动作,隐藏推荐内容中的图像,显示推荐内容中的标题。
应理解,步骤404可以与步骤503或步骤501-502之后执行的步骤,也可以为与步骤503或步骤501-502并列执行的步骤。
如图3所示,本实施例中的推荐内容包括:标题和图像。具体的,用户在显示界面上触发第三控件K3,终端设备在接收到这一触发信号后,会首先计算该触发信号在显示屏幕上的坐标值,进而根据计算得到的第三控件K3的坐标值,和预先存储的控件的标识信息与坐标值的对应关系,确定第三控件K3的标识信息。进而隐藏推荐内容中的图像,显示推荐内容中的标题,以便于评价用户可以快速浏览推荐内容,提高评估效率。
在上述实施例的基础上,本实施例提供的一种推荐策略的评估方法中,显示页面包括:用于将位置信息和标题均相同的推荐内容进行隐藏的第四控件。在将至少两组推荐信息在显示界面上进行显示后,推荐策略的评估方法还包括如下步骤:
步骤505、响应于用户对第四控件的触发动作,获取每条推荐内容的标题,以及每条推荐内容在显示页面的位置信息。
应理解,步骤505可以与步骤503或步骤501-502之后执行的步骤,也可以为与步骤503或步骤501-502并列执行的步骤。
如图3所示,假设第一展示区域x1中按照由上至下的顺序排列有第一展示块x11、第二展示块x12和第三展示块x13,第二展示区域x2中按照由上至下的顺序排列有第一展示块x21、第二展示块x22和第三展示块x23。第一展示区域x1中第一展示块x11、第二展示块x12和第三展示块x13,第二展示区域x2中第一展示块x21、第二展示块x22和第三展示块x23分别显示有推荐内容,该推荐内容包括图像。
本实施例中,终端设备在显示至少两组推荐信息后,可以确定每组推荐信息中每条推荐内容的标题,以及每条推荐内容在显示页面的位置信息。对应的,终端设备响应于用户对第四控件的触发动作,获取每条推荐内容的标题,以及每条推荐内容在显示页面的位置信息。
步骤506、将位置信息和标题均相同的推荐内容进行隐藏。
应理解,步骤506可以与步骤503或步骤501-502之后执行的步骤,也可以为与步骤503或步骤501-502并列执行的步骤。
如图3所示,第四控件为K4,在终端设备响应于用户对第四控件K4的触发动作,可以依次比较第一展示区域x1中第一展示块x11与第二展示区域x2中第一展示块x21,第一展示区域x1中第二展示块x12与第二展示区域x2中第二展示块x22,以及第一展示区域x1中第三展示块x13与第二展示区域x2中第三展示块x23中的推荐信息的标题,确定位置信息和标题均相同的推荐内容。
示例性的,图3中所示的第一展示区域x1中第一展示块x11与第二展示区域x2中第一展示块x21具有相同标题,则将第一展示区域x1中第一展示块x11与第二展示区域x2中第一展示块x21的推荐内容进行隐藏。
在上述实施例的基础上,本实施例提供的一种推荐策略的评估方法中,显示页面包括:用于选择推荐内容的类型的第五控件,推荐内容的类型包括如下至少一项:视频、图像、文字或音频。在将至少两组推荐信息在显示界面上进行显示后,推荐策略的评估方法还包括如下步骤:
步骤507、响应于用户对第五控件的触发动作,获取用户通过第五控件选择的推荐内容的类型。
本实施例中第五控件用于使得评估选择推荐内容的类型。例如,第五控件中包括有视频、图像、文字或音频中一项或多项的推荐内容的类型。示例性的,用户选择了图像作为推荐内容的类型,对应的,终端设备可以将图像作为用户通过第五控件选择的推荐内容的类型。
如图3、图6-图7所示,第五控件K5可以包括下拉菜单,下拉菜单中包括推荐内容的类型(图中未示出下拉菜单中具体的推荐内容的类型),用户可以通过在下拉菜单中选择对应的类型,终端设备即可获取用户通过第五控件选择的推荐内容的类型。
步骤508、显示与用户通过第五控件选择的推荐内容的类型相同的推荐内容。
每组推荐信息中推荐内容由用户点击打开后,其中的内容可以包括视频、图像、文字或音频中一项或多项,本实施例中用户通过第五控件选择的推荐内容的类型即为推荐内容中包括的内容的类型。
示例性的,用户选择的推荐内容的类型为视频类,则终端设备显示视频类的推荐内容,提高了用户体验。
应理解,上述步骤501-502、步骤503、步骤504、步骤505-506、步骤507-508没有先后顺序的区分。上述第一控件和第二控件、第三控件、第四控件、第五控件可以单独或组合设置,组合设置如图3、图6-图7所示。其中,当设置第二控件时,需要设置第一控件。
本发明实施例通过对每组推荐信息中的每条推荐内容设置对应的满意度评价的第一控件,可以获取评估人员对每组推荐信息的更为详细的评估信息,还通过设置第二控件,用于隐藏第一控件,可以避免用户必须对每条推荐内容都进行满意度评价造成的用户体验度不高的问题,提高评价效率。进一步的,用户还可以通过第三控件隐藏推荐内容中的图像,显示推荐内容中的标题,以使用户能够快速浏览每组推荐信息,提高评估效率。进一步的,用户还可以通过第四控件隐藏相同的内容,评估具有差异化的推荐内容,提高推荐策略的差异化评估。进一步的,用户还可以通过第五控件选择感兴趣的推荐内容进行评估,进一步能够提高推荐策略的评估效率。
图8为本发明实施例提供的一推荐策略的评估装置的结构示意图。本发明实施例提供的推荐策略的评估装置可以执行推荐策略的评估方法实施例提供的处理流程,如图8所示,推荐策略的评估装置800包括:处理模块801、显示模块802、收发模块803和存储模块804。
处理模块801,用于获取至少两组推荐信息,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同;
显示模块802,用于显示至少两组推荐信息;
收发模块803,用于接收用户输入的对至少两组推荐信息的评估信息;
收发模块803,还用于向服务器发送评估信息,以使服务器根据评估信息得到至少两组推荐信息对应的推荐策略的评估结果。
可选的,处理模块801,具体用于根据至少两个推荐策略和用户的用户信息,生成至少两组推荐信息。
可选的,收发模块803,还用于接收推荐装置反馈的至少两组推荐信息,至少两组推荐信息是推荐装置根据至少两个推荐策略和用户的用户信息生成的。
可选的,收发模块803,还用于向服务器发送推荐请求,以使服务器根据用户的标识获取用户的用户信息,推荐请求包括:用户的标识。
可选的,显示模块802,具体用于将至少两组推荐信息在同一显示页面上进行显示。
显示页面包括:与每组推荐信息中的每条推荐内容对应的第一控件,第一控件用于对对应的推荐内容进行满意度评价。
处理模块801,还用于响应于用户对第一控件的触发动作,确定与第一控件的对应的推荐内容。
存储模块804,用于记录并保存用户对第一控件对应的推荐内容的满意度评价信息。
可选的,显示页面还包括:用于隐藏第一控件的第二控件。
处理模块801,还用于响应于用户对第二控件的触发动作,隐藏第一控件。
可选的,推荐内容包括:标题和图像;显示页面包括:隐藏推荐内容中的图像的第三控件。
处理模块801,还用于响应于用户对第三控件的触发动作,隐藏推荐内容中的图像,显示推荐内容中的标题。
可选的,显示页面包括:用于将位置信息和标题均相同的推荐内容进行隐藏的第四控件。
处理模块801,还用于响应于用户对第四控件的触发动作,获取每条推荐内容的标题,以及每条推荐内容在显示页面的位置信息;将位置信息和标题均相同的推荐内容进行隐藏。
可选的,显示页面包括:用于选择推荐内容的类型的第五控件,推荐内容的类型包括如下至少一项:视频、图像、文字或音频。
处理模块801,还用于响应于用户对第五控件的触发动作,获取用户通过第五控件选择的推荐内容的类型;显示与用户通过第五控件选择的推荐内容的类型相同的推荐内容。
可选的,评估信息包括:对每组推荐信息的整体画风的评价信息和原因说明信息。
图9为本发明实施例提供的另一推荐策略的评估装置的结构示意图。如图9所示,推荐策略的评估装置900包括:收发模块901、处理模块902。
收发模块901,用于接收终端设备发送的对至少两组推荐信息的评估信息,每组推荐信息是根据推荐策略和用户的用户信息生成的,每组推荐信息对应的推荐策略不同。
处理模块902,用于根据评估信息得到至少两组推荐信息对应的推荐策略的评估结果。
可选的,处理模块902,还用于根据至少两个推荐策略和用户的用户信息,生成至少两组推荐信息。
收发模块901,还用于向终端设备发送至少两组推荐信息。
可选的,收发模块901,还用于接收终端设备发送的推荐请求;推荐请求包括:用户的标识;根据用户的标识获取用户的用户信息。
可选的,评估信息包括:对每组推荐信息的整体画风的评价信息和原因说明信息。
处理模块902,还用于生成评估结果页面,评估结果页面包括至少两组推荐信息的整体画风的评价信息和原因说明信息;根据评估结果页面中的每组推荐信息的整体画风的评价信息和原因说明信息,确定至少两个推荐策略中的目标推荐策略,目标推荐策略为:至少两个推荐策略中整体画风的评价排序第一的推荐策略。
图8和图9所示实施例的推荐策略的评估装置可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
图10为本发明实施例提供的电子设备的结构示意图。该电子设备具体可以是上述图8或图9中的推荐策略的评估装置。本发明实施例提供的电子设备可以执行推荐策略的评估方法实施例提供的处理流程,如图10所示,电子设备100包括:存储器101、处理器102、计算机程序和通讯接口103;其中,计算机程序存储在存储器101中,并被配置为由处理器102执行上述方法实施例的技术方案。
图10所示实施例的电子设备可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
另外,本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行以实现上述实施例所述的推荐策略的评估方法。
在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
上述以软件功能模块的形式实现的集成的模块,可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (18)

1.一种推荐策略的评估方法,其特征在于,包括:
获取至少两组推荐信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;
将所述至少两组推荐信息在同一显示页面上进行显示;
接收所述用户输入的对所述至少两组推荐信息的评估信息;
向服务器发送所述评估信息,以使所述服务器根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果;
所述显示页面包括:用于将位置信息和标题均相同的推荐内容进行隐藏的第四控件;所述方法还包括:
响应于所述用户对所述第四控件的触发动作,获取每条所述推荐内容的标题,以及每条所述推荐内容在所述显示页面的位置信息;
将位置信息和标题均相同的推荐内容进行隐藏。
2.根据权利要求1所述的方法,其特征在于,所述获取至少两组推荐信息,包括:
根据至少两个推荐策略和所述用户的用户信息,生成所述至少两组推荐信息;或者,
接收所述服务器反馈的所述至少两组推荐信息,所述至少两组推荐信息是所述服务器根据至少两个推荐策略和所述用户的用户信息生成的。
3.根据权利要求2所述的方法,其特征在于,所述接收所述服务器反馈的所述至少两组推荐信息之前,还包括:
向所述服务器发送推荐请求,以使所述服务器根据所述用户的标识获取所述用户的用户信息,所述推荐请求包括:所述用户的标识。
4.根据权利要求1所述的方法,其特征在于,所述显示页面包括:与每组所述推荐信息中的每条推荐内容对应的第一控件,所述第一控件用于对对应的推荐内容进行满意度评价;所述方法还包括:
响应于所述用户对所述第一控件的触发动作,确定与所述第一控件的对应的推荐内容;
记录并保存所述用户对所述第一控件对应的推荐内容的满意度评价信息。
5.根据权利要求4所述的方法,其特征在于,所述显示页面还包括:用于隐藏所述第一控件的第二控件;所述方法还包括:
响应于所述用户对所述第二控件的触发动作,隐藏所述第一控件。
6.根据权利要求4所述的方法,其特征在于,所述推荐内容包括:标题和图像;所述显示页面包括:隐藏所述推荐内容中的图像的第三控件;所述方法还包括:
响应于所述用户对所述第三控件的触发动作,隐藏所述推荐内容中的图像,显示所述推荐内容中的标题。
7.根据权利要求4所述的方法,其特征在于,所述显示页面包括:用于选择推荐内容的类型的第五控件,所述推荐内容的类型包括如下至少一项:视频、图像、文字或音频;所述方法还包括:
响应于所述用户对所述第五控件的触发动作,获取所述用户通过所述第五控件选择的推荐内容的类型;
显示与所述用户通过所述第五控件选择的推荐内容的类型相同的推荐内容。
8.根据权利要求1-7任一项所述的方法,其特征在于,所述评估信息包括:对每组所述推荐信息的整体画风的评价信息和原因说明信息。
9.一种推荐策略的评估方法,其特征在于,包括:
接收终端设备发送的对至少两组推荐信息的评估信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;所述终端设备将所述至少两组推荐信息在同一显示页面上进行显示;所述显示页面包括:用于将位置信息和标题均相同的推荐内容进行隐藏的第四控件;
根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果。
10.根据权利要求9所述的方法,其特征在于,所述接收终端设备发送的对所述至少两组推荐信息的评估信息之前,还包括:
根据至少两个推荐策略和所述用户的用户信息,生成所述至少两组推荐信息;
向所述终端设备发送所述至少两组推荐信息。
11.根据权利要求10所述的方法,其特征在于,所述根据至少两个推荐策略和所述用户的用户信息,生成所述至少两组推荐信息之前,还包括:
接收所述终端设备发送的推荐请求;所述推荐请求包括:所述用户的标识;
根据所述用户的标识获取所述用户的用户信息。
12.根据权利要求10或11所述的方法,其特征在于,所述评估信息包括:对每组所述推荐信息的整体画风的评价信息和原因说明信息;所述根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果,包括:
生成评估结果页面,所述评估结果页面包括所述至少两组推荐信息的整体画风的评价信息和原因说明信息;
根据所述评估结果页面中的每组所述推荐信息的整体画风的评价信息和原因说明信息,确定所述至少两个推荐策略中的目标推荐策略,所述目标推荐策略为:所述至少两个推荐策略中整体画风的评价排序第一的推荐策略。
13.一种推荐策略的评估装置,其特征在于,包括:
处理模块,用于获取至少两组推荐信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;
显示模块,用于将所述至少两组推荐信息在同一显示页面上进行显示;
收发模块,用于接收用户输入的对所述至少两组推荐信息的评估信息;
所述收发模块,还用于向服务器发送所述评估信息,所述评估信息用于指示所述服务器根据所述评估信息生成所述至少两组推荐信息对应的推荐策略的评估结果并根据所述评估结果确定目标推荐策略;
所述显示页面包括:用于将位置信息和标题均相同的推荐内容进行隐藏的第四控件;
所述处理模块,还用于:
响应于所述用户对所述第四控件的触发动作,获取每条所述推荐内容的标题,以及每条所述推荐内容在所述显示页面的位置信息;
将位置信息和标题均相同的推荐内容进行隐藏。
14.一种推荐策略的评估装置,其特征在于,包括:
收发模块,接收终端设备发送的对至少两组推荐信息的评估信息,每组所述推荐信息是根据推荐策略和用户的用户信息生成的,每组所述推荐信息对应的推荐策略不同;所述终端设备将所述至少两组推荐信息在同一显示页面上进行显示;所述显示页面包括:用于将位置信息和标题均相同的推荐内容进行隐藏的第四控件;
处理模块,根据所述评估信息得到所述至少两组推荐信息对应的推荐策略的评估结果。
15.一种电子设备,其特征在于,包括:存储器、处理器、以及计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行以实现如权利要求1-8中任一所述的方法。
16.一种电子设备,其特征在于,包括:存储器、处理器、以及计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行以实现如权利要求9-12中任一所述的方法。
17.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-8任一项所述的方法。
18.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求9-12任一项所述的方法。
CN201910562441.3A 2019-06-26 2019-06-26 推荐策略的评估方法、装置、电子设备和存储介质 Active CN110297975B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910562441.3A CN110297975B (zh) 2019-06-26 2019-06-26 推荐策略的评估方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910562441.3A CN110297975B (zh) 2019-06-26 2019-06-26 推荐策略的评估方法、装置、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN110297975A CN110297975A (zh) 2019-10-01
CN110297975B true CN110297975B (zh) 2022-05-03

Family

ID=68029059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910562441.3A Active CN110297975B (zh) 2019-06-26 2019-06-26 推荐策略的评估方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN110297975B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110995529B (zh) * 2019-11-14 2021-09-21 广州方硅信息技术有限公司 推荐系统的配置数据测试方法、装置及电子设备
CN111291269A (zh) * 2020-02-21 2020-06-16 广州欢网科技有限责任公司 信息推荐方法、装置及控制器和信息平台
CN112711709B (zh) * 2021-01-04 2023-07-07 拉扎斯网络科技(上海)有限公司 资源信息页面的呈现方法及装置
CN112925978A (zh) * 2021-02-26 2021-06-08 北京百度网讯科技有限公司 一种推荐系统评测方法、装置、电子设备和存储介质
CN113312554B (zh) * 2021-06-15 2023-11-03 北京百度网讯科技有限公司 用于评价推荐系统的方法及装置、电子设备和介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857895A (zh) * 2011-06-30 2013-01-02 中国移动通信集团辽宁有限公司 资费处理方法、资费处理器
CN104298682A (zh) * 2013-07-18 2015-01-21 广州华久信息科技有限公司 一种基于人脸表情图像的信息推荐效果的评价方法及手机
CN104978257A (zh) * 2015-07-17 2015-10-14 北京奇虎科技有限公司 计算设备弹性评分方法及装置
CN105512183A (zh) * 2015-11-24 2016-04-20 中国科学院重庆绿色智能技术研究院 一种基于用户自主选择的个性化推荐方法和系统
CN106488267A (zh) * 2016-11-21 2017-03-08 武汉斗鱼网络科技有限公司 一种直播间推荐策略的评估方法、用户设备和服务器系统
CN107391692A (zh) * 2017-07-26 2017-11-24 腾讯科技(北京)有限公司 一种推荐效果的评估方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7966225B2 (en) * 2007-03-30 2011-06-21 Amazon Technologies, Inc. Method, system, and medium for cluster-based categorization and presentation of item recommendations
US20170359437A1 (en) * 2016-06-09 2017-12-14 Linkedin Corporation Generating job recommendations based on job postings with similar positions
CN106604044A (zh) * 2016-11-21 2017-04-26 武汉斗鱼网络科技有限公司 一种直播间推荐策略的评估方法、用户设备和服务器系统
CN108427774A (zh) * 2017-11-23 2018-08-21 国网技术学院 一种用于内容推荐的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857895A (zh) * 2011-06-30 2013-01-02 中国移动通信集团辽宁有限公司 资费处理方法、资费处理器
CN104298682A (zh) * 2013-07-18 2015-01-21 广州华久信息科技有限公司 一种基于人脸表情图像的信息推荐效果的评价方法及手机
CN104978257A (zh) * 2015-07-17 2015-10-14 北京奇虎科技有限公司 计算设备弹性评分方法及装置
CN105512183A (zh) * 2015-11-24 2016-04-20 中国科学院重庆绿色智能技术研究院 一种基于用户自主选择的个性化推荐方法和系统
CN106488267A (zh) * 2016-11-21 2017-03-08 武汉斗鱼网络科技有限公司 一种直播间推荐策略的评估方法、用户设备和服务器系统
CN107391692A (zh) * 2017-07-26 2017-11-24 腾讯科技(北京)有限公司 一种推荐效果的评估方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
推荐系统的评测方法及指标;wangyuquan;《https://blog.csdn.net/wangyuquanliuli/article/details/36684817?utm_source=blogxgwz8》;20140703;正文第1页 *

Also Published As

Publication number Publication date
CN110297975A (zh) 2019-10-01

Similar Documents

Publication Publication Date Title
CN110297975B (zh) 推荐策略的评估方法、装置、电子设备和存储介质
CN109168047B (zh) 视频推荐方法、装置、服务器及存储介质
US9325754B2 (en) Information processing device and information processing method
US11388561B2 (en) Providing a summary of media content to a communication device
CN112822560B (zh) 虚拟礼物赠送方法、系统、计算机设备及存储介质
CN111209417A (zh) 一种信息展示方法、服务器、终端及存储介质
CN113382301A (zh) 视频的处理方法、存储介质和处理器
CN111581521A (zh) 群组成员的推荐方法、装置、服务器、存储介质及系统
CN112269917A (zh) 一种媒体资源展示方法及装置、设备、系统、存储介质
CN114595016B (zh) 评论信息展示、评论信息生成方法、装置及电子设备
CN104954824A (zh) 一种用于进行视频设置的方法、设备与系统
CN104581224A (zh) 切换播放内容的方法、装置及终端
CN112785418B (zh) 信贷风险建模方法、装置、设备及计算机可读存储介质
CN113515336B (zh) 直播间加入方法、创建方法、装置、设备及存储介质
CN114491093A (zh) 多媒体资源推荐、对象表征网络的生成方法及装置
CN111125501B (zh) 用于处理信息的方法和装置
CN109309875B (zh) 一种在智能电视上展示用户行为特征模型的方法
CN108305097B (zh) 一种数据处理方法、设备及客户端
CN113688334A (zh) 一种内容展示方法、装置和计算机可读存储介质
JP6905133B1 (ja) 情報処理装置、情報処理方法及びプログラム
CN114938458B (zh) 对象信息展示方法、装置、电子设备及存储介质
KR102630438B1 (ko) 컨텐츠에 대한 리딩 정보 제공 방법 및 장치
JP6871470B1 (ja) 情報処理装置、情報処理方法及びプログラム
CN113194323B (zh) 信息交互方法、多媒体信息互动方法以及装置
US20240020907A1 (en) User authentication and automatic capture of training data

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant