CN111178980B - 行为识别方法和装置 - Google Patents

Abstract

本发明公开了一种行为识别方法和装置。其中，该方法包括：获取第一音频，其中，第一音频中记录有当前对象的音频信息，当前对象用于服务目标对象，当前对象与目标对象的距离小于第一阈值；获取目标对象的消费记录，其中，消费记录中包括目标对象购买的产品或消费金额；在产品为目标产品的情况下，或者消费金额大于或等于第二阈值的情况下，从第一音频中查找预定词汇；在查找到预定词汇的情况下，确定当前对象有按照规定发放赠品；在未查找到预定词汇的情况下，确定当前对象未按照规定发放赠品。本发明解决了识别赠品发放情况效率低的技术问题。

Description

行为识别方法和装置

技术领域

本发明涉及智能设备领域，具体而言，涉及一种行为识别方法和装置。

背景技术

相关技术中，在顾客购买商品后，通常由附赠赠品的行为。而对于如何监控工作人员有没有按照规定附赠赠品，现有的监督手段是由工作人员之间互相监督。

而若是采用上述方法，则需要工作人员互相监督彼此，从而造成识别工作人员是否发放赠品的效率低。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种行为识别方法和装置，以至少解决识别赠品发放情况效率低的技术问题。

根据本发明实施例的一个方面，提供了一种行为识别方法，包括：获取第一音频，其中，上述第一音频中记录有当前对象的音频信息，上述当前对象用于服务目标对象，上述当前对象与上述目标对象的距离小于第一阈值；获取上述目标对象的消费记录，其中，上述消费记录中包括上述目标对象购买的产品或消费金额；在上述产品为目标产品的情况下，或者上述消费金额大于或等于第二阈值的情况下，从上述第一音频中查找预定词汇；在查找到上述预定词汇的情况下，确定上述当前对象有按照规定发放赠品；在未查找到上述预定词汇的情况下，确定上述当前对象未按照规定发放上述赠品。

作为一种可选的示例，在上述产品为目标产品的情况下，或者上述消费金额大于或等于上述第二阈值的情况下，从上述第一音频中查找上述预定词汇包括：将上述第一音频转换为文字信息；在上述文字信息中查找上述预定词汇。

作为一种可选的示例，上述在上述文字信息中查找上述预定词汇包括：获取上述预定词汇与上述文字信息；将上述文字信息的前N个文字确定为当前文字，执行以下步骤，直到遍历上述文字信息：比对上述当前文字与上述预定词汇；在上述当前文字与上述预定词汇相同的情况下，确定查找到上述预定词汇；在上述当前文字与上述预定词汇不同的情况下，确定未查找到上述预定词汇。

作为一种可选的示例，在未查找到上述预定词汇的情况下，在确定上述当前对象未按照规定发放上述赠品之后，上述方法还包括：为上述当前对象添加一条第一记录，其中，上述第一记录用于指示上述当前对象未按照规定发放上述赠品；在上述第一记录的数量大于第三阈值的情况下，向预定账号发送告警信息。

作为一种可选的示例，在为上述当前对象添加一条第一记录之后，上述方法还包括：获取上述目标对象的第二音频；将上述第二音频存储到与上述当前对象对应的存储位置。

根据本发明实施例的另一方面，还提供了一种行为识别装置，包括：第一获取单元，用于获取第一音频，其中，上述第一音频中记录有当前对象的音频信息，上述当前对象用于服务目标对象，上述当前对象与上述目标对象的距离小于第一阈值；第二获取单元，用于获取上述目标对象的消费记录，其中，上述消费记录中包括上述目标对象购买的产品或消费金额；查找单元，用于在上述产品为目标产品的情况下，或者上述消费金额大于或等于第二阈值的情况下，从上述第一音频中查找预定词汇；第一确定单元，用于在查找到上述预定词汇的情况下，确定上述当前对象有按照规定发放赠品；第二确定单元，用于在未查找到上述预定词汇的情况下，确定上述当前对象未按照规定发放上述赠品。

作为一种可选的示例，上述查找单元包括：转换模块，用于将上述第一音频转换为文字信息；查找模块，用于在上述文字信息中查找上述预定词汇。

作为一种可选的示例，上述查找模块包括：获取子模块，用于获取上述预定词汇与上述文字信息；执行子模块，用于将上述文字信息的前N个文字确定为当前文字，执行以下步骤，直到遍历上述文字信息：比对上述当前文字与上述预定词汇；在上述当前文字与上述预定词汇相同的情况下，确定查找到上述预定词汇；在上述当前文字与上述预定词汇不同的情况下，确定未查找到上述预定词汇。

作为一种可选的示例，上述装置还包括：添加单元，用于在未查找到上述预定词汇的情况下，在确定上述当前对象未按照规定发放上述赠品之后，为上述当前对象添加一条第一记录，其中，上述第一记录用于指示上述当前对象未按照规定发放上述赠品；发送单元，用于在上述第一记录的数量大于第三阈值的情况下，向预定账号发送告警信息。

作为一种可选的示例，上述装置还包括：第三获取单元，用于在为上述当前对象添加一条第一记录之后，获取上述目标对象的第二音频；存储单元，用于将上述第二音频存储到与上述当前对象对应的存储位置。

在本发明实施例中，采用获取第一音频，其中，上述第一音频中记录有当前对象的音频信息，上述当前对象用于服务目标对象，上述当前对象与上述目标对象的距离小于第一阈值；获取上述目标对象的消费记录，其中，上述消费记录中包括上述目标对象购买的产品或消费金额；在上述产品为目标产品的情况下，或者上述消费金额大于或等于第二阈值的情况下，从上述第一音频中查找预定词汇；在查找到上述预定词汇的情况下，确定上述当前对象有按照规定发放赠品；在未查找到上述预定词汇的情况下，确定上述当前对象未按照规定发放上述赠品的方式，从而可以通过识别工作人员的第一音频中是否包括了预定词汇，自动识别出工作人员是否有按照要求发放赠品，提高了识别赠品发放情况的效率，进而解决了识别赠品发放情况效率低的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种可选的行为识别方法的流程示意图；

图2是根据本发明实施例的一种可选的行为识别装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本发明实施例的一个方面，提供了一种行为识别方法，可选地，作为一种可选的实施方式，如图1所示，上述行为识别方法包括：

S102，获取第一音频，其中，第一音频中记录有当前对象的音频信息，当前对象用于服务目标对象，当前对象与目标对象的距离小于第一阈值；

S104，获取目标对象的消费记录，其中，消费记录中包括目标对象购买的产品或消费金额；

S106，在产品为目标产品的情况下，或者消费金额大于或等于第二阈值的情况下，从第一音频中查找预定词汇；

S108，在查找到预定词汇的情况下，确定当前对象有按照规定发放赠品；

S110，在未查找到预定词汇的情况下，确定当前对象未按照规定发放赠品。

可选地，上述行为识别方法可以但不限于应用于可以计算数据的终端上，例如手机、平板电脑、笔记本电脑、PC机等终端上，终端可以通过网络与服务器进行交互，上述网络可以包括但不限于无线网络或有线网络。其中，该无线网络包括：WIFI及其他实现无线通信的网络。上述有线网络可以包括但不限于：广域网、城域网、局域网。上述服务器可以包括但不限于任何可以进行计算的硬件设备。

可选地，本方案可以但不限于应用于服务行业，如售卖实体商品，或者售卖服务的过程中。以售卖实体商品为例，获取工作人员的第一音频，获取工作人员所服务的顾客的消费记录。若是消费记录中，消费金额大于了第二阈值，或者消费记录中顾客购买可目标产品，则需要为顾客发放赠品。此时，对工作人员的第一音频进行识别，若是其中包括了预定词汇，则认为工作人员提出了赠品，有按照规定发放赠品。若是未识别到预定词汇，则认为工作人员未提及赠品，未发放赠品。

可选地，本方案中的第一音频可以为工作人员在服务顾客的过程中的音频记录。顾客与工作人员的距离小于第一阈值。如第一阈值为两米。获取第一音频可以通过收音设备获取。此外，在用户消费后，获取用户的消费记录。消费记录可以由系统根据售出的货物确定。消费记录中至少包括用户的消费金额或者用户的购买的产品或者用户购买的服务。

可选地，在查找预定词汇的过程中，可以先将第一音频转换为文字信息，然后在文字信息中查找预定词汇。

具体查找时，可以先获取文字信息的前N个文字，N为预定词汇的文字数，比对前N个文字与预定词汇是否相同，如均为“化妆品一盒”。则认为第一音频转换的文字中包括了预定词汇。若是前N个文字不包括预定词汇，则获取第2-N+1个文字，并再次比对，直到遍历第一音频转换的文字信息，或者查找到预定词汇。

或者，可选地，比对预定词汇可以为比对第一音频的频谱图像与预定词汇的频谱图像，完成比对。如获取第一音频的频谱图像的前M个采样点的图像，M为预定词汇的频谱图像的采样点个数。比对两者，在两者不同的情况下，获取第一音频的频谱图像的2-M+1个采样点的图像，在进行比对。直到遍历第一音频的频谱图像或者检测都预定词汇的频谱图像。

可选地，无论比对频谱图像还是文字，都可以设置一个相似度，相似度大于预定阈值则认为两者相同。

需要说明的是，本方案中的预定词汇可以为一个或多个。如商品名称，或者“免费发放**”等。

可选地，若是第一音频中不包括预定词汇，则为当前对象添加一条第一记录，其中，第一记录用于指示当前对象未按照规定发放赠品；在第一记录的数量大于第三阈值的情况下，向预定账号发送告警信息。如工作人员多次未发放赠品，则向经理的账号发送告警信息。每一个工作人员的对应存储位置记录有该工作人员方法或者未发放赠品的记录。

在为当前对象添加一条第一记录之后，方法还包括：获取目标对象的第二音频；将第二音频存储到与当前对象对应的存储位置。例如，工作人员服务顾客后，将顾客的第二音频存储到当前的工作人员的对应存储位置。

以下结合一个具体示例说明。

现有方案中，小样等赠品通常在消费者购买正装商品或套装商品后搭配赠送给消费者的。小样和商品的搭配赠送规则由集团制定，工作人员执行。目前，由于小样送给消费者并不会像商品收买一样产生相应的订单，因此很难进行记录和追溯，小样的分发主要依靠工作人员人员的自觉。有时，柜台会指有定人员对工作人员的小样赠送情况进行人工监督和不定时抽查。

为了解决上述问题，本方案提出一种方法。

在消费者结账后，工作人员需与消费者确认商品名称、数量、并展示所购商品包装为全新未开封的，确认无误后方可把商品交给消费者。若有小样赠送，工作人员在此时将小样和所购商品一起交给消费者。所以本方案将提取此时的销售语音信息，进行分析。分析语音信息中是否包括了预定词汇。

建立赠品发放规定信息

根据集团规定，在系统上更新赠品发放规定，信息包括发放条件(如：达到指定金额；购买指定商品；购买指定套餐等)、发放样品信息(如：样品品名、数量)

收集订单付款信息

与消费者确认所购商品及赠品并交给消费者通常在订单结账后。订单付款信息包括，开单工作人员、购买商品信息(品名、数量、规格)、付款时间等。

根据所购商品信息，结合赠品发放规定，系统自动识别需赠送小样信息。

收集工作人员语音信息

预先构建工作人员人员的个体声纹模型，根据订单付款信息，调取指定开单工作人员在付款时间后的语音信息。

识别该语音中，工作人员在与消费者确认商品名称、数量、并展示所购商品包装为全新未开封的时，是否有提到赠小样的信息；若有，则识别所赠小样与系统规定的小样是否一致，若不一致，则判定工作人员存有扣留小样的行为；若未曾提及小样，则判定工作人员存有扣留小样的行为。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

根据本发明实施例的另一个方面，还提供了一种用于实施上述行为识别方法的行为识别装置。如图2所示，该装置包括：

(1)第一获取单元202，用于获取第一音频，其中，第一音频中记录有当前对象的音频信息，当前对象用于服务目标对象，当前对象与目标对象的距离小于第一阈值；

(2)第二获取单元204，用于获取目标对象的消费记录，其中，消费记录中包括目标对象购买的产品或消费金额；

(3)查找单元206，用于在产品为目标产品的情况下，或者消费金额大于或等于第二阈值的情况下，从第一音频中查找预定词汇；

(4)第一确定单元208，用于在查找到预定词汇的情况下，确定当前对象有按照规定发放赠品；

(5)第二确定单元210，用于在未查找到预定词汇的情况下，确定当前对象未按照规定发放赠品。

可选地，本方案可以但不限于应用于服务行业，如售卖实体商品，或者售卖服务的过程中。以售卖实体商品为例，获取工作人员的第一音频，获取工作人员所服务的顾客的消费记录。若是消费记录中，消费金额大于了第二阈值，或者消费记录中顾客购买可目标产品，则需要为顾客发放赠品。此时，对工作人员的第一音频进行识别，若是其中包括了预定词汇，则认为工作人员提出了赠品，有按照规定发放赠品。若是未识别到预定词汇，则认为工作人员未提及赠品，未发放赠品。

可选地，本方案中的第一音频可以为工作人员在服务顾客的过程中的音频记录。顾客与工作人员的距离小于第一阈值。如第一阈值为两米。获取第一音频可以通过收音设备获取。此外，在用户消费后，获取用户的消费记录。消费记录可以由系统根据售出的货物确定。消费记录中至少包括用户的消费金额或者用户的购买的产品或者用户购买的服务。

可选地，在查找预定词汇的过程中，可以先将第一音频转换为文字信息，然后在文字信息中查找预定词汇。

具体查找时，可以先获取文字信息的前N个文字，N为预定词汇的文字数，比对前N个文字与预定词汇是否相同，如均为“化妆品一盒”。则认为第一音频转换的文字中包括了预定词汇。若是前N个文字不包括预定词汇，则获取第2-N+1个文字，并再次比对，直到遍历第一音频转换的文字信息，或者查找到预定词汇。

或者，可选地，比对预定词汇可以为比对第一音频的频谱图像与预定词汇的频谱图像，完成比对。如获取第一音频的频谱图像的前M个采样点的图像，M为预定词汇的频谱图像的采样点个数。比对两者，在两者不同的情况下，获取第一音频的频谱图像的2-M+1个采样点的图像，在进行比对。直到遍历第一音频的频谱图像或者检测都预定词汇的频谱图像。

可选地，无论比对频谱图像还是文字，都可以设置一个相似度，相似度大于预定阈值则认为两者相同。

需要说明的是，本方案中的预定词汇可以为一个或多个。如商品名称，或者“免费发放**”等。

可选地，若是第一音频中不包括预定词汇，则为当前对象添加一条第一记录，其中，第一记录用于指示当前对象未按照规定发放赠品；在第一记录的数量大于第三阈值的情况下，向预定账号发送告警信息。如工作人员多次未发放赠品，则向经理的账号发送告警信息。每一个工作人员的对应存储位置记录有该工作人员方法或者未发放赠品的记录。

在为当前对象添加一条第一记录之后，方法还包括：获取目标对象的第二音频；将第二音频存储到与当前对象对应的存储位置。例如，工作人员服务顾客后，将顾客的第二音频存储到当前的工作人员的对应存储位置。

以下结合一个具体示例说明。

现有方案中，小样等赠品通常在消费者购买正装商品或套装商品后搭配赠送给消费者的。小样和商品的搭配赠送规则由集团制定，工作人员执行。目前，由于小样送给消费者并不会像商品收买一样产生相应的订单，因此很难进行记录和追溯，小样的分发主要依靠工作人员人员的自觉。有时，柜台会指有定人员对工作人员的小样赠送情况进行人工监督和不定时抽查。

为了解决上述问题，本方案提出一种方法。

在消费者结账后，工作人员需与消费者确认商品名称、数量、并展示所购商品包装为全新未开封的，确认无误后方可把商品交给消费者。若有小样赠送，工作人员在此时将小样和所购商品一起交给消费者。所以本方案将提取此时的销售语音信息，进行分析。分析语音信息中是否包括了预定词汇。

建立赠品发放规定信息

根据集团规定，在系统上更新赠品发放规定，信息包括发放条件(如：达到指定金额；购买指定商品；购买指定套餐等)、发放样品信息(如：样品品名、数量)

收集订单付款信息

与消费者确认所购商品及赠品并交给消费者通常在订单结账后。订单付款信息包括，开单工作人员、购买商品信息(品名、数量、规格)、付款时间等。

根据所购商品信息，结合赠品发放规定，系统自动识别需赠送小样信息。

收集工作人员语音信息

预先构建工作人员人员的个体声纹模型，根据订单付款信息，调取指定开单工作人员在付款时间后的语音信息。

识别该语音中，工作人员在与消费者确认商品名称、数量、并展示所购商品包装为全新未开封的时，是否有提到赠小样的信息；若有，则识别所赠小样与系统规定的小样是否一致，若不一致，则判定工作人员存有扣留小样的行为；若未曾提及小样，则判定工作人员存有扣留小样的行为。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (6)

1.一种行为识别方法，其特征在于，包括：

获取第一音频，其中，所述第一音频中记录有当前对象的音频信息，所述当前对象用于服务目标对象，所述当前对象与所述目标对象的距离小于第一阈值；

获取所述目标对象的消费记录，其中，所述消费记录中包括所述目标对象购买的产品或消费金额；

在所述产品为目标产品的情况下，或者所述消费金额大于或等于第二阈值的情况下，将所述第一音频转换为文字信息；

获取预定词汇与所述文字信息；

将所述文字信息的前N个文字确定为当前文字，执行以下步骤，直到遍历所述文字信息：

比对所述当前文字与所述预定词汇；

在所述当前文字与所述预定词汇相同的情况下，确定查找到所述预定词汇；

在所述当前文字与所述预定词汇不同的情况下，确定未查找到所述预定词汇；

在查找到所述预定词汇的情况下，确定所述当前对象有按照规定发放赠品；

在未查找到所述预定词汇的情况下，确定所述当前对象未按照规定发放所述赠品。

2.根据权利要求1所述的方法，其特征在于，在未查找到所述预定词汇的情况下，在确定所述当前对象未按照规定发放所述赠品之后，所述方法还包括：

为所述当前对象添加一条第一记录，其中，所述第一记录用于指示所述当前对象未按照规定发放所述赠品；

在所述第一记录的数量大于第三阈值的情况下，向预定账号发送告警信息。

3.根据权利要求2所述的方法，其特征在于，在为所述当前对象添加一条第一记录之后，所述方法还包括：

获取所述目标对象的第二音频；

将所述第二音频存储到与所述当前对象对应的存储位置。

4.一种行为识别装置，其特征在于，包括：

第一获取单元，用于获取第一音频，其中，所述第一音频中记录有当前对象的音频信息，所述当前对象用于服务目标对象，所述当前对象与所述目标对象的距离小于第一阈值；

第二获取单元，用于获取所述目标对象的消费记录，其中，所述消费记录中包括所述目标对象购买的产品或消费金额；

查找单元，用于在所述产品为目标产品的情况下，或者所述消费金额大于或等于第二阈值的情况下，将所述第一音频转换为文字信息；获取预定词汇与所述文字信息；将所述文字信息的前N个文字确定为当前文字，执行以下步骤，直到遍历所述文字信息：比对所述当前文字与所述预定词汇；在所述当前文字与所述预定词汇相同的情况下，确定查找到所述预定词汇；在所述当前文字与所述预定词汇不同的情况下，确定未查找到所述预定词汇；

第一确定单元，用于在查找到所述预定词汇的情况下，确定所述当前对象有按照规定发放赠品；

第二确定单元，用于在未查找到所述预定词汇的情况下，确定所述当前对象未按照规定发放所述赠品。

5.根据权利要求4所述的装置，其特征在于，所述装置还包括：

添加单元，用于在未查找到所述预定词汇的情况下，在确定所述当前对象未按照规定发放所述赠品之后，为所述当前对象添加一条第一记录，其中，所述第一记录用于指示所述当前对象未按照规定发放所述赠品；

发送单元，用于在所述第一记录的数量大于第三阈值的情况下，向预定账号发送告警信息。

6.根据权利要求5所述的装置，其特征在于，所述装置还包括：

第三获取单元，用于在为所述当前对象添加一条第一记录之后，获取所述目标对象的第二音频；

存储单元，用于将所述第二音频存储到与所述当前对象对应的存储位置。

Images