CN110377812A - 自助购物方法、装置、设备及计算机可读存储介质 - Google Patents

自助购物方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN110377812A
CN110377812A CN201910515270.9A CN201910515270A CN110377812A CN 110377812 A CN110377812 A CN 110377812A CN 201910515270 A CN201910515270 A CN 201910515270A CN 110377812 A CN110377812 A CN 110377812A
Authority
CN
China
Prior art keywords
commodity
self
user
query
help shopping
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910515270.9A
Other languages
English (en)
Inventor
彭捷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910515270.9A priority Critical patent/CN110377812A/zh
Publication of CN110377812A publication Critical patent/CN110377812A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • G06Q30/0625Directed, with specific intent or strategy
    • G06Q30/0627Directed, with specific intent or strategy using item specifications
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/0036Checkout procedures
    • G07G1/0045Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及人工智能技术领域,公开了一种自助购物方法,包括以下步骤:接收用户输入的查询语音;对所述查询语音进行语音识别,得到用户查询内容;识别所述用户查询内容对应的查询语义;基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。本发明还公开了一种自助购物装置、设备及计算机可读存储介质。本发明节省了用户在超市中寻找商品的时间,提升了用户使用体验。

Description

自助购物方法、装置、设备及计算机可读存储介质
技术领域
本发明涉及人工智能技术领域,尤其涉及一种自助购物方法、装置、设备及计算机可读存储介质。
背景技术
现在的超市多采用人工收银和人员导购的方式,从而达到为客户提供超市购物的目的。由于以往超市提供的购物方式在购物时存在影响自主性的问题,无法满足现代生活节奏的加快对服务快捷化的要求,同时造成超市方人工成本的浪费,影响了商家服务质量。
虽然现在也有少数的无人超市,但这些无人超市智能化程度低,需要用户自己去货架上寻找,从而降低了购物体验。
发明内容
本发明的主要目的在于提供一种自助购物方法、装置、设备及计算机可读存储介质,旨在解决现有无人超市智能化程度低而存在购物过程耗时的技术问题。
为实现上述目的,本发明提供一种自助购物方法,所述自助购物方法包括以下步骤:
接收用户输入的查询语音;
对所述查询语音进行语音识别,得到用户查询内容;
识别所述用户查询内容对应的查询语义;
基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。
可选地,在所述接收用户输入的查询语音的步骤之前,还包括:
在主界面上显示语音查询功能按钮与字符输入查询按钮;
监测主界面上是否存在所述语音查询功能按钮的触发操作,若存在,则生成录音指令;
所述接收用户输入的查询语音包括:
当检测到录音指令时,接收用户输入的查询语音。
可选地,在所述对所述查询语音进行语音识别,得到用户查询内容的步骤之后,还包括:
输出文字格式的语音识别结果;
若所述语音识别结果存在多个候选项,则提示用户进行选择。
可选地,所述对所述查询语音进行语音识别,得到用户查询内容包括:
对所述查询语音进行分帧,得到多个带时序的语音帧;
按照时序依次提取所述语音帧的声音特征并生成包含声音信息的多维声音特向量;
将所述多维声音特征向量输入预置声学模型进行处理,输出语音帧对应的音素信息;
基于所述音素信息,查找预置字典,输出各音素信息对应的字或词;
按照输出顺序将各音素信息对应的字或词输入预置语言模型进行处理,输出单个字或词相互关联的概率;
将输出的最大概率的字或词拼接为文字格式的用户查询内容并输出。
可选地,所述识别所述用户查询内容对应的查询语义包括:
对所述用户查询内容进行去停用词以及中文分词处理,得到查询关键词;
基于所述查询关键词,检索预置商品查询语义表,获得所述查询关键词对应的查询语义。
可选地,所述商品数据库中包含有:
商品分类表,用于记录商品类别,所述商品类别为按照常规商品分类方式,对所有商品名称进行分类而成;
商品描述表,用于记录商品特征描述,所述商品特征描述为按照商品的特征信息对商品进行描述,所述商品特征描述包括:功能描述、用途描述、品牌描述中的一种或多种;
商品基本信息表,用于记录商品基本信息,所述商品基本信息至少包括:存货量、价格、货架编号;
所述基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息包括:
若所述查询语义为商品名称,则基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
若所述查询语义为商品类名,则基于所述商品类名,检索所述商品分类表,确定所述商品类名对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
若所述查询语义为商品描述,则基于所述商品描述,检索所述商品描述表,确定所述商品描述对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息。
可选地,所述自助购物方法还包括:
在进行商品结算时,基于自助扫码输入的商品条形码信息,统计所有待结算商品的总费用;
当检测到结算请求时,输出结算方式选择提示信息,所述结算方式包括:二维码在线支付、人脸识别在线支付;
基于用户选择的结算方式,对待结算商品进行结算,并输出商品结算处理结果。
进一步地,为实现上述目的,本发明还提供一种自助购物装置,所述自助购物装置包括:
接收模块,用于接收用户输入的查询语音;
语音识别模块,用于对所述查询语音进行语音识别,得到用户查询内容;
语义识别模块,用于识别所述用户查询内容对应的查询语义;
检索模块,用于基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。
可选地,所述自助购物装置还包括:界面显示模块、语音输入监测模块;
所述界面显示模块用于:在主界面上显示语音查询功能按钮与字符输入查询按钮;
所述语音输入监测模块用于:监测主界面上是否存在所述语音查询功能按钮的触发操作,若存在,则生成录音指令;
所述接收模块用于:当检测到录音指令时,接收用户输入的查询语音。
可选地,所述自助购物装置还包括:
输出模块,用于输出文字格式的语音识别结果;
提示模块,用于若所述语音识别结果存在多个候选项,则提示用户进行选择。
可选地,所述语音识别模块具体用于:
对所述查询语音进行分帧,得到多个带时序的语音帧;
按照时序依次提取所述语音帧的声音特征并生成包含声音信息的多维声音特向量;
将所述多维声音特征向量输入预置声学模型进行处理,输出语音帧对应的音素信息;
基于所述音素信息,查找预置字典,输出各音素信息对应的字或词;
按照输出顺序将各音素信息对应的字或词输入预置语言模型进行处理,输出单个字或词相互关联的概率;
将输出的最大概率的字或词拼接为文字格式的用户查询内容并输出。
可选地,所述语义识别模块具体用于:
对所述用户查询内容进行去停用词以及中文分词处理,得到查询关键词;
基于所述查询关键词,检索预置商品查询语义表,获得所述查询关键词对应的查询语义。
可选地,所述商品数据库中包含有:
商品分类表,用于记录商品类别,所述商品类别为按照常规商品分类方式,对所有商品名称进行分类而成;
商品描述表,用于记录商品特征描述,所述商品特征描述为按照商品的特征信息对商品进行描述,所述商品特征描述包括:功能描述、用途描述、品牌描述中的一种或多种;
商品基本信息表,用于记录商品基本信息,所述商品基本信息至少包括:存货量、价格、货架编号;
所述检索模块具体用于:
若所述查询语义为商品名称,则基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
若所述查询语义为商品类名,则基于所述商品类名,检索所述商品分类表,确定所述商品类名对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
若所述查询语义为商品描述,则基于所述商品描述,检索所述商品描述表,确定所述商品描述对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息。
可选地,所述自助购物装置还包括:
扫码模块,用于在进行商品结算时,基于自助扫码输入的商品条形码信息,统计所有待结算商品的总费用;
结算模块,用于当检测到结算请求时,输出结算方式选择提示信息,所述结算方式包括:二维码在线支付、人脸识别在线支付;基于用户选择的结算方式,对待结算商品进行结算,并输出商品结算处理结果。
进一步地,为实现上述目的,本发明还提供一种自助购物设备,所述自助购物设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的自助购物程序,所述自助购物程序被所述处理器执行时实现如上述任一项所述的自助购物方法的步骤。
进一步地,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有自助购物程序,所述自助购物程序被处理器执行时实现如上述任一项所述的自助购物方法的步骤。
本发明提供基于语音识别的商品自助查询方法,通过接收用户输入的查询语音,进而对查询语音进行语音识别,得到用户查询内容,并且进一步识别用户查询内容对应的查询语义;然后再基于查询语义,检索预置商品数据库,并输出与查询语义相匹配的商品信息。基于本发明,用户可以简便快捷地进行商品信息查询,从而快速找到所需商品,为用户查找商品节省了时间,提升了用户使用体验。此外,对于用户不能直接说出名称的商品,用户可以通过口述方式描述商品特征,比如商品的品牌特征、功能特征、类别特征等,本发明会根据用户的口述内容,输出用户查询的所有可能结果,从而方便用户快速获得目标商品。
附图说明
图1为本发明自助购物设备实施例方案涉及的设备硬件运行环境的结构示意图;
图2为本发明自助购物方法第一实施例的流程示意图;
图3为本发明自助购物方法第二实施例的流程示意图;
图4为图2中步骤S120一实施例的细化流程示意图;
图5为图2中步骤S130的细化流程示意图;
图6为本发明自助购物方法第三实施例的流程示意图;
图7为本发明自助购物装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本发明提供一种自助购物设备。
参照图1,图1为本发明自助购物设备实施例方案涉及的设备硬件运行环境的结构示意图。
如图1所示,该自助购物设备可以包括:处理器1001,例如CPU,通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储设备。
本领域技术人员可以理解,图1中示出的自助购物设备的硬件结构并不构成对自助购物设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及自助购物程序。其中,操作系统是管理和控制自助购物设备与软件资源的程序,支持网络通信模块、用户接口模块、自助购物程序以及其他程序或软件的运行;网络通信模块用于管理和控制网络接口1004;用户接口模块用于管理和控制用户接口1003。
在图1所示的自助购物设备硬件结构中,网络接口1004主要用于连接系统后台,与系统后台进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;自助购物设备通过处理器1001调用存储器1005中存储的自助购物程序,并执行以下自助购物方法的各实施例的操作。
基于上述自助购物设备硬件结构,提出本发明自助购物方法的各个实施例。
参照图2,图2为本发明自助购物方法第一实施例的流程示意图。本实施例中,所述自助购物方法包括以下步骤:
步骤S110,接收用户输入的查询语音;
本实施例中,在进行商品查询时,接收用户输入的查询语音。对于用户输入的查询语音的内容以及表现形式不限,用户可以自由表达所要购买或查询的商品,比如“我要买一瓶水”,“我要喝的”,“我要买日常洗漱用品”,“我需要能填肚子的”,“我需要舒肤佳系列的商品”等等。
步骤S120,对所述查询语音进行语音识别,得到用户查询内容;
本实施例中,自助购物设备支持语音识别,用户只需口述即可完成查询。例如,用户说“我要买水”,则自助购物设备先对该语音进行识别,从而确定用户查询内容为商品“水”,然后再告知用户有关商品“水”的相关信息。
可选的,在一实施例中,为便于缩小查询范围,因此进一步输出文字格式的语音识别结果;若所述语音识别结果存在多个候选项,则提示用户进行选择。本可选实施例中,考虑到可能存在同音字词的问题,或者用户发音不标准的问题,因此,若语音识别结果存在多个候选项,则提示用户手动选择,基于半人机交互方式提升商品查询速度。
步骤S130,识别所述用户查询内容对应的查询语义;
本实施例中,考虑到每个人的口语表达方式的不同,因此需要识别用户查询内容对应的查询语义,从而准确识别出用户的查询意图。例如,对于同一种商品,例如瓶装矿泉水,用户的口语表达方式可以是多种形式,比如可以说“我需要买瓶水”,或者说“我要喝的”,或者说“我要止渴的”,或者还可以说“我要一瓶农户山泉”。
本实施例对于获得查询语义的具体识别方式不限。例如,基于人机交互的方式,确定用户查询内容对应的查询语义。比如,用户说“我要喝的”,则自助购物设备显示“矿泉水”、“饮料”、“酒”等选项,用户若选择“矿泉水”,则确定用户查询内容对应的查询语义为“矿泉水”,而若用户选择“饮料”,则继续显示“碳酸饮料”、“果汁饮料”,用户若选择“碳酸饮料”,则确定用户查询内容对应的查询语义为“碳酸饮料”。
此外,还可以是基于用户查询内容中的关键词,确定用户查询内容对应的查询语义。例如,用户说“我要喝的”,识别该查询内容的关键词为“喝的”,则“与喝有关的商品”即为该查询内容对应的查询语义,比如“矿泉水”、“饮料”、“酒”等商品。
步骤S140,基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。
本实施例中,在识别得出用户查询内容对应的查询语义后,基于查询语义检索商品数据库,若商品数据库中存在与查询语义相匹配的商品,则输出该商品的相关信息,比如商品的具体名称、价格、存货量、摆放的货架编号等信息。
本实施例提供基于语音识别的商品自助查询方法,通过接收用户输入的查询语音,进而对查询语音进行语音识别,得到用户查询内容,并且进一步识别用户查询内容对应的查询语义;然后再基于查询语义,检索预置商品数据库,并输出与查询语义相匹配的商品信息。基于本发明,用户可以简便快捷地进行商品信息查询,从而快速找到所需商品,为用户查找商品节省了时间,提升了用户使用体验。此外,对于用户不能直接说出名称的商品,用户可以通过口述方式描述商品特征,比如商品的品牌特征、功能特征、类别特征等,本发明会根据用户的口述内容,输出用户查询的所有可能结果,从而方便用户快速获得目标商品。
参照图3,图3为本发明自助购物方法第二实施例的流程示意图。本实施例中,在上述步骤S110之前,还包括:
步骤S150,在主界面上显示语音查询功能按钮与字符输入查询按钮;
步骤S160,监测主界面上是否存在所述语音查询功能按钮的触发操作,若存在,则生成录音指令;
本实施例中,主界面上显示语音查询功能按钮与字符输入查询按钮。当用户手动点击语音查询功能按钮时,生成录音指令,进而接收用户输入的查询语音;当用户手动点击字符输入查询按钮时,显示字符输入界面与字符输入键盘,进而接收用户输入的查询字符。
本实施例不仅提供语音查询功能,还进一步提供字符输入查询功能。字符输入查询功能是对语音查询功能的补充,例如某些用户不大习惯使用语音查询功能,或者用户的普通话不太标准致使语音识别结果准确性不高,则可以使用字符输入查询功能。
参照图4,图4为图2中步骤S120一实施例的细化流程示意图。本实施例中,上述步骤S120进一步包括:
步骤S1201,对所述查询语音进行分帧,得到多个带时序的语音帧;
为了更有效地提取声音特征,因此还需要对查询语音进行滤波、分帧等音频数据预处理,本实施例的分帧处理就是把声音划分成一小段一小段,每小段称为一帧语音帧,使用移动窗函数来实现分帧处理,得到多个带时序的语音帧。
步骤S1202,按照时序依次提取所述语音帧的声音特征并生成包含声音信息的多维声音特向量;
特征提取是将声音信号从时域转换到频域,从而为声学模型提供合适的输入特征向量。本实施例主要采用线性预测倒谱系数(LPCC)和梅尔倒谱系数(MFCC)算法提取声音特征,进而将每一波形语音帧转变成一个包含声音信息的多维向量。
步骤S1203,将所述多维声音特征向量输入预置声学模型进行处理,输出语音帧对应的音素信息;
声学模型是对声学、语音学、环境变量、说话人性别、口音等差异的知识表示。声学模型通过对语音数据进行训练而得到,声学模型能够根据声学特性计算每一个特征向量在声学特征上的概率得分,也即建立语音的声音特征到音素之间的映射关系。
步骤S1204,基于所述音素信息,查找预置字典,输出各音素信息对应的字或词;
字典是字词对应的音素索引集合,是字词和音素之间的映射,通过查找字典,从而确定各音素信息对应的字或词。
步骤S1205,按照输出顺序将各音素信息对应的字或词输入预置语言模型进行处理,输出单个字或词相互关联的概率;
语言模型表示某一字序列发生的概率,可通过对文本语言数据进行训练得到,语言模型能够根据语言学特性计算声音信号对应词组序列的概率,也即建立文字对应的音素到文字组成的词组序列的映射关系。
步骤S1206,将输出的最大概率的字或词拼接为文字格式的用户查询内容并输出。
在得到查询语音可能对应的每一个字或词组发生的概率后,将最大概率的字或词拼接为文字格式的通话内容并作为语音识别的结果输出。
例如,假设有文字内容为“我要买机器人”的查询语音,通过特征提取,得到以下特征向量[1 2 3 4 5 6....10];将该特征向量输入声学模型进行处理,得到对应的音素,也即[1 2 3 4 5 6....10]—>w o y a o m a i j i q i r n;然后再通过查找字典,得到个音素对应的字,窝:wo;我:wo;要:yao;买:mai;机:ji;器:qi;人:rn;级:ji;忍:rn;最后再将上述输出结果输入语言模型进行处理,得到对应的字或词组序列,如下所示:我:0.0786,要:0.0546,买:0.0646,我要买:0.0898,机器:0.0967,机器人:0.6785;通过概率比较,确定每一个字或词组的最大概率:我要买:0.0898,机器人:0.6785,拼接后的输出内容为“我要买机器人”,完成查询语音的语音识别。
参照图5,图5为图2中步骤S130的细化流程示意图。本实施例中,上述步骤S130进一步包括:
步骤S1301,对所述用户查询内容进行去停用词以及中文分词处理,得到查询关键词;
步骤S1302,基于所述查询关键词,检索预置商品查询语义表,获得所述查询关键词对应的查询语义。
本实施例中,为获得用户查询内容对应的查询语义,先对用户查询内容进行中文分析以及去停用词处理。例如,“请帮我查下矿泉水在哪”,去除停用词“请”、“帮我”,剩下的内容进行中文分词处理后为“查下”、“矿泉水”“在哪”,则查询关键词为“查下”、“矿泉水”“在哪”。
本实施例中预设了商品查询语义表,该表中记录了与商品查询有关的查询语义,比如各种商品类名、具体的商品名称、商品描述(比如功能描述、品牌描述等)。基于提取到查询关键词,检索商品查询语义表,进而获得查询关键词对应的查询语义。
例如,用户说“我要喝的”,识别该查询内容的关键词为“喝的”,则“与喝有关的商品”即为该查询内容对应的查询语义,比如“矿泉水”、“饮料”、“酒”等商品。
本实施例支持口语化模糊检索,用户无需精准知道商品名称也可进行商品查询。
进一步地,在本发明自助购物方法一实施例中,为支持口语化模糊检索,本实施例中,所述商品数据库中包含有:
(1)商品分类表,用于记录商品类别,所述商品类别为按照常规商品分类方式,对所有商品名称进行分类而成;
商品分类表,用于按照常规的商品分类方式,对所有商品名称进行分类,商品类别可以划分为多个层级类别,比如大类别的商品可以进一步划分为多个小类别的商品,比如日常用品可以进一步划分为厨房用品、洗漱用品、家居用品等,而最底层类别下包括多个不同的商品名称,比如厨房用品包括:菜刀、粘板、碗、筷子等。
(2)商品描述表,用于记录商品特征描述,所述商品特征描述为按照商品的特征信息对商品进行描述,所述商品特征描述包括:功能描述、用途描述、品牌描述中的一种或多种;
商品描述表,用于按照商品的功能、用途、品牌等方式对商品进行描述。例如,按照功能划分,比如“喝的”,包括:酒类(啤酒、红酒、白酒)、饮料(碳酸饮料、果汁饮料)、水(矿泉水、纯净水);例如,按照用途划分,比如“办公用的”,包括:笔(铅笔、圆珠笔、钢笔、毛笔)、本子(作业本、笔记本、画画本、练习本、草稿本)、橡皮擦、卷笔刀、订书机等。
(3)商品基本信息表,用于记录商品基本信息,所述商品基本信息至少包括:存货量、价格、货架编号;
商品基本信息表,用于说明无人超市中各商品的基本信息,比如超市中售卖:啤酒、红酒、白酒、碳酸饮料、果汁饮料、烟、打火机、矿泉水、纯净水、作业本、笔记本、铅笔、圆珠笔等商品,则一一列出每一种商品的存货量、价格、摆放位置的货架编号等信息。
本实施例中,在获得用户输入的查询语音对应的查询语义后,具体通过以下方式定位用户需要查询的商品信息,具体实现方式如下:
A、若所述查询语义为商品名称,则基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
B、若所述查询语义为商品类名,则基于所述商品类名,检索所述商品分类表,确定所述商品类名对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
C、若所述查询语义为商品描述,则基于所述商品描述,检索所述商品描述表,确定所述商品描述对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息。
本实施例中,基于用户查询语音对应的查询语义的不同,本实施例从以下几个方面实现商品精确查询:
(1)查询语义为商品名称
本情形下,由于用户直接精确地说出了商品名称,因此可直接使用用户指明的商品名称,检索商品数据库中的商品基本信息表,若商品基本信息表中存在该商品名称及其相关信息,也即超市售卖该商品,则输出该商品名称对应的商品信息,比如存货量、价格、摆放位置的货架编号等信息。
(2)查询语义为商品类名
本情形下,若用户的语音描述比较模糊,比如仅仅说了下商品的所属类别,比如“我要买酒”,通过语义识别,确定该语音对应的查询语义为商品类名“酒”,因此,检索商品数据库中的商品分类表,从而确定该商品类别下的具体商品名称,比如“啤酒、红酒、白酒”;然后基于查询得到的具体商品名称,进一步检索商品基本信息表,若商品基本信息表中存在该商品名称及其相关信息,则输出该商品名称对应的商品信息,比如存货量、价格、摆放位置的货架编号等信息。
(3)查询语义为商品描述
本情形下,若用户的语音描述比较模糊,比如采用的是商品功能或用途描述,比如“我要买喝的”,通过语义识别,确定该语音对应的查询语义为商品描述“喝的”,因此,检索商品数据库中的商品描述表,从而确定该商品描述下的具体商品名称,比如“啤酒、红酒、白酒”;然后基于查询得到的具体商品名称,进一步检索商品基本信息表,若商品基本信息表中存在该商品名称及其相关信息,则输出该商品名称对应的商品信息,比如存货量、价格、摆放位置的货架编号等信息。
参照图6,图6为本发明自助购物方法第三实施例的流程示意图。本实施例中,所述自助购物方法还包括:
步骤S210,在进行商品结算时,基于自助扫码输入的商品条形码信息,统计所有待结算商品的总费用;
步骤S220,当检测到结算请求时,输出结算方式选择提示信息,所述结算方式包括:二维码在线支付、人脸识别在线支付;
步骤S230,基于用户选择的结算方式,对待结算商品进行结算,并输出商品结算处理结果。
本实施例中,用户在拿到需要购买的商品后,在自助购物设备上进行扫码操作,从而将商品条形码录入自助购物设备,以供自助购物设备对商品进行结算处理。
本实施例中,自助购物设备基于用户自助扫码输入的商品条形码信息,统计所有待结算商品的总费用,然后用户手动点击结算按钮,从而发起结算请求。本实施例的自助购物设备提供多种结算方式,具体结算方式可以由用户选择,也可以默认设定,比如通过支付宝、微信、银联等第三方进行二维码在线支付、人脸识别在线支付等。
本发明还提供一种自助购物装置。
参照图7,图7为本发明自助购物装置一实施例的功能模块示意图。本实施例中,所述自助购物装置包括:
接收模块10,用于接收用户输入的查询语音;
语音识别模块20,用于对所述查询语音进行语音识别,得到用户查询内容;
语义识别模块30,用于识别所述用户查询内容对应的查询语义;
检索模块40,用于基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。
本实施例的自助购物装置主要应用于无人超市。而无人超市的应用场景很多,既可以是对外开放而面向所有用户,也可以是仅对内部开放而仅面向特定用户群,比如小区内面向业主的无人超市、企业内面向内部员工的无人超市。基于无人超市应用场景的不同,无人超市对应不同的管理方式。
本实施例的自助购物装置既可以是独立部署,比如部署在自助一体机内,也可以是部署在集成有无人超市管理功能的服务器内,本实施例的自助购物装置还可用于与门禁、摄像头、后台服务器进行通信。
本实施例的自助购物装置主要提供以下自助功能:
A、商品自助查询功能
本功能采用语音识别技术,识别用户所要查询或购买的商品,并显示出用户想要查询或购买商品的价格、库存、货架等信息。
B、商品自助扫码功能
本功能需要用户自助扫描商品的条形码,录入待结算商品的信息。
C、商品自助结算功能
本功能统计待结算商品的价格,并向用户发出收款信息,在线收款方式可以有多种,具体收款方式可以由用户选择,也可以默认设定,比如通过支付宝、微信、银联等方式进行二维码在线支付、人脸识别在线支付等。
基于与上述本发明自助购物方法相同的实施例说明内容,因此本实施例对自助购物装置的实施例内容不做过多赘述。
本实施例提供基于语音识别的商品自助查询方法,通过接收用户输入的查询语音,进而对查询语音进行语音识别,得到用户查询内容,并且进一步识别用户查询内容对应的查询语义;然后再基于查询语义,检索预置商品数据库,并输出与查询语义相匹配的商品信息。基于本发明,用户可以简便快捷地进行商品信息查询,从而快速找到所需商品,为用户查找商品节省了时间,提升了用户使用体验。此外,对于用户不能直接说出名称的商品,用户可以通过口述方式描述商品特征,比如商品的品牌特征、功能特征、类别特征等,本发明会根据用户的口述内容,输出用户查询的所有可能结果,从而方便用户快速获得目标商品。
本发明还提供一种计算机可读存储介质。
本实施例中,所述计算机可读存储介质上存储有自助购物程序,所述自助购物程序被处理器执行时实现如上述任一项实施例中所述的自助购物方法的步骤。其中,自助购物程序被处理器执行时所实现的方法可参照本发明自助购物方法的各个实施例,因此不再过多赘述。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,这些均属于本发明的保护之内。

Claims (10)

1.一种自助购物方法,其特征在于,所述自助购物方法包括以下步骤:
接收用户输入的查询语音;
对所述查询语音进行语音识别,得到用户查询内容;
识别所述用户查询内容对应的查询语义;
基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。
2.如权利要求1所述的自助购物方法,其特征在于,在所述接收用户输入的查询语音的步骤之前,还包括:
在主界面上显示语音查询功能按钮与字符输入查询按钮;
监测主界面上是否存在所述语音查询功能按钮的触发操作,若存在,则生成录音指令;
所述接收用户输入的查询语音包括:
当检测到录音指令时,接收用户输入的查询语音。
3.如权利要求1所述的自助购物方法,其特征在于,在所述对所述查询语音进行语音识别,得到用户查询内容的步骤之后,还包括:
输出文字格式的语音识别结果;
若所述语音识别结果存在多个候选项,则提示用户进行选择。
4.如权利要求1所述的自助购物方法,其特征在于,所述对所述查询语音进行语音识别,得到用户查询内容包括:
对所述查询语音进行分帧,得到多个带时序的语音帧;
按照时序依次提取所述语音帧的声音特征并生成包含声音信息的多维声音特向量;
将所述多维声音特征向量输入预置声学模型进行处理,输出语音帧对应的音素信息;
基于所述音素信息,查找预置字典,输出各音素信息对应的字或词;
按照输出顺序将各音素信息对应的字或词输入预置语言模型进行处理,输出单个字或词相互关联的概率;
将输出的最大概率的字或词拼接为文字格式的用户查询内容并输出。
5.如权利要求1所述的自助购物方法,其特征在于,所述识别所述用户查询内容对应的查询语义包括:
对所述用户查询内容进行去停用词以及中文分词处理,得到查询关键词;
基于所述查询关键词,检索预置商品查询语义表,获得所述查询关键词对应的查询语义。
6.如权利要求1-5中任一项所述的自助购物方法,其特征在于,所述商品数据库中包含有:
商品分类表,用于记录商品类别,所述商品类别为按照常规商品分类方式,对所有商品名称进行分类而成;
商品描述表,用于记录商品特征描述,所述商品特征描述为按照商品的特征信息对商品进行描述,所述商品特征描述包括:功能描述、用途描述、品牌描述中的一种或多种;
商品基本信息表,用于记录商品基本信息,所述商品基本信息至少包括:存货量、价格、货架编号;
所述基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息包括:
若所述查询语义为商品名称,则基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
若所述查询语义为商品类名,则基于所述商品类名,检索所述商品分类表,确定所述商品类名对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息;
若所述查询语义为商品描述,则基于所述商品描述,检索所述商品描述表,确定所述商品描述对应的商品名称;基于所述商品名称,检索所述商品基本信息表,输出所述商品名称对应的商品信息。
7.如权利要求1所述的自助购物方法,其特征在于,所述自助购物方法还包括:
在进行商品结算时,基于自助扫码输入的商品条形码信息,统计所有待结算商品的总费用;
当检测到结算请求时,输出结算方式选择提示信息,所述结算方式包括:二维码在线支付、人脸识别在线支付;
基于用户选择的结算方式,对待结算商品进行结算,并输出商品结算处理结果。
8.一种自助购物装置,其特征在于,所述自助购物装置包括:
接收模块,用于接收用户输入的查询语音;
语音识别模块,用于对所述查询语音进行语音识别,得到用户查询内容;
语义识别模块,用于识别所述用户查询内容对应的查询语义;
检索模块,用于基于所述查询语义,检索预置商品数据库,并输出与所述查询语义相匹配的商品信息。
9.一种自助购物设备,其特征在于,所述自助购物设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的自助购物程序,所述自助购物程序被所述处理器执行时实现如权利要求1-7中任一项所述的自助购物方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有自助购物程序,所述自助购物程序被处理器执行时实现如权利要求1-7中任一项所述的自助购物方法的步骤。
CN201910515270.9A 2019-06-14 2019-06-14 自助购物方法、装置、设备及计算机可读存储介质 Pending CN110377812A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910515270.9A CN110377812A (zh) 2019-06-14 2019-06-14 自助购物方法、装置、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910515270.9A CN110377812A (zh) 2019-06-14 2019-06-14 自助购物方法、装置、设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN110377812A true CN110377812A (zh) 2019-10-25

Family

ID=68250282

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910515270.9A Pending CN110377812A (zh) 2019-06-14 2019-06-14 自助购物方法、装置、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110377812A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111209368A (zh) * 2019-12-23 2020-05-29 秒针信息技术有限公司 信息提示方法和装置、计算机可读的存储介质及电子装置
CN111476641A (zh) * 2020-04-13 2020-07-31 南京掌控网络科技有限公司 一种移动设备上语音自动下单的方法、系统及存储介质
CN111597300A (zh) * 2020-04-03 2020-08-28 厦门快商通科技股份有限公司 基于语音识别的购物车管理方法、系统及移动终端
CN111986595A (zh) * 2020-07-06 2020-11-24 佛山市京木测控科技有限公司 产品信息展示方法及电子设备、存储介质
TWI736069B (zh) * 2019-12-18 2021-08-11 財團法人商業發展研究院 語音輔助識別目標區位的系統及方法
CN113392671A (zh) * 2020-02-26 2021-09-14 上海依图信息技术有限公司 基于顾客动作的商品检索方法、装置及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103903619A (zh) * 2012-12-28 2014-07-02 安徽科大讯飞信息科技股份有限公司 一种提高语音识别准确率的方法及系统
CN107292696A (zh) * 2017-04-27 2017-10-24 深圳虫门科技有限公司 一种汽车智能导购系统以及实现方法
CN107316645A (zh) * 2017-06-01 2017-11-03 北京京东尚科信息技术有限公司 一种语音购物的方法和系统
CN107993134A (zh) * 2018-01-23 2018-05-04 北京知行信科技有限公司 一种基于用户兴趣的智能购物交互方法及系统
CN108170859A (zh) * 2018-01-22 2018-06-15 北京百度网讯科技有限公司 语音查询的方法、装置、存储介质及终端设备
CN108346073A (zh) * 2017-01-23 2018-07-31 北京京东尚科信息技术有限公司 一种语音购物方法和装置
CN109309751A (zh) * 2017-07-28 2019-02-05 腾讯科技(深圳)有限公司 语音记录方法、电子设备及存储介质
CN109817217A (zh) * 2019-01-17 2019-05-28 深圳壹账通智能科技有限公司 基于语音识别的自助贩卖方法、装置、设备及介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103903619A (zh) * 2012-12-28 2014-07-02 安徽科大讯飞信息科技股份有限公司 一种提高语音识别准确率的方法及系统
CN108346073A (zh) * 2017-01-23 2018-07-31 北京京东尚科信息技术有限公司 一种语音购物方法和装置
CN107292696A (zh) * 2017-04-27 2017-10-24 深圳虫门科技有限公司 一种汽车智能导购系统以及实现方法
CN107316645A (zh) * 2017-06-01 2017-11-03 北京京东尚科信息技术有限公司 一种语音购物的方法和系统
CN109309751A (zh) * 2017-07-28 2019-02-05 腾讯科技(深圳)有限公司 语音记录方法、电子设备及存储介质
CN108170859A (zh) * 2018-01-22 2018-06-15 北京百度网讯科技有限公司 语音查询的方法、装置、存储介质及终端设备
CN107993134A (zh) * 2018-01-23 2018-05-04 北京知行信科技有限公司 一种基于用户兴趣的智能购物交互方法及系统
CN109817217A (zh) * 2019-01-17 2019-05-28 深圳壹账通智能科技有限公司 基于语音识别的自助贩卖方法、装置、设备及介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI736069B (zh) * 2019-12-18 2021-08-11 財團法人商業發展研究院 語音輔助識別目標區位的系統及方法
CN111209368A (zh) * 2019-12-23 2020-05-29 秒针信息技术有限公司 信息提示方法和装置、计算机可读的存储介质及电子装置
CN113392671A (zh) * 2020-02-26 2021-09-14 上海依图信息技术有限公司 基于顾客动作的商品检索方法、装置及电子设备
CN111597300A (zh) * 2020-04-03 2020-08-28 厦门快商通科技股份有限公司 基于语音识别的购物车管理方法、系统及移动终端
CN111597300B (zh) * 2020-04-03 2022-08-23 厦门快商通科技股份有限公司 基于语音识别的购物车管理方法、系统及移动终端
CN111476641A (zh) * 2020-04-13 2020-07-31 南京掌控网络科技有限公司 一种移动设备上语音自动下单的方法、系统及存储介质
CN111986595A (zh) * 2020-07-06 2020-11-24 佛山市京木测控科技有限公司 产品信息展示方法及电子设备、存储介质

Similar Documents

Publication Publication Date Title
CN110377812A (zh) 自助购物方法、装置、设备及计算机可读存储介质
US11995698B2 (en) System for virtual agents to help customers and businesses
CN107481720B (zh) 一种显式声纹识别方法及装置
US9105268B2 (en) Method and apparatus for predicting intent in IVR using natural language queries
US20090319272A1 (en) Method and system for voice ordering utilizing product information
US10339452B2 (en) Automated ontology development
US20090326947A1 (en) System and method for spoken topic or criterion recognition in digital media and contextual advertising
CN107292365B (zh) 商品标签的绑定方法、装置、设备及计算机可读存储介质
CN106230689B (zh) 一种语音信息交互的方法、装置及服务器
CN109215643A (zh) 一种交互方法、电子设备及服务器
EP2880565A2 (en) Disambiguating user intent in conversational interaction system for large corpus information retrieval
CN108648750A (zh) 混合模型语音识别
CN105955976A (zh) 一种自动应答系统及方法
CN103309869B (zh) 数据对象的展示关键词推荐方法及系统
CN110489649B (zh) 标签关联内容的方法及装置
US20210073224A1 (en) Query rewrite for low performing queries based on customer behavior
CN111611358A (zh) 信息交互方法、装置、电子设备及存储介质
CN110581927A (zh) 通话内容的处理及提示方法、装置
JP4441782B2 (ja) 情報提示方法及び情報提示装置
CN113505606B (zh) 一种培训信息获取方法、装置、电子设备及存储介质
CN107688600B (zh) 知识点挖掘方法及装置
CN115131108A (zh) 一种电商商品筛选系统
US20030149563A1 (en) User interface for data access and entry
CN114756646A (zh) 一种对话方法、对话装置及智能设备
KR20090039147A (ko) 상품 정보 제공 장치 및 이를 이용한 서비스 방법.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191025

RJ01 Rejection of invention patent application after publication