CN111858861B - 一种基于绘本的问答交互方法及电子设备 - Google Patents

一种基于绘本的问答交互方法及电子设备 Download PDF

Info

Publication number
CN111858861B
CN111858861B CN201910349961.6A CN201910349961A CN111858861B CN 111858861 B CN111858861 B CN 111858861B CN 201910349961 A CN201910349961 A CN 201910349961A CN 111858861 B CN111858861 B CN 111858861B
Authority
CN
China
Prior art keywords
question
template
asked
entity
library
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910349961.6A
Other languages
English (en)
Other versions
CN111858861A (zh
Inventor
李荣军
郭文峰
娄旭芳
黄雪妍
董明杰
刘祖齐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201910349961.6A priority Critical patent/CN111858861B/zh
Priority to PCT/CN2020/086872 priority patent/WO2020221142A1/zh
Publication of CN111858861A publication Critical patent/CN111858861A/zh
Application granted granted Critical
Publication of CN111858861B publication Critical patent/CN111858861B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • G06F16/3329Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/279Recognition of textual entities
    • G06F40/289Phrasal analysis, e.g. finite state techniques or chunking
    • G06F40/295Named entity recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了人工智能领域中关于人机交互的一种基于绘本的问答交互方法及电子设备,在电子设备阅读绘本的过程中智能地与用户进行互动。该问答交互方法为:电子设备加载与目标绘本相关的数据库;接收用户提出的问题后,基于数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合确定待回答答案,并向用户输出。这样,电子设备可以灵活自行确定答案,并不需要机械地预设好问题和答案,用户可以不需要按照预设的问题进行提问,可以灵活提问,电子设备也可以回答更多的问题,从而可以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高阅读绘本有效性。

Description

一种基于绘本的问答交互方法及电子设备
技术领域
本申请涉及人工智能领域,尤其涉及一种基于绘本的问答交互方法及电子设备。
背景技术
人工智能(artificial intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个分支,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式作出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。人工智能领域的研究包括机器人,自然语言处理,计算机视觉,决策与推理,人机交互,推荐与搜索, AI基础理论等。
目前,人工智能广泛应用于具有阅读绘本的功能的电子设备,例如智能音箱、智能机器人、智能学习机等等。例如,电子设备在阅读绘本的过程中,会根据预设的问题与答案向儿童提问。
但是,目前的电子设备是机械地根据预设好的问题和答案对向用户提出问题,向用户提出的问题的顺序是预设好的,答案也是预设好的,并且只能向儿童提问不能回答儿童的问题,互动性大打折扣,不能达到替代父母讲故事的效果。
因此,目前亟需一种可以灵活实现与用户进行问答交互的方法和电子设备,特别是在电子设备阅读绘本的过程中能够智能地与用户(例如儿童)进行问答交互。
发明内容
本申请提供一种基于绘本的问答交互方法及电子设备,在电子设备阅读绘本的过程中能够智能地与用户进行互动。
第一方面,本申请提供了一种基于绘本的问答交互方法,该方法包括:电子设备加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应,所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体;所述电子设备接收所述用户提出的问题;所述电子设备对所述用户提出的问题进行分词处理得到分词词串,所述分词词串为多个关键词文本序列;然后所述电子设备根据所述分词词串和所述字词集合得到泛化后的问题,所述泛化后的问题为多个泛化词文本序列;所述电子设备从所述泛化后的问题中提取出所述用户提出的问题所对应的实体名称,所述用户提出的问题所对应的实体名称为所述泛化后的问题中被泛化成实体的关键词;所述电子设备根据所述泛化后的问题与所述问题模板库中问题模板的文本相似度,从所述问题模板库中获取被提问问题模板;所述电子设备根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数;所述电子设备根据所述被提问调用函数和所述用户提出的问题所对应的实体名称,从所述实体属性库中获取所述用户提出的问题所对应的实体名称对应的实体属性;最后所述电子设备根据所述被提问调用函数从所述答案模板库中获取待回答答案模板,所述待回答答案模板为所述答案模板库中与所述被提问调用函数对应的答案模板,基于所述待回答答案模板将所述用户提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性生成待回答答案,并向所述用户输出所述待回答答案。
通过上述方法,电子设备可以根据用户的问题基于与目标绘本相关的数据库灵活自行确定答案,并不需要机械地预设好问题和答案,用户可以不需要按照预设的问题进行提问,可以灵活提问,电子设备也可以回答更多的问题,从而可以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高阅读绘本有效性。
在一个可能的设计中,所述被提问调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型的匹配程度最高。这样,可以准确地确定所述被提问调用函数,以使后续准确确定待回答答案。
在一个可能的设计中,所述电子设备根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
通过上述方法,所述电子设备可以使更新的实体属性库更加符合用户需求,使人机交互更具针对性,使阅读更加深入。
在一个可能的设计中,在所述电子设备加载与所述目标绘本相关的数据库之前,所述电子设备通过摄像头采集所述用户展示的绘本的图像;所述电子设备通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
通过上述方法,所述电子设备灵活且准确地获得所述目标绘本,以使后续电子设备可以准确地获取到与所述目标绘本相关的数据库,进入后续的与用户的问答交互过程。
在一个可能的设计中,当所述电子设备包含显示屏时,所述电子设备向所述用户输出所述待回答答案时,还可以通过所述显示屏显示所述待回答答案。
通过上述方法,可以使所述电子设备更灵活地向用户输出答案,可以在语音回答用户的同时在显示屏上显示答案,使电子设备输出答案更直观,使用户更容易理解,提高用户的接受度。
在一个可能的设计中,当所述电子设备还包含可活动部件时,所述电子设备向所述用户输出所述待回答答案时,所述电子设备还可以控制所述可活动部件执行输出所述待回答答案的动作。
通过上述方法,可以使所述电子设备更灵活地向用户输出答案,可以在语音回答用户的同时通过执行动作指示答案,使电子设备输出答案更具多样化,提高用户的接收度。
第二方面,本申请提供了一种基于绘本的问答交互方法,该方法包括:电子设备加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库和调用函数库,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位;所述电子设备根据问题模板信息从所述问题模板库中获取待提问问题模板,所述问题模板信息为转移概率集合或问题模板类型,所述转移概率集合包括历史问题模板与所述问题模板库中其他问题模板之间的转移概率,所述历史问题模板为所述电子设备在生成上一次向用户提出的问题的过程中获取的问题模板,所述问题模板类型与所述用户的年龄相关;所述电子设备根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数;所述电子设备根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性;基于所述待提问问题模板,所述电子设备将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性生成待提问问题;最后所述电子设备向所述用户输出所述待提问问题。
通过上述方法,所述电子设备可以根据与目标绘本相关的数据库自行生成需要提问的问题,并不需要预设好问题,不用机械地按照预设好的问题向用户提问,从而可以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高阅读绘本有效性。
在一个可能的设计中,所述数据库还包括答案模板库,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应;所述电子设备从所述待提问问题中提取所述待提问问题所对应的实体名称和/或所述待提问问题所对应的实体属性;然后,所述电子设备根据所述待提问调用函数和所述待提问问题所对应的实体名称,从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性,或者,所述电子设备根据所述待提问调用函数和所述待提问问题所对应的实体属性,从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称;最后所述电子设备根据所述待提问调用函数从所述答案模板库中获取待确定答案模板,所述待确定答案模板为所述答案模板库中与所述待提问调用函数对应的答案模板,基于所述待确定答案模板,所述电子设备将待确定答案关键词生成待确定答案,所述待确定答案关键词为以下任一项:所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体名称和所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体属性、所述待提问问题所对应的实体属性和所述待提问问题所对应的实体属性对应的实体名称。
通过上述方法,所述电子设备可以根据与目标绘本相关的数据库自行生成待提问问题的答案,并不需要机械地预设好问题答案对,可以使在绘本阅读过程中电子设备提问及用户回答更加灵活,从而可以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高阅读绘本有效性。
在一个可能的设计中,所述电子设备接收所述用户针对所述待提问问题的回答,将所述用户针对所述待提问问题的回答与所述待确定答案进行对比分析以得到所述用户的回答是否正确的判断结果,根据所述判断结果向用户做出相应的操作。
通过上述方法,所述电子设备可以准确地确定用户的回答是否正确,并向用户做出相应的操作以直接或间接地提示用户的回答是否正确,可以提升用户对回答结果的接受度。
在一个可能的设计中,所述待提问调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型的匹配程度最高。这样可以准确地确定所述待提问调用函数,以使后续准确确定待确定答案。
在一个可能的设计中,所述问题模板信息为所述转移概率集合时,所述电子设备根据所述问题模板信息从所述问题模板库中获取待提问问题模板,具体方法可以为:所述电子设备根据预先确定的随机取值从所述转移概率集合中确定目标转移概率;所述电子设备根据所述目标转移概率从所述问题模板库中获取所述待提问问题模板。
通过上述方法,可以使所述电子设备提问更具多样性,避免用户感到枯燥,提高用户对绘本阅读的兴趣。
在一个可能的设计中,所述问题模板信息为所述问题模板类型时,所述电子设备根据所述问题模板信息从所述问题模板库中获取待提问问题模板,具体方法可以为:所述电子设备根据所述用户的年龄以及年龄与问题模板类型的对应关系确定目标问题模板类型;所述对应关系指示用户的年龄与以下至少一个问题模板类型对应:空间、细节、社会、色彩、数字、文字、自然;所述电子设备从所述问题模板库中获取符合所述目标问题模板类型的问题模板作为所述待提问问题模板。
通过上述方法,可以选择更适合用户的认知能力的问题模板,使后续提问更具针对性,使用户的阅读更加有效。
在一个可能的设计中,所述电子设备根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
通过上述方法,所述电子设备可以使更新的实体属性库更加符合用户需求,使人机交互更具针对性,使阅读更加深入。
在一个可能的设计中,在所述电子设备加载与所述目标绘本相关的数据库之前,所述电子设备通过摄像头采集所述用户展示的绘本的图像;所述电子设备通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
通过上述方法,所述电子设备灵活且准确地获得所述目标绘本,以使后续电子设备可以准确地获取到与所述目标绘本相关的数据库,进入后续的与用户的问答交互过程。
第三方面,本申请实施例还提供了一种电子设备,该电子设备具有实现上述第一方面方法实例中电子设备行为的功能。所述功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。
在一个可能的设计中,所述电子设备的结构中包括处理单元、输入单元和输出单元,这些单元可以执行上述第一方面方法示例中的相应功能,具体参见方法示例中的详细描述,此处不做赘述。
在一种可能的设计中,所述电子设备的结构中包括处理器和通信单元,还可以包括存储器。所述通信单元用于与用户进行交互;所述处理器被配置为支持所述电子设备执行上述第一方面方法中相应的功能。所述存储器与所述处理器耦合,其保存所述电子设备必要的程序指令和数据。
在一种可能的设计中,所述电子设备中包括相互连接的处理器与存储器,所述处理器用于读取并执行所述存储器中存储的程序指令,执行上述第一方面中任一可能的设计中所提及的方法。
第四方面,本申请实施例还提供了一种电子设备,该电子设备具有实现上述第二方面方法实例中电子设备行为的功能。所述功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。
在一个可能的设计中,所述电子设备的结构中包括处理单元和输出单元,还可以包括输入单元,这些单元可以执行上述第二方面方法示例中的相应功能,具体参见方法示例中的详细描述,此处不做赘述。
在一种可能的设计中,所述电子设备的结构中包括处理器和通信单元,还可以包括存储器。所述通信单元用于与用户进行交互;所述处理器被配置为支持所述电子设备执行上述第二方面方法中相应的功能。所述存储器与所述处理器耦合,其保存所述电子设备必要的程序指令和数据。
在一种可能的设计中,所述电子设备中包括相互连接的处理器与存储器,所述处理器用于读取并执行所述存储器中存储的程序指令,执行上述第二方面中任一可能的设计中所提及的方法。
第五方面,本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机可执行指令,所述计算机可执行指令在被所述计算机调用时用于使所述计算机执行上述第一方面或第二方面中任一可能的设计中所提及的方法。
第六方面,本申请实施例还提供了一种包含指令的计算机程序产品,当其在电子设备上运行时,使得所述电子设备执行上述第一方面或第二方面中任一可能的设计中所提及的方法。
第七方面,本申请实施例还提供了一种电子设备,所述电子设备可以为芯片,所述芯片与存储器相连,用于读取并执行所述存储器中存储的程序指令,以实现上述第一方面或第二方面中任一可能的设计中所提及的方法。
附图说明
图1为本申请提供的一种人工智能主体框架示意图;
图2为本申请提供的一种应用场景的示意图;
图3为本申请提供的一种电子设备的结构示意图;
图4为本申请提供的一种基于绘本的问答交互方法的流程图;
图5为本申请提供的另一种基于绘本的问答交互方法的流程图;
图6为本申请提供的一种问题模板之间转移概率的示意图;
图7为本申请提供的一种更新实体属性库的流程图;
图8为本申请提供的另一种更新实体属性库的流程图;
图9为本申请提供的一种识别指示绘本中位置的示意图;
图10为本申请提供的一种问答交互过程示意图;
图11为本申请提供的另一种问答交互过程示意图;
图12为本申请提供的一种儿童的意图示意图;
图13为本申请提供的一种绘本的示意图;
图14为本申请提供的一种询问购买商品的方法流程图;
图15为本申请提供的一种电子设备的结构示意图;
图16为本申请提供的一种电子设备的结构图。
具体实施方式
下面将结合附图对本申请作进一步地详细描述。
本申请实施例提供一种基于绘本的问答交互方法及电子设备,用以在电子设备阅读绘本的过程中能够智能地与用户进行互动。其中,本申请所述方法和电子设备基于同一发明构思,由于方法及电子设备解决问题的原理相似,因此电子设备与方法的实施可以相互参见,重复之处不再赘述。
图1示出了一种人工智能主体框架示意图,该主体框架描述了人工智能系统总体工作流程,适用于通用的人工智能领域需求。
下面从“智能信息链”(水平轴)和“IT价值链”(垂直轴)两个维度对上述人工智能主题框架进行阐述。
“智能信息链”反映从数据的获取到处理的一列过程。举例来说,可以是智能信息感知、智能信息表示与形成、智能推理、智能决策、智能执行与输出的一般过程。在这个过程中,数据经历了“数据—信息—知识—智慧”的凝练过程。“IT价值链”从人智能的底层基础设施、信息(提供和处理技术实现)到系统的产业生态过程,反映人工智能为信息技术产业带来的价值。
(1)基础设施:基础设施为人工智能系统提供计算能力支持,实现与外部世界的沟通,并通过基础平台实现支撑。通过传感器与外部沟通;计算能力由智能芯片(CPU、NPU、GPU、ASIC、FPGA等硬件加速芯片)提供;基础平台包括分布式计算框架及网络等相关的平台保障和支持,可以包括云存储和计算、互联互通网络等。举例来说,传感器和外部沟通获取数据,这些数据提供给基础平台提供的分布式计算系统中的智能芯片进行计算。
(2)数据:基础设施的上一层的数据用于表示人工智能领域的数据来源。数据涉及到图形、图像、语音、文本,还涉及到传统设备的物联网数据,包括已有系统的业务数据以及力、位移、液位、温度、湿度等感知数据。
(3)数据处理:数据处理通常包括数据训练,机器学习,深度学习,搜索,推理,决策等方式。其中,机器学习和深度学习可以对数据进行符号化和形式化的智能信息建模、抽取、预处理、训练等。推理是指在计算机或智能系统中,模拟人类的智能推理方式,依据推理控制策略,利用形式化的信息进行机器思维和求解问题的过程,典型的功能是搜索与匹配。决策是指智能信息经过推理后进行决策的过程,通常提供分类、排序、预测等功能。
(4)通用能力:对数据经过上面提到的数据处理后,进一步基于数据处理的结果可以形成一些通用的能力,比如可以是算法或者一个通用系统,例如,翻译,文本的分析,计算机视觉的处理,语音识别,图像的识别等等。
(5)智能产品及行业应用:智能产品及行业应用指人工智能系统在各领域的产品和应用,是对人工智能整体解决方案的封装,将智能信息决策产品化、实现落地应用,其应用领域主要包括:智能制造、智能交通、智能家居、智能医疗、智能安防、自动驾驶,平安城市,智能终端等。
人工智能在很多领域都有着广泛的应用,例如人机问答交互等领域。本申请提供的基于绘本的问答交互方法,属于人工智能领域。
本申请实施例提供的基于绘本的问答交互方法,应用于绘本问答系统。应理解,问答为一问一答,这种问答通常包含两种:一种是人问机器答,一种是机器问人答。而本申请实施例提供的基于绘本的问答交互方法,一般是发生在机器为儿童(即用户)阅读绘本的过程中发生的儿童和机器之间的问答交互。
图2示出了本申请实施例提供的基于绘本的问答交互方法适用的一种可能应用场景,所述应用场景中可以包括用户和电子设备。其中:
在本申请实施例中,用户一般指需要听绘本阅读的儿童,因此,在本申请实施例中仅以用户为儿童为例进行说明。所述电子设备可以为具有输出语音功能的实体设备,在具体的实施方式中,所述电子设备可以为智能终端,例如图2所示的智能手机、智能终端等;所述电子设备还可以为图2所示的穿戴式终端或者机器人等。当然所述电子设备不仅仅限于图2中所示的示例,还可以为其他电子设备,例如笔记本电脑、平板电脑、车载电脑、个人数字助理(personal digital assistant,PDA)、智能手表、个人计算机((personalcomputer, PC)、电视机等等。当然所述电子设备不限于上述列举的设备,本申请对此不作限定。
所述电子设备至少具有接收声音、语音,以及输出声音、语音的功能。
一种可选的方式中,所述电子设备除上述功能外,还具有声音或语音分析、语义分析、语音合成等功能,若电子设备可以具备数据存储与数据处理的能力,在该应用场景中只存在用户和所述电子设备即可以完成就绘本的问答交互过程。
在另一种可选的实施方式中,若电子设备不具备数据存储和数据处理能力时,所述电子设备可以通过网络与服务器连接,由服务器完成数据的存储与处理,如图2中所示。
当然,在所述电子设备具备数据存储与数据处理的能力时,为了减少所述电子设备的能耗,所述电子设备同样可以通过网络与服务器连接,由服务器完成数据的存储与处理,本申请对此不作限定。
可选的,所述电子设备除了上述功能外,还可以包括摄像头,可以用于拍摄绘本,以实现绘本的阅读,或者拍摄儿童的图像,用于后续的图像分析等等。
当然所述电子设备在是机器人或者其他具有可活动部件的设备的情况下,所述电子设备还可以通过肢体或者可活动部件与儿童进行更灵活地交互,例如拥抱,指示等等。
需要说明的是,图2示出的应用场景示意图还可包括其他设备,在此不再示出。
由于本申请实施例提供的基于绘本的问答交互方法适用于电子设备,下面对所述电子设备进行简单介绍。图3示出了与本实施例相关的电子设备的部分结构框图。参阅图3所示,所述电子设备300可以包括:通信单元310、电源320、处理器330、存储器340、输入单元350、输出单元360、音频电路370等部件。本领域技术人员可以理解,图3中示出的电子设备的结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图3对电子设备300的各个构成部件进行具体的介绍:
所述通信单元310可以提供语音或数据的通信能力,可以提供有线或无线通信的接口。可选的,所述通信单元310可以包括射频(radio frequency,RF)收发元件、全球定位系统 (global positioning system,GPS)收发元件(例如图3所示的RF电路311)、无线保真(wireless fidelity,WiFi)元件(例如图3所示的WiFi模块312)、其他元件等等中的部分或者全部;所述通信单元310还可以是软件和硬件(例如,天线、调制/解调器、编/解码器、模拟/数字处理电路等)的结合。
其中,所述RF电路311可用于收发信息或通话过程中,数据的接收和发送。特别地,所述RF电路311在接收到基站的下行数据后,发送给所述处理器330处理;另外,将待发送的上行数据发送给基站。通常,所述RF电路311包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(low noise amplifier,LNA)、双工器等。此外,所述RF 电路311还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(global system of mobile communication,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址(code divisionmultiple access,CDMA)、宽带码分多址(wideband code division multiple access,WCDMA)、长期演进(long term evolution,LTE)、电子邮件、短消息服务(short messagingservice,SMS) 等。
所述音频电路370、所述扬声器371,所述麦克风372可提供用户与所述电子设备300 之间的音频接口。所述音频电路370可将接收到的音频数据转换后的电信号,传输到所述扬声器371,由所述扬声器371转换为声音信号输出;另一方面,所述麦克风372将收集的声音信号转换为电信号,由所述音频电路370接收后转换为音频数据,再将音频数据输出至所述RF电路310以发送给比如另一电子设备,或者将音频数据输出至所述存储器340以便进一步处理。
WiFi属于短距离无线传输技术,所述电子设备300通过所述WiFi模块312可以连接接入点(access point,AP),从而实现数据网络的访问。所述WiFi模块312可用于与其他设备进行通信过程中,数据的接收和发送。
所述存储器340可用于存储软件程序以及模块。所述处理器330通过运行存储在所述存储器340的软件程序以及模块,从而执行所述电子设备300的各种功能应用以及数据处理。可选的,所述存储器340可以主要包括存储程序区和存储数据区,其中,所述存储程序区可存储操作系统、各种应用程序等;存储数据区可存储根据所述电子设备300的使用所创建的数据等。具体可选的,所述处理器340还可以存储所述处理器330和其他模块上所需的静态数据(例如图像等)和规则等等。例如,在本申请实施例中,所述存储器340 可以存储绘本内容以及与绘本相关的数据库等。此外,所述存储器340可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件等。
需要说明的是,上述存储器340的功能可以在如图3所示的电子设备300中体现,还可以在服务器(例如云服务器)等中实现,这里仅以作为电子设备300的一部分示例性说明,但并不作为对存储器的限定。
所述输入单元350可用于接收输入的数字、声音或字符信息,以及产生与所述电子设备300的用户设置以及功能控制有关的键信号输入。例如,在本身请实施例中所述输入单元350可以接收输入儿童的语音。具体地,所述输入单元350可以包括触控面板351以及其他输入设备352。
其中,所述触控面板351,也可以称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板351上或在触控面板351附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,所述触控面板351可以包括触摸检测装置和触摸控制器两个部分。其中,所述触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给所述触摸控制器;所述触摸控制器从所述触摸检测装置上接收触摸信息,并将它转换成触点坐标,再传送给所述处理器330,并能接收所述处理器330发来的命令并加以执行。例如,所述用户在所述触控面板351上用手触摸所述显示面板3611上显示的绘本目录时,所述触摸检测装置检测到此次触摸带来的这个信号,然后将该信号传送给所述触摸控制器,所述触摸控制器再将这个信号转换成坐标发送给所述处理器330,所述处理器330根据该坐标和该信号的类型(触摸)确定对该绘本目录所执行的操作(选择绘本目录中的一个绘本),然后所述处理器330将指示对选择的绘本进行阅读。
此外,所述触控面板351可以采用电阻式、电容式、红外线以及表面声波等多种类型实现。
可选的,所述其他输入设备352可以但不限于包括物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
所述输出单元360可以用于输出用于用户交互或提供给用户的各种信息。可选的,所述输出单元360可以包括显示单元361,还可以包括震动马达(可用于提供震动反馈)等等。
其中,所述显示单元361可用于显示由用户输入的信息、提供给用户的信息以及所述电子设备300的各种菜单,所述显示单元361即为所述电子设备300的显示系统,用于呈现界面,实现人机交互。例如,所述输入单元350接收到用户的需要人机交互的指令时,将所述指令传输给所述处理器330,然后所述处理器330根据所述指令通过所述显示单元 361显示绘本(具体可以通过显示面板3611显示所述绘本),从而使用户看到绘本,进而可以实现人机交互。
所述显示单元361可以包括显示面板3611,可选的,所述显示面板3611可以采用液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light-emittingdiode,OLED) 等形式来配置。进一步地,所述触控面板351可覆盖所述显示面板3611,当所述触控面板 351检测到在其上或附近的触摸操作后,传送给所述处理器330以确定触摸事件的类型,随后所述处理器330根据触摸事件的类型在所述显示面板3611上提供相应的视觉输出。例如,当所述触控面板351检测用户在其上点击选择了一个绘本后,传送给所述处理器330,所述处理器330确定触摸事件的类型为点击,在所述显示面板3611上显示被选择后对应的绘本内容,比如被选择的绘本中的图画等等,达到绘本显示的目的。
虽然在图3中,所述触控面板351与所述显示面板3611是作为两个独立的部件来实现所述电子设备300的输入和输入功能,但是在某些实施例中,可以将所述触控面板351与所述显示面板3611集成而实现所述电子设备300的输入和输出功能。
所述处理器330是所述电子设备300的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在所述存储器340内的软件程序和/或模块,以及调用存储在所述存储器340内的数据,执行所述电子设备300的各种功能和处理数据,从而实现基于所述电子设备300的多种业务。可选的,所述处理器330可包括一个或多个处理单元;具体的,所述处理器330可集成应用处理器和调制解调处理器,其中,所述应用处理器主要处理操作系统、用户界面和应用程序等,所述调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到所述处理器330中。例如,在本申请中,所述处理器330中可以包括显示驱动单元,当所述处理器330生成绘本之后,可以通过所述显示驱动单元控制所述显示面板3611呈现所述绘本内容。又例如,所述存储器340 中存储了显示驱动程序,所述处理器330可以调用所述存储器340中的驱动程序控制所述显示面板3611呈现绘本内容。
所述电子设备300还包括给各个部件供电的所述电源320(比如电池),可选的,所述电源320可以通过电源管理系统与所述处理器330逻辑相连,从而通过所述电源管理系统实现管理充电、放电、以及功耗等功能。
需要说明的是,尽管图3中未示出,所述电子设备300还可以包括摄像头、蓝牙模块、传感器等,在此不再赘述。
本申请实施例提供的基于绘本的问答交互方法中,主要包括两种交互过程:儿童向电子设备提问,电子设备回答儿童的问题;以及,电子设备主动向儿童提问,儿童回答电子设备的问题,电子设备判断儿童的回答是否正确。当然,还有上述两种过程中儿童和电子设备之间的其他语音交互。具体的在上述问答交互过程中,均需要进行数据处理和数据存储。本实施例中涉及到的存储的数据主要是绘本相关的一个数据库,具体的所述数据库可以包括实体属性库,语法库、字词集合和调用函数库。其中,进一步地,所述语法库中还可以包括问题模板库和答案模板库。示例性的,所述实体属性库用于存储绘本内容相关的多个实体名称以及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,其中,实体是指现实世界中客观存在的并可以相互区分的对象或事物,具体的,实体往往指某类事物的集合,可以是具体的人事物,也可以是抽象的概念、联系等;所述问题模板库用于存储用于生成问题的句式模板,也即所述问题模板库中包含至少一个问题模板,每一个问题模板可以包括多个槽位;所述调用函数库用于存储根据问题获取答案的调用函数,为每一个问题模板设置函数与参数,由函数限定从数据库提取该问题模板的答案所对应的路径和规则。所述问题模板库中的每一个问题模板可以对应所述调用函数库中的一个或多个调用函数;所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应;所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体。所述数据库需要预先建立好,预存在所述电子设备中,由所述电子设备进行数据处理,或者预存在与所述电子设备连接的服务器中,由所述服务器辅助进行数据处理。下面简单介绍所述数据库的预先建立方法:
例如,所述问题模板库的建立过程可以如下:
a1、从数据提供机构等渠道收集问题样例,提取关键字词,组成精简的问题样例。
以绘本《母鸡萝丝去散步》为例,收集到的问题样可以为“母鸡是什么颜色的?”,“萝丝什么颜色?”,“母鸡是黄色的?”,“这只母鸡是哪种颜色的呀?”等等。
a2、根据问题样例,构建问题模板。
具体的,将表示相同意思的字词放在同一个集合中,对每个集合进行命名;例如,从上述a1示出的问题样例中提取的关键词中,“母鸡”,“萝丝”属于同类词,将这些同类词放在同一个集合中,可以对该集合命名为“实体(Entity)”;“什么”,“哪种”所在的集合可以命名为“普通词(What)”;“颜色”,“红色”,“黄色”等所在的集合可以命名为“颜色(Color)”(其中,颜色是一种具体的实体属性)。其中具体的,Entity、What、Color等可以被称为是泛化词。可以把指示多个关键词与泛化词之间的对应关系的字词集合存储在数据库中。例如,字词集合可以如表1所示:
表1
泛化词 关键词
Entity 母鸡、萝丝、母鸡萝丝
What 什么、哪种
Color 颜色、红色、黄色、蓝色
然后,利用字词集合中泛化词代替问题样例中具体的字词,得到泛化后的问题样例,即泛化后的问题。其中,泛化是指由具体的、个别的扩大为一般的,例如,母鸡泛化为Entity。
示例性的,上述问题样例泛化后,得到的问题模板可以为(Entity)[是][What](Color),其他的问题模板如(Entity)[在][Where]等等。建立好的问题模板库中的问题模板如表2所示:
表2
问题模板1 (Entity)[是][What](Color)
问题模板2 (Entity)[在][Where]
其中,所述问题模板由必选词语集合名、必选词语、选填词语集合名、选填词语组合而成,必选词语集合名或必选词语填入()中,选填词语集合名或选填词语填入[]中,其中 ()、[]中的内容都可以叫做问题模板包括的槽位。
例如,所述调用函数库的建立过程可以如下:
为每一个问题模板设置一个调用函数。其中,所述调用函数可以包含函数与参数,其中函数限定从实体属性库提取该问题模板的答案所对应的路径和规则,也即函数表示的函数含义,包括提取答案的表名,表中需要提取的字段名等。由函数来表达用户的意图。参数对应问题模板的输出,为函数提供限制条件。例如,上述问题模板1对应的调用函数可以为:
getColor(Entity,What,Color):获取指定实体的颜色。
isExist(Entity,What):判断否存在查询实体。
isFact(Entity,Color):判断实体颜色是否和事实相符。
示例性的,所述问题模板1对应的调用函数可以如表3所示:
表3
Figure BDA0002043615360000121
例如,答案模板库的建立过程即为每一个调用函数设置一个答案模板。例如,每个调用函数对应的答案模板可以如表4所示:
表4
调用函数(函数+参数) 答案模板
1、getColor(Entity,What,Color) Entity是Color的
2、isExist(Entity,What) 有Entity
3、isFact(Entity,Color) Entity是Color的
基于建立的上述数据库中的内容,就可以实现儿童和电子设备之间的问答交互过程中的数据处理,从而实现人机交互。下面以具体的示例介绍本申请实施例提供的基于绘本的问答交互方法。
实施例一:儿童向电子设备提问,电子设备回答的具体方法流程。其中,所述电子设备可以是图2中示出的或者未示出的能实现本申请实施例提供的基于绘本的问答交互方法的任一种设备,所述电子设备应用于图3所示的电子设备。参阅图4所示,该方法具体流程可以包括:
步骤401:电子设备加载与目标绘本相关的数据库。
其中,所述数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应,所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体。
应理解,所述目标绘本为需要为儿童阅读的绘本。
示例性的,在所述电子设备加载与所述目标绘本相关的数据库之前,所述电子设备基于儿童的指令确定所述目标绘本,具体的,所述电子设备确定所述目标绘本的方法可能有多种:
在一种实施方式中,所述电子设备向儿童询问儿童想要听的绘本,例如所述电子设备向儿童问“我们读个故事好不好?”,儿童回答“好,我要听母鸡萝丝”,所述电子设备接收到用户的回答后,根据语义分析和匹配确定所述目标绘本为《母鸡萝丝去散步》。
可选的,当所述电子设备不能进行数据处理时,所述电子设备将接收到的儿童的回答发送给服务器,由所述服务器进行语义分析和匹配,然后确定所述目标绘本后,将确定的结果通知所述电子设备,然后所述电子设备根据所述确定的结果得知所述目标绘本为《母鸡萝丝去散步》。
在另一种实施方式中,当所述电子设备具有显示触摸屏时,例如手机,具有显示触摸屏的机器人等时,所述显示触摸屏上可以显示绘本目录,即显示多个绘本供儿童选择,根据儿童点击选择的绘本来确定所述目标绘本。例如,儿童在所述显示触摸屏上点击了《母鸡萝丝去散步》,所述电子设备即确定所述目标绘本为《母鸡萝丝去散步》。
在另一种实施方式中,当所述电子设备具有摄像头时,例如所述电子设备是手机,具有显示触摸屏的机器人等时,所述电子设备可以通过所述摄像头采集所述儿童展示的绘本的图像,通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
可选的,当所述电子设备不能进行数据处理时,所述电子设备将所述摄像头采集的绘本的图像发送给服务器,由所述服务器通过图像分析技术对采集到的绘本的图像进行分析以,然后确定所述目标绘本后,将确定的结果通知所述电子设备,然后所述电子设备根据所述确定的结果得知所述目标绘本。
当然,所述电子设备确定所述目标绘本的方式还有除上述方式之外的多种方式,此处不再一一列举。
在以下的描述中,均以所述目标绘本为《母鸡萝丝去散步》为例进行说明。
在具体实施时,当数据库存储于所述电子设备中时,所述电子设备可以直接从所述电子设备的存储器或其他模块中加载与所述目标绘本相关的数据库;当所述数据库存储于服务器中时,所述电子设备需要从所述服务器中加载与所述目标绘本相关的数据库。
其中,所述电子设备获取的数据库中,包括所述实体属性库。例如,当所述目标绘本为《母鸡萝丝去散步》时,所述电子设备从本地或者从服务器加载的所述实体属性库,可以如表5所示:
表5
实体(Entity) 实体属性(Color)
母鸡 红色
小鸟 黄色
狐狸 棕黄色
…… ……
其中,表5中实体的实体名称可以为母鸡、小鸟、狐狸……,然后各个实体名称相对应的实体属性为红色、黄色、棕黄色……。
在一种实施方式中,所述电子设备加载的与所述目标绘本相关的数据库中包括的所述问题模板库和所述调用函数库,可以如表6所示:
表6
Figure BDA0002043615360000141
步骤402:所述电子设备接收所述儿童提出的问题。
其中,在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到的所述儿童提出的问题时,均默认为所述儿童是基于所述目标绘本提出的,也即所述儿童提出的问题均被认为是与所述目标绘本相关的。
具体的,所述电子设备可以通过输入单元获取到儿童提出的问题后,向所述电子设备的处理器传输所述儿童提出的问题,以使所述处理器分析所述儿童提出的问题;或者所述电子设备的所述处理器将所述儿童提出的问题传输给服务器,使所述服务器分析所述儿童提出问题。
例如,儿童通过所述电子设备的麦克风向所述电子设备输入问题“母鸡是什么颜色的?”。
步骤403:所述电子设备对所述儿童提出的问题进行分词处理得到分词词串,所述分词词串为多个关键词文本序列。
具体的,所述电子设备对所述儿童提出问题进行分词处理,将所述儿童提出的问题分成“母鸡”“是”“什么”“颜色”“的”5个词语,例如可以得到分词词串“母鸡是什么颜色的”。
步骤404:所述电子设备根据所述分词词串和所述字词集合得到泛化后的问题,所述泛化后的问题为多个泛化词文本序列。
具体的,所述电子设备对所述分词词串问题基于所述字词集合进行泛化。
首先,所述电子设备将所述分词词串中的关键词通过该目标绘本对应的问题模板库构建过程中得到的所述字词集合(例如表1)进行词语匹配。其中“母鸡”在字词集合中有对应的关键词是“母鸡”,“什么”在字词集合中有对应的关键词“什么”,“颜色”在字词集合中有对应的关键词是“颜色”。例如,表7所示的标注出来的关键词:
表7
实体:Entity 母鸡、萝丝、母鸡萝丝、狐狸、钉耙
属性:Color 颜色、红色、黄色、蓝色
普通词:What 什么、哪种
然后,所述电子设备根据所述字词集合确定所述分词词串中各个关键词对应的泛化词。例如,“母鸡”对应的泛化词为“Entity”,“什么”对应的泛化词是“What”,“颜色”对应的泛化词是“Color”。
通过上述方法,所述电子设备得到所述泛化后的问题即为“Entity是WhatColor”。
步骤405:所述电子设备从所述泛化后的问题中提取出所述儿童提出的问题所对应的实体名称,所述儿童提出的问题所对应的实体名称为所述泛化后的问题中被泛化成实体的关键词。
例如,从步骤404中泛化后的问题中提取出所述儿童提出的问题所对应的实体名称为“母鸡”。
步骤406:所述电子设备根据所述泛化后的问题与所述问题模板库中问题模板的文本相似度,从所述问题模板库中获取被提问问题模板。
在一种可选的实施方式中,所述电子设备可以基于编辑距离最小的方法,根据泛化后的问题从所述问题模板库中获取所述被提问问题模板。其中,所述编辑距离最小的方法为:将所述泛化后的问题去修改成一个问题模板时,需要改动的次数最少的问题模板,即为所述被提问问题模板。
当然除上述方法外,所述电子设备还可以采用其他方式从所述问题模板库中获取所述被提问问题模板,例如根据所述泛化后的问题中的关键词去匹配所述问题模板库中的问题模板,匹配率最高的问题模板作为所述被提问问题模板。
其中,上述方法均是利用泛化后的问题与所述问题模板库中问题模板的文本相似度实现的。
通过上述方法,确定泛化后的问题“Entity是What Color”对应的被提问问题模板为 (Entity)[是][What](Color)。
步骤407:所述电子设备根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数。
其中,所述被提问调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型的匹配程度最高。
在一种可选的实施方式中,当所述调用函数库中包含一个所述被提问问题模板对应的调用函数时,所述电子设备直接将这一个调用函数作为所述被提问调用函数。这里应理解这一个调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型匹配程度最高。
在另一种可选的实施方式中,当所述调用函数库中包含多个所述被提问问题模板对应的调用函数时,所述电子设备根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数,具体方法可以为:所述电子设备从所述调用函数库中获取参数的数量和类型与所述被提问问题模板中的槽位的数量和类型匹配程度最高的调用函数,则确定了所述被提问问题模板对应的所述被提问调用函数。
其中,一个调用函数的参数的数量和类型与所述被提问问题模板中的槽位的数量和类型匹配程度最高,具体是指该调用函数和所述被提问问题模板中相同类型的参数与槽位的数量最多。
例如,调用函数getColor(Entity,What,Color)与所述被提问问题模板 (Entity)[是][What](Color)匹配的相同类型的参数与槽位的数量最多(有3个类型的参数与槽位匹配),因此确定该调用函数为所述被提问调用函数。具体的,调用函数中的参数Entity 与所述被提问问题模板中的槽位Entity均属于相同类型,调用函数中的参数What与所述被提问问题模板中的槽位What均属于相同类型,调用函数中的参数Color与所述被提问问题模板中的槽位Color均属于相同类型,一共3个相同类型的参数与槽位,比其它调用函数与所述被提问问题模板相同类型的参数与槽位的数量都多。
步骤408:所述电子设备根据所述被提问调用函数和所述儿童提出的问题所对应的实体名称,从所述实体属性库中获取所述儿童提出的问题所对应的实体名称对应的实体属性。
示例性的,这里可以将所述电子设备获取的所述儿童提出的问题所对应的实体名称及所述儿童提出的问题所对应的实体名称对应的实体属性作为待回答答案关键词。
具体的,所述电子设备根据所述被提问调用函数和所述儿童提出的问题所对应的实体名称,从所述实体属性库中获取所述儿童提出的问题所对应的实体名称对应的实体属性时,需要结合所述被提问调用函数表示的函数含义和所述儿童提出的问题所对应的实体名称,从所述实体属性库中获取所述儿童提出的问题所对应的实体名称对应的实体属性。例如,所述电子设备将所述儿童提出的问题所对应的实体名称代入所述被提问调用函数得到 getColor(母鸡,什么,颜色),getColor函数的含义是在实体属性库中查询某个实体的颜色。根据前述实体属性库示例中查询到实体名称“母鸡”的color属性是“红色”,因此获取的所述儿童提出的问题所对应的实体名称对应的实体属性为“红色”,也即待回答答案关键词 (实体名称+实体名称对应的实体属性)为“母鸡”“红色”。
步骤409:所述电子设备根据所述被提问调用函数从所述答案模板库中获取待回答答案模板,所述待回答答案模板为所述答案模板库中与所述被提问调用函数对应的答案模板。
例如,所述电子设备从所述答案模板库中可以获取所述被提问调用函数对应的所述待回答答案模板为Entity是Color的。
步骤410:基于所述待回答答案模板,所述电子设备将所述儿童提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性生成待回答答案。
其中,所述电子设备将所述儿童提出的问题所对应的实体名称及实体属性生成所述待回答答案,也即所述电子设备将所述待回答答案关键词生成所述待回答答案。
例如,所述待回答答案模板为Entity是Color的,所述电子设备将所述儿童提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性(也即待回答答案关键词)“母鸡”“红色”根据所述待回答答案模板组合成句子为“母鸡是红色的”,即生成了所述待回答答案。
步骤411:所述电子设备向所述儿童输出所述待回答答案。
在一种可选的实施方式中,所述电子设备先将所述待回答答案合成为语音,通过语音播放所述待回答答案。
具体的,所述电子设备通过扬声器播放所述待回答答案对应的语音。
需要说明的是,所述电子设备执行上述步骤403到步骤410是建立在所述电子设备具备数据存储和数据处理能力的前提下,当所述电子设备不具备数据存储和数据处理能力时,所述电子设备在接收到所述儿童提出的问题后,将所述儿童提出的问题传输给与所述电子设备连接的服务器,所述服务器执行上述步骤403到步骤410中所述电子设备的操作,然后所述服务器将待回答答案传输给所述电子设备,以使所述电子设备直接执行步骤411。
采用本申请实施例提供的基于绘本的问答交互方法,电子设备或者服务器可以根据儿童提出的问题基于与目标绘本相关的数据库灵活自行确定答案,并不需要机械地预设好问题答案,儿童可以不需要按照预设的问题进行提问,可以灵活提问,电子设备也可以回答更多的问题,从而可以使在绘本阅读过程中电子设备和儿童的交互更加智能,可以提高阅读绘本有效性,提升儿童体验。
实施例二:电子设备向儿童提问,儿童回答的具体方法流程。其中,所述电子设备可以是图2中示出的或者未示出的能实现本申请实施例提供的基于绘本的问答交互方法的任一种设备,所述电子设备应用于图3所示的电子设备。参阅图5所示,该方法具体流程可以包括:
步骤501:所述电子设备加载与目标绘本相关的数据库。
其中,所述数据库中包括实体属性库、问题模板库和调用函数库,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位。
具体的,步骤501与上述实施例中步骤401类似,具体可以相互参见,此处不再重复赘述。
步骤502:所述电子设备根据问题模板信息从所述问题模板库中获取待提问问题模板,其中,述问题模板信息为转移概率集合或问题模板类型,所述转移概率集合包括历史问题模板与所述问题模板库中其他问题模板之间的转移概率,所述历史问题模板为所述电子设备在生成上一次向用户提出的问题的过程中获取的问题模板,所述历史问题模板用于生成上一次向所述用户提出的问题的问题模板,所述问题模板类型与所述用户的年龄相关。
在现实生活中,在父母为孩子讲故事的过程中,通常讲完一个故事,父母都会问孩子一些问题,以了解孩子对故事的理解程度。基于此,所述电子设备替代父母的角色,在阅读绘本过程中,讲完一段故事或者阅读到精彩片段时,所述电子设备可以识别到需要向儿童提问,则所述电子设备会执行后续的提问过程。
在所述电子设备第一次向所述儿童提问的过程中,所述电子设备可以随机从所述问题模板库中选择一个问题模板作为所述待提问问题模板。在所述电子设备第二次或者更多次向所述儿童提问的过程中,所述电子设备仍可以随机从所述问题模板库中选择一个问题模板作为所述待提问问题模板,或者所述电子设备通过步骤502中的方法获取所述待提问问题模板。
示例1:所述问题模板信息为所述转移概率集合时,所述电子设备根据所述问题模板信息从所述问题模板库中获取待提问问题模板,具体方法可以为:所述电子设备根据预先确定的随机取值从所述转移概率集合中确定目标转移概率;所述电子设备根据所述目标转移概率从所述问题模板库中获取所述待提问问题模板。
其中,所述随机取值大于设定阈值。所述随机取值可以是在需要获取所述待提问问题模板时,当前确定的一个随机数;所述随机取值还可以是在预设好的多个数值中随机选取确定的一个数值。当然还可以为其他情况,本申请对此不作限定。
示例2:所述问题模板信息为所述问题模板类型时,所述电子设备根据所述问题模板信息从所述问题模板库中获取待提问问题模板,具体方法可以为:所述电子设备根据所述用户的年龄以及年龄与问题模板类型的对应关系确定目标问题模板类型;所述对应关系指示用户的年龄与以下至少一个问题模板类型对应:空间、细节、社会、色彩、数字、文字、自然;所述电子设备从所述问题模板库中获取符合所述目标问题模板类型的问题模板作为所述待提问问题模板。
在上述示例1中,在所述电子设备已经提问过所述儿童问题的场景中,所述电子设备可以根据所述电子设备在生成上一次向所述儿童提出的问题的过程中获取的问题模板获取所述待提问问题模板,这样可以达到多样化提问,避免儿童感到枯燥,提高儿童对绘本阅读的兴趣,从而提升儿童体验。例如,可以通过设置问题模板之间的转移概率实现基于一个问题模板确定另一个问题模板的目的。这样就需要在建立数据库时,预先将问题模板之间的转移概率设置好。其中,可以遵循意思相近的问题模板之间的转移概率较低,意思差异大的问题模板之间的转移概率较高的原则为问题模板之间设置转移概率。其中,可选的,每两个问题模板之间的转移概率可以通过预先人工设置好,还可以基于统计的方法,分析所述儿童提出的问题,根据命中的问题模板的多少,来计算每两个模板之间的转移概率。例如,图6示出的一种问题模板之间的转移概率的示意图。
例如,若所述电子设备在生成上一次向所述儿童提出的问题的过程中获取的问题模板 (即所述历史问题模板)为图6中的问题模板1时,所述电子设备确定一个随机取值为0.34 时,所述电子设备可以根据图6示出的与问题模板1之间的转移概率(即所述转移概率集合)中接近0.34的转移概率(即所述目标转移概率)为0.34;然后所述电子设备可以确定与所述问题模板1之间的转移概率为0.34的问题模板,此时由图6可以看出图6中的问题模板2可以作为所述待提问问题模板。
当然,上述过程同样可以由与电子设备连接的服务器实现,本申请对此不作限定。
通过上述方法向儿童提问,可以使提问更具多样性,避免儿童枯燥,调动儿童的积极性,提高儿童对绘本阅读的兴趣。
在上述示例2中,在预先建立问题模板库时还可以为问题模板库中的问题模板进行类型设置。由于儿童心理发展过程中的某个时期,相对于其他时期更容易学习某种知识和行为,心理过程的某个方面发展最为迅速,这时期即称为“敏感期”。敏感期的理论由意大利教育家蒙台稄利提出,敏感期不仅是儿童学习的关键期,同时也影响其心灵、人格的发展。例如,0-9岁的儿童经历的31个敏感期中,包括肌肉敏感期:1-3岁;对细微事物感兴趣的敏感期:1.5-4岁;语言敏感期:1.5岁-2.5岁;社会规范敏感期:2岁半-4岁;空间的敏感期:3-4岁;色彩敏感期:3-4岁;数学概念敏感期:4.5岁-7岁;认字敏感期:5岁-7岁;动植物、科学实验、收集敏感期:6岁-7岁;文化敏感期:6岁-9岁,等等。根据儿童的发展阶段提出问题,可以更有效地促进儿童的成长。因此,可以为问题模板设置问题模板类型,并在数据库中存储问题模板类型与儿童年龄(也可以理解为儿童发展阶段或者儿童的年龄段)的匹配表,当儿童处于相应的年龄(发展阶段或者年龄段)时,增加相应的问题类型被选择的概率。
例如,表8示出了儿童年龄(发展阶段或者年龄段)与问题模板类型的对应关系示意:
表8
年龄(发展阶段或年龄段) 问题模板类型
1 空间、细节
2 空间、细节、社会
3 空间、细节、社会、色彩
4 空间、细节、社会、色彩、数字
5 数字、文字
6 数字、文字、自然、文化
7 数字、文字、自然、文化
8 文化
9 文化
例如,表9示出了问题模板类型、问题模板的示例与问题的示例的对应关系:
表9
问题模板类型 问题模板的示例 问题的示例
空间 (Entity)[在][Where] 母鸡在哪里?
细节 (Entity)(position)有[What] 母鸡后面有什么?
社会 (Entity)[和][Entity][是][What](Relation) 佩奇和乔治是什么关系?
色彩 (Entity)[是][What](Color) 狐狸是什么颜色?
数字 有[数量词](Entity) 有几只小猪?
文字 [这是][What] 这是什么字?
自然 [这是][What][Entity] 这是什么动物?
文化 [你知道](Entity)[的历史吗] 你知道长城的历史吗?
可选的,可以通过所述电子设备上的设置软件(如在手机上控制机器人的App)设置儿童的年龄(或年龄段),从而确定相应的问题模板类型。也可以提供问题模板类型的设置人机接口,使父母可以直接在软件上设置问题模板类型。
可选的,也可以通过人机对话历史,对一段时间内儿童向电子设备提出的问题打标签,确定儿童当前的年龄(发展阶段或年龄段),不断进行统计儿童对每一类问题的提问比例,从而确定儿童当前适合的问题模板类型。
另外,除上述设置问题模板类型之外,一些儿童的敏感期并不对应特定的问题模板类型,而可以对应电子设备提问的频率,如1.5岁-2.5岁的语言敏感期,可以提高每一页或每一本绘本提问的频率。具体的,根据频率确定问题模板的方法与根据问题模板类型确定问题模板的方法类似,此处不再详细描述。
通过上述方法,根据儿童的年龄(发展阶段或年龄段)选择合适的问题模板,可以使提问更具针对性,可以使儿童的阅读更加有效。
步骤503:所述电子设备根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数。
其中,所述待提问调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型的匹配程度最高。
在一种可选的实施方式中,当所述调用函数库中包含一个所述待提问问题模板对应的调用函数时,所述电子设备直接将这一个调用函数作为所述待提问调用函数。这里应理解这一个调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型匹配程度最高。
在另一种可选的实施方式中,当所述调用函数库中包含多个所述待提问问题模板对应的调用函数时,所述电子设备根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数,具体方法可以为:所述电子设备从所述调用函数库中获取参数的数量和类型与所述待提问问题模板中的槽位的数量和类型匹配程度最高的调用函数,则确定了所述待提问问题模板对应的所述待提问调用函数。
其中,一个调用函数的参数的数量和类型与所述待提问问题模板中的参数的数量和类型匹配程度最高的具体实现方法,与上述步骤407中一个调用函数的参数的数量和类型与被提问问题模板中的参数的数量和类型匹配程度最高的具体实现方法类似,可以相互参见,此处不再详细描述。
步骤504:所述电子设备根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性。
其中,所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性可以理解为问题关键词。
具体的,所述电子设备根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性时,需要结合所述待提问调用函数表示的函数含义,从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性。
例如,当所述待提问问题模板为(Entity)[在][Where]时,需要获取所述待提问问题模板所对应的实体名称;当所述待提问问题模板为(Entity)[是][What](Color)时,需要获取所述待提问问题模板所对应的实体名称及所述待提问问题模板所对应的实体属性;当所述待提问问题模板为(Color)[有][What]时,需要获取所述待提问问题模板所对应的实体属性。
步骤505:基于所述待提问问题模板,所述电子设备将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性生成待提问问题。
也即所述电子设备基于所述待提问问题模板将所述问题关键词生成所述待提问问题。
例如,所述电子设备基于所述待提问问题模板将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性(也即所述问题关键词)生成的所述待提问问题可以如表10中的问题所示:
表10
Figure BDA0002043615360000201
Figure BDA0002043615360000211
步骤506:所述电子设备向所述儿童输出所述待提问问题,即所述电子设备向儿童提问。
在一种可选的实施方式中,所述电子设备先将所述待提问问题合成为语音,通过语音播放所述待提问问题。
具体的,所述电子设备通过扬声器播放所述待提问问题对应的语音。
步骤507:所述电子设备从所述待提问问题中提取所述待提问问题所对应的实体名称和 /或所述待提问问题所对应的实体属性。
例如,所述电子设备可以根据上述表10中的待提问问题提取所述待提问问题所对应的实体名称和/或所述待提问问题所对应的实体属性。例如,待提问问题为“(母鸡)[在][哪里]”时,可以提取待提问问题所对应的实体名称“母鸡”。又例如,待提问问题为“(红色的)[有][什么]”时,可以提取到待提问问题所对应的实体属性“红色的”。又例如,待提问问题为“(母鸡)[是][什么](颜色)”时,可以提取待提问问题所对应的实体名称“母鸡”。又例如,待提问问题为“(狐狸)[怎么][不穿](衣服)”时,可以提取待提问问题所对应的实体名称“狐狸”和待提问问题所对应的实体属性“衣服”。
步骤508:所述电子设备根据所述待提问调用函数和所述待提问问题所对应的实体名称,从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性,或者,所述电子设备根据所述待提问调用函数和所述待提问问题所对应的实体属性,从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称。
例如,当待提问问题为“(母鸡)[是][什么](颜色)”,提取待提问问题所对应的实体名称“母鸡”时,所述电子设备可以从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性“红色”。又例如,待提问问题为“(红色的)[有][什么]”,提取到待提问问题所对应的实体属性“红色的”时,所述电子设备可以从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称“母鸡”。又例如,待提问问题为“(狐狸) [怎么][不穿](衣服)”,提取待提问问题所对应的实体名称“狐狸”和待提问问题所对应的实体属性“衣服”时,所述电子设备可以从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性“全身毛绒绒的”。
步骤509:所述电子设备根据所述待提问调用函数从答案模板库中获取待确定答案模板,所述待确定答案模板为所述答案模板库中与所述待提问调用函数对应的答案模板。
其中,所述数据库还包括答案模板库,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应。
步骤510:基于所述待确定答案模板,所述电子设备将待确定答案关键词生成待确定答案。
其中,所述待确定答案关键词为以下任一项:所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体名称和所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体属性、所述待提问问题所对应的实体属性和所述待提问问题所对应的实体属性对应的实体名称。
例如,当所述待提问问题是“(母鸡)[是][什么](颜色)”时,所述电子设备将所述待提问问题所对应的实体名称“母鸡”和所述待提问问题所对应的实体名称对应的实体属性“红色”生成待确定答案“母鸡是红色的”。又例如,当所述待提问问题为“(红色的)[有][什么]”时,所述电子设备将所述待提问问题所对应的实体属性对应的实体名称“母鸡”生成待确定答案“母鸡”,或者所述电子设备将所述待提问问题所对应的实体属性对应的实体名称“母鸡”和所述待提问问题所对应的实体属性“红色的”生成待确定答案“红色的有母鸡”。
步骤511:所述电子设备接收所述儿童针对所述待提问问题的回答。
步骤512:所述电子设备将所述儿童针对所述待提问问题的回答与所述待确定答案进行对比分析以得到所述儿童的回答是否正确的判断结果。
具体的,所述电子设备将所述儿童的回答中的关键词,与所述待确定答案中的关键词进行对比,就对比结果判断所述儿童的回答是否正确,得到判断结果正确或者错误。
步骤513:所述电子设备根据所述判断结果向所述儿童做出相应的操作。
具体的,所述电子设备可以通过扬声器播放所述判断结果,例如当所述判断结果为正确时,所述电子设备可以播放“回答正确”,或者还可播放相同表达含义的语音,如“太好了,你答对了”等等。
同样的,所述电子设备执行上述步骤502-步骤505、步骤507-步骤510和步骤512是建立在所述电子设备具备数据存储和数据处理能力的前提下,当所述电子设备不具备数据存储和数据处理能力时,所述电子设备在确定需要向儿童提问时,触发服务器执行步骤502- 步骤505、步骤507-步骤510中的操作,所述服务器将确定的待提问问题传输给所述电子设备,然后所述电子设备向儿童提问,收到儿童的回答后,将所述儿童的回答传输给所述服务器,使所述服务器执行步骤512中的判断过程,然后所述服务器将所述判断结果传输给所述电子设备,所述电子设备继续执行步骤513。
采用本申请实施例提供的基于绘本的问答交互方法,电子设备或者服务器可以根据与目标绘本相关的数据库自行生成需要提问的问题和答案,并不需要机械地预设好问题答案对,电子设备不用机械地按照预设好的问题向用户提问,可以使在绘本阅读过程中电子设备提问及用户回答更加灵活,从而可以使在绘本阅读过程中电子设备和儿童的交互更加智能,可以提高阅读有效性,提升儿童体验。
基于上述实施例,上述实施例中描述的问答交互过程,可以适用于一个电子设备和一个儿童之间的问答交互。但是在实际应用中,在阅读绘本场景中,可能会存在父母或老师、儿童、电子设备三者。在一种可选的实施方式中,在存在三者的绘本阅读场景中,所述电子设备可以具有声纹识别模块,可以在电子设备的设置软件中,提供用户声纹识别的人机接口,通过不同的用户输入语音,用户通过人机接口指定不同的语音对应什么角色的用户,确定声纹与角色的对应关系,如家长、老师、儿童等角色。
对于图5所示的实施例电子设备提问的场景,可以待家长或老师角色发出指令(例如,电子设备(也可以是其他代名词),你问个问题吧!)后,再开始电子设备向儿童提问的流程。
可以理解的是,在问题模板的使用过程中,电子设备可以记录一段预设时间内的对话历史,对于家长或老师已经问过的问题,就不再选择对应的问题模板。
对于图4所示实施例中电子设备回答问题的场景,所述电子设备可以先持续检测用户的语音输入,通过声纹识别和语义分析,电子设备可以判断儿童的提问是否都得到了家长或老师的有效回答,如果儿童的提问在超过一定时间阈值后,还没有得到家长或老师的有效回答(答错了,或者没回答),则电子设备再执行回答用户问题的后续流程。
需要说明的是,上述实施例中涉及的问答交互流程一般是建立在存储的绘本的实体属性库是固定的场景下。可选的,所述电子设备还可以根据在所述电子设备阅读目标绘本的过程中,所述电子设备和儿童的交互历史信息中包含的(至少一个)实体名称及(至少一个)实体属性更新所述实体属性库。例如,所述电子设备根据所述交互历史信息中包含的实体名称及实体属性更新所述实体属性库,可以分为以下两种情况:第一种情况,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述儿童输入的话语信息;第二种情况,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述儿童的动作信息。
具体的,在上述第一种情况中,参阅图7所示,更新实体属性库的具体方法流程可以包括如下步骤:
步骤701:所述电子设备获取在所述电子设备阅读所述目标绘本的过程中,接收到的所述儿童的话语信息,并提取出所述话语信息中的实体名称(至少一个)及实体(至少一个) 属性。
例如,所述电子设备在与儿童问答交互过程中,识别到儿童说过一句话:“彤彤家的兔子叫小贝”。通过语义分析,所述电子设备可以判断到该句话中有一个实体名称是“兔子”,以及该实体名称的同义词“小贝”。
步骤702:所述电子设备判断已有的实体属性库中是否有相应实体名称,若有,则执行步骤703,否则执行步骤704。
例如,所述电子设备判断已有的实体属性库中,存在实体名称“兔子”,且其具有一个 Food属性为“青菜”,例如,表11所示,此时可以判断所述已有的实体属性库中存在确定的实体名称。
表11
实体(Entity) 实体属性:Food
兔子 青菜
步骤703:所述电子设备判断所述已有的实体属性库中是否有该实体名称对应的实体属性,若有则结束,否则执行步骤705。
步骤704:所述电子设备将所述实体名称及实体属性更新到已有的实体属性库中,得到更新的实体属性库。
例如,所述电子设备将实体名称“兔子”和实体属性(别名alias)“小贝”更新到已有的实体属性库中,更新后的实体属性库可以如表12所示:
表12
实体(Entity) 实体属性:alias
兔子 小贝
步骤705:所述电子设备将所述实体属性更新到已有的实体属性库中,得到更新的实体属性库。
例如,所述电子设备从表11中可以得出所述已有的实体属性库中并没有该实体属性(别名alias)“小贝”,则将所述实体属性更新到已有的实体属性库中,更新后的实体属性库如表13所示:
表13
实体(Entity) 实体属性:Food 实体属性:alias
兔子 青菜 小贝
基于上述方法更新后的实体属性库,所述电子设备再向儿童提问时,可以生成个性化的问题。例如,问题模板(Entity)[吃][What](Food),如果使用已有实体属性库,生成的问题应为“兔子吃什么”,而采用更新后的实体属性库,生成的问题就可以是“小贝吃什么”。应用上述方法生成的问题,与儿童的问答互动过程相结合,可以有效加强儿童对问题的接受度。
具体的,在上述第二种情况中,所述电子设备可以是具有摄像头和显示屏的电子设备。因为有一些儿童在听绘本阅读的过程中,伴随着形体动作(比如,手指着绘本内容)。所述电子设备可以获取儿童用手指在绘本上的指示位置,从而获取实体在绘本上的位置属性。通过这个过程,所述电子设备可以建立实体与其在绘本中位置的对应关系,从而更新实体属性库。参阅图8所示,更新实体属性库的具体方法流程可以包括如下步骤:
步骤801:所述电子设备在阅读所述目标绘本过程中,接收儿童的语音输入,并将语音转化成文本。
例如,儿童在听所述目标绘本的过程中,看到电子设备的显示屏中显示的所述目标绘本内容中有一只蜻蜓,则所述儿童会向电子设备输入语音“这儿有只蜻蜓”。
步骤802:所述电子设备从文本中提取实体名称及实体属性。
例如,所述电子设备从“这儿有只蜻蜓”中提取一个实体名称“蜻蜓”和实体属性“这儿”。
步骤803:所述电子设备判断所述实体属性是否为方位代词,若是则执行步骤804,否则结束。
步骤804:所述电子设备识别儿童手指指向绘本中的位置,也即所述电子设备接收到所述儿童的动作信息。
例如,所述电子设备可以通过摄像头获取的图像,采用边缘检测和封闭图形检测的方法,确定绘本书页的范围(例如图9中的左图),将书页建立象限,可以得到书页的上边、下边、左边、右边、左上、右上、左下、右下等方位(例如图9中的中图)。通过图像识别,还可以确定儿童的手指和书页上对应的物体(如图9中的右图所示的是一只蜻蜓)。
通过上述方法,所述电子设备可以确定儿童指向绘本中的绘本下方,也即绘本下方有一只蜻蜓。
步骤805:所述电子设备将确定的绘本中的位置,作为实体的方位属性,更新到已有的实体属性库中,得到更新后的实体属性库。
例如,所述电子设备得到实体名称“蜻蜓”与“绘本下方”的对应关系,则将“绘本下方”作为方位属性更新到已有的实体属性库中,例如,更新后的实体属性库可以如表14 所示:
表14
实体“Entity” 实体属性:position
蜻蜓 绘本下方
基于上述方法得到更新后的实体属性库中后,在后续电子设备向儿童提问时,可以灵活提问,例如,当所述电子设备识别带有方位属性的实体后,可以根据问题模板[让我们看看](where)[有](what)生成问题“让我们看看下边有什么?”。这样,可以更多地利用绘本中的信息,使阅读更加深入。
需要说明的是,上述步骤701-步骤705均可以由与所述电子设备连接的服务器实现;以及图8所示的实施例中电子设备接收到用户的语音后,可以将语音传输给服务器,以及将获取的儿童指向绘本的图像传输给服务器,由服务器完成数据处理过程实现实体属性库的更新。
基于上述实施例中更新的实体属性库,所述电子设备还可以更具儿童的生活经历进一步更新实体属性库。例如,在所述电子设备具有摄像头时,可以通过权限设置,使所述电子设备的设置软件可以获取其所安装的电子设备图库中的图像/视频,通过图像分析、图像携带的地理位置等信息,或者获取电子设备笔记类软件(如印象笔记)中育儿笔记相关的笔记本(可以由用户设置)等等,分析儿童去过的地点、所见到的事物,并与问题模板进行对应。
例如,电子设备通过今日图库(当然也可以为其他名称,这里仅仅是示例)中的照片中携带的地理位置确定儿童去了xx科技馆,并进一步通过图像分析确定儿童与恐龙(模型) 合影。从而可以更新实体属性库如表15所示:
表15
实体(Entity) 实体属性:experience(Place) 实体属性:experience(Entity)
恐龙 XX科技馆 腕龙
进一步的,例如,在所述电子设备阅读绘本《恐龙大陆》时,所述电子设备(或者服务器)就可以根据更新后的实体属性库,在步骤503中,选择experience属性相关的问题模板,[宝宝去过](Entity.position),[也看到过](Entity),[是][What](Entity)?,进而向儿童提问“宝宝也去过xx科技馆,也看到过恐龙,是哪一种呢?”。当阅读绘本与儿童自身的生活经历相结合时,由于儿童有切身的体会,儿童的理解会更加有效。
上述实施例中,仅简单的介绍了电子设备仅基于语音输出的示例。在实际应用中,电子设备有些具备显示功能,例如具有显示屏的电子设备(手机等),此时,在所述电子设备语音输出的同时可以通过显示屏一起输出语音对应的文本(也即所述电子设备通过显示屏显示所述待回答答案);还有些电子设备具有可活动部件,例如具有肢体的机器人,此时,所述电子设备语音输出的同时还可以加上可活动部件动作输出(也即所述电子设备控制可活动部件执行输出所述待回答答案的动作);还有些电子设备既具备显示功能又具备可活动部件,例如,具备显示屏的机器人,此时所述电子设备语音输出的同时还可结合显示和可活动部件动作一起输出。
上述多种输出可以通过电子设备的处理器控制实现,还可以通过建立调用函数库中的调用函数的显示/动作控制指令函数实现。
例如,通过调用函数实现时,具体的问题模板和调用函数的对应关系可以如表16所示:
表16
Figure BDA0002043615360000261
从表16中可以看出,调用函数中包含显示/动作控制指令。
例如,上表16所示,在用于回答颜色的调用函数getColor(Entity,What,Color)中,进一步包括显示颜色的控制指令display(Entity,Color),数据库中可以进一步存储图像/视频,预先为这些图像/视频设置实体名称与实体属性标签,则电子设备可以在屏幕上显示该实体名称与该实体属性相关的图片。
例如,图10所示的问答交互过程示意图中,儿童提问问题“北极熊是什么颜色的?”,经过图4所示的实施例中描述的确定待回答答案的过程,电子设备得到待回答答案“北极熊是白色的”,同时根据确定对应的实体名称是“北极熊”,以及确定该实体属性是“白色”,在数据库存储的图像/视频中查询相应的实体名称和实体属性标签得到图10中所示的图片,显示在电子设备的显示屏上。
又例如,如上表16示出的,在用于回答位置的调用函数(Entity)[在][Where]中,进一步包括动作控制指令raise_hand()point_to(Entity.position),这些控制指令对应电子设备(例如机器人)的可活动部件动作(如肢体动作),如抬手,指向(某处)等。根据更新后的实体属性库中描述的带有方位属性的实体属性库,电子设备可以确定实体名称的位置,并用肢体指向该位置。
例如,在图11所示的示例中,儿童提问问题“蜻蜓在哪呢?”,经过图4所示的实施例中描述的确定待回答答案的过程,以及根据确定对应的实体名称是“蜻蜓”,根据确定问题模板(Entity)[在][Where],以及根据更新的实体属性库中描述的带有方位属性的实体属性库,确定实体名称的位置是“下边”,再根据用于回答位置的调用函数(Entity)[在][Where]中包括的动作控制指令,电子设备(机器人)执行“抬手”“指向(绘本下方)”的控制指令,将可活动部件(可活动的肢体上的手/手指)指向绘本上的蜻蜓所在的位置。
通过上述方法,通过显示、动作类的回答方式,可以更充分地利用电子设备可以提供的功能,使回答更加多样化,增强产品的吸引力。
基于以上实施例,机器人还可以与其他App联动,如,在电子设备的设置软件中提供与电商App的接口,可以调用商品搜索和购买功能。对于具备摄像头和图像分析能力的电子设备,可以通过图像识别匹配商品。例如,很多绘本的封底都会有同系列其他书籍、同作者作品、同一出版社书籍等推荐,儿童在听电子设备阅读绘本过程中,如果用手指向其中一本书籍,或者用语音表达“我想要这一本《我可以自己睡觉》”,则认为儿童产生了购买意图,例如,图12所示儿童的意图示意图,通过商品匹配确定书籍的名称,通过电商 App提供的商品搜索接口搜索该商品,从而询问用户是否要购买。又例如,如图13所示的绘本,封面上是一个特定的动画形象,通过图像识别可以确定该形象是“超级飞侠”,识别儿童的语音输入“我想要一个超级飞侠玩具”,则认为儿童产生了购买意图,通过商品匹配确定商品的名称,通过电商App提供的商品搜索接口搜索该商品,从而询问用户是否要购买。
具体的,参阅图14所示上述过程实现的方法具体可以包括以下步骤:
步骤1401:确定购买意图。
具体的,获取儿童的输入,分析常用购买指令中出现的关键词和以及词的组合,构建并在数据库中存储购买相关的语法模板,如用户输入里出现“我要买[Entity]”、“我想买[Entity]”、“我想要一个[Entity]”、“可以给我买一个[Entity]吗”这样的句式,则确定儿童有购买意图。
步骤1402:确定商品搜索关键字。
具体的,儿童输入中的[Entity]可以直接做为搜索关键字,如上例中的“我想要一个超级飞侠玩具”,则确定“超级飞侠玩具”为商品搜索关键字。
例如,对于具有摄像头的电子设备,还可以摄像头获取图像,进行图像分析,确定图像中出现的对象,如图12和图13所示的两张图中虚线框所示的书籍、人物、动画形象,也可以是动物、植物、物品等。并通过图像识别确定儿童手指的位置,是否指向上述对象。通过此步骤可以进一步增强商品关键字的准确性。
步骤1403:搜索商品,向儿童返回搜索结果,并询问儿童是否要购买。
在此步骤中,可以是电子设备同时提供商品购买功能,直接搜索商品,或者电子设备调用电商App的商品搜索接口来搜索。
需要说明的是,本申请实施例中均以儿童为进行说明,可以理解的是,儿童仅作为一个用户,并不限于是儿童。
基于以上实施例,本申请实施例还提供了一种电子设备。该电子设备用于实现本申请实施例提供的基于绘本的问答交互方法。参阅图15所示,该电子设备1500可以包括:处理单元1501、输入单元1502和输出单元1503。
在一个实施例中,图15所示的电子设备可以用于执行图4所示的基于绘本的问答交互方法中电子设备的操作。具体的:
所述处理单元1501,用于加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合,所述实体属性库包含多个实体名称及实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应,所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体;
所述输入单元1502,用于接收用户提出的问题;
所述处理单元1501,还用于对所述用户提出的问题进行分词处理得到分词词串,所述分词词串为多个关键词文本序列;
根据所述分词词串和所述字词集合得到泛化后的问题,所述泛化后的问题为多个泛化词文本序列;
从所述泛化后的问题中提取出所述用户提出的问题所对应的实体名称,所述用户提出的问题所对应的实体名称为所述泛化后的问题中被泛化成实体的关键词;
根据所述泛化后的问题与所述问题模板库中问题模板的文本相似度,从所述问题模板库中获取被提问问题模板;
根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数;
根据所述被提问调用函数和所述用户提出的问题所对应的实体名称,从所述实体属性库中获取所述用户提出的问题所对应的实体名称对应的实体属性;
根据所述被提问调用函数从所述答案模板库中获取待回答答案模板,所述待回答答案模板为所述答案模板库中与所述被提问调用函数对应的答案模板;
基于所述待回答答案模板,将所述用户提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性生成待回答答案;
所述输出单元1503,用于向所述用户输出所述待回答答案。
基于上述电子设备,可以根据用户的问题基于与目标绘本相关的数据库灵活自行确定答案,并不需要机械地预设好问题和答案,用户可以不需要按照预设的问题进行提问,可以灵活提问,电子设备也可以回答更多的问题,从而可以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高阅读有效性。
在一种可选的实施方式中,所述被提问调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型的匹配程度最高。
在一种可选的实施方式中,所述处理单元1501,还用于:根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
在一种可选的实施方式中,所述电子设备还包括摄像头,用于采集所述用户展示的绘本的图像,所述处理单元1501,还用于:在加载与所述目标绘本相关的数据库之前,通过所述摄像头采集所述用户展示的绘本的图像,并通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
在一种可选的实施方式中,所述电子设备还包含显示屏,所述处理单元1501,还用于:在所述输出单元1503向所述用户输出所述待回答答案时,通过所述显示屏显示所述待回答答案。
在一种可选的实施方式中,所述电子设备还包含可活动部件,所述处理单元1501,还用于:在所述输出单元1503向所述用户输出所述待回答答案时,控制所述可活动部件执行输出所述待回答答案的动作。
在另一个实施例中,图15所示的电子设备可以用于执行图5所示的基于绘本的问答交互方法中电子设备的操作。具体的:
所述处理单元1501,用于加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库和调用函数库,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位;
根据问题模板信息从所述问题模板库中获取待提问问题模板,所述问题模板信息为转移概率集合或问题模板类型,所述转移概率集合包括历史问题模板与所述问题模板库中其他问题模板之间的转移概率,所述历史问题模板为所述电子设备在生成上一次向用户提出的问题的过程中获取的问题模板,所述问题模板类型与所述用户的年龄相关;
根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数;
根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
基于所述待提问问题模板,将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性生成待提问问题;
所述输出单元1503,用于向所述用户输出所述待提问问题。
在一种可选的实施方式中,所述数据库还包括答案模板库,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应;所述处理单元1501,还用于:
从所述待提问问题中提取所述待提问问题所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
根据所述待提问调用函数和所述待提问问题所对应的实体名称,从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性,或者,根据所述待提问调用函数和所述待提问问题所对应的实体属性,从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称;
根据所述待提问调用函数从所述答案模板库中获取待确定答案模板,所述待确定答案模板为所述答案模板库中与所述待提问调用函数对应的答案模板;
基于所述待确定答案模板,将待确定答案关键词生成待确定答案,所述待确定答案关键词为以下任一项:所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体名称和所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体属性、所述待提问问题所对应的实体属性和所述待提问问题所对应的实体属性对应的实体名称。
在一种示例中,所述电子设备还包括:
输入单元1502,用于接收所述用户针对所述待提问问题的回答;
所述处理单元1501,还用于:将所述用户针对所述待提问问题的回答与所述待确定答案进行对比分析以得到所述用户的回答是否正确的判断结果;根据所述判断结果向所述用户做出相应的操作。
一种实现方式中,所述待提问调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型的匹配程度最高。
一种示例性的方式,所述问题模板信息为所述转移概率集合时,所述处理单元1501,在根据所述问题模板信息从所述问题模板库中获取待提问问题模板时,具体用于:
根据预先确定的随机取值从所述转移概率集合中确定目标转移概率;
根据所述目标转移概率从所述问题模板库中获取所述待提问问题模板。
另一种示例性的方式,所述问题模板信息为所述问题模板类型时,所述处理单元1501,在根据所述问题模板信息从所述问题模板库中获取待提问问题模板时,具体用于:
根据所述用户的年龄以及年龄与问题模板类型的对应关系确定目标问题模板类型;所述对应关系指示用户的年龄与以下至少一个问题模板类型对应:空间、细节、社会、色彩、数字、文字、自然;
从所述问题模板库中获取符合所述目标问题模板类型的问题模板作为所述待提问问题模板。
一种可选的实施方式中,所述处理单元1501,还用于:根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
一种可能的方式中,所述电子设备还包括:摄像头,用于采集所述用户展示的绘本的图像;
所述处理单元1501,还用于在加载与所述目标绘本相关的数据库之前,通过摄像头采集所述用户展示的绘本的图像;通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。在本申请的实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
基于以上实施例,本申请实施例还提供了一种在电子设备,该电子设备可以实现本申请实施例提供的基于绘本的问答交互方法。可以参阅图16所示,所述电子设备1600包括:通信单元1601和处理器1602,可选的还可以包括存储器1603,其中:
其中,处理器1602可以是中央处理器(central processing unit,CPU),网络处理器 (network processor,NP)或者CPU和NP的组合等等。处理器1602还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integrated circuit,ASIC),可编程逻辑器件(programmable logic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gate array,FPGA),通用阵列逻辑(generic array logic,GAL)或其任意组合。处理器1602在实现上述功能时,可以通过硬件实现,当然也可以通过硬件执行相应的软件实现。
通信单元1601和处理器1602之间相互连接。可选的,通信单元1601和处理器1602通过总线1604相互连接;总线1604可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA) 总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示,图16中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
在一种可选的实施方式中,存储器1603,与处理器1602耦合,用于存放程序等。具体地,程序可以包括程序代码,该程序代码包括计算机操作指令。存储器1603可能包括RAM,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。处理器1602执行存储器1603所存放的应用程序,实现上述功能,从而实现电子设备的功能,即实现基于绘本的问答交互方法。
在一个实施例中,图16所示的电子设备可用于执行上述图4所示的实施例中的电子设备的操作。具体的:
所述处理器1602,用于加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应,所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体;
所述通信单元1601,用于接收所述用户提出的问题;
所述处理器1602,还用于对所述用户提出的问题进行分词处理得到分词词串,所述分词词串为多个关键词文本序列;
根据所述分词词串和所述字词集合得到泛化后的问题,所述泛化后的问题为多个泛化词文本序列;
从所述泛化后的问题中提取出所述用户提出的问题所对应的实体名称,所述用户提出的问题所对应的实体名称为所述泛化后的问题中被泛化成实体的关键词;
根据所述泛化后的问题与所述问题模板库中问题模板的文本相似度,从所述问题模板库中获取被提问问题模板;
根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数;
根据所述被提问调用函数和所述用户提出的问题所对应的实体名称,从所述实体属性库中获取所述用户提出的问题所对应的实体名称对应的实体属性;
根据所述被提问调用函数从所述答案模板库中获取待回答答案模板,所述待回答答案模板为所述答案模板库中与所述被提问调用函数对应的答案模板;
基于所述待回答答案模板,将所述用户提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性生成待回答答案;
所述通信单元1601,还用于向所述用户输出所述待回答答案。
基于上述电子设备,可以根据用户的问题基于与目标绘本相关的数据库灵活自行确定答案,并不需要机械地预设好问题和答案,用户可以不需要按照预设的问题进行提问,可以灵活提问,电子设备也可以回答更多的问题,从而可以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高阅读绘本有效性。
在一种可选的实施方式中,所述被提问调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型的匹配程度最高。
在一种可选的实施方式中,所述处理器1602,还用于:根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
在一种可选的实施方式中,所述电子设备1600还包含摄像头,用于采集所述用户展示的绘本的图像,所述处理器1602,还用于:在加载与所述目标绘本相关的数据库之前,通过所述摄像头采集所述用户展示的绘本的图像,并通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
在一种可选的实施方式中,所述电子设备1600还包含显示屏,所述处理器1602,还用于:在所述通信单元1601向所述用户输出所述待回答答案时,通过所述显示屏显示所述待回答答案。
在一种可选的实施方式中,所述电子设备1600还包含可活动部件,所述处理器1602,还用于:在所述通信单元1601向所述用户输出所述待回答答案时,控制所述可活动部件执行输出所述待回答答案的动作。
在另一个实施例中,图16所示的电子设备可以用于执行图5所示的基于绘本的问答交互方法中电子设备的操作。具体的:
所述处理器1602,用于加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库和调用函数库,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位;
根据问题模板信息从所述问题模板库中获取待提问问题模板,所述问题模板信息为转移概率集合或问题模板类型,所述转移概率集合包括历史问题模板与所述问题模板库中其他问题模板之间的转移概率,所述历史问题模板为所述电子设备在生成上一次向用户提出的问题的过程中获取的问题模板,所述问题模板类型与所述用户的年龄相关;
根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数;
根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
基于所述待提问问题模板,将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性生成待提问问题;
所述通信单元1601,用于向所述用户输出所述待提问问题。
在一种可选的实施方式中,所述数据库还包括答案模板库,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应;所述处理器1602,还用于:
从所述待提问问题中提取所述待提问问题所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
根据所述待提问调用函数和所述待提问问题所对应的实体名称,从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性,或者,根据所述待提问调用函数和所述待提问问题所对应的实体属性,从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称;
根据所述待提问调用函数从所述答案模板库中获取待确定答案模板,所述待确定答案模板为所述答案模板库中与所述待提问调用函数对应的答案模板;
基于所述待确定答案模板,将待确定答案关键词生成待确定答案,所述待确定答案关键词为以下任一项:所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体名称和所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体属性、所述待提问问题所对应的实体属性和所述待提问问题所对应的实体属性对应的实体名称。
在一种示例中,所述通信单元1601,还用于接收所述用户针对所述待提问问题的回答;
所述处理器1602,还用于:将所述用户针对所述待提问问题的回答与所述待确定答案进行对比分析以得到所述用户的回答是否正确的判断结果;根据所述判断结果向所述用户做出相应的操作。
一种实现方式中,所述待提问调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型的匹配程度最高。
一种示例性的方式,所述问题模板信息为所述转移概率集合时,所述处理器1602,在根据所述问题模板信息从所述问题模板库中获取待提问问题模板时,具体用于:
根据预先确定的随机取值从所述转移概率集合中确定目标转移概率;
根据所述目标转移概率从所述问题模板库中获取所述待提问问题模板。
另一种示例性的方式,所述问题模板信息为所述问题模板类型时,所述处理器1602,在根据所述问题模板信息从所述问题模板库中获取待提问问题模板时,具体用于:
根据所述用户的年龄以及年龄与问题模板类型的对应关系确定目标问题模板类型;所述对应关系指示用户的年龄与以下至少一个问题模板类型对应:空间、细节、社会、色彩、数字、文字、自然;
从所述问题模板库中获取符合所述目标问题模板类型的问题模板作为所述待提问问题模板。
一种可选的实施方式中,所述处理器1602,还用于:根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
一种可能的方式中,所述电子设备1600还包括:摄像头,用于采集所述用户展示的绘本的图像;所述处理器1602,还用于在加载与所述目标绘本相关的数据库之前,通过摄像头采集所述用户展示的绘本的图像;通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
综上所述,通过本申请实施例提供一种基于绘本的问答交互方法及电子设备,以使在绘本阅读过程中电子设备和用户的交互更加智能,可以提高效率,提升用户体验。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和 /或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请实施例进行各种改动和变型而不脱离本申请实施例的范围。这样,倘若本申请实施例的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (25)

1.一种基于绘本的问答交互方法,其特征在于,包括:
电子设备加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应,所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体;
所述电子设备接收用户提出的问题;
所述电子设备对所述用户提出的问题进行分词处理得到分词词串,所述分词词串为多个关键词文本序列;
所述电子设备根据所述分词词串和所述字词集合得到泛化后的问题,所述泛化后的问题为多个泛化词文本序列;
所述电子设备从所述泛化后的问题中提取出所述用户提出的问题所对应的实体名称,所述用户提出的问题所对应的实体名称为所述泛化后的问题中被泛化成实体的关键词;
所述电子设备根据所述泛化后的问题与所述问题模板库中问题模板的文本相似度,从所述问题模板库中获取被提问问题模板;
所述电子设备根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数;
所述电子设备根据所述被提问调用函数和所述用户提出的问题所对应的实体名称,从所述实体属性库中获取所述用户提出的问题所对应的实体名称对应的实体属性;
所述电子设备根据所述被提问调用函数从所述答案模板库中获取待回答答案模板,所述待回答答案模板为所述答案模板库中与所述被提问调用函数对应的答案模板;
基于所述待回答答案模板,所述电子设备将所述用户提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性生成待回答答案;
所述电子设备向所述用户输出所述待回答答案。
2.如权利要求1所述的方法,其特征在于,所述被提问调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型的匹配程度最高。
3.如权利要求1或2所述的方法,其特征在于,所述方法还包括:
所述电子设备根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;
其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
4.如权利要求1-2任一项所述的方法,其特征在于,在所述电子设备加载与所述目标绘本相关的数据库之前,所述方法还包括:
所述电子设备通过摄像头采集所述用户展示的绘本的图像;
所述电子设备通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
5.一种基于绘本的问答交互方法,其特征在于,包括:
电子设备加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库和调用函数库,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位;
所述电子设备根据问题模板信息从所述问题模板库中获取待提问问题模板,所述问题模板信息为转移概率集合或问题模板类型,所述转移概率集合包括历史问题模板与所述问题模板库中其他问题模板之间的转移概率,所述历史问题模板为所述电子设备在生成上一次向用户提出的问题的过程中获取的问题模板,所述问题模板类型与所述用户的年龄相关;
所述电子设备根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数;
所述电子设备根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
基于所述待提问问题模板,所述电子设备将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性生成待提问问题;
所述电子设备向所述用户输出所述待提问问题。
6.如权利要求5所述的方法,其特征在于,所述数据库还包括答案模板库,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应;所述方法还包括:
所述电子设备从所述待提问问题中提取所述待提问问题所对应的实体名称和/或所述待提问问题所对应的实体属性;
所述电子设备根据所述待提问调用函数和所述待提问问题所对应的实体名称,从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性,或者,所述电子设备根据所述待提问调用函数和所述待提问问题所对应的实体属性,从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称;
所述电子设备根据所述待提问调用函数从所述答案模板库中获取待确定答案模板,所述待确定答案模板为所述答案模板库中与所述待提问调用函数对应的答案模板;
基于所述待确定答案模板,所述电子设备将待确定答案关键词生成待确定答案,所述待确定答案关键词为以下任一项:所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体名称和所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体属性、所述待提问问题所对应的实体属性和所述待提问问题所对应的实体属性对应的实体名称。
7.如权利要求6所述的方法,其特征在于,所述方法还包括:
所述电子设备接收所述用户针对所述待提问问题的回答;
所述电子设备将所述用户针对所述待提问问题的回答与所述待确定答案进行对比分析以得到所述用户的回答是否正确的判断结果;
所述电子设备根据所述判断结果向所述用户做出相应的操作。
8.如权利要求5-7任一项所述的方法,其特征在于,所述待提问调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型的匹配程度最高。
9.如权利要求5-7任一项所述的方法,其特征在于,所述问题模板信息为所述转移概率集合时,所述电子设备根据所述问题模板信息从所述问题模板库中获取待提问问题模板,包括:
所述电子设备根据预先确定的随机取值从所述转移概率集合中确定目标转移概率;
所述电子设备根据所述目标转移概率从所述问题模板库中获取所述待提问问题模板。
10.如权利要求5-7任一项所述的方法,其特征在于,所述问题模板信息为所述问题模板类型时,所述电子设备根据所述问题模板信息从所述问题模板库中获取待提问问题模板,包括:
所述电子设备根据所述用户的年龄以及年龄与问题模板类型的对应关系确定目标问题模板类型;所述对应关系指示用户的年龄与以下至少一个问题模板类型对应:空间、细节、社会、色彩、数字、文字、自然;
所述电子设备从所述问题模板库中获取符合所述目标问题模板类型的问题模板作为所述待提问问题模板。
11.如权利要求5-7任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;
其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
12.如权利要求5-7任一项所述的方法,其特征在于,在所述电子设备加载与所述目标绘本相关的数据库之前,所述方法还包括:
所述电子设备通过摄像头采集所述用户展示的绘本的图像;
所述电子设备通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
13.一种电子设备,其特征在于,包括:
处理单元,用于加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库、调用函数库、答案模板库和字词集合,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应,所述字词集合指示多个关键词与泛化词之间的对应关系,所述泛化词包括实体;
输入单元,用于接收用户提出的问题;
所述处理单元,还用于对所述用户提出的问题进行分词处理得到分词词串,所述分词词串为多个关键词文本序列;
根据所述分词词串和所述字词集合得到泛化后的问题,所述泛化后的问题为多个泛化词文本序列;
从所述泛化后的问题中提取出所述用户提出的问题所对应的实体名称,所述用户提出的问题所对应的实体名称为所述泛化后的问题中被泛化成实体的关键词;
根据所述泛化后的问题与所述问题模板库中问题模板的文本相似度,从所述问题模板库中获取被提问问题模板;
根据所述被提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取被提问调用函数;
根据所述被提问调用函数和所述用户提出的问题所对应的实体名称,从所述实体属性库中获取所述用户提出的问题所对应的实体名称对应的实体属性;
根据所述被提问调用函数从所述答案模板库中获取待回答答案模板,所述待回答答案模板为所述答案模板库中与所述被提问调用函数对应的答案模板;
基于所述待回答答案模板,将所述用户提出的问题所对应的实体名称及所述用户提出的问题所对应的实体名称对应的实体属性生成待回答答案;
输出单元,用于向所述用户输出所述待回答答案。
14.如权利要求13所述的电子设备,其特征在于,所述被提问调用函数的参数的数量和类型与所述被提问问题模板的槽位的数量和类型的匹配程度最高。
15.如权利要求13或14所述的电子设备,其特征在于,所述处理单元,还用于:
根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;
其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
16.如权利要求13-14任一项所述的电子设备,其特征在于,所述电子设备还包括:
摄像头,用于采集所述用户展示的绘本的图像;
所述处理单元,还用于在加载与所述目标绘本相关的数据库之前,通过摄像头采集所述用户展示的绘本的图像;
通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
17.一种电子设备,其特征在于,包括:
处理单元,用于加载与目标绘本相关的数据库,其中,所述数据库中包括实体属性库、问题模板库和调用函数库,所述实体属性库包含多个实体名称及多个实体属性,所述多个实体名称与所述多个实体属性一一对应,所述问题模板库中包含至少一个问题模板,所述调用函数库中包含至少一个调用函数,所述问题模板库中的每一个问题模板对应所述调用函数库中的一个或者多个调用函数,所述问题模板库中的每一个问题模板包括多个槽位;
根据问题模板信息从所述问题模板库中获取待提问问题模板,所述问题模板信息为转移概率集合或问题模板类型,所述转移概率集合包括历史问题模板与所述问题模板库中其他问题模板之间的转移概率,所述历史问题模板为所述电子设备在生成上一次向用户提出的问题的过程中获取的问题模板,所述问题模板类型与所述用户的年龄相关;
根据所述待提问问题模板的槽位与所述调用函数库中调用函数的参数的匹配程度,从所述调用函数库中获取待提问调用函数;
根据所述待提问调用函数从所述实体属性库中获取所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
基于所述待提问问题模板,将所述待提问问题模板所对应的实体名称和/或所述待提问问题模板所对应的实体属性生成待提问问题;
输出单元,用于向所述用户输出所述待提问问题。
18.如权利要求17所述的电子设备,其特征在于,所述数据库还包括答案模板库,所述答案模板库中包含至少一个答案模板,所述答案模板库中的答案模板与所述调用函数库中的调用函数一一对应;所述处理单元,还用于:
从所述待提问问题中提取所述待提问问题所对应的实体名称和/或所述待提问问题模板所对应的实体属性;
根据所述待提问调用函数和所述待提问问题所对应的实体名称,从所述实体属性库中获取所述待提问问题所对应的实体名称对应的实体属性,或者,根据所述待提问调用函数和所述待提问问题所对应的实体属性,从所述实体属性库中获取所述待提问问题所对应的实体属性对应的实体名称;
根据所述待提问调用函数从所述答案模板库中获取待确定答案模板,所述待确定答案模板为所述答案模板库中与所述待提问调用函数对应的答案模板;
基于所述待确定答案模板,将待确定答案关键词生成待确定答案,所述待确定答案关键词为以下任一项:所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体名称和所述待提问问题所对应的实体名称对应的实体属性、所述待提问问题所对应的实体属性、所述待提问问题所对应的实体属性和所述待提问问题所对应的实体属性对应的实体名称。
19.如权利要求18所述的电子设备,其特征在于,所述电子设备还包括:
输入单元,用于接收所述用户针对所述待提问问题的回答;
所述处理单元,还用于:
将所述用户针对所述待提问问题的回答与所述待确定答案进行对比分析以得到所述用户的回答是否正确的判断结果;
根据所述判断结果向所述用户做出相应的操作。
20.如权利要求17-19任一项所述的电子设备,其特征在于,所述待提问调用函数的参数的数量和类型与所述待提问问题模板的槽位的数量和类型的匹配程度最高。
21.如权利要求17-19任一项所述的电子设备,其特征在于,所述问题模板信息为所述转移概率集合时,所述处理单元,在根据所述问题模板信息从所述问题模板库中获取待提问问题模板时,具体用于:
根据预先确定的随机取值从所述转移概率集合中确定目标转移概率;
根据所述目标转移概率从所述问题模板库中获取所述待提问问题模板。
22.如权利要求17-19任一项所述的电子设备,其特征在于,所述问题模板信息为所述问题模板类型时,所述处理单元,在根据所述问题模板信息从所述问题模板库中获取待提问问题模板时,具体用于:
根据所述用户的年龄以及年龄与问题模板类型的对应关系确定目标问题模板类型;所述对应关系指示用户的年龄与以下至少一个问题模板类型对应:空间、细节、社会、色彩、数字、文字、自然;
从所述问题模板库中获取符合所述目标问题模板类型的问题模板作为所述待提问问题模板。
23.如权利要求17-19任一项所述的电子设备,其特征在于,所述处理单元,还用于:
根据交互历史信息中包含的实体名称及实体属性,更新所述实体属性库;
其中,所述交互历史信息为在所述电子设备阅读所述目标绘本的过程中,所述电子设备接收到所述用户输入的话语信息或者所述用户的动作信息。
24.如权利要求17-19任一项所述的电子设备 ,其特征在于,所述电子设备还包括:
摄像头,用于采集所述用户展示的绘本的图像;
所述处理单元,还用于在加载与所述目标绘本相关的数据库之前,通过摄像头采集所述用户展示的绘本的图像;
通过图像分析技术对采集到的绘本的图像进行分析以确定所述目标绘本。
25.一种计算机可读存储介质,其特征在于,包括指令,当所述指令在计算机上运行时,使得所述计算机执行如权利要求1-12中任一项所述的方法。
CN201910349961.6A 2019-04-28 2019-04-28 一种基于绘本的问答交互方法及电子设备 Active CN111858861B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910349961.6A CN111858861B (zh) 2019-04-28 2019-04-28 一种基于绘本的问答交互方法及电子设备
PCT/CN2020/086872 WO2020221142A1 (zh) 2019-04-28 2020-04-24 一种基于绘本的问答交互方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910349961.6A CN111858861B (zh) 2019-04-28 2019-04-28 一种基于绘本的问答交互方法及电子设备

Publications (2)

Publication Number Publication Date
CN111858861A CN111858861A (zh) 2020-10-30
CN111858861B true CN111858861B (zh) 2022-07-19

Family

ID=72965813

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910349961.6A Active CN111858861B (zh) 2019-04-28 2019-04-28 一种基于绘本的问答交互方法及电子设备

Country Status (2)

Country Link
CN (1) CN111858861B (zh)
WO (1) WO2020221142A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113420125B (zh) * 2021-06-25 2023-09-19 深圳索信达数据技术有限公司 基于行业类型的问答对确定方法、系统、存储介质及设备
CN113326367B (zh) * 2021-06-30 2023-06-16 四川启睿克科技有限公司 基于端到端文本生成的任务型对话方法和系统
CN115292471B (zh) * 2022-09-30 2022-12-20 深圳市人马互动科技有限公司 针对儿童的知识类产品服务推送方法及相关装置
CN116009748B (zh) * 2023-03-28 2023-06-06 深圳市人马互动科技有限公司 儿童互动故事中图片信息交互方法及装置
CN117194792B (zh) * 2023-09-18 2024-03-01 广州道然信息科技有限公司 基于角色预测的儿童绘本推荐方法及系统
CN117876036B (zh) * 2024-03-12 2024-05-07 成都信通信息技术有限公司 一种贸易问题线上问答积分奖励管理方法及系统
CN118711568A (zh) * 2024-08-26 2024-09-27 厦门三读教育科技有限公司 基于tts技术的幼儿绘本辅助阅读方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003173129A (ja) * 2001-09-28 2003-06-20 Iyoko Saito 穴埋め問題作成装置、穴埋め問題作成用のコンピュータプログラム及びそのプログラムを記録した記録媒体
CN1794233A (zh) * 2005-12-28 2006-06-28 刘文印 一种网上用户交互问答方法及其系统
CN104850539A (zh) * 2015-05-28 2015-08-19 宁波薄言信息技术有限公司 一种自然语言理解方法及基于该方法的旅游问答系统
CN107766511A (zh) * 2017-10-23 2018-03-06 深圳市前海众兴电子商务有限公司 智能问答方法、终端及存储介质
CN107885844A (zh) * 2017-11-10 2018-04-06 南京大学 基于分类检索的自动问答方法及系统
CN108509136A (zh) * 2018-04-12 2018-09-07 山东音为爱智能科技有限公司 一种基于人工智能的儿童绘本辅助阅读方法
CN109492077A (zh) * 2018-09-29 2019-03-19 北明智通(北京)科技有限公司 基于知识图谱的石化领域问答方法及系统
CN109522835A (zh) * 2018-11-13 2019-03-26 北京光年无限科技有限公司 基于智能机器人的儿童读物阅读与交互方法及系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8566088B2 (en) * 2008-11-12 2013-10-22 Scti Holdings, Inc. System and method for automatic speech to text conversion
US10262062B2 (en) * 2015-12-21 2019-04-16 Adobe Inc. Natural language system question classifier, semantic representations, and logical form templates
CN105701253B (zh) * 2016-03-04 2019-03-26 南京大学 中文自然语言问句语义化的知识库自动问答方法
CN107958091A (zh) * 2017-12-28 2018-04-24 北京贝塔智投科技有限公司 一种基于金融垂直知识图谱的nlp人工智能方法及交互系统
CN109657041B (zh) * 2018-12-04 2023-09-29 南京理工大学 基于深度学习的问题自动生成方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003173129A (ja) * 2001-09-28 2003-06-20 Iyoko Saito 穴埋め問題作成装置、穴埋め問題作成用のコンピュータプログラム及びそのプログラムを記録した記録媒体
CN1794233A (zh) * 2005-12-28 2006-06-28 刘文印 一种网上用户交互问答方法及其系统
CN104850539A (zh) * 2015-05-28 2015-08-19 宁波薄言信息技术有限公司 一种自然语言理解方法及基于该方法的旅游问答系统
CN107766511A (zh) * 2017-10-23 2018-03-06 深圳市前海众兴电子商务有限公司 智能问答方法、终端及存储介质
CN107885844A (zh) * 2017-11-10 2018-04-06 南京大学 基于分类检索的自动问答方法及系统
CN108509136A (zh) * 2018-04-12 2018-09-07 山东音为爱智能科技有限公司 一种基于人工智能的儿童绘本辅助阅读方法
CN109492077A (zh) * 2018-09-29 2019-03-19 北明智通(北京)科技有限公司 基于知识图谱的石化领域问答方法及系统
CN109522835A (zh) * 2018-11-13 2019-03-26 北京光年无限科技有限公司 基于智能机器人的儿童读物阅读与交互方法及系统

Also Published As

Publication number Publication date
CN111858861A (zh) 2020-10-30
WO2020221142A1 (zh) 2020-11-05

Similar Documents

Publication Publication Date Title
CN111858861B (zh) 一种基于绘本的问答交互方法及电子设备
CN111339774B (zh) 文本的实体关系抽取方法和模型训练方法
CN111553162B (zh) 一种意图识别的方法以及相关装置
CN110490213B (zh) 图像识别方法、装置及存储介质
US20200301954A1 (en) Reply information obtaining method and apparatus
CN110599557A (zh) 图像描述生成方法、模型训练方法、设备和存储介质
CN110795913A (zh) 一种文本编码方法、装置、存储介质及终端
CN113821589B (zh) 一种文本标签的确定方法及装置、计算机设备和存储介质
CN110852109A (zh) 语料生成方法、语料生成装置、和存储介质
CN111191136A (zh) 一种信息推荐方法以及相关设备
CN112214605A (zh) 一种文本分类方法和相关装置
CN110472008B (zh) 智能交互方法以及装置
CN103729476A (zh) 一种根据环境状态来关联内容的方法和系统
CN111353299B (zh) 基于人工智能的对话场景确定方法和相关装置
CN111813910A (zh) 客服问题的更新方法、系统、终端设备及计算机存储介质
CN117033799B (zh) 资源推荐方法、装置、计算机设备及存储介质
CN114328852A (zh) 一种文本处理的方法、相关装置及设备
CN111515970B (zh) 一种互动方法、拟态机器人和相关装置
US20200257954A1 (en) Techniques for generating digital personas
CN112862021B (zh) 一种内容标注方法和相关装置
CN116910201A (zh) 一种对话数据生成方法及其相关设备
CN116643814A (zh) 模型库构建方法、基于模型库的模型调用方法和相关设备
CN112138410B (zh) 一种虚拟对象的交互方法以及相关装置
CN118214735A (zh) 对话生成方法及装置、计算机可读介质和电子设备
CN112749364B (zh) 基于人工智能的网页生成方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant