CN111061953A - 智能终端交互方法、装置、终端设备及存储介质 - Google Patents

智能终端交互方法、装置、终端设备及存储介质 Download PDF

Info

Publication number
CN111061953A
CN111061953A CN201911308311.3A CN201911308311A CN111061953A CN 111061953 A CN111061953 A CN 111061953A CN 201911308311 A CN201911308311 A CN 201911308311A CN 111061953 A CN111061953 A CN 111061953A
Authority
CN
China
Prior art keywords
information
target
target user
user
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911308311.3A
Other languages
English (en)
Inventor
夏严辉
熊友军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Ubtech Technology Co ltd
Original Assignee
Shenzhen Ubtech Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Ubtech Technology Co ltd filed Critical Shenzhen Ubtech Technology Co ltd
Priority to CN201911308311.3A priority Critical patent/CN111061953A/zh
Publication of CN111061953A publication Critical patent/CN111061953A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请适用于人机交互技术领域,提供了一种智能终端交互方法、装置、终端设备及存储介质,智能终端交互方法包括获取目标用户的身份标识;根据所述目标用户的身份标识,确定目标交互模式;其中,每一所述身份标识对应至少一个所述目标交互模式;基于所述目标交互模式与所述目标用户进行交互,并根据与所述目标用户的交互信息对目标交互模式进行更新。通过上述方法实现根据不同的用户选择对应的交互模式,以实现用最佳的交互模式与用户进行交互,提高用户的体验感。同时,根据与用户的交互信息提取用户的爱好、习惯等信息,并将提取的信息存储到用户对应的交互模式中,丰富交互模式的内容,使交互模式更加符合对应用户的需求,提高用户的体验感。

Description

智能终端交互方法、装置、终端设备及存储介质
技术领域
本申请属于人机交互技术领域,尤其涉及一种智能终端交互方法、装置、终端设备及存储介质。
背景技术
随着人机交互技术的发展,能够实现人机交互的智能终端被应用于各个领域,智能终端可以与人进行交互,实现对人的服务。但是当前的智能终端只能使用某种预置的交互模式与用户进行交互,交互模式单一,影响用户的体验感。
发明内容
本申请实施例提供了一种智能终端交互方法、装置、终端设备及存储介质,可以解决智能终端交互模式单一的问题。
第一方面,本申请实施例提供了一种智能终端交互方法,包括:
获取目标用户的身份标识;
根据所述目标用户的身份标识,确定目标交互模式;其中,每一所述身份标识对应至少一个所述目标交互模式;
基于所述目标交互模式与所述目标用户进行交互,并根据与所述目标用户的交互信息对所述目标交互模式进行更新。
在第一方面的一种可能的实现方式中,所述获取目标用户的身份标识,包括:
采集所述目标用户的人脸图像和/或声音信息;
提取所述人脸图像中的人脸特征,和/或所述声音信息的声纹特征;
基于所述人脸特征在数据库中匹配对应的预设人脸特征,和/或基于所述声纹特征在所述数据库中匹配对应的预设声纹特征;其中,所述数据库中预存有多组身份参数,每组所述身份参数包括一预设人脸特征、一预设声纹特征和一身份标识;
基于匹配到的预设人脸特征和/或预设声纹特征,确定所述目标用户的身份标识。
在第一方面的一种可能的实现方式中,所述数据库中还预存有多组交互模式配置参数,每组所述交互模式配置参数包括一身份标识、一情绪特征和一预设交互模式;
所述根据所述目标用户的身份标识,确定目标交互模式,包括:
基于所述人脸图像和/或所述声音信息确定所述目标用户的当前情绪特征;
在所述数据库中匹配与所述身份标识和所述当前情绪特征对应的目标交互模式。
在第一方面的一种可能的实现方式中,所述基于所述目标交互模式与所述目标用户进行交互,包括:
获取所述目标用户的人脸图像、肢体信息和声音信息中的至少一种信息;
基于所述人脸图像、所述肢体信息和/或所述声音信息确定所述目标用户的当前需求信息;
根据所述当前需求信息推送推荐信息。
在第一方面的一种可能的实现方式中,所述目标交互模式中设有限制信息类别;
所述基于所述目标交互模式与所述目标用户进行交互,还包括:
获取所述目标用户的指令信息;
判断所述指令信息是否属于所述限制信息类别对应的信息;
在所述指令信息属于所述限制信息类别对应的信息的情况下,向所述目标用户回复预设的应答信息。
在第一方面的一种可能的实现方式中,所述根据与所述目标用户的交互信息对所述目标交互模式进行更新,包括:
获取所述目标用户的用户特征信息,所述用户特征信息包括人脸图像、肢体信息和声音信息中的至少一种信息;
基于所述用户特征信息提取所述目标用户的习惯信息;
基于所述习惯信息对所述目标用户对应的目标交互模式进行更新。
在第一方面的一种可能的实现方式中,所述方法还包括:
获取所述目标用户输入的信息修改指令;其中,所述信息修改指令包括身份标识修改指令和交互模式修改指令;
根据所述目标用户的身份标识确定所述目标用户的管理权限;
在所述管理权限包括管理员权限的情况下,执行所述修改指令。
第二方面,本申请实施例提供了一种智能终端交互装置,包括:
身份标识获取模块,用于获取目标用户的身份标识;
目标交互模式确定模块,用于根据所述目标用户的身份标识,确定目标交互模式;其中,每一所述身份标识对应至少一个所述目标交互模式;
交互学习模块,用于基于所述目标交互模式与所述目标用户进行交互,并根据与所述目标用户的交互信息对所述目标交互模式进行更新。
第三方面,本申请实施例提供了一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面任一项所述的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面任一项所述的方法。
第五方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在终端设备上运行时,使得终端设备执行上述第一方面中任一项所述的方法。
本申请实施例与现有技术相比存在的有益效果是:
本申请实施例通过获取目标用户的身份标识,根据目标用户的身份标识,确定目标交互模式,基于目标交互模式与目标用户进行交互,从而实现根据不同的用户选择对应的交互模式,以实现用最佳的交互模式与用户进行交互,提高用户的体验感。同时,根据与目标用户的交互信息对目标交互模式进行更新,可以根据与目标用户的交互信息提取目标用户的爱好、习惯等信息,并将提取的信息存储到目标用户对应的目标交互模式中,丰富交互模式的内容,使交互模式更加符合对应用户的需求,提高用户的体验感。
可以理解的是,上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的智能终端交互方法的应用环境示意图;
图2是本申请一实施例提供的智能终端交互方法的流程示意图;
图3是本申请一实施例提供的智能终端交互方法的流程示意图;
图4是本申请一实施例提供的智能终端交互方法的流程示意图;
图5是本申请一实施例提供的智能终端交互方法的流程示意图;
图6是本申请一实施例提供的智能终端交互方法的流程示意图;
图7是本申请一实施例提供的智能终端交互装置的结构示意图;
图8是本申请实施例提供的终端设备的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,当在本申请说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
随着人机交互技术的发展,能够实现人机交互的智能终端被应用于各个领域,智能终端可以与人进行交互,实现对人的服务。但是当前的智能终端只能使用某种预置的交互模式与用户进行交互,交互模式单一,影响用户的体验感。
基于上述问题,本申请实施例中的智能终端交互方法,通过获取用户的身份标识,根据用户的身份标识,确定交互模式,基于交互模式与用户进行交互,上述方法实现根据不同的用户身份信息选择对应的交互模式,以实现用最佳的交互模式与用户进行交互,提高用户的体验感。同时,根据与用户的交互信息对目标交互模式进行更新,根据与用户的交互信息提取用户的爱好、习惯等信息,并将提取的信息存储到用户对应的交互模式中,丰富交互模式的内容,使交互模式更加符合对应用户的需求,与用户的交互时间越长,交互模式越贴合用户的需求,提高用户的体验感。
先介绍本申请中智能终端交互方法的一个应用场景。参见图1,为本申请实施例提供的智能终端交互方法的应用环境示意图。如图1所示,智能终端10可以为移动机器人(例如服务机器人、引路机器人等)或固定智能设备(例如智能音箱、家居智能控制机器人或智能手机等),智能终端10可以与用户20进行交互,满足用户20的需求,例如控制电器的开关、回答问题或做家务等。
智能终端10在与用户20进行交互时,首先获取用户20的身份标识,例如用户20的性别、年龄等信息。然后根据用户20的身份标识选择对应的交互模式与用户20进行交互,例如用户20为小女孩儿时,智能终端10会使用小萝莉的声音与用户20交互;用户20为老年人时,智能终端10会向用户20推荐一些养生知识等。以此实现智能终端10能够基于不同身份标识的用户20选择不同的交互模式,交互时更能贴合用户20的爱好和习惯,从而提高用户20的体验感。
智能终端10在与用户20进行交互时,还可以在用户20交互的内容中提取用户20的习惯和爱好等信息,并将提取的用户20的习惯和爱好等信息存储到与用户20对应的交互模式中,实现智能终端10的自主学习,交互时间越长,交互模式越符合用户20的实际需求,可以提高用户20的体验感。例如交互时用户20经常提到电影相关的内容,智能终端10可以获取用户20喜好电影的信息,经过智能终端10的自主学习,交互时智能终端10可以主动推荐一些最新的电影资讯。
如图2示出了本申请一实施例提供的智能终端交互方法的流程示意图,作为示例而非限定,所述方法可以包括以下步骤:
S201,获取目标用户的身份标识。
在一些实施例中,目标用户的身份标识可以包括目标用户的人脸图像、声音信息和指纹信息等信息中的至少一种信息,通过获取目标用户的人脸图像、声音信息和指纹信息等信息中的至少一种信息,然后将获取的信息和预存的信息进行比对,可以确定目标用户的身份。
示例性的,参照图3,步骤S201具体可以包括:
S2011,采集目标用户的人脸图像和/或声音信息。
具体地,可以通过图像采集装置对目标用户的人脸图像进行采集,通过声音采集装置对目标用户的声音信息进行采集。例如,可以通过摄像头采集目标用户的人脸图像,可以通过声音传感器采集目标用户的声音信息。
需要说明的是,步骤S2011中除了采集目标用户的人脸图像和声音信息之外,还可以通过采集目标用户的其他信息实现对用户身份的确定,例如指纹和静脉等信息。
S2012,提取人脸图像中的人脸特征,和/或声音信息的声纹特征。
具体地,经过步骤S2011采取到目标用户的人脸图像和声音信息后,可以利用一些算法对人脸图像和声音信息进行特征的提取,得到人脸特征和声纹特征,用于对用户身份的确认。
S2013,基于人脸特征在数据库中匹配对应的预设人脸特征,和/或基于声纹特征在数据库中匹配对应的预设声纹特征。
其中,数据库中预存有多组身份参数,每组身份参数包括一预设人脸特征、一预设声纹特征和一身份标识。
具体地,每组身份参数中的预设人脸特征、预设声纹特征和身份标识为一一对应关系,可以预先采集用户的人脸图像和声音信息作为预设人脸特征和预设声纹特,并将该用户的身份标识、预设人脸特征和预设声纹特进行关联后进行存储,完成用户身份参数的设置。经过步骤S2012对人脸图像和声音信息进行特征的提取,得到人脸特征和声纹特征后,在数据库中进行匹配,得到预设人脸特征和预设声纹特征,用于用户身份的确定。
示例性的,智能终端应用于一个家庭,家庭成员有父亲、母亲、女儿和儿子,用户身份信息可以包括父亲、母亲、女儿、儿子和访客(除家庭成员之外的人),获取目标用户的身份标识的方式为采集人脸图像。
首先,需要预先对各个家庭成员的人脸图像信息进行采集,生成预设人脸特征,将预设人脸特征与对应的身份标识存储到数据库中;在检测到用户想要进行交互时,智能终端首先采集目标用户的人脸图像,然后从人脸图像中提取人脸特征,并将提取到的人脸特征与数据库中的预设人脸特征进行匹配,然后根据匹配到的预设人脸特征确定对应的身份标识,以此实现对目标用户身份的识别。其中,在目标用户的人脸图像和数据库中所有的预设人脸特征均没有匹配成功的情况下,将该目标用户的身份信息作为访客。
S2014,基于匹配到的预设人脸特征和/或预设声纹特征,确定目标用户的身份标识。
具体地,由于每组身份参数中的预设人脸特征、预设声纹特征和身份标识为一一对应关系,因此只要目标用户的人脸特征与数据库中预设人脸特征匹配成功,或者目标用户的声纹特征和数据库中的预设声纹特征匹配成功,即可得到对应的身份标识,实现目标用户身份的确认。
S202,根据目标用户的身份标识,确定目标交互模式。
具体地,每一身份标识对应至少一个目标交互模式,每个身份标识对应一个用户的身份,可以针对用户当前的情绪状态设置不同的交互模式,以满足用户不同情感状态下的需求。
一些实施例中,交互模式可以根据用户的性别、年龄、使用成员中的位置、教育水平、职业、身体状况、收入和喜好中任意组合进行设计。
示例性的,用户A为女性,年龄19岁,喜欢流行音乐和喜剧电影;用户B为男性,年龄60岁,喜欢健身和养生;用户C为男性,年龄30岁,喜欢投资理财和经典音乐。当目标用户身份信息确认为用户A时,智能终端推荐目前流行的音乐或刚刚上映的喜剧电影等;当目标用户身份信息确认为用户B时,智能终端会推荐一些养生知识和适合老年人健身的做法;当目标用户身份信息确认为用户B时,智能终端会推荐一些理财知识或经典音乐等。通过为用户针对性的设定交互模式,更加符合用户的需求,从而能够提高用户的体验感。
示例性的,参照图4,步骤S202具体可以包括:
S2021,基于人脸图像和/或声音信息确定目标用户的当前情绪特征。
具体地,通过采集用户的人脸图像可以识别用户的表情,通过对表情的分析可以判断用户当前的情绪状态。例如用户面带微笑,则用户处于愉快状态;用户面部出现难过表情,则用户处于悲伤难过状态。也可以通过采集用户的声音信息判断用户当前的情绪状态。例如用户发出的声音为平缓的笑声,则用户处于愉快状态;用户发出高亢喊叫的声音,则客户处于激动状态。
需要说明的时,在对用户情绪判断时,不仅仅限于通过人脸图像和声音信息进行判断,还可以通过其他方式,例如通过采集用户的肢体动作也可以判断用户当前的情绪状态。可选的,可以通过综合分析用户的人脸图像、声音信息和肢体动作确定用户当前情绪状态,能够可以提高对用户当前情绪状态判断的准确性。
S2022,在数据库中匹配与身份标识和当前情绪特征对应的目标交互模式。
具体地,经过步骤S2021确定可用户的当前情绪特征后,再与数据库中预存的多个预设情绪特征进行匹配,最后确定目标交互模式。
示例性的,数据库中存储用户甲的交互模式共有两种,分别为与用户甲的情绪特征对应的第一交互模式和第二交互模式。在人机交互时,通过采集用户甲的人脸图像和声音信息判断用户甲的当前情绪特征(即当前情绪状态),在用户甲的当前情绪状态为高兴、愉悦时,智能终端通过第一交互模式与用户甲进行交互,例如此时用户甲要求智能终端播放音乐,智能终端会播放一些节奏轻快的音乐;在用户甲的当前情绪状态为悲伤、难过时,智能终端通过第二交互模式与用户甲进行交互,例如此时用户甲要求智能终端播放音乐时,智能终端会播放一些缓慢、利于缓解悲伤的音乐。
本实施例中,针对用户不同的情绪状态使用不同的交互模式,更能够贴合用户当前的实际需求,从而提高用户的体验感。
S203,基于目标交互模式与目标用户进行交互,并根据与目标用户的交互信息对目标交互模式进行更新。
具体地,当目标交互模式确定后,通过采集目标用户的人脸图像、肢体信息和声音信息等信息判定目标用户的需求,然后根据目标用户的需求进行相应的响应。
示例性的,参照图5,步骤S203具体可以包括:
S2031,获取目标用户的人脸图像、肢体信息和声音信息中的至少一种信息。
具体地,可以通过图像采集装置采集目标用户的人脸图像和肢体信息,可以通过声音传感器采集目标用户的声音信息。目标用户可以通过声音信息向智能终端下发各种命令指令,例如,目标用户说“播放音乐”、“开灯”或“打开电视”等命令的语言;目标用户也可以通过表情的变化和肢体动作(手势命令)向智能终端下发指令。智能终端通过采集目标用户的人脸图像、声音信息和肢体信息中的一种或多种信息判断目标用户的需求信息。
可选的,通过获取的人脸图像、肢体信息或声音信息确定发送需求信息的目标用户。智能终端可以同时获取目标用户的人脸图像、肢体信息和声音信息,当智能终端和多个用户同时交互时,当其中的一个用户说“播放音乐”,此时智能终端可以通过对声音信息进行特征提取,确定多个用户中发出命令的目标用户,通过人脸图像分析“播放音乐”这个指令发起的目标用户,以此实现目标用户的精准定位,待目标用户确定后,智能终端推荐播放一些符合目标用户当前情绪状态的歌曲。
S2032,基于人脸图像、肢体信息和/或声音信息确定目标用户的当前需求信息。
具体地,对步骤S2031采集的人脸图像、肢体信息和声音信息进行特征提取,确定目标用户的当前需求信息。
示例性的,可以对采集的目标用户的声音信息进行关键字的提取,根据提取的关键字确定目标用户的当前需求信息。例如,当目标用户说“今天天气挺好的,给我播放一首歌曲吧”,智能终端提取的关键字可以为“播放、天气好、歌曲”,从而根据上述关键字确定目标用户的当前需求为播放轻松愉快的歌曲。
示例性的,可以对采集的目标用户的肢体信息进行特征提取,根据提取的肢体特征确定目标用户的当前需求信息。其中,在数据库中可以预存有多对一一对应的预设肢体特征与需求信息。例如,手势信息,用户指向电视,然后用户的手由拳头变为手掌,则可以确定用户当前需求为打开电视。
S2033,根据当前需求信息推送推荐信息。
需要说明的是,当确定目标用户的当前需求后,除了推送推荐信息之外,还可以做出其他相应动作,例如,控制各类电器开关等。
示例性的,目标用户说“我想看电视”,智能终端确定目标用户的当前需求为打开电视,进而控制打开电视机。
一些实施例中,可以根据与目标用户的交互信息对目标交互模式进行更新。例如,智能终端可以在交互信息中提取关键信息,例如目标用户的习惯和爱好等信息,然后将目标用户的习惯和爱好等信息存储在目标用户对应的目标交互模式中,在下次采用该目标交互模式进行交互时,可以根据目标用户的习惯和爱好信息向目标用户推荐信息。
通过以上方法实现智能终端自主学习,对目标交互模式进行丰富,随着与目标用户交互的时间越长,目标交互模式越符合目标用户的爱好习惯等需求,从而提高目标用户的体验感。例如,智能终端可以通过提取与用户的历史交互信息中的关键信息。例如,人机交互时,用户经常谈论篮球比赛,此时可以提取“篮球”关键信息,并将关键信息“篮球”存储在该用户对应的交互模式中,在交互时,可以进行“篮球”信息(比赛、球员新闻等)的推荐。
示例性的,智能终端根据与目标用户的交互信息对目标交互模式进行更新的具体方法可以包括:
步骤A1,获取目标用户的人脸图像、肢体信息和/或声音信息。
步骤B1,基于人脸图像、肢体信息和/或声音信息提取目标用户的习惯信息。
步骤C1,基于习惯信息对目标用户对应的目标交互模式进行更新。
需要说明的是,步骤C1中对交互模式进行更新具体可以是将目标用户的习惯信息存储在该目标交互模式中,以使目标交互模式更加丰富,符合目标用户的实际需求。
为了满足用户的保密要求或其他要求,可以对不同的用户对应的交互模式中设置限制信息类别,当用户提出的命令属于限制信息类别,此时智能终端不做出回应或者发送一些预设的应答信息。
示例性的,智能终端使用目标交互模式与目标用户的交互方法具体可以包括:
步骤A2,获取目标用户的指令信息。
步骤B2,判断指令信息是否属于限制信息类别对应的信息。
步骤C2,在指令信息属于限制信息类别对应的信息的情况下,向目标用户回复预设的应答信息。
为了清楚的对限制信息类别的作用,以一个具体的应用场景进行说明。
智能终端应用于一个家庭,家庭成员有父亲、孩子(9岁)和爷爷(有心脏病),其他人身份均为访客。可以在访客对应的交互模式中将主人的隐私信息(例如银行卡、保险柜、门禁的各类密码)设置为限制信息类别,当访客询问主人的密码时,智能终端回复预设的应答信息,例如回答访客“此问题是主人的隐私,小人不敢乱说哦!”。可以在孩子对应的交互模式中将黄色和暴力设置为限制信息类别,以此保证智能终端与孩子交互时,不会推荐相关内容,或者不与孩子交互相关内容,以保证孩子的健康成长。可以在爷爷对应的交互模式中将刺激设置为限制信息类别,以保证在人机交互时不会出现刺激类别的信息,防止爷爷心脏受到刺激。
图6是本申请一实施例提供的智能终端交互方法的流程示意图,基于图2所示的实施例,该智能终端交互方法还可以包括:
S2001,获取目标用户输入的信息修改指令;其中,信息修改指令包括身份标识修改指令和交互模式修改指令。
具体地,身份标识修改指令可以包括身份标识的删除、增加和修改,交互模式修改指令可以包括交互模式的删除、增加和修改。
S2002,根据目标用户的身份标识确定目标用户的管理权限。
S2003,在管理权限包括管理员权限的情况下,执行修改指令。
具体地,管理权限为管理员权限的用户可以进行各种数据的修改,例如,添加新成员、删除已有成员或对已有成员存储的身份标识和交互模式进行修改等。设置管理员权限可以防止数据库中内容被其他人随意更改,只能允许管理员权限的用户进行修改,保证了数据的安全性。
上述智能终端交互方法,通过获取用户的身份标识,根据用户的身份标识,确定目标交互模式,基于目标交互模式与目标用户进行交互,从而实现根据不同的用户身份信息选择对应的交互模式,以实现用最佳的交互模式与用户进行交互,提高用户的体验感。同时,根据与目标用户的交互信息进行学习,可以根据与目标用户的交互信息提取用户的爱好、习惯等信息,并将提取的信息存储到用户对应的交互模式中,丰富交互模式的内容,使交互模式更加符合对应用户的需求,提高用户的体验感。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
对应于上文实施例的智能终端交互方法,图7示出了本申请实施例提供的智能终端交互装置的结构框图,为了便于说明,仅示出了与本申请实施例相关的部分。
参见图7,本申请实施例中的智能终端交互装置可以包括身份标识获取模块71、目标交互模式确定模块72和交互学习模块73。
其中,身份标识获取模块71,用于获取目标用户的身份标识;
目标交互模式确定模块72,用于根据所述目标用户的身份标识,确定目标交互模式;其中,每一所述身份标识对应至少一个所述目标交互模式;
交互学习模块73,用于基于所述目标交互模式与所述目标用户进行交互,并根据与所述目标用户的交互信息对所述目标交互模式进行更新。
可选的,身份标识获取模块71可以包括信息采集模块、特征提取模块、预设特征确定模块和目标用户的身份标识确定模块。
其中,信息采集模块,用于采集所述目标用户的人脸图像和/或声音信息;
特征提取模块,用于提取所述人脸图像中的人脸特征,和/或所述声音信息的声纹特征;
预设特征确定模块,用于基于所述人脸特征在数据库中匹配对应的预设人脸特征,和/或基于所述声纹特征在所述数据库中匹配对应的预设声纹特征;其中,所述数据库中预存有多组身份参数,每组所述身份参数包括一预设人脸特征、一预设声纹特征和一身份标识;
目标用户的身份标识确定模块,用于基于匹配到的预设人脸特征和/或预设声纹特征,确定所述目标用户的身份标识。
可选的,目标交互模式确定模块72可以包括当前情绪特征获取模块和匹配模块。
其中,当前情绪特征获取模块,用于基于所述人脸图像和/或所述声音信息确定所述目标用户的当前情绪特征;
匹配模块,用于在所述数据库中匹配与所述身份标识和所述当前情绪特征对应的目标交互模式。
可选的,交互学习模块73可以包括第一信息获取模块、当前需求信息获取模块和推送模块。
其中,第一信息获取模块,用于获取所述目标用户的人脸图像、肢体信息和声音信息中的至少一种信息;
当前需求信息获取模块,用于基于所述人脸图像、所述肢体信息和/或所述声音信息确定所述目标用户的当前需求信息;
推送模块,用于根据所述当前需求信息推送推荐信息。
可选的,交互学习模块73还可以包括指令信息获取模块、判断模块和应答模块。
其中,指令信息获取模块,用于获取所述目标用户的指令信息;
判断模块,用于判断所述指令信息是否属于所述限制信息类别对应的信息;
应答模块,用于在所述指令信息属于所述限制信息类别对应的信息的情况下,向所述目标用户回复预设的应答信息。
可选的,交互学习模块73还包括第二信息获取模块、习惯信息提取模块和更新模块。
其中,第二信息获取模块,用于获取所述目标用户的用户特征信息,所述用户特征信息包括人脸信息、肢体信息和声音信息中的至少一种信息;
习惯信息提取模块,用于基于所述人脸图像、所述肢体信息和/或所述声音信息提取所述目标用户的习惯信息;
更新模块,用于基于所述习惯信息对所述目标用户对应的目标交互模式进行更新。
可选的,智能终端交互装置还可以包括信息修改指令获取模块、管理权限确定模块和执行模块。
其中,信息修改指令获取模块,用于获取所述目标用户输入的信息修改指令;其中,所述信息修改指令包括身份标识修改指令和交互模式修改指令;
管理权限确定模块,用于根据所述目标用户的身份标识确定所述目标用户的管理权限;
执行模块,用于在所述管理权限包括管理员权限的情况下,执行所述修改指令。
需要说明的是,上述装置/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
另外,图7所示的智能终端交互装置可以是内置于现有的终端设备内的软件单元、硬件单元、或软硬结合的单元,也可以作为独立的挂件集成到所述终端设备中,还可以作为独立的终端设备存在。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
图8为本申请一实施例提供的终端设备的结构示意图。如图8所示,该实施例的终端设备8可以包括:至少一个处理器80(图8中仅示出一个处理器80)、存储器81以及存储在所述存储器81中并可在所述至少一个处理器80上运行的计算机程序82,所述处理器80执行所述计算机程序82时实现上述任意各个应用智能终端交互方法实施例中的步骤,例如图2所示实施例中的步骤S201至步骤S203。或者,处理器51执行所述计算机程序82时实现上述智能终端交互装置实施例中各模块/单元的功能,例如图7所示模块71至73的功能。
示例性的,所述计算机程序82可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器81中,并由所述处理器80执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序82指令段,该指令段用于描述所述计算机程序82在所述终端设备8中的执行过程。
所述终端设备8可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该终端设备8可包括,但不仅限于,处理器80、存储器81。本领域技术人员可以理解,图8仅仅是终端设备8的举例,并不构成对终端设备8的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如还可以包括输入输出设备、网络接入设备等。
所称处理器80可以是中央处理单元(Central Processing Unit,CPU),该处理器80还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器81在一些实施例中可以是所述终端设备8的内部存储单元,例如终端设备8的硬盘或内存。所述存储器81在另一些实施例中也可以是所述终端设备8的外部存储设备,例如所述终端设备8上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器81还可以既包括所述终端设备8的内部存储单元也包括外部存储设备。所述存储器81用于存储操作系统、应用程序、引导装载程序(BootLoader)、数据以及其他程序等,例如所述计算机程序82的程序代码等。所述存储器81还可以用于暂时地存储已经输出或者将要输出的数据。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序82,所述计算机程序82被处理器80执行时实现可实现上述各个方法实施例中的步骤。
本申请实施例提供了一种计算机程序产品,当计算机程序产品在移动终端上运行时,使得移动终端执行时实现可实现上述各个方法实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,可以通过计算机程序82来指令相关的硬件来完成,所述的计算机程序82可存储于一计算机可读存储介质中,该计算机程序82在被处理器80执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序82包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括:能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区,根据立法和专利实践,计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/网络设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/网络设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。

Claims (10)

1.一种智能终端交互方法,其特征在于,包括:
获取目标用户的身份标识;
根据所述目标用户的身份标识,确定目标交互模式;其中,每一所述身份标识对应至少一个所述目标交互模式;
基于所述目标交互模式与所述目标用户进行交互,并根据与所述目标用户的交互信息对所述目标交互模式进行更新。
2.根据权利要求1所述的智能终端交互方法,其特征在于,所述获取目标用户的身份标识,包括:
采集所述目标用户的人脸图像和/或声音信息;
提取所述人脸图像中的人脸特征,和/或所述声音信息的声纹特征;
基于所述人脸特征在数据库中匹配对应的预设人脸特征,和/或基于所述声纹特征在所述数据库中匹配对应的预设声纹特征;其中,所述数据库中预存有多组身份参数,每组所述身份参数包括一预设人脸特征、一预设声纹特征和一身份标识;
基于匹配到的预设人脸特征和/或预设声纹特征,确定所述目标用户的身份标识。
3.根据权利要求2所述的智能终端交互方法,其特征在于,所述数据库中还预存有多组交互模式配置参数,每组所述交互模式配置参数包括一身份标识、一情绪特征和一预设交互模式;
所述根据所述目标用户的身份标识,确定目标交互模式,包括:
基于所述人脸图像和/或所述声音信息确定所述目标用户的当前情绪特征;
在所述数据库中匹配与所述身份标识和所述当前情绪特征对应的目标交互模式。
4.根据权利要求1所述的智能终端交互方法,其特征在于,所述基于所述目标交互模式与所述目标用户进行交互,包括:
获取所述目标用户的人脸图像、肢体信息和声音信息中的至少一种信息;
基于所述人脸图像、所述肢体信息和/或所述声音信息确定所述目标用户的当前需求信息;
根据所述当前需求信息推送推荐信息。
5.根据权利要求4所述的智能终端交互方法,其特征在于,所述目标交互模式中设有限制信息类别;
所述基于所述目标交互模式与所述目标用户进行交互,还包括:
获取所述目标用户的指令信息;
判断所述指令信息是否属于所述限制信息类别对应的信息;
在所述指令信息属于所述限制信息类别对应的信息的情况下,向所述目标用户回复预设的应答信息。
6.根据权利要求1至5任一项所述的智能终端交互方法,其特征在于,所述根据与所述目标用户的交互信息对所述目标交互模式进行更新,包括:
获取所述目标用户的用户特征信息,所述用户特征信息包括人脸图像、肢体信息和声音信息中的至少一种信息;
基于所述用户特征信息提取所述目标用户的习惯信息;
基于所述习惯信息对所述目标用户对应的目标交互模式进行更新。
7.根据权利要求1至5任一项所述的智能终端交互方法,其特征在于,所述方法还包括:
获取所述目标用户输入的信息修改指令;其中,所述信息修改指令包括身份标识修改指令和交互模式修改指令;
根据所述目标用户的身份标识确定所述目标用户的管理权限;
在所述管理权限包括管理员权限的情况下,执行所述修改指令。
8.一种智能终端交互装置,其特征在于,包括:
身份标识获取模块,用于获取目标用户的身份标识;
目标交互模式确定模块,用于根据所述目标用户的身份标识,确定目标交互模式;其中,每一所述身份标识对应至少一个所述目标交互模式;
交互学习模块,用于基于所述目标交互模式与所述目标用户进行交互,并根据与所述目标用户的交互信息对所述目标交互模式进行更新。
9.一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的方法。
CN201911308311.3A 2019-12-18 2019-12-18 智能终端交互方法、装置、终端设备及存储介质 Pending CN111061953A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911308311.3A CN111061953A (zh) 2019-12-18 2019-12-18 智能终端交互方法、装置、终端设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911308311.3A CN111061953A (zh) 2019-12-18 2019-12-18 智能终端交互方法、装置、终端设备及存储介质

Publications (1)

Publication Number Publication Date
CN111061953A true CN111061953A (zh) 2020-04-24

Family

ID=70302171

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911308311.3A Pending CN111061953A (zh) 2019-12-18 2019-12-18 智能终端交互方法、装置、终端设备及存储介质

Country Status (1)

Country Link
CN (1) CN111061953A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111817929A (zh) * 2020-06-01 2020-10-23 青岛海尔智能技术研发有限公司 设备交互方法、装置、家居设备和存储介质
CN112306238A (zh) * 2020-10-27 2021-02-02 北京字节跳动网络技术有限公司 交互方式的确定方法、装置、电子设备及存储介质
CN112395435A (zh) * 2020-11-17 2021-02-23 华北电力大学扬中智能电气研究中心 一种多媒体资源推荐方法、装置、设备及介质
CN112965599A (zh) * 2021-03-08 2021-06-15 深圳市优必选科技股份有限公司 一种机器人与终端的交互方法、装置及机器人
CN113035203A (zh) * 2021-03-26 2021-06-25 合肥美菱物联科技有限公司 一种动态变换语音应答风格的控制方法
CN113160832A (zh) * 2021-04-30 2021-07-23 合肥美菱物联科技有限公司 一种支持声纹识别的语音洗衣机智能控制系统及方法
CN113215772A (zh) * 2021-04-30 2021-08-06 合肥美菱物联科技有限公司 一种支持身份识别的洗衣机智能控制系统及方法
CN113282829A (zh) * 2021-06-07 2021-08-20 青岛海尔科技有限公司 用于智慧家庭用户交互的方法、系统、装置及设备
CN114697686A (zh) * 2020-12-25 2022-07-01 北京达佳互联信息技术有限公司 一种线上互动方法、装置、服务器及存储介质
CN115202552A (zh) * 2022-07-14 2022-10-18 北京地平线信息技术有限公司 交互功能的推荐方法、装置、电子设备和存储介质
WO2024124481A1 (zh) * 2022-12-15 2024-06-20 北京可以科技有限公司 人机交互装置及人机交互方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102736824A (zh) * 2011-04-07 2012-10-17 国民技术股份有限公司 一种人机交互方法、人机交互模块及终端
CN103533415A (zh) * 2013-10-12 2014-01-22 青岛旲天下智能科技有限公司 基于声控式人机交互技术的互联网电视系统及其实现方法
CN106446266A (zh) * 2016-10-18 2017-02-22 微鲸科技有限公司 推荐用户喜爱内容的方法以及内容推荐系统
CN108763307A (zh) * 2018-04-24 2018-11-06 康佳集团股份有限公司 一种基于电视机的人脸识别方法、系统及可存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102736824A (zh) * 2011-04-07 2012-10-17 国民技术股份有限公司 一种人机交互方法、人机交互模块及终端
CN103533415A (zh) * 2013-10-12 2014-01-22 青岛旲天下智能科技有限公司 基于声控式人机交互技术的互联网电视系统及其实现方法
CN106446266A (zh) * 2016-10-18 2017-02-22 微鲸科技有限公司 推荐用户喜爱内容的方法以及内容推荐系统
CN108763307A (zh) * 2018-04-24 2018-11-06 康佳集团股份有限公司 一种基于电视机的人脸识别方法、系统及可存储介质

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111817929B (zh) * 2020-06-01 2024-05-14 青岛海尔智能技术研发有限公司 设备交互方法、装置、家居设备和存储介质
CN111817929A (zh) * 2020-06-01 2020-10-23 青岛海尔智能技术研发有限公司 设备交互方法、装置、家居设备和存储介质
CN112306238A (zh) * 2020-10-27 2021-02-02 北京字节跳动网络技术有限公司 交互方式的确定方法、装置、电子设备及存储介质
CN112395435A (zh) * 2020-11-17 2021-02-23 华北电力大学扬中智能电气研究中心 一种多媒体资源推荐方法、装置、设备及介质
CN114697686B (zh) * 2020-12-25 2023-11-21 北京达佳互联信息技术有限公司 一种线上互动方法、装置、服务器及存储介质
CN114697686A (zh) * 2020-12-25 2022-07-01 北京达佳互联信息技术有限公司 一种线上互动方法、装置、服务器及存储介质
CN112965599B (zh) * 2021-03-08 2023-11-21 深圳市优必选科技股份有限公司 一种机器人与终端的交互方法、装置及机器人
CN112965599A (zh) * 2021-03-08 2021-06-15 深圳市优必选科技股份有限公司 一种机器人与终端的交互方法、装置及机器人
CN113035203A (zh) * 2021-03-26 2021-06-25 合肥美菱物联科技有限公司 一种动态变换语音应答风格的控制方法
CN113215772A (zh) * 2021-04-30 2021-08-06 合肥美菱物联科技有限公司 一种支持身份识别的洗衣机智能控制系统及方法
CN113160832A (zh) * 2021-04-30 2021-07-23 合肥美菱物联科技有限公司 一种支持声纹识别的语音洗衣机智能控制系统及方法
CN113282829A (zh) * 2021-06-07 2021-08-20 青岛海尔科技有限公司 用于智慧家庭用户交互的方法、系统、装置及设备
CN115202552A (zh) * 2022-07-14 2022-10-18 北京地平线信息技术有限公司 交互功能的推荐方法、装置、电子设备和存储介质
WO2024124481A1 (zh) * 2022-12-15 2024-06-20 北京可以科技有限公司 人机交互装置及人机交互方法

Similar Documents

Publication Publication Date Title
CN111061953A (zh) 智能终端交互方法、装置、终端设备及存储介质
US10977452B2 (en) Multi-lingual virtual personal assistant
US20200043502A1 (en) Information processing method and device, multimedia device and storage medium
US8027518B2 (en) Automatic configuration of devices based on biometric data
US11646026B2 (en) Information processing system, and information processing method
CN108632653B (zh) 语音管控方法、智能电视及计算机可读存储介质
CN109979443A (zh) 一种用于机器人的权限管理控制方法及装置
CN112233698A (zh) 人物情绪识别方法、装置、终端设备及存储介质
CN108733429A (zh) 系统资源配置的调整方法、装置、存储介质及移动终端
US11282526B2 (en) Methods and systems for processing audio signals containing speech data
CN113436622A (zh) 一种智能语音助手的处理方法及装置
Saraswat et al. An incremental learning based gesture recognition system for consumer devices using edge-fog computing
CN109961152B (zh) 虚拟偶像的个性化互动方法、系统、终端设备及存储介质
CN116414959A (zh) 数字人的互动控制方法、装置、电子设备和存储介质
CN110544468A (zh) 应用唤醒方法、装置、存储介质及电子设备
CN108710516A (zh) 预测样本的采集方法、装置、存储介质及智能终端
CN116524924A (zh) 数字人交互控制方法、装置、电子设备和存储介质
CN108847243A (zh) 声纹特征更新方法、装置、存储介质及电子设备
CN111444321A (zh) 问答方法、装置、电子设备和存储介质
CN112497217B (zh) 一种机器人的交互方法、装置、终端设备及可读存储介质
CN114942718B (zh) 虚拟按键的设置方法、装置、介质以及电子设备
CN112820265B (zh) 一种语音合成模型训练方法和相关装置
US9674185B2 (en) Authentication using individual's inherent expression as secondary signature
CN107944056B (zh) 多媒体文件的识别方法、装置、终端及存储介质
CN111724795A (zh) 一种相册播放方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200424

RJ01 Rejection of invention patent application after publication