CN115171676A - 意图行为的确定方法和装置、存储介质及电子装置 - Google Patents
意图行为的确定方法和装置、存储介质及电子装置 Download PDFInfo
- Publication number
- CN115171676A CN115171676A CN202210603441.5A CN202210603441A CN115171676A CN 115171676 A CN115171676 A CN 115171676A CN 202210603441 A CN202210603441 A CN 202210603441A CN 115171676 A CN115171676 A CN 115171676A
- Authority
- CN
- China
- Prior art keywords
- behavior
- data
- determining
- characteristic
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000003860 storage Methods 0.000 title claims abstract description 12
- 230000002452 interceptive effect Effects 0.000 claims abstract description 31
- 230000006399 behavior Effects 0.000 claims description 275
- 230000003993 interaction Effects 0.000 claims description 97
- 238000004891 communication Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 9
- 230000009471 action Effects 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 4
- 238000010411 cooking Methods 0.000 description 16
- 238000004851 dishwashing Methods 0.000 description 16
- 230000008447 perception Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 6
- 235000013305 food Nutrition 0.000 description 5
- 239000000463 material Substances 0.000 description 5
- 241000287828 Gallus gallus Species 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 238000005520 cutting process Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 235000013311 vegetables Nutrition 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000005406 washing Methods 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 2
- 230000001680 brushing effect Effects 0.000 description 2
- 235000013601 eggs Nutrition 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 235000007688 Lycopersicon esculentum Nutrition 0.000 description 1
- 240000003768 Solanum lycopersicum Species 0.000 description 1
- 238000004887 air purification Methods 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Abstract
本申请公开了一种意图行为的确定方法和装置、存储介质及电子装置，涉及智慧家庭技术领域，该意图行为的确定方法包括：在第一对象与家电设备发生交互的情况下，获取第一对象对应的多媒体数据；其中，多媒体数据包括第一对象与家电设备的交互数据，以及第一对象所在空间区域的指定位置的图像数据；第一对象与家电设备均位于空间区域；根据空间区域的空间类型和多媒体数据对第一对象的意图进行分析；确定出第一对象的意图行为，采用上述技术方案，解决了如何准确确定用户的意图行为的问题。
Description
技术领域
本申请涉及智慧家庭技术领域，具体而言，涉及一种意图行为的确定方法和装置、存储介质及电子装置。
背景技术
目前，随着智慧家庭技术的不断发展，智能设备已经能够为用户提供多种多样的设备功能，极大的提高了用户家庭生活的便利性，但是目前的智能设备在为用户提供服务的准确性上仍然存在一些问题。
相关技术中，智能设备只能单一被动的接受用户明确发出的指令，在用户需求发生变化时，是无法主动预判用户当前场景下最急迫的需求，特别是在用户对设备交互的内容可能有多种不同意图的情况下，智能设备并不能从多种意图中智能分析出用户当下最可能的需求，导致智能设备反馈给用户的结果存在偏差，满足不了用户的真正需求，从而降低了用户的体验感。
因此，针对相关技术中，如何准确确定用户的意图行为的问题，尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种意图行为的确定方法和装置、存储介质及电子装置，以至少解决相关技术中，如何准确确定用户的意图行为的问题。
根据本申请实施例的一个实施例，提供了一种意图行为的确定方法，包括：在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析；确定出所述第一对象的意图行为。
在一个示例性实施例中，至少通过以下方式之一获取所述第一对象与所述家电设备的交互数据：通过所述第一对象所在空间区域内的图像采集装置获取所述第一对象与所述家电设备的视频交互数据；通过所述第一对象所在空间区域内的语音采集装置获取所述第一对象与所述家电设备的语音交互数据；在所述第一对象使用通信设备与所述家电设备进行通信时，通过所述通信设备获取所述第一对象与所述家电设备之间的交互数据。
在一个示例性实施例中，根据所述第一对象所在空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为，包括：在所述第一对象所在空间区域的空间类型与第一物品所在空间区域的空间类型一致的情况下，从所述交互数据中解析出所述第一对象与所述家电设备的语音交互数据，以及从所述图像数据中解析出所述空间区域内的第一物品的使用状态；确定所述语音交互数据对应的预先存储的多个交互结果；从多个所述交互结果中确定出与所述使用状态对应的目标交互结果；将所述目标交互结果对应的意图行为确定为所述第一对象的意图行为。
在一个示例性实施例中，确定所述语音交互数据对应的预先存储的多个交互结果，包括：接收移动终端发送的设置数据；其中，所述设置数据至少用于指示所述语音交互数据与不同的交互结果的对应关系；所述设置数据通过目标对象的输入操作确定；根据所述设置数据保存所述语音交互数据与不同的交互结果的对应关系，从所述对应关系中确定所述多媒体数据中解析出的语音交互数据所对应的多个交互结果。
在一个示例性实施例中，根据所述第一对象所在空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为，包括：对所述多媒体数据中的所述第一对象与所述家电设备的交互数据、所述图像数据对应的第二物品的使用数据进行特征提取，得到所述交互数据对应的第一语音特征，所述第二物品的使用数据对应的第二语音特征；在预先存储的语音特征信息表中查找与所述第一语音特征对应的第一特征行为、所述第二语音特征对应的第二特征行为，其中，所述语音特征信息表包括不同语音特征与不同特征行为的对应关系；在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为。
在一个示例性实施例中，在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为之前，所述方法还包括：在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内的情况下，从所述第一特征行为、所述第二特征行为中确定出发生时间最早的特征行为；获取所述空间区域的空间类型对应的行为动线，其中，所述行为动线包括预先设置的同一行为场景下的多个预设特征行为；在确定所述行为动线的首个预设特征行为与所述发生时间最早的特征行为一致的情况下，确定所述第一特征行为、所述第二特征行为对应于同一行为场景。
在一个示例性实施例中，确定出所述第一对象的意图行为之后，所述方法还包括：基于确定出的所述意图行为向所述第一对象发送语音询问信息；在确定预设时间段内没有收到所述第一对象针对所述语音询问信息的回复消息的情况下，控制所述家电设备响应所述第一对象的意图行为；在确定所述预设时间段内收到所述第一对象针对所述语音询问信息的回复消息的情况下，根据所述回复消息中的关键字确定所述第一对象的交互指令，并根据所述交互指令控制所述家电设备响应所述第一对象的交互指令。
根据本申请实施例的另一个实施例，还提供了一种意图行为的确定装置，包括：获取模块，用于在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；确定模块，用于根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
根据本申请实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述意图行为的确定方法。
根据本申请实施例的又一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，上述处理器通过计算机程序执行上述的意图行为的确定方法。
在本申请实施例中，在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析；确定出所述第一对象的意图行为；采用上述技术方案，解决了如何准确确定用户的意图行为的问题。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例的一种意图行为的确定方法的硬件环境示意图；
图2是根据本申请实施例的意图行为的确定方法的流程图；
图3是根据本申请实施例的意图行为的确定过程的示意图；
图4是根据本申请实施例的意图行为的确定方法的示意图(一)；
图5是根据本申请实施例的意图行为的确定方法的示意图(二)；
图6是根据本申请实施例的一种意图行为的确定装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本申请实施例的一个方面，提供了一种意图行为的确定方法。该意图行为的确定方法广泛应用于智慧家庭(Smart Home)、智能家居、智能家用设备生态、智慧住宅(IntelligenceHouse)生态等全屋智能数字化控制应用场景。可选地，在本实施例中，上述意图行为的确定方法可以应用于如图1所示的由终端设备102和服务器104所构成的硬件环境中。如图1所示，服务器104通过网络与终端设备102进行连接，可用于为终端或终端上安装的客户端提供服务(如应用服务等)，可在服务器上或独立于服务器设置数据库，用于为服务器104提供数据存储服务，可在服务器上或独立于服务器配置云计算和/或边缘计算服务，用于为服务器104提供数据运算服务。
上述网络可以包括但不限于以下至少之一：有线网络，无线网络。上述有线网络可以包括但不限于以下至少之一：广域网，城域网，局域网，上述无线网络可以包括但不限于以下至少之一：WIFI(Wireless Fidelity，无线保真)，蓝牙。终端设备102可以并不限定于为PC、手机、平板电脑、智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等。
在本实施例中提供了一种意图行为的确定方法，应用于上述计算机终端，图2是根据本申请实施例的意图行为的确定方法的流程图，该流程包括如下步骤：
步骤S202，在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；
其中，上述第一对象可以包括人，机器人等，但不限于此。
需要说明的是，上述家电设备包括智能家电设备和非智能家电设备，可以简称为智能设备，例如智能油烟机、智能音箱等。
需要说明的是，上述多媒体数据可以包括语音交互的语音数据、文本输入的文本数据、近场通信感应传输的通信数据等，但不限于此。
步骤S204，根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
通过上述步骤，在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析；确定出所述第一对象的意图行为，解决了相关技术中，如何准确确定用户的意图行为的问题。
在一个示例性实施例中，提出了多种获取所述第一对象与所述家电设备的交互数据的方式，包括：通过所述第一对象所在空间区域内的图像采集装置获取所述第一对象与所述家电设备的视频交互数据；通过所述第一对象所在空间区域内的语音采集装置获取所述第一对象与所述家电设备的语音交互数据；在所述第一对象使用通信设备与所述家电设备进行通信时，通过所述通信设备获取所述第一对象与所述家电设备之间的交互数据。
本实施例通过多种方式获取第一对象与所述家电设备的交互数据，实现了以多模态获取数据的方法，丰富了数据来源，扩大了数据量，能够为准确确定用户(即第一对象)的意图行为提供更全面的数据。
在一个示例性实施例中，为了更好的理解上述步骤S204中如何根据所述第一对象所在空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，以及确定出所述第一对象的意图行为，可以在所述第一对象所在空间区域的空间类型与第一物品所在空间区域的空间类型一致的情况下，从所述交互数据中解析出所述第一对象与所述家电设备的语音交互数据，以及从所述图像数据中解析出所述空间区域内的第一物品的使用状态；确定所述语音交互数据对应的预先存储的多个交互结果；从多个所述交互结果中确定出与所述使用状态对应的目标交互结果；将所述目标交互结果对应的意图行为确定为所述第一对象的意图行为。
需要说明的是，上述第一物品的使用状态可以包括使用中和未使用。上述第一物品例如可以为沙发、鞋柜。如果用户坐在沙发上，则认为沙发的使用状态为使用中。
在一个示例性实施例中，提供了一种确定所述语音交互数据对应的预先存储的多个交互结果的技术方案，具体的：接收移动终端发送的设置数据；其中，所述设置数据至少用于指示所述语音交互数据与不同的交互结果的对应关系；所述设置数据通过目标对象的输入操作确定；根据所述设置数据保存所述语音交互数据与不同的交互结果的对应关系，从所述对应关系中确定所述多媒体数据中解析出的语音交互数据所对应的多个交互结果。
其中，上述移动终端可以为用户手机、平板、智能耳机、智能手表、电脑等终端，上述输入操作包括但不限于语音输入、打字输入等。
需要说明的是，上述设置数据可以是用户的自定义数据，也可以是后台人员预先设置的数据，本申请对此不做限制。
在一个示例性实施例中，为了更好的理解上述步骤S204中如何根据所述第一对象所在空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为，包括：对所述多媒体数据中的所述第一对象与所述家电设备的交互数据、所述图像数据对应的第二物品的使用数据进行特征提取，得到所述交互数据对应的第一语音特征，所述第二物品的使用数据对应的第二语音特征；在预先存储的语音特征信息表中查找与所述第一语音特征对应的第一特征行为、所述第二语音特征对应的第二特征行为，其中，所述语音特征信息表包括不同语音特征与不同特征行为的对应关系；在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为。
其中，在对所述多媒体数据中的所述第一对象与所述家电设备的交互数据、所述图像数据对应的第二物品的使用数据进行特征提取之前，确定出所述图像数据对应的第二物品，并通过所述第二物品所在空间内的家电设备得到所述第二物品的使用数据，所述第二物品的使用数据至少包括所述第二物品的被使用时所产生的声音数据。
其中，上述交互数据的第一语音特征可以理解为上述第一对象与上述家电设备进行交互时第一对象的语音特征和家电设备的语音特征，对于上述第二物品的使用数据，即所述第二物品的被使用时所产生的声音数据，对应具有第二物品被使用时的产生的声音的语音特征。需要说明的是，上述第一语音特征、上述第二语音特征可以包括声音的频率、声音的音色、声音的幅度等。
在一个实施例中，例如，上述第二物品可以为电扇，则电扇的第二语音特征为电扇在工作时产生的风声的特征，并且，在电扇以不同的工作频率工作时，产生的风声的特征也不同。
需要说明的是，上述行为场景可以包括厨房场景、客厅场景。具体的，厨房场景下用户行为是做饭的情况下，如果确定厨房内，用户开启油烟机(即第一对象与家电设备交互)，油烟机工作后产生工作声音(即交互数据，具有语音特征)，油烟机工作对应于用户做饭的特征行为，同时，厨房的案板上放有食材(相当于上述第二物品的使用数据)对应于用户使用案板处理食材的特征行为，则此时将做饭作为确定为用户的的意图行为。
在一个实施例中，以空间感知模块为执行主体为例，结合图3对空间感知模块确定用户意图行为的过程进行说明。如图3所示，用户(相当于上述第一对象)、智能家电设备(相当于上述家电设备)、物体(相当于上述第一对象所在空间区域的指定位置的图像数据对应的第二物体)在同一空间区域内时，可以根据用户与智能家电设备的交互数据、物体的使用数据进行特征提取，从而根据提取结果查找到对应的特征行为，并在查找的特征行为均对应于同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为。
空间感知模块可以感知不同的空间，并基于同一空间内的智能设备的麦克风、摄像头、雷达等多种感知元器件实现多种感知方式感知空间内的对象。其中，空间感知模块感知的空间可以包括：厨房、客厅、餐厅、卧室、淋浴间、阳台、户外、汽车内部等。感知方式可以包括声音、视频、文本输入，以及近场通信技术等。
空间内的对象可以包括：
1、生命物体，例如人、宠物等。如果为人，对应的用户行为包括切菜、玩游戏、看电视、刷牙等。
2、智能设备，例如油烟机、烤箱、空调、洗衣机等。
3、非智能设备的非生命物体，例如沙发、菜板、鞋柜等。
具体的，在厨房场景下，可以通过智能设备的麦克风获取到语音信息(即上述交互数据)，例如切菜声音，油烟机工作声音，烤箱工作声音等，也可以通过摄像头获取到视觉信息。在客厅场景下，可以通过智能设备的麦克风获取到语音信息，例如电视机工作声音，也可以通过摄像头获取到视觉信息，例如，坐在沙发上看电视的用户。
本实施例通过空间感知模块获取同一空间下的智能设备感知到的用户与设备的交互数据，分析交互数据，消解用户对话意图中的歧义，从用户的多种意图行为中准确确定出用户在当前空间内最可能的需求，从而提高人机交互的准确率，以及提高用户对设备服务的满意率。
在一个示例性实施例中，还提供了一种技术方案，在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为之前，可以在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内的情况下，从所述第一特征行为、所述第二特征行为中确定出发生时间最早的特征行为；获取所述空间区域的空间类型对应的行为动线，其中，所述行为动线包括预先设置的同一行为场景下的多个预设特征行为；在确定所述行为动线的首个预设特征行为与所述发生时间最早的特征行为一致的情况下，确定所述第一特征行为、所述第二特征行为对应于同一行为场景。
需要说明的是，上述预设特征行为可以理解为预设的连续执行的特征行为，即行为动线可以理解为用户在同一行为场景下的连续行为，例如，使用动线1表示用户在厨房场景下做饭的行为动线，动线1的首个特征行为(即上述首个预设特征行为)是洗菜，如果确定厨房内发生时间最早的特征行为是洗菜，可以根据动线1内洗菜之后的特征行为预测用户接下来的用户行为。
在一个实施例中，在确定所述行为动线的首个预设特征行为与所述发生时间最早的特征行为一致的情况下，进一步的，如果所述第一特征行为的第一发生时间、所述第二特征行为的第二发生时间在预设时间范围内，且确定所述第一特征行为、所述第二特征行为对应于同一行为场景，则确定所述同一行为场景下的用户行为是所述第一对象的意图行为。例如，在确定所述行为动线的首个预设特征行为是洗菜，上述发生时间最早的特征行为也是洗菜，用户洗菜的发生时间为上午8点，而炒锅被使用来炒菜的发生时间为上午9点，两者均在上午7点至12点之内，且确定洗菜和炒菜均对应于做饭这一行为场景，那么可以将用户在做饭的行为场景下查菜谱的用户行为确定为用户的意图行为。
在一个示例性实施例中，在确定出所述第一对象的意图行为之后，还可以基于确定出的所述意图行为向所述第一对象发送语音询问信息；在确定预设时间段内没有收到所述第一对象针对所述语音询问信息的回复消息的情况下，控制所述家电设备响应所述第一对象的意图行为；在确定所述预设时间段内收到所述第一对象针对所述语音询问信息的回复消息的情况下，根据所述回复消息中的关键字确定所述第一对象的交互指令，并根据所述交互指令控制所述家电设备响应所述第一对象的交互指令。
为了更好的理解上述意图行为的确定方法的过程，以下再结合可选实施例对上述意图行为的确定的实现方法流程进行说明，但不用于限定本申请实施例的技术方案。
在本实施例中提供了一种意图行为的确定方法，图4是根据本申请实施例的意图行为的确定方法的示意图(一)，如图4所示，在没有上下文语境的情况下，用户对厨房内的智能设备(如智能音箱)语音交互说“宫保鸡丁”，基于上述空间感知模块可以确定出用户最可能的意图是查菜谱，那么智能音箱语音回复“猜你想查宫保鸡丁怎么做，帮你找到了制作视频”，然后播放指定的视频菜谱。而当没有上下文语境的情况下，用户对客厅或者卧室内的智能音箱语音交互说“宫保鸡丁”，此时上述空间感知模块确定出用户最可能的意图是听歌，回复“猜你想听陶喆的宫保鸡丁”，然后播放指定的音乐。
本实施例能够实现根据不同的空间类型确定出用户在当前空间类型下的最可能的意图，从而利用智能设备响应用户最可能的意图，提高了人机交互的准确率。
图5是根据本申请实施例的意图行为的确定方法的示意图(二)，如图5所示，在空间感知模块识别到当前空间类型是厨房，并识别到案板上面摆放着食材，例如西红柿和鸡蛋，可以确定出用户当前最急迫的需求为查菜谱，此时可以向用户主动语音播报“猜你想做西红柿炒鸡蛋，帮你找到了精选菜谱视频，要播放吗”，如果确定用户说“好啊”，则可以然后智能设备播放检索到的菜谱视频。
通过上述实施例，通过智能感知空间技术，能够精确分析用户在当前空间内最急迫的需求，并在用户说话有歧义，或者用户未和智能设备交互(但有潜在需求)的时候，主动满足用户需求，以提高人机交互满意率。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例的方法。
图6是根据本申请实施例的一种意图行为的确定装置的结构框图。如图6所示，包括：
获取模块62，用于在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；
其中，上述第一对象可以包括人，机器人等，但不限于此。
需要说明的是，上述家电设备包括智能家电设备和非智能家电设备，可以简称为智能设备，例如智能油烟机、智能音箱等。
需要说明的是，上述多媒体数据可以包括语音交互的语音数据、文本输入的文本数据、近场通信感应传输的通信数据等，但不限于此。
确定模块64，用于根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
通过上述装置，在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析；确定出所述第一对象的意图行为，解决了相关技术中，如何准确确定用户的意图行为的问题。
在一个示例性实施例中，上述获取装置62还用于，通过所述第一对象所在空间区域内的图像采集装置获取所述第一对象与所述家电设备的视频交互数据；通过所述第一对象所在空间区域内的语音采集装置获取所述第一对象与所述家电设备的语音交互数据；在所述第一对象使用通信设备与所述家电设备进行通信时，通过所述通信设备获取所述第一对象与所述家电设备之间的交互数据。
本实施例通过多种方式获取第一对象与所述家电设备的交互数据，实现了以多模态获取数据的方法，丰富了数据来源，扩大了数据量，能够为准确确定用户(即第一对象)的意图行为提供更全面的数据。
在一个示例性实施例中，上述确定模块64还用于，在所述第一对象所在空间区域的空间类型与第一物品所在空间区域的空间类型一致的情况下，从所述交互数据中解析出所述第一对象与所述家电设备的语音交互数据，以及从所述图像数据中解析出所述空间区域内的第一物品的使用状态；确定所述语音交互数据对应的预先存储的多个交互结果；从多个所述交互结果中确定出与所述使用状态对应的目标交互结果；将所述目标交互结果对应的意图行为确定为所述第一对象的意图行为。
需要说明的是，上述第一物品的使用状态可以包括使用中和未使用。上述第一物品例如可以为沙发、鞋柜。如果用户坐在沙发上，则认为沙发的使用状态为使用中。
在一个示例性实施例中，上述确定模块64还用于，接收移动终端发送的设置数据；其中，所述设置数据至少用于指示所述语音交互数据与不同的交互结果的对应关系；所述设置数据通过目标对象的输入操作确定；根据所述设置数据保存所述语音交互数据与不同的交互结果的对应关系，从所述对应关系中确定所述多媒体数据中解析出的语音交互数据所对应的多个交互结果。
其中，上述移动终端可以为用户手机、平板、智能耳机、智能手表、电脑等终端，上述输入操作包括但不限于语音输入、打字输入等。
需要说明的是，上述设置数据可以是用户的自定义数据，也可以是后台人员预先设置的数据，本申请对此不做限制。
在一个示例性实施例中，上述确定模块64还用于，对所述多媒体数据中的所述第一对象与所述家电设备的交互数据、所述图像数据对应的第二物品的使用数据进行特征提取，得到所述交互数据对应的第一语音特征，所述第二物品的使用数据对应的第二语音特征；在预先存储的语音特征信息表中查找与所述第一语音特征对应的第一特征行为、所述第二语音特征对应的第二特征行为，其中，所述语音特征信息表包括不同语音特征与不同特征行为的对应关系；在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为。
需要说明的是，上述行为场景可以包括厨房场景、客厅场景。具体的，厨房场景下用户行为是做饭的情况下，如果确定厨房内，用户开启油烟机(即第一对象与家电设备交互)，油烟机工作后产生工作声音(即交互数据，具有语音特征)，油烟机工作对应于用户做饭的特征行为，同时，厨房的案板上放有食材(相当于上述第二物品的使用数据)对应于用户使用案板处理食材的特征行为，则此时将做饭作为确定为用户的的意图行为。
在一个实施例中，以空间感知模块为执行主体为例，结合图3对空间感知模块确定用户意图行为的过程进行说明。如图3所示，用户(相当于上述第一对象)、智能家电设备(相当于上述家电设备)、物体(相当于上述第一对象所在空间区域的指定位置的图像数据对应的第二物体)在同一空间区域内时，可以根据用户与智能家电设备的交互数据、物体的使用数据进行特征提取，从而根据提取结果查找到对应的特征行为，并在查找的特征行为均对应于同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为。
空间感知模块可以感知不同的空间，并基于同一空间内的智能设备的麦克风、摄像头、雷达等多种感知元器件实现多种感知方式感知空间内的对象。其中，空间感知模块感知的空间可以包括：厨房、客厅、餐厅、卧室、淋浴间、阳台、户外、汽车内部等。感知方式可以包括声音、视频、文本输入，以及近场通信技术等。
空间内的对象可以包括：
1、生命物体，例如人、宠物等。如果为人，对应的用户行为包括切菜、玩游戏、看电视、刷牙等。
2、智能设备，例如油烟机、烤箱、空调、洗衣机等。
3、非智能设备的非生命物体，例如沙发、菜板、鞋柜等。
具体的，在厨房场景下，可以通过智能设备的麦克风获取到语音信息(即上述交互数据)，例如切菜声音，油烟机工作声音，烤箱工作声音等，也可以通过摄像头获取到视觉信息。在客厅场景下，可以通过智能设备的麦克风获取到语音信息，例如电视机工作声音，也可以通过摄像头获取到视觉信息，例如，坐在沙发上看电视的用户。
本实施例通过空间感知模块获取同一空间下的智能设备感知到的用户与设备的交互数据，分析交互数据，消解用户对话意图中的歧义，从用户的多种意图行为中准确确定出用户在当前空间内最可能的需求，从而提高人机交互的准确率，以及提高用户对设备服务的满意率。
在一个示例性实施例中，上述确定模块64还用于，在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内的情况下，从所述第一特征行为、所述第二特征行为中确定出发生时间最早的特征行为；获取所述空间区域的空间类型对应的行为动线，其中，所述行为动线包括预先设置的同一行为场景下的多个预设特征行为；在确定所述行为动线的首个预设特征行为与所述发生时间最早的特征行为一致的情况下，确定所述第一特征行为、所述第二特征行为对应于同一行为场景。
需要说明的是，上述预设特征行为可以理解为预设的连续执行的特征行为，即行为动线可以理解为用户在同一行为场景下的连续行为，例如，使用动线1表示用户在厨房场景下做饭的行为动线，动线1的首个特征行为(即上述首个预设特征行为)是洗菜，如果确定厨房内发生时间最早的特征行为是洗菜，可以根据动线1内洗菜之后的特征行为预测用户接下来的用户行为。
在一个实施例中，在确定所述行为动线的首个预设特征行为与所述发生时间最早的特征行为一致的情况下，进一步的，如果所述第一特征行为的第一发生时间、所述第二特征行为的第二发生时间在预设时间范围内，且确定所述第一特征行为、所述第二特征行为对应于同一行为场景，则确定所述同一行为场景下的用户行为是所述第一对象的意图行为。例如，在确定所述行为动线的首个预设特征行为是洗菜，上述发生时间最早的特征行为也是洗菜，用户洗菜的发生时间为上午8点，而炒锅被使用来炒菜的发生时间为上午9点，两者均在上午7点至12点之内，且确定洗菜和炒菜均对应于做饭这一行为场景，那么可以将用户在做饭的行为场景下查菜谱的用户行为确定为用户的意图行为。
在一个示例性实施例中，上述意图行为的确定装置还包括响应模块，用于在确定出所述第一对象的意图行为之后，基于确定出的所述意图行为向所述第一对象发送语音询问信息；在确定预设时间段内没有收到所述第一对象针对所述语音询问信息的回复消息的情况下，控制所述家电设备响应所述第一对象的意图行为；在确定所述预设时间段内收到所述第一对象针对所述语音询问信息的回复消息的情况下，根据所述回复消息中的关键字确定所述第一对象的交互指令，并根据所述交互指令控制所述家电设备响应所述第一对象的交互指令。
本申请的实施例还提供了一种存储介质，该存储介质包括存储的程序，其中，上述程序运行时执行上述任一项的方法。
可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：
S1，在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；
S2，根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
本申请的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；
S2，根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。
以上所述仅是本申请的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。
Claims (10)
1.一种意图行为的确定方法，其特征在于，包括：
在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；
根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
2.根据权利要求1所述的意图行为的确定方法，其特征在于，至少通过以下方式之一获取所述第一对象与所述家电设备的交互数据：
通过所述第一对象所在空间区域内的图像采集装置获取所述第一对象与所述家电设备的视频交互数据；
通过所述第一对象所在空间区域内的语音采集装置获取所述第一对象与所述家电设备的语音交互数据；
在所述第一对象使用通信设备与所述家电设备进行通信时，通过所述通信设备获取所述第一对象与所述家电设备之间的交互数据。
3.根据权利要求1所述的意图行为的确定方法，其特征在于，根据所述第一对象所在空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为，包括：
在所述第一对象所在空间区域的空间类型与第一物品所在空间区域的空间类型一致的情况下，从所述交互数据中解析出所述第一对象与所述家电设备的语音交互数据，以及从所述图像数据中解析出所述空间区域内的第一物品的使用状态；
确定所述语音交互数据对应的预先存储的多个交互结果；
从多个所述交互结果中确定出与所述使用状态对应的目标交互结果；
将所述目标交互结果对应的意图行为确定为所述第一对象的意图行为。
4.根据权利要求3所述的意图行为的确定方法，其特征在于，确定所述语音交互数据对应的预先存储的多个交互结果，包括：
接收移动终端发送的设置数据；其中，所述设置数据至少用于指示所述语音交互数据与不同的交互结果的对应关系；所述设置数据通过目标对象的输入操作确定；
根据所述设置数据保存所述语音交互数据与不同的交互结果的对应关系，从所述对应关系中确定所述多媒体数据中解析出的语音交互数据所对应的多个交互结果。
5.根据权利要求1所述的意图行为的确定方法，其特征在于，根据所述第一对象所在空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为，包括：
对所述多媒体数据中的所述第一对象与所述家电设备的交互数据、所述图像数据对应的第二物品的使用数据进行特征提取，得到所述交互数据对应的第一语音特征，所述第二物品的使用数据对应的第二语音特征；
在预先存储的语音特征信息表中查找与所述第一语音特征对应的第一特征行为、所述第二语音特征对应的第二特征行为，其中，所述语音特征信息表包括不同语音特征与不同特征行为的对应关系；
在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为。
6.根据权利要求5所述的意图行为的确定方法，其特征在于，在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内，且所述第一特征行为、所述第二特征行为均对应同一行为场景的情况下，确定所述同一行为场景下的用户行为是所述第一对象的意图行为之前，所述方法还包括：
在确定所述第一特征行为、所述第二特征行为发生于所述空间区域内的情况下，从所述第一特征行为、所述第二特征行为中确定出发生时间最早的特征行为；
获取所述空间区域的空间类型对应的行为动线，其中，所述行为动线包括预先设置的同一行为场景下的多个预设特征行为；
在确定所述行为动线的首个预设特征行为与所述发生时间最早的特征行为一致的情况下，确定所述第一特征行为、所述第二特征行为对应于同一行为场景。
7.根据权利要求1-6任一项所述的意图行为的确定方法，其特征在于，确定出所述第一对象的意图行为之后，所述方法还包括：
基于确定出的所述意图行为向所述第一对象发送语音询问信息；
在确定预设时间段内没有收到所述第一对象针对所述语音询问信息的回复消息的情况下，控制所述家电设备响应所述第一对象的意图行为；
在确定所述预设时间段内收到所述第一对象针对所述语音询问信息的回复消息的情况下，根据所述回复消息中的关键字确定所述第一对象的交互指令，并根据所述交互指令控制所述家电设备响应所述第一对象的交互指令。
8.一种意图行为的确定装置，其特征在于，包括：
获取模块，用于在第一对象与家电设备发生交互的情况下，获取所述第一对象对应的多媒体数据；其中，所述多媒体数据包括所述第一对象与所述家电设备的交互数据，以及所述第一对象所在空间区域的指定位置的图像数据；所述第一对象与所述家电设备均位于所述空间区域；
确定模块，用于根据所述空间区域的空间类型和所述多媒体数据对所述第一对象的意图进行分析，确定出所述第一对象的意图行为。
9.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行上述权利要求1至7任一项中所述的方法。
10.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行所述权利要求1至7任一项中所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210603441.5A CN115171676A (zh) | 2022-05-30 | 2022-05-30 | 意图行为的确定方法和装置、存储介质及电子装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210603441.5A CN115171676A (zh) | 2022-05-30 | 2022-05-30 | 意图行为的确定方法和装置、存储介质及电子装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115171676A true CN115171676A (zh) | 2022-10-11 |
Family
ID=83483798
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210603441.5A Pending CN115171676A (zh) | 2022-05-30 | 2022-05-30 | 意图行为的确定方法和装置、存储介质及电子装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115171676A (zh) |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170105080A1 (en) * | 2015-10-07 | 2017-04-13 | Robert Bosch Gmbh | System and Method for Audio Scene Understanding of Physical Object Sound Sources |
| US9749583B1 (en) * | 2016-03-31 | 2017-08-29 | Amazon Technologies, Inc. | Location based device grouping with voice control |
| US20170249956A1 (en) * | 2016-02-29 | 2017-08-31 | International Business Machines Corporation | Inferring User Intentions Based on User Conversation Data and Spatio-Temporal Data |
| KR20170103548A (ko) * | 2016-03-04 | 2017-09-13 | 한국전자통신연구원 | 사용자 의도 맞춤형 사물기기간 협업 장치, 그를 포함한 시스템 및 그 방법 |
| WO2020042993A1 (zh) * | 2018-08-29 | 2020-03-05 | 阿里巴巴集团控股有限公司 | 语音控制方法、装置及系统 |
| CN111128156A (zh) * | 2019-12-10 | 2020-05-08 | 上海雷盎云智能技术有限公司 | 基于模型训练的智能家居设备语音控制方法及装置 |
| CN112466296A (zh) * | 2020-11-10 | 2021-03-09 | 北京百度网讯科技有限公司 | 语音交互的处理方法、装置、电子设备及存储介质 |
| CN112861745A (zh) * | 2021-02-20 | 2021-05-28 | 珠海格力电器股份有限公司 | 智能家居及其控制方法、模组、计算机可读介质 |
| KR20210087098A (ko) * | 2020-05-22 | 2021-07-09 | 바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드 | 음성 인터랙션에 기반하는 정보 검증 방법, 장치, 기기, 컴퓨터 저장 매체 및 컴퓨터 프로그램 제품 |
| WO2021189647A1 (zh) * | 2020-03-27 | 2021-09-30 | 深圳光启超材料技术有限公司 | 多媒体信息的确定方法、头戴设备、存储介质及电子设备 |
| CN113593544A (zh) * | 2021-06-11 | 2021-11-02 | 青岛海尔科技有限公司 | 设备的控制方法和装置、存储介质及电子装置 |
| WO2021223765A1 (zh) * | 2020-06-01 | 2021-11-11 | 青岛海尔洗衣机有限公司 | 语音识别方法、语音识别系统和电器设备 |
-
2022
- 2022-05-30 CN CN202210603441.5A patent/CN115171676A/zh active Pending
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170105080A1 (en) * | 2015-10-07 | 2017-04-13 | Robert Bosch Gmbh | System and Method for Audio Scene Understanding of Physical Object Sound Sources |
| US20170249956A1 (en) * | 2016-02-29 | 2017-08-31 | International Business Machines Corporation | Inferring User Intentions Based on User Conversation Data and Spatio-Temporal Data |
| KR20170103548A (ko) * | 2016-03-04 | 2017-09-13 | 한국전자통신연구원 | 사용자 의도 맞춤형 사물기기간 협업 장치, 그를 포함한 시스템 및 그 방법 |
| US9749583B1 (en) * | 2016-03-31 | 2017-08-29 | Amazon Technologies, Inc. | Location based device grouping with voice control |
| WO2020042993A1 (zh) * | 2018-08-29 | 2020-03-05 | 阿里巴巴集团控股有限公司 | 语音控制方法、装置及系统 |
| CN111128156A (zh) * | 2019-12-10 | 2020-05-08 | 上海雷盎云智能技术有限公司 | 基于模型训练的智能家居设备语音控制方法及装置 |
| WO2021189647A1 (zh) * | 2020-03-27 | 2021-09-30 | 深圳光启超材料技术有限公司 | 多媒体信息的确定方法、头戴设备、存储介质及电子设备 |
| KR20210087098A (ko) * | 2020-05-22 | 2021-07-09 | 바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드 | 음성 인터랙션에 기반하는 정보 검증 방법, 장치, 기기, 컴퓨터 저장 매체 및 컴퓨터 프로그램 제품 |
| WO2021223765A1 (zh) * | 2020-06-01 | 2021-11-11 | 青岛海尔洗衣机有限公司 | 语音识别方法、语音识别系统和电器设备 |
| CN112466296A (zh) * | 2020-11-10 | 2021-03-09 | 北京百度网讯科技有限公司 | 语音交互的处理方法、装置、电子设备及存储介质 |
| CN112861745A (zh) * | 2021-02-20 | 2021-05-28 | 珠海格力电器股份有限公司 | 智能家居及其控制方法、模组、计算机可读介质 |
| CN113593544A (zh) * | 2021-06-11 | 2021-11-02 | 青岛海尔科技有限公司 | 设备的控制方法和装置、存储介质及电子装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109240111B (zh) | 智能家居控制方法、装置、系统及智能网关 | |
| JP6543125B2 (ja) | 制御方法及び冷蔵庫 | |
| CN111487884A (zh) | 存储介质、智能家居场景生成装置和方法 | |
| CN115167164A (zh) | 设备场景的确定方法和装置、存储介质及电子装置 | |
| CN114755931A (zh) | 控制指令的预测方法和装置、存储介质及电子装置 | |
| CN115171676A (zh) | 意图行为的确定方法和装置、存储介质及电子装置 | |
| CN115309062A (zh) | 设备的控制方法、装置、存储介质及电子装置 | |
| CN115327934A (zh) | 智能家居场景推荐方法、系统、存储介质及电子装置 | |
| CN114864046A (zh) | 信息的推送方法和装置、存储介质及电子装置 | |
| CN114691731A (zh) | 使用偏好的确定方法和装置、存储介质及电子装置 | |
| JP2017182382A (ja) | ネットワークシステム、情報処理方法、およびサーバ | |
| CN111009305A (zh) | 存储介质、智能面板及其食材推荐方法 | |
| CN115987935A (zh) | 通知消息的推送方法、装置、存储介质及电子装置 | |
| CN115297353B (zh) | 音频的播放方法、装置、存储介质及电子装置 | |
| CN115168699A (zh) | 行为数据的处理方法、存储介质及电子装置 | |
| CN116540557A (zh) | 视听结合的智能家电终端控制方法、装置及存储介质 | |
| CN115691558A (zh) | 回复结果的接收方法及装置、存储介质及电子装置 | |
| CN115484117A (zh) | 通话的接听方法和装置、存储介质及电子装置 | |
| CN114815642A (zh) | 智能设备的控制方法和装置、存储介质及电子装置 | |
| CN116301511A (zh) | 设备交互方法、装置、存储介质及电子装置 | |
| CN115453895A (zh) | 终端的控制方法、装置、存储介质及电子装置 | |
| CN116155637A (zh) | 设备控制方法、装置和存储介质及电子装置 | |
| CN115032907A (zh) | 感知参数的更新方法和装置、存储介质及电子装置 | |
| JP2020061648A (ja) | ネットワークシステム、サーバ、および情報処理方法 | |
| CN114691730A (zh) | 储存位置的提示方法及装置、存储介质及电子装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |