CN106662932A - 一种基于意图识别控制家电的方法、系统及机器人 - Google Patents
一种基于意图识别控制家电的方法、系统及机器人 Download PDFInfo
- Publication number
- CN106662932A CN106662932A CN201680001724.5A CN201680001724A CN106662932A CN 106662932 A CN106662932 A CN 106662932A CN 201680001724 A CN201680001724 A CN 201680001724A CN 106662932 A CN106662932 A CN 106662932A
- Authority
- CN
- China
- Prior art keywords
- life
- robot
- user
- time axle
- parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 230000019771 cognition Effects 0.000 claims description 54
- 230000008859 change Effects 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 10
- 230000009471 action Effects 0.000 abstract description 20
- 238000013473 artificial intelligence Methods 0.000 abstract description 13
- 230000008921 facial expression Effects 0.000 abstract 1
- 230000003993 interaction Effects 0.000 description 13
- 235000012054 meals Nutrition 0.000 description 12
- 230000006399 behavior Effects 0.000 description 10
- 230000002452 interceptive effect Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000036651 mood Effects 0.000 description 4
- 238000004378 air conditioning Methods 0.000 description 2
- 230000037396 body weight Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000005406 washing Methods 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
- G05B19/4185—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by the network communication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Dermatology (AREA)
- General Health & Medical Sciences (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- Manipulator (AREA)
Abstract
本发明提供一种基于意图识别控制家电的方法，包括：获取用户的多模态信息；根据所述多模态信息识别用户意图；根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制。这样就可以通过用户的多模态信息例如用户语音、用户表情、用户动作等的一种或几种，来识别出用户意图，例如用户是想要休息或工作或看电视等，然后根据用户的多模态信息和用户意图，结合生活时间轴来对家电进行控制，从而更加智能化了自动调节家电，本发明将人工智能应用到智能家居中，更加便捷、准确的控制家电，使人们的日常生活更加方便，并且还可以增加生活的趣味性和互动性，为生活添加更多精彩，并且使机器人更加拟人化，也提高了人工智能在智能家居方面的用户体验。
Description
技术领域
本发明涉及机器人交互技术领域，尤其涉及一种基于意图识别控制家电的方法、系统及机器人。
背景技术
机器人作为与人类的交互工具，使用的场合越来越多，例如一些老人、小孩较孤独时，就可以与机器人交互，包括对话、娱乐等。
智能家居是以住宅为平台，利用综合布线技术、网络通信技术、安全防范技术、自动控制技术、音视频技术将家居生活有关的设施集成，构建高效的住宅设施与家庭日程事务的管理系统，提升家居安全性、便利性、舒适性、艺术性，并实现环保节能的居住环境。
而在智能家居方面，机器人的使用还比较少，因此发明人研究如何既可以与人类进行交互，也可以在智能家居方面使用的机器人，将人工智能应用到智能家居方面的问题，以期提出更好的解决方案，提升用户体验。
发明内容
本发明的目的是提供一种基于意图识别控制家电的方法、系统及机器人，提升人工智能在智能家居方面的用户体验。
本发明的目的是通过以下技术方案来实现的：
一种基于意图识别控制家电的方法，包括：
获取用户的多模态信息；
根据所述多模态信息识别用户意图；
根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制。
优选的，在根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制的步骤之后包括：
主动询问用户是否需要对家电做进一步控制，并根据用户的指令对家电进行相应控制。
优选的，所述家电包括灯具，所述结合生活时间轴对家电进行控制的步骤包括：结合生活时间轴对灯具的亮度或开关进行控制。
优选的，所述机器人生活时间轴的参数的生成方法包括：
将机器人的自我认知进行扩展；
获取生活时间轴的参数；
对机器人的自我认知的参数与生活时间轴中的参数进行拟合，生成机器人生活时间轴。
优选的，所述将机器人的自我认知进行扩展的步骤具体包括：将生活场景与机器人的自我认识相结合形成基于生活时间轴的自我认知曲线。
优选的，所述对机器人的自我认知的参数与生活时间轴中的参数进行拟合的步骤具体包括：使用概率算法，将机器人之间的参数用网络做概率估计，计算当生活时间轴上的机器人在生活时间轴上的场景参数改变后每个参数改变的概率，形成所述参数改变概率的拟合曲线。
优选的，其中，所述生活时间轴指包含一天24小时的时间轴，所述生活时间轴中的参数至少包括用户在所述生活时间轴上进行的日常生活行为以及代表该行为的参数值。
一种基于意图识别控制家电的系统，包括：
获取模块，用于获取用户的多模态信息；
人工智能模块，用于根据用户的多模态信息和生活时间轴生成交互内容，所述交互内容至少包括语音信息和动作信息；
控制模块，用于将语音信息的时间长度和动作信息的时间长度控制到相同。
优选的，所述系统还包括主动询问模块，用于主动询问用户是否需要对家电做进一步控制，并根据用户的指令对家电进行相应控制。
优选的，所述家电包括灯具，所述控制模块具体用于：结合生活时间轴对灯具的亮度或开关进行控制。
优选的，所述系统包括处理模块，用于：
将机器人的自我认知进行扩展；
获取生活时间轴的参数；
对机器人的自我认知的参数与生活时间轴中的参数进行拟合，生成机器人生活时间轴。
优选的，所述处理模块具体用于：将生活场景与机器人的自我认识相结合形成基于生活时间轴的自我认知曲线。
优选的，所述处理模块具体用于：使用概率算法，将机器人之间的参数用网络做概率估计，计算当生活时间轴上的机器人在生活时间轴上的场景参数改变后每个参数改变的概率，形成所述参数改变概率的拟合曲线。
优选的，其中，所述生活时间轴指包含一天24小时的时间轴，所述生活时间轴中的参数至少包括用户在所述生活时间轴上进行的日常生活行为以及代表该行为的参数值。
本发明公开一种机器人，包括如上述任一所述的一种基于意图识别控制家电的系统。
相比现有技术，本发明具有以下优点：本发明的基于意图识别控制家电的方法包括：获取用户的多模态信息；根据所述多模态信息识别用户意图；根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制。这样就可以通过用户的多模态信息例如用户语音、用户表情、用户动作等的一种或几种，来识别出用户意图，例如用户是想要休息或工作或看电视等，然后根据用户的多模态信息和用户意图，结合生活时间轴来对家电进行控制，从而更加智能化了自动调节家电，本发明将人工智能应用到智能家居中，更加便捷、准确的控制家电，使人们的日常生活更加方便，并且还可以增加生活的趣味性和互动性，为生活添加更多精彩，并且使机器人更加拟人化，也提高了人工智能在智能家居方面的用户体验。
附图说明
图1是本发明实施例一的一种基于意图识别控制家电的方法的流程图；
图2是本发明实施例二的一种基于意图识别控制家电的系统的示意图。
具体实施方式
虽然流程图将各项操作描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。各项操作的顺序可以被重新安排。当其操作完成时处理可以被终止，但是还可以具有未包括在附图中的附加步骤。处理可以对应于方法、函数、规程、子例程、子程序等等。
计算机设备包括用户设备与网络设备。其中，用户设备或客户端包括但不限于电脑、智能手机、PDA等；网络设备包括但不限于单个网络服务器、多个网络服务器组成的服务器组或基于云计算的由大量计算机或网络服务器构成的云。计算机设备可单独运行来实现本发明，也可接入网络并通过与网络中的其他计算机设备的交互操作来实现本发明。计算机设备所处的网络包括但不限于互联网、广域网、城域网、局域网、VPN网络等。
在这里可能使用了术语“第一”、“第二”等等来描述各个单元，但是这些单元不应当受这些术语限制，使用这些术语仅仅是为了将一个单元与另一个单元进行区分。这里所使用的术语“和/或”包括其中一个或更多所列出的相关联项目的任意和所有组合。当一个单元被称为“连接”或“耦合”到另一单元时，其可以直接连接或耦合到所述另一单元，或者可以存在中间单元。
这里所使用的术语仅仅是为了描述具体实施例而不意图限制示例性实施例。除非上下文明确地另有所指，否则这里所使用的单数形式“一个”、“一项”还意图包括复数。还应当理解的是，这里所使用的术语“包括”和/或“包含”规定所陈述的特征、整数、步骤、操作、单元和/或组件的存在，而不排除存在或添加一个或更多其他特征、整数、步骤、操作、单元、组件和/或其组合。
下面结合附图和较佳的实施例对本发明作进一步说明。
实施例一
如图1所示，本实施例中公开一种基于意图识别控制家电的方法，包括：
S101、获取用户的多模态信息；
S102、根据所述多模态信息识别用户意图；
S103、根据用户的多模态信息和用户意图，结合生活时间轴300对家电进行控制。
本实施例的基于意图识别控制家电的方法包括：获取用户的多模态信息；根据所述多模态信息识别用户意图；根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制。这样就可以通过用户的多模态信息例如用户语音、用户表情、用户动作等的一种或几种，来识别出用户意图，例如用户是想要休息或工作或看电视等，然后根据用户的多模态信息和用户意图，结合生活时间轴来对家电进行控制，从而更加智能化了自动调节家电，本发明将人工智能应用到智能家居中，更加便捷、准确的控制家电，使人们的日常生活更加方便，并且还可以增加生活的趣味性和互动性，为生活添加更多精彩，并且使机器人更加拟人化，也提高了人工智能在智能家居方面的用户体验。
对于人来讲每天的生活都具有一定的规律性，为了让机器人与人沟通时更加拟人化，在一天24小时中，让机器人也会有睡觉，运动，吃饭，跳舞，看书，吃饭，化妆，睡觉等动作。因此本发明将机器人所在的生活时间轴加入到机器人的交互内容生成中去，使机器人与人交互时更加拟人化，使得机器人在生活时间轴内具有人类的生活方式，该方法能够提升机器人交互内容生成的拟人性，提升人机交互体验，提高智能性。交互内容可以是表情或文字或语音或动作等一种或几种的组合。机器人的生活时间轴300是提前进行拟合和设置完成的，具体来讲，机器人的生活时间轴300是一系列的参数合集，将这个参数传输给系统进行生成交互内容。
本实施例中的多模态信息可以是用户表情、语音信息、手势信息、场景信息、图像信息、视频信息、人脸信息、瞳孔虹膜信息、光感信息和指纹信息等其中的其中一种或几种。
本实施例中，基于生活时间轴具体是：根据人类日常生活的时间轴，按照人类的方式，将机器人本身在日常生活时间轴中的自我认知的数值做拟合，机器人的行为按照这个拟合行动，也就是得到一天中机器人自己的行为，从而让机器人基于生活时间轴去进行自己的行为，例如生成交互内容与人类沟通等。假如机器人一直唤醒的话，就会按照这个时间轴上的行为行动，机器人的自我认知也会根据这个时间轴进行相应的更改。生活时间轴与可变参数可以对自我认知中的属性，例如心情值，疲劳值等等的更改，也可以自动加入新的自我认知信息，比如之前没有愤怒值，基于生活时间轴和可变因素的场景就会自动根据之前模拟人类自我认知的场景，从而对机器人的自我认知进行添加。生活时间轴中不仅包括语音信息，也包括了动作等信息。
本实施例中，家电可以是日常生活中使用的家用电器，例如灯具，冰箱，空调，电视机，洗衣机，微波炉等。下面以灯具为例进行说明，当为灯具时，用户调节的就是灯光的亮度或灯光的开或关。
例如，用户向机器人说话：“好困啊”，机器人听到后意图识别为用户很困，然后结合机器人的生活时间轴，例如当前的时间为周一上午8点，那么机器人就知道主人是刚刚起床，那么就应该打开灯光，并将灯光亮度调到适中，不能太亮以免刺激眼睛，也不能太暗以免用户继续睡懒觉。如果当前时间是周日上午8点，机器人根据生活时间轴判定用户今天不用上班，因此机器人就会选择暂时不打开灯光，比如等到上午9点半时候，根据生活时间轴用户应该准备去健身，那么机器人就会提醒用户起床，并将灯光打开。而如果用户向机器人说话：“好困啊”，机器人听到后理解的为用户很困，然后机器人的生活时间轴，例如当前的时间为晚上9点，那么机器人就知道主人需要睡觉了，那么就会将灯光的亮度降低，也可以先降低后过一段时间将灯光关闭。这样的方式更加拟人化，提高了用户的体验度。
当然，本实施例仅以灯具为例进行说明，其余家电也可以应用到本实施例中。
本实施例中，在根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制的步骤之后包括：
主动询问用户是否需要对家电做进一步控制，并根据用户的指令对家电进行相应控制。
这样，在机器人作出基本的判断后，进一步向用户确认操作，不仅可以降低误判的几率，而且方便机器人作出进一步的操作，因为在机器人作出基本判断之后，通常不会立即进行操作，或者在操作之后会有一小段的时间过渡，例如上述案例中，用户向机器人说话：“好困啊”，机器人听到后意图识别为用户很困，然后结合机器人的生活时间轴，例如当前的时间为周一上午8点，那么机器人就知道主人是刚刚起床，那么就应该打开灯光，并将灯光亮度调到适中，机器人还可以继续询问用户是否将亮度调高，如果用户回答不，那么机器人就会将灯光继续保持刚才的亮度，如果用户回答是，那么机器人就会将亮度调高，又或者用户说关灯，那么机器人也会关灯，当然也可以机器人不询问，用户主动告知机器人进行操作。而如果用户向机器人说话：“好困啊”，机器人听到后理解的为用户很困，然后机器人的生活时间轴，例如当前的时间为晚上9点，那么机器人就知道主人需要睡觉了，那么就会将灯光的亮度降低，然后机器人还可以继续询问用户是否要将灯关闭，如果用户回答是，那么机器人就会将灯关闭，如果用户回答不，那么就会将灯保持低亮度，当然用户也可以说将灯开亮一点，机器人就会将灯的亮度提高。
根据其中一个示例，所述机器人的生活时间轴的参数的生成方法包括：
将机器人的自我认知进行扩展；
获取生活时间轴的参数；
对机器人的自我认知的参数与生活时间轴中的参数进行拟合，生成机器人的生活时间轴。
这样将生活时间轴加入到机器人本身的自我认知中去，使机器人具有拟人化的生活。例如将中午吃饭的认知加入到机器人中去。
根据其中另一个示例，所述将机器人的自我认知进行扩展的步骤具体包括：将生活场景与机器人的自我认识相结合形成基于生活时间轴的自我认知曲线。
这样就可以具体的将生活时间轴加入到机器人本身的参数中去。
根据其中另一个示例，所述对机器人的自我认知的参数与生活时间轴中的参数进行拟合的步骤具体包括：使用概率算法，将机器人之间的参数用网络做概率估计，计算当生活时间轴上的机器人在生活时间轴上的场景参数改变后每个参数改变的概率，形成所述参数改变概率的拟合曲线。这样就可以具体的将机器人的自我认知的参数与生活时间轴中的参数进行拟合。其中概率算法可以是贝叶斯概率算法。
例如，在一天24小时中，使机器人会有睡觉，运动，吃饭，跳舞，看书，吃饭，化妆，睡觉等动作。每个动作会影响机器人本身的自我认知，将生活时间轴上的参数与机器人本身的自我认知进行结合，拟合后，即让机器人的自我认知包括了，心情，疲劳值，亲密度，好感度，交互次数，机器人的三维的认知，年龄，身高，体重，亲密度，游戏场景值，游戏对象值，地点场景值，地点对象值等。为机器人可以自己识别所在的地点场景，比如咖啡厅，卧室等。
机器一天的时间轴内会进行不同的动作，比如夜里睡觉，中午吃饭，白天运动等等，这些所有的生活时间轴中的场景，对于自我认知都会有影响。这些数值的变化采用的概率模型的动态拟合方式，将这些所有动作在时间轴上发生的几率拟合出来。场景识别：这种地点场景识别会改变自我认知中的地理场景值。
实施例二
如图2所示，本实施例中公开一种基于意图识别控制家电的系统，包括：
获取模块201，用于获取用户的多模态信息；
意图识别模块202，用于根据所述多模态信息识别用户意图；
控制模块203，用于根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制，其中，生活时间轴为生活时间轴模块301生成的。
这样就可以通过用户的多模态信息例如用户语音、用户表情、用户动作等的一种或几种，来识别出用户意图，例如用户是想要休息或工作或看电视等，然后根据用户的多模态信息和用户意图，结合生活时间轴来对家电进行控制，从而更加智能化了自动调节家电，本发明将人工智能应用到智能家居中，更加便捷、准确的控制家电，使人们的日常生活更加方便，并且还可以增加生活的趣味性和互动性，为生活添加更多精彩，并且使机器人更加拟人化，也提高了人工智能在智能家居方面的用户体验。
对于人来讲每天的生活都具有一定的规律性，为了让机器人与人沟通时更加拟人化，在一天24小时中，让机器人也会有睡觉，运动，吃饭，跳舞，看书，吃饭，化妆，睡觉等动作。因此本发明将机器人所在的生活时间轴加入到机器人的交互内容生成中去，使机器人与人交互时更加拟人化，使得机器人在生活时间轴内具有人类的生活方式，该方法能够提升机器人交互内容生成的拟人性，提升人机交互体验，提高智能性。交互内容可以是表情或文字或语音或动作等一种或几种的组合。机器人的生活时间轴300是提前进行拟合和设置完成的，具体来讲，机器人的生活时间轴300是一系列的参数合集，将这个参数传输给系统进行生成交互内容。
本实施例中的多模态信息可以是用户表情、语音信息、手势信息、场景信息、图像信息、视频信息、人脸信息、瞳孔虹膜信息、光感信息和指纹信息等其中的其中一种或几种。
本实施例中，基于生活时间轴具体是：根据人类日常生活的时间轴，按照人类的方式，将机器人本身在日常生活时间轴中的自我认知的数值做拟合，机器人的行为按照这个拟合行动，也就是得到一天中机器人自己的行为，从而让机器人基于生活时间轴去进行自己的行为，例如生成交互内容与人类沟通等。假如机器人一直唤醒的话，就会按照这个时间轴上的行为行动，机器人的自我认知也会根据这个时间轴进行相应的更改。生活时间轴与可变参数可以对自我认知中的属性，例如心情值，疲劳值等等的更改，也可以自动加入新的自我认知信息，比如之前没有愤怒值，基于生活时间轴和可变因素的场景就会自动根据之前模拟人类自我认知的场景，从而对机器人的自我认知进行添加。生活时间轴中不仅包括语音信息，也包括了动作等信息。
本实施例中，家电可以是日常生活中使用的家用电器，例如灯具，冰箱，空调，电视机，洗衣机，微波炉等。下面以灯具为例进行说明，当为灯具时，用户调节的就是灯光的亮度或灯光的开或关。
例如，用户向机器人说话：“好困啊”，机器人听到后意图识别为用户很困，然后结合机器人的生活时间轴，例如当前的时间为周一上午8点，那么机器人就知道主人是刚刚起床，那么就应该打开灯光，并将灯光亮度调到适中，不能太亮以免刺激眼睛，也不能太暗以免用户继续睡懒觉。如果当前时间是周日上午8点，机器人根据生活时间轴判定用户今天不用上班，因此机器人就会选择暂时不打开灯光，比如等到上午9点半时候，根据生活时间轴用户应该准备去健身，那么机器人就会提醒用户起床，并将灯光打开。而如果用户向机器人说话：“好困啊”，机器人听到后理解的为用户很困，然后机器人的生活时间轴，例如当前的时间为晚上9点，那么机器人就知道主人需要睡觉了，那么就会将灯光的亮度降低，也可以先降低后过一段时间将灯光关闭。这样的方式更加拟人化，提高了用户的体验度。
当然，本实施例仅以灯具为例进行说明，其余家电也可以应用到本实施例中。
本实施例中，所述系统还包括主动询问模块，用于主动询问用户是否需要对家电做进一步控制，并根据用户的指令对家电进行相应控制。
这样，在机器人作出基本的判断后，进一步向用户确认操作，不仅可以降低误判的几率，而且方便机器人作出进一步的操作，因为在机器人作出基本判断之后，通常不会立即进行操作，或者在操作之后会有一小段的时间过渡，例如上述案例中，用户向机器人说话：“好困啊”，机器人听到后意图识别为用户很困，然后结合机器人的生活时间轴，例如当前的时间为周一上午8点，那么机器人就知道主人是刚刚起床，那么就应该打开家电，并将家电亮度调到适中，机器人还可以继续询问用户是否将亮度调高，如果用户回答不，那么机器人就会将家电继续保持刚才的亮度，如果用户回答是，那么机器人就会将亮度调高，又或者用户说关灯，那么机器人也会关灯，当然也可以机器人不询问，用户主动告知机器人进行操作。而如果用户向机器人说话：“好困啊”，机器人听到后理解的为用户很困，然后机器人的生活时间轴，例如当前的时间为晚上9点，那么机器人就知道主人需要睡觉了，那么就会将家电的亮度降低，然后机器人还可以继续询问用户是否要将灯关闭，如果用户回答是，那么机器人就会将灯关闭，如果用户回答不，那么就会将灯保持低亮度，当然用户也可以说将灯开亮一点，机器人就会将灯的亮度提高。
根据其中一个示例，所述系统包括基于时间轴与人工智能云处理模块，用于：
将机器人的自我认知进行扩展；
获取生活时间轴的参数；
对机器人的自我认知的参数与生活时间轴中的参数进行拟合，生成机器人生活时间轴。
这样将生活时间轴加入到机器人本身的自我认知中去，使机器人具有拟人化的生活。例如将中午吃饭的认知加入到机器人中去。
根据其中另一个示例，所述基于时间轴与人工智能云处理模块具体用于：将生活场景与机器人的自我认识相结合形成基于生活时间轴的自我认知曲线。这样就可以具体的将生活时间轴加入到机器人本身的参数中去。
根据其中另一个示例，所述基于时间轴与人工智能云处理模块具体用于：使用概率算法，将机器人之间的参数用网络做概率估计，计算当生活时间轴上的机器人在生活时间轴上的场景参数改变后每个参数改变的概率，形成所述参数改变概率的拟合曲线。这样就可以具体的将机器人的自我认知的参数与生活时间轴中的参数进行拟合。其中概率算法可以是贝叶斯概率算法。
例如，在一天24小时中，使机器人会有睡觉，运动，吃饭，跳舞，看书，吃饭，化妆，睡觉等动作。每个动作会影响机器人本身的自我认知，将生活时间轴上的参数与机器人本身的自我认知进行结合，拟合后，即让机器人的自我认知包括了，心情，疲劳值，亲密度，好感度，交互次数，机器人的三维的认知，年龄，身高，体重，亲密度，游戏场景值，游戏对象值，地点场景值，地点对象值等。为机器人可以自己识别所在的地点场景，比如咖啡厅，卧室等。
机器一天的时间轴内会进行不同的动作，比如夜里睡觉，中午吃饭，白天运动等等，这些所有的生活时间轴中的场景，对于自我认知都会有影响。这些数值的变化采用的概率模型的动态拟合方式，将这些所有动作在时间轴上发生的几率拟合出来。场景识别：这种地点场景识别会改变自我认知中的地理场景值。
本发明公开一种机器人，包括如上述任一所述的一种基于意图识别控制家电的系统。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。
Claims (15)
1.一种基于意图识别控制家电的方法，其特征在于，包括：
获取用户的多模态信息；
根据所述多模态信息识别用户意图；
根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制。
2.根据权利要求1所述的方法，其特征在于，在根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制的步骤之后包括：
主动询问用户是否需要对家电做进一步控制，并根据用户的指令对家电进行相应控制。
3.根据权利要求1所述的方法，其特征在于，所述家电包括灯具，所述结合生活时间轴对家电进行控制的步骤包括：结合生活时间轴对灯具的亮度或开关进行控制。
4.根据权利要求1所述的方法，其特征在于，所述机器人生活时间轴的参数的生成方法包括：
将机器人的自我认知进行扩展；
获取生活时间轴的参数；
对机器人的自我认知的参数与生活时间轴中的参数进行拟合，生成机器人生活时间轴。
5.根据权利要求4所述的方法，其特征在于，所述将机器人的自我认知进行扩展的步骤具体包括：将生活场景与机器人的自我认识相结合形成基于生活时间轴的自我认知曲线。
6.根据权利要求4所述的方法，其特征在于，所述对机器人的自我认知的参数与生活时间轴中的参数进行拟合的步骤具体包括：使用概率算法，将机器人之间的参数用网络做概率估计，计算当生活时间轴上的机器人在生活时间轴上的场景参数改变后每个参数改变的概率，形成所述参数改变概率的拟合曲线。
7.根据权利要求1所述的方法，其特征在于，其中，所述生活时间轴指包含一天24小时的时间轴，所述生活时间轴中的参数至少包括用户在所述生活时间轴上进行的日常生活行为以及代表该行为的参数值。
8.一种基于意图识别控制家电的系统，其特征在于，包括：
获取模块，用于获取用户的多模态信息；
意图识别模块，用于根据所述多模态信息识别用户意图；
控制模块，用于根据用户的多模态信息和用户意图，结合生活时间轴对家电进行控制。
9.根据权利要求8所述的系统，其特征在于，所述系统还包括主动询问模块，用于主动询问用户是否需要对家电做进一步控制，并根据用户的指令对家电进行相应控制。
10.根据权利要求8所述的方法，其特征在于，所述家电包括灯具，所述控制模块具体用于：结合生活时间轴对灯具的亮度或开关进行控制。
11.根据权利要求8所述的系统，其特征在于，所述系统包括处理模块，用于：
将机器人的自我认知进行扩展；
获取生活时间轴的参数；
对机器人的自我认知的参数与生活时间轴中的参数进行拟合，生成机器人生活时间轴。
12.根据权利要求11所述的系统，其特征在于，所述处理模块具体用于：将生活场景与机器人的自我认识相结合形成基于生活时间轴的自我认知曲线。
13.根据权利要求11所述的系统，其特征在于，所述处理模块具体用于：使用概率算法，将机器人之间的参数用网络做概率估计，计算当生活时间轴上的机器人在生活时间轴上的场景参数改变后每个参数改变的概率，形成所述参数改变概率的拟合曲线。
14.根据权利要求8所述的系统，其特征在于，其中，所述生活时间轴指包含一天24小时的时间轴，所述生活时间轴中的参数至少包括用户在所述生活时间轴上进行的日常生活行为以及代表该行为的参数值。
15.一种机器人，其特征在于，包括如权利要求8至14任一所述的一种基于意图识别控制家电的系统。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2016/089216 WO2018006372A1 (zh) | 2016-07-07 | 2016-07-07 | 一种基于意图识别控制家电的方法、系统及机器人 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106662932A true CN106662932A (zh) | 2017-05-10 |
Family
ID=58838105
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201680001724.5A Pending CN106662932A (zh) | 2016-07-07 | 2016-07-07 | 一种基于意图识别控制家电的方法、系统及机器人 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN106662932A (zh) |
| WO (1) | WO2018006372A1 (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107390539A (zh) * | 2017-08-23 | 2017-11-24 | 合肥龙图腾信息技术有限公司 | 一种基于脑电波采集的智能家居控制方法 |
| CN108415262A (zh) * | 2018-03-06 | 2018-08-17 | 西北工业大学 | 智能网关对家电设备的控制方法 |
| CN108536304A (zh) * | 2018-06-25 | 2018-09-14 | 广州市锐尚展柜制作有限公司 | 一种智能家居多模态交互装置 |
| CN108563321A (zh) * | 2018-01-02 | 2018-09-21 | 联想(北京)有限公司 | 信息处理方法和电子设备 |
| WO2019019812A1 (en) * | 2017-07-24 | 2019-01-31 | Midea Group Co., Ltd. | CUSTOMIZABLE VOICE ALARM CONTROLS |
| CN110197171A (zh) * | 2019-06-06 | 2019-09-03 | 深圳市汇顶科技股份有限公司 | 基于用户的动作信息的交互方法、装置和电子设备 |
| CN110888335A (zh) * | 2019-11-28 | 2020-03-17 | 星络智能科技有限公司 | 一种智能家居控制器及其交互方法、存储介质 |
| CN111124110A (zh) * | 2019-11-28 | 2020-05-08 | 星络智能科技有限公司 | 一种智能家居控制器及其交互方法、存储介质 |
| CN112415908A (zh) * | 2020-11-26 | 2021-02-26 | 珠海格力电器股份有限公司 | 智能设备控制方法、装置、可读存储介质和计算机设备 |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109870923A (zh) * | 2019-04-02 | 2019-06-11 | 浙江宝业建筑智能科技有限公司 | 一种智能家居控制系统及方法 |
| CN115562057A (zh) * | 2022-10-09 | 2023-01-03 | 青岛海尔智能家电科技有限公司 | 用于智能面板的控制方法及装置、智能面板 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102088380A (zh) * | 2009-12-04 | 2011-06-08 | 上海电气集团股份有限公司 | 一种以家居服务机器人为核心的智能多机器人网络系统 |
| CN102103707A (zh) * | 2009-12-16 | 2011-06-22 | 群联电子股份有限公司 | 情感引擎、情感引擎系统及电子装置的控制方法 |
| CN104238369A (zh) * | 2014-09-02 | 2014-12-24 | 百度在线网络技术（北京）有限公司 | 智能家电控制方法和装置 |
| CN104503378A (zh) * | 2014-11-05 | 2015-04-08 | 广州艾若博机器人科技有限公司 | 一种机器人以及基于该机器人的控制家电的方法 |
| CN104965552A (zh) * | 2015-07-03 | 2015-10-07 | 北京科技大学 | 一种基于情感机器人的智能家居环境协同控制方法及系统 |
| CN105005204A (zh) * | 2015-07-31 | 2015-10-28 | 深圳广田智能科技有限公司 | 可自动触发智能家居和智慧生活情景的智能引擎系统及方法 |
| CN105291093A (zh) * | 2015-11-27 | 2016-02-03 | 深圳市神州云海智能科技有限公司 | 一种家用机器人系统 |
| KR20160023089A (ko) * | 2014-08-21 | 2016-03-03 | 엘지전자 주식회사 | 디지털 디바이스 및 그 제어 방법 |
| CN105425602A (zh) * | 2015-11-30 | 2016-03-23 | 青岛海尔智能家电科技有限公司 | 一种家电设备自动控制方法及装置 |
| CN105511608A (zh) * | 2015-11-30 | 2016-04-20 | 北京光年无限科技有限公司 | 基于智能机器人的交互方法及装置、智能机器人 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11212934A (ja) * | 1998-01-23 | 1999-08-06 | Sony Corp | 情報処理装置および方法、並びに提供媒体 |
| CN104951077A (zh) * | 2015-06-24 | 2015-09-30 | 百度在线网络技术（北京）有限公司 | 基于人工智能的人机交互方法、装置和终端设备 |
| CN105490918A (zh) * | 2015-11-20 | 2016-04-13 | 深圳狗尾草智能科技有限公司 | 一种机器人主动与主人交互的系统及方法 |
-
2016
- 2016-07-07 CN CN201680001724.5A patent/CN106662932A/zh active Pending
- 2016-07-07 WO PCT/CN2016/089216 patent/WO2018006372A1/zh active Application Filing
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102088380A (zh) * | 2009-12-04 | 2011-06-08 | 上海电气集团股份有限公司 | 一种以家居服务机器人为核心的智能多机器人网络系统 |
| CN102103707A (zh) * | 2009-12-16 | 2011-06-22 | 群联电子股份有限公司 | 情感引擎、情感引擎系统及电子装置的控制方法 |
| KR20160023089A (ko) * | 2014-08-21 | 2016-03-03 | 엘지전자 주식회사 | 디지털 디바이스 및 그 제어 방법 |
| CN104238369A (zh) * | 2014-09-02 | 2014-12-24 | 百度在线网络技术（北京）有限公司 | 智能家电控制方法和装置 |
| CN104503378A (zh) * | 2014-11-05 | 2015-04-08 | 广州艾若博机器人科技有限公司 | 一种机器人以及基于该机器人的控制家电的方法 |
| CN104965552A (zh) * | 2015-07-03 | 2015-10-07 | 北京科技大学 | 一种基于情感机器人的智能家居环境协同控制方法及系统 |
| CN105005204A (zh) * | 2015-07-31 | 2015-10-28 | 深圳广田智能科技有限公司 | 可自动触发智能家居和智慧生活情景的智能引擎系统及方法 |
| CN105291093A (zh) * | 2015-11-27 | 2016-02-03 | 深圳市神州云海智能科技有限公司 | 一种家用机器人系统 |
| CN105425602A (zh) * | 2015-11-30 | 2016-03-23 | 青岛海尔智能家电科技有限公司 | 一种家电设备自动控制方法及装置 |
| CN105511608A (zh) * | 2015-11-30 | 2016-04-20 | 北京光年无限科技有限公司 | 基于智能机器人的交互方法及装置、智能机器人 |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019019812A1 (en) * | 2017-07-24 | 2019-01-31 | Midea Group Co., Ltd. | CUSTOMIZABLE VOICE ALARM CONTROLS |
| US10504511B2 (en) | 2017-07-24 | 2019-12-10 | Midea Group Co., Ltd. | Customizable wake-up voice commands |
| CN110832578A (zh) * | 2017-07-24 | 2020-02-21 | 美的集团股份有限公司 | 可定制唤醒语音命令 |
| CN110832578B (zh) * | 2017-07-24 | 2022-04-26 | 美的集团股份有限公司 | 可定制唤醒语音命令 |
| CN107390539A (zh) * | 2017-08-23 | 2017-11-24 | 合肥龙图腾信息技术有限公司 | 一种基于脑电波采集的智能家居控制方法 |
| CN108563321A (zh) * | 2018-01-02 | 2018-09-21 | 联想(北京)有限公司 | 信息处理方法和电子设备 |
| CN108415262A (zh) * | 2018-03-06 | 2018-08-17 | 西北工业大学 | 智能网关对家电设备的控制方法 |
| CN108536304A (zh) * | 2018-06-25 | 2018-09-14 | 广州市锐尚展柜制作有限公司 | 一种智能家居多模态交互装置 |
| CN110197171A (zh) * | 2019-06-06 | 2019-09-03 | 深圳市汇顶科技股份有限公司 | 基于用户的动作信息的交互方法、装置和电子设备 |
| CN110888335A (zh) * | 2019-11-28 | 2020-03-17 | 星络智能科技有限公司 | 一种智能家居控制器及其交互方法、存储介质 |
| CN111124110A (zh) * | 2019-11-28 | 2020-05-08 | 星络智能科技有限公司 | 一种智能家居控制器及其交互方法、存储介质 |
| CN112415908A (zh) * | 2020-11-26 | 2021-02-26 | 珠海格力电器股份有限公司 | 智能设备控制方法、装置、可读存储介质和计算机设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2018006372A1 (zh) | 2018-01-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106662932A (zh) | 一种基于意图识别控制家电的方法、系统及机器人 | |
| CN106462124A (zh) | 一种基于意图识别控制家电的方法、系统及机器人 | |
| CN106782559A (zh) | 带远程通讯控制的智能家居管家中控系统及其控制方法 | |
| CN108388142A (zh) | 用于控制家居设备的方法、装置和系统 | |
| CN104914833A (zh) | 一种智能设备的控制方法及系统 | |
| CN105045234A (zh) | 基于智能可穿戴设备行为感知的智能家庭能源管理方法 | |
| CN106462254A (zh) | 一种机器人交互内容的生成方法、系统及机器人 | |
| CN106537294A (zh) | 一种机器人交互内容的生成方法、系统及机器人 | |
| Shah et al. | Dynamic user preference parameters selection and energy consumption optimization for smart homes using deep extreme learning machine and bat algorithm | |
| CN106471572B (zh) | 一种同步语音及虚拟动作的方法、系统及机器人 | |
| CN106471444A (zh) | 一种虚拟3d机器人的交互方法、系统及机器人 | |
| CN106463118A (zh) | 一种同步语音及虚拟动作的方法、系统及机器人 | |
| Reijula et al. | Human well-being and flowing work in an intelligent work environment | |
| CN110958750B (zh) | 照明设备控制方法及装置 | |
| CN106462255A (zh) | 一种机器人交互内容的生成方法、系统及机器人 | |
| CN207181987U (zh) | 一种虚拟人工智能伴侣 | |
| CN109388068A (zh) | 一种基于人工智能及通用组合传感器的智能家居应用系统 | |
| CN106774797A (zh) | 机器人自动节电方法、装置和机器人 | |
| CN114265320A (zh) | 基于深度学习分析用户习惯的智能家居控制方法及系统 | |
| CN117762032B (zh) | 基于场景适应和人工智能的智能设备控制系统及方法 | |
| CN106489114A (zh) | 一种机器人交互内容的生成方法、系统及机器人 | |
| Alao et al. | Human computer interaction (HCI) and smart home applications | |
| CN111431776A (zh) | 信息配置方法、装置及系统 | |
| CN106462804A (zh) | 一种机器人交互内容的生成方法、系统及机器人 | |
| CN106537425A (zh) | 一种机器人交互内容的生成方法、系统及机器人 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170510 |
|
| RJ01 | Rejection of invention patent application after publication |