CN106951071B - 一种基于动作捕捉的设备控制方法和装置 - Google Patents

一种基于动作捕捉的设备控制方法和装置 Download PDF

Info

Publication number
CN106951071B
CN106951071B CN201710116304.8A CN201710116304A CN106951071B CN 106951071 B CN106951071 B CN 106951071B CN 201710116304 A CN201710116304 A CN 201710116304A CN 106951071 B CN106951071 B CN 106951071B
Authority
CN
China
Prior art keywords
information
motion
somatosensory
action
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710116304.8A
Other languages
English (en)
Other versions
CN106951071A (zh
Inventor
王淼
李永华
唐皓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Haier Smart Home Co Ltd
Haier Uplus Intelligent Technology Beijing Co Ltd
Original Assignee
Haier Uplus Intelligent Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Haier Uplus Intelligent Technology Beijing Co Ltd filed Critical Haier Uplus Intelligent Technology Beijing Co Ltd
Priority to CN201710116304.8A priority Critical patent/CN106951071B/zh
Publication of CN106951071A publication Critical patent/CN106951071A/zh
Application granted granted Critical
Publication of CN106951071B publication Critical patent/CN106951071B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明公开了一种基于动作捕捉的设备控制方法和装置。该方法包括：通过动作捕捉模块捕捉体感动作信息；根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息；根据所述设备控制信息执行设备控制操作。本发明通过动作捕捉模块捕捉体感动作信息，并且对体感动作信息进行语义解析，确定体感动作信息对应的设备控制信息，进而实现设备控制。本发明在不影响通过控制设备控制设备的情况下，可以可以脱离控制设备，通过体感动作来完成设备控制，增加了设备控制的便利性和灵活性，提高了设备控制的效率，满足了用户的个性化需求。

Description

一种基于动作捕捉的设备控制方法和装置
技术领域
本发明涉及智能家居技术领域，特别是涉及一种基于动作捕捉的设备控制方法和装置。
背景技术
随着智能家居的不断发展，智能设备已经逐渐普及。当前主流的智能设备控制方法为集中式管理，各种控制与服务集中在智能家居的中央网关上，控制设备将用于控制智能设备的指令发送到网关，再由网关将指令发送给对应的智能设备，从而控制智能设备执行相应操作。
目前，控制设备大部分为移动终端，如：智能手机。用户通过移动终端向网关发送指令，从而控制智能设备的运转。在日常生活中，通过移动终端对智能设备进行控制较为便捷，比如：对设备进行开关控制，调节空调的温度，设置家电的定时操作等。但是，在一些用户不便操作移动终端的场景中，移动终端不能满足用户对智能设备的控制需求。例如，用户临时找不到移动终端，用户手中持有物品不便操作移动终端，或者用户需要在不同房间控制其他房间内的智能设备等场景，通过移动终端控制智能设备实用性不高。
发明内容
本发明要解决的技术问题是提供一种基于动作捕捉的设备控制方法和装置，用以解决现有技术中，对于用户不便操作控制设备的场景，控制设备不能满足用户对智能设备的控制需求的问题。
针对上述技术问题，本发明是通过以下技术方案来解决的：
本发明提供了一种基于动作捕捉的设备控制方法，包括：通过动作捕捉模块捕捉体感动作信息；根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息；根据所述设备控制信息执行设备控制操作。
其中，所述体感动作信息包括：操作动作信息；所述体感动作语义模型，包括：局部体感动作语义模型；预先设置所述局部体感动作语义模型的步骤，包括：将所述动作捕捉模块绑定一个区域内的一个以上的设备；通过所述动作捕捉模块，分别采集所述区域内的各设备的操作指令对应的操作动作信息；根据采集的所述区域内的各设备的操作指令对应的操作动作信息，设置所述局部体感动作语义模型；其中，所述设备控制信息包括所述区域内的各设备的操作指令。
其中，所述根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息，包括：如果捕捉到所述体感动作信息的动作捕捉模块绑定了一个区域内的设备，则在所述区域对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令；所述根据所述设备控制信息执行设备控制操作，包括：根据捕捉到的所述体感动作信息中的操作动作信息对应的操作指令，将所述操作指令发送给所述操作指令对应的设备，指示所述设备执行所述操作指令。
其中，所述体感动作信息包括：区域动作信息、设备动作信息和操作动作信息；所述体感动作语义模型，包括：全局体感动作语义模型；预先设置所述全局体感动作语义模型的步骤，包括：将所述动作捕捉模块绑定多个区域内的设备；通过所述动作捕捉模块，分别采集每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息；根据采集的每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，设置所述全局体感动作语义模型；其中，所述设备控制信息包括每个区域的信息，每个所述区域内的每个设备的信息以及每个所述设备的操作指令。
其中，所述根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息，包括：如果捕捉到所述体感动作信息的动作捕捉模块绑定了多个区域内的设备，则在所述全局体感动作语义模型中，查询捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令；所述根据所述设备控制信息执行设备控制操作，包括：根据捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令，将所述操作指令发送给所述区域内的所述设备，指示所述设备执行所述操作指令。
本发明还提供了一种基于动作捕捉的设备控制装置，包括：捕捉模块，用于通过动作捕捉模块捕捉体感动作信息；确定模块，用于根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息；控制模块，用于根据所述设备控制信息执行设备控制操作。
其中，所述装置还包括第一设置模块；所述体感动作信息包括：操作动作信息；所述体感动作语义模型，包括：局部体感动作语义模型；所述第一设置模块，用于预先设置所述局部体感动作语义模型；所述第一设置模块，进一步用于：将所述动作捕捉模块绑定一个区域内的一个以上的设备；通过所述动作捕捉模块，分别采集所述区域内的各设备的操作指令对应的操作动作信息；根据采集的所述区域内的各设备的操作指令对应的操作动作信息，设置所述局部体感动作语义模型；其中，所述设备控制信息包括所述区域内的各设备的操作指令。
其中，所述确定模块，进一步用于如果捕捉到所述体感动作信息的动作捕捉模块绑定了一个区域内的设备，则在所述区域对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令；所述控制模块，进一步用于根据捕捉到的所述体感动作信息中的操作动作信息对应的操作指令，将所述操作指令发送给所述操作指令对应的设备，指示所述设备执行所述操作指令。
其中，所述装置还包括第二设置模块；所述体感动作信息包括：区域动作信息、设备动作信息和操作动作信息；所述体感动作语义模型，包括：全局体感动作语义模型；所述第二设置模块，用于预先设置所述全局体感动作语义模型；所述第二设置模块，进一步用于：将所述动作捕捉模块绑定多个区域内的设备；通过所述动作捕捉模块，分别采集每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息；根据采集的每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，设置所述全局体感动作语义模型；其中，所述设备控制信息包括每个区域的信息，每个所述区域内的每个设备的信息以及每个所述设备的操作指令。
其中，所述确定模块，进一步用于如果捕捉到所述体感动作信息的动作捕捉模块绑定了多个区域内的设备，则在所述全局体感动作语义模型中，查询捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令；所述控制模块，进一步用于根据捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令，将所述操作指令发送给所述区域内的所述设备，指示所述设备执行所述操作指令。
本发明有益效果如下：
本发明通过动作捕捉模块捕捉体感动作信息，并且对体感动作信息进行语义解析，确定体感动作信息对应的设备控制信息，进而实现设备控制。本发明在不影响通过控制设备来控制设备的情况下，可以可以脱离控制设备，通过体感动作来完成设备控制，增加了设备控制的便利性和灵活性，提高了设备控制的效率，满足了用户的个性化需求。
附图说明
图1是根据本发明第一实施例的基于动作捕捉的设备控制方法的流程图；
图2是根据本发明第二实施例的基于动作捕捉的设备控制方法的流程图；
图3是根据本发明第三实施例的基于动作捕捉的设备控制方法的流程图；
图4是根据本发明第三实施例的基于动作捕捉的设备控制方法的示意图；
图5是根据本发明第四实施例的设置体感动作语义模型的示意图；
图6是根据本发明第四实施例的将动作捕捉模块绑定一个或多个区域内的设备的示意图；
图7是根据本发明第五实施例的基于动作捕捉的设备控制装置的结构图。
具体实施方式
以下结合附图以及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不限定本发明。
实施例一
本实施例提供一种基于动作捕捉的设备控制方法。本实施例的执行主体为网关。图1是根据本发明第一实施例的基于动作捕捉的设备控制方法的流程图。
步骤S110，通过动作捕捉模块捕捉体感动作信息。
体感动作信息是指人体关键运动部位的动作的信息。进一步地，体感动作信息可以是体现人体关键运动部位的动作的图像。
在用户环境中预先部署动作捕捉模块，使动作捕捉模块进行光学动作捕捉。
光学动作捕捉是对人体关键运动部位的动作进行测量，以便得到体感动作信息。进一步地，可以通过计算机视觉技术来分析动作捕捉模块捕捉的人体关键运动部位做出的动作，该动作的信息即是体感动作信息。
在本实施例中，动作捕捉模块可以是摄像头。摄像头的种类包括：深度摄像头和双目摄像头。例如：在家中的各个房间中安装能够进行光学动作捕捉的深度摄像头，深度摄像头能够感知画面的深度(距离)信息，通过计算机视觉技术就能够识别出人类的动作。
步骤S120，根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息。
体感动作语义模型包括体感动作信息和设备控制信息的对应关系。
设备控制信息是指用于对设备进行控制的控制信息。设备控制信息包括但不限于：设备的操作指令。
将体感动作语义模型部署在网关中。在通过动作捕捉模块捕捉体感动作信息之后，根据预先设置的体感动作语义模型对体感动作信息进行语义分析，即在预先设置的体感动作语义模型中进行查询，确定出捕捉到的所述体感动作信息对应的设备控制信息。进一步地，根据体感动作语义模型，可以查询出用户做出的动作对应的用于控制设备的操作指令。
步骤S130，根据所述设备控制信息执行设备控制操作。
将设备控制信息中的操作指令发送给该操作指令对应的设备，使该设备执行该操作指令，进而实现对设备的控制。
例如：用户回到家中，需要打开客厅的智能灯，但却找不到控制设备或者疲于去找控制设备，这时用户可以在客厅的深度摄像头前做出打开智能灯对应的体感动作，深度摄像头采集该体感动作信息，网关根据体感动作语义模型查询出该体感动作信息对应打开智能灯的操作指令，进而将该操作指令发送给智能灯，智能灯接收到该操作指令打开智能灯。
本实施例在不影响通过控制设备(如：移动终端)来进行设备控制的情况下，可以脱离控制设备，通过体感动作来完成设备控制，增加了设备控制的便利性和灵活性，提高了设备控制的效率，满足了用户的个性化需求。
本实施例可以解决用户的一些轻量级场景的需求，即控制复杂程度较低场景，例如：对设备进行开关控制，用户临时找不到控制设备，用户手中持有物品不便操作控制设备，或者用户需要在不同房间控制其他房间内的设备等场景。本实施例便于快速控制设备。
针对预先设置的体感动作语义模型具体而言：体感动作语义模型包括：局部体感动作语义模型和/或全局体感动作语义模型。
局部体感动作语义模型是针对用户环境中的一个区域内的设备设置的体感动作语义模型。通过一个区域内设置的动作捕捉模块捕捉的体感动作信息和该区域对应的局部体感动作语义模型可以控制该区域内的设备，进而实现局部设备控制。
全局体感动作语义模型是针对用户环境的多个区域内的设备设置的体感动作语义模型。通过一个区域内设置的动作捕捉模块捕捉的体感动作信息和全局体感动作语义模型可以控制另一区域内的设备，进而实现全局设备控制。
进一步地，并在多个区域中分别设置动作捕捉模块。例如：。通过各个区域中设置的动作捕捉模块，以及设置的局部体感动作语义模型和/或全局体感动作语义模型，实现局部设备控制和全局设备控制。
为了使局部设备控制和全局设备控制更加清楚，下面分别对局部设备控制和全局设备控制进行进一步地描述。
实施例二
本实施例对局部设备控制进行描述。本实施例的执行主体为网关。
图2是根据本发明第二实施例的基于动作捕捉的设备控制方法的流程图。
步骤S210，将动作捕捉模块绑定一个区域内的一个以上的设备。
可以将用户环境划分为多个区域，在用户环境的各个区域中分别设置动作捕捉模块，并且使所有动作捕捉模块与网关建立连接；通过与网关建立连接的控制设备，为每个动作捕捉模块绑定该动作捕捉模块所在区域中的设备。
例如：家中包括多个房间，在这多个房间中分别设置深度摄像头，通过移动终端为设置在客厅的深度摄像头绑定客厅中的设备，通过移动终端为设置在厨房的深度摄像头绑定厨房中的设备。
由网关负责记录动作捕捉模块设置的区域，动作捕捉模块绑定的设备，以及动作捕捉模块绑定的设备所属的区域。
步骤S220，通过所述动作捕捉模块，分别采集所述区域内的各设备的操作指令对应的操作动作信息；根据采集的所述区域内的各设备的操作指令对应的操作动作信息，设置所述局部体感动作语义模型。
在本实施例中，体感动作语义模型包括：局部体感动作语义模型。局部体感动作语义模型中的体感动作信息包括：操作动作信息。操作动作信息为操作指令对应的体感动作信息。局部体感动作语义模型中的设备控制信息包括：该区域内的各设备的操作指令。这样，局部体感动作语义模型包含该区域内的各设备的操作指令和操作动作信息的对应关系。
具体地，通过设置在一个区域的动作捕捉模块，采集该区域内的设备的操作指令对应的操作动作信息，并据此设置该区域对应的局部体感动作语义模型。
每个设备包括多个功能，设备的操作指令用于控制该设备的相应功能。在控制设备中选择动作捕捉模块所在区域内的设备以及该设备的功能，并通过该动作捕捉模块采集操作动作信息，进而可以获得设备、用于控制该设备的功能的操作指令以及操作动作信息的对应关系，根据该对应关系可以设置局部体感动作语义模型中的一个设备控制信息。用于控制该设备的功能的操作指令可以存储在网关中。
步骤S230，在启动动作捕捉控制功能之后，通过动作捕捉模块捕捉体感动作信息。
用户可以在局部体感动作语义模型设置完毕之后，通过控制设备启动网关的动作捕捉控制功能。
用户在希望通过动作捕捉的方式控制设备时，可以在动作捕捉模块的采集区域内做出动作，这样就可以通过动作捕捉模块捕捉到体感动作信息。
步骤S240，如果捕捉到所述体感动作信息的动作捕捉模块绑定了一个区域内的设备，则在所述区域对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令。
由于体感动作语义模型中还可能包含全局体感动作语义模型，所以先确定捕捉到体感动作信息的动作捕捉模块绑定的设备是否属于一个区域，如果是，则说明通过该动作捕捉模块仅可以进行局部设备控制，这时可以在该动作捕捉模块对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令。
步骤S250，根据捕捉到的所述体感动作信息中的操作动作信息对应的操作指令，将所述操作指令发送给所述操作指令对应的设备，指示所述设备执行所述操作指令。
由于局部体感动作语义模型中包含设备，用于控制该设备的功能的操作指令以及操作动作信息的对应关系，所以可以根据该对应关系，将操作指令发送给动作捕捉模块所在区域中的该设备，实现对该设备的控制。
例如：在门禁系统设置动作捕捉模块，在用户回家时，如果双手拎满包裹，不方便找钥匙或手动开门，则可以通过动作捕捉模块表现开门对应的体感动作，动作捕捉模块捕捉用户的体感动作信息并传送至网关，网关将该体感动作信息与之前设置的体感动作语义模型中的体感动作信息进行匹配，若匹配成功，则将体感动作信息对应的操作指令发送给门禁系统，使门禁执行开门操作。
在本实施例中，在需要通过动作捕捉的方式，实现对用户环境中某一区域内的设备进行简单地辅助控制时，可以进行局部设备控制。
在本实施例中，还可以在形成一个区域对应的局部体感动作语义模型之后，将设置在该区域中的动作捕捉模块绑定该区域内的设备。
实施例三
本实施例对全局设备控制进行描述。本实施例的执行主体为网关。
图3是根据本发明第三实施例的基于动作捕捉的设备控制方法的流程图。
步骤S310，将动作捕捉模块绑定多个区域内的设备。
在默认情况下，不同区域设置的动作捕捉模块绑定对应区域内的设备。
例如，卧室1的动作捕捉模块绑定卧室1中的设备，客厅的动作捕捉模块绑定客厅中的设备。
在本实施例中，通过控制设备，除了将动作捕捉模块绑定该动作捕捉模块所在区域的设备之外，还将该动作捕捉模块绑定其他区域内的设备。
例如：通过移动终端为设置在客厅的深度摄像头绑定客厅中的设备，厨房中的设备以及卧室中的设备。
由网关负责记录动作捕捉模块设备的区域，动作捕捉模块绑定的设备，以及动作捕捉模块绑定的设备分别所属的区域。
步骤S320，通过所述动作捕捉模块，分别采集每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，并根据采集的每个所述区域对应的区域动作信息，每个所述区域内的设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，设置所述全局体感动作语义模型。
在本实施例中，体感动作语义模型包括：全局体感动作语义模型。
全局体感动作语义模型对应多个区域。
为了便于区分出用户希望控制的设备，全局体感动作语义模型中的体感动作信息包括：区域动作信息、设备动作信息和操作动作信息。全局体感动作语义模型中的设备控制信息包括：每个区域的信息，每个所述区域内的每个设备的信息以及每个所述设备的操作指令。其中，区域动作信息为区域对应的体感动作信息，设备动作信息为设备对应的体感动作信息。
具体地，在控制设备中选择动作捕捉模块所在区域内的设备以及该设备的功能，并通过该动作捕捉模块采集操作动作信息，进而可以获得区域、设备、用于控制该设备的功能的操作指令以及操作动作信息的对应关系，并根据该对应关系设置全局体感动作语义模型中的一个设备控制信息。
步骤S330，在启动动作捕捉控制功能之后，通过动作捕捉模块捕捉体感动作信息。
由于一个区域内的动作捕捉模块绑定了其他区域内的设备，并且全局体感动作语义模型包含区域、设备、用于控制该设备的功能的操作指令以及操作动作信息的对应关系，所以，根据动作捕捉模块捕捉到的体感动作信息和全局体感动作语义模型可以实现全局设备控制。
步骤S340，如果捕捉到所述体感动作信息的动作捕捉模块绑定了多个区域内的设备，则在所述全局体感动作语义模型中，查询捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息，设备动作信息对应的设备的信息以及操作动作信息对应的操作指令。
步骤S350，根据捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令，将所述操作指令发送给所述区域内的所述设备，指示所述设备执行所述操作指令。
在本实施例中，还可以在形成全局体感动作语义模型之后，将设置在一个区域中的动作捕捉模块绑定多个区域内的设备。
例如：如图4所示，用户1在客厅观看电视，需要控制热水器烧水，用户1可以对客厅中设置的动作捕捉模块顺序表现卫生间对应的体感动作，热水器对应的体感动作，烧热水对应的体感动作，这样，通过该动作捕捉模块可以顺序捕捉到区域动作信息、设备动作信息和操作动作信息，根据预先设置的全局体感动作语义模型，可以查询到区域动作信息、设备动作信息和操作动作信息分别对应卫生间、热水器和烧热水指令，进而家庭网关可以将烧热水指令发送给卫生间的热水器，控制卫生间的热水器，执行烧热水操作。在30分钟之后，用户1想起孩子(用户2)在卧室1开空调睡觉，孩子应该已经入睡，这时用户1可以在不进入卧室1打扰孩子睡觉的情况下，在客厅的动作捕捉模块的采集区域内表现关闭卧室1空调的动作，即表现卧室1对应的体感动作，空调对应的体感动作和关闭空调对应的体感动作，通过该动作捕捉模块可以顺序捕捉到区域动作信息、设备动作信息和操作动作信息，通过预先设置的全局体感动作语义模型，可以查询到区域动作信息、设备动作信息和操作动作信息分别对应卧室1、空调、关闭空调指令，进而家庭网关可以控制卧室1中的空调关闭。
实施例四
下面以用户环境为家庭环境为例，对设置体感动作信息进行说明。
图5为根据本发明第四实施例的设置体感动作语义模型的示意图。
步骤1，用户通过控制设备获取家庭网关的控制权限。
控制设备与家庭网关建立连接，用户通过控制设备开启家庭网关的初始化体感动作语义模型的功能，设置增加新体感动作信息的密码，在正确输入该密码之后可以获得增加新体感动作信息的控制权限。
本实施例的体感动作信息是基于个人设置的，可以提高设备操作的安全性，可靠性强。
步骤2，用户对不同房间内的动作捕捉模块表现体感动作，各个动作捕捉模块将捕捉到的体感动作图像(体感动作信息)传输至家庭网关，家庭网关创建设备控制信息和体感动作信息的对应关系并存储，完成体感动作语义模型的设置。
设备控制信息包括：房间信息、设备信息和操作指令。
家庭网关存储的每个体感动作信息包括：
1.房间动作信息(区域动作信息)，对应房间信息。
2.设备动作信息：对应设备信息。
3.具体操作信息(操作动作信息)，对应设备应该执行的操作指令。
步骤3，用户可以通过控制设备组合一房间的动作捕捉模块和其他房间内的设备，即将动作捕捉模块绑定多个区域内的设备，这时设置的体感动作语义模型为全局体感动作语义模型，可以基于全局体感动作语义模型进行全局设备控制，实现通过一房间内的动作捕捉模块对其他房间内的设备的控制。步骤3也可以在步骤1之后，步骤2之前进行。当然，本领域技术人员应该知道的是：用户也可以不组合动作捕捉模块和其他房间内的设备，这时设置的体感动作语义模型为局部体感动作语义模型，可以基于该局部体感动作语义模型进行局部设备控制，实现对该动作捕捉模块所属房间内的设备的控制。
如图6所示，是将动作捕捉模块绑定一个或多个区域内的设备的示意图。
位于客厅的动作捕捉模块绑定客厅的电视机和空调、绑定卫生间的热水器以及卧室1的空调，位于卫生间的动作捕捉模块绑定卫生间的热水器，位于卧室1的动作捕捉模块绑定卧室1的空调。客厅对应的体感动作语义模型为全局体感动作语义模型，卫生间和卧室1对应的体感动作语义模型为局部体感动作语义模型。
实施例五
本实施例提供一种基于动作捕捉的设备控制装置。图7是根据本发明第五实施例的基于动作捕捉的设备控制装置的结构图。本实施例的基于动作捕捉的设备控制装置可以设置在网关中。
该基于动作捕捉的设备控制装置，包括：
捕捉模块710，用于通过动作捕捉模块捕捉体感动作信息。
确定模块720，用于根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息。
控制模块730，用于根据所述设备控制信息执行设备控制操作。
进一步地，所述装置还包括第一设置模块(图中未示出)；所述体感动作信息包括：操作动作信息；所述体感动作语义模型，包括：局部体感动作语义模型。
所述第一设置模块，用于预先设置所述局部体感动作语义模型。所述第一设置模块，进一步用于：将所述动作捕捉模块绑定一个区域内的一个以上的设备；通过所述动作捕捉模块，分别采集所述区域内的各设备的操作指令对应的操作动作信息；根据采集的所述区域内的各设备的操作指令对应的操作动作信息，设置所述局部体感动作语义模型；其中，所述设备控制信息包括所述区域内的各设备的操作指令。
进一步地，所述确定模块720，进一步用于如果捕捉到所述体感动作信息的动作捕捉模块绑定了一个区域内的设备，则在所述区域对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令；所述控制模块730，进一步用于根据捕捉到的所述体感动作信息中的操作动作信息对应的操作指令，将所述操作指令发送给所述操作指令对应的设备，指示所述设备执行所述操作指令。
进一步地，所述装置还包括第二设置模块(图中未示出)；所述体感动作信息包括：区域动作信息、设备动作信息和操作动作信息；所述体感动作语义模型，包括：全局体感动作语义模型。
所述第二设置模块，用于预先设置所述全局体感动作语义模型。所述第二设置模块，进一步用于：将所述动作捕捉模块绑定多个区域内的设备；通过所述动作捕捉模块，分别采集每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息；根据采集的每个所述区域对应的区域动作信息，每个所述区域内的设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，设置所述全局体感动作语义模型；其中，所述设备控制信息包括每个区域的信息、每个所述区域内的每个设备的信息以及每个所述设备的操作指令。
进一步地，所述确定模块720，进一步用于如果捕捉到所述体感动作信息的动作捕捉模块绑定了多个区域内的设备，则在所述全局体感动作语义模型中，查询捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令；所述控制模块730，进一步用于根据捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令，将所述操作指令发送给所述区域内的所述设备，指示所述设备执行所述操作指令。
本实施例所述的装置的功能已经在图1～图6所示的方法实施例中进行了描述，故本实施例的描述中未详尽之处，可以参见前述实施例中的相关说明，在此不做赘述。
尽管为示例目的，已经公开了本发明的优选实施例，本领域的技术人员将意识到各种改进、增加和取代也是可能的，因此，本发明的范围应当不限于上述实施例。

Claims (6)

1.一种基于动作捕捉的设备控制方法，其特征在于，包括：
通过动作捕捉模块捕捉体感动作信息；
根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息；
根据所述设备控制信息执行设备控制操作；
所述体感动作信息包括第一体感动作信息，所述第一体感动作信息包括：操作动作信息；
所述体感动作语义模型，包括：局部体感动作语义模型；
预先设置所述局部体感动作语义模型的步骤，包括：
将所述动作捕捉模块绑定一个区域内的一个以上的设备；
通过所述动作捕捉模块，分别采集所述区域内的各设备的操作指令对应的操作动作信息；
根据采集的所述区域内的各设备的操作指令对应的操作动作信息，设置所述局部体感动作语义模型；其中，所述设备控制信息包括所述区域内的各设备的操作指令；
所述体感动作信息还包括第二体感动作信息，所述第二体感动作信息包括：区域动作信息、设备动作信息和操作动作信息；
所述体感动作语义模型，包括：全局体感动作语义模型；
预先设置所述全局体感动作语义模型的步骤，包括：
将所述动作捕捉模块绑定多个区域内的设备；
通过所述动作捕捉模块，分别采集每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息；
根据采集的每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，设置所述全局体感动作语义模型；其中，所述设备控制信息包括每个区域的信息，每个所述区域内的每个设备的信息以及每个所述设备的操作指令。
2.如权利要求1所述的方法，其特征在于，
所述根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息，包括：
如果捕捉到所述体感动作信息的动作捕捉模块绑定了一个区域内的设备，则在所述区域对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令；
所述根据所述设备控制信息执行设备控制操作，包括：根据捕捉到的所述体感动作信息中的操作动作信息对应的操作指令，将所述操作指令发送给所述操作指令对应的设备，指示所述设备执行所述操作指令。
3.如权利要求1所述的方法，其特征在于，
所述根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息，包括：
如果捕捉到所述体感动作信息的动作捕捉模块绑定了多个区域内的设备，则在所述全局体感动作语义模型中，查询捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令；
所述根据所述设备控制信息执行设备控制操作，包括：根据捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令，将所述操作指令发送给所述区域内的所述设备，指示所述设备执行所述操作指令。
4.一种基于动作捕捉的设备控制装置，其特征在于，包括：
捕捉模块，用于通过动作捕捉模块捕捉体感动作信息；
确定模块，用于根据预先设置的体感动作语义模型，确定所述体感动作信息对应的设备控制信息；
控制模块，用于根据所述设备控制信息执行设备控制操作；所述装置还包括第一设置模块；
所述体感动作信息包括第一体感动作信息，所述第一体感动作信息包括：操作动作信息；
所述体感动作语义模型，包括：局部体感动作语义模型；
所述第一设置模块，用于预先设置所述局部体感动作语义模型；
所述第一设置模块，进一步用于：
将所述动作捕捉模块绑定一个区域内的一个以上的设备；
通过所述动作捕捉模块，分别采集所述区域内的各设备的操作指令对应的操作动作信息；
根据采集的所述区域内的各设备的操作指令对应的操作动作信息，设置所述局部体感动作语义模型；其中，所述设备控制信息包括所述区域内的各设备的操作指令；
所述装置还包括第二设置模块；
所述体感动作信息还包括第二体感动作信息，所述第二体感动作信息包括：区域动作信息、设备动作信息和操作动作信息；
所述体感动作语义模型，包括：全局体感动作语义模型；
所述第二设置模块，用于预先设置所述全局体感动作语义模型；
所述第二设置模块，进一步用于：
将所述动作捕捉模块绑定多个区域内的设备；
通过所述动作捕捉模块，分别采集每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息；
根据采集的每个所述区域对应的区域动作信息、每个所述区域内的每个设备对应的设备动作信息以及每个所述设备的操作指令对应的操作动作信息，设置所述全局体感动作语义模型；其中，所述设备控制信息包括每个区域的信息，每个所述区域内的每个设备的信息以及每个所述设备的操作指令。
5.如权利要求4所述的装置，其特征在于，
所述确定模块，进一步用于如果捕捉到所述体感动作信息的动作捕捉模块绑定了一个区域内的设备，则在所述区域对应的局部体感动作语义模型中，查询捕捉到的所述体感动作信息中的操作动作信息对应的操作指令；
所述控制模块，进一步用于根据捕捉到的所述体感动作信息中的操作动作信息对应的操作指令，将所述操作指令发送给所述操作指令对应的设备，指示所述设备执行所述操作指令。
6.如权利要求4所述的装置，其特征在于，
所述确定模块，进一步用于如果捕捉到所述体感动作信息的动作捕捉模块绑定了多个区域内的设备，则在所述全局体感动作语义模型中，查询捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令；
所述控制模块，进一步用于根据捕捉到的所述体感动作信息中的区域动作信息对应的区域的信息、设备动作信息对应的设备的信息以及操作动作信息对应的操作指令，将所述操作指令发送给所述区域内的所述设备，指示所述设备执行所述操作指令。
CN201710116304.8A 2017-03-01 2017-03-01 一种基于动作捕捉的设备控制方法和装置 Active CN106951071B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710116304.8A CN106951071B (zh) 2017-03-01 2017-03-01 一种基于动作捕捉的设备控制方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710116304.8A CN106951071B (zh) 2017-03-01 2017-03-01 一种基于动作捕捉的设备控制方法和装置

Publications (2)

Publication Number Publication Date
CN106951071A CN106951071A (zh) 2017-07-14
CN106951071B true CN106951071B (zh) 2020-09-01

Family

ID=59467708

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710116304.8A Active CN106951071B (zh) 2017-03-01 2017-03-01 一种基于动作捕捉的设备控制方法和装置

Country Status (1)

Country Link
CN (1) CN106951071B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110547718A (zh) * 2018-06-04 2019-12-10 常源科技（天津）有限公司 一种智能翻盖马桶以及控制方法
CN110197171A (zh) * 2019-06-06 2019-09-03 深圳市汇顶科技股份有限公司 基于用户的动作信息的交互方法、装置和电子设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103529778A (zh) * 2013-09-30 2014-01-22 福建星网视易信息系统有限公司 一种智能家居控制方法、装置和系统
CN104102181A (zh) * 2013-04-10 2014-10-15 海尔集团公司 智能家居控制方法、装置及系统
CN104598027A (zh) * 2014-12-30 2015-05-06 中国农业大学 一种基于用户行为分析的体感控制多媒体培训系统
CN105045140A (zh) * 2015-05-26 2015-11-11 深圳创维－Rgb电子有限公司 智能控制受控设备的方法和装置
CN105046281A (zh) * 2015-08-14 2015-11-11 安徽创世科技有限公司 一种基于Kinect的人体行为检测方法
CN105116783A (zh) * 2015-06-24 2015-12-02 深圳市兰丁科技有限公司 控制界面切换方法及装置
CN105425954A (zh) * 2015-11-04 2016-03-23 哈尔滨工业大学深圳研究生院 应用于智能家居中的人机交互方法及系统
CN105607499A (zh) * 2016-01-05 2016-05-25 北京小米移动软件有限公司 设备分组方法及装置
CN105700373A (zh) * 2016-03-15 2016-06-22 北京京东尚科信息技术有限公司 智能中控装置及其自动标识方法
CN105843050A (zh) * 2016-03-18 2016-08-10 美的集团股份有限公司 智能家居系统、智能家居控制装置和方法
CN205594339U (zh) * 2016-04-13 2016-09-21 南京工业职业技术学院 一种体感智能家居控制系统
CN106200397A (zh) * 2016-08-10 2016-12-07 深圳博科智能科技有限公司 智能家居网关及智能家居网关控制方法
CN106444415A (zh) * 2016-12-08 2017-02-22 湖北大学 智能家居控制方法及系统

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104102181A (zh) * 2013-04-10 2014-10-15 海尔集团公司 智能家居控制方法、装置及系统
CN103529778A (zh) * 2013-09-30 2014-01-22 福建星网视易信息系统有限公司 一种智能家居控制方法、装置和系统
CN104598027A (zh) * 2014-12-30 2015-05-06 中国农业大学 一种基于用户行为分析的体感控制多媒体培训系统
CN105045140A (zh) * 2015-05-26 2015-11-11 深圳创维－Rgb电子有限公司 智能控制受控设备的方法和装置
CN105116783A (zh) * 2015-06-24 2015-12-02 深圳市兰丁科技有限公司 控制界面切换方法及装置
CN105046281A (zh) * 2015-08-14 2015-11-11 安徽创世科技有限公司 一种基于Kinect的人体行为检测方法
CN105425954A (zh) * 2015-11-04 2016-03-23 哈尔滨工业大学深圳研究生院 应用于智能家居中的人机交互方法及系统
CN105607499A (zh) * 2016-01-05 2016-05-25 北京小米移动软件有限公司 设备分组方法及装置
CN105700373A (zh) * 2016-03-15 2016-06-22 北京京东尚科信息技术有限公司 智能中控装置及其自动标识方法
CN105843050A (zh) * 2016-03-18 2016-08-10 美的集团股份有限公司 智能家居系统、智能家居控制装置和方法
CN205594339U (zh) * 2016-04-13 2016-09-21 南京工业职业技术学院 一种体感智能家居控制系统
CN106200397A (zh) * 2016-08-10 2016-12-07 深圳博科智能科技有限公司 智能家居网关及智能家居网关控制方法
CN106444415A (zh) * 2016-12-08 2017-02-22 湖北大学 智能家居控制方法及系统

Also Published As

Publication number Publication date
CN106951071A (zh) 2017-07-14

Similar Documents

Publication Publication Date Title
CN105785782B (zh) 智能家居设备控制方法及装置
CN109974235B (zh) 控制家电设备的方法、装置和家电设备
CN110308660B (zh) 智能设备控制方法及装置
WO2016065813A1 (zh) 自定义智能设备场景模式的方法和装置
CN107566227A (zh) 家电设备的控制方法、装置、智能设备及存储介质
US20190079651A1 (en) Control method and apparatus for smart home
WO2016065812A1 (zh) 基于设定场景模式的智能设备控制方法和装置
CN104102181B (zh) 智能家居控制方法、装置及系统
CN111505947B (zh) 家电设备控制方法、智能门锁及计算机可读存储介质
CN110426962A (zh) 一种智能家居设备的控制方法及系统
CN108768806A (zh) 家电设备控制方法、装置、遥控器、终端、服务器及介质
CN107682236B (zh) 基于计算机图像识别的智能家居交互系统及方法
CN110287937A (zh) 基于知识图谱的设备状态提示方法、控制设备及控制系统
CN107229262A (zh) 一种智能家居系统
CN106951071B (zh) 一种基于动作捕捉的设备控制方法和装置
CN113867163A (zh) 一种智能家居场景切换方法、装置、智能终端及存储介质
CN108616430A (zh) 智能家居自动化配置方法以及装置
CN202889540U (zh) 一种机顶盒的智能待机系统及机顶盒
CN107070701A (zh) 物联网家电设备的控制方法及装置
WO2023005425A1 (zh) 用于控制空调的方法、装置及空调
CN107426064A (zh) 物联网控制情景的配置方法及装置
CN109143882A (zh) 一种控制方法及装置
CN114326423A (zh) 一种场景化控制方案的自动生成方法及场景化控制设备
CN105511279B (zh) 家用电器远程控制方法及系统、家用电器和服务器
CN106791362A (zh) 一种拍照设置方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210205

Address after: Room 601-606, 6 / F, Pacific International Building, 106 Zhichun Road, Haidian District, Beijing 100086

Patentee after: HAIER UPLUS INTELLIGENT TECHNOLOGY (BEIJING) Co.,Ltd.

Patentee after: Haier Smart Home Co., Ltd.

Address before: Room 601-606, 6 / F, Pacific International Building, 106 Zhichun Road, Haidian District, Beijing 100086

Patentee before: HAIER UPLUS INTELLIGENT TECHNOLOGY (BEIJING) Co.,Ltd.