CN105676656A - 处理方法及电子设备 - Google Patents
处理方法及电子设备 Download PDFInfo
- Publication number
- CN105676656A CN105676656A CN201511030102.9A CN201511030102A CN105676656A CN 105676656 A CN105676656 A CN 105676656A CN 201511030102 A CN201511030102 A CN 201511030102A CN 105676656 A CN105676656 A CN 105676656A
- Authority
- CN
- China
- Prior art keywords
- event
- equipment
- image
- display
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title abstract description 5
- 230000000694 effects Effects 0.000 claims abstract description 51
- 238000000034 method Methods 0.000 claims description 36
- 230000008569 process Effects 0.000 claims description 22
- 238000002834 transmittance Methods 0.000 claims description 8
- 230000008447 perception Effects 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 5
- 230000002596 correlated effect Effects 0.000 abstract 1
- 239000011521 glass Substances 0.000 description 29
- 230000009471 action Effects 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例提供了一种处理方法和电子设备,处理方法包括:检测针对第一设备的第一操作,获得第一设备的第一事件;基于第一设备的第一事件,确定与第一设备的第一事件关联的第二设备和第二设备的第二事件;执行第一指令,使得在第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。通过本发明提供的上述实施例,可以使用户直观地感受到实际生活环境中多个智能设备之间的联动效果,更容易理解智能设备和智能家居的便利性。
Description
技术领域
本发明涉及一种处理方法以及执行该处理方法的电子设备。
背景技术
智能家电就是将微处理器、传感器技术和/或网络通信技术引入家电设备后形成的家电产品,具有自动感知住宅空间状态和家电自身状态、家电服务状态,能够自动控制和接收住宅用户在住宅内或远程的控制指令,同时,智能家电作为智能家居的组成部分,能够与住宅内其他家电和家居,设施互联组成系统,实现智能家居功能。
目前,智能家电发展迅速,但用户习惯于使用普通家电设备,并没有兴趣了解智能家电,而且现有技术中用于介绍智能家电的宣传资料大多是使用图文介绍,这种方案的缺点是很不直观,用户无法进行操作体验,仍然需要通过字面含义去理解一项并不熟悉的陌生事物。
发明内容
本发明实施例的目的在于提供一种处理方法以及电子设备,以解决上述技术问题。
根据本发明的一个方面,提供了一种处理方法,包括:检测针对第一设备的第一操作,获得第一设备的第一事件;基于第一设备的第一事件,确定与第一设备的第一事件关联的第二设备和第二设备的第二事件;执行第一指令,使得在第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。
根据本发明的另一个方面,提供了一种电子设备,包括:采集装置,用于采集采集区域内的图像集合;处理装置,用于基于图像集合,检测针对第一设备的第一操作,获得第一设备的第一事件;并基于第一事件,确定与第一事件关联的第二设备以及第二设备的第二事件;显示装置,用于显示第二事件产生的效果的图像,以使得在第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。
通过本发明提供的上述实施例,可以使用户直观地感受到实际生活环境中多个智能设备之间的联动效果,更容易理解智能设备、智能家居的便利性。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例的描述中所需要使用的附图作简单的介绍。下面描述中的附图仅仅是本发明的示例性实施例。
图1是根据本发明第一个实施例的处理方法流程图;
图2是根据本发明第二个实施例的处理方法的示意图;
图3a-3b是根据本发明第二个实施例的处理方法涉及的场景的示意图;
图4是根据本发明第四个实施例的电子设备的示范性架构图;
具体实施方式
在下文中,将参考附图详细描述本发明的优选实施例。注意,在本说明书和附图中,具有基本上相同步骤和元素用相同的附图标记来表示,且对这些步骤和元素的重复解释将被省略。
图1描述了根据本发明的一个实施例的处理方法100的流程图。下面将参照图1来描述本发明的一个实施例的图像处理方法。处理方法100可以应用于上述电子设备,该电子设备可以被配置来对数据进行显示和处理。
参见图1,在步骤S101中,检测针对第一设备的第一操作,获得第一设备的第一事件。根据本发明的一个示例,可以首先采集采集区域内的图像集合,然后,基于采集的图像集合,判断在采集区域内是否有针对第一设备而执行的第一操作,如果有这样的操作,则针对包括执行第一操作的图像集合,识别第一设备的第一操作;在识别到第一操作后,基于第一操作获得关于第一设备的第一事件。
在本发明实施例中,获取第一设备的第一操作,可以通过采集图像来获取。例如,在可穿戴设备(如电子眼镜、电子头盔)上安装有摄像头,可以拍摄图像,然后根据图像自动识别穿戴者周围的环境以及穿戴者的操作,从而检测针对第一设备的第一操作。可穿戴设备中可以包括限定维持装置,用于维持可穿戴设备和使用者身体至少一部分的相对位置关系。这样,可穿戴设备就可以实时的采集并精确的识别出用户实施的各种动作。例如,当用户佩戴电子眼镜打开窗户时,电子眼镜检测到用户针对“窗户”有“打开窗户的操作”时,基于该操作,可以获取到针对“窗户”的“窗户打开”这个事件。
当然,本领域技术人员应该了解,可穿戴设备仅仅是本发明的一个示例,用户也可以使用智能手机、平板或笔记本等其他电子设备来获取第一设备的第一操作。例如,利用手机的摄像头实时摄取用户的动作,根据动作来检测用户针对第一设备的第一操作。
还例如,上述关于第一设备的第一操作可以是用户对电子设备屏幕的触碰得到的。可以在这些电子设备中安装一个应用程序,当应用程序运行后,在电子设备的显示屏幕上显示第一设备的图像。可选地,可以采集用户所在的第一环境的图像,从第一环境中识别第一设备;根据识别结果生成第一设备的图像。例如,将用户家居环境采集后生成图像,从该图像中可以识别出用户家居环境中的第一设备,例如,冰箱。当然,可替换的,如果没有从环境图像中识别出第一设备,也可以在环境图像中添加一个第一设备的图像。例如,在上述环境图像中叠加一个第一设备的标识,该标识可以具有第一设备的形状外观,将该第一设备的标识配置为用户可以操作的对象,当用户触碰显示屏幕上的该标识时,电子设备可以基于用户的触碰获取对应该第一设备的标识的第一操作。
然后,检测第一操作触发指令,其中,第一操作触发指令与针对第一设备的图像的第一操作相关联。例如,可以将用户的单击、双击屏幕中的第一设备而触发的第一设备的动作作为针对第一设备的图像的第一操作,例如,用户对屏幕上显示的冰箱门的单击触发的“打开冰箱门”,可以作为对冰箱的第一操作。当电子设备检测到用户的上述第一操作后,生成第一操作触发指令。电子设备基于第一操作触发指令,获取第一设备的图像的第一事件。例如,当检测到用户对屏幕上显示的冰箱门的单击操作而触发的“打开冰箱门操作”,从而获取到“打开冰箱门”的第一事件。
在步骤S102中,基于第一设备的第一事件,确定与第一设备的第一事件关联的第二设备和第二设备的第二事件。根据本发明的一个示例,在步骤S101中确定了第一设备的第一事件后,在步骤S102中,可以基于第一事件确定与之关联的第二设备的第二事件,作为对第一事件的响应。例如,在日常生活中,用户打开房门后,下一步往往需要点亮房灯,因此,可以将这两个事件关联起来。还例如,用户打开冰箱门后,可能开始准备做饭,因此,可以将打开冰箱门和电饭煲通电这两个事件关联起来。
根据本发明的一个示例,可以预先建立关联库,关联库包括至少一条关联关系,该关联关系为第一设备的第一事件触发第二设备的第二事件的关联关系。例如,在关联库中,可以包括:“打开冰箱门,电饭煲自动通电煮饭”的关联关系;或者,“打开门,灯点亮”的关联关系。在上述关联关系中,冰箱、门是第一设备;电饭煲、灯是第二设备。打开冰箱门,打开门是第一事件;电饭煲通电煮饭、灯点亮是第二事件。
当需要基于第一设备的第一事件,确定第二设备的第二事件时,可以访问上述关联库来获取其中的关联关系数据,根据关联库中的关联关系,确定与第一设备的第一事件关联的第二设备和第二设备的第二事件。
在步骤S103中,执行第一指令,使得在第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。根据本发明的一个示例,当在步骤S102中确定了第二事件之后,在步骤S103中,执行指令模拟一个场景或增强显示一个场景,使得在第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。例如,在执行第一指令后,使用者能够感知到与发生第二事件相同的或类似的效果。例如,用户佩戴电子眼镜,在步骤S101中,电子眼镜检测到用户的“开门”操作,并获取到了“门打开”这个事件。在步骤S102中,电子眼镜确定了“门打开”与“灯点亮”的事件关联。在步骤S103中,用户走进房间内,在用户佩戴的电子眼镜上执行第一指令,从而在电子眼镜中模拟房内灯亮了的场景。例如,当房内没有灯时或采集装置的采集范围内没有灯时,可以提高电子眼镜中显示的房间亮度来进行模拟;或者,当房内有灯时,可以改变电子眼镜中显示的灯的颜色或改变电子眼镜中显示的灯的亮度来进行模拟。此时,虽然房内没有灯,或者虽然有灯但灯没有亮,佩戴者通过电子眼镜,也可以感受到房内灯亮的效果。
通过本发明提供的上述实施例,用户可以直观地体验到智能家居的中多个智能设备之间的联动效果,比之现有技术中用户只能通过简单文字描述来了解智能家居,本发明的方案可以使用户的感受更接近真实,当然也可以使用户更容易理解智能设备、智能家居的便利性。
图2描述了根据本发明的第二个实施例的处理方法的流程图,图3a-3c描述了根据第二实施例的处理方法中不同场景示意图。下面将参照图2以及图3a-3c来描述本发明第二个实施例。第二个实施例包括步骤S201-S204,其中步骤S201-步骤S202与第一实施例类似,例如,步骤S201,检测针对第一设备的第一操作,获得第一设备的第一事件,类似于步骤S101,检测针对第一设备的第一操作,获得第一设备的第一事件。步骤S202,基于第一设备的第一事件,确定与第一设备的第一事件关联的第二设备和第二设备的第二事件,类似于步骤S102,基于第一设备的第一事件,确定与第一设备的第一事件关联的第二设备和第二设备的第二事件。为了说明书的简洁,以下仅对第二实施例中的步骤S203以及步骤S204做详细介绍。
在步骤S203中,执行所述第一指令;在步骤S204中,基于所述第一指令在显示装置上显示与所述第二事件相关的特定显示内容,以使得所述使用者观看所述显示装置,能够感知所述特定显示内容以及环境内容,从而感知到与发生所述第二事件匹配的效果。图3a示出了本发明第二实施例的处理方法中涉及的第一场景。根据本发明的一个示例,在该场景中,包括第一设备310。如果第一设备的第一事件是打开冰箱门,与之关联的第二设备的第二事件是“电饭煲通电”,那么,图3a示出了在第一事件没有发生时的场景,例如,在冰箱门没有打开时,此时即使使用者观看所述显示装置,也感知不到与发生所述第二事件匹配的效果。例如,即使使用者透过显示装置看到了第二设备或类似设备,由于此时第二事件没有发生,作为第二设备或类似设备的电饭煲也是第二事件未发生时的状态,即没有通电的状态。
图3b示出了本发明第二实施例的处理方法中涉及的第二场景,在该场景中,第一设备310的第一事件发生。例如,“冰箱门打开”,那么,根据本发明的一个示例,在步骤S203中,第一指令执行后,在步骤S204中,可以在显示装置上直接显示第二设备320以及第二事件发生所产生的效果的图像。例如,在显示装置可视区域上显示环境内容,同时在可视区域的某个位置处显示作为第二设备320的“电饭煲”的图像以及作为第二事件发生所产生的效果的图像的“电饭煲电源指示灯亮”的图像。图3b示出了用户佩戴的电子眼镜上的可视区域显示上述内容的示意图。当然,如果用户佩戴电子头盔时,也可以在电子头盔的显示区域显示上述内容。
可替换地,当电子眼镜具有一定透光率而能看到真实环境内容时,可以在透过电子眼镜看到的真实环境中的空桌子上显示上述内容。
可替换地,还可以通过电子设备进行投影,例如将电子设备的显示装置作为投影装置来发射光线,在真实环境内容中叠加投影图像,使得用户能够观看到所述投影图像以及所述环境内容叠加后的内容。例如,通过手机将作为第二设备的“电饭煲”的图像以及作为第二事件发生所产生的效果的图像的“电饭煲电源指示灯亮”的图像投影到桌面上,或者投影到厨房中的电饭煲上,使投影图像覆盖环境图像,从而使用户直观感受到显示的内容以及环境内容的组合后的效果。
根据本发明的另一个示例,在步骤S202之后,步骤S203之前,可以对采集区域进行采集得到图像集合。所述采集区域例如是可穿戴设备的可视范围,例如,当用户佩戴电子眼镜时,电子眼镜的摄像头可以将用户可视范围内的所有区域作为采集区域进行采集。然后,如果识别采集区域中是否包括与第二设备匹配的第三设备,当识别到第三设备时,执行第一指令。
在该示例中,第二设备是根据步骤S202中确定的与第一设备关联的设备,可以通过查找关联库得到。第三设备可以与第二设备具有相同设备属性的设备。第二设备的属性可以仅包括设备类型,例如,电饭煲、冰箱等。例如,如果第二设备是电饭煲,那么第三设备可以是任何型号、颜色的电饭煲。可选地,第二设备的属性还可以包括除类型以外的其他属性,例如,颜色、品牌、型号等,这样,第三设备也应当和上述所有属性相同。
图3c示出了本发明第二实施例的处理方法的第三场景,在该场景中,第一设备310的第一事件发生。例如,“冰箱门打开”。在识别到采集区域中存在第三设备330后,可以执行第一指令,并基于第一指令以及第三设备330,确定在显示装置上显示的特定显示内容以及该特定显示内容应当显示的第一位置331。在第一位置331处显示特定显示内容,以使得使用者观看显示装置,能够感知特定显示内容以及环境内容,从而感知到与发生第二事件匹配的效果。例如,如图3c所示,在电子眼镜中显示的特定显示内容可以是,“电饭煲的电源指示灯为红色”,以表示电饭煲通电。第一位置331例如可以是电饭煲的电源指示灯位置。这样,当在显示装置中电饭煲的电源指示灯位置显示红色时,用户观看显示装置,就可以看到环境内容中的第三设备330,以及特定显示内容所显示的电源指示灯位置显示红色。例如,看到电饭煲以及电饭煲电源指示灯位置的电源指示灯显示为红色,即特定显示内容与第三设备330叠加后的效果,从而感受到电饭煲通电后的效果,从而使用户可以直观地感受到智能冰箱和智能电饭煲之间的联动效果,体会到智能家居的便利性。
根据本发明的一个示例,前面所述的环境内容是用户看到的真实的环境内容。例如,显示装置是透光率超过第一阈值,第一阈值可以是30%-80%。当第一阈值是30%时,就可以满足透明需求,用户能够透过显示装置看到显示装置后面的环境内容。当第一阈值为80%时,透光性更好,用户能够透过显示装置清晰地看到显示装置后面的环境内容。可选地,第一阈值还可以是50%,用户通过显示装置,不但可以清晰地看到显示装置的显示区域显示的内容,还能清晰地看到显示装置后面的环境内容。例如,如图3c所示,显示装置为电子眼镜的显示屏幕,显示屏幕上仅显示特定显示内容X,电子眼镜显示屏幕的透光率超过第一阈值。用户透过电子眼镜,可以同时看到显示内容和真实环境内容。这样,用户透过电子眼镜,能看到现实环境中的第三设备;并且,用户还能看到显示屏幕上看到电源指示灯变红,从而感知到特定显示内容X与第三设备叠加后的效果,也就是与第三设备真的通电相匹配的效果。
根据本发明的另一个示例,前面所述的环境内容还可以是通过采集得到的真实环境内容的图像显示。例如,显示装置的可视区域并不透光,用户通过显示区域,仅能看到其上显示的内容,不能看到后面的真实环境内容。例如,用户佩戴电子头盔后,由于电子头盔的可视区域可以显示特定内容以及对真实环境内容进行采集后生成的图像,这样,用户能够看到真实环境中第三设备的图像以及电源指示灯变红的图像,也可以感知到好像第三设备通电一样的效果。
本发明实施例,通过在显示装置上显示特定显示内容,用户能够观看到特定显示内容和环境内容的组合后的效果,使用户可以在自己熟悉的场景中感受到智能家居带来的变化,体验更直观,感受更具体。
以上介绍的是根据本发明实施例的处理方法,下面将介绍可以执行前述方法的电子设备。
在本发明的以下实施例中,电子设备指的是能够与其他设备通信的设备。电子设备的具体形式包括但不限于移动电话、个人计算机、数码相机、个人数字助手、便携式计算机、游戏机、电子眼镜、头盔等可穿戴设备。
图4示出了根据本发明第三个实施例的电子设备的示范性结构图。下面将参照图4来描述根据本发明第三个实施例的电子设备400。该电子设备400可以用于执行前述实施例中的处理方法100和处理方法200,与前述处理方法相同的部分,以下仅作简要描述。
参见图4,电子设备400包括:采集装置410,处理装置420,显示装置430。根据本发明的一个示例,采集装置410用于采集采集区域内的图像集合。采集装置410采集完图像集合后,可以将采集的图像直接发送给处理装置420来处理;或者,也可以在初步处理后发送给处理装置420进一步处理。采集装置可以是可穿戴设备中的摄像头,移动终端、平板、笔记本电脑等其他电子设备中的摄像头等。
处理装置420,用于基于所述图像集合,检测针对第一设备的第一操作,获得所述第一设备的第一事件;并基于所述第一事件,确定与所述第一事件关联的第二设备以及第二设备的第二事件。另外,处理装置在确定了所述第二事件之后,还将进一步根据需要,生成需要在显示装置430上显示的第二事件产生的效果的图像,并发送给显示装置430来显示。处理装置420的上述处理功能已经在前述第一实施例和第二实施例中详细描述过,可以参照图1-图3以及对应的文字部分来了解处理装置420的上述处理功能。处理装置420可以是可穿戴设备中的微处理芯片、移动终端、笔记本电脑等装置中的中央处理器等。
显示装置430接收到处理装置发送的数据后进行显示,从而显示所述第二事件产生的效果的图像,以使得在所述第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。显示装置430例如可以是可穿戴设备中的显示器,如电子眼镜、电子头盔中的显示部分。也可以是移动终端、平板、笔记本电脑的显示器。
根据本发明的一个示例,显示装置430的显示屏幕能够显示与所述第二事件相关的所述特定显示内容,并且使所述使用者观看所述可视区域时,能看到显示装置显示的所述特定显示内容,且能透过所述显示装置看到所述环境内容。例如,显示装置430的可视区域具有超过阈值的第一透光率,第一透光率可以是30%-80%,可选地,第一透光率为50%。用户通过显示装置,不但可以看到显示装置的显示区域显示的内容,还能看到显示装置后面的环境内容。例如,显示装置430为电子眼镜的显示屏幕,电子眼镜显示屏幕的透光率超过第一阈值。用户透过电子眼镜,可以同时看到显示内容和真实环境内容。例如,用户通过电子眼镜的半透光属性,可以看到现实环境中的电饭煲,还可以从显示屏幕上看到虚拟的电源指示灯变红,从而感受到显示内容与环境内容相融合后的效果,进而在所述第二事件未发生时,使用者也能感知到与发生第二事件匹配的效果。
根据本发明的另一个示例,显示装置430可以显示所述特定显示内容以及所述环境内容,其中,所述特定显示内容是所述处理装置基于所述第二事件生成的内容;所述环境内容是所述采集装置采集的图像的内容。例如,显示装置430可以显示采集装置410采集得到的真实环境内容生成的图像以及特定显示内容。例如,显示装置430可以是电子头盔的显示部分,可以显示特定内容以及对真实环境内容进行采集后生成的图像。这样,用户佩戴电子头盔时,能够看到真实环境中电饭煲图像以及电饭煲电源指示灯变红的图像,将这两幅图像相融合,也可以感知到与电饭煲通电一样的效果。
根据本发明的另一个示例,显示装置430还可以是投影装置,能够发射光线,投影装置可以在环境内容中叠加投影图像,使得所述使用者能够观看到投影图像以及环境内容,从而感知到与发生所述第二事件匹配的效果。例如,通过手机将作为第二设备的“电饭煲”的图像以及作为第二事件发生所产生的效果的图像的“电饭煲电源指示灯亮”的图像投影到桌面上,或者投影到厨房中电饭煲的位置上,使投影图像覆盖环境图像,从而使用户直观感受到显示的内容以及环境内容的组合后的效果。
可选地,当电子设备400是可穿戴设备时,电子设备还可以包括限定维持装置440,用于维持可穿戴设备和使用者身体至少一部分的相对位置关系。这样,可穿戴设备就可以实时的采集并精确的识别出用户实施的各种动作。可选地,该限定维持装置440可以维持可穿戴设备(例如,电子眼镜、电子头盔)与用户头部的相对位置关系,从而可以精准地获取用户头部动作,动作的角度、位移等参数。例如,该限定维持装置440可以安装在上。
可选地,当电子设备400是可穿戴设备时,其中的采集装置410的采集方向与可穿戴设备穿戴后的用户的视向方向匹配,从而可以准确的获取用户视向方向,确定用户关注的焦点。
当然,本领域技术人员应该了解,可穿戴设备仅仅是本发明的一个示例,电子设备400还可以是智能手机、平板或笔记本等其他电子设备,用户也可以使用这些设备来获取第一设备的第一操作,并显示第二事件发生后的效果。
例如,可以利用手机的摄像头实时摄取用户的动作,根据动作来检测用户针对第一设备的第一操作。可替换的,电子设备400还可以包括输入装置450,用于接收所述使用者针对第一设备的图像的第一操作。当显示装置430显示第一设备的图像时;处理装置420基于输入装置450接收到的用户操作,获取到针对第一设备的图像的第一操作,并生成第一操作触发指令,这样,处理装置420可以基于第一操作触发指令,获取第一设备的图像的第一事件。
例如,在电子设备400的显示装置430上显示第一设备的图像,将该第一设备的图像配置为用户可以操作的对象,当用户对电子设备屏幕上显示的该图像进行输入操作时,电子设备对该输入操作进行检测,如果输入位置与图像匹配,则获取对应该第一设备的图像的第一操作。可选地,可以通过采集装置410采集用户所在的第一环境的图像,从第一环境中识别第一设备;根据识别结果生成第一设备的图像。例如,采集装置410采集用户家居环境后生成图像,从该图像中可以识别出用户家居环境中的第一设备,例如,冰箱。
然后,用户通过输入装置440进行触控操作,可以将用户的单击或双击屏幕中的第一设备而触发的第一设备的动作作为针对第一设备的图像的第一操作,例如,用户对屏幕上显示的冰箱门的单击触发的“打开冰箱门”操作,可以作为对冰箱的第一操作。当电子设备400检测到用户的上述第一操作后,生成第一操作触发指令。电子设备400基于第一操作触发指令,获取第一设备的图像的第一事件。例如,当检测到用户对屏幕上显示的冰箱门的单击操作而触发的“打开冰箱门操作”,从而获取到“打开冰箱门”的第一事件。
通过本发明实施例的电子设备,可以使电子设备使用者直观地体验到智能家居的中多个智能设备之间的联动效果,本发明的电子设备可以使用户的感受更接近真实,当然也可以使用户更容易理解智能设备以及智能家居的便利性。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件或计算机软件或者二者的结合来实现。并且软件模块可以置于任意形式的计算机存储介质中。为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
本领域技术人员应该理解,可依赖于设计需求和其它因素对本发明进行各种修改、组合、部分组合和替换,只要它们在所附权利要求书及其等价物的范围内。
Claims (16)
1.一种处理方法,包括:
检测针对第一设备的第一操作,获得所述第一设备的第一事件;
基于所述第一设备的第一事件,确定与所述第一设备的第一事件关联的第二设备和所述第二设备的第二事件;
执行第一指令,使得在所述第二事件未发生时,使用者能感知到与发生所述第二事件匹配的效果。
2.根据权利要求1所述的方法,其中,
所述检测针对第一设备的第一操作,获得所述第一设备的第一事件的步骤包括:
采集采集区域内的图像集合;
如果在所述采集区域内针对第一设备执行第一操作,针对包括执行第一操作的图像集合,识别所述第一设备的第一操作;
基于所述第一操作获得所述第一事件。
3.根据权利要求1所述的方法,其中,
所述基于所述第一设备的第一事件,确定与所述第一设备的第一事件关联的第二设备和所述第二设备的第二事件的步骤包括:
获取关联库,所述关联库包括至少一条关联关系,所述关联关系为第一设备的第一事件触发第二设备的第二事件的关联关系;
基于所述关联库确定与所述第一设备的第一事件关联的第二设备和所述第二设备的第二事件。
4.根据权利要求1所述的方法,其中,
所述执行第一指令,使得在所述第二事件未发生时,使用者能感知到与发生所述第二事件匹配的效果的步骤包括:
执行所述第一指令;
基于所述第一指令在显示装置上显示所述第二事件产生的效果的图像,以使得所述使用者仅通过所述显示装置感知到与发生所述第二事件匹配的效果。
5.根据权利要求1所述的方法,其中,
所述执行第一指令,使得在所述第二事件未发生时,使用者能感知到与发生所述第二事件匹配的效果的步骤包括:
执行所述第一指令;
基于所述第一指令在显示装置上显示与所述第二事件相关的特定显示内容,以使得所述使用者观看所述显示装置,能够感知所述特定显示内容以及环境内容,从而感知到与发生所述第二事件匹配的效果。
6.根据权利要求5所述的方法,所述方法还包括:
采集采集区域的图像集合;
如果识别所述采集区域包括与所述第二设备匹配的第三设备时,执行所述第一指令,其中,所述第三设备是与所述第二设备具有相同设备属性的设备。
7.根据权利要求6所述的方法,其中,
执行第一指令,使得在所述第二事件未发生时,使用者能感知到与发生所述第二事件匹配的效果的步骤包括:
执行第一指令;
基于所述第一指令以及所述第三设备,确定在所述显示装置上显示的特定显示内容以及该显示内容显示的第一位置;
在所述第一位置处显示所述特定显示内容,以使得所述使用者观看所述显示装置,能够感知所述特定显示内容以及所述环境内容,从而感知到与发生所述第二事件匹配的效果。
8.根据权利要求4或5所述的方法,
所述执行第一指令,使得在所述第二事件未发生时,使用者能感知到与发生所述第二事件匹配的效果的步骤包括:
执行第一指令;
基于所述第一指令在所述显示装置上显示所述第二设备以及所述第二设备的第二事件发生后的效果的图像,以使得所述使用者通过所述显示装置感知到与发生所述第二事件匹配的效果。
9.根据权利要求4或5所述的方法,所述方法还包括:
显示所述第一设备的图像;
所述检测针对第一设备的第一操作,获得所述第一设备的第一事件的步骤包括:
检测第一操作触发指令,其中,所述第一操作触发指令与针对所述第一设备的图像的第一操作相关联;
基于所述第一操作触发指令,获取所述第一设备的图像的第一事件。
10.根据权利要求9所述的方法,所述方法还包括:
采集第一环境的图像;
从所述第一环境中识别所述第一设备;
根据识别结果生成所述第一设备的图像。
11.一种电子设备,包括:
采集装置,用于采集采集区域内的图像集合;
处理装置,用于基于所述图像集合,检测针对第一设备的第一操作,获得所述第一设备的第一事件;并基于所述第一事件,确定与所述第一事件关联的第二设备以及第二设备的第二事件;
显示装置,用于显示所述第二事件产生的效果的图像,以使得在所述第二事件未发生时,使用者能感知到与发生第二事件匹配的效果。
12.根据权利要求11所述的电子设备,其中,
所述显示装置显示与所述第二事件相关的特定显示内容,使得所述使用者观看所述显示装置,能够感知所述特定显示内容以及环境内容,从而感知到与发生所述第二事件匹配的效果。
13.根据权利要求12所述的电子设备,其中,
所述显示装置的可视区域具有超过阈值的第一透光率,其中,所述显示屏幕能够显示与所述第二事件相关的所述特定显示内容,并且使所述使用者观看所述可视区域时,能看到显示装置显示的所述特定显示内容,且能透过所述显示装置看到所述环境内容。
14.根据权利要求12所述的电子设备,其中,
所述显示装置显示所述特定显示内容以及所述环境内容,其中,所述特定显示内容是所述处理装置基于所述第二事件生成的内容;所述环境内容是所述采集装置采集的图像的内容。
15.根据权利要求12所述的电子设备,其中,所述显示装置是投影装置,用于发射光线,所述投影装置在所述环境内容中叠加投影图像,使得所述使用者能够观看到所述投影图像以及所述环境内容,从而感知到与发生所述第二事件匹配的效果。
16.根据权利要求11或12所述的电子设备,其中,
所述显示装置还显示所述第一设备的图像;
所述电子设备还包括输入装置,用于接收所述使用者针对所述第一设备的图像的第一操作;
所述处理装置基于所述针对第一设备的图像的第一操作,生成第一操作触发指令,并基于该第一操作触发指令,获取所述第一设备的图像的第一事件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511030102.9A CN105676656B (zh) | 2015-12-31 | 2015-12-31 | 处理方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511030102.9A CN105676656B (zh) | 2015-12-31 | 2015-12-31 | 处理方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105676656A true CN105676656A (zh) | 2016-06-15 |
CN105676656B CN105676656B (zh) | 2019-11-26 |
Family
ID=56298405
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201511030102.9A Active CN105676656B (zh) | 2015-12-31 | 2015-12-31 | 处理方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105676656B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107682236A (zh) * | 2017-08-28 | 2018-02-09 | 深圳广田智能科技有限公司 | 基于计算机图像识别的智能家居交互系统及方法 |
WO2018177121A1 (zh) * | 2017-03-27 | 2018-10-04 | 华为技术有限公司 | 一种传感设备的联动方法、装置及系统 |
CN112286062A (zh) * | 2020-09-23 | 2021-01-29 | 青岛经济技术开发区海尔热水器有限公司 | 智能家电联动控制方法、装置、电子设备及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120118091A (ko) * | 2011-04-18 | 2012-10-26 | 채영우 | 터치스크린 제스쳐 입력방식 및 시뮬레이션을 이용한 원격제어장치 및 그 제어방법 |
US20130069985A1 (en) * | 2011-09-21 | 2013-03-21 | Google Inc. | Wearable Computer with Superimposed Controls and Instructions for External Device |
CN103529929A (zh) * | 2012-07-06 | 2014-01-22 | 原相科技股份有限公司 | 手势识别系统及可识别手势动作的眼镜 |
CN103869761A (zh) * | 2012-12-14 | 2014-06-18 | 海尔集团公司 | 家电控制方法及控制系统 |
CN104062758A (zh) * | 2013-03-19 | 2014-09-24 | 联想(北京)有限公司 | 图像显示的方法和显示设备 |
CN104216379A (zh) * | 2014-09-09 | 2014-12-17 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN104484037A (zh) * | 2014-12-12 | 2015-04-01 | 三星电子(中国)研发中心 | 通过可穿戴设备进行智能控制的方法及该可穿戴设备 |
-
2015
- 2015-12-31 CN CN201511030102.9A patent/CN105676656B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120118091A (ko) * | 2011-04-18 | 2012-10-26 | 채영우 | 터치스크린 제스쳐 입력방식 및 시뮬레이션을 이용한 원격제어장치 및 그 제어방법 |
US20130069985A1 (en) * | 2011-09-21 | 2013-03-21 | Google Inc. | Wearable Computer with Superimposed Controls and Instructions for External Device |
CN103529929A (zh) * | 2012-07-06 | 2014-01-22 | 原相科技股份有限公司 | 手势识别系统及可识别手势动作的眼镜 |
CN103869761A (zh) * | 2012-12-14 | 2014-06-18 | 海尔集团公司 | 家电控制方法及控制系统 |
CN104062758A (zh) * | 2013-03-19 | 2014-09-24 | 联想(北京)有限公司 | 图像显示的方法和显示设备 |
CN104216379A (zh) * | 2014-09-09 | 2014-12-17 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN104484037A (zh) * | 2014-12-12 | 2015-04-01 | 三星电子(中国)研发中心 | 通过可穿戴设备进行智能控制的方法及该可穿戴设备 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018177121A1 (zh) * | 2017-03-27 | 2018-10-04 | 华为技术有限公司 | 一种传感设备的联动方法、装置及系统 |
CN107682236A (zh) * | 2017-08-28 | 2018-02-09 | 深圳广田智能科技有限公司 | 基于计算机图像识别的智能家居交互系统及方法 |
CN107682236B (zh) * | 2017-08-28 | 2021-07-06 | 深圳广田智能科技有限公司 | 基于计算机图像识别的智能家居交互系统及方法 |
CN112286062A (zh) * | 2020-09-23 | 2021-01-29 | 青岛经济技术开发区海尔热水器有限公司 | 智能家电联动控制方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN105676656B (zh) | 2019-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104349045B (zh) | 一种图像采集方法及电子设备 | |
US9779552B2 (en) | Information processing method and apparatus thereof | |
CN110278483A (zh) | 图像处理方法和相关的图像处理装置 | |
CN106897688A (zh) | 交互式投影装置、控制交互式投影的方法和可读存储介质 | |
CN106096540B (zh) | 一种信息处理方法和电子设备 | |
CN103067727A (zh) | 一种3d眼镜和3d显示系统 | |
CN103530061A (zh) | 显示装置及控制方法、手势识别方法、头戴显示装置 | |
CN110476141A (zh) | 视线跟踪方法及用于执行该方法的用户终端 | |
CN107422840A (zh) | 使用光学遮挡识别目标对象 | |
CN108345907A (zh) | 识别方法、增强现实设备及存储介质 | |
CN105785784B (zh) | 智能家居场景可视化的方法及装置 | |
CN109117779A (zh) | 一种穿搭推荐方法、装置及电子设备 | |
CN105676656A (zh) | 处理方法及电子设备 | |
Ikeda et al. | Remote assistance using visual prompts for demented elderly in cooking | |
CN105807989A (zh) | 一种手势触控方法和系统 | |
CN109839827B (zh) | 一种基于全空间位置信息的手势识别智能家居控制系统 | |
CN106527711A (zh) | 一种虚拟现实设备的控制方法及虚拟现实设备 | |
CN107239222A (zh) | 一种触摸屏的操控方法及终端设备 | |
CN106264452A (zh) | 一种皮肤检测的方法及终端 | |
Caggianese et al. | Situated visualization in augmented reality: Exploring information seeking strategies | |
CN104866786B (zh) | 一种显示方法和电子设备 | |
CN103529947A (zh) | 显示装置及其控制方法、手势识别方法 | |
CN105892637A (zh) | 手势识别方法及虚拟现实显示输出设备 | |
US20240077722A1 (en) | Linked display system and head-mounted display | |
CN104866194B (zh) | 图片搜索方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |