CN115220614B - 基于视频导航的人机交互控制系统及家用电器和控制方法 - Google Patents

基于视频导航的人机交互控制系统及家用电器和控制方法 Download PDF

Info

Publication number
CN115220614B
CN115220614B CN202210600376.0A CN202210600376A CN115220614B CN 115220614 B CN115220614 B CN 115220614B CN 202210600376 A CN202210600376 A CN 202210600376A CN 115220614 B CN115220614 B CN 115220614B
Authority
CN
China
Prior art keywords
video
module
navigation
instruction information
man
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210600376.0A
Other languages
English (en)
Other versions
CN115220614A (zh
Inventor
陈庆冲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Foshan Yea Create Iot Co ltd
Original Assignee
Foshan Yea Create Iot Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Foshan Yea Create Iot Co ltd filed Critical Foshan Yea Create Iot Co ltd
Priority to CN202210600376.0A priority Critical patent/CN115220614B/zh
Publication of CN115220614A publication Critical patent/CN115220614A/zh
Application granted granted Critical
Publication of CN115220614B publication Critical patent/CN115220614B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Automation & Control Theory (AREA)
  • Selective Calling Equipment (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及一种基于视频导航的人机交互控制系统及家用电器和控制方法,该人机交互控制系统包括:可视化控制模组,其包括显示模块和触控模块;显示模块的显示界面上设置有功能区、及导航区;功能区显示功能键位,用户通过功能键位输入功能指令信息;导航区播报视频单元,用户通过视频单元获得对应的视频导航信息;功能键位与对应的视频单元配套;系统控制模组,其用于分析处理功能指令信息,以匹配与功能指令信息对应的视频导航信息,进而调取与视频导航信息配套的视频单元;显示模块和触控模块分别交互连接系统控制模组;系统控制模组通过导航区播报视频单元。本系统能真正意义上实现人机交互,大大提升用户的使用体验。

Description

基于视频导航的人机交互控制系统及家用电器和控制方法
技术领域
本发明涉及一种控制系统,具体是一种基于视频导航的人机交互控制系统及家用电器和控制方法。
背景技术
随着家用设备的更新换代,家电领域快速进入智能化时代,人机交互是一项热门话题,然而市面上现有的家用设备宣传的人机交互功能并不完全达到人机交互;相反,复杂繁琐的操作反而使用户的使用受到阻碍和约束。例如,由于家用设备具备的功能越来越多,受限于复杂繁琐的操作,用户的使用体验逐渐下降,尽管家用设备附有相应的使用说明书,但用户普遍不会详阅乏味的使用说明书;此外,日常使用中,用户往往是根据自己的认识使用操作家用设备,导致错误操作没有提醒和纠正,不会的操作没有引导指引。可见,市面上号称具备人机交互功能的家用设备实际没有真正达到人机交互的效果,因此有必要设计一种人机交互系统克服现有技术的不足。
发明内容
本发明的目的在于克服上述现有技术存在的不足,而提供一种基于视频导航的人机交互控制系统及家用电器和控制方法,本人机交互控制系统能真正意义上实现人机交互,大大提升用户的使用体验。
本发明的目的是这样实现的:
一种基于视频导航的人机交互控制系统,包括,
可视化控制模组,所述可视化控制模组包括显示模块和触控模块;所述显示模块的显示界面上设置有用于输入功能指令信息的功能区、及用于输出视频导航信息的导航区;所述功能区显示一个以上功能键位,用户通过所述功能键位输入所述功能指令信息;所述导航区播报视频单元,用户通过视频单元获得对应的所述视频导航信息;所述功能键位与对应的视频单元配套;
系统控制模组,所述系统控制模组用于分析处理所述功能指令信息,以匹配与所述功能指令信息对应的视频导航信息,进而调取与视频导航信息配套的视频单元;所述显示模块和所述触控模块分别交互连接所述系统控制模组;所述系统控制模组通过所述导航区播报视频单元。
作为一具体方案:所述系统控制模组包括用于分析处理所述功能指令信息的中央处理模块、及用于存储若干段视频单元的第一视频数据库,所述中央处理模块与所述第一视频数据库交互连接,所述中央处理模块从所述第一视频数据库调取所述视频单元;所述中央处理模块交互连接所述显示模块和所述触控模块。
作为另一具体方案:所述人机交互控制系统还包括用于输入语音指令信息的语音输入模块和用于输出语音提示信息的语音输出模块,所述语音输入模块和所述语音输出模块分别交互连接所述中央处理模块;所述语音指令信息与对应的视频导航信息配套;所述中央处理模块从第一视频数据库调取与所述语音指令信息对应的视频单元。
作为又一具体方案:所述人机交互控制系统还包括用于输入动作指令信息的动作识别模块,所述动作识别模块连接所述中央处理模块;所述动作指令信息与对应的视频导航信息配套;所述中央处理模块从第一视频数据库调取与所述动作指令信息对应的视频单元。
作为又一具体方案:所述系统控制模组包括通讯模块,所述系统控制模组通过所述通讯模块交互连接云端服务器,所述云端服务器接入互联网;所述云端服务器包括用于存储视频单元的第二视频数据库,所述系统控制模组从所述第二视频数据库调取视频单元。
作为又一具体方案:所述功能区与所述导航区互为左右布局或上下布局;或者,所述功能区与所述导航区重叠布局。
作为又一具体方案:所述视频单元包括出厂配套的预设视频单元、源于互联网的扩展视频单元、用户根据个人需求制作的定制视频单元。
一种家用电器,包括一个以上用于实现对应功能的功能模块、及上述人机交互控制系统,所述系统控制模组电连接一个以上所述功能模块。
一种家用电器,包括设备控制模块、一个以上用于实现对应功能的功能模块、及上述人机交互控制系统;所述设备控制模块电连接一个以上所述功能模块,所述系统控制模组交互连接所述设备控制模块,所述系统控制模组通过所述设备控制模块控制一个以上所述功能模块。
家用电器包括制冷设备、空调设备、清洁设备、厨房设备、电暖设备、声像设备、保健设备等。
上述人机交互控制系统的控制方法,包括以下步骤:
第①步,所述功能区显示一个以上功能键位,所述导航区播报视频单元,用户在该视频单元的指引下触发所需的功能键位,以输入对应的功能指令信息;
第②步,所述系统控制模组分析处理第①步输入的功能指令信息,以调取与该功能指令信息对应的下一段视频单元,并通过所述导航区播报该视频单元;
第③步,循环第①步和第②步:用户在第n段视频单元的指引下触发所需的功能键位,以输入第n条功能指令信息;所述系统控制模组分析处理第n条功能指令信息,以调取与第n条功能指令信息对应的第n+1段视频单元,并通过所述导航区播报第n+1段视频单元。
本发明的有益效果如下:
本基于视频导航的人机交互控制系统中,可视化控制模组中的显示模块上划分有用于输入功能指令信息的功能区和用于输出视频导航信息的导航区,用户根据导航区输出的视频导航信息,在功能区上输入所需的功能指令信息;即导航区上输出的视频导航信息可有效指引用户完成所需操作,用户则可通过功能区输入所需的功能指令信息,实现视频导航用户完成操作;系统控制模组根据输入的功能指令信息调取对应的视频单元(包括预设视频单元、扩展视频单元和定制视频单元等)并通过导航区播报,如此一来一回的沟通互联完成用户与家用电器之间的交互,实现真正意义上的人机交互;有效的人机交互可使用户更加轻松快捷的掌握家用电器繁琐的操作,对于烹饪类家用电器还可以通过视频导航信息和功能指令信息之间的往来沟通进行实时烹饪教学,对于错误操作、危险操作等操作,本人机交互控制系统可以通过导航区及时、直观的进行提醒、报警和纠正等,对于不会的操作本人机交互控制系统可以通过视频导航信息和功能指令信息之间的往来沟通进行实时操作教学。本人机交互控制系统可成为用户与家用电器之间的沟通桥梁,实现真正的人机交互,使用户与家用电器之间有效交互,解决传统家用电器使用操作繁琐的问题,有效辅助用户实施设备操作。
本人机交互控制系统可取缔传统家用电器中的设备控制模块,即家用电器上各功能模块分别由本人机交互控制系统控制,由于本人机交互控制系统可根据用户需求实时学习符合用户需求的运行逻辑,即家用电器的运行逻辑可根据实际需要进行相适应的改变,符合用户的使用习惯,使家用电器的控制更加人性化、智能化;此外,本人机交互控制系统可进行在线升级,根据用户反馈的运行逻辑问题可通过在线升级解决,大大提升用户的使用体验。可见,本人机交互控制系统能有效解决传统家用电器运行逻辑固定以至于难以适应用户不同需求、日常使用存在的软件问题不能及时得到解决(一般要等到下一代机器出来才能解决上一代机器的缺陷)等问题。
附图说明
图1为本发明第一实施例中可视化控制模组的示意图。
图2为本发明第一实施例中人机交互控制系统与云端服务器连接的架构图。
图3为本发明第一实施例中家用电器中控制部分的架构图。
图4为本发明第一实施例中可视化控制模组的视频导航流程图。
图5和图6分别为本发明第一实施例中可视化控制模组联网控制状态的示意图。
图7-图9分别为本发明第一实施例中烤箱上可视化控制模组人机交互状态的示意图。
图10为本发明第二实施例中家用电器中控制部分的架构图。
图11为本发明第三实施例中可视化控制模组的示意图。
具体实施方式
下面结合附图及实施例对本发明作进一步描述。
第一实施例
参见图1和图2,本实施例涉及的人机交互控制系统,包括,
可视化控制模组A,可视化控制模组A包括显示模块A1和触控模块A2;显示模块A1的显示界面上划分有用于输入功能指令信息的功能区A101、及用于输出视频导航信息的导航区A102;功能区A101显示一个以上功能键位A103,用户通过功能键位A103输入功能指令信息,需要说明的是,不同的功能键位A103对应输入不同的功能指令信息;导航区A102播报视频单元,用户通过视频单元获得视频导航信息,视频导航信息可指引用户进行操作;功能键位A103与对应的视频单元配套;触控模块A2可供用户完成触屏控制,用户可直接触摸功能区A101对应的位置进而触发相应的功能键位A103;
系统控制模组B,系统控制模组B用于分析处理功能指令信息,以匹配与功能指令信息对应的视频导航信息,进而调取与视频导航信息配套的视频单元;显示模块A1和触控模块A2分别交互连接系统控制模组B,使可视化控制模组A与系统控制模组B之间可传输功能指令信息和视频导航信息;系统控制模组B通过导航区A102播报视频单元。
本实施例涉及的人机交互控制系统中,可视化控制模组中的显示模块上划分有用于输入功能指令信息的功能区A101和用于输出视频导航信息的导航区A102,用户根据导航区A102输出的视频导航信息,在功能区A101上输入所需的功能指令信息;即导航区A102上输出的视频导航信息可有效指引用户完成所需操作,用户则可通过功能区A101输入所需的功能指令信息,实现视频导航用户完成操作;系统控制模组B根据输入的功能指令信息调取对应的视频单元(包括预设视频单元1、扩展视频单元2和定制视频单元3等,各视频单优选由音频与录像结合)并通过导航区A102播报,如此一来一回的沟通互联完成用户与家用电器之间的交互,实现真正意义上的人机交互;有效的人机交互可使用户更加轻松快捷的掌握家用电器繁琐的操作,对于烹饪类家用电器还可以通过视频导航信息和功能指令信息之间的往来沟通进行实时烹饪教学,对于错误操作、危险操作等操作本人机交互控制系统可以通过导航区A102及时、直观的进行提醒、报警和纠正等,对于不会的操作本人机交互控制系统可以通过视频导航信息和功能指令信息之间的往来沟通进行实时操作教学。本人机交互控制系统可成为用户与家用电器之间的沟通桥梁,实现真正的人机交互,使用户与家用电器之间有效交互,解决传统家用电器使用操作繁琐的问题,有效辅助用户实施设备操作。
进一步地,系统控制模组B包括用于分析处理功能指令信息的中央处理模块B1、及用于存储若干段视频单元的第一视频数据库B2,中央处理模块B1与第一视频数据库B2交互连接;中央处理模块B1从第一视频数据库B2调取视频单元;中央处理模块B1交互连接显示模块A1和所述触控模块A2。
进一步地,本实施例涉及的人机交互控制系统还包括用于输入语音指令信息的语音输入模块C和用于输出语音提示信息的语音输出模块D,语音输入模块C和语音输出模块D分别交互连接中央处理模块B1,本实施例中的语音输入模块C优选麦克风装置,语音输出模块D优选扬声器装置;语音指令信息与对应的视频导航信息配套;中央处理模块B1从第一视频数据库B2调取与语音指令信息对应的视频单元。设置语音输入模块C和语音输出模块D后,家用电器具备语音交互功能,即在视频导航信息的指引下,用户可通过语音方式输入语音指令信息,中央处理模块B1可通过分析语音指令信息确定与之对应的视频导航信息,以调取匹配的视频单元进行播报;可见,语音指令信息可代替功能指令信息,人机交互方式除了上述的键位交互外,也可以是语音交互。
进一步地,本实施例涉及的人机交互控制系统还包括用于输入动作指令信息的动作识别模块E,动作识别模块E连接中央处理模块B1,本实施例中的动作识别模块E优选用于捕捉用户动作(如手势等)的摄像装置,中央处理模块B1载入动作识别程序,结合摄像装置获得的影像即可实现动作识别;动作指令信息与对应的视频导航信息配套;中央处理模块B1从第一视频数据库B2调取与动作指令信息对应的视频单元。设置动作识别模块E后,家用电器具备动作交互功能,即在视频导航信息的指引下,用户可通过指定动作输入动作指令信息,中央处理模块B1可通过分析动作指令信息确定与之对应的视频导航信息,以调取匹配的视频单元进行播报;可见,动作指令信息也可代替功能指令信息,人机交互方式还包括动作交互。
进一步地,系统控制模组B包括通讯模块B3,系统控制模组B中的中央处理模块B1通过通讯模块B3交互连接云端服务器F,云端服务器F包括用于存储视频单元的第二视频数据库F1;系统控制模组B从第二视频数据库F1调取合适的视频单元。
需要说明的是,本实施例中第一视频数据库B2和第二视频数据库F1可以择一设置或两者同时设置;①当云端服务器F不具备第二视频数据库F1、或者系统控制模组B与云端服务器F之间的网络断开时,视频单元储存于第一视频数据库B2,中央处理模块B1从第一视频数据库B2调取合适的视频单元;②当系统控制模组B不具备第一视频数据库B2时,视频单元储存于第二视频数据库F1中,中央处理模块B1从第二视频数据库F1调取合适的视频单元;③当第一视频数据库B2和第二视频数据块F1同时存在时,中央处理模块B1优选从第一视频数据库B2调取合适的视频单元;当第一视频数据库B2没有合适的视频单元时,中央处理模块B1从第二视频数据库F1调取合适的视频单元。
进一步地,参见图1,本实施例中的功能区A101与导航区A102互为左右布局,即功能区A101位于左侧(或右侧),导航区A102位于右侧(或左侧)。然而,根据实际设计需要还可以有以下布局方式:①功能区A101与导航区A102互为上下布局,即功能区A101位于上侧(或下侧),导航区A102位于下侧(或上侧);②功能区A101与导航区A102重叠布局。
进一步地,视频单元包括出厂配套的视频单元、源于互联网的扩展视频单元2、用户根据个人需求制作的定制视频单元3等。具体地,视频单元是出厂前预先装载于第一视频数据库B2或第二视频数据库F1中的视频单元,是基础的视频单元,中央处理模块B1可从第一视频数据库B2或第二视频数据库F1中直接调取所需的视频单元;扩展视频单元2是指视频单元以外的视频单元,当所有视频单元均不符合用户需求时,用户可通过云端服务器F从互联网上搜索所需的扩展视频单元2并下载保存于第一视频数据库B2和/或第二视频数据库F1中,以便直接调取该扩展视频单元2;对于某些家用电器可能会需要制作定制视频单元3,如烹饪类家用电器,当视频单元和扩展视频单元2均部符合用户需求时,用户可根据自己经验制作相关视频以生成定制视频单元3,用户甚至可将定制视频单元3上传至共享平台(如视频共享类APP)分享视频。
进一步地,适用上述人机交互控制系统的家用电器包括制冷设备、空调设备、清洁设备、厨房设备、电暖设备、声像设备、保健设备中一种或两种以上。其中,制冷设备包括家用冰箱、冷饮机等;空调设备包括房间空调器、电风扇、冷风机、空气净化器、加湿器等;清洁设备包括洗衣机、干衣机、电熨斗、吸尘器、扫地机器人等;厨房设备包括微波炉、电磁炉、电烤箱、电饭煲、咖啡机、洗碗机、电热水器、养生壶、食物加工机等;电暖设备包括电热毯、取暖器等;声像设备包括电视机、录音机、录像机、摄像机等;保健设备包括浴脚盆、按摩仪等。
参见图3,本实施例涉及的家用电器包括一个以上用于实现对应功能的功能模块5、及上述人机交互控制系统,系统控制模组B电连接一个以上功能模块5。本人机交互控制系统可取缔传统家用电器中的设备控制模块6,即家用电器上各功能模块5分别由本人机交互控制系统控制,由于本人机交互控制系统可根据用户需求实时学习符合用户需求的运行逻辑,即家用电器的运行逻辑可根据实际需要进行相适应的改变,符合用户的使用习惯,使家用电器的控制更加人性化、智能化;此外,本人机交互控制系统可进行在线升级,根据用户反馈的运行逻辑问题可通过在线升级解决,大大提升用户的使用体验。可见,本人机交互控制系统能有效解决传统家用电器运行逻辑固定以至于难以适应用户不同需求、日常使用存在的运行逻辑问题不能及时得到解决(一般要等到下一代机器出来才能解决上一代机器存在的缺陷)等问题。需要说明的是,功能模块5为用于实现对应功能的模块;以烤箱为例,功能模块5包括用于发热的发热体、用于检测温度的温度传感器等;以空气净化器为例,功能模块5包括用于生成对流空气的风机组件、用于检测空气质量的各类传感器等。
上述人机交互控制系统的控制方法,包括以下步骤:
第①步,功能区A101显示一个以上功能键位A103,导航区A102播报第一段视频单元,用户在第一段视频单元的指引下触发所需的功能键位A103,以输入第一条功能指令信息;
第②步,系统控制模组B分析处理第一条功能指令信息,以调取与第一条功能指令信息对应的第二段视频单元,并通过导航区A102播报第二段视频单元;
第③步,循环第①步和第②步:用户在第n段视频单元的指引下触发所需的功能键位A103,以输入第n条功能指令信息;系统控制模组B分析处理第n条功能指令信息,以调取与第n条功能指令信息对应的第n+1段视频单元,并通过导航区播报第n+1段视频单元。
基于上述人机交互控制系统的配网控制:
(一)参见图5,导航区A102播报第一段视频单元:“请确保您的手机wifi已经链接到家庭路由,并且扫描屏幕(功能区A101)上的二维码A104并关于我们的公众号,扫描完毕后,请进入下一步”,第一段视频单元播报完毕后暂停播报;功能区A101显示二维码A104、及“下一步”的功能键位A103;用户完成第一段视频导航信息指引的相关操作(用手机扫描二维码)后,触发“下一步”的功能键位A103,随后导航区A102播报第二段与“下一步”的功能键位A103对应的视频单元。
(二)参见图6,导航区A102播报第二段视频单元:“请点击手机公众号的配网菜单,输入您的路由的SSID密码后点击 ‘开始配网’”,第二段视频单元播报完毕后暂停播报;功能区A101显示“开始配网”的功能键位A103、及“重复”的功能键位A103;若用户触发“开始配网”的功能键位A103,家用电器则开始配网;当家用电器完成配网后,导航区A102播报第三段视频单元;若用户触发“重复”的功能键位A103,导航区A102则重复播报第二段视频单元。第三段视频单元可以是开始使用该家用电器的视频单元。
基于上述人机交互控制系统的功能控制:
以烤箱为例
(一)参见图7,导航区A102播报第一段视频单元:“通过公众号进行远程烹饪等控制功能或通过左侧菜单选择所需的菜品”;功能区A101显示菜单栏,菜单栏包括多道菜品的功能键位A103;用户触发所述的菜品的功能键位A103;
(二)参见图8,用户触发所需的菜品的功能键位A103后,导航区A102播报第二段视频单元(即与所选菜品的功能键位A103对应的视频单元):“制作本菜品需要以下食材:食材1(分量)、食材2(分量)、食材3(分量)、食材4(分量)......”;功能区A101显示各食材选项、“开始制作”等功能键位A103;当用户已经备齐所需食材时可触发“开始制作”的功能键位A103;当缺少其中的食材时可在勾选缺少的食材选项,并触发“帮助”的功能键位A103,此时系统为用户提供解决方案,包括告知可代替的食材、进入购物界面推送食材选购链接等;
(三)用户触发“开始制作”的功能键位A103后,导航区A102播报第三段视频单元,第三段视频单元为菜品制作视频,用户在第三段视频单元的指引下开始制作对应菜品;制作期间,每完成一个步骤,导航区A102都根据用户触发的键位持续播报下一段对应的视频单元,直至完成所有操作,菜品完成制作;这样用户与烤箱之间就有着深入的交流沟通,实现人机交互。
当没有对应的菜品符合用户需求(即没有合适的视频单元)时,用户可从互联网搜索所需的扩展视频单元2,并调取至导航区A102播报;当没有合适的预设视频单元1和扩展视频单元2时,用户可触发功能区A101上的“自定义”的功能键位A103(参见图7);参见图9,导航区A102播报对应的视频单元:“请填写菜品名称和所需的食材及分量”,功能区A101显示参数记录画面,以指引用户记录菜品名称、所需食材、各食材对应的分量等,完成记录后用户触发 “开始制作”的功能键位A103,开始录制用户制作的视频和用户操作过程并在导航区A102上同步播报,完成制作后生成定制视频单元3并存储于第一视频数据库B2和/或第二视频数据库F1中,以便下次调取使用。
以电饭煲为例
(一)导航区A102播报第一段视频单元:“通过公众号进行远程烹饪等控制功能或通过左侧菜单选择所需的菜品”;功能区A101显示菜单栏,菜单栏包括“煮饭”、“煲汤”、“烘焙”等功能键位A103;假如用户触发“煮饭”的功能键位A103;
(二)导航区A102播报与“煮饭”的功能键位A103对应的第二段视频单元:“输入大米分量,并将大米放入锅具中,然后倒入清水开始清洗大米”;用户可以在功能区A101输入大米分量并开始清洗大米,完成清洗后触发“下一步”的功能键位A103;用户根据导航区A102指引逐步完成相应的步骤。
制作过程中,系统可以推送清洗手法/方法、根据大米分量给出最优的落水量、可以推送不同品种的大米并推送相应的购买链接(制作其他菜品可以推送相应的食材购买链接)等。
以空气净化器为例
(一)导航区A102播报第一段视频单元:“通过公众号进行远程控制功能或通过左侧菜单选择所需的功能”;功能区A101显示菜单栏,菜单栏包括“加湿功能”、“抽湿功能”、“空气净化功能”等功能键位A103;假如用户触发“空气净化功能”的功能键位A103;
(二)导航区A102播报与“空气净化功能”的功能键位A103对应的第二段视频单元:“输入净化区域大小(m³)、所需的附加功能等”;功能区A101显示菜单栏和“开始工作”的功能键位A103,菜单栏包括净化区域大小输入栏(以区间数值方式输入)、“除味功能”、“杀菌功能”、“除湿功能”、“加湿功能”等,完成上述选择后触发“开始工作”的功能键位A103。
日常使用中,系统定时检测空气质量、环境湿度、环境温度等空气质量数据;用户还可通过本系统预约开机或关机等操作;当空气净化器内部部分零件(净化滤芯等)达到极限使用寿命时,本系统通知用户并推送相应的购买链接。
以养生壶为例
(一)导航区A102播报第一段视频单元:“通过公众号进行远程控制功能或通过左侧菜单选择所需的功能”;功能区A101显示菜单栏,菜单栏包括“煮水”、“煎药”、“煮茶”、“煲汤”等功能键位A103;假如触发“煮水”功能键位A103;
(二)导航区A102播报与“煮水”的功能键位A103对应的第二段视频单元:“输入加热温度、加热时间(等)”;功能区A101显示“开始工作”的功能键位A103、加热温度输入栏、加热时间输入栏等,完成相关数据输入后用户触发“开始工作”的功能键位A103。之所以需要输入加热温度,是因为用户可能注水用于泡茶,而部分茶叶需要特定的水温才能泡出好茶。
系统根据用户选择的功能可以推送相应的教程,如煎药教程、煮茶教程、煲汤教程等,或者推送购买原料的链接,如购买药料的链接、购买茶叶的链接、购买汤料的链接等。
以浴足盆为例
(一)导航区A102播报第一段视频单元:“通过公众号进行远程控制功能或通过左侧菜单选择所需的功能”;功能区A101显示菜单栏,菜单栏包括 “清水泡脚”、“药水泡脚”等,假如用户触发“清水泡脚”的功能键位A103;
(二)导航区A102播报与“清水泡脚”的功能键位A103对应的第二段视频单元:“输入泡脚温度、泡脚时间(等)”;功能区A101显示“开始工作”的功能键位A103、泡脚温度输入栏、泡脚时间输入栏、“按摩功能”、“消毒功能”等,完成相关数据输入后用户触发“开始工作”的功能键位A103。
系统可向用户推送最优的泡脚温度和泡脚时间等,还可科普泡脚的功效;根据用户需要推送泡脚用的药包的购买链接等。
需要说明的是,上述人机交互的内容是举例说明,目的是更加具体详细的展示本人机交互控制系统的使用流程和作用效果。
第二实施例
参见图10,本实施例涉及的家用电器不同于第一实施例之处在于:家用电器包括设备控制模块6、一个以上用于实现对应功能的功能模块5、及上述的人机交互控制系统;设备控制模块6电连接一个以上功能模块5;系统控制模组B交互连接设备控制模块6,系统控制模组B通过设备控制模块6控制一个以上功能模块5。在传统家用电器上设置本人机交互控制系统,同样可实现相应的功能,本家用电器可以省去产品重新开发的成本,而且通过把人机交互控制系统做成独立的智能控制产品,那么该智能控制产品即可与市面上现有的家用电器配套使用,使传统家用电器也能实现视频导航控制,通过在线升级可改变运行逻辑等。
其他未述部分与第一实施例基本一致,这里不再详细分析说明。
第三实施例
参见图11,本实施例涉及的家用电器不同于第一实施例之处在于:功能区A101与导航区A102重叠布局,相比第一实施例的布局方式,本实施例中功能区A101与导航区A102的布局方式视觉效果上具备新颖性。
其他未述部分与第一实施例基本一致,这里不再详细分析说明。
上述为本发明的优选方案,显示和描述了本发明的基本原理、主要特征和本发明的优点。本领域的技术人员应该了解本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等同物界定。

Claims (9)

1.一种基于视频导航的人机交互控制系统的控制方法,所述人机交互控制系统包括,
可视化控制模组(A),所述可视化控制模组(A)包括显示模块(A1)和触控模块(A2);所述显示模块(A1)的显示界面上设置有用于输入功能指令信息的功能区(A101)、及用于输出视频导航信息的导航区(A102);所述功能区(A101)显示一个以上功能键位(A103),用户通过所述功能键位(A103)输入所述功能指令信息;所述导航区(A102)播报视频单元,用户通过视频单元获得对应的所述视频导航信息;所述功能键位(A103)与对应的视频单元配套;
系统控制模组(B),所述系统控制模组(B)用于分析处理所述功能指令信息,以匹配与所述功能指令信息对应的视频导航信息,进而调取与视频导航信息配套的视频单元;所述显示模块(A1)和所述触控模块(A2)分别交互连接所述系统控制模组(B);所述系统控制模组(B)通过所述导航区(A102)播报视频单元;
其特征在于:
所述人机交互控制系统的控制方法,包括以下步骤:
第①步,所述功能区(A101)显示一个以上功能键位(A103),所述导航区(A102)播报视频单元,用户在该视频单元的指引下触发所需的功能键位(A103),以输入对应的功能指令信息;
第②步,所述系统控制模组(B)分析处理第①步输入的功能指令信息,以调取与该功能指令信息对应的下一段视频单元,并通过所述导航区(A102)播报该视频单元;
第③步,循环第①步和第②步:用户在第n段视频单元的指引下触发所需的功能键位(A103),以输入第n条功能指令信息;所述系统控制模组(B)分析处理第n条功能指令信息,以调取与第n条功能指令信息对应的第n+1段视频单元,并通过所述导航区(A102)播报第n+1段视频单元。
2.根据权利要求1所述基于视频导航的人机交互控制系统的控制方法,其特征在于:所述系统控制模组(B)包括用于分析处理所述功能指令信息的中央处理模块(B1)、及用于存储若干段视频单元的第一视频数据库(B2),所述中央处理模块(B1)与所述第一视频数据库(B2)交互连接,所述中央处理模块(B1)从所述第一视频数据库(B2)调取所述视频单元;所述中央处理模块(B1)交互连接所述显示模块(A1)和所述触控模块(A2)。
3.根据权利要求2所述基于视频导航的人机交互控制系统的控制方法,其特征在于:还包括用于输入语音指令信息的语音输入模块(C)和用于输出语音提示信息的语音输出模块(D),所述语音输入模块(C)和所述语音输出模块(D)分别交互连接所述中央处理模块(B1);所述语音指令信息与对应的视频导航信息配套;所述中央处理模块(B1)从第一视频数据库(B2)调取与所述语音指令信息对应的视频单元。
4.根据权利要求2所述基于视频导航的人机交互控制系统的控制方法,其特征在于:还包括用于输入动作指令信息的动作识别模块(E),所述动作识别模块(E)连接所述中央处理模块(B1);所述动作指令信息与对应的视频导航信息配套;所述中央处理模块(B1)从第一视频数据库(B2)调取与所述动作指令信息对应的视频单元。
5.根据权利要求1所述基于视频导航的人机交互控制系统的控制方法,其特征在于:所述系统控制模组(B)包括通讯模块(B3),所述系统控制模组(B)通过所述通讯模块(B3)交互连接云端服务器(F),所述云端服务器(F)接入互联网;所述云端服务器(F)包括用于存储视频单元的第二视频数据库(F1),所述系统控制模组(B)从所述第二视频数据库(F1)调取视频单元。
6.根据权利要求1所述基于视频导航的人机交互控制系统的控制方法,其特征在于:所述功能区(A101)与所述导航区(A102)互为左右布局或上下布局;或者,所述功能区(A101)与所述导航区(A102)重叠布局。
7.根据权利要求1所述基于视频导航的人机交互控制系统的控制方法,其特征在于:所述视频单元包括出厂配套的预设视频单元(1)、源于互联网的扩展视频单元(2)、用户根据个人需求制作的定制视频单元(3)。
8.一种家用电器,包括一个以上用于实现对应功能的功能模块(5);其特征在于:还包括如权利要求1-7任一项所述人机交互控制系统的控制方法,所述系统控制模组(B)电连接一个以上所述功能模块(5)。
9.一种家用电器,包括设备控制模块(6)、及一个以上用于实现对应功能的功能模块(5),所述设备控制模块(6)电连接一个以上所述功能模块(5);其特征在于:还包括如权利要求1-7任一项所述人机交互控制系统的控制方法,所述系统控制模组(B)交互连接所述设备控制模块(6),所述系统控制模组(B)通过所述设备控制模块(6)控制一个以上所述功能模块(5)。
CN202210600376.0A 2022-05-28 2022-05-28 基于视频导航的人机交互控制系统及家用电器和控制方法 Active CN115220614B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210600376.0A CN115220614B (zh) 2022-05-28 2022-05-28 基于视频导航的人机交互控制系统及家用电器和控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210600376.0A CN115220614B (zh) 2022-05-28 2022-05-28 基于视频导航的人机交互控制系统及家用电器和控制方法

Publications (2)

Publication Number Publication Date
CN115220614A CN115220614A (zh) 2022-10-21
CN115220614B true CN115220614B (zh) 2023-09-08

Family

ID=83607031

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210600376.0A Active CN115220614B (zh) 2022-05-28 2022-05-28 基于视频导航的人机交互控制系统及家用电器和控制方法

Country Status (1)

Country Link
CN (1) CN115220614B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100936048B1 (ko) * 2009-03-26 2010-01-08 현대통신 주식회사 요리백과 주방 tv
CN201667138U (zh) * 2010-03-09 2010-12-08 刘强 多功能视频烹饪播放器
CN209877022U (zh) * 2017-09-12 2019-12-31 广东万家乐燃气具有限公司 一种具有菜谱导航功能的吸油烟机控制系统
CN113518261A (zh) * 2020-12-25 2021-10-19 腾讯科技(深圳)有限公司 指引视频播放方法、装置、计算机设备及存储介质
CN113589979A (zh) * 2021-06-30 2021-11-02 无锡小天鹅电器有限公司 家电设备的操作指引方法、装置、电子设备及存储介质
CN113656137A (zh) * 2021-08-20 2021-11-16 王可 一种家电智能使用指导系统及方法
CN114442899A (zh) * 2021-12-31 2022-05-06 深圳市巨鼎医疗股份有限公司 一种自助服务终端的显示方法、装置及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100936048B1 (ko) * 2009-03-26 2010-01-08 현대통신 주식회사 요리백과 주방 tv
CN201667138U (zh) * 2010-03-09 2010-12-08 刘强 多功能视频烹饪播放器
CN209877022U (zh) * 2017-09-12 2019-12-31 广东万家乐燃气具有限公司 一种具有菜谱导航功能的吸油烟机控制系统
CN113518261A (zh) * 2020-12-25 2021-10-19 腾讯科技(深圳)有限公司 指引视频播放方法、装置、计算机设备及存储介质
CN113589979A (zh) * 2021-06-30 2021-11-02 无锡小天鹅电器有限公司 家电设备的操作指引方法、装置、电子设备及存储介质
CN113656137A (zh) * 2021-08-20 2021-11-16 王可 一种家电智能使用指导系统及方法
CN114442899A (zh) * 2021-12-31 2022-05-06 深圳市巨鼎医疗股份有限公司 一种自助服务终端的显示方法、装置及存储介质

Also Published As

Publication number Publication date
CN115220614A (zh) 2022-10-21

Similar Documents

Publication Publication Date Title
KR101777692B1 (ko) 밥솥 작동 방법, 장치, 프로그램 및 저장매체
CN102684952B (zh) 智能家电的控制方法
CN104635541B (zh) 电磁炉控制方法、装置和系统
CN110824953A (zh) 智能家居设备的控制方法、装置及存储介质
JP2003174965A (ja) 炊飯装置及び炊飯装置と通信する携帯電話携帯情報端末及びこれらの機能を実現するコンピュータプログラムとコンピュータプログラムを記録した媒体
CN106154851A (zh) 一种交互式智能厨房系统
CN102629111A (zh) 一种烹饪电器人机交互控制方法
CN107703780B (zh) 烹饪器具的控制方法、装置及系统
CN110021299B (zh) 语音交互方法、装置、系统及存储介质
KR101231833B1 (ko) 공유가능한 커스터마이징을 제공하는 범용리모컨 및 그 운영방법
CN109031988A (zh) 智能设备的控制方法和装置
CN108490896A (zh) 家电设备控制方法、家电设备及存储介质
CN109623842A (zh) 一种一体化厨房机器人及其控制方法
CN115220614B (zh) 基于视频导航的人机交互控制系统及家用电器和控制方法
CN107763694B (zh) 烹饪联动系统、方法和烟机
CN105902138A (zh) 电饭煲清洗信息提示方法和装置
JP3826056B2 (ja) 加熱調理器
CN109091014A (zh) 一种烹饪器具及其控制方法
JP2002147839A (ja) 情報表示制御装置
JP2002152858A (ja) ホームオートメーションシステム
CN206465090U (zh) 厨房管家机器人
JP5374574B2 (ja) コンサルティング家電システム、サーバ装置、ホームサーバ装置および家電機器に対するコンサルティング情報の提供方法
JP2003125467A (ja) 携帯情報端末、携帯情報端末のプログラム及びサーバのプログラム
CN115291714A (zh) 第一设备的请求方法、装置、存储介质及电子装置
JP7033724B2 (ja) 情報端末、及び、操作支援プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant