CN106790628A - 带体感功能的智能家居管家中控系统及其控制方法 - Google Patents
带体感功能的智能家居管家中控系统及其控制方法 Download PDFInfo
- Publication number
- CN106790628A CN106790628A CN201611266798.XA CN201611266798A CN106790628A CN 106790628 A CN106790628 A CN 106790628A CN 201611266798 A CN201611266798 A CN 201611266798A CN 106790628 A CN106790628 A CN 106790628A
- Authority
- CN
- China
- Prior art keywords
- module
- smart home
- house keeper
- main control
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 9
- 238000004891 communication Methods 0.000 claims abstract description 52
- 230000009471 action Effects 0.000 claims abstract description 31
- 230000003238 somatosensory effect Effects 0.000 claims abstract description 25
- 230000006870 function Effects 0.000 claims description 37
- 230000002452 interceptive effect Effects 0.000 claims description 22
- 230000014509 gene expression Effects 0.000 claims description 14
- 235000004443 Ricinus communis Nutrition 0.000 claims description 13
- 230000001815 facial effect Effects 0.000 claims description 8
- 238000012544 monitoring process Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 3
- 230000008859 change Effects 0.000 claims description 2
- 230000008921 facial expression Effects 0.000 abstract description 3
- 238000007726 management method Methods 0.000 description 11
- 230000005540 biological transmission Effects 0.000 description 8
- 238000004378 air conditioning Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 238000007405 data analysis Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 4
- 230000036760 body temperature Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000002354 daily effect Effects 0.000 description 3
- 230000005611 electricity Effects 0.000 description 3
- 238000011022 operating instruction Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 206010011469 Crying Diseases 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000037007 arousal Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000009835 boiling Methods 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000010835 comparative analysis Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000017525 heat dissipation Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000004573 interface analysis Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000013439 planning Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012384 transportation and delivery Methods 0.000 description 1
- 230000010415 tropism Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Manufacturing & Machinery (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Selective Calling Equipment (AREA)
Abstract
本发明涉及一种带体感功能的智能家居管家中控系统及其控制方法,其无线通讯模块、用于获取人脸信息的人脸识别系统以及用于获取人体身躯动作信息的体感识别系统、体感识别系统、电源供应管理系统、操作指令输出模块和人机交换界面分别与主控模块电性连接,主控模块还通过无线通讯模块与外部云端进行远程网络连接,操作指令输出模块通过无线通讯模块向智能家居设备进行无线网络控制。此款中控系统可代替人手打开智能家居设备软件并进行操作,其可在接收到来自设定人物的肢体/表情动作后作出相应的控制工作,免除如现有技术那样的繁琐操作,实现“类人化”的智能家居管家功能,能带给用户高效、便捷、舒适的操作体验。
Description
技术领域
本发明涉及一种对智能家居进行控制管理的中央控制系统,特别是以机器或物体为载体,集成各种模块和软件的一种带体感功能的智能家居管家中控系统及其控制方法。
背景技术
随着智能家居和物联网技术的快速发展,智能家居已经从单品的智能化迈向互联互通场景的阶段,正逐步形成联动系统和生态圈。智能家居改变了人们的生活习惯,提高了人们的生活品质,给家居生活带来了全新的感受,不久的将来智能家居就像现在的智能手机一样,让我们的生活更加高效、便捷、舒适。但是,跟据《2014年国内智能家居市场发展报告》,虽然95.19%的网友表示对智能家居感兴趣,但超过88.0%的网友表示对智能家居的现状不满意。
主要问题是:智慧家庭的很多产品,虽然已经迭代到第二代甚至是第三代;大数据、大体系、以及无线通讯协议标准和互联互通的问题也都能日益解决;但是,由于这些产品的综合操控性都不太成功,绝大多数智能硬件的体验太复杂,需要借助手机或平板电脑安装许多App进行操作,并没有给生活带来真正“方便”,和解决用户需求的痛点。这才是真正阻碍智能家居无法形成刚需和发展的壁垒。
参见图8所示,目前的智能家居控制,本地或远程控制,都要在平板电脑或手机安装APP,通过APP来进行控制,有几台智能家居设备就要安装几个APP界面。如厅里空调控制,先要找到APP界面,再登录厅里空调的APP,接着进行指令操作(打开空调,调节温度),发出指令后,通过智能网关,空调传感器,控制空调。以上操作极其繁琐,而且,懂得操作的人较小。
发明内容
本发明的目的在于提供一种可通过肢体表情动作控制机器人、并通过机器人控制智能家居设备的带体感功能的智能家居管家中控系统及其控制方法,以克服现有技术的不足。
本发明的目的是这样实现的:
一种带体感功能的智能家居管家中控系统,所述中控系统包括主控模块、电源供应管理系统、操作指令输出模块和人机互换界面,其特征在于:还包括无线通讯模块、用于获取人脸信息的人脸识别系统以及用于获取人体身躯动作信息的体感识别系统,无线通讯模块、人脸识别系统、体感识别系统、电源供应管理系统、操作指令输出模块和人机互换界面分别与主控模块电性连接,主控模块还通过无线通讯模块与外部云端进行远程网络连接,操作指令输出模块通过无线通讯模块向智能家居设备进行无线网络控制。经主控模块和云端分析计算后的操作指令,则输出到操作指令输出模块,经无线通讯传递给家庭主机(网关),操作各种智能家居设备。
人脸识别系统:包含了人脸识别模块,通过摄像头对人脸图像进行识别,采集并储存和记忆人脸数据,而且当识别的人脸是机器人设置的目标人物时,机器人会向目标发出问候语。如与目标不符,就把人脸图像发给主人。可用于监控安防、可视对讲等等。
体感识别系统:在体感识别系统中,包含有信息感知模块、信号接收模块、存储模块和识别模块等等,通过摄像头可以对人的身体动作和表情进行识别,采集相关数据,传递给主控模块,并储存和记忆相关动作图像的数据,每次都要把上次的数据和这次的数据进行对比分析,并产生新的数据进行储存。通过这些数据,智能家居管家进行判断和策略执行肢体动作或表情,所需要的服务。
智能家居管家图像智能识别系统,如目测主人处于焦虑中,则自主播放音乐等;亦可对居室内环境控制,如调整温度、灯光照度等。为家庭的安全、交互、学习等功能服务。
智能家居管家通过识别用户各种动作(包括人脸,表情,肢体动作等),根据手势等动作所代表的指令作出反应。通过智能家居管家的动作识别功能,实现人与周边的装置或环境互动,而无需使用任何复杂的控制设备,便可让人们身历其境地与内容做互动。
智能家居管家中控系统,不仅仅是语音或动作命令操作,更重要的是与机器进行交流,是“语义理解+数据分析+主动反馈”的产品。通过一句话、一个动作或一个表情的人机交互方式,实现自主智能判断,进行策略执行,操控智能家居各种设备(如家电类、安防类、娱乐类等)的一种控制系统。用语音控制或体感控制方式,方便地实现智能家居的操作。
外部云端主要指的是:数据计算、分析、储存系统,内部智慧管家采集到各种应用场景数据量非常复杂和庞大,经无线通讯传输给云端服务器处理,经云端计算、分析、储存的数据,再回传给智慧管家,为智慧管家的各种指令服务。如智慧管家根据过往的应用经验,判断用户的需求实现系统自学习功能,并不断提升自身的性能。
本发明的目的还可以采用以下技术措施解决:
作为更具体的一种方案,所述无线通讯模块为内置4G、WiFi和ZigBee的无线通讯模块,其不仅连接家庭主机同时支持语音交互和通过手机向智能家居管家发送语音指令。
所述中控系统还包括用于采集智能家居设备及智能家居管家应用场景数据的数据采集系统,数据采集系统与主控模块电性连接。数据采集系统:集成数据采集模块,通过智能家居管家、各种智能设备及传感器对各种场景应用中数据进行收集。同时传输给外部云端,进行云技术、分析,储存,为大数据提供基础。
本发明要让机器像人的大脑一样进行自我学习和思考,其智能性的体现不是替人从事单一的工作,而是像人类一样只能的从事各类工作,应对多种情况。通过数据采集系统采集人的一些习惯性的,日常应用的场景数据(包括语音,表情以及肢体动作),与原有在云端储存的数据进行对比分析、运算,不断循环、储存、跟踪等产生记忆;机器逐步就有具备自动学习、自动判断的能力,并自行发出指令的功能。这些主要是利用云端技术,云计算和大数据。计算用户的需求,让数据自己说话。
例如:早上智能管家根据以往采集的数据、场景所在的人物,判断叫早时间,开窗,提供包括交通路况等各种信息的预报,日程计划的提醒,设备运行。通过摄像头认知场景所在的人物,自主判断该用户喜好的环境,并自主调整智能设备的运行状态。这些行为是在智能家居管家自主学习的框架下获得的,并且具备增量学历和终生学习的特点。
所述主控模块为采用多核高速CPU和GPU芯片为核心的主板。通过核心主板与不同模块传输数据,拥有更多扩展性,未来可能会扩展更多的模块。核心板上还预留了额外的串口与其它第三方电子模块兼容通讯,也为以后开发者保留了接口。
所述智能家居管家包括头部、身躯和脚轮组,头部转动设置在身躯顶部,脚轮组设置在身躯底部;所述中控系统设置在智能家居管家上;所述语音交互系统设有用于采集语音信号的麦克阵列。麦克阵列(内置麦克阵列)可远距离拾音,用于用户与智能家居管家的语音交互,识别信息,接收和反馈指令。麦克阵列采集到的语音信号,传递给语音识别模块和语音传感器后,进行识别分类,分为操作指令、查询指令、服务指令等等,经语音传感器编码、译码、变成电信号传递给主控模块和云端,经分析计算后,如是操作指令,则输出到执行模块,经无线通讯传递给家庭主机(网关),操作各种智能家居设备;如是查询和服务指令,则进入到查询系统和预约服务系统,并把查询到的相关信息和预约的服务信息,经语音交互系统,传回给语音传感器,最后到语音输出模块进行回放。例如:如听到主人说“我有点热”和“降低室内温度”等语言均能引导智能管家根据策略,打开新风系统或打开空调等调温措施;如听到主人说“我回来啦”的声音,启动您设置的回家模式,打开窗帘等。
所述人机互换界面设置在智能家居管家的头部,其包括信息文字图像显示模块、触摸指示显示模块和显示屏,触摸指示显示模块和显示屏分别与信息文字图像显示模块电性连接。触摸和显示功能:智能家居管家配置显示屏,可显示各种信息,播放娱乐视频。同时也可以直接在显示屏上进行各种指令操作。信息显示模块:据有显示文字和图像功能,经分析后数据,形成文字或图像,在显示屏上显示或反馈给手机。
所述智能家居管家上设有红外线目标识别系统,红外线目标识别系统包括目标追踪定位模块,目标追踪定位模块与主控模块电性连接,主控模块还电性连接有机电驱动系统,机电驱动系统与脚轮组传动连接。红外线目标识别系统:由于语音采集的放向性,因此要求智慧管家机器人可以根据人的需要可以移动的,利用红外线探测原理,对人进行跟踪定位,当智慧管家机器人在离目标一定距离(如1米)范围内时,就不动;超过这一范围时,就移动跟踪目标。
红外线目标识别系统由目标追踪和定位模块组成。智慧管家机器人底盘带轮式的构造,经机电驱动系统,接收到目标追踪指令后,驱动智慧管家机器人达到定位的目的。智慧管家机器人可以自由移动,移动距离可以设定。
所述中控系统还包括语音交互系统,语音交互系统与主控模块电性连接,语音交互系统包括用于处理无线通讯模块所接收的语音信号及分类的语音识别模块、语音传感器模块和用于执行语音操作指令的语音指令输出执行模块,语音指令输出执行模块通过无线通讯模块向智能家居设备进行无线网络控制。由于语音最大的优势是,它是人类最自然高效的交互方式。智能家居管家中控系统,是以机器为载体,利用云计算和大数据分析技术,让机器通过识别和理解,把语音信号转变为相应的文本或命令,并给服务终端发布指令,就能得到相应的服务,使人们能够甩掉键盘和屏幕。如:下班准备回家,打电话通知智慧管家,智慧管家就可以预判用户所需时间(根据路程、路况、用户常用车速等条件预判),提前控制家用智能设备,提供各种服务。
所述主控模块为安装有咨询系统和预约服务系统软件的主控模块。咨询系统:根据用户需要,通过语音和短信指令,可以查询各种信息(交通、天气、娱乐等),通过语音交互系统,用语音的方式告诉给用户;用户可以合理地安排生活和工作。预约服务系统:用户可以通过语音和短信指令,预约办理各种业务,如预订酒店、航班等。并把预约的结果,通过语音交互系统,用语音的方式告诉给用户,或短信的方式通知给用户。智能家居管家通过感应人体温度,识别人体体温,若发现家里小孩体温异常,会向用户汇报情况,并请示是否提供看病预约服务。
咨询系统和预约服务系统就如电脑和手机的查询和预约系统,安装了相应的软件就能完成,只是把结果用语音和短信的方式告诉给用户。
所述电源供电管理系统一供电给各系统或模块,内置高容量的蓄电池,采用IC稳压电路。
一种带体感功能的智能家居管家中控系统的控制方法,其特征在于:根据所需控制的智能家居设备预先给主控模块安装相应的控制程序,当用户在人脸识别系统和体感识别系统监控范围内出现时,人脸识别系统对人脸图像进行识别,采集并储存和记忆人脸数据,而且当识别的人脸是机器人设置的目标人物时,机器人会向目标发出问候语;如与目标不符,就把人脸图像通过无线通讯模块发给主人。
体感识别系统对人的身体动作和表情进行识别,采集相关数据,传递给主控模块,并储存和记忆相关动作图像的数据,每次都要把上次的数据和这次的数据进行对比分析,并产生新的数据进行储存,通过这些数据,智能家居管家进行判断和策略执行肢体动作或表情所需要的服务。
本发明的有益效果如下:
(1)本发明的中控系统可代替人手打开智能家居设备软件并进行操作,其可在接收到来自设定人物的肢体/表情动作后作出相应的控制工作,免除如现有技术那样的繁琐操作,实现“类人化”的智能家居管家功能,能带给用户高效、便捷、舒适的操作体验;
(2)本发明是一种对智能家居进行控制管理的中央控制系统,是以机器或物体为载体,集成各种模块和软件的一种智慧装置---智能家居管家;为智能家居和智慧社区及智慧城市服务;
(3)本发明创造出能类似管家一样角色的智能中控,利用现有互联网技术,信息传输技术,大数据,云计算,加上本发明特有的人脸识别、体感识别功能,自主学习功能,人机交互功能,改变累赘的生活方式,彻底实现为人类生活减轻负担,实现一个人干多个人的活,为世界经济及文明发展作出贡献;而不像以往的智能家居系统那样,似是智能而非智慧,所有的指令均需要采用手机APP,或感应开关等设备控制,未能从根本上给人类减负。
(4)本发明是一套“去APP化”的操作系统,手机不再安装智能家居的“APP”,而是以智能家居管家中控系统为中心,采用手机电话一键通,或发一条短信,就能控制家里的各种智能设备,达到目的。用语音控制方式,方便地实现智能家居的操作,或者采用手机通话方式实现远程操作。手机不用安装APP,无APP可操作,真正做到了解放双手,使人与设备的交互,实现随心所欲。例如:用户通过面对面语音传达或远程打电话给智能家居管家,指示其执行各种功能指令,并把执行结果反馈给主人,充分体现智能家居管家的人性化,操作便捷化。
附图说明
图1为本发明一实施例工作原理框图。
图2为本发明控制原理示意图。
图3为本发明另一实施例工作原理框图。
图4为本发明中智能家居管家主视结构示意图。
图5为图4的后视结构示意图。
图6为图4的右视结构示意图。
图7为图4的俯视结构示意图。
图8为现有技术控制原理示意图。
具体实施方式
下面结合附图及实施例对本发明作进一步描述。
基础实施例,参见图1和图2所示,一种带体感功能的智能家居管家中控系统,所述中控系统1包括主控模块、电源供应管理系统、操作指令输出模块和人机互换界面,其特征在于:还包括用于接收通讯设备的语音信号或文字信息的无线通讯模块、用于获取人脸信息的人脸识别系统以及用于获取人体身躯动作信息的体感识别系统,无线通讯模块、人脸识别系统、体感识别系统、电源供应管理系统、操作指令输出模块和人机互换界面分别与主控模块电性连接,主控模块还通过无线通讯模块与外部云端进行远程网络连接,操作指令输出模块通过无线通讯模块向智能家居设备(图1中列举了智能安防、智能照明、智能燃气报警、智能空调、智能热水器等)进行无线网络控制。
所述无线通讯模块为内置4G、WiFi和ZigBee的无线通讯模块。
所述中控系统还包括用于采集智能家居设备及智能家居管家应用场景数据的数据采集系统,数据采集系统与主控模块电性连接。
所述主控模块为采用多核高速CPU和GPU芯片为核心的主板。
所述智能家居管家100包括头部3、身躯5和脚轮组,头部3转动设置在身躯5顶部,脚轮组设置在身躯5底部;所述中控系统1设置在智能家居管家100上;所述语音交互系统设有用于采集语音信号的麦克阵列。所述人机互换界面设置在智能家居管家的头部,其包括信息文字图像显示模块、触摸指示显示模块和显示屏8,触摸指示显示模块和显示屏8分别与信息文字图像显示模块电性连接。
所述智能家居管家为模拟人类管家职位,并以机器、设备或者其它物体作为载体的智能家居管家,即智能家居管家亦可称作智能家居管控设备、智能家居管控机器人等。
一种带体感功能的智能家居管家中控系统的控制方法,根据所需控制的智能家居设备预先给主控模块安装相应的控制程序,当用户在人脸识别系统和体感识别系统监控范围内出现时,人脸识别系统对人脸图像进行识别,采集并储存和记忆人脸数据,而且当识别的人脸是机器人设置的目标人物时,机器人会向目标发出问候语;如与目标不符,就把人脸图像通过无线通讯模块发给主人。
体感识别系统对人的身体动作和表情进行识别,采集相关数据,传递给主控模块,并储存和记忆相关动作图像的数据,每次都要把上次的数据和这次的数据进行对比分析,并产生新的数据进行储存,通过这些数据,智能家居管家进行判断和策略执行肢体动作或表情所需要的服务。
更佳的实施例,参见图3至图7所示,一种带体感功能的智能家居管家中控系统,所述中控系统1包括主控模块、电源供应管理系统、操作指令输出模块和人机互换界面,其特征在于:还包括无线通讯模块、用于获取人脸信息的人脸识别系统以及用于获取人体身躯动作信息的体感识别系统,无线通讯模块、人脸识别系统、体感识别系统、电源供应管理系统、操作指令输出模块和人机互换界面分别与主控模块电性连接,主控模块还通过无线通讯模块与外部云端进行远程网络连接,操作指令输出模块通过无线通讯模块向智能家居设备进行无线网络控制。所述无线通讯模块还具有接收通讯设备的语音信号或文字信息的功能。
所述无线通讯模块为内置4G、WiFi和ZigBee的无线通讯模块;所述主控模块为采用多核高速CPU和GPU芯片为核心的主板。
所述中控系统1还包括用于采集智能家居设备及智能家居管家应用场景数据的数据采集系统,数据采集系统与主控模块电性连接。
所述智能家居管家100外观主要采用SMC复合材料,整体为白色圆柱曲形,可以自由移动;正个高度约75cm,最大直径约40cm。所述智能家居管家100包括头部3、身躯5和脚轮组,头部3转动设置在身躯5顶部,脚轮组设置在身躯5底部;所述中控系统1设置在智能家居管家100上;所述语音交互系统设有用于采集语音信号的麦克阵列;所述智能家居管家100上设有红外线目标识别系统,红外线目标识别系统包括目标追踪定位模块,目标追踪定位模块与主控模块电性连接,主控模块还电性连接有机电驱动系统,机电驱动系统与脚轮组传动连接。
所述人机互换界面设置在智能家居管家100的头部3,人机互换界面包括信息文字图像显示模块、触摸指示显示模块和显示屏8,触摸指示显示模块和显示屏8分别与信息文字图像显示模块电性连接。
所述智能家居管家100的具体构成是:头部3为可旋转半球形,头部3内置所述显示屏8和与人脸识别系统和体感识别系统连接的摄像头2等,头部3可以180°转动,内置摄像头和麦克阵列拾音器12以及语音播报的喇叭以及脸部触摸(显示)屏,主要用于接收指令发布指令和反馈指令,显示操控的相关内容。远距离拾音,屏幕可用于显示智能设备的信息及可视对讲,不想语音或短信操作时,可以直接触摸操作各种指令。
身躯5部分,除了主控模块以外,还集中了语音系统模块、体感识别系统、人脸识别系统、红外线目标识别追踪模块、内置可支持4G、Wifi和ZigBee无线通讯模块、机电驱动模块、音响及USB插口7、隐藏式充电接口11、转动轴连接(可空间角度旋转)、装饰件4、散热孔10、数据存储系统模块、电源管理模块等。所述脚轮组包括直行脚轮6和万向轮9,万向轮9与转动轴连接。
底座部分内置了电机驱动模块,根据红外线的定位,或用户的指令,电机驱动模块工作,追踪目标。
上述智能家居管家100各部分都要考虑元器件的散热问题。
所述中控系统还包括语音交互系统,语音交互系统与主控模块电性连接,语音交互系统包括用于处理无线通讯模块所接收的语音信号及分类的语音识别模块、语音传感器模块和用于执行语音操作指令的语音指令输出执行模块,语音指令输出执行模块通过无线通讯模块向智能家居设备进行无线网络控制。
所述主控模块为安装有咨询系统和预约服务系统软件的主控模块。
本发明的智能家居管家软件系统采用模块式结构,一部分是子程序,在这些模块中安装了相应的子程序软件,如语音识别系统、图像系统、查询系统等相关软件。另外,根据各功能模块和逻辑性,需要开发一套适合智慧家庭中控系统的操作系统,这部分是主程序。信息交互和传输都需要各种操作系统来支柱。在整体的家庭网络操作系统下,对相应的硬件和模块下达命令从而实现家庭电子硬件的检测和控制。以机器为载体,集中各功能模块或系统以及软件操作系统,形成了智能家居管家中控系统。
一种带体感功能的智能家居管家中控系统的控制方法,根据所需控制的智能家居设备预先给主控模块安装相应的控制程序,当用户在人脸识别系统和体感识别系统监控范围内出现时,人脸识别系统对人脸图像进行识别,采集并储存和记忆人脸数据,而且当识别的人脸是机器人设置的目标人物时,机器人会向目标发出问候语;如与目标不符,就把人脸图像通过无线通讯模块发给主人。
体感识别系统对人的身体动作和表情进行识别,采集相关数据,传递给主控模块,并储存和记忆相关动作图像的数据,每次都要把上次的数据和这次的数据进行对比分析,并产生新的数据进行储存,通过这些数据,智能家居管家进行判断和策略执行肢体动作或表情所需要的服务。
当用户通过通讯设备向无线通讯模块发送语音信号,语音信号经主控模块传送至语音交互系统的语音识别模块和语音传感器模块后,将语音信号变成电信号传递给主控模块及外部云端进行分析计算,如果判断该电信号为语音操作指令,则输出到语音指令输出执行模块,语音指令输出执行模块将电信号经无线通讯模块传送到网关、再由网关传送到相应的智能家居设备,实现通过语音对智能家居设备进行控制。
若语音交互系统设有用于采集语音信号的麦克阵列时,用户可以向麦克阵列发出语音,则语音交互系统的语音识别模块和语音传感器模块将该声音直接变成电信号传递给主控模块及外部云端进行分析计算,如果判断该电信号为语音操作指令,则输出到语音指令输出执行模块,语音指令输出执行模块将电信号经无线通讯模块传送到网关、再由网关传送到相应的智能家居设备,实现通过语音对智能家居设备进行控制。
语音识别模块和语音传感器模块对由语音信号转换而成的电信号进行识别分类,分为所述语音操作指令、查询指令和服务指令。
当主控模块安装有咨询系统和预约服务系统软件时:如果电信号为查询指令,则进入到咨询系统查询相关信息、并经语音交互系统传回给语音传感器模块,最后输出到语音指令输出执行模块进行回放、并经无线通讯模块传送到通讯设备,以告知用户。
当用户通过通讯设备向无线通讯模块发送文字信息时,文字信息经主控模块传送至人机互换界面后,人机互换界面将文字信息变成文本传递给主控模块及外部云端进行分析计算,如果判断该文本为文字操作指令,则输出到操作指令输出模块,操作指令输出模块将文本经无线通讯模块传送到网关、再由网关传送到相应的智能家居设备,实现通过语音对智能家居设备进行控制。
如果文本为文字查询指令或文字服务指令,则进入到咨询系统查询相关信息或进入到预约服务系统预约办理相关业务,最终查询或预约的信息通过文字形式经无线通讯模块传送到通讯设备。
通过数据采集系统采集人的一些习惯性的,日常应用的场景数据后,与原有在云端储存的数据进行对比分析、运算,不断循环、储存、跟踪等产生记忆;机器逐步就有具备自动学习、自动判断的能力,并自行发出指令的功能。日常应用的场景数据包括语音,表情以及肢体动作。
实施方案后应用举例:
起床场景:智能中控根据设定的时间或者用户习惯的起床时间,用轻音乐把用户唤醒(机器内部基础功能);同时播报天气,周边环境状况(自动与唤醒功能联动;自动与互联网连接,自动搜索并筛选,通过自带视频播报相关类容);根据日期、时间和用户出行习惯,提供路况信息,根据日程安排预判出门时间(自动搜索,自学习,通过对以往数据分析,自动判断,提供建议);用户起床后,根据用户使用家电的习惯,自动唤醒各类智能家居,如开窗帘,烧水,开热水器,呼叫电梯(联动功能)。
下班场景:智能中控会于用户常规下班时间以电话或微信的方式与用户联通(人机交互,去APP化)确定离开公司时间,根据时间、用户出行习惯、交通状况,提供交通方式及路线的建议,并计算到家时间(与互联网连接,自动搜索功能;通过对以往数据分析,自动判断,提供建议)。
回家后场景:用户回家后,自动询问需求,用户用语音、表情、动作回应,智能中控接收用户需求的数据,上传到云平台,分析数据,与用户确定需求后发布智能家居运作的指令,与家中智能家居通过特定的传输信号联动,让智能设备执行命令(人机交互,去APP化,不需要APP来操作智能家居)。
日常场景:根据室内空气质量状况,感应器接收空气质量监测数据,数据实时传送于云平台,通过在云平台计算分析,结果反馈给中控设备,中控设备分析室内所在用户的特性,发布是否打开新风系统的指令,如家中有婴幼儿,对空气质量要求高,则需要开新风设备的门槛降低,与家中智能家居通过特定的传输信号联动,让智能设备执行命令(自动分析需求,发布指令);识别家中用户,根据用户特点分析用户所需环境温度,与家中智能家居通过特定的传输信号联动,运行空调设备,自动调节温度(人脸识别,自学习功能);通过人脸识别系统,识别家中用户的表情判断用户的需求,对家中设备发布指令,如家中有人皱眉头,可询问其需求,并明确其是否要提供相关服务(人脸识别功能,体感接收器接收到数据,上传到云平台,并根据原数据计算及分析,得出初步判断,并咨询用户);通过体感识别系统,接收用户的动作数据,本根据数据分析用户的情绪及需求,并明确其是否要提供相关服务,如用户拍桌子了,判断用户的情绪可能处于叫激动的状况(体感识别功能,体感接收器接收到数据,上传到云平台,并根据原数据计算及分析,得出初步判断,并咨询用户);其他智能家居的联动与之类似,通过人脸识别系统、体感识别系统,判识别家中异常数据,数据传输与云平台,依据以往收集的大数据,自动分析分析判断,初步计算用户的需求,与用户通过面对面语音交流、电话交流方式明确指令,后执行命令。
数据收集越多,自动分析的结果越精确,人与智能中控共处时间越长,中控对人的习惯越了解,互动会更顺畅。
一智慧机器人作为智能家居的管家,根据主人意愿管理智能家居。手机或平板电脑不再安装各种APP,直接打个电话或发条短信,就能控制智能家居设备了,或在你家里时,可以面对面交谈,或根据你的一个动作或表情,就能完成各种操作,和提供各种需要的服务。
Claims (9)
1.一种带体感功能的智能家居管家中控系统,所述中控系统包括主控模块、电源供应管理系统、操作指令输出模块和人机互换界面,其特征在于:还包括无线通讯模块、用于获取人脸信息的人脸识别系统以及用于获取人体身躯动作信息的体感识别系统,无线通讯模块、人脸识别系统、体感识别系统、电源供应管理系统、操作指令输出模块和人机互换界面分别与主控模块电性连接,主控模块还通过无线通讯模块与外部云端进行远程网络连接,操作指令输出模块通过无线通讯模块向智能家居设备进行无线网络控制。
2.根据权利要求1所述带体感功能的智能家居管家中控系统,其特征在于:所述无线通讯模块为内置4G、WiFi和ZigBee的无线通讯模块;所述主控模块为采用多核高速CPU和GPU芯片为核心的主板。
3.根据权利要求1所述带体感功能的智能家居管家中控系统,其特征在于:所述中控系统还包括用于采集智能家居设备及智能家居管家应用场景数据的数据采集系统,数据采集系统与主控模块电性连接。
4.根据权利要求1所述带体感功能的智能家居管家中控系统,其特征在于:所述智能家居管家包括头部、身躯和脚轮组,头部转动设置在身躯顶部,脚轮组设置在身躯底部;所述中控系统设置在智能家居管家上;所述语音交互系统设有用于采集语音信号的麦克阵列。
5.根据权利要求4所述带体感功能的智能家居管家中控系统,其特征在于:所述人机互换界面设置在智能家居管家的头部,其包括信息文字图像显示模块、触摸指示显示模块和显示屏,触摸指示显示模块和显示屏分别与信息文字图像显示模块电性连接。
6.根据权利要求4所述带体感功能的智能家居管家中控系统,其特征在于:所述智能家居管家上设有红外线目标识别系统,红外线目标识别系统包括目标追踪定位模块,目标追踪定位模块与主控模块电性连接,主控模块还电性连接有机电驱动系统,机电驱动系统与脚轮组传动连接。
7.根据权利要求2所述带体感功能的智能家居管家中控系统,其特征在于:所述中控系统还包括语音交互系统,语音交互系统与主控模块电性连接,语音交互系统包括用于处理无线通讯模块所接收的语音信号及分类的语音识别模块、语音传感器模块和用于执行语音操作指令的语音指令输出执行模块,语音指令输出执行模块通过无线通讯模块向智能家居设备进行无线网络控制。
8.根据权利要求7所述带体感功能的智能家居管家中控系统,其特征在于:所述主控模块为安装有咨询系统和预约服务系统软件的主控模块。
9.一种根据权利要求1所述带体感功能的智能家居管家中控系统的控制方法,其特征在于:根据所需控制的智能家居设备预先给主控模块安装相应的控制程序,当用户在人脸识别系统和体感识别系统监控范围内出现时,人脸识别系统对人脸图像进行识别,采集并储存和记忆人脸数据,而且当识别的人脸是机器人设置的目标人物时,机器人会向目标发出问候语;如与目标不符,就把人脸图像通过无线通讯模块发给主人;
体感识别系统对人的身体动作和表情进行识别,采集相关数据,传递给主控模块,并储存和记忆相关动作图像的数据,每次都要把上次的数据和这次的数据进行对比分析,并产生新的数据进行储存,通过这些数据,智能家居管家进行判断和策略执行肢体动作或表情所需要的服务。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611266798.XA CN106790628A (zh) | 2016-12-31 | 2016-12-31 | 带体感功能的智能家居管家中控系统及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611266798.XA CN106790628A (zh) | 2016-12-31 | 2016-12-31 | 带体感功能的智能家居管家中控系统及其控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106790628A true CN106790628A (zh) | 2017-05-31 |
Family
ID=58952446
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611266798.XA Pending CN106790628A (zh) | 2016-12-31 | 2016-12-31 | 带体感功能的智能家居管家中控系统及其控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106790628A (zh) |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107065588A (zh) * | 2017-06-03 | 2017-08-18 | 合肥佳洋电子科技有限公司 | 一种智能家居系统 |
CN107116563A (zh) * | 2017-06-22 | 2017-09-01 | 国家康复辅具研究中心 | 宠物型机器人及机器人控制系统 |
CN107229262A (zh) * | 2017-06-29 | 2017-10-03 | 深圳奥比中光科技有限公司 | 一种智能家居系统 |
CN107360066A (zh) * | 2017-06-29 | 2017-11-17 | 深圳奥比中光科技有限公司 | 一种家居服务机器人及智能家居系统 |
CN107450401A (zh) * | 2017-08-25 | 2017-12-08 | 成都亿睿科技有限公司 | 一种用于平台数据监控并报警的机器人系统 |
CN107942713A (zh) * | 2017-12-27 | 2018-04-20 | 温州市艺都装潢有限公司 | 一种智能家居系统 |
CN108594669A (zh) * | 2018-06-15 | 2018-09-28 | 河池学院 | 一种智能家居机器人控制系统 |
CN109920544A (zh) * | 2019-01-28 | 2019-06-21 | 浙江工业大学 | 基于体感信息的实时自适应智能楼宇系统 |
CN109976177A (zh) * | 2019-04-01 | 2019-07-05 | 广东职业技术学院 | 具有人脸识别功能的智能家居安防机器人 |
CN109976178A (zh) * | 2019-04-12 | 2019-07-05 | 重庆工商职业学院 | 一种基于5g通信的智能家居管家及其工作方法 |
CN110161872A (zh) * | 2019-06-06 | 2019-08-23 | 四川长虹电器股份有限公司 | 一种基于大数据分析的智慧管家实现方法 |
US10448762B2 (en) | 2017-09-15 | 2019-10-22 | Kohler Co. | Mirror |
CN110989390A (zh) * | 2019-12-25 | 2020-04-10 | 海尔优家智能科技(北京)有限公司 | 智能家居的控制方法及装置 |
US10663938B2 (en) | 2017-09-15 | 2020-05-26 | Kohler Co. | Power operation of intelligent devices |
CN112034726A (zh) * | 2020-09-15 | 2020-12-04 | 百度在线网络技术(北京)有限公司 | 基于场景的控制方法、装置、设备以及存储介质 |
US10887125B2 (en) | 2017-09-15 | 2021-01-05 | Kohler Co. | Bathroom speaker |
CN112621788A (zh) * | 2021-03-11 | 2021-04-09 | 爱义思(上海)机器人科技有限公司 | 一种基于生物钟的管家服务机器人 |
CN113030786A (zh) * | 2019-12-25 | 2021-06-25 | Oppo广东移动通信有限公司 | 设备检测方法及相关装置 |
CN113067776A (zh) * | 2021-03-23 | 2021-07-02 | 广东九联科技股份有限公司 | 一种具有人机互动功能的智能路由器及其控制系统 |
US11099540B2 (en) | 2017-09-15 | 2021-08-24 | Kohler Co. | User identity in household appliances |
CN113419440A (zh) * | 2021-07-16 | 2021-09-21 | 武汉施尔诺新能源科技有限公司 | 一种基于智能家居环境下使用的智能控制系统 |
CN114428506A (zh) * | 2022-04-06 | 2022-05-03 | 北京云迹科技股份有限公司 | 服务机器人的控制方法及装置 |
US11921794B2 (en) | 2017-09-15 | 2024-03-05 | Kohler Co. | Feedback for water consuming appliance |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN204790566U (zh) * | 2015-07-16 | 2015-11-18 | 高世恒 | 一种多功能智能家居机器人 |
CN105721259A (zh) * | 2016-01-29 | 2016-06-29 | 江西智能无限物联科技有限公司 | 智能交互机器人 |
-
2016
- 2016-12-31 CN CN201611266798.XA patent/CN106790628A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN204790566U (zh) * | 2015-07-16 | 2015-11-18 | 高世恒 | 一种多功能智能家居机器人 |
CN105721259A (zh) * | 2016-01-29 | 2016-06-29 | 江西智能无限物联科技有限公司 | 智能交互机器人 |
Cited By (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107065588A (zh) * | 2017-06-03 | 2017-08-18 | 合肥佳洋电子科技有限公司 | 一种智能家居系统 |
CN107116563B (zh) * | 2017-06-22 | 2018-09-21 | 国家康复辅具研究中心 | 宠物型机器人及机器人控制系统 |
CN107116563A (zh) * | 2017-06-22 | 2017-09-01 | 国家康复辅具研究中心 | 宠物型机器人及机器人控制系统 |
CN107229262A (zh) * | 2017-06-29 | 2017-10-03 | 深圳奥比中光科技有限公司 | 一种智能家居系统 |
CN107360066A (zh) * | 2017-06-29 | 2017-11-17 | 深圳奥比中光科技有限公司 | 一种家居服务机器人及智能家居系统 |
CN107450401A (zh) * | 2017-08-25 | 2017-12-08 | 成都亿睿科技有限公司 | 一种用于平台数据监控并报警的机器人系统 |
CN107450401B (zh) * | 2017-08-25 | 2019-08-09 | 成都亿睿科技有限公司 | 一种用于平台数据监控并报警的机器人系统 |
US11099540B2 (en) | 2017-09-15 | 2021-08-24 | Kohler Co. | User identity in household appliances |
US11949533B2 (en) | 2017-09-15 | 2024-04-02 | Kohler Co. | Sink device |
US11921794B2 (en) | 2017-09-15 | 2024-03-05 | Kohler Co. | Feedback for water consuming appliance |
US11892811B2 (en) | 2017-09-15 | 2024-02-06 | Kohler Co. | Geographic analysis of water conditions |
US10448762B2 (en) | 2017-09-15 | 2019-10-22 | Kohler Co. | Mirror |
US11314214B2 (en) | 2017-09-15 | 2022-04-26 | Kohler Co. | Geographic analysis of water conditions |
US10663938B2 (en) | 2017-09-15 | 2020-05-26 | Kohler Co. | Power operation of intelligent devices |
US11314215B2 (en) | 2017-09-15 | 2022-04-26 | Kohler Co. | Apparatus controlling bathroom appliance lighting based on user identity |
US10887125B2 (en) | 2017-09-15 | 2021-01-05 | Kohler Co. | Bathroom speaker |
CN107942713A (zh) * | 2017-12-27 | 2018-04-20 | 温州市艺都装潢有限公司 | 一种智能家居系统 |
CN108594669A (zh) * | 2018-06-15 | 2018-09-28 | 河池学院 | 一种智能家居机器人控制系统 |
CN109920544A (zh) * | 2019-01-28 | 2019-06-21 | 浙江工业大学 | 基于体感信息的实时自适应智能楼宇系统 |
CN109976177A (zh) * | 2019-04-01 | 2019-07-05 | 广东职业技术学院 | 具有人脸识别功能的智能家居安防机器人 |
CN109976177B (zh) * | 2019-04-01 | 2022-05-27 | 广东职业技术学院 | 具有人脸识别功能的智能家居安防机器人 |
CN109976178A (zh) * | 2019-04-12 | 2019-07-05 | 重庆工商职业学院 | 一种基于5g通信的智能家居管家及其工作方法 |
CN110161872A (zh) * | 2019-06-06 | 2019-08-23 | 四川长虹电器股份有限公司 | 一种基于大数据分析的智慧管家实现方法 |
CN113030786A (zh) * | 2019-12-25 | 2021-06-25 | Oppo广东移动通信有限公司 | 设备检测方法及相关装置 |
CN110989390A (zh) * | 2019-12-25 | 2020-04-10 | 海尔优家智能科技(北京)有限公司 | 智能家居的控制方法及装置 |
CN112034726A (zh) * | 2020-09-15 | 2020-12-04 | 百度在线网络技术(北京)有限公司 | 基于场景的控制方法、装置、设备以及存储介质 |
CN112621788A (zh) * | 2021-03-11 | 2021-04-09 | 爱义思(上海)机器人科技有限公司 | 一种基于生物钟的管家服务机器人 |
CN112621788B (zh) * | 2021-03-11 | 2022-07-12 | 爱义思(上海)机器人科技有限公司 | 一种基于生物钟的管家服务机器人 |
CN113067776A (zh) * | 2021-03-23 | 2021-07-02 | 广东九联科技股份有限公司 | 一种具有人机互动功能的智能路由器及其控制系统 |
CN113067776B (zh) * | 2021-03-23 | 2023-04-18 | 广东九联科技股份有限公司 | 一种具有人机互动功能的智能路由器及其控制系统 |
CN113419440A (zh) * | 2021-07-16 | 2021-09-21 | 武汉施尔诺新能源科技有限公司 | 一种基于智能家居环境下使用的智能控制系统 |
CN114428506A (zh) * | 2022-04-06 | 2022-05-03 | 北京云迹科技股份有限公司 | 服务机器人的控制方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106790628A (zh) | 带体感功能的智能家居管家中控系统及其控制方法 | |
CN106773766A (zh) | 带学习功能的智能家居管家中控系统及其控制方法 | |
CN106782559A (zh) | 带远程通讯控制的智能家居管家中控系统及其控制方法 | |
CN208013683U (zh) | 带体感功能的智能家居管家中控设备 | |
CN106406119B (zh) | 基于语音交互、云技术及集成智能家居监控的服务机器人 | |
US11287150B2 (en) | Device control system | |
CN108390859B (zh) | 一种对讲分机智能机器人装置 | |
CN204695082U (zh) | 智能管家机器人 | |
CN106346487B (zh) | 交互式vr沙盘展示机器人 | |
CN206671790U (zh) | 带学习功能的智能家居管家中控系统 | |
CN107526298A (zh) | 智能家居服务机器人 | |
CN106695839A (zh) | 一种用于幼童教育的仿生智能型机器人 | |
CN104102346A (zh) | 一种家用信息采集和用户情感识别设备及其工作方法 | |
CN106873773A (zh) | 机器人交互控制方法、服务器和机器人 | |
CN103942938A (zh) | 以便携式智能设备为控制中枢的智能交互系统 | |
CN104571114A (zh) | 一种智能家居机器人 | |
CN105527944A (zh) | 具有时段划分功能的智能控制系统 | |
CN104767785A (zh) | 便携式智能设备控制系统及其控制系统软件 | |
CN108924612A (zh) | 一种艺术智能电视装置 | |
CN202753155U (zh) | 一种用于互联网的机器人装置 | |
CN207780562U (zh) | 室内安防陪护机器人 | |
CN107734213A (zh) | 智能家用电子装置与系统 | |
WO2019140697A1 (zh) | 一种对讲分机智能机器人装置 | |
Zhou et al. | Smart home R&D system based on virtual reality | |
CN109388068A (zh) | 一种基于人工智能及通用组合传感器的智能家居应用系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170531 |