CN109065048A - 语音控制方法及装置 - Google Patents
语音控制方法及装置 Download PDFInfo
- Publication number
- CN109065048A CN109065048A CN201811063302.8A CN201811063302A CN109065048A CN 109065048 A CN109065048 A CN 109065048A CN 201811063302 A CN201811063302 A CN 201811063302A CN 109065048 A CN109065048 A CN 109065048A
- Authority
- CN
- China
- Prior art keywords
- controlled device
- control
- control command
- mark
- control information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 230000004044 response Effects 0.000 claims abstract description 46
- 230000006855 networking Effects 0.000 claims description 69
- 238000004891 communication Methods 0.000 claims description 44
- 238000004590 computer program Methods 0.000 claims description 19
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 101100258315 Neurospora crassa (strain ATCC 24698 / 74-OR23-1A / CBS 708.71 / DSM 1257 / FGSC 987) crc-1 gene Proteins 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
- H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Selective Calling Equipment (AREA)
Abstract
本申请涉及一种语音控制方法及装置。所述方法包括:中央控制器接收语音识别终端发送的控制信息,识别并收集该控制信息中同一被控设备标识的控制命令,将收集后的控制命令发送给同一被控设备标识对应的被控设备,并将被控设备的响应信息返回至语音识别终端。上述的语音控制方法使得用户可在不同的地方发送语音控制命令实现对多个家居设备的控制。
Description
技术领域
本申请涉及人工智能技术领域,特别是涉及一种语音控制方法及装置。
背景技术
随着人工智能技术的发展,出现了语音控制技术,语音控制技术是让机器通过识别和理解过程把语音信号转变为相应的文本或命令的技术。大量的语音识别控制产品已经进入市场和服务领域,语音控制技术不断向智能家居领域渗透,使得语音控制家居设备越来越普遍。
然而,传统的语音控制家居设备的方法,尤其是本地语音控制方法只能控制一个家居设备,并且当用户处于较远的位置时,不能很好的通过语音控制家居设备。
发明内容
基于此,有必要针对上述技术问题,提供一种能够控制多个家居设备的语音控制方法及装置。
一种语音控制方法,所述方法包括:
接收语音识别终端发送的控制信息;
识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令;
将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
接收所述被控设备的响应信息,并将所述响应信息返回至所述语音识别终端。
在其中一个实施例中,所述接收语音识别终端发送的控制消息的步骤之前,还包括:
发送组网广播;
接受语音识别终端和被控设备加入组网的请求;
获取所述被控设备对应的被控设备标识;
存储所述的被控设备标识在预先设置的列表中。
在其中一个实施例中,所述识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令,包括:
识别所述控制信息中控制命令所对应的被控设备标识;
比较各控制命令所对应的被控设备标识;
收集具有同一被控设备标识的控制命令。
在其中一个实施例中,所述将收集后的控制命令发送给所述同一被控设备标识对应的被控设备的步骤之前,还包括:
获取所述控制命令中的被控设备标识和列表中的被控设备标识;
比较所述控制命令中的被控设备标识和所述列表中的被控设备标识;
若两者的被控设备标识一致,则表示所述被控设备标识对应的被控设备在组网内;
若两者的被控设备标识不一致,则表示所述被控设备标识对应的被控设备未加入所述组网。
一种语音控制方法,所述方法包括:
接收语音控制命令,将所述语音控制命令转换为可识别文本;
将所述可识别文本封装为控制信息,将所述控制信息发送至中央控制器,所述控制信息用于指示所述中央控制器收集所述控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
接收所述中央控制器返回的被控设备的响应信息。
在其中一个实施例中,所述方法还包括:
通过第一处理通信接收语音识别终端发送的控制信息,通过第二通信单元将收集后的控制命令发送给所述同一被控设备标识对应的被控设备,所述第一通信单元和所述第二通信单元处于同一中央控制器中,所述第一通信单元和所述第二通信单元分别使用不同的频点工作。
一种语音控制装置,所述装置包括:
接收模块,用于接收语音识别终端发送的控制信息;
收集模块,用于识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令;
发送模块,用于将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
返回模块,用于接收所述被控设备的响应信息,并将所述响应信息返回至所述语音识别终端。
一种语音控制装置,所述装置包括:
转换模块,用于接收语音控制命令,将所述语音控制命令转换为可识别文本;
发送模块,用于将所述可识别文本封装为控制信息,将所述控制信息发送至中央控制器,所述控制信息用于指示所述中央控制器收集所述控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
接收响应模块,用于接收所述中央控制器返回的被控设备的响应信息。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述方法中的任意步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述方法中的任意步骤。
上述语音控制方法及装置,通过中央控制器接收语音识别终端发送的控制信息,识别并收集所述控制信息中同一被控设备标识的控制命令,将收集后的控制命令发送给所述同一被控设备标识对应的被控设备,接收所述被控设备的响应信息,并将所述响应信息返回至所述语音识别终端,使得用户可在不同的地方发送语音控制命令实现对多个家居设备的控制。
附图说明
图1为一个实施例中语音控制方法的应用环境图;
图2为一个实施例中语音控制方法的流程示意图;
图3为一个实施例中组网步骤的流程示意图;
图4为另一个实施例中收集控制命令步骤的流程示意图;
图5为另一个实施例中查找被控设备标识的流程示意图;
图6为一个实施例中语音控制方法的流程示意图;
图7为另一个实施例中语音控制方法的流程示意图;
图8为一个实施例中语音控制装置的结构框图;
图9为另一个实施例中语音控制装置的结构框图;
图10为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的语音控制方法,可以应用于如图1所示的应用环境中。其中,中央控制器102通过网络与本地语音识别终端104、中继器106、被控设备108进行通信,本地语音识别终端104通过网络与中继器106进行通信。其中,本地语音识别终端104和中继器106可以是多个,本地语音识别终端104可以直接与中央控制器102进行通信,也可以通过中继器106实现。被控设备108可以是多个不同的被控设备。
在一个实施例中,如图2所示,提供了一种语音控制方法,以该方法应用于图1中的中央控制器为例进行说明,包括以下步骤:
步骤202,接收语音识别终端发送的控制信息。
其中,语音识别终端就是能通过识别和理解过程把语音信号转变为相应的文本或命令的终端。
具体地,中央控制器中的第一通信单元接收来自本地语音识别终端的控制消息,该控制消息是本地语音识别终端将用户的语音控制命令转换成的可识别文本。
步骤204,识别该控制信息,收集该控制信息中同一被控设备标识的控制命令。
其中,被控设备标识是被控设备的唯一标识,被控设备标识和被控设备是一一对应的关系。该被控设备标识包括但不限于随机字符串和数字的组合,该被控设备标识可以根据用户的使用习惯更改。
具体地,中央控制器识别该控制信息中控制命令所对应的被控设备标识,比较这些被控设备标识是否相同,收集相同的被控设备标识对应的控制命令。
步骤206,将收集后的控制命令发送给同一被控设备标识对应的被控设备。
具体地,中央控制器判断该被控设备标识是否在组网中,如果在该组网中,则利用中央控制器中的第二通信单元把收集的同一被控设备标识的控制命令发送给对应的被控设备。
步骤208,接收被控设备的响应信息,并将该响应信息返回至语音识别终端。
其中,响应信息是指被控设备接收到控制命令后,针对该控制命令做出相应的响应,并形成响应信息返回给中央控制器。
具体地,中央控制器中的第二通信单元可以接收被控设备返回的响应信息,并且中央控制器利用第一通信单元把该响应信息返回给本地语音控制终端以结束本次控制操作。
上述语音控制方法中,通过中央控制器接收语音识别终端的控制信息,识别收集该控制信息中相同被控设备标识的控制命令,并把收集的控制命令发送给该被控设备标识对应的被控设备,实现了用户在不同的地方通过语音命令控制不同的家居设备。
在一个实施例中,中央控制器也可以接收中继器转发的控制消息。
具体地,中央控制器与本地语音识别终端距离较远时,在两者之间接入一个中继器。中继器接收本地语音识别终端发出的控制消息,并将该控制消息转发给中央控制器。同时,中央控制器返回给本地语音识别终端的关于被控设备的响应信息也由该中继器转发。该中继器只实现转发功能,对接收的信息不进行任何处理。上述方法通过中继器实现转发功能,解决了由于中央控制器和本地语音识别终端距离较远,两者通信受阻的问题。
在一个实施例中,语音识别终端和中继器可以是多个。
具体地,为了实现在室内不同的地方都可以利用语音控制被控设备,可以在室内不同的地方布置多个本地语音识别终端。针对与中央控制器的距离较远的一些本地语音识别终端,可以在中央控制器和每个本地语音识别终端之间分别加入中继器。中央控制器存储这些加入组网的多个本地语音识别终端和多个中继器的地址,以便在最后返回被控设备的响应信息给对应的本地语音识别终端或对应的中继器。在不同的地方布置多个本地语音识别终端,并且在语音识别终端和中央控制器的距离较远的可以接入中继器以转发消息,用户可以在多个地方通过语音实现对被控设备的控制。
在一个实施例中,如图3所示,接收语音识别终端发送的控制消息的步骤之前,还包括:
步骤302,发送组网广播。
其中,组网广播是一种允许一个或多个发送者发送单一的数据包给多个接收者的网络技术。
具体地,中央控制器发送组网广播消息,发送的组网广播消息中携带有该中央控制器的地址,以及用于智能设备加入组网的校验码,未加入该网络内的本地语音识别终端、中继器和被控设备接收到组网广播后发送入网请求给到中央控制器。
步骤304,接受语音识别终端和被控设备加入组网的请求。
具体地,中央控制器接收到本地语音识别终端、中继器和被控设备加入组网的请求后,比较本地语音识别终端、中继器和被控设备携带的校验码和中央控制器发送的校验码是否相同。如果两者的校验码不相同,则拒绝该其加入该组网,如果两者的校验码相同,则同意其加入该组网并为其分配工作频点。
步骤306,获取被控设备对应的被控设备标识。
中央控制器接受本地语音识别终端、中继器和被控设备加入组网的请求后,将多个本地语音识别终端、多个中继器的地址进行标号存储,比如语音识别终端1,语音识别终端2代表处于不同位置的多个本地语音识别终端;中继1,中继2代表处于不同位置的多个中继器。被控设备不按照地址存储,而是获取被控设备的被控设备标识,该被控设备标识可以预先写入被控设备的芯片中。
步骤308,存储被控设备标识在预先设置的列表中。
具体地,中央控制器会预先设置一个列表,用于存放被控设备标识。中央控制器将获取的被控设备标识存储在该列表中。
上述方法中,中央控制器进行组网广播,并判断本地语音识别终端、中继器和被控设备的校验码是否正确以决定是否同意其加入组网,获取加入组网的被控设备的被控设备标识,将其存储在预先设置的列表中,该方法能有效隔离私有网络,形成一个自定义的网络。
在一个实施例中,如图4所示,识别控制信息,收集该控制信息中同一被控设备标识的控制命令,包括:
步骤402,识别控制信息中控制命令所对应的被控设备标识。
具体地,中央控制器接收到的控制信息可能有多个命令,还可能携带多个不同的被控设备标识,中央控制器要对这些控制信息的内容进行识别分析,分析这些控制消息中的控制命令分别对应的被控设备标识。
步骤404,比较各控制命令所对应的被控设备标识。
具体地,比较各个控制命令所对应的被控设备标识是否相同,如果比较的两个被控设备标识相同,则说明这两条不同的控制命令要控制的是的是同一个被控设备标识对应的被控设备,也就是说它们要控制的是同一对象。如果比较的两个被控设备标识不相同,则说明这两条不同的控制命令要控制的是不同的两个被控设备标识对应的被控设备,也就是说它们要控制的是两个不一样对象。
步骤406,收集具有同一被控设备标识的控制命令。
如果比较的两个被控设备标识相同,则把后一个被控设备标识对应的控制命令放置在前一个被控设备标识的控制命令之后,有顺序的收集同一被控设备标识的控制命令。
比如,控制消息是“打开台灯1,调到两档亮度,调低空调A温度到23度,再把台灯1调到三档亮度”。中央控制器接收到该控制消息后,对该控制消息的内容进行分析,首先分析打开台灯1和调到两档亮度这两个控制命令,“调到两档亮度”这个控制命令是没有带执行主体的,则说明该控制命令是上一个控制命令“打开台灯1”的后继动作,也就是说它们要控制的对象都是台灯1。然后比较台灯1和空调A,它们的被控设备标识是不一样的,说明它们要控制的对象是不同的,则分别收集这两个被控设备标识对应的控制命令。继续比较台灯1和台灯1,两者的被控设备标识相同,则把出现在后面的台灯1对应的控制命令“调到三档亮度”放置在“打开台灯1,调到两档亮度”之后。该方法中,中央控制器识别接收到的控制消息中控制命令对应的被控设备标识,并比较各个被控设备标识是否相同,收集同一被控设备标识对应的控制命令,可以一次性将这些控制命令发送给该被控设备标识对应的被控设备,减少中央控制器的发送的次数,减少工作量。
在一个实施例中,如图5所示,将收集后的控制命令发送给同一被控设备标识对应的被控设备的步骤之前,还包括:
步骤502,获取控制命令中的被控设备标识和列表中的被控设备标识。
步骤504,比较控制命令中的被控设备标识和列表中的被控设备标识。
步骤506,若两者的被控设备标识一致,则表示被控设备标识对应的被控设备在组网内。
步骤508,若两者的被控设备标识不一致,则表示被控设备标识对应的被控设备未加入该组网。
具体地,中央控制器将收集后的控制命令发送给同一被控设备标识对应的被控设备之前,要先验证要发送的被控设备是否在该组网内。中央控制器要先获取这些控制命令中的被控设备标识和预先存储在列表中的被控设备标识,比较控制命令中的被控设备标识是否与列表中的其中一个被控设备标识相同。如果在列表中能找到与其相同的被控设备标识,说明该被控设备标识对应的被控设备已加入该组网,则将收集的控制命令发送给该被控设备标识对应的被控设备。如果在列表中没有找到与其相同的被控设备标识,说明该被控设备标识对应的被控设备不在该组网内,则向本地识别终端返回未查找到相应的被控设备标识的消息。通过比较控制命令中的被控设备标识和列表中被控设备标识,可以快速地查找到该控制命令中的被控设备标识对应的被控设备是否加入组网,避免中央控制器出现发送异常的情况。
在一个实施例中,如图6所示,提供了一种语音控制方法,方法包括:
步骤602,接收语音控制命令,将语音控制命令转换为可识别文本。
具体地,本地语音识别终端接收用户发出的语音控制命令,并通过单片机将该语音控制命令转换为可识别的文本语言。
步骤604,将该可识别文本封装为控制信息,将控制信息发送至中央控制器,该控制信息用于指示中央控制器收集控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给同一被控设备标识对应的被控设备。
具体地,本地语音识别终端将可识别文本封装为控制消息,并将该控制消息发送给中央控制器。该控制消息可以指示中央控制器识别控制消息的内容,收集控制消息中属于同一个被控设备标识的控制命令,并把收集的控制命令发送给被控设备标识对应的被控设备。
步骤606,接收中央控制器返回的被控设备的响应信息。
具体地,本地语音识别终端将消息发送给中央控制器之后,会自动进入等待状态,直到接收到中央控制器返回的被控设备根据控制信息完成相应的响应的信息后,本地语音识别终端才结束本次操作。上述方法中,本地语音控制终端接收用户的语音控制命令,将该语音控制命令转换为可识别文本并封装成控制消息发送给中央控制器,并指示中央控制器完成一系列控制操作,最后接收中央控制器返回的被控设备的响应信息,用户不需要动手操作,就可以在不同的地方直接发送语音实现对家居设备的控制。
在一个实施例中,该语音控制方法还包括:
第一通信单元接收语音识别终端发送的控制信息,第二通信单元将收集后的控制命令发送给同一被控设备标识对应的被控设备,第一通信单元和第二通信单元处于同一中央控制器中,第一通信单元和第二通信单元分别使用不同的频点工作。
其中,中央控制器中存在两个通信单元,第一通信单元负责与本地语音识别终端和中继器的通信,第二通信单元负责与被控设备的通信。
具体地,第一通信单元用于接收来自本地语音识别终端或中继器的控制消息,并用于返回被控设备的响应信息给本地语音识别终端或中继器;第二通信单元用于把收集后的控制命令发送给被控设备,并接收被控设备返回的响应信息。比如,中央控制器和本地语音识别终端、中继器、被控设备组成的网络是一个自定义的2.4G网络,在该组网中,第一通信单元负责与本地语音识别终端及中继器的通信,第一通信单元的工作频率可以是2412M,那本地语音识别终端和中继器加入该组网时,中央控制器会给本地语音识别终端和中继器分配与第一通信单元相同的2412M工作频率。而第二通信单元负责与被控设备的通信,第二通信单元的工作频率可以是2417M,在被控设备加入该组网时,中央控制器给被控设备分配与第二通信单元相同的2417M工作频率。这样可以避免两个通信单元之间产生干扰,从而减少中央控制器收发信息时的异常情况。
在一个实施例中,如图7所示,该语音控制方法,包括:
步骤702,中央控制器发送组网广播信息。
步骤704,本地语音识别终端、中继器和被控设备接收到组网广播后发送入网请求给到中央控制器。
步骤706,中央控制器判断本地语音识别终端、中继器和被控设备这些设备携带的校验码和广播的校验码是否一致,如果两者的校验码不相同,则拒绝该设备加入组网,如果两者的校验码相同,则同意该设备加入组网。
步骤708,中央控制器接受语音识别终端、中继器和被控设备加入组网的请求,并分配各自的工作频点。
步骤710,中央控制器获取被控设备对应的被控设备标识,并存储该被控设备标识在预先设置的列表中。
步骤712,本地语音识别终端接收用户的控制消息,发送给中央控制器。在步骤712中,如果本地语音识别终端和中央控制器之间存在中继器,则本地语音识别终端将控制消息发送给中继器,由中继器将控制消息转发给中央控制器。
步骤714,中央控制器接收控制信息,识别控制消息中控制命令所对应的被控设备标识,比较各控制命令所对应的被控设备标识,并收集具有同一被控设备标识的控制命令。
步骤716,中央控制器获取控制命令中的被控设备标识和列表中的被控设备标识,比较控制命令中的被控设备标识和列表中的被控设备标识,若两者的被控设备标识一致,则表示被控设备标识对应的被控设备在组网内;若两者的被控设备标识不一致,则表示被控设备标识对应的被控设备未加入该组网。
步骤718,中央控制器将收集后的控制命令发送给同一被控设备标识对应的被控设备。
步骤720,被控设备根据接收的控制命令做出相应的响应,并返回响应信息给中央控制器。
步骤722,中央控制器接收被控设备的响应信息,并将响应信息返回至语音识别终端。同样地,在该步骤722中,如果存在中继器,则中央控制器将响应信息返回给中继器,由中继器转发给本地语音识别终端。
上述方法,中央控制器进行组网广播,根据本地语音识别终端、中继器和被控设备携带的校验码是否正确决定其能否加入该组网,获取加入组网的被控设备的被控设备标识,根据接收的控制消息收集同一被控设备标识对应的控制命令,并查找该被控设备标识对应的被控设备是否在该组网内,将收集的控制命令发送给已加入组网的被控设备,并接收被控设备的响应信息,返回给本地语音识别终端,通过该方法,用户可在不同的地方实现对被控设备的语音控制。
需要说明的是,中央控制器与被控设备、语音识别终端以及中继器之间建立网络通信后,传递信息或者管理信息都需要接受该组网中的通信协议。
中央控制器与被控设备的通讯协议如下:
MAC(Media Access Control,介质访问控制层)定义使用变长长度,MAC层的头部定义如下表:
control | SRC | DST | CMD | length | content | CRC |
1 | 6 | 6 | 1 | 1 | 1…32 | 1 |
其中,control代表包类型,SRC代表发送设备的源地址,DST代表目的地址,length代表内容长度,CMD是控制命令字,content代表包内容,CRC是包的校验码。
control定义:
B7 | B6 | B5 | B4 | B3 | B2 | B1 | B0 |
Field | M | S |
其中,M为1时,代表中央控制器发送给被控设备;S为1时,代表被控设备发送给中央控制器。
CMD(COMMAND,控制命令)定义:
0x1 | 组网 |
0x2 | 开关控制 |
0x3 | 调光、调色 |
0x4 | 获取状态 |
0x6 | 回送状态 |
0x8 | 组网应答 |
0x10 | 组网完成 |
该通讯协议中可以使用16进制的1表示组网,使用16进制的2表示开关控制,16进制的3表示调光或调色,16进制的4表示获取的状态,16进制的6表示回送状态,16进制的8表示组网应答,16进制的10表示组网完成。
中央控制器、中继、语音识别终端的通讯协议如下:
MACMAC(Media Access Control,介质访问控制层)定义使用变长长度,MAC层的头部定义如下表:
control | SRC | DST | CMD | SEQ | RP0 | RP1 | RP2 | RP3 | length | content | CRC |
1 | 6 | 6 | 1 | 2 | 6 | 6 | 6 | 6 | 1 | 1…32 | 1 |
其中,control代表包类型,SRC指发送设备的源地址,DST表示目的地址,RP0、RP1、RP2、RP3代表中继了这个包的中继器地址,length代表内容长度,CMD是控制命令字,SEQ代表发送端的序列号,content代表包内容,CRC表示包的较验码。
control定义
B7 | B6 | B5 | B4 | B3 | B2 | B1 | B0 |
Field | M | S |
其中,M为1时,代表是中央控制器发送出的包;S为1时,代表是语音识别终端发送出来的包。
CMD定义:
0x1 | 组网 |
0x2 | 语音控制 |
该协议中可以使用16进制的1表示组网,使用16进制的2表示语音控制。
在一个实施例中,中央控制器发送组网广播数据包,以完成与语音识别终端、中继器以及被控设备的组网。语音识别终端接收用户的语音控制命令,将其转换为控制消息,并将包含该控制消息的数据包发送给中继器,中继器接受该数据包,复制该数据包并转发给中央控制器。中央控制器接收该数据包,把数据包中的十六进制数所表示的控制命令发送给对应的被控设备,并预留100ms等待被控设备返回响应信息。中央控制器与加入该组网中的本地语音识别终端、中继器和被控设备都需要接受该组网中的通讯协议,在该自定义网络内进行通信。
应该理解的是,虽然图1-7的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图1-7中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图8所示,提供了一种语音控制装置,包括:接收模块802、收集模块804、发送模块806和返回模块808,其中:
接收模块802,用于接收语音识别终端发送的控制信息。
收集模块804,用于识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令。
发送模块806,用于将收集后的控制命令发送给所述同一被控设备标识对应的被控设备。
返回模块808,用于接收所述被控设备的响应信息,并将所述响应信息返回至所述语音识别终端。
该语音控制装置,通过接收模块接收语音识别终端的控制信息,收集模块收集该控制信息中相同被控设备标识的控制命令,并利用发送模块把收集的控制命令发送给该被控设备标识对应的被控设备,实现了用户在不同的地方通过语音命令控制家居设备。
在一个实施例中,该语音控制装置还包括:组网模块。组网模块用于发送组网广播,接受语音识别终端和被控设备加入组网的请求后获取被控设备对应的被控设备标识,并存储在预先设置的列表中。中央控制器进行组网广播,可以与加入该网络中的本地语音识别终端、中继器以及被控设备共同组成一个私人网络,实现在该组网中的信息传输。
在一个实施例中,接收模块802还用于接收中继器发送的控制消息。中央控制器与本地语音识别终端距离较远时,本地语音识别终端将控制消息发送给中继器,由中继器转发给中央控制器。该装置通过中继器实现转发功能,解决了由于中央控制器和本地语音识别终端距离较远,两者通信功能受阻的问题。
在一个实施例中,收集模块804还用于识别控制信息中控制命令所对应的被控设备标识;比较各控制命令所对应的被控设备标识;收集具有同一被控设备标识的控制命令。该收集模块收集同一被控设备的控制命令,可以一次性将这些控制命令发送给该被控设备标识对应的被控设备,减少中央控制器的发送的次数。
在一个实施例中,该语音控制装置还包括查找模块。查找模块用于获取控制命令中的被控设备标识和列表中的被控设备标识;比较控制命令中的被控设备标识和列表中的被控设备标识;若两者的被控设备标识一致,则表示被控设备标识对应的被控设备在组网内;若两者的被控设备标识不一致,则表示被控设备标识对应的被控设备未加入所述组网。通过查找控制命令中的被控设备标识是否存在列表中,可以快速地查找到该控制命令中的被控设备标识对应的被控设备是否加入组网,避免中央控制器出现发送异常的情况。
在一个实施例中,如图9所示,该语音控制装置包括:转换模块902,发送模块904,接收响应模块906。
转换模块902,用于接收语音控制命令,将语音控制命令转换为可识别文本。
发送模块904,用于将可识别文本封装为控制信息,将控制信息发送至中央控制器,该控制信息用于指示中央控制器收集控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给同一被控设备标识对应的被控设备。
接收响应模块906,用于接收中央控制器返回的被控设备的响应信息。
上述装置中,本地语音识别终端接收用户的语音控制命令,将该语音控制命令转换为控制信息发送给中央控制器,并指示中央控制器完成一系列控制操作,最后接收中央控制器返回的被控设备的响应信息,用户不需要动手操作,就可以在不同的地方直接发送语音实现对家居设备的控制。
关于语音控制装置的具体限定可以参见上文中对于语音控制方法的限定,在此不再赘述。上述语音控制装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种语音控制方法。
本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:接收语音识别终端发送的控制信息;识别该控制信息,收集该控制信息中同一被控设备标识的控制命令;将收集后的控制命令发送给同一被控设备标识对应的被控设备;接收被控设备的响应信息,并将该响应信息返回至语音识别终端。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:接收语音控制命令,将语音控制命令转换为可识别文本;将该可识别文本封装为控制信息,将该控制信息发送至中央控制器,该控制信息用于指示中央控制器收集控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给同一被控设备标识对应的被控设备;接收中央控制器返回的被控设备的响应信息。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:接收语音识别终端发送的控制信息;识别该控制信息,收集该控制信息中同一被控设备标识的控制命令;将收集后的控制命令发送给同一被控设备标识对应的被控设备;接收被控设备的响应信息,并将该响应信息返回至语音识别终端。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:接收语音控制命令,将语音控制命令转换为可识别文本;将该可识别文本封装为控制信息,将该控制信息发送至中央控制器,该控制信息用于指示中央控制器收集控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给同一被控设备标识对应的被控设备;接收中央控制器返回的被控设备的响应信息。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种语音控制方法,所述方法包括:
接收语音识别终端发送的控制信息;
识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令;
将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
接收所述被控设备的响应信息,并将所述响应信息返回至所述语音识别终端。
2.根据权利要求1所述的方法,其特征在于,所述接收语音识别终端发送的控制消息的步骤之前,还包括:
发送组网广播;
接受语音识别终端和被控设备加入组网的请求;
获取所述被控设备对应的被控设备标识;
存储所述的被控设备标识在预先设置的列表中。
3.根据权利要求1所述的方法,其特征在于,所述识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令,包括:
识别所述控制信息中控制命令所对应的被控设备标识;
比较各控制命令所对应的被控设备标识;
收集具有同一被控设备标识的控制命令。
4.根据权利要求1所述的方法,其特征在于,所述将收集后的控制命令发送给所述同一被控设备标识对应的被控设备的步骤之前,还包括:
获取所述控制命令中的被控设备标识和列表中的被控设备标识;
比较所述控制命令中的被控设备标识和所述列表中的被控设备标识;
若两者的被控设备标识一致,则表示所述被控设备标识对应的被控设备在组网内;
若两者的被控设备标识不一致,则表示所述被控设备标识对应的被控设备未加入所述组网。
5.一种语音控制方法,所述方法包括:
接收语音控制命令,将所述语音控制命令转换为可识别文本;
将所述可识别文本封装为控制信息,将所述控制信息发送至中央控制器,所述控制信息用于指示所述中央控制器收集所述控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
接收所述中央控制器返回的被控设备的响应信息。
6.根据权利要求1至5任意一项所述的方法,其特征在于,所述方法还包括:
通过第一通信单元接收语音识别终端发送的控制信息,通过第二通信单元将收集后的控制命令发送给所述同一被控设备标识对应的被控设备,所述第一通信单元和所述第二通信单元处于同一中央控制器中,所述第一通信单元和所述第二通信单元分别使用不同的频点工作。
7.一种语音控制装置,其特征在于,所述装置包括:
接收模块,用于接收语音识别终端发送的控制信息;
收集模块,用于识别所述控制信息,收集所述控制信息中同一被控设备标识的控制命令;
发送模块,用于将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
返回模块,用于接收所述被控设备的响应信息,并将所述响应信息返回至所述语音识别终端。
8.一种语音控制装置,其特征在于,所述装置包括:
转换模块,用于接收语音控制命令,将所述语音控制命令转换为可识别文本;
发送模块,用于将所述可识别文本封装为控制信息,将所述控制信息发送至中央控制器,所述控制信息用于指示所述中央控制器收集所述控制信息中同一被控设备标识的控制命令,以及将收集后的控制命令发送给所述同一被控设备标识对应的被控设备;
接收响应模块,用于接收所述中央控制器返回的被控设备的响应信息。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811063302.8A CN109065048A (zh) | 2018-09-12 | 2018-09-12 | 语音控制方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811063302.8A CN109065048A (zh) | 2018-09-12 | 2018-09-12 | 语音控制方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109065048A true CN109065048A (zh) | 2018-12-21 |
Family
ID=64760377
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811063302.8A Pending CN109065048A (zh) | 2018-09-12 | 2018-09-12 | 语音控制方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109065048A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111477227A (zh) * | 2020-04-07 | 2020-07-31 | 四川虹美智能科技有限公司 | 语音智能家电的语音交互方法及系统、语音智能家电 |
CN115914453A (zh) * | 2021-09-30 | 2023-04-04 | 华为技术有限公司 | 一种操作应用程序的方法、终端及服务器 |
Citations (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002132292A (ja) * | 2000-10-26 | 2002-05-09 | Daisuke Murakami | 音声によるホームオートメーションシステム |
US20100332235A1 (en) * | 2009-06-29 | 2010-12-30 | Abraham Ben David | Intelligent home automation |
CN102548036A (zh) * | 2012-02-28 | 2012-07-04 | 广州广大通电子科技有限公司 | 基于tdma的无线传感器网络星形自组网方式 |
CN102811106A (zh) * | 2011-06-02 | 2012-12-05 | 国民技术股份有限公司 | 一种通信装置及方法 |
CN104092769A (zh) * | 2014-07-22 | 2014-10-08 | Tcl通讯(宁波)有限公司 | 一种WiFi的点对点数据传输方法及其系统 |
CN104123940A (zh) * | 2014-08-06 | 2014-10-29 | 苏州英纳索智能科技有限公司 | 一种基于智能家居系统的语音控制系统及方法 |
CN105511287A (zh) * | 2016-01-27 | 2016-04-20 | 珠海格力电器股份有限公司 | 智能家电控制方法和装置及系统 |
CN105553799A (zh) * | 2016-02-29 | 2016-05-04 | 深圳市广佳乐新智能科技有限公司 | 一种基于语音识别的智能家居系统 |
US20160378080A1 (en) * | 2015-06-25 | 2016-12-29 | Intel Corporation | Technologies for conversational interfaces for system control |
CN106448658A (zh) * | 2016-11-17 | 2017-02-22 | 海信集团有限公司 | 智能家居设备的语音控制方法及智能家居网关 |
CN106601248A (zh) * | 2017-01-20 | 2017-04-26 | 浙江小尤鱼智能技术有限公司 | 一种基于分布式语音控制的智能家居系统 |
CN106601247A (zh) * | 2016-12-30 | 2017-04-26 | 歌尔股份有限公司 | 一种用于智能家居的语音识别系统及智能家居 |
CN106683674A (zh) * | 2017-01-16 | 2017-05-17 | 西安电子科技大学 | 利用语音控制智能家居的系统及方法 |
CN106707788A (zh) * | 2017-03-09 | 2017-05-24 | 上海电器科学研究院 | 一种智能家居语音控制识别系统与方法 |
CN106789484A (zh) * | 2017-02-17 | 2017-05-31 | 张德明 | 一种基于网络的分布式麦克风智能家居系统 |
CN107276864A (zh) * | 2017-07-25 | 2017-10-20 | 广东美的制冷设备有限公司 | 智能语音设备控制家电的方法、装置及系统 |
CN107566234A (zh) * | 2017-10-20 | 2018-01-09 | 成都六零加信息技术有限公司 | 智能家居控制系统及通信组网方法 |
CN107769399A (zh) * | 2017-11-14 | 2018-03-06 | 维沃移动通信有限公司 | 一种无线充电方法及无线充电设备 |
CN107886952A (zh) * | 2017-11-09 | 2018-04-06 | 珠海格力电器股份有限公司 | 一种语音控制智能家电的方法、装置、系统和电子设备 |
CN108091331A (zh) * | 2017-12-27 | 2018-05-29 | 北京镁客创新工场科技有限公司 | 一种基于语音控制的智能家居系统及其控制方法 |
CN108320749A (zh) * | 2018-03-14 | 2018-07-24 | 百度在线网络技术(北京)有限公司 | 远场语音控制设备和远场语音控制系统 |
-
2018
- 2018-09-12 CN CN201811063302.8A patent/CN109065048A/zh active Pending
Patent Citations (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002132292A (ja) * | 2000-10-26 | 2002-05-09 | Daisuke Murakami | 音声によるホームオートメーションシステム |
US20100332235A1 (en) * | 2009-06-29 | 2010-12-30 | Abraham Ben David | Intelligent home automation |
CN102811106A (zh) * | 2011-06-02 | 2012-12-05 | 国民技术股份有限公司 | 一种通信装置及方法 |
CN102548036A (zh) * | 2012-02-28 | 2012-07-04 | 广州广大通电子科技有限公司 | 基于tdma的无线传感器网络星形自组网方式 |
CN104092769A (zh) * | 2014-07-22 | 2014-10-08 | Tcl通讯(宁波)有限公司 | 一种WiFi的点对点数据传输方法及其系统 |
CN104123940A (zh) * | 2014-08-06 | 2014-10-29 | 苏州英纳索智能科技有限公司 | 一种基于智能家居系统的语音控制系统及方法 |
US20160378080A1 (en) * | 2015-06-25 | 2016-12-29 | Intel Corporation | Technologies for conversational interfaces for system control |
CN105511287A (zh) * | 2016-01-27 | 2016-04-20 | 珠海格力电器股份有限公司 | 智能家电控制方法和装置及系统 |
CN105553799A (zh) * | 2016-02-29 | 2016-05-04 | 深圳市广佳乐新智能科技有限公司 | 一种基于语音识别的智能家居系统 |
CN106448658A (zh) * | 2016-11-17 | 2017-02-22 | 海信集团有限公司 | 智能家居设备的语音控制方法及智能家居网关 |
CN106601247A (zh) * | 2016-12-30 | 2017-04-26 | 歌尔股份有限公司 | 一种用于智能家居的语音识别系统及智能家居 |
CN106683674A (zh) * | 2017-01-16 | 2017-05-17 | 西安电子科技大学 | 利用语音控制智能家居的系统及方法 |
CN106601248A (zh) * | 2017-01-20 | 2017-04-26 | 浙江小尤鱼智能技术有限公司 | 一种基于分布式语音控制的智能家居系统 |
CN106789484A (zh) * | 2017-02-17 | 2017-05-31 | 张德明 | 一种基于网络的分布式麦克风智能家居系统 |
CN106707788A (zh) * | 2017-03-09 | 2017-05-24 | 上海电器科学研究院 | 一种智能家居语音控制识别系统与方法 |
CN107276864A (zh) * | 2017-07-25 | 2017-10-20 | 广东美的制冷设备有限公司 | 智能语音设备控制家电的方法、装置及系统 |
CN107566234A (zh) * | 2017-10-20 | 2018-01-09 | 成都六零加信息技术有限公司 | 智能家居控制系统及通信组网方法 |
CN107886952A (zh) * | 2017-11-09 | 2018-04-06 | 珠海格力电器股份有限公司 | 一种语音控制智能家电的方法、装置、系统和电子设备 |
CN107769399A (zh) * | 2017-11-14 | 2018-03-06 | 维沃移动通信有限公司 | 一种无线充电方法及无线充电设备 |
CN108091331A (zh) * | 2017-12-27 | 2018-05-29 | 北京镁客创新工场科技有限公司 | 一种基于语音控制的智能家居系统及其控制方法 |
CN108320749A (zh) * | 2018-03-14 | 2018-07-24 | 百度在线网络技术(北京)有限公司 | 远场语音控制设备和远场语音控制系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111477227A (zh) * | 2020-04-07 | 2020-07-31 | 四川虹美智能科技有限公司 | 语音智能家电的语音交互方法及系统、语音智能家电 |
CN115914453A (zh) * | 2021-09-30 | 2023-04-04 | 华为技术有限公司 | 一种操作应用程序的方法、终端及服务器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11428430B2 (en) | Air conditioning system having multiple outdoor units and multiple indoor units, method and device for operating air conditioning system | |
CN111225429B (zh) | 路由器的ssid获取方法、装置、设备和系统 | |
CN111865736B (zh) | 一种设备控制方法及装置 | |
CN103023773B (zh) | 多拓扑网络中转发报文的方法、装置和系统 | |
CN102299833A (zh) | 一种智能家居远程控制系统及其控制方法 | |
CN106416139B (zh) | 中继器以及空调系统 | |
CN110932953A (zh) | 智能家居控制方法、装置、计算机设备及存储介质 | |
CN107632526A (zh) | 一种控制装置、方法、存储介质及设备 | |
CN105630495A (zh) | 烧录芯片方法及系统 | |
CN109065048A (zh) | 语音控制方法及装置 | |
CN108592302A (zh) | 数据的发送方法,装置,多联机系统,存储介质 | |
CN111913397B (zh) | 设备控制方法、装置、存储介质及电子装置 | |
CN106094550A (zh) | 智能家居设备控制系统及方法 | |
CN105916015A (zh) | 一种车载多设备共享音视频数据的方法、装置及系统 | |
CN108881064B (zh) | 报文信息获取方法和发送方法 | |
CN105045110B (zh) | 一种家电服务调用请求转发方法及装置 | |
CN113132958B (zh) | 融合组网方法、设备、系统及计算机可读存储介质 | |
CN110061898B (zh) | 一种报文转发方法及装置 | |
CN107659933A (zh) | 一种无线设备双向配对连接方法、无线设备及存储介质 | |
CN112995056A (zh) | 一种流量调度方法、电子设备及存储介质 | |
CN113838463B (zh) | 信息传输方法、装置、电子设备及存储介质 | |
CN107926065B (zh) | 一种设备对设备d2d的数据传输方法、装置及系统 | |
CN106028303A (zh) | 一种智能设备的发现方法及装置 | |
CN112152885B (zh) | 设备控制方法、装置、家电设备和遥控设备 | |
CN108105949B (zh) | 多联机空调系统及其控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181221 |