CN105679315A - 一种语音控制且可语音编程的控制方法和系统 - Google Patents

一种语音控制且可语音编程的控制方法和系统 Download PDF

Info

Publication number
CN105679315A
CN105679315A CN201610185851.7A CN201610185851A CN105679315A CN 105679315 A CN105679315 A CN 105679315A CN 201610185851 A CN201610185851 A CN 201610185851A CN 105679315 A CN105679315 A CN 105679315A
Authority
CN
China
Prior art keywords
voice
voice command
user
command
control method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201610185851.7A
Other languages
English (en)
Inventor
谢奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201610185851.7A priority Critical patent/CN105679315A/zh
Publication of CN105679315A publication Critical patent/CN105679315A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063—Training
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G05B19/41835—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by programme execution
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063—Training
    • G10L2015/0638—Interactive procedures
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • Artificial Intelligence (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种语音控制且可语音编程的控制方法和系统，该方法具体为：选取部分特定关键字作为系统保留语音命令，用户需使用指定方式提醒系统接下来的语音为控制命令，系统分析用户的语音命令，若数据库中存在则直接执行，若数据库中不存在，则提示用户进行演示，用户演示结束后系统将该语音命令以及对应的操作存入数据库供以后使用。本发明提供了一种新的语音控制方法，解放了双手，并且语音命令可以自由简便的编程，减少了前期设计语音命令的工作量，降低了后期进行调整的难度，扩大了语音控制的适用用户范围。

Description

一种语音控制且可语音编程的控制方法和系统
技术领域
本发明涉及语音控制领域，特别涉及一种语音控制且可语音编程的控制方法和系统。此外，该语音控制且可语音编程的控制方法特别适用于对现有控制系统的升级改造。
背景技术
语音控制，通过对人类语音进行识别分析，将语音转化为可识别的控制命令，直接对被控对象进行操作，解放了人类的双手，也方便了特殊的人群。但此类系统都需要对用户的发音、语速等进行学习分析后才能较好的加以使用，若用户发音不准或语速有变化很容易出现控制失灵的现象。
目前各类电子产品中，部分带有语音控制功能，可以通过语音对其进行操作，典型的例子为iPhone。该类产品可以有效的对语音进行处理并及时做出反应，但也无法对数据库中不存在的命令进行学习，只能通过开发人员在后台进行升级改进，无法由用户自定义。
通过可控开关装置，诸如断路器、电动阀门、晶体管等设备对资源或信号等通断进行自动化控制，可部分解决开关装置可能导致生命危险、开关装置距离较远、开关装置较分散、开关装置自动工作等问题，可控开关装置目前主要应用于管道、电力、信号等方面，其中较为常见的为电力控制，如较为热门的智能家居系统，即为一种可控开关装置控制系统，部分系统提供了语音控制功能，但其无法便利的实现语音命令的自由编程，只能按照系统设定好的控制方式操作，若需后期调整非常不便。
发明内容
因此，本发明提供一种语音控制且可语音编程的控制方法和系统，其目的在于：解决现有语音控制方式仅能使用系统支持的固定语音命令的问题，解决语音命令无法便利编程修改的问题，解决语音命令使用前必须对用户声音进行采样分析的问题，解决用户使用语音控制必须使用特定语言、特定语速、特定语调的问题。
本发明可用于对已完成的语音控制系统进行升级改造，也可融合嵌入其它尚未完成的控制系统内部，作为一种全新的控制方法。
本发明中的一种语音控制且可语音编程的控制方法和系统步骤：选取部分特定关键字作为系统保留语音命令，用户需使用指定方式提醒系统接下来的语音为控制命令，系统分析用户的语音命令，若数据库中存在则直接执行，若数据库中不存在，则提示用户进行演示，用户演示结束后系统将该语音命令以及对应的操作存入数据库供以后使用，其流程如图1所示。
当用户语音命令不存在时，系统应通过指定方式提示用户该命令不存在，需要演示，用户需在接下来的步骤中对系统进行一次操作演示，即将该新语音命令需要达到的具体操作完整执行一次，系统将会追踪用户的每一个步骤并记录，演示完毕后，用户需通过指定方式通知系统演示结束。
该方法中，要求系统拥有捕捉用户非语音操作的功能，用于给用户语音编程时作为输入量。同时，系统应使用特定方式对用户语音命令进行反馈，通知用户其语音命令已识别并执行、命令不存在、命令保存完毕、命令被删除等。更优的，反馈方式应为语音告知，模拟并实现人和机器的语音交流。
更优的，该方法中系统保留的语音命令应至少包括四个：第一个用于提醒系统注意用户接下来的语音为控制命令，需要转换并执行；第二个用于修改语音命令，即对已存在的语音命令转换后的具体操作进行修改；第三个用于删除语音命令，即对已存在的语音命令进行删除；第四个用于提醒系统保存语音命令，即在用户向系统演示完毕后通知系统演示完毕，保存语音命令。
更优的，该方法中，除系统保留语音命令需被提前设置不能语音编程外，其它任何语音命令都可以语音编程执行增加、修改、删除操作，系统保留语音命令可以通过特定方式进行编辑修改，但修改后的内容必须要能实现系统的基本功能，即唤醒系统、修改语音命令、删除语音命令、保存语音命令。
更优的，该方法中在用户无操作时应休眠，不需一直拾取并分析语音，只有在特定条件触发后，如系统保留语音命令被监测到，才开始分析用户语音，一是为了防止误操作，二是为了节约资源。
更优的，该方法应使用多个拾音器捕捉用户声音，一是为了降噪，二是为了扩大拾音范围。
更优的，该方法中应为非特定语音识别，在使用之前不需对用户声音进行前期采样、提取特征信号等工作，可直接使用，除保留语音命令外用户编程时使用的语音命令无需辨别为正确文字，该方法只记录其对应音译文字，只需保证该语音命令下次能从数据库中检索出来即可。
采用本发明后取得的技术效果为：利用可语音编程设计减少了语音操作方式前期设置语言命令的工作量；利用可语音编程设计方便了用户后期对语音命令进行修改和扩充；利用非特定语音识别和可语音编程设计扩大了用户适用范围，降低了语音系统对用户语种、语速、语调的限制。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明及其逻辑原理、物理结构和优点将会变得更加明显。在全部附图中相同的标记指示相同的部分。并未按照比例绘制附图，重点在于示出本发明的主旨。
图1是本发明中一种语音控制且可语音编程的控制方法和系统的逻辑流程示意图；
图2是本发明中一个实施例简化结构图。
标号说明：1-非语音控制信号输入，2-控制器，3-控制信号输出，4-语音合成模块，5-非特定语音识别模块，6-拾音器。
具体实施方式
以下将对本发明的一个实施例进行描述。需要理解的是，本发明并不局限于下述特定实施方式，其中未尽详细描述的设备和结构应该理解为用本领域中的普通方式予以实施；任何熟悉本领域的技术人员，在不脱离本发明技术方案范围情况下，都可利用上述揭示的方法和技术内容对本发明技术方案做出许多可能的变动和修饰，或修改为等同变化的等效实施例，这并不影响本发明的实质内容。因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰，均仍属于本发明技术方案保护的范围内。
本实施例中实现了一种语音控制且可语音编程的智能家居系统，其结构如图2所示，主要包括：
1，光耦隔离输入模块，其使用PCF8575芯片外加光耦芯片构成，用于对非语音控制信号进行隔离，防止对控制器造成损坏，其中PCF8575芯片与处理器使用IIC总线连接；
2，基于ARMCortexA7的BCM2836处理器最小核心板模块，该模块用于捕获用户的非语音控制输入，拾取用户语音命令，转换用户语音命令为对应可执行的操作命令，向被控对象发送控制命令；
3，光耦隔离输出模块，其使用PCF8575芯片外加光耦芯片构成，用于对被控对象进行隔离，防止对控制器造成损坏，其中PCF8575芯片与处理器使用IIC总线连接；
4，SYN6288TTS语音合成模块，用于产生语音对用户语音命令进行反馈，通过串口连接到控制器；
5，LD3320ASR非特定语音识别模块，用于检测系统保留语音命令，并及时唤醒系统，通过SPI总线接口连接到控制器；
6，拾音器阵列，采用4个拾音器分别朝向四个方向，更好的捕获用户语音命令。
本实施例中，一个家用墙壁开关面板连接至控制器，用于产生非语音控制信号0，一个LED灯连接至控制器，用于接收语音命令转换后的控制信号1。四个系统保留语音命令存储在LD3320ASR非特定语音识别模块中：“计算机”、“删除”、“修改”、“保存”，分别用于唤醒语音控制系统，删除已存在的语音命令，修改已存在的语音命令，保存用户演示内容。控制器中除系统保留语音命令外，无其他语音命令。
其工作流程如下：1，用户说出关键字“计算机”；2，LD3320ASR模块检测到关键字，唤醒控制器；3，控制器通过SYN6288TTS播放声音“在”；4，用户说出语音命令“开灯”；5，控制器通过拾音器阵列捕获到用户语音命令，并检索数据库；6，控制器通过SYN6288TTS播放声音“该命令不存在，是否保存为新命令”；7，用户说出“保存”；8，LD3320ASR模块检测到关键字并通知控制器，控制器通过SYN6288TTS播放声音“请演示该语音命令对应的操作内容”；9，用户按下墙壁开关面板开关，产生一个非语音控制信号0；10，控制器捕捉到该操作并保存，同时向LED灯发出转换后的控制信号1；11，完成演示后，用户说出“保存”；12，LD3320ASR模块检测到关键字并通知控制器，控制器通过SYN6288TTS播放声音“保存完毕”，并将该语音命令操作内容存入数据库。

Claims (6)

1.一种语音控制且可语音编程的控制方法和系统，其特征在于，使用语音命令对被控对象进行控制，且语音命令不固定，可通过后期从用户操作演示中学习并保存新的语音命令，同时可对已存在的语音命令进行修改、删除。
2.如权利要求1所述的语音控制且可语音编程的控制方法和系统，其特征在于，该方法为非特定语音识别，不需对用户声音进行前期采样、提取特征信号等工作，可直接使用。
3.如权利要求1所述的语音控制且可语音编程的控制方法和系统，其特征在于，除保留语音命令外，该方法可以对已存在的语音命令通过语音命令进行修改、删除。
4.如权利要求1所述的语音控制且可语音编程的控制方法和系统，其特征在于，该方法使用播放合成语音的方式向用户进行反馈。
5.如权利要求1所述的语音控制且可语音编程的控制方法和系统，其特征在于，该方法在用户无操作时应休眠，只有在特定条件触发后，才开始拾取分析用户语音。
6.如权利要求1所述的语音控制且可语音编程的控制方法和系统，其特征在于，该方法使用多个拾音器捕获用户语音。
CN201610185851.7A 2016-03-22 2016-03-22 一种语音控制且可语音编程的控制方法和系统 Withdrawn CN105679315A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610185851.7A CN105679315A (zh) 2016-03-22 2016-03-22 一种语音控制且可语音编程的控制方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610185851.7A CN105679315A (zh) 2016-03-22 2016-03-22 一种语音控制且可语音编程的控制方法和系统

Publications (1)

Publication Number Publication Date
CN105679315A true CN105679315A (zh) 2016-06-15

Family

ID=56224323

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610185851.7A Withdrawn CN105679315A (zh) 2016-03-22 2016-03-22 一种语音控制且可语音编程的控制方法和系统

Country Status (1)

Country Link
CN (1) CN105679315A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106363637A (zh) * 2016-10-12 2017-02-01 华南理工大学 一种机器人快速示教方法及装置
CN108376544A (zh) * 2018-03-27 2018-08-07 京东方科技集团股份有限公司 一种信息处理方法、装置、设备及计算机可读存储介质
CN108406811A (zh) * 2018-03-19 2018-08-17 重庆鲁班机器人技术研究院有限公司 机器人编程装置、系统及方法
CN109166577A (zh) * 2018-08-10 2019-01-08 珠海格力电器股份有限公司 一种语义场景的确定方法、系统及空调器
CN109754800A (zh) * 2018-12-28 2019-05-14 上海龙旗科技股份有限公司 基于声波识别用户与设备身份安全的方法及设备
CN110788860A (zh) * 2019-11-11 2020-02-14 路邦科技授权有限公司 一种基于语音控制的仿生机器人动作控制方法
CN111128136A (zh) * 2019-11-28 2020-05-08 星络智能科技有限公司 一种自定义语音控制方法、计算机设备及可读存储介质
CN112534799A (zh) * 2018-08-08 2021-03-19 三星电子株式会社 基于语音执行功能的方法和支持该方法的电子设备
CN113160807A (zh) * 2020-01-22 2021-07-23 广州汽车集团股份有限公司 一种语料库更新方法及其系统、语音控制设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1466125A (zh) * 2002-06-25 2004-01-07 黄文浩 语音控制方法
CN101557432A (zh) * 2008-04-08 2009-10-14 Lg电子株式会社 移动终端及其菜单控制方法
CN102572569A (zh) * 2012-02-24 2012-07-11 北京原力创新科技有限公司 机顶盒、互联网电视及智能控制信号的处理方法
CN103745722A (zh) * 2014-02-10 2014-04-23 上海金牌软件开发有限公司 一种语音交互智能家居系统及语音交互方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1466125A (zh) * 2002-06-25 2004-01-07 黄文浩 语音控制方法
CN101557432A (zh) * 2008-04-08 2009-10-14 Lg电子株式会社 移动终端及其菜单控制方法
CN102572569A (zh) * 2012-02-24 2012-07-11 北京原力创新科技有限公司 机顶盒、互联网电视及智能控制信号的处理方法
CN103745722A (zh) * 2014-02-10 2014-04-23 上海金牌软件开发有限公司 一种语音交互智能家居系统及语音交互方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106363637A (zh) * 2016-10-12 2017-02-01 华南理工大学 一种机器人快速示教方法及装置
CN106363637B (zh) * 2016-10-12 2018-10-30 华南理工大学 一种机器人快速示教方法及装置
CN108406811A (zh) * 2018-03-19 2018-08-17 重庆鲁班机器人技术研究院有限公司 机器人编程装置、系统及方法
CN108376544A (zh) * 2018-03-27 2018-08-07 京东方科技集团股份有限公司 一种信息处理方法、装置、设备及计算机可读存储介质
CN108376544B (zh) * 2018-03-27 2021-10-15 京东方科技集团股份有限公司 一种信息处理方法、装置、设备及计算机可读存储介质
CN112534799A (zh) * 2018-08-08 2021-03-19 三星电子株式会社 基于语音执行功能的方法和支持该方法的电子设备
US11615788B2 (en) 2018-08-08 2023-03-28 Samsung Electronics Co., Ltd. Method for executing function based on voice and electronic device supporting the same
CN109166577A (zh) * 2018-08-10 2019-01-08 珠海格力电器股份有限公司 一种语义场景的确定方法、系统及空调器
CN109754800A (zh) * 2018-12-28 2019-05-14 上海龙旗科技股份有限公司 基于声波识别用户与设备身份安全的方法及设备
CN110788860A (zh) * 2019-11-11 2020-02-14 路邦科技授权有限公司 一种基于语音控制的仿生机器人动作控制方法
CN111128136A (zh) * 2019-11-28 2020-05-08 星络智能科技有限公司 一种自定义语音控制方法、计算机设备及可读存储介质
CN113160807A (zh) * 2020-01-22 2021-07-23 广州汽车集团股份有限公司 一种语料库更新方法及其系统、语音控制设备

Similar Documents

Publication Publication Date Title
CN105679315A (zh) 一种语音控制且可语音编程的控制方法和系统
CN106997762A (zh) 家用电器的语音控制方法以及装置
CN107908116B (zh) 语音控制方法、智能家居系统、存储介质和计算机设备
CN109688036B (zh) 一种智能家电的控制方法、装置、智能家电和存储介质
CN103093755B (zh) 基于终端及互联网语音交互的网络家电控制方法及系统
US11830482B2 (en) Method and apparatus for speech interaction, and computer storage medium
KR100438838B1 (ko) 대화 포커스 추적 기능을 가진 음성명령 해석장치 및 방법
CN107146612A (zh) 语音引导方法、装置、智能设备及服务器
CN108170034B (zh) 智能设备控制方法、装置、计算机设备和储存介质
CN102855872A (zh) 基于终端及互联网语音交互的家电控制方法及系统
WO2020253064A1 (zh) 语音的识别方法及装置、计算机设备、存储介质
CN101383150B (zh) 语音软开关的控制方法及其在地理信息系统中的应用
CN112735418B (zh) 一种语音交互的处理方法、装置、终端及存储介质
Peng et al. Voice recognition by Google Home and Raspberry Pi for smart socket control
US20200265843A1 (en) Speech broadcast method, device and terminal
CN111199733A (zh) 多级识别语音唤醒方法及装置、计算机存储介质及设备
AU2017276360B2 (en) A system for the automated semantic analysis processing of query strings
CN106439967B (zh) 一种提高油烟机语音识别率的方法及系统
CN110431547A (zh) 电子设备和控制方法
CN109360569A (zh) 一种家庭语音控制系统及其方法
CN104598192A (zh) 信息处理方法及电子设备
CN111581919B (zh) 一种任务处理方法及装置
CN116566760B (zh) 智能家居设备控制方法、装置、存储介质及电子设备
CN112965603A (zh) 一种人机交互的实现方法和系统
CN105097001A (zh) 音频播放方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20160615