CN114495934A - 一种语音指令响应状态的提示方法及显示设备 - Google Patents

一种语音指令响应状态的提示方法及显示设备 Download PDF

Info

Publication number
CN114495934A
CN114495934A CN202210186905.7A CN202210186905A CN114495934A CN 114495934 A CN114495934 A CN 114495934A CN 202210186905 A CN202210186905 A CN 202210186905A CN 114495934 A CN114495934 A CN 114495934A
Authority
CN
China
Prior art keywords
state
voice
screen
brightness
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210186905.7A
Other languages
English (en)
Inventor
樊杰
邵肖明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202210186905.7A priority Critical patent/CN114495934A/zh
Publication of CN114495934A publication Critical patent/CN114495934A/zh
Priority to PCT/CN2022/135427 priority patent/WO2023160087A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • G08B21/24Reminder alarms, e.g. anti-loss alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G08B5/36Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources
    • G08B5/38Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources using flashing light
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Electromagnetism (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种语音指令响应状态的提示方法及显示设备,所述方法包括:接收到语音指令,监控语音指令的响应状态;控制所述指示灯组件显示与所述响应状态匹配的灯光效果;其中,所述指示灯组件设置于显示设备上,用于指示所述响应状态,所述指示灯组件至少包括一个指示灯。由于指示灯组件与显示器是独立控制的,在显示设备待机、显示器熄屏时不会影响指示灯组件的状态提示,并且由于灯光具有一定的辐散特性,用户不必完全正对屏幕并聚焦于界面中的某一位置,甚至用余光就可观察到指示灯的灯光效果,即可获知语音响应状态。

Description

一种语音指令响应状态的提示方法及显示设备
技术领域
本发明涉及显示设备技术领域,尤其涉及一种语音指令响应状态的提示方法及显示设备。
背景技术
显示设备可配置语音功能,在采集用户输入的语音指令后,对语音指令作出响应,并执行与用户语音意图匹配的动作。在一些应用场景中,用户可按压遥控器的语音键来输入语音指令,语音指令输入完毕时松开按键;对于远场语音功能,显示设备配置有远场声音采集器,用户可利用关键词唤醒语音应用,例如用户说出“嗨,XX”,若XX与约定的关键词匹配,则系统唤醒语音应用,语音应用立即作出应答,如“有什么可以帮您?”,语音应答之后,即可对后续接收到的语音指令进行识别和动作响应,远场语音功能可实现在一定距离内免遥控器操作的语音控制。
在语音交互场景中,显示设备需要向用户同步提示当前语音指令的响应状态,响应状态包括聆听、思考、应答、超时、完成等状态类别,以便用户了解语音指令是否正确处理以及处理进度。通过用户界面对接收的语音指令进行响应状态提示时,要求用户看向屏幕并将目光聚焦于界面内的状态提示信息,若用户没有正对屏幕,或者语音指令是在显示设备待机熄屏时输入的,都会导致用户无法获知语音指令的响应状态。
发明内容
为解决上述背景技术中的问题,本发明提供一种语音指令响应状态的提示方法及显示设备,在显示设备上设置指示灯组件,利用指示灯组件的不同灯光效果,对不同语音响应状态进行提示。
第一方面提供一种显示设备,包括:
显示器,用于在屏幕内显示用户界面;
声音采集器,用于采集语音指令;
指示灯组件,用于指示语音指令的响应状态,至少包括一个指示灯;
控制器,被配置为执行:
接收到语音指令,监控语音指令的响应状态;
控制所述指示灯组件显示与所述响应状态匹配的灯光效果。
在第一方面第一种实施例中,所述控制器按照如下方式控制所述指示灯组件显示与所述响应状态匹配的灯光效果:
从状态灯效关系列表中,查询与当前响应状态对应的目标灯光效果;所述状态灯效关系列表中记录每种响应状态对应的指示灯组件的灯光效果,所述灯光效果用于规定每个所述指示灯的启闭状态、灯光颜色、发光节点和发光时长;
根据所述目标灯光效果,控制所述指示灯组件中每个指示灯的发光状态。
在第一方面第二种实施例中,所述控制器还被配置为执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,控制所述显示设备保持所述熄屏状态,并控制所述指示灯组件对当前响应状态进行提示。
在第一方面第三种实施例中,所述控制器还被配置为执行:
若所述语音指令是在显示设备亮屏状态下输入的,控制所述指示灯组件对当前响应状态进行提示;
以及,控制所述显示器在用户界面中显示状态提示控件,并控制所述状态提示控件对所述当前响应状态进行同步提示。
在第一方面第四种实施例中,所述控制器还被配置为执行:
若所述语音指令是在显示设备亮屏状态下输入的,仅控制所述指示灯组件对当前响应状态进行提示,不显示所述状态提示控件。
在第一方面第五种实施例中,所述控制器还被配置执行:
查询屏幕亮度;
查询所述灯光效果预设的所述指示灯组件中被点亮的目标指示灯;
若根据所述屏幕亮度,检测到所述显示设备处于亮屏状态,将所述目标指示灯的亮度调节为所述屏幕亮度。
在第一方面第六种实施例中,所述控制器还被配置执行:
查询屏幕亮度;
查询所述灯光效果预设的所述指示灯组件中被点亮的目标指示灯;
若根据所述屏幕亮度,检测到所述显示设备处于亮屏状态,将所述目标指示灯的亮度调节为所述屏幕亮度。
在第一方面第七种实施例中,所述控制器还被配置执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,将所述灯光效果指定在所述指示灯组件中被点亮的目标指示灯的亮度调节为第二亮度;所述第二亮度是根据用户自定义设置的屏幕亮度阈值。
在第一方面第八种实施例中,所述控制器还被配置执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,将所述灯光效果指定在所述指示灯组件中被点亮的目标指示灯的亮度调节为第三亮度;所述第三亮度是显示设备出厂时已配置好的一个固定的亮度值。
第二方面提供一种语音指令响应状态的提示方法,所述方法包括:
接收到语音指令,监控语音指令的响应状态;
控制所述指示灯组件显示与所述响应状态匹配的灯光效果;
其中,所述指示灯组件设置于显示设备上,用于指示所述响应状态,所述指示灯组件至少包括一个指示灯。
第二方面的其他实施例可适应性参照前述第一方面,此处不再赘述。
本申请在显示设备机身上增添配置指示灯组件,在语音控制场景中,利用指示灯组件不同的灯光效果,来向用户提示语音指令的响应状态,例如对于聆听状态(对应于显示设备采集语音指令阶段),指示灯组件中全部指示灯发出白光;对于思考状态(对应于解析和识别语音指令阶段),指示灯组件呈现类似“跑马灯”的效果;对于完成状态(对应于响应语音指令后执行完成动作),指示灯组件呈现为灯光闪烁效果等,实现用户查看指示灯组件的灯光效果,即可快速分辨语音响应状态,由于指示灯组件与显示器是独立控制的,在显示设备待机、显示器熄屏时不会影响指示灯组件的状态提示,并且由于灯光具有一定的辐散特性,用户不必完全正对屏幕并聚焦于界面中的某一位置,甚至用余光就可观察到指示灯的灯光效果,即可获知语音响应状态。
附图说明
图1示出了一种显示设备与控制装置之间操作场景;
图2示出了一种控制装置100的硬件配置框图;
图3示出了一种显示设备200的硬件配置框图;
图4示出了一种显示设备200中软件配置图;
图5示例性示出了一种语音识别网络架构图;
图6示例性示出了远场语音场景下,用户唤醒显示设备内的语音应用的交互示意图;
图7示例性示出了唤醒语音应用时,显示设备UI提示语音指令1的响应状态为聆听状态的示意图;
图8示例性示出了唤醒语音应用时,显示设备UI提示语音指令1的响应状态为思考状态的示意图;
图9示例性示出了唤醒成功后,显示设备UI提示语音指令1的响应状态为应答状态的示意图;
图10示例性示出显示设备UI提示语音指令1的响应状态为唤醒失败状态的示意图;
图11示例性示出了显示设备UI提示语音搜索指令执行完成的示意图;
图12示例性示出了一种带有指示灯组件的显示设备的结构示意图;
图13示例性示出了另一种带有指示灯组件的显示设备的结构示意图;
图14示例性示出了在显示设熄屏场景下,指示灯组件提示语音指令A的响应状态为聆听状态的示意图;
图15示例性示出了在显示设熄屏场景下,指示灯组件提示语音指令A的响应状态为思考状态的示意图;
图16示例性示出了在显示设熄屏场景下,指示灯组件提示语音指令A的响应状态为唤醒失败状态的示意图;
图17示例性示出了在显示设熄屏场景下,指示灯组件提示语音指令A的响应状态为应答状态的示意图;
图18示例性示出了在熄屏并且成功唤醒语音应用之后,指示灯组件提示语音指令B的响应状态为聆听状态的示意图;
图19示例性示出了指示灯组件提示语音指令B的响应状态为语音识别状态的示意图;
图20示例性示出了指示灯组件提示语音指令B的响应状态为“正在启动播放”状态的示意图;
图21示例性示出了指示灯组件提示语音指令B的响应状态为起播完成状态的示意图;
图22示例性示出了显示设备UI和指示灯组件同步提示语音指令B的响应状态为“正在启动播放”状态的示意图;
图23示例性示出了指示灯组件进行状态提示的逻辑图;
图24示例性示出了背光设置页面的访问路径示意图;
图25示例性示出了背光自定义模式下的背光设置页面的示意图;
图26示例性示出了背光自适应模式下的背光设置页面的示意图;
图27示例性示出了第一种指示灯组件的状态提示控制逻辑;
图28示例性示出了第二种指示灯组件的状态提示控制逻辑;
图29示例性示出了第一种语音指令响应状态的提示方法的流程图;
图30示例性示出了第二种语音指令响应状态的提示方法的流程图;
图31示例性示出了第三种语音指令响应状态的提示方法的流程图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请实施方式提供的显示设备可以具有多种实施形式,例如,可以是电视、智能电视、激光投影设备、显示器(monitor)、电子白板(electronic bulletin board)、电子桌面(electronic table)等。图1和图2为本申请的显示设备的一种具体实施方式。
图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过智能设备300或控制装置100操作显示设备200。
在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信,及其他短距离通信方式,通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。
在一些实施例中,也可以使用智能设备300(如移动终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。
在一些实施例中,显示设备可以不使用上述的智能设备或控制设备接收指令,而是通过触摸或者手势等接收用户的控制。
在一些实施例中,显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制,例如,可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制,也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。
在一些实施例中,显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。
图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。
如图3,显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中控制器包括处理器,视频处理器,音频处理器,图形处理器,RAM,ROM,用于输入/输出的第一接口至第n接口。
显示器260包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件,用于接收源自控制器输出的图像信号,进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。
显示器260可为液晶显示器、OLED显示器、以及投影显示器,还可以为一种投影装置和投影屏幕。
通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如:通信器可以包括Wifi模块,蓝牙模块,有线以太网模块等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。
用户接口,可用于接收控制装置100(如:红外遥控器等)的控制信号。
检测器230用于采集外部环境或与外部交互的信号。例如,检测器230包括光接收器,用于采集环境光线强度的传感器(图中未示出);或者,检测器230包括图像采集器,如摄像头,可以用于采集外部环境场景、用户的属性或用户交互手势,再或者,检测器230包括声音采集器,如麦克风等,用于接收外部声音。
外部装置接口240可以包括但不限于如下:高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
调谐解调器210通过有线或无线接收方式接收广播电视信号,以及从多个无线或有线广播电视信号中解调出音视频信号,如以及EPG数据信号。
在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。
控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器260上显示UI对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中控制器包括中央处理器(Central Processing Unit,CPU),视频处理器,音频处理器,图形处理器(Graphics Processing Unit,GPU),RAM Random AccessMemory,RAM),ROM(Read-Only Memory,ROM),用于输入/输出的第一接口至第n接口,通信总线(Bus)等中的至少一种。
用户可在显示器260上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
参见图4,在一些实施例中,将系统分为四层,从上至下分别为应用程序(Applications)层(简称“应用层”),应用程序框架(Application Framework)层(简称“框架层”),安卓运行时(Android runtime)和系统库层(简称“系统运行库层”),以及内核层。
在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等;也可以是第三方开发者所开发的应用程序。在具体实施时,应用程序层中的应用程序包不限于以上举例。
框架层为应用程序提供应用编程接口(Application Programming Interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口,可在执行中访问系统中的资源和取得系统的服务。
如图4所示,本申请实施例中应用程序框架层包括管理器(Managers),内容提供者(Content Provider)等,其中管理器包括以下模块中的至少一个:活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互;位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问;文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息;通知管理器(NotificationManager)用于控制通知消息的显示和清除;窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。
在一些实施例中,活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能,比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
在一些实施例中,系统运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。
在一些实施例中,内核层是硬件和软件之间的层。如图4所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱驱动动、等。HD MI驱动、传感器驱动(如指纹传感器,温度传感器,压力传感器等)、以及电源
本申请中涉及显示设备的语音控制和交互,在语音控制领域中,实体是指客观存在并可互相区别的事物,包括具体的人、事、物、机构、抽象的概念等;知识图谱本质上是一种语义网络,能够代表实体之间的语义关系。知识图谱中以实体为顶点或节点,以关系为边。知识图谱可通过多种方式构建,本申请实施例的重点并非如何构建知识图谱,所以对此不进行详细描述。
参见图5,智能设备用于接收输入的语音信息以及输出对该语音信息的处理结果。语音识别服务设备为部署有语音识别服务的电子设备,语义服务设备为部署有语义服务的电子设备,业务服务设备为部署有业务服务的电子设备。这里的电子设备可包括服务器、计算机等,这里的语音识别服务、语义服务(也可称为语义引擎)和业务服务为可部署在电子设备上的web服务,其中,语音识别服务用于将音频识别为文本,语义服务用于对文本进行语义解析,业务服务用于提供具体的服务如墨迹天气的天气查询服务、QQ音乐的音乐查询服务等。在一些实施例中,图5所示架构中可存在部署有不同业务服务的多个实体服务设备,也可以一个或多个实体服务设备中集合一项或多项功能服务。
在一些实施例中,下面对基于图5所示架构处理输入智能设备的语音信息的过程进行举例描述,以输入智能设备的信息为通过语音输入的查询语句为例,上述过程可包括如下三个过程:
[语音识别]
智能设备可在接收到通过语音输入的查询语句后,将该查询语句的音频上传至语音识别服务设备,以由语音识别服务设备通过语音识别服务将该音频识别为文本后返回至智能设备。在一个实施例中,将查询语句的音频上传至语音识别服务设备前,智能设备可对查询语句的音频进行去噪处理,这里的去噪处理可包括去除回声和环境噪声等步骤。
[语义理解]
智能设备将语音识别服务识别出的查询语句的文本上传至语义服务设备,以由语义服务设备通过语义服务对该文本进行语义解析,得到文本的业务领域、意图等。
[语义响应]
语义服务设备根据对查询语句的文本的语义解析结果,向相应的业务服务设备下发查询指令,以获取业务服务给出的查询结果。智能设备可从语义服务设备获取该查询结果并输出。作为一个实施例,语义服务设备还可将对查询语句的语义解析结果发送至智能设备,以由智能设备输出该语义解析结果中的反馈语句。需要说明的是,图5所示架构只是一种示例,并非对本申请保护范围的限定。本申请实施例中,也可采用其他架构来实现类似功能,例如:三个过程全部或部分可以由智能终端来完成,在此不做赘述。
本申请中显示设备是支持用户界面显示、语音等功能的智能设备,可以按照如图5的架构实现对语音指令的采集、解析和响应等处理环节。在一些实施例中,如图2所示,遥控器中配置有麦克风,同时遥控器机身按键上可包括语音键,用户按下语音键,遥控器控制麦克风开始采集用户声音,直至用户释放语音键,则遥控器的麦克风将采集到的语音指令发送给显示设备,显示设备将语音指令发送给如语义云等服务器,由服务器对语音指令进行解析,并返回解析结果,显示设备根据解析结果获取用户语音意图,从而响应语音指令去执行对应的动作,例如用户按下语音键之后说出“我要观看视频A”,通过上述语音处理后,显示设备获知用户语音意图为观看视频,对象为视频A,则显示设备启动视频A的播放链接,控制显示器起播视频A。
上述实施例中,用户必须借助遥控器触发语音功能,操作繁琐,可能导致语音响应延迟较大。在一些实施例中,显示设备可配置远场语音功能,所述远程语音功能是指显示设备的硬件中配置有声音采集器,并且该声音采集器能够采集一定距离(例如3-5米)内的声音,显示设备的软件中配置有语音应用(例如语音助手等),语音应用用于接收声音采集器采集的语音指令,并将语音指令发送给服务器解析,以及根据服务器返回的解析结果,对语音指令进行动作响应。远场语音功能可实现在预设距离内免遥控器操作的语音控制,实现纯语音交互,由于取消了遥控器向显示设备传输语音指令的环节,也可在一定程度上降低语音响应的延迟。
在一些实施例中,声音采集器若为常启状态,会时刻采集预设距离内的声音,既可能引发用户隐私安全风险,还可能导致显示设备执行无效的语音采集、解析和响应,例如用户在场景内仅仅是简单对话和交流,并未向显示设备发出实质的操作指令,显示设备采集并识别对话信息的流程就是无效的,反而导致显示设备底层资源的无意义消耗。对此,远场语音场景下,为语音应用设置休眠/唤醒机制,语音应用处于休眠状态时,不会响应除唤醒指令之外的其他语音指令,用户若将语音应用从休眠状态下成功唤醒,语音应用才会开启声音采集器,使语音处理通路导通。
在一些实施例中,在远场语音场景下,显示设备可与用户预先约定好一个用于唤醒语音应用的唤醒词,该唤醒词例如是语音助手的固有昵称,或者用户自定义设置的词汇等,如图6所示,用户说出语音指令1为“嗨,XX”,相当于用户向语音应用“打招呼”,声音采集器将采集的该语音指令1发送给语音应用,语音应用将语音指令1发送云端的服务器,然后接收服务器反馈的解析结果,语音应用从解析结果中获取到第一关键词61为“XX”,若识别“XX”与所述唤醒词不匹配,则唤醒失败,语音应用仍保持休眠状态;若语音应用识别“XX”与唤醒词匹配,即识别语音指令1属于语音唤醒指令,则唤醒成功,将语音应用由休眠状态恢复至清醒状态,并允许响应之后采集到的语音指令并执行与用户语音意图匹配的动作/程序。
在一些实施例中,显示设备可在当前用户界面上同步提示语音指令1的实时响应状态。如图7所示,在用户输入语音指令1时提示为聆听状态,聆听状态用于指示声音采集器正在采集用户正在输入的语音指令。在用户界面上显示状态提示控件700,所述状态提示控件700中加载显示与当前语音响应状态匹配的状态效果标识701和状态信息702,状态效果标识701是以如动画、颜色等渲染效果来形象地表达不同状态,状态信息702则是以文字内容直观表达不同状态,例如图7中聆听状态下的状态效果标识701示例为“◇◇◇”,每个◇呈现为白色,状态信息702示例为“正在语音输入…”。
在一些实施例中,用户输入语音指令1完毕后,需要解析语音指令1以及根据解析结果决策是否唤醒语音应用,即从语音应用将音频格式的语音指令1发送给服务器,直至根据解析结果识别出唤醒成功或唤醒失败,这一过程命名为思考状态,相当于“思考”是否唤醒语音应用,如图8所示,思考状态下的状态效果标识701示例为“◇◆◇◆”,其中◇例如呈现为绿色,◆呈现为红色,状态信息702示例为“正在唤醒…”。
在一些实施例中,若语音应用识别第一关键词正确,则唤醒成功,需要对用户的语音指令1作出“应答”,即需要向用户提示为应答状态,如图9所示,应答状态下的状态效果标识701示例为“◇◇◇”,其中全部呈现为绿色并且闪烁,状态信息702示例为“有什么可以帮您?”。
在一些实施例中,若语音应用识别第一关键词错误,则需要向用户提示为唤醒失败状态,如图10所示,唤醒失败状态下的状态效果标识701示例为“◆◆◆”,其中全部呈现为红色并且闪烁,状态信息702示例为“唤醒词错误,唤醒失败!”。用户查看到该状态提示后,可选择重新输入唤醒指令。
在一些实施例中,语音应用可在被唤醒成功时立即启动第一计时机制,若第一计时时间达到第一预设时长时,语音应用始终未再接收到任何语音指令,则重新切回休眠状态;若在第一预设时长内接收到语音指令2,则将计时清零,并且直接识别并响应语音指令2,而无需再重复唤醒,在语音指令2响应完毕后,再次启动计时,检测在第一预设时长内是否接收到其他语音指令,以此类推,直至语音应用最终恢复到休眠状态。
在一些实施例中,每条语音指令大体可包括聆听状态、执行动作状态和完成状态。聆听状态用于指示显示设备正在接收语音输入(即声音采集器正在采集语音信息);执行动作状态表明正在解析语音指令,并启动执行与语音指令相匹配的动作/程序,例如,语音唤醒指令中执行动作状态即为前述思考状态,语音搜索指令中携带有第二关键词,例如用户说出“请搜索综艺C”,则执行动作状态下识别到“综艺C”为第二关键词后,显示设备搜索与综艺C匹配的视频片源;完成状态表明已响应语音指令、执行完成指定动作,例如语音搜索指令中完成状态表现为显示搜索结果,语音播放指令中完成状态表现为起播用户指定的媒资,语音唤醒指令中完成状态表现为唤醒失败状态或唤醒成功时的应答状态。
在一些实施例中,语音指令的响应状态从聆听切换为思考时,立即启动第二计时机制,若第二计时时间达在检测到到第二预设时长时,语音指令的响应状态未达到完成状态,即鉴定为响应超时,可通过状态提示控件700提示响应超时状态;若在第二预设时长内语音指令的响应状态能够达到完成状态,则无响应超时问题,状态提示控件700提示完成状态。以语音搜索指令为例,如图11所示,在语音应用被唤醒成功之后,用户继续说出“搜索热门电影”这一语音指令2,显示设备搜索完成时,参照图11,在搜索页面中显示搜索结果,同时状态效果标识701示例为“◇◇◇”,其中◇全部呈现为绿色,状态信息702示例为“已搜索完成,是否还有其他要求?”。后续语音应用在切回休眠状态时,取消显示状态提示控件700。
在一些实施例中,显示设备会监控语音指令的响应状态变化,并同步调整状态提示控件700,不同语音响应状态下,状态提示控件700的显示效果可适应性、灵活配置,而不局限于本申请的示例。前述各项实施例是在用户界面中以状态提示控件700的形式,向用户提示其输入的语音指令的实时响应状态,这就要求用户必须正对电视,将目光聚焦到状态提示控件700之上,并且显示设备在待机、STR等状态下是熄屏的,熄屏状态下显示设备不显示任何UI,导致用户无法获知语音状态的响应状态。
在一些实施例中,如图12和图13的示例,可在显示设备外部机身上设置指示灯组件280,指示灯组件280中包括N个指示灯281,N≥1,当组件中包括多个指示灯281时,多个指示灯281可以按照一定布局进行排列。图12中指示灯组件280包括4个指示灯281,即N=4,4个指示灯281设置于屏幕下边框并且呈现为1行4列的阵列布局。指示灯组件280的灯数、布局和位置不限定,例如图13中将指示灯组件280设置在屏幕左边框或右边框并且呈现为4行1列布局,又或者,指示灯组件280呈现为p行q列的阵列,N=p*q。
在一些实施例中,指示灯281可选用如LED灯等发光元件,并且能支持对灯光的亮度、灯光颜色、光效等多维度的调节,实现指示灯组件280在不同语音响应状态下呈现不同的灯光效果,用户观察指示灯组件280的灯光效果,即可快捷识别其指示的语音响应状态。指示灯组件280中的N个指示灯可分别独立控制。
在一些实施例中,显示设备可维护状态灯效关系列表,状态灯效关系列表中记录每种语音响应状态所对应的指示灯组件280的灯光效果,灯光效果中规定了指示灯组件280中N个指示灯各自的启闭状态(用于表征是否发光)、灯光颜色、在哪个时间节点被点亮(即发光节点)、发光时长等内容。显示设备出厂配置有一个初始的状态灯效关系列表,若显示设备支持用户自定义设置各语音响应状态下的灯光效果,即可根据用户的设置操作同步更新状态灯效关系列表。若一种语音响应状态映射多种灯光效果(即一对多映射关系),则用户仅凭指示灯组件280仍然无法准确分辨当前的语音响应状态,因此状态灯效关系列表中需要保证一对一映射关系,即一种语音响应状态仅映射一种灯光效果。
在一些实施例中,控制器250检测到当前语音指令的响应状态发生切换时,根据状态灯效关系列表,查询切换后的响应状态所对应的目标灯光效果,并根据目标灯光效果生成控制指令1,然后将控制指令1下发给底层的LED驱动模块;LED驱动模块响应于控制指令1,控制组件中每个指示灯的发光状态,进而控制指示灯组件280显现出目标灯光效果。例如,指示灯组件280包括{LED1,LED2,LED3,LED4},共计4个指示灯,目标灯光效果为点亮LED1和LED3,且LED1为绿光,LED3为红光,则LED驱动模块控制LED2和LED2关闭,控制LED1开启且灯光颜色为绿色,控制LED3开启且灯光颜色为红色,从而使指示灯组件280呈现出目标灯光效果,保证语音响应状态提示的准确性。
在一些实施例中,由于显示器和指示灯组件280是分别独立控制的,即便显示器熄屏也不会影响指示灯组件280的灯光显示,使用户在熄屏状态下仍能借助指示灯组件280获知语音响应状态;指示灯组件280独立于屏幕,基于光的辐散特性且灯光醒目,用户不必正对屏幕并聚焦于界面中的状态提示控件700,只需显示设备在肉眼可见范围内,用户甚至眼角余光就能直观查看到语音响应状态,提升用户体验。此外,用户还可通过指示灯组件280校验语音指令是否出现异常,例如若指示灯组件280提示响应超时状态,则可能是语音指令无法正确解析、语音指令无效或显示设备无法执行语音动作等原因造成,又例如,指示灯组件280提示聆听状态后始终无状态变化,则可能是声音采集器无法正确拾音或语音过长等问题。
在一些实施例中,若语音指令是在显示设备处于熄屏状态下输入的,则在唤醒屏幕之前,控制显示设备保持熄屏状态,并控制指示灯组件280对当前响应状态进行提示,即在显示设备待机、熄屏等无UI状态提示下,仍能通过指示灯组件280实现语音响应状态的有效灯光提示。
在一些实施例中,如图14的示例,显示设备当前为熄屏状态,无任何UI画面展示,指示灯组件中的4个指示灯均为熄灭状态,之后用户说出“嗨,XX”,声音采集器开始采集这一语音指令A,控制器控制指示灯组件280提示聆听状态,并且控制显示器仍保持熄屏状态。图14中聆听状态下指示灯组件280的灯光效果呈现为“○○○○”,小圆圈表示一个指示灯,即同时点亮4个指示灯,每个○均显示白光。
在一些实施例中,如图15的示例,声音采集器采集完成语音指令A时,控制器检测到语音指令A的响应状态由“聆听”切换为“思考”,立即控制指示灯组件280提示思考状态,并且控制显示器仍保持熄屏状态。图15中思考状态下指示灯组件280的灯光效果呈现为“●○○○”→“○●○○”→“○○●○”→“○○○●”→“●○○○”→…,以此循环,即呈现为类似跑马灯效果,其中,●为白光,○呈现稍微置灰。
在一些实施例中,在思考状态下,语音应用将语音指令A的音频数据发送给服务器,服务器对该音频数据进行语音处理后,得到解析信息A,并将解析信息A返回显示设备;显示设备读取解析信息A中携带的第一关键词为“XX”,判断“XX”是否与约定的唤醒词匹配,若“XX”与唤醒词不匹配,如图16的示例,则控制指示灯组件280提示唤醒失败状态,并且控制显示器仍保持熄屏状态。图16中唤醒失败状态下指示灯组件280的灯光效果为同时点亮“●●●●”,并且每个●呈现为红光闪烁。
在一些实施例中,若识别“XX”与唤醒词匹配,则成功唤醒语音应用,如图17的示例,则控制指示灯组件280提示应答状态,并且控制显示器仍保持熄屏状态。图17中聆听状态下指示灯组件280的灯光效果为同时点亮“○○○○”,并且每个○呈现为绿光闪烁。在语音应用唤醒成功后,用户可继续输入语音指令B,语音指令则允许对语音指令B进行动作响应。
在一些实施例中,在图17的基础上,语音应用被成功唤醒之后,显示设备仍保持熄屏状态,用户继续说出“播放电影M”,声音采集器开始采集这一语音指令B,控制器控制指示灯组件280的提示由答应状态切换为聆听状态,并且控制显示器仍保持熄屏状态。图18中聆听状态下指示灯组件280的灯光效果呈现为“○○○○”,即同时点亮4个指示灯,每个○均显示白光。
在一些实施例中,声音采集器采集完成语音指令B时,控制器检测到语音指令B的响应状态由“聆听”切换为“语音识别”,立即控制指示灯组件280提示语音识别状态,并且控制显示器仍保持熄屏状态,同时语音应用将语音指令B的音频数据发送给服务器,服务器对该音频数据进行语音处理后,得到解析信息B,并将解析信息B返回显示设备。图19中识别状态下指示灯组件280的灯光效果呈现为“●○○○”→“○●○○”→“○○●○”→“○○○●”→“●○○○”→…,以此循环,即呈现为类似跑马灯效果,其中●为白光,○呈现稍微置灰。
在一些实施例中,显示设备接收并识别解析信息B,获知用户语音意图为播放视频,视频对象为电影M,则控制指示灯组件280的提示更新为“正在启动播放”状态,同时解除显示设备的熄屏状态,屏幕唤醒后启动视频播放器,控制视频播放器根据资源链接来加载电影M,从而完成电影M的起播。图20中“正在启动播放”状态下指示灯组件280的灯光效果呈现为“○●○●”,即同时点亮4个指示灯,○为绿光,●为红光,即呈现为绿光、红光交替的效果。
在一些实施例中,视频播放器起播电影M时,语音指令B的响应状态切换至完成状态,则控制指示灯组件280的提示同步更新为完成状态,对于语音播放指令,其完成状态可具体体现为“起播完成”状态,如图21的示例,“起播完成”状态下指示灯组件280的灯光效果呈现为“●●●●”,即同时点亮4个指示灯,每个●显示绿光。
在一些实施例中,若语音指令是在显示设备处于亮屏状态下输入的,或者显示设备在处理语音指令过程中主动从熄屏状态下唤醒屏幕,参照图20和图21,可仅控制指示灯组件280对当前响应状态进行提示,而不显示状态提示控件700,即不再通过UI进行状态提示。
在一些实施例中,若语音指令是在显示设备处于亮屏状态下输入的,或者显示设备在处理语音指令过程中主动从熄屏状态下唤醒屏幕,则可利用指示灯组件280和状态提示控件700对当前响应状态进行同时、同步提示,即从增设的指示灯组件和UI控件这两个显示角度进行双重状态提示。以提示语音指令B的响应状态是“正在启动播放”状态的为例,如图22所示,此状态下指示灯组件280的灯光效果呈现为“○●○●”,即同时点亮4个指示灯,○为绿光,●为红光,即呈现为绿光、红光交替的效果;同步地,在用户界面还显示状态提示控件700,此状态下状态效果标识701示例为“◇◆◇◆”,其中◇例如呈现为白色,◆呈现为灰色,即呈现为明暗交替的效果,状态信息702示例为“正在准备播放…”。
在一些实施例中,语音指令B的响应状态更新至完成状态时,相当于语音指令B的响应进程达到终点,则指示灯组件280和状态提示控件700对完成状态进行提示后,第一种方式是隐藏状态提示控件700,以及控制指示灯组件280的N个指示灯全部熄灭;或者,第二种方式是隐藏状态提示控件700,但使指示灯组件280暂时保持对完成状态的提示,直至在所述第一预设时长内接收到下一个语音指令C,则再次显示状态提示控件700,并且同步变更状态提示控件700和指示灯组件280的状态提示;或者,第三种方式是隐藏状态提示控件700,但使指示灯组件280暂时保持对完成状态的提示,直至检测到语音应用进入休眠状态,自动控制指示灯组件280的N个指示灯全部熄灭。
对于前述第一种方式,若状态提示控件700被隐藏,并且指示灯组件280也被熄灭,用户可能就无法明确语音应用是否进入休眠,输入下一个语音指令前是否需要先唤醒语音应用。而前述第二种和第三种方式中,在接收到下一语音指令C或语音应用休眠之前,暂时保持指示灯组件280的灯光提示的目的在于,向用户隐含提示语音应用当前仍然处于已唤醒状态,用户可直接输入下一语音指令C,而无需输入语音唤醒指令;指示灯组件280处于全熄灭状态,则向用户隐含提示语音应用当前为休眠状态,用户下一次语音交互前就需要先唤醒语音应用,实现利用指示灯组件280的点亮/熄灭状态向用户提示语音应用的已唤醒/休眠状态。
在一些实施例中,语音指令根据操作意图可划分为不同类别,例如语音唤醒指令、语音搜索指令、语音播放指令、应用启动指令等,可对每种类别的语音指令,分别设置对应的状态灯效关系列表,状态灯效关系列表中记录指示灯组件280在不同响应状态下的灯光效果;或者,各类别语音指令共享同一状态灯效关系列表;或者,对相似类别、相关联类别和/或从属类别的语音指令对应的状态灯效关系列表进行合并,例如语音播放指令本质上属于应用启动指令中一种的子类别,因此语音播放指令和应用启动指令可共享同一状态灯效关系列表。简而言之,可根据语音指令类别和每种语音指令类别下包含的响应状态,对指示灯组件280的灯光效果进行适应性设置,本申请实施例仅仅是示例性的。
在一些实施例中,如图23示例的指示灯组件进行状态提示的逻辑,显示设备接收语音指令A,语音指令A用于唤醒语音应用,语音指令A下历经三个响应状态,响应状态A1为聆听状态(指示灯组件显示灯光效果A1),响应状态A2为思考状态(指示灯组件切换为显示灯光效果A2),响应状态A3为应答状态(指示灯组件切换为显示灯光效果A3),应答状态表征语音应用唤醒成功,用户继续输入语音指令B,语音指令B历经S个响应状态Bi,i用于表示语音指令的响应状态的序号,1≤i≤S,在响应状态Bi下指示灯组件显示灯光效果Bi,以此类推,通过指示灯组件对后续其他语音指令进行响应状态的提示。
上述方案已详细说明在远场语音场景下,如何利用指示灯组件280对语音指令的响应状态进行提示,并主要侧重不同响应状态下指示灯组件280的灯光效果。在一些应用场景中,一般将指示灯组件280的灯光亮度设置为预设亮度,所述预设亮度为显示设备出厂时已配置好的一个固定亮度值,因此指示灯组件280的亮度固定不变,若显示设备所在环境光线较为明亮,则指示灯组件280可能相对较暗,导致语音响应状态提示不显著,甚至容易被用户忽略;若显示设备所处环境较暗,例如天黑后客厅仅打开显示设备而未开灯,则指示灯组件280可能相对较亮,导致指示灯的亮度较为刺眼,尤其对于有眼疾的用户很不友好。
在一些实施例中,本申请实现指示灯组件的亮度的自适应动态调控,考虑到显示设备一般可根据环境光强自动调节自身屏幕亮度,或者用户按照自身习惯和要求来人为设定屏幕亮度,屏幕亮度可适应场景光线明暗或符合用户使用要求,因此将屏幕亮度作为参照标准,将指示灯亮度与屏幕亮度调节一致。
在一些实施例中,如图24的示例,用户通过设置→图像→背光的访问路径,即可访问背光设置页面,从而选择背光调节模式。背光设置页面中至少提供两种模式,第一种是背光自定义模式,第二种是背光自适应模式。
在一些实施例中,如图25示例的背光设置页面,该页面中包括背光调节控件241和开关控件242。其中,开关控件242具有关联的询问信息242A,询问信息242A例如为“是否开启屏幕背光适配环境光线强度”,若用户关闭开关控件242,则可选择背光自定义模式,通过背光调节控件241来自定义设置屏幕亮度的亮度阈值;若用户打开开关控件242,即切换开关控件242为开启状态,即用户选择背光自适应模式。
在一些实施例中,参照图25,用户关闭开关控件242,并选用背光自定义模式,背光调节控件241用于使用户手动调节亮度阈值。背光调节控件241可包括背光条241A和标点241B,用户可操作标点241B沿背光条241A滑动,假设背光条241A的左端点为屏幕亮度的下限值,背光条241A的右端点为屏幕亮度的上限值,即背光条241A从左至右为亮度连续递增的方向,背光调节控件241还包括亮度指示信息241C,用户可通过遥控器或触控等操作方式移动标点241B,亮度指示信息241C同步提示当前的屏幕亮度,例标点241B移动至背光条241A上图25示例的位置时,亮度指示信息241C提示屏幕亮度为75,用户肉眼观察背光被调节到自认为合适的亮度后,停止移动标点241B,此时亮度指示信息241C显示的屏幕亮度即为用户自定义的亮度阈值。背光调节控件241不限于图25的设置方式,例如用户可在背光调节控件241中直接输入期望设定的亮度阈值。
在一些实施例中,用户选择背光自定义模式,并设定亮度阈值后,控制器根据亮度阈值生成控制指令2,并将控制指令2下发至显示器中的背光控制模块;背光控制模块响应于控制指令2,将屏幕背光调节为所述亮度阈值。在背光自定义模式下,无论场景中环境光线亮暗如何变化,只要用户未修改亮度阈值,显示器处于亮屏状态时的屏幕亮度始终保持在当前的亮度阈值不变。
在一些实施例中,显示设备硬件结构中还设置有光照传感器,光照传感器用于检测环境光线强度。在开关控件242处于关闭状态时,可根据背光调节控件241获取亮度阈值,屏幕亮度调节不受环境光强的干预,因此在背光自定义模式下应控制光照传感器关闭,既避免光照传感器的无效工作,也降低显示设备的耗电。
在一些实施例中,如图26所示,若用户打开开关控件242时,背光设置页面中开关控件242切换为开启状态,同时控制器控制光照传感器开启,以启动检测环境光线强度,从而根据环境光线强度自适应匹配并调节屏幕亮度。
在一些实施例中,对于支持背光自适应功能的显示设备,可预设一个环境光-背光关系列表,环境光-背光关系列表中记录了不同环境光线强度对应的屏幕亮度,环境光强与屏幕亮度一般是正相关的,即环境越明亮则自适应的屏幕亮度越高,环境越暗则自适应的屏幕亮度越低。
在一些实施例中,显示设备从环境光-背光关系列表中,获取与光照传感器当前检测的环境光线强度匹配的目标屏幕亮度,根据目标屏幕亮度生成控制指令3,并将控制指令3下发至背光控制模块;背光控制模块响应于控制指令3,调节屏幕背光至所述目标屏幕亮度。由于显示设备场景中,环境光线强度会随着日照、光源等因素而发生改变,例如日落后环境光线自然变暗,天黑时打开照明灯后环境光线增强等,在背光自适应模式下,控制器在检测到环境光线强度变化时,基于环境光-背光关系列表,对屏幕亮度进行同步更新,从而实现根据环境光强自适应动态调节屏幕亮度。
背光调节模式不限于前述背光自定义模式和背光自适应模式,在其他实施例中,例如在视频播放场景中,可根据视频画面的亮度去调节屏幕背光,例如夜视模式或夜景环境下拍摄的视频画面通常较暗,则将屏幕亮度相对增强,又例如视频画面亮度较高,也可将屏幕亮度相对调低,使视频画面能够更符合人眼观看的舒适度。
在一些实施例中,声音采集器接收到语音指令时,控制器需要监控语音指令的响应状态,同时查询屏幕亮度,然后按照屏幕亮度和与当前响应状态匹配的灯光效果,来控制指示灯组件280的显示,以使指示灯组件280既提示响应状态,同时指示灯亮度与屏幕亮度保持一致和动态同步,从而将指示灯亮度调节到合适状态,适应场景光线明暗或符合用户使用要求,实现对指示灯组件的亮度的自适应动态调控。
在一些实施例中,图27示例一种指示灯组件的状态提示控制逻辑,在指示灯组件进行状态提示时,包含两条处理逻辑,第一是声音采集器采集语音指令,控制器同时监控语音指令的响应状态,第二是控制器查询当前的屏幕亮度,然后根据当前的响应状态和屏幕亮度生成控制指令,并将控制指令下发给LED驱动模块;LED驱动模块响应于该控制指令,按照控制指令指示的灯光效果进行显示,同时将发光的目标指示灯的亮度调节至与屏幕亮度一致,从而完成对语音指令当前的响应状态的提示。
在一些实施例中,图28示例另一种指示灯组件的状态提示控制逻辑,主要涉及两个角度的亮度调节,角度一是屏幕背光调节,不限于包括背光自定义模式、背光自适应模式和初始默认模式等,对于背光自定义模式,控制器根据当前的亮度阈值(即第二亮度),生成并向背光控制模块发送控制指令2,背光控制模块响应于控制指令2,调节显示器符合亮度阈值;在背光自适应模式中,控制器根据从光照传感器获取的环境光线强度,匹配第一亮度,根据第一亮度生成并向背光控制模块发送控制指令3,背光控制模块响应于控制指令3调节显示器符合第一亮度;在初始默认模式,控制器根据显示设备出厂配置的预设亮度(即第三亮度),生成并向背光控制模块发送控制指令4,背光控制模块响应于控制指令4,调节显示器达到预设亮度。通过指定的屏幕背光调节模式,可为后续指示灯组件的亮度调节提供参照基准。
在一些实施例中,参照图28,角度二是指示灯组件亮度调节,声音采集器接收到语音指令A,控制器监控语音指令A的响应状态,同时查询当前的屏幕亮度;控制器查询语音指令A当前的响应状态所对应的目标灯光效果,根据目标灯光效果和当前的屏幕亮度生成控制指令1,并将控制指令1下发给LED驱动模块;LED驱动模块响应于控制指令1,控制指示灯组件按照目标灯光效果对响应状态进行提示,查询目标灯光效果预设的指示灯组件中被点亮的目标指示灯,将目标指示灯的亮度调节至等于屏幕亮度。以响应状态为“正在搜索”,目标灯光效果显示为“○●○●”举例,其中○表示被熄灭的指示灯,●表示被点亮且呈现白光的指示灯,即指示灯组件内的指示灯2和指示灯4为目标指示灯,则控制指示灯2和指示灯4按照屏幕亮度、灯光颜色为白色进行发光,指示灯1和指示灯3不发光。
在一些实施例中,指示灯组件的显示状态是动态可调的,当切换响应状态时,需要同步更新指示灯组件的灯光效果;在背光自定义模式下检测到亮度阈值发生改变,或者,在背光自适应模式下检测到环境光线强度发生改变,屏幕亮度自然会随之改变,则指示灯组件的灯光亮度也要随屏幕亮度联动。当响应状态和屏幕亮度任一项产生变化,都需同步更新指示灯组件的显示状态。
在一些实施例中,显示设备处于亮屏时,屏幕亮度大于零,因此指示灯组件与屏幕进行亮度同步后,指示灯组件的灯光亮度自然是可见的。然而,若显示设备处于待机、休眠、STR(Suspend to RAM,挂起到内存)等状态时,显示设备是熄屏的,即屏幕亮度为零,而指示灯组件必须保证灯光可见,才能对语音响应状态进行有效提示,因此本申请还考虑显示设备熄屏时如何调节指示灯组件的亮度。
在一些实施例中,若显示设备当前启用前述背光自适应模式,则在显示设备由亮屏状态切换为熄屏状态时,可不关闭光照传感器,仍然保持由光照传感器检测外界环境光强,后续在熄屏状态下接收到第一语音指令时,若第一语音指令不是用于唤醒屏幕,则控制器根据当前检测的环境光强,自适应匹配目标屏幕亮度,与亮屏状态时不同的是,控制器仅根据目标屏幕亮度和响应状态生成控制指令4,并将控制指令4下发给LED驱动模块,而不再向背光控制模块下发任何指令,LED驱动模块响应于控制指令4,将组件中当前响应状态下的目标指示灯调节至目标屏幕亮度,而显示器保持熄屏状态不变。该实施例实现了在显示设备处于熄屏状态时,无需唤醒屏幕,就能使指示灯组件的亮度适配环境光线强度。
在一些实施例中,若显示设备当前启用前述背光自适应模式,则显示设备由亮屏状态切换为熄屏状态时,可先关闭光照传感器,后续在熄屏状态下接收到第一语音指令时,再控制光照传感器开启,并根据环境光线强度和语音指令的响应状态,自适应调节组件中目标指示灯的亮度,同时显示器仍保持熄屏状态不变。与前一实施例相比,本实施例在熄屏后若无语音指令输入,则关闭光照传感器,以避免传感器的无效检测,降低显示设备耗电,并在接收到语音指令输入时再开启光照传感器,实现在显示设备处于熄屏状态时,无需唤醒屏幕,就能使指示灯组件的亮度适配环境光线强度。
在一些实施例中,若显示设备当前启用前述背光自定义模式,则在显示设备由亮屏状态切换为熄屏状态时,光照传感器保持关闭状态,后续在熄屏状态下接收到第一语音指令时,若第一语音指令不是用于唤醒屏幕,则控制器查询系统当前记录的亮度阈值,仅根据亮度阈值和响应状态生成控制指令5,并将控制指令5下发给LED驱动模块,而不向背光控制模块下发任何指令,即显示器保持熄屏状态不变。LED驱动模块响应于控制指令5,将组件中当前响应状态下的目标指示灯调节至所述亮度阈值,并且在之后切换响应状态时,指示灯组件仅改变灯光效果,各响应状态下目标指示灯的亮度始终保持在亮度阈值不变。该实施例实现了在显示设备处于熄屏状态时,无需唤醒屏幕,就能使指示灯组件的亮度与用户设定的亮度阈值一致。
在一些场景中,例如显示设备未配置有光照传感器,或者光照传感器产生故障,无法感光并检测环境光线强度,则显示设备自身不支持背光自适应模式,并且用户也未自定义设置亮度阈值,这会导致指示灯组件在进行状态提示时无亮度调节基准;又例如,用户未启用背光自适应模式,即开关控件242为关闭状态,并且也未自定义设置亮度阈值时,同样会导致指示灯组件在进行状态提示时无亮度调节基准,从而造成指示灯无法显示。为解决这些场景问题,在一些实施例中,显示设备出厂时可配置一个固定的亮度值,本申请将其命名为预设亮度,在无法根据环境光线强度适配屏幕亮度,或者用户未设定亮度阈值的场景下,默认将预设亮度作为指示灯组件的亮度调节基准。
在一些实施例中,若显示设备不支持或未启用背光自适应模式,并且也未在背光自定义模式下设置亮度阈值,则在显示设备由亮屏状态切换为熄屏状态时,光照传感器保持关闭状态,后续在熄屏状态下接收到第一语音指令时,若第一语音指令不是用于唤醒屏幕,则控制器查询系统初始配置文件中记录的预设亮度,仅根据预设亮度和响应状态生成控制指令6,并将控制指令6下发给LED驱动模块,而不向背光控制模块下发任何指令,即显示器保持熄屏状态不变。LED驱动模块响应于控制指令6,将组件中当前响应状态下的目标指示灯调节至所述预设亮度,并且在之后切换响应状态时,指示灯组件仅改变灯光效果,各响应状态下目标指示灯的亮度始终保持在预设亮度不变。该实施例实现了在显示设备处于熄屏状态,并且基于匹配环境光强和亮度阈值的亮度调节方案均不可用时,无需唤醒屏幕,默认将指示灯亮度调节为设备出厂配置的预设亮度,从而避免指示灯无法被点亮的缺陷。
在一些实施例中,显示设备在开机、重启或唤醒屏幕后需呈现亮屏状态,若显示设备不支持或未启用背光自适应模式,并且用户也未在背光自定义模式下设置过亮度阈值,也可默认根据预设亮度调节屏幕显示,控制器查询系统初始配置文件中记录的预设亮度,根据预设亮度生成控制指令7,并将控制指令7下发给背光控制模块,背光控制模块响应于控制指令7,将屏幕亮度调节为预设亮度。
在一些实施例中,在将屏幕亮度调节为预设亮度之后,若用户启用背光自适应模式,则屏幕亮度不再保持预设亮度,而是切换至根据环境光强自适应调节屏幕亮度,或者,若用户设置亮度阈值,并且亮度阈值不等于预设亮度,则将屏幕亮度由预设亮度切换至亮度阈值,同步地,指示灯的亮度也不再保持预设亮度,而是跟随屏幕亮度。
在一些实施例中,在显示设备处于熄屏状态,并且语音应用已唤醒成功之后,用户可继续输入第二语音指令,第二语音指令是需要唤醒屏幕的语音指令,例如用户说出“播放视频S”、“搜索热门电影”等,都需要唤醒屏幕,才能可视化地起播视频S,显示热门电影的搜索结果等内容。
在一些实施例中,显示设备将第二语音指令的音频数据发送给语义服务器,由服务器对音频数据进行语义识别等解析处理,将音频转换为用于指示用户语音意图的可读信息(即最终的解析结果),并将解析结果返给显示设备。显示设备采集第二语音指令对应于聆听状态,服务器解析第二语音指令对应于解析状态/语音处理状态,显示设备在接收到解析结果之前,也就无法响应第二语音指令并执行符合用户语音意图的动作,因此在第二语音指令处于聆听状态和解析状态阶段,显示设备仍保持熄屏状态,并执行前述熄屏时的指示灯组件亮度控制方案。
在一些实施例中,显示设备接收到解析结果后,获悉用户语音意图,以用户语音意图是搜索热门电影为例,显示设备立即唤醒屏幕,并根据当前的背光调节模式自动调节屏幕亮度,所述背光调节模式为背光自适应模式(适配环境光线强度)、背光自定义模式(亮度阈值)、初始默认模式(预设亮度)等多种预置模式中的一种,同时指示灯组件提示“正在搜索”状态,并控制“正在搜索”状态下组件中的目标指示灯按照当前屏幕亮度发光,搜索完成时,显示设备将热门电影的搜索结果显示于屏幕界面上(此时屏幕已亮屏),并控制指示灯组件切换为提示“搜索完成”状态。
在一些实施例中,参照图29的示例,本申请提供第一种语音指令响应状态的提示方法,所述方法由控制器执行,控制器分别与显示器、声音采集器和指示灯组件连接,所述方法包括如下程序步骤:
步骤S291,接收到语音指令,监控语音指令的响应状态。
步骤S292,控制所述指示灯组件显示与所述响应状态匹配的灯光效果。
本实施例中,指示灯组件通过不同的灯光效果,对不同响应状态进行提示,并且指示灯组件的灯光效果跟随响应状态的切换而同步变化,实现通过指示灯组件对语音响应状态的精准提示。实现用户查看指示灯组件的灯光效果,即可快速分辨语音响应状态,由于指示灯组件与显示器是独立控制,在显示设备待机、显示器熄屏时不会影响指示灯组件的状态提示,并且由于灯光具有一定的辐散特性,用户不必完全正对屏幕并聚焦于界面中的某一位置,只要在显示设备肉眼可见范围内,用户甚至用余光就可观察到指示灯的灯光效果,从而获知当前语音指令的响应状态。
在一些实施例中,参照图30的示例,本申请还提供第二种语音指令响应状态的提示方法,所述方法由控制器执行,包括如下程序步骤:
步骤S301,接收到语音指令,监控语音指令的响应状态。
步骤S302,查询屏幕亮度。
步骤S303,查询所述响应状态对应的灯光效果。其中,所述灯光效果用于限定组件中每个指示灯的启闭状态、灯光颜色、发光节点、发光时长、动态灯效等内容。
步骤S304,控制指示灯组件按照所述灯光效果和所述屏幕亮度,对所述响应状态进行提示。
可以通过背光自适应模式(适配环境光线强度)、背光自定义模式(亮度阈值)、初始默认模式(预设亮度)等多种背光调节模式中的任一种,来自动调节屏幕亮度,并使指示灯亮度与屏幕亮度保持一致,并且在屏幕亮度动态变化时,指示灯亮度随之联动。本申请能将指示灯亮度调节到合适状态,适应场景光线明暗或符合用户使用要求,在指示灯组件进行状态提示时,实现对指示灯组件亮度的自适应动态调控,指示灯组件不必再显示固定亮度,提升用户体验。
在一些实施例中,参照图31的示例,本申请还提供第二种语音指令响应状态的提示方法,所述方法由控制器执行,包括如下程序步骤:
步骤S311,接收语音指令。
步骤S312,判断显示设备是否为亮屏状态。若显示设备为亮屏状态,则执行步骤S313和步骤S314;若显示设备为熄屏状态,则执行步骤S315。
步骤S313,监控语音指令的响应状态,查询屏幕亮度。
步骤S314,根据所述响应状态和所述屏幕亮度,控制指示灯组件的显示。
步骤S315,根据熄屏前使用的背光调节模式,确定目标亮度。
在一些实施例中,若熄屏前使用的是背光自适应模式,则目标亮度为第一亮度,所述第一亮度为根据光照传感器检测的环境光线强度适配的亮度值;若熄屏前使用的是背光自定义模式,则目标亮度为第二亮度,所述第二亮度为用户自定义设置的屏幕的亮度阈值;若熄屏前使用的是初始默认模式,则目标亮度为第三亮度,所述第三亮度为显示设备出厂配置的预设亮度。
步骤S316,根据所述响应状态和所述目标亮度,控制指示灯组件的显示。
前述技术方案是以显示设备机身上设置指示灯组件为例,在其他实施例中,指示灯组件也可不固设于显示设备上,比如将指示灯组件设置为连接及拆卸的独立结构,当需要使用指示灯组件进行语音响应状态提示时,可将指示灯组件插入特定接口,从而建立指示灯组件与显示设备的有线连接;当用户不想使用指示灯组件时,将指示灯组件从所述特定接口中拔除即可。其中,所述特定接口可以是为适配指示灯组件而专设的接口,或者也可以是如USB等常规接口。
在其他实施例中,当需要使用指示灯组件进行语音响应状态提示时,也可通过如局域网、蓝牙等形式,建立指示灯组件与显示设备的无线连接;当用户不想使用指示灯组件时,断开指示灯组件与显示设备的无线连接。该实施例中指示灯组件与显示设备的无线连接方式,使得指示灯组件进行状态提示时的位置局限性大大降低,用户可以在无线通信范围内任意移动指示灯组件,此时指示灯组件相当于一种移动终端,用户只要能肉眼观察到指示灯组件,甚至无需看向显示设备,也仍然能够准确获知语音指令的响应状态,提升了场景适应性。
在其他实施例中,指示灯组件在未连接显示设备时,也可作为一种独立的智能光源设备来使用,例如在指示灯组件上设置电源接口,在指示灯组件接入电源时,即可实现照明功能;又例如,在指示灯组件上设置切换按键,用户点击切换按键,即可切换不同的灯光效果;又例如,在指示灯组件上设置调光按键,用户点击调光按键,即可调节灯光亮度,等等。
在其他实施例中,指示灯组件也可配置语音功能,用户可在指示灯组件端输入语音指令,例如用户说出“开灯”这一语音指令C,指示灯组件将语音指令C发送给服务器,由服务器对语音指令C进行解析处理,在接收到服务器返回的解析信息后,识别解析信息并获知用户语音意图,进而执行开灯动作。在语音指令C从输入到动作响应完成期间,指示灯组件也可利用不同的灯光效果,对语音指令C的响应状态进行提示。需要说明的是,指示灯组件若能够作为独立的智能设备时,其软硬件功能配置不限于本申请提供的示例。
受限于专利附图要求,附图中无法真实呈现出指示灯组件的灯光提示效果以及亮度对比,本申请对指示灯组件的状态提示的附图及其描述仅仅是示例性的。不同类别语音指令以及每种语音指令所包含的响应状态类型均可根据实际应用设置,并灵活设置不同响应状态对应的灯光效果,使得用户在查看到指示灯组件的灯光提示后,能够毫无疑义地分辨出当前语音指令的响应状态。另外,屏幕的背光调节模式不限于本申请示例的背光自适应模式、背光自定义模式和初始默认模式,显示设备亮屏时,无论启用哪种背光调节模式,指示灯亮度只需跟随屏幕亮度即可,从而使指示灯能够以合适亮度进行发光提示,避免灯光过暗或过亮。
在一些实施例中,本申请还提供一种计算机存储介质,该计算机存储介质可存储有程序。当计算机存储介质位于显示设备中时,该程序执行时可包括前述控制器配置的语音指令响应状态的提示方法的程序步骤。其中,计算机存储介质可为磁碟、光盘、只读存储记忆体(英文:Read-Only Memory,简称ROM)或随机存储记忆体(英文:Random AccessMemory,简称RAM)等。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释本公开的内容,从而使得本领域技术人员更好的使用所述实施方式。

Claims (10)

1.一种显示设备,其特征在于,包括:
显示器,用于在屏幕内显示用户界面;
声音采集器,用于采集语音指令;
指示灯组件,用于指示语音指令的响应状态,至少包括一个指示灯;
控制器,被配置为执行:
接收到语音指令,监控语音指令的响应状态;
控制所述指示灯组件显示与所述响应状态匹配的灯光效果。
2.根据权利要求1所述的显示设备,其特征在于,所述控制器按照如下方式控制所述指示灯组件显示与所述响应状态匹配的灯光效果:
从状态灯效关系列表中,查询与当前响应状态对应的目标灯光效果;所述状态灯效关系列表中记录每种响应状态对应的指示灯组件的灯光效果,所述灯光效果用于规定每个所述指示灯的启闭状态、灯光颜色、发光节点和发光时长;
根据所述目标灯光效果,控制所述指示灯组件中每个指示灯的发光状态。
3.根据权利要求1所述的显示设备,其特征在于,所述控制器还被配置为执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,控制所述显示设备保持所述熄屏状态,并控制所述指示灯组件对当前响应状态进行提示。
4.根据权利要求1所述的显示设备,其特征在于,所述控制器还被配置为执行:
若所述语音指令是在显示设备亮屏状态下输入的,控制所述指示灯组件对当前响应状态进行提示;
以及,控制所述显示器在用户界面中显示状态提示控件,并控制所述状态提示控件对所述当前响应状态进行同步提示。
5.根据权利要求4所述的显示设备,其特征在于,所述控制器还被配置为执行:
若所述语音指令是在显示设备亮屏状态下输入的,仅控制所述指示灯组件对当前响应状态进行提示,不显示所述状态提示控件。
6.根据权利要求1所述的显示设备,其特征在于,所述控制器还被配置执行:
查询屏幕亮度;
查询所述灯光效果预设的所述指示灯组件中被点亮的目标指示灯;
若根据所述屏幕亮度,检测到所述显示设备处于亮屏状态,将所述目标指示灯的亮度调节为所述屏幕亮度。
7.根据权利要求3所述的显示设备,其特征在于,所述控制器还被配置执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,将所述灯光效果指定在所述指示灯组件中被点亮的目标指示灯的亮度调节为第一亮度;所述第一亮度是根据当前环境光线强度而适配的亮度值。
8.根据权利要求3所述的显示设备,其特征在于,所述控制器还被配置执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,将所述灯光效果指定在所述指示灯组件中被点亮的目标指示灯的亮度调节为第二亮度;所述第二亮度是根据用户自定义设置的屏幕的亮度阈值。
9.根据权利要求3所述的显示设备,其特征在于,所述控制器还被配置执行:
若所述语音指令是在显示设备熄屏状态下输入的,则在唤醒屏幕之前,将所述灯光效果指定在所述指示灯组件中被点亮的目标指示灯的亮度调节为第三亮度;所述第三亮度是显示设备出厂时已配置好的一个固定的亮度值。
10.一种显示设备中语音指令响应状态的提示方法,其特征在于,所述方法包括:
接收到语音指令,监控语音指令的响应状态;
控制所述指示灯组件显示与所述响应状态匹配的灯光效果;
其中,所述指示灯组件设置于所述显示设备上,用于指示所述响应状态,所述指示灯组件至少包括一个指示灯。
CN202210186905.7A 2022-02-28 2022-02-28 一种语音指令响应状态的提示方法及显示设备 Pending CN114495934A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210186905.7A CN114495934A (zh) 2022-02-28 2022-02-28 一种语音指令响应状态的提示方法及显示设备
PCT/CN2022/135427 WO2023160087A1 (zh) 2022-02-28 2022-11-30 一种语音指令响应状态的提示方法及显示设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210186905.7A CN114495934A (zh) 2022-02-28 2022-02-28 一种语音指令响应状态的提示方法及显示设备

Publications (1)

Publication Number Publication Date
CN114495934A true CN114495934A (zh) 2022-05-13

Family

ID=81484622

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210186905.7A Pending CN114495934A (zh) 2022-02-28 2022-02-28 一种语音指令响应状态的提示方法及显示设备

Country Status (1)

Country Link
CN (1) CN114495934A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023160087A1 (zh) * 2022-02-28 2023-08-31 海信视像科技股份有限公司 一种语音指令响应状态的提示方法及显示设备
CN117951037A (zh) * 2024-03-27 2024-04-30 武汉派呦科技有限公司 程序运行状态指示系统及实体代码积木块

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023160087A1 (zh) * 2022-02-28 2023-08-31 海信视像科技股份有限公司 一种语音指令响应状态的提示方法及显示设备
CN117951037A (zh) * 2024-03-27 2024-04-30 武汉派呦科技有限公司 程序运行状态指示系统及实体代码积木块

Similar Documents

Publication Publication Date Title
US10290281B2 (en) Display device and control method
EP3474273B1 (en) Electronic apparatus and method for voice recognition
CN114495934A (zh) 一种语音指令响应状态的提示方法及显示设备
WO2016157650A1 (ja) 情報処理装置、制御方法、およびプログラム
US20210109623A1 (en) Method for low power driving of display and electronic device for performing same
JP2020513584A (ja) ディスプレイ装置及びその制御方法
CN113066490B (zh) 一种唤醒响应的提示方法和显示设备
CN113542851B (zh) 一种菜单刷新方法及显示设备
CN114582343A (zh) 一种语音指令响应状态的提示方法及显示设备
WO2022105417A1 (zh) 显示设备及设备控制方法
CN112562666B (zh) 一种筛选设备的方法及服务设备
CN113342415B (zh) 一种定时任务执行方法及显示设备
CN114780010A (zh) 一种显示设备及其控制方法
CN113066491A (zh) 显示设备及语音交互方法
CN114915833B (zh) 一种显示器控制方法及显示设备、终端设备
WO2023160087A1 (zh) 一种语音指令响应状态的提示方法及显示设备
US20230117342A1 (en) Movable electronic apparatus and method of controlling the same
CN112584280A (zh) 智能设备的控制方法、装置、设备和介质
CN113038048B (zh) 一种远场语音唤醒方法和显示设备
CN111479352B (zh) 显示设备及照明控制方法
CN111901649B (zh) 视频播放方法和显示设备
US20210191351A1 (en) Method and systems for achieving collaboration between resources of iot devices
CN114630163B (zh) 显示设备及快速开机方法
CN113965791B (zh) 悬浮窗口的返回方法和显示设备
CN117812403A (zh) 显示设备以及显示设备的唤醒方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination