CN117500117B - 灯屏设备及灯效智能控制方法和相应的装置、介质 - Google Patents
灯屏设备及灯效智能控制方法和相应的装置、介质 Download PDFInfo
- Publication number
- CN117500117B CN117500117B CN202311848949.2A CN202311848949A CN117500117B CN 117500117 B CN117500117 B CN 117500117B CN 202311848949 A CN202311848949 A CN 202311848949A CN 117500117 B CN117500117 B CN 117500117B
- Authority
- CN
- China
- Prior art keywords
- lamp
- light
- intention
- screen control
- indication information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000000694 effects Effects 0.000 title claims abstract description 122
- 238000000034 method Methods 0.000 title claims abstract description 45
- 230000001795 light effect Effects 0.000 claims description 214
- 238000013461 design Methods 0.000 claims description 52
- 238000000354 decomposition reaction Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 14
- 230000015654 memory Effects 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 8
- 238000010276 construction Methods 0.000 claims description 7
- 230000003993 interaction Effects 0.000 abstract description 16
- 230000000875 corresponding effect Effects 0.000 description 209
- 239000011324 bead Substances 0.000 description 26
- 230000006870 function Effects 0.000 description 18
- 230000033001 locomotion Effects 0.000 description 12
- 238000012549 training Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 11
- 230000001276 controlling effect Effects 0.000 description 9
- 238000000605 extraction Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000008921 facial expression Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 241000282414 Homo sapiens Species 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 241001465382 Physalis alkekengi Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000037433 frameshift Effects 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000135 prohibitive effect Effects 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/105—Controlling the light source in response to determined parameters
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/155—Coordinated control of two or more light sources
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本申请涉及一种灯屏设备及灯效智能控制方法和相应的装置、介质,所述方法包括:获取用户指示信息,确定出用户指示信息相对应的灯屏控制意图;根据灯屏控制意图构造相应的灯屏控制指令;将灯屏控制指令应用于灯屏设备。本申请通过识别用户指示信息得到灯屏控制意图,根据灯屏控制意图直接构造相应的灯屏控制指令应用到灯屏设备中,使用户指示可以直接转换为指令进行应用,缩短控制灯屏设备的人机交互流程,提升灯屏设备的操控效率和智能化程度,有助于灯屏设备的推广。
Description
技术领域
本申请涉及照明控制领域,尤其涉及一种灯屏设备及灯效智能控制方法和相应的装置、介质。
背景技术
随着人们经济水平的提升,灯屏设备越来越普及。灯屏设备作为智能灯具的一种,可以起到装饰室内空间效果、展示信息的作用。灯屏设备的特点是采用视觉上粒度较大的灯珠作为基本像素,其通过其灯屏的不同实现方式表现为多种形式的产品,例如:窗帘灯、像素屏、拼接灯、边框灯等。
用户使用灯屏设备时,除了开关机之类的控制式操作外,也常需为灯屏配置灯效,为灯屏设备提供要播放的灯效相对应的灯效描述数据,此外,有时候也希望通过对已有灯效进行修改以改变灯效,实现灯效的灵活定制。目前的灯屏设备所提供的操控功能,较为传统,需要用户逐一对应操控,例如,操作相应的开关按键、在终端设备中自行编辑灯效等,其中尤其是编辑灯效的过程更为繁琐,不够智能,较为低效。
以编辑灯效描述数据为例,灯效描述数据是描述灯效运动流程的数据,根据该灯效描述数据可以生成灯效运动流程中的各个播放帧相对应的灯效控制数据。灯效描述数据通常需要预先定制,再由灯屏设备的控制器加以应用,控制灯屏设备中的灯屏播放相应的灯效。传统技术下,借助具有人机交互功能的设备供用户定制灯效,用户需要在图形用户界面中,设定描述灯效运动流程所需的各种参数,不仅效率较低,而且容易出错。理论上可以为用户提供一些预先定制好的灯效供用户选择应用,但当这些灯效越来越多时,用户理解和挑选灯效的过程,也足以让用户望而却步。
由此可见,传统的灯屏设备在操控性方面的智能化程度较低,影响灯屏设备的推广,对相关技术进行升级较为必要。
发明内容
本申请的目的在于提供一种灯屏设备及灯效智能控制方法和相应的装置、介质。
根据本申请的一个方面,提供一种灯效智能控制方法,包括:
获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图;
根据所述灯屏控制意图构造相应的灯屏控制指令;
将所述灯屏控制指令应用于灯屏设备。
根据本申请的另一方面,提供一种灯效智能控制装置,包括:
指示识别模块,设置为获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图;
指令构造模块,设置为根据所述灯屏控制意图构造相应的灯屏控制指令;
指令应用模块,设置为将所述灯屏控制指令应用于灯屏设备。
根据本申请的另一方面,提供一种灯屏设备,包括中央处理器和存储器,所述中央处理器用于调用运行存储于所述存储器中的计算机程序以执行所述灯效智能控制方法的步骤。
根据本申请的另一方面,提供一种非易失性可读存储介质,其以计算机可读指令的形式存储有依据所述的灯效智能控制方法所实现的计算机程序,所述计算机程序被计算机调用运行时,执行该方法所包括的步骤。
相对于现有技术,本申请具有多方面优势,包括但不限于:
首先,本申请先获取用户指示信息,挖掘出用户指示信息蕴含的灯屏控制意图,在明确灯屏控制意图的情况下,对应构造灯屏控制意图相对应的灯屏控制指令,将灯屏控制指令应用于灯屏设备,实现对灯屏设备的智能控制,用户无需经过冗长而又复杂的操控流程,直接发出用户指示信息,便可直达灯屏控制指令的应用,由此有效缩短从用户主观表达到灯效应用播放的交互流程,提升灯屏设备的操控交互效率,提升用户使用灯屏设备的便捷度,全面提升灯屏设备的产品使用体验。
其次,通过对用户指示信息中的用户意图进行识别,根据用户意图实现对灯屏设备的控制,可以显著提升灯屏设备的智能化应用能力,用户只需发出相应的指示,便可端到端地作用于灯屏设备,在缩短交互流程的同时,必然也能提升用户对灯屏设备的智能化能力的感知。
此外,本申请丰富了灯屏设备智能应用灯效的产品功能,实现对灯屏设备的产品升级,灯屏设备的接受度更高,更易普及,其潜在经济收益明显提升。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例中的灯屏设备的电气结构的原理示意图;
图2和图3为本申请示例性的灯屏设备的结构形态,其中,图2的灯屏被布局成窗帘灯形态,图3的灯屏被布局成拼接灯形态;
图4为本申请实施例中灯效智能控制方法的流程示意图;
图5为本申请实施例中基于语音形式的用户指示信息识别灯屏控制意图的流程示意图;
图6为本申请实施例中控制灯效设计模型根据用户指示信息确定灯效描述数据的流程示意图;
图7为本申请实施例中的灯效智能控制装置的结构示意图;
图8为本申请实施例中的计算机设备的结构示意图。
具体实施方式
请参阅图1,本申请一种实施例提供的一种灯屏设备的结构示意图中可以看出,所述灯屏设备包括控制器1和灯屏2,灯屏2与控制器1电性连接,以便接受控制器1中运行的计算机程序的控制协同工作,实现灯效播放。
控制器1通常包括控制芯片、通信组件以及总线接头,在一些实施例中,控制器1还可以按需配置电源适配器、控制面板、显示屏等。
电源适配器主要用于将市电转换为直流电,以便为整个灯屏设备供电。控制芯片可采用各种嵌入式芯片实现,例如蓝牙SoC(System on Chip,系统级芯片)、WiFi SoC、MCU(Micro Controller Unit,微控制器)、DSP(Digital Signal Processing,数字信号处理)等各种类型的芯片,控制芯片通常包括中央处理器和存储器,存储器和中央处理器分别用于存储和执行程序指令,以实现相应的功能。以上各种类型的控制芯片,可以自带通信组件,也可按需额外配置通信组件。通信组件可以用于与外部设备通信,例如,可以与个人计算机或各种智能手机之类的终端设备通信,以便用户通过其终端设备下达各种配置指令之后,控制器1的控制芯片可以通过通信组件接收配置指令,完成基础配置,以便控制灯屏工作。此外,控制器1还可以通过通信组件获取封装了多个灯效图层的灯效应用包。总线接头主要用于为接入总线的灯屏2接入电源并提供灯效播放指令,因而对应提供电源总线和信号总线相对应的针脚,由此,当灯屏2需要接入控制器1时,通过灯屏相应的接头与所述总线接头连接即可。控制面板通常提供一个或多个按键,用于对控制器1实施开关控制、选择各种预设的灯效控制方式等等。显示屏可用于显示各种控制信息,以便与所述控制面板中的按键相配合,支持人机交互功能的实现。一些实施例中,控制面板与所述显示屏可以集成到同一触控显示屏中。
灯屏的具体样态可以根据实际情况设计,较为常见的产品形态包括但不限于窗帘灯、像素屏、拼接灯等。
例如,图2中的灯屏被布局成窗帘灯的样态,该灯屏2包括连接在总线上的多条发光灯带21,每条发光灯带21都包括多个串接而成的灯珠210,每个灯珠210作为一个发光单元,并且,通常各条发光灯带21的灯珠210数量相同,而且等间距排列。作为窗帘灯使用的灯屏2在被使用时,通常按照如图2所示的布局展开其各条发光灯带21,由此使全部发光灯带21中的全部灯珠按照阵列的方式进行布局,形成灯珠矩阵结构,由于全部灯珠协同发光时能够提供画幅效果,所以,整个灯珠矩阵结构所在的面便构成一个显示画幅4,当播放灯效时,便可以在该显示画幅4范围内形成一定的图案效果。
每个发光灯带21可由多个灯珠210串接而成,每个灯珠210是一个发光单元,同一发光灯带21中的各个灯珠210由接入总线的同一组线缆传输工作电流,同一发光灯带21的各个灯珠210之间,在电性连接关系上,可以采用并联的方式进行连接。一种实施例中,同一灯珠矩阵结构中的各个发光灯带21,可以沿总线方向等间距设置,且各个发光灯带21的灯珠210之间,在数量和位置上,也对应设置,这样,整个显示画幅4在远距离观看其发光效果时,起到类似屏幕的作用,能够在人眼视觉上形成图案效果。
灯屏2的每条发光灯带21的每个灯珠210中,也设置有相应的控制芯片,该控制芯片可以按照前文所揭示进行选型,或者选取其它更为经济的控制芯片,其作用主要在于能够从灯效播放指令中提取出与本灯珠210相对应的发光颜色值,控制本灯珠210内的发光元件发出相应的色光。发光元件可以是LED灯。
像素屏的实现原理基本与窗帘灯以上的实现原理相同,但像素屏会提供用来固定各个发光单元的框架,将各个发光单元按照行列矩阵的方式排布在同一矩形框架内,得到更近似于日常显示屏幕的产品形态效果。像素屏与窗帘灯同理,可以按照多条发光灯带进行并排的结构来组织各个发光单元,且可应用窗帘相同的控制方式进行控制,因此恕不再赘述。
图3进一步揭示本申请的灯屏设备中的灯屏的另一种形态,其本质上是一种拼接灯,拼接灯中的灯屏2由一个或多个灯块22构成。拼接灯的灯块22内部,包括标准化设置在灯块的不同位置的多个发光单元(未示出),每个发光单元也可以设置相应的发光控制芯片,用来解析相应的控制数据而生成相应的发光控制信号,通过该发光控制信号控制相应的发光单元中的发光元件按照特定的发光颜色值进行发光。而灯块作为一个整体,也可以设置一个独立的控制芯片作为控制单元来对其中的全部发光单元进行发光控制,这个独立控制单元可以向各个发光单元的控制芯片传输相应的时序控制数据来达到集中控制的目的,当然,整个灯块也可以由单个控制芯片来直接控制各个发光单元以达到相应的灯效播放目的。这主要视灯块及其发光单元所采用的控制芯片的能力而灵活设计,不影响本申请的创造精神的体现。根据这些原理可知,对于一个灯块来说,既可以统一控制其全部发光单元同时发光,也可以把控制粒度具体到各个发光单元,控制粒度越精细,所生成的灯效便越细腻。
不同灯块形态的灯块1之间,可以相互拼接,例如在六边形灯块的外围任意一条结构边处邻接一个四边形的灯块,不难理解,通过搭配不同灯块形态的灯块,可以构造出更为丰富的面阵图案。当需要控制各个灯块播放相应的灯效时,通过协调控制各个灯块的各个发光单元发光,便可呈现一个显示画幅4,展示相应的灯效。
本申请的灯屏设备,当其上电时,控制器的控制芯片可以从存储器中调用执行计算机程序,通过该计算机程序默认的初始化流程,为灯屏上电并实现初始化,完成对灯屏和其他硬件设备的驱动配置。
一种实施例中,控制器在启动灯屏时,可以先向灯屏发送自检指令,驱动灯屏的各个发光灯带或灯块中的各个灯珠返回其在发光灯带或灯块中的位置信息。每个灯珠都设置有相应的控制芯片用于与控制器中的控制芯片进行数据通信,因而可以按照串行通信协议,将灯珠自身的特征信息与其他灯珠的特征信息按序串接,实现对自身的位置信息的表征。控制器与灯珠之间执行的串行通信协议,可以是IIC(Inter-Integrated Circuit,集成电路总线)、SPI(serial peripheral interface,串行外设接口)、UART(UniversalAsynchronous Receiver-Transmitter, 通用异步收发器)中任意一项。控制器从总线获得各个灯珠自检返回的结果数据后,对其进行解析,根据每个灯珠的特征信息在结果数据中的排序,便可确定各个灯珠在整个灯屏所呈现的显示画幅4中的位置,由此可以将每个灯珠作为一个发光单元,可以理解为一个基本像素,可将各个灯珠的位置信息构造为光源位置分布信息,后续控制器在构造灯效控制数据时,可以根据光源位置分布信息中各个灯珠也即各个发光单元的位置信息,按照实际需要,为每个基本像素设置其相应的发光颜色值。
一些实施例中,本申请的控制器2可以在独立的计算机设备中实现,只要该计算机设备配备控制器2相应的硬件,以及将控制器2相应的业务逻辑包括本申请的方法所执行的业务逻辑,实现为计算机程序安装在该计算机设备中运行即可。当控制器2在计算机设备中实现时,可以共用计算机设备固有的各种资源可以节省整体实现成本。此处所称的计算机设备,可以是任意供用户使用的终端设备,例如智能手机、个人计算机、笔记本电脑,平板电脑等。
根据以上灯屏设备的产品架构和工作原理,本申请的灯效智能控制方法,可以实现为计算机程序产品,存储于灯屏设备的控制器的存储器中,由中央处理器从该存储器中调用后运行,从而控制灯屏播放相应的灯效。
请参阅图4,在一个实施例中,本申请的灯效智能控制方法,可以按需将其各个步骤分散或集中部署在终端设备和/或控制器中运行,包括:
步骤S5100、获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图;
用户指示信息可以是任意模态的数据,包括但不限于文本、语音、图像等任意一种或多种模态。根据模态的不同,可以采用各种不同的方式获取该用户指示信息。例如,可以在终端设备或控制器的图形用户界面中提供对话界面来获取用户以文本模态或语音模态输入的用户指示信息,可以通过终端设备或控制器的摄像单元获取用户实时活动相对应的语音模态和/或图像模态相对应的语音数据和/或图像数据作为用户指示信息等。用户指示信息可承载或蕴含用户所表达的灯屏控制意图,该灯屏控制意图可以通过对用户指示信息进行识别来确定。
一种实施例中,可以将任意模态的用户指示信息,转换为文本格式数据,通过对文本格式数据提取关键词,以精确匹配或模糊匹配的方式,确定该关键词相对应的灯屏控制意图。
另一实施例中,可以根据用户指示信息相对应的模态所构建且预先对应训练至收敛的深度学习模型,根据该用户指示信息的深层语义信息,识别该用户指示信息中的灯屏控制意图。
为此,预先规划有一个灯屏控制意图分类体系,该分类体系中,对应灯屏设备的各种设置功能而对应设置相应的灯屏控制意图,这些灯屏控制意图可以进行单级分类,也可以进行多级分类。例如,一种实施例中,将各个灯屏控制意图划分为数个一级类型,针对其中至少一个一级类型中的各个灯屏控制意图,还可以进一步做二级分类。无论如何,一个用户指示信息通常可以至少映射到至少一个灯屏控制意图,从而可以确定用户指示信息相对应的灯屏控制意图。
示例性的一个灯屏控制意图分类体现中,包括两个类型,如功能型灯屏控制意图和灯效型灯屏控制意图,其中,功能型灯屏控制意图可以包括灯屏设备开机或关机相对应的灯屏控制意图,灯效型灯屏控制意图可以包括灯效匹配型灯屏控制意图和灯效编辑型灯屏控制意图。通过该示例可见,灯屏控制意图可以进行灵活分类规划,并不影响本申请的创造精神的体现。
一种实施例中,为提升用户指示信息与灯屏控制指令的匹配效率,对于同一个用户指示信息,将其唯一性地映射到单个灯屏控制意图,可以在一定程度上避免对用户指示信息的理解出现歧义。
另一实施例中,也允许用户指示信息中包含多个灯屏控制意图,为此,先将用户指示信息提交至大语言模型进行任务分解,以分解其中可能包含的多个任务相对应的部分,每部分再作为一个细分任务相对应的用户指示信息,然后,根据各个细分任务相对应的用户指示信息确定其相应的灯屏控制意图,以便实现对用户指示信息中包含的多个灯屏控制意图的分别理解和先后应用。
用来识别用户指示信息中的深度学习模型,可以适应用户指示信息所使用的模态,采用相应的基础网络来搭建和训练,使其习得根据给定的用户指示信息,在灯屏控制意图分类体系中确定出该用户指示信息相对应的灯屏控制意图,成为意图识别模型,投入推理阶段使用,用于为用户指示信息确定其相应的灯屏控制意图。
一种实施例中,意图识别模型基于文本特征提取模型后接分类器实现,该文本特征提取模型可以是各种适于提取文本格式数据的深层语义信息的成熟模型,例如可以从RNN(Recurrent Neural Network,循环神经网络)、LSTM(Long Short-Term Memory,长短时记忆模型)、Transformer模型的编码器、Bert(Bidirectional Encoder Representationsfrom Transformers,来自变换器的双向编码器) 等等模型中选型。实际上,任何已知或未知的,适于为文本格式数据提取其深层语义信息以实现语义表示的模型,均可作为本申请的意图识别模型中的文本特征提取模型使用。使用这个意图识别模型时,将用户指示信息转换成文本格式数据,例如对于语音形式的用户指示信息,可以对其进行语音到文本的转换得到其文本格式数据;对于图像形式的用户指示信息例如人脸表情,同样可以借助大语言模型将其转换为描述人脸表情相对应的情绪的文本格式数据,据此,便可将文本格式数据编码输入该意图识别模型的文本特征提取模型中用于提取深层语义信息,然后根据深层语义信息进行分类,得到相应的灯屏控制意图。
另一实施例中,意图识别模型可以联合文本特征提取模型和图像特征提取模型,再后接分类器实现。其中的图像特征提取模型,可以从CNN(Convolutional NeuralNetwork,卷积神经网络)以及任何以CNN为基础的适于为图像提取深层语义信息实现特征表示的模型中选型。由此,可以将用户的发言语音数据转换为文本格式数据输入文本特征提取模型提取其深层语义信息,将用户的人脸表情图像输入图像特征提取模型提取其深层语义信息,将这两个深层语义信息融合为综合特征信息,再由分类器进行分类确定其相应的灯屏控制意图。藉此,可以借助终端设备或控制器上安装的摄像单元,对用户实时活动的影音采集,将其实时活动所产生的影音数据理解为用户指示信息,根据综合了用户的发言语音数据和人脸表情图像的综合特征信息,更为准确地确定用户所要实现的灯屏控制意图。
本申请中用来确定用户指示信息相对应的灯屏控制意图的意图识别模型,可以事先训练,在训练时,对应预备一个样本数据集,其中包含足以将意图识别模型训练至收敛状态的训练样本和监督标签对,训练样本对应意图识别模型所能处理的信息模态而提供相应模态的数据,监督标签则用于指定训练样本相匹配的灯屏意图模型的标签。意图识别模型的分类器,事先按照预设的灯屏控制意图分类体系中的数目配置其分类空间,使其具有相应的分类数目,监督标签相应也就指示出一个训练样本在该分类空间中相对应的分类。通过迭代调用样本数据集中的各个训练样本对该意图识别模型实施训练,由意图识别模型的分类器得到将训练样本的深层语义信息映射到分类空间各个分类的概率分布,利用相应的监督标签计算该概率分布的分类损失,再根据分类损失对整个意图识别模型实施梯度更新,由此不断迭代,最终可使分类损失降到表征收敛的预设阈值的范围内,或者完成有限次训练,此时视为已训练至收敛,即可完成对意图识别模型的训练。
当用户指示信息输入意图识别模型之后,提取出其中的深层语义信息,根据深层语义信息映射到分类空间之后得到的各个分类的概率,确定其中概率最大的分类即为该用户指示信息相对应的灯屏控制意图,由此便实现利用意图识别模型确定用户指示信息相对应的灯屏控制意图。在一些实施例中,为提升确定灯屏控制意图的准确度,可以设定一个门槛值,当一个用户指示信息在分类空间的各个分类中得到的最大概率超过该门槛值时,才将这个最大概率相对应的分类所指向的灯屏控制意图确定为该用户指示信息相对应的灯屏控制意图,由此可以确保更准确地理解用户实际意图,避免误解后产生的误操作。
步骤S5200、根据所述灯屏控制意图构造相应的灯屏控制指令;
确定了用户指示信息相对应的一个或多个灯屏控制意图之后,针对每个灯屏控制意图,可以构造其相对应的灯屏控制指令。灯屏控制指令是可以被灯屏设备的控制器解析和应用的指令数据,当灯屏控制指令是在终端设备中产生时,可以由终端设备将其传输给灯屏设备的控制器,由控制器接收后进行解析和应用;当灯屏控制指令是在控制器中产生时,控制器直接调用进行解析和应用即可。
通常,根据灯效控制意图不同,会有相应不同格式的灯屏控制指令。例如,当灯屏控制意图是要对灯屏设备实施关灯操作时,其对应的灯屏控制指令无需携带特殊参数,只是一个单纯的控制命令,控制器直接执行该控制命令即可实现关机的意图。当灯屏控制意图是要将某种灯效应用到灯屏设备进行播放时,灯屏控制指令除了可以提供指示应用新灯效的控制命令之外,还需要携带这个灯效的灯效描述数据作为命令数据,有着与控制关机不同的格式。可见,对应不同灯屏控制意图,可以有其相应不同的控制命令,根据控制命令的不同,部分控制命令还可以关联相应的命令数据,由此可见,可以事先根据所采用的控制命令及其是否携带哪一种命令数据来构造灯屏控制指令的各种指令规范,在需要构造某个灯屏控制意图相对应的灯屏控制指令时,采用该灯屏控制意图相对应的控制命令所属的指令规范,根据该指令规范便可以构造出相应的灯屏控制指令。由此可见,根据灯屏控制意图构造出来的灯屏控制指令,视灯屏控制意图不同,可能单独包含控制命令,也可能同时包含控制命令以及该控制命令相对应的命令数据,此外,在一些特殊情况下,控制命令也可以缺省,只在灯屏控制指令中包含命令数据,只要控制器可以对应解析为相应的控制命令即可。
灯屏控制意图与用于构造灯屏控制指令的指令规范之间,可以基于灯屏控制意图与控制命令之间的对应关系建立映射关系,以便可以根据灯屏控制意图唯一性地调用相应一个控制命令所属的指令规范,从而构成出相应的灯屏控制指令。当然,在某些实施例中,也不包含多个灯屏控制意图可能共享同一指令规范,只要不同灯屏控制意图提供不同的命令数据即可实现彼此灯屏控制指令的差异化。
在一些实施例中,根据灯屏控制意图构造相应的灯屏控制指令时,还包括根据用户指示信息确定出灯屏控制指令的控制命令所需的命令数据。具体而言,用户指示信息未必能清晰地提供相关命令数据,这种情况下,可以借助技术手段来进一步厘清,例如:
一种实施例中,当明确灯屏控制意图是匹配事先定制的灯效模板时,便明确了相应的控制命令,需要获取该控制命令相应的命令数据,为此,在用户指示信息的文本格式数据的基础上,对其进行分词处理,得到其中的各个分词,然后将各个分词与预设的灯效词典进行匹配,确定出命中灯效词典的部分分词作为有效关键词,获取这些有效关键词相对应预设的灯效模板标签,并调用这个灯效模板标签的灯效描述数据,作为构造灯屏控制指令所需的命令数据。
根据上一实施例变通的实施例中,可以将灯效模板标签及其相应的关键词集先投喂给大语言模型,然后将用户指示信息输入大语言模型,由其根据进行语义推理,确定用户指示信息相对应的目标关键词集,然后返回该目标关键词集相对应的灯效模板标签,以便调用获取该灯效模板标签相对应的灯效描述数据作为命令数据。
另一实施例中,当明确灯屏控制意图是要对已经确定的灯效模板进行灯效参数的编辑时,便明确了相应的控制命令,需要获取该控制命令相应的命令数据,为此,在用户指示信息的文本格式数据的基础上,可以借助大语言模型之类的技术手段对用户指示信息进行语义推理,根据用户指示信息确定相应的灯效参数,对已经确定的灯效模板进行修改更新其灯效描述数据,将更新后的灯效描述数据作为构造灯屏控制指令所需的命令数据。
根据上一实施例变通的实施例中,考虑到灯屏设备可以具备根据给定的灯效参数自行修改其已应用的灯效描述数据的能力,灯屏控制意图相应的控制命令可以指示控制器自行修改灯效描述数据中的灯效参数,据此,在根据用户指示信息进行语义推理得到相应的灯效参数之后,可以直接将该灯效参数作为相应的命令数据,根据该控制命令和命令数据构造相应的灯屏控制指令作用于控制器,由控制器自行根据命令数据中的灯效参数对已经应用的灯效描述数据进行相应灯效参数的修改应用。
步骤S5300、将所述灯屏控制指令应用于灯屏设备。
构造出灯屏控制指令后,可以将其应用于灯屏设备中。灯屏设备的控制器对该灯屏控制指令进行解析,识别出其中的指令数据,例如控制命令、命令数据等,根据不同的控制命令做相应的控制处理。
当灯屏控制指令仅包含控制命令时,直接执行相应的控制命令即可。例如,该控制命令指示开机或关机时,控制器可以对应控制灯屏设备中的灯屏相应亮屏工作或息屏关停。
当灯屏控制指令包含控制命令和命令数据时,同样也根据该控制命令对其命令数据进行相应的应用。例如,控制命令指示应用命令数据中指定的灯效描述数据时,控制器可以将该灯效描述数据转换为其所描述的灯效运动流程的多个播放帧相对应的灯效控制数据,传输给灯屏,以控制灯屏中的各个发光单元按照各个播放帧的灯效控制数据的作用而协同发光呈现相应的灯效运动流程。
当灯屏控制指令包含控制命令和命令数据时,而且该控制命令指示对控制器已应用的灯效描述数据进行参数修改时,控制器便将该命令数据视为灯效参数,对正在应用的灯效描述数据中的相应参数进行修改,以更新该灯效描述数据,然后重新生成各个播放帧相对应的灯效控制数据,控制灯屏播放相应的灯效运动流程。
根据以上实施例可知,本申请具有多方面优势,包括但不限于:
首先,本申请先获取用户指示信息,挖掘出用户指示信息蕴含的灯屏控制意图,在明确灯屏控制意图的情况下,对应构造灯屏控制意图相对应的灯屏控制指令,将灯屏控制指令应用于灯屏设备,实现对灯屏设备的智能控制,用户无需经过冗长而又复杂的操控流程,直接发出用户指示信息,便可直达灯屏控制指令的应用,由此有效缩短从用户主观表达到灯效应用播放的交互流程,提升灯屏设备的操控交互效率,提升用户使用灯屏设备的便捷度,全面提升灯屏设备的产品使用体验。
其次,通过对用户指示信息中的用户意图进行识别,根据用户意图实现对灯屏设备的控制,可以显著提升灯屏设备的智能化应用能力,用户只需发出相应的指示,便可端到端地作用于灯屏设备,在缩短交互流程的同时,必然也能提升用户对灯屏设备的智能化能力的感知。
此外,本申请丰富了灯屏设备智能应用灯效的产品功能,实现对灯屏设备的产品升级,灯屏设备的接受度更高,更易普及,其潜在经济收益明显提升。
在本申请的方法的任意实施例的基础上,请参阅图5,获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图,包括:
步骤S5110、显示对话界面,基于该对话界面获取以语音形式输入的用户指示信息;
当终端设备或灯屏设备提供有人机交互功能时,可以使用该人机交互功能提供对话界面来获取用户指示信息。用户可以通过在对话界面中触控相应的按键实现语音输入,后台负责采集用户以语音形式输入的语音数据,对其进行必要的语音预处理,例如,对其进行叠加帧移实现分帧,进行快速傅里叶变换,提出其频谱特征,得到相应的语音特征序列,完成对语音的编码,以备进行语音到文本的转换。
步骤S5120、将所述用户指示信息转换为文本格式数据;
得到用户指示信息的语音特征序列后,将该语音特征序列输入语音转文本模型对该语音数据进行转换,由该语音转文本模型对该语音特征序列进行编码以提取其深层语义信息,然后根据深层语义信息解码得到相应的文本格式数据,从而实现将用户指示信息从其语音数据的模态转换到文本的模态。可见,用户可以自然交流的方式,通过语音提供用户指示信息。
步骤S5130、调用意图识别模型确定所述文本格式数据所对应的灯屏控制意图。
进而,利用本申请中适于根据文本格式数据识别灯屏控制意图的意图识别模型,将该文本格式数据编码后输入该意图识别模型,该意图识别模型通过文本特征提取模型对该文本格式数据进行特征表示后,得到其深层语义信息,然后将其映射到分类空间得到各个灯屏控制意图相对应的分类概率,确定其中分类概率最大者,或者分类概率最大且高于预设门槛值者,作为用户指示信息相对应的灯屏控制意图,从而完成对用户指示信息的意图识别。
根据以上实施例可见,通过语音形式接收用户指示信息,可以提供更为便捷的交流方式,当得到用户的语音数据后,又先将其转换成文本格式数据,利用相匹配的意图识别模型以文本格式数据为依据识别出灯屏控制意图,基于文本进行意图识别的意图识别模型的运算量低,运算效率高,更容易部署到终端设备或者灯屏设备的控制器中,使用户使用相应的功能时,不必经历漫长时间的响应,使用户对灯屏设备的操控更为自然便捷,提高用户使用相应功能的意愿,强化本申请所改进的功能在产品使用现实中能够突显其实用性。
在本申请的方法的任意实施例的基础上,确定出所述用户指示信息相对应的灯屏控制意图,包括:
步骤S5131、对所述用户指示信息进行任务分解,确定出其中包含的各个任务相对应的用户指示信息;
生活中常见的各种智能化设备,在与用户交互时,常使用每次交互对应一次指示的原则来实现相关功能,这样的交互方式其实不太符合人类的交流习惯。为此,本实施例进一步实现支持用户在单次的用户指示信息中布置多个任务,也即允许用户在其一次提供的用户指示信息中包含多个细分任务相对应的用户指示信息,通过对单次提供的用户指示信息进行任务分解,来确定各个细分任务相对应的用户指示信息,以便生成批量的灯屏控制指令,对灯屏设备实施批量控制。
一种实施例中,将用户一次性输入的用户指示信息的文本格式数据作为待分解文本,调用任务分解模板,将该待分解文本添加到该任务分解模板中得到任务分解指示数据,任务分解模板包含有指按照待分解文本中的任务独立性将其分割为多个任务相对应的用户指示信息的指示信息,然后,将任务分解指示数据提交给大语言模型,由大语言模型根据该任务分解指示数据分解出多个细分任务,确定每个细分任务在待分解文本中相对应的文本作为该细分任务相对应的用户指示信息,由此,便可获得大语言模型分解用户一次性输入的用户指示信息中的多个细分任务相对应的多个用户指示信息。
一个实施例中,大语言模型可以按照其多个任务之间的执行逻辑的理解,对各个任务相对应的用户指示信息进行灵活的调整,且将各个任务相对应的用户指示信息进行排序后返回,后续便可按照这个顺序实施相应的灯屏控制指令应用。
步骤S5132、调用意图识别模型,分别针对每个任务相对应的用户指示信息确定每个任务相对应的灯屏控制意图。
在确定出各个任务相对应的用户指示信息的情况下,对应一个任务相应的用户指示信息,均可确定其相对应的灯屏控制意图,以便后续进一步构造其相应的灯屏控制指令。据此,可以分别将各个任务相对应的用户指示信息输入意图识别模型中,由意图识别模型确定出其相应的灯屏控制意图即可。然后,通过本申请步骤S1200对各个任务相对应的灯屏控制意图构造相应的灯屏控制指令,在步骤S1300中按序应用各个灯屏控制指令,便可实现根据用户一次性输入的用户指示信息批量复合控制灯屏设备。
一个示例性的应用场景中,用户指示信息可以是以下的文本格式数据:“我现在心情很好,希望你帮我设计一个灯效,注意我不喜欢紫色,搞好帮我直接播放灯效”,据此,大语言模型将其理解为包含如下任务及各个任务具体对应的语句所构成的用户指示信息:
1:搞好帮我直接播放灯效;
2:我现在心情很好,希望你帮我设计一个灯效;
3:注意我不喜欢紫色;
据此,当对以上各个任务相对应的用户指示信息识别灯屏控制意图时,得到的结果表示如下:
1:灯屏控制意图=灯屏开机;
2:灯屏控制意图=匹配灯效模板;
3:灯屏控制意图=修改灯效模板;
后续,在结合各个任务相应的用户指示信息确定出各个灯效控制意图的灯效控制指令之后,便可按照以上的排序,有序执行各个任务相应的灯效控制指令。当然,在构造以上示例性的应用场景中各个灯屏控制意图时,尤其是其中的第2、3项时,还可以调用大语言模型结合具体任务的用户指示信息进一步确定灯效描述数据作为命令数据,可参阅前文所揭示的内容,在此不予赘述。
由以上实施例可知,本申请可以进一步提供任务分解能力,对于用户原始输入的用户指示信息包含有多个任务的情况,将用户指示信息分解为多个任务相对应的用户指示信息,根据各个任务相对应的用户指示信息具体确定其灯屏控制意图,并相应构造灯屏控制指令,由此实现支持用户在一次交互中包含多个主观控制意愿,并进行相应的批处理执行,进一步压缩人机交互流程,提升灯屏设备控制的智能化程度,除低用户操控配置灯屏设备的复杂度。
在本申请的方法的任意实施例的基础上,根据所述灯屏控制意图构造相应的灯屏控制指令,包括:
步骤S5210、当所述灯屏控制意图属于第一类型意图时,确定所述灯屏控制意图相对应的灯屏控制指令;
当意图识别模型根据给定的用户指示信息确定出其相应的灯屏控制意图之后,如果该灯屏控制意图是属于本申请设定的第一类型意图,也即功能型灯屏控制意图,诸如控制灯屏设备开灯、关灯之类的控制意图,表示为这些灯屏控制意图构造相应的灯屏控制指令时,无需携带其他数据。据此,本实施例中,事先将这类灯屏控制指令的控制命令相对应的指令规范将各个灯屏控制指令封装好与其相应的灯屏控制意图进行映射存储,在确定出某个灯屏控制意图属于第一类型意图时,直接调用这个灯屏控制意图相映射的灯屏控制指令提供给灯屏指令进行应用即可。
步骤S5220、当所述灯屏控制意图属于第二类型意图时,调用灯效设计模型获取所述用户指示信息相对应的灯效描述数据,根据所述灯效描述数据构造相应的灯屏控制指令。
如果灯屏控制意图不属于第一类型意图,而属于本申请所界定的第二类型意图,也即灯效型灯屏控制意图,此类灯屏控制意图往往需要一并在其相应的灯屏控制指令中包含命令数据,所以,需要进一步调用灯效设计模型来获取灯屏控制意图相匹配的灯效描述数据以便作为为相应的灯屏控制指令提供所需的命令数据。
本申请的灯效设计模型,可以是大语言模型,或者其他专门训练的具有与大语言模型相应能力的模型。为使灯效设计模型能够提供灯屏控制意图相对应的灯效描述数据,可以将用户指示信息输入该灯效设计模型,灯效设计模型基于对用户指示信息的语义理解,便可直接或间接地确定出该灯屏控制意图相对应的灯效描述数据,便可将该灯效描述数据作为该灯屏控制意图相对应的灯屏控制指令中的控制命令所需的命令数据,而构造出该灯屏控制指令。
根据以上实施例可知,本申请既能够支持功能型灯屏控制意图,又能够支持灯效型灯屏控制意图,实现对灯屏设备的各种功能的操控意图的全面支持,使用户只需借助本申请所实现的入口便捷提供用户指示信息,便可实现对灯屏设备的各种功能的操作,全面提升灯屏设备在操控方面的智能化程度。
在本申请的方法的任意实施例的基础上,调用灯效设计模型获取所述用户指示信息相对应的灯效描述数据,根据所述灯效描述数据构造相应的灯屏控制指令,包括:
步骤S5221、当所述灯屏控制意图属于第一目标意图时,根据所述用户指示信息调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据;
本实施例中,确定了灯屏控制意图之后,先确认该灯屏控制意图是否属于第一目标意图,第一目标意图可以是表示根据用户指示信息直接生成灯效描述数据,然后,根据用户指示信息对灯效设计模型加以调用,由灯效设计模型根据该用户指示信息直接生成相应的灯效描述数据,利用灯效设计模型强大的语义推理能力,完成灯效描述数据的一站式生成。或者,也可以通过灯效设计模型根据用户指示信息从一个预设的灯效模板库中进行语义匹配以得到目标灯效模板,返回目标灯效模板相对应的灯效模板标签,根据该灯效模板标签调用相应的灯效描述数据。
步骤S5222、当所述灯屏控制意图属于第二目标意图时,获取所述用户指示信息所包含的灯效命令信息,根据所述灯效命令信息调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据。
而当灯效控制意图属于第二目标意图时,表示用户指示信息中包含有灯效命令信息,例如,具有修改灯效的个别参数相对应的命令信息,据此,可以从用户指示信息中提取相应的灯效命令信息,调用灯效命令信息相对应的灯效编辑指示模板,将该灯效命令信息添加到该灯效编辑指示模板中,成为灯效编辑指示信息,输入至灯效设计模型,由该灯效设计模型根据该灯效编辑指示信息中,通过对预先指定的灯效描述数据进行修改完成编辑,得到更新后的灯效描述数据。
或者,变通的实施例中,可以由灯效设计模型根据灯效编辑指示模板中携带的灯效命令信息,生成目标灯效所需对应修改的灯效参数,获取返回的该灯效参数,再根据该灯效参数对目标灯效模板进行相应的修改而得到灯效描述数据。
根据以上实施例可见,在利用灯效设计模型获取用户指示信息相对应的灯效描述数据时,可以适应灯屏控制意图的不同,而按照多种不同的方式来直接或间接地确定灯效描述数据,实现对灯效描述数据的编辑。由于灯效设计模型是基于大语言模型实现的,具备强大的语义推理能力,因而可以适应不同条件产生准确的结果数据,实现对灯效描述数据的有效获取或修改,免除用户自定义灯效描述数据的麻烦,更为智能。
在本申请的方法的任意实施例的基础上,请参阅图6,调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据,包括:
步骤S6100、将附带查询业务逻辑的灯效模板库输入所述灯效设计模型,所述灯效模板库包含多个灯效模板标签;
为了使灯效设计模型可以对应用户指示信息提供相应的灯效描述数据,事先预备一个灯效模板库,在其中表示出各个灯效模板的描述信息,该描述信息可由多个关键词构成,并且,为每个灯效模板关联一个相应的灯效模板标签,此外,还为该灯效模板库附带提供一个查询业务逻辑,以指示灯效设计模型应用对该灯效模板库进行查询的规则,该规则中指示灯效设计模型根据后续给出的用户指示信息执行相应的查询。然后,事先将附带了查询业务逻辑的灯效模板库输入灯效设计模型中,确保灯效设计模型能够理解该查询业务逻辑。
步骤S6200、将所述用户指示信息输入所述灯效设计模型,根据所述查询业务逻辑,通过所述灯效设计模型确定出与所述用户指示信息相匹配的所述灯效模板标签;
由于事先已经将查询业务逻辑投喂给灯效设计模型,当需要确定灯屏控制意图所需的灯效描述数据时,将用户指示信息直接输入至灯效设计模型中,灯效设计模型按照其早先获得的查询业务逻辑,根据该用户指示信息,在灯效模型库中执行查询,确定出相应的灯效模板,返回相应的灯效模板标签。
一种实施例中,在查询业务逻辑的指示下,灯效设计模型先对用户指示信息进行分词,提取出其中的一个或多个关键词,然后,根据该些关键词在各个灯效模板中的描述信息中进行匹配,确定出与这些提取出的关键词最匹配的灯效模板以返回其灯效模板标签。
步骤S6300、获取所述灯效模板标签相对应的灯效模板的灯效描述数据。
灯效模板库中的各个灯效模板的灯效描述数据可以关联其灯效模板标签预先存储在云端服务器或本地存储器中,当得到灯效设计模型返回的灯效模板标签之后,利用该灯效模板标签,直接调用获取该灯效模板标签相对应的灯效描述数据即可。
根据以上实施例可知,事先预先灯效模板库,并为其关联预设的查询业务逻辑,可以增强灯效设计模型的服务能力,使灯效设计模型可以根据查询业务逻辑为用户指示信息匹配出灯效模板标签,进一步可根据灯效模板标签获取相应的灯效描述数据,这样,在用户进行操控的过程中,灯效模板库及其查询业务逻辑不必重复输入,只需一次输入便可响应海量的交互,可以节省后台调用灯效设计模型的成本。
在本申请的方法的任意实施例的基础上,将所述灯屏控制指令应用于灯屏设备,包括:
步骤S5310、在对话界面中显示所述灯屏控制指令相对应的应用控件;
当确定出灯屏控制指令后,可以对应该灯屏控制指令生成相应的应用控件,将该应用控制显示到终端设备或控制器的对话界面中,以方便用户进行确认。
步骤S5320、响应作用于所述应用控件的触发事件,将所述灯屏控制指令传输给灯屏设备,驱动所述灯屏设备根据所述灯屏控制指令所封装的灯效描述数据播放相应的灯效。
用户可以触控该应用控件,或者以语音指令表示触控该应用控件,以产生该应用控件的触发事件,后台响应该触发事件,便将该应用控件相对应的灯屏控制指令传输给灯屏设备,在该灯屏控制指令的作用下,灯屏设备中的控制器解析该灯屏控制指令,提取出其中的控制命令实施相应的控制。当控制命令表示应用新灯效时,一般还会携带相应的灯效描述数据,据此,还可以从灯屏控制指令中提取出相应的灯效描述数据,根据该灯效描述数据生成其所描述的灯效运动流程中各个播放帧相对应的灯效控制数据,然后逐一发送至灯屏中,以控制灯屏显示各个播放帧相对应的画面,从而在灯屏中呈现相应的灯效运动流程。
由以上实施例可知,通过对话界面提供应用控件给用户确认,使用户可以感知智能化处理后的结果,由用户确认是否应用相应的灯屏控制指令,保留用户的最终决策权,可确保灯效操控更为有效,避免错误操作。
在本申请的方法的任意实施例的基础上,将所述灯屏控制指令应用于灯屏设备之后,在控制器一侧,可以包括:
步骤S7100、解析所述灯屏控制指令,以得到其中的灯效描述数据;
控制器对灯屏控制指令进行解析,提取出其中的命令数据,该命令数据为灯效描述数据,此时,无论该灯屏控制指令中是否携带应用新灯效相应的控制命令,均可将该灯屏控制指令理解为要应用该灯效描述数据所定义的新灯效。
步骤S7200、根据所述灯效描述数据生成相应的灯效控制数据;
灯效描述数据通过运动速度、灯光色彩、运动方式等参数的设置,描述了灯效运动流程,据此,可根据这些参数,将灯效描述数据转换为多个播放帧相对应的灯效控制数据,在转换时,可以根据氛围灯设备中的灯屏的光源位置布局信息来确定每个播放帧对应灯屏中各个发光单元所设置的控制数据,由各个发光单元的控制数据构成同一播放帧的灯效控制数据,然后,按照时间顺序将各个播放帧的灯效控制数据添加到控制队列。
步骤S7300、根据所述灯效控制数据控制所述灯屏设备中的灯屏播放灯效。
控制队列按照先入先出的机制,以轮流播放的方式,动态出列各个播放帧相对应的灯效控制数据,所出列的灯效控制数据被传输给灯屏设备中的灯屏,灯屏中的每个发光单元从灯效控制数据中提取自身相对应的控制数据,控制其内部的发元元件发出相应的色光,各个发光单元均按照这种方式工作,从而可以根据灯效控制数据实现其相应的播放帧的效果呈现,各个播放帧轮流呈现,便在灯屏中展示出相应的灯效运动流程。
根据以上实施例可见,在控制器一侧,只要灯屏控制指令遵守预先设定的规范,便可被控制器解析转换为灯效控制数据,进而控制灯屏准确播放相应的灯效,全程无需人工干预,确保根据用户指示信息生成的灯效描述数据可以得到有效的应用。
请参阅图7,本申请的另一实施例还提供一种灯效智能控制装置,其包括指示识别模块5100、指令构造模块5200,以及指令应用模块5300,其中,所述指示识别模块5100,设置为获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图;所述指令构造模块5200,设置为根据所述灯屏控制意图构造相应的灯屏控制指令;所述指令应用模块5300,设置为将所述灯屏控制指令应用于灯屏设备。
在本申请的装置的任意实施例的基础上,所述指示识别模块5100,包括:语音指示模块,设置为显示对话界面,基于该对话界面获取以语音形式输入的用户指示信息;格式转换模块,设置为将所述用户指示信息转换为文本格式数据;意图识别模块,设置为调用意图识别模型确定所述文本格式数据所对应的灯屏控制意图。
在本申请的装置的任意实施例的基础上,所述指示识别模块5100,包括:任务分解模块,设置为对所述用户指示信息进行任务分解,确定出其中包含的各个任务相对应的用户指示信息;任务识别模块,设置为调用意图识别模型,分别针对每个任务相对应的用户指示信息确定每个任务相对应的灯屏控制意图。
在本申请的装置的任意实施例的基础上,所述指令构造模块5200,包括:功能型响应模块,设置为当所述灯屏控制意图属于第一类型意图时,确定所述灯屏控制意图相对应的灯屏控制指令;灯效型响应模块,设置为当所述灯屏控制意图属于第二类型意图时,调用灯效设计模型获取所述用户指示信息相对应的灯效描述数据,根据所述灯效描述数据构造相应的灯屏控制指令。
在本申请的装置的任意实施例的基础上,所述灯效型响应模块,包括:灯效匹配响应模块,设置为当所述灯屏控制意图属于第一目标意图时,根据所述用户指示信息调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据;灯效编辑响应模块,设置为当所述灯屏控制意图属于第二目标意图时,获取所述用户指示信息所包含的灯效命令信息,根据所述灯效命令信息调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据。
在本申请的装置的任意实施例的基础上,所述灯效匹配响应模块,包括:灯效模板输入模块,设置为将附带查询业务逻辑的灯效模板库输入所述灯效设计模型,所述灯效模板库包含多个灯效模板标签;灯效匹配输入模块,设置为将所述用户指示信息输入所述灯效设计模型,根据所述查询业务逻辑,通过所述灯效设计模型确定出与所述用户指示信息相匹配的所述灯效模板标签;灯效数据获取模块,设置为获取所述灯效模板标签相对应的灯效模板的灯效描述数据。
在本申请的装置的任意实施例的基础上,所述指令应用模块5300,包括:灯效推荐模块,设置为在对话界面中显示所述灯屏控制指令相对应的应用控件;应用驱动模块,设置为响应作用于所述应用控件的触发事件,将所述灯屏控制指令传输给灯屏设备,驱动所述灯屏设备根据所述灯屏控制指令所封装的灯效描述数据播放相应的灯效。
在本申请的装置的任意实施例的基础上,后于所述指令应用模块5300,本申请的灯效智能控制装置,包括:描述数据提取模块,设置为解析所述灯屏控制指令,以得到其中的灯效描述数据;控制数据生成模块,设置为根据所述灯效描述数据生成相应的灯效控制数据;灯效播放展示模块,设置为根据所述灯效控制数据控制所述灯屏设备中的灯屏播放灯效。
在本申请任意实施例的基础上,请参阅图8,本申请的另一实施例还提供一种计算机设备,该计算机设备可以充当灯屏设备中的控制器使用,如图8所示,计算机设备的内部结构示意图。该计算机设备包括通过系统总线连接的处理器、计算机可读存储介质、存储器和网络接口。其中,该计算机设备的计算机可读存储介质存储有操作系统、数据库和计算机可读指令,数据库中可存储有控件信息序列,该计算机可读指令被处理器执行时,可使得处理器实现一种灯效智能控制方法。该计算机设备的处理器用于提供计算和控制能力,支撑整个计算机设备的运行。该计算机设备的存储器中可存储有计算机可读指令,该计算机可读指令被处理器执行时,可使得处理器执行本申请的灯效智能控制方法。该计算机设备的网络接口用于与终端连接通信。本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
本实施方式中处理器用于执行图7中的各个模块及其子模块的具体功能,存储器存储有执行上述模块或子模块所需的程序代码和各类数据。网络接口用于向用户终端或服务器之间的数据传输。本实施方式中的存储器存储有本申请的灯效智能控制装置中执行所有模块/子模块所需的程序代码及数据,服务器能够调用服务器的程序代码及数据执行所有子模块的功能。
本申请还提供一种存储有计算机可读指令的存储介质,计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行本申请任一实施例所述灯效智能控制方法的步骤。
本申请还提供一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被一个或多个处理器执行时实现本申请任一实施例所述灯效智能控制方法的步骤。
本领域普通技术人员可以理解实现本申请上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该计算机程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)等计算机可读存储介质,或随机存储记忆体(Random Access Memory,RAM)等。
以上所述仅是本申请的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。
综上所述,本申请通过识别用户指示信息得到灯屏控制意图,根据灯屏控制意图直接构造相应的灯屏控制指令应用到灯屏设备中,使用户指示可以直接转换为指令进行应用,缩短控制灯屏设备的人机交互流程,提升灯屏设备的操控效率和智能化程度,有助于灯屏设备的推广。
Claims (8)
1.一种灯效智能控制方法,其特征在于,包括:
获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图;
根据所述灯屏控制意图构造相应的灯屏控制指令;
将所述灯屏控制指令应用于灯屏设备;
所述确定出所述用户指示信息相对应的灯屏控制意图,包括:
对所述用户指示信息进行任务分解,确定出其中包含的各个任务相对应的用户指示信息;
调用意图识别模型,分别针对每个任务相对应的用户指示信息确定每个任务相对应的灯屏控制意图;
所述根据所述灯屏控制意图构造相应的灯屏控制指令,包括:
当所述灯屏控制意图属于第一类型意图时,确定所述灯屏控制意图相对应的灯屏控制指令;
当所述灯屏控制意图属于第二类型意图时,调用灯效设计模型获取所述用户指示信息相对应的灯效描述数据,根据所述灯效描述数据构造相应的灯屏控制指令。
2.根据权利要求1所述的灯效智能控制方法,其特征在于,获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图,包括:
显示对话界面,基于该对话界面获取以语音形式输入的用户指示信息;
将所述用户指示信息转换为文本格式数据;
调用意图识别模型确定所述文本格式数据所对应的灯屏控制意图。
3.根据权利要求1所述的灯效智能控制方法,其特征在于,调用灯效设计模型获取所述用户指示信息相对应的灯效描述数据,根据所述灯效描述数据构造相应的灯屏控制指令,包括:
当所述灯屏控制意图属于第一目标意图时,根据所述用户指示信息调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据;
当所述灯屏控制意图属于第二目标意图时,获取所述用户指示信息所包含的灯效命令信息,根据所述灯效命令信息调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据。
4.根据权利要求3所述的灯效智能控制方法,其特征在于,调用所述灯效设计模型,获取所述灯屏控制意图所对应的灯效描述数据,包括:
将附带查询业务逻辑的灯效模板库输入所述灯效设计模型,所述灯效模板库包含多个灯效模板标签;
将所述用户指示信息输入所述灯效设计模型,根据所述查询业务逻辑,通过所述灯效设计模型确定出与所述用户指示信息相匹配的所述灯效模板标签;
获取所述灯效模板标签相对应的灯效模板的灯效描述数据。
5.根据权利要求1至4中任意一项所述的灯效智能控制方法,其特征在于,将所述灯屏控制指令应用于灯屏设备,包括:
在对话界面中显示所述灯屏控制指令相对应的应用控件;
响应作用于所述应用控件的触发事件,将所述灯屏控制指令传输给灯屏设备,驱动所述灯屏设备根据所述灯屏控制指令所封装的灯效描述数据播放相应的灯效。
6.一种灯效智能控制装置,其特征在于,包括:
指示识别模块,设置为获取用户指示信息,确定出所述用户指示信息相对应的灯屏控制意图;
指令构造模块,设置为根据所述灯屏控制意图构造相应的灯屏控制指令;
指令应用模块,设置为将所述灯屏控制指令应用于灯屏设备;
所述指示识别模块,包括:
任务分解模块,设置为对所述用户指示信息进行任务分解,确定出其中包含的各个任务相对应的用户指示信息;
任务识别模块,设置为调用意图识别模型,分别针对每个任务相对应的用户指示信息确定每个任务相对应的灯屏控制意图;
所述指令构造模块,包括:
功能型响应模块,设置为当所述灯屏控制意图属于第一类型意图时,确定所述灯屏控制意图相对应的灯屏控制指令;
灯效型响应模块,设置为当所述灯屏控制意图属于第二类型意图时,调用灯效设计模型获取所述用户指示信息相对应的灯效描述数据,根据所述灯效描述数据构造相应的灯屏控制指令。
7.一种灯屏设备,包括中央处理器和存储器,其特征在于,所述中央处理器用于调用运行存储于所述存储器中的计算机程序以执行如权利要求1至5中任意一项所述的方法的步骤。
8.一种非易失性可读存储介质,其特征在于,其以计算机可读指令的形式存储有计算机程序,所述计算机程序被计算机调用运行时,执行如权利要求1至5中任意一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311848949.2A CN117500117B (zh) | 2023-12-29 | 2023-12-29 | 灯屏设备及灯效智能控制方法和相应的装置、介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311848949.2A CN117500117B (zh) | 2023-12-29 | 2023-12-29 | 灯屏设备及灯效智能控制方法和相应的装置、介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117500117A CN117500117A (zh) | 2024-02-02 |
CN117500117B true CN117500117B (zh) | 2024-03-19 |
Family
ID=89667601
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311848949.2A Active CN117500117B (zh) | 2023-12-29 | 2023-12-29 | 灯屏设备及灯效智能控制方法和相应的装置、介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117500117B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108419453A (zh) * | 2017-10-27 | 2018-08-17 | 深圳和而泰智能控制股份有限公司 | 一种照明灯控制方法及其装置、照明灯 |
KR101891329B1 (ko) * | 2017-02-27 | 2018-08-24 | (주)에코메이텍 | 사용자 의도를 반영한 생체리듬 및 환경변화에 따른 친환경 스마트 조명제어장치 |
CN109729627A (zh) * | 2017-10-31 | 2019-05-07 | 百度(美国)有限责任公司 | 用于控制智能灯的系统和方法 |
WO2021175426A1 (en) * | 2020-03-05 | 2021-09-10 | Telefonaktiebolaget Lm Ericsson (Publ) | Controlling a set of devices by a voice-controlled device |
CN214410608U (zh) * | 2021-01-22 | 2021-10-15 | 上海风语筑文化科技股份有限公司 | 触控式灯屏联动展项装置 |
WO2023109091A1 (zh) * | 2021-12-17 | 2023-06-22 | 深圳创维-Rgb电子有限公司 | 灯带控制方法、灯带系统、电子设备以及存储介质 |
CN116347699A (zh) * | 2023-04-17 | 2023-06-27 | 华人运通(山东)科技有限公司 | 交互灯的灯效控制方法、电子设备和车辆 |
CN117082683A (zh) * | 2023-10-13 | 2023-11-17 | 深圳市千岩科技有限公司 | 拼接灯具灯效应用、播放方法及装置、设备和介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20230041342A (ko) * | 2021-09-17 | 2023-03-24 | 현대모비스 주식회사 | 차량의 조명 제어 시스템 및 방법 |
-
2023
- 2023-12-29 CN CN202311848949.2A patent/CN117500117B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101891329B1 (ko) * | 2017-02-27 | 2018-08-24 | (주)에코메이텍 | 사용자 의도를 반영한 생체리듬 및 환경변화에 따른 친환경 스마트 조명제어장치 |
CN108419453A (zh) * | 2017-10-27 | 2018-08-17 | 深圳和而泰智能控制股份有限公司 | 一种照明灯控制方法及其装置、照明灯 |
CN109729627A (zh) * | 2017-10-31 | 2019-05-07 | 百度(美国)有限责任公司 | 用于控制智能灯的系统和方法 |
WO2021175426A1 (en) * | 2020-03-05 | 2021-09-10 | Telefonaktiebolaget Lm Ericsson (Publ) | Controlling a set of devices by a voice-controlled device |
CN214410608U (zh) * | 2021-01-22 | 2021-10-15 | 上海风语筑文化科技股份有限公司 | 触控式灯屏联动展项装置 |
WO2023109091A1 (zh) * | 2021-12-17 | 2023-06-22 | 深圳创维-Rgb电子有限公司 | 灯带控制方法、灯带系统、电子设备以及存储介质 |
CN116347699A (zh) * | 2023-04-17 | 2023-06-27 | 华人运通(山东)科技有限公司 | 交互灯的灯效控制方法、电子设备和车辆 |
CN117082683A (zh) * | 2023-10-13 | 2023-11-17 | 深圳市千岩科技有限公司 | 拼接灯具灯效应用、播放方法及装置、设备和介质 |
Also Published As
Publication number | Publication date |
---|---|
CN117500117A (zh) | 2024-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11703939B2 (en) | Signal processing device and related products | |
CN111339246B (zh) | 查询语句模板的生成方法、装置、设备及介质 | |
CN110362299A (zh) | 一种基于blockly和树莓派的在线图形化编程系统及其使用方法 | |
EP3690644A1 (en) | Electronic device and operation method therefor | |
US20190371319A1 (en) | Method for human-machine interaction, electronic device, and computer-readable storage medium | |
CN113793398A (zh) | 基于语音交互的绘画方法与装置、存储介质和电子设备 | |
US11874302B2 (en) | Digital oscilloscope and oscillogram generation system | |
CN117412449B (zh) | 氛围灯设备及其灯效播放控制方法和相应的装置、介质 | |
US20220410001A1 (en) | System and method for supporting creation of game script | |
CN111488147A (zh) | 一种智能布局方法及装置 | |
CN106023991A (zh) | 一种面向多任务交互的手持式语音交互装置及交互方法 | |
US20200210038A1 (en) | Robot eye lamp control method and apparatus and terminal device using the same | |
CN117500117B (zh) | 灯屏设备及灯效智能控制方法和相应的装置、介质 | |
CN117573822A (zh) | 人机交互方法、装置、设备及存储介质 | |
EP4152138A1 (en) | Method and apparatus for adjusting virtual face model, electronic device and storage medium | |
CN115470230A (zh) | 表格问答处理方法及装置 | |
CN111950288B (zh) | 一种命名实体识别中的实体标注方法及智能设备 | |
CN115438212B (zh) | 一种影像投射系统、方法及设备 | |
CN113791689A (zh) | 智能设备的控制方法、装置、存储介质及电子装置 | |
CN117440574B (zh) | 灯屏设备及灯效生成方法和相应的装置、介质 | |
CN117412450B (zh) | 氛围灯设备及其灯效配色方法和相应的装置、介质 | |
CN117412452B (zh) | 氛围灯设备及其配色方法和相应的装置、介质 | |
CN117560815B (zh) | 氛围灯设备及灯效图层级协调播放方法和装置、介质 | |
US20240276618A1 (en) | Lighting control method, control system and storage medium | |
CN117794020B (zh) | 灯屏设备及灯效中继、驱动控制方法和相应的装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |