CN117412449A - 氛围灯设备及其灯效播放控制方法和相应的装置、介质 - Google Patents
氛围灯设备及其灯效播放控制方法和相应的装置、介质 Download PDFInfo
- Publication number
- CN117412449A CN117412449A CN202311712895.7A CN202311712895A CN117412449A CN 117412449 A CN117412449 A CN 117412449A CN 202311712895 A CN202311712895 A CN 202311712895A CN 117412449 A CN117412449 A CN 117412449A
- Authority
- CN
- China
- Prior art keywords
- image
- content
- content object
- light
- target image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000694 effects Effects 0.000 title claims abstract description 84
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000011218 segmentation Effects 0.000 claims abstract description 125
- 230000001795 light effect Effects 0.000 claims abstract description 90
- 238000013507 mapping Methods 0.000 claims abstract description 59
- 230000008451 emotion Effects 0.000 claims description 62
- 238000013145 classification model Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 15
- 238000003709 image segmentation Methods 0.000 claims description 15
- 230000002996 emotional effect Effects 0.000 claims description 7
- 230000036651 mood Effects 0.000 claims description 3
- 238000005192 partition Methods 0.000 abstract description 10
- 230000003993 interaction Effects 0.000 abstract description 8
- 239000011324 bead Substances 0.000 description 31
- 238000004891 communication Methods 0.000 description 20
- 238000009826 distribution Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 235000019646 color tone Nutrition 0.000 description 9
- 238000010586 diagram Methods 0.000 description 9
- 238000012549 training Methods 0.000 description 8
- 239000003086 colorant Substances 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 6
- 238000013136 deep learning model Methods 0.000 description 5
- 230000002093 peripheral effect Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000007654 immersion Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000002156 mixing Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000004806 packaging method and process Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001465382 Physalis alkekengi Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000003014 reinforcing effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/155—Coordinated control of two or more light sources
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
- G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
- G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
- H05B45/10—Controlling the intensity of the light
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
- H05B45/20—Controlling the colour of the light
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/105—Controlling the light source in response to determined parameters
- H05B47/115—Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
- H05B47/125—Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings by using cameras
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/165—Controlling the light source following a pre-assigned programmed sequence; Logic control [LC]
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请涉及一种氛围灯设备及其灯效播放控制方法和相应的装置、介质，所述方法包括：基于界面画布获取识别位置的位置信息构造为分割识别规则，界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；从视频流中确定目标图像，根据分割识别规则对目标图像进行图像语义分割，确定目标图像中与各个识别位置相对应的内容对象的图像内容和内容区域；根据目标图像与显示画幅的映射关系，确定每个内容对象在显示画幅中相对应的映射区域内的发光单元集；根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。本申请提供便捷交互方式，能够以目标图像中的目标内容对象为分区单位呈现对应的色彩效果。
Description
技术领域
本申请涉及照明控制领域，尤其涉及一种氛围灯设备及其灯效播放控制方法和相应的装置、介质。
背景技术
氛围灯设备作为智能灯具的一种，可以起到装饰室内空间效果、展示信息的作用。随着人们经济水平的提升，氛围灯设备越来越普及。氛围灯设备的功能之一，是根据指定的环境的光线效果，来生成与该光线效果相呼应的灯光效果，起到加强环境氛围的作用。例如，可以根据游戏或视频的显示画面的光线来生成相应的灯光效果，或者根据某个指定的物理空间环境的实拍图像中的光线生成相应的灯光效果等。总之，氛围灯设备可以各种图像作为环境参照图像，用来生成相应的灯光效果。
根据环境参照图像生成相应的灯光效果的关键，在于将客观存在于环境参照图像中的色彩分布准确投射到氛围灯设备的显示画幅中，氛围灯设备的显示画幅是由大量的发光单元布局形成的，对此，传统技术中，常采用相同的分区方式将环境参照图像与显示画幅进行对应分割，分别分割出具有相同布局的多个区域图像，再将每个区域图像相应的色彩投射到显示画幅的相应区域的发光单元中显示，由此呈现灯效。
传统技术所采用的色彩分区投射的方式，无视环境参照图像中内容对象的独立性，不管图像内容中是否存在多个内容对象，不管这些内容对象中所占的面积多大，都会被机械地分区，这样得到的色彩投射效果，实际上无法真正准确反映环境参照图像中的色彩分布效果，具体是因为环境参照图像中的内容对象被机械分区后，部分边界区域的色彩会被其它内容对象的色彩所干扰，所以导致投射到氛围灯设备的显示画幅之后，在该显示画幅上呈现的灯效，无法对应上环境参照图像中各个内容对象之间的布局，从而导致无法准确反映全图的色彩布局。
概括而言，传统技术氛围灯设备所投射的灯效，无法通过色彩准确有效地表现环境参照图像中的内容对象的分布，导致氛围灯设备所塑造的灯效对环境参照图像的光线氛围的仿真度低下，所渲染的光线氛围不够逼真准确，难以营造沉浸效果。
发明内容
本申请的目的在于提供一种氛围灯设备及其灯效播放控制方法和相应的装置、介质。
根据本申请的一个方面，提供一种氛围灯设备灯效播放控制方法，包括：
基于界面画布获取识别位置的位置信息构造为分割识别规则，所述界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；
从视频流中确定目标图像，根据所述分割识别规则对所述目标图像进行图像语义分割，确定所述目标图像中与各个所述识别位置相对应的内容对象的图像内容和内容区域；
根据所述目标图像与所述显示画幅的映射关系，确定每个内容对象在所述显示画幅中相对应的映射区域内的发光单元集；
根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。
根据本申请的另一方面，提供一种氛围灯设备灯效播放控制装置，包括：
画布显示模块，设置为基于界面画布获取识别位置的位置信息构造为分割识别规则，所述界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；
图像分割模块，设置为从视频流中确定目标图像，根据所述分割识别规则对所述目标图像进行图像语义分割，确定所述目标图像中与各个所述识别位置相对应的内容对象的图像内容和内容区域；
区域映射模块，设置为根据所述目标图像与所述显示画幅的映射关系，确定每个内容对象在所述显示画幅中相对应的映射区域内的发光单元集；
灯效播放模块，设置为根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。
根据本申请的另一方面，提供一种氛围灯设备，包括中央处理器和存储器，所述中央处理器用于调用运行存储于所述存储器中的计算机程序以执行所述氛围灯设备灯效播放控制方法的步骤。
根据本申请的另一方面，提供一种非易失性可读存储介质，其以计算机可读指令的形式存储有依据所述的氛围灯设备灯效播放控制方法所实现的计算机程序，所述计算机程序被计算机调用运行时，执行该方法所包括的步骤。
相对于现有技术，本申请具有多方面优势，包括但不限于：
首先，本申请先通过表征氛围灯设备的界面画布获取用户期望的识别位置，以便标示出重点识别区域，然后对目标图像进行图像语义分割，得到与用户标定的识别位置的位置信息相对应的各个内容对象的内容区域及其图像内容，根据目标图像与显示画幅的映射关系，确定每个内容对象在显示画幅中的映射区域，从而确定每个内容对象在氛围灯设备相对应的发光单元集，进而，根据各个内容对象的图像内容，确定出表示各个内容对象相对应的图像颜色值，利用各个内容对象的图像内容所体现的主色调，控制各个内容对象相对应的发光单元集发光，使氛围灯设备中全部发光单元，能够按照目标图像的各个内容对象进行分区确定显示色彩，从而协同播放整体灯效，由此使每个映射区域中的各个发光单元的灯效能够与该映射区域相应的内容对象的主色调保持对应关系，使氛围灯设备的整个显示画幅能够更为准确地对应各个内容对象的颜色呈现相应的色彩布局，也使氛围灯设备可以通过发光单元所发出的光线色彩相对准确地再现目标图像中的内容对象的分布，提升灯效对目标图像的光线氛围的仿真度，使氛围灯设备所渲染的光线氛围更为逼真准确。
其次，本申请允许用户自定义目标图像中的内容对象可能出现的识别位置以指导图像语义分割过程，可以进一步提升图像语义分割结果的准确度，使所确定的内容对象基本符合用户期望，避免因目标图像的内容对象过多导致最终播放的灯效过于杂散，使灯效总体上简洁又能突出重点，使整个灯效所表达的总体氛围更为精准和聚集。
再次，本申请以经过图像语义分割得到的内容对象的内容区域作为发光单元集和内容对象的主色调之间的分区映射依据，这种内容区域是依照内容对象在目标图像中的轮廓得到的，而不是以规则矩形区域作为分区映射依据，使内容对象与其所涵盖的发光单元的对应关系更为精准，内容对象处于其边界附近的图像内容的颜色信息不会被其他内容对象的颜色信息所干扰，各个内容对象的边界相对更为清晰，色彩布局投射关系更为精准，氛围灯设备对目标图像的光线氛围的模拟也就更为细腻、真实以及柔和，氛围灯设备所对应塑造的灯效也就更为精致。
此外，根据本申请实现的氛围灯设备，由于其对照目标图像所塑造的光线氛围更为逼真准确以及精致，所以，当将氛围灯设备以终端设备的桌面图像为目标图像，对照该目标图像播放相应的灯效时，在氛围灯设备的光线氛围的渲染下，能够将桌面图像的画面氛围有效延展到实体空间中，从而增强终端设备使用者的沉浸感。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例中的氛围灯设备的电气结构的原理示意图；
图2、图3、图4分别为本申请实施例中的氛围灯设备的显示画幅的示意图，其中图2的氛围灯被布局成窗帘灯的样态，图3是氛围灯被布局成边框灯的样态，图4的氛围灯被布局成拼接灯具的样态；
图5为本申请实施例中的氛围灯设备灯效播放控制方法的流程示意图；
图6为示例性的图形用户界面，其中展示界面画布及用于添加识别位置的相关功能设定按键；
图7为本申请示例性的目标图像；
图8是图7中的各个内容对象与边框灯中各个发光单元集之间的对应关系示意图；
图9为本申请实施例中的氛围灯设备灯效播放控制装置的结构示意图；
图10为本申请实施例中的计算机设备的结构示意图。
具体实施方式
请参阅图1，本申请一种实施例提供的一种氛围灯设备的结构示意图中可以看出，所述氛围灯设备包括控制器1、氛围灯2，以及图像获取接口，氛围灯2与控制器1电性连接，以便接受控制器1中运行的计算机程序的控制协同工作，实现灯效播放。
控制器1通常包括控制芯片、通信组件以及总线接头，在一些实施例中，控制器1还可以按需配置电源适配器、控制面板、显示屏等。
电源适配器主要用于将市电转换为直流电，以便为整个氛围灯设备供电。控制芯片可采用各种嵌入式芯片实现，例如蓝牙SoC（System on Chip，系统级芯片）、WiFi SoC、MCU (Micro Controller Unit，微控制器)、DSP（Digital Signal Processing，数字信号处理）等各种类型的芯片，控制芯片通常包括中央处理器和存储器，存储器和中央处理器分别用于存储和执行程序指令，以实现相应的功能。以上各种类型的控制芯片，可以自带通信组件，也可按需额外配置通信组件。通信组件可以用于与外部设备通信，例如，可以与个人计算机或各种智能手机之类的终端设备通信，以便用户通过其终端设备下达各种配置指令之后，控制器1的控制芯片可以通过通信组件接收配置指令，完成基础配置，以便控制氛围灯工作。此外，控制器1还可以通过通信组件获取终端设备的界面图像，或者获取摄像头采集的实时预览图像。总线接头主要用于为接入总线的氛围灯2接入电源并提供灯效播放指令，因而对应提供电源总线和信号总线相对应的针脚，由此，当氛围灯2需要接入控制器1时，通过氛围灯相应的接头与所述总线接头连接即可。控制面板通常提供一个或多个按键，用于对控制器1实施开关控制、选择各种预设的灯效控制方式等等。显示屏可用于显示各种控制信息，以便与所述控制面板中的按键相配合，支持人机交互功能的实现。一些实施例中，控制面板与所述显示屏可以集成到同一触控显示屏中。
请结合图2，图2中的氛围灯被布局成窗帘灯的样态，该氛围灯2包括连接在总线上的多条发光灯带21，每条发光灯带21都包括多个串接而成的灯珠210，每个灯珠210作为一个发光单元，并且，通常各条发光灯带21的灯珠210数量相同，而且等间距排列。作为窗帘灯使用的氛围灯2在被使用时，通常按照如图2所示的布局展开其各条发光灯带21，由此使全部发光灯带21中的全部灯珠按照阵列的方式进行布局，形成灯珠矩阵结构，由于全部灯珠协同发光时能够提供画幅效果，所以，整个灯珠矩阵结构所在的面便构成一个显示画幅4，当播放灯效时，便可以在该显示画幅4范围内形成一定的图案效果，单幅图案静态显示时便是静态灯效，按时序切换图案时便能形成动态灯效。
每个发光灯带21可由多个灯珠210串接而成，每个灯珠210是一个发光单元，同一发光灯带21中的各个灯珠210由接入总线的同一组线缆传输工作电流，同一发光灯带21的各个灯珠210之间，在电性连接关系上，可以采用并联的方式进行连接。一种实施例中，同一灯珠矩阵结构中的各个发光灯带21，可以沿总线方向等间距设置，且各个发光灯带21的灯珠210之间，在数量和位置上，也对应设置，这样，整个显示画幅4在远距离观看其发光效果时，起到类似屏幕的作用，能够在人眼视觉上形成图案效果。
同理，请结合图3，图3中的氛围灯被布局在终端设备的显示器的四周而成为边框灯的样态，边框灯可以由连接在总线上的单条或多条发光灯带围设而成。至于边框灯所采用的发光灯带及发光灯带中的灯珠，在结构与通信机制上与窗帘灯样态相同。在布局成边框灯时，虽然全部灯珠都是环绕显示器的四周而围设，但在整体上可以视为按照一个在灯珠矩阵结构的基础上构成的显示画幅4，但显示画幅4的中央部位不设置灯珠，只在四边设置灯珠，当播放灯效时，便可以在该显示画幅4的范围内外散射出一定的光线氛围效果。
氛围灯设备的控制器1，用于实现对整个氛围灯设备的工作控制，并且负责整个氛围灯设备内外的通信，其中，控制器1还负责驱动图像获取接口工作，通过图像获取接口逐帧采集环境参照图像，环境参照图像可以是终端设备的界面图像或者实体空间的实景图像，再根据各帧环境参照图像生成相应帧的灯效播放指令，通过灯效播放指令控制窗帘灯播放相应帧的灯效。
氛围灯2的每条发光灯带21的每个灯珠210中，也设置有相应的控制芯片，该控制芯片可以按照前文所揭示进行选型，或者选取其它更为经济的控制芯片，其作用主要在于能够从灯效播放指令中提取出与本灯珠210相对应的发光颜色值，控制本灯珠210内的发光元件发出相应的色光。发光元件可以是LED灯。
图4进一步揭示本申请的氛围灯设备的另一种形态，其本质上是一种拼接灯具，拼接灯具中的氛围灯2由一个或多个灯块22构成。拼接灯具的灯块22内部，包括标准化设置在灯块的不同位置的多个发光单元（未示出），每个发光单元也可以设置相应的发光控制芯片，用来解析相应的控制数据而生成相应的发光控制信号，通过该发光控制信号控制相应的发光单元中的发光元件按照特定的发光颜色值进行发光。而灯块作为一个整体，也可以设置一个独立的控制芯片作为控制单元来对其中的全部发光单元进行发光控制，这个独立控制单元可以向各个发光单元的控制芯片传输相应的时序控制数据来达到集中控制的目的，当然，整个灯块也可以由单个控制芯片来直接控制各个发光单元以达到相应的灯效播放目的。这主要视灯块及其发光单元所采用的控制芯片的能力而灵活设计，不影响本申请的创造精神的体现。根据这些原理可知，对于一个灯块来说，既可以统一控制其全部发光单元同时发光，也可以把控制粒度具体到各个发光单元，控制粒度越精细，所生成的灯效便越细腻。
不同灯块形态的灯块22之间，可以相互拼接，例如在六边形灯块的外围任意一条结构边处邻接一个四边形的灯块，不难理解，通过搭配不同灯块形态的灯块，可以构造出更为丰富的面阵图案。当需要控制各个灯块播放相应的灯效时，通过协调控制各个灯块的各个发光单元发光，便可呈现一个显示画幅4，展示相应的灯效。
图像获取接口既可以是硬件接口，也可以是实现于控制器1中的软件接口。当为硬件接口时，图像获取接口可以实现为摄像头3，由控制器1加载相应的驱动程序驱动摄像头3工作，当将摄像头3对准目标画面时，例如对准终端设备的显示桌面，或者将摄像头3对准实体空间环境，按照一定的帧率采集图像，便可采集到界面图像。当为软件接口时，图像获取接口可以是借助终端设备的操作系统所提供的图形基础结构技术而在控制器1侧实现的图像获取程序，控制器1通过各种线缆例如HDMI、Type-C连接线与终端设备相连接，便可在该图形基础结构技术的支持下，持续获得终端设备的界面图像；当然，如果控制器1与终端设备中预先建立无线投屏协议，控制器1也可以通过无线通信的方式，获取终端设备的界面图像。操作系统的图形基础结构技术，视操作系统类型不同而不同，示例而言，Windows操作系统中，提供了相应的技术，即：Microsoft DirectX Graphics Infrastructure，简称DXGI，便可实现此一功能。
由此可见，图像获取接口负责采集环境参照图像时，其采集图像的具体环境可由用户灵活设定，例如，当图像获取接口为摄像头3时，用户可以将摄像头3对准计算机的图形用户界面进行拍摄以采集相应的界面图像作为目标图像用来播放灯效，使氛围灯2可以根据界面图像生成相应的灯效；用户也可以将摄像头3对准实体空间环境例如户外环境，摄录实景图像作为环境参照图像，使氛围灯2可以根据实景播放相应的灯效。
本申请的氛围灯设备，当其上电时，控制器的控制芯片可以从存储器中调用执行计算机程序，通过该计算机程序默认的初始化流程，为氛围灯上电并实现初始化，完成对氛围灯和其他硬件设备的驱动配置。
一种实施例中，控制器在启动氛围灯时，可以先向氛围灯发送自检指令，驱动氛围灯的各个发光灯带或灯块中的各个灯珠返回其在发光灯带或灯块中的位置信息。每个灯珠都设置有相应的控制芯片用于与控制器中的控制芯片进行数据通信，因而可以按照串行通信协议，将灯珠自身的特征信息与其他灯珠的特征信息按序串接，实现对自身的位置信息的表征。控制器与灯珠之间执行的串行通信协议，可以是IIC（Inter-Integrated Circuit，集成电路总线）、SPI（serial peripheral interface，串行外设接口）、UART（UniversalAsynchronous Receiver-Transmitter, 通用异步收发器）中任意一项。控制器从总线获得各个灯珠自检返回的结果数据后，对其进行解析，根据每个灯珠的特征信息在结果数据中的排序，便可确定各个灯珠在整个氛围灯所呈现的显示画幅4中的位置，由此可以将每个灯珠作为一个发光单元，可以理解为一个基本像素，后续控制器在构造灯效播放指令时，可以根据各个灯珠的位置信息，按照实际需要，为每个基本像素设置其相应的发光颜色值。
控制器在完成初始化后，便可通过图像获取接口持续获取环境参照图像作为目标图像，对目标图像进行取色，以确定其显示画幅中各个发光单元的发光颜色值。为此，可以根据本申请的方法识别出目标图像中的各个内容对象，再根据各个内容对象的图像内容确定主色调，根据每个内容对象的主色调确定相应的图像颜色值，再根据该图像颜色值生成该内容对象在显示画幅的映射区域内的各个发光单元的发光颜色值。
一些实施例中，本申请的控制器1可以在独立的计算机设备中实现，只要该计算机设备配备控制器1相应的硬件，以及将控制器1相应的业务逻辑包括本申请的方法所执行的业务逻辑，实现为计算机程序安装在该计算机设备中运行即可。当控制器1在计算机设备中实现时，可以共用计算机设备固有的各种资源例如摄像头3以便读取摄像头3所采集的实时预览图像作为环境参照图像，或者简化业务逻辑，例如可通过计算机的图形开放库（OpenGL）读取界面图像作为环境参照图像等，可以节省整体实现成本。此处所称的计算机设备，可以是任意供用户使用的终端设备，例如智能手机、个人计算机、笔记本电脑，平板电脑等。
根据以上氛围灯设备的产品架构和工作原理，本申请的氛围灯设备灯效播放控制方法，可以实现为计算机程序产品，存储于氛围灯设备的控制器的存储器中，由中央处理器从该存储器中调用后运行，在运行时根据图像获取接口所采集的环境参照图像以确定目标图像，从而控制氛围灯播放相应的灯效。
请参阅图5，在一个实施例中，本申请的氛围灯设备灯效播放控制方法，主要实现在氛围灯设备的控制器一侧，由控制器的控制芯片负责执行，包括：
步骤S5100、基于界面画布获取识别位置的位置信息构造为分割识别规则，所述界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；
控制器可以通过配备显示屏和按键等实现自带人机交互能力，在其与终端设备通信连接时，也可以复用终端设备的人机交互能力，或者，当控制器实现在终端设备上时，终端设备本身便具有人机交互能力。在这种能力的支持下，通过在图形用户界面中显示一个界面画布，基于界面画布获取用户指定的一个或多个识别位置相对应的位置信息，然后将这些识别位置的位置信息构造成分割识别规则，可以用来对目标图像进行图像语义分割。
如图6所示例，界面画布居于屏幕的上方区域，基本呈矩形，这个矩形的尺寸规格，既可以对应氛围灯设备的各个发光单元所构成的显示画幅，也可以与目标图像的尺寸规格相对应。一种实施方式中，可以将氛围灯设备的显示画幅的尺寸规格缩放到屏幕画幅中，得到相应的尺寸规格作为界面画布的尺寸规格，按照该尺寸规格，设定一个界面画布，将该界面画布显示到图形用户界面中，如图6上方的方框所示。确定了界面画布的尺寸规格之后，如果需要将目标图像的尺寸规格与界面画布的尺寸规格建立对应关系，可以通过对目标图像进行相应的缩放或者裁剪来达到，使得最终得到的目标图像的尺寸规格与界面画布的尺寸规格具有缩放比例关系即可。这样，目标图像、界面画布、氛围灯设备的显示画幅三者之间，构成基于同一参考坐标系进行不同比例缩放的等比关系，方便进行各种位置信息的计算。
据此，该界面画布的画幅是与目标图像的画幅相对应的，只是在图形用户界面中显示界面画布时，适应图形用户界面的显示尺寸而进行相应的缩放以方便用户操作而已。自然地，在界面画布上设定的位置或区域，也可以关联相应的缩放比例，唯一性地映射到目标图像中得到相应的位置和区域。同理，该界面画布的画布也是与氛围灯设备的显示画幅相对应的，在界面画幅上指定的位置或区域，同理可以根据已知的缩放比例关系，对应映射到氛围灯设备的显示画幅中，得到相应的映射区域，从而便可确定落入映射区域范围内的各个发光单元。
用户在界面画布中设定的识别位置，可以是多种几何形式中的任意一种，例如，可以通过指定个别点来设定以点坐标表示的位置信息，可以通过圈选来设定以像素坐标集合表示的位置信息，可以通过矩形框来设定以窗口形式表示的位置信息等等。总之，用户指定的识别位置，可以是点、线、面中的任意一种，相应的，识别位置可以被表示为对应坐标信息，实现对位置信息的表示。
当用户在界面画布中完成一个或多个识别位置的确定后，相应便生成各个识别位置相对应的位置信息，将这些位置信息按照预定的格式拼接、封装或编码在一起，便构成分割识别规则，可用于辅助实施图像语义分割。
步骤S5200、从视频流中确定目标图像，根据所述分割识别规则对所述目标图像进行图像语义分割，确定所述目标图像中与各个所述识别位置相对应的内容对象的图像内容和内容区域；
目标图像，用来作为氛围灯设备所播放的灯效的色彩分布的参照对象，故其本质是一种环境参照图像。环境参照图像的来源，既可以是摄像头3实拍获得的，也可以是从缓存或显存中调用的，也可以是直接从图像文件中读取的，还可以是经过有线或无线传输接收的。示例而言，环境参照图像既可以是摄像头3拍摄的实景图像，也可以是终端设备的界面图像，界面图像既可以是摄像头3拍摄采集的，也可以是在终端设备中读取或截图的。
通过摄像头3拍摄获取、截图获取，或者通过读取流媒体文件获取等形式，可以得到一个视频流，在视频流中包含多个图像帧，可以根据图像帧的时间戳，逐一调用各个图像帧作为目标图像执行本步骤及以下各步骤的操作，以播放每个目标图像相对应的灯效。
目标图像中通常包含有各种内容对象例如各种物体、各种图案等，每个内容对象的形状可能都不相同，并且因为内容对象所展示的角度、周遭的光线不同等等原因，使得不同目标图像中即使是相同内容对象，在目标图像中所体现的面积、位置、色彩等也都可能不同。所以针对每个目标图像，当需要确定各个内容对象的内容区域时，都要对其进行关于各个内容对象的内容区域的检测，以便得到各个内容对象的内容区域。
目标图像一般表示为位图数据，以方便读取其中各个像素的颜色值，其颜色值的表示形式，根据目标图像的格式不同，可以有不同的表示方式，例如RGB、YUV等不同格式表示颜色值的方式各有不同，本领域技术人员可以适应这些不同格式做相应的表示处理，恕不赘述。
一种实施例中，考虑到氛围灯设备根据连续多个目标图像播放相应的灯效时，各个目标图像可能出自同一视频流，相邻两个目标图像之间可能是同一视频内容的两个图像帧，而且这两个图像帧之间的图像内容变动可能较小，针对这种情况，可以基于当前的目标图像计算其与在先的目标图像之间的帧差信息，当帧差信息中呈现的变动幅度小于预设阈值时，可以沿用在先的目标图像相对应的内容区域，否则才对当前的目标图像重新确定其中各个内容对象的内容区域。
为了得到目标图像中的各个内容对象相对应的区域图像，本申请中，可以基于经过预先训练的深度学习模型，该深度学习模型优选提示型图像分割模型，该提示型图像分割模型可以在基于界面画布指定识别位置后得到的分割识别规则的约束下，以目标图像的深层语义为基础进行图像语义分割，得到目标图像中的各个内容对象相应的内容区域。
提示型图像分割模型通常可以有两种模式，即自动分割模式和非自动分割模式。在自动分割模式下，该模型可以结合目标检测网络对目标图像进行目标检测，检测出一个或多个目标作为内容对象的区域图像之后，再将各个内容对象的区域图像输入该模型内部的图像分割网络中实施图像语义分割，由此便可得到各个内容对象的内容区域，最终选取确定内容区域与分割识别规则中指定的各个识别位置相匹配的内容对象作为目标内容对象。非自动分割模式下，该模型直接根据目标图像和分别识别规则进行推理，得到其中与分割识别规则中指定的各个识别位置相对应的各个内容对象及其内容区域。
根据目标图像得到的内容区域，可以预先通过算法规定或者借助深度学习模型的技术架构提供的能力，表示为各种方便解析调用的数据格式，例如表示为硬掩膜或软掩膜形式的图像，得到相应的区域掩膜或全图掩膜。软掩膜通过[0,1]数值区间的任意值来表示目标图像中的像素属于前景的概率，硬掩膜则可通过0或1指示目标图像中某个像素是否属于背景或前景。由此不难理解，目标图像中内容对象的内容区域，在定义出该内容对象的轮廓以界定内容区域的同时，实际也定义了该内容对象在相应的图像中的各个像素，构成像素集合，该像素集合便构成相应的内容对象的图像内容。
在一些实施例中，针对每个内容对象，图像分割模型可以先在确定了其区域图像的基础上再确定其相应的区域掩膜。区域掩膜只是对单个内容对象在其区域图像中的内容区域的表示，所以，为了方便与目标图像相对应，还可以进一步将每个内容对象的区域掩膜按照目标图像的尺寸规格转换成全图掩膜。
全图掩膜可以是对应每个内容对象相对于目标图像的内容区域独立设定的，也可以是适应同时表示出多个内容对象的内容区域而设定的，以便在这样的全图掩膜中同时表示出多个内容对象的内容区域，具体可按需灵活实施。
当采用单个内容对象的或包含有多个内容对象的掩膜来确定各个内容对象的内容区域时，无论该掩膜是区域掩膜还是全图掩膜，可通过对掩膜进行连通域计算找到相同连通域内的前景像素或背景像素，将每个连通域确定为单个内容对象的内容区域，将每个连通域内的像素集合确定为相应的单个内容对象的图像内容。对于目标图像中除内容对象之外的其他背景内容，可以将其视为一个独立的内容对象对待，相应也就确定了这个内容对象的内容区域。可见，可以在掩膜的基础上，快速提取出各个内容对象的内容区域和图像内容，相应建立映射关系，以便快速调用。
考虑到在目标图像的画幅中面积占比较小的内容对象对灯效起到的视觉效果影响不大，有时甚至可能因为其色调与周边的其他内容对象的色调之间差异过大导致在灯效中出现突兀的效果，为了解决这一问题，在一些实施例中，可以先根据内容对象的内容区域计算出其像素总数相对于整个目标图像的画幅的像素总数的占比，将占比低于预设阈值的内容对象的内容区域，与其周边的任意一个内容对象的内容区域进行合并，使两个内容对象的内容区域合并为同一个内容区域，将这两个内容对象视为同一内容对象处理。
步骤S5300、根据所述目标图像与所述显示画幅的映射关系，确定每个内容对象在所述显示画幅中相对应的映射区域内的发光单元集；
作为本申请的氛围灯设备的功能之一，是将目标图像中各个内容对象的主色调投射到氛围灯设备所呈现的显示画幅相应的区域中，以起到在氛围灯设备中仿真目标图像的色彩分布的效果。由于该显示画幅通过界面画布与目标图像建立起了尺寸规格上的映射关系，而氛围灯设备通常又会通过布局配置信息表示出各个发光单元相对于参考坐标系的位置信息，通常以坐标信息表示，实际上也就定义了各个发光单元在显示画幅上的位置信息，据此，不难理解，借助显示画幅与目标图像的这种对应关系，可以根据各个内容对象的内容区域确定出该内容对象在氛围灯设备的显示画幅中的映射区域。例如图2所示的映射区域401、402、403，或图3所示的映射区域40等，再确定这个映射区域所覆盖的各个发光单元，将这些发光单元定义成一个发光单元集，这个发光单元集便是该目标内容对象相映射的发光单元集。按照这种方式，目标图像中的每个内容对象，均可根据其内容区域得到相应的发光单元集，使内容对象与发光单元集之间建立一一对应的映射关系，实际上也就是将每个内容对象的图像内容相对应的内容区域与各个发光单元集建立一一对应的映射关系。
图4虽然未给出关于映射区域的图示，但是，不难理解，给定一个内容区域同样可以在图4的拼接灯具的显示画幅中得到一个映射区域，进而可以确定该映射区域所覆盖的范围内的各个发光单元构成发光单元集，对于同一映射区域来说，允许其跨多个灯块覆盖不同灯块上的发光单元。
在一些实施例中，考虑到目标图像中，居于中部的内容对象与边框灯这种样态中的发光单元无法严格对应，针对这种情况，可以调整内容对象的内容区域与发光单元的对应关系，将内容区域投影到边框灯的邻近侧边，根据投影对应关系，确定各个内容对象的内容区域相对应的发光单元集。图7是本申请示例性的目标图像，图8是对图7中的目标图像进行图像语义分割得到的分割结果也即各个内容对象及其与氛围灯中发光单元集的映射关系的示意图，图8中A、B、C、D、E分别代表各个内容对象的图像内容，其中也示出了各个图像内容到边框灯样态的氛围灯中的各个发光单元集合的映射关系，可以看出，各种形态的氛围灯，都能够为各个内容对象与相应的发光单元集建立对应映射关系。
在更具体的实施例中，为便于调用各个发光单元集，可以将每个发光单元集中各个发光单元存储于同一数组中，然后将这个数组与相应的内容对象建立映射关系即可。
步骤S5400、根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。
作为实现灯效投射的基础，需要根据各个内容对象的图像内容确定各个内容对象的主色调，采用一个相应的图像颜色值进行对应表示。对此，根据各个内容对象相对应的图像内容，确定各个内容对象相对应的主色调的图像颜色值。根据内容对象的图像内容确定其主色调的图像颜色值的方式可以有多种，例如：
在一些实施例中，根据每个内容对象的图像内容确定其主色调的图像颜色值时，可以将图像内容中全部像素或者全部前文揭示的有效像素进行简单算术平均，得到相应的均值，将该均值作为主色调相对应的图像颜色值。按照这种方式，可以节约运算量，对于嵌入式控制芯片来说，具有计算上的成本优势。
另一些实施例中，根据每个内容对象的图像内容确定其主色调的图像颜色值时，可以先在图像内容中确定出一个预设面积的中心区域，以该中心区域的全部像素或者全部有效像素确定中心色调相对应的图像颜色值，以该中心区域之外的其他全部像素或者其他全部有效像素确定周边色调相对应的图像颜色值，具体的确定方式可以是求各自的算术平均值即可，然后，再按照预设的比例为中心色调和周边色调匹配权重，例如将中心色调与周边色调的权重比例设置为6：4，按照这个比例求出中心色调的图像颜色值和周边色调的图像颜色值之间的算术平均值，作为该内容对象的主色调的图像颜色值使用。按照这种方式确定主色调的图像颜色值，可以放大内容对象的中央区域的色调的作用，符合人眼视觉习惯，更能保持灯效与目标图像之间关于色彩分布的感知的对应性。
再一些实施例中，可以对目标内容对象进行的情绪属性进行分类，确定其所属的情绪属性相对应的主色调，得到该主色调下预设的图像颜色值作为该目标内容对象相对应的图像颜色值。
在以上确定图像颜色值的实施例之前，还可以对各个内容对象的图像内容进行预处理，以进一步提升确定内容对象的图像颜色值的显示效果，例如：在一些实施例中，可以先过滤该图像内容中颜色值低于预设阈值的像素，再根据保留下来的有效像素确定主色调的图像颜色值。该预设阈值可以用来衡量像素的明暗度，例如，对于RGB格式而言，对应三原色预设的阈值为RGB（10，10，10），较为接近黑色，当图像内容中的某个像素低于这个阈值时，可以将其过滤掉，由此，将最后保留的有效像素用来确定相应的主色调的图像颜色值后，降低黑色对主色调的影响，使所确定的主色调能保持较高的明亮度，确保灯效能以较高的明亮度呈现。
根据前文所述，内容对象的发光单元集、图像内容之间均已事先建立了映射关系，因此，确定各个内容对象的主色调的图像颜色值后，便可用来设定各个内容对象相对应的发光单元集中的各个发光单元的发光颜色值。通常，直接将每个内容对象的主色调的图像颜色值设定为该内容对象相应的发光单元集中的各个发光单元的发光颜色值即可。按照这种方式，可以对应各个内容对象，都设定相应的发光单元集中的发光单元的发光颜色值，藉此实现对氛围灯设备中的全部各个发光单元的发光颜色值的设定，构成与目标图像相对应的一帧灯效的发光单元控制数据。
适应播放灯效的需要，将对应目标图像为氛围灯设备的整个显示画幅中的各个发光单元相对应设定的控制数据，封装成相应的灯效播放指令，传输至氛围灯，氛围灯中的各个控制芯片便可根据预设的业务逻辑，解析该灯效播放指令，提取出其中的控制数据，根据控制数据与发光单元的对应性，利用对应的控制数据中的发光颜色值，控制相应的发光单元按照相应色调的发光颜色值发射相应的光线。在氛围灯中全部发光单元发射的光线的协同配合下，便呈现与目标图像的色彩分布相对应的灯效。
根据以上实施例可知，相对于现有技术，本申请具有多方面优势，包括但不限于：
首先，本申请先通过表征氛围灯设备的界面画布获取用户期望的识别位置，以便标示出重点识别区域，然后对目标图像进行图像语义分割，得到与用户标定的识别位置的位置信息相对应的各个内容对象的内容区域及其图像内容，根据目标图像与显示画幅的映射关系，确定每个内容对象在显示画幅中的映射区域，从而确定每个内容对象在氛围灯设备相对应的发光单元集，进而，根据各个内容对象的图像内容，确定出表示各个内容对象相对应的图像颜色值，利用各个内容对象的图像内容所体现的主色调，控制各个内容对象相对应的发光单元集发光，使氛围灯设备中全部发光单元，能够按照目标图像的各个内容对象进行分区确定显示色彩，从而协同播放整体灯效，由此使每个映射区域中的各个发光单元的灯效能够与该映射区域相应的内容对象的主色调保持对应关系，使氛围灯设备的整个显示画幅能够更为准确地对应各个内容对象的颜色呈现相应的色彩布局，也使氛围灯设备可以通过发光单元所发出的光线色彩相对准确地再现目标图像中的内容对象的分布，提升灯效对目标图像的光线氛围的仿真度，使氛围灯设备所渲染的光线氛围更为逼真准确。
其次，本申请允许用户自定义目标图像中的内容对象可能出现的识别位置以指导图像语义分割过程，可以进一步提升图像语义分割结果的准确度，使所确定的内容对象基本符合用户期望，避免因目标图像的内容对象过多导致最终播放的灯效过于杂散，使灯效总体上简洁又能突出重点，使整个灯效所表达的总体氛围更为精准和聚集。
再次，本申请以经过图像语义分割得到的内容对象的内容区域作为发光单元集和内容对象的主色调之间的分区映射依据，这种内容区域是依照内容对象在目标图像中的轮廓得到的，而不是以规则矩形区域作为分区映射依据，使内容对象与其所涵盖的发光单元的对应关系更为精准，内容对象处于其边界附近的图像内容的颜色信息不会被其他内容对象的颜色信息所干扰，各个内容对象的边界相对更为清晰，色彩布局投射关系更为精准，氛围灯设备对目标图像的光线氛围的模拟也就更为细腻、真实以及柔和，氛围灯设备所对应塑造的灯效也就更为精致。
此外，根据本申请实现的氛围灯设备，由于其对照目标图像所塑造的光线氛围更为逼真准确以及精致，所以，当将氛围灯设备以终端设备的桌面图像为目标图像，对照该目标图像播放相应的灯效时，在氛围灯设备的光线氛围的渲染下，能够将桌面图像的画面氛围有效延展到实体空间中，从而增强终端设备使用者的沉浸感。
在本申请的方法的任意实施例的基础上，根据所述分割识别规则对所述目标图像进行图像语义分割，包括：
步骤S5211、采用处于自动分割模式的图像提示分割模型，确定出所述目标图像中的各个内容对象相对应的全图掩膜，以及各个内容对象在所述目标图像中的区域图像相对应的窗口位置信息，所述全图掩膜按照目标图像的尺寸规格表示出相应的内容对象的内容区域；
提示型的图像分割模型，也即图像提示分割模型，具有根据给定的约束条件确定目标内容对象的掩膜的能力。本实施例中的图像揭示分割模型，由目标检测网络和提示型图像分割网络构成，目标检测网络用于从目标图像中确定多个内容对象的区域图像相对应的窗口位置信息、类别，以及置信度，其中目标框可以和目标图像一起作为分割提示信息输入至提示型图像分割网络中，以控制该分割网络对相应的内容对象进行图像语义分割，以便得到表征这些内容对象的图像内容所在的内容区域的全图掩膜。
示例性的图像提示分割网络，可以是分割一切模型（Segment Anything Model，SAM）,SAM模型整体上包含三个大模块，图像编码器（image encoder），提示编码器（promptencoder）和掩膜解码器（mask decoder）。图像编码器用于映射待分割的图像到图像特征空间，实现对所输入的图像例如本申请的目标图像的深层语义表示。提示编码器则负责映射输入的分割提示信息到提示特征空间，实现对分割提示信息的深层语义表示。掩膜解码器的意义从功能上说有两个，一是整合图像编码器和提示编码器分别输出的两个深层语义信息得到综合语义信息，实现对目标图像和分割提示信息的综合表示，然后从这个综合语义信息中解码出最终的掩膜，这个掩膜由于是对应全图确定的，所以是全图掩膜，在其中已经表示出各个内容对象的内容区域，所有内容对象的内容区域的总和，刚好占满整个目标图像的画幅，由此，该全图掩膜便按照目标图像的尺寸规格表示出目标图像中的全部各个内容对象相对应的内容区域。
步骤S5212、由该图像提示分割模型将所述分割识别规则中的各个位置信息与各个内容对象的窗口位置信息进行匹配，选定实现匹配的各个内容对象，作为目标内容对象；
图像提示分割网络得到目标图像的全图掩膜中表示出各个内容对象所在的内容区域，但这些内容对象可能有部分并不符合用户期望。为了确定用户所期望选定的内容对象，对于用户提供的分割识别规则，可在图像提示分割网络确定各个内容对象的全图掩膜后，将用户在分割识别规则中提供的各个识别位置的位置信息与各个内容对象经目标检测获得的窗口位置信息相比较，按照一定的预定规则判断每个内容对象的窗口位置信息是否与用户指定的一个识别位置相匹配。示例而言，当一个内容对象的窗口位置信息所表示的窗口局部或者全部包含了用户指定的一个或多个识别位置所界定的范围时，便可将该内容对象视为与该识别位置相匹配的内容对象，由此确定为符合用户期望的目标内容对象。
步骤S5213、基于所述全图掩膜在所述目标图像中确定所述目标内容对象的图像内容及该图像内容相对应的内容区域。
至此，便可根据已经确定的目标内容对象的标签，在全图掩膜中确定各个目标内容对象的内容区域，然后，将该内容区域对应映射到目标图像中，从目标图像中提取出目标内容对象相对应的图像内容，以便进一步确定主色调。
需要注意的是，全图掩膜中，未被视为内容对象的图像内容的其他区域，一般属于背景，可以在排除了各个内容对象的图像内容相对应的像素的基础上得到这个背景，将全图掩膜中属于背景的像素都确定为同一内容对象，对应确定其图像内容，以及根据其内容区域确定相应的发光单元集，同理也可实现根据该图像内容的主色调的发光颜色值确定该发光单元集中的各个发光单元的发光颜色值，确保目标图像全图都与氛围灯的整个显示画幅中的全部发光单元建立颜色上的可靠映射关系。
以上实施例，由工作在自动分割模型下的图像提示分割模型先行目标检测后再行图像语义分割，得到全图掩膜，在目标检测网络的增强下，能够提升对内容对象识别的精准度，再借助用户提供的分割识别规则中的识别位置，结合全图掩膜在目标图像中确定各个符合用户期望的目标内容对象的内容区域和图像内容，当根据该内容区域确定氛围灯的显示画幅中的发光单元集，并将该内容区域中图像内容的主色调投射到该发光单元集时，可实现图像内容与发光单元集的精准对应，使整个氛围灯能够对应各个内容对象之间的色彩分布，而渲染出相对应的光线氛围效果。
在本申请的方法的任意实施例的基础上，根据所述分割识别规则对所述目标图像进行图像语义分割，包括：
步骤S5221、调用所述目标图像及所述分割识别规则；
关于目标图像的调用，如前文实施例所揭示，可以从图像帧序列中调用各个目标图像用来播放灯效，恕不赘述。关于分割识别规则，其作用在于指导深层学习模型从目标图像中识别出各个目标内容对象。目标图像与分割识别规则均已事先确定，故可直接调用。
步骤S5222、采用处于非自动分割模式的图像提示分割模型，基于所述分割识别规则确定出所述目标图像中的各个内容对象相对应的全图掩膜，所述全图掩膜按照目标图像的尺寸规格表示出相应的内容对象的内容区域；
本申请的图像提示分割模型，可以工作在非自动分割模式，在该模式下，即使该图像提示分割模型配置了目标检测网络，但也不会发挥作用，而是直接通过该图像提示分割模型中的图像提示分割网络处理目标图像的图像语义分割。由于图像提示分割网络需要借助分割提示信息的提示才能完成图像语义分割，所以，本实施例相对于前一实施例而言，重要区别在于将分割识别规则作为分割提示信息输入图像提示分割网络的提示编码器，将目标图像输入图像编码器，以使图像提示分割网络能够直接对应分割识别规则中的各个识别位置确定各个目标内容对象的内容区域，并表示为相应的全图掩膜。因图像提示分割网络的架构和原理与前一实施例相同，可以是SAM模型或其演进版本，故此处不再赘述。
步骤S5223、基于所述全图掩膜在所述目标图像中确定所述目标内容对象的图像内容及该图像内容相对应的内容区域。
与前一实施例同理，当确定了全图掩膜后，便可进一步根据全图掩膜在目标图像中确定出各个目标内容对象的内容区域，提取内容区域中的图像内容用来确定主色调，恕不赘述。
以上实施例中，将分割识别规则直接作为分割提示信息，借助图像提示分割模型的交互能力，对目标图像中的内容对象进行准确识别，可以进一步压缩网络规模，具备运行时的效率优势，更适宜部署到使用嵌入式芯片作为本申请的方法执行主体的使用场景中。
在本申请的方法的任意实施例的基础上，基于界面画布获取识别位置的位置信息构造为分割识别规则，包括：
步骤S5110、获取氛围灯设备的布局配置信息，所述布局配置信息基于参考坐标系，描述出各个发光单元在该参考坐标系中的位置信息；
氛围灯设备中，预先通过布局配置信息确定了其氛围灯中的各个发光单元的位置信息，这些位置信息通常基于同一参考坐标系确定，这个参考坐标系可以直接映射为氛围灯所构成的显示画幅中的坐标系，为便于理解，可将其理解为显示画幅相对应的参考坐标系，据此，氛围灯设备的布局配置信息中，实际上也就基于该参考坐标系，定义了氛围灯中的每个发光单元在氛围灯所构成的显示画幅中的位置信息。
由于控制器与各个发光单元之间是基于串行通信协议进行通信的，而且各个发光单元所在的发光灯带或灯块的产品形态对控制来说也是已知的，所以，布局配置信息可以按照控制器预先设定的业务逻辑，通过向各个发光单元发送自检指令，获取各个发光单元所返回的连接位置信息，结合氛围灯的形态而确定。当然，该布局配置信息也可以是标准化设定并存储到控制器中的，当需要时，直接调用获取即可。
步骤S5120、根据所述布局配置信息确定所述氛围灯设备的显示画幅，生成该显示画幅相对应的界面画布，显示到图形用户界面中；
调用布局配置信息之后，对其进行相应的解析，然后转换为基于该参考坐标系表示各个发光单元相对于显示画幅的位置信息的数据形式，以方便查找。由于布局配置信息中限定了氛围灯设备中的全部发光单元，实际上也就相当于限定了氛围灯设备的显示画幅的像素总量，据此，按照预设的转换规则，便可确定其相应的画幅比例，进而确定相应的显示画幅。例如，对于氛围灯采用窗帘灯样态的氛围灯设备来说，设每条有9条发光灯带，每条发光灯带有16个发光单元，则可确定画幅比例为9：16，由此可以构造一个9：16的显示画幅，对应这个比例，参照图形用户界面的实际尺寸，构造一个界面画布，这样，每个发光单元便可以唯一性地映射到界面画布的一个点上，在界面画布中指定一个位置或区域，也就可以映射到一个或数个发光单元。
步骤S5130、接收基于所述界面画布指定的至少一个识别位置，确定所述识别位置相对于所述参考坐标系的坐标信息作为位置信息；
如图6所示，用户可以控制器开放的人机交互能力，在该界面画布中设定一个或多个识别位置，程序进程负责将用户在界面画布中设定的位置信息对应映射为该参考坐标系中的坐标信息，由此实现由用户参考氛围灯设备的显示画幅指定需要识别内容对象的位置的坐标信息。
如图6所示，用户可以触控“推荐”按键以提交识别位置自动推荐指令，由程序进程随机推荐多个识别位置，或者，用户也可触控各个位置文本例如“左上角”、“右上角”右侧相对应的按键，开始为各个位置文本指定相应的识别位置，当一个位置文本相对应的识别位置被用户指定后，其右侧按键中的状态文本便从“未设定”改变为“已设定“，并且，在界面画布中以“+”号之类的定位标识加以提示。用户通过界面画布可以便捷地设定各个识别位置，更为高效迅速。
步骤S5140、将各个所述识别位置的位置信息构造为分割识别规则。
在用户给出其指定的位置确定相应的坐标信息后，将这些坐标信息按照一定的规则进行构造，通常是按照负责实施图像语义分割的图像提示分割模型的入参格式要求进行构造，使其成为分割识别规则，便可用于为目标图像识别内容对象的内容区域。
以上实施例可见，本申请根据氛围灯设备的布局配置信息构造界面画布，使界面画布与氛围灯设备的显示画幅建立对应映射关系，通过界面画布，进一步向用户开放了对内容对象进行图像语义分割的服务能力，使用户可以自行指定可能存在内容对象的位置。不难理解，用户通过在界面画布中指定不同的识别位置，深度学习模型可能适应位置的不同而识别出不同的内容对象，氛围灯设备可能对应得到不同的色彩分布，从而实现对色彩分布的灵活调节，丰富了人机交互功能的同时，还能全面提升氛围灯设备的用户体验。
在本申请的方法的任意实施例的基础上，根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效，包括：
步骤S5410、获取氛围灯设备相对应的灯效描述模板，所述灯效描述模板包含该氛围灯设备中各个发光单元相对应的色值属性项；
为便于生成每个目标图像相对应的灯效播放指令，在氛围灯设备的控制器中预先存储有灯效描述模板。灯效描述模板可以是控制器按照预设的协议格式，对应布局配置信息中各个发光单元的位置信息所表征的顺序位置而生成的。由于控制器与各个发光单元之间的通信通常是基于串行通信协议实现的，当需要控制各个发光单元播放灯效时，只需按照预设的协议格式，封装出每个发光单元的控制数据，再将这些控制数据按照串行通信协议有序封装便可得到灯效播放指令，所以，灯效描述模板可以按照串行通信协议的规范，表示好氛围灯中各个发光单元的顺序位置，以及规范好控制每个发光单元发光相对应的各个属性项即可，后续需要生成相应的灯效播放指令时，只需调用这个灯效描述模板，更新各个发光单元相对应的属性项中的数据即可。
每个发光单元相对应的各个属性项中，包括色值属性项，色值属性项用于设定相应的发光单元所需发射的光线的颜色值，故称发光颜色值。当需要设定发光颜色值时，通过对色值属性项进行赋值即可实现。
步骤S5420、以每个内容对象的图像内容确定主色调相对应的图像颜色值，为该内容对象相对应的发光单元集中的各个发光单元的所述色值属性项赋值，从而将该图像颜色值设定为该色值属性项中的发光颜色值；
由于每个内容对象都能够如前文的实施例所揭示，根据其图像内容中的像素的颜色值确定出代表该内容对象相对应主色调的图像颜色值，因此，对于每个内容对象来说，可以以其主色调的图像颜色值，直接为该内容对象相映射的发光单元集中的每个发光单元的色值属性项赋值，将该图像颜色值设定为该色值属性项中的发光颜色值即可。
一些实施例中，对于每个内容对象来说，在设定其发光单元集中的各个发光单元的发光颜色值时，还可以按照中心扩散原则，将该主色调的图像颜色值设定为位于该发光单元集相对应的映射区域中心位置的发光单元相对应的色值属性项的发光颜色值，然后，沿该映射区域的径向的顺序，以该图像颜色值为基础值，将沿每一径向扩散的各个发光单元的色值属性项中的发光颜色值，设定为以该基础值梯度递降颜色值得到的发光颜色值，由此将整个发光单元集的灯效塑造为以中心位置为基准进行色彩上的淡入和淡出呈现的效果，使整体灯效更为柔和。
步骤S5430、将设定了氛围灯设备中的各个发光单元的发光颜色值的灯效描述模板转换为灯效播放指令，控制所述各个发光单元协同播放所述目标图像相对应的灯效。
在按照以上的方式，设定了各个内容对象相对应的各个发光单元集中各个发光单元的发光颜色值后，便实现对灯效描述模板的数据更新，据此，按照串行通信协议对已经更新的灯效描述模板中的全部数据进行封装，便可将灯效描述模板转换为目标图像相对应的灯效播放指令。
控制器封装出目标图像的灯效播放指令后，便可将其发送至氛围灯中，通过氛围灯的连接拓扑，最终将灯效播放指令中封装的各个发光单元发送至目的地，发光单元对应提取出属于自己的控制数据，根据控制数据中的发光颜色值控制内部的发光元件发出相应色调的光线。每个发光单元都按照相同的原理工作，由此，氛围灯所构成的整个显示画幅中的全部各个发光单元，便通过这种方式实现协同播放目标图像相对应的灯效，实现对目标图像中的各个内容对象的图像内容的色彩分布在显示画幅中的准确投射。
以上实施例可知，借助灯效描述模板以及内容对象与其发光单元集的映射关系，可以快速地为氛围灯中的各个发光单元完成发光颜色值的赋值，快速生成目标图像相对应的灯效播放指令，生成迅速，赋值精准，较为高效。
在本申请的方法的任意实施例的基础上，以每个内容对象的图像内容确定主色调相对应的图像颜色值，包括：
步骤S5421、将每个内容对象的图像内容输入预设的情绪分类模型中，推理确定该图像内容所传达的情绪属性；
本申请预备一个情绪分类模型，其可由一个基于卷积神经网络的特征提取模型后接分类器构成，其中的卷积神经网络用于提取所输入的图像内容的深层语义信息，然后将其映射到分类器相对应的分类空间，得到各种预设的情绪属性相对应的分类概率，将其中分类概率最大的情绪属性，确定为该图像内容相对应的情绪属性，实现对图像内容进行情绪分类。
本申请的情绪分类模型事先借助训练数据经过训练，训练数据中，以选定的包含有内容对象的图像内容作为训练样本，而对应设置这个图像内容所表达的情绪相对应的情绪属性作为该训练样本的监督标签，通过采用足量的训练样本和监督标签对，对该情绪分类模型实施有限次训练，使其达到收敛状态，即表明该情绪分类模型适于根据给定的图像内容确定其中的内容对象相对应的情绪属性的能力，即可投入推理阶段使用。据此，将每个内容对象的图像内容都输入该情绪分类模型中，便可得到该内容对象相对应的情绪属性。
步骤S5422、根据各个内容对象的情绪属性相对应的主色调，确定各个内容对象相对应的图像颜色值。
对内容对象的图像内容所代表的情绪属性的分类体系，可由本领域技术人员灵活设定。例如，一种实施例中，可以将乐器类的内容对象设定为表征欢乐相对应的情绪属性，而将工作类的内容对象设定为表征紧张相对应的情绪属性，将社交类的内容对象设定为表征轻松类相对应的情绪属性等，诸如此类均可。在分类体系中，对应每个情绪属性确定一个表达相应的情绪氛围的主色调，例如，表征欢乐的主色调以橙红色相对应的一个固定的图像颜色值表示，表征紧张的主色调以黄色相对应的一个固定的图像颜色值表示，表征温馨的主色调以淡紫色相对应的一个固定的图像颜色值表示等。借此，将每个情绪属性与一个图像颜色值建立映射关系。根据这个映射关系，根据每个内容对象已经确定的情绪属性便可得到每个内容对象相对应的主色调，进而可以得到该主色调相对应的图像颜色值，便可用于设定内容对象相应的发光单元集的发光颜色值。
根据以上实施例可以知晓，在内容对象的图像内容的基础上，借助预先训练的情绪分类模型，可以确定出各个内容对象相对应的主色调及其图像颜色值，改变了传统以图像内容中像素的颜色值简单机械确定相应的发光单元集的发光颜色值的方式，以对内容对象的情绪属性转义后得到的图像颜色值为准，对氛围灯设备的灯效进行设定，使氛围灯设备的灯效能够更匹配用户的主观感受，更好地营造氛围效果。
同理，一种实施例中，根据情绪属性与主色调和图像颜色值之间的映射关系，根据目标图像被分类得到的情绪属性，可以确定其相应的主色调，然后利用这个主色调的图像颜色值，对该目标图像中的各个内容对象相对应的图像颜色值进行调整。调和的方式可以有多种，例如，可以将每个内容对象相对应的图像颜色值与目标图像相对应的图像颜色值求均值或者加权均值等均可，又或者可以根据目标图像的图像颜色值所属的色系作为基调，对各个内容对象相对应的图像颜色值进行色系变换来实现。
根据以上实施例可见，通过利用目标图像的情绪属性相对应的图像颜色值来对各个内容对象相对应的图像颜色值进行调和，可以确保各个内容对象所传达的情绪价值更能与目标图像整体传达的情绪价值相吻合，使灯效所表达的情绪语义更为精准，提升氛围灯设备根据目标图像播放灯效时的灯效品质。
在本申请的方法的任意实施例的基础上，根据各个内容对象的情绪属性相对应的主色调，确定各个内容对象相对应的图像颜色值之后，包括：
步骤S5423、将所述目标图像输入所述情绪分类模型中，推理确定所述目标图像所传达的情绪属性；
虽然每个内容对象理论上都可以表征对应一种情绪属性，但是，有时候由若干个内容对象的图像内容构成的目标图像，其所表达的整体情绪感受未必与其中的每个内容对象所表达的情绪属性一致，例如，目标图像整体上传达一种欢乐的情绪，但其中个别内容对象传达的是压抑的情绪，而多个内容对象传达的均是欢乐的情绪，在类似这种情况下，可以在步骤S8200的基础上，进一步调和各个内容对象相对应的图像颜色值，以便得到最终的图像颜色值，再根据这个重新确定的图像颜色值去设定相应的发光单元集中各个发光单元的发光颜色值。
据此，可以将目标图像作为一个独立的整体，输入到本申请的情绪分类模型中，借助该情绪分类模型训练时得到的能力，确定该目标图像相对应的情绪属性。适应本实施例的需要，在训练该情绪分类模型时，也可以采用由多个内容对象的图像内容构成的图像作训训练样本，并提供相应的情绪属性作为监督标签，输入情绪分类模型中对其进行增强训练，使其更能准确地确定由多个内容对象的图像内容构成的目标图像的情绪属性。
步骤S5424、根据所述目标图像的情绪属性相对应的主色调确定其所属的目标色系；
根据前文实施例的揭示，目标图像确定其情绪属性后，便可查找到其主色调相对应的图像颜色值，于是，便可根据该图像颜色值确定其所属的目标色系。图像颜色值和色系之间的对应关系，可以事先预设，例如，红色、黄色等相对应的图像颜色值可以归类为暖色系，灰色、蓝色等相对应的图像颜色值可以归类为冷色系等。不难理解，通过比较图像颜色值是否落入某个色系相对应的色域范围，便可确定该图像颜色值所属的目标色系。目标图像所属的目标色系一经确定，便可用来调和目标图像中的各个内容对象的图像内容的图像颜色值。
步骤S5425、检测每个内容对象的情绪属性相对应的主色调是否属于所述目标色系，将不属于该目标色系的各个内容对象的主色调，参考相同基准变换至所述目标色系。
为使各个内容对象相对应的图像颜色值都能服从于目标图像相对应的目标色系，在本实施例中，可以逐个检测内容对象的主色调即其图像颜色值是否属于该目标色系相对应的色域范围，从而判定相应的内容对象的主色调是否属于目标色系，即一个或多个内容对象的图像颜色值不属于目标色系时，可以参考同一预设的基准，对这些不属于目标色系的图像颜色值进行变换，例如，以预定量为基准，在这些图像颜色值的基础上，叠加该预定量以改变各个图像颜色值，得到新的图像颜色值，用来为相应的发光单元集中的各个发光单元配色。
根据以上实施例可以看出，利用目标图像的情绪属性相对应的主色调所属的目标色系，对各个内容对象的主色调是否服务该目标色系进行检测，并调整其中不属于该目标色系的内容对象的主色调的图像颜色值，以使各个内容对象的图像颜色值尽量服从目标图像的主色调，可以进一步保持各个内容对象表达目标图像的主色调的能力，确保灯效品质。
在本申请的方法的任意实施例的基础上，从视频流中确定目标图像之后，根据所述分割识别规则对所述目标图像进行图像语义分割之前，包括：
步骤S4100、持续采集外部的终端设备中的界面图像；
本实施例示例性的应用场景中，氛围灯设备用于根据终端设备的界面图像形成的图像流，将图像流中的各个界面图像作为相应的目标图像，根据目标图像生成相应的灯效，从而仿真终端设备的图形用户界面上的光线氛围。
为此，控制器可以通过其图像获取接口持续采集外部的终端设备的界面图像，具体可参考前文各实施例所述，可以通过摄像方式、投屏方式或者有线传输等方式，采集终端设备中显示到其图形用户界面中的各帧界面图像。为便于后续处理，当控制器接收到的界面图像不是位图数据时，可以先将其转换为位图数据。
考虑到终端设备的界面图像通常具有较高的分辨率，也就具有海量的像素总量，而氛围灯设备中的发光单元也就是基本像素的数量远小于该像素总量，所以，控制器可以对每个界面图像都进行压缩，将其压缩至预定规格，既能保证灯效的播放，还能节省控制器的系统开销。
步骤S4200、将当前获得的界面图像消除边缘黑带，得到无黑带图像；
控制器源源不断地获取终端设备的界面图像的过程中，逐一对每个时刻获得的界面图像进行预处理。在每个时刻获得的界面图像可视为当前界面图像，对于当前界面图像，控制器可先通过检测其中处于全画幅的边缘区域的表征黑色的像素，然后确定最靠近外侧边的矩形区域作为边缘黑带，从当前界面图像中裁剪掉各个边缘黑带，得到无黑带图像。
消除边缘黑带主要是考虑到终端设备中显示的有效图像内容通常占据界面中部，而边缘黑带本身不能有效表达图像色彩，将其消除，可以避免黑色边缘区域对灯效的不利影响，突出有效图像内容的色彩呈现，确保所播放的灯效的品质。
步骤S4300、提升所述无黑带图像中属于暗光像素的目标像素的颜色值，得到增强图像；
为避免界面图像中存在大幅黑色像素导致影响所播放的灯效的明亮度，在得到无黑带图像的基础上，可以对其中的各个像素的颜色值进行检测，对于颜色值低于预设阈值的像素，将其确定为暗光像素，针对暗光像素，按照预设值或者预设比例提升其颜色值，从而使其成为非暗光像素，也使无黑带图像成为增强图像。
步骤S4400、将该增强图像添加到图像帧序列，由该图像帧序列有序将其中的增强图像出列作为所述目标图像使用。
得到当前界面图像相对应的增强图像后，将其添加到控制器在缓存中设置的图像帧序列中，由该图像帧序列，按照预设的出列规则，通常是先进先出规则，将各个图像帧陆续出列。被出列的增强图像，便可作为目标图像，进行本申请以上各实施例所揭示的后续步骤的处理，实现根据目标图像播放灯效。
根据以上实施例可见，在氛围灯设备根据终端设备的界面图像播放相应的灯效的场景中，控制器能够适应界面图像的特点对其进行各种针对性的预处理，其中集中处理黑色像素所导致的灯效品质下降的难题，通过消除边缘黑带和针对黑色像素提升颜色值等方式，使界面图像的色彩得到有效增强，再添加到图像帧序列中依序出列播放相应的灯效，从而，确保氛围灯设备能够根据界面图像播放仿真该界面图像中各个内容对象之间的色彩分布的光线氛围效果，全面提升根据界面图像塑造光线氛围的品质，实现终端设备的界面图像的光线氛围在实体空间中的有效延展，通过相应的灯效提升终端设备的使用者的氛围沉浸感。
请参阅图9，本申请的另一实施例还提供一种氛围灯设备灯效播放控制装置，其包括画布显示模块5100、图像分割模块5200、区域映射模块5300，以及灯效播放模块5400，其中，所述画布显示模块5100，设置为基于界面画布获取识别位置的位置信息构造为分割识别规则，所述界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；所述图像分割模块，设置为从视频流中确定目标图像，根据所述分割识别规则对所述目标图像进行图像语义分割，确定所述目标图像中与各个所述识别位置相对应的内容对象的图像内容和内容区域；所述区域映射模块5300，设置为根据所述目标图像与所述显示画幅的映射关系，确定每个内容对象在所述显示画幅中相对应的映射区域内的发光单元集；所述灯效播放模块5400，设置为根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。
在本申请的装置的任意实施例的基础上，所述图像分割模块5200，包括：后约束分割单元，设置为采用处于自动分割模式的图像提示分割模型，确定出所述目标图像中的各个内容对象相对应的全图掩膜，以及各个内容对象在所述目标图像中的区域图像相对应的窗口位置信息，所述全图掩膜按照目标图像的尺寸规格表示出相应的内容对象的内容区域；位置匹配单元，设置为由该图像提示分割模型将所述分割识别规则中的各个位置信息与各个内容对象的窗口位置信息进行匹配，选定实现匹配的各个内容对象，作为目标内容对象；区域确定单元，设置为基于所述全图掩膜在所述目标图像中确定所述目标内容对象的图像内容及该图像内容相对应的内容区域。
在本申请的装置的任意实施例的基础上，所述图像分割模块5200，包括：数据调用单元，设置为调用所述目标图像及所述分割识别规则；前约束分割单元，设置为采用处于非自动分割模式的图像提示分割模型，基于所述分割识别规则确定出所述目标图像中的各个内容对象相对应的全图掩膜，所述全图掩膜按照目标图像的尺寸规格表示出相应的内容对象的内容区域；区域确定单元，设置为基于所述全图掩膜在所述目标图像中确定所述目标内容对象的图像内容及该图像内容相对应的内容区域。
在本申请的装置的任意实施例的基础上，所述画布显示模块5100，包括：布局获取单元，设置为获取氛围灯设备的布局配置信息，所述布局配置信息基于参考坐标系，描述出各个发光单元在该参考坐标系中的位置信息；生成显示单元，设置为根据所述布局配置信息确定所述氛围灯设备的显示画幅，生成该显示画幅相对应的界面画布，显示到图形用户界面中；位置设定单元，设置为接收基于所述界面画布指定的至少一个识别位置，确定所述识别位置相对于所述参考坐标系的坐标信息作为位置信息；规则构造单元，设置为将各个所述识别位置的位置信息构造为分割识别规则。
在本申请的装置的任意实施例的基础上，所述灯效播放模块5400，包括：模板调用单元，设置为获取氛围灯设备相对应的灯效描述模板，所述灯效描述模板包含该氛围灯设备中各个发光单元相对应的色值属性项；颜色赋值单元，设置为以每个内容对象的图像内容确定主色调相对应的图像颜色值，为该内容对象相对应的发光单元集中的各个发光单元的所述色值属性项赋值，从而将该图像颜色值设定为该色值属性项中的发光颜色值；指令作用单元，设置为将设定了氛围灯设备中的各个发光单元的发光颜色值的灯效描述模板转换为灯效播放指令，控制所述各个发光单元协同播放所述目标图像相对应的灯效。
在本申请的装置的任意实施例的基础上，所述颜色赋值单元，包括：对象分类子单元，设置为将每个内容对象的图像内容输入预设的情绪分类模型中，推理确定该图像内容所传达的情绪属性；对象定色子单元，设置为根据各个内容对象的情绪属性相对应的主色调，确定各个内容对象相对应的图像颜色值。
在本申请的装置的任意实施例的基础上，所述颜色赋值单元，还包括：全图分类子单元，设置为将所述目标图像输入所述情绪分类模型中，推理确定所述目标图像所传达的情绪属性；色系确定子单元，设置为根据所述目标图像的情绪属性相对应的主色调确定其所属的目标色系；颜色调和子单元，设置为检测每个内容对象的情绪属性相对应的主色调是否属于所述目标色系，将不属于该目标色系的各个内容对象的主色调，参考相同基准变换至所述目标色系。
在本申请的装置的任意实施例的基础上，所述图像分割模块5200，还包括：图像采集单元，设置为持续采集外部的终端设备中的界面图像；黑带消除单元，设置为将当前获得的界面图像消除边缘黑带，得到无黑带图像；图像增强单元，设置为提升所述无黑带图像中属于暗光像素的目标像素的颜色值，得到增强图像；图像输出单元，设置为将该增强图像添加到图像帧序列，由该图像帧序列有序将其中的增强图像出列作为所述目标图像使用。
在本申请任意实施例的基础上，请参阅图10，本申请的另一实施例还提供一种计算机设备，该计算机设备可以充当氛围灯设备中的控制器使用，如图10所示，计算机设备的内部结构示意图。该计算机设备包括通过系统总线连接的处理器、计算机可读存储介质、存储器和网络接口。其中，该计算机设备的计算机可读存储介质存储有操作系统、数据库和封装计算机可读指令的计算机程序，数据库中可存储有控件信息序列，该计算机可读指令被处理器执行时，可使得处理器实现一种氛围灯设备灯效播放控制方法。该计算机设备的处理器用于提供计算和控制能力，支撑整个计算机设备的运行。该计算机设备的存储器中可存储有计算机可读指令，该计算机可读指令被处理器执行时，可使得处理器执行本申请的氛围灯设备灯效播放控制方法。该计算机设备的网络接口用于与终端连接通信。本领域技术人员可以理解，图10中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
本实施方式中处理器用于执行图9中的各个模块及其子模块的具体功能，存储器存储有执行上述模块或子模块所需的程序代码和各类数据。网络接口用于向用户终端或服务器之间的数据传输。本实施方式中的存储器存储有本申请的氛围灯设备灯效播放控制装置中执行所有模块/子模块所需的程序代码及数据，服务器能够调用服务器的程序代码及数据执行所有子模块的功能。
本申请还提供一种存储有计算机可读指令的存储介质，计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行本申请任一实施例所述氛围灯设备灯效播放控制方法的步骤。
本申请还提供一种计算机程序产品，包括计算机程序/指令，该计算机程序/指令被一个或多个处理器执行时实现本申请任一实施例所述氛围灯设备灯效播放控制方法的步骤。
本领域普通技术人员可以理解实现本申请上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储记忆体（Read-Only Memory，ROM）等计算机可读存储介质，或随机存储记忆体（Random Access Memory，RAM）等。
以上所述仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。
综上所述，本申请提供便捷的自定义手段，先通过界面画布获取用户指定的识别位置，根据识别位置确定内容对象的图像内容的主色调及其在氛围灯设备中相对应的发光单元集，然后将内容对象的图像内容的主色调投射到相应的发光单元集，使氛围灯设备对应该目标图像播放的灯效，能够以内容对象为分区单位呈现相应图像内容中的色彩效果，从而在实体空间高度还原渲染出仿真目标图像的原图光线氛围的效果，使光线氛围更能围绕用户所指定的识别位置的内容对象来突出重点进行展现，当氛围灯设备根据终端设备的桌面图像播放相应的灯效时，能够明显增强终端设备使用者的沉浸感。
Claims (10)
1.一种氛围灯设备灯效播放控制方法，其特征在于，包括：
基于界面画布获取识别位置的位置信息构造为分割识别规则，所述界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；
从视频流中确定目标图像，根据所述分割识别规则对所述目标图像进行图像语义分割，确定所述目标图像中与各个所述识别位置相对应的内容对象的图像内容和内容区域；
根据所述目标图像与所述显示画幅的映射关系，确定每个内容对象在所述显示画幅中相对应的映射区域内的发光单元集；
根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。
2.根据权利要求1所述的氛围灯设备灯效播放控制方法，其特征在于，根据所述分割识别规则对所述目标图像进行图像语义分割，包括：
采用处于自动分割模式的图像提示分割模型，确定出所述目标图像中的各个内容对象相对应的全图掩膜，以及各个内容对象在所述目标图像中的区域图像相对应的窗口位置信息，所述全图掩膜按照目标图像的尺寸规格表示出相应的内容对象的内容区域；
由该图像提示分割模型将所述分割识别规则中的各个位置信息与各个内容对象的窗口位置信息进行匹配，选定实现匹配的各个内容对象，作为目标内容对象；
基于所述全图掩膜在所述目标图像中确定目标内容对象的图像内容及该图像内容相对应的内容区域。
3.根据权利要求1所述的氛围灯设备灯效播放控制方法，其特征在于，根据所述分割识别规则对所述目标图像进行图像语义分割，包括：
调用所述目标图像及所述分割识别规则；
采用处于非自动分割模式的图像提示分割模型，基于所述分割识别规则确定出所述目标图像中的各个内容对象相对应的全图掩膜，所述全图掩膜按照目标图像的尺寸规格表示出相应的内容对象的内容区域；
基于所述全图掩膜在所述目标图像中确定目标内容对象的图像内容及该图像内容相对应的内容区域。
4.根据权利要求1至3中任意一项所述的氛围灯设备灯效播放控制方法，其特征在于，基于界面画布获取识别位置的位置信息构造为分割识别规则，包括：
获取氛围灯设备的布局配置信息，所述布局配置信息基于参考坐标系，描述出各个发光单元在该参考坐标系中的位置信息；
根据所述布局配置信息确定所述氛围灯设备的显示画幅，生成该显示画幅相对应的界面画布，显示到图形用户界面中；
接收基于所述界面画布指定的至少一个识别位置，确定所述识别位置相对于所述参考坐标系的坐标信息作为位置信息；
将各个所述识别位置的位置信息构造为分割识别规则。
5.根据权利要求1至3中任意一项所述的氛围灯设备灯效播放控制方法，其特征在于，根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效，包括：
获取氛围灯设备相对应的灯效描述模板，所述灯效描述模板包含该氛围灯设备中各个发光单元相对应的色值属性项；
以每个内容对象的图像内容确定主色调相对应的图像颜色值，为该内容对象相对应的发光单元集中的各个发光单元的所述色值属性项赋值，从而将该图像颜色值设定为该色值属性项中的发光颜色值；
将设定了氛围灯设备中的各个发光单元的发光颜色值的灯效描述模板转换为灯效播放指令，控制所述各个发光单元协同播放所述目标图像相对应的灯效。
6.根据权利要求5所述的氛围灯设备灯效播放控制方法，其特征在于，以每个内容对象的图像内容确定主色调相对应的图像颜色值，包括：
将每个内容对象的图像内容输入预设的情绪分类模型中，推理确定该图像内容所传达的情绪属性；
根据各个内容对象的情绪属性相对应的主色调，确定各个内容对象相对应的图像颜色值。
7.根据权利要求6所述的氛围灯设备灯效播放控制方法，其特征在于，根据各个内容对象的情绪属性相对应的主色调，确定各个内容对象相对应的图像颜色值之后，包括：
将所述目标图像输入所述情绪分类模型中，推理确定所述目标图像所传达的情绪属性；
根据所述目标图像的情绪属性相对应的主色调确定其所属的目标色系；
检测每个内容对象的情绪属性相对应的主色调是否属于所述目标色系，将不属于该目标色系的各个内容对象的主色调，参考相同基准变换至所述目标色系。
8.一种氛围灯设备灯效播放控制装置，其特征在于，包括：
画布显示模块，设置为基于界面画布获取识别位置的位置信息构造为分割识别规则，所述界面画布用于表示以氛围灯设备中的各个发光单元为基本像素构成的显示画幅；
图像分割模块，设置为从视频流中确定目标图像，根据所述分割识别规则对所述目标图像进行图像语义分割，确定所述目标图像中与各个所述识别位置相对应的内容对象的图像内容和内容区域；
区域映射模块，设置为根据所述目标图像与所述显示画幅的映射关系，确定每个内容对象在所述显示画幅中相对应的映射区域内的发光单元集；
灯效播放模块，设置为根据各个内容对象的图像内容的主色调控制相应的发光单元集中的各个发光单元播放相应的灯效。
9.一种氛围灯设备，包括中央处理器和存储器，其特征在于，所述中央处理器用于调用运行存储于所述存储器中的计算机程序以执行如权利要求1至7中任意一项所述的方法的步骤。
10.一种非易失性可读存储介质，其特征在于，其以计算机可读指令的形式存储有计算机程序，所述计算机程序被计算机调用运行时，执行如权利要求1至7中任意一项所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311712895.7A CN117412449B (zh) | 2023-12-13 | 2023-12-13 | 氛围灯设备及其灯效播放控制方法和相应的装置、介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311712895.7A CN117412449B (zh) | 2023-12-13 | 2023-12-13 | 氛围灯设备及其灯效播放控制方法和相应的装置、介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN117412449A true CN117412449A (zh) | 2024-01-16 |
| CN117412449B CN117412449B (zh) | 2024-03-01 |
Family
ID=89492905
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311712895.7A Active CN117412449B (zh) | 2023-12-13 | 2023-12-13 | 氛围灯设备及其灯效播放控制方法和相应的装置、介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117412449B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117651355A (zh) * | 2024-01-30 | 2024-03-05 | 攀枝花镁森科技有限公司 | 一种cob灯带的灯光显示控制方法、系统和存储介质 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101472363A (zh) * | 2007-12-24 | 2009-07-01 | 皇家飞利浦电子股份有限公司 | 照明网络中的无线控制系统及方法 |
| US20100039561A1 (en) * | 2006-12-21 | 2010-02-18 | Koninklijke Philips Electronics N.V. | System, method, computer-readable medium, and user interface for displaying light radiation |
| US20200364461A1 (en) * | 2019-05-17 | 2020-11-19 | Shanghai Bilibili Technology Co., Ltd. | Method of obtaining mask frame data, computing device, and readable storage medium |
| CN113630932A (zh) * | 2020-12-11 | 2021-11-09 | 萤火虫（深圳）灯光科技有限公司 | 基于边界识别的灯光控制方法、控制器、模组及存储介质 |
| CN114040249A (zh) * | 2021-11-26 | 2022-02-11 | 康佳集团股份有限公司 | 基于画面的氛围灯调节方法、装置、智能终端及存储介质 |
| CN114266838A (zh) * | 2021-12-09 | 2022-04-01 | 深圳市智岩科技有限公司 | 图像数据处理方法、装置、电子设备及存储介质 |
| CN116485886A (zh) * | 2023-01-03 | 2023-07-25 | 腾讯科技（深圳）有限公司 | 一种灯具同步方法、装置、设备及存储介质 |
| US20230262863A1 (en) * | 2020-06-09 | 2023-08-17 | Signify Holding B.V. | A control system and method of configuring a light source array |
| CN117197261A (zh) * | 2023-11-07 | 2023-12-08 | 深圳市千岩科技有限公司 | 氛围灯设备及其取色方法和相应的装置、介质 |
| CN117202451A (zh) * | 2023-11-07 | 2023-12-08 | 深圳市千岩科技有限公司 | 氛围灯设备及其发光控制方法、装置和介质 |
-
2023
- 2023-12-13 CN CN202311712895.7A patent/CN117412449B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100039561A1 (en) * | 2006-12-21 | 2010-02-18 | Koninklijke Philips Electronics N.V. | System, method, computer-readable medium, and user interface for displaying light radiation |
| CN101472363A (zh) * | 2007-12-24 | 2009-07-01 | 皇家飞利浦电子股份有限公司 | 照明网络中的无线控制系统及方法 |
| US20200364461A1 (en) * | 2019-05-17 | 2020-11-19 | Shanghai Bilibili Technology Co., Ltd. | Method of obtaining mask frame data, computing device, and readable storage medium |
| US20230262863A1 (en) * | 2020-06-09 | 2023-08-17 | Signify Holding B.V. | A control system and method of configuring a light source array |
| CN113630932A (zh) * | 2020-12-11 | 2021-11-09 | 萤火虫（深圳）灯光科技有限公司 | 基于边界识别的灯光控制方法、控制器、模组及存储介质 |
| CN114040249A (zh) * | 2021-11-26 | 2022-02-11 | 康佳集团股份有限公司 | 基于画面的氛围灯调节方法、装置、智能终端及存储介质 |
| CN114266838A (zh) * | 2021-12-09 | 2022-04-01 | 深圳市智岩科技有限公司 | 图像数据处理方法、装置、电子设备及存储介质 |
| CN116485886A (zh) * | 2023-01-03 | 2023-07-25 | 腾讯科技（深圳）有限公司 | 一种灯具同步方法、装置、设备及存储介质 |
| CN117197261A (zh) * | 2023-11-07 | 2023-12-08 | 深圳市千岩科技有限公司 | 氛围灯设备及其取色方法和相应的装置、介质 |
| CN117202451A (zh) * | 2023-11-07 | 2023-12-08 | 深圳市千岩科技有限公司 | 氛围灯设备及其发光控制方法、装置和介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117651355A (zh) * | 2024-01-30 | 2024-03-05 | 攀枝花镁森科技有限公司 | 一种cob灯带的灯光显示控制方法、系统和存储介质 |
| CN117651355B (zh) * | 2024-01-30 | 2024-04-02 | 攀枝花镁森科技有限公司 | 一种cob灯带的灯光显示控制方法、系统和存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117412449B (zh) | 2024-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108876931B (zh) | 三维物体颜色调整方法、装置、计算机设备及计算机可读存储介质 | |
| CN117412449B (zh) | 氛围灯设备及其灯效播放控制方法和相应的装置、介质 | |
| CN109783182A (zh) | 一种页面主题色调的调整方法、装置、设备及介质 | |
| EP3779888B1 (en) | Generating candidate images appropriate for image synthesis with an input image | |
| CN117202451B (zh) | 氛围灯设备及其发光控制方法、装置和介质 | |
| CN106406504B (zh) | 人机交互界面的氛围渲染系统与方法 | |
| CN117197261B (zh) | 氛围灯设备及其取色方法和相应的装置、介质 | |
| CN117202447B (zh) | 氛围灯设备及其边角取色方法和相应的装置、介质 | |
| CN111080806B (zh) | 贴图处理方法及装置、电子设备、存储介质 | |
| CN110084204B (zh) | 基于目标对象姿态的图像处理方法、装置和电子设备 | |
| CN117521179B (zh) | 氛围灯设备及发光分区布局构造方法、装置和计算机设备 | |
| CN110110412A (zh) | 基于bim技术的户型全装修模拟展示方法及展示系统 | |
| CN113597061A (zh) | 控制幻彩灯带的方法、设备和计算机可读存储介质 | |
| CN115884471A (zh) | 灯效控制方法及其装置、设备、介质、产品 | |
| CN105939560A (zh) | 照明控制装置、照明系统以及程序 | |
| US20210264191A1 (en) | Method and device for picture generation, electronic device, and storage medium | |
| CN117412450B (zh) | 氛围灯设备及其灯效配色方法和相应的装置、介质 | |
| US9640141B2 (en) | Method and apparatus for ambient lighting color determination | |
| CN117412452B (zh) | 氛围灯设备及其配色方法和相应的装置、介质 | |
| CN117412451B (zh) | 氛围灯设备及其映射配色方法和相应的装置、介质 | |
| CN110310341A (zh) | 颜色算法中默认参数的生成方法、装置、设备和存储介质 | |
| KR20110092060A (ko) | 텍스트를 포함하는 모자이크 이미지를 생성하기 위한 장치 및 방법 | |
| EP3913616A1 (en) | Display method and device, computer program, and storage medium | |
| CN117440574B (zh) | 灯屏设备及灯效生成方法和相应的装置、介质 | |
| CN117528873B (zh) | 氛围灯设备及发光分区布局生成方法、装置和计算机设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |