CN113056066A - 基于电视节目的灯光调节方法、设备、系统及存储介质 - Google Patents
基于电视节目的灯光调节方法、设备、系统及存储介质 Download PDFInfo
- Publication number
- CN113056066A CN113056066A CN201911387323.XA CN201911387323A CN113056066A CN 113056066 A CN113056066 A CN 113056066A CN 201911387323 A CN201911387323 A CN 201911387323A CN 113056066 A CN113056066 A CN 113056066A
- Authority
- CN
- China
- Prior art keywords
- television
- type
- user
- emotion
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000008451 emotion Effects 0.000 claims abstract description 93
- 230000008909 emotion recognition Effects 0.000 claims abstract description 19
- 238000004590 computer program Methods 0.000 claims description 21
- 230000036651 mood Effects 0.000 claims description 15
- 230000003750 conditioning effect Effects 0.000 claims description 3
- 238000005286 illumination Methods 0.000 claims description 3
- 241001465382 Physalis alkekengi Species 0.000 claims description 2
- 238000003062 neural network model Methods 0.000 description 12
- 238000013507 mapping Methods 0.000 description 8
- 238000013527 convolutional neural network Methods 0.000 description 6
- 125000004122 cyclic group Chemical group 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 241000989913 Gunnera petaloidea Species 0.000 description 4
- 239000012634 fragment Substances 0.000 description 3
- 206010011469 Crying Diseases 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000002372 labelling Methods 0.000 description 2
- ZBMRKNMTMPPMMK-UHFFFAOYSA-N 2-amino-4-[hydroxy(methyl)phosphoryl]butanoic acid;azane Chemical compound [NH4+].CP(O)(=O)CCC(N)C([O-])=O ZBMRKNMTMPPMMK-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000002040 relaxant effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- Psychiatry (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Hospice & Palliative Care (AREA)
- Child & Adolescent Psychology (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请提供一种基于电视节目的灯光调节方法、设备、系统及存储介质，该方法包括：获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型，获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，然后根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式。本申请根据获取的电视播放的内容类型和用户观影时表现的情绪类型来调节电视所在区域的灯光模式，从而能够给用户更好的观影体验。
Description
技术领域
本申请涉及智能家居的技术领域，尤其涉及一种基于电视节目的灯光调节方法、设备、系统及存储介质。
背景技术
近年来，人们的生活水平不断提高，人们的娱乐方式也越来越多，其中，观看电视、电影是多数人都比较喜欢的娱乐方式。而由于电视、电影的类型有很多种，可以分为娱乐轻松的类型、感人的类型以及恐怖吓人的类型，不同性格的人喜欢观看不同的节目类型来达到娱乐放松的目的。因此，若人们在观看电视、电影时，配合适合当前节目类型的灯光颜色和亮度，可以给人更好的观影体验。
而现有的灯光调节，一般只能通过手动的方式或者根据节目类型来实现调节观影灯光的模式，该方式不能很好的根据电视节目或电影实时播放的内容以及当前观看人的观看情绪，来实时调节观影灯光模式，缺少体验感。
因此，如何根据电视节目内容以及人的观看情绪实时调节灯光类型，是目前亟待解决的问题。
发明内容
本申请的主要目的在于提供一种基于电视节目的灯光调节方法、设备、系统及存储介质，旨在为用户提供更好的居家观影体验。
第一方面，本申请提供一种基于电视节目的灯光调节方法，所述基于电视节目的灯光调节方法包括以下步骤：
获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型；
获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型；
根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式。
第二方面，本申请还提供一种灯光调节设备，所述灯光调节设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的计算机程序，其中所述计算机程序被所述处理器执行时，实现如上述的基于电视节目的灯光调节方法的步骤。
第三方面，本申请还提供一种灯光调节系统，所述灯光调节系统包括：灯光调节设备、电视和灯具，其中：
所述灯具设于电视所在区域，用于向用户提供照明；
所述电视用于播放节目；
所述灯光调节设备用于执行上述的基于电视节目的灯光调节方法的步骤。
第四方面，本申请还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其中所述计算机程序被处理器执行时，实现如上述的基于电视节目的灯光调节方法的步骤。
本申请提供一种基于电视节目的灯光调节方法、设备、系统及存储介质，通过获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型，然后获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，根据该确定的情绪类型和电视播放的内容类型来调解电视所在区域的灯光的模式。该方法通过确定观看电视的用户的情绪以及电视播放节目的内容类型，调节电视所在区域的灯光，以给用户提供符合电视播放内容类型的灯光，从而给用户提供更好的观影体验。
附图说明
为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种基于电视节目的灯光调节方法的流程示意图；
图2为本申请实施例提供的获取电视前用户语音音频的场景示意图；
图3为本申请实施例提供的一种灯光调节设备的结构示意性框图；
图4为本申请实施例提供的一种灯光调节系统的结构示意性框图。
本申请目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
本申请实施例提供一种基于电视节目的灯光调节方法、设备、系统及存储介质。其中，该基于电视节目的灯光调节方法可应用于灯光调节设备中，该灯光调节设备可以设于电视设备中，与电视设备成为一体，也可以作为独立的终端控制设备来调节灯具的工作模式，例如可以为平板电脑、台式电脑、终端控制面板等等。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
请参照图1，图1为本申请的实施例提供的一种基于电视节目的灯光调节方法的流程示意图。
如图1所示，该基于电视节目的灯光调节方法包括步骤S101至步骤S103。
步骤S101、获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型。
示例性的，当电视处于播放节目视频状态时，获取电视当前播放的节目内容，该获取的节目内容包括含有电视人物音频的节目内容，然后根据该包含电视人物音频的节目内容确定当前电视播放的内容类型。其中，所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，所述获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型，包括：获取电视当前播放的节目内容的人物音频，基于预先训练好的语音识别模型识别所述人物音频中的语气，得到语气识别结果，根据所述语气识别结果确定当前电视播放的内容类型。其中，灯光调节设备可以通过与电视通信来获取电视当前播放的节目内容中的人物音频中的语气作为待语音识别模型识别的人物语气数据。
具体的，灯光调节设备可以根据语气识别结果与人物情绪之间的关系映射表可以确定当前电视播放的节目内容的人物情绪，从而根据该人物情绪确定电视播放内容的类型。例如，神经网络语音识别模型识别出人物的“哭泣”或“哽咽”的语气，根据语气与人物情绪之间的关系映射表可以确定该人物的情绪为悲伤的情绪，从而可以确定当前电视播放的节目内容的类型为悲伤类型。其中，所述语气识别结果与人物情绪之间的关系映射表，用户可自行预先设置各种语气与各种情绪之间的对应关系，本申请在此不做具体的限定。
示例性的，所述预先训练好的语音识别模型可以通过无线网络从云端获取已训练好的语音识别模型；或者用户可以在灯光调节设备的操作界面对初始化的神经网络语音识别模型进行训练，并将训练好的语音识别模型保存在灯光调节设备的存储介质中。
在一些实施例中，所述预先训练好的语音识别模型的训练过程为：获取样本语音音频数据，以及对特定的语音音频进行标注，例如可以将含有特定语气的音频进行标注，如将含有哭泣的“呜呜”语气音频标注为悲伤情绪的音频。将这些含有标注的语音音频和未标注的样本语音音频作为待训练的语音识别模型的样本数据。然后基于该样本数据对初始化的神经网络模型进行迭代训练，直到神经网络模型收敛，得到能够识别用户语音音频中语气的语音识别模型。可以理解的是，上述神经网络模型包括卷积神经网络模型、循环神经网络模型和/或循环卷积神经网络模型，当然也可以采用其他网络模型训练得到语音识别模型，本申请对此不作具体限定。
在另一些实施例中，确定当前电视播放的内容类型还可以通过：获取电视当前播放的节目内容的背景音乐，识别所述背景音乐得到音乐识别结果，所述识别结果至少包括音乐名称，根据所述音乐识别结果查询所述背景音乐的类型，根据所述背景音乐的类型确定当前电视播放的内容类型。其中，灯光调节设备可以通过与电视通信来获取电视当前播放的节目内容中的背景音乐的某一音乐片段作为音乐识别数据。
具体的，灯光调节设备可以将获取的背景音乐的音乐片段输入预先安装的听歌识曲软件，通过该听歌识曲软件可以识别该音乐片段，从而可以得出该音乐片段所属音乐的名称，然后根据该音乐名称通过云端服务器查询该音乐所属的类型，例如可以通过查询该音乐的详情介绍获取该音乐的类型，如详情介绍中的类型标签介绍该音乐是属于“欢乐”型音乐、“悲伤”型音乐和/或“恐怖”型音乐。此外，还可以通过查询该音乐的用户评论详情获取该音乐所属的类型，如绝大多数用户评论详情中含有“笑”字眼的评论内容，可以获知该音乐属于“欢乐”型音乐；再如若超过一半的用户评论详情中含有“吓人”字眼的评论内容，可以获知该音乐属于“恐怖”型音乐。
具体的，识别获取的背景音乐的类型，还可以通过将该背景音乐的某一音乐片段发送给云端服务器，通过云端服务器识别出该音乐片段所属音乐的名称后，根据识别的音乐名称得出该音乐的常用场景，再根据该音乐的常用场景可以确定该音乐片段的类型。例如，云端服务器识别获取的音乐片段属于名称为“好日子”的音乐，根据该音乐名称可以得出该音乐的常用场景为“欢乐”型的应用场景，从而可以确定电视当前播放的节目内容的背景音乐的类型为“欢乐”型的背景音乐。
在确定电视当前播放的节目内容的背景音乐的类型后，可以确定当前电视播放的内容类型，例如，“欢乐”型音乐对应欢乐类型的电视内容；“悲伤”型音乐对应悲伤类型的电视内容；“恐怖”型音乐对应恐怖类型的电视内容。
步骤S102、获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型。
示例性的，灯光调节设备可以通过语音采集装置获取电视前用户的语音信息，该语音采集装置可以设于灯光调节设备中，或者可以设于电视设备上。通过该语音采集装置采集到用户观影时发出的语音音频后，灯光调节设备与该语音采集装置通信，以获取电视前用户的语音信息。
示例性的，灯光调节设备还可以通过获取其他设备上的语音采集装置获取电视前用户的语音信息。例如，可以通过蓝牙音箱上语音采集装置采集用户的语音信息，然后灯光调节设备与蓝牙音箱通信以获取蓝牙音箱的采集装置采集的用户的语音信息。
在获取到电视前用户的语音信息后，基于预先训练好的语音情绪识别模型识别获取的用户的语音音频，再根据语音与用户情绪之间的关系映射表得到语音识别结果所对应的用户情绪，从而确定用户的语音情绪类型。其中，所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，所述获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，可以包括：获取电视前用户的语音音频，基于预先训练好的语音情绪识别模型，识别所述语音音频中的语气，得到语气识别结果，根据所述语气识别结果，确定所述用户的情绪类型。例如，通过识别获取的语音音频中的含有“呜呜”语气的音频，可以识别出该语音音频为“悲伤”型的语音音频，然后根据该“悲伤”型的语音音频查询该语音音频与用户情绪之间的关系映射表，可以确定得到的识别结果为“悲伤”型的语气，从而可以确定用户的情绪类型为悲伤类型的情绪。
在一些实施例中，所述预先训练好的语音情绪识别模型的训练过程为：获取样本语音音频数据，以及对特定的语音音频进行标注，例如可以将含有特定语气的音频进行标注，如将含有哭泣的“呜呜”语气音频标注为悲伤情绪的音频，或者将含有“嘎嘎”语气音频标注为欢乐情绪的音频等等。将这些含有标注的语音音频和未标注的样本语音音频作为待训练的语音情绪识别模型的样本数据。然后基于该样本数据对初始化的神经网络模型进行迭代训练，直到神经网络模型收敛，得到能够识别用户语音音频的语音情绪识别模型。可以理解的是，上述神经网络模型包括卷积神经网络模型、循环神经网络模型和/或循环卷积神经网络模型，当然也可以采用其他网络模型训练得到语音情绪识别模型，本申请对此不作具体限定。
请参照图2，图2为本实施提供的获取电视前用户语音音频的场景示意图。
在另一些实施例中，所述根据获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，还包括：获取电视前用户的语音识别文本，基于预先训练好的语音文本识别模型，识别所述用户的语音文本，得到语音文本识别结果，根据所述语音文本识别结果，确定所述用户的情绪类型。具体的，可以通过根据语音文本识别结果与用户情绪之间的关系映射表确定用户的情绪类型。例如，可以通过识别获取的语音音频中文本含有“哈哈”的文本内容，如图2，当用户发出“哈哈”的语音，通过电视的语音采集装置获取电视前用户的语音音频，该语音音频中含有“哈哈”的文本内容，从而可以识别出该语音文本为“欢乐”类型的语音文本。然后通过查询“语音文本--用户情绪”关系映射表得出该“欢乐”类型的语音文本对应的用户的情绪为欢乐类型的情绪。需要说明的是，“语音文本--情绪”关系映射表之间的对应关系用户根据自身需求自行进行设定，在此不做具体内容的限定。
在一实施例中，所述预先训练好的语音文本识别模型的训练过程为：获取样本语音文本数据，以及对特定的语音文本进行标注，例如可以将含有“哈哈”语音内容的文本标注为欢乐情绪的语音文本，或者将含有“害怕”语音内容的文本标注为恐怖情绪的语音文本等等。将这些含有标注的语音文本和未标注的样本语音文本作为待训练的语音文本识别模型的样本数据。然后基于该样本数据对初始化的神经网络模型进行迭代训练，直到神经网络模型收敛，得到能够识别用户语音文本的语音文本识别模型。可以理解的是，上述神经网络模型包括卷积神经网络模型、循环神经网络模型和/或循环卷积神经网络模型，当然也可以采用其他网络模型训练得到语音文本识别模型，本申请对此不作具体内容的限定。
步骤S103、根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式。
示例性的，在确定用户的情绪类型以及电视播放内容的类型后，比较所述用户的情绪类型与所述内容类型是否匹配，若所述用户的情绪类型与所述内容类型匹配，则调节电视所在区域的灯光的模式以符合所述用户的情绪类型的灯光模式运行。例如，灯光调节设备确定的用户的情绪类型为欢乐类型，确定的电视播放内容的类型也为欢乐类型，该用户的情绪类型与电视播放内容类型相匹配，则调节电视所在区域的灯光模式以符合用户欢乐类型的灯光模式运行。若比较的用户的情绪类型与电视播放内容类型不相匹配，则不调节电视所在区域的灯光模式。
在一些实施中，若用户的情绪类型与电视播放内容的类型匹配，则调节电视所在区域的灯光的模式以符合用户的情绪类型的灯光模式运行，包括：若所述用户的情绪类型与所述内容类型均为欢乐类型，则调节所述电视所在区域的灯光为第一亮度模式；若所述用户的情绪类型与所述内容类型均为悲伤类型，则调节所述电视所在区域的灯光为第二亮度模式；若所述用户的情绪类型与所述内容类型均为恐怖类型，则调节所述电视所在区域的灯光为第三亮度模式；其中，第一亮度模式的灯光亮度大于第二亮度模式的灯光亮度，第二亮度模式的灯光亮度大于第三亮度模式的灯光亮度。
具体的，用户还可以根据灯光亮度模式设置不同的灯光颜色。例如，用户可以设置第一亮度模式的灯光颜色为白光；设置第二亮度模式的灯光颜色为淡黄光；设置第三亮度模式的灯光颜色为黄白光；等等。用户可以根据对不同亮度的灯光模式的颜色喜爱来自行设置，在此不做详尽的举例。
示例性的，调节电视所在区域的灯光模式的方式可以通过灯光调节设备中的WiFi网关、蓝牙网关和/或Z igbee网关给相应的灯具发送灯光模式调节指令，以使所述灯具在接收调节指令后调节灯光模式。
可以理解的，在一些实施例中，确定电视节目的内容类型既可以根据电视当前播放的节目内容的音频中的语气，或者根据节目内容的背景音乐来确定，也可以根据电视当前播放的节目内容的音频和节目内容的背景音乐同时确定。同样的，确定用户的情绪类型既可以根据用户的语音音频中的语气，或者根据用户的语音文本来确定，也可以根据用户的语音音频中的语气和用户的语音文本同时确定。
上述实施例提供的基于电视节目的灯光调节方法，通过获取电视当前播放的节目内容，根据该节目内容确定当前电视播放的内容类型，然后获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，根据该确定的情绪类型和电视播放的内容类型来调解电视所在区域的灯光的模式。该方法通过确定观看电视的用户的情绪以及电视播放节目的内容类型，调节电视所在区域的灯光，以给用户提供符合电视播放内容类型的灯光，从而给用户提供更好的观影体验。
请参照图3，图3为本申请实施例提供的一种灯光调节设备的结构示意性框图。
该灯光调节设备10包括处理器11和存储器12，处理器11和存储器12通过例如系统总线13连接，其中，存储器12可以包括非易失性存储介质和内存储器。
非易失性存储介质可存储计算机程序。该计算机程序包括程序指令，该程序指令被执行时，可使得处理器11执行上述任一种基于电视节目的灯光调节方法。
处理器11用于提供计算和控制能力，以支撑灯光调节设备的运行。
内存储器为非易失性存储介质中的计算机程序的运行提供环境，该计算机程序被处理器执行时，可使得处理器执行上述任一种基于电视节目的灯光调节方法。
本领域技术人员可以理解，图3中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所涉及的灯光调节设备的限定，具体的灯光调节设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
应当理解的是，处理器11可以是中央处理单元(Central Processing Unit，CPU)，该处理器11还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器11可以是微处理器或者该处理器也可以是任何常规的处理器等。
其中，在一些实施例中，所述存储器中存储有计算机程序，计算机程序被处理器执行时，使得处理器执行所述计算机程序时实现以下步骤：
获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型；
获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型；
根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式。
在一些实施例中，所述处理器执行所述计算机程序时还实现以下步骤：
获取电视当前播放的节目内容的人物音频，基于预先训练好的语音识别模型识别所述人物音频中的语气，得到语气识别结果；
根据所述语气识别结果确定当前电视播放的内容类型；
所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，所述处理器执行所述计算机程序时还实现以下步骤：
获取电视当前播放的节目内容的背景音乐，识别所述背景音乐得到音乐识别结果，所述识别结果至少包括音乐名称；
根据所述音乐识别结果查询所述背景音乐的类型，根据所述背景音乐的类型确定当前电视播放的内容类型；
所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，所述处理器执行所述计算机程序时还实现以下步骤：
获取电视前用户的语音音频，基于预先训练好的语音情绪识别模型，识别所述语音音频中的语气，得到语气识别结果；
根据所述语气识别结果，确定所述用户的情绪类型；
所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，所述处理器执行所述计算机程序时还实现以下步骤：
获取电视前用户的语音识别文本，基于预先训练好的语音文本识别模型，识别所述用户的语音文本，得到语音文本识别结果；
根据所述语音文本识别结果，确定所述用户的情绪类型；
所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，所述处理器执行所述计算机程序时还实现以下步骤：
比较所述用户的情绪类型与所述当前电视播放的内容类型是否匹配；
若所述用户的情绪类型与所述当前电视播放的内容类型匹配，则调节电视所在区域的灯光的模式以符合所述用户的情绪类型的灯光模式运行。
在一些实施例中，所述处理器执行所述计算机程序时还实现以下步骤：
若所述用户的情绪类型与所述当前电视播放的内容类型均为欢乐类型，则调节所述电视所在区域的灯光为第一亮度模式；
若所述用户的情绪类型与所述当前电视播放的内容类型均为悲伤类型，则调节所述电视所在区域的灯光为第二亮度模式；
若所述用户的情绪类型与所述当前电视播放的内容类型均为恐怖类型，则调节所述电视所在区域的灯光为第三亮度模式；
其中，第一亮度模式的灯光亮度大于第二亮度模式的灯光亮度，第二亮度模式的灯光亮度大于第三亮度模式的灯光亮度。
请参照图4，图4为本申请实施例提供的一种灯光调节系统的结构示意性框图。
如图4所示，灯光调节系统200可以包括灯电视201、灯光调节设备202和灯具203，其中：
所述灯具203设于电视所在区域，用于向用户提供照明；
所述电视201用于播放节目；
所述灯光调节设备202用于执行获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型，获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式。
在一些实施例中，灯光调节设备202还用于，获取电视当前播放的节目内容的人物音频，基于预先训练好的语音识别模型识别所述人物音频中的语气，得到语气识别结果，根据所述语气识别结果确定当前电视播放的内容类型，所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，灯光调节设备202还用于，获取电视当前播放的节目内容的背景音乐，识别所述背景音乐得到音乐识别结果，所述识别结果至少包括音乐名称，根据所述音乐识别结果查询所述背景音乐的类型，根据所述背景音乐的类型确定当前电视播放的内容类型，所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，灯光调节设备202还用于，获取电视前用户的语音音频，基于预先训练好的语音情绪识别模型，识别所述语音音频中的语气，得到语气识别结果，根据所述语气识别结果，确定所述用户的情绪类型，所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，灯光调节设备202还用于，获取电视前用户的语音识别文本，基于预先训练好的语音文本识别模型，识别所述用户的语音文本，得到语音文本识别结果，根据所述语音文本识别结果，确定所述用户的情绪类型，所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
在一些实施例中，灯光调节设备202还用于，比较所述用户的情绪类型与所述当前电视播放的内容类型是否匹配，若所述用户的情绪类型与所述当前电视播放的内容类型匹配，则调节电视所在区域的灯光的模式以符合所述用户的情绪类型的灯光模式运行。
在一些实施例中，灯光调节设备202还用于，若所述用户的情绪类型与所述当前电视播放的内容类型均为欢乐类型，则调节所述电视所在区域的灯光为第一亮度模式；若所述用户的情绪类型与所述当前电视播放的内容类型均为悲伤类型，则调节所述电视所在区域的灯光为第二亮度模式；若所述用户的情绪类型与所述当前电视播放的内容类型均为恐怖类型，则调节所述电视所在区域的灯光为第三亮度模式；其中，第一亮度模式的灯光亮度大于第二亮度模式的灯光亮度，第二亮度模式的灯光亮度大于第三亮度模式的灯光亮度。
需要说明的是，所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的灯光调节设备的具体工作过程，可以参考前述基于电视节目的灯光调节方法的实施例中的对应过程，在此不再赘述。
本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序中包括程序指令，所述程序指令被执行时所实现的方法可参照本申请基于电视节目的灯光调节方法的各个实施例。
其中，所述计算机可读存储介质可以是前述实施例所述的计算机设备的内部存储单元，例如所述计算机设备的硬盘或内存。所述计算机可读存储介质也可以是所述计算机设备的外部存储设备，例如所述计算机设备上配备的插接式硬盘，智能存储卡(SmartMediaCard，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。
应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种基于电视节目的灯光调节方法，其特征在于，包括：
获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型；
获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型；
根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式。
2.如权利要求1所述的基于电视节目的灯光调节方法，其特征在于，所述获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型，包括：
获取电视当前播放的节目内容的人物音频，基于预先训练好的语音识别模型识别所述人物音频中的语气，得到语气识别结果；
根据所述语气识别结果确定当前电视播放的内容类型；
所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
3.如权利要求1或2所述的基于电视节目的灯光调节方法，其特征在于，所述获取电视当前播放的节目内容，根据所述节目内容确定当前电视播放的内容类型，包括：
获取电视当前播放的节目内容的背景音乐，识别所述背景音乐得到音乐识别结果，所述识别结果至少包括音乐名称；
根据所述音乐识别结果查询所述背景音乐的类型，根据所述背景音乐的类型确定当前电视播放的内容类型；
所述当前电视播放的内容类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
4.如权利要求1所述的基于电视节目的灯光调节方法，其特征在于，所述获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，包括：
获取电视前用户的语音音频，基于预先训练好的语音情绪识别模型，识别所述语音音频中的语气，得到语气识别结果；
根据所述语气识别结果，确定所述用户的情绪类型；
所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
5.如权利要求1、2或4所述的基于电视节目的灯光调节方法，其特征在于，所述获取电视前用户的语音信息，基于预先训练好的语音情绪识别模型，根据所述语音信息确定所述用户的情绪类型，包括：
获取电视前用户的语音识别文本，基于预先训练好的语音文本识别模型，识别所述用户的语音文本，得到语音文本识别结果；
根据所述语音文本识别结果，确定所述用户的情绪类型；
所述用户的情绪类型包括欢乐类型、悲伤类型、恐怖类型中的至少一项。
6.如权利要求1所述的基于电视节目的灯光调节方法，其特征在于，所述根据所述用户的情绪类型和所述当前电视播放的内容类型，调节电视所在区域的灯光的模式，包括：
比较所述用户的情绪类型与所述当前电视播放的内容类型是否匹配；
若所述用户的情绪类型与所述当前电视播放的内容类型匹配，则调节电视所在区域的灯光的模式以符合所述用户的情绪类型的灯光模式运行。
7.如权利要求6所述的基于电视节目的灯光调节方法，其特征在于，所述若所述用户的情绪类型与所述当前电视播放的内容类型匹配，则调节电视所在区域的灯光的模式以符合所述用户的情绪类型的灯光模式运行，包括：
若所述用户的情绪类型与所述当前电视播放的内容类型均为欢乐类型，则调节所述电视所在区域的灯光为第一亮度模式；
若所述用户的情绪类型与所述当前电视播放的内容类型均为悲伤类型，则调节所述电视所在区域的灯光为第二亮度模式；
若所述用户的情绪类型与所述当前电视播放的内容类型均为恐怖类型，则调节所述电视所在区域的灯光为第三亮度模式；
其中，第一亮度模式的灯光亮度大于第二亮度模式的灯光亮度，第二亮度模式的灯光亮度大于第三亮度模式的灯光亮度。
8.一种灯光调节设备，其特征在于，所述灯光调节设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的计算机程序，其中所述计算机程序被所述处理器执行时，实现如权利要求1至7中任一项所述的基于电视节目的灯光调节方法的步骤。
9.一种灯光调节系统，其特征在于，包括：灯光调节设备、电视和灯具，其中：
所述灯具设于电视所在区域，用于向用户提供照明；
所述电视用于播放节目；
所述灯光调节设备用于执行如权利要求1-7中任一项所述的基于电视节目的灯光调节方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，其中所述计算机程序被处理器执行时，实现如权利要求1至7中任一项所述的基于电视节目的灯光调节方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911387323.XA CN113056066B (zh) | 2019-12-26 | 2019-12-26 | 基于电视节目的灯光调节方法、设备、系统及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911387323.XA CN113056066B (zh) | 2019-12-26 | 2019-12-26 | 基于电视节目的灯光调节方法、设备、系统及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113056066A true CN113056066A (zh) | 2021-06-29 |
| CN113056066B CN113056066B (zh) | 2023-05-05 |
Family
ID=76507676
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911387323.XA Active CN113056066B (zh) | 2019-12-26 | 2019-12-26 | 基于电视节目的灯光调节方法、设备、系统及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113056066B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113507761A (zh) * | 2021-09-09 | 2021-10-15 | 深圳易来智能有限公司 | 灯光效果的调整方法和系统、存储介质及电子装置 |
| CN116074573A (zh) * | 2021-10-30 | 2023-05-05 | 杭州当虹科技股份有限公司 | 基于视频内容的情绪表达输出控制方法和系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104780690A (zh) * | 2015-04-23 | 2015-07-15 | 天脉聚源(北京)传媒科技有限公司 | 一种根据电视节目调节灯光的方法及装置 |
| CN107333170A (zh) * | 2017-06-22 | 2017-11-07 | 北京小米移动软件有限公司 | 智能灯的控制方法及装置 |
| CN108093526A (zh) * | 2017-12-28 | 2018-05-29 | 美的智慧家居科技有限公司 | Led灯的控制方法、装置和可读存储介质 |
| CN109005627A (zh) * | 2018-05-25 | 2018-12-14 | 上海与德科技有限公司 | 一种灯光控制方法、装置、终端及存储介质 |
| CN109712644A (zh) * | 2018-12-29 | 2019-05-03 | 深圳市慧声信息科技有限公司 | 基于语音识别情绪变化控制led显示效果的方法、用于控制led显示效果的装置及系统 |
| US20190199958A1 (en) * | 2016-10-31 | 2019-06-27 | Sharp Kabushiki Kaisha | Light output system |
-
2019
- 2019-12-26 CN CN201911387323.XA patent/CN113056066B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104780690A (zh) * | 2015-04-23 | 2015-07-15 | 天脉聚源(北京)传媒科技有限公司 | 一种根据电视节目调节灯光的方法及装置 |
| US20190199958A1 (en) * | 2016-10-31 | 2019-06-27 | Sharp Kabushiki Kaisha | Light output system |
| CN107333170A (zh) * | 2017-06-22 | 2017-11-07 | 北京小米移动软件有限公司 | 智能灯的控制方法及装置 |
| CN108093526A (zh) * | 2017-12-28 | 2018-05-29 | 美的智慧家居科技有限公司 | Led灯的控制方法、装置和可读存储介质 |
| CN109005627A (zh) * | 2018-05-25 | 2018-12-14 | 上海与德科技有限公司 | 一种灯光控制方法、装置、终端及存储介质 |
| CN109712644A (zh) * | 2018-12-29 | 2019-05-03 | 深圳市慧声信息科技有限公司 | 基于语音识别情绪变化控制led显示效果的方法、用于控制led显示效果的装置及系统 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113507761A (zh) * | 2021-09-09 | 2021-10-15 | 深圳易来智能有限公司 | 灯光效果的调整方法和系统、存储介质及电子装置 |
| CN113507761B (zh) * | 2021-09-09 | 2022-01-21 | 深圳易来智能有限公司 | 灯光效果的调整方法和系统、存储介质及电子装置 |
| CN116074573A (zh) * | 2021-10-30 | 2023-05-05 | 杭州当虹科技股份有限公司 | 基于视频内容的情绪表达输出控制方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113056066B (zh) | 2023-05-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6504165B2 (ja) | 情報処理装置及び情報処理方法並びにプログラム | |
| EP2143305B2 (en) | Method, system and user interface for automatically creating an atmosphere, particularly a lighting atmosphere, based on a keyword input | |
| US10609794B2 (en) | Enriching audio with lighting | |
| US20210280172A1 (en) | Voice Response Method and Device, and Smart Device | |
| CN106941619A (zh) | 基于人工智能的节目提醒方法、装置以及系统 | |
| US20130166042A1 (en) | Media content-based control of ambient environment | |
| US20190378518A1 (en) | Personalized voice recognition service providing method using artificial intelligence automatic speaker identification method, and service providing server used therein | |
| US11647261B2 (en) | Electrical devices control based on media-content context | |
| US10451952B2 (en) | Systems and methods to transform events and/or mood associated with playing media into lighting effects | |
| CN113056066B (zh) | 基于电视节目的灯光调节方法、设备、系统及存储介质 | |
| US20210168460A1 (en) | Electronic device and subtitle expression method thereof | |
| CN111292734A (zh) | 一种语音交互方法和装置 | |
| CN109005627A (zh) | 一种灯光控制方法、装置、终端及存储介质 | |
| CN113612830A (zh) | 信息推送方法、装置、终端设备及存储介质 | |
| JP2019165437A (ja) | ディスプレイ装置及びその制御方法 | |
| CN113611306A (zh) | 基于用户习惯的智能家居语音控制方法、系统及存储介质 | |
| CN106055671B (zh) | 一种多媒体数据处理方法及其设备 | |
| CN113055748A (zh) | 基于电视节目的灯光调节方法、设备、系统及存储介质 | |
| CN109976169B (zh) | 基于自学习技术的互联网电视智能控制方法及控制系统 | |
| WO2019228140A1 (zh) | 指令执行方法、装置、存储介质及电子设备 | |
| CN113593582A (zh) | 智能设备的控制方法和装置、存储介质及电子设备 | |
| CN111414883A (zh) | 一种基于人脸情绪的节目推荐方法、终端及存储介质 | |
| US20220151046A1 (en) | Enhancing a user's recognition of a light scene | |
| CN115658914A (zh) | 音乐知识图谱构建方法、电子设备、存储介质及空调 | |
| KR20230107042A (ko) | 전자 장치 및 그 동작 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |