CN114666936A - 通过hdmi音视频流做出混合现实氛围效果的系统及方法 - Google Patents

通过hdmi音视频流做出混合现实氛围效果的系统及方法 Download PDF

Info

Publication number
CN114666936A
CN114666936A CN202210347092.5A CN202210347092A CN114666936A CN 114666936 A CN114666936 A CN 114666936A CN 202210347092 A CN202210347092 A CN 202210347092A CN 114666936 A CN114666936 A CN 114666936A
Authority
CN
China
Prior art keywords
data
current
hdmi
atmosphere
change
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210347092.5A
Other languages
English (en)
Inventor
梁文健
顾培德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Suishengyang Technology Co ltd
Original Assignee
Shenzhen Suishengyang Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Suishengyang Technology Co ltd filed Critical Shenzhen Suishengyang Technology Co ltd
Priority to CN202210347092.5A priority Critical patent/CN114666936A/zh
Priority to US17/722,405 priority patent/US11510304B1/en
Publication of CN114666936A publication Critical patent/CN114666936A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/165—Controlling the light source following a pre-assigned programmed sequence; Logic control [LC]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
    • H05B45/20—Controlling the colour of the light
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/105—Controlling the light source in response to determined parameters
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/175—Controlling the light source by remote control
    • H05B47/19—Controlling the light source by remote control via wireless transmission
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/175—Controlling the light source by remote control
    • H05B47/196—Controlling the light source by remote control characterised by user interface arrangements
    • H05B47/1965—Controlling the light source by remote control characterised by user interface arrangements using handheld communication devices
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/155—Coordinated control of two or more light sources
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/175—Controlling the light source by remote control
    • H05B47/198—Grouping of control procedures or address assignation to light sources
    • H05B47/1985—Creation of lighting zones or scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Processing Or Creating Images (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开一种通过HDMI音视频流做出混合现实氛围效果的系统及方法，系统包括有CPU、HDMI HUB、HDMI入口、HDMI出口、MCU LED控制器、无线发送LED控制器、无线接收LED控制器、音频信息处理DSP、电视背景灯以及环境氛围灯；该HDMI HUB连接CPU；该HDMI入口和HDMI出口均连接HDMI HUB，该MCU LED控制器和无线发送LED控制器均连接CPU，通过采用本发明系统及方法，可以让用户在观看视频内容时，氛围更加的沉浸，通过获取视频内容，做相关的算法处理，让电视背景灯以及与环境氛围灯能够和氛围联动，增加更加沉浸的观影感受。

Description

通过HDMI音视频流做出混合现实氛围效果的系统及方法
技术领域
本发明涉及氛围灯领域技术，尤其是指一种通过HDMI音视频流做出混合现实氛围效果的系统及方法。
背景技术
氛围灯又称为LED氛围灯，是LED灯中一种为主题公园、酒店、家居、展会、商业以及艺术照明的完美选择，为人们生活创造需求的氛围。人们可以根据自身照明需要(如颜色、温度、亮度和方向等)来设定自己喜欢的场景情景照明效果，根据各自要求、场景情况，在不同的空间和时间选择并控制光的亮度、灰度、颜色的变化。
目前家庭通过电视屏幕看视频内容，电视背景灯只能拥有简单的氛围模式，不能和视频内容进行联动，周边的灯同样也无法联动。
发明内容
有鉴于此，本发明针对现有技术存在之缺失，其主要目的是提供一种通过HDMI音视频流做出混合现实氛围效果的系统及方法，其能与视频内容进行联动，同时也可以联动周边的灯。
为实现上述目的，本发明采用如下之技术方案：
一种通过HDMI音视频流做出混合现实氛围效果的系统，包括有CPU、HDMI HUB、HDMI入口、HDMI出口、MCU LED控制器、无线发送LED控制器、无线接收LED控制器、音频信息处理DSP、电视背景灯以及环境氛围灯；该HDMI HUB连接CPU；该HDMI入口和HDMI出口均连接HDMI HUB，该MCU LED控制器和无线发送LED控制器均连接CPU，该无线接收LED控制器与无线发送LED控制器无线通讯连接；该音频信息处理DSP连接CPU、MCU LED控制器和无线发送LED控制器；该电视背景灯和环境氛围灯均连接MCU LED控制器和无线接收LED控制器。
优选的，所述CPU还连接有手机APP。
优选的，所述MCU LED控制器还连接有开关机按键、模式选择按键、上模式按键和下模式按键。
一种通过HDMI音视频流做出混合现实氛围效果的方法，采用前述通过HDMI音视频流做出混合现实氛围效果的系统，包括有以下步骤：
步骤1：获取HDMI音视频数据：1.通过HDMI入口把数据给到Switch；2.一路HDMI把HDMI入口数据完全给到HDMI出口；3.一路HDMI把HDMI入口数据给到CPU，然后输入至音频信息处理DSP进行音频信息处理；
步骤2：音频信息处理DSP处理HDMI入口信号数据，并得到对应的氛围灯数据；
1).依据视频帧与帧的变化，做出二维灯效处理，与屏幕的上下左右同步：
S1，通过前后视频流的变化测出当前内容主题氛围：
S1.1算法得到当前帧的基础颜色氛围值；
S1.2判断与前面帧的变化帧数量占比；
S1.3判断与前面帧的变化帧的幅度占比；
S1.4依据前面三步得到的数据，按照权重得到当前的主题氛围；
S2，通过前后视频流变化，给出当前二维氛围灯的数据：
S2.1算法得到当前帧的基础数据；
得到每行的数据的差异关键点；
得到各关键点中间的平均值；
得到当前行的平均值；
依据上述方法的数据依照相关权重得到基础数据；
S2.2算法得到与之前帧变化的数据；
获得当前帧的行与前面帧的行变化像素位；
获得当前帧的行与前面帧的行变化的数量；
获得当前帧的行与前面帧的行变化的差异值；
依据上述方法得到的数据按照相关权重得到变化数据；
S2.3算法依据两组数据加权重得到当前数据；
2).依据视频帧与帧的变化，做出三维灯效处理与视频同步：
S1，通过前后视频流的变化测出当前内容主题氛围；
S1.1算法得到当前帧的基础颜色氛围值；
S1.2判断与前面帧的变化帧数量占比；
S1.3判断与前面帧的变化帧的幅度占比；
S1.4依据前面三步得到的数据，按照权重得到当前的主题氛围；
S2，依据前后视频流和当前图像数据，依据算法，获取当前视角的角度以及对应的立体数据；
S2.1把当前帧的数据做频域变化，找出分隔线；
S2.2依据分隔线推导出当前场景的视角；
S2.3依据分隔线和场景视角推导出立体场景；
S2.4依据场景分别得到各个方位出立体氛围灯的数据；
S3，依据S1和S2的数据做权重相加，得到当前数据；
3).依据音频流的数据变化，依据算法，给出当前氛围灯的变化效果：
S1.得到当前声音变化的类型：
S1.1得到各个声道声音的幅值变化值关键点；
S1.2依据变化得出声音类型；
S2.给出二维显示数据：
S2.1把立体声道的数据给出平面化的数据(上下左右)；
S2.2依据声音类型和当前的平面化的数据加权重得到当前的数据；
S3.计算出三维氛围显示数据：
S3.1依据声音类型和当前的各个立体声道数据加权重得到各个方位的氛围灯的效果；
4).依据音频流的数据变化，依据算法，给出当前设备震动情况：
S1.得到当前声音变化的类型：
S1.1得到各个声道声音的幅值变化值关键点；
S1.2依据变化得出声音类型；
S2.依据各声道设置，给出震动变化数据：
S2.1依据类型和各个声道震动的情况，给出震动数据；
步骤3：把相应的数据传输到对应的氛围灯设备上：
1).通过有线的端口给到指定的幻彩灯设备上显示效果：
S1.APP设定有线端口的类型；
S2.音频信息处理DSP依照得到APP设定的有线端口类型把对应的数据给到对应有线端口；
S3.对应的幻彩灯设备来显示相关效果；
2).通过无线的方式给到指定的幻彩灯设备上显示效果：
S1.APP设置当前模式为二维/三维模式；
S2.APP分别设置幻彩灯设备对应的方位位置；
S3.音视频处理单元传输想关的氛围数据；
S4.幻彩灯设备收到氛围数据后，依据APP的设定来显示相关效果。
本发明与现有技术相比具有明显的优点和有益效果，具体而言，由上述技术方案可知：
通过采用本发明系统及方法，可以让用户在观看视频内容时，氛围更加的沉浸，通过获取视频内容，做相关的算法处理，让电视背景灯以及与环境氛围灯能够和氛围联动，增加更加沉浸的观影感受。
附图说明
图1是本发明之较佳实施例的结构示意图。
附图标识说明：
10、CPU 20、HDMI HUB
30、HDMI入口 40、HDMI出口
50、MCU LED控制器 60、无线发送LED控制器
70、无线接收LED控制器 80、音频信息处理DSP
91、电视背景灯 92、环境氛围灯
93、手机APP 94、开关机按键
95、模式选择按键 96、上模式按键
97、下模式按键
具体实施方式
请参照图1所示，其显示出了本发明之较佳实施例一种通过HDMI音视频流做出混合现实氛围效果的系统的具体结构，包括有CPU10、HDMI HUB20、HDMI入口30、HDMI出口40、MCU LED控制器50、无线发送LED控制器60、无线接收LED控制器70、音频信息处理DSP80、电视背景灯91以及环境氛围灯92。
该HDMI HUB20连接CPU10；该HDMI入口30和HDMI出口40均连接HDMI HUB20，该MCULED控制器50和无线发送LED控制器60均连接CPU10，该无线接收LED控制器70与无线发送LED控制器60无线通讯连接。该音频信息处理DSP80连接CPU10、MCU LED控制器50和无线发送LED控制器60；该电视背景灯91和环境氛围灯92均连接MCU LED控制器50和无线接收LED控制器70。
以及，该CPU10还连接有手机APP93，该手机APP用于控制电视背景灯91的长度。该MCU LED控制器50还连接有开关机按键94、模式选择按键95、上模式按键96和下模式按键97。
本发明还公开一种通过HDMI音视频流做出混合现实氛围效果的方法，采用前述通过HDMI音视频流做出混合现实氛围效果的系统，包括有以下步骤：
步骤1：获取HDMI音视频数据：1.通过HDMI入口30把数据给到Switch；2.一路HDMI把HDMI入口30数据完全给到HDMI出口40；3.一路HDMI把HDMI入口30数据给到CPU10，然后输入至音频信息处理DSP80进行音频信息处理。
步骤2：音频信息处理DSP80处理HDMI入口30信号数据，并得到对应的氛围灯数据；
1).依据视频帧与帧的变化，做出二维灯效处理，与屏幕的上下左右同步：
S1，通过前后视频流的变化测出当前内容主题氛围：
S1.1算法得到当前帧的基础颜色氛围值；
S1.2判断与前面帧的变化帧数量占比；
S1.3判断与前面帧的变化帧的幅度占比；
S1.4依据前面三步得到的数据，按照权重得到当前的主题氛围，如科技、好莱坞、家庭剧、自然风光、星际远航、DJ嗨等；
S2，通过前后视频流变化，给出当前二维氛围灯的数据：
S2.1算法得到当前帧的基础数据；
得到每行的数据的差异关键点；
得到各关键点中间的平均值；
得到当前行的平均值；
依据上述方法的数据依照相关权重得到基础数据；
S2.2算法得到与之前帧变化的数据；
获得当前帧的行与前面帧的行变化像素位；
获得当前帧的行与前面帧的行变化的数量；
获得当前帧的行与前面帧的行变化的差异值；
依据上述方法得到的数据按照相关权重得到变化数据；
S2.3算法依据两组数据加权重得到当前数据；
2).依据视频帧与帧的变化，做出三维灯效处理与视频同步：
S1，通过前后视频流的变化测出当前内容主题氛围，如科技、好莱坞、家庭剧、自然风光、星际远航、DJ嗨等；
S1.1算法得到当前帧的基础颜色氛围值；
S1.2判断与前面帧的变化帧数量占比；
S1.3判断与前面帧的变化帧的幅度占比；
S1.4依据前面三步得到的数据，按照权重得到当前的主题氛围；
S2，依据前后视频流和当前图像数据，依据算法，获取当前视角的角度以及对应的立体数据；
S2.1把当前帧的数据做频域变化，找出分隔线；
S2.2依据分隔线推导出当前场景的视角；
S2.3依据分隔线和场景视角推导出立体场景(开阔\室内)；
S2.4依据场景分别得到各个方位出立体氛围灯的数据；
S3，依据S1和S2的数据做权重相加，得到当前数据；
3).依据音频流的数据变化，依据算法，给出当前氛围灯的变化效果：
S1.得到当前声音变化的类型：
S1.1得到各个声道声音的幅值变化值关键点；
S1.2依据变化得出声音类型(爆炸、欢庆、安静、紧张、恐怖)；
S2.给出二维显示数据：
S2.1把立体声道的数据给出平面化的数据(上下左右)；
S2.2依据声音类型和当前的平面化的数据加权重得到当前的数据；
S3.计算出三维氛围显示数据：
S3.1依据声音类型和当前的各个立体声道数据加权重得到各个方位的氛围灯的效果；
4).依据音频流的数据变化，依据算法，给出当前设备震动情况：
S1.得到当前声音变化的类型：
S1.1得到各个声道声音的幅值变化值关键点；
S1.2依据变化得出声音类型(爆炸、欢庆、安静、紧张、恐怖)；
S2.依据各声道设置，给出震动变化数据：
S2.1依据类型和各个声道震动的情况，给出震动数据；
步骤3：把相应的数据传输到对应的氛围灯设备上：
1).通过有线的端口给到指定的幻彩灯设备上显示效果：
S1.APP设定有线端口的类型；
S2.音频信息处理DSP80依照得到APP设定的有线端口类型把对应的数据给到对应有线端口；
S3.对应的幻彩灯设备来显示相关效果；
2).通过无线的方式给到指定的幻彩灯设备上显示效果：
S1.APP设置当前模式为二维/三维模式；
S2.APP分别设置幻彩灯设备对应的方位位置；
S3.音视频处理单元传输想关的氛围数据；
S4.幻彩灯设备收到氛围数据后，依据APP的设定来显示相关效果。
当前电视背景灯的长度和电视的尺寸会出现不匹配的情况,在做屏幕同步的时候,传统用直接减去灯带的做法,带来电视的兼容性问题,本发明可以用APP来调节灯珠亮的个数来处理,更直接的把灯带长度和电视尺寸做兼容。
本发明的设计重点是：通过采用本发明系统及方法，可以让用户在观看视频内容时，氛围更加的沉浸，通过获取视频内容，做相关的算法处理，让电视背景灯以及与环境氛围灯能够和氛围联动，增加更加沉浸的观影感受。
以上结合具体实施例描述了本发明的技术原理。这些描述只是为了解释本发明的原理，而不能以任何方式解释为对本发明保护范围的限制。基于此处的解释，本领域的技术人员不需要付出创造性的劳动即可联想到本发明的其它具体实施方式，这些方式都将落入本发明的保护范围之内。

Claims (4)

1.一种通过HDMI音视频流做出混合现实氛围效果的系统，其特征在于：包括有CPU、HDMI HUB、HDMI入口、HDMI出口、MCU LED控制器、无线发送LED控制器、无线接收LED控制器、音频信息处理DSP、电视背景灯以及环境氛围灯；该HDMI HUB连接CPU；该HDMI入口和HDMI出口均连接HDMI HUB，该MCU LED控制器和无线发送LED控制器均连接CPU，该无线接收LED控制器与无线发送LED控制器无线通讯连接；该音频信息处理DSP连接CPU、MCU LED控制器和无线发送LED控制器；该电视背景灯和环境氛围灯均连接MCU LED控制器和无线接收LED控制器。
2.如权利要求1所述的通过HDMI音视频流做出混合现实氛围效果的系统，其特征在于：所述CPU还连接有手机APP。
3.如权利要求1所述的通过HDMI音视频流做出混合现实氛围效果的系统，其特征在于：所述MCU LED控制器还连接有开关机按键、模式选择按键、上模式按键和下模式按键。
4.一种通过HDMI音视频流做出混合现实氛围效果的方法，其特征在于：采用如权利要求1-3所述的通过HDMI音视频流做出混合现实氛围效果的系统，包括有以下步骤：
步骤1：获取HDMI音视频数据：1.通过HDMI入口把数据给到Switch；2.一路HDMI把HDMI入口数据完全给到HDMI出口；3.一路HDMI把HDMI入口数据给到CPU，然后输入至音频信息处理DSP进行音频信息处理；
步骤2：音频信息处理DSP处理HDMI入口信号数据，并得到对应的氛围灯数据；
1).依据视频帧与帧的变化，做出二维灯效处理，与屏幕的上下左右同步：
S1，通过前后视频流的变化测出当前内容主题氛围：
S1.1算法得到当前帧的基础颜色氛围值；
S1.2判断与前面帧的变化帧数量占比；
S1.3判断与前面帧的变化帧的幅度占比；
S1.4依据前面三步得到的数据，按照权重得到当前的主题氛围；
S2，通过前后视频流变化，给出当前二维氛围灯的数据：
S2.1算法得到当前帧的基础数据；
得到每行的数据的差异关键点；
得到各关键点中间的平均值；
得到当前行的平均值；
依据上述方法的数据依照相关权重得到基础数据；
S2.2算法得到与之前帧变化的数据；
获得当前帧的行与前面帧的行变化像素位；
获得当前帧的行与前面帧的行变化的数量；
获得当前帧的行与前面帧的行变化的差异值；
依据上述方法得到的数据按照相关权重得到变化数据；
S2.3算法依据两组数据加权重得到当前数据；
2).依据视频帧与帧的变化，做出三维灯效处理与视频同步：
S1，通过前后视频流的变化测出当前内容主题氛围；
S1.1算法得到当前帧的基础颜色氛围值；
S1.2判断与前面帧的变化帧数量占比；
S1.3判断与前面帧的变化帧的幅度占比；
S1.4依据前面三步得到的数据，按照权重得到当前的主题氛围；
S2，依据前后视频流和当前图像数据，依据算法，获取当前视角的角度以及对应的立体数据；
S2.1把当前帧的数据做频域变化，找出分隔线；
S2.2依据分隔线推导出当前场景的视角；
S2.3依据分隔线和场景视角推导出立体场景；
S2.4依据场景分别得到各个方位出立体氛围灯的数据；
S3，依据S1和S2的数据做权重相加，得到当前数据；
3).依据音频流的数据变化，依据算法，给出当前氛围灯的变化效果：
S1.得到当前声音变化的类型：
S1.1得到各个声道声音的幅值变化值关键点；
S1.2依据变化得出声音类型；
S2.给出二维显示数据：
S2.1把立体声道的数据给出平面化的数据(上下左右)；
S2.2依据声音类型和当前的平面化的数据加权重得到当前的数据；
S3.计算出三维氛围显示数据：
S3.1依据声音类型和当前的各个立体声道数据加权重得到各个方位的氛围灯的效果；
4).依据音频流的数据变化，依据算法，给出当前设备震动情况：
S1.得到当前声音变化的类型：
S1.1得到各个声道声音的幅值变化值关键点；
S1.2依据变化得出声音类型；
S2.依据各声道设置，给出震动变化数据：
S2.1依据类型和各个声道震动的情况，给出震动数据；
步骤3：把相应的数据传输到对应的氛围灯设备上：
1).通过有线的端口给到指定的幻彩灯设备上显示效果：
S1.APP设定有线端口的类型；
S2.音视频处理单元依照得到APP设定的有线端口类型把对应的数据给到对应有线端口；
S3.对应的幻彩灯设备来显示相关效果；
2).通过无线的方式给到指定的幻彩灯设备上显示效果：
S1.APP设置当前模式为二维/三维模式；
S2.APP分别设置幻彩灯设备对应的方位位置；
S3.音频信息处理DSP传输想关的氛围数据；
S4.幻彩灯设备收到氛围数据后，依据APP的设定来显示相关效果。
CN202210347092.5A 2022-04-01 2022-04-01 通过hdmi音视频流做出混合现实氛围效果的系统及方法 Pending CN114666936A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210347092.5A CN114666936A (zh) 2022-04-01 2022-04-01 通过hdmi音视频流做出混合现实氛围效果的系统及方法
US17/722,405 US11510304B1 (en) 2022-04-01 2022-04-18 System for producing mixed reality atmosphere effect with HDMI audio/video streaming

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210347092.5A CN114666936A (zh) 2022-04-01 2022-04-01 通过hdmi音视频流做出混合现实氛围效果的系统及方法

Publications (1)

Publication Number Publication Date
CN114666936A true CN114666936A (zh) 2022-06-24

Family

ID=82032558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210347092.5A Pending CN114666936A (zh) 2022-04-01 2022-04-01 通过hdmi音视频流做出混合现实氛围效果的系统及方法

Country Status (2)

Country Link
US (1) US11510304B1 (zh)
CN (1) CN114666936A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024016603A1 (zh) * 2022-07-20 2024-01-25 榜威电子科技（上海）有限公司 流媒体音/视频数据与灯具的联动系统、方法及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000173783A (ja) * 1998-04-13 2000-06-23 Matsushita Electric Ind Co Ltd 照明制御方法及び照明装置
CN102573193A (zh) * 2010-12-24 2012-07-11 上海广茂达光艺科技股份有限公司 Led灯光场景的交互式三维编辑装置及方法
CN103400407A (zh) * 2013-07-12 2013-11-20 天脉聚源(北京)传媒科技有限公司 一种资源展示的方法、装置与终端
US20190069375A1 (en) * 2017-08-29 2019-02-28 Abl Ip Holding Llc Use of embedded data within multimedia content to control lighting
CN114040535A (zh) * 2021-11-15 2022-02-11 深圳市万联通智能科技有限公司 一种依据视频图像变化数据转成led立体幻彩效果的方法及系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130198786A1 (en) * 2011-12-07 2013-08-01 Comcast Cable Communications, LLC. Immersive Environment User Experience
EP2854392A1 (en) * 2013-09-30 2015-04-01 Advanced Digital Broadcast S.A. Lighting system for a display unit and method for providing lighting functionality for a display unit
GB201519171D0 (en) * 2015-10-30 2015-12-16 Woodenshark Llc Lightpack (UK)
WO2021074678A1 (en) * 2019-10-17 2021-04-22 Ghose Anirvan A system to provide synchronized lighting and effects for cinema and home
WO2021160552A1 (en) * 2020-02-13 2021-08-19 Signify Holding B.V. Associating another control action with a physical control if an entertainment mode is active
EP4179849A1 (en) * 2020-07-13 2023-05-17 Signify Holding B.V. Allocating control of a lighting device in an entertainment mode

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000173783A (ja) * 1998-04-13 2000-06-23 Matsushita Electric Ind Co Ltd 照明制御方法及び照明装置
CN102573193A (zh) * 2010-12-24 2012-07-11 上海广茂达光艺科技股份有限公司 Led灯光场景的交互式三维编辑装置及方法
CN103400407A (zh) * 2013-07-12 2013-11-20 天脉聚源(北京)传媒科技有限公司 一种资源展示的方法、装置与终端
US20190069375A1 (en) * 2017-08-29 2019-02-28 Abl Ip Holding Llc Use of embedded data within multimedia content to control lighting
CN114040535A (zh) * 2021-11-15 2022-02-11 深圳市万联通智能科技有限公司 一种依据视频图像变化数据转成led立体幻彩效果的方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李远惦: "浅谈三维动画中灯光设计的应用", 《浅谈三维动画中灯光设计的应用》, 25 February 2014 (2014-02-25) *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024016603A1 (zh) * 2022-07-20 2024-01-25 榜威电子科技（上海）有限公司 流媒体音/视频数据与灯具的联动系统、方法及存储介质

Also Published As

Publication number Publication date
US11510304B1 (en) 2022-11-22

Similar Documents

Publication Publication Date Title
US20250142045A1 (en) Multi-person concurrent content output system
US20100275235A1 (en) Sensory effect media generating and consuming method and apparatus thereof
CN105898342A (zh) 一种视频的多点同屏播放方法及系统
US20150015797A1 (en) Image projecting light bulb
JP2023505918A (ja) ホログラフィックディスプレイ装置及び使用方法
JP2004507937A (ja) 付加的な機能をもつテレビジョンセット
WO2017002642A1 (ja) 情報機器及び表示処理方法
CN105243978B (zh) 沉浸式全视景微型影院系统
CN107787082A (zh) 控制照明源的方法、对应系统及计算机程序产品
CN114666936A (zh) 通过hdmi音视频流做出混合现实氛围效果的系统及方法
CN116830563A (zh) 信息处理装置、信息处理方法和系统
CN115176223A (zh) 信息处理装置、信息处理方法和计算机程序
CN102444298B (zh) 屏幕舞蹈房系统
CN106909908A (zh) 一种影片场景模拟方法、装置及系统
CN205666064U (zh) 一种具有家庭影院功能的k歌系统
WO2023082361A1 (zh) 一种依据视频图像变化数据转成led立体幻彩效果的方法及系统
Novy Computational immersive displays
US11410358B2 (en) System suitable for efficient communication of media stream and a method in association therewith
TWM556913U (zh) Ktv智能盒子
CN205656419U (zh) 带音响的投影仪
CN211909009U (zh) 3d显示设备和3d显示系统
CN115086577A (zh) 用于氛围灯渲染的实时可变刷新率的视频处理方法和系统
CN203167156U (zh) 一种双机结构3d多媒体家庭影院系统
TWI855158B (zh) 即時三維影像顯示的直播系統
CN104216214A (zh) 一种新的特种电影

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination