CN113099295A - 配乐音量自适应调节平台 - Google Patents

配乐音量自适应调节平台 Download PDF

Info

Publication number
CN113099295A
CN113099295A CN202010020347.8A CN202010020347A CN113099295A CN 113099295 A CN113099295 A CN 113099295A CN 202010020347 A CN202010020347 A CN 202010020347A CN 113099295 A CN113099295 A CN 113099295A
Authority
CN
China
Prior art keywords
volume
scene
equipment
soundtrack
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202010020347.8A
Other languages
English (en)
Inventor
袁芬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202010020347.8A priority Critical patent/CN113099295A/zh
Publication of CN113099295A publication Critical patent/CN113099295A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明涉及一种配乐音量自适应调节平台,包括:配乐控制设备,与视频获取设备连接,用于将配乐音频的播放音量调整到与接收到的配乐音量一致并实现配乐音频的播放与短视频的当前帧的播放同步;视频获取设备,用于获取待配乐的无声短视频,将所述无声短视频的当前帧作为即时视频图像输出;场景识别设备,用于对接收到的图像执行场景识别,以获得对应的场景类型;音量选择设备,与所述场景识别设备连接,用于基于接收到的场景类型选择与所述场景类型匹配的配乐音量。本发明的配乐音量自适应调节平台运行智能、方便操控。由于能够使得短视频的配乐音量大小与短视频的当前播放场景类型相适应,从而为观众提供更愉悦的视听享受。

Description

配乐音量自适应调节平台
技术领域
本发明涉及短视频配乐领域,尤其涉及一种配乐音量自适应调节平台。
背景技术
短视频即短片视频,是一种互联网内容传播方式,一般是在互联网新媒体上传播的时长在5分钟以内的视频;随着移动终端普及和网络的提速,短平快的大流量传播内容逐渐获得各大平台、粉丝和资本的青睐。
随着网红经济的出现,视频行业逐渐崛起一批优质UGC内容制作者,微博、秒拍、快手、今日头条纷纷入局短视频行业,募集一批优秀的内容制作团队入驻。到了2017年,短视频行业竞争进入白热化阶段,内容制作者也偏向PGC化专业运作。
短视频是指在各种新媒体平台上播放的、适合在移动状态和短时休闲状态下观看的、高频推送的视频内容,几秒到几分钟不等。内容融合了技能分享、幽默搞怪、时尚潮流、社会热点、街头采访、公益教育、广告创意、商业定制等主题。由于内容较短,可以单独成片,也可以成为系列栏目。
不同于微电影和直播,短视频制作并没有像微电影一样具有特定的表达形式和团队配置要求,具有生产流程简单、制作门槛低、参与性强等特点,又比直播更具有传播价值,超短的制作周期和趣味化的内容对短视频制作团队的文案以及策划功底有着一定的挑战,优秀的短视频制作团队通常依托于成熟运营的自媒体或IP,除了高频稳定的内容输出外,也有强大的粉丝渠道;短视频的出现丰富了新媒体原生广告的形式。
发明内容
为了解决现有技术中的相关问题,本发明提供了一种配乐音量自适应调节平台,能够根据短视频画面的场景识别结果为短视频的配乐提供执行相应的音量大小的控制,从而保证短视频制作的质量。
为此,本发明需要具备以下两处重要的发明点:
(1)对当前短视频的每一帧画面进行基于视觉识别的场景类型识别,基于识别到的场景类型实时选择不同的配乐音量以实现对当前短视频的自适应配乐;
(2)基于不同场景的轮廓特征和颜色特征对场景类型进行具体的类型识别,以提升场景识别的精度。
根据本发明的一方面,提供了一种配乐音量自适应调节平台,所述平台包括:
配乐控制设备,与视频获取设备连接,用于将配乐音频的播放音量调整到与接收到的配乐音量一致并实现配乐音频的播放与短视频的当前帧的播放同步;
视频获取设备,用于获取待配乐的无声短视频,将所述无声短视频的当前帧作为即时视频图像输出;
第一处理设备,与所述视频获取设备连接,用于对接收到的即时视频图像;
色阶调整设备,与所述第一处理设备连接,用于接收所述即时视频图像,对所述即时视频图像执行色阶调整处理,以获得对应的色阶调整图像;
几何校正设备,与所述色阶调整设备连接,用于对接收到的色阶调整图像执行处理,以获得并输出对应的几何校正图像;
场景识别设备,与所述几何校正设备连接,用于对接收到的几何校正图像执行场景识别,以获得对应的场景类型;
音量选择设备,与所述场景识别设备连接,用于基于接收到的场景类型选择与所述场景类型匹配的配乐音量;
其中,所述场景识别设备识别到的对应的场景类型包括草坪、高山、人物、河流和街道;
其中,在所述音量选择设备中,当接收到的场景类型为草坪时,选择的配乐音量小于当接收到的场景类型为河流的选择的配乐音量;
其中,所述场景识别设备基于各种场景的不同成像特征对接收到的即时视频图像执行场景识别;
其中,在所述场景识别设备中,每一种场景的成像特征包括轮廓特征和颜色特征。
根据本发明的另一方面,还提供了一种配乐音量自适应调节方法,所述方法包括使用一种如上述的配乐音量自适应调节平台,用于根据当前短视频的画面场景类型实时选择并配置不同的配乐音量。
本发明的配乐音量自适应调节平台运行智能、方便操控。由于能够使得短视频的配乐音量大小与短视频的当前播放场景类型相适应,从而为观众提供更愉悦的视听享受。
具体实施方式
下面将对本发明的配乐音量自适应调节平台的实施方案进行详细说明。
配乐一般是指在电影、电视剧、记录片、诗朗诵﹑话剧等文艺作品中,按照情节的需要配上的背景音乐或主题音乐,多是为了配合情节发展和场景的情绪,起到烘托气氛的作用,以增强艺术效果。配乐的制作有以乐器、声乐、乐团或电子音乐等方式制作。
多媒体技术是90年代计算机领域中相当热门的技术之一,它标志着90年代计算机发展的时代特征,并预示着二十一世纪计算机发展方向。多媒体是一个处理和提供声音、图像、文字、动画等多种信息形式,在多种信息形式之间建立逻辑连接,并集成为一个具有交互能力的计算机系统。在国内市场上多媒体领域包括网络Flash与视频广告、企业多媒体光盘、多媒体教学光盘、电脑广告片、移动电话音乐等应用领域。在多媒体技术中,音乐无疑是一个相当重要的环节。
目前,短视频因为其持续时间短暂且内容丰富的特点为视频用户所青睐。随着短视频的不断普及,用户对短视频的要求也越来越高,例如,需要更完美的视频内容和配乐音量和节奏的结合,为视频用户提供更完美的视听体验。
为了克服上述不足,本发明搭建了一种配乐音量自适应调节平台,能够有效解决相应的技术问题。
根据本发明实施方案示出的配乐音量自适应调节平台包括:
配乐控制设备,与视频获取设备连接,用于将配乐音频的播放音量调整到与接收到的配乐音量一致并实现配乐音频的播放与短视频的当前帧的播放同步;
视频获取设备,用于获取待配乐的无声短视频,将所述无声短视频的当前帧作为即时视频图像输出;
第一处理设备,与所述视频获取设备连接,用于对接收到的即时视频图像;
色阶调整设备,与所述第一处理设备连接,用于接收所述即时视频图像,对所述即时视频图像执行色阶调整处理,以获得对应的色阶调整图像;
几何校正设备,与所述色阶调整设备连接,用于对接收到的色阶调整图像执行处理,以获得并输出对应的几何校正图像;
场景识别设备,与所述几何校正设备连接,用于对接收到的几何校正图像执行场景识别,以获得对应的场景类型;
音量选择设备,与所述场景识别设备连接,用于基于接收到的场景类型选择与所述场景类型匹配的配乐音量;
其中,所述场景识别设备识别到的对应的场景类型包括草坪、高山、人物、河流和街道;
其中,在所述音量选择设备中,当接收到的场景类型为草坪时,选择的配乐音量小于当接收到的场景类型为河流的选择的配乐音量;
其中,所述场景识别设备基于各种场景的不同成像特征对接收到的即时视频图像执行场景识别;
其中,在所述场景识别设备中,每一种场景的成像特征包括轮廓特征和颜色特征。
接着,继续对本发明的配乐音量自适应调节平台的具体结构进行进一步的说明。
所述配乐音量自适应调节平台中还可以包括:
触摸屏,用于根据用户的操作,接收用户的输入信息。
所述配乐音量自适应调节平台中:
所述场景识别设备与所述色阶调整设备、所述几何校正设备共用同一用户控制接口,所述用户控制接口由CPLD芯片来实现。
所述配乐音量自适应调节平台中:
所述场景识别设备内置有计数器,用于实时累计所述场景识别设备的加法级别的运算次数。
所述配乐音量自适应调节平台中还可以包括:
金属散热片,设置在所述几何校正设备的附近,用于与所述几何校正设备的外壳连接,用于实现对所述几何校正设备的散热处理。
所述配乐音量自适应调节平台中:
所述色阶调整设备、所述几何校正设备和所述场景识别设备与同一石英振荡设备连接,用于获取所述石英振荡设备提供的时序数据。
所述配乐音量自适应调节平台中:
所述场景识别设备设置有多个散热孔,所述多个散热孔均匀分布在所述场景识别设备的外壳上。
所述配乐音量自适应调节平台中还可以包括:
压力传感设备,设置在所述色阶调整设备的内部,用于感应所述色阶调整设备的内部压力。
所述配乐音量自适应调节平台中还可以包括:
压力报警设备,与所述压力传感设备连接,用于在接收到的所述色阶调整设备的内部压力超限时,执行相应的压力报警操作。
同时,为了克服上述不足,本发明还搭建了一种配乐音量自适应调节方法,所述方法包括使用一种如上述的配乐音量自适应调节平台,用于根据当前短视频的画面场景类型实时选择并配置不同的配乐音量。
另外,CPLD具有编程灵活、集成度高、设计开发周期短、适用范围宽、开发工具先进、设计制造成本低、对设计者的硬件经验要求低、标准产品无需测试、保密性强、价格大众化等特点,可实现较大规模的电路设计,因此被广泛应用于产品的原型设计和产品生产(一般在10,000件以下)之中。几乎所有应用中小规模通用数字集成电路的场合均可应用CPLD器件。CPLD器件已成为电子产品不可缺少的组成部分,它的设计和应用成为电子工程师必备的一种技能。CPLD是一种用户根据各自需要而自行构造逻辑功能的数字集成电路。其基本设计方法是借助集成开发软件平台,用原理图、硬件描述语言等方法,生成相应的目标文件,通过下载电缆(“在系统”编程)将代码传送到目标芯片中,实现设计的数字系统。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。
虽然本发明已以实施例揭示如上,但其并非用以限定本发明,任何所属技术领域的普通技术人员,在不脱离本发明的精神和范围内,应当可以做出适当的改动和同等替换。因此本发明的保护范围应当以本申请权利要求所界定的范围为准。

Claims (10)

1.一种配乐音量自适应调节平台,其特征在于,所述平台包括:
配乐控制设备,与视频获取设备连接,用于将配乐音频的播放音量调整到与接收到的配乐音量一致并实现配乐音频的播放与短视频的当前帧的播放同步;
视频获取设备,用于获取待配乐的无声短视频,将所述无声短视频的当前帧作为即时视频图像输出;
第一处理设备,与所述视频获取设备连接,用于对接收到的即时视频图像;
色阶调整设备,与所述第一处理设备连接,用于接收所述即时视频图像,对所述即时视频图像执行色阶调整处理,以获得对应的色阶调整图像;
几何校正设备,与所述色阶调整设备连接,用于对接收到的色阶调整图像执行处理,以获得并输出对应的几何校正图像;
场景识别设备,与所述几何校正设备连接,用于对接收到的几何校正图像执行场景识别,以获得对应的场景类型;
音量选择设备,与所述场景识别设备连接,用于基于接收到的场景类型选择与所述场景类型匹配的配乐音量;
其中,所述场景识别设备识别到的对应的场景类型包括草坪、高山、人物、河流和街道;
其中,在所述音量选择设备中,当接收到的场景类型为草坪时,选择的配乐音量小于当接收到的场景类型为河流的选择的配乐音量;
其中,所述场景识别设备基于各种场景的不同成像特征对接收到的即时视频图像执行场景识别;
其中,在所述场景识别设备中,每一种场景的成像特征包括轮廓特征和颜色特征。
2.如权利要求1所述的配乐音量自适应调节平台,其特征在于,所述平台还包括:
触摸屏,用于根据用户的操作,接收用户的输入信息。
3.如权利要求2所述的配乐音量自适应调节平台,其特征在于:
所述场景识别设备与所述色阶调整设备、所述几何校正设备共用同一用户控制接口,所述用户控制接口由CPLD芯片来实现。
4.如权利要求3所述的配乐音量自适应调节平台,其特征在于:
所述场景识别设备内置有计数器,用于实时累计所述场景识别设备的加法级别的运算次数。
5.如权利要求4所述的配乐音量自适应调节平台,其特征在于,还包括:
金属散热片,设置在所述几何校正设备的附近,用于与所述几何校正设备的外壳连接,用于实现对所述几何校正设备的散热处理。
6.如权利要求5所述的配乐音量自适应调节平台,其特征在于:
所述色阶调整设备、所述几何校正设备和所述场景识别设备与同一石英振荡设备连接,用于获取所述石英振荡设备提供的时序数据。
7.如权利要求6所述的配乐音量自适应调节平台,其特征在于:
所述场景识别设备设置有多个散热孔,所述多个散热孔均匀分布在所述场景识别设备的外壳上。
8.如权利要求7所述的配乐音量自适应调节平台,其特征在于,还包括:
压力传感设备,设置在所述色阶调整设备的内部,用于感应所述色阶调整设备的内部压力。
9.如权利要求8所述的配乐音量自适应调节平台,其特征在于,还包括:
压力报警设备,与所述压力传感设备连接,用于在接收到的所述色阶调整设备的内部压力超限时,执行相应的压力报警操作。
10.一种配乐音量自适应调节方法,所述方法包括提供一种如权利要求1-9任一所述的配乐音量自适应调节平台,用于根据当前短视频的画面场景类型实时选择并配置不同的配乐音量。
CN202010020347.8A 2020-01-09 2020-01-09 配乐音量自适应调节平台 Withdrawn CN113099295A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010020347.8A CN113099295A (zh) 2020-01-09 2020-01-09 配乐音量自适应调节平台

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010020347.8A CN113099295A (zh) 2020-01-09 2020-01-09 配乐音量自适应调节平台

Publications (1)

Publication Number Publication Date
CN113099295A true CN113099295A (zh) 2021-07-09

Family

ID=76663695

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010020347.8A Withdrawn CN113099295A (zh) 2020-01-09 2020-01-09 配乐音量自适应调节平台

Country Status (1)

Country Link
CN (1) CN113099295A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090273712A1 (en) * 2008-05-01 2009-11-05 Elliott Landy System and method for real-time synchronization of a video resource and different audio resources
CN105611404A (zh) * 2015-12-31 2016-05-25 北京东方云图科技有限公司 一种根据视频应用场景自动调节音频音量的方法及装置
CN109446501A (zh) * 2018-10-17 2019-03-08 冼汉生 一种网络小说的处理方法、装置、终端及计算机存储介质
CN110149551A (zh) * 2018-11-06 2019-08-20 腾讯科技(深圳)有限公司 媒体文件播放方法和装置、存储介质及电子装置
CN110310515A (zh) * 2019-04-23 2019-10-08 绿桥(泰州)生态修复有限公司 现场信息识别反馈系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090273712A1 (en) * 2008-05-01 2009-11-05 Elliott Landy System and method for real-time synchronization of a video resource and different audio resources
CN105611404A (zh) * 2015-12-31 2016-05-25 北京东方云图科技有限公司 一种根据视频应用场景自动调节音频音量的方法及装置
CN109446501A (zh) * 2018-10-17 2019-03-08 冼汉生 一种网络小说的处理方法、装置、终端及计算机存储介质
CN110149551A (zh) * 2018-11-06 2019-08-20 腾讯科技(深圳)有限公司 媒体文件播放方法和装置、存储介质及电子装置
CN110310515A (zh) * 2019-04-23 2019-10-08 绿桥(泰州)生态修复有限公司 现场信息识别反馈系统

Similar Documents

Publication Publication Date Title
Newman Video revolutions: on the history of a medium
JP5767108B2 (ja) 媒体生成システム及び方法
CN109168026A (zh) 即时视频显示方法、装置、终端设备及存储介质
US20170048597A1 (en) Modular content generation, modification, and delivery system
CN105611481A (zh) 一种基于空间声的人机交互方法和系统
CN103974135A (zh) 一种视频分享方法及系统
CN105227864A (zh) 一种图片生成动画并与视频片段拼接合成的视频编辑方法
CN107105316A (zh) 一种广告播放方法及装置
CN109600628A (zh) 视频制作方法、装置、计算机设备及存储介质
Uricchio Film, cinema, television… media?
Zhao The micro-movie wave in a globalising China: Adaptation, formalisation and commercialisation
US20140119710A1 (en) Scene control system and method and recording medium thereof
Işıkman A Milestone in film history: Smartphone filmmaking
Sfetcu The Art of movies
Noam The content, impact, and regulation of streaming video: The next generation of media emerges
CN113099295A (zh) 配乐音量自适应调节平台
CN106340287A (zh) 一种手机歌曲点唱的处理方法
CN106331870A (zh) 一种网页视频文件预览方法和系统
CN114697741B (zh) 多媒体信息的播放控制方法及相关设备
US20140064707A1 (en) Scene scheduling system, scene scheduling method, and recording medium thereof
Shyles The art of video production
Tariq Say hello to the digital Hallyu wave in the UAE: The rising digital South Korean wave among Emirati women and its impact on their cultural identity
Peng et al. Research on Poverty Alleviation Path of Film and Television Design in the Context of Media Convergence
Stadel Television as a Sound Medium, 1922-1994
LaRocco Video camera technology in the digital age: Industry standards and the culture of videography

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20210709