CN111163274B - 一种视频录制方法及显示设备 - Google Patents
一种视频录制方法及显示设备 Download PDFInfo
- Publication number
- CN111163274B CN111163274B CN202010069954.3A CN202010069954A CN111163274B CN 111163274 B CN111163274 B CN 111163274B CN 202010069954 A CN202010069954 A CN 202010069954A CN 111163274 B CN111163274 B CN 111163274B
- Authority
- CN
- China
- Prior art keywords
- video
- interface
- recording
- user
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
- H04N21/4826—End-user interface for program selection using recommendation lists, e.g. of programs or channels sorted out according to their score
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本申请公开了一种视频录制方法及显示设备,显示设备包括用于拍摄画面的摄像头,显示器,通信器,通过通信器与摄像头和显示器通信的处理器;处理器响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面;选择界面包括推荐视频简介列表、视频缩略图文件、歌词和视频素材;响应于用户在选择界面上触发准备录制接口时产生的指定视频内容获取请求,生成准备录制界面。本发明实施例提供的显示设备,可以在进行视频录制时,同步添加该视频对应的视频素材和歌词,使得用户可以录制到除摄像头拍摄的原始画面以外更丰富的内容,以及,随着用户的操作,实时切换显示界面,以呈现给用户丰富的内容,满足用户的个性化需求。
Description
技术领域
本申请涉及视频录制技术领域,尤其涉及一种视频录制方法及显示设备。
背景技术
随着通信技术的不断发展,电脑、智能手机、显示设备等终端设备已经越来越普及。其中,针对显示设备的功能,由于用户对应用体验的需求越来越高,通常可在显示设备中安装不同种类的应用程序,例如“魔力秀”,使得显示设备在自身具备的观看电视的功能之外,还可进行视频录制。
为进行视频录制,通常需要同步采集视频画面和声音,因此显示设备内配置有摄像头和MIC。在显示设备中的某个应用程序进行视频录制时,启动摄像头,被拍摄者位于摄像头的拍摄范围内,以进行画面采集;同时启动MIC进行声音采集。最后将录制的音频和采集的画面进行合成,得到视频文件。
但是,现有的显示设备仅能利用摄像头拍摄摄像头所覆盖区域内的事物,无法在录制过程中同步添加其他视频素材,无法在录制界面上显示丰富的内容,功能较为单一。例如,如果被拍摄者想要录制MV格式的视频,且MV对应的视频素材包括歌词素材、特效素材和美颜素材等,此时,现有的方法只能录制被拍摄者跟唱的视频,而歌词素材、特效素材和美颜素材等则无法添加到录制的视频文件中,使得录制界面仅显示有摄像头拍摄的画面。可见,现有的显示设备在进行视频录制时的录制界面显示单一,不能满足被拍摄者的个性化需求。
发明内容
本申请提供了一种视频录制方法及显示设备,以解决现有的显示设备在视频录制时的录制界面显示单一,不能满足被拍摄者的个性化需求的问题。
第一方面,本申请提供一种显示设备,包括:
摄像头,被配置为拍摄画面;
显示器,被配置为显示所述拍摄画面、选择界面、准备录制界面、录制界面和录制完成界面中的至少一个;
通信器,用于与服务器进行数据通信;
通过所述通信器分别与所述摄像头和所述显示器通信的处理器,所述处理器被配置为:
响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面,所述选择界面包括推荐视频简介列表、视频缩略图文件、歌词和视频素材,所述推荐视频简介列表与视频缩略图文件和视频素材中的至少一个相关联;
响应于用户在所述选择界面上,触发所述准备录制接口时产生的指定视频内容获取请求,生成准备录制界面;
其中,所述准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,所述指定视频内容获取请求用于向服务器获取与所述指定视频对应的视频数据,以及,将所述选择界面切换为准备录制界面。
进一步地,所述处理器被进一步配置为:
响应于用户在所述准备录制界面上,触发所述开始录制按钮时产生的开始录制指令,生成录制界面,所述开始录制指令用于调用摄像头拍摄的画面,以及,将准备录制界面切换为录制界面;所述开始录制按钮是指用于执行开始录制指令的接口;
响应于用户在所述录制界面上触发的结束录制指令,生成录制完成界面,所述录制完成界面显示用户录制完成的摄像头拍摄视频文件,所述摄像头拍摄视频文件是依据摄像头拍摄的画面、指定歌词和指定视频素材进行视频录制得到的文件;
其中,所述录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面以及与所述指定视频相关联的推荐内容的至少一个,所述推荐内容包括视频素材和歌词。
进一步地,所述选择界面包括视频列表界面、视频预览界面和准备录制接口;所述视频列表界面显示有推荐视频简介列表,用于用户挑选指定视频,所述视频预览界面用于基于用户选择的指定视频的视频地址,显示由服务器下发的指定视频的预览内容,所述准备录制接口用于将选择界面切换为准备录制界面。
进一步地,所述处理器被进一步配置为:
响应于用户在所述视频列表界面上,触发的选择信息指令,在所述视频预览界面中基于所述视频地址播放指定视频,所述选择信息指令用于在所述视频列表界面中选择指定视频。
进一步地,所述处理器被进一步配置为:
响应于用户触发视频录制应用程序时产生的应用开启指令,启动摄像头,生成预览界面,所述预览界面用于展示视频录制接口和摄像头拍摄的画面。
进一步地,所述处理器被进一步配置为:
响应于用户触发视频录制接口时产生的视频在线预览请求,生成展示有原始缩略图的选择界面。
进一步地,所述处理器被进一步配置为:
响应于用户触发视频录制接口产生的启动指令,检测网络状态是否连通;
在所述网络状态未连通时,生成提示界面,所述提示界面用于展示提示信息和选择按钮。
进一步地,所述处理器被进一步配置为:
响应于用户触发准备录制接口时产生的指定视频内容获取请求,调用所述摄像头拍摄的画面,得到预览画面;
将所述指定视频内容浮于所述预览画面的一侧显示;
将所述预览画面作为底层、将所述指定视频内容作为上层生成准备录制界面。
进一步地,所述处理器被进一步配置为:
响应于用户触发开始录制按钮时产生的开始录制指令,获取与所述指定视频对应的指定歌词和指定视频素材;
生成包括所述摄像头拍摄的画面和指定视频素材的预览画面;
启动播放展示在所述预览画面的一侧的指定视频内容;
将所述开始录制按钮切换成控制按钮;
获取所述指定视频的总时长,将所述总时长按照倒计时的方式显示在控制按钮上;
将所述指定歌词展示在所述预览画面的底部;
将所述预览画面作为底层、将处于播放状态的所述指定视频内容作为第一中间层、将呈现倒计时状态的控制按钮作为第二中间层、将所述指定歌词作为顶层,生成录制界面。
进一步地,所述处理器被进一步配置为:
实时获取摄像头拍摄的画面,进行全屏展示;
基于所述摄像头拍摄的画面中的目标位置,将所述指定视频素材叠加到所述摄像头拍摄的画面中,得到预览画面。
第二方面,本申请提供了一种视频录制方法,包括以下步骤:
响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面,所述选择界面包括推荐视频简介列表、视频缩略图文件、歌词和视频素材,所述推荐视频简介列表与视频缩略图文件和视频素材中的至少一个相关联;
响应于用户在所述选择界面上,触发所述准备录制接口时产生的指定视频内容获取请求,生成准备录制界面;
其中,所述准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,所述指定视频内容获取请求用于向服务器获取与所述指定视频对应的视频数据,以及,将所述选择界面切换为准备录制界面。
第三方面,本申请还提供了一种计算机存储介质,该计算机存储介质可存储有程序,该程序执行时可实现包括本申请提供的视频录制方法各实施例中的部分或全部步骤。
由以上技术方案可知,本发明实施例提供的一种视频录制方法及显示设备,显示设备包括用于拍摄画面的摄像头,显示拍摄画面、选择界面、准备录制界面、录制界面和录制完成界面中的至少一个的显示器,与服务器进行数据通信的通信器,通过通信器与摄像头和显示器通信的处理器;处理器响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面,选择界面包括推荐视频简介列表、视频缩略图文件和视频素材,推荐视频简介列表与视频缩略图文件、歌词和视频素材中的至少一个相关联;响应于用户在选择界面上,触发准备录制接口时产生的指定视频内容获取请求,生成准备录制界面;其中,准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,指定视频内容获取请求用于向服务器获取与指定视频对应的视频数据,以及,将选择界面切换为准备录制界面。本发明实施例提供的显示设备,可以在进行视频录制时,同步添加与该视频对应的视频素材,并添加歌词进行显示,使得用户可以录制到除摄像头拍摄的原始画面以外更丰富的内容,以及,随着用户的操作,实时切换显示界面,以呈现给用户丰富的内容,满足用户的个性化需求。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据实施例中控制装置的硬件配置框图;
图3中示例性示出了根据实施例中显示设备中硬件系统的硬件配置框图;
图4中示例性示出了根据图3显示设备的硬件架构框图;
图5中示例性示出了根据实施例中显示设备的功能配置示意图;
图6a中示例性示出了根据实施例中显示设备中软件系统的配置示意图;
图6b中示例性示出了根据实施例中显示设备中应用程序的配置示意图;
图7中示例性示出了根据实施例中显示设备中用户界面的示意图;
图8中示例性示出了根据实施例中预览界面的示意图;
图9中示例性示出了根据实施例中启动视频录制应用程序的方法流程图;
图10中示例性示出了根据实施例中启动视频录制接口的方法流程图;
图11中示例性示出了根据实施例中提示界面的示意图;
图12中示例性示出了根据实施例中发送视频在线预览请求的方法流程图;
图13中示例性示出了根据实施例中选择界面的示意图;
图14中示例性示出了根据实施例中原始缩略图的示意图;
图15中示例性示出了根据实施例中视频录制方法的流程图;
图16中示例性示出了根据实施例中展示选择界面的分布示意图;
图17中示例性示出了根据实施例中改变界面背景颜色的方法流程图;
图18中示例性示出根据本实施例生成下载界面的示意图;
图19中示例性示出根据本实施例生成准备录制界面的示意图;
图20中示例性示出根据本实施例生成准备录制界面的方法流程图;
图21中示例性示出根据本实施例生成录制界面的示意图;
图22中示例性示出根据本实施例生成录制界面的方法流程图;
图23中示例性示出根据本实施例生成预览的方法流程图;
图24中示例性示出根据本实施例歌词动态显示的方法流程图;
图25中示例性示出根据本实施例视频合成的方法流程图;
图26中示例性示出根据本实施例合成指定视频文件的方法流程图;
图27中示例性示出根据本实施例合成指定视频文件的数据流图;
图28中示例性示出根据本实施例录制完成界面的示意图;
图29中示例性示出根据本实施例视频录制方法的另一流程图;
图30中示例性示出根据本实施例接收视频在线预览请求的方法流程图;
图31中示例性示出根据本实施例视频录制方法的又一流程图;
图32中示例性示出根据本实施例显示设备与服务器的交互结构框图。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
为便于用户使用,显示设备上通常会设置各种外部装置接口,以便于连接不同的外设设备或线缆以实现相应的功能。而在显示设备的接口上连接有高清晰度的摄像头时,如果显示设备的硬件系统没有接收源码的高像素摄像头的硬件接口,那么就会导致无法将摄像头接收到的数据呈现到显示设备的显示屏上。
并且,受制于硬件结构,传统显示设备的硬件系统仅支持一路硬解码资源,且通常最大仅能支持4K分辨率的视频解码,因此当要实现边观看网络电视边进行视频聊天时,为了不降低网络视频画面清晰度,就需要使用硬解码资源(通常是硬件系统中的GPU)对网络视频进行解码,而在此情况下,只能采取由硬件系统中的通用处理器(例如CPU)对视频进行软解码的方式处理视频聊天画面。
采用软解码处理视频聊天画面,会大大增加CPU的数据处理负担,当CPU的数据处理负担过重时,可能会出现画面卡顿或者不流畅的问题。进一步的,受制于CPU的数据处理能力,当采用CPU软解码处理视频聊天画面时,通常无法实现多路视频通话,当用户想要再同一聊天场景同时与多个其他用户进行视频聊天时,会出现接入受阻的情况。
基于上述各方面的考虑,为克服上述缺陷,本申请公开了一种双硬件系统架构,以实现多路视频聊天数据(至少一路本地视频)。
下面首先结合附图对本申请所涉及的概念进行说明。在此需要指出的是,以下对各个概念的说明,仅为了使本申请的内容更加容易理解,并不表示对本申请保护范围的限定。
本申请各实施例中使用的术语“模块”,可以是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请各实施例中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,该组件通常可在较短的距离范围内无线控制电子设备。该组件一般可以使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请各实施例中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
本申请各实施例中使用的术语“硬件系统”,可以是指由集成电路(IntegratedCircuit,IC)、印刷电路板(Printed circuit board,PCB)等机械、光、电、磁器件构成的具有计算、控制、存储、输入和输出功能的实体部件。在本申请各个实施例中,硬件系统通常也会被称为主板(motherboard)或芯片。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,其可与显示设备200之间通过红外协议通信、蓝牙协议通信、紫蜂(ZigBee)协议通信或其他短距离通信方式进行通信,用于通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等,其可以通过本地网(LAN,Local Area Network)、广域网(WAN,Wide Area Network)、无线局域网((WLAN,Wireless Local Area Network)或其他网络与显示设备200之间通信,并通过与显示设备200相应的应用程序实现对显示设备200的控制。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI,User Interface)为用户提供各种控制。
示例的,移动终端100B与显示设备200均可安装软件应用,从而可通过网络通信协议实现二者之间的连接通信,进而实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能;也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还可与服务器300通过多种通信方式进行数据通信。在本申请各个实施例中,可允许显示设备200通过局域网、无线局域网或其他网络与服务器300进行通信连接。服务器300可以向显示设备200提供各种内容和互动。
示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG,ElectronicProgram Guide)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200,一方面讲,可以是液晶显示器、OLED(Organic Light EmittingDiode)显示器、投影显示设备;另一方面讲,显示设备被可以是智能电视或显示器和机顶盒组成的显示系统。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。在一些实施例中,显示设备可以不具备广播接收电视功能。
如图1所示,显示设备上可以连接或设置有摄像头,用于将摄像头拍摄到的画面呈现在本显示设备或其他显示设备的显示界面上,以实现用户之间的交互聊天。具体的,摄像头拍摄到的画面可在显示设备上全屏显示、半屏显示、或者显示任意可选区域。
作为一种可选的连接方式,摄像头通过连接板与显示器后壳连接,固定安装在显示器后壳的上侧中部,作为可安装的方式,可以固定安装在显示器后壳的任意位置,能保证其图像采集区域不被后壳遮挡即可,例如,图像采集区域与显示设备的显示朝向相同。
作为另一种可选的连接方式,摄像头通过连接板或者其他可想到的连接器可升降的与显示后壳连接,连接器上安装有升降马达,当用户要使用摄像头或者有应用程序要使用摄像头时,再升出显示器之上,当不需要使用摄像头时,其可内嵌到后壳之后,以达到保护摄像头免受损坏。
作为一种实施例,本申请所采用的摄像头可以为1600万像素,以达到超高清显示目的。在实际使用中,也可采用比1600万像素更高或更低的摄像头。
当显示设备上安装有摄像头以后,显示设备不同应用场景所显示的内容可得到多种不同方式的融合,从而达到传统显示设备无法实现的功能。
示例性的,用户可以在边观看视频节目的同时,与至少一位其他用户进行视频聊天。视频节目的呈现可作为背景画面,视频聊天的窗口显示在背景画面之上。形象的,可以称该功能为“边看边聊”。
可选的,在“边看边聊”的场景中,在观看直播视频或网络视频的同时,跨终端的进行至少一路的视频聊天。
另一示例中,用户可以在边进入教育应用学习的同时,与至少一位其他用户进行视频聊天。例如,学生在学习教育应用程序中内容的同时,可实现与老师的远程互动。形象的,可以称该功能为“边学边聊”。
另一示例中,用户在玩纸牌游戏时,与进入游戏的玩家进行视频聊天。例如,玩家在进入游戏应用参与游戏时,可实现与其他玩家的远程互动。形象的,可以称该功能为“边看边玩”。
可选的,游戏场景与视频画面进行融合,将视频画面中人像进行抠图,显示在游戏画面中,提升用户体验。
可选的,在体感类游戏中(如打球类、拳击类、跑步类、跳舞类等),通过摄像头获取人体姿势和动作,肢体检测和追踪、人体骨骼关键点数据的检测,再与游戏中动画进行融合,实现如体育、舞蹈等场景的游戏。
另一示例中,用户可以在K歌应用中,与至少一位其他用户进行视频和语音的交互。形象的,可以称该功能为“边看边唱”。优选的,当至少一位用户在聊天场景进入该应用时,可多个用户共同完成一首歌的录制。
另一个示例中,用户可在本地打开摄像头获取图片和视频,形象的,可以称该功能为“照镜子”。
在另一些示例中,还可以再增加更多功能或减少上述功能。本申请对该显示设备的功能不作具体限定。
图2中示例性示出了根据实施例中控制装置100的硬件配置框图。如图2所示,控制装置100包括控制器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
控制装置100被配置为,可控制所述显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起到用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端100B或其他智能电子设备,可在安装操控显示设备200的应用之后,起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100B或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
控制器110包括处理器112、RAM113和ROM114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括WIFI模块131、蓝牙模块132、NFC模块133等通信模块中至少一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制装置100包括通信器130和输出接口中至少一者。控制装置100中配置通信器130,如:WIFI、蓝牙、NFC等模块,可将用户输入指令通过WIFI协议、或蓝牙协议、或NFC协议编码,发送至显示设备200。
存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制装置100各元件提供运行电力支持。可以电池及相关控制电路。
图3中示例性示出了根据实施例中显示设备200中硬件系统的硬件配置框图。
在采用双硬件系统架构时,硬件系统的机构关系可以图3所示。为便于表述以下将双硬件系统架构中的一个硬件系统称为第一硬件系统或A系统、A芯片,并将另一个硬件系统称为第二硬件系统或N系统、N芯片。A芯片包含A芯片的控制器及各类接口,N芯片则包含N芯片的控制器及各类接口。A芯片及N芯片中可以各自安装有相对独立的操作系统,A芯片的操作系统和N芯片的操作系统可以通过通信协议相互通信,示例性的:A芯片的操作系统的framework层和N芯片的操作系统的framework层可以进行通信进行命令和数据的传输,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。
如图3所示,A芯片与N芯片之间可以通过多个不同类型的接口实现连接、通信及供电。A芯片与N芯片之间接口的接口类型可以包括通用输入输出接口(General-purposeinput/output,GPIO)、USB接口、HDMI接口、UART接口等。A芯片与N芯片之间可以使用这些接口中的一个或多个进行通信或电力传输。例如图3所示,在双硬件系统架构下,可以由外接的电源(power)为N芯片供电,而A芯片则可以不由外接电源,而由N芯片供电。
除用于与N芯片进行连接的接口之外,A芯片还可以包含用于连接其他设备或组件的接口,例如图3中所示的用于连接摄像头(Camera)的MIPI接口,蓝牙接口等。
类似的,除用于与N芯片进行连接的接口之外,N芯片还可以包含用于连接显示屏TCON(Timer Control Register)的VBY接口,用于连接功率放大器(Amplifier,AMP)及扬声器(Speaker)的i2S接口;以及IR/Key接口,USB接口,Wifi接口,蓝牙接口,HDMI接口,Tuner接口等。
下面结合图4对本申请双硬件系统架构进行进一步的说明。需要说明的是图4仅仅是对本申请双硬件系统架构的一个示例性说明,并不表示对本申请的限定。在实际应用中,两个硬件系统均可根据需要包含更多或更少的硬件或接口。
图4中示例性示出了根据图3显示设备200的硬件架构框图。如图4所示,显示设备200的硬件系统可以包括A芯片和N芯片,以及通过各类接口与A芯片或N芯片相连接的模块。
N芯片可以包括调谐解调器220、通信器230、外部装置接口250、处理器210、存储器290、聊天输入接口、视频处理器260-1、显示器280、音频输出接口270、供电电源。在其他实施例中N芯片也可以包括更多或更少的模块。
其中,调谐解调器220,用于对通过有线或无线方式接收广播电视信号,进行放大、混频和谐振等调制解调处理,从而从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。根据电视信号广播制式不同,调谐解调器220的信号途径可以有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,所述信号的调整方式可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,调谐解调器220可以解调模拟信号和/或数字信号。
调谐解调器220,还用于根据用户选择,以及由处理器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过外部装置接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据控制器的控制接收遥控器100A的控制信号。
外部装置接口250,是提供N芯片处理器210和A芯片及外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子251、复合视频消隐同步(CVBS)端子,如AV接口252、模拟或数字分量端子353、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。本申请不对外部装置接口的数量和类型进行限制。
处理器210,通过运行存储在存储器290上的各种软件控制程序(如操作系统和/或各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图4所示,处理器210包括只读存储器RAM214、随机存取存储器ROM213、图形处理器216、通信接口218、以及通信总线。其中,RAM214和ROM213以及图形处理器216、通信接口218通过总线相连接。
处理器210,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
ROM213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,处理器210运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM214中,以开始运行启动操作系统。当操作系统启动完成后,处理器210再将存储器290中各种应用程序拷贝至RAM214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
在一些示例性实施例中,处理器210,可以包括多个处理器。所述多个处理器中可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
处理器210可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,处理器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如:语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
聊天输入接口,用于将用户的输入信号发送给处理器210,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至聊天输入接口,再由聊天输入接口转送至控制器;或者,控制装置可接收经控制器处理从聊天输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示器的更新率有关。输入有通常的格式采用如插帧方式实现。
显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面。显示器280包括用于呈现画面的显示器组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。显示器220,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在处理器210的控制下音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1,可以为单独的芯片,也可以与处理器210一起集成在一个或多个芯片中。
供电电源,用于在处理器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
与N芯片相类似,如图4所示,A芯片可以包括处理器310、通信器330、检测器340、存储器390。在某些实施例中还可以包括聊天输入接口、视频处理器、音频处理器、显示器、音频输出接口。在某些实施例中,也可以存在独立为A芯片供电的供电电源。
通信器330是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器330可以包括WIFI模块331,蓝牙通信协议模块332,有线以太网通信协议模块333,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块。
A芯片的通信器330和N芯片的通信器230也有相互交互。例如,N芯片的WiFi模块231用于连接外部网络,与外部服务器等产生网络通信。A芯片的WiFi模块331用于连接至N芯片的WiFi模块231,而不与外界网络等产生直接连接。因此,对于用户而言,一个如上述实施例中的显示设备至对外显示一个WiFi账号。
检测器340,是显示设备A芯片用于采集外部环境或与外部交互的信号的组件。检测器340可以包括光接收器342,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器341,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
外部装置接口350,提供处理器310与N芯片或外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接。
视频处理器360-1,用于处理相关视频信号。
音频处理器360-2,用于处理相关音频信号。
处理器310,通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与N芯片的交互,来控制显示设备200的工作和响应用户的操作。
如图4所示,处理器310包括只读存储器ROM313、随机存取存储器RAM314、图形处理器316、处理器310、通信接口318、以及通信总线。其中,ROM313和RAM314以及图形处理器316、处理器310、通信接口318通过总线相连接。
处理器310,用于执行存储在存储器390中操作系统和应用程序指令,和与N芯片进行通信、信号、数据、指令等传输与交互,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
ROM313,用于存储各种系统启动的指令。处理器310运行ROM中系统启动指令,将存储在存储器390的操作系统拷贝至RAM314中,以开始运行启动操作系统。当操作系统启动完成后,处理器310再将存储器390中各种应用程序拷贝至RAM314中,然后,开始运行启动各种应用程序。
通信接口318为多个。这些接口可以是经由网络被连接到外部设备的网络接口,也可以是经由网络被连接到N芯片的网络接口。
音频处理器360-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理。
处理器310可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,处理器210便可以执行与由用户命令选择的对象有关的操作。
图形处理器316,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
A芯片的图形处理器316与N芯片的图形处理器216均能产生各种图形对象。区别性的,若应用1安装于A芯片,应用2安装在N芯片,当用户在应用1的界面,且在应用1内进行用户输入的指令时,由A芯片图形处理器316产生图形对象。当用户在应用2的界面,且在应用2内进行用户输入的指令时,由N芯片的图形处理器216产生图形对象。
图5中示例性示出了根据实施例中显示设备的功能配置示意图。
如图5所示,A芯片的存储器390和N芯片的存储器290分别用于存储操作系统、应用程序、内容和用户数据等,在A芯片的处理器310和N芯片的处理器210的控制下执行驱动显示设备200的系统运行以及响应用户的各种操作。A芯片的存储器390和N芯片的存储器290可以包括易失性和/或非易失性存储器。
对于N芯片,存储器290,具体用于存储驱动显示设备200中处理器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作系统(OS)内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储视频处理器260-1和音频处理器260-2、显示器280、通信接口230、调谐解调器220、输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理系统资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、第一音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块等等。处理器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
存储器390,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器390中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。由于存储器390与存储器290的功能比较相似,相关之处参见存储器290即可,在此就不再赘述。
示例的,存储器390,包括图像控制模块3904、第二音频控制模块3906、外部指令识别模块3907、通信控制模块3908、光接收模块3909、操作系统3911、以及其他应用程序3912、浏览器模块等等。处理器210通过运行存储器290中各种软件程序,来执行诸如:图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
区别性的,N芯片的外部指令识别模块2907和A芯片的外部指令识别模块3907可识别不同的指令。
示例性的,由于摄像头等图像接收设备与A芯片连接,因此,A芯片的外部指令识别模块3907可包括图形识别模块3907-1,图形识别模块3907-1内存储有图形数据库,摄像头接收到外界的图形指令时,与图形数据库中的指令进行对应关系,以对显示设备作出指令控制。而由于语音接收设备以及遥控器与N芯片连接,因此,N芯片的外部指令识别模块2907可包括语音识别模块2907-2,语音识别模块2907-2内存储有语音数据库,语音接收设备等接收到外界的语音指令或时,与语音数据库中的指令进行对应关系,以对显示设备作出指令控制。同样的,遥控器等控制装置100与N芯片连接,由按键指令识别模块与控制装置100进行指令交互。
图6a中示例性示出了根据实施例中显示设备200中软件系统的配置框图。
对N芯片,如图6a中所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示器、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
事件传输系统2914,可在操作系统2911内或应用程序2912中实现。一些实施例中,一方面在在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-2,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理模块2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
由于A芯片的操作系统3911与N芯片的操作系统2911的功能比较相似,相关之处参见操作系统2911即可,在此就不再赘述。
图6b中示例性示出了根据实施例中显示设备中应用程序的配置示意图;如图6b中所示,显示设备的应用程序层包含可在显示设备200执行的各种应用程序。
N芯片的应用程序层2912可包含但不限于一个或多个应用程序,如:视频点播应用程序、应用程序中心、游戏应用等。A芯片的应用程序层3912可包含但不限于一个或多个应用程序,如:直播电视应用程序、媒体中心应用程序等。需要说明的是,A芯片和N芯片上分别包含什么应用程序是根据操作系统和其他设计确定的,本发明无需对A芯片和N芯片上所包含的应用程序做具体的限定和划分。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在显示设备中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
图7中示例性示出了根据实施例中显示设备200中用户界面的示意图。如图7所示,用户界面包括多个视图显示区,示例的,第一视图显示区201和播放画面202,其中,播放画面包括布局一个或多个不同项目。以及用户界面中还包括指示项目被选择的选择器,可通过用户输入而移动选择器的位置,以改变选择不同的项目。
需要说明的是,多个视图显示区可以呈现不同层级的显示画面。如,第一视图显示区可呈现视频聊天项目内容,第二视图显示区可呈现应用层项目内容(如,网页视频、VOD展示、应用程序画面等)。
可选的,不同视图显示区的呈现存在优先级区别,优先级不同的视图显示区之间,视图显示区的显示优先级不同。如,系统层的优先级高于应用层的优先级,当用户在应用层使用获取选择器和画面切换时,不遮挡系统层的视图显示区的画面展示;以及,根据用户的选择使应用层的视图显示区的大小和位置发生变化时,系统层的视图显示区的大小和位置不受影响。
也可以呈现相同层级的显示画面,此时,选择器可以在第一视图显示区和第二视图显示区之间做切换,以及当第一视图显示区的大小和位置发生变化时,第二视图显示区的大小和位置可随及发生改变。
由于A芯片及N芯片中可能分别安装有独立的操作系统,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。例如,A芯片(第一芯片)和N芯片(第二芯片)均可以独立安装有安卓(Android)及各类APP,使得每个芯片均可以实现一定的功能,例如,可在显示设备中安装进行视频录制的应用程序,使显示设备具备视频录制功能。
为了给用户在进行视频录制时提供更加丰富的个性化体验,本发明实施例提供了一种视频录制方法,包括两个实现过程,一是视频生成过程,二是视频合成过程。视频生成过程可以在摄像头原始画面的基础上,增加基于人脸识别算法的贴纸滤镜效果,并在画面中添加歌词动态显示,使得用户在录制视频时,除了摄像头拍摄的所覆盖区域的事物之外,还可在录制过程中同步添加与相应视频对应的视频素材,满足用户的个性化需求;用户包括拍摄者或被拍摄者。视频合成过程是在视频生成的过程中,同步将摄像头实时拍摄的画面、贴纸滤镜效果和动态歌词合成,并显示在显示设备的预览界面,待视频全部录制完成后形成视频文件,使得最终得到的视频呈现MV的效果。
本发明实施例提供的视频录制方法,应用于显示设备中,显示设备包括智能电视等,显示设备与服务器通信连接。为保证显示设备本地的存储空间,录制视频所需的视频素材和内容通常存储在服务器,显示设备在执行视频录制时,通过向服务器发送请求,获取相应视频的视频素材和内容,再进行视频录制。
为实现视频录制,显示设备中配置有摄像头、MIC和播放器,摄像头用于实现画面的拍摄,播放器用于实现视频内容的播放,MIC用于采集外界的声音;同时,显示设备中安装有相应的视频录制应用程序,如“魔镜应用”。视频录制应用程序安装在显示设备的A芯片处理器中,A芯片处理器通过N芯片处理器向服务器发送请求,由服务器根据该请求下发相应的视频素材给A芯片处理器,以实现显示设备中的“魔镜应用”的视频录制需求。
图8中示例性示出了根据实施例中预览界面的示意图;图9中示例性示出了根据实施例中启动视频录制应用程序的方法流程图。参见图8和图9,本发明实施例提供的视频录制方法,显示设备与服务器的交互流程包括:
S011、接收触发视频录制应用程序时产生的应用开启指令。
S012、响应于应用开启指令,启动摄像头,以及,生成预览界面,预览界面用于展示视频录制接口和摄像头拍摄的画面。
用户通过遥控器或语音方式打开显示设备中安装的视频录制应用程序,产生应用开启指令。显示设备响应于用户触发的应用开启指令,在打开具有视频录制功能应用程序的同时,启动摄像头。
在一些实施例中,摄像头是隐藏在电子显示屏后的。显示设备响应于用户触发摄像头相关应用(比如照镜子应用)开启指令,打开具备视频录制功能的应用程序的同时,驱动马达将摄像头升起,待摄像头升起完全后,启动摄像头。
视频录制应用程序打开后,同步生成预览界面。预览界面中显示摄像头拍摄的实时画面,并展示进行视频录制所需的相关接口。例如,视频录制接口、道具触发接口、正常拍摄接口、其他设置接口等。
参见图8,视频录制接口可为图8中所示的“魔力秀”,用于实现添加视频素材和动态歌词的视频录制,视频素材包括滤镜、贴纸、特效、魔法效果等;道具触发接口可为图8中所示的“魔法道具”;正常拍摄接口可为图8中所示的“拍照/长按启动录制”,该接口为正常拍摄照片或视频的接口,拍摄的照片或视频中不添加任何视频素材,为原始画面;其他设置接口可为图8中所示的“定时拍摄”和“设置焦距”等,“定时拍摄”用于实现预定时长的视频的拍摄,“设置焦距”用于实现数字变焦,可调节摄像头的焦距或者调节视频素材的大小等。
在用户想要录制带有特效或动态歌词效果的视频时,点击图8所示的预览界面上的视频录制接口“魔力秀”,启动特效视频录制功能,进入魔力秀视频列表界面。魔力秀视频列表界面为供用户选择拍摄视频的选择界面,该界面展示有视频列表界面和视频预览界面。
图10中示例性示出了根据实施例中启动视频录制接口的方法流程图。参见图10,具体地,本发明实施例提供的方法,启动视频录制接口的过程,包括:
S021、接收触发视频录制接口时产生的启动指令。
S022、响应于启动指令,检测网络状态是否连通。
S023、如果网络状态已连通,则生成推荐视频获取请求。
S024、将推荐视频获取请求发送至服务器。
用户在触发视频录制接口时,产生启动指令,即启动特效视频录制功能。显示设备响应于启动指令,先检测网络是否连接,即检测显示设备是否与服务器进行通信连接,以保证在进行视频录制时,显示设备可以向服务器请求相应的视频素材。
如果显示设备的网络状态已连通,此时表明显示设备可以进行后续的视频录制过程,同时生成推荐视频获取请求,由显示设备将推荐视频获取请求发送至服务器,以向服务器获取推荐视频列表信息。
图11中示例性示出了根据实施例中提示界面的示意图。参见图11,如果网络状态未连通,生成提示界面,提示界面用于展示提示信息和选择按钮。在检测到显示设备的网络状态未连通,表明此时无法进行视频录制,则弹出提示。提示界面上显示提示信息,如“网络连接异常,请先设置网络。”等。提示界面上还显示有选择按钮,如“取消”和“设置网络”,点击“取消”,则返回图8所示的预览界面。点击“设置网络”,则启动设置界面进入网络设置。待网络连通后,显示设备再将推荐视频获取请求发送至服务器。
图12中示例性示出了根据实施例中发送视频在线预览请求的方法流程图。本发明实施例提供的方法,显示设备在将触发视频录制接口产生的推荐视频获取请求发送至服务器后,获取服务器返回的界面信息,以展示在选择界面上,供用户在视频录制时进行选择指定视频作为参考视频。具体地,参见图12,显示设备发送视频在线预览请求至服务器以获取界面信息的过程,包括:
S031、发送触发视频录制接口时产生的推荐视频获取请求至服务器,推荐视频获取请求用于请求服务器下发推荐视频列表信息。推荐视频列表信息包括每个视频对应的演唱者名称、视频标题、视频地址、歌词地址、视频缩略图地址和视频素材中的至少一个。
用户点击视频录制接口“魔力秀”,产生推荐视频获取请求,显示设备将推荐视频获取请求发送至服务器,以获取用户可参考进行视频录制所需的推荐视频列表信息。推荐视频列表信息包括显示设备中提供的多个参考视频的相关信息,如演唱者名称、视频标题、视频地址、歌词地址、视频缩略图地址和视频素材中的至少一个。
参考视频用于用户在进行视频录制时作为模板视频,可预先呈现视频录制后形成的文件的视频效果,例如,歌词呈现、视频素材呈现、身体动作呈现等,用户可以跟随参考视频中演唱者的动作而做相应的身体摆动,可以根据歌词的动态呈现及时歌唱,还可以预先观看视频素材如贴纸等动态呈现的效果。用户可根据预先获知的视频效果在选择界面中选择自己喜欢的视频作为视频录制时的参考视频。
演唱者名称和视频标题用于区分不同的参考视频,如参考视频为学猫叫的视频时,“学猫叫”为该参考视频的视频标题,“冯提莫”为该参考视频的“演唱者名称”。视频地址用于提供显示设备下载参考视频的地址。歌词地址用于提供给显示设备下载参考视频对应的歌词的地址。视频缩略图地址用于提供给显示设备获取参考视频的视频缩略图文件的地址。视频素材用于为显示设备在录制视频时提供参考视频对应的素材,如滤镜、贴纸、特效、魔法效果等;视频素材可以不同的视频素材名称进行区分,不同的参考视频对应的视频素材名称不同,即视频素材不同。
S032、接收服务器根据推荐视频获取请求返回的推荐视频列表信息。
服务器接收到显示设备发送的推荐视频获取请求后,将选择界面中包括的所有参考视频的推荐视频列表信息下发给显示设备,由显示设备根据推荐视频列表信息进行显示或者在后续录制时获取参考视频内容。
S033、生成显示有演唱者名称和视频标题的选择界面。
图13中示例性示出了根据实施例中选择界面的示意图。参见图13,显示设备在接收到推荐视频列表信息之后,将该信息中的演唱者名称和视频标题显示在选择界面,同一参考视频对应的演唱者名称和视频标题对应显示在同一列表项中,如图13中的“学猫叫-冯提莫”、“咖喱咖喱-牛奶咖啡”、“带你去旅行-校长”等。
本发明实施例提供的方法,用户在选择界面挑选参考视频时,为便于查看,还可在选择界面展示参考视频的缩略图,以及,在查看该参考视频内容时,要显示歌词以展示视频的完整效果。为此,显示设备在接收到服务器下发的推荐视频列表信息之后,再根据其中的歌词地址和视频缩略图地址,向服务器获取相应的歌词和视频缩略图文件,视频缩略图文件用于显示当前参考视频的内容,为图片形式,可为该视频内容的某一帧的截图。
S034、在用户基于选择界面选取指定视频时,发送携带歌词地址和视频缩略图地址的视频在线预览请求至服务器,视频在线预览请求用于请求服务器下发与歌词地址对应的歌词,以及,与视频缩略图地址对应的视频缩略图文件。
显示设备在接收到服务器下发的推荐视频列表信息之后,推荐视频列表信息显示在选择界面,用户在选择界面中显示的每个参考视频中选取一个指定视频,此时,显示设备向服务器发送视频在线预览请求,用于获取展示任一参考视频的视频效果的相关内容,进行在线预览。此时,显示设备发送的视频在线预览请求中携带歌词地址和视频缩略图地址,由服务器依据两个地址下发对应的歌词和视频缩略图文件。
S035、接收服务器根据视频在线预览请求返回的歌词和视频缩略图文件。
根据显示设备中所提供的参考视频的个数,根据每个参考视频的歌词地址,服务器下发相应数量的歌词,每个歌词对应一个参考视频;并根据每个参考视频的视频缩略图地址,服务器下发相应数量的视频缩略图文件,每个视频缩略图文件对应一个参考视频。显示设备接收服务器返回的每个歌词和视频缩略图文件后,显示设备将指定视频对应的视频缩略图文件进行展示,视频缩略图文件展示在相应演唱者名称和视频标题的一侧;歌词进行存储,便于后续在挑选视频或进行视频录制时进行调用并显示。
由于显示设备在获取到推荐视频列表信息之后,歌唱者和视频标题可直接进行显示,而由于服务器在返回推荐视频列表信息时,对于歌词和视频缩略图文件返回的是相应地址,因此为获取歌词和视频缩略图文件,需要显示设备再次向服务器获取。因此,在服务器还未返回给显示相应的歌词和视频缩略图文件时,显示设备生成原始缩略图进行展示。
图14中示例性示出了根据实施例中原始缩略图的示意图。参见图14,在用户触发视频在线预览请求与服务器返回相应歌词或视频缩略图的之间,显示设备未接收到服务器返回的歌词和视频缩略图文件,此时生成原始缩略图,展示在选择界面。原始缩略图由显示设备提供,可为系统图片,显示在选择界面,具体显示在相应的歌唱者和视频标题的一侧,每个参考视频对应一个原始缩略图。
显示设备在根据用户的操作执行视频录制时,向服务器获取每个参考视频的相关信息,并基于用户确定的指定视频进行视频生成,具体的视频生成方法如下。
图15中示例性示出了根据实施例中视频录制方法的流程图。参见图15,本发明实施例提供的一种视频录制方法,应用于显示设备,该方法包括以下步骤:
S11、发送视频在线预览请求至服务器,视频在线预览请求用于请求服务器下发界面信息。
基于用户的操作,启动特效视频录制功能,显示设备向服务器发送视频在线预览请求,以获取录制视频所需的相关内容,界面信息包括演唱者名称、视频标题、视频地址、歌词、视频缩略图文件和视频素材中的至少一种。而歌词和视频素材可采用多种可选的获取方式,例如,可以在显示设备发送视频在线预览请求时获取,也可以在后续进行视频录制时显示设备发送指定视频内容获取请求时再获取。
本实施例提供的发送视频在线预览请求的过程,可参照前述实施例提供的步骤S031至S035的内容,此处不再赘述。
S12、接收服务器根据视频在线预览请求返回的界面信息,将演唱者名称、视频标题、歌词、视频缩略图文件、视频素材和视频地址对应的视频内容展示在选择界面。
显示设备接收到服务器返回的每个参考视频的相关信息后,将每个参考视频对应的演唱者名称、视频标题、歌词、视频缩略图文件和视频素材展示在选择界面,同时将视频地址对应的视频内容以在线播放的方式显示在选择界面,以便于用户能够在选择界面中展示的多个参考视频中挑选自己想要录制的指定视频。
图16中示例性示出了根据实施例中展示选择界面的分布示意图。参见图16,具体地,显示设备在生成选择界面,以将所述演唱者名称、视频标题、歌词、视频缩略图文件、视频素材和视频地址对应的视频内容展示在选择界面的过程,包括:选择界面包括视频列表界面和视频预览界面。将待进行视频录制的每个视频对应的演唱者名称、视频标题和视频缩略图文件展示在视频列表界面。在选择视频列表界面中任一参考视频作为指定视频时,将与指定视频对应的视频地址发送至播放器,播放器用于根据视频地址进行在线播放指定视频内容,指定视频内容显示在视频预览界面,以及,将歌词和视频素材展示在视频预览界面。在视频预览界面的下方,生成准备录制接口。
显示设备中的显示界面可同时显示视频列表界面和视频预览界面,视频列表界面是指显示每个参考视频的演唱者名称和视频标题的界面,视频预览界面是指在线播放任一参考视频的视频内容的界面。视频列表界面和视频预览界面可按照左右的位置关系显示在选择界面,也可以按照上下的位置关系显示在选择界面。
实际进行显示时,视频列表界面中显示待进行视频录制的每个视频对应的演唱者名称和视频标题。基于用户的操作,如果用户在视频列表界面中选择一个视频作为指定视频,为了能够为用户显示任一参考视频的视频效果,本实施例提供的方法,可提供在线播放该指定视频的视频内容的功能,即向服务器请求该指定视频对应的视频缩略图文件展示在视频预览界面,进行在线播放。
由于每个参考视频的占据空间较大,如果大量的视频内容放置在显示设备侧,会占据较多的存储空间。为此,显示设备在显示各个参考视频的视频效果时,显示的是在线播放的内容,即根据视频地址在线且循环播放相应的参考视频。
具体地,在用户基于视频列表界面选择任一参考视频作为指定视频时,显示设备将该指定视频对应的视频地址发送至播放器,由播放器根据该视频地址在线播放指定视频内容,同时显示在视频预览界面。而为完整呈现每个参考视频的视频效果,显示设备还可将该指定视频对应的歌词和视频素材同步显示在视频预览界面中,将视频素材叠加在指定视频内容的相应位置,将歌词显示在视频预览界面的底部位置。
也就是说,在用户选择某一个参考视频时,显示设备将该视频的视频地址发送至播放器进行在线播放,并同时调取从服务器下载的与指定视频对应的歌词和视频素材,并将该歌词、指定视频内容和视频素材进行叠加以显示在视频预览界面。视频预览界面中可同时呈现视频内容(歌曲)、歌词和特效,以呈现指定视频的视频效果。
例如,再次参见图13,如果用户挑选的指定视频为“学猫叫”,此时,选择界面同步展示“学猫叫”的视频效果,即由播放器根据“学猫叫”视频对应的视频地址在线播放“学猫叫”视频,同时该视频中展示有“学猫叫”的猫耳朵、猫鼻子、猫胡须和猫爪子等素材。调用“学猫叫”视频对应的歌词,进行显示。歌词显示可以按照MV中常采用的显示方式进行显示。
为使用户能够在确定指定视频后,依据该视频进行录制,可在选择界面生成准备录制接口,准备录制接口用于启动视频录制过程。该准备录制接口可位于视频预览界面的下方,还可根据实际选择界面的呈现方式而定。
S13、接收用户基于选择界面触发的选择信息指令,选择信息指令用于在选择界面中选择指定视频。
用户在挑选想要进行录制的参考视频时,是在显示设备的选择界面中进行挑选,具体是在选择界面的视频列表界面进行挑选。视频列表界面展示有多个可供选择的参考视频,便于用户进行挑选。每选择一个参考视频,即对应生成一个选择信息指令,显示设备可根据该选择信息指令确定用户选择的指定视频。
指定视频中包括人物、歌曲、歌词和视频素材。在指定视频中,人物可根据歌曲的进度摆动自己的身体,呈现不同的动作。该动作为示例动作,可供用户参考摆动自己的身体。而人物的头部或手部移动后,视频素材也跟随移动,使得视频素材始终围绕人物的头部或身体动态显示。歌词同步歌曲的播放进度进显示,可以提示用户及时跟随歌唱。
每个参考视频对应的视频缩略图文件中包含有多种颜色,本发明实施例提供的方法,可在用户基于选择界面进行挑选指定视频时,选择界面的背景颜色可根据所选择的参考视频对应的视频缩略图文件的颜色变化。
图17中示例性示出了根据实施例中改变界面背景颜色的方法流程图。参见图17,本发明实施例提供的一种改变界面背景颜色的方法,包括以下步骤:
S131、响应于用户触发选择界面中的指定视频时产生的选择指令,获取指定视频的视频缩略图文件。
用户在选择界面中挑选指定视频,会按照选择界面中显示的视频标题、演唱者名称进行挑选。选择界面包括用于显示视频标题、演唱者名称和视频缩略图文件的视频列表界面。
用户在视频列表界面中每选中一个指定视频时,均对应有一个视频缩略图文件,视频缩略图文件是该指定视频的任一帧图像。该图像上通常带有多种颜色,因此可作为后续改变选择界面背景颜色的基准。
S132、调用调色板类,提取视频缩略图文件中每种颜色的颜色值。
视频缩略图文件为图片形式。用户在视频列表界面中挑选不同的视频时,被选中的不同的指定视频对应不同的视频缩略图文件,即不同的图片上带有不同的多种颜色。为准确改变选择界面的背景颜色,本实施例中,需在视频缩略图文件中提取相应的颜色值。
具体地,本实施例中,调用调色板类,提取视频缩略图文件中每种颜色的颜色值,包括:调用调色板类,提取视频缩略图文件的像素值;将具有相同颜色特性的像素值进行聚类,得到不同类别的颜色;计算每类颜色的颜色值,颜色值包括数个像素值。
显示设备的操作系统中,如Android系统中配置有调色板类(Palette类)。视频缩略图文件由数个像素点组成,不同的像素点对应的像素值不同。本实施例中,利用调色板类提取视频缩略图文件的像素值,像素值的数量为数个。而属于同一颜色的像素值通常相同,因此,可将具有相同颜色特性的像素值进行聚类,将视频缩略图文件按照颜色组成进行划分,得到多种类别的颜色。最后,根据每类颜色的像素值的数量,计算每类颜色的颜色值,其中,颜色值可由数个像素值组成。
S133、基于视频缩略图文件中每种颜色的颜色值,对比每种颜色的颜色占比,确定视频缩略图文件的主颜色。
本实施例提供的方法,在改变选择界面的背景颜色的标准是判断视频缩略图文件中所含的哪种颜色的颜色值最多,将颜色值最多对应的颜色确定为选择界面的背景颜色。因此,为准确判断出视频缩略图文件中所含的哪种颜色的颜色值最多,本实施例采用下述两种方法进行确定。
在其中一种可行的具体实施方式中,按照下述步骤确定视频缩略图文件的主颜色:根据视频缩略图文件中每种颜色的颜色值,计算每种颜色的占比值;将每种颜色的占比值进行对比,确定出占比值最大对应的颜色;将占比值最大对应的颜色作为视频缩略图文件的主颜色。
视频缩略图文件中包括多种颜色,每种颜色的颜色值可能相同或不同,因此,可先确定出每种颜色的占比值。占比值可根据某一颜色的颜色值与所有颜色的颜色值总和的比值进行确定。计算出每个颜色的占比值后,按照占比值的大小进行对比,占比值最大的颜色即为视频缩略图文件中包含颜色值最多的颜色,因此,将占比值最大对应的颜色作为视频缩略图文件的主颜色。
在另一种可行的具体实施方式中,按照下述步骤确定所述视频缩略图文件的主颜色:基于视频缩略图文件中每种颜色的颜色值,提取每种颜色值的红颜色值、绿颜色值和蓝颜色值;计算每种颜色的红颜色值、绿颜色值和蓝颜色值之间的方差;对比每种颜色对应的方差,将方差最大对应的颜色作为视频缩略图文件的主颜色。
视频缩略图文件中包括的多种颜色可由RGB颜色值进行表示,分别提取每个颜色在RGB空间的颜色值分量,即依据每个颜色的颜色值,提取每个颜色的RGB颜色值,包括红颜色值、绿颜色值和蓝颜色值。计算每个颜色的颜色值对应的红颜色值、绿颜色值和蓝颜色值之间的平均值,并根据该平均值计算该颜色的颜色值的红颜色值、绿颜色值和蓝颜色值之间的方差。将每个颜色的方差进行对比,将方差最大对应的颜色作为视频缩略图文件的主颜色。
本实施例中,方差计算公式如下:
σ2=[(r-u)2+(g-u)2+(b-u)2]/3;
式中,σ2为方差,r为红颜色值,g为绿颜色值,b为蓝颜色值,u为r、g和b的均值。
S134、基于主颜色,改变选择界面的背景颜色并显示。
在确定出视频缩略图文件的主颜色后,即可改变选择界面的背景颜色。该方法包括:获取选择界面的背景图;将背景图的颜色设定为主颜色,并进行显示。选择界面的背景图的颜色更改为主颜色,使得用户在视频列表界面中选中某个指定视频后,选择界面的背景颜色即刻更改为指定视频对应的视频缩略图文件的主颜色,以提供给用户更加丰富的视觉效果。
可见,改变选择界面背景颜色的法包括调用显示设备提供的调色板类,获取视频缩略图文件中的各个颜色值,基于每种颜色的颜色值,比较视频缩略图文件中哪种颜色占比最高,则将选择界面的背景图设置为占比最高对应的颜色。
例如,以“学猫叫”视频为例,其视频缩略图文件中的颜色包括粉红色、绿色和蓝色,调用调色板类,分别获取粉红色、绿色和蓝色的颜色值。按照前述实施例提供的两种对比方法的任一种方法,将三种颜色的颜色值进行对比,如果粉红色的颜色值占比高于其他两种颜色,则将选择界面的背景设置为粉红色。而如果用户下一个挑选的视频为“咖喱咖喱”,该视频缩略图文件中的颜色包括蓝色、棕色和黑色,调用调色板类,分别获取蓝色、棕色和黑色的颜色值。按照前述实施例提供的两种对比方法的任一种方法,将三种颜色的颜色值进行对比,如果蓝色的颜色值占比高于其他两种颜色,则将选择界面的背景设置为蓝色。因此,用户在此挑选过程中,选择界面的背景颜色可由粉红色变化为蓝色。
S14、发送触发准备录制接口时产生的指定视频内容获取请求至服务器,指定视频内容获取请求携带指定视频对应的视频地址,指定视频内容获取请求用于请求服务器下发与指定视频对应的指定视频内容。
用户在选择界面中挑选出自己想要录制的指定视频后,点击选择界面下方显示的准备录制接口,此时,显示设备生成指定视频内容获取请求,并发送至服务器。指定视频内容获取请求用于获取指定视频内容。
由于在线播放指定视频内容需要使用网络资源,如果网络出现卡顿,则会导致指定视频内容无法播放,或者,在播放中途停止。而由于摄像头的拍摄过程不需要使用网络,因此,摄像头会一直处于拍摄状态,以及,视频素材和歌词都存储在显示设备的本地,视频素材和歌词的显示和变化均无需使用网络。这将导致指定视频内容因网络原因停止播放后,显示设备侧依然继续进行录制,出现摄像头录制的画面没有指定视频内容的声音,或者影响被拍摄者无法及时跟随指定视频动作,进而影响视频录制的效果。
为此,本实施例提供的方法,为保证视频录制的顺利进行,在用户选定指定视频进行视频录制时,由显示设备再次向服务器发送请求,依据指定视频内容获取请求使服务器下发指定视频对应的指定视频内容,并通过下载保存在显示设备本地,使得指定视频内容在播放时不受网络影响。
图18中示例性示出根据本实施例生成下载界面的示意图。参见图18,显示设备在根据视频地址向服务器下载指定视频内容时,显示设备将选择界面切换为下载界面,下载界面可显示在选择界面的上层。下载界面显示下载提示信息,如“素材下载中,请稍后……”,显示下载进度和取消下载按钮。
显示设备在获取指定视频内容时,与指定视频的视频地址建立网络链接,调用文件输入流读方法(InputStream.read),读取服务器端存储的指定视频内容,再调用文件输出流写方法(FileOutputStream.write)将指定视频内容写入到显示设备的存储器中。
如果用户点击触发准备录制接口准备进行视频录制时,如果用户选择的指定视频在之前被使用过,使得指定视频内容已存储在显示设备侧,此时,显示设备可直接调用该已存储的指定视频内容,而无需再向服务器发送请求。
显示设备在向服务器获取到指定视频内容或者调取已存储的指定视频内容之后,可开始进行视频录制。
S15、生成准备录制界面,并在准备录制界面上呈现摄像头拍摄的画面和服务器根据指定视频内容获取请求返回的指定视频内容。
在启动显示设备中的视频录制应用程序后,摄像头一直处于开启状态,可实时拍摄到用户的画面,此时用户为被拍摄者。将摄像头拍摄的实时画面进行显示,同时将获取到的服务器返回的指定视频内容进行显示,作为用户拍摄视频时的参考。
显示设备在下载完指定视频内容后,显示设备的界面由下载界面跳转到准备录制界面,准备录制界面为开始进行录制前的一个等待界面,用于为用户提供准备开始录制的等待时间。
图19中示例性示出根据本实施例生成准备录制界面的示意图;图20中示例性示出根据本实施例生成准备录制界面的方法流程图。参见图19和图20,具体地,本发明实施例提供的方法,生成准备录制界面的过程,包括:
S1501、基于摄像头拍摄的画面,得到预览画面。
S1502、将指定视频内容展示在预览画面的右上方。
S1503、生成带有阴影区域的开始录制按钮,将带有阴影区域的开始录制按钮展示在预览画面的底部。
S1504、将预览画面作为底层、将指定视频内容作为中间层、将带有阴影区域的开始录制按钮作为顶层,生成准备录制界面。
显示设备获取摄像头拍摄的画面,作为预览画面进行展示。并将获取到的指定视频内容放置预览画面的右上方进行展示,指定视频内容与预览画面叠加,且指定视频内容位于预览画面的上层。同时在预览画面的底部位置生成带有阴影区域的开始录制按钮,开始录制按钮用于启动开始录制功能,阴影区域用于后续进行歌词显示。
由预览画面、指定视频内容和带有阴影区域的开始录制按钮形成准备录制界面,以预览画面作为底层,以指定视频内容作为中间层,以带有阴影区域的开始录制按钮作为顶层。
显示设备呈现准备录制界面,可随时进行视频录制。用户点击准备录制界面中展示的开始录制按钮,生成开始录制指令,即可使显示设备根据开始录制指令将摄像头拍摄的画面、歌词和视频素材进行录制和存储。
S16、接收用户触发的开始录制指令,将摄像头拍摄的画面、指定视频内容、指定歌词和指定视频素材展示在录制界面,开始进行视频录制,指定歌词是指与指定视频对应的歌词,指定视频素材是指与所述指定视频对应的视频素材。
用户触发准备录制界面中展示的开始录制按钮,产生开始录制指令,显示设备根据开始录制指令开始进行视频录制,即在用户点击开始录制按钮时,摄像头拍摄实时画面;显示设备开始播放指定视频内容,用户跟随指定视频内容歌唱或做动作,到出现歌词时,将指定歌词显示在录制界面的底部,并跟随指定视频内容的播放进度动态显示;同时,视频素材跟随用户的动作做相应变化。最后进行视频合成时,将摄像头拍摄的画面、指定歌词和指定视频素材合成为一个视频文件。
图21中示例性示出根据本实施例生成录制界面的示意图;图22中示例性示出根据本实施例生成录制界面的方法流程图。参见图21和图22,显示设备在接收开始录制指令,将摄像头拍摄的画面、指定视频内容、指定歌词和指定视频素材展示在录制界面,开始进行视频录制的过程,包括:
S161、接收触发开始录制按钮时产生的开始录制指令。
S162、响应于开始录制指令,获取与指定视频对应的指定歌词和指定视频素材。
S163、生成包括摄像头拍摄的画面和指定视频素材的预览画面。
显示设备接收到用户点击开始录制按钮产生的开始录制指令,开始进行视频录制。调用与指定视频对应的指定视频素材和指定歌词,并展示在显示设备的显示界面上。同时,摄像头拍摄实时画面进行预览,并将指定视频素材与摄像头拍摄的画面进行叠加,得到预览画面。其中,指定视频素材与用户在挑选参考视频时在视频预览界面中呈现的视频素材相同。
图23中示例性示出根据本实施例生成预览的方法流程图。参见图23,具体地,生成包括摄像头拍摄的画面和指定视频素材的预览画面,包括:
S1631、实时获取摄像头拍摄的画面,进行全屏展示。
S1632、基于摄像头拍摄的画面中的目标位置,将指定视频素材叠加到摄像头拍摄的画面中,得到预览画面。
被拍摄者位于摄像头的拍摄范围内,显示设备将摄像头拍摄的实时画面进行全屏展示。显示设备获取摄像头拍摄的原始画面中被拍摄者的面部坐标,被拍摄者可为一人、两人、三人或多人,基于每个拍摄者的身体坐标,包括头部、手部和身体等位置的坐标,将视频素材叠加到摄像头拍摄的原始画面中被拍摄者的头部或身体其他部位。
视频素材包括美颜、贴纸、滤镜等。以“学猫叫”为例,显示设备将视频素材类型为“特效效果分类(贴纸)”,名称为“zhaocaimao”的贴纸效果,叠加到摄像头拍摄的画面中,使得“猫耳朵”贴纸位于画面中被拍摄者的头部,“猫爪子”贴纸位于画面中被拍摄者的手部,“猫项链”贴纸位于画面中被拍摄者的颈部,“招财猫”贴纸位于画面中被拍摄者的身体部位。
显示设备实时获取每一个被拍摄者的身体坐标,通过人脸识别算法,将指定视频对应的指定视频素材叠加到摄像头拍摄的画面中,以满足用户的个性化需求。
S164、启动播放展示在预览画面的右上方的指定视频内容。
用户点击开始录制按钮后,显示设备将保存的指定视频内容的路径指定给播放器,并调用异步准备方法(prepareAsync),初始化播放器,再调用开始方法(start),开始播放指定视频内容。指定视频内容作为视频画面显示在预览画面的右上方,视频画面也可显示在预览画面的其他位置,以不遮挡预览画面中被拍摄者的画面为前提要求。
S165、将带有阴影区域的开始录制按钮切换为带有阴影区域的控制按钮。
S166、获取指定视频的总时长,将总时长按照倒计时的方式显示在控制按钮上。
准备录制界面中的开始录制按钮被触发后,随即将开始录制按钮切换控制按钮。控制按钮如图21中的“确定键”,控制按钮可控制视频录制的结束。
如果用户想要录制与指定视频内容等时长的视频,或者,想要显示设备能够在指定视频内容播放完毕后自动结束录制,本实施例提供的方法,显示设备可将指定视频内容的总时长以倒计时的方式显示在控制按钮上,在倒计时结束后,视频录制过程结束。
具体地,显示设备获取指定视频内容的总时长,单位为秒,以数字形式显示在控制按钮中间,并启动倒计时。在倒计时期间,用户再次点击控制按钮,如点击“确定键”,则停止录制。若倒计时完成后,也将自动停止录制。
S167、将指定歌词展示在控制按钮的阴影区域,阴影区域展示在预览画面的底部。
在开始进行录制时,显示设备调用指定视频对应的指定歌词,并显示在控制按钮的阴影区域。阴影区域用于提高指定歌词显示的清晰度,便于用户查看。
图24中示例性示出根据本实施例歌词动态显示的方法流程图。参见图24,本实施例提供的方法,在视频录制时,将歌词以动态展示的方式进行显示,为此,将指定歌词展示在所述控制按钮的阴影区域的过程,包括:
S1671、获取指定歌词中每句歌词的歌词内容、出现时间和每句歌词中每个文字的显示时长。
S1672、检测指定视频内容开始播放后的播放进度。
S1673、在每句歌词的出现时间与播放进度对应的时间一致时,显示与出现时间对应的目标歌词内容。
S1674、根据目标歌词内容中每个文字的显示时长,重绘文字的边框,实现指定歌词进度在阴影区域的动态显示。
为实现动态显示歌词,显示设备获取指定歌词的歌词文件,为txt格式。遍历整个歌词txt文件后,获得要显示的全部内容及时间节点,即从歌词文件中获取的信息包括歌词内容、每句歌词的出现时间和每句歌词中每个文字的显示时长。根据指定视频内容的播放进度,在当前播放进度对应的时间与某一句歌词的出现时间一致时,则显示该句歌词,并且根据该句歌词中每个文字的显示时长,改变文字的边框,实现歌词的动态显示。
以“学猫叫”为例,以歌词文件中其中一句歌词“我们一起学猫叫”为例,该句歌词的出现时间为[000:01.373],每个文字的显示时长分别为[254,254,253,254,254,251,557]。
指定视频内容开始播放记为时间原点,[000:01.373]为第一句歌词出现时间,即指定视频内容播放到1.373秒后显示第一句歌词,[254,254,253,254,254,251,557]为本句歌词每个文字的显示时长,例如“我”显示254毫秒,之后“们”显示254毫秒。
首先将每句歌词分为3段存储,分别为出现时间,每个文字显示时间和歌词内容。指定视频内容启动播放后,开始检测时间,到达该句歌词起始时间后,将歌词文件显示出来,然后根据每个文字时长,重绘文件边框,实现歌词进度显示效果。
在未到达该句歌词中某个文字的出现时间时,该句歌词中的正在歌唱或已经唱过的文字以红色边框显示,而未歌唱的文字则为白色字体。例如,指定视频内容的当前播放进度对应的时间恰好对应“我”字,则将“我”字的边框重绘,由白色切换为红色;到下一个字“们”时,则将“们”字的边框重绘,由白色切换为红色,此时,保留“我”字的红色边框,使得已经唱过的文字“我”和“们”均为红色边框,而未进行歌唱的文字“一起学猫叫”则为白色。
将指定歌词以动态显示方式进行显示,可以便于被拍摄者能够准确地跟唱,避免出现错拍或漏拍的现象,导致录制的被拍摄者的口型与背景音乐不对应,影响录制效果。
S168、将预览画面作为底层、将处于播放状态的指定视频内容作为第一中间层、将呈现倒计时状态的带有阴影区域的控制按钮作为第二中间层、将指定歌词作为顶层,生成录制界面。
在进行视频录制时,显示设备中显示的是录制界面,录制界面由四部分组成,分别为预览画面、视频画面(处于播放状态的指定视频内容)、控制按钮和指定歌词。在一些实施例中,该四部分在开始录制时,同时执行相应步骤,即步骤S161至S168同时启动,如拍摄画面、叠加视频素材、播放指定视频内容、控制按钮上显示倒计时,以及,在画面中动态显示指定歌词。四个部分同时启动,可以保证显示设备在进行视频录制时,被拍摄者的动作、视频素材的显示和指定歌词的动态变化可以与指定视频内容同步,保证视频录制的效率,满足用户的个性化需求。
显示设备在进行视频录制,同步在预览画面中显示当前录制的画面,该画面中包括摄像头拍摄的画面、视频素材和指定歌词,且在结束录制时,视频文件中包括摄像头拍摄的画面、视频素材和指定歌词的内容。
图25中示例性示出根据本实施例视频合成的方法流程图。参见图25,为实现画面预览以及获得指定视频文件,本发明实施例提供的视频录制方法,还包括:
S17、接收触发控制按钮时产生的结束录制指令,其中,触发控制按钮的状态包括倒计时结束时的触发状态和倒计时未结束时点击控制按钮的触发状态。
S18、响应于结束录制指令,合成指定视频素材、指定歌词和摄像头拍摄的画面,得到指定视频文件。
用户点击录制界面中显示的控制按钮,或者控制按钮上显示的倒计时结束,则结束当前视频录制过程。控制按钮产生的结束录制指令产生的情况包括用户主动点击控制按钮时产生和倒计时结束时自动产生。
显示设备根据结束录制指令,结束录制过程,同时,将录制到的指定视频素材、指定歌词和摄像头拍摄的画面进行合成,以得到指定视频文件。为进行视频合成,显示设备中配置有渲染器(OpenGLRender)、视图预览器(GLSurfaceView)和媒体编码器(MediaCodec),由渲染器对摄像头拍摄的画面、歌词和视频素材进行合成为同一帧画面,由视图预览器将渲染器合成的画面帧转换为byte字节数据,并显示最终图像效果,最后由媒体编码器对合成图像转换的byte字节数据进行编码,以得到mp4格式的视频文件。
图26中示例性示出根据本实施例合成指定视频文件的方法流程图;图27中示例性示出根据本实施例合成指定视频文件的数据流图。具体地,参见图26和图27,显示设备响应于结束录制指令,合成指定视频素材、指定歌词和摄像头拍摄的画面,得到指定视频文件的过程,包括:
S181、响应于录制结束指令,调用渲染器,将每一帧视频画面对应的指定视频素材、指定歌词和摄像头拍摄的画面进行渲染合成,得到合成图像。
显示设备在执行视频录制过程中,随着指定视频内容的播放,摄像头将拍摄的画面发送至渲染器,显示设备将每一时刻或每一帧画面对应的视频素材和指定歌词发送至渲染器,由渲染器对指定视频素材、指定歌词和摄像头拍摄的画面进行渲染合成,得到合成图像。合成图像为以帧为单位的视频画面,即摄像头每拍摄一帧画面,显示设备即将该帧画面与对应的视频素材和歌词发送至渲染器,进行渲染合成,得到的画面帧进行实时预览,显示在预览画面中。
渲染器内置有调用特效渲染助手(EffectRenderHelper),显示设备调用特效渲染助手(EffectRenderHelper)的纹理处理(processTexture)方法进行合成,以为摄像头原始画面绘制上特效及当前时间应该显示的歌词。
在录制结束后,显示设备根据录制结束指令,调用渲染器对摄像头拍摄的每一帧画面分别与对应的指定视频素材和指定歌词进行渲染合成,可得到多个合成画面。
S182、调用视图预览器,将合成图像转换为字节类型数据;
视图预览器(GLSurfaceView)内置有帧绘制器,执行帧绘制(onDrawFrame)方法。开启摄像头预览后,每一帧摄像头拍摄的原始图像在视图预览器(GLSurfaceView)的帧绘制(onDrawFrame)方法中回调。
回调是指显示设备内设置的监听机制,用于进行数据监听。在摄像头每拍摄一帧画面后,该监听机制监听到新的拍摄画面,由渲染器进行获取并进行渲染合成,实现摄像头拍摄的每一帧画面的实时渲染合成。而后,由帧绘制器将每个合成图像转换为字节类型数据,并进行图像预览,显示在预览画面。
帧绘制方法提供缓存输出(dispatchOutputBuffer)方法,将渲染器(OpenGLRender)中合成图像的纹理(Texture)转换为字节类型数据,如byte[]类型数据。每一帧显示出来的画面,都对应一组byte[]信息。
S183、调用媒体编码器,对字节类型数据进行编码,得到指定视频文件。
媒体编码器可同时对视频和音频进行编码,因此,在进行编码时,由媒体编码器同时创建视频编码器和音频编码器,分别调用创建编码类型方法,创建视频类型“video/avc”和音频类型“audio/mp4a-latm”。
再指定视频的帧率、码率、颜色格式等信息,指定音频的采样率、声音通道、采样格式等信息。再调用媒体混编器(MediaMuxer),创建媒体混编对象,指定文件存储路径及文件格式,用于将视频和音频混合编码为视频文件。
在混编视频文件时,视频和音频为两个编码过程,因此,需创建两个子线程,分别执行视频和音频的编码。音频的来源包括指定视频内容播放时的声音和显示设备中配置的MIC采集的声音。
进行视频录制时,媒体编码器首先注册监听器,接收帧绘制器转换的byte[]类型数据。在进行视频编码时,媒体编码器接收到byte[]数据后,视频编码器调用媒体编码器(MediaCodec)的输入缓存(dequeueInputBuffer)方法,申请缓存,将byte[]类型数据传递给申请的缓存区。执行编码过程后,调用媒体编码器(MediaCodec)的缓存输出方法(dequeueOutputBuffer)方法,得到编码后的数据。
根据编码后的数据的缓存数据(bufferInfo)信息,判断数据是否合法。如果合法,则调用媒体混编器(MediaMuxer)的写入采样数据(writeSampleData)方法,将编码后的视频数据写入视频轨,否则丢弃该帧数据。
同样,在进行音频编码时,可与视频编码采样相同的编码处理过程。但由于音频数据来源与视频来源不同,音频数据来源可能来自于电视MIC接收到的外界声音,也可以是电视播放的声音(播放的指定视频内容的声音)。因此,在进行音频编码时,音频编码器需循环获取采样得到原始音频数据,编码后调用媒体混编器(MediaMuxer)的写入采样数据(writeSampleData)方法,写入音频轨。
最后,在分别完成视频编码和音频编码后,将得到的视频轨和音频轨再次进行混编,得到视频文件。具体地,调用媒体混编器(MediaMuxer),将前述得到的视频轨和音频轨作为媒体混编对象,将视频轨和音频轨混合编码为指定视频文件。
图28中示例性示出根据本实施例录制完成界面的示意图。参见图28,显示设备一边进行视频录制一边进行编码,在用户点击录制界面上的控制按钮(确定键),或者视频录制时间到,将录制标志复位,跳出编码循环,完成视频录制及文件存储,显示设备将录制界面切换为录制完成界面。
在录制完成界面中,循环播放刚刚录制的指定视频文件,并将指定视频文件上传到服务器,服务器根据该指定视频文件生成对应的链接地址,再根据该链接地址生成二维码信息,将二维码信息发送至显示设备,由显示设备将二维码信息展示在录制完成界面。二维码信息供用户手机扫码后下载视频到手机,或同步到其他设备中。
录制完成界面还可显示有“分享至朋友圈”接口、“保存至相册”接口、“重新录”接口和“唱整首”接口等。“分享至朋友圈”接口用于提供给用户将该指定视频文件分享给朋友圈的功能;“保存至相册”接口用于提供给用户存储文件至本地的功能;“重新录”接口用于返回应用主界面,重新录制;“重新录”接口用于跳转至K歌界面,供用户进入K歌功能。
本发明实施例提供了一种视频录制方法,包括视频生成过程和视频合成过程。两个过程可以在录制视频时,在摄像头原始画面的基础上,增加基于人脸识别算法的贴纸滤镜效果,并在画面中添加歌词动态显示,使得用户在录制视频时,除了摄像头拍摄的所覆盖区域的事物之外,还可在录制过程中同步添加与相应视频对应的视频素材,满足用户的个性化需求;并可同步将摄像头实时拍摄的画面、贴纸滤镜效果和动态歌词合成,得到视频文件,使得最终得到的视频呈现MV的效果。
图29中示例性示出根据本实施例视频录制方法的另一流程图。参见图29,本发明实施例提供的视频录制方法,应用于服务器中,显示设备与服务器通信连接。为保证显示设备本地的存储空间,录制视频所需的视频素材和内容通常存储在服务器,显示设备在执行视频录制时,通过向服务器发送请求,获取相应视频的视频素材和内容,再进行视频录制。为此,在本发明实施例提供的一种视频录制方法,包括以下步骤:
S21、接收显示设备发送的视频在线预览请求,视频在线预览请求用于获取界面信息,所述界面信息包括演唱者名称、视频标题、视频地址、歌词、视频缩略图文件和视频素材中的至少一个。
S22、响应于视频在线预览请求,将界面信息发送至显示设备,界面信息用于展示在显示设备的选择界面。
S23、接收显示设备发送的携带指定视频对应的视频地址的指定视频内容获取请求,指定视频是指显示设备在选择界面中选择的视频,所述指定视频内容获取请求用于获取与所述指定视频对应的指定视频内容。
S24、响应于指定视频内容获取请求,将与视频地址对应的指定视频内容发送至显示设备,所述指定视频内容用于显示设备进行视频录制时展示在录制界面。
在进行视频录制过程中,服务器的作用是根据显示设备的请求下发相应的录制视频所需的信息,具体的实现过程可参照前述实施例提供的内容,此处不再赘述。
图30中示例性示出根据本实施例接收视频在线预览请求的方法流程图。参见图30,另外,服务器接收显示设备发送的视频在线预览请求后执行的过程包括:
S211、接收显示设备发送的触发视频录制接口时产生的推荐视频获取请求,推荐视频获取请求用于获取推荐视频列表信息,推荐视频列表信息包括每个视频对应的演唱者名称、视频标题、视频地址、歌词地址、视频缩略图地址和视频素材中的至少一个。
S212、将推荐视频列表信息发送至显示设备,推荐视频列表信息中的演唱者名称、视频标题和视频素材用于显示设备在选择界面进行展示,视频地址用于获取视频内容。
S213、接收显示设备发送的携带歌词地址和视频缩略图地址的视频在线预览请求,界面信息获取指令视频在线预览请求用于获取与歌词地址对应的歌词,以及,与视频缩略图地址对应的视频缩略图文件。
S214、响应于视频在线预览请求,将歌词和视频缩略图文件发送至显示设备,歌词用于显示设备在选择界面或者录制界面进行展示,视频缩略图文件用于显示设备在选择界面中进行展示。
服务器根据显示设备发送的视频在线预览请求,向显示设备下发推荐视频列表信息,供显示设备进行显示或录制视频时调用,具体的实现过程可参照前述实施例提供的内容,此处不再赘述。
由以上技术方案可知,本发明实施例提供的一种视频录制方法,显示设备发送视频在线预览请求至服务器,接收服务器返回的界面信息,包括:演唱者名称、视频标题、视频地址、歌词、视频缩略图文件和视频素材中的至少一个。将演唱者名称、视频标题、歌词、视频缩略图文件和视频素材展示在选择界面,选择界面上在线播放视频地址对应的视频内容。用户在选择界面中挑选指定视频后,显示设备发送携带指定视频对应的视频地址的指定视频内容获取请求至服务器,接收服务器返回的指定视频对应的指定视频内容。显示设备获取摄像头拍摄的画面,响应于开始录制指令,将摄像头拍摄的画面、指定视频内容、指定歌词和指定视频素材展示在录制界面,开始进行视频录制。可见,本发明提供的方法,可在进行视频录制时,同步添加与该视频对应的视频素材,并添加歌词进行显示,使得用户可以录制到除摄像头拍摄的原始画面以外更丰富的内容,以满足用户的个性化需求。
为了体现出用户在利用显示设备进行视频录制时的显示界面的变化,本发明实施例提供一种显示设备,在进行视频录制时,可以根据用户基于显示设备的操作,显示设备中的显示器随之呈现不同的画面,以提供给用户呈现更加丰富内容的操作界面,提高用户的视觉效果。
图31中示例性示出根据本实施例视频录制方法的又一流程图;图32中示例性示出根据本实施例显示设备与服务器的交互结构框图。参见图31和32,本申请提供了一种显示设备,包括:摄像头2010,被配置为拍摄画面;显示器280,被配置为显示选择界面、准备录制界面、录制界面或录制完成界面;通信器2030,用于与服务器进行数据通信;通过通信器2030分别与摄像头2010和显示器280通信的处理器2020,处理器2020被配置为执行下述步骤:
S31、响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面,选择界面包括推荐视频简介列表、视频缩略图文件、歌词和视频素材,推荐视频简介列表与视频缩略图文件和视频素材中的至少一个相关联。
界面信息还包括视频地址,选择界面包括视频列表界面、视频预览界面和准备录制接口;视频列表界面显示有推荐视频简介列表,推荐视频简介列表内列有数个推荐视频,用于用户挑选指定视频,视频预览界面用于基于用户选择的指定视频的视频地址,显示由服务器下发的指定视频的预览内容,准备录制接口用于将选择界面切换为准备录制界面。
显示设备在生成包括准备录制接口和界面信息的选择界面之后,用户可基于选择界面选择自己进行视频录制时的参考视频,此时,用户在视频列表界面中按照个人喜好选择任一参考视频,每点击一个参考视频产生一个选择信息指令。显示设备响应于用户在所述视频列表界面上,触发的选择信息指令,在所述视频预览界面中基于所述视频地址播放指定视频,所述选择信息指令用于在所述视频列表界面中选择指定视频。
S32、响应于用户在所述选择界面上,触发准备录制接口时产生的指定视频内容获取请求,生成准备录制界面;其中,准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,指定视频内容获取请求用于向服务器获取与指定视频对应的视频数据,以及,将选择界面切换为准备录制界面。
此处的视频数据与前述实施例中提到的指定视频内容相同。用户操作显示设备进入准备录制界面后,即可进行视频录制,即继续点击准备录制界面中显示的开始录制按钮,具体的显示设备执行步骤如下:
S33、响应于用户在准备录制界面上,触发开始录制按钮时产生的开始录制指令,生成录制界面,开始录制指令用于调用摄像头拍摄的画面,以及,将准备录制界面切换为录制界面;开始录制按钮是指用于执行开始录制指令的接口。
S34、响应于用户在录制界面上触发的结束录制指令,生成录制完成界面,录制完成界面显示用户录制完成的摄像头拍摄视频文件,摄像头拍摄视频文件是依据摄像头拍摄的画面、指定歌词和指定视频素材进行视频录制得到的文件;其中,录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面以及与指定视频相关联的推荐内容的至少一个,推荐内容包括视频素材和歌词。
用户在操作显示设备进行视频录制时,显示设备的显示界面由启动视频录制应用程序开始至视频录制结束的过程中,先后切换的界面包括预览界面、提示界面、展示有原始缩略图的选择界面、展示有准备录制接口和界面信息的选择界面、在线播放指定视频的选择界面、准备录制界面、录制界面和录制完成界面等。每一界面的生成和相应实现视频录制的方法步骤可参照图8至图29所示的视频录制方法,此处不再赘述。
由以上技术方案可知,本发明实施例提供的一种显示设备,显示设备包括用于拍摄画面的摄像头,显示拍摄画面、选择界面、准备录制界面、录制界面和录制完成界面中的至少一个的显示器,与服务器进行数据通信的通信器,通过通信器与摄像头和显示器通信的处理器;处理器响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面,选择界面包括推荐视频简介列表、视频缩略图文件和视频素材,推荐视频简介列表与视频缩略图文件、歌词和视频素材中的至少一个相关联;响应于用户在选择界面上,触发准备录制接口时产生的指定视频内容获取请求,生成准备录制界面;其中,准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,指定视频内容获取请求用于向服务器获取与指定视频对应的视频数据,以及,将选择界面切换为准备录制界面。本发明实施例提供的显示设备,可以在进行视频录制时,同步添加与该视频对应的视频素材,并添加歌词进行显示,使得用户可以录制到除摄像头拍摄的原始画面以外更丰富的内容,以及,随着用户的操作,实时切换显示界面,以呈现给用户丰富的内容,满足用户的个性化需求。
图32中示例性示出根据本实施例显示设备与服务器的交互结构框图。参见图32,本发明实施例提供的一种显示设备,包括:摄像头2010,被配置为拍摄画面;显示器280,被配置为显示选择界面或录制界面;分别与所述摄像头和所述显示器通信的处理器2020,所述处理器2020被配置为,发送视频在线预览请求至服务器,所述视频在线预览请求用于请求所述服务器下发界面信息,所述界面信息包括演唱者名称、视频标题、视频地址、歌词、视频缩略图文件和视频素材中的至少一个;接收所述服务器根据所述视频在线预览请求返回的界面信息,将所述演唱者名称、视频标题、歌词、视频缩略图文件和视频素材展示在选择界面;接收用户基于所述选择界面触发的选择信息指令,所述选择信息指令用于在所述选择界面中选择指定视频;发送触发准备录制接口时产生的指定视频内容获取请求至服务器,所述指定视频内容获取请求携带指定视频对应的视频地址,所述指定视频内容获取请求用于使所述服务器下发与所述指定视频对应的指定视频内容生成准备录制界面,并在所述准备录制界面上呈现摄像头拍摄的画面和所述服务器根据所述指定视频内容获取请求返回的指定视频内容;接收用户触发的开始录制指令,将所述摄像头拍摄的画面、指定视频内容、指定歌词和指定视频素材展示在录制界面,开始进行视频录制,所述指定歌词是指与所述指定视频对应的歌词,所述指定视频素材是指与所述指定视频对应的视频素材。
进一步地,所述处理器2020被进一步配置为:发送触发视频录制接口时产生的推荐视频获取请求至服务器,所述推荐视频获取请求用于请求服务器下发推荐视频列表信息,所述推荐视频列表信息包括每个视频对应的演唱者名称、视频标题、视频地址、歌词地址、视频缩略图地址和视频素材中的至少一个;接收所述服务器根据所述推荐视频获取请求返回的推荐视频列表信息;生成显示有所述演唱者名称和视频标题的选择界面;在用户基于所述选择界面选取指定视频时,发送携带所述歌词地址和视频缩略图地址的视频在线预览请求至服务器,所述视频在线预览请求用于请求所述服务器下发与所述歌词地址对应的歌词,以及,与所述视频缩略图地址对应的视频缩略图文件;接收所述服务器根据所述视频在线预览请求返回的歌词和视频缩略图文件。
进一步地,所述处理器2020被进一步配置为:接收触发视频录制应用程序时产生的应用开启指令;响应于所述应用开启指令,启动摄像头,以及,生成预览界面,所述预览界面用于展示视频录制接口和摄像头拍摄的画面。
进一步地,所述处理器2020被进一步配置为:接收触发视频录制接口时产生的启动指令;响应于所述启动指令,检测网络状态是否连通;如果所述网络状态已连通,则生成推荐视频获取请求;将所述推荐视频获取请求发送至服务器。
进一步地,所述处理器2020被进一步配置为:如果所述网络状态未连通,生成提示界面,所述提示界面用于展示提示信息和选择按钮。
进一步地,所述处理器2020被进一步配置为:在未接收到所述服务器返回的歌词和视频缩略图文件时,生成原始缩略图,展示在选择界面。
进一步地,所述处理器2020被进一步配置为:所述选择界面包括视频列表界面和视频预览界面;将待进行视频录制的每个视频对应的演唱者名称、视频标题和视频缩略图文件展示在视频列表界面;在选择所述视频列表界面中任一视频作为指定视频时,将与所述指定视频对应的视频地址发送至播放器,所述播放器用于根据视频地址进行在线播放指定视频内容,所述指定视频内容显示在视频预览界面,以及,将歌词和视频素材展示在视频预览界面;在所述视频预览界面的下方,生成准备录制接口。
进一步地,所述处理器2020被进一步配置为:基于所述摄像头拍摄的画面,得到预览画面;将所述指定视频内容展示在所述预览画面的右上方;生成带有阴影区域的开始录制按钮,将所述带有阴影区域的开始录制按钮展示在所述预览画面的底部;将所述预览画面作为底层、将所述指定视频内容作为中间层、将所述带有阴影区域的开始录制按钮作为顶层,生成准备录制界面。
进一步地,所述处理器2020被进一步配置为:接收触发开始录制按钮时产生的开始录制指令;响应于所述开始录制指令,获取与所述指定视频对应的指定歌词和指定视频素材;生成包括所述摄像头拍摄的画面和指定视频素材的预览画面;启动播放展示在所述预览画面的右上方的指定视频内容;将所述带有阴影区域的开始录制按钮切换为带有阴影区域的控制按钮;获取所述指定视频的总时长,将所述总时长按照倒计时的方式显示在控制按钮上;将所述指定歌词展示在所述控制按钮的阴影区域,所述阴影区域展示在所述预览画面的底部;将所述预览画面作为底层、将处于播放状态的所述指定视频内容作为第一中间层、将呈现倒计时状态的带有阴影区域的控制按钮作为第二中间层、将所述指定歌词作为顶层,生成录制界面。
进一步地,所述处理器2020被进一步配置为:实时获取摄像头拍摄的画面,进行全屏展示;基于所述摄像头拍摄的画面中的目标位置,将所述指定视频素材叠加到所述摄像头拍摄的画面中,得到预览画面。
进一步地,所述处理器2020被进一步配置为:获取所述指定歌词中每句歌词的歌词内容、出现时间和每句歌词中每个文字的显示时长;检测所述指定视频内容开始播放后的播放进度;在所述每句歌词的出现时间与所述播放进度对应的时间一致时,显示与所述出现时间对应的目标歌词内容;根据所述目标歌词内容中每个文字的显示时长,重绘所述文字的边框,实现所述指定歌词进度在阴影区域的动态显示。
进一步地,所述处理器2020被进一步配置为:接收触发控制按钮时产生的结束录制指令,其中,所述触发控制按钮的状态包括倒计时结束时的触发状态和倒计时未结束时点击控制按钮的触发状态;响应于所述结束录制指令,合成所述指定视频素材、指定歌词和摄像头拍摄的画面,得到指定视频文件。
进一步地,所述处理器2020被进一步配置为:响应于录制结束指令,调用渲染器,将每一帧视频画面对应的所述指定视频素材、指定歌词和摄像头拍摄的画面进行渲染合成,得到合成图像;调用视图预览器,将所述合成图像转换为字节类型数据;调用媒体编码器,对所述字节类型数据进行编码,得到指定视频文件。
参见图32,本发明实施例提供的一种服务器300,包括:处理器301,以及用于存储所述处理器可执行指令的存储器302;其中,所述处理器301被配置为:接收显示设备发送的视频在线预览请求,所述视频在线预览请求用于获取界面信息,所述界面信息包括演唱者名称、视频标题、视频地址、歌词、视频缩略图文件和视频素材中的至少一个;响应于所述视频在线预览请求,将所述界面信息发送至显示设备,所述界面信息用于展示在显示设备的选择界面;接收显示设备发送的携带指定视频对应的视频地址的指定视频内容获取请求,所述指定视频是指显示设备在选择界面中选择的视频,所述指定视频内容获取请求用于获取与所述指定视频对应的指定视频内容;响应于所述指定视频内容获取请求,将与所述视频地址对应的指定视频内容发送至显示设备,所述指定视频内容用于显示设备进行视频录制时展示在录制界面。
进一步地,所述处理器301被进一步配置为:接收所述显示设备发送的触发视频录制接口时产生的推荐视频获取请求,所述推荐视频获取请求用于获取推荐视频列表信息,所述推荐视频列表信息包括每个视频对应的演唱者名称、视频标题、视频地址、歌词地址、视频缩略图地址和视频素材中的至少一个;将所述推荐视频列表信息发送至显示设备,所述推荐视频列表信息中的演唱者名称、视频标题和视频素材用于显示设备在选择界面进行展示,所述视频地址用于获取视频内容;接收显示设备发送的携带所述歌词地址和视频缩略图地址的视频在线预览请求,所述视频在线预览请求用于获取与所述歌词地址对应的歌词,以及,与所述视频缩略图地址对应的视频缩略图文件;响应于所述视频在线预览请求,将所述歌词和视频缩略图文件发送至显示设备,所述歌词用于所述显示设备在选择界面或者录制界面进行展示,所述视频缩略图文件用于显示设备在选择界面中进行展示。
参见图32,本申请提供了一种显示设备,包括:显示器280,被配置为显示选择界面;与所述显示器通信的处理器2020,所述处理器2020被配置为:响应于用户触发选择界面中的指定视频时产生的选择指令,获取所述指定视频的视频缩略图文件;调用调色板类,提取所述视频缩略图文件中每种颜色的颜色值;基于所述视频缩略图文件中每种颜色的颜色值,对比每种颜色的颜色占比,确定所述视频缩略图文件的主颜色;基于所述主颜色,改变所述选择界面的背景颜色并显示。
进一步地,所述处理器2020被进一步配置为:调用调色板类,提取所述视频缩略图文件的像素值;将具有相同颜色特性的像素值进行聚类,得到不同类别的颜色;计算每类颜色的颜色值,所述颜色值包括数个像素值。
进一步地,所述处理器2020被进一步配置为:根据所述视频缩略图文件中每种颜色的颜色值,计算每种颜色的占比值;将所述每种颜色的占比值进行对比,确定出占比值最大对应的颜色;将所述占比值最大对应的颜色作为所述视频缩略图文件的主颜色。
进一步地,所述处理器2020被进一步配置为:基于所述视频缩略图文件中每种颜色的颜色值,提取每种颜色值的红颜色值、绿颜色值和蓝颜色值;计算每种颜色的红颜色值、绿颜色值和蓝颜色值之间的方差;对比每种颜色对应的方差,将方差最大对应的颜色作为所述视频缩略图文件的主颜色。
进一步地,所述处理器2020被进一步配置为:获取所述选择界面的背景图;将所述背景图的颜色设定为主颜色,并进行显示。
参见图31,本申请提供了一种视频录制方法,应用于显示设备,该方法包括:响应于用户触发视频录制接口时产生的视频在线预览请求,生成包括准备录制接口的选择界面,所述选择界面包括推荐视频简介列表、视频缩略图文件和视频素材,所述推荐视频简介列表与视频缩略图文件和视频素材中的至少一个相关联;响应于用户在所述选择界面上,触发所述准备录制接口时产生的指定视频内容获取请求,生成准备录制界面;其中,所述准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,所述指定视频内容获取请求用于向服务器获取与所述指定视频对应的视频数据,以及,将所述选择界面切换为准备录制界面。
进一步地,还包括:响应于用户在所述准备录制界面上,触发所述开始录制按钮时产生的开始录制指令,生成录制界面,所述开始录制指令用于调用摄像头拍摄的画面,以及,将准备录制界面切换为录制界面;所述开始录制按钮是指用于执行开始录制指令的接口;响应于用户在所述准备录制界面上,触发所述开始录制按钮时产生的开始录制指令,生成录制界面,所述开始录制指令用于调用摄像头拍摄的画面,以及,将准备录制界面切换为录制界面;所述开始录制按钮是指用于执行开始录制指令的接口;其中,所述录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面以及与所述指定视频相关联的推荐内容的至少一个,所述推荐内容包括视频素材和歌词。
进一步地,所述选择界面包括视频列表界面、视频预览界面和准备录制接口;所述视频列表界面显示有推荐视频简介列表,用于用户挑选指定视频,所述视频预览界面用于基于用户选择的指定视频的视频地址,显示由服务器下发的指定视频的预览内容,所述准备录制接口用于将选择界面切换为准备录制界面。
进一步地,在生成包括准备录制接口的选择界面之后,还包括:响应于用户在所述视频列表界面上,触发的选择信息指令,在所述视频预览界面中基于所述视频地址播放指定视频,所述选择信息指令用于在所述视频列表界面中选择指定视频。
进一步地,所述响应于用户触发视频录制接口时产生的视频在线预览请求之前,还包括:响应于用户触发视频录制应用程序时产生的应用开启指令,启动摄像头,生成预览界面,所述预览界面用于展示视频录制接口和摄像头拍摄的画面。
进一步地,所述生成包括准备录制接口和界面信息的选择界面之前,还包括:响应于用户触发视频录制接口时产生的视频在线预览请求,生成展示有原始缩略图的选择界面。
进一步地,还包括:响应于用户触发视频录制接口产生的启动指令,检测网络状态是否连通;在所述网络状态未连通时,生成提示界面,所述提示界面用于展示提示信息和选择按钮。
进一步地,所述响应于用户触发准备录制接口时产生的指定视频内容获取请求,生成准备录制界面,包括:响应于用户触发准备录制接口时产生的指定视频内容获取请求,调用所述摄像头拍摄的画面,得到预览画面;将所述指定视频内容浮于所述预览画面的一侧显示;将所述预览画面作为底层、将所述指定视频内容作为上层生成准备录制界面。
进一步地,所述响应于用户触发开始录制按钮时产生的开始录制指令,生成录制界面,包括:响应于用户触发开始录制按钮时产生的开始录制指令,获取与所述指定视频对应的指定歌词和指定视频素材;生成包括所述摄像头拍摄的画面和指定视频素材的预览画面;启动播放展示在所述预览画面的一侧的指定视频内容;将所述开始录制按钮切换成控制按钮;获取所述指定视频的总时长,将所述总时长按照倒计时的方式显示在控制按钮上;将所述指定歌词展示在所述预览画面的底部;将所述预览画面作为底层、将处于播放状态的所述指定视频内容作为第一中间层、将呈现倒计时状态的控制按钮作为第二中间层、将所述指定歌词作为顶层,生成录制界面。
进一步地,所述生成包括摄像头拍摄的画面和指定视频素材的预览画面,包括:实时获取摄像头拍摄的画面,进行全屏展示;基于所述摄像头拍摄的画面中的目标位置,将所述指定视频素材叠加到所述摄像头拍摄的画面中,得到预览画面。
具体实现中,本发明还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时可包括本发明提供的视频录制方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-only memory,简称:ROM)或随机存储记忆体(英文:random access memory,简称:RAM)等。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于视频录制方法实施例而言,由于其基本相似于显示设备实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
以上所述的本发明实施方式并不构成对本发明保护范围的限定。
Claims (11)
1.一种显示设备,其特征在于,包括:
摄像头,被配置为拍摄画面;
显示器,被配置为显示用户界面;
通信器,用于与服务器进行数据通信;
通过所述通信器分别与所述摄像头和所述显示器通信的处理器,所述处理器被配置为:
响应于用户触发视频录制接口,产生视频在线预览请求,生成包括准备录制接口的选择界面,所述选择界面包括推荐视频简介列表、视频缩略图文件、歌词和视频素材,所述推荐视频简介列表与视频缩略图文件和视频素材中的至少一个相关联;
响应于用户在所述选择界面上触发所述准备录制接口,产生指定视频内容获取请求,将所述选择界面切换为准备录制界面;
其中,所述准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,所述指定视频内容获取请求用于向服务器获取与所述指定视频对应的视频数据;
响应于用户触发用于执行开始录制指令的接口,产生开始录制指令,显示录制界面,所述录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面、视频素材和歌词,以便于用户跟唱;
在基于所述录制界面完成录制时,得到摄像头拍摄视频文件,所述摄像头拍摄视频文件是依据摄像头拍摄的画面、指定歌词和指定视频素材进行视频录制得到的文件。
2.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户在所述准备录制界面上,触发所述开始录制按钮时产生的开始录制指令,生成录制界面,所述开始录制指令用于调用摄像头拍摄的画面,以及,将准备录制界面切换为录制界面;所述开始录制按钮是指用于执行开始录制指令的接口;
响应于用户在所述录制界面上触发的结束录制指令,生成录制完成界面,所述录制完成界面显示用户录制完成的摄像头拍摄视频文件。
3.根据权利要求1所述的显示设备,其特征在于,所述选择界面包括视频列表界面、视频预览界面和准备录制接口;所述视频列表界面显示有推荐视频简介列表,用于用户挑选指定视频,所述视频预览界面用于基于用户选择的指定视频的视频地址,显示由服务器下发的指定视频的预览内容,所述准备录制接口用于将选择界面切换为准备录制界面。
4.根据权利要求3所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户在所述视频列表界面上,触发的选择信息指令,在所述视频预览界面中基于所述视频地址播放指定视频,所述选择信息指令用于在所述视频列表界面中选择指定视频。
5.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户触发视频录制应用程序时产生的应用开启指令,启动摄像头,生成预览界面,所述预览界面用于展示视频录制接口和摄像头拍摄的画面。
6.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户触发视频录制接口时产生的视频在线预览请求,生成展示有原始缩略图的选择界面。
7.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户触发视频录制接口产生的启动指令,检测网络状态是否连通;
在所述网络状态未连通时,生成提示界面,所述提示界面用于展示提示信息和选择按钮。
8.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户触发准备录制接口时产生的指定视频内容获取请求,调用所述摄像头拍摄的画面,得到预览画面;
将所述指定视频内容浮于所述预览画面的一侧显示;
将所述预览画面作为底层、将所述指定视频内容作为上层生成准备录制界面。
9.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
响应于用户触发开始录制按钮时产生的开始录制指令,获取与所述指定视频对应的指定歌词和指定视频素材;
生成包括所述摄像头拍摄的画面和指定视频素材的预览画面;
启动播放展示在所述预览画面的一侧的指定视频内容;
将所述开始录制按钮切换成控制按钮;
获取所述指定视频的总时长,将所述总时长按照倒计时的方式显示在控制按钮上;
将所述指定歌词展示在所述预览画面的底部;
将所述预览画面作为底层、将处于播放状态的所述指定视频内容作为第一中间层、将呈现倒计时状态的控制按钮作为第二中间层、将所述指定歌词作为顶层,生成录制界面。
10.根据权利要求1所述的显示设备,其特征在于,所述处理器被进一步配置为:
实时获取摄像头拍摄的画面,进行全屏展示;
基于所述摄像头拍摄的画面中的目标位置,将所述指定视频素材叠加到所述摄像头拍摄的画面中,得到预览画面。
11.一种视频录制方法,其特征在于,包括以下步骤:
响应于用户触发视频录制接口,产生视频在线预览请求,生成包括准备录制接口的选择界面,所述选择界面包括推荐视频简介列表、视频缩略图文件和视频素材,所述推荐视频简介列表与视频缩略图文件和视频素材中的至少一个相关联;
响应于用户在所述选择界面上触发所述准备录制接口,产生指定视频内容获取请求,将所述选择界面切换为准备录制界面;
其中,所述准备录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面和用于执行开始录制指令的接口,所述指定视频内容获取请求用于向服务器获取与所述指定视频对应的视频数据;
响应于用户触发用于执行开始录制指令的接口,产生开始录制指令,显示录制界面,所述录制界面显示有指定视频对应的视频数据、摄像头拍摄的画面、视频素材和歌词,以便于用户跟唱;
在基于所述录制界面完成录制时,得到摄像头拍摄视频文件,所述摄像头拍摄视频文件是依据摄像头拍摄的画面、指定歌词和指定视频素材进行视频录制得到的文件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010069954.3A CN111163274B (zh) | 2020-01-21 | 2020-01-21 | 一种视频录制方法及显示设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010069954.3A CN111163274B (zh) | 2020-01-21 | 2020-01-21 | 一种视频录制方法及显示设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111163274A CN111163274A (zh) | 2020-05-15 |
CN111163274B true CN111163274B (zh) | 2022-04-22 |
Family
ID=70564921
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010069954.3A Active CN111163274B (zh) | 2020-01-21 | 2020-01-21 | 一种视频录制方法及显示设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111163274B (zh) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113727164B (zh) * | 2020-05-26 | 2024-04-26 | 百度在线网络技术(北京)有限公司 | 直播间入口显示方法、装置、电子设备和存储介质 |
CN111669636B (zh) * | 2020-06-19 | 2022-02-25 | 海信视像科技股份有限公司 | 一种音画同步的视频录制方法及显示设备 |
WO2022007568A1 (zh) * | 2020-07-06 | 2022-01-13 | 海信视像科技股份有限公司 | 显示设备、智能终端及视频集锦生成方法 |
CN112333520B (zh) * | 2020-10-30 | 2023-03-28 | Vidaa美国公司 | 节目推荐方法、显示设备及服务器 |
CN112422831A (zh) * | 2020-11-20 | 2021-02-26 | 广州太平洋电脑信息咨询有限公司 | 视频生成方法、装置、计算机设备和存储介质 |
CN112601118B (zh) * | 2020-12-07 | 2022-03-15 | 青岛海信传媒网络技术有限公司 | 显示设备及视频录制方法 |
CN114979459B (zh) * | 2021-02-27 | 2023-10-03 | 华为技术有限公司 | 拍摄素材的管理方法、电子设备及系统 |
CN113411490B (zh) * | 2021-05-11 | 2022-11-11 | 北京达佳互联信息技术有限公司 | 多媒体作品的发布方法、装置、电子设备及存储介质 |
CN113542610A (zh) * | 2021-07-27 | 2021-10-22 | 上海传英信息技术有限公司 | 拍摄方法、移动终端及存储介质 |
CN113778285A (zh) * | 2021-09-28 | 2021-12-10 | 北京字跳网络技术有限公司 | 道具处理方法、装置、设备及介质 |
CN116055442A (zh) | 2021-10-28 | 2023-05-02 | 脸萌有限公司 | 视频处理方法、视频处理装置和计算机可读存储介质 |
CN113946254B (zh) * | 2021-11-01 | 2023-10-20 | 北京字跳网络技术有限公司 | 内容显示方法、装置、设备及介质 |
CN116261008A (zh) * | 2022-12-14 | 2023-06-13 | 海信视像科技股份有限公司 | 音频处理方法和音频处理装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101051457A (zh) * | 2007-03-26 | 2007-10-10 | 中山大学 | 一种电影卡拉ok的电子娱乐系统 |
CN104883516A (zh) * | 2015-06-05 | 2015-09-02 | 福建星网视易信息系统有限公司 | 一种制作实时演唱视频的方法及系统 |
CN107368491A (zh) * | 2016-05-12 | 2017-11-21 | 富泰华工业(深圳)有限公司 | 影像制作系统及方法 |
WO2018104834A1 (en) * | 2016-12-07 | 2018-06-14 | Yogesh Chunilal Rathod | Real-time, ephemeral, single mode, group & auto taking visual media, stories, auto status, following feed types, mass actions, suggested activities, ar media & platform |
CN110177219A (zh) * | 2019-07-01 | 2019-08-27 | 百度在线网络技术(北京)有限公司 | 视频的模板推荐方法和装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7716572B2 (en) * | 2006-07-14 | 2010-05-11 | Muvee Technologies Pte Ltd. | Creating a new music video by intercutting user-supplied visual data with a pre-existing music video |
TWI592021B (zh) * | 2015-02-04 | 2017-07-11 | 騰訊科技(深圳)有限公司 | 生成視頻的方法、裝置及終端 |
US10699747B2 (en) * | 2016-07-01 | 2020-06-30 | Yuvie Llc | System and method for recording a video scene within a predetermined video framework |
-
2020
- 2020-01-21 CN CN202010069954.3A patent/CN111163274B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101051457A (zh) * | 2007-03-26 | 2007-10-10 | 中山大学 | 一种电影卡拉ok的电子娱乐系统 |
CN104883516A (zh) * | 2015-06-05 | 2015-09-02 | 福建星网视易信息系统有限公司 | 一种制作实时演唱视频的方法及系统 |
CN107368491A (zh) * | 2016-05-12 | 2017-11-21 | 富泰华工业(深圳)有限公司 | 影像制作系统及方法 |
WO2018104834A1 (en) * | 2016-12-07 | 2018-06-14 | Yogesh Chunilal Rathod | Real-time, ephemeral, single mode, group & auto taking visual media, stories, auto status, following feed types, mass actions, suggested activities, ar media & platform |
CN110177219A (zh) * | 2019-07-01 | 2019-08-27 | 百度在线网络技术(北京)有限公司 | 视频的模板推荐方法和装置 |
Non-Patent Citations (1)
Title |
---|
全民K歌怎么录制自己的MV;123456qcd66;《百度经验》;20190501;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN111163274A (zh) | 2020-05-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111163274B (zh) | 一种视频录制方法及显示设备 | |
CN112073797B (zh) | 一种音量调节方法及显示设备 | |
CN112533037B (zh) | 连麦合唱作品的生成方法和显示设备 | |
CN112073798B (zh) | 一种数据传输方法及设备 | |
CN111291219A (zh) | 一种改变界面背景颜色的方法及显示设备 | |
CN112399212A (zh) | 显示设备、分享文件的方法和服务器 | |
CN112073788A (zh) | 视频数据处理方法、装置及显示设备 | |
CN112788422A (zh) | 显示设备 | |
CN112073662A (zh) | 一种显示设备 | |
CN112333499A (zh) | 寻找目标设备的方法和显示设备 | |
CN112073770B (zh) | 显示设备及视频通讯数据处理方法 | |
CN112399263A (zh) | 一种互动方法、显示设备及移动终端 | |
CN112399264A (zh) | 一种放映厅业务管理方法及应用 | |
CN112073826B (zh) | 合录音视频作品状态显示方法、服务器及终端设备 | |
CN113727163B (zh) | 一种显示设备 | |
CN113497884B (zh) | 一种双系统摄像头切换控制方法及显示设备 | |
CN112533023B (zh) | 连麦合唱作品的生成方法和显示设备 | |
CN112073666B (zh) | 一种显示设备的电源控制方法及显示设备 | |
CN112533030B (zh) | 一种演唱界面的显示方法、显示设备及服务器 | |
CN112399071B (zh) | 一种摄像头马达的控制方法、装置及显示设备 | |
CN113938633A (zh) | 一种视频通话处理方法及显示设备 | |
CN113448529A (zh) | 显示设备和音量调节方法 | |
CN112399235A (zh) | 一种智能电视的摄像头拍照效果增强方法及显示设备 | |
CN113301404A (zh) | 显示设备和控制方法 | |
CN112073773A (zh) | 一种屏幕互动方法、装置及显示设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |