CN113438436A - 一种视频播放方法、视频会议方法、直播方法及相关设备 - Google Patents

一种视频播放方法、视频会议方法、直播方法及相关设备 Download PDF

Info

Publication number
CN113438436A
CN113438436A CN202010206041.1A CN202010206041A CN113438436A CN 113438436 A CN113438436 A CN 113438436A CN 202010206041 A CN202010206041 A CN 202010206041A CN 113438436 A CN113438436 A CN 113438436A
Authority
CN
China
Prior art keywords
video
image
screen
images
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010206041.1A
Other languages
English (en)
Other versions
CN113438436B (zh
Inventor
王诗宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN202010206041.1A priority Critical patent/CN113438436B/zh
Publication of CN113438436A publication Critical patent/CN113438436A/zh
Application granted granted Critical
Publication of CN113438436B publication Critical patent/CN113438436B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H04N21/440272Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA for performing aspect ratio conversion

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例提供一种视频播放方法、视频会议方法、直播方法及相关设备,其中方法包括:获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧;在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;基于所述目标视频图像,播放竖屏视频。本发明实施例可使得播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。

Description

一种视频播放方法、视频会议方法、直播方法及相关设备
技术领域
本发明实施例涉及视频技术领域,具体涉及一种视频播放方法、视频会议方法、直播方法及相关设备。
背景技术
随着终端的普及,用户使用终端观看视频越来越普遍,为获得良好的观影效果,用户经常使用终端全屏播放视频;终端播放视频的全屏播放方式主要分为横屏播放方式和竖屏播放方式,具体的,横屏播放方式可以认为是终端在横屏状态下播放横屏视频,竖屏播放方式可以认为是终端在竖屏状态下播放竖屏视频。
终端播放横屏视频和竖屏视频需要带来差异的观影效果,使得横屏视频和竖屏视频侧重播放不同的视频内容,因此如何提供技术性方案,以实现横屏视频和竖屏视频差异的观影效果,成为了本领域技术人员亟需解决的问题。
发明内容
有鉴于此,本发明实施例提供一种视频播放方法、视频会议方法、直播方法及相关设备,以实现横屏视频和竖屏视频差异的观影效果。
为实现上述目的,本发明实施例提供如下技术方案:
一种视频播放方法,包括:
获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧;
在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;
基于所述目标视频图像,播放竖屏视频。
本发明实施例还提供一种视频播放装置,包括:
获取模块,用于获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧;
目标视频图像确定模块,用于在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;
播放模块,用于基于所述目标视频图像,播放竖屏视频。
本发明实施例还提供一种视频会议方法,应用于第一终端,包括:
在所述第一终端与第二终端建立视频会议连接后,获取所述第二终端采集的实时视频流,所述实时视频流包括横屏视频帧;
在检测到所述实时视频流的竖屏播放指令时,从当前横屏视频帧中确定多个视频图像,基于所述多个视频图像拼接得到目标视频图像;
基于所述目标视频图像,播放所述实时视频流的竖屏视频。
本发明实施例还提供一种直播方法,包括:
获取直播视频流,所述直播视频流包括多个视频帧,所述视频帧至少包括横屏视频帧;
在检测到所述直播视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;
基于所述目标视频图像,播放所述直播视频流的竖屏视频。
本发明实施例还提供一种终端,包括:至少一个存储器和至少一个处理器;所述存储器存储一条或多条计算机可执行指令,所述处理器调用所述一条或多条计算机可执行指令,以执行如上述所述的视频播放方法,或者执行如上述所述的视频会议方法,或者执行如上述所述的直播方法。
本发明实施例还提供一种存储介质,所述存储介质存储一条或多条计算机可执行指令,所述一条或多条计算机可执行指令用于执行如上述所述的视频播放方法,或者用于执行如上述所述的视频会议方法,或者用于执行如上述所述的直播方法。
基于本发明实施例所提供的视频播放方法,终端可获取目标视频流,所述目标视频流包括多个目标视频帧,目标视频帧可以至少包括横屏视频帧;从而在终端检测到竖屏播放指令时,可确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;进而,终端可基于所述目标视频图像,播放竖屏视频。由于目标视频图像是基于当前横屏视频帧中的多个视频图像拼接得到,因此终端检测到竖屏播放指令时,能聚焦播放当前横屏视频帧中的该多个视频图像,从而使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的系统框图;
图2为本发明实施例提供的视频播放方法的流程图;
图3为本发明实施例提供的横屏视频和竖屏视频的示例图;
图4为本发明实施例提供的横屏视频和竖屏视频的另一示例图;
图5为本发明实施例提供的视频处理流程图;
图6为本发明实施例提供的坐标系示例图;
图7为本发明实施例提供的视频播放方法的另一流程图;
图8为本发明实施例提供的另一视频处理流程图;
图9为本发明实施例提供的另一坐标系示例图;
图10为本发明实施例提供的视频播放方法的再一流程图;
图11为本发明实施例提供的形成目标视频图像的流程图;
图12为本发明实施例提供的视频播放方法的又一流程图;
图13为本发明实施例提供的视频会议方法流程图;
图14为本发明实施例提供的视频会议场景下的横屏视频和竖屏视频的示例图;
图15为本发明实施例提供的提示切换全屏播放方式的流程图;
图16为本发明实施例提供的视频播放装置的框图;
图17为本发明实施例提供的视频播放装置的另一框图;
图18为本发明实施例提供的视频播放装置的再一框图;
图19为本发明实施例提供的终端的框图。
具体实施方式
终端在横屏状态和竖屏状态下,可均以全屏播放方式播放视频,具体的,如果终端置于横屏状态(例如终端水平放置),则终端播放横屏视频,如果终端置于竖屏状态(例如终端竖直放置),则终端播放竖屏视频;其中,竖屏状态指的是终端屏幕竖向显示的状态,横屏状态指的是终端屏幕横向显示的状态,相应的,横屏视频可以认为是终端在横屏状态下全屏播放的视频,竖屏视频可以认为是终端在竖屏状态下全屏播放的视频。
如果横屏视频和竖屏视频仅是同一视频以不同的比例播放,那么播放横屏视频和竖屏视频实质上是以不同的比例播放相同的视频,这使得横屏视频和竖屏视频并无法带来差异的观影效果,导致用户观看竖屏视频的可能性降低,致使竖屏视频的播放率较低。
基于此,本发明实施例提供改进的视频播放方案,使得横屏视频和竖屏视频侧重播放不同的视频内容,以实现横屏视频和竖屏视频能够带来差异的观影效果的目的。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
终端在横屏状态下,用户观看屏幕具有更宽的视野,而终端在竖屏状态下,用户观看屏幕的视野更为聚焦;基于此特性,本发明实施例考虑竖屏视频的内容可至少由横屏视频中的局部视频图像形成,从而终端在播放竖屏视频时至少聚焦横屏视频中的局部视频图像,以使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,为实现横屏视频和竖屏视频具有差异的观影效果提供可能。基于此思路,下面对本发明实施例提供的视频播放方案进行介绍。
在一种可选实现中,本发明实施例提供的视频播放方法可基于图1所示系统实施,如图1所示,该系统可以包括:视频服务器10和终端20;
其中,视频服务器10可以是提供视频服务的服务设备,例如视频网站、视频平台的服务设备,在本发明实施例中,终端20可向视频服务器请求视频,以实现在终端侧播放视频;可选的,视频服务器10可以是由多台服务器组成的服务器群组实现;
终端20可以是用户所使用的用户设备,例如智能手机、平板电脑、笔记本电脑等;可选的,在本发明实施例中,用户可通过调整终端的姿态,以实现将终端置于横屏状态和竖屏状态,例如用户可将终端水平放置,以实现将终端置于横屏状态,用户可将终端竖直放置,以实现将终端置于竖屏状态。
在可选实现中,基于图1所示系统,图2示出了本发明实施例提供的视频播放方法的可选流程,该流程可由终端执行,参照图2,该流程可以包括:
步骤S10、获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧。
在可选实现中,用户可使用终端打开视频APP(应用软件),当用户在视频APP的视频推荐页面或者视频搜索页面选择目标视频后,终端可向视频服务器请求目标视频流,从而终端可获取到目标视频流;当然,本发明实施例也可支持终端以浏览器、小程序等方式与视频服务器进行交互,从而获得目标视频流。
在本发明实施例中,目标视频流可以包括多个目标视频帧,所述目标视频帧可至少包括横屏视频帧。在可选实现中,目标视频帧的具体组成情况可以分为:
情况一、目标视频帧可以具体包括横屏视频帧和竖屏视频帧,所述竖屏视频帧可以是由横屏视频帧中的多个视频图像拼接得到,即目标视频流中的一个目标视频帧可由横屏视频帧和竖屏视频帧拼接得到,且该竖屏视频帧基于横屏视频帧中的多个视频图像拼接而成。
情况二、目标视频流可以直接是横屏视频流,相应的,目标视频帧可以直接是横屏视频帧。
步骤S11、在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于所述当前横屏视频帧中的多个视频图像拼接得到。
在目标视频流播放之时或者目标视频流播放的过程中,如果终端检测到目标视频流的竖屏播放指令,则终端需播放目标视频流的竖屏视频,因此,本发明实施例可确定当前用于竖屏播放的目标视频图像,以便基于该目标视频图像,播放竖屏视频。
在可选实现中,针对上述情况一,由于目标视频帧具体包括横屏视频帧和竖屏视频帧,则本发明实施例可从当前目标视频帧中确定当前竖屏视频帧,从而将当前竖屏视频帧作为是当前用于竖屏播放的目标视频图像;可以理解的是,在情况一中,竖屏视频帧基于横屏视频帧中的多个视频图像拼接而成,因此当前竖屏视频帧是基于当前横屏帧中的多个视频图像拼接得到。
在可选实现中,针对上述情况二、由于目标视频帧具体是横屏视频帧,本发明实施例可在检测到竖屏播放指令时,可从当前横屏视频帧中确定多个视频图像,从而基于该多个视频图像拼接得到目标视频图像。
步骤S12、基于所述目标视频图像,播放竖屏视频。
可以理解的是,在检测到竖屏播放指令至下一次检测到横屏播放指令的过程中,本发明实施例可确定出各个视频时间点相应的目标视频图像,从而基于各个视频时间点相应的目标视频图像,在该过程中,实现播放竖屏视频。
需要说明的是,无论是情况一还是情况二,在可选实现中,本发明实施例所指的多个视频图像可以是当前横屏视频帧的多个局部视频图像,即目视频图像可基于当前横屏视频帧中的多个局部视频图像拼接得到;
在一种示例中,所述局部视频图像可以是当前横屏视频帧中的主体图像,主体图像可以是当前横屏视频帧中的视频主体对应的视频图像,即目视频图像可基于当前横屏视频帧中的多个主体图像拼接得到,示例的,如图3所示,当前横屏视频帧中存在主体图像1和2,则本发明实施例可基于主体图像1和2拼接得到目标视频图像,从而终端处于横屏状态下,播放当前横屏视频帧,终端处于竖屏状态下,基于主体图像1和2拼接得到的目标视频图像,播放竖屏视频;可以理解的是,通过在终端的竖屏状态下,播放横屏视频帧的主体图像,可使得终端在播放竖屏视频时,聚焦横屏视频中的主体部分,可实现横屏视频和竖屏视频具有差异的观影效果;
当然,主体图像仅是局部视频图像的一种可选形式,本发明实施例也可支持局部视频图像为横屏视频帧中的非主体图像的情况。
在另一种可选实现中,无论是情况一还是情况二,本发明实施例所指的多个视频图像可以是横屏视频帧的局部视频图像(一个或多个)与全局视频图像,即目标视频图像可基于当前横屏视频帧的全局视频图像及一个或多个局部视频图像拼接得到;示例的,如图4所示,本发明实施例可基于当前横屏视频中的一个主体图像和当前横屏视频帧拼接得到目标视频图像,从而终端处于横屏状态下,播放当前横屏视频帧,终端处于竖屏状态下,基于主体图像和当前横屏视频帧拼接得到的目标视频图像,播放竖屏视频。
基于本发明实施例所提供的视频播放方法,终端可获取目标视频流,所述目标视频流包括多个目标视频帧,目标视频帧可以至少包括横屏视频帧;从而在终端检测到竖屏播放指令时,可确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于所述当前横屏视频帧中的多个视频图像拼接得到;进而,终端可基于所述目标视频图像,播放竖屏视频。由于目标视频图像是基于当前横屏视频帧中的多个视频图像拼接得到,因此终端检测到竖屏播放指令时,能聚焦播放横屏视频帧中的该多个视频图像,从而使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。
基于情况一,以视频图像为局部视频图像,且局部视频图像为主体图像为例,在可选实现中,针对视频数据库中的任一横屏视频流或者指定横屏视频流,视频服务器可预先对横屏视频流中的各横屏视频帧识别主体图像,从而基于横屏视频帧中识别的主体图像拼接得到竖屏视频帧,进而通过将横屏视频帧与竖屏视频帧相拼接,可得到由横屏视频帧与竖屏视频帧合成的视频帧,该多个视频帧形成相应的视频流。当该视频流被终端下载后,终端可在横屏状态下播放视频帧中的横屏视频帧,在竖屏状态下播放视频帧中的竖屏视频帧,从而使得终端在播放竖屏视频时聚焦横屏视频中的主体图像,实现横屏视频和竖屏视频差异的观影效果。
基于上段描述,可选的,图5示出了本发明实施例可选的视频处理流程,该流程可由视频服务器执行,参照图5,该流程可以包括:
步骤S100、获取横屏视频流,所述横屏视频流包括多个横屏视频帧。
视频服务器可从视频数据库中调取横屏视频流,所调取的横屏视频流可以是指定的横屏视频流,也可以是视频数据库中的任一横屏视频流。可以理解的是,一个视频流包括多个视频帧,一个视频帧可以认为是一个视频流中的一副图像,连续的多个视频时间点的视频帧可形成一个视频流;相应的,横屏视频流中的视频帧可称为是横屏视频帧,一个横屏视频流可以包括多个横屏视频帧。
步骤S110、针对各横屏视频帧,识别所述横屏视频帧中的视频主体,确定所述横屏视频帧中所识别的视频主体对应的主体图像。
针对横屏视频流中的各个横屏视频帧,视频服务器可确定出各横屏视频帧中的视频主体,一个横屏视频帧中识别出的视频主体的数量可能是一个或者多个,从而确定出各横屏视频帧中所识别的视频主体对应的主体图像。
在可选实现中,横屏视频帧中的视频主体可以是横屏视频帧中主要表达视频内容的视频对象,视频对象例如横屏视频帧中的人物、动物、建筑物、景物等,本发明实施例并不设限。在可选示例中,本发明实施例可识别横屏视频帧中发音的人物、动物,从而识别出横屏视频帧中的视频主体,在另一种可选示例中,本发明实施例可识别横屏视频帧中各视频对象的轮廓,位置,所占画面比例等要素信息,从而基于横屏视频帧中各视频对象的要素信息,从横屏视频帧中确定出主要表达视频内容的视频对象,实现识别横屏视频帧中的视频主体。关于识别横屏视频帧中的视频主体的具体方式,本发明实施例并不设限,上述描述仅为便于理解的示例说明。
在识别出横屏视频帧中的视频主体后,可选的,本发明实施例可在横屏视频帧中确定以视频主体为中心的图像框,进一步,该图像框可正好覆盖视频主体,该图像框可以认为是横屏视频帧中视频主体对应的主体图像。需要说明的是,横屏视频帧中的一个视频主体可在横屏视频帧中对应一个主体图像,如果一个横屏视频帧中存在多个视频主体,则需要从该横屏视频帧中确定出各个视频主体的主体图像。
步骤S120、若一个横屏视频帧中主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成该横屏视频帧相应的竖屏视频帧。
基于步骤S110,如果识别某一个横屏视频帧中具有多个视频主体,则该横屏视频帧中主体图像的数量为多个,此时,本发明实施例可对该横屏视频帧中的多个主体图像进行图像尺寸调整,使得调整图像尺寸后的多个主体图像的整体图像尺寸,与竖屏视频帧的图像尺寸相对应(即调整图像尺寸后的多个主体图像的图像尺寸之和,等于竖屏视频帧的图像尺寸),进而,本发明实施例可将调整图像尺寸后的多个主体图像进行拼接,从而得到该横屏视频帧相应的竖屏视频帧。
步骤S130、若一个横屏视频帧中主体图像的数量为一个,对主体图像调整图像尺寸,调整图像尺寸后的主体图像形成该横屏视频帧相应的竖屏视频帧。
基于步骤S110,如果识别某一个横屏视频帧中只有一个视频主体,则本发明实施例可对该主体图像进行图像尺寸调整,使得调整图像尺寸后的主体图像的图像尺寸,与竖屏视频帧的图像尺寸相对应,得到该横屏视频帧相应的竖屏视频帧。
步骤S140、将各横屏视频帧与相应的竖屏视频帧相拼接,得到多个视频帧,由多个视频帧形成视频流。
基于步骤S110和步骤S130,本发明实施例可得到各横屏视频帧相应的竖屏视频帧,从而将各横屏视频帧与相应的竖屏视频帧相拼接,得到多个视频帧,即一个视频帧可由一个视频时间点的横屏视频帧和竖屏视频帧相拼接得到,进而该多个视频帧可形成视频流。
在可选实现中,横屏视频帧和竖屏视频帧相拼接可以认为是进行视频图像的拼接,比如将竖屏视频帧拼接在横屏视频帧的上方,又如将横屏视频帧和竖屏视频帧在水平方向拼接等。
图5所示流程中,横屏视频帧中的主体图像仅是横屏视频帧中的局部视频图像的一种可选形式,本发明实施例也可从横屏视频帧中确定非主体图像的多个局部视频图像,或者,从横屏视频帧中确定包含主体图像和非主体图像的多个局部视频图像,从而基于该多个局部视频图像拼接得到竖屏视频帧;当然,本发明实施例也可从横屏视频帧中确定非主体图像的一个局部视频图像,从而对该局部视频图像调整图像尺寸,得到竖屏视频帧。
在进一步的可选实现中,对于拼接横屏视频帧和竖屏视频帧所得到的视频帧,本发明实施例可定义横屏视频帧在视频帧中的坐标区域,竖屏视频帧在视频帧中的坐标区域,从而得到视频流对应的第一坐标数据,即本发明实施例可设置视频流对应的第一坐标数据,从而由该第一坐标数据记录视频流中各视频帧的横屏视频帧的坐标区域,和竖屏视频帧的坐标区域;在具体实现中,针对横屏视频帧和竖屏视频帧拼接而成的视频帧,本发明实施例可定义视频帧的边角像素点为原点,从而基于该原点建立坐标系,确定出视频帧中横屏视频帧对应的坐标区域,和竖屏视频帧对应的坐标区域;
示例的,如图6所示,视频帧由横屏视频帧A1和竖屏视频帧A2拼接得到,其中,竖屏视频帧A2由横屏视频帧A1中的多个视频图像拼接形成,且竖屏视频帧A2拼接在横屏视频帧A1的上方,本发明实施例可定义视频帧的左上角为原点,以原点为基础,向下Y轴坐标增大,向右X轴坐标增大,来建立坐标系,则在该坐标系中,竖屏视频帧的坐标区域可以表示为{(0,0),(a1,0),(a1,b1),(0,b1)},横屏视频帧的坐标区域可以表示为{(0,b1),(a2,b1),(a2,b2),(0,b2)}。
基于上述视频服务器的处理,视频服务器可形成视频流,该视频流中的各视频帧由横屏视频帧和竖屏视频帧拼接而成,同时,视频服务器可设置视频流对应的第一坐标数据,记录视频流中各视频帧的横屏视频帧的坐标区域和竖屏视频帧的坐标区域;基于此种情况,终端在获取视频流进行播放时,终端执行的视频播放方法的另一可选流程可如图7所示,参照图7,该流程可以包括:
步骤S200、获取目标视频流及所述目标视频流对应的第一坐标数据,所述目标视频流包括多个目标视频帧,所述目标视频帧由横屏视频帧和竖屏视频帧相拼接得到。
在本发明实施例中,目标视频流可以包括多个目标视频帧,目标视频帧可由横屏视频帧和竖屏视频帧拼接得到;可以理解的是,竖屏视频帧可以是基于横屏视频帧中的多个视频图像拼接得到,或者,由横屏视频帧中的一个视频图像调整图像尺寸后得到;在具体示例中,若一个横屏视频帧中主体图像的数量为多个,则该横屏视频帧相应的竖屏视频帧由该横屏视频帧中的多个主体图像调整图像尺寸后,拼接而成,若一个横屏视频帧中主体图像的数量为一个,则该横屏视频帧相应的竖屏视频帧,由该横屏视频帧中的主体图像调整图像尺寸后形成。
本发明实施例可同步获取到目标视频流对应的第一坐标数据,该第一坐标数据可至少记录各目标视频帧中竖屏视频帧的坐标区域;可选的,该第一坐标数据还可记录各目标视频帧中横屏视频帧的坐标区域。
步骤S210、在检测到所述目标视频流的竖屏播放指令时,根据所述第一坐标数据,确定当前目标视频帧中竖屏视频帧的坐标区域,根据所确定的坐标区域,从当前目标视频帧中确定当前竖屏视频帧。
在目标视频流播放之时或者目标视频流播放的过程中,如果终端检测到目标视频流的竖屏播放指令,则终端需播放目标视频流的竖屏视频,从而终端可基于当前视频时间点确定目标视频流中的当前目标视频帧,从而根据目标视频流对应的第一坐标数据,确定当前目标视频帧中竖屏视频帧的坐标区域,进而根据所确定的竖屏视频帧的坐标区域,从当前目标视频帧中确定当前竖屏视频帧。该当前竖屏视频帧可以认为是本发明实施例所指的目标视频图像的一种可选形式。
示例的,结合图6所示,若本发明实施例确定目标视频帧中当前竖屏视频帧的坐标区域{(0,0),(a1,0),(a1,b1),(0,b1)},从而基于该坐标区域,终端的播放器可框取该坐标区域对应的当前竖屏视频帧。
在可选实现中,用户可操作终端置于竖直状态,从而终端中的方向传感器在检测到终端置于竖直状态,则可认为检测到终端的竖屏播放指令;在具体的实现中,如果终端在水平状态下旋转角度超过45度,则认为终端置于竖直状态。在另一种可选实现中,用户可点击视频播放页面的竖屏播放按钮,从而终端可检测到竖屏播放指令。
需要说明的是,终端检测到竖屏播放指令可以在目标视频流的播放之时或者目标视频流的播放过程中,例如终端可在竖屏状态下向视频服务器请求获取目标视频流,从而终端在播放目标视频流之时,是以竖屏状态进行播放;又如,终端在横屏状态下播放目标视频流的过程中,如果终端被置于竖屏状态,则终端可检测到竖屏播放指令。
需要进一步说明的是,步骤S210可以认为是本发明实施例在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像的一种可选方式。
步骤S220、基于所述当前竖屏视频帧,播放竖屏视频。
可以理解的是,在检测到竖屏播放指令至下一次检测到横屏播放指令的过程中,在各个视频时间点以步骤S210和步骤S220的方式进行处理,则可确定出各个视频时间点相应的当前竖屏视频帧,从而可实现在这个过程中,基于各个视频时间点相应的当前竖屏视频帧,播放竖屏视频。
步骤S230、在检测到所述目标视频流的横屏播放指令时,根据所述第一坐标数据,确定当前目标视频帧中横屏视频帧的坐标区域,根据所确定的坐标区域,从当前目标视频帧中确定当前横屏视频帧。
可选的,终端可基于当前视频时间点确定目标视频流中的当前目标视频帧,从而根据目标视频流对应的第一坐标数据,确定当前目标视频帧中横屏视频帧的坐标区域,进而根据所确定的横屏视频帧的坐标区域,从当前目标视频帧中确定当前横屏视频帧。
示例的,结合图6所示,当前横屏视频帧的坐标区域为{(0,b1),(a2,b1),(a2,b2),(0,b2)},从而基于该坐标区域,终端的播放器可框取该坐标区域的视频图像,从而确定出当前横屏视频帧。
在可选实现中,用户可操作终端置于水平状态,从而终端中的方向传感器在检测到终端置于水平状态时,则可认为检测到终端的横屏播放指令;在具体的实现中,如果终端在竖直状态下旋转角度超过45度,则认为终端置于水平状态。在另一种可选实现中,用户可点击视频播放页面的横屏播放按钮,从而终端可检测到横屏播放指令。
需要进一步解释的是,本发明实施例所指的当前可以是当前视频时间点,随着视频进度的推移,当前视频时间点在不断的调整中。
步骤S240、基于当前横屏视频帧,播放横屏视频帧。
可以理解的是,在检测到横屏播放指令至下一次检测到竖屏播放指令的过程中,在各个视频时间点以步骤S230和步骤S240的方式进行处理,则可确定出各个视频时间点相应的当前横屏视频帧,从而可实现在这个过程中,基于各个视频时间点相应的当前横屏视频帧,播放横屏视频。
可以看出,在视频流的视频帧由横屏视频帧和竖屏视频帧拼接而成的情况下,终端在检测到竖屏播放指令时,可播放视频帧中的竖屏视频帧的部分,在检测到横屏播放指令时,可播放视频帧中横屏视频帧的部分;同时,由于竖屏视频帧是基于横屏视频帧中的多个视频图像(如主体对象)拼接得到,因此终端检测到竖屏播放指令时,能够聚焦播放横屏视频帧中的视频图像,从而可使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,可实现横屏视频和竖屏视频具有差异的观影效果。
基于情况二、以视频图像为局部视频图像,且局部视频图像为主体图像为例,在可选实现中,针对视频数据库中的任一横屏视频流或者指定横屏视频流,视频服务器可预先对横屏视频流中的各横屏视频帧识别主体图像,并记录各横屏视频帧中主体图像的坐标区域,从而得到第二坐标数据;进而终端在获取横屏视频流进行播放时,终端可在横屏状态下,播放横屏视频帧,在竖屏状态下,基于第二坐标数据从横屏视频帧中确定主体图像的坐标区域,从而基于该坐标区域确定主体图像,由所确定的主体图像形成目标视频图像,以实现在竖屏状态下播放竖屏视频。
基于上段描述,可选的,图8示出了本发明实施例另一可选的视频处理流程,该流程可由视频服务器执行,参照图8,该流程可以包括:
步骤S300、获取横屏视频流,所述横屏视频流包括多个横屏视频帧。
步骤S310、针对各横屏视频帧,识别所述横屏视频帧中的视频主体,确定所述横屏视频帧中所识别的视频主体对应的主体图像。
步骤S320、记录各横屏视频帧中主体图像的坐标区域,得到第二坐标数据。
在步骤S310确定出各横屏视频帧中的主体图像后,本发明实施例可记录各横屏视频帧中主体图像的坐标区域,得到第二坐标数据,即第二坐标数据可至少记录各横屏视频帧中主体图像的坐标区域。可以理解的是,如果一个横屏视频帧中的主体图像的数量为多个,则第二坐标数据可记录该横屏视频帧中多个主体图像的坐标区域,如果一个横屏视频帧中主体图像的数量为一个,则第二坐标数据可记录该横屏视频帧中一个主体图像的坐标区域。
示例的,如图9所示,横屏视频帧中存在两个主体图像,分别为主体图像C1和C2,则本发明实施例可以横屏视频帧的左上角为原点,向下Y轴坐标增大,向右X轴坐标增大,来建立坐标系,从而确定出该坐标下,主体图像C1的坐标区域和主体图像C2的坐标区域,并记录在第二坐标数据中。
需要说明的是,图8所示流程中,横屏视频帧中的主体图像仅是横屏视频帧中的局部视频图像的一种可选形式,本发明实施例也可从横屏视频帧中确定非主体图像的多个局部视频图像,或者,从横屏视频帧中确定包含主体图像和非主体图像的多个局部视频图像,从而在第二坐标数据中记录横屏视频帧中多个局部视频图像的坐标区域;本发明实施例也可从横屏视频帧中确定非主体图像的一个局部视频图像,从而在第二坐标数据中记录横屏视频帧中该局部视频图像的坐标区域。
基于上述视频服务器的处理,以局部视频图像为主体图像为例,终端在获取横屏视频流进行播放时,终端执行的视频播放方法的再一可选流程可如图10所示,参照图10,该流程可以包括:
步骤S400、获取目标视频流及所述目标视频流对应的第二坐标数据,所述目标视频流为横屏视频流。
在本发明实施例中,目标视频流具体为横屏视频流,目标视频流中的目标视频帧具体为横屏视频流中的横屏视频帧。本发明实施例在终端获取目标视频流时,可同步获取目标视频流对应的第二坐标数据,第二坐标数据可至少记录各横屏视频帧中主体图像的坐标区域。
步骤S410、在检测到所述目标视频流的竖屏播放指令时,根据所述第二坐标数据,确定当前横屏视频帧中主体图像的坐标区域。
在目标视频流播放之时或者目标视频流播放的过程中,如果终端检测到目标视频流的竖屏播放指令,终端可基于当前视频时间点,确定目标视频流中的当前横屏视频帧,根据目标视频流对应的第二坐标数据,确定当前横屏视频帧中主体图像的坐标区域。
终端检测到竖屏播放指令的具体方式可参照前文相应部分的描述,此处不再赘述。
步骤S420、根据所确定的主体图像的坐标区域,从当前横屏视频帧中确定主体图像。
基于步骤S410所确定的当前横屏视频帧中主体图像的坐标区域,本发明实施例可从当前横屏视频帧中确定主体图像,如使用播放器基于当前横屏视频帧中主体图像的坐标区域,从当前横屏视频帧中框取出主体图像。
步骤S430、若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成目标视频图像。
步骤S440、若主体图像的数量为一个,对所述主体图像调整图像尺寸,调整图像尺寸后的主体图像形成目标视频图像。
需要说明的是,步骤S410至步骤S440可以认为是本发明实施例在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像的一种可选实现方式。
步骤S450、基于所述目标视频图像,播放竖屏视频。
可以理解的是,在检测到竖屏播放指令至下一次检测到横屏播放指令的过程中,在各个视频时间点以步骤S410至步骤S440的方式进行处理,则可确定出各个视频时间点相应的目标视频图像,从而在这个过程中,基于各个视频时间点相应的目标视频图像,播放竖屏视频。
需要说明的是,图10所示流程中,主体图像仅是局部视频图像的一种可选形式。
进一步,如果在目标视频流播放之时或者目标视频流播放的过程中,检测到目标视频流的横屏播放指令,则本发明实施例可从当前视频时间点开始播放横屏视频帧。
在步骤S430的可选实现中,如果当前横屏视频帧存在多个主体图像,本发明实施例可对该横屏视频帧中的多个主体图像进行图像尺寸调整,使得调整图像尺寸后的多个主体图像的整体图像尺寸,与竖屏视频帧的图像尺寸相对应,从而将调整图像尺寸后的多个主体图像进行拼接,可得到目标视频图像;
在一种可选实现中,如果当前横屏视频帧中主体图像的数量为多个,本发明实施例可基于主体图像在当前横屏视频帧中的景别,确定主体图像所应调整的图像尺寸;可选的,图11示出了本发明实施例提供的对主体图像调整图像尺寸,拼接形成目标视频图像的可选流程,该流程可由终端执行,参照图11,该流程可以包括:
步骤S500、确定主体图像的数量及所位于的景别。
步骤S510、若主体图像的数量为2个,且2个主体图像的视频主体位于相同的景别,则将2个主体图像的图像尺寸分别调整为竖屏视频帧的一半尺寸,拼接调整图像尺寸后的2个主体图像,得到目标视频图像。
如果当前横屏视频帧中主体图像的数量为2个,且该2个主体图像的视频主体在当前横屏视频帧中位于相同的景别,则本发明实施例可将2个主体图像分别调整为竖屏视频帧的图像尺寸的一半,即一个主体图像调整后的图像尺寸为竖屏视频帧的图像尺寸的一半,从而,本发明实施例可将调整图像尺寸后的2个主体图像进行拼接,得到目标视频图像;图像拼接方式可以例如上下拼接,一个主体图像在上方,另一个主体图像在下方。
步骤S520、若主体图像的数量为2个,且2个主体图像包括视频主体位于远处景别的第一主体图像,和视频主体位于近处景别的第二主体图像,则将第一主体图像的图像尺寸调整为竖屏视频帧的第一比例尺寸,将第二主体图像的图像尺寸调整为竖屏视频帧的第二比例尺寸,拼接调整图像尺寸后的各主体图像,得到目标视频图像;其中,第一比例尺寸大于第二比例尺寸,第一比例尺寸与第二比例尺寸的和为竖屏视频帧的整体图像尺寸。
如果当前横屏视频帧中主体图像的数量为2个,且该2个主体图像的视频主体在当前横屏视频帧中位于不同的景别,则本发明实施例可从该2个主体图像中区分出视频主体位于远处景别的第一主体图像,以及视频主体位于近处景别的第二主体图像;按照远处景别的主体图像调整后的图像尺寸,大于近处景别的主体图像调整后的图像尺寸的原则,对第一主体图像和第二主体图像调整图像尺寸,在本发明实施例中,本发明实施例可预设竖屏视频帧的第一比例尺寸和第二比例尺寸,第一比例尺寸大于第二比例尺寸,且第一比例尺寸与第二比例尺寸的和为竖屏视频帧的整体图像尺寸,从而将远处景别的第一主体图像的图像尺寸调整为第一比例尺寸,将近处景别的第二主体图像的图像尺寸调整为第二比例尺寸;在一种示例中,第一比例尺寸例如竖屏视频帧的整体图像尺寸的2/3,第二比例尺寸例如竖屏视频帧的整体图像尺寸的1/3;
基于调整图像尺寸后的各主体图像,本发明实施例可进行图像拼接,从而得到目标视频图像,图像拼接方式可以例如上下拼接。
步骤S530、若主体图像的数量大于2,则将各主体图像的图像尺寸分别调整为竖屏视频帧的第三比例尺寸,拼接调整图像尺寸后的各主体图像,得到目标视频图像;其中,第三比例尺寸与视频主体的数量的积为竖屏视频帧的整体图像尺寸。
如果当前横屏视频帧中主体图像的数量大于2个,则本发明实施例可不考虑景别,按照各主体图像调整后的图像尺寸相同的方式,对各主体图像调整图像尺寸;本发明实施例可根据当前视频帧中主体图像的数量,确定竖屏视频帧的第三比例尺寸,第三比例尺寸与主体图像的数量的积为竖屏视频帧的整体图像尺寸,示例的,如果主体图像的数量为3个,则第三比例尺寸可以为竖屏视频帧的整体图像尺寸的1/3;从而,本发明实施例可各主体图像的图像尺寸分别调整为竖屏视频帧的第三比例尺寸,进而拼接调整图像尺寸后的各主体图像,得到目标视频图像;图像拼接方式例如上下拼接,本发明实施例并不设限。
示例的,以主体图像的数量为2个,3个举例,下表1示例了主体图像不同的图像尺寸调整方式,可进行参照;
Figure BDA0002421147950000181
表1
需要说明的是,在一种可选实现中,横屏视频帧的图像横竖比例可以为16:9,竖屏视频帧的图像横竖比例可以为9:16。
借鉴图11所示流程原理,在图5所示步骤S120的一种可选实现中,视频服务器对横屏视频帧中多个主体图像调整图像尺寸的方式也可参照图11所示流程同理实现。
在步骤S440的可选实现中,如果当前横屏视频帧存在一个主体图像,则本发明实施例可直接对该主体图像进行图像尺寸调整,使得调整图像尺寸后的主体图像与竖屏视频帧的图像尺寸相对应,从而调整图像尺寸后的主体图像可直接作为当前竖屏视频帧。
在可选实现中,当终端由横屏状态切换为竖屏状态时,终端开始播放竖屏视频帧,基于对横屏视频中主体对象的图像尺寸调整,终端切换播放的显示效果可以是聚焦横屏视频帧中的主体图像,随着主体对象的图像尺寸调整,主体图像的尺寸逐级变大,该效果类似镜头推近的显示效果;当终端由竖屏状态切换为横屏状态时,终端开始播放横屏视频帧,由于是从调整图像尺寸的主体图像切换至整个横屏视频帧进行播放,终端切换播放的显示效果可以是,主体图像的尺寸逐级变小至横屏视频帧中的原来大小,并在这个过程中视频画面逐步扩充至横屏视频帧的整个画面,该效果类似镜头推远的效果。
可以看出,在视频流具体为横屏视频流,并且通过第二坐标数据记录横屏视频帧中主体图像的坐标区域的情况下,终端在检测到竖屏播放指令时,基于第二坐标数据记录的横屏视频帧中主体图像的坐标区域,确定横屏视频帧中的主体图像,并由主体图像拼接形成目标视频图像,进而基于目标视频图像,播放竖屏视频,使得终端在播放竖屏视频时聚焦横屏视频帧中的主体图像;而在终端检测到横屏播放指令时,终端可直接播放横屏视频帧。本发明实施例可使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。
基于情况二、以视频图像为局部视频图像,且局部视频图像为主体图像为例,在另一种可选实现中,本发明实施例也可在终端侧进行横屏视频帧中主体图像的识别,由识别的主体图像形成竖屏视频帧;在此种情况下,终端可直接获取横屏视频流进行播放,可选的,图12示出了本发明实施例提供的视频播放方法的又一可选流程,该流程可由终端执行,参照图12,该流程可以包括:
步骤S600、获取目标视频流,所述目标视频流为横屏视频流。
步骤S610、在检测到所述目标视频流的竖屏播放指令时,识别当前横屏视频帧中的视频主体,确定所述当前横屏视频帧中所识别的视频主体对应的主体图像。
步骤S620、若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成目标视频图像。
步骤S630、若主体图像的数量为一个,对所述主体图像调整图像尺寸,调整图像尺寸后的主体图像形成目标视频图像。
步骤S640、基于所述目标视频图像,播放竖屏视频。
进一步的,如果终端检测到所述目标视频流的横屏播放指令,则终端可播放横屏视频帧。
图12所示流程中各步骤的可选具体实现可参照前文相应部分的描述,此处不再赘述。
可以看出,在终端直接获取横屏视频流的情况下,终端可在检测到竖屏播放指令时,识别横屏视频帧中的主体图像,并由主体图像形成目标视频图像,从而基于目标视频图像,播放竖屏视频,使得终端在播放竖屏视频时聚焦横屏视频帧中的主体图像。本发明实施例可使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。
本发明实施例提供的视频播放方法可在多种场景下进行应用,例如在视频会议,直播,购物视频,综艺视频等场景下应用;在一种应用示例中,本发明实施例还提供一种视频会议方法,在可选实现中,如图13所示,该视频会议方法可以包括:
步骤S20、在第一终端与第二终端建立视频会议连接后,第一终端获取第二终端采集的实时视频流,所述实时视频流包括横屏视频帧。
参与视频会议的各终端可通过各自摄像头采集实时视频流数据,并通过视频会议服务器转发给参与视频会议的其他终端。具体实现中,在具有第一终端与第二终端参与的视频会议中,当第一终端与第二终端建立视频会议连接后,第一终端可获取到由视频会议服务器转发的第二终端采集的实时视频流。所述实时视频流可以包括第二终端采集的横屏视频帧。
步骤S21、第一终端在检测到所述实时视频流的竖屏播放指令时,从当前横屏视频帧中确定多个视频图像,基于所述多个视频图像拼接得到目标视频图像。
步骤S22、第一终端基于所述目标视频图像,播放所述实时视频流的竖屏视频。
步骤S21和步骤S22可选实现可参照前文相应部分的描述,此处不再赘述。
结合图14所示,在用户D1和D2参与的视频会议中,用户D1的终端可获取到用户D2的终端采集的实时视频流,在用户D1的终端水平放置的情况下,用户D1的终端可播放实时视频流的横屏视频帧,当用户D1的终端竖直放置的情况下,用户D1的终端可识别横屏视频帧中的两个主体对象,从而基于拼接的两个主体图像,播放视频流的竖屏视频。
在另一种应用场景中,本发明实施例提供的视频播放方法可在直播场景下适用,具体直播流程可以是:终端获取直播视频流,所述直播视频流包括多个视频帧,所述视频帧至少包括横屏视频帧;终端在检测到所述直播视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于所述当前横屏视频帧中的多个视频图像拼接得到;终端基于所述目标视频图像,播放所述直播视频流的竖屏视频。该直播流程中涉及的具体技术实现可与前文相应部分相互参照。
本发明实施例提供的视频播放方法中,由于竖屏播放的目标视频图像是基于当前横屏视频帧中的多个视频图像拼接得到,因此终端检测到竖屏播放指令时能聚焦播放横屏视频帧中的该多个视频图像,从而使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。
在进一步的实现中,由于通过本发明实施例提供的视频播放方案,可使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,因此在此基础上,本发明实施例可在横屏视频相比于竖屏视频,或者竖屏视频相比于横屏视频具有希望用户关注到的不同侧重内容时,通过提示信息,进行全屏播放方式的切换。在一种示例中,图15示出了提示切换全屏播放方式的流程,参照图15,该流程可以包括:
步骤S700、检测视频时间点。
步骤S710、若视频时间点与预先配置的提示时间点相匹配,显示提示信息,所述提示信息用于提示调整终端的空间状态,以调整所述目标视频流的全屏播放方式。
在图15所示流程的可选实现中,终端在播放目标视频流的竖屏视频时,可检测视频时间点,如果视频时间点与预先配置的提示时间点相匹配,则本发明实施例可在视频播放页面显示提示信息,以通过提示信息提示用户将终端置于横屏状态,使得终端切换全屏播放方式为横屏播放方式,从而播放目标视频流的横屏视频;
可选的,本发明实施例对于提示信息的具体形式并不设限;作为一种示例,提示信息可以是角标图片,角标图片可以展示终端由竖直状态调整为水平状态的图像,来提示用户将终端置于横屏状态;当终端置于横屏状态后,终端可播放横屏视频,从而使得用户在已观看竖屏视频的基础上,进一步通过横屏视频观看到更为整体的视频内容。
在图15所示流程的另一种可选实现中,终端在播放目标视频流的横屏视频时,可检测视频时间点,如果视频时间点与预先配置的提示时间点相匹配,则本发明实施例可在视频播放页面显示提示信息,以通过提示信息提示用户将终端置于竖屏状态,使得终端切换全屏播放方式为竖屏播放方式,使得终端可播放目标视频流的竖屏视频。
本发明实施例通过提示信息,提示用户调整终端播放目标视频流的全屏播放方式,可以在横屏视频相比于竖屏视频,或者竖屏视频相比于横屏视频具有希望用户关注到的不同侧重内容时,通过提示信息,提示用户切换全屏播放方式,从而使得用户进一步了解视频剧情,并提升用户互动性。
在可选实现中,本发明实施例也可通过用户的互动来实现调整全屏播放方式,例如用户可通过语音互动、人脸互动,操作终端旋转、摇动等方式进行互动,以实现终端播放目标视频流的全屏播放方式的调整。在可选实现中,本发明实施例可检测用户互动信息,如果用户互动信息与调整终端的全屏播放方式的预设互动信息相匹配,则本发明实施例可调整所述目标视频流的全屏播放方式。示例的,终端在播放目标视频流的横屏视频时,用户可通过互动,调整终端以竖屏播放方式,播放目标视频流的竖屏视频,又如,终端在播放目标视频流的竖屏视频时,用户可通过互动,调整终端以横屏播放方式,播放目标视频流的横屏视频。
本发明实施例提供的视频播放方法可使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果;同时,基于用户互动,或者通过提示用户,本发明实施例可实现调整终端播放视频时的全屏播放方式,实现全屏播放方式的切换与用户互动的结合。
下面对本发明实施例提供的视频播放装置进行介绍,下文描述的视频播放装置可以认为是,终端为实现本发明实施例提供的视频播放方法所需设置的功能模块。下文描述的视频播放装置的内容可与上文描述的视频播放方法的内容相互对应参照。
在可选实现中,图16示出了本发明实施例提供的视频播放装置的可选框图,参照图16,该装置可以包括:
获取模块100,用于获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧;
目标视频图像确定模块110,用于在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于所述当前横屏视频帧中的多个视频图像拼接得到;
播放模块120,用于基于所述目标视频图像,播放竖屏视频。
可选的,所述目标视频帧还包括:竖屏视频帧,所述竖屏视频帧基于所述横屏视频帧中的多个视频图像拼接得到。
可选的,获取模块100在获取目标视频流之时,还可用于:获取所述目标视频流对应的第一坐标数据,所述第一坐标数据至少记录各目标视频帧中竖屏视频帧的坐标区域。
可选的,目标视频图像确定模块110,用于确定当前用于竖屏播放的目标视频图像包括:
根据所述第一坐标数据,确定当前目标视频帧中竖屏视频帧的坐标区域,根据所确定的坐标区域,从当前目标视频帧中确定当前竖屏视频帧。
可选的,另一方面,所述目标视频流具体为横屏视频流,所述目标视频帧具体为横屏视频帧;获取模块100在获取目标视频流之时,还可用于:获取所述目标视频流对应的第二坐标数据,所述第二坐标数据至少记录各横屏视频帧中多个视频图像的坐标区域。
可选的,目标视频图像确定模块110,用于确定当前用于竖屏播放的目标视频图像包括:
根据所述第二坐标数据,确定当前横屏视频帧中多个视频图像的坐标区域;
根据所确定的坐标区域,从当前横屏视频帧中确定多个视频图像;
对所述多个视频图像调整图像尺寸,将调整图像尺寸后的多个视频图像相拼接,形成所述目标视频图像。
可选的,再一方面,所述目标视频流具体为横屏视频流,所述目标视频帧具体为横屏视频帧;目标视频图像确定模块110,用于确定当前用于竖屏播放的目标视频图像包括:
识别当前横屏视频帧中的视频主体,确定所述当前横屏视频帧中所识别的视频主体对应的主体图像;
若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像。
在上述实现中,可选的,目标视频图像确定模块110,用于若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像,包括:
若主体图像的数量为2个,且2个主体图像的视频主体位于相同的景别,则将2个主体图像的图像尺寸分别调整为竖屏视频帧的一半尺寸,拼接调整图像尺寸后的2个主体图像,得到所述目标视频图像。
可选的,目标视频图像确定模块110,用于若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像,包括:
若主体图像的数量为2个,且2个主体图像包括视频主体位于远处景别的第一主体图像,和视频主体位于近处景别的第二主体图像,则将第一主体图像的图像尺寸调整为竖屏视频帧的第一比例尺寸,将第二主体图像的图像尺寸调整为竖屏视频帧的第二比例尺寸,拼接调整图像尺寸后的各主体图像,得到所述目标视频图像;其中,第一比例尺寸大于第二比例尺寸,第一比例尺寸与第二比例尺寸的和为竖屏视频帧的整体图像尺寸。
可选的,目标视频图像确定模块110,用于若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像,包括:
若主体图像的数量大于2,则将各主体图像的图像尺寸分别调整为竖屏视频帧的第三比例尺寸,拼接调整图像尺寸后的各主体图像,得到所述目标视频图像;其中,第三比例尺寸与主体图像的数量的积为竖屏视频帧的整体图像尺寸。
可选的,所述多个视频图像至少包括所述当前横屏视频帧中的主体图像。
可选的,图17示出了本发明实施例提供的视频播放装置的另一可选框图,结合图16和图17所示,该装置还可以包括:
提示模块130,用于检测视频时间点;若视频时间点与预先配置的提示时间点相匹配,显示提示信息,所述提示信息用于提示调整终端的空间状态,以调整所述目标视频流的全屏播放方式。
可选的,图18示出了本发明实施例提供的视频播放装置的再一可选框图,结合图16和图18所示,该装置还可以包括:
互动切换模块140,用于检测用户互动信息;如果用户互动信息与调整全屏播放方式的预设互动信息相匹配,调整所述目标视频流的全屏播放方式。
本发明实施例提供的视频播放装置可使得终端播放横屏视频和竖屏视频时具有不同的播放侧重点,实现了横屏视频和竖屏视频具有差异的观影效果。
本发明实施例还提供一种终端,该终端可以装载程序形式的上述视频播放装置,以实现本发明实施例提供的视频播放方法。在可选实现中,图19示出了本发明实施例提供的终端的可选框图,如图19所示,该终端可以包括:至少一个处理器1,至少一个通信接口2,至少一个存储器3和至少一个通信总线4;
在本发明实施例中,处理器1、通信接口2、存储器3、通信总线4的数量为至少一个,且处理器1、通信接口2、存储器3通过通信总线4完成相互间的通信;
可选的,通信接口2可以为用于进行网络通信的通信模块的接口;
可选的,处理器1可能是CPU(中央处理器),GPU(Graphics Processing Unit,图形处理器),NPU(嵌入式神经网络处理器),FPGA(Field Programmable Gate Array,现场可编程逻辑门阵列),TPU(张量处理单元),AI芯片,特定集成电路ASIC(Application SpecificIntegrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路等。
存储器3可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。
其中,存储器3存储一条或多条计算机可执行指令,处理器1调用所述一条或多条计算机可执行指令,以执行如本发明实施例提供的视频播放方法,或者执行如本发明实施例提供的视频会议方法,或者执行如本发明实施例提供的直播方法。
本发明实施例还提供一种存储介质,该存储介质可以存储一条或多条计算机可执行指令,该一条或多条计算机可执行指令用于执行本发明实施例提供的视频播放方法,或者用于执行本发明实施例提供的视频会议方法,或者用于执行本发明实施例提供的直播方法。
上文描述了本发明实施例提供的多个实施例方案,各实施例方案介绍的各可选方式可在不冲突的情况下相互结合、交叉引用,从而延伸出多种可能的实施例方案,这些均可认为是本发明实施例披露、公开的实施例方案。
虽然本发明实施例披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (17)

1.一种视频播放方法,包括:
获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧;
在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;
基于所述目标视频图像,播放竖屏视频。
2.根据权利要求1所述的视频播放方法,所述目标视频帧还包括:竖屏视频帧,所述竖屏视频帧基于所述横屏视频帧中的多个视频图像拼接得到。
3.根据权利要求2所述的视频播放方法,在获取所述目标视频流之时,所述方法还包括:
获取所述目标视频流对应的第一坐标数据,所述第一坐标数据至少记录各目标视频帧中竖屏视频帧的坐标区域;
所述确定当前用于竖屏播放的目标视频图像包括:
根据所述第一坐标数据,确定当前目标视频帧中竖屏视频帧的坐标区域,根据所确定的坐标区域,从当前目标视频帧中确定当前竖屏视频帧。
4.根据权利要求1所述的视频播放方法,所述目标视频流具体为横屏视频流,所述目标视频帧具体为横屏视频帧;在获取所述目标视频流之时,所述方法还包括:
获取所述目标视频流对应的第二坐标数据,所述第二坐标数据至少记录各横屏视频帧中多个视频图像的坐标区域。
5.根据权利要求4所述的视频播放方法,所述确定当前用于竖屏播放的目标视频图像包括:
根据所述第二坐标数据,确定当前横屏视频帧中多个视频图像的坐标区域;
根据所确定的坐标区域,从当前横屏视频帧中确定多个视频图像;
对所述多个视频图像调整图像尺寸,将调整图像尺寸后的多个视频图像相拼接,形成所述目标视频图像。
6.根据权利要求1所述的视频播放方法,所述目标视频流具体为横屏视频流,所述目标视频帧具体为横屏视频帧;所述确定当前用于竖屏播放的目标视频图像包括:
识别当前横屏视频帧中的视频主体,确定所述当前横屏视频帧中所识别的视频主体对应的主体图像;
若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像。
7.根据权利要求6所述的视频播放方法,所述若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像包括:
若主体图像的数量为2个,且2个主体图像的视频主体位于相同的景别,则将2个主体图像的图像尺寸分别调整为竖屏视频帧的一半尺寸,拼接调整图像尺寸后的2个主体图像,得到所述目标视频图像。
8.根据权利要求6所述的视频播放方法,所述若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像包括:
若主体图像的数量为2个,且2个主体图像包括视频主体位于远处景别的第一主体图像,和视频主体位于近处景别的第二主体图像,则将第一主体图像的图像尺寸调整为竖屏视频帧的第一比例尺寸,将第二主体图像的图像尺寸调整为竖屏视频帧的第二比例尺寸,拼接调整图像尺寸后的各主体图像,得到所述目标视频图像;其中,第一比例尺寸大于第二比例尺寸,第一比例尺寸与第二比例尺寸的和为竖屏视频帧的整体图像尺寸。
9.根据权利要求6所述的视频播放方法,所述若主体图像的数量为多个,对多个主体图像调整图像尺寸,将调整图像尺寸后的多个主体图像相拼接,形成所述目标视频图像包括:
若主体图像的数量大于2,则将各主体图像的图像尺寸分别调整为竖屏视频帧的第三比例尺寸,拼接调整图像尺寸后的各主体图像,得到所述目标视频图像;其中,第三比例尺寸与主体图像的数量的积为竖屏视频帧的整体图像尺寸。
10.根据权利要求1-9任一项所述的视频播放方法,所述多个视频图像至少包括所述当前横屏视频帧中的主体图像。
11.根据权利要求1所述的视频播放方法,还包括:
检测视频时间点;
若视频时间点与预先配置的提示时间点相匹配,显示提示信息,所述提示信息用于提示调整终端的姿态,以调整所述目标视频流的全屏播放方式。
12.根据权利要求1所述的视频播放方法,还包括:
检测用户互动信息;
如果用户互动信息与调整全屏播放方式的预设互动信息相匹配,调整所述目标视频流的全屏播放方式。
13.一种视频播放装置,包括:
获取模块,用于获取目标视频流,所述目标视频流包括多个目标视频帧,所述目标视频帧至少包括横屏视频帧;
目标视频图像确定模块,用于在检测到所述目标视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;
播放模块,用于基于所述目标视频图像,播放竖屏视频。
14.一种视频会议方法,应用于第一终端,包括:
在所述第一终端与第二终端建立视频会议连接后,获取所述第二终端采集的实时视频流,所述实时视频流包括横屏视频帧;
在检测到所述实时视频流的竖屏播放指令时,从当前横屏视频帧中确定多个视频图像,基于所述多个视频图像拼接得到目标视频图像;
基于所述目标视频图像,播放所述实时视频流的竖屏视频。
15.一种直播方法,包括:
获取直播视频流,所述直播视频流包括多个视频帧,所述视频帧至少包括横屏视频帧;
在检测到所述直播视频流的竖屏播放指令时,确定当前用于竖屏播放的目标视频图像,其中,所述目标视频图像基于当前横屏视频帧中的多个视频图像拼接得到;
基于所述目标视频图像,播放所述直播视频流的竖屏视频。
16.一种终端,包括:至少一个存储器和至少一个处理器;所述存储器存储一条或多条计算机可执行指令,所述处理器调用所述一条或多条计算机可执行指令,以执行如权利要求1-12任一项所述的视频播放方法,或者执行如权利要求14所述的视频会议方法,或者执行如权利要求15所述的直播方法。
17.一种存储介质,所述存储介质存储一条或多条计算机可执行指令,所述一条或多条计算机可执行指令用于执行如权利要求1-12任一项所述的视频播放方法,或者用于执行如权利要求14所述的视频会议方法,或者用于执行如权利要求15所述的直播方法。
CN202010206041.1A 2020-03-23 2020-03-23 一种视频播放方法、视频会议方法、直播方法及相关设备 Active CN113438436B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010206041.1A CN113438436B (zh) 2020-03-23 2020-03-23 一种视频播放方法、视频会议方法、直播方法及相关设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010206041.1A CN113438436B (zh) 2020-03-23 2020-03-23 一种视频播放方法、视频会议方法、直播方法及相关设备

Publications (2)

Publication Number Publication Date
CN113438436A true CN113438436A (zh) 2021-09-24
CN113438436B CN113438436B (zh) 2023-12-19

Family

ID=77753240

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010206041.1A Active CN113438436B (zh) 2020-03-23 2020-03-23 一种视频播放方法、视频会议方法、直播方法及相关设备

Country Status (1)

Country Link
CN (1) CN113438436B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114286136A (zh) * 2021-12-28 2022-04-05 咪咕文化科技有限公司 视频播放编码方法、装置、设备及计算机可读存储介质
CN114500851A (zh) * 2022-02-23 2022-05-13 广州博冠信息科技有限公司 视频录制方法及装置、存储介质、电子设备
WO2024114569A1 (zh) * 2022-11-30 2024-06-06 华为技术有限公司 一种视频处理的方法以及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018054375A1 (zh) * 2016-09-26 2018-03-29 腾讯科技(深圳)有限公司 直播信息的处理方法、装置及存储介质
CN110839174A (zh) * 2019-12-02 2020-02-25 广州酷狗计算机科技有限公司 图像处理的方法、装置、计算机设备以及存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018054375A1 (zh) * 2016-09-26 2018-03-29 腾讯科技(深圳)有限公司 直播信息的处理方法、装置及存储介质
CN110839174A (zh) * 2019-12-02 2020-02-25 广州酷狗计算机科技有限公司 图像处理的方法、装置、计算机设备以及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114286136A (zh) * 2021-12-28 2022-04-05 咪咕文化科技有限公司 视频播放编码方法、装置、设备及计算机可读存储介质
CN114286136B (zh) * 2021-12-28 2024-05-31 咪咕文化科技有限公司 视频播放编码方法、装置、设备及计算机可读存储介质
CN114500851A (zh) * 2022-02-23 2022-05-13 广州博冠信息科技有限公司 视频录制方法及装置、存储介质、电子设备
WO2024114569A1 (zh) * 2022-11-30 2024-06-06 华为技术有限公司 一种视频处理的方法以及电子设备

Also Published As

Publication number Publication date
CN113438436B (zh) 2023-12-19

Similar Documents

Publication Publication Date Title
CN113438436B (zh) 一种视频播放方法、视频会议方法、直播方法及相关设备
CN111277779B (zh) 一种视频处理方法及相关装置
US8866943B2 (en) Video camera providing a composite video sequence
US8064656B2 (en) Image processing apparatus, imaging apparatus, image processing method, and computer program
US6466262B1 (en) Digital wide camera
EP2525321B1 (en) Display image generating method
US20130235223A1 (en) Composite video sequence with inserted facial region
US20150222815A1 (en) Aligning videos representing different viewpoints
CN111970532B (zh) 视频播放方法、装置及设备
CN113064684B (zh) 一种虚拟现实设备及vr场景截屏方法
US7586491B2 (en) Image display method and image display apparatus
US8467509B2 (en) Video displaying apparatus, video displaying system and video displaying method
CN112437317B (zh) 一种直播画面切换方法、装置以及系统
CN111147911A (zh) 视频裁剪方法、装置、电子设备和存储介质
CN113438550B (zh) 一种视频播放方法、视频会议方法、直播方法及相关装置
CN110740261A (zh) 视频录制方法、装置、终端及存储介质
CN110996157A (zh) 一种视频播放方法、装置、电子设备及机器可读存储介质
JP2009177431A (ja) 動画像再生システム、サーバ装置、端末装置及び動画像生成方法等
CN113453022A (zh) 一种图像显示方法、装置、电视机及存储介质
JP2006086717A (ja) 画像表示システム、画像再生装置及びレイアウト制御装置
JP2009230635A (ja) 画像データ生成装置、画像データ生成方法、および画像データ生成用プログラム
CN112954380B (zh) 视频播放处理方法及装置
US20210377454A1 (en) Capturing method and device
CN112911362A (zh) 视频画面移动缩放方法、装置、电子设备及可读存储介质
WO2024004052A1 (ja) 動画に提供情報を重畳する動画配信

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant