CN108810600B - 一种视频场景的切换方法、客户端及服务器 - Google Patents

一种视频场景的切换方法、客户端及服务器 Download PDF

Info

Publication number
CN108810600B
CN108810600B CN201710296807.8A CN201710296807A CN108810600B CN 108810600 B CN108810600 B CN 108810600B CN 201710296807 A CN201710296807 A CN 201710296807A CN 108810600 B CN108810600 B CN 108810600B
Authority
CN
China
Prior art keywords
mpd
interest
target
client
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710296807.8A
Other languages
English (en)
Other versions
CN108810600A (zh
Inventor
顾迎节
石腾
高莹
张尧烨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201710296807.8A priority Critical patent/CN108810600B/zh
Publication of CN108810600A publication Critical patent/CN108810600A/zh
Application granted granted Critical
Publication of CN108810600B publication Critical patent/CN108810600B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/55Push-based network services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Abstract

本发明实施例公开了一种视频场景的切换方法、客户端及服务器,涉及通信领域,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。具体方案为:客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,根据用户当前观看视角和至少两个感兴趣区域的描述信息从至少两个感兴趣区域中确定目标感兴趣区域,并根据目标感兴趣区域的场景推荐信息下载目标视频分片,客户端将播放的内容由当前播放的视频分片切换到目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。本发明实施例用于视频场景的切换过程中。

Description

一种视频场景的切换方法、客户端及服务器
技术领域
本发明实施例涉及通信领域,尤其涉及一种视频场景的切换方法、客户端及服务器。
背景技术
随着互联网技术的飞速发展,用户通过手机、个人电脑(Personal Computer,PC)、电视机等观看直播或点播的视频节目已经越来越普及。通常情况下,由一个摄像机可以对多个用户感兴趣的目标进行拍摄,但是当这些目标处于运动状态,且相互远离至一定程度时,由于一个摄像机无法同时与这多个目标都保持足够近的距离,因此,原来的一个摄像机无法同时有效的拍摄这多个目标。此时,可以通过采用多个摄像机对这多个目标分别进行跟踪拍摄,以便为用户提供更好的观看体验。
例如,如图1所示,当目标A,目标B,目标C这三个目标(图中以目标均为车辆为例示出)在一起时,摄像机C1可以对这三个目标进行拍摄。如图2所示,当这三个目标均处于运动状态,且目标A、目标B,目标C相互远离至一定程度时,由摄像机C1,摄像机C2,摄像机C3分别跟踪拍摄这三个目标。假设用户关注的是目标B,当这三个目标在一起时,是通过摄像机C1对目标B进行拍摄的。但当这三个目标相互远离至一定程度时,如图2所示,摄像机C1只负责跟踪拍摄目标A,目标B在摄像机C1拍摄到的视频内容中非常渺小甚至即将消失。此时,用户若仍观看摄像机C1拍摄到的视频内容,则将无法更好的观看自己关注的目标B。而摄像机C2是负责跟踪拍摄目标B的,因此,如何切换到摄像机C2拍摄到的视频内容以供用户观看,成为一个亟待解决的问题。在现有技术中,通常情况下是通过剪辑人员提前对多个摄像机拍摄的视频内容进行剪辑,来实现不同摄像机拍摄的视频内容的切换的。可以看到的是,在现有技术中,用户只能观看剪辑人员剪辑好的视频内容,而无法观看由相应的摄像机拍摄的自身感兴趣的视频内容。
发明内容
本发明实施例提供一种视频场景的切换方法、客户端及服务器,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
为达到上述目的,本发明实施例采用如下技术方案:
本发明实施例的第一方面,提供一种视频场景的切换方法,包括:
客户端首先获取至少两个感兴趣区域的描述信息和场景推荐信息,感兴趣区域的描述信息用于判断感兴趣区域是否为用户当前关注的区域,感兴趣区域的场景推荐信息为跟踪感兴趣区域的广角摄像机拍摄的视频场景的场景信息;然后,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定用户当前关注的区域,即确定目标感兴趣区域,并根据目标感兴趣区域的场景推荐信息下载目标视频分片,目标视频分片为跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的、包含目标感兴趣区域的分片;最后,将播放的内容由当前播放的视频分片切换到目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。
本发明实施例提供的视频场景的切换方法,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
结合第一方面,在一种可能的实现方式中,客户端获取至少两个感兴趣区域的描述信息和场景推荐信息具体的可以包括:客户端向服务器发送第一媒体描述文件(MediaPresentation Description,MPD)请求消息,第一MPD请求消息中携带第一MPD的统一资源定位符(Uniform Resource Locator,URL),此时,客户端可以接收来自服务器的第一MPD响应消息,第一MPD响应消息中携带第一MPD,第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,为了降低初始化过程的时延,在客户端向服务器发送第一MPD请求消息之前,客户端还可以接收服务器发送的另一MPD,该MPD中包含至少两个感兴趣区域未分离至一定程度前,且采用一个广角摄像机进行拍摄得到的视频场景的媒体描述信息,还包括更新时间和第一MPD的URL,这样,当更新时间到达时,客户端可以向服务器发送携带第一MPD的URL的第一MPD请求消息。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,客户端根据目标感兴趣区域的场景推荐信息下载目标视频分片具体的可以包括:根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息,并根据目标感兴趣区域和目标场景信息,从第一MPD中确定目标视频分片的URL,然后根据目标视频分片的URL下载目标视频分片。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,在客户端获取至少两个感兴趣区域的描述信息和场景推荐信息之前,本发明实施例提供的视频场景的切换方法还可以包括:客户端向服务器发送包括当前播放的视频分片的URL的第一分片请求消息;此时,相应的,客户端获取至少两个感兴趣区域的描述信息和场景推荐信息具体的可以包括:客户端接收来自服务器的包括当前播放的视频分片的第一分片响应消息,当前播放的视频分片包括第一事件信息,第一事件信息包括第二MPD,第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,客户端根据目标感兴趣区域的场景推荐信息下载目标视频分片具体的可以包括:客户端根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息,并根据目标感兴趣区域和目标场景信息,从第二MPD中确定目标视频分片的URL,然后根据目标视频分片的URL下载目标视频分片。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,第一事件信息还可以包括:有效时间;此时,相应的,客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域具体的可以包括:客户端在根据有效时间确定需要开始使用第二MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,在客户端获取至少两个感兴趣区域的描述信息和场景推荐信息之前,该视频场景的切换方法还可以包括:客户端向服务器发送携带第三MPD的URL的第二MPD请求消息;此时,客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,具体的可以包括:客户端接收来自服务器的第二MPD响应消息,第二MPD响应消息中携带第三MPD,第三MPD中包括:至少两个感兴趣区域的描述信息和场景推荐信息。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还可以包括:更新时间;此时,相应的,客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域具体的可以包括:客户端在根据更新时间确定需要更新第三MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还可以包括:至少两个第四MPD的URL以及与至少两个第四MPD的URL一一对应的场景信息;此时,相应的,客户端根据目标感兴趣区域的场景推荐信息下载目标视频分片具体的可以包括:客户端根据目标感兴趣区域的场景推荐信息和与至少两个第四MPD的URL一一对应的场景信息,从至少两个第四MPD的URL中确定目标MPD的URL,并向服务器发送携带目标MPD的URL的第三MPD请求消息,此时客户端接收来自服务器的携带目标MPD的第三MPD响应消息,目标MPD中包括目标视频分片的URL,并根据目标视频分片的URL下载目标视频分片。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,在客户端获取至少两个感兴趣区域的描述信息和场景推荐信息之前,该视频场景的切换方法还可以包括:客户端向服务器发送包括当前播放的视频分片的URL的第二分片请求消息;此时,相应的,客户端获取至少两个感兴趣区域的描述信息和场景推荐信息具体的可以包括:客户端接收来自服务器的包括当前播放的视频分片的第二分片响应消息,当前播放的视频分片包括第二事件信息,第二事件信息包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还可以包括:至少两个第四MPD,以及与至少两个第四MPD一一对应的场景信息;此时,相应的,客户端根据目标感兴趣区域的场景推荐信息下载目标视频分片具体的可以包括:客户端根据目标感兴趣区域的场景推荐信息和与至少两个第四MPD一一对应的场景信息,从至少两个第四MPD中确定目标MPD,目标MPD中包括目标视频分片的URL,并根据目标视频分片的URL下载目标视频分片。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还可以包括:至少两个第四MPD的URL,以及与至少两个第四MPD的URL一一对应的场景信息;此时,相应的,客户端根据目标感兴趣区域的场景推荐信息下载目标视频分片具体的可以包括:客户端根据目标感兴趣区域的场景推荐信息和与至少两个第四MPD的URL一一对应的场景信息,从至少两个第四MPD的URL中确定目标MPD的URL,并向服务器发送携带目标MPD的URL的第三MPD请求消息,然后接收来自服务器的携带目标MPD的第三MPD响应消息,目标MPD中包括目标视频分片的URL,这样,客户端便可以根据目标视频分片的URL下载目标视频分片。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还可以包括:有效时间;此时,相应的,客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域具体的可以包括:客户端在根据有效时间确定需要开始使用第四MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,场景信息包括视频场景的标识或拍摄视频场景的广角摄像机的标识。
结合第一方面和上述可能的实现方式,在另一种可能的实现方式中,感兴趣区域的描述信息可以包括感兴趣区域的标识、感兴趣区域的位置、感兴趣区域的尺寸、感兴趣区域的出现时间;此时,相应的,客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域具体的可以包括:客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为目标感兴趣区域。
本发明实施例的第二方面,提供一种视频场景的切换方法,包括:
服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息;其中,感兴趣区域的描述信息用于判断感兴趣区域是否为用户当前关注的区域,感兴趣区域的场景推荐信息为跟踪感兴趣区域的广角摄像机拍摄的视频场景的场景信息;至少两个感兴趣区域的描述信息和场景推荐信息用于客户端下载目标视频分片,目标视频分片与客户端当前播放的视频分片由不同的广角摄像机拍摄得到。
本发明实施例提供的视频场景的切换方法,服务器通过向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息,以便于客户端能够通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
结合第二方面,在一种可能的实现方式中,在服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,该视频场景的切换方法还可以包括:服务器接收来自客户端的携带第一MPD的URL的第一MPD请求消息,并向客户端发送携带第一MPD的第一MPD响应消息,该第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,在服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,该视频场景的切换方法还可以包括:服务器接收客户端发送的包括当前播放的视频分片的URL的第一分片请求消息;此时,服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息具体的可以包括:服务器向客户端发送包括当前播放的视频分片的第一分片响应消息,该当前播放的视频分片包括第一事件信息,该第一事件信息包括第二MPD,第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,第一事件信息还可以包括:有效时间;有效时间用于客户端确定需要开始使用第二MPD的时间。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,在服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,该视频场景的切换方法还可以包括:服务器接收客户端发送的携带第三MPD的URL的第二MPD请求消息;此时,服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息具体的可以包括:服务器向客户端发送携带第三MPD的第二MPD响应消息,该第三MPD中包括:至少两个感兴趣区域的描述信息和场景推荐信息。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还可以包括:更新时间;更新时间用于客户端确定需要更新第三MPD。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还可以包括:至少两个第四MPD的URL以及与至少两个第四MPD的URL一一对应的场景信息,用于客户端从至少两个第四MPD的URL中确定目标MPD的URL;此时,在服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之后,该视频场景的切换方法还可以包括:服务器接收客户端发送的携带目标MPD的URL的第三MPD请求消息,服务器向客户端发送携带目标MPD的第三MPD响应消息,该目标MPD中包括目标视频分片的URL。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,在服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,该视频场景的切换方法还可以包括:服务器接收客户端发送的包括当前播放的视频分片的URL的第二分片请求消息;此时,服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息具体的可以包括:服务器向客户端发送包括当前播放的视频分片的第二分片响应消息,该当前播放的视频分片包括第二事件信息,第二事件信息包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还可以包括:至少两个第四MPD,以及与至少两个第四MPD一一对应的场景信息,用于客户端从至少两个第四MPD中确定目标MPD,目标MPD中包括目标视频分片的URL。
结合第二方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还可以包括:至少两个第四MPD的URL,以及与至少两个第四MPD的URL一一对应的场景信息,用于客户端从至少两个第四MPD的URL中确定目标MPD的URL;此时,在服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之后,该视频场景的切换方法还可以包括:服务器接收客户端发送的携带目标MPD的URL的第三MPD请求消息,服务器向客户端发送携带目标MPD的第三MPD响应消息,目标MPD中包括目标视频分片的URL。
本发明实施例的第三方面,提供一种客户端,包括:获取单元、确定单元、下载单元和切换单元;获取单元,用于获取至少两个感兴趣区域的描述信息和场景推荐信息,感兴趣区域的描述信息用于判断感兴趣区域是否为用户当前关注的区域,感兴趣区域的场景推荐信息为跟踪感兴趣区域的广角摄像机拍摄的视频场景的场景信息;确定单元,用于根据用户当前观看视角和获取单元获取到的至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域,目标感兴趣区域为用户当前关注的区域;下载单元,用于根据确定单元确定出的目标感兴趣区域的场景推荐信息下载目标视频分片,目标视频分片为跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的、包含目标感兴趣区域的分片;切换单元,用于将播放的内容,由当前播放的视频分片切换到下载单元下载到的目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。
结合第三方面,在一种可能的实现方式中,获取单元,具体用于:向服务器发送第一媒体描述文件MPD请求消息,第一MPD请求消息中携带第一MPD的统一资源定位符URL;接收来自服务器的第一MPD响应消息,第一MPD响应消息中携带第一MPD,第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,下载单元,具体用于:根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息;根据目标感兴趣区域和目标场景信息,从第一MPD中确定目标视频分片的URL;根据目标视频分片的URL下载目标视频分片。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,还包括:发送单元;发送单元,用于向服务器发送第一分片请求消息,第一分片请求消息中包括当前播放的视频分片的URL;获取单元,具体用于接收来自服务器的第一分片响应消息,第一分片响应消息中包括:当前播放的视频分片,当前播放的视频分片包括第一事件信息,第一事件信息包括第二MPD,第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,下载单元,具体用于:根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息;根据目标感兴趣区域和目标场景信息,从第二MPD中确定目标视频分片的URL;根据目标视频分片的URL下载目标视频分片。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,第一事件信息还包括:有效时间;确定单元,具体用于在根据有效时间确定需要开始使用第二MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,还包括:发送单元;发送单元,用于向服务器发送第二MPD请求消息,第二MPD请求消息中携带第三MPD的URL;获取单元,具体用于接收来自服务器的第二MPD响应消息,第二MPD响应消息中携带第三MPD,第三MPD中包括:至少两个感兴趣区域的描述信息和场景推荐信息。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还包括:更新时间;确定单元,具体用于在根据更新时间确定需要更新所述第三MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还包括:至少两个第四MPD的URL以及与至少两个第四MPD的URL一一对应的场景信息;下载单元,具体用于:根据目标感兴趣区域的场景推荐信息和与至少两个第四MPD的URL一一对应的场景信息,从至少两个第四MPD的URL中确定目标MPD的URL;向服务器发送第三MPD请求消息,第三MPD请求消息中携带目标MPD的URL;接收来自服务器的第三MPD响应消息,第三MPD响应消息中携带目标MPD,目标MPD中包括目标视频分片的URL;客户端根据目标视频分片的URL下载目标视频分片。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,还包括:发送单元;发送单元,用于向服务器发送第二分片请求消息,第二分片请求消息中包括当前播放的视频分片的URL;获取单元,具体用于接收来自服务器的第二分片响应消息,第二分片响应消息中包括:当前播放的视频分片,当前播放的视频分片包括第二事件信息,第二事件信息包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还包括:至少两个第四MPD,以及与至少两个第四MPD一一对应的场景信息;下载单元,具体用于:根据目标感兴趣区域的场景推荐信息和与至少两个第四MPD一一对应的场景信息,从至少两个第四MPD中确定目标MPD,目标MPD中包括目标视频分片的URL;根据目标视频分片的URL下载目标视频分片。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还包括:至少两个第四MPD的URL,以及与至少两个第四MPD的URL一一对应的场景信息;下载单元,具体用于:根据目标感兴趣区域的场景推荐信息和与至少两个第四MPD的URL一一对应的场景信息,从至少两个第四MPD的URL中确定目标MPD的URL;向服务器发送第三MPD请求消息,第三MPD请求消息中携带目标MPD的URL;接收来自服务器的第三MPD响应消息,第三MPD响应消息中携带目标MPD,目标MPD中包括目标视频分片的URL;根据目标视频分片的URL下载目标视频分片。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还包括:有效时间;确定单元,具体用于在根据有效时间确定需要开始使用第四MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,场景信息包括视频场景的标识或拍摄视频场景的广角摄像机的标识。
结合第三方面和上述可能的实现方式,在另一种可能的实现方式中,感兴趣区域的描述信息包括感兴趣区域的标识、感兴趣区域的位置、感兴趣区域的尺寸、感兴趣区域的出现时间;确定单元,具体用于根据用户当前观看视角和至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为目标感兴趣区域。
本发明实施例的第四方面,提供一种服务器,包括:发送单元;发送单元,用于向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息;其中,感兴趣区域的描述信息用于判断感兴趣区域是否为用户当前关注的区域,感兴趣区域的场景推荐信息为跟踪感兴趣区域的广角摄像机拍摄的视频场景的场景信息;至少两个感兴趣区域的描述信息和场景推荐信息用于客户端下载目标视频分片,目标视频分片与客户端当前播放的视频分片由不同的广角摄像机拍摄得到。
结合第四方面,在一种可能的实现方式中,还包括:接收单元;接收单元,用于接收来自客户端的第一媒体描述文件MPD请求消息,第一MPD请求消息中携带第一MPD的统一资源定位符URL;发送单元,还用于向客户端发送第一MPD响应消息,第一MPD响应消息中携带第一MPD,第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,还包括:接收单元;接收单元,用于接收客户端发送的第一分片请求消息,第一分片请求消息中包括当前播放的视频分片的URL;发送单元,具体用于向客户端发送第一分片响应消息,第一分片响应消息中包括:当前播放的视频分片,当前播放的视频分片包括第一事件信息,第一事件信息包括第二MPD,第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,第一事件信息还包括:有效时间;有效时间用于客户端确定需要开始使用第二MPD的时间。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,还包括:接收单元;接收单元,用于接收客户端发送的第二MPD请求消息,第二MPD请求消息中携带第三MPD的URL;发送单元,具体用于向客户端发送第二MPD响应消息,第二MPD响应消息中携带第三MPD,第三MPD中包括:至少两个感兴趣区域的描述信息和场景推荐信息。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还包括:更新时间;更新时间用于客户端确定需要更新第三MPD。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,第三MPD中还包括:至少两个第四MPD的URL以及与至少两个第四MPD的URL一一对应的场景信息,用于客户端从至少两个第四MPD的URL中确定目标MPD的URL;接收单元,还用于接收客户端发送的第三MPD请求消息,第三MPD请求消息中携带目标MPD的URL;发送单元,还用于向客户端发送第三MPD响应消息,第四MPD响应消息中携带目标MPD,目标MPD中包括目标视频分片的URL。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,还包括:接收单元;接收单元,用于接收客户端发送的第二分片请求消息,第二分片请求消息中包括当前播放的视频分片的URL;发送单元,具体用于向客户端发送第二分片响应消息,第二分片响应消息中包括:当前播放的视频分片,当前播放的视频分片包括第二事件信息,第二事件信息包括至少两个感兴趣区域的描述信息和场景推荐信息。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还包括:至少两个第四MPD,以及与至少两个第四MPD一一对应的场景信息,用于客户端从至少两个第四MPD中确定目标MPD,目标MPD中包括目标视频分片的URL。
结合第四方面和上述可能的实现方式,在另一种可能的实现方式中,第二事件信息还包括:至少两个第四MPD的URL,以及与至少两个第四MPD的URL一一对应的场景信息,用于客户端从至少两个第四MPD的URL中确定目标MPD的URL;接收单元,还用于接收客户端发送的第三MPD请求消息,第三MPD请求消息中携带目标MPD的URL;发送单元,还用于向客户端发送第三MPD响应消息,第三MPD响应消息中携带目标MPD,目标MPD中包括目标视频分片的URL。
本发明实施例的第五方面,提供一种客户端,该客户端可以包括:至少一个处理器、存储器、通信接口、通信总线;至少一个处理器与存储器、通信接口通过通信总线连接,存储器用于存储计算机软件指令,当客户端运行时,处理器执行存储器存储的计算机软件指令,以使客户端执行第一方面或第一方面的可能的实现方式中任一所述的视频场景的切换方法。
本发明实施例的第六方面,提供一种服务器,该服务器可以包括:至少一个处理器、存储器、通信接口、通信总线;至少一个处理器与存储器、通信接口通过通信总线连接,存储器用于存储计算机软件指令,当服务器运行时,处理器执行存储器存储的计算机软件指令,以使服务器执行第二方面或第二方面的可能的实现方式中任一所述的视频场景的切换方法。
本发明实施例的第七方面,提供一种计算机存储介质,用于存储上述客户端所用的计算机软件指令,该计算机软件指令包含用于执行上述视频场景的切换方法所设计的程序。
本发明实施例的第八方面,提供一种计算机存储介质,用于存储上述服务器所用的计算机软件指令,该计算机软件指令包含用于执行上述视频场景的切换方法所设计的程序。
附图说明
图1为现有技术提供的一种采用摄像机进行拍摄的应用场景示意图;
图2为现有技术提供的另一种采用摄像机进行拍摄的应用场景示意图;
图3为本发明实施例提供的一种全景摄像机的示意图;
图4为本发明实施例提供的一个全景视频展开成二维图像的示意图;
图5为发明实施例提供的某一时刻客户端的显示器上显示效果的示意图;
图6为发明实施例提供的一种应用本发明实施例的系统架构的简化示意图;
图7为本发明实施例提供的一种服务器的组成示意图;
图8为本发明实施例提供的一种客户端的组成示意图;
图9为本发明实施例提供的一种视频场景的切换方法的流程图;
图10为本发明实施例提供的一种DASH技术的视频分片传输流程示意图;
图11为本发明实施例提供的一种MPD的文件结构格式示意图;
图12为本发明实施例提供的另一种视频场景的切换方法的流程图;
图13为本发明实施例提供的另一种视频场景的切换方法的流程图;
图14为本发明实施例提供的另一种视频场景的切换方法的流程图;
图15为本发明实施例提供的另一种视频场景的切换方法的流程图;
图16为本发明实施例提供的另一种客户端的组成示意图;
图17为本发明实施例提供的另一种客户端的组成示意图;
图18为本发明实施例提供的另一种服务器的组成示意图;
图19为本发明实施例提供的另一种服务器的组成示意图。
具体实施方式
随着科学技术的不断发展,视频业务在人们的日常生活中应用越来越广泛。并且,随着技术的进步,出现了大量可以切换视角的视频业务,如全景视频业务或360度视频业务、自由视角视频业务等。通常情况下,在这种可切换视角的视频业务中,服务器提供的视频的视角往往超过用户同一时刻可观看的视角范围。其中,视频的不同视角包含不同的内容,如多个用户感兴趣的目标(或者目标所在的区域)位于不同的视角中。用户可以通过一些操作,对视频的不同视角进行切换,实现观看不同的目标(或者目标所在的区域)的目的。图3为本发明实施例提供的一种全景摄像机的示意图。如图3所示,该全景摄像机包含有多个摄像头,可以同时向四周拍摄视频内容,其拍摄范围包含了四周360度的范围。将这多个摄像头拍摄的视频内容进行拼接合成,再投影到三维模型上(如球形,圆柱体等),可形成一个全景视频。图4为本发明实施例提供的一个全景视频展开成二维图像的示意图,图5是某一时刻客户端的显示器上显示效果的示意图。可以看到的是,用户某一时刻在客户端的显示器上看到的只是全景视频的一个视角。另外,在某些场景下,由一个全景摄像机拍摄到的全景视频中可能会包含多个用户感兴趣的目标,但当这些用户感兴趣的目标处于运动状态,且相互远离至一定程度时,该全景摄像机是无法同时对这多个用户感兴趣的目标进行跟踪拍摄的,此时,需要多个全景摄像机对这多个用户感兴趣的目标分别进行跟踪拍摄,以便为用户提供更好的观看视角和体验。
基于此,若用户希望观看全景视频中的其它内容,在希望观看的其他内容与当前观看的内容由同一个全景摄像机拍摄、但位于不同的视角情况下,用户可以通过一些操作,对视频的视角进行切换,以观看到任何一个自身感兴趣的内容。在希望观看的其他内容与当前观看的内容由不同全景摄像机拍摄的情况下,此时,便需要切换不同全景摄像机拍摄的视频内容了,现有技术中通常是通过剪辑人员提前对多个全景摄像机拍摄的视频内容进行剪辑,来切换不同全景摄像机拍摄的视频内容。但是,这样的做法会使得只能观看剪辑人员剪辑好的视频内容,而无法观看由相应的摄像机拍摄的自身感兴趣的视频内容。
为了能够解决用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。本发明实施例提供一种视频场景的切换方法,其基本原理是:客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,并根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定用户当前关注的区域为目标感兴趣区域,然后根据目标感兴趣区域的场景推荐信息下载跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的、包含该目标感兴趣区域的分片,即目标视频分片,最后将播放的内容,由当前播放的视频分片切换到目标视频分片,其中,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到,感兴趣区域的场景推荐信息为跟踪感兴趣区域的广角摄像机拍摄的视频场景的场景信息。在用户当前关注区域与当前播放的内容由不同广角摄像机拍摄的情况下,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
需要说明的是,本发明实施例中涉及到的广角摄像机指的是:采用广角镜头或鱼眼镜头的摄像机,或者全景摄像机。另外,本发明实施例中涉及到的视频场景指的是由广角摄像机拍摄得到的视频内容,不同的广角摄像机拍摄得到的视频场景不同。
下面将结合附图对本发明实施例的实施方式进行详细描述。
图6示出的是可以应用本发明实施例的系统架构的简化示意图。如图6所示,该系统架构可以包括:服务器11和客户端12。
其中,服务器11,主要负责制作、存储和分发视频内容以及MPD。
客户端12主要负责从服务器11获取视频分片和MPD。并负责MPD的解析,视频内容的解码、解密、渲染和呈现等,以便为用户播放视频内容。在具体的实现中,该客户端12可以手机、平板电脑、笔记本电脑、超级移动个人计算机(Ultra-mobile Personal Computer,UMPC)、上网本、个人数字助理(Personal Digital Assistant,PDA)、PC、电视机等等。作为一种实施例,如图6中所示,本发明的网络架构包括的客户端12为电视机。
图7为本发明实施例提供的一种服务器的组成示意图,如图7所示,该服务器可以包括至少一个处理器21,存储器22、通信接口23、通信总线24。
下面结合图7对服务器的各个构成部件进行具体的介绍:
处理器21是服务器的控制中心,可以是一个处理器,也可以是多个处理元件的统称。例如,处理器21是一个中央处理器(Central Processing Unit,CPU),也可以是特定集成电路(Application Specific Integrated Circuit,ASIC),或者是被配置成实施本发明实施例的一个或多个集成电路,例如:一个或多个微处理器(Digital Signal Processor,DSP),或,一个或者多个现场可编程门阵列(Field Programmable Gate Array,FPGA)。
其中,处理器21可以通过运行或执行存储在存储器22内的软件程序,以及调用存储在存储器22内的数据,执行服务器的各种功能。
在具体的实现中,作为一种实施例,处理器21可以包括一个或多个CPU,例如图7中所示的CPU0和CPU1。
在具体实现中,作为一种实施例,服务器可以包括多个处理器,例如图7中所示的处理器21和处理器25。这些处理器中的每一个可以是一个单核处理器(single-CPU),也可以是一个多核处理器(multi-CPU)。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。
存储器22可以是只读存储器(Read-Only Memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(Random Access Memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(ElectricallyErasable Programmable Read-Only Memory,EEPROM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器22可以是独立存在,通过通信总线24与处理器21相连接。存储器22也可以和处理器21集成在一起。
其中,存储器22用于存储执行本发明方案的软件程序,并由处理器21来控制执行。
通信接口23,使用任何收发器一类的装置,用于与其他设备或通信网络通信,如以太网,无线接入网(radio access network,RAN),无线局域网(Wireless Local AreaNetworks,WLAN)等。通信接口23可以包括接收单元实现接收功能,以及发送单元实现发送功能。
通信总线24,可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互连(Peripheral Component,PCI)总线或扩展工业标准体系结构(Extended Industry Standard Architecture,EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图7中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
图7中示出的设备结构并不构成对服务器的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
图8为本发明实施例提供的一种客户端的组成示意图,如图8所示,该客户端可以包括至少一个处理器31,存储器32、通信接口33、通信总线34。
下面结合图8对客户端的各个构成部件进行具体的介绍:
处理器31是客户端的控制中心,可以是一个处理器,也可以是多个处理元件的统称。例如,处理器31是一个CPU,也可以是ASIC,或者是被配置成实施本发明实施例的一个或多个集成电路,例如:一个或多个DSP,或,一个或者多个FPGA。
其中,处理器31可以通过运行或执行存储在存储器32内的软件程序,以及调用存储在存储器32内的数据,执行客户端的各种功能。
在具体的实现中,作为一种实施例,处理器31可以包括一个或多个CPU,例如图8中所示的CPU0和CPU1。
在具体实现中,作为一种实施例,客户端可以包括多个处理器,例如图8中所示的处理器31和处理器35。这些处理器中的每一个可以是一个single-CPU,也可以是一个multi-CPU。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。
存储器32可以是ROM或可存储静态信息和指令的其他类型的静态存储设备,RAM或者可存储信息和指令的其他类型的动态存储设备,也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器32可以是独立存在,通过通信总线34与处理器31相连接。存储器32也可以和处理器31集成在一起。
其中,存储器32用于存储执行本发明方案的软件程序,并由处理器31来控制执行。
通信接口33,使用任何收发器一类的装置,用于与其他设备或通信网络通信,如以太网,RAN,WLAN等。通信接口33可以包括接收单元实现接收功能,以及发送单元实现发送功能。
通信总线34,可以是ISA总线、PCI总线或EISA总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图8中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
图9为本发明实施例提供的一种视频场景的切换方法的流程图,如图9所示,该方法可以包括:
401、客户端获取至少两个感兴趣区域的描述信息和场景推荐信息。
其中,感兴趣区域的描述信息用于判断感兴趣区域是否为用户当前关注的区域,感兴趣区域的场景推荐信息为跟踪感兴趣区域的广角摄像机拍摄的视频场景的场景信息。该场景信息可以包括视频场景的标识或拍摄视频场景的广角摄像机的标识。
示例性的,在本发明实施例中,至少两个感兴趣区域的描述信息和场景推荐信息可以由服务器提供给客户端,也就是说,步骤401具体的可以是客户端接收来自服务器的至少两个感兴趣区域的描述信息和场景推荐信息。
402、客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
其中。目标感兴趣区域为用户当前关注的区域。在客户端获取到至少两个感兴趣区域的描述信息和场景推荐信息之后,可以获取用户当前观看视角,并根据用户当前观看视角和至少两个感兴趣区域的描述信息,从这至少两个感兴趣区域中确定出用户当前关注的区域,即确定出目标感兴趣区域。
403、客户端根据目标感兴趣区域的场景推荐信息下载目标视频分片。
其中,目标视频分片为跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的、包含目标感兴趣区域的分片。在客户端获取到用户当前关注的区域,即目标感兴趣区域之后,可以根据步骤401中获取到的目标感兴趣区域的场景推荐信息,下载由跟踪该目标感兴趣区域的广角摄像机拍摄的视频场景包括的包含该目标感兴趣区域的分片。
404、客户端将播放的内容,由当前播放的视频分片切换到目标视频分片。
其中。当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。在客户端下载到目标视频分片之后,便可以将当前播放内容切换到该目标视频分片,也就是说,将当前播放内容切换到用户当前关注的内容。
本发明实施例提供的视频场景的切换方法,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
另外,众所周知的,传输是视频业务中的关键环节。目前超文本传输协议(HyperText Transport Protocol,HTTP)在视频业务的传输中得到了广泛的应用,且主要采用的是基于HTTP的动态自适应流(Dynamic Adaptive Streaming over HTTP,DASH)技术。DASH技术主要是为了解决不同视频分发商使用不同的HTTP流媒体技术造成的部署和接收机制上的繁冗问题而提出的,其主要特点是视频分片采用HTTP发送到客户端,客户端可以根据网络状况,如下载速度、缓存多少等,选择合适码率的视频分片,以保证用户的观看体验。其中,基于DASH技术的视频分片传输流程如图10所示,其可以包括以下几个步骤:步骤1、DASH客户端(client)向DASH服务器(server)请求MPD。步骤2、DASH服务器发送MPD至DASH客户端。步骤3、DASH客户端对MPD进行解析,获得时间、内容可用性、内容类型、分辨率、所需最大和最小带宽、可用解码方式、版权保护、码率等信息。步骤4、DASH客户端根据网络状况选择合适码率的视频分片,并向DASH服务器发起HTTP GET请求,用于请求确定出的视频分片。步骤5、DASH服务器发送视频分片至DASH客户端,以便DASH客户端根据获取到的时间、内容可用性、内容类型、分辨率、所需最大和最小带宽、可用解码方式、版权保护等信息接收并处理视频分片,以呈现给用户。
DASH技术还规范了MPD的文件结构格式。MPD的文件结构格式如图11所示。具体的:一个完整的MPD分成一个或多个时段(Period),每个Period就是一个媒体时间段,有起始时间和结束时间。每个Period包含一个或多个适应集(AdaptationSet),每个AdaptationSet对应着一种媒体成分,如音频、视频、字幕等。每个AdaptationSet包含一个或多个展示(Representation),每个展示即是一种编码版本,如视频可以通过编码输出多种码率的媒体资源,那么每种码率的编码视频即是一个Representation。每个Representation可以分成一个或多个分片(Segment),Segment是DASH客户端向DASH服务器请求媒体内容的基本单位,即DASH客户端向DASH服务器发送一个HTTP GET请求,DASH服务器会向DASH客户端回复一个Segment。例如,MPD的一种AdaptationSet的示例如下所示:
Figure BDA0001283259120000141
其中,上述AdaptationSet示例表示一个MPD中的视频AdaptationSet。该AdaptationSet包含了3个Representations,每个Representation包含一个分片,且提供了分片的URL,如89045625.mp4。每个Representation包含码率(bandwidth)和分辨率(width,height)属性。DASH客户端在请求视频分片之前,会先根据网络状况选择一个适合自己的码率,然后根据选择出码率,确定相应码率的分片的URL,最后将相应码率的分片的URL携带在HTTP GET请求中发送至DASH服务器,以便DASH服务器返回相应的视频分片。
为了便于本领域技术人员的理解,以下实施例以采用DASH技术进行视频业务的传输为例,对本发明实施例提供的视频场景的切换方法进行详细描述,
另外,由于视频业务可以分为点播和直播两种类型,且多个广角摄像机对应的媒体描述信息可以有以下两种的描述方式:方式一:不同广角摄像机拍摄到的视频场景的媒体描述信息包含在同一个MPD中,方式二:不同广角摄像机拍摄到的视频场景的媒体描述信息包含在不同MPD中,因此,下述实施例中将根据视频业务类型以及描述方式的不同对本发明实施例提供的视频场景的切换方法分别进行介绍。
图12为本发明实施例提供的另一种视频场景的切换方法的流程图。在本实施例中以视频业务的类型为点播,多个广角摄像机对应的媒体描述信息的描述方式为方式一,即不同广角摄像机拍摄到的视频场景的媒体描述信息包含在同一个MPD中为例,对本发明实施例提供的视频场景的切换方法进行介绍。如图12所示,该方法可以包括:
501、DASH客户端向DASH服务器发送MPD请求消息,该MPD请求消息中携带MPD的URL。
示例性的,MPD请求消息具体的可以如下所示:
GET http://example.com/mpd0.xml HTTP/1.1
Connection:keep-alive
其中,“http://example.com/mpd0.xml”为MPD的URL。HTTP/1.1表示DASH客户端和DASH服务器进行视频业务传输采用的协议是HTTP/1.1,连接:保持连接(Connection:keep-alive)表示DASH客户端和DASH服务器之间的HTTP连接需要保持。
502、DASH服务器接收来自DASH客户端的MPD请求消息。
503、DASH服务器向DASH客户端发送MPD响应消息,MPD响应消息中携带DASH客户端所请求的MPD。
其中,DASH服务器在接收到来自DASH客户端的MPD请求消息之后,可以根据MPD请求消息中携带的URL,向DASH客户端返回携带与该URL对应的MPD的MPD响应消息。该MPD中可以包括:至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄的视频场景的媒体描述信息,还可以包括:至少两个感兴趣区域远离到一定程度后,采用多个广角摄像机对该至少两个感兴趣区域进行拍摄得到的至少两个视频场景的媒体描述信息和场景信息,至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
示例性的,MPD响应消息具体的可以如下:
HTTP/1.1 200 OK
Date:Mon,5Dec 2016 10:28:53 GMT
Content-Length:6432
Content-Type:text/xml
Connection:closed
其中,日期(Date)表示DASH服务器回复的MPD响应消息的时间。内容长度(Content-Length)表示DASH服务器回复的MPD的大小。内容类型(Content-Type)表示DASH服务器回复的MPD的类型,text/xml表示是可扩展标示语言(Extensive Markup Language,xml)格式的文本。连接:关闭(Connection:closed)表示关闭DASH客户端和DASH服务器之间的HTTP连接。
并且,MPD响应消息中携带的MPD的示例如下所示:
Figure BDA0001283259120000151
Figure BDA0001283259120000161
Figure BDA0001283259120000171
由上述示例可以看出,该MPD中包括的第一个Period为至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄的视频场景的媒体描述信息,包括的第二个Period为至少两个感兴趣区域远离到一定程度后,采用多个广角摄像机对该至少两个感兴趣区域进行拍摄得到的至少两个视频场景的媒体描述信息,且包括每个视频场景的场景信息,如,SceneId=”1”用于表示场景信息为1。
具体的:由上述MPD可以看出的是全景视频被分成多个区域(或块),其中,每个AdaptationSet对应一个区域。例如,第一个Period的区域1(Region1)中,“<SupplementalProperty schemeIdUri="urn:mpeg:dash:vr-srd:2017”value="0,0,0,320,320,1280,720"/>”中的"urn:mpeg:dash:vr-srd:2017"表示当前视频是一个全景视频。且当schemeIdUri="urn:mpeg:dash:vr-srd:2017"时,value定义如表1所示。
表1
value 描述
source_id 当前区域的标识(Identify,ID)
object_x 当前区域的左上角在整个视频中的横坐标
object_y 当前区域的左上角在整个视频中的纵坐标
object_width 当前区域的宽度或水平方向尺寸
object_height 当前区域的高度或垂直方向尺寸
total_width 整个视频的宽度
total_height 整个视频的高度
例如,当value="0,0,0,320,320,1280,720"时,表示当前区域的ID为0,当前区域是整个视频的一个部分,其左上角在整个视频中的坐标为(0,0),其长和宽分别为320和320,整个视频的大小为1280x720。
MPD中还包括至少两个感兴趣区域的描述信息和场景推荐信息。且,在本发明实施例中,感兴趣区域的描述信息包括:感兴趣区域的标识、感兴趣区域的位置、感兴趣区域的尺寸、感兴趣区域的出现时间。例如,场景1(Scene 1)的区域2(Region 2)中的“<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="2,100,100,300,300,0,20,2"/>”即用于表示一个感兴趣区域的描述信息和场景推荐信息。其中,schemeIdUri="urn:mpeg:dash:target:2017"表示描述视频中的一个感兴趣区域,其value值定义如表2所示。
表2
Figure BDA0001283259120000181
例如,当value="2,100,100,300,300,0,20,2"时,用于表示感兴趣区域2出现在当前区域中,其左上角在当前区域中的坐标是(100,100),其尺寸是300x300,其在当前区域中出现的时间是0到20s,且跟踪该感兴趣区域的广角摄像机拍摄的视频场景的场景信息为2,即推荐去场景信息为2的视频场景观看这个感兴趣区域。
并且,MPD中还包括视频分片的URL。例如,第一个Period的区域1中“<BaseURL>http://example.com/00001.mp4</BaseURL>”表示分片的URL为http://example.com/00001.mp4。
504、DASH客户端接收来自DASH服务器的MPD响应消息。
其中,在至少两个感兴趣区域未远离到一定程度,且采用一个广角摄像机对该至少两个感兴趣区域进行拍摄之前,DASH客户端可以根据当前所处的播放时段和MPD选择出合适码率的视频分片,并向DASH服务器发送分片请求消息。例如,合适码率的视频分片的URL为http://example.com/00001.mp4,那么分片请求消息具体的可以如下:
GET http://example.com/00001.mp4HTTP/1.1
Connection:keep-alive
其中,“http://example.com/00001.mp4”为分片的URL。
在DASH服务器接收到分片请求消息之后,可以根据DASH客户端的分片请求消息中携带的URL,将对应的视频分片携带在分片响应消息中发送至DASH客户端。示例性的,分片响应消息具体的可以如下:
HTTP/1.1 200 OK
Date:Mon,5Dec 2016 10:29:21 GMT
Content-Length:643288
Content-Type:video/mp4
Connection:closed
其中,Date表示DASH服务器回复的分片响应消息的时间。Content-Length表示DASH服务器回复的视频分片的大小。Content-Type表示DASH服务器回复的视频分片的类型,video/mp4表示是mp4的视频。
在至少两个感兴趣区域未远离到一定程度,且采用一个广角摄像机对该至少两个感兴趣区域进行拍摄之前,DASH客户端通过重复向DASH服务器发送分片请求消息,便可以为用户持续播放视频,当用户切换视角时,DASH客户端可以向DASH服务器请求相应视角的视频分片。在至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄时,DASH客户端可以通过执行以下步骤505-步骤509,来为用户持续播放视频。
505、DASH客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
其中,目标感兴趣区域为用户当前关注的区域。在至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄时,DASH客户端可以获取用户当前观看视角,并根据用户当前观看视角和至少两个感兴趣区域的描述信息确定出用户当前关注的区域。
示例性的,步骤504具体的可以为:根据用户当前观看视角和至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为用户当前关注的区域,即目标感兴趣区域。例如,“<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="1,100,100,300,300,0,600,1"/>”表示标识为1的感兴趣区域的描述信息和场景推荐信息“<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="2,100,100,300,300,0,20,2"/>”表示标识为2的感兴趣区域的描述信息和场景推荐信息,根据用户当前观看视角和至少两个感兴趣区域的位置,确定出DASH客户端的显示器中,标识为2的感兴趣区域在显示器的中心位置(或距离中心位置最近),且根据标识为2的感兴趣区域的出现时间,确定出用户观看这个感兴趣区域的时间超过预设阈值,如500ms,另外,标识为2的感兴趣区域的尺寸大于预设阈值,此时,DASH客户端可以确定用户关注的区域为标识为2的感兴趣区域。
506、DASH客户端根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息。
其中,在DASH客户端确定出目标感兴趣区域之后,便可以获得目标感兴趣区域的场景推荐信息,这样,可以根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息。
示例性的,假设DASH客户端确定出的目标感兴趣区域是标识为2的感兴趣区域,则根据“<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="2,100,100,300,300,0,20,2"/>”便可以获得,目标感兴趣区域的场景推荐信息是2。此时,DASH客户端便可以根据场景推荐信息2从至少两个视频场景的场景信息中确定目标场景信息。
507、DASH客户端根据目标感兴趣区域和目标场景信息,从MPD中确定目标视频分片的URL。
其中,目标视频分片为跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的包含目标感兴趣区域的分片。在DASH客户端获取到目标感兴趣区域和目标场景信息之后,便可以在MPD中确定出用户当前关注的区域在哪个视频场景的哪个区域。如目标场景信息为2,且目标感兴趣区域的标识为2,则DASH客户端可以根据MPD确定出用户当前关注的区域在场景2的区域2中,此时,DASH客户端会选择出合适码率的视频分片作为目标视频分片,即确定出目标视频分片的URL,如DASH客户端选择出目标视频分片的URL为http://example.com/00006.mp4。
508、DASH客户端根据目标视频分片的URL下载目标视频分片。
其中,DASH客户端在确定出目标视频分片的URL之后,便可以根据目标视频分片的URL下载目标视频分片。示例性的,DASH客户端可以将目标视频分片的URL携带在分片请求消息中发送至DASH服务器,DASH服务器在接收到携带有目标视频分片的URL的分片请求消息之后,可以将目标视频分片携带在分片响应消息中发送至DASH客户端。具体的消息结构可以参考本发明实施例中相应内容的具体描述,本发明实施例在此不再详细赘述。
509、DASH客户端将播放的内容,由当前播放的视频分片切换到目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。
由于在本发明实施例中,会要求在MPD中增加很多内容,如,至少两个感兴趣区域远离到一定程度后,采用多个广角摄像机对该至少两个感兴趣区域进行拍摄得到的至少两个视频场景的媒体描述信息和场景信息等等,MPD文件将会非常大,这会使得DASH客户端从DASH服务器下载MPD文件的过程较长,导致初始化过程时延比较大,从而导致用户体验较差,如用户点击了一个视频文件的链接之后,经过很长时间才显示出视频画面。
为了降低初始化过程的时延,在本发明实施例中进一步的,可以将至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄得到的视频场景的媒体描述信息先包含在一个旧MPD(其中,旧MPD中包括的媒体描述信息可以与上述MPD示例1中的第一个Period类似)中提供给DASH客户端,并且,该旧MPD中包含一个更新时间和新MPD(其中,新MPD中包括的媒体描述信息可以与上述MPD示例1中的第二个Period类似)的URL,该新MPD包含了至少两个感兴趣区域远离到一定程度后,采用多个广角摄像机对该至少两个感兴趣区域进行拍摄得到的至少两个视频场景的媒体描述信息和场景信息。例如,在旧MPD中增加minimumUpdatePeriod="PT600S和<SupplementalPropertyschemeIdUri="urn:mpeg:dash:chaining:2016"value="http://example.com/mpd2"/>,其中,“minimumUpdatePeriod="PT600S”表示MPD中的内容播放到达600s时,需要下载新MPD。http://example.com/mpd2表示新MPD的URL。这样,DASH客户端根据旧MPD中的更新时间,在确定需要更新旧MPD时,可以向DASH服务器发送携带新MPD的URL的MPD请求消息,以便DASH服务器向DASH客户端返回新MPD,进而DASH客户端根据新MPD进行视频分片的下载。
本发明实施例提供的视频场景的切换方法,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。并且,通过更新MPD,降低了初始化过程的时延。
图13为本发明实施例提供的另一种视频场景的切换方法的流程图。在本实施例中以视频业务的类型为直播,多个广角摄像机对应的媒体描述信息的描述方式为方式一,即不同广角摄像机拍摄到的视频场景的媒体描述信息包含在同一个MPD中为例,对本发明实施例提供的视频场景的切换方法进行介绍。如图13所示,该方法可以包括:
601、DASH客户端向DASH服务器发送MPD请求消息,该MPD请求消息中携带旧MPD的URL。
602、DASH服务器接收来自DASH客户端的MPD请求消息。
603、DASH服务器向DASH客户端发送MPD响应消息,MPD响应消息中携带DASH客户端所请求的旧MPD。
其中,该旧MPD中可以包括:至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄的视频场景的媒体描述信息。
MPD响应消息中携带的旧MPD的示例如下所示:
Figure BDA0001283259120000211
Figure BDA0001283259120000221
Figure BDA0001283259120000231
由上述示例可以看出,该旧MPD中包括至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄的视频场景的媒体描述信息。其中,与点播不同的是,在直播中,采用分片模板(SegmentTemplate)对视频分片的URL进行描述。例如,以<St="0"d="180180"r="300"/>为例,表示第一个视频分片的开始时间是0,每个分片的时长是180180/(timescale="90000")=2秒,有300个分片。
604、DASH客户端接收来自DASH服务器的MPD响应消息。
其中,在至少两个感兴趣区域未远离到一定程度,且采用一个广角摄像机对该至少两个感兴趣区域进行拍摄之前,DASH客户端可以根据旧MPD选择出合适码率的视频分片,并向DASH服务器发送分片请求消息。例如,合适码率的视频分片的URL为http://example.com/segment1/1/250000/0.mp4v,其中,http://example.com/在MPD中的baseURL中定义,“segment1/”定义在AdaptationSet的BaseURL中,“1/250000/0.mp4v”由分片模板“$ASId$/$Bandwidth$/$Time$.mp4v”得出。该URL用于请求第一个视频分片,那么分片请求消息具体的可以如下:
GET http://example.com/segment1/1/250000/0.mp4v HTTP/1.1
Connection:keep-alive
其中,“http://example.com/segment1/1/250000/0.mp4v”为分片的URL。
在DASH服务器接收到分片请求消息之后,可以根据DASH客户端的分片请求消息中携带的URL,将第一个视频分片携带在分片响应消息中发送至DASH客户端。示例性的,分片响应消息具体的可以如下:
HTTP/1.1 200 OK
Date:Mon,5Dec 2016 10:29:21 GMT
Content-Length:6432
Content-Type:video/mp4
Connection:closed
在至少两个感兴趣区域未远离到一定程度,且采用一个广角摄像机对该至少两个感兴趣区域进行拍摄之前,DASH客户端通过重复向DASH服务器发送分片请求消息,便可以为用户持续播放视频,当用户切换视角时,DASH客户端可以向DASH服务器请求相应视角的视频分片。假设在第50个视频分片之后,至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄,此时,可以通过执行以下步骤605-步骤613,来为用户持续播放视频。
605、DASH客户端向DASH服务器发送分片请求消息,该分片请求消息中包括第51个视频分片的URL。
示例性的,分片请求消息具体的如下所示:
GET http://example.com/segment1/1/25000/51.mp4v HTTP/1.1
Connection:keep-alive
606、DASH服务器接收来自DASH客户端的携带第51个视频分片的URL的分片请求消息。
607、DASH服务器向DASH客户端发送分片响应消息。
其中,该分片响应消息中携带第51个视频分片,该第51个视频分片中包括事件信息,该事件信息包括新MPD,该新MPD中包括:至少两个视频场景的媒体描述信息和场景信息,该至少两个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。
示例性的,假设在第50个视频分片之后,DASH服务器检测到至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄,此时,DASH服务器可以生成一个新MPD。并在DASH服务器接收到来自DASH客户端的携带第51个视频分片的URL的分片请求消息之后,可以将生成的新MPD封装在事件盒(event box)中,并存放在第51个视频分片中。然后,DASH服务器向DASH客户端发送携带该第51个视频分片的分片响应消息。另外,需要说明的是,为了能够确保DASH客户端获取到新MPD,可以在每一种码率的视频分片中均封装生成的新MPD。当然,为了减小视频分片的大小,也可以仅将新MPD相较于旧MPD的补丁封装在事件信息中。且,为了使得DASH客户端能够获知新MPD具体何时使用,在事件信息中还可以包括有效时间,该有效时间用于DASH客户端确定需要开始使用新MPD的时间。在本发明实施例中,感兴趣区域的场景推荐信息也可以直接封装在事件信息中,而不是在新MPD中描述。
其中,假设事件信息中封装的是完整的新MPD,且在新MPD中描述感兴趣区域的场景推荐信息,那么第51个视频分片的事件信息中封装的新MPD的示例可以如下所示:
Figure BDA0001283259120000241
Figure BDA0001283259120000251
由上述示例3可以看出,该新MPD中包含多个视频场景的媒体描述信息和场景信息,且,多个视频场景的媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。其中,<SupplementalProperty schemeIdUri="urn:mpeg:dash:recommendation:2016"value="2:1,7,13"/>表示感兴趣区域的场景推荐信息,具体的,表示当感兴趣区域ID是1,7或13时,其场景推荐信息是2,即推荐用户切换到标识为2的场景信息中观看视频。
608、DASH客户端接收来自DASH服务器的分片响应消息。
609、DASH客户端根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
其中,目标感兴趣区域为用户当前关注的区域。当事件信息中包含有效时间时,DASH客户端可以在根据有效时间确定需要开始使用新MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
610、DASH客户端根据目标感兴趣区域的场景推荐信息和至少两个视频场景的场景信息,从至少两个视频场景的场景信息中确定目标场景信息。
示例性的,假设目标感兴趣区域为标识为7的感兴趣区域,则DASH客户端根据<SupplementalProperty schemeIdUri="urn:mpeg:dash:recommendation:2016"value="2:1,7,13"/>便可以获得,目标感兴趣区域的场景推荐信息是2。
611、DASH客户端根据目标感兴趣区域和目标场景信息,从新MPD中确定目标视频分片的URL。
612、DASH客户端根据目标视频分片的URL下载目标视频分片。
613、DASH客户端将播放的内容,由当前播放的视频分片切换到目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。
需要说明的是,本发明实施例中步骤601-步骤613的具体描述,可以参考本发明另一实施例中步骤501-步骤509中相应内容的具体描述,本发明实施例在此不再一一赘述。
本发明实施例提供的视频场景的切换方法,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
图14为本发明实施例提供的另一种视频场景的切换方法的流程图。在本实施例中以视频业务的类型为点播,多个广角摄像机对应的媒体描述信息的描述方式为方式二,即不同广角摄像机拍摄到的视频场景的媒体描述信息包含在不同MPD中为例,对本发明实施例提供的视频场景的切换方法进行介绍。如图14所示,该方法可以包括:
701、DASH客户端向DASH服务器发送MPD请求消息,该MPD请求消息中携带旧MPD的URL。
702、DASH服务器接收来自DASH客户端的携带旧MPD的URL的MPD请求消息。
703、DASH服务器向DASH客户端发送MPD响应消息,MPD响应消息中携带DASH客户端所请求的旧MPD。
其中,该旧MPD中可以包括:至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄的视频场景的媒体描述信息,该媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息。该旧MPD中还可以包括:更新时间,用于DASH客户端确定需要更新该旧MPD。该旧MPD中还可以包括:至少两个新MPD的URL以及与至少两个新MPD的URL一一对应的场景信息,其用于DASH客户端从至少两个新MPD的URL中确定目标MPD的URL,以便于在至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄时,DASH客户端能够为用户提供用户关注的区域的视频内容。
MPD响应消息中携带的旧MPD的示例如下所示:
Figure BDA0001283259120000271
Figure BDA0001283259120000281
由上述示例可以看出,该旧MPD中包括至少两个感兴趣区域未远离到一定程度前,采用一个广角摄像机对该至少两个感兴趣区域进行拍摄的视频场景的媒体描述信息。且该媒体描述信息中包括至少两个感兴趣区域的描述信息和场景推荐信息,如<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="1,100,100,300,300,540,600 2"/>,<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="2,100,100,300,300,560,600 1"/>。
该旧MPD中还包括更新时间,minimumUpdatePeriod="PT600S",表示在视频播放至600s时需要更新该旧MPD。
该旧MPD中还包括:三个新MPD的URL以及与这三个新MPD的URL一一对应的场景信息,<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”1”value="http://example.com/mpd1"/>,<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”2”value="http://example.com/mpd2"/>,<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”3”value="http://example.com/mpd3"/>。例如,<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”1”value="http://example.com/mpd1"/>,用于表示标识为1的场景信息的MPD的URL为http://example.com/mpd1。
704、DASH客户端接收来自DASH服务器的MPD响应消息。
在至少两个感兴趣区域未远离到一定程度,且采用一个广角摄像机对该至少两个感兴趣区域进行拍摄之前,DASH客户端通过重复向DASH服务器发送分片请求消息,便可以为用户持续播放视频,当用户切换视角时,DASH客户端可以向DASH服务器请求相应视角的视频分片。在至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄时,DASH客户端可以通过执行以下步骤705-步骤712,来为用户持续播放视频。
705、DASH客户端在根据更新时间确定需要更新旧MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
其中,目标感兴趣区域为用户当前关注的区域。DASH客户端可以根据旧MPD中的更新时间确定需要更新旧MPD,即至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄时,获取用户当前观看视角,并根据用户当前观看视角和至少两个感兴趣区域的描述信息确定出用户当前关注的区域。
706、DASH客户端根据目标感兴趣区域的场景推荐信息和与至少两个新MPD的URL一一对应的场景信息,从至少两个新MPD的URL中确定目标MPD的URL。
其中,在DASH客户端确定出目标感兴趣区域之后,便可以获得目标感兴趣区域的场景推荐信息,这样,可以根据目标感兴趣区域的场景推荐信息和与至少两个新MPD的URL一一对应的场景信息,从至少两个新MPD的URL中确定目标MPD的URL。
示例性的,假设DASH客户端确定出的目标感兴趣区域是标识为2的感兴趣区域,则根据“<SupplementalProperty schemeIdUri="urn:mpeg:dash:target:2017"value="2,100,100,300,300,560,600 1"/>”便可以获得,目标感兴趣区域的场景推荐信息是1。此时,DASH客户端便可以根据场景推荐信息1和<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”1”value="http://example.com/mpd1"/>,<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”2”value="http://example.com/mpd2"/>,<SupplementalProperty schemeIdUri="urn:mpeg:dash:chaining:2016"id=”3”value="http://example.com/mpd3"/>,确定目标MPD的URL为http://example.com/mpd1。
707、DASH客户端向DASH服务器发送MPD请求消息,该MPD请求消息中携带目标MPD的URL。
708、DASH服务器接收来自DASH客户端的携带目标MPD的URL的MPD请求消息。
709、DASH服务器向DASH客户端发送携带目标MPD的MPD响应消息。
其中,该目标MPD中包括跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的包含目标感兴趣区域的分片的URL,即目标视频分片的URL。示例性的,该目标MPD中包括标识为2的感兴趣区域的分片的URL。
710、DASH客户端接收来自DASH服务器的携带目标MPD的MPD响应消息。
711、DASH客户端根据目标MPD中包括的目标视频分片的URL下载目标视频分片。
712、DASH客户端将播放的内容,由当前播放的视频分片切换到目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。
需要说明的是,本发明实施例中步骤701-步骤712的具体描述,可以参考本发明另一实施例中步骤501-步骤509,以及步骤601-步骤613中相应内容的具体描述,本发明实施例在此不再一一赘述。
本发明实施例提供的视频场景的切换方法,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。并且,通过更新MPD,降低了初始化过程的时延。
图15为本发明实施例提供的另一种视频场景的切换方法的流程图。在本实施例中以视频业务的类型为直播,多个广角摄像机对应的媒体描述信息的描述方式为方式二,即不同广角摄像机拍摄到的视频场景的媒体描述信息包含在不同MPD中为例,对本发明实施例提供的视频场景的切换方法进行介绍。如图15所示,该方法可以包括:
801、DASH客户端向DASH服务器发送MPD请求消息,该MPD请求消息中携带旧MPD的URL。
802、DASH服务器接收来自DASH客户端的MPD请求消息。
803、DASH服务器向DASH客户端发送MPD响应消息,MPD响应消息中携带DASH客户端所请求的旧MPD。
804、DASH客户端接收来自DASH服务器的MPD响应消息。
在至少两个感兴趣区域未远离到一定程度,且采用一个广角摄像机对该至少两个感兴趣区域进行拍摄之前,DASH客户端通过重复向DASH服务器发送分片请求消息,便可以为用户持续播放视频,当用户切换视角时,DASH客户端可以向DASH服务器请求相应视角的视频分片。假设在第50个视频分片之后,至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄,此时,可以通过执行以下步骤805-步骤816,来为用户持续播放视频。
805、DASH客户端向DASH服务器发送分片请求消息,该分片请求消息中包括第51个视频分片的URL。
806、DASH服务器接收来自DASH客户端的携带第51个视频分片的URL的分片请求消息。
807、DASH服务器向DASH客户端发送分片响应消息。
其中,该分片响应消息中携带第51个视频分片,该第51个视频分片中包括事件信息,该事件信息包括至少两个感兴趣区域的描述信息和场景推荐信息。进一步的,该事件信息中还可以包括:至少两个新MPD的URL,以及与至少两个新MPD的URL一一对应的场景信息。
示例性的,假设在第50个视频分片之后,DASH服务器检测到至少两个感兴趣区域远离到一定程度,且采用多个广角摄像机对该至少两个感兴趣区域进行拍摄,此时,DASH服务器可以生成至少两个新MPD,其中每个广角摄像机拍摄的视频场景的媒体描述信息生成一个新MPD,并为每一个新MPD分配一个URL,该URL与对应的广角摄像机拍摄的视频场景的场景信息相对应。在DASH服务器接收到来自DASH客户端的携带第51个视频分片的URL的分片请求消息之后,可以将至少两个感兴趣区域的描述信息和场景推荐信息、为生成的多个新MPD分配的URL以及与其对应的场景信息封装在event box中,并存放在第51个视频分片中。然后,DASH服务器向DASH客户端发送携带该第51个视频分片的分片响应消息。另外,需要说明的是,为了能够确保DASH客户端获取到新MPD,可以在每一种码率的视频分片中均封装为生成的多个新MPD分配的URL以及与其对应的场景信息。且,为了使得DASH客户端能够获知新MPD具体何时使用,在事件信息中还可以包括有效时间,该有效时间用于DASH客户端确定需要开始使用新MPD的时间。
例如,感兴趣区域的场景推荐信息如下所示:
<SupplementalProperty schemeIdUri="urn:mpeg:dash:recommendation:2016"value="1:2,3,8,9"/>
<SupplementalProperty schemeIdUri="urn:mpeg:dash:recommendation:2016"value="2:1,7,13"/>
其中,<SupplementalProperty schemeIdUri="urn:mpeg:dash:recommendation:2016"value="1:2,3,8,9"/>表示感兴趣区域的场景推荐信息,具体的,表示当感兴趣区域ID是2,3,8或9时,其场景推荐信息是1,即推荐用户切换到标识为1的场景信息中观看视频。
为生成的多个新MPD分配的URL以及与其对应的场景信息具体示例可以参考另一实施例中步骤703中对应内容的具体描述,本发明实施例在此不再一一赘述。
808、DASH客户端接收来自DASH服务器的分片响应消息。
809、DASH客户端有效时间确定需要开始使用新MPD时,根据用户当前观看视角和至少两个感兴趣区域的描述信息,从至少两个感兴趣区域中确定目标感兴趣区域。
810、DASH客户端根据目标感兴趣区域的场景推荐信息和与至少两个新MPD的URL一一对应的场景信息,从至少两个新MPD的URL中确定目标MPD的URL。
811、DASH客户端向DASH服务器发送MPD请求消息,该MPD请求消息中携带目标MPD的URL。
812、DASH服务器接收来自DASH客户端的携带目标MPD的URL的MPD请求消息。
813、DASH服务器向DASH客户端发送携带目标MPD的MPD响应消息。
其中,该目标MPD中包括跟踪目标感兴趣区域的广角摄像机拍摄的视频场景包括的包含目标感兴趣区域的分片的URL,即目标视频分片的URL。
814、DASH客户端接收来自DASH服务器的携带目标MPD的MPD响应消息。
815、DASH客户端根据目标MPD中包括的目标视频分片的URL下载目标视频分片。
816、DASH客户端将播放的内容,由当前播放的视频分片切换到目标视频分片,当前播放的视频分片与目标视频分片由不同的广角摄像机拍摄得到。
当然,在步骤807中,事件信息中可以不携带新MPD的URL,以及新MPD的URL对应的场景信息,而是直接携带至少两个新MPD(或新MPD相较于旧MPD的补丁),以及与至少两个新MPD一一对应的场景信息,这样,在DASH客户端获取到第51个视频分片时,便直接获取到的至少两个新MPD,只需在确定出目标感兴趣区域之后,根据目标感兴趣区域的场景推荐信息和与至少两个新MPD一一对应的场景信息,从至少两个新MPD中确定目标MPD,目标MPD中包括目标视频分片的URL,然后便可以根据目标视频分片的URL下载目标视频分片了。
需要说明的是,本发明实施例中步骤801-步骤816的具体描述,可以参考本发明另一实施例中步骤501-步骤509,步骤601-步骤613以及步骤701-步骤712中相应内容的具体描述,本发明实施例在此不再一一赘述。
本发明实施例提供的视频场景的切换方法,客户端通过根据获取到的用于判断感兴趣区域是否为用户当前关注的区域的描述信息和用户当前观看视角,确定用户当前关注区域,并根据用户当前关注区域的场景推荐信息,下载由跟踪该用户当前关注区域的广角摄像机拍摄得到的包含用户当前关注区域的视频分片,即目标视频分片,然后将播放的内容由当前播放的视频分片切换到目标视频分片,解决了用户无法观看由相应的摄像机拍摄的自身感兴趣的视频内容的问题。
上述主要从各个网元之间交互的角度对本发明实施例提供的方案进行了介绍。可以理解的是,各个网元,例如服务器、客户端为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的算法步骤,本发明能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
本发明实施例可以根据上述方法示例对服务器、客户端进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本发明实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图16示出了上述和实施例中涉及的客户端的一种可能的组成示意图,如图16所示,该客户端可以包括:获取单元91、确定单元92、下载单元93和切换单元94。
其中,获取单元91,用于支持客户端执行图9所示的视频场景的切换方法中的步骤401。
确定单元92,用于支持客户端执行图9所示的视频场景的切换方法中的步骤402,图12所示的视频场景的切换方法中的步骤505、步骤506、步骤507,图13所示的视频场景的切换方法中的步骤609、步骤610、步骤611,图14所示的视频场景的切换方法中的步骤705、步骤706,图15所示的视频场景的切换方法中的步骤809、步骤810。
下载单元93,用于支持客户端执行图9所示的视频场景的切换方法中的步骤403,图12所示的视频场景的切换方法中的步骤508,图13所示的视频场景的切换方法中的步骤612,图14所示的视频场景的切换方法中的步骤711,图15所示的视频场景的切换方法中的步骤815。
切换单元94,用于支持客户端执行图9所示的视频场景的切换方法中的步骤404,图12所示的视频场景的切换方法中的步骤509,图12所示的视频场景的切换方法中的步骤613,图14所示的视频场景的切换方法中的步骤712,图15所示的视频场景的切换方法中的步骤816。
在本发明实施例中,进一步的,如图16所示,该客户端还可以包括:发送单元95和接收单元96。
发送单元95,用于支持客户端执行图12所示的视频场景的切换方法中的步骤501,图13所示的视频场景的切换方法中的步骤601、步骤605,图14所示的视频场景的切换方法中的步骤701、步骤707,图15所示的视频场景的切换方法中的步骤801、步骤805、步骤811。
接收单元96,用于支持客户端执行图12所示的视频场景的切换方法中的步骤504,图13所示的视频场景的切换方法中的步骤604、步骤608,图14所示的视频场景的切换方法中的步骤704、步骤710,图15所示的视频场景的切换方法中的步骤804、步骤808、步骤814。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本发明实施例提供的客户端,用于执行上述视频场景的切换方法,因此可以达到与上述视频场景的切换方法相同的效果。
在采用集成的单元的情况下,图17示出了上述实施例中所涉及的客户端的另一种可能的组成示意图。如图17所示,该客户端包括:处理模块1001和通信模块1002。
处理模块81用于对客户端的动作进行控制管理,例如,处理模块1001用于支持客户端执行图9所示的视频场景的切换方法中的步骤401、步骤402、步骤403、步骤404,图12所示的视频场景的切换方法中的步骤505、步骤506、步骤507、步骤508、步骤509,图13所示的视频场景的切换方法中的步骤609、步骤610、步骤611、步骤612、步骤613,图14所示的视频场景的切换方法中的步骤705、步骤706、步骤711、步骤712,图15所示的视频场景的切换方法中的步骤809、步骤810、步骤815,步骤816,和/或用于本文所描述的技术的其它过程。通信模块1002用于支持客户端与其他网络实体的通信,例如与图6、图7、图18或图19中示出的功能模块或网络实体之间的通信。具体的如用于支持客户端执行图12所示的视频场景的切换方法中的步骤501、步骤504,图13所示的视频场景的切换方法中的步骤601、步骤604、步骤605、步骤608,图14所示的视频场景的切换方法中的步骤701、步骤704、步骤707、步骤710,图15所示的视频场景的切换方法中的步骤801、步骤804、步骤805、步骤808、步骤811、步骤814。客户端还可以包括存储模块1003,用于存储客户端的程序代码和数据。
其中,处理模块1001可以是处理器或控制器。其可以实现或执行结合本发明公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等等。通信模块1002可以是收发器、收发电路或通信接口等。存储模块1003可以是存储器。
当处理模块1001为处理器,通信模块1002为通信接口,存储模块1003为存储器时,本发明实施例所涉及的客户端可以为图8所示的客户端。
在采用对应各个功能划分各个功能模块的情况下,图18示出了上述和实施例中涉及的服务器的一种可能的组成示意图,如图18所示,该服务器可以包括:发送单元1101和接收单元1002。
其中,发送单元1101,用于支持服务器执行图12所示的视频场景的切换方法中的步骤503,图13所示的视频场景的切换方法中的步骤603、步骤607,图14所示的视频场景的切换方法中的步骤703、步骤709,图15所示的视频场景的切换方法中的步骤803、步骤807、步骤813。
接收单元1002,用于支持服务器执行图12所示的视频场景的切换方法中的步骤502,图13所示的视频场景的切换方法中的步骤602、步骤606,图14所示的视频场景的切换方法中的步骤702、步骤708,图15所示的视频场景的切换方法中的步骤802、步骤806、步骤812。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本发明实施例提供的服务器,用于执行上述视频场景的切换方法,因此可以达到与上述视频场景的切换方法相同的效果。
在采用集成的单元的情况下,图19示出了上述实施例中所涉及的服务器的另一种可能的组成示意图。如图19所示,该服务器包括:处理模块1201和通信模块1202。
处理模块1201用于对服务器的动作进行控制管理。通信模块1202用于支持服务器与其他网络实体的通信,例如与图6、图8、图16或图17中示出的功能模块或网络实体之间的通信。具体的如用于支持服务器执行图12所示的视频场景的切换方法中的步骤502、步骤503,图13所示的视频场景的切换方法中的步骤602、步骤603、步骤606、步骤607,图14所示的视频场景的切换方法中的步骤702、步骤703、步骤708、步骤709,图15所示的视频场景的切换方法中的步骤802、步骤803、步骤806、步骤807、步骤812、步骤813。服务器还可以包括存储模块1203,用于存储终端的程序代码和数据。
其中,处理模块1201可以是处理器或控制器。其可以实现或执行结合本发明公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等等。通信模块1202可以是收发器、收发电路或通信接口等。存储模块1203可以是存储器。
当处理模块1201为处理器,通信模块1202为通信接口,存储模块1203为存储器时,本发明实施例所涉及的服务器可以为图7所示的服务器。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何在本发明揭露的技术范围内的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (64)

1.一种视频场景的切换方法,其特征在于,包括:
客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,所述感兴趣区域的描述信息用于判断所述感兴趣区域是否为用户当前关注的区域,所述感兴趣区域的场景推荐信息为跟踪所述感兴趣区域的广角摄像机拍摄的视频场景的场景信息;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,所述目标感兴趣区域为用户当前关注的区域;
所述客户端根据所述目标感兴趣区域的场景推荐信息下载目标视频分片,所述目标视频分片为跟踪所述目标感兴趣区域的广角摄像机拍摄的视频场景包括的、包含所述目标感兴趣区域的分片;
所述客户端将播放的内容由当前播放的视频分片切换到所述目标视频分片,所述当前播放的视频分片与所述目标视频分片由不同的广角摄像机拍摄得到。
2.根据权利要求1所述的方法,其特征在于,所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述客户端向服务器发送第一媒体描述文件MPD请求消息,所述第一媒体描述文件MPD请求消息中携带第一MPD的统一资源定位符URL;
所述客户端接收来自所述服务器的第一MPD响应消息,所述第一MPD响应消息中携带所述第一MPD,所述第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
3.根据权利要求2所述的方法,其特征在于,所述客户端根据所述目标感兴趣区域的场景推荐信息下载目标视频分片,包括:
所述客户端根据所述目标感兴趣区域的场景推荐信息和所述至少两个视频场景的场景信息,从所述至少两个视频场景的场景信息中确定目标场景信息;
所述客户端根据所述目标感兴趣区域和所述目标场景信息,从所述第一MPD中确定所述目标视频分片的URL;
所述客户端根据所述目标视频分片的URL下载所述目标视频分片。
4.根据权利要求1所述的方法,其特征在于,在所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述客户端向服务器发送第一分片请求消息,所述第一分片请求消息中包括所述当前播放的视频分片的URL;
所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述客户端接收来自所述服务器的第一分片响应消息,所述第一分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第一事件信息,所述第一事件信息包括第二MPD,所述第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
5.根据权利要求4所述的方法,其特征在于,所述客户端根据所述目标感兴趣区域的场景推荐信息下载目标视频分片,包括:
所述客户端根据所述目标感兴趣区域的场景推荐信息和所述至少两个视频场景的场景信息,从所述至少两个视频场景的场景信息中确定目标场景信息;
所述客户端根据所述目标感兴趣区域和所述目标场景信息,从所述第二MPD中确定所述目标视频分片的URL;
所述客户端根据所述目标视频分片的URL下载所述目标视频分片。
6.根据权利要求4或5所述的方法,其特征在于,所述第一事件信息还包括:有效时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端在根据所述有效时间确定需要开始使用所述第二MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
7.根据权利要求1所述的方法,其特征在于,在所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述客户端向服务器发送第二MPD请求消息,所述第二MPD请求消息中携带第三MPD的URL;
所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述客户端接收来自所述服务器的第二MPD响应消息,所述第二MPD响应消息中携带所述第三MPD,所述第三MPD中包括:所述至少两个感兴趣区域的描述信息和场景推荐信息。
8.根据权利要求7所述的方法,其特征在于,所述第三MPD中还包括:更新时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端在根据所述更新时间确定需要更新所述第三MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
9.根据权利要求7或8所述的方法,其特征在于,所述第三MPD中还包括:至少两个第四MPD的URL以及与所述至少两个第四MPD的URL一一对应的场景信息;
所述客户端根据所述目标感兴趣区域的场景推荐信息下载目标视频分片,包括:
所述客户端根据所述目标感兴趣区域的场景推荐信息和与所述至少两个第四MPD的URL一一对应的场景信息,从所述至少两个第四MPD的URL中确定目标MPD的URL;
所述客户端向所述服务器发送第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
所述客户端接收来自所述服务器的第三MPD响应消息,所述第三MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL;
所述客户端根据所述目标视频分片的URL下载所述目标视频分片。
10.根据权利要求1所述的方法,其特征在于,在所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述客户端向服务器发送第二分片请求消息,所述第二分片请求消息中包括所述当前播放的视频分片的URL;
所述客户端获取至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述客户端接收来自所述服务器的第二分片响应消息,所述第二分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第二事件信息,所述第二事件信息包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
11.根据权利要求10所述的方法,其特征在于,所述第二事件信息还包括:至少两个第四MPD,以及与所述至少两个第四MPD一一对应的场景信息;
所述客户端根据所述目标感兴趣区域的场景推荐信息下载目标视频分片,包括:
所述客户端根据所述目标感兴趣区域的场景推荐信息和与所述至少两个第四MPD一一对应的场景信息,从所述至少两个第四MPD中确定目标MPD,所述目标MPD中包括所述目标视频分片的URL;
所述客户端根据所述目标视频分片的URL下载所述目标视频分片。
12.根据权利要求10所述的方法,其特征在于,所述第二事件信息还包括:至少两个第四MPD的URL,以及与所述至少两个第四MPD的URL一一对应的场景信息;
所述客户端根据所述目标感兴趣区域的场景推荐信息下载目标视频分片,包括:
所述客户端根据所述目标感兴趣区域的场景推荐信息和与所述至少两个第四MPD的URL一一对应的场景信息,从所述至少两个第四MPD的URL中确定目标MPD的URL;
所述客户端向所述服务器发送第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
所述客户端接收来自所述服务器的第三MPD响应消息,所述第三MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL;
所述客户端根据所述目标视频分片的URL下载所述目标视频分片。
13.根据权利要求10-12中任一项所述的方法,其特征在于,所述第二事件信息还包括:有效时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端在根据所述有效时间确定需要开始使用第四MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
14.根据权利要求1-5、7-8、10-12中任一项所述的方法,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
15.根据权利要求6所述的方法,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
16.根据权利要求9所述的方法,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
17.根据权利要求13所述的方法,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
18.根据权利要求1-5、7-8、10-12、15-17中任一项所述的方法,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
19.根据权利要求6所述的方法,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
20.根据权利要求9所述的方法,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
21.根据权利要求13所述的方法,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
22.根据权利要求14所述的方法,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,包括:
所述客户端根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
23.一种视频场景的切换方法,其特征在于,包括:
服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息;
其中,所述感兴趣区域的描述信息用于判断所述感兴趣区域是否为用户当前关注的区域,所述感兴趣区域的场景推荐信息为跟踪所述感兴趣区域的广角摄像机拍摄的视频场景的场景信息;
所述至少两个感兴趣区域的描述信息用于和用户当前观看视角确定目标感兴趣区域,所述目标感兴趣区域为用户当前关注的区域;
所述目标感兴趣区域的场景推荐信息用于所述客户端下载目标视频分片,所述目标视频分片与所述客户端当前播放的视频分片由不同的广角摄像机拍摄得到。
24.根据权利要求23所述的方法,其特征在于,在所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述服务器接收来自所述客户端的第一媒体描述文件MPD请求消息,所述第一媒体描述文件MPD请求消息中携带第一MPD的统一资源定位符URL;
所述服务器向所述客户端发送第一MPD响应消息,所述第一MPD响应消息中携带所述第一MPD,所述第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
25.根据权利要求23所述的方法,其特征在于,在所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述服务器接收所述客户端发送的第一分片请求消息,所述第一分片请求消息中包括所述当前播放的视频分片的URL;
所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述服务器向所述客户端发送第一分片响应消息,所述第一分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第一事件信息,所述第一事件信息包括第二MPD,所述第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
26.根据权利要求25所述的方法,其特征在于,所述第一事件信息还包括:有效时间;所述有效时间用于所述客户端确定需要开始使用所述第二MPD的时间。
27.根据权利要求23所述的方法,其特征在于,在所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述服务器接收所述客户端发送的第二MPD请求消息,所述第二MPD请求消息中携带第三MPD的URL;
所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述服务器向所述客户端发送第二MPD响应消息,所述第二MPD响应消息中携带所述第三MPD,所述第三MPD中包括:所述至少两个感兴趣区域的描述信息和场景推荐信息。
28.根据权利要求27所述的方法,其特征在于,所述第三MPD中还包括:更新时间;所述更新时间用于所述客户端确定需要更新所述第三MPD。
29.根据权利要求27或28所述的方法,其特征在于,所述第三MPD中还包括:至少两个第四MPD的URL以及与所述至少两个第四MPD的URL一一对应的场景信息,用于所述客户端从所述至少两个第四MPD的URL中确定目标MPD的URL;
在所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之后,还包括:
所述服务器接收所述客户端发送的第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
所述服务器向所述客户端发送第三MPD响应消息,所述第四MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL。
30.根据权利要求23所述的方法,其特征在于,在所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之前,还包括:
所述服务器接收所述客户端发送的第二分片请求消息,所述第二分片请求消息中包括所述当前播放的视频分片的URL;
所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息,包括:
所述服务器向所述客户端发送第二分片响应消息,所述第二分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第二事件信息,所述第二事件信息包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
31.根据权利要求30所述的方法,其特征在于,所述第二事件信息还包括:至少两个第四MPD,以及与所述至少两个第四MPD一一对应的场景信息,用于所述客户端从所述至少两个第四MPD中确定目标MPD,所述目标MPD中包括所述目标视频分片的URL。
32.根据权利要求30所述的方法,其特征在于,所述第二事件信息还包括:至少两个第四MPD的URL,以及与所述至少两个第四MPD的URL一一对应的场景信息,用于所述客户端从所述至少两个第四MPD的URL中确定目标MPD的URL;
在所述服务器向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息之后,还包括:
所述服务器接收所述客户端发送的第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
所述服务器向所述客户端发送第三MPD响应消息,所述第三MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL。
33.一种客户端,其特征在于,包括:获取单元、确定单元、下载单元和切换单元;
所述获取单元,用于获取至少两个感兴趣区域的描述信息和场景推荐信息,所述感兴趣区域的描述信息用于判断所述感兴趣区域是否为用户当前关注的区域,所述感兴趣区域的场景推荐信息为跟踪所述感兴趣区域的广角摄像机拍摄的视频场景的场景信息;
所述确定单元,用于根据用户当前观看视角和所述获取单元获取到的所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域,所述目标感兴趣区域为用户当前关注的区域;
所述下载单元,用于根据所述确定单元确定出的所述目标感兴趣区域的场景推荐信息下载目标视频分片,所述目标视频分片为跟踪所述目标感兴趣区域的广角摄像机拍摄的视频场景包括的、包含所述目标感兴趣区域的分片;
所述切换单元,用于将播放的内容,由当前播放的视频分片切换到所述下载单元下载到的所述目标视频分片,所述当前播放的视频分片与所述目标视频分片由不同的广角摄像机拍摄得到。
34.根据权利要求33所述的客户端,其特征在于,所述获取单元,具体用于:
向服务器发送第一媒体描述文件MPD请求消息,所述第一媒体描述文件MPD请求消息中携带第一MPD的统一资源定位符URL;
接收来自所述服务器的第一MPD响应消息,所述第一MPD响应消息中携带所述第一MPD,所述第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
35.根据权利要求34所述的客户端,其特征在于,所述下载单元,具体用于:
根据所述目标感兴趣区域的场景推荐信息和所述至少两个视频场景的场景信息,从所述至少两个视频场景的场景信息中确定目标场景信息;
根据所述目标感兴趣区域和所述目标场景信息,从所述第一MPD中确定所述目标视频分片的URL;
根据所述目标视频分片的URL下载所述目标视频分片。
36.根据权利要求33所述的客户端,其特征在于,还包括:发送单元;
所述发送单元,用于向服务器发送第一分片请求消息,所述第一分片请求消息中包括所述当前播放的视频分片的URL;
所述获取单元,具体用于接收来自所述服务器的第一分片响应消息,所述第一分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第一事件信息,所述第一事件信息包括第二MPD,所述第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
37.根据权利要求36所述的客户端,其特征在于,所述下载单元,具体用于:
根据所述目标感兴趣区域的场景推荐信息和所述至少两个视频场景的场景信息,从所述至少两个视频场景的场景信息中确定目标场景信息;
根据所述目标感兴趣区域和所述目标场景信息,从所述第二MPD中确定所述目标视频分片的URL;
根据所述目标视频分片的URL下载所述目标视频分片。
38.根据权利要求36或37所述的客户端,其特征在于,所述第一事件信息还包括:有效时间;
所述确定单元,具体用于在根据所述有效时间确定需要开始使用所述第二MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
39.根据权利要求33所述的客户端,其特征在于,还包括:发送单元;
所述发送单元,用于向服务器发送第二MPD请求消息,所述第二MPD请求消息中携带第三MPD的URL;
所述获取单元,具体用于接收来自所述服务器的第二MPD响应消息,所述第二MPD响应消息中携带所述第三MPD,所述第三MPD中包括:所述至少两个感兴趣区域的描述信息和场景推荐信息。
40.根据权利要求39所述的客户端,其特征在于,所述第三MPD中还包括:更新时间;
所述确定单元,具体用于在根据所述更新时间确定需要更新所述第三MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
41.根据权利要求39或40所述的客户端,其特征在于,所述第三MPD中还包括:至少两个第四MPD的URL以及与所述至少两个第四MPD的URL一一对应的场景信息;
所述下载单元,具体用于:
根据所述目标感兴趣区域的场景推荐信息和与所述至少两个第四MPD的URL一一对应的场景信息,从所述至少两个第四MPD的URL中确定目标MPD的URL;
向所述服务器发送第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
接收来自所述服务器的第三MPD响应消息,所述第三MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL;
所述客户端根据所述目标视频分片的URL下载所述目标视频分片。
42.根据权利要求33所述的客户端,其特征在于,还包括:发送单元;
所述发送单元,用于向服务器发送第二分片请求消息,所述第二分片请求消息中包括所述当前播放的视频分片的URL;
所述获取单元,具体用于接收来自所述服务器的第二分片响应消息,所述第二分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第二事件信息,所述第二事件信息包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
43.根据权利要求42所述的客户端,其特征在于,所述第二事件信息还包括:至少两个第四MPD,以及与所述至少两个第四MPD一一对应的场景信息;
所述下载单元,具体用于:
根据所述目标感兴趣区域的场景推荐信息和与所述至少两个第四MPD一一对应的场景信息,从所述至少两个第四MPD中确定目标MPD,所述目标MPD中包括所述目标视频分片的URL;
根据所述目标视频分片的URL下载所述目标视频分片。
44.根据权利要求42所述的客户端,其特征在于,所述第二事件信息还包括:至少两个第四MPD的URL,以及与所述至少两个第四MPD的URL一一对应的场景信息;
所述下载单元,具体用于:
根据所述目标感兴趣区域的场景推荐信息和与所述至少两个第四MPD的URL一一对应的场景信息,从所述至少两个第四MPD的URL中确定目标MPD的URL;
向所述服务器发送第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
接收来自所述服务器的第三MPD响应消息,所述第三MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL;
根据所述目标视频分片的URL下载所述目标视频分片。
45.根据权利要求42-44中任一项所述的客户端,其特征在于,所述第二事件信息还包括:有效时间;
所述确定单元,具体用于在根据所述有效时间确定需要开始使用第四MPD时,根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,从所述至少两个感兴趣区域中确定目标感兴趣区域。
46.根据权利要求33-37、39-40、42-44中任一项所述的客户端,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
47.根据权利要求38所述的客户端,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
48.根据权利要求41所述的客户端,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
49.根据权利要求45所述的客户端,其特征在于,所述场景信息包括所述视频场景的标识或拍摄所述视频场景的广角摄像机的标识。
50.根据权利要求33-37、39-40、42-44、47-49中任一项所述的客户端,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述确定单元,具体用于根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
51.根据权利要求38所述的客户端,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述确定单元,具体用于根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
52.根据权利要求41所述的客户端,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述确定单元,具体用于根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
53.根据权利要求45所述的客户端,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述确定单元,具体用于根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
54.根据权利要求46所述的客户端,其特征在于,所述感兴趣区域的描述信息包括所述感兴趣区域的标识、所述感兴趣区域的位置、所述感兴趣区域的尺寸、所述感兴趣区域的出现时间;
所述确定单元,具体用于根据用户当前观看视角和所述至少两个感兴趣区域的描述信息,将位置、尺寸和出现时间满足预设规则的感兴趣区域确定为所述目标感兴趣区域。
55.一种服务器,其特征在于,包括:发送单元;
所述发送单元,用于向客户端发送至少两个感兴趣区域的描述信息和场景推荐信息;
其中,所述感兴趣区域的描述信息用于判断所述感兴趣区域是否为用户当前关注的区域,所述感兴趣区域的场景推荐信息为跟踪所述感兴趣区域的广角摄像机拍摄的视频场景的场景信息;
所述至少两个感兴趣区域的描述信息用于和用户当前观看视角确定目标感兴趣区域,所述目标感兴趣区域为用户当前关注的区域;
所述目标感兴趣区域的场景推荐信息用于所述客户端下载目标视频分片,所述目标视频分片与所述客户端当前播放的视频分片由不同的广角摄像机拍摄得到。
56.根据权利要求55所述的服务器,其特征在于,还包括:接收单元;
所述接收单元,用于接收来自所述客户端的第一媒体描述文件MPD请求消息,所述第一媒体描述文件MPD请求消息中携带第一MPD的统一资源定位符URL;
所述发送单元,还用于向所述客户端发送第一MPD响应消息,所述第一MPD响应消息中携带所述第一MPD,所述第一MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
57.根据权利要求55所述的服务器,其特征在于,还包括:接收单元;
所述接收单元,用于接收所述客户端发送的第一分片请求消息,所述第一分片请求消息中包括所述当前播放的视频分片的URL;
所述发送单元,具体用于向所述客户端发送第一分片响应消息,所述第一分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第一事件信息,所述第一事件信息包括第二MPD,所述第二MPD中包括:至少两个视频场景的媒体描述信息和场景信息,所述至少两个视频场景的媒体描述信息中包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
58.根据权利要求57所述的服务器,其特征在于,所述第一事件信息还包括:有效时间;所述有效时间用于所述客户端确定需要开始使用所述第二MPD的时间。
59.根据权利要求55所述的服务器,其特征在于,还包括:接收单元;
所述接收单元,用于接收所述客户端发送的第二MPD请求消息,所述第二MPD请求消息中携带第三MPD的URL;
所述发送单元,具体用于向所述客户端发送第二MPD响应消息,所述第二MPD响应消息中携带所述第三MPD,所述第三MPD中包括:所述至少两个感兴趣区域的描述信息和场景推荐信息。
60.根据权利要求59所述的服务器,其特征在于,所述第三MPD中还包括:更新时间;所述更新时间用于所述客户端确定需要更新所述第三MPD。
61.根据权利要求59或60所述的服务器,其特征在于,所述第三MPD中还包括:至少两个第四MPD的URL以及与所述至少两个第四MPD的URL一一对应的场景信息,用于所述客户端从所述至少两个第四MPD的URL中确定目标MPD的URL;
所述接收单元,还用于接收所述客户端发送的第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
所述发送单元,还用于向所述客户端发送第三MPD响应消息,所述第四MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL。
62.根据权利要求55所述的服务器,其特征在于,还包括:接收单元;
所述接收单元,用于接收所述客户端发送的第二分片请求消息,所述第二分片请求消息中包括所述当前播放的视频分片的URL;
所述发送单元,具体用于向所述客户端发送第二分片响应消息,所述第二分片响应消息中包括:所述当前播放的视频分片,所述当前播放的视频分片包括第二事件信息,所述第二事件信息包括所述至少两个感兴趣区域的描述信息和场景推荐信息。
63.根据权利要求62所述的服务器,其特征在于,所述第二事件信息还包括:至少两个第四MPD,以及与所述至少两个第四MPD一一对应的场景信息,用于所述客户端从所述至少两个第四MPD中确定目标MPD,所述目标MPD中包括所述目标视频分片的URL。
64.根据权利要求62所述的服务器,其特征在于,所述第二事件信息还包括:至少两个第四MPD的URL,以及与所述至少两个第四MPD的URL一一对应的场景信息,用于所述客户端从所述至少两个第四MPD的URL中确定目标MPD的URL;
所述接收单元,还用于接收所述客户端发送的第三MPD请求消息,所述第三MPD请求消息中携带所述目标MPD的URL;
所述发送单元,还用于向所述客户端发送第三MPD响应消息,所述第三MPD响应消息中携带所述目标MPD,所述目标MPD中包括所述目标视频分片的URL。
CN201710296807.8A 2017-04-28 2017-04-28 一种视频场景的切换方法、客户端及服务器 Active CN108810600B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710296807.8A CN108810600B (zh) 2017-04-28 2017-04-28 一种视频场景的切换方法、客户端及服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710296807.8A CN108810600B (zh) 2017-04-28 2017-04-28 一种视频场景的切换方法、客户端及服务器

Publications (2)

Publication Number Publication Date
CN108810600A CN108810600A (zh) 2018-11-13
CN108810600B true CN108810600B (zh) 2020-12-22

Family

ID=64053229

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710296807.8A Active CN108810600B (zh) 2017-04-28 2017-04-28 一种视频场景的切换方法、客户端及服务器

Country Status (1)

Country Link
CN (1) CN108810600B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111225293B (zh) * 2018-11-23 2023-10-03 深圳市中兴微电子技术有限公司 一种视频数据处理方法、装置以及计算机存储介质
CN109714650B (zh) * 2018-12-18 2021-05-18 联想(北京)有限公司 一种数据处理方法及装置
CN111669604A (zh) * 2019-03-07 2020-09-15 阿里巴巴集团控股有限公司 一种采集设备设置方法及装置、终端、采集系统、设备
US20200288098A1 (en) 2019-03-07 2020-09-10 Alibaba Group Holding Limited Method, apparatus, medium, terminal, and device for multi-angle free-perspective interaction
CN112511866B (zh) * 2019-12-03 2024-02-23 中兴通讯股份有限公司 媒体资源播放方法、装置、设备和存储介质
CN116264640A (zh) * 2021-12-10 2023-06-16 华为技术有限公司 自由视角视频的视角切换方法、装置及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101690228A (zh) * 2007-06-29 2010-03-31 汤姆森许可贸易公司 视频编索引方法和视频编索引设备
CN101742096A (zh) * 2010-01-21 2010-06-16 中华电信股份有限公司 多视角互动电视系统与方法
CN104602129A (zh) * 2015-01-27 2015-05-06 三星电子(中国)研发中心 互动式多视角视频的播放方法及系统
CN104735464A (zh) * 2015-03-31 2015-06-24 华为技术有限公司 一种全景视频交互传输方法、服务器和客户端
JP6023850B2 (ja) * 2015-05-12 2016-11-09 川崎重工業株式会社 飛しょう体の誘導システム
CN106233745A (zh) * 2013-07-29 2016-12-14 皇家Kpn公司 向客户端提供瓦片视频流
CN106254916A (zh) * 2016-08-09 2016-12-21 乐视控股(北京)有限公司 直播播放方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101699862B (zh) * 2009-11-16 2011-04-13 上海交通大学 Ptz摄像机获取感兴趣区域高分辨率图像的方法
JP5287706B2 (ja) * 2009-12-25 2013-09-11 ソニー株式会社 撮像装置、撮像装置の制御方法及びプログラム
CN103049934A (zh) * 2012-12-13 2013-04-17 航天科工仿真技术有限责任公司 三维视景仿真系统中的漫游模式实现方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101690228A (zh) * 2007-06-29 2010-03-31 汤姆森许可贸易公司 视频编索引方法和视频编索引设备
CN101742096A (zh) * 2010-01-21 2010-06-16 中华电信股份有限公司 多视角互动电视系统与方法
CN106233745A (zh) * 2013-07-29 2016-12-14 皇家Kpn公司 向客户端提供瓦片视频流
CN104602129A (zh) * 2015-01-27 2015-05-06 三星电子(中国)研发中心 互动式多视角视频的播放方法及系统
CN104735464A (zh) * 2015-03-31 2015-06-24 华为技术有限公司 一种全景视频交互传输方法、服务器和客户端
JP6023850B2 (ja) * 2015-05-12 2016-11-09 川崎重工業株式会社 飛しょう体の誘導システム
CN106254916A (zh) * 2016-08-09 2016-12-21 乐视控股(北京)有限公司 直播播放方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
AN INTERACTIVE REGION-OF-INTEREST VIDEO STREAMING SYSTEM FOR ONLINE LECTURE VIEWING;ditya Mavlankar et al.;《IEEE》;20101014;图1 *

Also Published As

Publication number Publication date
CN108810600A (zh) 2018-11-13

Similar Documents

Publication Publication Date Title
CN108810600B (zh) 一种视频场景的切换方法、客户端及服务器
EP3510438B1 (en) Method and apparatus for controlled observation point and orientation selection audiovisual content
EP3466091B1 (en) Method, device, and computer program for improving streaming of virtual reality media content
RU2711591C1 (ru) Способ, устройство и компьютерная программа для адаптивной потоковой передачи мультимедийного контента виртуальной реальности
EP3459252B1 (en) Method and apparatus for spatial enhanced adaptive bitrate live streaming for 360 degree video playback
US20210250568A1 (en) Video data processing and transmission methods and apparatuses, and video data processing system
US11539983B2 (en) Virtual reality video transmission method, client device and server
US11451838B2 (en) Method for adaptive streaming of media
US20200145736A1 (en) Media data processing method and apparatus
US20230169719A1 (en) Method and Apparatus for Processing Immersive Media Data, Storage Medium and Electronic Apparatus
CN108810567B (zh) 一种音频与视频视角匹配的方法、客户端和服务器
CN110798707B (zh) 传输媒体数据的方法、客户端和服务器
CN107438203B (zh) 用于建立和接收清单的方法、网络设备及终端
CN110662119A (zh) 一种视频拼接方法及装置
CN108401163B (zh) 一种实现vr直播的方法、装置及ott业务系统
CN108574881B (zh) 一种投影类型推荐方法、服务器及客户端
CN114513702A (zh) 基于Web的分块全景视频处理方法、系统及存储介质
EP3777219B1 (en) Method and apparatus for signaling and storage of multiple viewpoints for omnidirectional audiovisual content
WO2023194648A1 (en) A method, an apparatus and a computer program product for media streaming of immersive media
Iwai et al. Multiple‐channel streaming delivery for omnidirectional vision system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant