CN104661098A - 方法、服务器、客户端和软件 - Google Patents

方法、服务器、客户端和软件 Download PDF

Info

Publication number
CN104661098A
CN104661098A CN201410636159.2A CN201410636159A CN104661098A CN 104661098 A CN104661098 A CN 104661098A CN 201410636159 A CN201410636159 A CN 201410636159A CN 104661098 A CN104661098 A CN 104661098A
Authority
CN
China
Prior art keywords
fragment
client device
image
parameter
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410636159.2A
Other languages
English (en)
Other versions
CN104661098B (zh
Inventor
迈克尔·约翰·威廉斯
大卫·瓦格
克里夫·亨利·吉尔拉德
罗伯特·马克·斯特凡·波特
理查德·库珀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104661098A publication Critical patent/CN104661098A/zh
Application granted granted Critical
Publication of CN104661098B publication Critical patent/CN104661098B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了方法、服务器、客户端和软件。客户端设备包括：通信单元，被配置为接收多个参数，该参数限定服务器上存储的图像的片段，其中片段部分地重叠；处理单元，被配置为允许根据客户端设备上的限定视图选择图像的片段并且其中在选择时片段可从服务器下载；以及显示器，被配置为将从可接收的片段截取的图像的剪切图显示在客户端设备上。

Description

方法、服务器、客户端和软件
相关申请的交叉引用
本申请要求于2013年11月15日提交的英国专利申请GB1320217.1的优先权，通过引用将其全部内容结合于本文中。
技术领域
本发明涉及方法、服务器、客户端和软件。
背景技术
本文所提供的“背景技术”说明是用于一般性地呈现本发明的背景之目的。在此背景段落，以及在申请时可能不被认定为现有技术的说明观点中所述范围内的目前所指名发明人的工作，并未被明确地或暗示地认可作为相对本发明的现有技术。
已知从高分辨率图像中产生具有低分辨率的剪切图(cut out)。然后这些剪切的图像经由网络可广播给许多用户设备。这些网络可以是广播网或局域网或广域网。然而，在这种情况下，每个设备的用户将仅能够观看广播流。换言之，用户不能控制剪切图的位置并因此不能控制他们的虚拟相机视图。
本发明的实施方式的一个目的就是解决这个问题。
发明内容
根据本发明的实施方式，提供一种客户端设备，包括：通信单元，被配置为接收多个参数，该参数限定服务器上存储的图像的片段，其中片段部分地重叠；处理单元，被配置为允许根据客户端设备上限定的视图选择图像片段，并且其中在选择时片段是可从服务器下载的；以及显示器，被配置为将从可接收的片段截取的图像的剪切图显示在客户端设备上。
片段之间重叠的量可大于图像的剪切图。
多个片段可以是相同的尺寸。
多个片段可以是高清晰度图像。
多个片段的分辨率可小于图像的分辨率。
剪切图可使用与用于限定片段的那些参数相同的参数来限定并且处理单元进一步可操作为通过比较剪切图的参数值与片段的参数值并且选择具有与剪切图的值最接近的值的片段来选择片段。
设备可进一步包括存储单元，该存储单元被配置为存储图像的剪切图的参数并将存储的参数经由通信单元送回服务器。
设备可包括基于送回的参数收取广告收入。
片段可由标识片段的位置的统一资源标识符以及唯一地标识要求下载的片段的图片组的时间标识符来限定。
通信单元可进一步被配置为在客户端设备处接收包含不同数量图像的片段的第二组片段的参数，并且根据客户端设备上限定的视图从第一组片段或第二组片段中选择图像片段。
根据其它实施方式，提供一种服务器，该服务器包括：通信单元，被配置为将多个参数发送至客户端设备，该参数限定服务器上存储的图像片段，其中片段部分地重叠；以及处理单元，被配置为用于经由通信单元接收用于根据客户端设备上限定的视图选择的图像片段的请求并且，在使用中，将图像片段上载到客户端。
片段之间重叠的量可大于客户端设备上限定的视图。
多个片段可以是相同的尺寸。
多个片段可以是高清晰度图像。
多个片段的分辨率可小于图像的分辨率。
限定的视图可使用与用于限定片段的那些参数相同的参数并且处理单元进一步可操作为通过比较限定的视图的参数值与片段的参数值并且选择具有与限定的视图的值最接近的值的片段来选择片段。
通信单元可被配置为从客户端设备接收期望视图的参数。
服务器可包括基于送回参数收取广告收入。
片段可由标识片段的位置的统一资源标识符以及唯一地标识要求上载的片段的图片组的时间标识符来限定。
通信单元可被配置为将包含不同数量图像的片段的第二组片段的参数发送到客户端设备，并且根据客户端设备上限定的视图发送来自第一组片段或第二组片段中的图像片段。
根据其它实施方式，公开一种在客户端设备上显示服务器上存储的图像的剪切图的方法，包括以下步骤：在客户端设备处接收多个参数，该参数限定服务器上存储的图像片段，其中片段部分地重叠；根据客户端设备上限定的视图选择图像片段并从服务器上下载图像片段；并且将从所接收的片段截取的图像的剪切图显示在客户端设备上。
片段之间重叠的量可大于图像的剪切图。
多个片段可以是相同的尺寸。
多个片段可以是高清晰度图像。
多个片段的分辨率可小于图像的分辨率。
剪切图可使用与用于限定片段的那些参数相同的参数来限定并且选择片段的步骤包括比较剪切图的参数值与片段的参数值并且选择具有与剪切图的值最接近的值的片段的步骤。
该方法可进一步包括存储图像的剪切图的参数，并将存储的参数送回到服务器。
该方法可进一步包括基于送回的参数收取广告收入。
片段可由标识片段的位置的统一资源标识符以及唯一地标识要求下载的片段的图片组的时间标识符来限定。
该方法可进一步包括在客户端设备处接收包含不同数量的图像片段的第二组片段的参数，并且根据客户端设备上限定的视图从第一组片段或第二组片段中选择图像片段。
根据其它实施方式，一种向客户端设备提供至少一个服务器上存储的图像片段的方法，该方法包括以下步骤：发送多个参数到客户端设备，该参数限定服务器上存储的图像片段，其中片段部分地重叠；以及接收根据客户端设备上限定的视图选择图像片段的请求并上载图像片段到客户端。
片段之间重叠的量可大于客户端设备上限定的视图。
多个片段可以是相同的尺寸。
多个片段可以是高清晰度图像。
多个片段的分辨率可小于图像的分辨率。
限定的视图可使用与用于限定片段的那些参数相同的参数来限定并且选择片段的步骤包括比较限定的视图的参数值与片段的参数值并且选择具有与限定的视图的值最接近的值的片段的步骤。
该方法可进一步包括接收来自客户端设备的期望视图的参数。
该方法可进一步包括基于送回的参数收取广告收入。
片段可由标识片段的位置的统一资源标识符(Unique ResourceIdentifier)以及唯一标识要求下载的片段的图片组(Group of Pictures)的时间标识符来限定。
该方法可进一步包括发送包含不同数量的图像的片段的第二组片段的参数到客户端设备，并且根据客户端设备上限定的视图发送来自第一组片段或第二组片段中的图像片段。
前述段落被是以一般性介绍的方式提供的，并不旨在限制以下权利要求的范围。通过参考以下结合附图的具体说明，将更好地理解所描述的实施方式及其另外的优点。
附图说明
当结合附图考虑时，通过参照以下具体实施方式，将容易地容易获得本发明更全面的理解及其许多附带优点，并且本发明及其优点将会变得更好理解，在附图中：
图1示出了根据本发明的实施方式的系统；
图2示出了图1中示出的客户端；
图3示出了图1中示出的服务器；
图4示出了具有三个标志点(landmark point)的简单的超高清晰度图像；
图5A至图5B示出了从图4的图像截取的图像块(image tile图像片)和提供至图2的客户端的指示的虚拟相机视图；
图6A至图6H示出了从图4的图像截取的多个图像块以及提供至图2的客户端的各种指示的虚拟相机视图；
图7A至图7F示出了从图4的图像截取的多个图像块以及提供至图2的客户端的各种指示的虚拟相机视图；
图8A和图8B示出了用户使用图2的客户端缩小图7F的图像；
图9示出了图2的客户端内存储的块地图(tile map)；
图10示出了存储在服务器中存储的图像块及其位置之间的关联；
图11示出了存储在客户端中的图像块和其位置之间的关联；
图12示出了客户端设备的用户的最初注册的流程图；
图13示出了在客户端设备上对将要观看的事件的选择的流程图；以及
图14示出了说明客户端设备的操作的流程图。
具体实施方式
现在参照附图，其中相同的参考标号贯穿几个视图表示相同或者相应部分。
参照图1，示出了根据本公开的实施方式的系统100。在系统100中，服务器300被连接至因特网110。此外，路由器120同样被连接至因特网110。如将理解的，路由器120使设备能够连接至因特网110。在这种情况下，路由器120是位于用户家中的家用路由器。当然，路由器120可以是允许任何装置连接至因特网110的任何设备。在这种情况下，路由器120被连接至设备200，因此设备200连接到因特网110。在这种情况下，设备是通过因特网110连接到服务器300的客户端设备。尽管可设想是任何客户端设备，但在这种情况下，客户端设备200是如平板电脑的便携式客户端设备。平板电脑可以是运行Android操作系统的XperiaZ。然而，可设想是任何平板电脑设备、智能手机、笔记本电脑、或实际上任何的客户端设备。
参照图2，示出了平板电脑200(客户端设备)的框图。通信单元210被连接至天线205。在实施方式中，通信单元210使用如IEEE802.11g/n标准的WiFi与路由器120通信。天线205可以是MIMO类型天线以减少干扰。当然，可设想是任何类型的有线或无线协议。实际上，可设想为使客户端设备200能够与服务器300直接地或经由如因特网的网络通信的任何东西。
通信单元210被连接至控制器220。控制器220使用包括计算机可读指令的计算机程序操作。控制控制器230的计算机程序存储在也连接至控制器220的存储器225上。存储器225可以是任何种类的存储介质，如固体存储器、或实际上，可设想是光学的或磁性可读存储器等。同样连接至控制器220的是触摸屏230。触摸屏230是允许用户控制平板电脑200的用户界面。在实施方式中，平板电脑200具有“捏拉缩放”功能。随后对此进行说明。当然，可使用任何种类的用户界面。
控制器220同样连接至图形处理器单元(GPU)215。GPU 215是具体被配置为处理图像的处理单元。在实施方式中GPU 215完全是可选的。此外，连接至GPU 215的是显示器235。显示器的尺寸可改变。例如，在Z平板电脑中，显示器是10.1英寸的并具有1920x1200像素的分辨率。
参考图3，示出了根据本公开的实施方式的服务器300。在服务器300中提供存储器305。存储在存储器305内的是视频块。随后对这些进行说明。此外，可将其他视频流存储在存储器305中。此外，可将广告或者静止图像，或者实际上任何内容存储在存储器305中。存储器305可以是固体存储器、或磁的或光学可读存储器或它们的组合。
提供服务器控制器320。服务器控制器320是控制服务器300的操作的处理器。此外，服务器控制器320进行图像处理以生成存储在存储器305内的图像块(或片段)。使用计算机程序控制服务器控制器320。计算机程序包括当上载到服务器控制器320时使得服务器控制器320执行如随后将说明的某些步骤的计算机可读指令。
同样连接至服务器控制器320的是用户数据库310。用户数据库310存储关于连接至服务器300的用户的细节。随后对此进行说明。此外，视频数据库315被连接至服务器控制器320。视频数据库315存储视频块的地址并且将地址与存储器305内存储的合适的视频块(或任何其他内容)相关联，如随后将说明的。
同样连接至服务器控制器320的是通信电路325。通信电路325将服务器300连接到因特网110并与客户端设备200通信。
图4示出了图像400。图像400包括足球场410和周围区域420。图像内是三个标识点430、440、和450。第一个标识点430(表示为图中的“X”)是用户可选图标。第二标识点440和第三标识点450(表示为图中“Y”和“Z”)是用户特定内容。这些标识点是内容提供者预先选择的并且他们的位置被存储在图9中示出的块地图内。将变得显而易见的是，块地图是限定图像中的片段的一组坐标。
在实施方式中，图像400是超高清晰度图像。就是说，图像400由缝合在一起的两个图像组成。具体地，在实施方式中，图像由缝合在一起的两个4K图像组成。这意味着图像400具有8192x2160像素的分辨率。明显地，可使用任何种类的图像或者任何尺寸的图像。
参照图9，参考视频块地图来说明视频块。图9的视频块地图存储在客户端设备200的存储器225内。这些块地图特定于任何具体流并且在内容之前下载。块地图是限定图像的片段(或块)的一组俯仰(pitch)、缩放(zoom)和偏航(yaw)值。这些俯仰、偏航、和缩放值是当从图像400中剪切块时将施加于虚拟相机的值。用于计算俯仰、缩放、和偏航的方法是已知的并且在2013年4月4日提交的GB1306050.4以及2013年9月10日提交的GB1316102.1中公开。这些文件的内容通过引用结合于此。俯仰、偏航、和缩放值是限定图像400的块(或片段)的参数的实例。
如上所述，第一标识点430、第二标识点440、和第三标识点450的俯仰、偏航、和缩放同样存储在块地图中。视频块布置成层。在实施方式中这些块不管在哪层都是相同的尺寸和分辨率并且可以是任何尺寸或分辨率。然而，对于本公开内容的整个范围来说这并不一定。例如，块可以是高清晰度块。就是说，每个块可具有1920x1080像素的分辨率。此外，尽管图9示出了仅在水平方向上重叠的块，但这只是为了便于说明。同样意在块在水平方向和垂直方向都重叠并给出图像中所有方向的以下说明的优点。可替换地，块的尺寸取决于客户端设备的显示分辨率，如将显然的。尽管不是必需的，但优选的是块的分辨率符合可接受的标准尺寸，以保证高效率的编解码器用于高效的存储和传输。换言之，块的尺寸是存在常规的编解码器的尺寸。高清晰度实例是可接受的标准尺寸的块。
这些层与图像400内的不同的缩放级别相对应。就是说，在层1中，一个块覆盖图像400并因此，虽然在减小的分辨率下，但块的内容是整个图像400。换言之，图像400的内容是以块的分辨率而不是以超高清晰度分辨率提供的。
在层2中，图像400被分成多个重叠的块。因为层之间的块的分辨率相同，并且因为图像400在层2中比在层1中分成更多块，所以层2内的两个块中每个的内容包括图像400的不同的片段(除随后将说明的重叠部分之外)。这意味着层2中的块A的内容包括图像的左侧并且层2中的块B的内容包括图像400的右侧。因此，当与层1中的块的内容相比时，层2中的每个块片段的内容看起来放大了。
类似地，在层3中，图像400被分成均具有与层1或层2中的各块分辨率相同分辨率的六个重叠的块。因此，层3中的每个块的内容是层1或层2中每个中的内容的更加放大的版本。
因此，可总结为不同层均包含不同数量的块。不管哪层，所有块的分辨率是相同的。因此，包括在层中的块越多，对图像400的块内出现的内容“缩放”越大。如以上说明的，同样需要着重注意的是，在此每个块的视图具有与其相关的缩放值、俯仰值、和偏航值。换言之，每层内的每个块与虚拟相机获取部分或图像400相似。俯仰、偏航、和缩放的量必须适用于虚拟相机以便获取使用已知的技术确定这些视场，如2013年4月4日提交的GB 1306050.4以及2013年9月10日提交的GB 1316102.1中描述的已知技术，其整个内容通过引用结合于此。缩放值、俯仰值、和偏航值存储在与块相关联的客户端设备200中。图像的块被预处理并存储在服务器上。
如随后将说明的，当客户端设备200请求服务器300提供不同的块时，客户端设备的用户可放大图像400。换言之，客户端设备200从显示层1的块的内容开始并且如果用户希望放大图像，客户端设备200请求来自层2的合适块并且然后是层3以便允许用户放大图像，从而控制图像400周围的虚拟相机的变焦。换言之，客户端设备200同样生成由服务器300提供至其的块的虚拟相机视图。再次，确定客户端侧虚拟相机参数(缩放、俯仰、和偏航)的技术是使用如2013年4月4日提交的GB 1306050.4以及2013年9月10日提交的GB 1316102.1中公开的已知技术确定的。具体地，客户端设备200上捏拉控制控制客户端侧虚拟相机的变焦轴并且滑动动作控制客户端侧虚拟相机的俯仰轴和偏航轴两者。
将参照图5、图6和图7更详细地说明块。
参照图5A，图像400提供为一个块片段500。在附图的编号中，块的名称表示标识层内的各个块的唯一字母以及层数。所以，在图5A中，图像400包含在一个块500内。这个块是“块A1”(或是层1中的块A)。在图5A中，虚线框510提供在块500内。虚线框510表示被显示在客户端设备200上的视图。如随后将说明的，服务器300将块的内容提供到客户端设备200并且客户端设备200将提取块的合适部分以显示给用户。然而，已包括虚线框510以帮助说明。
参照图5B，示出客户端设备200的屏幕。可以看出，图5A中的虚线框的内容被显示给客户端设备200的用户。
试想一下，客户端设备200的用户希望放大图像400的第一标识点(点X)430。用户将在第一标识点430周围的触摸屏230上执行“捏拉缩放”动作。在具体情况中，用户将滑动屏幕来平移(pan)图像400的周围以将第一标识点430与视图的中心对齐。一旦达到期望视图，施加增加客户端侧虚拟相机的变焦参数的捏拉缩放，并因此放大视图的中心。
参照图6A，虚线框605示出被显示在客户端设备200上的图像400的部分。然而，当客户端设备200的用户进行这样的缩放时，并且如随后将说明的，客户端设备200确定从层2中要求的块。换言之，客户端设备200的用户想要比使用层1中的块A可得到的更加详细的第一标识点(点X)430的视图。因此，当缩放动作发生时，客户端设备200请求层2中的块。
在实施方式中，这是通过客户端设备200从存储在存储器225中的块了解到每个块的缩放值、俯仰值、和偏航值来实现的。然后，客户端设备200将其显示器上示出的客户端侧图像的缩放、俯仰、和偏航与存储的块的缩放、俯仰、和偏航。然后，客户端设备200检索具有较接近客户侧当前被显示的块的缩放值、俯仰值、和偏航值的缩放、俯仰、和偏航的块。重要的是应注意，当客户端设备200上显示的视图不适合块视图内时客户端设备200将切换到不同块。
同样重要的是应注意，在块生成的时候，服务器300确保块之间存在充分的重叠以允许客户端设备200的视图适合在重叠区域内。
此外，客户端设备200将仅具有比与特定块相关的缩放级别更高的缩放级别。因此，当搜索新块时，客户端设备200只可以寻找具有比与客户端设备200相关的当前缩放级别更低的缩放级别的块。这就减少了客户端设备200的处理需求。
此外，客户端设备200采用如线性方案或卡尔曼滤波器的预测方案以便预测下一个需要下载的块。具体地，在图6A中并且在层2中，图像400被分成两个块，块A2和B2。这里，块A2具有两个部分。块A2的第一部分610覆盖图像400的左侧并且块A2的第二部分615覆盖更中心的位置。块A2的第二部分与块B2的第二部分重叠。块B2的第一部分覆盖图像400的右侧。因此，客户端设备200从服务器300内的存储器305中检索块A2。如图6B所示，虚线框605A显示在客户端设备200上。可以看出，第一标识点(点X)430在客户端设备200的显示器上看起来更大。
尽管图6A中没有明确地示出，但如上所述，两个块(块A2和块B2)设置有缩放值、俯仰值、和偏航值。这些值表示从图像400中捕获的块的图像的虚拟相机的缩放值、俯仰值、和偏航值。换言之，块的缩放值、俯仰值、和偏航值是虚拟相机从图像400中捕获块的图像那些值。如技术人员理解的，两个透视图之间的关系是由单应性限定的。块视图是由相对于图像400的缩放、俯仰、和偏航限定的并且客户端设备视图是由缩放、俯仰、和偏航限定的。在这种情况下单应性转换是由客户端设备200视图和具体块的缩放、俯仰、和偏航之间的缩放、俯仰、和偏航的差值来计算的。
下面，如果客户端设备200的用户滑动触摸屏，客户端设备200的用户可以以这个缩放级别在图像400周围移动。因此，如果我们假定客户端设备200的用户将视图向右移动，那么显示给用户的视图将改变。具体地，我们可以假定客户端设备200的用户“滑动”触摸屏使得显示给用户的视图是图6C中的新的虚线框605。换言之，现在客户端设备200的用户观察第二标识点(点Y)440。这个视图在图6D中示出。
因为客户端设备200知道虚线框(图6A中的位置)起始缩放、俯仰、和偏航的客户端侧参数，所以客户端设备200计算新的虚线框605的客户端侧缩放、俯仰、和偏航。在此应该注意，用户已将他们的视图移动到块A2的第二区域615里。换言之，指示客户端设备200上显示的图像的虚线框605是从块A2和块B2之间的重叠区域截取的。
为了确保客户端设备200的用户可连续流畅地向右滚动，客户端设备200请求块B2从服务器300提供至客户端设备200。在此重要的是注意为了使客户端设备200具有下载下一个块的时间，虚线框605的尺寸必须小于重叠区域615。如果虚线框大于重叠区域，那么客户端设备200将不能显示块之间的中间视图的完整图像。
当客户端设备200的用户滚动到图6E中示出的区域时，块B2的内容是从服务器300下载的并且客户端设备200可显示如由虚线框605示出的和图6F示出的第三标识点450。这是因为图6F中的虚线框605的内容是由块B2而不是块A1提供的。
然后用户继续向图像400的右边移动。如在图6G中可以看出，虚线框605是来自块B2的第一(非重叠)部分。显示的视图在图6H中示出。
现在参照图7A，示出图像400被分成层3的六个块的视图。具体地，图像400被分成块A3、B3……F3。这些块中的每个具有两个部分。每个块的第一部分，与如上参照图6A至图6H所述的相似，覆盖图像400的区域。第二部分与之前的块重叠使得当用户控制客户端设备200上的视图并且虚线框705有效地在整个图像400移动时，视图中的下一个块可从服务器300下载到客户端设备200。然后客户端设备200显示来自块的合适剪切图。
所以，在图7A中，虚线框705指示客户端设备200的用户正观看第一指示点430。重要地，这个附图中虚线框705的位置指示客户端设备200的用户在图6A中虚线框605的位置上进行了捏拉缩放操作。为了便于参考，在图7A中示出虚线框705的坐标。具体地，在用户进行捏拉缩放操作时，虚线框705的缩放、俯仰、和偏航对于客户端设备200是已知的。说明性地，当虚线框705在图像400中较小时，这表示客户端设备200的用户已放大的更接近第一指示点430。换言之，当用户已放大第一指示点430时，客户端设备200从服务器300检索块A3。就是说，客户端设备200从层3中检索块A。显示给用户的这个放大视图在图7B中示出。
再次，用户继续以相同的缩放级别向右滚动。虚线框705表示用户位于第二指示点440上。如将清晰可见的，当用户在整个图像400移动时客户端设备200将具有从服务器300请求的块D3。第二指示点440位于块E3的第一部分和块D3的第二部分。换言之，第二指示点440位于块D3和块E3之间的重叠部分。因此，现在客户端设备200从服务器300中检索块E3。客户端设备200上的视图在图7D中示出。
再次，用户继续以相同的缩放级别向右滚动。虚线框705表示用户位于第三指示点450上。如将清晰可见的，当用户在整个图像400上移动时客户端设备200将具有从服务器300请求的块E3。第三指示点450位于块F3的第一部分和块E3的第二部分。换言之，第三指示点450位于块E3和块F3之间的重叠部分。因此，现在客户端设备200从服务器300中检索块F3。客户端设备200上的视图在图7F中示出。
图8A示出了图7F的客户端设备200上的视图，客户端设备200的用户希望将其缩小。用户的手805位于触摸屏230上。用户的手805在点815和点820处触摸屏幕。点810在点815和点820之间是等距的。当用户在箭头的方向上(即向着点810)移动他的或她的手指时，显示的图像将看起来缩小并且图8B示出显示在客户端设备200上的图像。
图10示出了存储在服务器300内的表。具体地，表(table)示出了存储在存储器305内的视频块位置和视频文件的名称之间的关联。该表示出了标识存储视频块的存储器305的唯一地址的统一资源定位器(URL)。一般来说，URL同样可以是统一资源标识符(URI)。表存储在服务器300的视频数据库315内。当然，尽管这个实施方式为了简便起见只提及单个服务器，但内容将可存储在多个服务器上。这些服务器可以构成所谓的“云服务”的部分。尽管内容可以以任何方式分布在服务器之中，但每个服务器将提供块流的子集。通过提供来自多个服务器的块流，连接至该服务的客户端设备200的数目是可伸缩的。
在客户端设备200的操作过程中，客户端设备200从合适的URL下载块。块存储为MPEG4-AVC基本流和伴随索引文件，该伴随索引文件指定其在每个关键帧的流中的位置。当然，尽管如此，但块可存储为任何合适的图像文件。此外，应该注意，针对节目持续时间存储视频的内容。这允许用户不仅控制虚拟相机位置而且用户也可以回退、暂停、以及快进通过内容。通过唯一地标识内容内的每个帧(或图片组)，允许每个用户具有暂停、快进、以及回退通过内容的帧的精确控制。在URL中的“：”之后提供帧(或图片组)数。
图11示出了客户端设备200内存储的表。具体地，图11的表存储在客户端设备200的存储器225内。图11的表是在客户端设备200上观看节目之前从服务器300的视频数据库315下载的。表示出了块名称和存储块的URL。此外，如将指明的，URL包括查询<插入时间>。如随后将说明的，客户端设备200从计数器中检索这个值。因此服务器300已知从服务器300检索的图片组。具体地，因为只可以在图片组/关键帧分界线上切换块流，所以检索图片组。在实施方式中，图片组的长度是15个帧(或0.5秒)。因此，当块流之间的切换仅可发生在图片组/关键帧分界线上时，存在至少0.5秒的切换延迟。
另外在表中提供与每个块有关的缩放值、俯仰值、和偏航值。需要块的这些参数值以便客户端设备200可确定从服务器300要求哪个块。
尽管在图中没有具体示出，但同样提供第一指示点到第三指示点的坐标。坐标可以是真实世界3D位置或图像400中2D坐标中的任意一个。实际上可以使用可以容易地转换成客户端设备200的视图的任何不变的坐标。此外，在第一指示点(用户可选图标)的情况下，提供图标的URL以便当第一指示点被显示给用户时，客户端设备200可从服务器300检索图标。此外，URL可重新指导用户到不同的内容流(例如在图像400的内容内跟随特定播放器的广播流内容)以在客户端设备200上显示。这个播放器的视图可使用播放器跟踪信息被提供为图像400的虚拟相机视图。可替换地，这个视图可来自专用相机。作为另一实例，在如奥林匹克的综合事件中，用户可将设置有体育场视图。然后用户可浏览(navigate)和/或缩放体育场周围标识发生在体育场中的不同事件。然后用户可以在客户端视图内选择特定的指示点。然后这个选择将使用与标识点有关的URL重新路由到特定的广播视频流的用户。实际上，如果没有可用的当前直播，然后将此通知客户端设备200的用户或者基于用户或特定的选择事件将客户端设备200重新路由到替代内容。在一些实施方式中，特定标识点的选择可以是触摸触摸屏上的标识点或者可以通过将标识点放大超出某个缩放级别来选择。此外，对于第二指示点和第三指示点，这是具体提供给用户的内容。如随后将说明的，第二指示点和第三指示点可包括以客户端设备200的用户为具体目标的广告内容。然后客户端设备200的用户可选择这样广告，该广告可将用户重新指引向如广告商的网站的不同的URL。这可以产生用户具体元数据，该元数据对于广告商获得与特定广告的影响相关的数据或确定收入金额以及广告商须付给广播节目或服务提供者的金额是有用的。图12示出了说明系统的初始操作的流程图1200。在步骤S1205中处理开始。然后客户端设备200的用户注册系统。用户提供唯一识别一个用户与另一个用户的唯一参考。可以是电子邮件地址、唯一的用户名等。例如，用户可以使用他们的Sony网络用户名或他们的Android用户名注册。在注册过程中，可收集用户细节，如支付细节、会员卡细节等。实际上，可询问用户问题以确定他们的个人爱好和购物习惯。这可在注册时收集，或者从用户可能预订的任何忠诚方案或用户注册过程中与用户联接的任何社交媒体账户中收集。这些信息存储在位于服务器300的用户数据库310内。
注册成功之后，在步骤1220中将应用程序下载到客户端设备200。换言之，下载需要配置客户端设备200的软件并且将其存储在客户端设备200的存储器225内。
然后在步骤1225中完成初始的注册过程。
图13示出了说明当客户端设备的用户希望观看节目时系统操作的流程图1300。流程图开始于步骤1305。客户端设备200的用户登录他们在图12的初始注册过程中创建的账户。然后在步骤1315中允许用户选择将要观看的事件。选择可以是根据用户先前的事件的建议或者可以被限制到一定年龄分布等。
在用户选择事件之后，服务器300从视频数据库315选择合适的块地图。在步骤1320中将块地图下载到客户端设备200。如说明的，块地图是图11中示出的表。这存储在客户端设备200的存储器225中。
然后处理结束于步骤1330。
图14示出了说明客户端设备200的操作的流程图1400。流程图开始于步骤1405。客户端设备200在步骤1410中起动帧计数器。每次客户端设备显示新GOP时GOP计数器增加。这允许客户端设备200从服务器300请求具有帧准确度的正确块。客户端设备200在步骤1415中从服务器300下载第一块。尽管本公开没有这样限制并且任何块都可以自动地或通过用户偏好被选择为最初块，但这个实例中的第一块是块A1。
然后客户端设备200确定用户是否已触摸触摸屏230。这是步骤1420。当然，如果客户端设备200是使用鼠标或者其他输入设备操作的，那么客户端设备200将确定用户是否已进行任何输入操作。如果用户没有执行输入，那么客户端设备200将等待直至接收到这样的输入。实际上，尽管附图示出了循环返回步骤1420，但客户端设备将增加GOP计数器并将从服务器300检索该块的下一个GOP。这意味着每0.5秒左右进行一次服务器要求。
如果客户端设备200确定用户已触摸触摸屏230，那么客户端设备200在步骤1425中确定用户是否已触摸(就是说，选择)一个指示点。如果用户已选择一个指示点，则沿着是路径，并且客户端设备200到用于存储在存储器225中的该指示点的URL。这出现在步骤1430中。在步骤1435中帧存储计数器的值，使得在用户希望返回到应用程序时，客户端设备200将从服务器300检索最后的帧。在用户返回应用程序时，块值是否同样存储，或者客户端设备200是否从最初块开始是可选择的。
此外，尽管在附图中没有具体示出，客户端设备200存储示出给客户端设备200的用户的视图的坐标。换言之，对于每个帧，客户端设备200存储图4至图6中示出的虚线框的坐标。这个缩放、俯仰、偏航数据可上载到服务器300并且，如果上载，这会存储在用户数据库310中。分析坐标数据以为每个用户确定他们的喜欢的视图以及显示给用户的指示点所处的任何场面。这使得能够从广告商领取任何广告收入。然后处理将结束于步骤1445。此外，坐标数据可用于生成用户驱动元数据，如生成定义为被观看的视图平均值的伪广播反馈。
那么返回步骤1425，如果用户没有选择一个指示点，随后沿着“否”步骤。换言之，用户已改变显示在客户端设备200上的视图。所以，根据滑动或捏拉缩放期间由用户提供的移动量计算移动的虚线框的坐标。这是步骤1450。在该步骤中用户(利用捏拉缩放)有效改变虚拟相机的变焦并且(利用滑动)有效改变虚拟相机的俯仰和偏航。
然后在步骤1455中存储移动的虚线框的坐标。
然后在步骤1460中客户端设备200确定是否需要新的块。
如果需要新的块，那么沿着是的路径。然后在步骤1465中客户端设备200将帧计数器的值添加到来自存储器225的块的URL里。然后在步骤1475中客户端设备200从服务器300请求块。
然后客户端设备200从所接收的块提取视图。换言之，客户端设备200从所接收的块提取虚线框的内容并且将此显示在客户端设备的显示器上。这是步骤1480。
然后客户端设备200确定用户是否希望通过关闭应用程序或按压触摸屏上的适当的图标来退出应用程序。如果用户不希望退出应用程序，那么客户端设备200返回步骤1425。
可替换地，如果用户决定退出应用程序，用户观看体验过程中的虚线框的坐标与参考步骤1440描述的那个类似地上载到服务器300。可选地，可存储帧计数以允许用户返回到相同的帧和/或同样可以存储块。
处理结束于步骤1495。
返回步骤1460，如果不需要新的块，接着到否的路径。然后客户端设备从当前块提取视图。换言之，客户端设备200从当前块提取虚线框的内容并且将此显示在客户端设备的显示器上。这是步骤14951。
然后客户端设备200确定用户是否希望通过关闭应用程序或按压触摸屏上的适当的图标来退出应用程序。如果用户不希望退出应用程序，那么客户端设备200返回步骤1450。
可替换地，如果用户决定退出应用程序，用户观看体验过程中的虚线框的坐标与参考步骤1440描述的那个类似地上载到服务器300。可选地，可存储帧计数以允许用户返回到相同的帧和/或同样可以存储块。
实施方式的变形
显而易见的，上述的是非限制性实例并且保护范围决不限于这些实例。
尽管上述的是参考某个形状的块描述的，但本公开决不限于这些。事实上，尽管描述的是矩形形状块，但可预见其他形状。例如，在2013年4月4日提交的GB1306050.4中以及在2013年9月10日提交的GB1316102.1中描述了对全景场景的视图施加透视校正的方法。这些公开的全部内容通过引用结合于此。具体地，结合这些描述透视校正的先前申请中的至少部分。在这些实例中，透视校正可应用于整个图像400。然后矩形块可应用于透视校正的图像400。可替换地，如果图像400不具有应用至该处的透视校正，那么可选择块的形状以向该处应用透视校正。此外，如果图像400不是透视校正的，并且块形状是矩形的，然后客户端设备200可执行使用2013年4月4日提交的GB 1306050.4中以及2013年9月10日提交的GB1316102.1中描述的技术进行透视校正，知道视图(即虚线框)的坐标。
此外，服务器300可被配置为将图像400映射到非直线面上。在这种情况下，然后客户端200可只提供需要的视图的坐标。然后服务器300可在需要的坐标(矩形剪切图)处提取视图并通过因特网提供这些视图。这允许客户端设备200具有非常低处理能力，如机顶盒，并且因为服务器300只进行映射的图像的矩形剪切(处理能力上非常低)，所以请求这些视图客户端装置200的数目是可伸缩的。
显然，根据上述教导本发明可以有许多的变形和修改。因此，应当理解，在所附权利要求的范围内，除了如本文中具体描述的以外，还可以以其他方式实践本发明。
在到目前为止已被描述为通过软件控制的数据处理装置实施(至少部分)的实施方式中，应当理解，诸如光盘、磁盘、半导体存储器等承载这样的软件的非暂存性机器可读介质也被认为是表示本发明的实施方式。
条款
本发明的实施方式可以总结以下编号的条款：
1.一种客户端设备，包括：通信单元，被配置为接收多个参数，该参数限定存储在服务器上的图像的片段，其中片段部分地重叠；处理单元，被配置为允许根据客户端设备上限定的视图选择图像的片段并且其中在选择片段时是可从服务器下载的；以及显示器，被配置为将从可接收的片段截取的图像的剪切图显示在客户端设备上。
2.根据条款1的设备，其中片段之间的重叠部分的量大于图像的剪切图。
3.根据条款1或者条款2中任意一个的设备，其中多个片段是相同的尺寸。
4.根据条款1至条款3中任意一项的设备，其中多个片段是高清晰度图像。
5.根据条款1至条款4中的任意一项的设备，其中多个片段的分辨率小于图像的分辨率。
6.根据条款1至条款5中的任意一项的设备，其中剪切图可使用与用于限定片段的那些参数相同的参数来限定并且处理单元通过比较剪切图的参数值与片段的参数值并且选择具有与剪切图的值最接近的值的片段来进一步可操作地选择片段。
7.根据条款1至条款6中任意一项的设备还包括存储单元，被配置为储存图像的剪切图，并且将存储的参数通过通信单元送回到服务器。
8.根据条款7的设备，包括基于送回的参数收取广告收入。
9.根据条款1至条款8中任意一项的设备，其中片段由标识片段位置的统一资源标识符以及唯一地标识需要下载的片段的图片组的时间标识符来限定。
10.根据条款1至条款9中任意一项的设备，其中，通信单元进一步被配置为在客户端设备处接收包含图像的不同数量片段的第二组片段的参数，并且根据客户端设备上限定的视图从第一组片段或第二组片段中任意一个中选择图像片段。
11.一种服务器，包括：通信单元，被配置为将多个参数发送到客户端设备，该参数限定服务器上存储的图像的片段，其中片段部分地重叠；以及处理单元，被配置为用于通过通信单元接收根据客户端设备上限定的视图对选择的片段的请求，并且用于上载图像的片段到客户端。
12.根据条款11的服务器，其中片段之间重叠部分的量大于客户端设备上限定的视图。
13.根据条款11或者条款12中任意一个的服务器，其中多个片段是相同的尺寸。
14.根据条款11至条款13中任意一项的服务器，其中多个片段是高清晰度图像。
15.根据条款11至条款14中的任意一项的服务器，其中多个片段的分辨率小于图像的分辨率。
16.根据条款11至条款15中的任意一项的服务器，其中限定的视图使用与用于限定片段的那些参数相同的参数来限定并且处理单元进一步构造成：通过比较限定的视图的参数值与片段的参数值并且选择具有与限定的视图的值最接近的值的片段来选择片段。
17.根据条款11至条款16中任意一项的服务器还包括通信单元，其中，通信单元被配置为接收来自客户端设备的期望视图的参数。
18.根据条款17的服务器，包括基于送回的参数收取广告收入。
19.根据条款11至条款18中任意一项的服务器，其中片段由标识片段位置的统一资源标识符以及唯一地标识需要上载的片段的图片组的时间标识符来限定。
20.根据条款11至条款19中任一项的服务器还包括通信单元，其中，通信单元被配置将包含图像的不同数量片段的第二组片段的参数发送到客户端设备，并且根据客户端设备上限定的视图发送来自第一组片段或第二组片段中任意一个中的图像片段。
21.一种将服务器上存储的图像的剪切图显示在客户端设备上的方法，包括以下步骤：在客户端设备处接收多个参数，该参数限定服务器上存储的图像的片段，其中片段部分地重叠；根据客户端设备上限定的视图选择图像片段并且从服务器中下载图像片段；并且将从所接收的片段截取的图像的剪切图显示在客户端设备上。
22.根据条款21的方法，其中片段之间重叠部分的量大于图像的剪切图。
23.根据条款21或者条款22中任意一个的方法，其中多个片段是相同的尺寸。
24.根据条款21至条款23中任意一项的方法，其中多个片段是高清晰度图像。
25.根据条款21至条款24中的任意一项的方法，其中多个片段的分辨率小于图像的分辨率。
26.根据条款21至条款25中任意一项的方法，其中剪切图是使用与用于限定片段的那些参数相同的参数来限定的并且选择片段的步骤包括，比较剪切图的参数值与片段的参数值并且选择具有与剪切图的值最接近的值的片段的步骤。
27.根据条款21至条款26中任意一项的方法还包括存储图像的剪切图的参数，并将存储的参数送回到服务器。
28.根据条款27的方法，包括基于送回的参数收取广告收入。
29.根据条款21至条款28中任意一项的方法，其中片段由标识片段位置的统一资源标识符以及唯一地标识需要下载的片段的图片组的时间标识符来限定。
30.根据条款21至条款29中任意一项的方法，还包括在客户端设备处接收包含图像的不同数量片段的第二组片段的参数，并且根据客户端设备上限定的视图从第一组片段或第二组片段中任意一个中选择图像片段。
31.一种将存储在至少一个服务器上的图像的片段提供到客户端设备的方法，包括以下步骤：将多个参数发送到客户端设备，该参数限定存储在服务器上的图像的片段，其中片段部分地重叠；以及接收对于根据客户端设备上限定的视图选择的图像片段的请求并且将图像的片段上载到客户端。
32.根据条款31的方法，其中片段之间重叠部分的量大于客户端设备上限定的视图。
33.根据条款31或者条款32中任意一个的方法，其中多个片段是相同的尺寸。
34.根据条款31至条款33中任意一项的方法，其中多个片段是高清晰度图像。
35.根据条款31至条款34中的任意一项的方法，其中多个片段的分辨率小于图像的分辨率。
36.根据条款31至条款35中任意一项的方法，其中限定的视图使用与用于限定片段的那些参数相同的参数并且选择片段的步骤包括，比较限定的视图的参数值与片段的参数值并且选择具有与限定的视图的值最接近的值的片段的步骤。
37.根据条款31至条款36中任意一项的方法还包括从客户端设备接收期望的视图的参数。
38.根据条款37的方法，包括基于送回的参数收取广告收入。
39.根据条款31至条款38中任意一项的方法，其中片段由标识片段位置的统一资源标识符以及唯一地标识需要上载的片段的图片组的时间标识符来限定。
40.根据条款31至条款39中任意一项的方法，还包括将包含图像的不同数量的片段的第二组片段的参数发送到客户端设备，并且根据客户端设备上限定的视图发送来自第一组片段或第二组片段中任意一个中的图像片段。
41..一种计算机程序，包括计算机可读指令，所述计算可读指令在下载到计算机上时，配置该计算机以执行根据条款21至40中任一项所述的方法。
42.一种计算机程序产品，被配置为将条款41的计算机程序储存在其中或在其上。
43.一种大致如在上文中参考附图描述的方法、设备、服务器、计算机程序或计算机程序产品。

Claims (20)

1.一种客户端设备，包括：
通信电路，被配置为接收多个参数，所述参数限定服务器上存储的图像的片段，其中所述片段部分地重叠；
处理电路，被配置为允许根据所述客户端设备上的限定的视图选择所述图像的片段，并且其中在选择时所述片段能从所述服务器下载；以及
显示电路，被配置为将从能接收的所述片段获取的所述图像的剪切图显示在所述客户端设备上；
存储电路，被配置为存储所述图像的所述剪切图的参数，并将所存储的参数经由所述通信单元送回所述服务器。
2.根据权利要求1所述的设备，其中，所述片段之间重叠量大于所述图像的所述剪切图。
3.根据权利要求1所述的设备，其中，多个所述片段是相同的尺寸。
4.根据权利要求1所述的设备，其中，多个所述片段是高清晰度图像。
5.根据权利要求1所述的设备，其中，多个所述片段的分辨率小于所述图像的分辨率。
6.根据权利要求1所述的设备，其中，使用与用于限定所述片段的参数相同的参数来限定所述剪切图，并且所述处理单元进一步可操作为通过比较所述剪切图的参数的值与所述片段的参数的值并且选择具有与所述剪切图的值最接近的值的片段来选择所述片段。
7.根据权利要求1所述的设备，包括：基于送回的参数收取广告收入。
8.根据权利要求1所述的设备，其中，由标识所述片段的位置的统一资源标识符以及唯一地标识下载所要求的所述片段的图片组的时间标识符来限定所述片段。
9.根据权利要求1所述的设备，其中，所述通信电路进一步被配置为在所述客户端设备接收包含所述图像的不同数量的片段的第二组片段的参数，并且根据所述客户端设备上的所述限定的视图从第一组片段或所述第二组片段中选择所述图像的所述片段。
10.一种服务器包括：
通信电路，被配置为将多个参数发送到客户端设备，所述参数限定所述服务器上存储的图像的片段，其中所述片段部分地重叠；以及
处理电路，被配置为经由所述通信电路接收针对根据所述客户端设备上的限定的视图选择的所述图像的片段的请求并且将所述图像的所述片段上载到所述客户端，其中所述通信电路被配置为从所述客户端设备接收期望的所述视图的所述参数。
11.根据权利要求10所述的服务器，其中，所述片段之间重叠量大于所述客户端设备上的所述限定的视图。
12.根据权利要求10所述的服务器，其中，多个所述片段是相同的尺寸。
13.根据权利要求10所述的服务器，其中，多个所述片段是高清晰度图像。
14.根据权利要求10所述的服务器，其中，多个所述片段的分辨率小于所述图像的分辨率。
15.根据权利要求10所述的服务器，其中，所述限定的视图使用与用于限定所述片段的参数相同的参数并且所述处理电路进一步被配置为：通过比较所述限定的视图的参数的值与所述片段的参数的值并且选择具有与所述限定的视图的值最接近的值的片段来选择所述片段。
16.根据权利要求10所述的服务器，包括：基于送回的参数收取广告收入。
17.根据权利要求10所述的服务器，其中，由标识所述片段的位置的统一资源标识符以及唯一地标识上载所要求的所述片段的图片组的时间标识符来限定所述片段。
18.根据权利要求10所述的服务器，进一步地，其中，所述通信电路被配置为将包含所述图像的不同数量的片段的第二组片段的参数发送到所述客户端设备，并且根据所述客户端设备上的所述限定的视图发送来自第一组片段或所述第二组片段中的所述图像的所述片段。
19.一种在客户端设备上显示服务器上存储的图像的剪切图的方法，包括以下步骤：
在所述客户端设备接收多个参数，所述参数限定所述服务器上存储的所述图像的片段，其中所述片段部分地重叠；
根据所述客户端设备上的限定的视图选择所述图像的所述片段并从所述服务器下载所述图像的所述片段；并且
将从所接收的片段获取的所述图像的剪切图显示在所述客户端设备上；并且
存储所述图像的所述剪切图的参数并将存储的参数送回到所述服务器。
20.一种非暂存性计算机可读介质，包含计算机程序指令，所述计算机程序指令在由计算机执行时致使所述计算机执行权利要求19所述的方法。
CN201410636159.2A 2013-11-15 2014-11-05 客户端设备、服务器、显示方法和计算机可读介质 Active CN104661098B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB1320217.1A GB2520310A (en) 2013-11-15 2013-11-15 A method, server, client and software
GB1320217.1 2013-11-15

Publications (2)

Publication Number Publication Date
CN104661098A true CN104661098A (zh) 2015-05-27
CN104661098B CN104661098B (zh) 2018-12-04

Family

ID=49883689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410636159.2A Active CN104661098B (zh) 2013-11-15 2014-11-05 客户端设备、服务器、显示方法和计算机可读介质

Country Status (4)

Country Link
US (2) US20150143421A1 (zh)
EP (1) EP2874405B1 (zh)
CN (1) CN104661098B (zh)
GB (1) GB2520310A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108885605A (zh) * 2016-03-14 2018-11-23 V·V·斯莱皮琴科 用于存储和查看数据的小型独立网络设备

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9781356B1 (en) * 2013-12-16 2017-10-03 Amazon Technologies, Inc. Panoramic video viewer
US10600245B1 (en) * 2014-05-28 2020-03-24 Lucasfilm Entertainment Company Ltd. Navigating a virtual environment of a media content item
JP6696737B2 (ja) 2015-06-26 2020-05-20 シャープ株式会社 コンテンツ表示装置及びプログラム
US10873781B2 (en) * 2017-06-13 2020-12-22 Comcast Cable Communications, Llc Video fragment file processing

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120131043A1 (en) * 2010-11-19 2012-05-24 Lg Electronics Inc. Mobile terminal and method of managing video using metadata therein
CN103299595A (zh) * 2010-11-01 2013-09-11 捷讯研究有限公司 用于更新http内容描述的方法和设备

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6331869B1 (en) * 1998-08-07 2001-12-18 Be Here Corporation Method and apparatus for electronically distributing motion panoramic images
US6043837A (en) * 1997-05-08 2000-03-28 Be Here Corporation Method and apparatus for electronically distributing images from a panoptic camera system
US6192393B1 (en) * 1998-04-07 2001-02-20 Mgi Software Corporation Method and system for panorama viewing
US6532311B1 (en) * 1999-02-26 2003-03-11 Lockheed Martin Corporation Image browser
CA2411852A1 (en) * 2000-06-09 2001-12-13 Imove, Inc. Streaming panoramic video
US6859557B1 (en) * 2000-07-07 2005-02-22 Microsoft Corp. System and method for selective decoding and decompression
US20040172650A1 (en) * 2003-02-28 2004-09-02 Hawkins William J. Targeted content delivery system in an interactive television network
US7149370B2 (en) * 2003-03-07 2006-12-12 Nokia Corporation Method and device for image surfing
US7660352B2 (en) * 2003-04-04 2010-02-09 Sony Corporation Apparatus and method of parallel processing an MPEG-4 data stream
US9449109B1 (en) * 2004-04-29 2016-09-20 Eversitas, LLC Visualizing, sharing and monetizing multimedia content
KR100690819B1 (ko) * 2005-07-21 2007-03-09 엘지전자 주식회사 콘텐츠 서비스의 북마크 기능을 갖는 휴대 단말기 및 그동작 방법
KR101255226B1 (ko) * 2005-09-26 2013-04-16 한국과학기술원 스케일러블 비디오 코딩에서 다중 ｒｏｉ 설정, 복원을위한 장치 및 방법
US9182228B2 (en) * 2006-02-13 2015-11-10 Sony Corporation Multi-lens array system and method
US8270469B2 (en) * 2006-12-15 2012-09-18 Precoad Inc. Encoding video at multiple resolution levels
WO2009142021A1 (ja) * 2008-05-23 2009-11-26 パナソニック株式会社 画像復号化装置、画像復号化方法、画像符号化装置、及び画像符号化方法
US20090300692A1 (en) * 2008-06-02 2009-12-03 Mavlankar Aditya A Systems and methods for video streaming and display
US20100054578A1 (en) * 2008-08-26 2010-03-04 Frank Edughom Ekpar Method and apparatus for interactive visualization and distribution of very large image data sets
US20100060547A1 (en) * 2008-09-11 2010-03-11 Sony Ericsson Mobile Communications Ab Display Device and Method for Displaying Images in a Variable Size Display Area
JP5067361B2 (ja) * 2008-12-25 2012-11-07 ソニー株式会社 エンコーダ及びデコーダ、符号方法及び復号方法、並びに記録媒体
US8463741B2 (en) * 2009-09-04 2013-06-11 Omnyx, LLC Digital pathology system
KR101611531B1 (ko) * 2009-11-13 2016-04-12 삼성전자주식회사 촬영장치 및 촬영영상 제공방법
US8205227B1 (en) * 2010-02-06 2012-06-19 Frontier Communications Corporation Management and delivery of audiovisual content items that correspond to scheduled programs
WO2012046435A1 (ja) * 2010-10-04 2012-04-12 パナソニック株式会社 画像処理装置、画像符号化方法および画像処理方法
PL2719190T3 (pl) * 2011-06-08 2018-02-28 Koninklijke Kpn N.V. Dostarczanie treści segmentowanej przestrzennie
US9384297B2 (en) * 2011-07-28 2016-07-05 Hewlett Packard Enterprise Development Lp Systems and methods of accelerating delivery of remote content
US9621905B2 (en) * 2012-06-29 2017-04-11 Qualcomm Incorporated Tiles and wavefront parallel processing
US9313242B2 (en) * 2012-08-21 2016-04-12 Skybox Imaging, Inc. Multi-resolution pyramid for georeferenced video
GB2512621A (en) * 2013-04-04 2014-10-08 Sony Corp A method and apparatus
IN2013CH03069A (zh) * 2013-07-09 2015-08-28 Samsung India Software Operations Pvt Ltd
EP3562170A1 (en) * 2013-07-29 2019-10-30 Koninklijke KPN N.V. Providing tile video streams to a client

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103299595A (zh) * 2010-11-01 2013-09-11 捷讯研究有限公司 用于更新http内容描述的方法和设备
US20120131043A1 (en) * 2010-11-19 2012-05-24 Lg Electronics Inc. Mobile terminal and method of managing video using metadata therein

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108885605A (zh) * 2016-03-14 2018-11-23 V·V·斯莱皮琴科 用于存储和查看数据的小型独立网络设备

Also Published As

Publication number Publication date
EP2874405B1 (en) 2020-08-12
US10091277B2 (en) 2018-10-02
EP2874405A2 (en) 2015-05-20
US20150142875A1 (en) 2015-05-21
CN104661098B (zh) 2018-12-04
US20150143421A1 (en) 2015-05-21
GB2520310A (en) 2015-05-20
EP2874405A3 (en) 2015-06-10
GB201320217D0 (en) 2014-01-01

Similar Documents

Publication Publication Date Title
US11443511B2 (en) Systems and methods for presenting supplemental content in augmented reality
US9549143B2 (en) Method and mobile terminal for displaying information, method and display device for providing information, and method and mobile terminal for generating control signal
US8918737B2 (en) Zoom display navigation
US10449732B2 (en) Customized three dimensional (3D) printing of media-related objects
US20150026718A1 (en) Systems and methods for displaying a selectable advertisement when video has a background advertisement
US20170127102A1 (en) Method and electronic device for video recommendation
GB2527929A (en) Systems and methods for providing recommendations based on pause point in the media asset
CN107741806A (zh) 用于根据设备类型来渲染用户界面元素的系统和方法
US20140298383A1 (en) Server and method for transmitting personalized augmented reality object
US20170105040A1 (en) Display method, apparatus and related display panel
CN104661098A (zh) 方法、服务器、客户端和软件
US9288521B2 (en) Systems and methods for updating media asset data based on pause point in the media asset
CN108848401A (zh) 视频起播方法及装置
GB2527399A (en) Systems and methods for receiving product data for a product featured in a media asset
US20230205401A1 (en) Interface interaction method, apparatus, computer device and storage medium
US20160132278A1 (en) Method, server, client and software
US20150143435A1 (en) System and method for managing mashup service based on the content of media content
US20140101710A1 (en) Content providing scheme
KR102321014B1 (ko) 주문 방법 및 장치
KR102399543B1 (ko) 방송 인터페이스와 함께 팝업 화면을 제공하는 미디어 제공 서버, 방법 및 컴퓨터 프로그램
US20240095386A1 (en) System and method for aggregating viewable content from multiple sources via user-friendly interface
KR102326580B1 (ko) 미디어 제공 서버, 셋탑 박스에서 시청된 컨텐츠를 저장하는 방법 및 컴퓨터 프로그램
US20230217061A1 (en) System and method for aggregating viewable content from multiple sources via user-friendly interface
KR20150101767A (ko) 채널 리스트에 매칭된 부가 정보를 제공하기 위한 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant