CN104704844A - 具有视频定向协调(cvo)的流送 - Google Patents

具有视频定向协调(cvo)的流送 Download PDF

Info

Publication number
CN104704844A
CN104704844A CN201380050434.6A CN201380050434A CN104704844A CN 104704844 A CN104704844 A CN 104704844A CN 201380050434 A CN201380050434 A CN 201380050434A CN 104704844 A CN104704844 A CN 104704844A
Authority
CN
China
Prior art keywords
cvo
stream
attribute
file
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380050434.6A
Other languages
English (en)
Other versions
CN104704844B (zh
Inventor
O·奥亚曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN104704844A publication Critical patent/CN104704844A/zh
Application granted granted Critical
Publication of CN104704844B publication Critical patent/CN104704844B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/04—Protocols specially adapted for terminals or networks with limited capabilities; specially adapted for terminal portability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Abstract

公开了用于提供具有视频定向协调(CVD)的流送的技术。在一示例中，服务器可以包括被配置用于以下操作的计算机电路：接收客户端的设备能力；以及基于将CVO属性包括于设备能力中而修改到客户端的流送内容。

Description

具有视频定向协调(CVO)的流送
相关申请
本申请要求以下申请的权益并在此结合以下申请：2012年10月26日提交的第61/719,241号美国临时专利申请的优先权，该美国临时专利申请的代理人案卷号为P50328Z。本申请要求以下申请的权益并在此结合以下申请：2013年1月17日提交的第61/753,914号美国临时专利申请的优先权，该美国临时专利申请的代理人案卷号为P53504Z。本申请要求以下申请的权益并在此结合以下申请：2013年5月28日提交的第61/841,230号美国临时专利申请的优先权，该美国临时专利申请的代理人案卷号为P57460Z。
背景
无线移动通信技术使用各种标准和协议在节点(例如，传输站)和无线设备(例如，移动设备)之间发射数据。一些无线设备在下行链路(DL)传输中使用正交频分多址(OFDMA)、在上行链路(UL)传输中使用单载波频分多址(SC-FDMA)进行通信。使用正交频分复用(OFDM)进行信号传输的标准和协议包括：第三代伙伴计划(3GPP)长期演进(LTE)、电气与电子工程师协会(IEEE)802.16标准(例如，802.16e、802.16m)(对于产业组通常已知为WiMAX(国际微波接入互操作性))、以及IEEE802.11标准(对于产业组通常已知为WiFi)。
在3GPP无线电接入网络(RAN)LTE系统中，节点可以是演进的通用陆地无线地接入网络(E-UTRAN)节点B(通常也表示为演进的节点B、增强的节点B、eNodeB或eNB)与无线电网络控制器(RNC)的组合，无线电网络控制器(RNC)与已知为用户设备(UE)的无线设备通信。下行链路(DL)传输可以是从节点(例如，eNodeB)到无线设备(例如，UE)的通信，上行链路(UL)传输可以是从无线设备到节点的通信。
无线设备可用于接收使用各种协议的互联网视频的多媒体传送，诸如超文本传输协议(HTTP)流送。用于提供视频流送的基于HTTP的传送的协议可以包括HTTP上动态适配流送(DASH)。
附图简述
本公开案的特征和优点将从以下结合附图说明的详细描述显而易见，详细描述和附图一起通过示例说明了本公开案的特征；且其中：
图1说明了按照一示例、分组交换流送服务(PSS)能力交换中的功能组件的示意图；
图2说明了按照一示例、示例的具有视频定向协调(CVO)的基于超文本传输协议上动态适配流送(基于DASH)的流送；
图3说明了按照一示例、示例的具有视频定向协调(CVO)的基于实时流送协议(基于RTSP)的流送；
图4说明了按照一示例、使用基于国际标准组织(基于ISO)的媒体文件格式(ISO-BMFF)的实例在第三代伙伴计划(3GPP)文件格式(3GP)文件中嵌入视频定向协调(CVO)信息的示例；
图5说明了按照一示例、国际标准组织(ISO)文件格式框式结构层级；
图6说明了按照一示例、基于接收到具有嵌入式视频定向协调(CVO)信息的内容而使用设备定向知晓的多媒体适配的示例服务器-客户端交互；
图7(即表3)说明了按照一示例、具有公共组和表示以及属性和元素的可扩展标记语言-语法(XML-语法)的表格；
图8说明了按照一示例、媒体演示描述(MPD)元数据文件配置的框图；
图9描述了按照一示例、用于在服务器处发信号通知移动终端(MT)的视频定向协调(CVO)能力的方法的流程图；
图10描述了按照一示例、可用于提供具有视频定向协调(CVO)的流送的服务器的计算机电路的功能；
图11说明了按照一示例的服务器、节点和用户设备(UE)的示意图；以及
图12说明了按照一示例的无线设备(例如，UE)的示意图。
现在将参照图示的示例性实施例，此处将使用具体语言来描述示例性实施例。然而将会理解，在此不意图对本发明的范围作出任何限制。
详细描述
在公开和描述本发明之前，应当理解，本发明不限于此处公开的特定结构、过程步骤或材料，而是扩展为相关领域的普通技术人员将会认识到的特定结构、过程步骤或材料的等价物。也应当理解，此处采用的术语仅用于描述特定示例，而非意图是限制性的。不同附图中的相同附图标记表示相同元件。流程图和过程中提供的数字为清楚说明多个步骤和操作而提供，而不必要表示特定的次序或顺序。
示例实施例
以下提供了技术实施例的初始概览，然后下文进一步详细描述了具体的技术实施例。该初始概览意图帮助读者更快地理解技术，而并非意图标识该技术的关键特征或基本特征，也并非意图限制所要求保护的主题的范围。
多媒体服务(包括流送和会话服务)的增长是向新的移动宽带技术和标准的演进的驱动因素之一。随着消费者对多媒体服务的高度需求连同媒体压缩和无线网络体系结构中的发展，增强蜂窝和移动宽带系统的多媒体服务能力是期望的，其中多媒体服务能力可用于向消费者提供高体验质量(QoE)，从而确保用任一设备和技术在任一时刻对来自任一位置的视频内容和服务有连续的接入。对各种移动设备的支持以及对为各种设备类别能力优化的媒体处理过程和会话管理协议的提供可用于允许以连续方式传送具有高QoE的多媒体内容。
随着在实时视频通信中使用的移动设备中引入定向传感器，显示内容可以被旋转以便与设备定向对齐。例如，定向传感器可以通过测量重力场来检测设备定向。也可以使用其他类型的定向传感器。然后可以在应用中使用设备定向，以根据定向调节设备功能。例如，设备可以基于设备定向将用户界面或视频定向旋转为肖像(portrait)模式或景观(landscape)模式。
由于一些客户端设备包含定向传感器，因此内容或服务提供商可以提供为不同设备定向优化的内容的不同的已编码版本，或者内容/服务提供商可以在内容捕捉期间(例如，在飞行中(on the fly))捕捉和转码内容以便提供优化的体验。从用户设备(UE)到具有定向传感器能力和/或当前设备定向的网络的信令可以提供适配网络侧的内容以提供高质量客户端体验的机会。基于多媒体适配的设备和/或视频定向适配可以应用于二维(2D)和三维(3D)视频应用两者。对于2D视频示例，肖像或景观视频视图和/或不同的观看角度可以基于设备定向来适配。对于3D视频示例，不同的观看角度和深度信息可以基于设备定向来适配。
能力交换信令可以是以下服务中的一个重要功能：第三代伙伴计划的(3GPP的)分组交换流送服务(PSS)(如3GPP技术规范(TS)26.234V11.1.0(2012-09)中所述)；HTTP上动态适配流送(DASH)(如3GPP TS 26.247V11.0.0(2012-09)中所述)；以及基于集成多媒体子系统(IMS)的PSS和多媒体广播和多播服务(MBMS)(简称为IMS_PSS_MBMS，如3GPP TS 26.237V11.0.0(2012-06)中所述)。能力交换允许PSS、DASH和IMS_PSS_MBMS服务器基于对移动终端具体能力的知识来向大范围的设备提供适用于所考虑的特定设备的内容。为便于对于流送的服务器侧的内容协商，PSS或IMS_PSS_MBMS服务器可能能经由设备能力描述接入移动终端(MT)的具体能力的描述。设备能力描述可以包含多个属性。对于DASH，设备能力信令的属性可以包括以下参数：预解码器缓冲器大小、初始缓冲时段、解码器能力、显示器属性(例如，屏幕大小、解决或位深度(bit depth))、流送方法(例如，实时流送协议(RTSP)或HTTP)适配支持、QoE支持、扩展的实时传输协议(RTP)控制协议(RTCP)报告支持以及快速内容切换报告、以及所支持的RTP简档和会话描述协议(SDP)属性。
在流送会话的设立期间，服务器可以使用设备能力描述来向移动终端提供正确类型的多媒体内容。服务器可以使用关于移动终端能力的信息来确定将哪个流提供给所连接的终端(例如，移动终端)。例如，服务器可以将对移动终端针对一个流的多个可用变体的要求与所连接终端的实际能力相比较，以便为该特定的移动终端确定最适合的流。能力交换也允许对于PSS或IMS_PSS_MBMS会话将优化的会话描述协议(SDP)文件传送至客户端终端(例如，移动终端)，或者对于DASH会话将优化的媒体演示描述(MPD)元数据文件传送至客户端终端。
图1说明了用于PSS服务的能力交换的示例。在图示中，移动终端110(或客户端设备或客户端终端)可以向PSS服务器130通知关于MT的身份，使得PSS服务器可以从设备简档服务器120检索设备能力简档，设备简档服务器120可以存储移动终端的设备能力简档122。MT可以将HTTP和/或RTSP请求发送至PSS服务器170。HTTP和/或RTSP请求可以包括统一资源定位符(URL)描述符(URLdesc)和/或简档差异(profileDiff)头部。PSS服务器可以向设备简档服务器发送对于MT 160的设备能力简档的HTTP请求。设备简档服务器可以向PSS服务器发送具有MT 162的设备能力简档的HTTP响应。PSS服务器可以匹配或复制设备能力简档132。PSS服务器可以基于MT的设备能力简档向MT发送HTTP和/或RTSP应答172和多媒体内容174。在一示例中，终端制造商或软件厂商可以维持设备简档服务器来为制造商或厂商的产品提供设备能力简档。在另一示例中，运营商可以管理该运营商的订户的设备简档服务器，可以允许订户对订户的简档作出用户专用的更新。设备简档服务器可以根据请求向PSS服务器提供设备能力简档。
此处描述的术语(例如，服务器、客户端设备或终端、移动终端、方法、计算机电路和系统)可以提供移动终端或客户端设备的视频定向协调(CVO)能力。不同的流送范式(例如，PSS、DASH和IMS_PSS_MBMS)可以使用在以下更详细描述的不同的多媒体适配方法和过程。
服务可以使用基于拉(pull)的流送过程或者基于推(push)的流送过程。DASH提供基于拉的流送的示例。对于DASH会话，HTTP服务器230向DASH客户端220提供为不同CVO优化的内容，如图2所示。HTTP服务器可以使用来自DASH客户端的描述各种所支持的CVO状态240的设备能力交换信令。CVO的集合以及相应的内容信息可以在媒体演示描述(MPD)元数据文件242中被发信号通知给DASH客户端，对于不同的CVO有不同的已编码内容，该服务器-客户端交互在图2中描述。然后，DASH客户端播放器可以跟踪当前的CVO并且请求为当前CVO优化的相应版本的内容。
基于实时流送协议(RTSP)的PSS服务和基于会话发起协议(SIP)的IMS_PSS_MBMS服务提供了基于推的流送的示例。对于PSS或IMS_PSS_MBMS服务，服务器232可以从客户端222接收CVO信息244并且基于CVO来适配内容，如图3所示。例如，服务器可以在已存储的多个内容版本中间选择最适合的内容版本，或者基于CVO动态地转码内容以将该内容流送至客户端246，该服务器-客户端交互在图3中描述。会话描述协议(SDP)中携带的会话相关的元数据可以携带经流送的内容的CVO。
附加属性可以被添加至PSS词汇设备能力交换信令中。例如，在描述3GPP中PSS单播流送规范的TS 26.234以及在描述3GPP文件格式规范的TS 26.244V11.1.0(2012-09)中，属性“StreamingCVOCapable(有流送CVO能力)”、“StreamingHighGranularityCVOCapable(有流送高粒度CVO能力)”、“ThreeGPCVOCapable(有三GPCVO能力)”和“ThreeGPHighGranularityCVOCapable(有三GP高粒度CVO能力)”(或具有类似功能的属性)可以被包括或添加在PSS基本词汇的Streaming(流送)和ThreeGPFileFormat(三GP文件格式)分量中。这些属性可以具有名称、定义、分量、类型、法定价值(或有效选项)和解决规则。这些附加属性的可能语法可以如下：
属性名称：StreamingCVOCapable
属性定义：指示客户端是否是RTP流的有CVO能力的接收机，
即，假设所传送的内容的视频定向信息(对应于urn：3gpp：video-orientation(urn：3gpp：视频-定向))在RTP扩展头部中被传送给客户端，客户端可以解释视频定向并且为呈现/显示目的正确地对齐视频。如果该属性被报告且StreamingHighGranularityCVOCapable属性被报告为“是(Yes)”，则该属性的值可以为“是(Yes)”。
分量：Streaming(流送)
类型：文字
法定值：“是”、“否”
解决规则：锁定
属性名称：StreamingHighGranularityCVOCapable
属性定义：指示客户端是否是RTP流的有较高粒度CVO能力的接收机，即，假设所传送的内容的视频定向信息(对应于urn：3gpp：video-orientation：6)在RTP扩展头部中被传送给客户端，客户端可以解译视频定向并且出于呈现/显示目的正确地对齐视频。
分量：Streaming(流送)
类型：文字
法定值：“是”、“否”
解决规则：锁定
属性名称：ThreeCPCVOCapable
属性定义：表示客户端是否是3GP文件的有CVO能力的接收机，即，假设所传送的内容的视频定向信息(对应于urn：3gpp：video-orientation)在3GP文件中被传送给客户端，客户端可以解译视频定向并且出于呈现/显示目的正确地对齐视频。如果该属性被报告且ThreeGPHighGranularityCVOCapable属性被报告为“是(Yes)”，则该属性的值可以为“是(Yes)”。
分量：ThreeGPFileFormat
类型：文字
法定值：“是”、“否”
解决规则：锁定
属性名称：ThreeCPHighGranularityCVOCapable
属性定义：指示客户端是否是3GP文件的有较高粒度CVO能力的接收机，即，假设所传送的内容的视频定向信息(对应于urn：3gpp：video-orientation：6)在3GP文件中被传送给客户端，客户端可以解译视频定向并且为呈现/显示目的正确地对齐视频。
分量：ThreeGPFileFormat
类型：文字
法定值：“是”、“否”
解决规则：锁定
此处描述的技术也可以将CVO信息嵌入所捕捉的内容(诸如3GP文件)中。如图4所示，作为流送和下载应用的一部分，将CVO信息嵌入3GP文件(如在3GPP技术规范(TS)26.244V11.1.0(2012-09)中所述；例如，以运动图片专家组-4(MPEG-4)文件格式312的mp4文件314)中作为国际标准组织(ISO)基础媒体文件格式(BMFF)310的实例而供服务器稍后使用可以是有利的。在3GP文件中包括这种CVO信息可以更好地使服务器能执行定向知晓的多媒体适配以便优化到设备的内容传送(例如，在向不知晓定向的设备进行发送之前纠正视频以避免失准问题)。所嵌入的CVO信息可以在PSS词汇和设备能力信令框架中的设备定向能力属性中被提供。内容文件(例如，mp4文件314)可以包括初始化分段(诸如“moov”框316)和媒体数据(mdat 318)。moov框可以包括初始对象描述符(IOD)320、二进制场景格式(BIFS)轨道(trak)322、对象描述符(OD)轨道、视频轨道326和音频轨道328。嵌入的CVO信息320可以被包括在视频轨道(或轨道(track))中。mdat可以包括经交织的、经时间排序的BIFS、OD、视频和音频访问单元(AC)。
在另一示例中，服务规范可以支持定向知晓的流送。例如，对于可依赖于SDP的RTP流送，视频定向协调(CVO)可以被添加至PSS规范。在PSS RTP流送上下文中，CVO可以包括将图像的当前定向发信令通知给有CVO能力的PSS客户端用于适当的呈现和显示。有CVO能力的PSS服务器可以通过指示SDP中的CVO以及使用RTP头部扩展来执行CVO的信令，该RTP头部扩展具有为CVO格式化的字节(对应于urn：3gpp：video-orientation)以及为较高粒度的CVO格式化的字节(对应于urn：3gpp：video-orientation：6)。RTP头部扩展可以通过3GPP技术规范(TS)26.114V11.5.0(2012-09)来定义。
有CVO能力的PSS客户端可以旋转视频以补偿CVO和较高粒度CVO的旋转。在补偿旋转和翻转两者时，可以以LSB到MSB的次序来执行多个操作(即，先旋转补偿再翻转补偿)
有CVO能力的PSS服务器可以将有效载荷字节添加至构成关键帧(例如，中间帧(inter frame)(I-帧)或H.264中的瞬时解码刷新)的每组分组中的最后一个RTP分组。当当前值不同于所发送的前一值时，PSS服务器也可以将有效载荷字节添加至构成另一类帧(例如，预测帧(P-帧))的每组分组中的最后一个RTP分组。
中间帧(I-帧)是视频压缩流中可以用一个或多个相邻帧来表示的帧。IDR存取单元可以包含内部图片(即，可以无需解码网络抽象层(NAL)单位流中任何以前的图片而解码的已编码图片，且IDR存取单元的存在可以指示该流中没有后续的图片会使用对该内部图片之前的图片的引用，IDR存取单元包含所述图片以便被解码)。H.264/运动图片专家组-4(H.264/MPEG-4)部分10或高级视频解码(AVC)是一种视频压缩格式，该格式可用于高清晰度视频的记录、压缩和分布。P-帧可以是用于定义前向预测图片的一类I帧。预测可以从较早图片(主要是I-帧)作出，用于较少的数据编码。
如果CVO RTP头部扩展是仅存的头部扩展，则可以将总共8个字节附加至RTP头部，RTP分组序列中的最后一个分组可以用标记比特和扩展比特两者来标记。
如果在RTP头部扩展中发信令通知CVO信息，则PSS服务器可以通过在相关媒体线路范围下包括指示CVO统一资源名称(URN)的a＝extmap属性，在SDP中发信号通知CVO信息。CVO URN可以表示为：urn：3gpp：video-orientation。相对于媒体线路发信号通知CVO的URN的示例使用如下：“a＝extmap：7urn：3gpp：video-orientation”。CVO URN示例中的数字7可以用范围1-14中的任意数来替换。
如果在RTP头部扩展中发信号通知了较高粒度的CVO信息，则PSS服务器可以以和CVO URN类似的方式在SDP中发信号通知较高粒度的CVO信息，其中较高粒度的CVO URN可以表示为：urn：3gpp：video-orientation：6。相对于媒体线路发信号通知CVO的URN的示例使用如下：“a＝extmap：5urn：3gpp：video-orientation：6”。
因而，在一示例中，包括CVO信息可以在3GPP文件格式中被记录为所捕捉图像的一系列定向值的连续记录。框可以在用于定时的CVO信息的ISO基础媒体文件格式(ISO-BMFF)或3GPP文件格式中定义。例如，3GPP文件格式(3GP)的视频轨道或RTP暗示(hint)轨道可用于嵌入定向信息。如图4所示，对于基于DASH格式化的内容，CVO信息可以在文件级别ISO-BMFF框内携带，诸如在初始化分段中(例如，在用于ISO-BMFF的“moov”框中)或在媒体分段中(例如，在用于ISO-BMFF的“moof”框中)。在另一示例中，ISO-BMFF的定时元数据轨道可以被选择作为包含CVO信息的轨道。例如，可以专门为CVO创建新的框，诸如具有CVO参数的描述的CVOSampleEntry(CVO样本输入)。如图5所示，ISO文件格式箱式结构层级中的样本描述框350内的其他框也可以用于包含CVO信息。ISO文件格式框式结构层级可以包括电影框340、轨道框342、媒体框34、媒体信息框346、样本表格框348和样本描述框，其中首先列出较高次序的框。样本描述框可以具有一个或多个样本条目，诸如MP4VisualSampleEntry(MP4视觉样本输入)、AVCSampleEntry(AVC样本输入)、HintSampleEntry(暗示样本输入)或CVOSampleEntry(CVO样本输入)。
在另一示例中，视频定向(例如，CVO)信息可以被包括在3GP文件格式中，3GP文件格式可以被包括在TS 26.244中。当CVO数据被存储在3GP文件格式中时，定时元数据轨道可用于CVOSampleEntry框。CVOSampleEntry可指示元数据样本格式是CVO数据的单个字节。包含CVO数据的每个元数据轨道可以引用视频轨道326，其中元数据轨道使用在ISO基础媒体文件格式(ISO-BMFF)中定义的“cdsc”轨道引用来描述视频轨道。
在一示例中，框型的CVOSampleEntry框可以具有被设为“3gvo”的编解码格式属性。CVOSampleEntry框可以定义如下：
CVOSampleEntry框的字段可由表1定义。CVOSampleEntry框字段可以包括字段名、类型、细节和值。
表1
以上技术提供了具有定向的视频分量(例如，CVO分量)的内容的流送或下载。设备定向知晓的多媒体适配为具有定向的视频分类的之前捕捉的和上载的内容提供流送或下载。例如，作为PSS下载或MBMS下载应用的一部分，服务器可以以非实时的方式将具有定向的视频分量的所捕捉内容推送至客户端，用于稍后回放。或者作为基于DASH的流送服务的一部分，HTTP服务器可以向DASH客户端传送可能包含定向的视频分量的用户生成的内容(UGC)。对于基于RTP的流送，UGC内容可以从PSS服务器传送。在这些上下文中，服务器可以接收与客户端设备所支持的视频定向能力有关的信息，以及基于终端的视频定向能力确定最优传送机制(例如，在各个已存储的内容版本中间选择最适合的内容版本以及/或者动态地转码该内容)并且将最优选择的内容传送至客户端。
例如，如果服务器确定内容由定向知晓的终端捕捉(例如，通过检查基于3GP的内容文件)，且同时接收客户端设备不是定向知晓的(例如，基于PSS设备能力信令机制而已知)，则服务器可以处理(即，应用转码)该内容以纠正和避免稍后的呈现和显示期间的失准问题。如果接收客户端设备是位置知晓的，则服务器可能无需纠正失准，而是替代地可以选择“如此”发送内容(即，无修改)连同该内容中嵌入的视频定向信息(例如，在用于RTP流送的RTP扩展头部中或者在用于HTTP流送和DASH的3GP文件内部)，使得接收客户端设备可以纠正失准。
图6说明了基于具有嵌入式CVO信息的内容的接收而实现定向知晓的媒体传送的示例服务器-客户端交互。例如，捕捉客户端224可以捕捉CVO信息并且将具有嵌入式视频定向信息的内容(例如，3GP文件)上载至服务器232(282)。在另一示例中，呈现客户端226可以向服务器发信号通知具有CVO能力信息的设备简档(280)。如前所述，服务器执行定向知晓的内容适配、选择、转码和/或格式转换以纠正潜在的失准，并且相对于(w.r.t.)呈现客户端的CVO能力来优化内容传送(284)。然后，服务器可以将适配的内容传送至呈现客户端作为流送或下载服务的一部分(286)。
在另一示例中，与图6所示的服务器-客户端交互一致，DASH可以从客户端(例如，呈现客户端226)获悉该客户端具有处理CVO信息和纠正失准的能力。然后，服务器可以在MPD中在DASH表示中指示CVO信息的存在(即，如果DASH分段是已存储的内容，DASH服务器可能需要在它能通过解析来确定对应于DASH分段的3GP文件之前检测CVO信息的存在，并且可以核查适配定向信息是否在元数据轨道中被指示)。然后，DASH客户端在接收到MPD之际可以激活视频定向引擎以处理DASH分段中的发信号通知的CVO信息(即，解析对应于DASH表示的3GP文件)并且纠正任何失准且呈现/显示具有正确对齐的视频。
同样与图6所示的服务器-客户端交互一致，DASH服务器可以从客户端获悉该客户端没有处理CVO信息和纠正失准的能力。因为MPD可以指示CVO信息，因此服务器可以检测内容中CVO信息的存在。响应于此，DASH服务器可以处理与MPD中提供的DASH表示相对应的3GP文件以便纠正任何失准，并且可以在该处理之后将所请求的内容发送至DASH客户端。
在另一配置中，CVO信息指示可以在DASH MPD中基于TS 26.247来实现。例如，CVO指示属性(例如，cvo_granularity)可以被包括在MPD中，其中MPD可具有公共属性和元素。元素AdaptationSet(适配集合)、Representation(表示)和SubRepresentation(子表示)可具有所指派的公共属性和元素，诸如CVO指示属性。CVO指示属性的语义可如表2所示，表2说明了公共的适配集合、表示以及子表示属性和元素的表格。每个元素或属性可具有一个元素或属性名称、用途或描述。表2中的“用途”列可以将用“M”(强制的)标记的属性解释为可用于表示。例如，属性或元素可以或者存在于Representation元素中，或者如果不存在，则属性或元素可以在AdaptationSet元素中。用“O”(任选的)标记的属性可以缺席于Representation元素和AdaptationSet元素两者中。
表2
CVO指示属性(例如，cvo_granularity)的可扩展标记语言-语法(XML-语法)可如图7所示在表3中所示。
如前所讨论的，DASH是标准化的HTTP流送协议。如图8所示，DASH可以为媒体演示描述(MPD)元数据文件402指定不同的格式，所述不同的格式提供与服务器中存储的媒体内容表示的结构和不同版本有关的信息以及分段格式。MPD元数据文件包含与媒体播放器的初始化和媒体分段有关的信息(例如，媒体播放器可以查看初始化分段以确定容器格式和媒体定时信息)，以确保将多个分段映射至媒体演示时间线，用于切换以及与其他表示的同步演示。DASH技术也可由其他组织来标准化，诸如运动图片专家组(MPEG)、开放IP电视(IPTV)论坛(OIPF)和混合式广播宽带TV(HbbTV)。
DASH客户端可以通过经由一系列HTTP请求-响应事务下载多个分段，来接收多媒体内容。DASH可以提供在对移动设备可用的带宽变化时、在媒体内容的不同的比特率表示之间动态切换的能力。因此，DASH可允许快速适配至变化的网络和无线链路条件、用户优选项和设备能力，诸如显示器分辨率、所采用的中央处理单元(CPU)、可用的存储器资源等等。DASH的动态适配可以为用户提供较佳的体验质量(QoE)，具有和其他流送协议相比较短的启动延时和较少的重新缓冲事件。
在DASH中，媒体演示描述(MPD)元数据402可以提供与web/媒体服务器中存储的媒体内容表示的结构和不同版本有关的信息。在图8所示的示例中，MPD元数据在时间上被分成具有预定长度的多个时段404，诸如该例中的60秒。每个时段可以包括多个适配集合406。每个适配集合可以提供与具有多个已编码替代物的一个或多个媒体分量有关的信息。例如，该例中的适配集合0可能包括各种不同编码的音频替代物，诸如不同的比特率、单声道、立体声、环绕声、CVO等等。除了在时段ID上为多媒体演示提供不同质量的音频以外，适配集合也可以包括不同语言的音频。适配集合中提供的不同替代物被称为表示408。
在图8中，适配集合1被图示为以不同的比特率提供视频，诸如5兆比特每秒(Mbps)、2Mbps、500千比特每秒(kbps)、或欺骗模式。欺骗模式可用于多媒体流送文件中的寻找、快进、倒带或其他位置变化。此外，视频也可以以不同格式可用，诸如二维(2D)或三维(3D)视频或者面向肖像或景观的视频(例如，CVO)。每个表示408可以包括分段信息410。分段信息可以包括初始化信息412和实际媒体分段数据414。在该例中，MPEG-4(MP4)文件从服务器被流送至移动设备。如之前讨论的，尽管在该例中使用MP4，但是可以使用各种不同的编解码格式。
适配集合中的多媒体还可以被分成较小的分段。在图8的示例中，适配集合1的60秒视频分段被进一步分成各15秒的四个子分段414。这些示例并非意图是限制性的。适配集合以及每个媒体分段或子分段的实际长度取决于媒体类型、系统要求、潜在干扰类型等等。实际媒体分段或子分段可以具有比一秒至几分钟长要短的长度。
如图9的流程图所示，另一示例提供了用于在服务器处发信号通知移动终端(MT)的视频定向协调(CVO)能力的方法500。该方法可以作为机器或计算机电路上的指令被执行，其中指令被包括在至少一个计算机可读介质或一个非暂态机器可读存储介质上。如在框510中，该方法包括在服务器处接收客户端的设备能力的操作。如在框520中，该方法的下一操作可以是标识设备能力何时包括CVO属性。如框530中，该方法还可以包括基于CVO属性的包括而将经流送的内容适配至客户端。
在一示例中，适配经流送的内容的操作还可以包括：当客户端的设备能力不包括指示该客户端并非是定向知晓的终端的CVO属性时，针对失准修改超文本传输协议(HTTP)流、HTTP上动态自适应流送(DASH)或者实时传输协议(RTP)流的显示定向；或者当客户端的设备能力包括指示该客户端是定向知晓的终端的CVO属性时，将CVO指示属性嵌入媒体演示描述(MPD)元数据文件或会话描述协议(SDP)文件中以修改流的显示定向。
在另一示例中，该方法还可以包括：向客户端传送经流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容的媒体演示描述(MPD)元数据文件，其中在AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素中设置CVO指示属性。编解码器属性可以被设为“3gvo”，表示在流送的DASH内容中存在有定向的视频分量和相关联的CVO信息。该方法还可以包括：经由a＝extmap属性的CVO指示向客户端传送实时传输协议(RTP)流的会话描述协议(SDP)文件，其中，关于RTP扩展头部中的CVO信息，CVO统一资源名称(URN)“urn：3gpp：video-orientation”表示CVO的2比特粒度、“urn：3gpp：video-orientation：6”表示较高粒度的CVO的6比特粒度。
在另一配置中，适配经流送的内容的操作还可以包括：接收第三代伙伴计划(3GPP)文件格式(3GP)文件中的用户生成的内容(UGC)视频，该用户生成的内容(UGC)视频包括该UGC视频的嵌入式CVO信息。3GP文件可以在国际标准组织(ISO)文件格式框式结构的样本描述框中为CVO定时元数据轨道使用CVOSampleEntry。CVOSampleEntry字段可以包括BoxHeader尺寸或类型、Data-reference-index或者Granularity，其中，BoxHeader类型可以为3gvo值而配置。或者，3GP文件可以为媒体演示描述(MPD)的AdaptationSet、Representation或子表示使用编解码器公共属性或元素。编解码格式属性可以被设为“3gvo”，表示在流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容中存在有定向的视频分量和相关联的CVO信息。
在另一示例中，适配流送的内容的操作还可以包括：使用CVOSampleEntry将CVO数据存储于第三代伙伴计划(3GPP)文件格式(3GP)文件中，该CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道。CVOSampleEntry字段可以包括BoxHeader尺寸或类型、Data-reference-index或Granularity，其中BoxHeader类型可以为3gvo值而配置。或者，适配流送的内容的操作还可以包括将实时传输协议(RTP)流的CVO数据存储于RTP扩展头部中。
在另一配置中，接收客户端的设备能力的操作还可以包括交换该客户端的分组交换流送服务(PSS)客户端能力。CVO能力可以包括：StreamingCVOCapable(有流送CVO能力)属性，用于指示客户端是否是实时传输协议(RTP)流的有CVO能力的接收机；StreamingHighGranularityCVOCapable(有流送高粒度CVO能力)属性，用于指示客户端是否是RTP流的有较高粒度CVO能力的接收机；ThreeGPCVOCapable(有3GP CVO能力)属性，用于指示客户端是否是第三代伙伴计划(3GPP)文件格式(3GP)文件的有CVO能力的接收机；或者ThreeGPHighGranularityCVOCapable(有3GP高粒度CVO能力)属性，用于指示客户端是否是3GP文件的有较高粒度CVO能力的接收机。
如图10的流程图所示，另一示例提供了服务器的计算机电路的功能600，该服务器可用于提供具有视频定向协调(CVO)的流送。功能可以被实现为一种方法，或者功能可以作为指令在机器上执行，其中指令被包括在至少一个计算机可读介质或一个非暂态机器可读存储介质上。如框610所示，计算机电路可以被配置成接收客户端的设备能力。如框620所示，计算机电路可以进一步被配置成基于将CVO属性包括在设备能力中而修改被流送至客户端的内容。
在一示例中，被配置成修改流送的内容的计算机电路还可以被配置成：当客户端的设备能力不包括表示客户端不是定向知晓的终端的CVO属性时，在传送至客户端之前，针对失准而纠正实时传输协议(RTP)流或流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容的呈现定向。
在另一示例中，被配置成修改流送的内容的计算机电路还可以被配置成：用CVO指示属性将经流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容传送至客户端，其中该CVO指示属性在用于AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素中设置，其中，编解码器属性被设为“3gvo”，表示在经流送的DASH内容中存在有定向的视频分量和相关联的CVO信息。或者，被配置成修改流送的内容的计算机电路还可以被配置成：经由a＝extmap属性用CVO指示将实时传输协议(RTP)流的会话描述协议(SDP)文件传送至客户端，该属性具有表示CVO的2比特粒度的CVO统一资源名称(URN)“urn：3gpp：video-orientation”以及表示与RTP扩展头部中包含的CVO信息有关的较高粒度CVO的6比特粒度的CVO统一资源名称(URN)“urn：3gpp：video-orientation：6”。
在另一配置中，计算机电路还可以被配置成：使用CVOSampleEntry将CVO数据存储于第三代伙伴计划(3GPP)文件格式(3GP)文件中，该CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道。CVOSampleEntry字段可以包括BoxHeader尺寸或类型、Data-reference-index或Granularity，其中BoxHeader类型可以为3gvo值而配置。或者，计算机电路还可以被配置成将实时传输协议(RTP)流的CVO数据存储于RTP扩展头部中。
在另一示例中，被配置成接收设备能力的计算机电路还可以被配置成交换分组交换流送服务(PSS)能力。CVO属性可以包括：StreamingCVOCapable属性，用于指示客户端是否是实时传输协议(RTP)流的有CVO能力的接收机；StreamingHighGranularityCVOCapable属性，用于指示客户端是否是RTP流的有较高粒度CVO能力的接收机；ThreeGPCVOCapable属性，用于指示客户端是否是第三代伙伴计划(3GPP)文件格式(3GP)文件的有CVO能力的接收机；或者ThreeGPHighGranularityCVOCapable属性，用于指示客户端是否是3GP文件的有较高粒度CVO能力的接收机。
在另一配置中，被配置成修改流送的内容的计算机电路还可以被配置成执行定向知晓的内容适配、定向知晓的内容选择、定向知晓的转码或者定向知晓的格式转换，以纠正视频定向失准并且确保客户端处具有正确视频定向的内容回放。服务器可以包括第三代伙伴计划(3GPP)长期演进(LTE)分组交换流送服务(PSS)服务器、超文本传输协议(HTTP)上动态自适应流送(DASH)服务器、或者基于集成多媒体子系统(IMS)的PSS以及多媒体广播和多播服务(MBMS)(IMS_PSS_MBMS)服务器。
图11说明了用于提供视频定向协调(CVO)能力720的示例移动终端(MT)(例如，UE或客户端设备)、节点710、以及服务器730。MT可以被配置用于与节点无线通信。如图9的500所述，服务器可以被配置用于发信号通知移动终端(MT)的视频定向协调(CVO)能力。在另一配置中，如图10的600所述，服务器可用于提供具有视频定向协调(CVO)的流送。节点710可以包括基站(BS)、节点B(NB)、演进节点B(eNB)、基带单元(BBU)、远程无线电头(RRH)、远程无线电设备(RRE)、远程无线电单元(RRU)或者中央处理模块(CPM)。
回过头参照图11，移动终端720可以包括处理器722、收发机724和定向传感器726。处理器可以被配置用于确定MT的CVO能力。收发机可以被配置用于在流传送分量属性中将MT的CVO发射至服务器。
在一示例中，收发机724可以被配置用于接收针对RTP流的实时传输协议(RTP)扩展头部或者针对超文本传输协议(HTTP)流或HTTP上动态自适应流送(DASH)的第三代伙伴计划(3GPP)文件格式(3GP)文件。处理器722还可以被配置用于：解析3GP文件的媒体演示描述(MPD)元数据文件以得到CVO指示属性或者解析3GP文件以得到嵌入的CVO信息；基于所解析的CVO信息和MT的当前定向来确定定向纠正项；以及当MPD元数据文件包括CVO指示属性且MT是定向知晓的终端时，基于所确定的定向纠正项来针对失准纠正HTTP流或DASH的呈现定向。或者，处理器可以被配置用于：解析RTP流的会话描述协议(SDP)文件以得到CVO指示属性或者解析RTP流的RTP扩展头部以得到嵌入式CVO信息；基于所解析的CVO信息和客户端设备的当前定向来确定定向纠正项；以及当SDP文件包括CVO指示属性且MT是定向知晓的终端时，基于所确定的定向纠正项来针对失准纠正RTP流的呈现定向。纠正呈现定向可以补偿定向的旋转或翻转。
在另一示例中，收发机724还可以被配置用于：针对具有CVO指示属性的流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容、从服务器接收媒体演示描述(MPD)元数据，其中该CVO指示属性在AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素中设置。编解码格式属性可以被设为“3gvo”，表示在流送的DASH内容中存在有定向的视频分量和相关联的CVO信息。处理器722还可以被配置用于：解析MPD元数据文件以得到CVO指示属性；以及当MPD元数据文件包括CVO指示属性且MT是定向知晓的终端时，针对失准修改HTTP流或流送的DASH内容的呈现定向。
在另一配置中，收发机724还可以被配置成接收包括CVOSampleEntry的第三代伙伴计划(3GPP)文件格式(3GP)文件，该CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道。CVOSampleEntry字段可以包括BoxHeader尺寸或类型、Data-reference-index或Granularity，其中BoxHeader类型可以为3gvo值而配置。处理器722还可以被配置用于：解析3GP文件以得到CVOSampleEntry；以及当3GP文件包括CVOSampleEntry且MT是定向知晓的终端时，针对失准修改超文本传输协议(HTTP)流或流送的HTTP上动态自适应流送(DASH)内容的呈现定向。
在另一示例中，收发机724还可以被配置用于交换分组切换流送服务(PSS)客户端能力与MT的CVO能力。MT的CVO能力可以包括：StreamingCVOCapable属性，用于指示客户端是否是实时传输协议(RTP)流的有CVO能力的接收机；StreamingHighGranularityCVOCapable属性，用于指示客户端是否是RTP流的有较高粒度CVO能力的接收机；ThreeGPCVOCapable属性，用于指示客户端是否是第三代伙伴计划(3GPP)文件格式(3GP)文件的有CVO能力的接收机；或者ThreeGPHighGranularityCVOCapable属性，用于指示客户端是否是3GP文件的有较高粒度CVO能力的接收机。
在另一配置中，处理器722还可以被配置用于：捕捉具有指定定向的用户生成的内容(UGC)视频；以及将UGC视频的CVO信息嵌入第三代伙伴计划(3GPP)文件格式(3GP)文件。收发机724还可以被配置用于上载超文本传输协议(HTTP)流或HTTP上动态自适应流送(DASH)的3GP文件。
在另一示例中，处理器722还可以被配置用于：捕捉具有指定定向的CVO数据；以及使用CVOSampleEntry将CVO数据存储于第三代伙伴计划(3GPP)文件格式(3GP)文件中，该CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道。CVOSampleEntry字段可以包括BoxHeader尺寸或类型、Data-reference-index或Granularity，其中BoxHeader类型可以为3gvo值而配置。收发机724可以被配置用于上载超文本传输协议(HTTP)流或HTTP上动态自适应流送(DASH)的3GP文件。
在另一配置中，MT的CVO能力可以在以下会话中提供：第三代伙伴计划(3GPP)长期演进(LTE)分组交换流送服务(PSS)会话、超文本传输协议(HTTP)上动态自适应流送(DASH)会话、或者基于集成多媒体子系统(IMS)的PSS以及多媒体广播和多播服务(MBMS)(IMS_PSS_MBMS)会话。移动终端可以包括用于确定MT的定向的定向传感器726。
图12提供了移动终端(MT)的示例说明，移动终端(MT)诸如客户端设备、移动节点、用户设备(UE)、移动站(MS)、移动无线设备、移动通信设备、平板、手机或者其他类型的无线设备。无线设备可以包括被配置成与节点、宏节点、低功率节点(LPN)或传输站通信的一个或多个天线，传输站诸如基站(BS)、演进节点B(eNB)、基带单元(BBU)、远程无线电头(RRH)、远程无线电设备(RRE)、中继站(RS)、无线电设备(RE)、远程无线电单元(RRU)、中央处理模块(CPM)或者其他类型的无线广域网(WWAN)接入点。无线设备可以被配置成使用至少一个无线通信标准进行通信，无线通信标准包括3GPP LTE、WiMAX、高速分组接入(HSPA)、蓝牙和WiFi。无线设备可以为每个无线设备标准使用单独的天线通信，或者为多个无线通信标准使用共享的天线通信。无线设备可以在无线局域网(WLAN)、无线个域网(WPAN)和/或WWAN中通信。
图12还提供了可用于来自无线设备的音频输入和输出的麦克风以及一个或多个扬声器的说明。显示屏可以是液晶显示器(LCD)屏幕或者诸如有机发光二极管(OLED)显示器这样的其他类型的显示屏。显示屏可以被配置为触摸屏。触摸屏可以使用电容的、电阻的或另一类型的触摸屏技术。应用处理器和图形处理器可以耦合到内部存储器以提供处理和显示能力。非易失性存储器端口也可用于向用户提供数据输入/输出选项。非易失性存储器端口也可用于扩展无线设备的存储器能力。键盘可以与无线设备集成或者无线地连至无线设备以提供附加的用户输入。虚拟键盘也可以用触摸屏来提供。
各种技术或者它们的特定方面或部分可以采取体现于有形介质中的程序代码(即，指令)的形式，所述有形介质诸如软盘、压缩盘只读存储器(CD-ROM)、硬驱、非暂态计算机可读存储介质、或者任何其他机器可读存储介质，其中在程序代码被加载到机器(诸如计算机)中和由机器执行时，机器成为用于实现所述各种技术的装置。非暂态计算机可读存储介质可以是不包括信号的计算机可读存储介质。在可编程计算机上的程序代码执行的情况下，计算设备可以包括处理器、可由处理器读取的存储介质(包括易失性和非易失性的存储器和/或存储元件)、至少一个输入设备以及至少一个输出设备。易失性和非易失性的存储器和/或存储元件可以是随机存取存储器(RAM)、可擦除可编程只读存储器(EPROM)、闪驱、光驱、磁性硬驱、固态驱动器或者其他用于存储电子数据的介质。节点和无线设备也可以包括收发机模块(即，收发机)、计数器模块(即，计数器)、处理模块(即，处理器)以及/或者时钟模块(即，时钟)或定时器模块(即，定时器)。可以实现或使用此处所述的各种技术的一个或多个程序可以使用应用编程接口(API)、可再用控件等等。这种程序可以用高级的面向过程或面向对象的编程语言实现以便与计算机系统通信。然而，若需要，(诸)程序可以用汇编语言或机器语言实现。在任一情况下，语言可以是编译的或解译的语言，并且与硬件实现方式组合。
应当理解，此说明书中描述的许多功能单元已被标记为模块，以便更具体地强调它们的实现方式独立性。例如，模块可以被实现为硬件电路，硬件电路包括定制的超大规模集成(VLSI)电路或门阵列、诸如逻辑芯片、晶体管等现成的半导体、或者其他分立的组件。模块也可以在可编程硬件器件中实现，所述可编程硬件器件诸如场可编程门阵列、可编程阵列逻辑、可编程逻辑器件等等。
模块也可以用供各类处理器执行的软件来实现。具有可执行代码的已标识模块可例如包括计算机指令的一个或多个物理或逻辑块，计算机指令可以例如被组织为对象、过程或函数。然而，已标识模块的可执行文件不需要在实体上位于一起，但可以包括存储在不同位置的不同指令，这些不同指令在逻辑上连在一起时构成该模块并且实现该模块的所述目的。
实际上，具有可执行代码的模块可以是单个指令、或许多指令，并且可以甚至在几个不同的代码段上、在不同的程序之间以及跨几个存储器器件而分布。类似地，操作数据在此可以被标识或图示于模块内，并且可以以任何适当形式被体现并且被组织在任何适当类型的数据结构内。操作数据可以被收集为单个数据集，或者可以分布在不同位置上(包括分布在不同的存储器件上)，并且可以至少部分地仅作为系统或网络上的电信号而存在。模块可以是被动的或主动的，包括可用于执行期望功能的代理。
该说明中通篇引用“一示例”或“示例性”意指结合该示例描述的特定特征、结构或特征被包括在本发明的至少一个实施例中。因此，短语在“在一示例中”或单词“示例性”在该说明书各处的出现不必要全部指同一实施例。
如此处使用的，为方便起见，多个条目、结构元件、组成元件和/或材料可以被呈现在公共列表中。然而，这些列表应被视为好像该列表的每个成员都被个别地标识为单独的且唯一的成员。因此，如无相反指明，这种列表的没有一个个别成员应当仅基于它们在公共组中的演示而被视为同一列表的任何其他成员的事实等价物。此外，在此可以引用本发明的各个实施例和示例连同其各个组成部分的替代。可以理解，这种实施例、示例和替代不应被视为彼此的事实等价物，而是被视为本发明的单独的且自治的表示。
而且，所述的特征、结构或特征可以以任何适当方式被组合在一个或多个实施例中。在以下描述中，提供了许多具体细节，诸如布局、距离、网络示例等的示例，以提供对本发明实施例的透彻理解。然而，相关领域的技术人员将认识到，本发明可以无需这些具体细节的一个或多个而实现，或者用其他方法、组件、布局等来实现。在其他情况下，为避免混淆本发明的多个方面，未详细示出或描述公知的结构、材料或操作。
尽管以上示例是本发明原理在一个或多个特定应用中的说明，但对于本领域普通技术人员显而易见的是，可以无需创造性劳动而作出实现方式的形式、用途和细节上的许多修改，且不背离本发明的原理和范围。因而，除了由所提出的权利要求书限制以外，本发明并非意图是限制性的。

Claims (24)

1.一种可用于提供具有视频定向协调(CVO)的流送的服务器，所述服务器具有被配置用于以下操作的计算机电路：
接收客户端的设备能力；以及
基于将CVO属性包括于所述设备能力中来修改至所述客户端的流送的内容。
2.如权利要求1所述的计算机电路，其特征在于，被配置成修改流送的内容的计算机电路还被配置用于：
当所述客户端的设备能力不包括指示所述客户端不是定向知晓的终端的CVO属性时，在传送至所述客户端之前，针对失准而纠正实时传输协议(RTM)流或者经流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容的呈现定向。
3.如权利要求1所述的计算机电路，其特征在于，被配置成修改流送的内容的计算机电路还被配置用于：
向客户端传送经流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容的媒体演示描述(MPD)元数据文件，其中在AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素中设置CVO指示属性，其中编解码器属性被设为“3gvo”，指示在流送的DASH内容中存在有定向的视频分量和相关联的CVO信息；以及
经由a＝extmap属性用CVO指示向客户端传送实时传输协议(RTP)流的会话描述协议(SDP)文件，其中关于RTP扩展头部中的CVO信息，CVO统一资源名称(URN)“um：3gpp：video-orientation”表示CVO的2比特粒度、“urn：3gpp：video-orientation：6”表示较高粒度CVO的6比特粒度。
4.如权利要求1所述的计算机电路，其特征在于，所述计算机电路被配置用于：
使用CVOSampleEntry将CVO数据存储于第三代伙伴计划(3GPP)文件格式(3GP)文件中，所述CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道，其中所述CVOSampleEntry字段包括BoxHeader尺寸或类型、Data-reference-index或Granularity，且其中BoxHeader类型是针对“3gvo”值而配置；或者
将实时传输协议(RTP)流的CVO数据存储于RTP扩展头部中。
5.如权利要求1所述的计算机电路，其特征在于，被配置成接收设备能力的计算机电路还被配置用于：
交换分组交换流送服务(PSS)能力，其中CVO属性包括：
StreamingCVOCapable属性，用于指示所述客户端是否是实时传输协议(RTP)流的有CVO能力的接收机；
StreamingHighGranularityCVOCapable属性，用于指示所述客户端是否是RTP流的有较高粒度CVO能力的接收机；
ThreeGPCVOCapable属性，用于指示所述客户端是否是第三代伙伴计划(3GPP)文件格式(3GP)文件的有CVO能力的接收机，或者
ThreeGPHighGranularityCVOCapable属性，用于指示所述客户端是否是3GP文件的有较高粒度CVO能力的接收机。
6.如权利要求1所述的计算机电路，其特征在于，被配置成修改流送的内容的计算机电路还被配置用于：
执行定向知晓的内容适配、定向知晓的内容选择、定向知晓的转码或者定向知晓的格式转换，以纠正视频定向失准并且确保客户端处具有正确视频定向的内容回放。
7.如权利要求1所述的计算机电路，其特征在于，所述服务器包括第三代伙伴计划(3GPP)长期演进(LTE)分组交换流送服务(PSS)服务器、超文本传输协议(HTTP)上动态自适应流送(DASH)服务器、或者基于集成多媒体子系统(IMS)的PSS以及多媒体广播和多播服务(MBMS)(IMS_PSS_MBMS)服务器。
8.一种用于提供视频定向协调(CVO)能力的移动终端(MT)，包括：
处理器，所述处理器用于确定MT的CVO能力；以及
收发机，用于在流送分量属性中将MT的CVO能力传送至服务器。
9.如权利要求8所述的移动终端，其特征在于：
所述收发机还被配置用于：
接收RTP流的实时传输协议(RTP)扩展头部或者超文本传输协议(HTTP)流或HTTP上动态自适应流送(DASH)的第三代伙伴计划(3GPP)文件格式(3GP)文件；以及
所述处理器还被配置用于：
针对CVO信息解析示3GP文件的媒体演示描述(MPD)元数据文件或者针对嵌入式CVO信息解析3GP文件，
基于所解析的CVO信息和MT的当前定向来确定定向纠正项，以及
当所述MPD元数据文件包括CVO指示属性且MT是定向知晓的终端时，基于所确定的定向纠正项，针对失准来纠正所述HTTP流或DASH的呈现定向；或者
针对CVO指示属性解析RTP流的会话描述协议(SDP)文件或者针对嵌入式CVO信息解析RTP流的RTP扩展头部，
基于所解析的CVO信息和客户端设备的当前定向来确定定向纠正项，以及
当所述SDP文件包括CVO指示属性且MT是定向知晓的终端时，基于所确定的定向纠正项，针对失准来纠正所述RTP流的呈现定向，
其中纠正呈现定向补偿定向的旋转或翻转。
10.如权利要求8所述的移动终端，其特征在于：
所述收发机还被配置用于：
从所述服务器接收经流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容的媒体演示描述(MPD)元数据文件，其中在AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素中设置CVO指示属性，其中编解码器属性被设为“3gvo”，指示在流送的DASH内容中存在有定向的视频分量和相关联的CVO信息；以及
所述处理器还被配置用于：
针对CVO指示属性解析所述MPD元数据文件；以及
当所述MPD元数据文件包括CVO指示属性且MT是定向知晓的终端时，针对失准来修改纠正HTTP流或流送的DASH内容的呈现定向。
11.如权利要求8所述的移动终端，其特征在于：
所述收发机还被配置用于：
接收包括CVOSampleEntry的第三代伙伴计划(3GPP)文件格式(3GP)文件，所述CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道，其中所述CVOSampleEntry字段包括BoxHeader尺寸或类型、Data-reference-index或Granularity，且其中BoxHeader类型是针对“3gvo”值而配置；以及
所述处理器还被配置用于：
针对CVOSampleEntry解析3GP文件；以及
当3GP文件包括CVOSampleEntry且MT是定向知晓的终端时，针对失准来修改超文本传输协议(HTTP)流或流送的HTTP上动态自适应流送(DASH)内容的呈现定向。
12.如权利要求8所述的移动终端，其特征在于：
所述收发机还被配置成用于：
交换分组交换流送服务(PSS)能力与MT的CVO能力，其中MT的CVO属性包括：
StreamingCVOCapable属性，用于指示所述客户端是否是实时传输协议(RTP)流的有CVO能力的接收机，
StreamingHighGranularityCVOCapable属性，用于指示所述客户端是否是RTP流的有较高粒度CVO能力的接收机，
ThreeGPCVOCapable属性，用于指示所述客户端是否是第三代伙伴计划(3GPP)文件格式(3GP)文件的有CVO能力的接收机，或者
ThreeGPHighGranularityCVOCapable属性，用于指示所述客户端是否是3GP文件的有较高粒度CVO能力的接收机。
13.如权利要求8所述的移动终端，其特征在于：
所述处理器还被配置用于：
捕捉具有指定定向的用户生成的内容(UGC)视频；以及
将所述UGC视频的CVO信息嵌入第三代伙伴计划(3GPP)文件格式(3GP)文件；以及
所述收发机还被配置用于：
上传超文本传输协议(HTTP)流或HTTP上动态自适应流送(DASH)的3GP文件。
14.如权利要求8所述的移动终端，其特征在于：
所述处理器还被配置用于：
捕捉具有指定定向的CVO数据；以及
使用CVOSampleEntry将所述CVO数据存储于第三代伙伴计划(3GPP)文件格式(3GP)文件中，所述CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道，其中所述CVOSampleEntry字段包括BoxHeader尺寸或类型、Data-reference-index或Granularity，且其中BoxHeader类型是针对3gvo值而配置；以及
所述收发机还被配置用于：
上传超文本传输协议(HTTP)流或HTTP上动态自适应流送(DASH)的3GP文件。
15.如权利要求8所述的移动终端，其特征在于，MT的CVO能力在以下会话中提供：第三代伙伴计划(3GPP)长期演进(LTE)分组交换流送服务(PSS)会话、超文本传输协议(HTTP)上动态自适应流送(DASH)会话、或者基于集成多媒体系统(IMS)的PSS以及多媒体广播和多播服务(MBMS)(IMS_PSS_MBMS)会话。
16.如权利要求8所述的移动终端，还包括：
用于确定MT的定向的定向传感器。
17.如权利要求8所述的移动终端，其特征在于，所述移动终端包括用户设备(UE)或移动站(MS)，并且所述移动终端包括天线、相机、触敏显示屏、扬声器、麦克风、图形处理器、应用处理器、内部存储器或者非易失性存储器端口。
18.一种用于在服务器处发信号通知移动终端(MT)的视频定向协调(CVO)能力的方法，包括：
在所述服务器处接收客户端的设备能力；
标识所述设备能力何时包括CVO属性；以及
基于包括CVO属性而适配至客户端的流送的内容。
19.如权利要求18所述的方法，其特征在于，适配流送的内容还包括：
当所述客户端的设备能力不包括指示所述客户端不是定向知晓的终端的CVO属性时，针对失准而修改超文本传输协议(HTTP)流、HTTP上动态自适应流送(DASH)或者实时传输协议(RTP)流的显示定向；或者
当所述客户端包括指示所述客户端是定向知晓的终端的CVO属性时，将CVO指示属性嵌入媒体演示描述(MPD)元数据文件或会话描述协议(SDP)文件中，以修改流的显示定向。
20.如权利要求18所述的方法，其特征在于，适配流送的内容还包括：
向客户端传送经流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容的媒体演示描述(MPD)元数据文件，其中在AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素中设置CVO指示属性，其中编解码器属性被设为“3gvo”，指示在流送DASH内容中存在有定向的视频分量和相关联的CVO信息；以及
经由a＝extmap属性用CVO指示向客户端传送实时传输协议(RTP)流的会话描述协议(SDP)文件，其中关于RTP扩展头部中的CVO信息，CVO统一资源名称(URN)“um：3gpp：video-orientation”表示CVO的2比特粒度、“urn：3gpp：video-orientation：6”表示较高粒度的CVO的6比特粒度。
21.如权利要求18所述的方法，其特征在于，适配流送的内容还包括：
接收第三代伙伴计划(3GPP)文件格式(3GP)文件中的用户生成的内容(UGC)视频，所述用户生成的内容(UGC)视频包括所述UGC视频的嵌入式CVO信息，其中所述3GP文件使用：
用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道的CVOSampleEntry，其中所述CVOSampleEntry字段包括BoxHeader尺寸或类型、Data-reference-index或Granularity，且其中BoxHeader类型是针对“3gvo”值而配置；或者
用于媒体演示描述(MPD)的AdaptationSet、Representation或SubRepresentation的编解码器公共属性或元素，其中所述编解码器属性被设为“3gvo”，指示在流送的超文本传输协议(HTTP)上动态自适应流送(DASH)内容中存在有定向的视频分量和相关联的CVO信息。
22.如权利要求18所述的方法，其特征在于，适配流送的内容还包括：
使用CVOSampleEntry将CVO数据存储于第三代伙伴计划(3GPP)文件格式(3GP)文件中，所述CVOSampleEntry用于国际标准组织(ISO)文件格式框式结构的样本描述框中的CVO定时元数据轨道，其中所述CVOSampleEntry字段包括BoxHeader尺寸或类型、Data-reference-index或Granularity，且其中BoxHeader类型是针对“3gvo”值而配置；或者
将实时传输协议(RTP)流的CVO数据存储于RTP扩展头部中。
23.如权利要求18所述的方法，其特征在于，接收客户端的设备能力还包括：
交换所述客户端的分组交换流送服务(PSS)客户端能力，其中所述CVO能力包括：
StreamingCVOCapable属性，用于指示所述客户端是否是实时传输协议(RTP)流的有CVO能力的接收机，
StreamingHighGranularityCVOCapable属性，用于指示所述客户端是否是RTP流的有较高粒度CVO能力的接收机，
ThreeGPCVOCapable属性，用于指示所述客户端是否是第三代伙伴计划(3GPP)文件格式(3GP)文件的有CVO能力的接收机，或者
ThreeGPHighGranularityCVOCapable属性，用于指示所述客户端是否是3GP文件的有较高粒度CVO能力的接收机。
24.包括多个指令的至少一个非暂态机器可读存储介质，所述多个指令适于实现权利要求18的方法。
CN201380050434.6A 2012-10-26 2013-10-28 用于具有视频定向协调(cvo)的流送的设备、方法以及系统 Active CN104704844B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201261719241P 2012-10-26 2012-10-26
US61/719,241 2012-10-26
US201361753914P 2013-01-17 2013-01-17
US61/753,914 2013-01-17
US201361841230P 2013-06-28 2013-06-28
US61/841,230 2013-06-28
PCT/US2013/067054 WO2014066887A1 (en) 2012-10-26 2013-10-28 Streaming with coordination of video orientation (cvo)

Publications (2)

Publication Number Publication Date
CN104704844A true CN104704844A (zh) 2015-06-10
CN104704844B CN104704844B (zh) 2019-05-21

Family

ID=50545385

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380050434.6A Active CN104704844B (zh) 2012-10-26 2013-10-28 用于具有视频定向协调(cvo)的流送的设备、方法以及系统

Country Status (10)

Country Link
US (3) US9215262B2 (zh)
EP (2) EP3139698B1 (zh)
JP (2) JP6105741B2 (zh)
KR (2) KR101843328B1 (zh)
CN (1) CN104704844B (zh)
AU (3) AU2013334019B2 (zh)
BR (1) BR112015006675B1 (zh)
CA (1) CA2880588C (zh)
HK (1) HK1207770A1 (zh)
WO (1) WO2014066887A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107294736A (zh) * 2016-04-05 2017-10-24 中国移动通信有限公司研究院 多媒体数据处理方法及终端
CN108781099A (zh) * 2016-04-01 2018-11-09 英特尔Ip公司 用户设备（ue）支持模式和id支持

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5961760B2 (ja) * 2012-08-22 2016-08-02 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． Ｍｐｅｇ−２トランスポートストリームにおけるｉｓｏ−ｂｍｆｆイベントボックスの搬送
CN104685894B (zh) 2012-10-26 2020-02-04 苹果公司 基于视频定向的多媒体适应的终端、服务器、方法和装置
CN104704844B (zh) 2012-10-26 2019-05-21 英特尔公司 用于具有视频定向协调(cvo)的流送的设备、方法以及系统
EP3018912B1 (en) 2013-07-02 2018-09-12 Sony Corporation Content provision device, content provision method, program, terminal device, and content provision system
KR102154800B1 (ko) * 2014-01-10 2020-09-10 삼성전자주식회사 전자 장치의 데이터 스트리밍 방법 및 그 전자 장치
GB2524531B (en) * 2014-03-25 2018-02-07 Canon Kk Methods, devices, and computer programs for improving streaming of partitioned timed media data
EP3035326B1 (en) * 2014-12-19 2019-07-17 Alcatel Lucent Encoding, transmission , decoding and displaying of oriented images
CN106034262B (zh) * 2015-03-13 2021-01-22 中兴通讯股份有限公司 自适应流媒体处理方法及装置
WO2016204712A1 (en) * 2015-06-16 2016-12-22 Intel IP Corporation Adaptive video content for cellular communication
US9681111B1 (en) * 2015-10-22 2017-06-13 Gopro, Inc. Apparatus and methods for embedding metadata into video stream
US10593028B2 (en) 2015-12-03 2020-03-17 Samsung Electronics Co., Ltd. Method and apparatus for view-dependent tone mapping of virtual reality images
US10097608B2 (en) * 2015-12-26 2018-10-09 Intel Corporation Technologies for wireless transmission of digital media
US9723258B2 (en) * 2015-12-30 2017-08-01 Roku, Inc. Orientation adjustment for casting videos
US10071306B2 (en) 2016-03-25 2018-09-11 Zero Latency PTY LTD System and method for determining orientation using tracking cameras and inertial measurements
US10421012B2 (en) 2016-03-25 2019-09-24 Zero Latency PTY LTD System and method for tracking using multiple slave servers and a master server
US10717001B2 (en) 2016-03-25 2020-07-21 Zero Latency PTY LTD System and method for saving tracked data in the game server for replay, review and training
US10486061B2 (en) 2016-03-25 2019-11-26 Zero Latency Pty Ltd. Interference damping for continuous game play
US9916496B2 (en) 2016-03-25 2018-03-13 Zero Latency PTY LTD Systems and methods for operating a virtual reality environment using colored marker lights attached to game objects
US10751609B2 (en) 2016-08-12 2020-08-25 Zero Latency PTY LTD Mapping arena movements into a 3-D virtual world
FR3070087B1 (fr) * 2017-08-11 2019-08-09 Renault S.A.S. Procede d’affichage d’images sur un ecran de vehicule automobile
KR102024642B1 (ko) * 2017-11-29 2019-09-24 전자부품연구원 라이브 스트리밍 서버 장치 및 이의 운용 방법
WO2019167634A1 (ja) * 2018-02-28 2019-09-06 ソニー株式会社 コンテンツ配信制御装置、コンテンツ配信制御方法、プログラム、およびコンテンツ配信システム
EP3761651A4 (en) * 2018-02-28 2021-01-27 Sony Corporation CONTENT DISTRIBUTION CONTROL DEVICE, CONTENT DISTRIBUTION CONTROL PROCESS, CONTENT DISTRIBUTION PROGRAM AND SYSTEM
US20200296462A1 (en) 2019-03-11 2020-09-17 Wci One, Llc Media content presentation
US11470136B2 (en) * 2020-10-07 2022-10-11 Tencent America LLC URL customization using the session-based dash operations
US11451602B2 (en) 2021-01-06 2022-09-20 Tencent America LLC Methods and apparatuses for dynamic adaptive streaming over HTTP

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060026513A1 (en) * 2004-07-29 2006-02-02 Xerox Corporation Client dependent image processing for browser-based image document viewer for handheld client devices
US20080270528A1 (en) * 2007-04-30 2008-10-30 James Ward Girardeau Multimedia client/server system with adjustable packet size and methods for use therewith
US20110228112A1 (en) * 2010-03-22 2011-09-22 Microsoft Corporation Using accelerometer information for determining orientation of pictures and video images
US20110276712A1 (en) * 2010-05-05 2011-11-10 Realnetworks, Inc. Multi-out media distribution system and method
US20120079276A1 (en) * 2010-09-24 2012-03-29 Amazon Technologies, Inc. Content selection and delivery for random devices
US20120106643A1 (en) * 2010-10-29 2012-05-03 Yuji Fujimoto Image processing device, image processing method, and image processing system
US20120195196A1 (en) * 2010-08-11 2012-08-02 Rajat Ghai SYSTEM AND METHOD FOR QoS CONTROL OF IP FLOWS IN MOBILE NETWORKS

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU5884300A (en) 1999-06-23 2001-01-09 Infolio, Inc. System and operating method for an internet-based content adaptation service
SE522878C2 (sv) 2000-06-16 2004-03-16 Ericsson Telefon Ab L M Datakommunikationssystem
JP4189627B2 (ja) * 2002-04-24 2008-12-03 富士フイルム株式会社 画像サーバ並びに画像表示システム
US7065641B2 (en) 2002-06-13 2006-06-20 Intel Corporation Weighted processor selection apparatus and method for use in multiprocessor systems
US7085590B2 (en) 2003-12-31 2006-08-01 Sony Ericsson Mobile Communications Ab Mobile terminal with ergonomic imaging functions
FI20040944A0 (fi) 2004-07-07 2004-07-07 Nokia Corp Sisältöviestinnän hallinta viestintäjärjestelmässä
KR100631601B1 (ko) * 2004-10-21 2006-10-09 엘지전자 주식회사 휴대용 단말기의 동영상 스트리밍 서비스 방법
US8819143B2 (en) 2005-05-31 2014-08-26 Flash Networks Ltd. Presentation layer adaptation in multimedia messaging
KR100927978B1 (ko) 2005-09-01 2009-11-24 노키아 코포레이션 리치 미디어 콘텐츠의 프로그레시브 다운로딩 및스트리밍을 위해 ｉｓｏ 기반 미디어 파일 포맷으로 ｓｖｇ콘텐츠를 임베딩 하는 방법
JP4567646B2 (ja) * 2006-09-25 2010-10-20 シャープ株式会社 動画像・音声再生携帯端末、及び、動画像・音声配信端末、及び、システム
US8595186B1 (en) * 2007-06-06 2013-11-26 Plusmo LLC System and method for building and delivering mobile widgets
US8600391B2 (en) 2008-11-24 2013-12-03 Ringcentral, Inc. Call management for location-aware mobile devices
GB0721475D0 (en) 2007-11-01 2007-12-12 Asquith Anthony Virtual buttons enabled by embedded inertial sensors
US8467991B2 (en) 2008-06-20 2013-06-18 Microsoft Corporation Data services based on gesture and location information of device
US8706910B2 (en) * 2008-10-28 2014-04-22 Panzura, Inc. Dynamically adaptive network-based data processing system and method
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
WO2010099577A1 (en) 2009-03-04 2010-09-10 The University Of Queensland Cancer biomarkers and uses therefor
US20100262711A1 (en) * 2009-04-09 2010-10-14 Nokia Corporation Systems, methods, and apparatuses for media file streaming
CN101540871B (zh) * 2009-04-27 2011-05-11 中兴通讯股份有限公司 基于电路域可视电话同步录制对端声音图像的方法和终端
TW201123795A (en) 2009-09-29 2011-07-01 Nokia Corp System, method and apparatus for dynamic media file streaming
US8514331B2 (en) * 2010-06-08 2013-08-20 Stmicroelectronics, Inc. De-rotation adaptor and method for enabling interface of handheld multi-media device with external display
US9131033B2 (en) * 2010-07-20 2015-09-08 Qualcomm Incoporated Providing sequence data sets for streaming video data
US9596447B2 (en) * 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
EP2614653A4 (en) * 2010-09-10 2015-04-15 Nokia Corp METHOD AND APPARATUS FOR ADAPTIVE CONTINUOUS DIFFUSION
WO2012046487A1 (ja) 2010-10-05 2012-04-12 シャープ株式会社 コンテンツ再生装置、コンテンツ配信システム、コンテンツ再生装置の同期方法、制御プログラム、および、記録媒体
CA2754841C (en) * 2010-10-12 2016-11-01 Research In Motion Limited Method and apparatus for image orientation indication and correction
JP5811602B2 (ja) 2010-12-16 2015-11-11 ソニー株式会社 画像生成装置、プログラム、画像表示システム、および画像表示装置
US8675577B2 (en) * 2010-12-20 2014-03-18 Intel Corporation Signaling techniques for a multimedia-aware radio and network adaptation
WO2012088023A2 (en) 2010-12-20 2012-06-28 Akamai Technologies, Inc. Methods and systems for delivering content to differentiated client devices
US8441955B2 (en) * 2011-01-24 2013-05-14 Tektronix, Inc. Determining mobile video quality of experience and impact of video transcoding
US20120278495A1 (en) * 2011-04-26 2012-11-01 Research In Motion Limited Representation grouping for http streaming
KR101784316B1 (ko) * 2011-05-31 2017-10-12 삼성전자주식회사 멀티 앵글 방송 서비스 제공 방법 및 이를 적용한 디스플레이 장치, 모바일 기기
US8867806B2 (en) * 2011-08-01 2014-10-21 Impac Medical Systems, Inc. Method and apparatus for correction of errors in surfaces
CN103858457B (zh) 2011-08-01 2018-11-13 英特尔公司 用于身份提供商(IdP)漫游/代理的多跳单点登录(SSO)
US9253233B2 (en) 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US20130060881A1 (en) * 2011-09-01 2013-03-07 Mp4Sls Pte Ltd Communication device and method for receiving media data
TW201322743A (zh) 2011-11-18 2013-06-01 Onlive Inc 用於控制視訊串流之圖形使用者介面，系統及方法
US9438818B2 (en) * 2012-06-20 2016-09-06 Qualcomm Incorporated Device and method for multimedia communications with picture orientation information
WO2014012015A2 (en) * 2012-07-13 2014-01-16 Vid Scale, Inc. Operation and architecture for dash streaming clients
US9357272B2 (en) 2012-08-03 2016-05-31 Intel Corporation Device orientation capability exchange signaling and server adaptation of multimedia content in response to device orientation
CN104704844B (zh) 2012-10-26 2019-05-21 英特尔公司 用于具有视频定向协调(cvo)的流送的设备、方法以及系统
CN104685894B (zh) 2012-10-26 2020-02-04 苹果公司 基于视频定向的多媒体适应的终端、服务器、方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060026513A1 (en) * 2004-07-29 2006-02-02 Xerox Corporation Client dependent image processing for browser-based image document viewer for handheld client devices
US20080270528A1 (en) * 2007-04-30 2008-10-30 James Ward Girardeau Multimedia client/server system with adjustable packet size and methods for use therewith
US20110228112A1 (en) * 2010-03-22 2011-09-22 Microsoft Corporation Using accelerometer information for determining orientation of pictures and video images
US20110276712A1 (en) * 2010-05-05 2011-11-10 Realnetworks, Inc. Multi-out media distribution system and method
US20120195196A1 (en) * 2010-08-11 2012-08-02 Rajat Ghai SYSTEM AND METHOD FOR QoS CONTROL OF IP FLOWS IN MOBILE NETWORKS
US20120079276A1 (en) * 2010-09-24 2012-03-29 Amazon Technologies, Inc. Content selection and delivery for random devices
US20120106643A1 (en) * 2010-10-29 2012-05-03 Yuji Fujimoto Image processing device, image processing method, and image processing system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
VELIBOR ADZIC, HARI KALVA, BORKO FURHT: "《Optimized adaptive HTTP streaming for mobile devices》", 《APPLICATIONS OF DIGITAL IMAGE PROCESSING XXXIV, SPIE, 1000 20TH ST.BELLINGHAM WA 98225-6705 USA》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108781099A (zh) * 2016-04-01 2018-11-09 英特尔Ip公司 用户设备（ue）支持模式和id支持
CN108781099B (zh) * 2016-04-01 2022-02-22 苹果公司 用户设备的装置、扩展enodeb的装置和用户设备
CN107294736A (zh) * 2016-04-05 2017-10-24 中国移动通信有限公司研究院 多媒体数据处理方法及终端
CN107294736B (zh) * 2016-04-05 2020-06-30 中国移动通信有限公司研究院 多媒体数据处理方法及终端

Also Published As

Publication number Publication date
HK1207770A1 (zh) 2016-02-05
EP2912851B1 (en) 2020-04-22
JP2016500987A (ja) 2016-01-14
EP3139698A1 (en) 2017-03-08
US9215262B2 (en) 2015-12-15
US20160352799A1 (en) 2016-12-01
AU2017203829B2 (en) 2018-09-06
BR112015006675A2 (pt) 2020-08-18
BR112015006675B1 (pt) 2022-08-30
AU2016200390B2 (en) 2017-03-23
CA2880588C (en) 2020-03-10
WO2014066887A1 (en) 2014-05-01
US9438658B2 (en) 2016-09-06
JP6105741B2 (ja) 2017-03-29
JP2017143528A (ja) 2017-08-17
EP2912851A1 (en) 2015-09-02
AU2017203829A1 (en) 2017-06-22
KR101843328B1 (ko) 2018-03-28
US20160088053A1 (en) 2016-03-24
EP2912851A4 (en) 2016-05-25
US10432692B2 (en) 2019-10-01
KR20150048216A (ko) 2015-05-06
AU2016200390A1 (en) 2016-02-11
KR20170015563A (ko) 2017-02-08
AU2013334019B2 (en) 2015-11-12
AU2013334019A1 (en) 2015-02-12
EP3139698B1 (en) 2020-05-06
CA2880588A1 (en) 2014-05-01
KR101703268B1 (ko) 2017-02-06
CN104704844B (zh) 2019-05-21
JP6455741B2 (ja) 2019-01-23
US20150089074A1 (en) 2015-03-26

Similar Documents

Publication Publication Date Title
CN104704844A (zh) 具有视频定向协调(cvo)的流送
JP6490778B2 (ja) ビデオ方位に基づくマルチメディア適応
TWI568252B (zh) 具有視訊定向協調（ｃｖｏ）之串流技術
CN105027499A (zh) 基于互联网协议(ip)多媒体子系统(ims)的对等(p2p)内容分发
CN105794204A (zh) 交互式视频会议
CN104604286A (zh) 用于流式传输和对话服务的能量感知多媒体自适应

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1207770

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200227

Address after: California, USA

Patentee after: Apple Inc.

Address before: California, USA

Patentee before: INTEL Corp.