KR101630108B1 - 통신 네트워크에서 3차원 비디오 정보의 시그널링 - Google Patents

통신 네트워크에서 3차원 비디오 정보의 시그널링 Download PDF

Info

Publication number
KR101630108B1
KR101630108B1 KR1020147026843A KR20147026843A KR101630108B1 KR 101630108 B1 KR101630108 B1 KR 101630108B1 KR 1020147026843 A KR1020147026843 A KR 1020147026843A KR 20147026843 A KR20147026843 A KR 20147026843A KR 101630108 B1 KR101630108 B1 KR 101630108B1
Authority
KR
South Korea
Prior art keywords
frame
format
packing format
computer readable
readable medium
Prior art date
Application number
KR1020147026843A
Other languages
English (en)
Other versions
KR20140136007A (ko
Inventor
오즈거 오이만
Original Assignee
인텔 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코포레이션 filed Critical 인텔 코포레이션
Publication of KR20140136007A publication Critical patent/KR20140136007A/ko
Application granted granted Critical
Publication of KR101630108B1 publication Critical patent/KR101630108B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W24/00—Supervisory, monitoring or testing arrangements
    • H04W24/10—Scheduling measurement reports ; Arrangements for measurement reports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L27/00—Modulated-carrier systems
    • H04L27/26—Systems using multi-frequency codes
    • H04L27/2601—Multicarrier modulation systems
    • H04L27/2647—Arrangements specific to the receiver only
    • H04L27/2655—Synchronisation arrangements
    • H04L27/2657—Carrier synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L5/00—Arrangements affording multiple use of the transmission path
    • H04L5/003—Arrangements for allocating sub-channels of the transmission path
    • H04L5/0048—Allocation of pilot signals, i.e. of signals known to the receiver
    • H04L5/0051—Allocation of pilot signals, i.e. of signals known to the receiver of dedicated pilots, i.e. pilots destined for a single user or terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/1016—IP multimedia subsystem [IMS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/756—Media network packet handling adapting media to device capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404—Monitoring of server processing errors or hardware failure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • H04W4/14—Short messaging services, e.g. short message services [SMS] or unstructured supplementary service data [USSD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/50—Service provisioning or reconfiguring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W40/00—Communication routing or communication path finding
    • H04W40/24—Connectivity information management, e.g. connectivity discovery or connectivity update
    • H04W40/248—Connectivity information update
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W48/00—Access restriction; Network selection; Access point selection
    • H04W48/18—Selecting a network or a communication service
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W60/00—Affiliation to network, e.g. registration; Terminating affiliation with the network, e.g. de-registration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W60/00—Affiliation to network, e.g. registration; Terminating affiliation with the network, e.g. de-registration
    • H04W60/04—Affiliation to network, e.g. registration; Terminating affiliation with the network, e.g. de-registration using triggered events
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W64/00—Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/10—Connection setup
    • H04W76/15—Setup of multiple wireless link connections
    • H04W76/16—Involving different core network technologies, e.g. a packet-switched [PS] bearer in combination with a circuit-switched [CS] bearer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/02—Processing of mobility data, e.g. registration information at HLR [Home Location Register] or VLR [Visitor Location Register]; Transfer of mobility data, e.g. between HLR, VLR or external networks
    • H04W8/06—Registration at serving network Location Register, VLR or user mobility server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W80/00—Wireless network protocols or protocol adaptations to wireless operation
    • H04W80/08—Upper layer protocols
    • H04W80/12—Application layer protocols, e.g. WAP [Wireless Application Protocol]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/189—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast in combination with wireless systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/58—Message adaptation for wireless communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/10—Connection setup
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/02—Processing of mobility data, e.g. registration information at HLR [Home Location Register] or VLR [Visitor Location Register]; Transfer of mobility data, e.g. between HLR, VLR or external networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/22—Processing or transfer of terminal data, e.g. status or physical capabilities
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 개시의 실시예는 통신 네트워크에서 장치의 입체 3차원 비디오 콘텐츠 능력을 시그널링하는 장치, 방법, 컴퓨터 판독 가능 매체 및 시스템 구성을 설명한다. 다른 실시예가 설명되고 청구될 수 있다.

Description

통신 네트워크에서 3차원 비디오 정보의 시그널링{SIGNALING THREE DIMENSIONAL VIDEO INFORMATION IN COMMUNICATION NETWORKS}
본 발명의 실시예는 일반적으로 통신 분야에 관한 것으로서, 특히 통신 네트워크에서 3차원 비디오 정보를 시그널링하는 것에 관한 것이다.
3-D(three-dimensional) 비디오는 고품질 및 몰입 멀티미디어 경험을 제공하며, 이는 오직 최근에 디스플레이 기술, 신호 처리, 전송 기술, 및 회로 설계에서의 발전을 통해 가전 장치 및 이동 플랫폼 상에서 실현 가능하게 되었다. 그것은 최근에 3-D 가능 스마트폰 등을 통해 이동 네트워크에 소개되고 있을 뿐만 아니라 블루 레이 Disc™, 케이블 및 위성 전송 등을 포함하는 다양한 채널을 통해 가정에 소개되고 있다. 무선 네트워크를 통한 그러한 콘텐츠의 전달과 관련된 개념이 개발되고 있다.
실시예는 첨부 도면과 함께 이하의 상세한 설명에 의해 용이하게 이해될 것이다. 본 설명을 용이하게 하기 위해, 동일한 참조 번호는 동일한 구조 요소를 지시한다. 실시예는 첨부 도면의 도형에서 제한이 아닌 예로서 예시된다.
도 1은 다양한 실시예에 따른 무선 통신 네트워크를 개략적으로 도시한다.
도 2a-도 2b는 다양한 실시예에 따른 스트리밍된 콘텐츠 및/또는 연관된 세션 기술 및 메타 데이터 파일의 적응을 예시한다.
도 3은 일 실시예에 따른 스트리밍 세션의 설정을 예시한다.
도 4는 다양한 실시예에 따른 프레임 호환 가능 패킹 포맷을 예시한다.
도 5는 다양한 실시예에 따른 3-D 비디오 장치 능력을 시그널링하는 방법을 예시한다.
도 6은 다양한 실시예에 따른 3-D 비디오 콘텐츠를 시그널링하는 방법을 예시한다.
도 7은 다양한 실시예에 따른 예시적 시스템을 개략적으로 도시한다.
본 개시의 예시적 실시예는 통신 네트워크에서 클라이언트 장치의 입체 3차원 비디오 콘텐츠 능력을 시그널링하는 방법, 시스템, 컴퓨터 판독 가능 매체, 및 장치를 포함하지만, 이에 제한되지 않는다. 이러한 맥락에서 본 발명의 일부 실시예는 무선 통신 네트워크에서 모바일 장치의 입체 3차원 비디오 콘텐츠 능력을 시그널링하는 방법, 시스템, 컴퓨터 판독 가능 매체, 및 장치에 관한 것일 수 있다.
예시적 실시예의 다양한 양태는 작업의 본질을 다른 당업자에게 전달하기 위해 당업자에 의해 통상 사용되는 용어를 사용하여 설명될 것이다. 그러나, 대체 실시예는 설명된 양태의 일부만으로 실시될 수 있다는 점이 당업자에게 명백할 것이다. 설명의 목적을 위해, 특정 수, 재료 및 구성이 예시적 실시예의 철저한 이해를 제공하기 위해 설명된다. 그러나, 대체 실시예는 특정 상세 없이 실시될 수 있다는 점이 당업자에게 명백할 것이다. 다른 경우에, 공지된 특징은 예시적 실시예를 모호하게 하지 않도록 생략되거나 간략화된다.
게다가, 다양한 동작은 예시적 실시예를 이해하는 데 가장 도움이 되는 방식으로 차례차례 다수의 개별 동작으로 설명될 것이지만; 설명의 순서는 이러한 동작이 반드시 순서에 의존적인 것을 암시하는 것으로 해석되지 않아야 한다. 특히, 이러한 동작은 제시된 순서로 수행될 필요는 없다.
"일부 실시예에서"라는 구가 반복적으로 사용된다. 구는 일반적으로 동일한 실시예를 지칭하지 않지만; 그것을 지칭할 수도 있다. "포함하는", "갖는", 및 "구비하는"이라는 용어는 상황이 다르게 지시되지 않으면 동의어이다. "A 및/또는 B"라는 구는 (A), (B), 또는 (A 및 B)를 의미한다. "A/B" 및 "A 또는 B"라는 구는 "A 및/또는 B"이라는 구와 유사하게 (A), (B), 또는 (A 및 B)를 의미한다. "A, B 및 C 중 적어도 하나"라는 구는 (A) , (B), (C), (A 및 B), (A 및 C), (B 및 C) 또는 (A, B 및 C)를 의미한다. "(A)B"라는 구는 (B) 또는 (A 및 B), 즉 A가 선택적인 것을 의미한다.
특정 실시예가 본 명세서에 예시되고 설명되었지만, 매우 다양한 대체 및/또는 균등 구현이 본 개시의 실시예의 범위를 벗어나지 않으면서 도시되고 설명된 특정 실시예를 대신하여 사용될 수 있다는 점이 당업자에 의해 이해될 것이다. 본 출원은 본 명세서에 논의된 실시예의 임의의 개조 또는 변화를 포괄하도록 의도된다. 따라서, 본 개시의 실시예는 특허청구범위 및 그것의 균등물에 의해서만 제한되도록 명백히 의도된다.
본 명세서에 사용된 바와 같이, "모듈"이라는 용어는 하나 이상의 소프트웨어 또는 펌웨어 프로그램을 실행하는 ASIC(Application Specific Integrated Circuit), 전자 회로, 프로세서(공유, 전용, 또는 그룹) 및/또는 메모리(공유, 전용, 또는 그룹), 조합 로직 회로, 및/또는 설명된 기능을 제공하는 다른 적절한 구성요소를 지칭하거나, 이것의 일부이거나, 이것을 포함할 수 있다.
비디오 압축 능력의 상당한 개선은 H.264/MPEG-4 AVC(advanced video coding) 표준의 도입으로 증명되었다. 표준을 개발한 이래, ITU-T VCEG(Video Coding Experts Group) 및 ISO(International Organization for Standardization)/IEC(International Eiectrotechnicai Commission) MPEG(Moving Picture Experts Group)의 조인트 비디오 팀은 또한 MVC(multiview video coding)로 지칭되는 AVC의 확장을 표준화했다. MVC는 다수의 동기화 비디오 카메라와 같이 비디오 장면의 다수의 뷰를 위해 콤팩트한 표현을 제공한다.
입체 3-D 비디오 애플리케이션에서, 2개의 뷰가 디스플레이된다. 하나는 좌안에 대한 것이고 하나는 우안에 대한 것이다. 입체 3-D 비디오 콘텐츠의 뷰를 포맷하는 다양한 방법이 있다. 일 실시예에서, 스테레오 쌍 3-D 비디오의 인코딩은 MVC의 특수 경우일 수 있으며, 좌안 및 우안 뷰는 MVC를 통해 생성된다. 3-D 비디오 콘텐츠를 생성하는 다른 인코딩 포맷이 또한 가능하다. 다양한 장치는 이러한 다른 포맷을 디코딩하고 렌더링하는 것에 대해 상이한 능력을 가질 수 있다. 본 명세서에 설명된 실시예는 무선 네트워크, 예를 들어 EUTRAN(evolved universal terrestrial radio access network)과 같은 통신 네트워크에서 3-D 비디오 콘텐츠의 전달 및 뷰잉을 가능하게 할 수 있는 장치 능력 교환의 다양한 파라미터를 제공한다.
도 1은 다양한 실시예에 따른 네트워크 환경(100)을 개략적으로 예시한다. 네트워크 환경(100)은 UE(user equipment)(104)를 포함하고, 사용자 장비는 또한 RAN(radio access network)(108)과 무선 결합되는 클라이언트 단말 또는 모바일 장치로 지칭될 수 있다. RAN(108)은 OTA(over-the-air) 인터페이스를 통해 UE(104)와 통신하도록 구성된 eNB(enhanced node base station)(112)를 포함할 수 있다. RAN(108)은 3GPP(third generation partnership project) LTE(long-term evolution) 초고속 네트워크의 일부일 수 있고 EUTRAN으로 지칭될 수 있다. 다른 실시예에서, 다른 무선 액세스 네트워크 기술이 이용될 수 있다.
UE(104)는 RAN(108)을 통해 원격 미디어 서버(116)와 통신할 수 있다. eNB(112)가 미디어 서버와 직접 통신하는 것으로 도시되지만, 통신은 다양한 실시예에서 다수의 중간 네트워킹 구성요소, 예를 들어 스위치, 라우터, 게이트 등을 통해 흐를 수 있다는 것이 이해될 것이다. 예를 들어, 일부 실시예에서, RAN(108)은 RAN(108)을 더 큰 네트워크, 예를 들어 미디어 서버(116)가 일부로 간주될 수 있는 광역 네트워크와 통신 결합시키는 CSN(core services network)와 결합될 수 있다.
도 1은 네트워크 환경을 무선 통신 네트워크로 설명하지만, 다른 실시예는 다른 타입의 네트워크, 예를 들어 유선 네트워크에서 사용될 수 있다. 본 발명의 실시예가 이용될 수 있는 다른 네트워크 환경은 도 1에 도시된 예에 명백하게 도시된 것보다 부가적인, 더 적은, 또는 상이한 구성요소를 포함할 수 있다는 점이 이해될 수 있다. 예를 들어, 유선 네트워크에 이용되는 본 발명의 실시예는 RAN(108) 없이 서로 통신하는 미디어 서버(116) 및 UE(104)를 가질 수 있다.
UE(104) 및 미디어 서버(116)는 3-D 비디오 콘텐츠의 액세스, 저장, 전송, 및 디스플레이를 가능하게 하도록 구성된 다수의 구성요소를 가질 수 있다. 예를 들어, UE(104)는 콘텐츠 관리 모듈(120), 스트리밍 애플리케이션(126)을 갖는 미디어 플레이어(124), 및 디스플레이(128)를 가질 수 있다. 스트리밍 애플리케이션(126)은 3-D 비디오 콘텐츠 및 관련 정보를 수신하고; 3-D 비디오를 디코딩, 언패킹 및 그렇지 않으면 리어셈블링하고; 디스플레이(128) 상에 3-D 비디오를 렌더링하는 충분한 기능을 가질 수 있다. 다양한 실시예에서, 스트리밍 애플리케이션(126)은 이용되는 스트리밍 기술의 맥락에서 언급될 수 있다. 예를 들어, 콘텐츠가 PSS(packet-switched streaming service)에 의해 스트리밍되는 실시예에서, 스트리밍 애플리케이션(126)은 PSS 애플리케이션으로 지칭될 수 있다. 콘텐츠 관리 모듈(120)은 미디어 플레이어(124)의 동작을 가능하게 하는 방식으로 데이터의 수신을 가능하게 하기 위해, 예를 들어 장치 기능 파라미터를 포함하는 스트리밍 파라미터와 협상하거나 그렇지 않으면 이 파라미터를 전달할 수 있다.
미디어 서버(116)는 스트리밍 애플리케이션(134)을 갖는 콘텐츠 전달 모듈(132), 콘텐츠 관리 모듈(136), 및 콘텐츠 스토리지(140)를 포함할 수 있다. 콘텐츠 전달 모듈(132)은 하나 이상의 UE, 예를 들어 UE(104)로의 전송을 위해, 콘텐츠 스토리지(140)에 저장된 3-D 비디오 콘텐츠를 인코딩, 패킹, 또는 그렇지 않으면 어셈블링할 수 있다. 콘텐츠 관리 모듈(136)은 예를 들어 장치 능력 파라미터를 포함하는 스트리밍 파라미터와 협상하거나 그렇지 않으면 이 파라미터를 전달하고, 3-D 콘텐츠의 전달을 가능하게 하는 방식으로 콘텐츠 전달 모듈(132)을 제어할 수 있다.
일부 실시예에서, 미디어 서버(116)의 일부인 것으로 도시된 구성요소 중 하나 이상은 미디어 서버(116)로부터 개별적으로 배치되고 통신 링크를 통해 미디어 서버와 통신 결합될 수 있다. 예를 들어, 일부 실시예에서, 콘텐츠 스토리지(140)는 콘텐츠 전달 모듈(132) 및 콘텐츠 관리 모듈(136)로부터 원격으로 배치될 수 있다.
일부 실시예에서, 콘텐츠 전달 모듈(132)은 일 예에서의 eNB(112)를 통해, 3GPP 스트리밍 표준에 따라 3-D 비디오 콘텐츠를 UE(104)에 전달할 수 있다. 예를 들어, 3-D 비디오 콘텐츠는 PSS 표준, 예를 들어 3GPP TS 26.234 V.11.0.0(2012년 3월 16일), DASH(dynamic adaptive streaming over HTTP) 표준, 예를 들어 3 GPP TS 26.247 V.11.0.0(2012년 3월 6일), MBMS(multimedia broadcast 및 multicast service) 표준, 예를 들어 TS 26.346 V.11.1.0(2012년 6월 29일), 및/또는 IMS_PSS_MBMS(IMS-based PSS 및 MBMS services) 표준, 예를 들어 TS 26,237 V.l1.0,0(2012년 6월 9일)에 따라 전송될 수 있다. 스트리밍 애플리케이션(126)은 임의의 다수의 전송 프로토콜, 예를 들어 RTP(real-time transport protocol), HTTP(hypertext transport protocol) 등을 통해 3-D 비디오 콘텐츠를 수신하도록 구성될 수 있다.
능력 교환은 미디어 서버(116)와 같은 미디어 스트리밍 서버가 해당 특정 장치에 적절한 비디오 콘텐츠를 매우 다양한 장치에 제공할 수 있게 한다. 스트리밍에 대한 서버측 콘텐츠 협상을 가능하게 하기 위해, 미디어 서버(116)는 UE(104)의 특정 능력을 결정할 수 있다.
콘텐츠 관리 모듈(120) 및 콘텐츠 관리 모듈(136)은 3-D 비디오 콘텐츠 스트리밍 세션의 파라미터와 협상하거나 그렇지 않으면 이 파라미터를 전달할 수 있다. 이러한 협상은 RAN(108)에 의해 세션 레벨 시그널링을 통해 발생할 수 있다. 일부 실시예에서, 세션 레벨 시그널링은 미디어 플레이어(124)의 입체 3-D 비디오 디코딩 및 렌더링 능력을 포함하는 장치 성능 정보와 관련된 전송을 포함할 수 있다. 다양한 실시예에서, 장치 성능 정보는 프리 디코더 버퍼 크기, 초기 버퍼링, 디코더 능력, 디스플레이 특성(스크린 크기, 해상도, 비트 심도 등), 스트리밍 방법(RTSP(real-time streaming protocol), HTTP 등) 적응 지원, QoE(quality of experience) 지원, 확장 RTCP(real-time transport protocol) 보고 지원, 고속 콘텐츠 스위칭 지원, 지원된 RTP 프로파일, SDP(session description protocol) 속성 등을 더 포함할 수 있다.
스트리밍 세션의 설정 동안, 콘텐츠 관리 모듈(136)은 적절한 타입의 멀티미디어 콘텐츠를 UE(104)에 제공하는 방식으로 콘텐츠 전달 모듈(132)을 제어하기 위해 장치 성능 정보를 사용할 수 있다. 예를 들어, 미디어 서버(116)는 비디오 스트림의 다수의 이용 가능한 변형 중 어느 변형이 UE(104)의 실제 능력에 기초하여 요구되는지를 판단하여 그러한 터미널에 대해 가장 적합한 스트림을 결정할 수 있다. 이것은 UE(104)로의 3-D 비디오 콘텐츠 및 연관된 세션 기술 및 메타 데이터 파일, 예를 들어 SDP 파일 또는 MPD(media presentation description) 파일의 개선된 전달을 허용할 수 있다.
콘텐츠 전달 모듈(132)은 콘텐츠/연관된 파일의 전달 전에 협상된 세션 파라미터에 따라 콘텐츠 스토리지(140) 내의 콘텐츠에 액세스하고 콘텐츠 및/또는 연관된 세션 기술 및 메타 데이터, 예를 들어 SDP/MPD 파일을 적응시킬 수 있다. 콘텐츠가 UE(104)에 전달될 때, 콘텐츠는 미디어 플레이어(124)에 의해 디코딩되고 디스플레이(128) 상에 렌더링될 수 있다.
콘텐츠 및/또는 연관된 세션 기술 및 메타 데이터의 적응은 도 2a-도 2b에 관하여 일부 특정된 예에 따라 도시되는 반면, 스트리밍 세션의 설정은 도 3에 관하여 특정 예에 따라 도시된다.
도 2a는 일부 실시예에 따른 3-D 비디오 포맷들의 적응을 갖는 DASH 기반 스트리밍 실시예를 예시한다. 특히, 도 2a는 DASH 클라이언트(208)와 통신하고 풀 기반 스트리밍 실시예를 구현하는 HTTP 서버(204)를 예시하고, 스트리밍 제어는 서버보다 클라이언트에 의해 유지되고, 클라이언트는 MPD의 검사 후에 일련의 HTTP 기반 요청 응답 트랜잭션을 통해 서버로부터 콘텐츠를 다운로드한다. DASH 기반 스트리밍에서, MPD 메타 데이터 파일은 HTTP 서버(204)(상이한 비트 전송 속도, 프레임 속도, 해상도, 코덱 타입 등을 포함하는)에 저장된 미디어 콘텐츠 표현의 구조 및 상이한 버전에 대한 정보를 제공한다. 세그먼트의 관계 및 그것이 미디어 프리젠테이션을 어떻게 형성하는지를 설명하는 이러한 MPD 메타데이터 정보에 기초하여, DASH 클라이언트(208)는 HTTP GET 또는 부분 GET 방법을 사용하여 미디어 세그먼트를 요청할 수 있다. HTTP 서버(204) 및 DASH 클라이언트(208)는 각각 미디어 서버(116) 및 UE(104)와 유사하고 이것과 실질적으로 교환 가능할 수 있다.
DASH에서, 3-D 비디오 포맷 및 대응하는 콘텐츠 정보의 세트는 MPD 내의 DASH 클라이언트(208)에 시그널링될 수 있다. DASH 클라이언트(208)의 능력 프로파일 및 그것의 지원 3-D 포맷에 따라, HTTP 서버(204)는 상이한 포맷의 콘텐츠를 제공할 수 있고, 예를 들어 HTTP 서버(204)는 MPD 내의 DASH 클라이언트(208)에 의해 지원되지 않는 3-D 포맷을 배제하고 DASH 클라이언트(208)에 의해 지원되는 것만을 포함할 수 있다. 이러한 상황에서, HTTP 서버(204)는 상이한 3-D 비디오 포맷에 최적화된 콘텐츠를 DASH 클라이언트(208)에 제공할 수 있다. 이것을 수행할 시에, HTTP 서버(204)는 다양한 지원 3-D 비디오 포맷을 설명하는 DASH 클라이언트(208)로부터 장치 능력 교환 시그널링을 사용할 수 있다. 그 다음, DASH 클라이언트(208)는 DASH 클라이언트(208)에 의해 지원되는 3-D 비디오 콘텐츠의 대응하는 버전을 요청할 수 있다. 더욱이, HTTP로 MPD를 검색할 때, DASH 클라이언트(208)는 ProfDift(profile difference)에 기초하여 3-D 비디오 포맷에 대해 임의의 임시 조정을 포함하는 GET 요청에서 3-D 비디오 코덱 및 포맷 정보를 포함할 수 있다. 일 예에서, 차이는 콘텐츠 프리젠테이션 세션에 대해 하나 이상의 MPD 파라미터를 임시적으로 수정하도록 구성될 수 있다. 예를 들어, 차이는 콘텐츠 프리젠테이션 세션이 종료하거나 후속 차이(제 1 통신 차이에 대응)가 HTTP 서버(204)에 전달될 때까지 MPD를 수정하도록 구성될 수 있다. 이와 같이, HTTP 서버(204)는 최적화된 MPD를 DASH 클라이언트(208)에 전달할 수 있다.
도 2b는 일부 실시예에 따른 3-D 비디오 포맷의 개조를 갖는 RTSP 기반 스트리밍 실시예를 예시한다. 특히, 도 2b는 푸시 기반 스트리밍 방법을 구현하는 서버(212) 및 클라이언트(216)를 예시하며, 스트리밍 및 세션 제어는 클라이언트(216)보다 서버(212)에 의해 유지된다. 서버(212) 및 클라이언트(216)는 각각 미디어 서버(116) 및 LIE(104)와 유사하고 이것과 실질적으로 교환 가능할 수 있다.
푸시 기반 스트리밍의 예는 각각 RTSP 및 SIP(session initiation protocol)에 기초하여 PSS 및 IMS_PSS_MBMS 서비스를 포함한다. 이러한 상황에서, 서버(212)는 클라이언트(216)로부터 지원 3-D 비디오 코덱 및 포맷의 세트를 수신하고 이러한 정보에 기초하여 콘텐츠를 적응시키며, 예를 들어 서버(212)는 저장된 콘텐츠 버전 중에서 가장 적합한 콘텐츠 버전을 선택하거나 지원 3-D 비디오 포맷에 기초하여 동적으로 트랜스코딩하고 콘텐츠를 클라이언트(216)로 스트리밍한다. SDP에서 수행되는 세션 관련 메타데이터는 스트리밍 콘텐츠에 대한 3-D 비디오 포맷 정보를 전달할 수 있다.
도 3은 일부 실시예예 따른 IMS_PSS_MBMS 서비스에 대한 가입/통지를 갖는 서비스 탐색을 예시한다. 특히, 도 3은 UE(304), IM(IP Multimedia) CN(Core Network) 서브시스템(308), 및 SDF(service discovery function)(312) 사이의 상호 작용을 예시한다. UE(304)는 UE(104)와 유사하고 이것과 실질적으로 교환 가능할 수 있다. IM CN 서브시스템(308) 및 SDF(312)는 액세스 네트워크 도메인, 예를 들어 RAN(108)과 같은 인터페이스하는 코어 네트워크 도메인의 일부일 수 있다.
IMS_PSS_MBMS 서비스에서, UE(304)는 서비스 탐색 동안 장치 성능 정보, 예를 들어 지원 3-D 비디오 코덱 및 포맷을 SIP SUBSCRIBE 메시지로 IM CN 서브시스템(308)에 송신할 수 있다. 그 다음, IM CN 서브 시스템(308)은 메시지를 SDF(312)에 전송할 수 있다. SDF(312)는 예를 들어 사용자의 프로파일(Personalized Service Discovery)에서 설명된 바와 같은 UE(304)의 능력에 따라 적절한 서비스 탐색 정보를 결정한다. 그 다음, SDF(312)는 SIP 200 OK 메시지를 IM CN 서브 시스템(308)에 송신할 수 있으며, 이는 또한 지원 3-D 비디오 코덱 및 포맷을 포함하는 송신된 장치 성능 정보에 기초하여 세션 초기화를 확인하기 위해 UE(304)에 릴레이된다. 그 후에, SDF(312)는 서비스 검색 정보와 함께, SIP NOTIFY 메시지를 IM CN 서브시스템(308)에 송신할 수 있으며, 이는 SIP NOTIFY 메시지를 UE(304)에 다시 릴레이한다. 그 다음, UE(304)는 SIP 200 OK 메시지를 IM CN 서브 시스템(308)에 송신함으로써 응답할 수 있으며, 이는 그 다음에 SDF(312)에 릴레이된다.
그러한 프레임워크는 IMS 기반 PSS 및 MBMS 사용자 서비스에서 지원 3-D 비디오 포맷을 이용하는 최적화된 서비스 탐색을 가능하게 한다. 나중에, IMS 세션 동안에, UE(304)는 또한 ProfDif(예를 들어, 현재 장치 배향이 기본 장치 배향과 다르면)에 기초하여 지원된 3-D 비디오 코덱 및 포맷의 세트에 대해 임의의 조정을 포함하는 갱신을 표시하기 위해 SIP 시그널링을 사용할 수 있다. 이것은 3-D 비디오 포맷 정보에 대해 갱신에 관한 정보를 포함하는 추가 SIP SUBSCRIBE 메시지를 통해 가입을 재생함으로써 수행될 수 있다.
도 1을 다시 참조하면, 일부 실시예에서, 미디어 서버(116)는 UE(104)의 프로파일 정보를 갖는 장치 프로파일 서버(144)와 결합될 수 있다. 프로파일 정보는 장치 성능 정보의 일부 또는 전부를 포함할 수 있다. 그러한 실시예에서, 미디어 서버(116)는 UE(104)로부터 식별 정보를 수신하고, 그 다음 장치 프로파일 서버(144)로부터 프로파일 정보를 검색할 수 있다. 이것은 세션 레벨 시그널링의 일부로서 수행될 수 있다.
일부 실시예에서, UE(104)는 ProfDiff 시그널링에 기초하여, 장치 프로파일 서버(144)로부터 검색된 프로파일 정보를 추가 속성으로 보충하거나 그것의 장치 능력 프로파일에 이미 정의된 속성에 대해 무효화할 수 있다. 일 예에서, 그러한 임시 조정은 단말이 3-D 비디오를 렌더링할 수 있음에도 불구하고 특정 세션에 대한 사용자가 2-D(two-dimensional) 비디오만을 수신하고 싶으면, 사용자 선호도에 의해 트리거될 수 있다.
스트리밍 애플리케이션(134)은 다수의 상이한 스트림 타입에 따라 네트워크 환경(100)에서의 전송을 위해 3-D 비디오 콘텐츠를 인코딩할 수 있으며, 각각의 스트림 타입은 연관된 프레임 타입을 갖는다. 프레임 타입은 프레임 패킹, 사이멀캐스트, 또는 2-D 플러스 보조 프레임 타입을 포함할 수 있다.
프레임 패킹은 프레임 호환 가능 패킹 포맷 및 FRPV(full-resolution per view) 패킹 포맷을 포함할 수 있다. 프레임 호환 가능 패킷 포맷에서, 스트리밍 애플리케이션(134)은 스테레오 쌍의 구성 프레임을 단일 프레임으로 공간적으로 패킹하고 단일 프레임을 인코딩할 수 있다. 스트리밍 애플리케이션(126)에 의해 생성되는 출력 프레임은 스테레오 쌍의 구성 프레임을 포함한다. 각각의 뷰 및 패킹된 단일 프레임의 원래 프레임의 해상도는 동일할 수 있다. 이러한 경우에, 스트리밍 애플리케이션(134)은 패킹 동작 전에 2개의 구성 프레임을 다운 샘플링할 수 있다. 프레임 호환 가능 패킹 포맷은 각각 도 4a-도 4e에 예시된 바와 같이 수직 인터리빙, 수평 인터리빙, 사이드 바이 사이드, 상-하위, 또는 체크보드 포맷을 사용할 수 있고, 다운 샘플링이 적절히 수행될 수 있다.
일부 실시예에서, 스트리밍 애플리케이션(134)은 비트스트림으로 H.264/AVC 표준에 지정된 하나 이상의 프레임 패킹 배열 SEI(supplemental enhancement information) 메시지를 포함함으로써 사용된 프레임 패킹 포맷을 나타낼 수 있다. 스트리밍 애플리케이션(126)은 프레임을 디코딩하고, 디코더의 출력 프레임으로부터 2개의 구성 프레임을 언패킹하고, 인코더측 다운 샘플링 프로세스를 복귀시키기 위해 프레임을 업 샘플링하고, 디스플레이(128) 상에 구성 프레임을 렌더링할 수 있다.
FRPV 패킹 포맷은 시간 인터리빙을 포함할 수 있다. 시간 인터리빙에서, 3-D 비디오는 스테레오 쌍(좌측 및 우측 뷰)을 구성하는 각각의 부모 및 후속 사진을 갖는 원래 비디오의 프레임 속도의 두배로 인코딩될 수 있다. 시간 인터리빙된 입체 비디오의 렌더링은 전형적으로 높은 프레임 속도로 수행될 수 있으며, 액티브(셔터) 안경은 각각의 눈에서 잘못된 뷰를 혼합하기 위해 사용된다. 이것은 안경과 스크린 사이의 정확한 동기화에 의존할 수 있다.
사이멀캐스트 프레임 타입을 사용하는 실시예에서, 좌측 및 우측 뷰는 개별 사이멀캐스트 스트림으로 전송될 수 있다. 개별적으로 전송된 스트림은 스트리밍 애플리케이션(126)에 의해 결합되고 공동으로 디코딩될 수 있다.
2-D 플러스 보조 프레임 타입을 사용하는 실시예에서, 2-D 비디오 콘텐츠는 디스플레이(128) 상에 3-D 비디오를 렌더링하는 스트리밍 애플리케이션(126)에 의해 사용될 수 있는 보조 정보와 함께 스트리밍 애플리케이션(134)에 의해 송신될 수 있다. 이러한 보조 정보는 예를 들어 각각의 픽셀이 연관된 2-D 비디오 프레임에서 하나 이상의 픽셀의 깊이/시차를 정의하는 2-D 맵인 깊이 시차 맵일 수 있다.
일부 실시예에서, 다른 프레임 타입이 사용될 수 있다. 예를 들어, 일부 실시예에서 스트리밍 애플리케이션(134)은 입체 뷰를 베이스 뷰 스트림 및 비 베이스 뷰 스트림으로 인코딩할 수 있으며, 이는 동일 또는 상이한 스트림으로 전송될 수 있다. 일부 실시예에서, 이것은 입체 비디오에 대한 MVC 기반으로서 언급될 수 있다. 비 기반 뷰 스트림은 공간/시간 예측 정보를 제공하는 인터 뷰 예측 프레임을 포함할 수 있다. 베이스 뷰 스트림은 2-D 비디오로서 베이스 뷰를 렌더링하기 위해 단일 뷰, 예를 들어 2-D 디코더에 대해 충분할 수 있는 반면, 비 베이스 뷰는 3-D 비디오를 렌더링하기 위해 3-D 디코더, 예를 들어 스트리밍 애플리케이션(126)에 충분한 정보를 제공할 수 있다. 미디어 서버(116)가 UE의 능력을 인식하면, 그것은 3-D 비디오를 지원하지 않거나 3-D 비디오를 지원하는데 충분한 비트레이트를 갖지 않는 장치로 비 베이스 뷰 스트림을 송신하는 것을 생략할 수 있다.
다양한 실시예에서, 콘텐츠 관리 모듈(120) 및/또는 장치 프로파일 서버(144)로부터 콘텐츠 관리 모듈(136)로 전송되는 장치 성능 정보는 관련 전송 프로토콜, 예를 들어 스트리밍 애플리케이션(126)에 의해 지원되는 RTP 또는 HTTP를 통해 입체 3-D 비디오의 스트리밍에 관련된 하나 이상의 포맷의 리스트를 포함하는 3-D 포맷 속성을 포함할 수 있다. 일부 실시예에서, 3-D 포맷 속성은 수직 인터리빙에 대해 정수 값 "1", 수평 인터리빙에 대해 "2", 사이드 바이 사이드에 대해 "3", 상-하위에 대해 "4", 체크보드에 대해 정수 "0", 또는 시간 인터리빙에 대해 "5"를 갖는 RTP 또는 HTTP에 대한 스트리밍 프레임 패킹 포맷일 수 있다. 일부 실시예에서, 동일한 3-D 포맷 속성은 특정 파일 및 컨테이너 포맷에서 지원되는 프레임 패킹 포맷을 나타내기 위해 사용될 수 있다. 일부 실시예에서, 3-D 포맷 속성은 더 일반화된 값, 예를 들어 프레임 패킹에 대해 "FP"를 포함할 수 있다.
일부 실시예에서, 3-D 포맷 속성은 사이멀캐스트에 대해 값 "SC" 또는 2-D 비디오 플러스 보조 정보에 대해 "2DA"를 갖는 다른 스트리밍 포맷일 수 있다.
UE(104)가 하나보다 많은 포맷 타입을 지원하는 실시예에서, 그것은 하나 이상의 선호되는 포맷 타입을 더 나타낼 수 있다. 이것은 선호 지표를 선택 포맷 타입 등과 연관시킨 선호도 순서로 포맷 타입을 리스트함으로써 수행될 수 있다.
일부 실시예에서, 프레임 타입 속성을 제공하는 것에 더하여, 콘텐츠 관리 모듈(120) 및/또는 장치 프로파일 서버(144)는 하나 이상의 구성요소 타입 속성을 제공할 수 있다. 구성요소 타입 속성은 특정 타입의 비디오 구성요소에 대한 추가 상세를 제공할 수 있으며, 이는 스트리밍 애플리케이션(126)에 의해 지원되고/되거나 선호되는 입체 3-D 비디오의 구성요소이다.
구성요소 타입 속성은 센터 뷰 스트림을 나타내는 값 "C", 센터 뷰 스트림 및 깊이 맵을 나타내는 "CD", 센터 뷰 스트림 및 시차 맵을 나타내는 "CP", 깊이 맵을 나타내는 "D", 시차 맵을 나타내는 "P", 좌측 뷰 스트림을 나타내는 "L", 좌측 뷰 스트림 및 깊이 맵을 나타내는 "LD", 좌측 및 우측 뷰로부터의 교차 스캔 라인을 포함하는 비디오 프레임을 나타내는 "LIL", 좌측 뷰 스트림 및 시차 맵을 나타내는 "LP", 우측 뷰 스트림을 나타내는 "R", 프레임 순차(예를 들어, 좌측 및 우측 스트림으로부터의 교차 프레임을 포함하는 비디오 스트림 - 추가 시그널링, 예를 들어 AVC SEI 메시지는 어느 프레임이 좌측 및 우측 뷰를 포함하는지를 시그널링하기 위해 요구될 수 있음)를 나타내는 "Seq", 사이드 바이 사이드를 나타내는 "SbS", 및 톱 및 보톰을 나타내는 "TaB"를 가질 수 있다.
각각의 포맷 타입 속성은 구성요소 타입 속성의 각각의 세트와 연관될 수 있다. 예를 들어, 포맷 타입이 SC이면, 연관된 구성요소 타입은 좌측 및 우측을 각각 나타내는 L 또는 R일 수 있다.
PSS 사양 3GPP TS 24.234 내의 장치 능력 교환 시그널링 능력은 서버가 당해 특정 장치에 적절한 콘텐츠를 광범위한 장치에 제공할 수 있게 한다. 클라이언트 단말로의 입체 3-D 비디오 콘텐츠의 전달을 개선하기 위해, 본 개시는 장치 능력 교환 시그널링에 대해 PSS 어휘에 포함될 수 있는 새로운 속성의 세트를 설명한다. 이러한 제안된 속성은 클라이언트가 지원하는 어느 3-D 비디오 프레임 패킹 포맷을 포함하는 클라이언트 단말의 3-D 비디오 디코딩 및 렌더링 능력을 설명할 수 있다. 이것은 예를 들어 서버 및 네트워크가 전송된 3-D 비디오 콘텐츠를 클라이언트 장치의 능력에 매칭시키기 위해 적절한 트랜스코딩 및 3-D 포맷 변환을 수행할 뿐만 아니라, 최적화된 RTSP SDP 또는 DASH MPD를 클라이언트 단말에 제공하는 것을 허용할 수 있다.
지원된 3-D 비디오 코덱 및 포맷의 장치 능력 교환 시그널링은 PSS 어휘 내의 3개의 새로운 속성의 포함과 함께 3GPP TS 26.234에서 인에이블링될 수 있다: (1) 스트리밍 구성요소에 대해, RTP 및 HTTP 각각을 통해 입체 3-D의 스트리밍에 관련된 지원 프레임 패킹 포맷의 리스트를 나타내는 2개의 속성, 및 (2) ThreeGPFileFormat 구성요소에 대해, 3GPP-기반 멀티미디어 서비스에 통상 사용되는 멀티미디어 컨테이너 포맷인 3GPP 파일 포맷(3GP) 파일에 포함될 수 있는 입체 3-D 비디오에 관련된 지원 프레임 패킹 포맷의 리스트를 나타내는 1개의 속성. 속성 정의의 상세는 일부 실시예에 따라 이하 제공된다.
속성 명칭: StreamingFramePackingFormatsRTP
속성 정의: PSS 애플리케이션에 의해 지원되는 RTP를 통해 입체 3-D 비디오의 스트리밍에 관련된 지원 프레임 패킹 포맷의 리스트. 입체 3-D 비디오에 대한 범위 내의 프레임 패킹 포맷은 이하를 포함한다:
Frame Compatible Packing Formats: 1 = Vertical interleaving, 2 = Horizontal interleaving, 3 = Side-by-Side, 4 = Top-Bottom, 0 = Checkerboard
Full-Resolution per View Packing Formats: 5 = Temporal interleaving
Component: Streaming
Type: Literal (Bag)
Legal values: List of integer values corresponding to the supported
frame packing formats.
Resolution rule: Append
EXAMPLE: <StreamingFramePackingFormatsRTP>
<rdf:Bag>
<rdf:li>3</rdf:li>
<rdf:li>4</rdf:li>
</rdf:Bag>
</StreamingFramePackingFormatsRTP>
속성 명칭: streamingFramePackingFormatsHTTP
속성 정의: PSS 애플리케이션에 의해 지원되는 HTTP를 통해 입체 3-D 비디오의 스트리밍에 관련된 지원 프레임 패킹 포맷의 리스트. 입체 3-D 비디오에 대한 범위 내의 프레임 패킹 포맷은 이하를 포함한다:
Frame Compatible Packing Formats: 1 = Vertical interleaving, 2 = Horizontal interleaving, 3 = Side-by-Side, 4 = Top-Bottom, 0 = Checkerboard
Full- Resolution per View Packing Formats: 5 = Temporal Interleaving
Component: Streaming
Type: Literal(Bag)
Legal values: List of integer values corresponding to the supported frame packing formats.
Resolution rule: Append
EXAMPLE: <StreamingFramePackingFormatsHTTP>
<rdf:Bag>
<rdf:li>3</rdf:li>
<rdf:li>4</rdf:li>
</rdf:Bag>
</StreamingFramePackingFormatsHTTP>
속성 명칭; ThreeGPFramePackingFormats
속성 정의: 3GP 파일에 포함되고 PSS 애플리케이션에 의해 처리될 수 있는 입체 3-D 비디오에 관련된 지원된 프레임 패킹 포맷의 리스트.
Component: ThreeGPFileFormat
Type: Literal(Bag)
유효 값: 지원된 프레임 패킹 포맷에 대응하는 정수 값의 리스트. 정수 값은 사이드 바이 사이드 및 톱 및 보톰 프레임 패킹 포멧에 각각 대응하는 3 또는 4일 것이다.
Resolution rule: Append
EXAMPLE: <ThreeGPFramePackingFormats>
<rdf:Bag>
<rdf:li>3</rdf:li>
<rdf:li>4</rdf:li>
</rdf:Bag>
</ThreeGPFramePackingFormats>
일부 실시예에서, MPD에서 설명된 바와 같이, 미디어 프리젠테이션은 예를 들어 적응 세트, 리프리젠테이션, 및 서브리프리젠테이션에 공통된 속성 및 요소를 포함할 수 있다. 하나의 그러한 공통 요소는 프레임패킹 요소일 수 있다. 프레임패킹 요소는 비디오 미디어 구성요소 타입의 프레임 패킹 배열 정보를 지정할 수 있다. 프레임패킹 요소가 비디오 구성요소에 제공되지 않을 때, 프레임 패킹은 비디오 미디어 구성요소에 대해 사용되지 않을 수 있다.
프레임패킹 요소는 이용된 프레임 패킹 구성 방식을 식별하기 위해 URI(uniform resource indicator)를 포함하는 @schemeIdUri 속성을 포함할 수 있다. 일부 실시예에서, 프레임패킹 요소는 디스크립터 요소에 대한 값을 제공하기 위해 @value 속성을 더 포함할 수 있다.
일부 실시예에서, 다수 프레임패킹 요소가 제공될 수 있다. 그렇다면, 각각의 요소는 설명된 리프리젠테이션을 선택하거나 거절하기에 충분한 정보를 포함할 수 있다.
모든 프레임패킹 요소의 구성 및 값이 인식되지 않는다면, 클라이언트는 설명된 리프리젠테이션을 무시할 수 있다. 클라이언트는 프레임패킹 요소를 관찰하는 것에 기초하여 적응 세트를 거절할 수 있다.
ISO/IEC 정보 기술- 오디오-비주얼 객체의 코딩- 파트 10: 고급 비디오 코딩(ISO/IEC 14496-10:2012)을 따르는 비디오 구성요소를 포함하는 적응 세트 또는 리프리젠테이션에 대해, FramePackin@schemeIdUri에 대한 균일 자원 번호는
um:mpeg:dash: 14496:10:frame packing arrangement type:2011일 수 있으며, 그것은 프레임패킹 요소에 포함될 ISO/IEC 14496-10:2012의 표 D-8('Defintion of frame__packing__arrangement_type')에 의해 정의된 바와 같은 프레임패킹 배열을 나타내기 위해 정의될 수 있다. @value는 ISO/IEC 14496-10:2012의 표 D-8에 지정된 바와 같은 '값' 열일 수 있고 동일한 표 내의 '해석' 열에 따라 해석될 수 있다.
도 5는 일부 실시예에 따른 3-D 비디오 장치 능력을 시그널링하는 방법(500)을 예시한다. 방법(500)은 UE, 예를 들어 UE(104)의 구성요소에 의해 수행될 수 있다. 일부 실시예에서, UE는 명령어를 저장한 하나 이상의 컴퓨터 판독 가능 매체에 대한 액세스를 포함하고/하거나 가질 수 있으며, 명령어는 실행될 때, UE, 또는 그것의 구성요소가 방법(500)을 수행하게 한다.
504에서, UE는 장치 성능 정보를 결정할 수 있다. 상술된 바와 같이, 장치 성능 정보는 미디어 플레이어의 디코딩 및 렌더링 능력에 관한 정보를 포함할 수 있다. 일부 실시예에서, UE 또는 다른 곳에 위치되는 콘텐츠 관리 모듈은 직접 능력을 테스트하기 위해 UE 상에 하나 이상의 스크립트를 실행함으로써 이러한 정보를 결정할 수 있다. 다른 실시예에서, 콘텐츠 관리 모듈은 관련 정보를 포함하는 하나 이상의 저장된 파일에 액세스할 수 있다 .
508에서, UE는 UE에서 미디어 플레이어의 입체 3-D 비디오 디코딩 및 렌더링 능력을 포함하는 장치 서버(116) 또는 장치 프로파일 서버(144)에 장치 성능 정보를 제공할 수 있다. 상술된 바와 같이, 장치 성능 정보는 UE의 스트리밍 애플리케이션에 의해 지원되는 프레임 타입의 리스트를 나타내는 하나 이상의 포맷 타입 속성을 포함할 수 있다. 일부 실시예에서, 장치 성능 정보는 512에서 요청 전에 또는 요청 후에 제공될 수 있다.
일부 실시예에서, 장치 성능 정보의 일부 또는 전부는 다른 엔티티, 예를 들어 장치 프로파일 서버에 의해 미디어 서버에 제공될 수 있다.
512에서, UE는 3-D 비디오 콘텐츠를 요청할 수 있다. 일부 실시예에서, 요청은 적절한 스트리밍/전송 프로토콜, 예를 들어 HTTP, RTP, RTSP, DASH, MBMS, PSS, IMS PSS MBMS 등을 따를 수 있다. 요청은 미디어 서버로 전송될 수 있고, 요청된 콘텐츠 또는 그것의 부분의 URL(uniform resource locator) 또는 일부 다른 지표를 포함할 수 있다. 일부 실시예에서, 장치 성능 정보(예를 들어, ProfDiff 시그널링을 통해)에 대한 임시 조정은 또한 508에서 요청에 따라 제공될 수 있다. 따라서, UE는 ProfDiff 시그널링에 기초하여, 장치 프로파일 서버로부터 검색된 프로파일 정보를 추가 속성으로 보충하거나 그것의 장치 능력 프로파일에 이미 설정된 속성에 대해 무효화할 수 있다. 일 예에서, 그러한 임시 조정은 단말이 3-D 비디오를 렌더링할 수 있음에도 불구하고 특정 세션에 대한 사용자가 2-D(two-dimensional) 비디오만을 수신하고 싶으면, 사용자 선호도에 의해 트리거링될 수 있다.
516에서, UE는 요청된 3-D 비디오 콘텐츠를 수신하고 UE의 디스플레이 상에 콘텐츠를 렌더링할 수 있다. 콘텐츠의 렌더링은 디코딩, 업 컨버팅, 언패킹, 시퀀싱 등과 같은 다양한 프로세스를 포함할 수 있지만, 이에 제한되지 않는다.
도 6은 일부 실시예에 따른 3-D 비디오 콘텐츠를 시그널링하는 방법(600)을 예시한다. 방법(600)은 미디어 서버의 구성요소, 예를 들어 미디어 서버(116)에 의해 수행될 수 있다. 일부 실시예에서, 미디어 서버는 명령어를 저장한 하나 이상의 컴퓨터 판독 가능 매체에 대한 액세스를 포함하고/하거나 가질 수 있으며, 명령어는 실행될 때 미디어 서버, 또는 그것의 구성요소가 방법(600)을 수행하게 한다.
604에서, 미디어 서버는 장치 성능 정보를 결정할 수 있다. 일부 실시예에서, 미디어 서버는 예를 들어 UE 또는 장치 프로파일 서버로부터의 정보를 세션 레벨 시그널링의 부분으로서 수신함으로써 장치 성능 정보를 결정할 수 있다.
608에서, 미디어 서버는 3-D 비디오 콘텐츠에 대한 요청을 수신할 수 있다. 일부 실시예에서, 요청은 적절한 스트리밍/전송 프로토콜, 예를 들어 HTTP, RTP, RTSP, DASH, MBMS, PSS, IMS PSS MBMS 등을 따를 수 있다. 요청은 UE로부터일 수 있고 요청된 콘텐츠 또는 그것의 부분의 URL(uniform resource locator) 또는 일부 다른 지표를 포함할 수 있다. 일부 실시예에서, 608에서 수신된 요청은 결정 전 또는 결정 후에, 장치 성능 정보(604)의 결정과 동시에 발생할 수 있다. 일부 실시예에서, 장치 성능 정보(예를 들어, ProfDiff 시그널링을 통해)에 대한 임시 조정은 또한 608에서 요청과 함께 수신될 수 있다. 따라서, 미디어 서버는 ProfDiff 시그널링에 기초하여, 장치 프로파일 서버로부터 검색된 프로파일 정보를 추가 속성으로 보충하거나 그것의 장치 능력 프로파일에 이미 설정된 속성에 대해 무효화할 수 있다.
612에서, 미디어 서버는 UE에서 미디어 플레이어의 입체 3-D 비디오 디코딩 및 렌더링 능력을 설명하는 장치 성능 정보에 기초하여 스트리밍 세션, 예를 들어 SDP 파일 또는 MPD(media presentation description)를 설정하기 위해 세션 기술 및/또는 메타 데이터를 생성할 수 있다.
616에서, 미디어 서버는 장치 성능 정보에서 UE에 의해 지원되는 것으로 표시되는 포맷 타입으로 3-D 비디오 콘텐츠를 인코딩할 수 있다. 그 다음, 3-D 비디오 콘텐츠는 모바일 장치로 스트리밍될 수 있다.
본 명세서에 설명되는 구성요소, 예를 들어 UE(104), 미디어 서버(116), 및/또는 장치 프로파일 서버(144)는 원하는 대로 구성하기 위해 임의의 적절한 하드웨어 및/또는 소프트웨어를 사용하여 시스템으로 구현될 수 있다. 일 실시예에 대해, 도 7은 하나 이상의 프로세서(들)(704), 적어도 하나의 프로세서(들)(704)과 결합되는 시스템 제어 로직(708), 시스템 제어 로직(708)과 결합되는 시스템 메모리(712), 시스템 제어 로직(708)과 결합되는 NVM(non-volatile memory)/스토리지(716), 시스템 제어 로직(708)과 결합되는 네트워크 인터페이스(720), 및 시스템 제어 로직(708)과 결합되는 입력/출력(I/O) 장치(732)를 포함하는 일 예의 시스템(700)을 예시한다.
프로세서(들)(704)는 하나 이상의 싱글 코어 또는 멀티 코어 프로세서를 포함할 수 있다. 프로세서(들)(704)는 범용 프로세서 및 전용 프로세서(예를 들어, 그래픽 프로세서, 애플리케이션 프로세서, 베이스밴드 프로세서 등)의 임의의 조합을 포함할 수 있다.
일 실시예에 대한 시스템 제어 로직(708)은 임의의 적절한 인터페이스를 적어도 하나의 프로세서(들)(704) 및/또는 시스템 제어 로직(708)과 통신하는 임의의 적절한 장치 또는 구성요소에 제공하기 위해 임의의 적절한 인터페이스 컨트롤러를 포함할 수 있다.
일 실시예에 대한 시스템 제어 로직(708)은 시스템 메모리(712)에 인터페이스를 제공하기 위해 하나 이상의 메모리 컨트롤러(들)를 포함할 수 있다. 시스템 메모리(712)는 데이터 및/또는 명령, 예를 들어 로직(724)을 로딩하고 저장하기 위해 사용될 수 있다. 일 실시예에 대한 시스템 메모리(712)는 예를 들어 DRAM(dynamic random access memory)과 같은 임의의 적절한 휘발성 메모리를 포함할 수 있다.
NVM/스토리지(716)는 데이터 및/또는 명령, 예를 들어 로직(724)을 저장하기 위해 사용되는 하나 이상의 유형의, 비일시적 컴퓨터 판독 가능 매체를 포함할 수 있다. NVM/스토리지(716)는 예를 들어 플래시 메모리와 같은 임의의 적절한 비휘발성 메모리를 포함하고/하거나, 예를 들어 하나 이상의 HDD(들)(hard disk drive(s)), 하나 이상의 CD(compact disk) 드라이브(들), 및/또는 하나 이상의 DVD(digital versatile disk) 드라이브(들)과 같은 임의의 적절한 비휘발성 스토리리 장치(들)를 포함할 수 있다.
NVM/스토리지(716)는 시스템(700)이 설치되거나 그것이 액세스 가능하게 될 수 있는 장치의 물리적 부분이지만, 반드시 장치의 부분이 아닌 저장 자원을 포함할 수 있다. 예를 들어, NVM/스토리지(716)는 네트워크 인터페이스(720)에 의한 네트워크를 통해 및/또는 입력/출력(I/O) 장치(732)를 통해 액세스될 수 있다.
로직(724)은 적어도 하나의 프로세서(704)에 의해 실행될 때, 시스템이 UE(104), 미디어 서버(116), 및/또는 장치 프로파일 서버(144)에 대해 본 발명에서 설명된 동작을 수행하게 할 수 있다. 로직(724)은 시스템의 다른 구성요소, 예를 들어 시스템 제어 로직(708)에서 부가적으로/대안으로 배치될 수 있고, 하드웨어, 소프트웨어, 또는 펌웨어 구성요소의 임의의 조합을 포함할 수 있다.
네트워크 인터페이스(720)는 하나 이상의 네트워크(들) 및/또는 임의의 다른 적절한 장치를 통해 통신하기 위해 시스템(700)에 무선 인터페이스를 제공하도록 트랜시버(722)를 가질 수 있다. 다양한 실시예에서, 트랜시버(722)는 시스템(700)의 다른 구성요소와 통합될 수 있다. 예를 들어, 트랜시버(722)는 프로세서(들)(704)의 프로세서, 시스템 메모리(712)의 메모리, 및 NVM/스토리지(716)의 NVM 스토리지를 포함할 수 있다. 네트워크 인터페이스(720)는 임의의 적절한 하드웨어 및/또는 펌웨어를 포함할 수 있다. 네트워크 인터페이스(720)는 다중 입력, 다중 출력 무선 인터페이스를 제공하기 위해 복수의 안테나를 포함할 수 있다. 일 실시예에 대한 네트워크 인터페이스(720)는 예를 들어 유선 네트워크 어댑터, 무선 네트워크 어댑터, 전화 모뎀, 및/또는 무선 모뎀을 포함할 수 있다.
일 실시예에 대해, 적어도 하나의 프로세서(들)(704)는 시스템 제어 로직(708)의 하나 이상의 컨트롤러(들)에 대한 로직과 함께 패키징될 수 있다. 일 실시예에 대해, 적어도 하나의 프로세서(들)(704)는 SiP(System in Package)를 형성하기 위해 시스템 제어 로직(708)의 하나 이상의 컨트롤러에 대해 로직과 함께 패키징될 수 있다. 일 실시예에 대해, 적어도 하나의 프로세서(들)(704)는 시스템 제어 로직(708)의 하나 이상의 컨트롤러(들)에 대한 로직과 동일한 다이 상에 집적될 수 있다. 일 실시예에 대해, 적어도 하나의 프로세서(들)(704)는 SoC(System on Chip)를 형성하기 위해 시스템 제어 로직(708)의 하나 이상의 컨트롤러(들)에 대한 로직과 동일한 다이 상에 집적될 수 있다.
다양한 실시예에서, I/O 장치(732)는 시스템(700)과의 사용자 상호 작용을 가능하도록 설계된 사용자 인터페이스, 시스템(700)과의 주변 구성요소 상호 작용을 가능하도록 설계된 주변 구성요소 인터페이스, 및/또는 센서 시스템(700)과 관련된 환경 조건 및/또는 위치 정보를 결정하도록 설계된 센서를 포함할 수 있다.
다양한 실시예에서, 사용자 인터페이스는 3-D 비디오(예를 들어, 액정 디스플레이, 터치스크린 디스플레이, 자동-입체 디스플레이 등)를 렌더링하는 디스플레이, 스피커, 마이크로폰, 하나 이상의 카메라(예를 들어, 스틸 카메라 및/또는 비디오 카메라), 손전등(예를 들어, 발광 다이오드 플래시), 및 키보드를 포함할 수 있으나, 이에 제한되지 않는다.
다양한 실시예에서, 주변 구성요소 인터페이스는 비휘발성 메모리 포트, USB(universal serial bus) 포트, 오디오 잭, 및 전원 인터페이스를 포함할 수 있지만, 이에 제한되지 않는다.
다양한 실시예에서, 센서는 자이로 센서, 가속도계, 근접 센서, 주변 광 센서, 및 위치결정 유닛을 포함할 수 있지만, 이에 제한되지 않는다. 위치결정 유닛은 또한 예를 들어 GPS(global positioning system) 위성과 같은 위치결정 네트워크의 구성요소와 통신하는 네트워크 인터페이스(720)의 일부가 되거나 이것과 상호 작용할 수 있다.
다양한 실시예에서, 시스템(700)은 랩톱 컴퓨팅 장치, 태블릿 컴퓨팅 장치, 넷북, 스마트폰 등과 같은 모바일 컴퓨팅 장치일 수 있지만, 이에 제한되지 않는다. 다양한 실시예에서, 시스템(700)은 다소의 구성요소, 및/또는 상이한 아키텍처를 가질 수 있다.
특정 실시예가 설명의 목적을 위해 본 명세서에 예시되고 설명되었지만, 동일한 목적을 달성하도록 의도된 매우 다양한 대체 및/또는 균등 실시예가 본 개시의 범위로부터 벗어나지 않으면서 도시되고 설명된 실시예를 대신하여 사용될 수 있다. 본 출원은 본 명세서에서 논의된 실시예의 임의의 개조 또는 변화를 포괄하도록 의도된다. 따라서, 본 명세서에 설명된 실시예는 특허청구범위 및 그 균등물에 의해서만 제한되도록 명백히 의도된다.

Claims (30)

  1. 명령어를 갖는 하나 이상의 컴퓨터 판독 가능 매체로서,
    상기 명령어는 실행될 때 장치로 하여금,
    장치 프로파일 서버로부터, 무선 통신 네트워크의 클라이언트 단말에 의해 지원되고 상기 클라이언트 단말 상의 PSS(packet-switched streaming service) 애플리케이션에 의해 지원되는 전송 프로토콜을 통한 입체 3-D 비디오의 스트리밍에 관련된 프레임 패킹 포맷의 리스트를 포함하는 스트리밍 프레임 패킹 포맷 속성(a streaming frame packing format attribute)을 획득하게 하고 - 상기 전송 프로토콜은 RTP(real-time transport protocol) 또는 HTTP(hypertext transfer protocol)임 - ,
    상기 스트리밍 프레임 패킹 포맷 속성에 기초하여 콘텐츠를 적응(adapt)시키게 하고,
    상기 스트리밍 프레임 패킹 포맷 속성에 기초하여 스트리밍 세션을 설정하기 위해 세션 기술(description) 또는 메타 데이터 파일을 생성하게 하고,
    상기 적응된 콘텐츠 및 상기 생성된 세션 기술 또는 메타 데이터 파일을 상기 클라이언트 단말에 송신하게 하는
    하나 이상의 컴퓨터 판독 가능 매체.
  2. 제 1 항에 있어서,
    상기 프레임 패킹 포맷의 리스트는 수직 인터리빙 프레임 호환 가능 패킹 포맷(vertical interleaving frame compatible packing format), 수평(horizontal) 인터리빙 프레임 호환 가능 패킹 포맷, 사이드 바이 사이드 프레임 호환 가능 패킹 포맷, 상-하위(top-bottom) 프레임 호환 가능 패킹 포맷, 체커보드 프레임 호환 가능 패킹 포맷, 또는 뷰 당 시간 인터리빙 전체 해상도(temporal interleaving full-resolution per view) 패킹 포맷의 표시를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  3. 제 1 항에 있어서,
    상기 리스트는 하나 이상의 지원 프레임 패킹 포맷에 각각 대응하는 하나 이상의 정수 값의 리스트를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  4. 제 3 항에 있어서,
    상기 하나 이상의 정수 값의 리스트는 수직 인터리빙 프레임 호환 가능 패킹 포맷에 대응하는 정수 1, 수평 인터리빙 프레임 호환 가능 패킹 포맷에 대응하는 정수 2, 사이드 바이 사이드 프레임 호환 가능 패킹 포맷에 대응하는 정수 3, 상-하위 프레임 호환 가능 패킹 포맷에 대응하는 정수 4, 체커보드 프레임 호환 가능 패킹 포맷에 대응하는 정수 0, 또는 뷰 당 시간 인터리빙 전체 해상도 패킹 포맷에 대응하는 정수 5를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  5. 제 1 항에 있어서,
    상기 전송 프로토콜은 RTP를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  6. 제 1 항에 있어서,
    상기 전송 프로토콜은 HTTP를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  7. 제 1 항에 있어서,
    상기 세션 기술 또는 메타 데이터 파일은 RTSP(real-time streaming protocol) SDP(session description protocol) 파일 또는 DASH(dynamic adaptive streaming over hypertext transport protocol) MPD(media presentation description) 파일인
    하나 이상의 컴퓨터 판독 가능 매체.
  8. 제 1 항에 있어서,
    상기 콘텐츠는 3-D 비디오 콘텐츠이고, 상기 명령어는 실행될 때 상기 장치로 하여금 또한
    상기 스트리밍 프레임 패킹 포맷 속성에 기초하여 상기 3-D 비디오 콘텐츠를 트랜스코딩하거나 상기 3-D 비디오 콘텐츠의 포맷을 변환하게 하는
    하나 이상의 컴퓨터 판독 가능 매체.
  9. 삭제
  10. 명령어를 갖는 하나 이상의 컴퓨터 판독 가능 매체로서,
    상기 명령어는 실행될 때 장치로 하여금,
    장치 프로파일 서버로부터, 사용자 장비에 의해 지원되고 3GP(3rd Generation Partnership Project file format) 파일에 포함될 수 있는 입체 3-D 비디오에 관련되고 상기 사용자 장비 상의 PSS(packet-switched streaming service) 애플리케이션에 의해 처리되는 하나 이상의 프레임 패킹 포맷의 리스트를 포함하는 프레임 패킹 포맷 속성을 획득하게 하고, 상기 프레임 패킹 포맷 속성에 기초하여 콘텐츠를 상기 사용자 장비에 송신하게 하는
    하나 이상의 컴퓨터 판독 가능 매체.
  11. 제 10 항에 있어서,
    상기 프레임 패킹 포맷의 리스트는 사이드 바이 사이드 프레임 패킹 포맷 또는 상-하위 프레임 패킹 포맷의 표시를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  12. 제 10 항에 있어서,
    상기 리스트는 하나 이상의 프레임 패킹 포맷에 각각 대응하는 하나 이상의 정수 값의 리스트를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  13. 제 12 항에 있어서,
    상기 하나 이상의 정수 값의 리스트는 사이드 바이 사이드 프레임 패킹 포맷에 대응하는 정수 3 또는 상-하위 프레임 패킹 포맷에 대응하는 정수 4를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  14. 모바일 장치에 의해 무선 수신되는 입체 3차원(3-D) 비디오 콘텐츠를 상기 모바일 장치의 디스플레이 상에 디코딩하고 렌더링하는 미디어 플레이어와,
    콘텐츠 관리 모듈을 포함하되,
    상기 콘텐츠 관리 모듈은,
    상기 미디어 플레이어에 의해 지원되는 3-D 비디오 코덱 및 포맷을 포함하는 장치 성능 정보를 결정하고,
    하나 이상의 메시지를 장치 프로파일 서버에 송신 - 상기 하나 이상의 메시지는 상기 장치 성능 정보를 포함함 - 하며,
    적어도 하나의 메시지를 미디어 서버에 송신 - 상기 적어도 하나의 메시지는 입체 3-D 비디오 콘텐츠에 대한 요청 및 상기 장치 성능 정보에 관한 임의의 임시 조정을 포함함 - 하는
    장치.
  15. 제 14 항에 있어서,
    상기 장치 성능 정보는 미디어 플레이어 회로에 의해 지원되는 포맷 타입을 포함하는 3-D 포맷 속성을 갖는
    장치.
  16. 제 15 항에 있어서,
    상기 포맷 타입은, 프레임 호환 가능 패킹 포맷 또는 뷰 당 전체 해상도 패킹 포맷에 대응하는 프레임 패킹 포맷 타입, 사이멀캐스트(simulcast) 포맷 타입, 또는 2차원 플러스 보조(two-dimensional plus auxiliary) 포맷 타입인
    장치.
  17. 제 16 항에 있어서,
    상기 포맷 타입은 수직 인터리빙, 수평 인터리빙, 사이드 바이 사이드, 상-하위, 또는 체커보드를 표시하는 값을 갖는 프레임 호환 가능 패킹 포맷인 프레임 패킹 포맷 타입인
    장치.
  18. 제 14 항에 있어서,
    상기 3-D 비디오 콘텐츠는 패킷 교환 스트리밍 서비스를 통해 상기 모바일 장치에 의해 무선 수신되는
    장치.
  19. 제 14 항에 있어서,
    상기 콘텐츠 관리 모듈은 서비스 탐색(service discovery) 동안 SIP(session initiation protocol) SUBSCRIBE 메시지 내의 장치 성능 정보를 인터넷 프로토콜 멀티미디어 코어 네트워크 서브시스템에 송신하는
    장치.
  20. 제 19 항에 있어서,
    서비스 탐색 다음에, 상기 콘텐츠 관리 모듈은 지원된 3-D 비디오 코덱 및 포맷의 세트를 갱신하기 위해 SIP 시그널링을 사용하는
    장치.
  21. 제 14 항에 있어서,
    상기 미디어 플레이어는 상기 요청된 입체 3-D 비디오 콘텐츠를 포함하는 스트림을 수신하도록 또한 구성되고, 상기 미디어 플레이어는 DASH(dynamic adaptive streaming over hypertext transport portocol) 프로토콜, PSS(packet-switched streaming) 프로토콜, 또는 IMS(Internet protocol multimedia subsystem) 기반 PSS 및 MBMS(multimedia broadcast/multicast) 서비스 프로토콜에 따라 상기 스트림을 수신하도록 또한 구성되는
    장치.
  22. 제 21 항에 있어서,
    상기 미디어 플레이어는 상기 스트림과 연관된 SDP(session description protocol) 파일 또는 MPD(media presentation description) 메타 데이터 파일을 수신하도록 또한 구성되는
    장치.
  23. 제 14 항의 장치를 포함하는
    모바일 장치.
  24. 제 23 항에 있어서,
    상기 미디어 플레이어의 제어 하에 상기 3-D 비디오 콘텐츠를 렌더링하는 자동 입체 디스플레이를 더 포함하는
    모바일 장치.
  25. 명령어를 갖는 하나 이상의 컴퓨터 판독 가능 매체로서,
    상기 명령어는 실행될 때 장치 프로파일 서버로 하여금,
    사용자 장비와 관련된 3-D 성능 정보에 대한 요청을 획득하게 하고,
    상기 사용자 장비에 의해 지원되고 상기 사용자 장비 상의 PSS(packet-switched streaming service) 애플리케이션에 의해 지원되는 전송 프로토콜을 통해 입체 3-D 비디오의 스트리밍에 관련된 프레임 패킹 포맷의 리스트를 포함하는 스트리밍 프레임 패킹 포맷 속성을 제공하게 하되,
    상기 전송 프로토콜은 RTP(real-time transport protocol) 또는 HTTP(hypertext transfer protocol)인
    하나 이상의 컴퓨터 판독 가능 매체.
  26. 제 25 항에 있어서,
    상기 프레임 패킹 포맷의 리스트는 수직 인터리빙 프레임 호환 가능 패킹 포맷, 수평 인터리빙 프레임 호환 가능 패킹 포맷, 사이드 바이 사이드 프레임 호환 가능 패킹 포맷, 상-하위 프레임 호환 가능 패킹 포맷, 체커보드 프레임 호환 가능 패킹 포맷, 또는 뷰 당 시간 인터리빙 전체 해상도 패킹 포맷의 표시를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  27. 제 25 항에 있어서,
    상기 전송 프로토콜은 RTP를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  28. 제 25 항에 있어서,
    상기 전송 프로토콜은 HTTP를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  29. 제 25 항에 있어서,
    상기 리스트는 하나 이상의 지원 프레임 패킹 포맷에 각각 대응하는 하나 이상의 정수 값의 리스트를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
  30. 제 29 항에 있어서,
    상기 하나 이상의 정수 값의 리스트는 수직 인터리빙 프레임 호환 가능 패킹 포맷에 대응하는 정수 1, 수평 인터리빙 프레임 호환 가능 패킹 포맷에 대응하는 정수 2, 사이드 바이 사이드 프레임 호환 가능 패킹 포맷에 대응하는 정수 3, 상-하위 프레임 호환 가능 패킹 포맷에 대응하는 정수 4, 체커보드 프레임 호환 가능 패킹 포맷에 대응하는 정수 0, 또는 뷰 당 시간 인터리빙 전체 해상도 패킹 포맷에 대응하는 정수 5를 포함하는
    하나 이상의 컴퓨터 판독 가능 매체.
KR1020147026843A 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링 KR101630108B1 (ko)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201261621939P 2012-04-09 2012-04-09
US61/621,939 2012-04-09
US201261679627P 2012-08-03 2012-08-03
US61/679,627 2012-08-03
US13/626,767 US9584793B2 (en) 2012-04-09 2012-09-25 Signaling three-dimensional video information in communication networks
US13/626,767 2012-09-25
PCT/US2013/035839 WO2013155110A1 (en) 2012-04-09 2013-04-09 Signaling three dimensional video information in communication networks

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020167014926A Division KR101727875B1 (ko) 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링

Publications (2)

Publication Number Publication Date
KR20140136007A KR20140136007A (ko) 2014-11-27
KR101630108B1 true KR101630108B1 (ko) 2016-06-13

Family

ID=74551320

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020167014926A KR101727875B1 (ko) 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링
KR1020177009637A KR101881265B1 (ko) 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링
KR1020147026843A KR101630108B1 (ko) 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020167014926A KR101727875B1 (ko) 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링
KR1020177009637A KR101881265B1 (ko) 2012-04-09 2013-04-09 통신 네트워크에서 3차원 비디오 정보의 시그널링

Country Status (19)

Country Link
US (3) US9584793B2 (ko)
EP (2) EP2837192B8 (ko)
JP (2) JP6248330B2 (ko)
KR (3) KR101727875B1 (ko)
CN (2) CN103369467B (ko)
AU (1) AU2016203175B2 (ko)
BE (1) BE1021405B1 (ko)
CA (2) CA2957198C (ko)
FI (2) FI126988B (ko)
FR (1) FR2993426B1 (ko)
HK (1) HK1187769A1 (ko)
IT (1) ITMI20130537A1 (ko)
MX (2) MX341486B (ko)
MY (1) MY168796A (ko)
NL (1) NL2010602C2 (ko)
RU (2) RU2643446C1 (ko)
SE (1) SE537942C2 (ko)
TW (2) TW201720149A (ko)
WO (1) WO2013155110A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019151798A1 (ko) * 2018-01-31 2019-08-08 엘지전자 주식회사 무선 통신 시스템에서 이미지에 대한 메타데이터를 송수신하는 방법 및 장치

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9584793B2 (en) 2012-04-09 2017-02-28 Intel Corporation Signaling three-dimensional video information in communication networks
US9438883B2 (en) 2012-04-09 2016-09-06 Intel Corporation Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content
CN103294767A (zh) * 2013-04-22 2013-09-11 腾讯科技（深圳）有限公司 浏览器的多媒体信息显示方法及装置
MY182878A (en) * 2013-05-31 2021-02-05 Sony Corp Information processing device and information processing method
KR20150083429A (ko) * 2014-01-08 2015-07-17 한국전자통신연구원 Ｄａｓｈ를 사용하는 비디오 재생을 위한 비트 깊이 표현 방법
TWI510911B (zh) * 2014-01-14 2015-12-01 Wistron Corp 行動電話及內核除錯訊息之輸出方法
EP3107288B1 (en) * 2014-02-10 2020-09-09 LG Electronics Inc. Method and apparatus for transmitting/receiving broadcast signal for 3-dimensional (3d) broadcast service
WO2015167177A1 (ko) * 2014-04-30 2015-11-05 엘지전자 주식회사 방송 전송 장치, 방송 수신 장치, 방송 전송 장치의 동작 방법 및 방송 수신 장치의 동작 방법
MY194189A (en) * 2015-02-11 2022-11-18 Vid Scale Inc Systems and methods for generalized http headers in dynamic adaptive streaming over http (dash)
US20170026431A1 (en) * 2015-07-20 2017-01-26 Intel IP Corporation Multicast mechanism for wireless devices
JP2017092646A (ja) * 2015-11-06 2017-05-25 株式会社リコー 情報処理システム、情報処理装置、情報処理方法及びプログラム
CN106454317B (zh) * 2016-11-15 2018-04-13 天津大学 基于模糊控制的立体视频质量自适应算法
EP3603083A4 (en) * 2017-03-26 2020-12-16 SHARP Kabushiki Kaisha INFORMATION SIGNALING SYSTEMS AND METHODS FOR VIRTUAL REALITY APPLICATIONS
CN108668179B (zh) * 2017-03-27 2021-05-14 华为技术有限公司 媒体索引文件的传输方法及相关设备
US10484308B2 (en) 2017-03-31 2019-11-19 At&T Intellectual Property I, L.P. Apparatus and method of managing resources for video services
US10819763B2 (en) 2017-03-31 2020-10-27 At&T Intellectual Property I, L.P. Apparatus and method of video streaming
US20190104326A1 (en) * 2017-10-03 2019-04-04 Qualcomm Incorporated Content source description for immersive media data
KR102476204B1 (ko) * 2017-10-19 2022-12-08 삼성전자주식회사 멀티 코덱 인코더 및 이를 포함하는 멀티 코덱 인코딩 시스템
WO2019167633A1 (ja) * 2018-02-28 2019-09-06 ソニー株式会社 コンテンツ配信制御装置、コンテンツ配信制御方法、プログラム、およびコンテンツ配信システム
US11425433B2 (en) 2018-02-28 2022-08-23 Sony Corporation Content delivery control apparatus, content delivery control method, program, and content delivery control system
CN109743281A (zh) * 2018-11-19 2019-05-10 视联动力信息技术股份有限公司 一种通信方法及装置
US11044185B2 (en) 2018-12-14 2021-06-22 At&T Intellectual Property I, L.P. Latency prediction and guidance in wireless communication systems
US11320725B2 (en) 2019-11-22 2022-05-03 Canon Kabushiki Kaisha Projection type display apparatus, projection type display system, control method of projection type display apparatus, and storage medium
CN113382227A (zh) * 2021-06-03 2021-09-10 天翼阅读文化传播有限公司 一种基于智能手机的裸眼3d全景视频渲染装置及方法
US20230007067A1 (en) * 2021-06-30 2023-01-05 Tencent America LLC Bidirectional presentation datastream
JP2023044353A (ja) 2021-09-17 2023-03-30 セイコーエプソン株式会社 電気光学装置および電子機器

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080151885A1 (en) 2005-02-08 2008-06-26 Uwe Horn On-Demand Multi-Channel Streaming Session Over Packet-Switched Networks

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8463912B2 (en) * 2000-05-23 2013-06-11 Media Farm, Inc. Remote displays in mobile communication networks
US6407680B1 (en) 2000-12-22 2002-06-18 Generic Media, Inc. Distributed on-demand media transcoding system and method
KR100420601B1 (ko) * 2001-11-22 2004-03-02 에스케이 텔레콤주식회사 비디오 데이터 스트리밍 서비스 방법
JP2004282462A (ja) 2003-03-17 2004-10-07 Nippon Telegr & Teleph Corp <Ntt> ３次元映像情報配信システム
KR100556826B1 (ko) 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
US7392316B2 (en) 2003-06-30 2008-06-24 Microsoft Corporation Client to server streaming of multimedia content using HTTP
US7426734B2 (en) 2003-10-24 2008-09-16 Microsoft Corporation Facilitating presentation functionality through a programming interface media namespace
US8537204B2 (en) 2004-07-08 2013-09-17 Gyoung Il Cho 3D television broadcasting system
TWI242382B (en) 2004-08-31 2005-10-21 Sunplus Technology Co Ltd Three-dimensional video composite signal demodulating method and system capable of inhibiting pseudo-color noises
ES2557295T3 (es) 2005-04-28 2016-01-25 Arenanet, Llc Sistema y método para la distribución selectiva de información
JP2006331199A (ja) 2005-05-27 2006-12-07 Ntt Docomo Inc サービス決定装置及びサービス決定方法
JP2007036874A (ja) * 2005-07-28 2007-02-08 Univ Of Tokyo 視聴者情報測定システム及びこれを用いたマッチングシステム
US8970680B2 (en) * 2006-08-01 2015-03-03 Qualcomm Incorporated Real-time capturing and generating stereo images and videos with a monoscopic low power mobile device
US20080228912A1 (en) 2007-03-16 2008-09-18 Ramakrishna Vedantham Enhanced Quality Reporting for Transmission Sessions
KR100962696B1 (ko) 2007-06-07 2010-06-11 주식회사 이시티 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법
WO2009013438A2 (fr) 2007-07-17 2009-01-29 France Telecom Appropriation dynamique d'au moins un equipement multimedia lors d'une mise en communication
US20100134494A1 (en) 2008-12-02 2010-06-03 Electronics And Telecommunications Research Institute Remote shading-based 3d streaming apparatus and method
US9083958B2 (en) * 2009-08-06 2015-07-14 Qualcomm Incorporated Transforming video data in accordance with three dimensional input formats
US20110032333A1 (en) 2009-08-07 2011-02-10 Darren Neuman Method and system for 3d video format conversion with inverse telecine
US8380878B2 (en) * 2009-08-13 2013-02-19 Cox Communications, Inc. Side loading
US8310520B2 (en) 2009-08-19 2012-11-13 Avaya Inc. Flexible decomposition and recomposition of multimedia conferencing streams using real-time control information
US8976871B2 (en) 2009-09-16 2015-03-10 Qualcomm Incorporated Media extractor tracks for file format track selection
CN102714715B (zh) * 2009-09-22 2016-01-20 高通股份有限公司 用于文件格式轨迹选择的媒体提取器轨迹
DK2491720T3 (en) 2009-10-20 2018-06-06 Ericsson Telefon Ab L M PROVIDING SUPPLEMENTARY TREATMENT INFORMATION
US20110138018A1 (en) 2009-12-04 2011-06-09 Qualcomm Incorporated Mobile media server
KR20120125246A (ko) * 2010-01-07 2012-11-14 톰슨 라이센싱 비디오 컨텐츠의 디스플레이를 제공하는 방법 및 장치
KR101694821B1 (ko) 2010-01-28 2017-01-11 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
WO2011136621A2 (en) 2010-04-30 2011-11-03 Lg Electronics Inc. An apparatus of processing an image and a method of processing thereof
US8402502B2 (en) * 2010-06-16 2013-03-19 At&T Intellectual Property I, L.P. Method and apparatus for presenting media content
US9131033B2 (en) 2010-07-20 2015-09-08 Qualcomm Incoporated Providing sequence data sets for streaming video data
US9560406B2 (en) * 2010-07-20 2017-01-31 At&T Intellectual Property I, L.P. Method and apparatus for adapting a presentation of media content
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US9226045B2 (en) 2010-08-05 2015-12-29 Qualcomm Incorporated Signaling attributes for network-streamed video data
US8677428B2 (en) 2010-08-20 2014-03-18 Disney Enterprises, Inc. System and method for rule based dynamic server side streaming manifest files
CN103069817A (zh) 2010-08-23 2013-04-24 Lg电子株式会社 用于在3dtv中提供3d视频数据的方法
US8896664B2 (en) 2010-09-19 2014-11-25 Lg Electronics Inc. Method and apparatus for processing a broadcast signal for 3D broadcast service
EP2706755A4 (en) * 2011-05-27 2014-07-16 Huawei Tech Co Ltd MEDIA TRANSMISSION PROCEDURE, MEDIA RECEPTION PROCEDURE, CLIENT AND SYSTEM THEREFOR
EP2597876A1 (en) * 2011-11-24 2013-05-29 Koninklijke Philips Electronics N.V. Interlaced 3D video
US9584793B2 (en) 2012-04-09 2017-02-28 Intel Corporation Signaling three-dimensional video information in communication networks

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080151885A1 (en) 2005-02-08 2008-06-26 Uwe Horn On-Demand Multi-Channel Streaming Session Over Packet-Switched Networks

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019151798A1 (ko) * 2018-01-31 2019-08-08 엘지전자 주식회사 무선 통신 시스템에서 이미지에 대한 메타데이터를 송수신하는 방법 및 장치
US11303826B2 (en) 2018-01-31 2022-04-12 Lg Electronics Inc. Method and device for transmitting/receiving metadata of image in wireless communication system

Also Published As

Publication number Publication date
SE1350444A1 (sv) 2013-10-10
CN105915882B (zh) 2019-04-30
EP2837192A1 (en) 2015-02-18
MY168796A (en) 2018-12-04
HK1187769A1 (zh) 2014-04-11
TWI578756B (zh) 2017-04-11
CA2957198C (en) 2019-05-07
MX362598B (es) 2019-01-25
MX341486B (es) 2016-08-23
CN103369467A (zh) 2013-10-23
FI20135313A (fi) 2013-10-10
CN103369467B (zh) 2016-06-22
US10194134B2 (en) 2019-01-29
KR101727875B1 (ko) 2017-04-17
RU2591174C2 (ru) 2016-07-10
US20150113572A1 (en) 2015-04-23
FI126988B (en) 2017-09-15
FR2993426A1 (fr) 2014-01-17
JP2015515830A (ja) 2015-05-28
KR20140136007A (ko) 2014-11-27
US20130266289A1 (en) 2013-10-10
RU2643446C1 (ru) 2018-02-01
TW201720149A (zh) 2017-06-01
FI20175391L (fi) 2017-05-04
MX2014011579A (es) 2015-06-23
EP2837192B8 (en) 2021-01-20
FI129521B (en) 2022-03-31
US9787967B2 (en) 2017-10-10
RU2014138947A (ru) 2016-04-10
ITMI20130537A1 (it) 2013-10-10
US9584793B2 (en) 2017-02-28
TW201401849A (zh) 2014-01-01
AU2016203175B2 (en) 2017-10-19
NL2010602C2 (en) 2015-04-09
NL2010602A (en) 2013-10-15
WO2013155110A1 (en) 2013-10-17
JP6248330B2 (ja) 2017-12-20
KR20160075787A (ko) 2016-06-29
KR101881265B1 (ko) 2018-07-23
BE1021405B1 (fr) 2015-11-17
EP2966875A1 (en) 2016-01-13
AU2013246041A1 (en) 2014-10-02
CA2957198A1 (en) 2013-10-17
CA2868038A1 (en) 2013-10-17
BR112014024061A2 (ko) 2017-06-20
SE537942C2 (sv) 2015-12-01
US20170353709A1 (en) 2017-12-07
EP2837192A4 (en) 2015-08-19
EP2837192B1 (en) 2020-10-28
AU2016203175A1 (en) 2016-06-09
CN105915882A (zh) 2016-08-31
KR20170044205A (ko) 2017-04-24
JP6428885B2 (ja) 2018-11-28
CA2868038C (en) 2017-03-28
FR2993426B1 (fr) 2018-03-16
JP2018014746A (ja) 2018-01-25

Similar Documents

Publication Publication Date Title
KR101630108B1 (ko) 통신 네트워크에서 3차원 비디오 정보의 시그널링
ES2482605B2 (es) Señalización de información de vídeo tridimensional en redes de comunicación
AU2013246041B2 (en) Signaling three dimensional video information in communication networks
FI20225190A1 (en) Signaling of three-dimensional video information in communication networks
BR112014024061B1 (pt) Meio legível por computador, método, aparelho e sistema para sinalização de informação de vídeo tridimensional em redes de comunicação

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190530

Year of fee payment: 4