KR20220130553A - 영상 데이터를 송수신하는 단말 장치, 서버 및 이의 동작 방법 - Google Patents
영상 데이터를 송수신하는 단말 장치, 서버 및 이의 동작 방법 Download PDFInfo
- Publication number
- KR20220130553A KR20220130553A KR1020210093144A KR20210093144A KR20220130553A KR 20220130553 A KR20220130553 A KR 20220130553A KR 1020210093144 A KR1020210093144 A KR 1020210093144A KR 20210093144 A KR20210093144 A KR 20210093144A KR 20220130553 A KR20220130553 A KR 20220130553A
- Authority
- KR
- South Korea
- Prior art keywords
- image data
- data stream
- information
- layer image
- base layer
- Prior art date
Links
- 238000011017 operating method Methods 0.000 title 1
- 238000000034 method Methods 0.000 claims abstract description 74
- 230000005540 biological transmission Effects 0.000 claims description 40
- 239000000284 extract Substances 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 10
- 238000012549 training Methods 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 5
- 238000000605 extraction Methods 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000013145 classification model Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000007637 random forest analysis Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000013517 stratification Methods 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/64—Addressing
- H04N21/6405—Multicasting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
- H04N21/23655—Statistical multiplexing, e.g. by controlling the encoder to alter its bitrate to optimize the bandwidth utilization
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440227—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Computer And Data Communications (AREA)
Abstract
영상 데이터를 전송하는 방법은 원본 영상을 복수의 영상 데이터 스트림으로 계층화하는 단계, 상기 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 미리 설정된 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 단계, 및 상기 복수의 영상 데이터 스트림 각각을 대응되는 채널로 전송하는 단계를 포함할 수 있다.
Description
본 발명은 영상 전송 기술 분야에 관한 것으로, 특히 영상 데이터 송수신 방법 및 장치, 단말 장치 및 서버에 관한 것이다.
멀티 캐스트는 하나 이상의 송신자(멀티 캐스트 소스)가 단일 데이터 패킷을 여러 수신기로 전송할 수 있도록 하는 네트워크 기술로, 네트워크 대역폭을 절약하고 네트워크 부하를 줄이는 효과적인 수단이다. 멀티 캐스트 소스(예: 서버)는 특정 멀티 캐스트 그룹에 데이터 패킷을 전송하고, 멀티 캐스트 그룹의 주소에 속한 수신기 (예: 단말 장치)만이 데이터 패킷을 수신 할 수 있다.
기존의 멀티 캐스트 기술은 단일 영상 스트림 멀티 캐스트, 다중 영상 스트림 반복 멀티 캐스트 및 계층화된 영상 멀티 캐스트를 포함한다. 그 중에서 단일 영상 스트림 멀티 캐스트 기술의 경우 각 수신기(예: 단말 장치)는 동일한 품질(예: 해상도)의 영상만 얻을 수 있으며, 영상 품질에 대한 선택 시나리오는 비교적 간단하다.
다중 영상 스트림 반복 멀티 캐스트 기술의 경우 동일한 원본 영상의 다른 품질(예: 다른 해상도)을 가진 소스를 다른 채널에서 전송할 수 있으며, 이로 인해 동일한 영상이 제한된 네트워크 대역폭을 반복적으로 차지하고 더 큰 네트워크 전송 대역폭을 유발함으로 인해 트래픽이 증가할 수 있다. 또한 중복 정보 처리로 인해 컴퓨팅 리소스가 낭비될 수 있다. 계층형 영상 멀티 캐스트 기술의 경우, 수신기(예: 단말 장치)는 네트워크 상태의 변화에 *?*적응하기 위해 정기적으로 멀티 캐스트 그룹에 가입하고 탈퇴해야 하고, 이로 인해 멀티 캐스트 라우팅 및 수신기 속도 적응이 전체적으로 과부하 되어 영상 품질 수신이 불안정할 수 있는 문제가 발생할 수 있다. 또한 기존의 계층형 영상 멀티 캐스트 기술은 많은 애플리케이션 시나리오를 다루지 못하며 네트워크 정체 (특히 네트워크내 단기 정체)에 느리게 대응한다.
본 발명은 기존 기술의 결점에 대비한 영상 데이터 송수신 방법, 단말 장치 및 서버를 제공한다.
본 개시의 실시예에 따른 영상 데이터를 전송하는 방법은 원본 영상을 복수의 영상 데이터 스트림으로 계층화하는 단계, 상기 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 미리 설정된 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 단계, 및 상기 복수의 영상 데이터 스트림 각각을 대응되는 채널로 전송하는 단계를 포함할 수 있다.
아울러, 영상 데이터를 수신하는 방법은 현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림-상기 영상 데이터 스트림에 포함된 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에는 확장 정보가 포함되어 있으며, 상기 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함함-을 수신하는 단계, 상기 확장 정보로부터 상기 특징 정보를 추출하는 단계, 상기 영상을 기반으로 현재 재생중인 영상의 경험 품질 정보를 획득하는 단계, 상기 추출된 특징 정보 및 상기 경험 품질 정보에 기초하여 멀티 캐스트 예측 모델을 사용하여 멀티 캐스트 액세스 전략을 획득하는 단계, 및 상기 멀티 캐스트 액세스 전략에 따라 상기 현재 액세스된 멀티 캐스트 조합을 조정하는 단계를 포함할 수 있다.
일실시예에 따른 영상 데이터 전송 장치는, 원본 영상을 복수의 영상 데이터 스트림들로 계층화하고, 상기 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 미리 설정된 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 삽입하며, 상기 복수의 영상 데이터 스트림을 전송을 위해 각각 대응하는 채널로 전송하는 적어도 하나의 프로세서를 포함할 수 있다.
일실시예에 따른 영상 데이터 수신 장치는, 현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림- 상기 영상 데이터 스트림에 포함된 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에는 확장 정보가 포함되어 있으며, 상기 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함함-을 수신하고, 상기 확장 정보로부터 상기 특징 정보를 추출하며, 상기 영상을 기반으로 현재 재생중인 영상의 경험 품질 정보를 획득하고, 상기 추출된 특징 정보 및 경험 품질 정보에 기초하여 멀티 캐스트 예측 모델을 사용하여 멀티 캐스트 액세스 전략을 획득하며, 상기 멀티 캐스트 액세스 전략에 따라 상기 현재 액세스된 멀티 캐스트 조합을 조정하는 적어도 하나의 프로세서를 포함할 수 있다.
도 1은 본 개시의 예시적인 실시예에 의해 제공되는 영상 데이터 전송 방법 및 영상 데이터 수신 방법의 애플리케이션 시나리오의 다이어그램이다.
도 2는 본 개시의 예시적인 실시예들에 의해 제공되는 영상 데이터를 전송하기 위한 방법의 흐름도를 도시한다.
도 3은 본 개시의 예시적인 실시예들에 의해 제공되는 데이터 패킷 내의 확장된 정보의 개략도를 도시한다.
도 4는 본 개시의 예시적인 실시예들에 의해 제공되는 영상 데이터를 수신하기 위한 방법의 흐름도를 도시한다.
도 5는 본 개시의 예시적인 실시예에 의해 제공되는 키 프레임 데이터 패킷 트리거에 기초하여 액세스될 멀티 캐스트 조합의 조정을 수행하기위한 단말 장치의 방법의 개략도를 도시한다.
도 6은 본 개시의 예시적인 실시예에 의해 제공되는 멀티 캐스트 예측 모델을 훈련하기 위한 정보 그룹과 라벨 정보 간의 대응의 개략도를 도시한다.
도 7은 본 개시의 예시적인 실시예들에 의해 제공되는 영상 데이터를 위한 송신 장치의 블록도를 도시한다.
도 8은 본 개시의 예시적인 실시예에 의해 제공되는 영상 데이터용 수신 장치의 블록도를 도시한다.
도 2는 본 개시의 예시적인 실시예들에 의해 제공되는 영상 데이터를 전송하기 위한 방법의 흐름도를 도시한다.
도 3은 본 개시의 예시적인 실시예들에 의해 제공되는 데이터 패킷 내의 확장된 정보의 개략도를 도시한다.
도 4는 본 개시의 예시적인 실시예들에 의해 제공되는 영상 데이터를 수신하기 위한 방법의 흐름도를 도시한다.
도 5는 본 개시의 예시적인 실시예에 의해 제공되는 키 프레임 데이터 패킷 트리거에 기초하여 액세스될 멀티 캐스트 조합의 조정을 수행하기위한 단말 장치의 방법의 개략도를 도시한다.
도 6은 본 개시의 예시적인 실시예에 의해 제공되는 멀티 캐스트 예측 모델을 훈련하기 위한 정보 그룹과 라벨 정보 간의 대응의 개략도를 도시한다.
도 7은 본 개시의 예시적인 실시예들에 의해 제공되는 영상 데이터를 위한 송신 장치의 블록도를 도시한다.
도 8은 본 개시의 예시적인 실시예에 의해 제공되는 영상 데이터용 수신 장치의 블록도를 도시한다.
이하, 도면을 참조하여 본 발명의 실시 예를 상세히 설명한다. 이들 중 동일한 참조 번호는 항상 동일한 부분을 나타낸다.
본 발명의 일 실시예는 영상 데이터 전송 방법 및 영상 데이터 수신 방법을 제공하며, 여기서 영상 데이터 전송 방법은 서버에서 수행되고, 영상 데이터 수신 방법은 단말 장치에서 수행될 수 있다. 위의 방법은 영상 서비스에 적용될 수 있으며, 예를 들어 EMBMS (Evolved Multimedia Broadcast / Multicast Service)에 적용될 수 있다.
도 1은 본 개시의 예시적인 실시예에 의해 제공되는 영상 데이터 전송 방법 및 영상 데이터 수신 방법의 응용 시나리오의 도면이다.
도 1을 참조하면, 서버는 원본 영상 데이터를 복수의 영상 데이터 스트림으로 계층화하고, 지정된 영상 데이터 스트림에 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장시킨 후, 복수의 영상 데이터 스트림을 대응되는 멀티 캐스트에 전송할 수 있다. 단말 장치의 멀티 캐스트 예측 모델은 영상 데이터 스트림의 특징 정보와 현재 재생중인 영상의 사용자 경험 정보를 기반으로 멀티 캐스트 접근 전략을 출력할 수 있으며, 단말 장치가 현재 접근하는 멀티 캐스트 조합은 현재 네트워크 전송 환경에서 더 나은 멀티 캐스트 조합을 획득하도록 멀티 캐스트 액세스 전략에 기초하여 조절될 수 있고, 대응되는 수량 및 품질의 영상 데이터 스트림이 수신될 수 있다. 서버와 단말 장치에서 위의 방법을 실행하면 대역폭 소비를 늘리지 않고도 네트워크 혼잡을 제어할 수 있다.
여기서, 멀티 캐스트 접속 전략은 멀티 캐스트 조합에 포함된 다중 멀티 캐스트에 대해 최적화된 선택을 수행하는 방식으로 이해될 수 있으며, 현재 재생중인 영상의 사용자 경험 정보 및 영상 스트림의 특징 정보를 기반으로 단말 장치를 위해 만들어질 수 있다. 여기서 선택에는, 액세스, 종료 또는 유지가 포함될 수 있다. 최적화된 선택의 목표는 단말 장치가 영상 데이터 스트림을 수신할 수 있는 좋은 기능을 가질 수 있게 하여 사용자 경험을 향상시킬 수 있다. 멀티 캐스트 액세스 전략의 구체적인 세부 사항은 그림 5와 함께 아래에서 설명하도록 한다.
멀티 캐스트 예측 모델은 훈련된 기계 학습 모델이다. 여기서, 머신 러닝 모델은 사용 가능한 초기 모델을 기반으로 훈련을 수행하여 얻을 수 있으며, 초기 모델은 지도 학습 기반 다중 분류 모델(supervised learning-based multi-classification model), 지원 벡터 머신(support vector maching), 인공 뉴럴 네트워크 모델(artificial neural network model) 또는 랜덤 포레스트 모델(random forest model)을 포함할 수 있지만 이에 국한되지 않는다. 모델은 단말 장치에서 실행될 수 있으며 훈련 데이터 세트를 기반으로 훈련될 수 있다. 트레이닝 데이터는 영상 스트림의 특징 정보, 영상의 사용자 경험 정보 및 해당 멀티 캐스트 액세스 전략을 포함할 수 있다. 구체적인 트레이닝 과정은 아래에서 후술하도록 한다. 또한, 멀티 캐스트 예측 모델은 정확성과 견고성이 우수하고 다양한 애플리케이션 환경(예: 다른 네트워크 전송 환경, 다른 영상 콘텐츠 또는 다른 사용자 경험 정보)에서 대응되는 멀티 캐스트 액세스 전략을 정확하게 출력할 수 있으며 멀티 캐스트에 액세스하거나 종료하기 위한 의미 없는 시행 착오를 줄일 수 있어, 단말 장치의 컴퓨팅 리소스를 절약하고 멀티 캐스트 액세스 또는 종료로 인한 상위 계층 라우팅에 대한 부담을 줄일 수 있다.
또한, 단말 장치는 상이한 품질의 영상을 얻기 위해 상이한 멀티 캐스트 조합에 액세스 할 수 있으며, 이는 영상 품질에 대한 선택 시나리오를 증가시킨다.
다음은 본 발명의 실시 예에서 제공하는 영상 데이터 전송 방법의 구체적인 동작을 설명하도록 한다.
도 2는 본 개시 예시적인 실시예들에 의해 제공되는 영상 데이터를 전송하기위한 방법의 흐름도를 도시한다.
도 2를 참조하면, S110 단계에서 서버는 원본 영상을 복수의 영상 데이터 스트림으로 계층화할 수 있다.
단계 S110에서, 서버는 관련 영상 레이어링 기술(예: 레이어드 영상 멀티 캐스트 기술)을 기반으로 원본 영상을 복수의 영상 데이터 스트림으로 계층화할 수 있고, 원본 영상이 계층화된 이후에 형성된 영상 데이터 스트림의 수는 실제 수요에 따라 결정될 수 있다.
여기서, 복수의 영상 데이터 스트림은 서로에 의해 향상될 수 있고, 전송 중에 복수의 영상 데이터 스트림은 서로 독립적이고 서로 향상된다는 점에 유의해야한다. 복수의 영상 데이터 스트림의 전송에 의해 점유된 대역폭의 합은 이 경로의 다운 스트림 단말 장치에 의해 획득될 수 있는 최대 비율에 대응한다. 단말 장치는 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림을 수신할 수 있다. 단말 장치에서 수신한 영상 데이터 스트림의 수가 변경되면 단말 장치에서 재생되는 영상의 품질도 변경될 수 있다. 예를 들어, 단말 장치에서 수신 한 영상 데이터 스트림의 수가 증가하면 단말 장치에서 재생되는 영상의 해상도가 높아질 수 있고, 단말 장치가 수신하는 영상 데이터 스트림의 수가 감소하면 단말 장치가 재생하는 영상의 해상도가 낮아질 수 있다.
본 개시의 예시적인 실시예들에서, 단계 S110은 서버가 원본 영상을 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림으로 계층화하는 것을 포함할 수 있다.
기본 레이어 영상 데이터 스트림은 기본 영상 품질을 제공하기 위해 독립적으로 디코딩 될 수 있다. 향상 레이어 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림과 함께 디코딩 되어야 하며, 향상 레이어 영상 데이터 스트림은 더 높은 영상 품질을 제공할 수 있습니다. 단말 장치에 의해 수신된 영상 데이터 스트림은 적어도 기본 레이어 영상 데이터 스트림을 포함한다는 점에 유의해야한다.
단말 장치가 기본 레이어 영상 데이터 스트림만을 수신하는 경우, 단말 장치에 의해 재생되는 영상은 기본 품질을 가질 수 있으며, 단말 장치가 기본 레이어 영상 데이터 스트림과 적어도 하나의 향상 레이어 영상 데이터 스트림을 수신하는 경우, 영상은 더 높은 품질을 가질 수 있고, 단말 장치가 수신하는 향상 레이어 영상 데이터 스트림의 수가 증가할수록 영상의 품질이 향상될 수 있다.
영상의 해상도를 예로 들면, 본 발명의 예시적인 실시예에서, 도 1에 도시 된 바와 같이 서버는 원본 영상을 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1, 향상 레이어 영상 데이터 스트림 2, 및 향상 레이어 영상 데이터 스트림 3으로 계층화할 수 있다. 영상 해상도는 360P, 480P, 720P 및 1080P로 구분될 수 있다.
기본 레이어 영상 데이터 스트림 0은 360P의 해상도로 영상 품질을 제공할 수 있으며, 기본 레이어 영상 데이터 스트림 0 및 향상 레이어 영상 데이터 스트림 1은 함께 480P의 해상도로 영상 품질을 제공할 수 있다. 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1 및 향상 레이어 영상 데이터 스트림 2는 함께 720P의 해상도로 영상 품질을 제공하고, 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1, 향상 레이어 영상 데이터 스트림 2 및 향상 레이어 영상 데이터 스트림 3은 함께 1080P의 해상도로 영상 품질을 제공할 수 있다.
단계 S120에서, 서버는 복수의 영상 데이터 스트림들 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 내장시킬 수 있다. 여기서, 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함할 수 있다.
영상 데이터 스트림은 데이터 패킷의 형태로 전송되고, 각 영상 데이터 스트림은 복수의 데이터 패킷을 포함할 수 있으며, 확장 정보는 임의의 영상 데이터 스트림의 임의의 데이터 패킷에 내장될 수 있다. 대안으로, 확장 정보를 삽입하는 데 사용되는 다수의 영상 데이터 스트림 및 다수의 데이터 패킷이 실제 수요에 따라 결정될 수 있다. 예를 들어, 확장 정보는 지정된 영상 데이터 스트림의 하나 이상의 데이터 패킷에 내장되거나, 확장 정보는 복수의 지정된 영상 데이터 스트림의 하나 이상의 데이터 패킷에 각각 내장된다. 예를 들어, 확장 정보는 특정 영상 데이터 스트림의 5번째 데이터 패킷에만 삽입되거나, 확장 정보는 특정 영상 데이터 스트림의 1, 4, 7 및 10 번째 데이터 패킷에 삽입됩니다.
본 개시의 예시적인 실시예들에서, 단계 S120은 확장 정보가 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되는 것을 포함할 수 있다.
전술한 바와 같이, 단말 장치에 의해 수신된 영상 데이터 스트림은 적어도 기본 레이어 영상 데이터 스트림을 포함한다. 따라서, 기본 레이어 영상 데이터 스트림의 데이터 패킷에 확장 정보를 내장하는 것은 각 단말 장치가 확장 정보를 수신할 수 있음을 보장할 수 있다.
본 발명의 일 실시 예에서, 단계 S120은 서버가 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 내장시키는 것을 포함하고, 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보를 포함하며, 적어도 하나의 향상 레이어 영상 데이터 스트림의 특징 정보를 포함할 수 있다.
기본 레이어 영상 데이터 스트림의 데이터 패킷에 내장된 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보 및 향상 레이어 영상 데이터 스트림의 일부의 특징 정보 일 수 있거나, 기본 레이어 영상 데이터 스트림 및 모든 향상 레이어 영상 데이터 스트림의 특징 정보일 수 있다.
예를 들어, 기본 레이어 영상 데이터 스트림 0의 데이터 패킷에 내장된 확장 정보는 기본 레이어 영상 데이터 스트림 0의 특징 정보 및 향상 레이어 영상 데이터 스트림 1의 특징 정보를 포함하거나, 기본 레이어 영상 데이터 스트림 0의 데이터 패킷에 내장된 확장 정보는 기본 레이어 영상 데이터 스트림 0의 특징 정보 및 향상 레이어 영상 데이터 스트림 1 내지 향상 레이어 영상 데이터 스트림 4의 특징 정보를 포함할 수 있다.
본 발명의 일 실시 예에서, 단계 S120은 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장된 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보 및 기본 레이어 영상 데이터 스트림에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 것을 포함할 수 있다. 아울러, 단계 S120은 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장된 확장 정보가 향상 레이어 영상 데이터 스트림 자체의 특징 정보 및 향상 레이어 영상 데이터 스트림에 인접한 비디오 데이터 스트림의 특징 정보를 포함하는 것을 포함할 수 있다. "인접"이란 원본 영상을 계층화하는 논리적 순서로 인접하는 것을 의미할 수 있다. 예를 들어, 원본 영상은 기본 레이어 0, 향상 레이어 1, 향상 레이어 2, 향상 레이어 3을 포함하는 4 개의 레이어로 계층화될 수 있다. 이 중 기본 레이어 0에 인접한 향상 레이어는 향상 계층 1이고, 향상 계층 2에 인접한 향상 계층은 향상 계층 1 및 향상 계층 3 일 수 있다.
예로서, 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1, 향상 레이어 영상 데이터 스트림 2 및 향상 레이어 영상 데이터 스트림 3은 순차적으로 인접할 수 있다. 기본 레이어 영상 데이터 스트림 0의 데이터 패킷에 내장된 확장 정보는 기본 레이어 영상 데이터 스트림 0의 특징 정보 및 향상 레이어 영상 데이터 스트림 1의 특징 정보를 포함할 수 있다. 향상 레이어 영상 데이터 스트림 1의 데이터 패킷에 포함된 확장 정보는 향상 레이어 영상 데이터 스트림 1의 특징 정보, 기본 레이어 영상 데이터 스트림 0의 특징 정보 및 / 또는 향상 레이어 영상 데이터 스트림 2의 특징 정보를 포함할 수 있다. 향상 레이어 영상 데이터 스트림 2의 데이터 패킷에 포함된 확장 정보는 향상 레이어 영상 데이터 스트림 2의 특징 정보, 향상 레이어 영상 데이터 스트림 1 및 / 또는 향상 레이어 영상 데이터 스트림 3의 특징 정보를 포함 할 수 있습니다.
본 개시의 예시적인 실시예들에서, 각 영상 데이터 스트림의 특징 정보는 영상 데이터 스트림의 전송 속도, 기본 계층의 데이터 크기에 대한 영상 데이터 스트림의 데이터 크기의 비율, 및 영상 데이터 스트림, 나머지 영상 데이터 스트림의 데이터 크기의 합에 대한 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나를 포함할 수 있다.
도 1을 참조하면, 기본 레이어 영상 데이터 스트림 0을 예로 들면, 기본 레이어 영상 데이터 스트림 0의 특징 정보는 기본 레이어 영상 데이터 스트림 0의 전송률, 기본 레이어 영상 데이터 스트림 0의 데이터 크기를 자신의 데이터 크기 (비율이 1 인 것으로 이해될 수 있음) 및 기본 레이어 영상 데이터 스트림 0의 데이터 크기에 대한 나머지 영상 데이터 스트림(즉, 향상 레이어 영상 데이터 스트림 1 내지 향상 레이어 영상 데이터 스트림 3)의 데이터 크기의 합의 비율을 포함할 수 있다.
향상 레이어 영상 데이터 스트림 1을 예로 들면, 향상 레이어 영상 데이터 스트림 1의 특징 정보는 향상 레이어 영상 데이터 스트림 1의 전송 속도, 향상 레이어 영상 데이터 스트림 1의 데이터 크기에 대한 기본 레이어 영상 데이터 스트림 0의 데이터 크기에 대한 비율, 및 향상 레이어 영상 데이터 스트림 1의 데이터 크기에 대한 나머지 영상 데이터 스트림의 데이터 크기의 합의 비율 (즉, 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 2 및 향상 레이어 영상 데이터 스트림 3)을 포함할 수 있다.
확장 정보가 내장된 데이터 패킷에서, 영상 데이터 스트림의 특징 정보는 상기 세 가지 유형의 특징 정보 중 하나 이상을 포함할 수 있다.
본 개시의 예시적인 실시예들에서, 확장 정보는 데이터 패킷이 확장 정보에 내장되었음을 나타내는 데 사용되는 제1 식별자, 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 수, 확장 정보의 특징 정보의 유형의 수 및 확장 정보의 삽입 방법 중 적어도 하나를 더 포함할 수 있다.
본 개시의 예시적인 실시예들에서, 확장 정보는 데이터 패킷의 헤더에 내장될 수 있고, 확장 정보의 제1 식별자는 미리 설정된 값일 수 있다. 데이터 패킷의 헤더에 제1 식별자가 있는 경우, 데이터 패킷에 확장 정보가 포함되어 있음을 나타낼 수 있다.
본 개시의 예시적인 실시예들에서, 하나의 데이터 패킷 내의 확장 정보는 적어도 하나의 영상 데이터 스트림의 특징 정보를 포함할 수 있다. 예를 들어, 하나의 데이터 패킷의 확장 정보가 하나의 영상 데이터 스트림의 특징 정보를 포함하는 경우, 특징 정보에 대응하는 영상 데이터 스트림의 수는 1일 수 있고, 하나의 데이터 패킷의 확장 정보가 2 개의 영상 데이터 스트림의 특징 정보를 포함하는 경우, 특징 정보에 대응하는 영상 데이터 스트림의 개수는 2일 수 있으며, 하나의 데이터 패킷의 확장 정보가 n 개의 영상 데이터 스트림의 특징 정보를 포함하는 경우, 특징 정보에 대응하는 영상 데이터 스트림의 개수는 n(n은 양의 정수)일 수 있다.
하나의 데이터 패킷의 확장 정보에서 각 영상 데이터 스트림의 특징 정보의 종류와 양은 동일할 수 있다. 상술한 바와 같이, 영상 데이터 스트림의 특징 정보의 유형에는 영상 데이터 스트림의 전송률, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 영상 데이터 스트림의 데이터 크기 비율 및 영상 데이터 스트림의 데이터 크기에 대한 나머지 영상 데이터 스트림의 데이터 크기의 합 비율이 포함될 수 있다. 따라서, 본 발명의 일 실시 예에서 확장 정보의 특징 정보의 종류는 1, 2, 3이 될 수 있다.
도 3은 본 개시의 예시적인 실시 예에 의해 제공되는 데이터 패킷의 확장 정보의 개략도를 도시한다. 다음은 확장 정보에 대한 소개의 예를 제공하기 위해 도 3을 예로 든다.
도 3을 참조하면, 플래그의 값이 1 인 경우 제1 식별자를 나타낸다. 플래그의 값이 0이고, 도 3의 다른 항목이 모두 비어 있는 경우, 데이터 패킷에 확장 정보가 포함되어 있지 않음을 나타낼 수 있다.
타입의 값은 확장 정보의 임베디드 모드를 나타낼 수 있다. 예를 들어, 타입의 값이 1 인 경우, 기본 레이어 영상 데이터 스트림의 데이터 패킷과 각 향상 레이어 영상 데이터 스트림의 데이터 패킷이 각각 확장 정보를 포함하는 제1 임베디드 모드를 나타낼 수 있다. 타입의 값이 2 인 경우, 기본 레이어 영상 데이터 스트림의 데이터 패킷 만 확장 정보가 포함된 제2 임베디드 모드를 나타낼 수 있다.
레이어 카운트의 값은 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 수를 나타낼 수 있다.
피처 카운트의 값은 확장 정보에 포함된 특징 정보의 종류의 개수를 나타낼 수 있다.
Li는 확장 정보에 포함된 특징 정보에 대응하는 상이한 영상 데이터 스트림을 구별하기 위해 사용된다. 도 3에 도시 된 바와 같이 Layer Count의 값은 3이고, 확장 정보에 포함된 특징 정보에 해당하는 영상 데이터 스트림의 수는 3이고, L1, L2, L3은 각각 영상 데이터 스트림을 나타낸다.
Li의 값은 Li로 표현되는 영상 데이터 스트림과 확장 정보가 위치한 영상 데이터 스트림 사이의 관계를 나타낸다. Li가 0 일 때, Li로 표시되는 영상 데이터 스트림은 확장 정보가 위치한 영상 데이터 스트림일 수 있다. Li가 -1 일 때, Li로 표현되는 영상 데이터 스트림은 확장 정보가 위치한 영상 데이터 스트림 이전의 하나의 영상 데이터 스트림일 수 있고, Li가 1 일 때, Li로 표시되는 영상 데이터 스트림은 확장 정보가 위치한 영상 데이터 스트림 옆에 있는 하나의 영상 데이터 스트림일 수 있다.
Li가 -n(n은 양의 정수) 일 때, Li로 표현되는 영상 데이터 스트림은 확장 정보가 위치하는 영상 데이터 스트림 이전의 n 개의 영상 데이터 스트림일 수 있고, Li가 n 인 경우, Li로 표시되는 영상 데이터 스트림은 확장 정보가 있는 영상 데이터 스트림 옆에 있는 n 개의 영상 데이터 스트림일 수 있다.
도 3을 참조하면, L2의 값은 0인 경우 향상 레이어 영상 데이터 스트림 2가 확장 정보가 위치한 영상 데이터 스트림임을 나타낸다. L1의 값은 -1인 경우, 향상 레이어 영상 데이터 스트림 1이 향상 레이어 영상 데이터 스트림 2 이전의 하나의 영상 데이터 스트림인 것을 나타내고, L3의 값이 1인 경우, 향상 레이어 영상 데이터 스트림 3은 향상 레이어 영상 데이터 스트림 2 다음의 하나의 영상 데이터 스트림임을 나타낼 수 있다.
Lenij(i와 j는 모두 양의 정수)의 값은 Li로 표현되는 영상 데이터 스트림의 j 번째 특징 정보의 바이트 길이를 나타낼 수 있다. 예를 들어, 도 3을 참조하면, Len11의 값은 향상 레이어 영상 데이터 스트림 1의 전송 속도의 바이트 길이일 수 있다.
Fij(i와 j는 모두 양의 정수)의 값은 Li로 표현되는 영상 데이터 스트림의 j 번째 특징 정보의 값을 나타낼 수 있다. 예를 들어, 도 3을 참조하면, F11의 값은 향상 레이어 영상 데이터 스트림 1의 전송률 값일 수 있다.
S130 단계에서 서버는 복수의 영상 데이터 스트림을 대응되는 채널로 각각 전송할 수 있다.
영상 데이터 스트림과 멀티 캐스트 간에는 일대일 대응이 있을 수 있다. 서버는 미리 설정된 통신 프로토콜을 사용하여 각 영상 데이터 스트림을 대응되는 채널을 통해 해당 멀티 캐스트로 전송할 수 있다. 미리 설정된 통신 프로토콜은 FLUTE 프로토콜, LCT 프로토콜 등을 포함할 수 있다.
도 1을 예로 들면, 서버는 채널 0을 통해 기본 레이어 영상 데이터 스트림 0을 멀티 캐스트 0으로 전송하고, 서버는 채널 1을 통해 멀티 캐스트 1로 기본 레이어 영상 데이터 스트림 1을 전송할 수 있다. 서버는 채널 2를 통해 향상 레이어 영상 데이터 스트림 2를 멀티 캐스트 2로 전송하고, 서버는 채널 3을 통해 향상 레이어 영상 데이터 스트림 3을 멀티 캐스트 3으로 전송할 수 있다.
단말 장치는 대응되는 영상 데이터 스트림을 수신하기 위해 대응되는 멀티 캐스트에 액세스 할 수 있다. 예를 들어, 단말 장치는 멀티 캐스트 0에 액세스 할 때 기본 레이어 영상 데이터 스트림 0을 수신할 수 있고, 단말 장치는 멀티 캐스트 0 및 멀티 캐스트 1에 액세스할 때 기본 레이어 영상 데이터 스트림 0 및 향상 레이어 영상 데이터 스트림 1을 수신할 수 있다.
상술한 바와 같이, 서버는 원본 영상을 복수의 영상 데이터 스트림으로 계층화하고, 영상 데이터를 해당 채널을 통해 계층적으로 멀티 캐스트 그룹 주소로 전송할 수 있다. 서로 다른 영상 데이터 스트림의 데이터는 기존의 다중 영상 스트림 반복 멀티 캐스트 솔루션와 달리 서로 독립적이며, 출력 전송의 총 대역폭이 증가하지 않으며, 계층화된 영상 멀티 캐스트의 네트워크 대역폭 활용 효율성이 크게 향상될 수 있다. 또한 확장 정보 (특징 정보)를 내장함으로써 수신기가 확장 정보에 기초하여 멀티 캐스트 접근 전략을 분석하고 예측하는 것이 편리 할 수 있다.
다음은 본 발명의 실시 예에서 제공하는 영상 데이터 수신 방법의 구체적인 동작을 설명한다.
도 4는 본 개시 내용의 예시적인 실시 예들에 의해 제공되는 영상 데이터를 수신하기위한 방법의 흐름도를 도시한다.
도 4를 참조하면, S210 단계에서, 단말 장치는 현재 접속된 멀티 캐스트 조합에 해당하는 영상 데이터 스트림을 수신할 수 있다.
여기서, 해당 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷은 확장 정보를 포함하고 있으며, 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함한다.
하나의 멀티 캐스트 조합은 적어도 하나의 멀티 캐스트를 포함할 수 있다. 전술한 바와 같이, 단말 장치는 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림을 수신할 수 있다. 단말 장치에서 수신한 영상 데이터 스트림의 수가 변경되면, 단말 장치에서 재생되는 영상의 품질도 변경될 수 있다. 따라서, 단말 장치는 서로 다른 멀티 캐스트 조합에 액세스하여 서로 다른 영상 데이터 스트림을 수신하여 서로 다른 영상 품질을 얻을 수 있다.
또는, 단계 S210에서, 단말 장치에 의해 현재 액세스된 멀티 캐스트 조합은 디폴트 멀티 캐스트 조합 일 수도 있고, 사용자의 영상 화질 선택에 따라 결정된 멀티 캐스트 조합일 수도 있다. 단계 S210에서, 서로 다른 단말 장치에 의해 액세스되는 멀티 캐스트 조합은 동일하거나 상이할 수 있다.
도 1을 예로 들면, 단말 장치 1에 의해 현재 액세스되는 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1 및 멀티 캐스트 2를 포함할 수 있고, 단말 장치 1은 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1 및 향상 레이어 영상 데이터 스트림 2를 수신할 수 있다. 단말 장치 2에 의해 현재 액세스되는 멀티 캐스트 조합은 멀티 캐스트 0 및 멀티 캐스트 1을 포함하고, 단말 장치 2는 기본 레이어 영상 데이터 스트림 0 및 향상 레이어 영상 데이터 스트림 1을 수신할 수 있다. 단말 장치 3에 의해 현재 액세스되는 멀티 캐스트 조합은 멀티 캐스트 0을 포함하고, 단말 장치 3은 기본 레이어 영상 데이터 스트림 0을 수신할 수 있다.
대안적으로, 대응하는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림을 포함하거나, 대응하는 영상 데이터 스트림은 기본 레이어 영상 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림을 포함할 수 있으며, 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷은 확장 정보와 함께 내장될 수 있다. S210 단계에서, 단말 장치에 의해 접속된 멀티 캐스트 조합은 모든 단말 장치가 확장 정보를 수신할 수 있도록 적어도 기본 레이어 영상 데이터 스트림에 대응하는 멀티 캐스트를 포함할 수 있다.
단계 S220에서 단말 장치는 확장 정보에서 특징 정보를 추출할 수 있다.
확장 정보는 영상 데이터 스트림의 임의의 데이터 패킷에 내장되고, 영상 데이터 스트림은 데이터 패킷의 형태로 전송될 수 있다. 단말 장치는 접속한 멀티 캐스트 조합에 해당하는 영상 데이터 스트림을 기반으로 확장 정보가 포함된 데이터 패킷을 수신하면, 데이터 패킷의 확장 정보로부터 특징 정보를 추출한다.
상술한 바와 같이, 본 발명의 실시 예에서 확장 정보는 두 가지 방식으로 삽입될 수 있다.
첫 번째 임베디드 방식은 기본 레이어 영상 데이터 스트림의 데이터 패킷 및 적어도 하나의 향상 레이어 영상 데이터 스트림의 데이터 패킷이 각각 확장 정보와 함께 내장될 수 있다. 즉, 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에는 기본 레이어 영상 데이터 스트림의 특징 정보 및 기본 레이어 영상 데이터 스트림에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보가 내장될 수 있다.
하나 이상의 향상 계층 영상 스트림 내의 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷은 확장 정보와 함께 내장될 수 있고, 확장 정보는 향상 레이어 영상 데이터 스트림 자체의 특징 정보 및 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함할 수 있다.
두 번째 임베디드 방식은 기본 레이어 영상 데이터 스트림의 데이터 패킷 만이 확장 정보와 함께 내장되는 것일 수 있다. 즉, 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 내장시키는 것은 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 내장시키는 것을 포함하며, 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보 및 적어도 하나의 향상 레이어 영상 데이터 스트림의 특징 정보를 포함할 수 있다.
임의의 임베디드 방식으로 획득한 확장 정보가 임베디드된 데이터 패킷의 경우, 단말 장치는 데이터 패킷을 수신하면 데이터 패킷의 확장 정보에서 특징 정보를 추출할 수 있다.
또는, 확장 정보로부터 단말 장치가 추출한 특징 정보는 영상 데이터 스트림의 전송 속도, 영상 데이터 스트림의 데이터 크기와 기본 레이어 영상의 데이터 크기의 비율, 및 데이터 스트림 및 나머지 영상 데이터 스트림의 데이터 크기의 합에 대한 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 유형을 포함할 수 있다.
단계 S230에서, 단말 장치는 영상을 기반으로 현재 재생중인 영상의 경험 품질 정보를 획득할 수 있다.
경험 품질 정보는 일반적으로 경험의 품질 (Quality of Experience; QoE), 즉 장치, 네트워크, 시스템, 어플리케이션, 또는 서비스의 품질과 성능(효과성 및 유용성 등을 포함)에 대한 사용자의 포괄적이고, 주관적인 인식을 의미할 수 있다. 본 발명의 일실시예에서, 경험 품질 정보는 현재 재생중인 영상을 기반으로 추출 및 정량화할 수 있는 정보일 수 있다.
경험 품질 정보는 지터 기간, 평균 코덱 비트 레이트, 프레임 레이트 편차 중 적어도 하나의 유형을 포함한다.
이하에서는 경험 품질 정보의 각 유형에 대해 설명하도록 한다.
실제 재생 시간과 예상 재생 시간의 절대 차이가 미리 정의된 값 (예시적으로, 100 밀리 초)보다 크면 지터가 발생할 수 있으며, 이러한 지터의 지속 시간이 지터 지속 시간일 수 있다. 평균 코덱 비트 전송률은 영상 파일을 재생하는 데 걸리는 시간에 대한 영상 파일 크기의 비율이다. 프레임 레이트 편차는 동영상에서 특정 프레임의 실제 재생 시간과 프레임의 예상 재생 시간 사이의 시간 차이를 나타낼 수 있다.
여기서, S230 단계에서 추출된 경험 품질 정보는 상기 3 가지 유형의 경험 품질 정보 중 적어도 하나를 포함한다는 점에 유의해야한다.
단계 S240에서 단말 장치는 추출된 특징 정보 및 경험 품질 정보를 기반으로 멀티 캐스트 액세스 전략을 획득하기 위해 멀티 캐스트 예측 모델을 사용할 수 있다.
멀티 캐스트 예측 모델은 훈련된 기계 학습 모델이고, 모델은 단말 장치에서 실행될 수 있다. S240 단계에서, 추출된 특징 정보와 경험 품질 정보를 모델의 입력으로 사용하여 멀티 캐스트 예측 모델이 멀티 캐스트 접근 전략을 출력할 수 있도록 하고, 멀티 캐스트 액세스 전략을 사용하여 멀티 캐스트 조합의 조정 방식을 지시할 수 있다.
여기서, 멀티 캐스트 예측 모델은 단말 장치에 미리 설정될 수 있고, 멀티 캐스트 예측 모델은 또한 지정된 방법으로 단말 장치에 의해 다운로드 될 수 있다는 점에 유의해야한다. 예를 들어, 도 1에 도시 된 서버는 멀티 캐스트 예측 모델을 저장할 수 있고, 단말 장치가 처음으로 서버에 연결되면 멀티 캐스트 예측 모델을 다운로드할 수 있다.
단계 S250에서 단말 장치는 멀티 캐스트 접속 전략에 따라 현재 접속된 멀티 캐스트 조합을 조정할 수 있다.
본 발명의 일 실시 예에서, 단계 S250는 다음 동작 중 어느 하나 일 수 있다.
동작 (a1): 단말 장치에 의해 현재 액세스된 멀티 캐스트 조합 이외의 적어도 하나의 멀티 캐스트가 새로 액세스된다.
예를 들어, 단말 장치 1에 의해 현재 접속된 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1, 멀티 캐스트 2를 포함하고, 단말 장치 1은 현재 액세스된 멀티 캐스트 조합을 기반으로 멀티 캐스트 3에 새로 접속할 수 있다.
동작 (a2): 단말 장치에 의해 현재 액세스된 멀티 캐스트 조합의 적어도 하나의 멀티 캐스트가 종료된다.
예를 들어, 단말 장치 1에 의해 현재 액세스된 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1, 멀티 캐스트 2를 포함하고, 단말 장치 1은 현재 액세스된 멀티 캐스트 조합을 기반으로 멀티 캐스트 2를 종료할 수 있다.
동작 (a3) : 단말 장치에 의해 현재 액세스된 멀티 캐스트 조합은 변경되지 않고 유지된다.
예를 들어, 단말 장치 1에 의해 현재 접속된 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1 및 멀티 캐스트 2를 포함하고, 단말 장치 1은 현재 액세스 된 멀티 캐스트 조합을 변경하지 않고 그대로 유지한다.
본 발명의 예시적인 실시예에서, 확장 정보가 내장된 데이터 패킷은 키 프레임 데이터 패킷으로 지칭될 수 있다. 단말 장치가 키 프레임 데이터 패킷을 수신할 때마다 단계 S220 내지 단계 S250이 한번 수 될 수 있음은 이해될 수 있을 것이다. 즉, 단말 장치가 키 프레임 데이터 패킷을 수신할 때마다 단말 장치는 현재 연결된 멀티 캐스트 조합을 한 번 조정할 수 있다.
상술한 바와 같이 단말 장치는 영상 데이터 스트림을 수신하여 특징 정보를 획득하고, 특징 정보와 영상의 경험 품질 정보를 결합하고, 멀티 캐스트 액세스 전략을 획득하기 위해 멀티 캐스트 예측 모델을 사용할 수 있다. 이에 따라, 단말 장치는 참여 / 종료 작업의 실행을 보다 정확하게 안내할 수 있고, 멀티 캐스트 참여 및 종료에 대한 최적의 처리를 달성하고, 멀티 캐스트 참여 또는 종료에 대한 무의미한 시행 착오 작업을 크게 줄임으로써 터미널 장치의 컴퓨팅 리소스를 절약 할 뿐만 아니라 멀티 캐스트 참여 또는 종료로 인한 상위 계층 라우팅에 대한 압력을 감소시킬 수 있다. 이러한 방식으로 대역폭 소비를 증가시키지 않고 수신기 중심의 계층적 혼잡 제어가 실현되고 사용자 경험이 향상될 수 있다. 한편, 멀티 캐스트 예측 모델의 정확성과 견고성으로 인해 기존 시행 착오 동작 논리 판단의 분기 커버리지가 충분히 정확하지 않으므로, 계층화된 영상 멀티 캐스트 기술이 더 많은 응용 시나리오를 커버할 수 없다는 문제가 기술적 실현 원칙의 관점에서 회피될 수 있다.
도 5는 본 개시의 예시적인 실시예들에 의해 제공되는 키 프레임 데이터 패킷 트리거에 기초하여 액세스될 멀티 캐스트 조합의 조정을 수행하기 위한 단말 장치에 대한 방법의 개략도를 도시한다.
도 5를 참조하면, 서버는 서로 다른 시점에서 키 프레임 데이터 패킷 1, 키 프레임 데이터 패킷 2 및 키 프레임 데이터 패킷 3을 순차적으로 전송한다.
단말 장치 1은 처음에 멀티 캐스트 0 및 멀티 캐스트 1에 액세스할 수 있다. 단말 장치 1이 키 프레임 데이터 패킷 1을 수신하면, 멀티 캐스트 2, 멀티 캐스트 3 및 멀티 캐스트 4에 새로 액세스할 수 있다. 단말 장치 1이 키 프레임 데이터 패킷 2를 수신할 때, 현재 액세스된 멀티 캐스트 조합은 변경되지 않고 유지된다. 단말 장치 1이 키 프레임 데이터 패킷 3을 수신할 때, 현재 액세스된 멀티 캐스트 조합은 변경되지 않고 유지된다.
단말 장치 2는 처음에 멀티 캐스트 0 및 멀티 캐스트 1에 액세스될 수 있다. 단말 장치 2가 키 프레임 데이터 패킷 1을 수신하면, 멀티 캐스트 2 및 멀티 캐스트 3에 새로 액세스할 수 있다. 단말 장치 2가 키 프레임 데이터 패킷 2를 수신할 때, 멀티 캐스트 3을 종료할 수 있다. 단말 장치 2가 키 프레임 데이터 패킷 3을 수신할 때, 현재 액세스된 멀티 캐스트 조합은 변경되지 않은 상태로 유지된다.
단말 장치 3은 처음에 멀티 캐스트 0 및 멀티 캐스트 1에 액세스한다. 단말 장치 3은 키 프레임 데이터 패킷 1을 수신할 때, 멀티 캐스트 2, 멀티 캐스트 3 및 멀티 캐스트 4에 새로 액세스한다. 단말 장치 3이 키 프레임 데이터 패킷 2를 수신하면, 멀티 캐스트 3 및 멀티 캐스트 4를 종료하고, 단말 장치 3이 키 프레임 데이터 패킷 3을 수신하면, 멀티 캐스트 3에 새로 액세스한다.
본 발명의 예시적인 실시예에서, 멀티 캐스트 예측 모델은 추출된 특징 정보와 경험 품질 정보 및 멀티 캐스트 액세스 전략에 기초하여 재학습되어 업데이트 될 수 있다.
다음은 멀티 캐스트 예측 모델의 훈련 과정을 설명한다.
동작 (b1): 콘텐츠 크기가 다른 복수의 오리지널 동영상을 기반으로 복수의 특징 정보 조합을 획득하고, 복수의 체험 정보 조합을 설정하고, 각 특징 정보 조합을 각각의 체험 정보 조합과 조합하여 복수의 정보 그룹들을 형성한다.
도 6은 본 개시의 예시적인 실시 예에 의해 제공되는 멀티 캐스트 예측 모델을 훈련하기위한 정보 그룹과 라벨 정보 간의 대응의 개략도를 도시한다.
도 6에 도시 된 바와 같이, 각 정보 그룹은 적어도 한 종류의 특징 정보와 적어도 한 종류의 경험 품질 정보를 포함한다. 도 6의 각 행은 정보 그룹을 나타내고 각 행의 끝은 정보 그룹의 레이블 정보(Label)일 수 있다.
도 6에 도시 된 바와 같이, 특징 정보의 유형은 영상 데이터 스트림의 전송 속도 (도 6에서 "Send bit rate"로 표시됨), 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 영상 데이터 스트림의 데이터 크기 비율 (도 6에서 "Relative proportion"로 표시됨), 나머지 영상 데이터 스트림의 데이터 크기 합계에 대한 영상 데이터 스트림의 데이터 크기 비율 (도 6에서 "Absolute proportion"로 표시됨)을 포함할 수 있다. 경험 품질 정보에는 지터 지속 시간 (도 6에서 "Jitter duration"으로 표시됨), 평균 코덱 비트 전송률 (도 6에서 "Codec bitrate"로 표시됨) 및 프레임 속도 편차(미도시)를 포함할 수 있다.
도 6에 도시 된 바와 같이, 경험 품질 정보의 유형은 지터 지속 시간, 평균 코덱 비트율 및 프레임 비율 편차를 포함할 수 있다.
동작 (b2): 라벨 정보가 정보 그룹마다 표시된다.
라벨 정보는 정보 그룹에 대응하는 멀티 캐스트 접근 전략을 나타낸다. 도 6에 도시된 바와 같이, 라벨 정보는 "2개의 연속적인 레이어 결합"(예시적으로, 2 개의 연속적인 영상 레이어 데이터 스트림에 대한 액세스), "하나의 레이어 결합"(예시적으로, 하나의 영상 레이어 데이터 스트림에 대한 액세스), "미변경 상태로 유지"(예시적으로, 변경되지 않은 상태 유지), "하나의 레이어 종료 "(예시적으로, 하나의 영상 레이어 데이터 스트림 종료), "2개의 연속 레이어 종료 "(예시적으로, 2 개의 연속적인 영상 레이어 데이터 스트림 종료)일 수 있다.
동작 (b3): 각 정보 그룹과 그 레이블 정보는 초기 멀티 캐스트 예측 모델을 훈련하기 위한 훈련 데이터로 사용될 수 있다.
그 중에서, 멀티 캐스트 예측 모델은 지도 학습 기반의 다중 분류 모델 일 수 있으며, 멀티 캐스트 예측 모델을 훈련시키기 위해 서포트 벡터 머신, 인공 신경망 또는 랜덤 포레스트와 같은 머신 러닝 알고리즘이 사용될 수 있다.
다음은 도 1의 단말 장치를 예로 들어 영상 데이터를 송수신하는 과정을 소개한다.
동작 (d1): 서버는 원본 영상을 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1, 향상 레이어 영상 데이터 스트림 2 및 향상 레이어 영상 데이터 스트림 3으로 계층화할 수 있다.
동작 (d2): 서버는 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1, 향상 레이어 영상 데이터 스트림 2 및 향상 계층 영상 데이터 스트림 3 중 적어도 하나의 데이터 패킷 각각에 확장 정보를 삽입할 수 있다.
기본 레이어 영상 데이터 스트림 0의 데이터 패킷에 삽입된 확장 정보는 기본 레이어 영상 데이터 스트림 0의 특징 정보 및 향상 레이어 영상 데이터 스트림 1의 특징 정보를 포함하고; 향상 레이어 영상 데이터 스트림 1의 데이터 패킷에 임베디드된 확장 정보는 향상 레이어 영상 데이터 스트림 1의 특징 정보 및 향상 레이어 영상 데이터 스트림 2의 특징 정보를 포함하며; 향상 레이어 영상 데이터 스트림 2의 데이터 패킷에 임베디드된 확장 정보는 향상 레이어 영상 데이터 스트림 2의 특징 정보, 향상 레이어 영상 데이터 스트림 1의 특징 정보 및 향상 계층 영상 데이터 스트림 3의 특징 정보를 포함하고; 향상 레이어 영상 데이터 스트림 3의 데이터 패킷에 임베디드된 확장 정보는 향상 레이어 영상 데이터 스트림 2의 특징 정보와 향상 레이어 영상 데이터 스트림 3의 특징 정보를 포함할 수 있다.
동작 (d3): 서버는 채널 0을 통해 기본 레이어 영상 데이터 스트림 0을 멀티 캐스트 0으로 전송하고, 서버는 채널 1을 통해 멀티 캐스트 1로 향상 레이어 영상 데이터 스트림 1을 전송하며, 서버는 채널 2를 통해 멀티 캐스트 2로 향상 레이어 영상 데이터 스트림 2를 전송하고, 서버는 채널 3을 통해 멀티 캐스트 3으로 향상 레이어 영상 데이터 스트림 3을 전송할 수 있다.
동작 (d4): 단말 장치는 현재 액세스된 멀티 캐스트 조합에 대응하는 영상 데이터 스트림을 수신한다.
예를 들어, 단말 장치가 현재 액세스하는 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1 및 멀티 캐스트 2를 포함하고, 기본 레이어 영상 데이터 스트림 0, 향상 레이어 영상 데이터 스트림 1 및 향상 레이어 영상 데이터 스트림 2를 수신할 수 있다.
동작 (d5): 단말 장치는 향상 레이어 영상 데이터 스트림 2에 확장 정보가 내장된 데이터 패킷을 수신한다. 데이터 패킷에 내장된 확장 정보는 향상 레이어 영상 데이터 스트림 2의 특징 정보 및 향상 레이어 영상 데이터 스트림 1 및/또는 향상 레이어 영상 데이터 스트림 3의 특징 정보를 포함할 수 있다.
동작 (d6): 단말 장치는 현재 재생중인 영상에 기초하여 경험 품질 정보를 추출한다.
동작 (d7): 단말 장치는 추출된 특징 정보 및 경험 품질 정보에 기초하여 멀티 캐스트 예측 모델을 사용하여 멀티 캐스트 액세스 전략을 획득한다.
동작 (d8): 단말 장치는 멀티 캐스트 액세스 전략에 기초하여 현재 액세스 된 멀티 캐스트 조합을 조정한다.
구체적으로, 단말 장치가 현재 액세스하고 있는 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1, 멀티 캐스트 2를 포함하고, 단말 장치는 현재 액세스된 멀티 캐스트 조합을 기반으로 멀티 캐스트 3에 새롭게 접속한다. 조정된 멀티 캐스트 조합은 멀티 캐스트 0, 멀티 캐스트 1, 멀티 캐스트 2 및 멀티 캐스트 3이 포함할 수 있다.
본 발명의 예시적인 실시예에서, 멀티 캐스트 예측 모델은 추출된 특징 정보 및 경험 품질 정보 및 멀티 캐스트 액세스 전략에 기초하여 재학습되어 업데이트 될 수 있다.
단계 S220에서 추출된 특징 정보, 단계 S230에서 추출된 경험 품질 정보 및 단계 S240에서 획득된 멀티 캐스트 접근 전략은 예측 모델의 정확도를 향상시키기 위해 현재 멀티 캐스트 예측 모델을 추가로 재학습시키기 위한 새로운 학습 데이터로 사용됨을 알 수 있다.
대안으로, 멀티 캐스트 예측 모델을 재학습시키기 위해 다음 동작이 사용될 수 있다:
동작 (c1): 단말 장치는 추출된 특징 정보와 경험 품질 정보 및 멀티 캐스트 액세스 전략을 미리 설정된 장치로 전송한다.
동작 (c2): 미리 설정된 장치는 수신된 특징 정보, 경험 품질 정보 및 멀티 캐스트 액세스 전략을 훈련 데이터로 사용하여 멀티 캐스트 예측 모델을 재학습시킬 수 있다. 여기서, 미리 설정된 장치의 멀티 캐스트 예측 모델은 단말 장치의 멀티 캐스트 예측 모델과 동일할 수 있다.
단계 (c3): 미리 설정된 장치는 재학습된 멀티 캐스트 예측 모델의 파라미터 정보를 단말 장치로 전송한다.
동작 (c4): 단말 장치는 수신된 파라미터 정보에 기초하여 자신의 멀티 캐스트 예측 모델을 업데이트한다.
여기서 미리 설정된 장치는 도 1에 도시된 서버 일 수 있거나 다른 서버 또는 컴퓨터 장치일 수 있음을 유의해야한다.
도 7은 본 개시의 예시적인 실시예에 따른 영상 데이터를 위한 송신 장치의 블록도를 도시한다. 그 중에서, 영상 데이터를 위한 송신 장치의 기능 유닛은 본 개시의 원리를 구현하는 하드웨어, 소프트웨어 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수 있다. 당업자는 도 7에 설명된 기능 유닛이 본 개시의 원리를 실현하기 위해 결합되거나 서브 유닛으로 분할될 수 있음을 이해할 수 있다. 따라서, 본 명세서의 설명은 본 명세서에 설명된 기능 유닛의 임의의 가능한 조합 또는 분할 또는 추가 제한을 지원할 수 있다.
다음은 영상 데이터 송신 장치가 가질 수 있는 기능 유닛과 각 기능 유닛에 의해 수행될 수 있는 동작에 대해 간략하게 설명한다. 관련된 세부 사항에 대해서는 선술된 설명을 참조될 수 있으며 중복되는 설명은 생략하도록 한다.
도 7을 참조하면, 본 발명의 일실시 예에 따른 영상 데이터 전송 장치는 영상 계층화 모듈(310), 정보 임베딩 모듈(320) 및 영상 전송 모듈(330)을 포함한다.
영상 계층화 모듈(310)은 원본 영상을 복수의 영상 데이터 스트림으로 계층화하도록 구성된다.
정보 임베딩 모듈(320)은 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 삽입하도록 구성되며, 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함한다.
영상 전송 모듈(330)은 복수의 영상 데이터 스트림을 전송을 위해 각각 대응하는 채널로 전송하도록 구성된다.
본 개시의 예시적인 실시예들에서, 영상 계층화 모듈(310)은 원본 영상을 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림으로 계층화하도록 구성되고, 정보 임베딩 모듈(320)은 적어도 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에서 확장 정보를 임베딩하도록 구성될 수 있다.
본 개시의 예시적인 실시예들에서, 정보 임베딩 모듈(320)은 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 임베딩하도록 구성되고, 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보와 적어도 하나의 향상 레이어 영상 데이터 스트림의 특징 정보를 포함할 수 있다.
본 개시의 예시적인 실시예들에서, 정보 임베딩 모듈 (320)은 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 임베딩하도록 구성되고, 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보와 기본 레이어 영상 데이터 스트림에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하고; 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 삽입하고, 각 향상 레이어 영상 데이터 스트림에 대한 확장 정보는 향상 레이어 영상 데이터 스트림 자체의 특징 정보와 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함할 수 있다.
본 개시의 예시적인 실시예들에서, 각 영상 데이터 스트림의 특징 정보는 영상 데이터 스트림의 전송 속도, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 영상 데이터 스트림의 데이터 크기의 비율, 및 나머지 영상 데이터 스트림의 데이터 크기의 합계에 대한 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 종류를 포함할 수 있다.
본 개시의 예시적인 실시예들에서, 확장 정보는 데이터 패킷에 확장 정보가 임베드되었음을 나타내는 제1 식별자, 확장 정보에 포함된 특징 정보 종류의 개수, 확장 정보의 임베딩 모드 중 적어도 하나를 더 포함할 수 있다.
도 8은 본 개시 내용의 예시적인 실시예들에 따른 영상 데이터를 위한 수신 장치의 블록도를 도시한다. 이들 중, 영상 데이터 수신 장치의 기능적 유닛은 본 발명의 원리를 구현하는 하드웨어, 소프트웨어 또는 하드웨어와 소프트웨어의 조합으로 구현될 수 있다. 당업자는 도 8에 설명된 기능 유닛이 본 개시의 원리를 실현하기 위해 결합되거나 서브 유닛으로 분할 될 수 있음을 이해할 수 있다. 따라서, 본 명세서의 설명은 본 명세서에 설명된 기능 유닛의 임의의 가능한 조합 또는 분할 또는 추가 제한을 지원할 수 있다.
다음은 영상 데이터 수신 장치가 가질 수 있는 기능 유닛과 각 기능 유닛에 의해 수행될 수 있는 동작에 대해 간략하게 설명한다. 관련된 세부 사항에 대해서는 선술된 설명을 참조될 수 있으며 중복되는 설명은 생략하도록 한다.
도 8을 참조하면, 본 발명의 일 실시예에 따른 영상 데이터 수신 장치는 영상 수신 모듈(410), 제1 추출 모듈(420), 제2 추출 모듈(430), 전략 출력 모듈 (440) 및 멀티 캐스트 조정 모듈(450)을 포함한다.
영상 수신 모듈(410)은 현재 액세스된 멀티 캐스트 조합에 대응하는 영상 데이터 스트림을 수신하도록 구성되며, 여기서 대응하는 영상 데이터 스트림에서 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷은 확장 정보를 포함하고, 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함한다.
제1 추출 모듈(420)은 확장 정보로부터 특징 정보를 추출하도록 구성된다.
제2 추출 모듈(430)은 영상에 기초하여 현재 재생중인 영상의 경험 품질 정보를 획득하도록 구성된다.
전략 출력 모듈(440)은 추출된 특징 정보 및 경험 품질 정보에 기초하여 멀티 캐스트 예측 모델을 사용하여 멀티 캐스트 액세스 전략을 획득하도록 구성된다.
멀티 캐스트 조정 모듈(450)은 멀티 캐스트 액세스 전략에 기초하여 현재 액세스된 멀티 캐스트 조합을 조정하도록 구성된다.
본 개시의 예시적인 실시예에서, 대응하는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림을 포함하고; 또는 대응하는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림을 포함하며, 여기서 확장 정보는 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 삽입될 수 있다.
본 개시의 예시적인 실시예들에서, 확장 정보는 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되고, 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보 및 적어도 하나의 향상 레이어 영상 데이터 스트림의 특징 정보를 포함한다.
본 개시의 예시적인 실시예들에서, 확장 정보는 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되고, 확장 정보는 기본 레이어 영상 데이터 스트림의 특징 정보 및 기본 레이어 영상 데이터 스트림에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하고; 확장 정보는 하나 이상의 향상 계층 영상 스트림 중 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되며, 각 향상 레이어 영상 데이터 스트림에 대한 확장 정보는 향상 레이어 영상 데이터 스트림 자체의 특징 정보 및 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함한다.
본 개시의 예시적인 실시예들에서, 확장 정보로부터 추출된 특징 정보는 영상 데이터 스트림의 전송 속도, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 영상 데이터 스트림의 데이터 크기의 비율, 및 나머지 영상 데이터 스트림의 데이터 크기의 합계에 대한 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 유형을 포함한다.
본 개시의 예시적인 실시예들에서, 확장 정보는 데이터 패킷에 확장 정보가 임베딩되었음을 나타내는 제1 식별자, 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 개수, 확장 정보에 포함된 특징 정보 유형의 개수, 및 확장 정보의 임베딩 모드 중 적어도 하나를 포함한다.
본 개시의 예시적인 실시예에서, 멀티 캐스트 조정 모듈 (450)은 다음 동작 중 어느 하나를 수행하도록 구성된다: 단말 장치에 의해 현재 액세스된 멀티 캐스트 조합 이외의 적어도 하나의 멀티 캐스트에 새로 액세스하는 동작; 단말 장치에 의해 현재 액세스 된 멀티 캐스트 조합에서 적어도 하나의 멀티 캐스트를 종료하는 동작; 터미널 장치가 액세스 한 현재 멀티 캐스트 조합은 변경되지 않은 상태로 유지하는 동작.
본 개시의 예시적인 실시예들에서, 경험 품질 정보는 지터 기간, 평균 코덱 비트 레이트 및 프레임 레이트 편차 중 적어도 하나의 유형을 포함한다.
본 개시의 예시적인 실시예들에서, 수신 장치는 모델 업데이트 모듈 (460)을 더 포함하고, 모델 업데이트 모듈(460)은 업데이트될 추출된 특징 정보 및 경험 품질 정보 및 멀티 캐스트를 기반으로 멀티 캐스트 예측 모델을 재학습하도록 구성된다.
본 개시의 예시적인 실시예는 또한 적어도 하나의 프로세서 및 명령어들을 저장하는 적어도 하나의 메모리를 포함하는 서버를 제공하며, 여기서, 적어도 하나의 프로세서에 의해 실행될 때, 상기 명령어들은 적어도 하나의 프로세서가 상기 영상 데이터 전송 방법을 실행하게 한다.
본 개시의 예시적인 실시예는 또한 적어도 하나의 프로세서 및 명령어들을 저장하는 적어도 하나의 메모리를 포함하는 단말 장치를 제공하며, 여기서 상기 명령어들은 적어도 하나의 프로세서에 의해 실행될 때 적어도 하나의 프로세서가 상기 영상 데이터 수신 방법을 실행하게 한다.
상기 프로세서는 CPU (Central Processing Unit), 범용 프로세서, DSP (Digital Signal Processor), ASIC (Application Specific Integrated Circuit), FPGA (Field-Programmable Gate Array) 또는 기타 프로그램 가능 논리 장치, 트랜지스터 논리 장치, 하드웨어 구성 요소 또는 이들의 조합일 수 있다. 본 개시와 관련하여 설명된 다양한 예시적인 논리 블록, 모듈 및 회로를 구현하거나 실행할 수 있다. 프로세서는 또한 컴퓨팅 기능의 조합, 예를 들어 하나 이상의 마이크로 프로세서의 조합, DSP와 마이크로 프로세서의 조합 등일 수 있다.
메모리는 ROM (Read-Only Memory) 또는 정적 정보 및 명령어를 저장할 수 있는 다른 유형의 정적 저장 장치 일 수 있으며, RAM (Random Access Memory) 또는 다른 유형의 저장할 수 있는 동적 저장 장치일 수 있다. 아울러, 메모리는 EEPROM (Electrically Erasable Programmable Read Only Memory), CD-ROM (Compact Disc Read-Only Memory) 또는 기타 광학 디스크 저장소, 광학 디스크 저장소 (콤팩트 디스크, 레이저 디스크, 광학 디스크, 디지털 다용도 디스크, 블루 레이 디스크 등을 포함), 자기 디스크 저장 매체 또는 기타 자기 저장 장치, 또는 명령이나 데이터 구조의 형태로 컴퓨터에 의해 원하는 프로그램 코드를 전달하거나 저장하고 액세스할 수 있는 기타 매체 일 수도 있으나, 이에 국한되지 않는다.
본 개시의 예시적인 실시예는 또한 명령어를 저장하는 컴퓨터 판독 가능 저장 매체를 제공하며, 여기서 명령어는 서버의 적어도 하나의 프로세서에 의해 실행될 때, 적어도 하나의 프로세서가 영상 데이터를 전송하기 위한 상기 방법을 실행하게 한다.
본 개시 내용의 예시적인 실시예는 또한 명령어를 저장하는 컴퓨터 판독 가능 저장 매체를 제공하며, 여기서 명령어는 적어도 하나의 프로세서에 의해 실행될 때, 적어도 하나의 프로세서로 하여금 영상 데이터를 수신하기 위한 상기 방법을 실행하게 한다.
상술한 컴퓨터로 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의해 읽힌 데이터를 저장할 수 있는 모든 데이터 저장소일 수 있다. 컴퓨터로 읽을 수 있는 기록 매체의 예로는 읽기 전용 메모리, 랜덤 액세스 메모리, 읽기 전용 광디스크, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치, 캐리어 웨이브 (예: 유선 또는 무선 전송 경로를 통한 인터넷)를 포함할 수 있다.
본 개시는 본 개시의 특정 실시 예를 참조하여 도시 및 설명되었지만, 당업자는 본 개시의 사상 및 범위를 벗어나지 않고 다양한 형태 및 세부 사항의 다양한 변경이 이루어질 수 있음을 이해할 것이다.
Claims (30)
- 영상 데이터를 전송하는 방법에 있어서,
원본 영상을 복수의 영상 데이터 스트림으로 계층화하는 단계;
상기 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 미리 설정된 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 단계; 및
상기 복수의 영상 데이터 스트림 각각을 대응되는 채널로 전송하는 단계
를 포함하는 영상 데이터 전송 방법. - 제1항에 있어서,
상기 원본 영상을 복수의 영상 데이터 스트림으로 계층화하는 단계는,
상기 원본 영상을 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림으로 계층화하는 단계를 포함하고,
상기 복수의 영상 데이터 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 확장 정보를 내장하는 단계는,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 확장 정보를 내장하는 단계
를 포함하는 것을 특징으로 하는 영상 데이터 전송 방법. - 제2항에 있어서,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 확장 정보를 내장하는 단계는,
기본 레이어 영상 데이터 스트림의 상기 적어도 하나의 데이터 패킷에 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 적어도 하나의 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 단계
를 포함하는 것을 특징으로 하는 영상 데이터 전송 방법. - 제2항에 있어서,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 확장 정보를 내장하는 단계는,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 상기 기본 레이어 영상 데이터 스트림에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 단계; 및
상기 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 향상 레이어 영상 데이터 스트림 자체의 특징 정보와 상기 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 단계
를 포함하는 것을 특징으로 하는 영상 데이터 전송 방법. - 제1항에 있어서,
각 영상 데이터 스트림의 상기 특징 정보는,
영상 데이터 스트림의 전송 속도, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 상기 영상 데이터 스트림의 데이터 크기 비율, 및 나머지 영상 데이터 스트림의 데이터 크기의 합에 대한 상기 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 유형을 포함하는 것을 특징으로 하는 영상 데이터 전송 방법. - 제1항에 있어서,
상기 확장 정보는,
데이터 패킷이 상기 확장 정보에 내장되었음을 나타내는 제1 식별자, 상기 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 개수, 확장 정보의 특징 정보 유형 수, 및 확장 정보의 임베딩 모드 중 적어도 하나의 유형을 더 포함하는 것을 특징으로 하는 영상 데이터 전송 방법. - 영상 데이터를 수신하는 방법에 있어서,
현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림-상기 영상 데이터 스트림에 포함된 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에는 확장 정보가 포함되어 있으며, 상기 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함함-을 수신하는 단계;
상기 확장 정보로부터 상기 특징 정보를 추출하는 단계;
상기 영상을 기반으로 현재 재생중인 영상의 경험 품질 정보를 획득하는 단계;
상기 추출된 특징 정보 및 상기 경험 품질 정보에 기초하여 멀티 캐스트 예측 모델을 사용하여 멀티 캐스트 액세스 전략을 획득하는 단계; 및
상기 멀티 캐스트 액세스 전략에 따라 상기 현재 액세스된 멀티 캐스트 조합을 조정하는 단계
를 포함하는 영상 데이터 수신 방법. - 제7항에 있어서,
상기 현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림을 포함하거나;
현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림을 포함하고,
상기 확장 정보는 적어도 상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되는 것을 특징으로 하는 영상 데이터 수신 방법. - 제8항에 있어서,
상기 확장 정보는,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되고, 상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 적어도 하나의 상기 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 것을 특징으로 하는 영상 데이터 수신 방법. - 제8항에 있어서,
상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되어 있으며, 상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 상기 기본 레이어 영상 데이터에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하고,
상기 확장 정보는 상기 하나 이상의 향상 레이어 영상 스트림 중 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되고, 상기 각 향상 레이어 영상 데이터 스트림에 대한 확장 정보는 상기 향상 레이어 영상 데이터 스트림 자체의 특징 정보 및 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함하는 것을 특징으로 하는 영상 데이터 수신 방법. - 제7항에 있어서,
상기 확장 정보로부터 추출된 특징 정보는,
영상 데이터 스트림의 전송 속도, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 상기 영상 데이터 스트림의 데이터 크기 비율, 및 나머지 영상 데이터 스트림의 데이터 크기의 합계에 대한 상기 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 유형을 포함하는 것을 특징으로 하는 영상 데이터 수신 방법. - 제7항에 있어서,
상기 확장 정보는,
데이터 패킷이 상기 확장 정보에 내장되었음을 나타내는 제1 식별자, 상기 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 개수, 확장 정보의 특징 정보 유형 수, 및 확장 정보의 임베딩 모드 중 적어도 하나의 유형을 더 포함하는 것을 특징으로 하는 영상 데이터 수신 방법. - 제7항에 있어서,
상기 경험 품질 정보는,
지터 기간, 평균 코덱 비트 레이트 및 프레임 레이트 편차 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 데이터 수신 방법. - 원본 영상을 복수의 영상 데이터 스트림들로 계층화하고, 상기 복수의 영상 데이터 스트림 중 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 미리 설정된 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 삽입하며, 상기 복수의 영상 데이터 스트림을 전송을 위해 각각 대응하는 채널로 전송하는 적어도 하나의 프로세서
를 포함하는 영상 데이터 전송 장치. - 제14항에 있어서,
상기 적어도 하나의 프로세서는,
상기 원본 영상을 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림으로 계층화하고, 상기 확장 정보를 상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장하는 것을 특징으로 하는 영상 데이터 전송 장치. - 제15항에 있어서,
상기 적어도 하나의 프로세서는,
상기 기본 레이어 영상 데이터 스트림의 상기 적어도 하나의 데이터 패킷에 상기 확장 정보를 삽입하고, 상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 적어도 하나의 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 것을 특징으로 하는 영상 데이터 전송 장치. - 제15항에 있어서,
상기 적어도 하나의 프로세서는,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 상기 기본 레이어 영상 데이터 스트림에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하고, 상기 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 상기 향상 레이어 영상 데이터 스트림 자체의 특징 정보와 상기 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함하는 확장 정보를 내장하는 것을 특징으로 하는 영상 데이터 전송 장치. - 제14항에 있어서,
각 영상 데이터 스트림의 상기 특징 정보는,
영상 데이터 스트림의 전송 속도, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 상기 영상 데이터 스트림의 데이터 크기 비율, 및 나머지 영상 데이터 스트림의 데이터 크기의 합에 대한 상기 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 유형을 포함하는 것을 특징으로 하는 영상 데이터 전송 장치. - 제14항에 있어서,
상기 확장 정보는,
데이터 패킷이 상기 확장 정보에 내장되었음을 나타내는 제1 식별자, 상기 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 개수, 확장 정보의 특징 정보 유형 수, 및 확장 정보의 임베딩 모드 중 적어도 하나의 유형을 더 포함하는 것을 특징으로 하는 영상 데이터 전송 장치. - 현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림- 상기 영상 데이터 스트림에 포함된 적어도 하나의 영상 데이터 스트림의 적어도 하나의 데이터 패킷에는 확장 정보가 포함되어 있으며, 상기 확장 정보는 미리 설정된 영상 데이터 스트림의 특징 정보를 포함함-을 수신하고, 상기 확장 정보로부터 상기 특징 정보를 추출하며, 상기 영상을 기반으로 현재 재생중인 영상의 경험 품질 정보를 획득하고, 상기 추출된 특징 정보 및 경험 품질 정보에 기초하여 멀티 캐스트 예측 모델을 사용하여 멀티 캐스트 액세스 전략을 획득하며, 상기 멀티 캐스트 액세스 전략에 따라 상기 현재 액세스된 멀티 캐스트 조합을 조정하는 적어도 하나의 프로세서
를 포함하는 영상 데이터 수신 장치. - 제20항에 있어서,
상기 현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림을 포함하거나;
현재 액세스된 멀티 캐스트 조합에 대응되는 영상 데이터 스트림은 기본 레이어 영상 데이터 스트림 및 하나 이상의 향상 레이어 영상 데이터 스트림을 포함하고,
상기 확장 정보는 적어도 상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되는 것을 특징으로 하는 영상 데이터 수신 장치. - 제21항에 있어서,
상기 확장 정보는,
상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되고, 상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 적어도 하나의 상기 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하는 것을 특징으로 하는 영상 데이터 수신 장치. - 제21항에 있어서,
상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되어 있으며, 상기 확장 정보는 상기 기본 레이어 영상 데이터 스트림의 특징 정보 및 상기 기본 레이어 영상 데이터에 인접한 향상 레이어 영상 데이터 스트림의 특징 정보를 포함하고,
상기 확장 정보는 상기 하나 이상의 향상 레이어 영상 스트림 중 각 향상 레이어 영상 데이터 스트림의 적어도 하나의 데이터 패킷에 내장되고, 상기 각 향상 레이어 영상 데이터 스트림에 대한 확장 정보는 상기 향상 레이어 영상 데이터 스트림 자체의 특징 정보 및 향상 레이어 영상 데이터 스트림에 인접한 영상 데이터 스트림의 특징 정보를 포함하는 것을 특징으로 하는 영상 데이터 수신 장치. - 제20항에 있어서,
상기 확장 정보로부터 추출된 특징 정보는,
영상 데이터 스트림의 전송 속도, 기본 레이어 영상 데이터 스트림의 데이터 크기에 대한 상기 영상 데이터 스트림의 데이터 크기 비율, 및 나머지 영상 데이터 스트림의 데이터 크기의 합계에 대한 상기 영상 데이터 스트림의 데이터 크기의 비율 중 적어도 하나의 유형을 포함하는 것을 특징으로 하는 영상 데이터 수신 장치. - 제20항에 있어서,
상기 확장 정보는,
데이터 패킷이 상기 확장 정보에 내장되었음을 나타내는 제1 식별자, 상기 확장 정보에 포함된 특징 정보에 대응하는 영상 데이터 스트림의 개수, 확장 정보의 특징 정보 유형 수, 및 확장 정보의 임베딩 모드 중 적어도 하나의 유형을 더 포함하는 것을 특징으로 하는 영상 데이터 수신 장치. - 제20항에 있어서,
상기 경험 품질 정보는,
지터 기간, 평균 코덱 비트 레이트 및 프레임 레이트 편차 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 데이터 수신 장치. - 적어도 하나의 프로세서 및 명령어를 저장하는 적어도 하나의 메모리를 포함하는 서버에 있어서,
상기 적어도 하나의 프로세서에 의해 실행될 때, 상기 명령어는 상기 적어도 하나의 프로세서로 하여금 제1항에 따른 영상 데이터 전송 방법을 실행하게 하는 서버. - 적어도 하나의 프로세서 및 명령어를 저장하는 적어도 하나의 메모리를 포함하는 단말 장치에 있어서,
상기 적어도 하나의 프로세서에 의해 실행될 때, 상기 명령어는 상기 적어도 하나의 프로세서로 하여금 제7항에 따른 영상 데이터 수신 방법을 실행하게 하는 단말 장치. - 명령어를 저장하는 컴퓨터 판독 가능 저장 매체에 있어서,
상기 명령어는 서버의 적어도 하나의 프로세서에 의해 실행될 때, 상기 적어도 하나의 프로세서로 하여금 제1항에 따른 영상 데이터 전송 방법을 수행하게 하는 컴퓨터 판독 가능 저장 매체. - 명령어를 저장하는 컴퓨터 판독 가능 저장 매체에 있어서,
상기 명령어는 단말 장치의 적어도 하나의 프로세서에 의해 실행될 때, 상기 적어도 하나의 프로세서로 하여금 제7항에 따른 영상 데이터 수신 방법을 수행하게 하는 컴퓨터 판독 가능 저장 매체.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110292268.7A CN113038289A (zh) | 2021-03-18 | 2021-03-18 | 发送和接收视频数据方法、终端设备和服务器 |
| CN202110292268.7 | 2021-03-18 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20220130553A true KR20220130553A (ko) | 2022-09-27 |
Family
ID=76471542
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210093144A KR20220130553A (ko) | 2021-03-18 | 2021-07-15 | 영상 데이터를 송수신하는 단말 장치, 서버 및 이의 동작 방법 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20220303620A1 (ko) |
| KR (1) | KR20220130553A (ko) |
| CN (1) | CN113038289A (ko) |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101330436B (zh) * | 2007-06-19 | 2014-04-30 | 上海贝尔阿尔卡特股份有限公司 | 可调整的组播多媒体业务数据的传输方法及装置 |
| KR101580516B1 (ko) * | 2008-04-07 | 2015-12-28 | 엘지전자 주식회사 | 방송 신호 수신 방법 및 방송 신호 수신 장치 |
| FR2948249B1 (fr) * | 2009-07-20 | 2011-09-23 | Canon Kk | Procedes et dispositifs d'estimation d'un niveau d'utilisation d'un reseau de communication et d'adaptation d'un niveau d'abonnements a des groupes multipoints |
| US20110299601A1 (en) * | 2010-06-08 | 2011-12-08 | Cisco Technology, Inc. | Scalable video multicast framework for heterogeneous endpoints |
| US9848217B2 (en) * | 2012-01-20 | 2017-12-19 | Korea Electronics Technology Institute | Method for transmitting and receiving program configuration information for scalable ultra high definition video service in hybrid transmission environment, and method and apparatus for effectively transmitting scalar layer information |
| US9241197B2 (en) * | 2013-01-25 | 2016-01-19 | Cisco Technology, Inc. | System and method for video delivery over heterogeneous networks with scalable video coding for multiple subscriber tiers |
| US11653007B2 (en) * | 2018-07-15 | 2023-05-16 | V-Nova International Limited | Low complexity enhancement video coding |
-
2021
- 2021-03-18 CN CN202110292268.7A patent/CN113038289A/zh active Pending
- 2021-04-05 US US17/222,205 patent/US20220303620A1/en not_active Abandoned
- 2021-07-15 KR KR1020210093144A patent/KR20220130553A/ko active Search and Examination
Also Published As
| Publication number | Publication date |
|---|---|
| US20220303620A1 (en) | 2022-09-22 |
| CN113038289A (zh) | 2021-06-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CA2878327C (en) | Methods for quality-aware adaptive streaming over hypertext transfer protocol | |
| CN1764974B (zh) | 存储多媒体数据的存储介质和再现多媒体数据的方法和设备 | |
| CN1859579B (zh) | 传输多媒体数据流的设备和方法 | |
| JP4558802B2 (ja) | アダプティブバッファリングのための方法と装置 | |
| CN110636346B (zh) | 一种码率自适应切换方法、装置、电子设备及存储介质 | |
| US10104407B2 (en) | Method and device for network-assisted client-centric QoE optimization | |
| US20150110168A1 (en) | Video data transmission method and apparatus | |
| CN104394484A (zh) | 一种无线实时流媒体传输方法 | |
| US8448213B2 (en) | Contents distribution system, contents distribution server, contents reproduction terminal, and contents distribution method | |
| CN113676741A (zh) | 数据传输方法、装置、存储介质及电子设备 | |
| CN101047476B (zh) | 一种选择调制方式的方法和装置 | |
| CN115834556B (zh) | 数据传输方法、系统、设备、存储介质及程序产品 | |
| CN113038187A (zh) | 一种视频体验质量公平的实用网络带宽分配方法 | |
| CN107295364A (zh) | 用于弹幕视频的实时流传输控制方法、控制装置 | |
| CN110661726A (zh) | 一种基于多链路聚合的数据发送方法和装置 | |
| US20150039721A1 (en) | Method and apparatus for controlling traffic using adaptive streaming in multi-media content transmission system | |
| CN111970565A (zh) | 视频数据处理方法、装置、电子设备及存储介质 | |
| CN113783942B (zh) | 基于优先分级队列的mpquic数据包快速传输方法和系统 | |
| WO2024066362A1 (zh) | 数据传输方法、装置、计算机可读介质及电子设备 | |
| KR20220130553A (ko) | 영상 데이터를 송수신하는 단말 장치, 서버 및 이의 동작 방법 | |
| CN116962179A (zh) | 网络传输优化方法、装置、计算机可读介质及电子设备 | |
| CN102340442A (zh) | 调整接口接收队列长度的方法及装置 | |
| CN105491394A (zh) | 发送mmt包的方法及装置、接收mmt包的方法 | |
| CN109922318B (zh) | 一种多路视频传输调度方法、装置、存储介质及电子终端 | |
| CN113726759A (zh) | 一种码率自适应方法、装置、设备及可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination |