KR102559966B1 - 복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템 - Google Patents

복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템 Download PDF

Info

Publication number
KR102559966B1
KR102559966B1 KR1020207028833A KR20207028833A KR102559966B1 KR 102559966 B1 KR102559966 B1 KR 102559966B1 KR 1020207028833 A KR1020207028833 A KR 1020207028833A KR 20207028833 A KR20207028833 A KR 20207028833A KR 102559966 B1 KR102559966 B1 KR 102559966B1
Authority
KR
South Korea
Prior art keywords
video
encoders
encoder
computer
video streams
Prior art date
Application number
KR1020207028833A
Other languages
English (en)
Other versions
KR20210002103A (ko
Inventor
백준식
Original Assignee
라인플러스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 라인플러스 주식회사 filed Critical 라인플러스 주식회사
Publication of KR20210002103A publication Critical patent/KR20210002103A/ko
Application granted granted Critical
Publication of KR102559966B1 publication Critical patent/KR102559966B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0014—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the source coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0036—Systems modifying transmission characteristics according to link quality, e.g. power backoff arrangements specific to the receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0056—Systems characterized by the type of code used
    • H04L1/0071—Use of interleaving
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385—Channel allocation; Bandwidth allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/0803—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division using frequency interleaving, e.g. with precision offset

Abstract

복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템을 제공한다. 본 발명의 실시예들에 따른 비디오 송출 방법은, N(상기 N은 2 이상의 자연수)개의 인코더를 구현하는 단계, 송출하고자 하는 비디오의 프레임들을 인터리빙(interleaving) 방식으로 상기 N개의 인코더로 전달하는 단계, 상기 N개의 인코더 각각을 통해 전달되는 프레임을 인코딩하여 N개의 비디오 스트림을 생성하는 단계 및 상기 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 전송하는 단계를 포함할 수 있다.

Description

복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템
아래의 설명은 복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템에 관한 것이다.
방송 송출자로부터 제공되는 비디오를 서버가 수신하고, 수신된 비디오를 서버가 다시 다수의 방송 수신자들에게 송출하는 기술이 존재한다. 이때, 방송 송출자로부터 단일 품질로 제공되는 비디오를 방송 수신자들의 니즈에 따라 여러 품질로 제공하기 위해서는 서버측에서 트랜스코딩 과정을 거쳐야만 한다. 예를 들어, 방송 송출자가 720p의 해상도로 비디오를 송출하는 경우를 고려할 수 있다. 여기서 720p의 숫자 "720"은 세로 해상도의 720줄을 의미하며, 문자 "p"는 순차 주사(progressive)를 의미한다. 이는 1280×720의 해상도를 갖는 HD 영상을 의미할 수 있다. 이때, 방송 시청자들을 위해, 720p, 480p 그리고 360p의 총 세 가지 품질의 해상도로 비디오를 송출하는 것을 서버에서 지원하고자 하는 경우, 서버는 방송 송출자로부터 720p의 해상도로 송출된 비디오를 720p, 480p 그리고 360p의 세 가지 비디오로 트랜스코딩을 해야 한다. 예를 들어, 한국공개특허 제10-2007-0048095호는 디지털 멀티미디어 방송 스트림의 재전송을 위한 트랜스코딩 방법에 관한 것으로, 외부로부터 수신한 디지털 방송 스트림을 재전송하기 위해 트랜스코딩하는 기술에 대해 개시하고 있다.
그러나, 이러한 트랜스코딩 자체가 매우 많은 서버 리소스를 요구한다는 문제점이 있다. 예를 들어, 방송 송출자의 비디오에 대해, 프레임들을 단순히 멀티플렉싱(multiplexing, 또는 먹싱(muxing))하는 것과 비교하여 비디오를 트랜스코딩하는 것은 상대적으로 수백 배 이상의 서버 리소스를 더 요구한다. 따라서, 방송 수신자들에게 다양한 품질의 비디오를 제공하기 위해 트랜스코딩을 수행하는 것은 서버측에 매우 큰 리소스를 요구하게 된다는 문제점이 있다.
한편, 서버 인프라 비용을 줄이기 위해 서버 트랜스코딩을 처리하지 않는 경우, 방송 수신자들은 방송 송출자가 송출한 방송의 비트레이트에 대응하는 데이터를 수신해야만 해당 방송을 시청할 수 있게 된다. 예를 들어, 방송 송출자는 네트워크 환경이 나쁜 경우 방송의 비트레이트를 동적으로 조절함으로써, 방송 송출의 제약을 어느 정도 조절할 수 있다. 반면, 방송 수신자들은 네트워크 환경과 무관하게 방송 송출자가 송출한 방송의 비트레이트에 대응하는 데이터를 모두 수신해야만 해당 방송을 시청할 수 있기 때문에 방송을 제약 없이 시청하기 위해서는 적어도 방송 송출자가 사용하는 네트워크 품질과 동일 또는 그 이상의 네트워크 품질이 요구된다는 문제점이 있다.
송출자가 하나의 비디오를 단일 채널이 아닌 N(상기 N은 2 이상의 자연수)개의 채널로 분할하여 송출할 수 있는 비디오 송출 방법, 비디오 송출 방법을 수행하는 컴퓨터 장치, 그리고 컴퓨터와 결합되어 비디오 송출 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램과 그 기록매체를 제공한다.
수신자가 네트워크 환경에 따라 송출자가 송출하는 N개의 채널 중 n(상기 n은 상기 N 이하의 자연수)개의 채널에서 수신되는 비디오 스트림을 결합하여 재생함으로써, 수신자측의 네트워크 환경에 따라 적절한 비트레이트의 비디오를 재생할 수 있는 비디오 재생 방법, 비디오 재생 방법을 수행하는 컴퓨터 장치, 그리고 컴퓨터와 결합되어 비디오 재생 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램과 그 기록매체를 제공한다.
N(상기 N은 2 이상의 자연수)개의 인코더를 구현하는 단계; 송출하고자 하는 비디오의 프레임들을 인터리빙(interleaving) 방식으로 상기 N개의 인코더로 전달하는 단계; 상기 N개의 인코더 각각을 통해 전달되는 프레임을 인코딩하여 N개의 비디오 스트림을 생성하는 단계; 및 상기 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 전송하는 단계를 포함하는 것을 특징으로 하는 비디오 송출 방법을 제공한다.
컴퓨터와 결합되어 비디오 송출 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램을 제공한다.
비디오 송출 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록매체를 제공한다.
N(상기 N은 2 이상의 자연수)개의 디코더를 구현하는 단계; 하나의 비디오의 프레임들을 인터리빙(interleaving) 방식으로 N 개의 인코더를 통해 인코딩하여 생성되는 N 개의 비디오 스트림들 중 n(상기 n은 상기 N 이하의 자연수)개의 비디오 스트림을 선택하는 단계; 상기 선택된 n개의 비디오 스트림을 상기 N개의 디코더 중 n개의 디코더를 통해 디코딩하는 단계; 및 상기 n개의 디코더를 통해 디코딩된 n개의 비디오 스트림을 이용하여 비디오를 재생하는 단계를 포함하는 비디오 재생 방법을 제공한다.
컴퓨터와 결합되어 비디오 재생 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램을 제공한다.
비디오 재생 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록매체를 제공한다.
컴퓨터 장치에 있어서, 컴퓨터에서 판독 가능한 명령을 실행하도록 구현되는 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서에 의해, N(상기 N은 2 이상의 자연수)개의 인코더를 구현하고, 송출하고자 하는 비디오의 프레임들을 인터리빙(interleaving) 방식으로 상기 N개의 인코더로 전달하고, 상기 N개의 인코더 각각을 통해 전달되는 프레임을 인코딩하여 N개의 비디오 스트림을 생성하고, 상기 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 전송하는 것을 특징으로 하는 컴퓨터 장치를 제공한다.
컴퓨터 장치에 있어서, 컴퓨터에서 판독 가능한 명령을 실행하도록 구현되는 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서에 의해, N(상기 N은 2 이상의 자연수)개의 디코더를 구현하고, 하나의 비디오의 프레임들을 인터리빙(interleaving) 방식으로 N 개의 인코더를 통해 인코딩하여 생성되는 N 개의 비디오 스트림들 중 n(상기 n은 상기 N 이하의 자연수)개의 비디오 스트림을 선택하고, 상기 선택된 n개의 비디오 스트림을 상기 N개의 디코더 중 n개의 디코더를 통해 디코딩하고, 상기 n개의 디코더를 통해 디코딩된 n개의 비디오 스트림을 이용하여 비디오를 재생하는 것을 특징으로 하는 컴퓨터 장치를 제공한다.
송출자가 하나의 비디오를 단일 채널이 아닌 N(상기 N은 2 이상의 자연수)개의 채널로 분할하여 송출할 수 있다.
수신자가 네트워크 환경에 따라 송출자가 송출하는 N개의 채널 중 n(상기 n은 상기 N 이하의 자연수)개의 채널에서 수신되는 비디오 스트림을 결합하여 재생함으로써, 수신자측의 네트워크 환경에 따라 적절한 비트레이트의 비디오를 재생할 수 있다.
도 1은 본 발명의 일실시예에 따른 네트워크 환경의 예를 도시한 도면이다.
도 2는 본 발명의 일실시예에 있어서, 전자 기기 및 서버의 내부 구성을 설명하기 위한 블록도이다.
도 3은 종래기술에 따른 비디오 송출 과정의 예를 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 비디오 송출 과정의 예를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 비디오 재생 과정의 예를 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 비디오 재생 과정의 다른 예를 도시한 도면이다.
도 7은 본 발명의 일실시예에 있어서, 인코더들의 순차적인 활성화의 예를 도시한 도면이다.
도 8은 본 발명의 일실시예에 따른 비디오 송출 방법의 예를 도시한 흐름도이다.
도 9는 본 발명의 일실시예에 따른 비디오 재생 방법의 예를 도시한 흐름도이다.
발명의 실시를 위한 최선의 형태
이하, 실시예를 첨부한 도면을 참조하여 상세히 설명한다.
본 발명의 실시예들에 따른 비디오 송출 방법은 이후 설명될 전자 기기와 같은 컴퓨터 장치를 통해 수행될 수 있다. 이때, 컴퓨터 장치에는 본 발명의 일실시예에 따른 컴퓨터 프로그램이 설치 및 구동될 수 있고, 컴퓨터 장치는 구동된 컴퓨터 프로그램의 제어에 따라 본 발명의 일실시예에 따른 비디오 송출 방법을 수행할 수 있다. 상술한 컴퓨터 프로그램은 컴퓨터 장치와 결합되어 비디오 송출 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장될 수 있다. 또한, 본 발명의 실시예들에 따른 비디오 재생 방법 역시 이후 설명될 전자 기기와 같은 컴퓨터 장치를 통해 수행될 수 있다. 이때, 컴퓨터 장치에는 본 발명의 일실시예에 따른 컴퓨터 프로그램이 설치 및 구동될 수 있고, 컴퓨터 장치는 구동된 컴퓨터 프로그램의 제어에 따라 본 발명의 일실시예에 따른 비디오 재생 방법을 수행할 수 있다.
도 1은 본 발명의 일실시예에 따른 네트워크 환경의 예를 도시한 도면이다. 도 1의 네트워크 환경은 복수의 전자 기기들(110, 120, 130, 140), 복수의 서버들(150, 160) 및 네트워크(170)를 포함하는 예를 나타내고 있다. 이러한 도 1은 발명의 설명을 위한 일례로 전자 기기의 수나 서버의 수가 도 1과 같이 한정되는 것은 아니다.
복수의 전자 기기들(110, 120, 130, 140)은 컴퓨터 장치로 구현되는 고정형 단말이거나 이동형 단말일 수 있다. 복수의 전자 기기들(110, 120, 130, 140)의 예를 들면, 스마트폰(smart phone), 휴대폰, 네비게이션, 컴퓨터, 노트북, 디지털방송용 단말, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 태블릿 PC 등이 있다. 일례로 도 1에서는 전자 기기 1(110)의 예로 스마트폰의 형상을 나타내고 있으나, 본 발명의 실시예들에서 전자 기기 1(110)은 실질적으로 무선 또는 유선 통신 방식을 이용하여 네트워크(170)를 통해 다른 전자 기기들(120, 130, 140) 및/또는 서버(150, 160)와 통신할 수 있는 다양한 물리적인 컴퓨터 장치들 중 하나를 의미할 수 있다.
통신 방식은 제한되지 않으며, 네트워크(170)가 포함할 수 있는 통신망(일례로, 이동통신망, 유선 인터넷, 무선 인터넷, 방송망)을 활용하는 통신 방식뿐만 아니라 기기들간의 근거리 무선 통신 역시 포함될 수 있다. 예를 들어, 네트워크(170)는, PAN(personal area network), LAN(local area network), CAN(campus area network), MAN(metropolitan area network), WAN(wide area network), BBN(broadband network), 인터넷 등의 네트워크 중 하나 이상의 임의의 네트워크를 포함할 수 있다. 또한, 네트워크(170)는 버스 네트워크, 스타 네트워크, 링 네트워크, 메쉬 네트워크, 스타-버스 네트워크, 트리 또는 계층적(hierarchical) 네트워크 등을 포함하는 네트워크 토폴로지 중 임의의 하나 이상을 포함할 수 있으나, 이에 제한되지 않는다.
서버(150, 160) 각각은 복수의 전자 기기들(110, 120, 130, 140)과 네트워크(170)를 통해 통신하여 명령, 코드, 파일, 컨텐츠, 서비스 등을 제공하는 하나 또는 둘 이상의 컴퓨터 장치로 구현될 수 있다. 예를 들어, 서버(150)는 네트워크(170)를 통해 접속한 복수의 전자 기기들(110, 120, 130, 140)로 제1 서비스를 제공하는 시스템일 수 있으며, 서버(160) 역시 네트워크(170)를 통해 접속한 복수의 전자 기기들(110, 120, 130, 140)로 제2 서비스를 제공하는 시스템일 수 있다. 보다 구체적인 예로, 제1 서비스로서 소셜 네트워크 서비스일 수 있다. 이 경우, 서버(150)는 서비스와 연계된 어플리케이션이 설치된 복수의 전자 기기들(110, 120, 130, 140)로 상기 어플리케이션을 통해 방송 송출 서비스, 메시징 서비스, 타임라인 서비스 등과 같이 소셜 네트워크 서비스로서 제공 가능한 다양한 서비스들을 제공할 수 있다. 또한, 서버(160)는 상술한 어플리케이션의 설치를 위한 설치 파일을 복수의 전자 기기들(110, 120, 130, 140)로 배포하기 위한 서비스를 제2 서비스로서 제공할 수 있다.
도 2는 본 발명의 일실시예에 따른 컴퓨터 장치의 예를 도시한 블록도이다. 앞서 설명한 복수의 전자 기기들(110, 120, 130, 140) 각각이나 서버들(150, 160) 각각은 도 2를 통해 도시된 컴퓨터 장치(200)에 의해 구현될 수 있다. 예를 들어, 컴퓨터 장치(200)에는 일실시예에 따른 컴퓨터 프로그램이 설치 및 구동될 수 있고, 컴퓨터 장치(200)는 구동된 컴퓨터 프로그램의 제어에 따라 본 발명의 실시예들에 따른 비디오 송출 방법 및/또는 비디오 재생 방법을 수행할 수 있다.
이러한 컴퓨터 장치(200)는 도 2에 도시된 바와 같이, 메모리(210), 프로세서(220), 통신 인터페이스(230) 그리고 입출력 인터페이스(240)를 포함할 수 있다. 메모리(210)는 컴퓨터에서 판독 가능한 기록매체로서, RAM(random access memory), ROM(read only memory) 및 디스크 드라이브와 같은 비소멸성 대용량 기록장치(permanent mass storage device)를 포함할 수 있다. 여기서 ROM과 디스크 드라이브와 같은 비소멸성 대용량 기록장치는 메모리(210)와는 구분되는 별도의 영구 저장 장치로서 컴퓨터 장치(200)에 포함될 수도 있다. 또한, 메모리(210)에는 운영체제와 적어도 하나의 프로그램 코드가 저장될 수 있다. 이러한 소프트웨어 구성요소들은 메모리(210)와는 별도의 컴퓨터에서 판독 가능한 기록매체로부터 메모리(210)로 로딩될 수 있다. 이러한 별도의 컴퓨터에서 판독 가능한 기록매체는 플로피 드라이브, 디스크, 테이프, DVD/CD-ROM 드라이브, 메모리 카드 등의 컴퓨터에서 판독 가능한 기록매체를 포함할 수 있다. 다른 실시예에서 소프트웨어 구성요소들은 컴퓨터에서 판독 가능한 기록매체가 아닌 통신 인터페이스(230)를 통해 메모리(210)에 로딩될 수도 있다. 예를 들어, 소프트웨어 구성요소들은 네트워크(170)를 통해 수신되는 파일들에 의해 설치되는 컴퓨터 프로그램에 기반하여 컴퓨터 장치(200)의 메모리(210)에 로딩될 수 있다.
프로세서(220)는 기본적인 산술, 로직 및 입출력 연산을 수행함으로써, 컴퓨터 프로그램의 명령을 처리하도록 구성될 수 있다. 명령은 메모리(210) 또는 통신 인터페이스(230)에 의해 프로세서(220)로 제공될 수 있다. 예를 들어 프로세서(220)는 메모리(210)와 같은 기록 장치에 저장된 프로그램 코드에 따라 수신되는 명령을 실행하도록 구성될 수 있다.
통신 인터페이스(230)은 네트워크(170)를 통해 컴퓨터 장치(200)가 다른 장치(일례로, 앞서 설명한 저장 장치들)와 서로 통신하기 위한 기능을 제공할 수 있다. 일례로, 컴퓨터 장치(200)의 프로세서(220)가 메모리(210)와 같은 기록 장치에 저장된 프로그램 코드에 따라 생성한 요청이나 명령, 데이터, 파일 등이 통신 인터페이스(230)의 제어에 따라 네트워크(170)를 통해 다른 장치들로 전달될 수 있다. 역으로, 다른 장치로부터의 신호나 명령, 데이터, 파일 등이 네트워크(170)를 거쳐 컴퓨터 장치(200)의 통신 인터페이스(230)를 통해 컴퓨터 장치(200)로 수신될 수 있다. 통신 인터페이스(230)를 통해 수신된 신호나 명령, 데이터 등은 프로세서(220)나 메모리(210)로 전달될 수 있고, 파일 등은 컴퓨터 장치(200)가 더 포함할 수 있는 저장 매체(상술한 영구 저장 장치)로 저장될 수 있다.
입출력 인터페이스(240)는 입출력 장치(250)와의 인터페이스를 위한 수단일 수 있다. 예를 들어, 입력 장치는 마이크, 키보드 또는 마우스 등의 장치를, 그리고 출력 장치는 디스플레이, 스피커와 같은 장치를 포함할 수 있다. 다른 예로 입출력 인터페이스(240)는 터치스크린과 같이 입력과 출력을 위한 기능이 하나로 통합된 장치와의 인터페이스를 위한 수단일 수도 있다. 입출력 장치(250)는 컴퓨터 장치(200)와 하나의 장치로 구성될 수도 있다.
또한, 다른 실시예들에서 컴퓨터 장치(200)는 도 2의 구성요소들보다 더 적은 혹은 더 많은 구성요소들을 포함할 수도 있다. 그러나, 대부분의 종래기술적 구성요소들을 명확하게 도시할 필요성은 없다. 예를 들어, 컴퓨터 장치(200)는 상술한 입출력 장치(250) 중 적어도 일부를 포함하도록 구현되거나 또는 트랜시버(transceiver), 데이터베이스 등과 같은 다른 구성요소들을 더 포함할 수도 있다.
도 3은 종래기술에 따른 비디오 송출 과정의 예를 도시한 도면이고, 도 4는 본 발명의 일실시예에 따른 비디오 송출 과정의 예를 도시한 도면이다.
도 3은 송출자 단말(310)이 비디오의 프레임들(320)을 인코더(330)를 통해 인코딩하여 서버(340)를 통해 수신자 단말(350)로 송출하는 예를 나타내고 있다. 이때, 종래기술에 따른 송출자 단말(310)은 단순히 비디오의 프레임들(320)을 인코더(330)를 통해 순차적으로 인코딩한다. 이때, 비디오 인코더(331)는 비디오의 프레임들(320)을 인코딩할 수 있으며, 오디오 인코더(332)는 비디오가 포함하는 오디오를 인코딩할 수 있다. 또한, 포매터(Formatter, 330)는 인코딩된 비디오와 오디오를 서버(340)에 대해 기 설정된 비디오 스트리밍 프로토콜(일례로, RTMP(Real Time Messaging Protocol))에 알맞은 포맷으로 변환할 수 있다. 수신자 단말(350)은 반대로, 서버(340)를 통해 전달되는 인코딩된 데이터를 디코더를 통해 디코딩함으로써, 비디오를 재생할 수 있게 된다. 이때, 종래기술에 따른 수신자 단말(350)은 송출자 단말(310)이 설정한 비트레이트만큼의 데이터를 수신해야만 비디오를 재생할 수 있다는 문제점이 있다.
반면, 도 4의 실시예에 따른 송출자 단말(410)은 N(상기 N은 2 이상의 자연수)개의 인코더들을 구현할 수 있으며, 하나의 비디오를 위한 프레임들(420)을 인터리빙(interleaving) 방식으로 N개의 인코더들을 통해 분할하여 인코딩할 수 있다. 예를 들어, 도 4의 실시예에서는 N이 3인 경우의 예로서, 제1 인코더(430), 제2 인코더(440) 및 제3 인코더(450)와 같이 세 개의 인코더들이 구현된 예를 나타내고 있다. 이러한 제1 인코더(430), 제2 인코더(440) 및 제3 인코더(450) 각각은 송출자 단말(410)에 설치 및 구동되는 컴퓨터 프로그램의 제어에 따라 소프트웨어 모듈의 형태로 구현될 수 있다.
만약, N이 4라면 네 개의 인코더들이 구현될 수 있다. 인코더들의 수인 N은 송출자 단말(410)의 네트워크 상황에 따라 변동될 수 있다.
이때, i(상기 i는 자연수)번째 프레임은 (((i-1) mode N)+1)번째 인코더로 전달될 수 있다. 예를 들어, N이 3인 경우, 네 번째 프레임은 (((4-1) mod 3) + 1)을 통해 첫 번째 인코더로 전달될 수 있으며, 다섯 번째 프레임은 (((5-1) mod 3) +1)을 통해 두 번째 인코더로 전달될 수 있다.
이 경우, 제1 인코더(430)는 전달되는 비디오 프레임들을 비디오 인코더(431)를 통해 인코딩할 수 있으며, 해당 비디오의 오디오를 오디오 인코더(432)를 통해 더 인코딩할 수 있다. 오디오의 경우에는 전달되는 비디오 프레임들과 달리 분할되어 인코딩될 필요가 없기 때문에 주 인코더인 제1 인코더(430)에만 포함될 수 있다. 이후, 제1 인코더(430)는 인코딩된 비디오와 오디오를 포매터(433)를 통해 서버(460)에 대해 기 설정된 비디오 스트리밍 프로토콜(일례로, RTMP(Real Time Messaging Protocol))에 알맞은 포맷으로 변환하여 스트리밍할 수 있다.
한편, N-1개의 부 인코더들인 제2 인코더(440)와 제3 인코더(450)는 도 4에 도시된 바와 같이 별도의 오디오 인코더를 포함할 필요 없이 비디오 인코더(441 및 451)와 포매터(442 및 452)를 포함하여 자신에게 전달되는 비디오 프레임들을 각각 인코딩할 수 있다. 제2 인코더(440)와 제3 인코더(450) 역시 비디오 인코더(441 및 451)를 통해 인코딩된 비디오를 포매터(442 및 452)를 통해 서버(460)에 대해 기 설정된 비디오 스트리밍 프로토콜(일례로, RTMP(Real Time Messaging Protocol))에 알맞은 포맷으로 변환하여 스트리밍할 수 있다.
이 경우, 서버(460)는 하나의 비디오에 대해 N개의 채널을 통해서 N개의 비디오 스트림들을 수신하게 되며, N개의 채널을 통해서는 N개의 비디오 스트림들을 전달할 수 있게 된다.
한편, 수신자 단말(470)은 N개의 채널을 통해서는 N개의 비디오 스트림들을 모두 수신할 필요 없이 자신의 상황에 따라 원하는 n(상기 n은 상기 N 이하의 자연수)개의 비디오 스트림들만을 수신하여 비디오를 재생할 수 있다. 이때, n이 N에 비해 상대적으로 작을수록 비디오의 품질을 낮아질 수 있으나, 나쁜 품질의 네트워크 상황에 대해서도 안정적으로 비디오를 재생할 수 있게 된다. 반면, 네트워크 상황이 좋아짐에 따라 n은 N에 가까워지도록 선택될 수 있으며, 이 경우 비디오의 품질이 상대적으로 향상될 수 있다. n과 N이 동일한 경우에는 송신자 단말(410)이 전송하는 비트레이트로 비디오를 재생할 수 있게 된다. 다시 말해, 종래기술에서 수신자 단말(350)이 항상 송출자 단말(310)에서 설정한 비트레이트의 비디오를 재생해야 했던 것과 다르게, 본 발명의 실시예들에 따른 수신자 단말(470)은 네트워크 상황에 따라 자신이 원하는 비트레이트의 비디오를 재생할 수 있게 되기 때문에 네트워크 상황에 따른 제약을 줄일 수 있게 된다. 예를 들어, 수신자 단말(470)은 네트워크 상황이 나쁜 경우에는 주 인코더인 제1 인코더(430)를 통해 인코딩되어 스트리밍되는 데이터를 이용하여 비디오를 재생할 수 있으며, 네트워크 상황이 좋아짐에 따라 부 인코더인 제2 인코더(440) 및/또는 제3 인코더(450)를 통해 인코딩되어 스트리밍되는 데이터를 더 이용하여 비디오를 재생할 수 있게 된다.
송출자 단말(410) 및 수신자 단말(470) 각각은 일례로, 복수의 전자 기기들(110, 120, 130, 140) 중 하나일 수 있으며, 도 2를 통해 설명한 컴퓨터 장치(200)에 의해 구현될 수 있다. 또한, 서버(460)는 서버(150, 160) 중 하나일 수 있으며, 역시 도 2를 통해 설명한 컴퓨터 장치(200)에 의해 구현될 수 있다.
도 5는 본 발명의 일실시예에 따른 비디오 재생 과정의 예를 도시한 도면이다. 도 5는 수신자 단말(470)이 서버(460)로부터 N개의 비디오 스트림들을 모두 수신하여 비디오를 재생하는 과정의 예를 나타내고 있다. 이때, 주 인코더인 제1 인코더(430)를 통해 인코딩되어 스트리밍되는 데이터는 주 디코더인 제1 디코더(510)를 통해 디코딩될 수 있으며, 부 인코더인 제2 인코더(440) 및 제3 인코더(450)를 통해 인코딩되어 스트리밍되는 데이터는 부 디코더인 제2 디코더(520) 및 제3 디코더(530) 각각을 통해 디코딩될 수 있다.
예를 들어, 송출자 단말(410)은 N개의 인코더들을 구현함에 따라 N의 값을 서버(460)를 통해 수신자 단말(470)로 전송할 수 있으며, 서버(460)를 통해 N의 값을 수신한 수신자 단말(470)은 N개의 디코더들을 구현할 수 있게 된다. 도 5는 도 4에서 3개의 인코더들(430, 440 및 450)이 구현됨에 따라 송출자 단말(410)이 N의 값으로서 '3'을 서버(460)를 통해 전달하며, 수신자 단말(470) 역시 수신되는 '3'에 따라 도 5에서 3개의 디코더들(510, 520 및 530)을 구현하는 실시예를 나타내고 있다.
3개의 디코더들(510, 520 및 530)이 포함하고 있는 디먹서들(511, 521 및 531) 각각은 특정한 비디오 파일을 읽고 처리하기 위한 기능을 제공할 수 있으며, 비디오 디코더들(512, 522 및 523)은 인코딩된 프레임들을 디코딩할 수 있다. 주 디코더인 제1 디코더(510)는 오디오의 디코딩을 위해 오디오 디코더(513)를 더 포함할 수 있다.
3개의 디코더들(510, 520 및 530) 각각에 의해 디코딩된 프레임들은 PTS(Presentation Timestamp)를 포함하며, 수신자 단말(470)은 PTS에 기반하여 3개의 디코더들(510, 520 및 530) 각각이 디코딩한 프레임들을 정렬하여 결합함으로써 재생을 위한 비디오의 전체 프레임들(540)이 얻어질 수 있다. PTS는 해당 프레임이 화면에 보여지길 바라는 시간에 대한 정보로서 송출자 단말(410)에서 프레임을 인코딩할 때 해당 프레임에 추가되어 전달되는 정보일 수 있으며, 프레임들의 정렬은 프레임 버퍼 내에서 이루어질 수 있다. 이때, 도 5의 전체 프레임들(540)은 송출자 단말(410)이 송출하는 비디오의 프레임들(420)과 동일할 수 있다.
도 6은 본 발명의 일실시예에 따른 비디오 재생 과정의 다른 예를 도시한 도면이다. 도 6에서는 수신자 단말(470)의 네트워크 상황이 나쁜 경우 N개의 비디오 스트림들 중 일부만을 이용하여 비디오를 재생하는 과정의 예를 나타내고 있다. 예를 들어, 수신자 단말(470)은 네트워크 상황에 따라 n의 값을 결정할 수 있으며, 도 6에서는 n이 '2'로서 결정된 예를 나타낸다. 오디오의 디코딩을 위해 주 인코더인 제1 인코더(430)를 통해 인코딩되어 스트리밍되는 데이터는 주 디코더인 제1 디코더(510)를 통해 필수적으로 디코딩될 필요가 있으며, 부 인코더인 제2 인코더(440) 및 제3 인코더(450)를 통해 인코딩되어 스트리밍되는 데이터의 채널들 중 하나가 임의로 선택될 수 있다. 도 6의 실시예에서는 제3 인코더(450)를 통해 인코딩되어 스트리밍되는 데이터의 채널을 통해 비디오 스트림을 수신하여 디코딩하는 예를 나타내고 있다. 이때, 제3 디코더(530)는 해당 채널을 통해 수신되는 비디오 스트림을 디코딩할 수 있다.
이때, 수신자 단말(470)은 도 5에서와 유사하게 제1 디코더(510)를 통해 디코딩된 프레임들과 제3 디코더(530)를 통해 디코딩된 프레임들은 PTS에 기초하여 정렬 및 결합될 수 있으며, 결합된 프레임들(610)을 통해 비디오가 재생될 수 있다. 도 6의 결합된 프레임들(610)은 도 5의 결합된 프레임들(540)에 비해 비트레이트가 낮음을 알 수 있으며, 따라서 상대적으로 네트워크 상황이 나쁜 경우에도 보다 안정적으로 비디오를 재생할 수 있게 된다.
도 7은 본 발명의 일실시예에 있어서, 인코더들의 순차적인 활성화의 예를 도시한 도면이다. 송출자 단말(410)은 키 프레임의 수를 동일하게 유지하기 위해, N개의 인코더들 각각의 키 프레임의 주기를 단일 인코더를 사용하는 경우의 키 프레임 주기의 N배로 설정할 수 있다. 키 프레임은 독립적으로 인코딩된 프레임으로서, 다른 프레임을 참조하지 않고 독립적으로 디코딩될 수 있는 프레임이다. 이러한 다른 프레임들은 이러한 키 프레임이나 다른 프레임들을 참조하여 인코딩/디코딩될 수 있다. 따라서, 키 프레임의 수가 늘어나는 것은 바람직하지 않기 때문에 송출자 단말(410)은 N 개의 인코더들 각각의 키 프레임의 주기를 단일 인코더를 사용하는 경우의 키 프레임 주기의 N배로 설정할 수 있다. 도 3에서는 N이 3이기 때문에 단일 인코더를 사용하는 경우의 키 프레임의 주기를 k라 할 때, 도 7의 실시예에서는 제1 인코더(430), 제2 인코더(440) 및 제3 인코더(450) 각각의 키 프레임의 주기가 3k(이하, 'K')로 설정될 수 있다. 이때, 제1 인코더(430), 제2 인코더(440) 및 제3 인코더(450)는 키 프레임들이 동시에 생성되는 것을 방지하기 위해 각각 K/N마다 순차적으로 활성화될 수 있다. 각각의 프레임들에서 최초의 프레임은 키 프레임으로서 생성되기 때문에 N개의 인코더들이 동시에 활성화되는 경우, 매번 같은 시점에 동시에 세 개의 키 프레임들이 생성되어야 한다. 따라서, 이를 분산시키기 위해 도 7의 실시예에서는 N개의 인코더들을 K/N(도 7의 실시예에서는 K/3)마다 순차적으로 활성화함으로써, 키 프레임들이 생성되는 시점을 최대한 분산시킬 수 있다. 다시 말해, 송출자 단말(410)은 최초에는 주 인코더만을 활성화시키고 나머지 N-1개의 부 인코더를 키 프레임의 주기(K)의 N에 대한 비율에 대응하는 주기(K/N)마다 순차적으로 활성화시킬 수 있다.
도 8은 본 발명의 일실시예에 따른 비디오 송출 방법의 예를 도시한 흐름도이다. 본 실시예에 따른 비디오 송출 방법은 송출자 단말(410)을 구현하는 컴퓨터 장치(200)에 의해 수행될 수 있다. 예를 들어, 컴퓨터 장치(200)의 프로세서(220)는 메모리(210)가 포함하는 운영체제의 코드나 적어도 하나의 프로그램의 코드에 따른 제어 명령(instruction)을 실행하도록 구현될 수 있다. 예를 들어, 상술한 프로그램 코드는 비디오의 송출을 위한 서비스와의 연계를 위해 송출자 단말(410)에 설치된 어플리케이션의 코드일 수 있다. 여기서, 프로세서(220)는 컴퓨터 장치(200)에 저장된 코드가 제공하는 제어 명령에 따라 컴퓨터 장치(200)가 도 8의 비디오 송출 방법이 포함하는 단계들(810 내지 840)을 수행하도록 컴퓨터 장치(200)를 제어할 수 있다.
단계(810)에서 컴퓨터 장치(200)는 N(상기 N은 2 이상의 자연수)개의 인코더를 구현할 수 있다. 이때, N은 미리 기설정될 수도 있으나, 컴퓨터 장치(200)가 네트워크 환경에 따라 임의로 선택 및/또는 조절할 수 있다. N개의 인코더들 각각은 컴퓨터 장치(200)에 설치 및 구동된 어플리케이션의 제어에 따라 소프트웨어 모듈의 형태로 구현될 수 있다. 이때, 컴퓨터 장치(200)는 비디오 인코더 및 오디오 인코더를 포함하여 비디오 및 오디오를 인코딩하는 하나의 주 인코더, 그리고 비디오 인코더를 포함하여 비디오를 인코딩하는 N-1개의 부 인코더를 구현할 수 있다. 이때, 키 프레임의 수가 증가하는 것을 방지하기 위해 컴퓨터 장치(200)는 N 개의 인코더 각각의 키 프레임의 주기를 단일 인코더를 사용하는 경우의 키 프레임 주기의 N배로 설정할 수 있다. 도 7을 통해 단일 인코더를 사용하는 경우의 키 프레임 주기 k의 N배인 k*N(주기 K)가 N개의 인코더 각각을 위한 키 프레임 생성 주기로 설정되는 예를 설명한 바 있다.
단계(820)에서 컴퓨터 장치(200)는 송출하고자 하는 비디오의 프레임들을 인터리빙(interleaving) 방식으로 N개의 인코더로 전달할 수 있다. 예를 들어, 컴퓨터 장치(200)는 비디오의 i(상기 i는 자연수)번째 프레임을 (((i-1) mode N)+1)번째 인코더로 전달할 수 있다. 다만, 도 7의 실시예를 통해 설명한 바와 같이, N개의 인코더들이 순차적으로 활성화되는 경우, 초기의 프레임들의 전달 순서는 달라질 수 있다. 예를 들어, N이 3인 경우 세 번째 인코더가 활성화된 이후부터의 프레임들에 대해 i번째 프레임이 (((i-1) mode N)+1)번째 인코더로 전달될 수 있다. 이때, 컴퓨터 장치(200)는 N개의 인코더들을 키 프레임의 주기(K)의 N에 대한 비율에 대응하는 주기(K/N)로 순차적으로 활성화시킬 수 있다.
단계(830)에서 컴퓨터 장치(200)는 N개의 인코더 각각을 통해 전달되는 프레임을 인코딩하여 N개의 비디오 스트림을 생성할 수 있다. 이미 설명한 바와 같이 주 인코더는 자신에게 전달된 비디오 프레임들과 오디오를 각각 인코딩할 수 있으며, N-1개의 부 인코더들 각각은 자신에게 전달된 비디오 프레임들을 인코딩할 수 있다. 이때, N개의 인코더들 각각으로부터 하나씩 총 N개의 비디오 스트림이 생성될 수 있다.
단계(840)에서 컴퓨터 장치(200)는 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 전송할 수 있다. 예를 들어, 송출자 단말(410)인 컴퓨터 장치(200)는 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 서버(460)를 통해 수신자 단말(470)로 전송할 수 있다. 한편, 송출자 단말(410)인 컴퓨터 장치(200)는 수신자 단말(470)이 최대 N개의 비디오 스트림 각각을 디코딩할 수 있도록 N의 값을 서버(470)를 통해 수신자 단말(470)로 더 전송할 수 있다.
이때, 수신자 단말(470)은 네트워크 상황에 따라 비디오의 재생에 활용하기 위한 비디오 스트림의 수 n(상기 n은 상기 N 이하의 자연수)을 선택하고, 송출자 단말(410)이 독립적으로 서버로 전송하는 N개의 비디오 스트림 중에서 선택되는 n 개의 비디오 스트림을 디코딩하여 비디오를 재생할 수 있다. 또한, 수신자 단말(470)에서 네트워크 상황이 변화함에 따라 n의 값을 동적으로 변화시켜 비디오의 재생을 위해 디코딩되는 비디오 스트림의 수를 동적으로 조절할 수도 있다.
도 9는 본 발명의 일실시예에 따른 비디오 재생 방법의 예를 도시한 흐름도이다. 본 실시예에 따른 비디오 재생 방법은 수신자 단말(470)을 구현하는 컴퓨터 장치(200)에 의해 수행될 수 있다. 예를 들어, 컴퓨터 장치(200)의 프로세서(220)는 메모리(210)가 포함하는 운영체제의 코드나 적어도 하나의 프로그램의 코드에 따른 제어 명령(instruction)을 실행하도록 구현될 수 있다. 예를 들어, 상술한 프로그램 코드는 비디오의 재생을 위한 서비스와의 연계를 위해 수신자 단말(470)에 설치된 어플리케이션의 코드일 수 있다. 여기서, 프로세서(220)는 컴퓨터 장치(200)에 저장된 코드가 제공하는 제어 명령에 따라 컴퓨터 장치(200)가 도 9의 비디오 재생 방법이 포함하는 단계들(910 내지 940)을 수행하도록 컴퓨터 장치(200)를 제어할 수 있다.
단계(910)에서 컴퓨터 장치(200)는 N(상기 N은 2 이상의 자연수)개의 디코더를 구현할 수 있다. 여기서 N의 값은 송출자 단말(410)이 서버(460)를 통해 전달하는 N의 값을 통해 결정될 수 있으며, N개의 디코더들 각각은 컴퓨터 장치(200)에 설치 및 구동된 어플리케이션의 제어에 따라 소프트웨어 모듈의 형태로 구현될 수 있다. 이 경우, 컴퓨터 장치(200)는 비디오 디코더 및 오디오 디코더를 포함하여 비디오 및 오디오를 디코딩하는 하나의 주 디코더, 그리고 비디오 디코더를 포함하여 비디오를 디코딩하는 N-1개의 부 디코더를 구현할 수 있다.
단계(920)에서 컴퓨터 장치(200)는 하나의 비디오의 프레임들을 인터리빙(interleaving) 방식으로 N 개의 인코더를 통해 인코딩하여 생성되는 N 개의 비디오 스트림들 중 n(상기 n은 상기 N 이하의 자연수)개의 비디오 스트림을 선택할 수 있다. 예를 들어, 컴퓨터 장치(200)는 네트워크 상황에 따라 비디오의 재생에 활용하기 위한 비디오 스트림의 수인 n을 결정하고, 결정된 n개의 비디오 스트림을 선택할 수 있다. 이후 컴퓨터 장치(200)는 네트워크 상황의 변화에 따라 n의 값을 동적으로 변화시켜 비디오의 재생을 위해 디코딩되는 비디오 스트림의 수를 동적으로 조절할 수도 있다. 여기서, N 개의 비디오 스트림들은, 송출자의 단말(470)에서 비디오 인코더 및 오디오 인코더를 포함하여 비디오 및 오디오를 인코딩하는 하나의 주 인코더를 통해 인코딩된 하나의 비디오 스트림, 그리고 상기 송출자의 단말에서 비디오 인코더를 포함하여 비디오를 인코딩하는 N-1개의 부 인코더를 통해 인코딩된 N-1개의 비디오 스트림을 포함할 수 있다. 이러한 N개의 비디오 스트림들은 송출자 단말(410)에서 생성되어 서버(460)로 전송될 수 있으며, 컴퓨터 장치(200)는 서버(460)를 통해 N개의 비디오 스트림들 중 n개의 비디오 스트림들을 수신할 수 있다. 다시 말해, 수신자 단말(470)인 컴퓨터 장치(200)는 네트워크 상태에 따라 N개의 비디오 스트림들 중에서 선택적으로 n개의 비디오 스트림들을 수신하기 때문에 네트워크 상태에 따른 제약을 줄일 수 있게 된다.
단계(930)에서 컴퓨터 장치(200)는 선택된 n개의 비디오 스트림을 N개의 디코더 중 n개의 디코더를 통해 디코딩할 수 있다. 이때, 컴퓨터 장치(200)는 주 인코더를 통해 인코딩된 하나의 비디오 스트림 및 부 인코더를 통해 인코딩된 N-1 개의 비디오 스트림 중 n-1 개의 비디오 스트림을 각각 디코딩할 수 있다. 일례로, 도 6에서는 수신자 단말(470)이 N이 3이고 n이 2인 경우에 3개의 비디오 스트림 중 주 인코더를 통해 인코딩된 하나의 비디오 스트림과 부 인코더를 통해 인코딩된 하나의 비디오 스트림의 총 두 개의 비디오 스트림을 디코딩하는 예를 설명한 바 있다.
단계(940)에서 컴퓨터 장치(200)는 n개의 디코더를 통해 디코딩된 n개의 비디오 스트림을 이용하여 비디오를 재생할 수 있다. 예를 들어, 컴퓨터 장치(200)는 n개의 디코더를 통해 디코딩된 n개의 비디오 스트림이 포함하는 PTS(Presentation Timestamp)를 이용하여 n개의 비디오 스트림을 먹싱하여 하나의 화면을 통해 재생할 수 있다. 예를 들어, 디코딩된 비디오 프레임들 각각은 PTS를 포함할 수 있으며, 컴퓨터 장치(200)는 이러한 PTS를 통해 버퍼내에서 디코딩된 비디오 프레임들을 정렬할 수 있다. 정렬된 비디오 프레임들은 컴퓨터 장치(200)에서 비디오의 재생을 위해 활용될 수 있다. 이때, N보다 작은 n을 사용하는 경우, 실질적으로 비트레이트의 감소와 동일한 효과가 발생하기 때문에 수신자 단말(470)인 컴퓨터 장치(200)가 네트워크 상태에 따라 비트레이트를 동적으로 제어할 수 있음을 알 수 있다.
이상에서와 같이, 본 발명의 실시예들에 따르면, 송출자가 하나의 비디오를 단일 채널이 아닌 N(상기 N은 2 이상의 자연수)개의 채널로 분할하여 송출할 수 있다. 또한, 수신자가 네트워크 환경에 따라 송출자가 송출하는 N개의 채널 중 n(상기 n은 상기 N 이하의 자연수)개의 채널에서 수신되는 비디오 스트림을 결합하여 재생함으로써, 수신자측의 네트워크 환경에 따라 적절한 비트레이트의 비디오를 재생할 수 있다.
이상에서 설명된 시스템 또는 장치는 하드웨어 구성요소, 소프트웨어 구성요소 또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치에 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 통상의 기술자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 이러한 기록매체는 단일 또는 수개 하드웨어가 결합된 형태의 다양한 기록수단 또는 저장수단일 수 있으며, 어떤 컴퓨터 시스템에 직접 접속되는 매체에 한정되지 않고, 네트워크 상에 분산 존재하는 것일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
발명의 실시를 위한 형태
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.

Claims (20)

  1. 컴퓨터와 결합되어 비디오 송출 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램에 있어서,
    상기 비디오 송출 방법은,
    N(상기 N은 2 이상의 자연수)개의 인코더를 구현하는 단계;
    송출하고자 하는 비디오의 프레임들을 인터리빙(interleaving) 방식으로 상기 N개의 인코더로 전달하는 단계;
    상기 N개의 인코더 각각을 통해 전달되는 프레임을 인코딩하여 N개의 비디오 스트림을 생성하는 단계; 및
    상기 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 전송하는 단계
    를 포함하고,
    상기 N개의 인코더를 구현하는 단계는,
    상기 N개의 인코더 각각이 생성하는 키 프레임의 수가 감소하도록, 상기 N개의 인코더 각각의 제1 키 프레임 주기를 단일 인코더를 사용하는 경우의 제2 키 프레임 주기의 N배로 설정하는, 컴퓨터 프로그램.
  2. 제1항에 있어서,
    상기 N개의 인코더를 구현하는 단계는,
    비디오 인코더 및 오디오 인코더를 포함하여 비디오 및 오디오를 인코딩하는 하나의 주 인코더, 그리고 비디오 인코더를 포함하여 비디오를 인코딩하는 N-1개의 부 인코더를 구현하는, 컴퓨터 프로그램.
  3. 제1항에 있어서,
    상기 프레임들을 인터리빙 방식으로 상기 N개의 인코더로 전달하는 단계는,
    상기 비디오의 i(상기 i는 자연수)번째 프레임을 (((i-1) mode N)+1)번째 인코더로 전달하는, 컴퓨터 프로그램.
  4. 삭제
  5. 제1항에 있어서,
    상기 N개의 인코더를 구현하는 단계는,
    비디오 인코더 및 오디오 인코더를 포함하여 비디오 및 오디오를 인코딩하는 하나의 주 인코더, 그리고 비디오 인코더를 포함하여 비디오를 인코딩하는 N-1개의 부 인코더를 구현하는 것을 포함하고,
    상기 N-1개의 부 인코더는 상기 주 인코더가 활성화된 후 상기 제1 키 프레임 주기의 상기 N에 대한 비율에 대응하는 주기로 순차적으로 활성화되는, 컴퓨터 프로그램.
  6. 제1항에 있어서,
    상기 전송하는 단계는,
    상기 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 서버를 통해 수신자 단말로 전송하고,
    상기 비디오 송출 방법은,
    상기 N의 값을 상기 서버를 통해 상기 수신자 단말로 전송하는 단계
    를 더 포함하는, 컴퓨터 프로그램.
  7. 제1항에 있어서,
    수신자 단말에서 네트워크 상황에 따라 비디오의 재생에 활용하기 위한 비디오 스트림의 수 n(상기 n은 상기 N 이하의 자연수)을 선택하고, 상기 독립적으로 전송되는 N개의 비디오 스트림 중 상기 선택된 n 개의 비디오 스트림을 디코딩하여 비디오를 재생하는, 컴퓨터 프로그램.
  8. 제7항에 있어서,
    상기 수신자 단말에서 상기 네트워크 상황이 변화함에 따라 상기 n의 값을 동적으로 변화시키는, 컴퓨터 프로그램.
  9. 컴퓨터와 결합되어 비디오 재생 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램에 있어서,
    상기 비디오 재생 방법은,
    N(상기 N은 2 이상의 자연수)개의 디코더를 구현하는 단계;
    하나의 비디오의 프레임들을 인터리빙(interleaving) 방식으로 N 개의 인코더를 통해 인코딩하여 생성되는 N 개의 비디오 스트림들 중 n(상기 n은 상기 N 이하의 자연수)개의 비디오 스트림을 선택하는 단계;
    상기 선택된 n개의 비디오 스트림을 상기 N개의 디코더 중 n개의 디코더를 통해 디코딩하는 단계; 및
    상기 n개의 디코더를 통해 디코딩된 n개의 비디오 스트림을 이용하여 비디오를 재생하는 단계
    를 포함하고,
    상기 N 개의 인코더는, 상기 N 개의 인코더 각각이 생성하는 키 프레임의 수가 감소하도록, 상기 N개의 인코더 각각의 제1 키 프레임 주기가 단일 인코더를 사용하는 경우의 제2 키 프레임 주기의 N배로 설정되는, 컴퓨터 프로그램.
  10. 제9항에 있어서,
    상기 선택하는 단계는,
    네트워크 상황에 따라 비디오의 재생에 활용하기 위한 비디오 스트림의 수인 상기 n을 결정하고, 상기 결정된 n개의 비디오 스트림을 선택하는, 컴퓨터 프로그램.
  11. 제10항에 있어서,
    상기 비디오 재생 방법은,
    상기 네트워크 상황의 변화에 따라 상기 n의 값을 동적으로 변화시키는 단계
    를 더 포함하는, 컴퓨터 프로그램.
  12. 제9항에 있어서,
    상기 N 개의 비디오 스트림들은, 송출자의 단말에서 비디오 인코더 및 오디오 인코더를 포함하여 비디오 및 오디오를 인코딩하는 하나의 주 인코더를 통해 인코딩된 하나의 비디오 스트림, 그리고 상기 송출자의 단말에서 비디오 인코더를 포함하여 비디오를 인코딩하는 N-1개의 부 인코더를 통해 인코딩된 N-1개의 비디오 스트림을 포함하는, 컴퓨터 프로그램.
  13. 제12항에 있어서,
    상기 디코딩하는 단계는,
    상기 주 인코더를 통해 인코딩된 하나의 비디오 스트림 및 상기 N-1 개의 비디오 스트림 중 n-1 개의 비디오 스트림을 각각 디코딩하는, 컴퓨터 프로그램.
  14. 제9항에 있어서,
    상기 비디오를 재생하는 단계는,
    상기 n개의 디코더를 통해 디코딩된 n개의 비디오 스트림이 포함하는 PTS(Presentation Timestamp)를 이용하여 상기 n개의 비디오 스트림을 먹싱하여 하나의 화면을 통해 재생하는, 컴퓨터 프로그램.
  15. 제9항에 있어서,
    상기 N 개의 비디오 스트림들은 송출자의 단말에서 생성되어 서버로 전송되고,
    상기 N(상기 N은 2 이상의 자연수)개의 디코더를 구현하는 단계는,
    상기 송출자의 단말로부터 전송되는 상기 N의 값을 상기 서버를 통해 수신하여 상기 N개의 디코더를 구현하는, 컴퓨터 프로그램.
  16. N(상기 N은 2 이상의 자연수)개의 인코더를 구현하는 단계;
    송출하고자 하는 비디오의 프레임들을 인터리빙(interleaving) 방식으로 상기 N개의 인코더로 전달하는 단계;
    상기 N개의 인코더 각각을 통해 전달되는 프레임을 인코딩하여 N개의 비디오 스트림을 생성하는 단계; 및
    상기 생성된 N개의 비디오 스트림 각각을 독립적인 스트림으로서 전송하는 단계
    를 포함하고,
    상기 N개의 인코더를 구현하는 단계는,
    상기 N개의 인코더 각각이 생성하는 키 프레임의 수가 감소하도록, 상기 N개의 인코더 각각의 제1 키 프레임 주기를 단일 인코더를 사용하는 경우의 제2 키 프레임 주기의 N배로 설정하는, 비디오 송출 방법.
  17. 제16항에 있어서,
    상기 N개의 인코더를 구현하는 단계는,
    비디오 인코더 및 오디오 인코더를 포함하여 비디오 및 오디오를 인코딩하는 하나의 주 인코더, 그리고 비디오 인코더를 포함하여 비디오를 인코딩하는 N-1개의 부 인코더를 구현하는, 비디오 송출 방법.
  18. 제16항에 있어서,
    상기 프레임들을 인터리빙 방식으로 상기 N개의 인코더로 전달하는 단계는,
    상기 비디오의 i(상기 i는 자연수)번째 프레임을 (((i-1) mode N)+1)번째 인코더로 전달하는, 비디오 송출 방법.
  19. 삭제
  20. 제16항 내지 제18항 중 어느 한 항의 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록매체.
KR1020207028833A 2018-05-25 2018-05-25 복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템 KR102559966B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2018/005972 WO2019225788A1 (ko) 2018-05-25 2018-05-25 복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20210002103A KR20210002103A (ko) 2021-01-06
KR102559966B1 true KR102559966B1 (ko) 2023-07-26

Family

ID=68617095

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207028833A KR102559966B1 (ko) 2018-05-25 2018-05-25 복수의 채널을 이용하여 동적 비트레이트의 비디오를 송출 및 재생하는 방법 및 시스템

Country Status (5)

Country Link
US (2) US11539991B2 (ko)
JP (1) JP7183304B6 (ko)
KR (1) KR102559966B1 (ko)
CN (1) CN112219404A (ko)
WO (1) WO2019225788A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112738508A (zh) * 2020-12-31 2021-04-30 咪咕文化科技有限公司 视频编码方法、确定方法、处理方法、服务器及vr终端
CN113784123B (zh) * 2021-11-11 2022-03-15 腾讯科技（深圳）有限公司 视频编码方法和装置、存储介质及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009171614A (ja) * 1997-08-29 2009-07-30 Panasonic Corp 光ディスク再生装置、光ディスク記録装置および再生制御情報生成装置
JP2014086770A (ja) * 2012-10-19 2014-05-12 Nippon Hoso Kyokai <Nhk> 映像信号分割装置、映像伝送送信装置、映像伝送受信装置および映像伝送システム
WO2017094318A1 (ja) * 2015-12-03 2017-06-08 ソニー株式会社 フレーム生成装置、フレーム生成方法、画像復元装置、画像復元方法、画像伝送システムおよび画像伝送方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5793425A (en) * 1996-09-13 1998-08-11 Philips Electronics North America Corporation Method and apparatus for dynamically controlling encoding parameters of multiple encoders in a multiplexed system
JPH10108175A (ja) * 1996-09-30 1998-04-24 Ando Electric Co Ltd 画像符号伝送システム
JP4244394B2 (ja) * 1998-02-17 2009-03-25 富士ゼロックス株式会社 多地点会議システム
JP3621598B2 (ja) * 1999-03-04 2005-02-16 日本電信電話株式会社 並列ソフトウェア画像符号化方法、および並列ソフトウェア画像符号化プログラムを記録した記録媒体
US6804301B2 (en) * 2001-08-15 2004-10-12 General Instrument Corporation First pass encoding of I and P-frame complexity for compressed digital video
KR100784761B1 (ko) 2005-11-03 2007-12-14 엘지전자 주식회사 디지털 멀티미디어 방송 스트림의 재전송을 위한트랜스코딩 방법 및 이를 수행하기 위한 이동단말
KR100746013B1 (ko) * 2005-11-15 2007-08-06 삼성전자주식회사 무선 네트워크에서의 데이터 전송 방법 및 장치
CN105049894B (zh) * 2005-12-08 2018-03-16 维德约股份有限公司 用于视频通信系统中的差错弹性和随机接入的系统和方法
US8189627B2 (en) * 2006-06-28 2012-05-29 Samsung & Electronics Co., Ltd. System and method for digital communications using multiple parallel encoders
CN101444101A (zh) * 2006-06-28 2009-05-27 三星电子株式会社 使用多个并行编码器的用于数字通信的系统和方法
KR101259014B1 (ko) * 2008-01-24 2013-04-29 삼성전자주식회사 무선 송수신 환경에서의 멀티 스트림 송/수신 방법 및 장치
KR20100030392A (ko) * 2008-09-10 2010-03-18 삼성전자주식회사 컨텐트 전송 방법 및 장치와 컨텐트 기록 방법 및 장치
EP2652960A4 (en) * 2011-04-22 2014-06-11 Samsung Electronics Co Ltd RECEIVER FOR RECEIVING AND DISPLAYING A PLURALITY OF FLOWS THROUGH SEPARATE ROADS, METHOD FOR PROCESSING THE PLURALITY OF FLOWS AND METHOD OF TRANSMITTING THE SAME
EP2712191A4 (en) * 2011-05-19 2015-06-24 Lg Electronics Inc VIDEO POWER TRANSMISSION DEVICE, VIDEO POWER RECEIVING DEVICE, VIDEO POWER TRANSMISSION METHOD AND VIDEO POWER RECEIVING METHOD
RS64604B1 (sr) * 2011-06-16 2023-10-31 Ge Video Compression Llc Entropijsko kodiranje razlika vektora kretanja
US9591318B2 (en) * 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
EP2792146A4 (en) * 2011-12-17 2015-12-09 Dolby Lab Licensing Corp ENHANCED RESOLUTION VIDEO DISTRIBUTION COMPATIBLE WITH A FRAME, INTERLACED, MULTILAYER
JP6244642B2 (ja) * 2013-04-10 2017-12-13 富士通株式会社 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム
CN106031187B (zh) 2014-03-03 2019-12-24 索尼公司 发射设备、发射方法、接收设备与接收方法
US9344748B2 (en) * 2014-03-31 2016-05-17 Arris Enterprises, Inc. Adaptive streaming transcoder synchronization
US10812822B2 (en) * 2015-10-02 2020-10-20 Qualcomm Incorporated Intra block copy merge mode and padding of unavailable IBC reference region
JP6564694B2 (ja) * 2015-11-25 2019-08-21 株式会社エヌ・ティ・ティ・データ コンテンツ配信装置、コンテンツ配信システム、コンテンツ配信方法、およびプログラム
WO2017114821A1 (en) * 2015-12-28 2017-07-06 Koninklijke Kpn N.V. Video streams
US10652625B1 (en) * 2016-06-27 2020-05-12 Amazon Technologies, Inc. Synchronization of multiple encoders for streaming content
CN107124571B (zh) * 2017-04-14 2020-01-14 浙江宇视科技有限公司 录像存储方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009171614A (ja) * 1997-08-29 2009-07-30 Panasonic Corp 光ディスク再生装置、光ディスク記録装置および再生制御情報生成装置
JP2014086770A (ja) * 2012-10-19 2014-05-12 Nippon Hoso Kyokai <Nhk> 映像信号分割装置、映像伝送送信装置、映像伝送受信装置および映像伝送システム
WO2017094318A1 (ja) * 2015-12-03 2017-06-08 ソニー株式会社 フレーム生成装置、フレーム生成方法、画像復元装置、画像復元方法、画像伝送システムおよび画像伝送方法

Also Published As

Publication number Publication date
JP7183304B6 (ja) 2022-12-20
JP2021532613A (ja) 2021-11-25
WO2019225788A1 (ko) 2019-11-28
KR20210002103A (ko) 2021-01-06
US20230096562A1 (en) 2023-03-30
US20210076083A1 (en) 2021-03-11
JP7183304B2 (ja) 2022-12-05
US11539991B2 (en) 2022-12-27
CN112219404A (zh) 2021-01-12

Similar Documents

Publication Publication Date Title
US20210326378A1 (en) Information processing apparatus and information processing method
KR101927016B1 (ko) 멀티미디어 파일 라이브 방송 방법, 시스템 및 서버
WO2013008867A1 (ja) 送信装置、送信装置の制御方法、制御プログラム、及び記録媒体
US9131267B2 (en) Apparatus and method of portable terminal for dual display of broadcasting receiver by HDMI signal
CN102045338A (zh) 内容再现系统、内容再现装置、程序及内容再现方法
US20230096562A1 (en) Method and system for transmitting and reproducing video of dynamic bitrate with a plurality of channels
KR101640081B1 (ko) 하나의 포맷으로부터 복수의 포맷들 중 하나로 신호를 선택적으로 트랜스코딩하는 시스템 및 방법
US8407565B2 (en) System and method for producing importance rate-based rich media, and server applied to the same
US20130135179A1 (en) Control method and device thereof
US11218746B2 (en) Method, system, and non-transitory computer readable record medium for video quality control
KR102132061B1 (ko) 수신 장치
KR20140117889A (ko) 클라이언트 장치, 서버 장치, 멀티미디어 리디렉션 시스템 및 그 방법
US10123092B2 (en) Methods and apparatus for presenting a still-image feedback response to user command for remote audio/video content viewing
JPWO2014171385A1 (ja) サーバ装置、コンテンツ提供方法及びコンピュータプログラム
US20230224521A1 (en) Electronic device and operation method thereof
US20140189766A1 (en) Methods and apparatus for seeking within recorded media stored on a set-top box
JP6610538B2 (ja) 受信装置、受信方法、送信装置、及び、送信方法
KR20160087293A (ko) 매장에서의 중앙 통제식 컨텐츠 재생이 가능한 쌍방향 통신장치
KR101656102B1 (ko) 컨텐츠 파일 생성/제공 장치 및 방법
JP2005176068A (ja) 動画像配信システム及びその方法
CN117097907A (zh) 音视频的转码装置、方法、设备、介质及产品
CN101291432A (zh) 图像处理系统、图像处理设备、图像处理方法以及程序

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)