KR101246596B1 - 서비스 영상 전송 시스템, 서버 및 방법 - Google Patents

서비스 영상 전송 시스템, 서버 및 방법 Download PDF

Info

Publication number
KR101246596B1
KR101246596B1 KR1020090079147A KR20090079147A KR101246596B1 KR 101246596 B1 KR101246596 B1 KR 101246596B1 KR 1020090079147 A KR1020090079147 A KR 1020090079147A KR 20090079147 A KR20090079147 A KR 20090079147A KR 101246596 B1 KR101246596 B1 KR 101246596B1
Authority
KR
South Korea
Prior art keywords
image
video
service
video image
computer
Prior art date
Application number
KR1020090079147A
Other languages
English (en)
Other versions
KR20110021377A (ko
Inventor
배태면
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020090079147A priority Critical patent/KR101246596B1/ko
Publication of KR20110021377A publication Critical patent/KR20110021377A/ko
Application granted granted Critical
Publication of KR101246596B1 publication Critical patent/KR101246596B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H04N2007/243—Bitstream control arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명에 따른 서비스 영상 전송 시스템은 단말기 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 서비스 구동 결과에 대한 서버측 결과 영상에서 상기 비디오 영상을 제외한 컴퓨터 영상을 생성하는 서비스 구동부, 상기 서비스 구동 결과에 대한 서버측 결과 영상에서 상기 비디오 영상을 인코딩하는 미디어 구동부 및 상기 서비스 구동부로부터 컴퓨터 영상을 전송받아 인코딩한 후 상기 미디어 구동부로부터 전송받은 인코딩 비디오 영상과 함께 상기 단말기로 실시간 전송하는 영상 전송부를 포함하고, 상기 비디오 영상에 대한 초당 비트레이트가 상기 컴퓨터 영상에 대한 초당 비트레이트 보다 크게 인코딩함으로써, 신뢰성있는 서비스 영상의 전송이 가능하다.
서비스, 비디오, 컴퓨터, 단말기, 서버, 실시간, 전송, 인코딩, 부호화

Description

서비스 영상 전송 시스템, 서버 및 방법{SYSTEM, SERVER AND METHOD FOR SERVICE IMAGE TRANSMISSION}
본 발명은 서비스 영상 전송 시스템, 서버 및 방법에 관한 것으로서, 보다 상세하게 설명하면 단말기의 요청에 의하여 구동된 서비스 영상을 실시간으로 상기 단말기로 전송하는 서비스 영상 전송 시스템, 서버 및 방법에 관한 것이다.
비디오 인코딩(encoding, 부호화) 기술은 비디오, 즉 시간적으로 정렬된 일련의 영상을 압축하는 기술이다. 인코딩 효율(압축성능)은 압축대상 비디오의 특성에 따라 달라진다. 특히, 압축 대상 비디오의 특성을 얼마나 잘 고려한 알고리즘인가에 따라 압축성능이 달라진다. 관련된 기술로는 내용물 기반 부호화(content based video coding), 객체 기반 부호화(object based video coding) 등이 있다.
특히, 전송을 위한 비디오는 높은 데이터량으로 인하여 고효율의 압축이 요구된다. 비디오/영상 부호화 방법에서 content based video coding은 영상 또는 비디오의 시공간적 특성을 분석하고 이에 따라 다른 부호화 알고리즘을 적용함으로써 압축효율을 높이고 있다.
비디오의 공간적인 특성으로는 영상 텍스처(texture)의 복잡한 정도, 색상(color)의 수, 공간적인 엔트로피(entropy) 등이 고려되고, 시간적인 특성으로는 움직임의 크기와 복잡한 정도, 샷(shot)의 길이 등이 고려된다. 이것은 공간적으로 복잡한 영상일수록, 시간적으로 움직임이 많고 복잡할수록 비디오 압축효율이 떨어지기 때문이다. 이러한 특성에 따라 압축효율이 좋은 비디오와 낮은 비디오는 최적의 화질을 위해 요구되는 부호화 파라미터(parameter)가 각각 다르다. 따라서, 컴퓨터에 의하여 생성되는 컴퓨터 영상(graphic image)과 촬영을 기반으로 한 비디오 영상(real video)은 같은 부호화기를 사용하더라도 다른 부호화 조건에서 부호화를 수행해야 압축률을 향상시킬 수 있다.
또한, 컴퓨터 화면에 재생되는 비디오의 경우, 이미 저장된 파일을 재생하는 경우가 일반적이므로 사용자 입력에 따라 실시간으로 변하는 컴퓨터 화면과 달리 실시간으로 부호화하여 전송할 필요가 없다.
본 발명은 비디오 영상이 포함되어 있는 서비스 영상의 인코딩 효율을 향상시켜 단말기로 원활하게 전송하기 위한 것이다.
본 발명이 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
상기한 목적을 달성하기 위하여 본 발명에 따른 서비스 영상 전송 시스템은 단말기의 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 상기 서비스 구동 결과에 대한 서버측 결과 영상을 상기 비디오 영상과, 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 인코딩한 후 상기 단말기로 실시간 전송하는 서비스 영상 전송 서버 및 상기 비디오 영상과 컴퓨터 영상을 전송받아 단말측 결과 영상으로 디스플레이하는 단말기를 포함할 수 있다.
이때, 상기 비디오 영상에 대한 인코딩은 상기 서비스 구동 전에 인코딩되어 상기 서비스 영상 전송 서버내 저장부에 저장되어 있는 인코딩 비디오 영상들 중 상기 비디오 영상에 대응되는 인코딩 비디오 영상을 독출함으로써 수행될 수 있다. 여기서, 상기 인코딩 비디오 영상들에 대한 인코딩은 비실시간 부호화 기반의 트랜스코딩(transcoding)일 수 있다.
또한, 상기 비디오 영상에 대한 인코딩시의 초당 비트레이트율을 상기 컴퓨터 영상에 대한 인코딩시의 초당 비트레이트율보다 크게 할 수 있다.
또한, 상기 비디오 영상은 상기 서버측 결과 영상에서 ROI(Region Of Interest, 관심영역)로 정의되어 인코딩될 수 있다. 여기서, 상기 ROI의 위치는 서비스 구동시에 결정될 수 있다.
한편, 본 발명에 따른 서비스 영상 전송 서버는 단말기 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 서비스 구동 결과에 대한 서버측 결과 영상에서 상기 비디오 영상을 제외한 컴퓨터 영상을 생성하는 서비스 구동부, 상기 서비스 구동 결과에 대한 서버측 결과 영상에서 상기 비디오 영상을 인코딩하는 미디어 구동부 및 상기 서비스 구동부로부터 컴퓨터 영상을 전송받아 인코딩한 후 상기 미디어 구동부로부터 전송받은 인코딩 비디오 영상과 함께 상기 단말기로 실시간 전송하는 영상 전송부를 포함할 수 있다.
이때, 상기 미디어 구동부는 단말기 요청 대상이 되는 비디오 영상들을 미리 검색하여 스트리밍 가능한 형태로 인코딩하여 인코딩 비디오 영상으로 저장하는 비디오 영상 인코딩부, 단말기의 요청이 있는 경우, 상기 단말기 요청에 부합하는 비디오 영상에 대응되는 인코딩 비디오 영상을 검색하여 독출하는 인코딩 비디오 영상 독출부를 포함할 수 있다.
또한, 상기 미디어 구동부는 상기 서버측 결과 영상에 포함된 오디오 신호를 추가로 인코딩할 수 있다.
또한, 상기 미디어 구동부에서 인코딩되는 상기 비디오 영상은 ROI(Region Of Interest, 관심영역)로 정의되어 인코딩되고, 상기 영상 전송부는 상기 미디어 구동부로부터 상기 ROI를 전송받고, 상기 컴퓨터 영상을 상기 ROI로 결정된 비디오 영상 영역인 ROI 위치를 제외한 부분으로 정의하여 인코딩한 후 전송할 수 있다. 여기서, 상기 미디어 구동부는 상기 ROI 위치를 서비스 구동시에 결정하여 전송할 수 있다.
또한, 상기 미디어 구동부에서 인코딩되는 비디오 영상의 초당 비트레이트율을 상기 영상 전송부에서 인코딩되는 컴퓨터 영상의 초당 비트레이트율보다 크게 할 수 있다.
한편, 서비스 영상 전송 서버에서 전송된 서비스 영상을 전송받는 서비스 영상 재생 단말기는 비디오 영상과 상기 비디오 영상을 제외한 컴퓨터 영상으로 구성된 서버측 결과 영상을 전송받는 영상 수신부, 상기 비디오 영상과 상기 컴퓨터 영상을 구분하여 디코딩한 후, 합성하여 디스플레이하는 디스플레이부를 포함할 수 있다.
이때, 상기 서버측 결과 영상에서 비디오 영상과 컴퓨터 영상을 분리하는 영상 분리부를 더 포함하고, 상기 영상 분리부는 상기 비디오 영상과 컴퓨터 영상 중 어느 하나의 영상만을 상기 디스플레이부로 전송할 수 있다.
한편, 본 발명에 따른 서비스 영상 전송 방법은 단말기의 요청에 따라 비디오 영상을 포함하는 서비스를 구동하는 단계, 상기 서비스 구동 결과에 대한 서버측 결과 영상을 상기 비디오 영상과, 비디오 영상 외의 컴퓨터 영상으로 구분하는 영상 구분 단계, 상기 비디오 영상과 컴퓨터 영상을 구분하여 인코딩하는 인코딩 단계, 인코딩된 비디오 영상과 컴퓨터 영상을 실시간 전송하는 전송 단계를 포함할 수 있다.
이때, 상기 인코딩 단계는 상기 비디오 영상이 라이브(Live) 비디오 영상인 경우, 상기 라이브 비디오 영상과 컴퓨터 영상을 각각 인코딩하는 단계, 상기 비디오 영상이 라이브 비디오 영상이 아닌 경우, 상기 비디오 영상과 대응되는 기인코딩 비디오 영상을 독출하여 이용하고, 이와 별도로 컴퓨터 영상을 인코딩하는 단계를 포함할 수 있다.
한편, 본 발명에 따른 서비스 영상 전송 방법을 프로그램으로서 컴퓨터로 읽을 수 있는 매체에 기록할 수 있다.
이상에서 설명된 바와 같이, 본 발명에 따른 서비스 영상 전송 시스템, 서버 및 방법은 서비스 구동 결과 영상에서 비디오 영상과 컴퓨터 영상을 구분하여 처리함으로써, 신뢰성 있는 서비스 영상의 전송이 가능하다.
구체적으로 실시간 인코더의 부하를 경감시킬 수 있으며, 비디오 영상에 대해 비실시간 부호화를 수행할 수 있어 높은 압축률을 획득할 수 있다. 결과적으로 사용자는 단말기의 자원에 상관없이 높은 자원을 요구하는 서비스를 서버를 통하여 원활하게 서비스 받을 수 있게 된다.
본 명세서에서 기술되는 서비스 영상은 사용자가 디스플레이를 통하여 시각적으로 획득하기를 원하는 영상을 지칭하는 것으로 한다. 상기 서비스는 적어도 비디오 영상 재생 서비스를 포함하는 것으로 한다. 비디오 영상은 시간적으로 정렬된 일련의 영상을 포함하며, 여기에는 정지 영상 및 상기 정지 영상에 대응되는 이미지 영상도 포함하는 것으로 한다. 예로는 실시간 방송, 동영상, 사진, 컴퓨터 저작툴로 생성한 그래픽 이미지 등이 있다. 컴퓨터 영상은 서비스 영상에서 비디오 영상을 제외한 영상을 지칭하는 것으로 하며, 예로는 서비스 구동을 위한 프로그램 메뉴, 운영체제(Operating system, OS)의 메뉴/배경 화면 등이 있다.
이하, 본 발명과 관련된 서비스 영상 전송 시스템, 서버 및 방법에 대하여 도면을 참조하여 보다 상세하게 설명한다.
도 1은 본 발명과 관련된 서비스 영상 전송 시스템을 나타낸 블럭도이다.
서비스 영상을 시각적으로 획득하기를 원하는 사용자는 소정 단말기(20)를 통하여 상기 서비스 영상을 제공하는 서버(10)에 서비스 영상을 요청하게 된다. 상기 서비스 요청은 유선망 또는 무선망을 통하여 상기 서버로 전송되는데, 상기 단말기의 요청을 전송받은 서버(10)는 상기 서비스 요청에 부합하는 서비스를 구동하고, 그 결과 영상을 인코딩한 후 유선망 또는 무선망을 통하여 상기 단말기로 전송한다. 상기 단말기는 전송받은 결과 영상을 디코딩하여 디스플레이하게 되고 이를 통하여 사용자는 원하는 서비스 영상을 시각적으로 획득하게 된다.
이와 같은 모습은 자원이 낮은 단말기를 이용하는 사용자에게 대용량의 다양한 서비스 영상을 제공하는 경우에 적합하다. 자원이 낮은 단말기는 예를 들어 서비스 영상의 자체 처리가 어려운 처리부가 탑재되어 있거나, 서비스 영상을 다수 저장하기 어려운 저장부가 탑재되어 있는 단말기 등을 의미한다.
사용자는 자원이 낮은 단말기를 사용하는 경우에 있어서도, 단말기에서 직접 처리된 서비스 영상을 획득하는 것과 같은 기대를 하게 되므로, 사용자의 욕구를 충족시키기 위하여 상기 서버는 서비스 영상을 실시간으로 전송할 필요가 있게 된다.
따라서, 상기 서버는 요청받은 서비스 영상을 신속하게 구동한 후, 그 결과 영상을 효과적으로 압축, 즉 인코딩하여 유/무선망을 통하여 실시간으로 전송하여야 한다.
실시간 전송을 달성하기 위해서는 고속의 유/무선망을 제공하거나 또는 높은 압축효율을 나타내는 인코딩을 수행하여야 하는데, 본 발명에서는 높은 압축효율을 나타낼 수 있는 인코딩 방안에 대해서 살펴보기로 한다.
상기 서버에서 서비스 구동 후 획득되는 결과 영상의 예를 도 2에 나타내었다.
살펴보면, 결과 영상에 비디오 영상 뿐만 아니라, 서비스 구동을 위한 서비스 구동 틀, 운영체제(OS) 배경 화면 및 OS 메뉴(미도시)가 포함되어 있다.
참고로, 상기 결과 영상은 디스플레이 관련 메모리에 저장된 후 서버에 배치된 디스플레이를 통하여 표시될 수도 있으며, 디스플레이를 이용한 표시없이 상기 메모리 내에만 존재할 수 있음을 언급한다.
상기 서비스 구동 틀 등의 컴퓨터 화면은 사용자가 실제로 서비스를 구동하는 서버와 같은 디스플레이 환경을 요구할 경우 서비스 영상에 포함된다. 물론, 서버의 자원 한계상 불필요하게 포함될 수도 있을 것이다.
이와 같은 결과 영상(서버측에서 서비스를 구동하여 획득된 영상)을 그대로 실시간 전송하는 것은 바람직하지 못하므로, 인코딩 과정을 거쳐 결과 영상을 압축하게 된다.
이 경우, 비디오 영상에 적합한 압축방식을 적용하거나, 비디오 영상에 적합한 초당 비트레이트율로 압축을 수행하게 되는데, 비디오 영상에 중점을 둔 압축은 일반적으로 압축효율이 떨어지게 된다. 즉, 비디오 영상을 포함하는 결과 영상 전체를 인코딩하는 것은 전송할 용량이 적을수록 유리한 실시간 전송에 바람직하지 못하다.
이에 대하여 다른 방안에 대해 살펴보도록 한다.
도 3에 본 발명의 일실시예와 관련된 서비스 영상 전송 시스템을 도시하였 다.
도면을 살펴보면, 본 실시예에 따른 서비스 영상 전송 시스템은 서비스 영상 전송을 요청하는 단말기(200)와 상기 요청에 따라 서비스를 구동하고 서버측 결과 영상을 상기 단말기로 전송하는 서비스 영상 전송 서버(100)를 포함하고 있다.
상기 서비스 영상 전송 서버(100)는 단말기의 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 상기 서비스 구동 결과에 대한 서버측 결과 영상을 상기 비디오 영상과, 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 인코딩한 후 상기 단말기로 실시간 전송한다.
즉, 상기 서비스 영상 전송 서버는 도 2에서의 예와 달리 서비스 구동 결과에 대한 서버측 결과 영상, 즉 결과 영상에서 비디오 영상과 컴퓨터 영상을 구분하여 각각에 대하여 인코딩을 수행하고 있다.
일반적으로 동일한 인코딩, 즉 동일 압축 알고리즘을 적용하더라도 컴퓨터 영상의 압축 효율이 비디오 영상의 압축 효율보다 높다. 따라서, 비디오 영상과 컴퓨터 영상을 각각 인코딩한 경우의 전체 전송 용량이 비디오 영상이 포함된 결과 영상 전체를 인코딩한 경우의 전송 용량보다 적게 된다.
결과적으로 실시간 전송에 보다 유리하게 되며, 이에 따라 상기 단말기에서는 보다 원활하게 서비스 영상을 실시간으로 획득할 수 있게 된다.
물론, 사용자가 정상적인 서비스 영상을 획득하기 위해서 상기 단말기는 상기 서비스 영상 전송 서버에서 전송한 데이터를 적절하게 디코딩하여야 할 것이다. 즉, 상기 단말기는 상기 비디오 영상과 상기 컴퓨터 영상을 구분하여 디코딩한 후, 합성함으로써 하나의 완성된 서비스 영상을 디스플레이하여야 하는데, 이를 위하여 상기 서비스 영상 전송 서버는 상기 단말기와 사전에 약속된 인코딩 및 임베드 방식을 상기 비디오 영상과 컴퓨터 영상에 적용함으로써 상기 단말기로 하여금 정상적인 디코딩이 가능하도록 해야 한다. 또는, 상기 서비스 영상 전송 서버는 상기 단말기에서 적절한 디코딩이 수행되도록 인코딩/디코딩 관련 파라미터 등을 전송할 수 있다. 참고로, 단말기에서 정상적인 디코딩을 수행하여 얻은 영상을 단말측 결과 영상이라 칭하기로 한다.
이는, 다시 말해서, 상기 서비스 영상 전송 서버에 대응되는 단말기를 요구함을 의미하나, 소프트웨어적 처리로 단말기에서 해당 조건을 만족시킬 수 있도록 하면 충분하다.
정리하면, 상기 단말기(200)는 상기 비디오 영상과 컴퓨터 영상을 전송받은 후, 이를 적절하게 디코딩하여 얻어진 단말측 결과 영상을 디스플레이하게 된다. 물론, 상기 비디오 영상과 컴퓨터 영상은 상기 서비스 영상 전송 서버에서 인코딩 처리된 상태이며, 각각의 비트스트림 형태로 전송되거나, 서로 임베드되어 전송될 수 있다.
한편, 상기 서비스 영상 전송 서버에서 비디오 영상과 컴퓨터 영상은 일예로 도 4와 같이 구분될 수 있다.
서버측 결과 영상에 포함된 동영상 등의 비디오 영상을 정의하고, 그외의 서비스 구동 툴, OS 배경 화면 등을 컴퓨터 영상으로 정의한다.
보다 구체적으로 본 발명에서는 저장된 비디오 파일을 재생하여 출력되는 서 버측 결과 영상을 비디오 영상으로 정의하고, 그 외의 서비스 구동 툴, OS 배경 화면 등을 컴퓨터 영상으로 정의한다.
이와 같이, 비디오 영상을 컴퓨터 영상과 구분하여 정의하기 위하여 상기 서비스 영상 전송 서버는 ROI(Region Of Interest)를 독립적으로 부호화할 수 있는 MPEG-4, H.263, H.264와 같은 블럭기반 인코더를 포함할 수 있다. 이 경우, 비디오 영상은 ROI로 정의되어 인코딩되고, 컴퓨터 화면은 상기 ROI로 정의된 비디오 영상 영역 이외의 영역으로 정의되어 인코딩된다.
이와 같이 비디오 영상과 컴퓨터 영상을 구분하면, 컴퓨터 영상은 도 4에서 비디오 영상을 제외한 영상ⓑ와 같이 서비스 구동 툴 일부가 제거된 상태가 될 것이다. 상기 영상ⓑ는 단말기에서 디스플레이시 비디오 영상과 겹쳐져 별다른 문제가 없으나, 예상 가능한 추가적 서비스 제공을 위하여 영상ⓐ와 같이 컴퓨터 영상 전체를 그대로 정의할 수도 있을 것이다.
상기 비디오 영상은 촬영을 통한 실사 영상을 기반으로 하는 경우가 대부분이고, 컴퓨터 영상은 컴퓨터 그래픽(computer graphic)에 의해 신서사이즈(synthesize)된 경우가 대부분이다. 따라서, 별도 장비를 이용하여 촬영 등의 과정을 거치는 비디오 영상은 라이브(Live) 영상을 제외하고 상기 서비스 영상 전송 서버 내 저장부에 파일의 형태로 저장되는 경우가 많다.
이와 같이 파일의 형태로 저장된 비디오 영상을 미리 인코딩해두고 단말기의 요청이 있을 경우, 해당 비디오 영상을 실시간으로 인코딩하는 대신 미리 인코딩해 둔 인코딩 비디오 영상을 추출하여 전송하면, 서버의 인코딩 부하가 경감될 것은 자명하다. 다만, 상기 인코딩 비디오 영상이 컴퓨터 영상에서 위치할 영역은 서비스 요청시마다 다를 것이므로, 상기 비디오 영상의 위치 영역은 서비스 영상 요청에 따른 서비스 구동시에 결정되도록 한다. 일예로, 앞에서 살펴본 블럭 기반 인코더를 포함하는 서비스 영상 전송 서버의 경우에는 ROI가 비디오 영상이 위치할 영역이 되므로 ROI 위치를 서비스 구동시에 결정하면 된다.
또한, 저장부에 저장된 비디오 영상을 미리 인코딩할 경우, 실시간 인코딩이 아니라 트랜스코딩(transcoding)과 같은 비실시간 인코딩을 적용할 수 있게 된다. 이는 곧, 저장된 각 비디오 영상에 최적화된 인코더를 찾아 적용할 수 있음을 의미하며, 또한, 시간과 상관없이 최적의 압축 효율이 나타나도록 인코딩을 수행할 수 있음을 의미한다.
따라서, 인코딩 비디오 영상을 생성하여 저장해 두게 되면, 서버의 부하 감소 뿐만 아니라, 실시간 전송에도 유리하게 된다.
정리하면, 도 3에 나타낸 서비스 영상 전송 서버에서 이루어지는 비디오 영상에 대한 인코딩은, 서버에서 미디어 재생 콜(call)이 발생하면 커널레벨에서 비디오 영상 출력 영역과 관련된 상기 서비스 구동 전에 인코딩되어 상기 서비스 전송 서버내 저장부에 저장되어 있는 인코딩 비디오 영상들 중 상기 비디오 영상에 대응되는 인코딩 비디오 영상을 독출함으로써 수행되도록 할 수 있다.
한편, 앞에서 비디오 영상보다 컴퓨터 영상의 압축 효율이 높다고 했지만, 각 영상에 전혀 맞지 않는 인코더를 적용할 경우, 다른 현상이 나타날 수 있다. 이 는 압축 효율에 있어 바람직하지 못하므로, 상기 서비스 영상 전송 서버에 구비되는 인코더는 적어도 상기 비디오 영상에 대한 인코딩시의 초당 비트레이트율이 상기 컴퓨터 영상에 대한 인코딩시의 초당 비트레이트율보다 크게 인코딩되도록 선택 및 설정되는 것이 바람직하다.
앞에서 살펴본 서비스 영상 전송 서버를 도 5를 참조하여 보다 상세하게 살펴본다.
상기 서비스 영상 전송 서버(100)는 단말기 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 서비스 구동 결과에 대한 서버측 결과 영상에서 상기 비디오 영상을 제외한 컴퓨터 영상을 생성하는 서비스 구동부(110), 상기 서비스 구동 결과에 대한 서버측 결과 영상에서 상기 비디오 영상을 인코딩하는 미디어 구동부(130) 및 상기 서비스 구동부로부터 컴퓨터 영상을 전송받아 부호화한 후 상기 미디어 구동부로부터 전송받은 인코딩 비디오 영상과 함께 상기 단말기로 실시간 전송하는 영상 전송부(150)를 포함하고 있다.
상기 서비스 구동부(110)는 단말기 요청 수신부(미도시)에 전송된 단말기 요청이 있는 경우, 상기 단말기 요청을 전달받아 분석한 후, 분석 결과에 맞는 서비스를 구동하게 된다. 상기 단말기의 요청이 서비스 영상의 실행 및 제공을 요청하는 것이므로, 상기 서비스 구동부는 단말기에서 요구한 서비스 영상, 보다 구체적으로 비디오 영상을 구동하는 툴을 동작시키고, 이에 필요한 서버 내 각종 자원을 지원하게 된다. 또한, 서비스 구동 결과에 해당하는 서버측 결과 영상에서 비디오 영상과 컴퓨터 영상을 구분하고, 상기 컴퓨터 영상에 대해서는 단말기 요청에 맞게 서비스 툴 등의 메뉴 위치, 크기 등을 결정/생성한다.
상기 미디어 구동부(130)는 상기 서비스 구동부로부터 비디오 영상을 전달받아 인코딩하게 된다. 이를 위해서 상기 미디어 구동부는 도 6과 같이 단말기 요청의 대상이 되는 비디오 영상들을 미리 검색하여 스트리밍 가능한 형태로 인코딩하여 인코딩 비디오 영상으로서 저장하는 비디오 영상 인코딩부(131), 단말기의 요청이 있는 경우, 상기 단말기 요청에 부합하는 비디오 영상에 대응되는 인코딩 비디오 영상을 검색하여 독출하는 인코딩 비디오 영상 독출부(133)를 포함하고 있다.
상기 미디어 구동부에는 상기 인코딩 비디오 영상을 저장하기 위한 저장부(135)가 구비되는데, 상기 저장부는 서비스 영상 전송 서버의 공용 저장부가 이용될 수 있다. 상기 미디어 구동부에서 이루어지는 비디오 영상의 인코딩은 실시간 전송을 위한 스트리밍이 가능한 형태로 이루어진다. 즉, 서비스 영상 전송 서버에서 재생 가능한 형태가 아니라, 스트리밍 가능한 형태로 인코딩이 이루어져, 필요시에 바로 단말기로 전송이 가능하도록 한다.
상기 비디오 영상 인코딩부(131)는 앞에서 살펴본 바와 같이 파일 형태로 존재하는 비디오 영상에 대해 미리 비실시간 인코딩과 같이 압축 효율이 높은 인코딩을 수행해 인코딩 비디오 영상으로서 저장해 놓게 된다. 만약, 단말기 요청에서 요구하는 비디오 영상이 라이브(Live) 비디오 영상인 경우, 상기 비디오 영상 인코딩부는 실시간 인코딩을 상기 라이브 비디오 영상에 대하여 적용하게 된다. 상기 라이브 비디오 영상은 소정 입력부로 입력된 후, 상기 서비스 구동부를 통하여 비디 오 영상 인코딩부로 전달되며, 이때, 상기 서비스 구동부는 라이브 비디오 영상임을 함께 알려주어, 상기 비디오 영상 인코딩부에서 실시간 인코딩이 수행되도록 한다. 이렇게 실시간 인코딩된 라이브 비디오 영상은 상기 인코딩 비디오 영상 독출부를 바이패스하여 영상 전송부로 전달된다.
한편, 상기 비디오 영상 인코딩부는 서버측 결과 영상에서 비디오 영상이 재생되는 위치, 예를 들어 블럭기반 인코더를 포함하는 경우 ROI 위치도 생성하여 영상 전송부로 전달할 수 있다. 또한, 상기 비디오 영상 인코딩부는 서버측 결과 영상에 포함된 오디오 신호를 추가로 인코딩하여 영상 전송부로 전달할 수도 있다.
상기 인코딩 비디오 영상 독출부(133)는 상기 비디오 영상 인코딩부에 의하여 마련된 인코딩 비디오 영상들 중 단말기에서 구동을 요구한 비디오 영상에 대응되는 인코딩 비디오 영상을 검색하여 독출한 후 영상 전송부로 전달한다. 단말기가 요청한 비디오 영상에 대응되는 인코딩 비디오 영상이 없는 경우가 있을 수 있는데, 이는 서비스 영상을 요청하는 단말기 측에서 서비스 영상에 포함될 비디오 영상의 목록을 미리 확인할 수 있도록 함으로써 해결이 가능하다.
영상 전송부(150)는 상기 서비스 구동부로부터 컴퓨터 영상을 전송받아 인코딩한 후 상기 미디어 구동부로부터 전송받은 인코딩 비디오 영상과 함께 상기 단말기로 실시간 전송한다. 앞에서는 상기 영상 전송부와 미디어 구동부를 별개의 요소로 설명하였으나, 상기 미디어 구동부를 상기 영상 전송부에 포함시켜, 서버측 결과 영상에 대한 인코딩과 전송을 담당하는 하나의 군으로 형성할 수도 있다.
이상에서, 설명된 서비스 영상 전송 서버에 대하여 몇가지 사항을 보충하면, 상기 미디어 구동부에서 인코딩되는 상기 비디오 영상은 ROI(Region Of Interest, 관심영역)로 정의되어 인코딩될 수 있다. 즉, 상기 비디오 영상이 위치하는 영역 전체를 ROI로 정의함으로써, 용이하게 서버측 결과 영상에서 비디오 영상을 구분할 수 있게 된다. 다만, 상기 비디오 영상의 위치는 단말기 요청에 따라 변경이 되므로, 상기 미디어 구동부는 상기 ROI의 위치를 서비스 구동시에 결정하는 것이 바람직하다. 상기 영상 전송부는 상기 미디어 구동부로부터 상기 ROI를 전송받고, 상기 컴퓨터 영상을 상기 ROI로 결정된 비디오 영상 영역인 ROI 위치를 제외한 부분으로 정의하여 인코딩한 후 전송하게 된다.
한편, 앞에서 설명한 바와 같이 상기 서비스 영상 전송 서버에 구비된 인코더는 적어도, 상기 미디어 구동부에서 인코딩되는 비디오 영상의 초당 비트레이트율이 상기 영상 전송부에서 인코딩되는 컴퓨터 영상의 초당 비트레이트율보다 크게 인코딩이 이루어지는 것을 선택하는 것이 바람직하다.
이와 같이 구성된 서비스 영상 전송 서버에서 전송된 서비스 영상을 디스플레이하는 단말기는 도 7에 도시된 바와 같이, 비디오 영상과 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 인코딩된 인코딩 서버측 결과 영상을 전송받는 영상 수신부(210), 상기 비디오 영상과 상기 컴퓨터 영상을 구분하여 디코딩한 후, 합성하여 디스플레이하는 디스플레이부(230)를 포함할 수 있다.
상기 영상 수신부(210)는 상기 서비스 영상 전송 서버에서 전송된 비디오 영상과 컴퓨터 영상 즉 서버측 결과 영상을 수신하게 된다. 상기 비디오 영상 및 컴 퓨터 영상은 물론 각각 구분하여 인코딩이 이루어진 상태이므로, 상기 비디오 영상과 컴퓨터 영상으로 구성된 인코딩 서버측 결과 영상을 디코딩할 필요가 있다. 또한, 컴퓨터 영상과 비디오 영상에 적용한 인코딩의 방식, 종류가 다를 수 있으므로, 디코딩에 필요한 각종 정보 또한 상기 서비스 영상 전송 서버로부터 수신받을 수 있다. 물론, 이를 위해서 상기 서비스 영상 전송 서버, 구체적으로 앞에서 살펴본 영상 전송부는 디코딩에 필요한 각종 정보를 상기 단말기로 제공할 수 있다.
상기 디스플레이부(230)는 상기 영상 수신부를 통하여 수신된 인코딩 서버측 결과 영상을 디스플레이하게 되며, 정상적인 디스플레이를 위하여 디코딩도 함께 이루어지도록 구성하였다. 상기 디코딩은 서비스 영상 전송 서버에서 각각 구분되어 인코딩된 비디오 영상과 컴퓨터 영상에 적합하게 이루어져 한다. 즉, 상기 디스플레이부는 비디오 영상과 컴퓨터 영상을 구분하여 디코딩하여야 하며, 상기 디코딩에 필요한 파라미터는 상기 서비스 영상 전송 서버로부터 수신받을 수 있다. 물론, 사전에 약속된 파라미터값을 사용할 수도 있을 것이다.
상기 디코딩을 수행하는 디코더를 별도의 요소로 할 수도 있다.
한편, 단말기에서는 상기 서비스 영상 전송 서버로부터 전송된 인코딩 서버측 결과 영상이, 각각 구분되어 인코딩된 비디오 영상과 컴퓨터 영상으로 구성된 점을 이용하여 부가 서비스를 제공할 수도 있다. 예를 들어, 비디오 영상만을 디스플레이하거나, 컴퓨터 영상만을 디스플레이할 수 있다.
상기 부가 서비스는 도 8에서와 같이 상기 영상 수신부(210)와 디스플레이부(230) 사이에 배치되는 영상 분리부(250)를 통하여 제공될 수 있다.
상기 영상 분리부(250)는 상기 영상 수신부에서 수신된 인코딩 서버측 결과 영상에서 비디오 영상과 컴퓨터 영상을 분리하고, 어느 하나의 영상만을 상기 디스플레이로 전송할 수 있다. 인코딩 서버측 결과 영상에서 비디오 영상과 컴퓨터 영상을 분리하기 위해서는 예를 들어 디코딩과 같은 별도의 처리가 필요하므로, 상기 영상 분리부(250) 또한 상기 디스플레이부에 포함시켜 디스플레이부에 구비된 디코더를 이용하도록 구성할 수 있다. 즉, 상기 영상 분리부는 상기 디스플레이부에 포함될 수 있다.
이하에서는 이상에서 살펴본, 서비스 영상 전송 시스템, 서버, 단말기의 동작을 도 9 내지 도 11을 참조하여 살펴본다.
서비스 영상 전송 서버는 단말기의 요청, 즉 사용자에 의한 서비스 요청이 있는 경우(S 510), 상기 단말기의 요청에 따라 비디오 영상을 포함하는 서비스를 구동한다(S 520).
상기 서비스 구동 결과에 대한 서버측 결과 영상을 상기 비디오 영상과, 비디오 영상 외의 컴퓨터 영상으로 구분하고(S 530), 상기 비디오 영상과 컴퓨터 영상을 구분하여 인코딩한다(S 540 내지 S 570).
이와 같이 각각 인코딩된 비디오 영상과 컴퓨터 영상을 실시간 전송한다(S 580).
비디오 영상과 컴퓨터 영상을 구분하여 인코딩하는 과정을 보다 구체적으로 살펴보면, 비실시간 인코딩이 이루어진 인코딩 비디오 영상의 가용 여부를 결정하 기 위하여 요청된 비디오 영상이 라이브 비디오 영상인지 우선 판단하고(S 540), 라이브 비디오 영상인 경우에는 라이브 비디오 영상과 컴퓨터 영상 각각에 대하여 실시간으로 인코딩하게 된다(S 540, 560).
요청된 비디오 영상이 라이브 비디오 영상이 아닌 경우에는 상기 비디오 영상과 대응되는 기인코딩 비디오 영상을 독출함으로써(S 550) 인코딩을 완료하게 되는데, 비디오 영상의 위치만큼은 실시간으로, 즉 서비스 구동시에 결정한다.
기인코딩 비디오 영상을 독출하는 과정을 서비스 구동부의 입장에서 살펴보면 도 10에 도시한 바와 같이 이루어진다.
비디오 영상 처리 요청이 있고, 해당 비디오 영상이 라이브 비디오 영상이 아닌 경우(S 551), 요청된 비디오 영상에 대한 처리 화면을 미디어 구동부에 요청하게 된다(S 553). 그 후 상기 비디오 영상에 대한 처리를 미디어 구동부에 요청하게 되고(S 555), 상기 요청에 의하여 미디어 구동부는 상기 비디오 영상과 대응되는 기 저장된 비디오 영상을 독출하게 된다. 상기 비디오 영상에 대한 처리 요청은 미디어 처리 종료 명령, 즉 비디오 영상 구동 종료 명령 전까지 유지된다(S 557). 상기 컴퓨터 영상의 인코딩은 상기 비디오 영상과 별도로 수행된다.
이와 같은 과정은 프로그램으로서 CD나 USB 메모리 등의 컴퓨터로 읽을 수 있는 매체에 기록될 수 있다.
상기 서비스 영상 전송 서버에서 전송된 서버측 결과 영상을 재생하기 위해서 단말기는 다음의 과정을 거치게 된다.
먼저, 비디오 영상과 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 인코딩된 서버측 결과 영상을 전송받고(S 610), 상기 서버측 결과 영상을 상기 비디오 영상과 컴퓨터 영상으로 구분한다(S 620). 이렇게 서로 구분된 상기 비디오 영상과 컴퓨터 영상에 각각 다른 파라미터 또는 다른 압축 방식을 적용하여 디코딩함(S 630)으로써, 상기 단말기에서 재생가능한 비디오 영상과 컴퓨터 영상을 출력한다. 이렇게 출력된 비디오 영상과 컴퓨터 영상을 합성하여 디스플레이함(S 640)으로써, 사용자는 원하는 서비스 영상을 획득하게 된다. 단말기의 이와 같은 동작은 제어부 또는 별도의 처리 모듈을 통하여 제어 및 수행가능하며, 그 동작 과정은 프로그램으로 기록한 컴퓨터로 읽을 수 있는 매체에 기록되어 제공될 수 있다.
도 12는 단말기의 요청에 부합하는 서비스 영상 전송을 수행하는 서비스 영상 전송 시스템의 구체적인 실시예이다.
크게, 서비스 영상 전송 서버와 단말기, 상기 서비스 영상 전송 서버와 단말기의 데이터 교환을 위한 유무선망으로 구성되고, 상기 서비스 영상 전송 서버는 서비스 설치부(310), 트랜스코더부(320), 서비스 구동부(330), 미디어 구동부(340), 영상 전송부(350), 단말기 요청 수신부(360)로 이루어지며, 상기 단말기는 영상 수신부(410), 디스플레이부(420), 단말기 요청 전송부(430)로 이루어진다.
먼저, 사용자가 이용가능한 서비스를 제공하기 위하여, 해당 서비스를 위한 프로그램, 즉 서비스 구동 툴을 설치한다. 서비스 설치부(310)는 상기 서비스 구동 툴 설치시에 비디오 영상 관련 파일이 서비스 영상 전송 서버 내에 존재하는지 검색하고, 존재하는 경우 이를 데이터베이스화한다. 상기 데이터베이스는 단말기 요 청이 있는 경우 요청에 포함된 비디오 영상을 처리하는데 이용된다. 비디오 영상 관련 파일이 존재하는지를 검색하는 범위는 서비스 영상 전송 서버 내인데, 여기에는 상기 서비스 영상 전송 서버가 각종 망을 이용하여 비디오 영상의 획득이 가능한 범위를 포함할 수 있다.
상기 서비스 설치부에서 검색된 비디오 영상은 트랜스코더부(320)에서 스트리밍 가능한 형태로 트랜스코딩되어 소정 저장부에 저장된다. 이때 비디오 영상은 전체 ROI로 정의되어 인코딩된다. 단, ROI의 위치는 단말기 요청에 의해 변동되므로 서비스 구동시에 결정된다.
서비스 구동부(330)는 상기 서비스 구동 툴 등의 서비스 영상 전송 서버의 자원을 이용하여 요청된 서비스를 구동한다.
미디어 구동부(340)는 비디오 영상, 경우에 따라 오디오 데이터를 준비하며, 상기 요청된 서비스에서 비디오 영상 또는 오디오 데이터의 재생을 요청하는 경우, 해당 비디오 영상과 오디오 데이터에 대응되는 트랜스코딩된 비디오 영상과 오디오 비트스트림을 상기 저장부에서 찾아 영상 전송부로 전달한다. 서비스 구동부는 비디오 영상, 오디오 데이터 구동의 경우, 직접 비디오 영상과 오디오 데이터에 대한 재생을 수행하지 않고, 미디어 구동부에 요청하여 처리하며, 그 모습은 앞에서 설명한 도 10과 같다.
영상 전송부(350)는 상기 서비스 구동부에서 생성된 화면을 단말기로 전송하게 되는데, 상기 서비스 구동부로부터 컴퓨터 영상을 받고, 상기 미디어 전송부로부터 비디오 영상 비트스트림, 즉 인코딩 비디오 영상과 비디오 영상이 재생되는 화면의 위치(ROI 위치)를 받는다. 화면에 하나 이상의 비디오 영상이 재생되어야 하는 경우, 미디어 구동부는 하나 이상의 비디오 비트스트림과 ROI 위치를 영상 전송부로 전달할 수 있다. 영상 전송부는 ROI로 결정된 비디오 영상 이외의 부분을 컴퓨터 영상으로 정의하고, 상기 컴퓨터 영상을 인코딩하여 전송한다.
또한, 영상 전송부는 비디오 파일과 비디오의 재생, 중지, 재생 위치 이동과 같은 비디오 영상 재생관련 명령, 그리고 화면에서 비디오 영상이 출력될 위치를 입력받아, 이에 맞게 ROI의 위치와 크기를 ROI 비트스트림에 입력한 후, 비디오 영상 재생 명령에 맞추어 상기 ROI 비트스트림을 전송한다.
단말기의 영상 수신부(410)는 유무선망을 통하여 전송받은 비디오 비트스트림을 디스플레이부로 전달하며, 디스플레이부(420)에서 이를 디코딩하여 디스플레이하게 된다.
단말기 요청 전송부(430)에서는 사용자 입력에 따라 서비스 구동을 요구하는 단말기 요청을 유무선망을 통하여 서비스 영상 전송 서버로 전송한다.
상기 단말기 요청은 서비스 영상 전송 서버에 위치하는 단말기 요청 수신부(360)에서 수신되며, 상기 단말기 요청 수신부는 서비스 구동부에 단말기 요청을 전달하고, 이에 따라 서비스 구동부는 해당 서비스를 구동하게 된다.
정리하면, 비디오 영상과 컴퓨터 영상을 구분하여 인코딩함으로써 실시간 인코더의 부하를 경감시킬 수 있으며, 비디오 영상에 대해 비실시간 부호화를 수행할 수 있어 높은 압축률을 획득할 수 있다. 결과적으로 사용자는 단말기의 자원에 상 관없이 높은 자원을 요구하는 서비스를 서버를 통하여 원활하게 서비스 받을 수 있다.
본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 서버에서 단말기로 동영상 등의 멀티미디어 컨텐츠를 제공해 주는 서비스 및 시스템에 적용할 수 있다.
특히, 단말기가 이동 통신 단말기와 같이 컨텐츠 구동 능력이 낮을 경우에 유리하다.
또한, 단말기를 통하여 서버를 원격 제어하고자 하는 경우 서버에서 구동되는 컨텐츠를 실시간으로 획득하도록 하는데 적용될 수 있다.
또한, 유무선망의 속도가 일반적인 컨텐츠 압축 방식으로 실시간 전송하기에는 느린 경우에 적용하는 것이 유리하다.
도 1은 본 발명과 관련된 서비스 영상 전송 시스템을 나타낸 블럭도.
도 2는 서비스 영상 전송 시스템에서 서비스 구동 후 획득되는 결과 영상의 예를 나타낸 개략도.
도 3에 본 발명의 일실시예와 관련된 서비스 영상 전송 시스템을 나타낸 개략도.
도 4는 본 발명의 일실시예와 관련된 서비스 영상 전송 시스템에서 서비스 구동 후 획득되는 결과 영상의 예를 나타낸 개략도.
도 5는 본 발명과 관련된 서비스 영상 전송 서버를 나타낸 블럭도.
도 6은 본 발명과 관련된 서비스 영상 전송 서버에서 미디어 구동부를 나타낸 블럭도.
도 7은 본 발명과 관련된 단말기를 나타낸 블럭도.
도 8은 본 발명과 관련된 다른 단말기를 나타낸 블럭도.
도 9는 본 발명에 따른 서비스 영상 전송 방법을 나타낸 흐름도.
도 10은 본 발명에 따른 서비스 영상 전송 방법에서 비디오 영상에 대한 처리 과정을 나타낸 흐름도.
도 11은 본 발명에 따른 서비스 영상 재생 방법을 나타낸 흐름도.
도 12는 본 발명의 일실시예에 따른 서비스 영상 전송 시스템을 나타낸 블럭도.
<도면의 주요부분에 대한 부호의 설명>
100...서비스 영상 전송 서버 200...단말기
110...서비스 구동부 130...미디어 구동부
150...영상 전송부 131...비디오 영상 인코딩부
133...인코딩 비디오 영상 독출부

Claims (13)

  1. 단말기의 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 상기 서비스 구동 결과인 서버측 결과 영상을 상기 비디오 영상과 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 상기 비디오 영상에 대한 초당 비트레이트가 상기 컴퓨터 영상에 대한 초당 비트레이트 보다 크게 인코딩한 후 상기 단말기로 실시간 전송하는 서비스 영상 전송 서버; 및
    상기 비디오 영상과 컴퓨터 영상을 전송받아 단말측 결과 영상으로 디스플레이하는 단말기;
    를 포함하는 서비스 영상 전송 시스템.
  2. 단말기 요청에 따라 비디오 영상을 포함하는 서비스를 구동하고, 서비스 구동 결과인 서버측 결과 영상에서 상기 비디오 영상을 제외한 컴퓨터 영상을 생성하는 서비스 구동부;
    상기 서비스 구동 결과인 서버측 결과 영상에서 상기 비디오 영상을 인코딩하는 미디어 구동부; 및
    상기 서비스 구동부로부터 컴퓨터 영상을 전송받아 인코딩한 후 상기 미디어 구동부로부터 전송받은 인코딩 비디오 영상과 함께 상기 단말기로 실시간 전송하는 영상 전송부;를 포함하고,
    상기 비디오 영상에 대한 초당 비트레이트가 상기 컴퓨터 영상에 대한 초당 비트레이트 보다 크게 인코딩하는 서비스 영상 전송 서버.
  3. 제 2 항에 있어서,
    상기 미디어 구동부는
    단말기 요청 대상이 되는 비디오 영상들을 미리 검색하여 스트리밍 가능한 형태로 인코딩하여 인코딩 비디오 영상으로 저장하는 비디오 영상 인코딩부;
    단말기의 요청이 있는 경우, 상기 단말기 요청에 부합하는 비디오 영상에 대응되는 인코딩 비디오 영상을 검색하여 독출하는 인코딩 비디오 영상 독출부;
    를 포함하는 서비스 영상 전송 서버.
  4. 제 2 항에 있어서,
    상기 미디어 구동부는
    상기 서버측 결과 영상에 포함된 오디오 신호를 추가로 인코딩하는 서비스 영상 전송 서버.
  5. 제 2 항에 있어서,
    상기 미디어 구동부에서 인코딩되는 상기 비디오 영상은 ROI(Region Of Interest, 관심영역)로 정의되어 인코딩되고,
    상기 영상 전송부는 상기 미디어 구동부로부터 상기 ROI를 전송받고, 상기 컴퓨터 영상을 상기 ROI로 결정된 비디오 영상 영역인 ROI 위치를 제외한 부분으로 정의하여 인코딩한 후 전송하는 서비스 영상 전송 서버.
  6. 제 5 항에 있어서,
    상기 미디어 구동부는 상기 ROI 위치를 서비스 구동시에 결정하여 전송하는 서비스 영상 전송 서버.
  7. 비디오 영상과 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 인코딩된 서버측 결과 영상을 전송받는 영상 수신부;
    상기 비디오 영상과 상기 컴퓨터 영상을 구분하여 디코딩한 후, 합성하여 디스플레이하는 디스플레이부;를 포함하고,
    상기 영상 수신부는 상기 비디오 영상에 대한 초당 비트레이트가 상기 컴퓨터 영상에 대한 초당 비트레이트 보다 크게 인코딩된 서버측 결과 영상을 전송받는 서비스 영상 재생 단말기.
  8. 제 7 항에 있어서,
    인코딩된 상기 서버측 결과 영상에서 비디오 영상과 컴퓨터 영상을 분리하는 영상 분리부를 더 포함하고,
    상기 영상 분리부는 상기 비디오 영상과 컴퓨터 영상 중 어느 하나의 영상만을 상기 디스플레이부로 전송하는 서비스 영상 재생 단말기.
  9. 단말기의 요청에 따라 비디오 영상을 포함하는 서비스를 구동하는 단계;
    상기 서비스 구동 결과인 서버측 결과 영상을 상기 비디오 영상과 비디오 영상 외의 컴퓨터 영상으로 구분하는 단계;
    상기 비디오 영상과 컴퓨터 영상을 구분하여 인코딩하는 단계;
    인코딩된 비디오 영상과 컴퓨터 영상을 실시간 전송하는 단계;를 포함하고,
    상기 비디오 영상과 컴퓨터 영상을 구분하여 인코딩하는 단계는, 상기 비디오 영상에 대한 초당 비트레이트가 상기 컴퓨터 영상에 대한 초당 비트레이트 보다 크게 인코딩하는 서비스 영상 전송 방법.
  10. 제 9 항에 있어서,
    상기 인코딩 단계는 상기 비디오 영상이 라이브(Live) 비디오 영상인 경우, 상기 라이브 비디오 영상과 컴퓨터 영상을 각각 인코딩하는 단계;
    상기 비디오 영상이 라이브 비디오 영상이 아닌 경우, 상기 비디오 영상과 대응되는 기인코딩 비디오 영상을 독출하여 이용하고, 이와 별도로 컴퓨터 영상을 인코딩하는 단계;
    를 포함하는 서비스 영상 전송 방법.
  11. 제 9 항 또는 제 10 항 중 어느 한 항의 방법을 프로그램으로 기록한 컴퓨터로 읽을 수 있는 매체.
  12. 비디오 영상과 상기 비디오 영상을 제외한 컴퓨터 영상으로 구분하여 인코딩된 서버측 결과 영상을 전송받는 단계;
    상기 서버측 결과 영상을 상기 비디오 영상과 컴퓨터 영상으로 구분하는 단계;
    상기 비디오 영상과 컴퓨터 영상을 구분하여 디코딩하는 단계;
    디코딩이 이루어진 상기 비디오 영상과 컴퓨터 영상을 합성하여 디스플레이하는 단계;를 포함하고,
    상기 인코딩된 서버측 결과 영상은, 상기 비디오 영상에 대한 초당 비트레이트가 상기 컴퓨터 영상에 대한 초당 비트레이트 보다 크게 인코딩된 것을 특징으로 하는 서비스 영상 재생 방법.
  13. 제 12 항의 방법을 프로그램으로 기록한 컴퓨터로 읽을 수 있는 매체.
KR1020090079147A 2009-08-26 2009-08-26 서비스 영상 전송 시스템, 서버 및 방법 KR101246596B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090079147A KR101246596B1 (ko) 2009-08-26 2009-08-26 서비스 영상 전송 시스템, 서버 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090079147A KR101246596B1 (ko) 2009-08-26 2009-08-26 서비스 영상 전송 시스템, 서버 및 방법

Publications (2)

Publication Number Publication Date
KR20110021377A KR20110021377A (ko) 2011-03-04
KR101246596B1 true KR101246596B1 (ko) 2013-03-25

Family

ID=43930285

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090079147A KR101246596B1 (ko) 2009-08-26 2009-08-26 서비스 영상 전송 시스템, 서버 및 방법

Country Status (1)

Country Link
KR (1) KR101246596B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101700821B1 (ko) * 2012-08-21 2017-02-01 한국전자통신연구원 스케일러블 원격화면 전송방법 및 그 장치
KR102286430B1 (ko) * 2015-03-13 2021-08-05 에스케이플래닛 주식회사 클라우드 스트리밍 서비스 제공 방법 및 이를 위한 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040049425A (ko) * 2002-12-06 2004-06-12 엘지전자 주식회사 이동통신 단말기
KR20060122893A (ko) * 2003-12-08 2006-11-30 디브이엑스, 인크. 멀티미디어 분배 시스템
KR20070117667A (ko) * 2005-03-09 2007-12-12 콸콤 인코포레이티드 비디오 전화기를 위한 관심 영역 추출
KR20090036259A (ko) * 2007-10-09 2009-04-14 에스케이 텔레콤주식회사 사용자 선택 영상 제공 방법 및 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040049425A (ko) * 2002-12-06 2004-06-12 엘지전자 주식회사 이동통신 단말기
KR20060122893A (ko) * 2003-12-08 2006-11-30 디브이엑스, 인크. 멀티미디어 분배 시스템
KR20070117667A (ko) * 2005-03-09 2007-12-12 콸콤 인코포레이티드 비디오 전화기를 위한 관심 영역 추출
KR20090036259A (ko) * 2007-10-09 2009-04-14 에스케이 텔레콤주식회사 사용자 선택 영상 제공 방법 및 시스템

Also Published As

Publication number Publication date
KR20110021377A (ko) 2011-03-04

Similar Documents

Publication Publication Date Title
US11140354B2 (en) Method for generating control information based on characteristic data included in metadata
US20230119262A1 (en) System and Method of Controlling Equipment Based on Data Transferred In-Band in Video via Optically Encoded Images
RU2573778C2 (ru) Устройство декодирования сигнала изображения, способ декодирования сигнала изображения, устройство кодирования сигнала изображения, способ кодирования сигнала изображения и программа
WO2019024919A1 (zh) 视频转码方法及其装置、服务器、可读存储介质
JP6576635B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP2003087785A (ja) 動画像符号化データの形式変換方法及び装置
JP2009502055A (ja) 変更ファイルフォーマット、ファイルサーバ、データ処理システム及びデータ抽出方法
KR20160034890A (ko) 정보 처리 장치 및 방법
US20100329640A1 (en) Recording/Reproducing Apparatus
US8548040B2 (en) Coding method, decoding method, coding apparatus, decoding apparatus, program, and integrated circuit
CN106489270B (zh) 信息处理装置和方法
WO2021117802A1 (ja) 画像処理装置および方法
JP2019083555A (ja) 情報処理装置、コンテンツ要求方法およびコンピュータプログラム
US11206386B2 (en) Information processing apparatus and information processing method
US20190373213A1 (en) Information processing device and method
CN109691118A (zh) 影像显示系统及影像显示方法
KR101246596B1 (ko) 서비스 영상 전송 시스템, 서버 및 방법
KR20200076529A (ko) 가상 현실 비디오 스트리밍에서의 관심영역 타일 인덱싱
Kammachi‐Sreedhar et al. Omnidirectional video delivery with decoder instance reduction
US20240163491A1 (en) Information processing device and method thereof
US20240089500A1 (en) Method for multiview video data encoding, method for multiview video data decoding, and devices thereof
KR101186422B1 (ko) 서비스 영상 전송 시스템 및 방법
EP4391550A1 (en) Processing content for extended reality applications
JP2005176068A (ja) 動画像配信システム及びその方法
KR20230129064A (ko) 픽쳐 특징 회복

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20120425

Effective date: 20130208

Free format text: TRIAL NUMBER: 2012101003903; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20120425

Effective date: 20130208

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180306

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190305

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20200303

Year of fee payment: 8