KR101516996B1 - 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법 - Google Patents

단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법 Download PDF

Info

Publication number
KR101516996B1
KR101516996B1 KR1020130124781A KR20130124781A KR101516996B1 KR 101516996 B1 KR101516996 B1 KR 101516996B1 KR 1020130124781 A KR1020130124781 A KR 1020130124781A KR 20130124781 A KR20130124781 A KR 20130124781A KR 101516996 B1 KR101516996 B1 KR 101516996B1
Authority
KR
South Korea
Prior art keywords
object information
information
original
output
image data
Prior art date
Application number
KR1020130124781A
Other languages
English (en)
Other versions
KR20150045274A (ko
Inventor
박강순
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020130124781A priority Critical patent/KR101516996B1/ko
Publication of KR20150045274A publication Critical patent/KR20150045274A/ko
Application granted granted Critical
Publication of KR101516996B1 publication Critical patent/KR101516996B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440227—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 단말기에서 디스플레이장치로 영상을 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상을 수신 및 재생하는 영상수신 및 재생방법에 관한 것으로서, 원본 영상데이터를 압축하지 않고 전송하여 영상 전송시의 지연성(latency)을 감소시킬 수 있고, 동시에 디스플레이장치의 해상도에 맞게 출력 영상데이터를 디스플레이장치에 출력할 수 있는 영상송신방법 및 영상수신 및 재생방법에 관한 것이다.
구체적으로, 본 발명은, 단말기의 제1 디스플레이에 출력되는 그래픽화된 원본 영상데이터에 포함되는 복수 개의 영상객체정보를 추출하는 단계; 추출된 상기 영상객체정보를 상기 단말기에서 디스플레이장치로 전송하는 단계; 및 상기 단말기로부터 수신된 상기 영상객체정보에 기초하여 상기 디스플레이장치의 제2 디스플레이에 출력되는 출력 영상데이터를 재생성하는 단계;를 포함하는 영상전송방법에 관한 것이다.

Description

단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법{METHOD FOR TRANSMITTING VIDEO DATA FROM TERMINAL TO DISPLAYING DEVICE AND METHOD FOR RECEIVING AND PLAYING THE VIDEO DATA TRANSMITTED BY MEANS OF THE SAME}
본 발명은 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법에 관한 것으로서, 원본 영상데이터를 압축하지 않고 전송하여 영상 전송시의 지연성(latency)을 감소시킬 수 있고, 동시에 디스플레이장치의 해상도에 맞게 출력 영상데이터를 디스플레이장치에 출력할 수 있는 영상송신방법 및 영상수신 및 재생방법에 관한 것이다.
현재 휴대용 단말기는 음성 통신 기능 이외에 고속의 데이터를 전송할 수 있는 구조로 변환되고 있다. 이러한 데이터 통신을 수행하는 휴대용 단말기에서 처리할 수 있는 데이터들은 패킷 데이터 및 영상 데이터들이 될 수 있다.
현재 휴대용 단말기들 대부분은 영상 데이터를 송수신할 수 있는 기능을 구비하고 있다. 특히, 통신망의 발달과 함께 애플리케이션의 발달로 인해, 각종 휴대용 단말기용 게임들이 상당수 개발되고 있고, 이러한 휴대용 단말기용 게임들에 포함되는 영상데이터들을 디지털티비(digital television)와 같은 디스플레이장치로 전송하는 기술들도 함께 개발되고 있는 실정이다.
도 1은 종래기술에 따른 영상전송방법에 대한 개략도이다.
도 1에 도시된 바와 같이, 종래기술에 따른 영상전송방법은 단말기(10)의 디스플레이부(11)에 표시된 원본 영상데이터를 디스플레이장치(20)의 디스플레이부(21)로 실시간으로 전송하여 출력한다.
구체적으로, 종래기술에 따른 영상전송방법은 단말기에서 원본 영상데이터(1a)를 프레임별로 실시간으로 추출한 후(1b), 상기 단말기에서 프레임별로 상기 원본 영상데이터를 일정 비율로 압축한다(encoding)(1c). 이후, 단말기는 이렇게 프레임별로 압축된 압축 영상데이터를 실시간으로 디스플레이장치로 전송한다(1d). 이후, 압축 영상데이터를 수신한 디스플레이장치는 상기 압축 영상데이터를 실시간으로 압축해제하여(decoding) 원본 영상데이터로 변환한 후(1e), 상기 원본 영상데이터를 디스플레이장치의 디스플레이부의 화면크기 및 해상도에 대응되게 보정하여 출력 영상데이터로 변환한 후(1e) 상기 디스플레이장치의 디스플레이부에 출력한다(1f).
그러나, 이러한 종래기술에 따른 영상전송방법은 원본 영상데이터를 압축 및 압축해제하는 과정을 프레임마다 실시간으로 실행해야 하며, 이로 인해 영상데이터를 처리하는데 소요되는 시간이 상당히 많고 데이터 전송량이 많이 데이터트래픽이 과도하게 증가될 수 있으므로, 게임과 같은 그래픽화된 영상데이터를 전송하는 경우 단말기의 디스플레이부에 표시된 영상데이터와 디스플레이장치에 출력되는 영상데이터 사이에 지연(latency)이 발생할 우려가 크며, 그 결과 사용자에게 불편함을 야기할 수 있는 문제점을 가지고 있었다.
또한, 종래기술에 다른 영상전송방법은 디스플레이장치의 해상도에 맞게 원본 영상데이터를 보정할 때, 디스플레이장치의 해상도에 완전히 대응된 영상데이터로 변환하지 못하여, 디스플레이장치의 해상도가 매우 낮다는 문제점을 가지고 있었다.
따라서, 본 발명의 목적은 종래기술의 문제점을 해결하는 것이다.
구체적으로, 본 발명의 목적은 영상 전송시 디스플레이장치에서의 영상전송 지연성(latency)을 현저히 감소시키는 것이다.
또한, 본 발명의 목적은 디스플레이장치의 해상도에 맞게 출력 영상데이터를 디스플레이장치에 출력하는 것이다.
본 발명의 일 실시예에 따르면, 본 발명은, 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법으로서, 상기 단말기는 메모리모듈에 저장된 원본 영상데이터가 출력되는 제1 디스플레이와, 상기 원본 영상데이터에 포함되는 복수 개의 영상객체정보를 추출하는 제1 제어모듈과, 상기 제1 제어모듈에 의하여 추출된 상기 복수 개의 영상객체정보를 상기 디스플레이장치로 송신하는 제1 통신모듈을 구비하고, 상기 제1 제어모듈은 상기 디스플레이장치가 송신된 상기 복수 개의 영상객체정보에 기초하여 출력 영상데이터를 재생성하여 출력할 수 있도록 상기 복수 개의 영상객체정보 각각에 포함되는 정보들을 추출하는 것을 특징으로 하는 영상송신방법을 제공할 수 있다.
또한, 바람직하게는, 상기 복수 개의 영상객체정보는, 상기 원본 영상데이터에서 정적인 요소로서 상기 원본 영상데이터의 배경이 되는 원본 배경객체정보와 상기 원본 영상데이터에서 상기 원본 배경객체정보 위에서 위치가 가변하는 동적요소인 원본 동적객체정보로 구성되는 것을 특징으로 한다.
또한, 바람직하게는, 상기 원본 배경객체정보 및 상기 원본 동적객체정보는 각각, 상기 원본 배경객체정보 및 상기 원본 동적객체정보 각각에 포함되는 영상객체의 위치정보, 색상정보 및 형상정보를 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 영상객체의 위치정보는, 상기 영상객체의 면적정보 및 상기 영상객체의 좌표정보를 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 제1 제어모듈은, 상기 영상 객체정보를 원본 배경객체정보와 상기 원본 배경객체정보 위에서 위치가 가변하는 적어도 하나 이상의 원본 동적객체정보로 분해하여 각 정보를 추출하는 영상객체정보 분해모듈과, 상기 원본 배경객체정보의 색상정보 및 위치정보를 추출하는 배경객체정보 추출모듈과, 상기 원본 동적객체정보의 위치정보 및 색상정보를 추출하는 동적객체정보 추출모듈을 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 제1 제어모듈을 사용하여 상기 단말기의 제1 디스플레이에 출력되고 있는 원본 영상데이터에 포함되는 복수 개의 영상객체정보를 추출하는 단계; 및 상기 제1 통신모듈을 사용하여 추출된 상기 복수 개의 영상객체정보를 상기 단말기에서 디스플레이장치로 실시간으로 송신하는 단계;을 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 복수 개의 영상객체정보를 추출하는 단계는, 상기 영상객체정보를 프레임 내에서 위치가 변하지 않는 원본 배경객체정보와, 프레임 내에서 위치가 가변적인 원본 동적객체정보로 분해하여 추출하는 단계와, 상기 원본 배경객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계와, 상기 원본 동적객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계를 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 원본 배경객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계는, 상기 프레임 내에서 상기 프레임의 면적에 대한 상기 원본 배경객체정보의 상대적인 면적을 계산하여 상기 원본 배경객체정보의 면적정보를 계산하고, 상기 프레임 내에서 상기 프레임의 좌표계에 대한 상기 원본 배경객체정보의 상대적인 좌표를 계산하여 상기 원본 배경객체정보의 좌표정보를 계산하도록 실행되는 것을 특징으로 한다.
또한, 바람직하게는, 상기 원본 동적객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계는, 상기 원본 배경객체정보 위에서 상기 원본 배경객체정보의 면적에 대한 상기 원본 동적객체정보의 상대적인 면적을 계산하여 상기 원본 동적객체정보의 면적정보를 실시간으로 계산하고, 상기 원본 배경객체정보 위에서 상기 원본 배경객체정보의 좌표계에 대한 상기 원본 동적객체정보의 상대적인 좌표를 실시간으로 계산하여 상기 원본 동적객체정보의 좌표정보를 실시간으로 계산하도록 실행되는 것을 특징으로 한다.
또한, 바람직하게는, 상기 원본 동적객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계는, 상기 원본 배경객체정보의 좌표계에 대한 상기 원본 동적객체정보의 상대적인 좌표계를 실시간으로 계산하고, 상기 상대적인 좌표계에 대한 상기 원본 동적객체정보의 윤곽선의 상대적인 좌표를 계산하여 상기 윤곽선의 상대적인 좌표를 기준으로 상기 원본 동적객체정보의 형상정보를 실시간으로 계산하도록 실행되는 것을 특징으로 한다.
또한, 바람직하게는, 상기 원본 영상데이터는 그래픽화된 영상데이터인 것을 특징으로 한다.
본 발명의 다른 일 실시예에 따르면, 본 발명은, 전술한 영상송신방법을 컴퓨터 또는 단말기에서 실행시키기 위한 프로그램을 기록한 컴퓨터 또는 단말기로 읽을 수 있는 기록매체를 제공할 수 있다.
본 발명의 또 다른 일 실시예에 따르면, 본 발명은, 단말기에서 디스플레이장치로 송신된 영상데이터를 수신하여 재생하는 영상수신 및 재생방법으로서, 상기 디스플레이장치는 상기 단말기의 제1 디스플레이에서 출력되는 원본 영상데이터에서 추출된 복수 개의 영상객체정보를 상기 단말기로부터 수신하는 제2 통신모듈과, 출력 영상데이터가 출력되는 제2 디스플레이와, 상기 복수 개의 영상객체정보에 기초하여 상기 출력 영상데이터를 재생성하는 제2 제어모듈을 구비하고, 상기 제2 제어모듈은 상기 복수 개의 영상객체정보에 기초하여 상기 제2 디스플레이의 화면크기 및 해상도에 대응되게 상기 출력 영상데이터를 재생성하는 것을 특징으로 하는 영상수신 및 재생방법을 제공할 수 있다.
또한, 바람직하게는, 상기 복수 개의 영상객체정보는, 상기 원본 영상데이터에서 정적인 요소로서 상기 원본 영상데이터의 배경이 되는 원본 배경객체정보와 상기 원본 영상데이터에서 상기 원본 배경객체정보 위에서 위치가 가변하는 동적요소인 원본 동적객체정보로 구성되는 것을 특징으로 한다.
또한, 바람직하게는, 상기 디스플레이장치가 상기 제2 통신모듈을 사용하여 상기 단말기에서 추출된 상기 복수 개의 영상객체정보를 상기 단말기로부터 수신하는 단계; 및 상기 단말기로부터 수신된 상기 복수 개의 영상객체정보에 기초하여 상기 디스플레이장치의 제2 디스플레이에 출력되는 출력 영상데이터를 재생성하는 단계;를 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 디스플레이장치의 제2 디스플레이에 출력되는 출력 영상데이터를 재생성하는 단계는, 상기 단말기로부터 수신된 상기 원본 배경객체정보에 기초하여 상기 출력 영상데이터의 출력 배경객체정보를 실시간으로 재생성하는 단계와, 상기 단말기로부터 수신된 상기 원본 동적객체정보에 기초하여 상기 출력 영상데이터의 출력 동적객체정보를 실시간으로 재생성하는 단계와, 상기 출력 배경객체정보와 상기 출력 동적객체정보를 실시간으로 결합하는 단계를 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 출력 영상데이터의 출력 배경객체정보를 실시간으로 재생성하는 단계는, 상기 제1 디스플레이에 대한 상기 제2 디스플레이의 크기 비율 및 해상도 비율에 기초하여 상기 출력 배경객체정보의 위치정보 및 형상정보를 계산하는 단계와, 계산된 상기 출력 배경객체정보의 위치정보 및 형상정보에 기초하여 상기 출력 배경객체정보를 재생성하는 단계를 포함하는 것을 특징으로 한다.
또한, 바람직하게는, 상기 출력 영상데이터의 출력 동적객체정보를 실시간으로 재생성하는 단계는, 상기 제1 디스플레이에 대한 상기 제2 디스플레이의 크기 비율 및 해상도 비율에 기초하여 상기 출력 동적객체정보의 위치정보 및 형상정보를 실시간으로 계산하는 단계와, 계산된 상기 출력 동적객체정보의 위치정보 및 형상정보에 기초하여 상기 출력 동적영상정보를 실시간으로 재생성하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 또 다른 일 실시예에 따르면, 본 발명은, 전술한 영상수신 및 재생방법을 컴퓨터 또는 단말기에서 실행시키기 위한 프로그램을 기록한 컴퓨터 또는 단말기로 읽을 수 있는 기록매체를 제공할 수 있다.
전술한 과제해결수단에 의하면, 본 발명은 영상 전송시 단말기의 디스플레이부와 디스플레이장치 사이의 영상전송 지연성(latency)을 현저히 감소시킬 수 있다. 이로 인해, 본 발명은 영상전송 지연 없이 사용자가 디스플레이장치로 게임 영상을 보면서 동시에 단말기로 게임을 조작할 수 있는 편의성을 제공할 수 있다.
또한, 본 발명은 디스플레이장치의 해상도에 맞게 출력 영상데이터를 디스플레이장치에 출력할 수 있다. 이로 인해, 본 발명은 사용자에게 원본 영상데이터 이상의 선명한 해상도로 출력 영상데이터를 제공할 수 있다.
도 1은 종래기술에 따른 영상전송방법에 대한 개략도이다.
도 2는 본 발명에 따른 영상전송시스템에 대한 개략도이다.
도 3은 본 발명에 따른 영상전송시스템에 대한 개략적인 블록선도이다.
도 4는 본 발명에 따른 영상전송방법에 대한 개략적인 플로우챠트이다.
도 5는 본 발명에 따른 영상전송방법에 포함되는 일단계에 대한 개략적인 플로우챠트이다.
도 6은 도 5의 실행과정에 대한 개략적인 개념도이다.
도 7은 원본 동적객체정보의 위치정보 및 형상정보를 추출하는 과정에 대한 개략도이다.
도 8은 본 발명에 따른 영상전송방법에 포함되는 다른 일단계에 대한 개략적인 플로우챠트이다.
도 9는 도 8의 실행과정에 대한 개략적인 개념도이다.
이하, 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 당해 분야의 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 설명하기로 한다. 첨부된 도면들에서 구성에 표기된 도면번호는 다른 도면에서도 동일한 구성을 표기할 때에 가능한 한 동일한 도면번호를 사용하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어 관련된 공지의 기능 또는 공지의 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고 도면에 제시된 어떤 특징들은 설명의 용이함을 위해 확대 또는 축소 또는 단순화된 것이고, 도면 및 그 구성요소들이 반드시 적절한 비율로 도시되어 있지는 않다. 그러나 당업자라면 이러한 상세 사항들을 쉽게 이해할 것이다.
도 2는 본 발명에 따른 영상전송시스템(1000)에 대한 개략도이고, 도 3은 본 발명에 따른 영상전송시스템(1000)에 대한 개략적인 블록선도이다.
도 2에 도시된 바와 같이, 본 발명에 따른 영상전송시스템(1000)은 메모리모듈에 원본 영상데이터(I)를 저장하고 있고 상기 원본 영상데이터(I)를 출력하는 단말기(100)와, 상기 단말기(100)와 유선 및/또는 무선 통신방식으로 상호 데이터 전송하며 출력 영상데이터(O)를 출력하는 디스플레이장치(200)를 포함한다.
여기서, 원본 영상데이터(I)는 단말기(100)에 저장되고 단말기(100)의 제1 디스플레이(110)에서 출력되는 영상데이터를 의미하고, 출력 영상데이터(O)는 디스플레이장치(200)의 제2 디스플레이(210)에 출력되는 영상데이터를 의미한다.
상기 단말기(100)는 핸드폰, 스마트폰, 태블릿피씨(tablet PC), PDA, 휴대용 게임단말기(100) 중 하나일 수 있다.
도 3을 참고하면, 상기 단말기(100)는 제1 디스플레이(110)와, 제1 통신모듈(130)과, 입력모듈(140)과, 상기 제1 디스플레이(110), 상기 제1 통신모듈(130) 및 상기 입력모듈(140)을 제어하는 제1 제어모듈(120)을 포함한다.
상기 제1 디스플레이(110)는 메모리모듈에 저장된 원본 영상데이터(I)가 출력되는 모듈이다. 여기서, 상기 원본 영상데이터(I)는 2D(two-dimensional) 영상데이터 및/또는 3D(three-dimensional) 영상데이터일 수 있다.
본 발명에서, 상기 원본 영상데이터(I)는 카메라 등의 촬영모듈을 통하여 획득된 촬영 영상데이터가 아니라 그래픽 에디터 등의 그래픽 툴(tool)을 이용하여 프로그램화되어 생성된 그래픽화된 영상데이터일 수 있다.
제1 통신모듈(130)은 단말기(100)의 원본 영상데이터(I)를 외부(즉, 디스플레이장치(200))로 전송하는 유선 및/또는 무선 통신모듈이다.
제1 제어모듈(120)은 상기 제1 디스플레이(110)와 상기 제1 통신모듈(130)을 제어하는 모듈로서, 원본 영상데이터(I)를 가공처리하여 가공처리된 원본 영상데이터(I)를 제1 통신모듈(130)을 통하여 외부로 전송한다.
구체적으로, 본 발명에서, 상기 제1 제어모듈(120)은 단말기(100)의 원본 영상데이터(I)에 포함되는 복수 개의 영상객체정보의 위치정보 및 색상정보를 추출하여 상기 위치정보 및 상기 색상정보를 상기 디스플레이장치(200)로 전송한다.
상기 제1 제어모듈(120)은 상기 제1 디스플레이(110)에 출력된 상기 원본 영상데이터(I)를 디스플레이장치(200)의 제2 디스플레이(210)에서 출력할 출력 영상데이터(O)의 소스정보로 실시간으로 추출하도록 구성된다.
나아가, 제1 제어모듈(120)은 고용량의 원본 영상데이터(I) 자체를 디스플레이장치(200)로 전송하는 것이 아니라 원본 영상데이터(I)에 포함되는 복수 개의 영상객체정보의 위치정보, 형상정보 및 색상정보만을 디스플레이장치(200)로 전송한다. 여기서, 상기 복수 개의 영상객체정보의 형상정보, 위치정보 및 색상정보는 후술할 출력 영상데이터(O)를 재성성하기 위한 정보가 된다. 나아가, 본 발명에서는 원본 영상데이터(I)를 그대로 또는 압축된 상태로 디스플레이장치(200)로 전송하는 것이 아니라, 원본 영상데이터(I)를 생성할 때 필요한 소스정보(즉, 각 영상객체정보의 형상정보, 위치정보 및 색상정보)만을 추출하여 상기 소스정보를 디스플레이장치(200)로 전송하고, 이후 전송된 소스정보에 기초하여 디스플레이장치(200)에서 출력 영상데이터(O)를 재생성하는 것이다.
따라서, 제1 제어모듈(120)은 원본 영상데이터(I)를 압축하는 데이터 처리과정을 실행하지 않으며, 각각의 영상객체정보의 형상정보, 위치정보 및 색상정보만을 전송하므로 전송용량이 적어 데이터 트래픽이 과도하게 발생하는 것을 방지할 수 있다.
여기서, 상기 영상객체정보는, 상기 원본 영상데이터(I)에서 정적인 요소로서 상기 원본 영상데이터(I)의 배경이 되는 원본 배경객체정보(Ib)와 상기 원본 영상데이터(I)에서 상기 원본 배경객체정보(Ib) 위에서 위치가 가변하는 동적요소인 원본 동적객체정보(Id)로 구성된다. 즉, 상기 제1 제어모듈(120)은 영상객체정보에 대해 적어도 하나 이상의 배경객체정보의 소스정보(즉, 위치정보, 형상정보 및 색상정보) 및 적어도 하나 이상의 동적객체정보의 소스정보(즉, 위치정보, 형상정보 및 색상정보)를 추출한다.
상기 원본 배경객체정보(Ib)는 프레임 내에서 위치가 고정되어 변하지 않는 객체정보이다. 즉, 상기 원본 배경객체정보(Ib)는 좌표값이 고정된 객체에 대한 정보이다.
상기 원본 동적객체정보(Id)는 프레임 내에서 및/또는 상기 원본 배경객체정보(Ib) 위에서 위치가 가변적인 객체정보이다. 즉, 상기 원본 동적객체정보(Id)는 좌표값이 시간에 따라 변화하는 객체에 대한 정보이다.
상기 원본 동적객체정보(Id)의 위치정보는 상기 원본 동적객체의 면적정보 및 상기 원본 동적객체의 좌표정보를 포함한다.
상기 원본 동적객체의 면적정보는 상기 원본 배경객체정보(Ib)의 면적정보에 대한 원본 동적객체의 상대적인 면적에 대한 계산값이고, 상기 원본 동적객체의 좌표정보는, 상기 원본 배경객체정보(Ib)의 좌표정보에 대한 원본 동적객체의 상대적인 계산값이다. 즉, 상기 원본 동적객체정보(Id)의 위치정보는 상기 원본 배경객체정보(Ib)의 좌표계(도 7의 O-X-Y 좌표계 참고)를 기준으로 상기 원본 배경객체정보(Ib)에 대한 상대적인 좌표값(도 7의 O'-X'-Y' 좌표계 참고)에 기초하여 결정된다.
상기 원본 동적객체정보(Id)의 형상정보는 상기 원본 동적객체의 면적정보 및 상기 원본 동적객체의 윤관선의 좌표정보를 포함한다. 상기 원본 동적객체의 면적정보는 전술한 바와 같고, 상기 원본 동적객체의 윤관선의 좌표정보는 상기 원본 배경객체정보(Ib)의 좌표계에 대한 상기 원본 동적객체정보(Id)의 상대적인 좌표계를 실시간으로 계산한 후 상기 원본 동적객체정보(Id)의 상대적인 좌표계에 대한 상기 원본 동적객체정보(Id)의 윤곽선의 상대적인 좌표를 계산하여 상기 윤곽선의 상대적인 좌표를 기준으로 실시간으로 계산된 계산값이다.
제1 제어모듈(120)에 대해 구체적으로 살펴보면, 상기 제1 제어모듈(120)은 도 3에 도시된 바와 같이 영상객체정보 분해모듈(121), 배경객체정보 추출모듈(125) 및 동적객체정보 추출모듈(123)을 포함한다.
상기 영상객체정보 분해모듈(121)은 영상 객체정보를 원본 배경객체정보(Ib)와 상기 원본 배경객체정보(Ib) 위에서 위치가 가변하는 적어도 하나 이상의 원본 동적객체정보(Id)로 분해하여 상기 원본 배경객체정보(Ib)에 포함되는 소스정보 및 상기 원본 동적객체정보(Id)에 포함되는 소스정보를 추출한다. 여기서, 소스정보란 배경객체정보 및 동적객체정보를 생성하는데 필요한 정보로서, 위치정보, 형상정보 및 색상정보를 포함한다. 상기 영상 데이터정보가 3D 영상데이터인 경우 상기 위치정보 및 상기 형상정보는 초점깊이(depth) 정보를 더 포함할 수 있다.
상기 배경객체정보 추출모듈(125)은 상기 원본 배경객체정보(Ib)의 형상정보, 색상정보 및 위치정보(즉, 소스정보)를 추출하여 데이터화한다.
상기 동적객체정보는 상기 원본 동적객체정보(Id)의 형상정보, 위치정보 및 색상정보를 추출하여 데이터화한다.
상기 동적객체정보 추출모듈(123)은, 상기 원본 동적객체정보(Id)의 위치정보에 포함되는 상기 원본 동적객체의 면적정보 및 상기 원본 동적객체의 좌표정보를 계산하여 추출한다.
이를 위하여, 상기 동적객체정보 추출모듈(123)은, 상기 원본 배경객체정보(Ib)의 면적정보에 대한 원본 동적객체의 상대적인 면적을 계산하여 상기 원본 동적객체의 면적정보에 반영하고, 상기 원본 배경객체정보(Ib)의 좌표정보에 대한 원본 동적객체의 상대적인 좌표값을 계산하여 상기 원본 동적객체의 좌표정보에 반영한다. 즉, 상기 동적객체정보 추출모듈(123)은 이후의 출력 영상데이터(O)의 해상도를 위하여 상대적인 좌표값 및 상대적인 면적값을 계산한다.
이렇게, 상대적인 좌표값과 상대적인 면적값을 계산함으로써, 단말기(100)의 제1 디스플레이(110)와 해상도가 상이한 디스플레이장치(200)의 제2 디스플레이(210)의 해상도에 대응되게 출력 영상데이터(O)를 재생성할 수 있다.
디스플레이장치(200)에 대하여 살펴보면, 상기 디스플레이장치(200)는 상기 제1 통신모듈(130)과 상호 유선 및 무선 통신하는 제2 통신모듈(230)과, 상기 제1 통신모듈(130) 및 상기 제2 통신모듈(230)을 통하여 전송된 상기 원본 영상데이터(I)를 출력하는 제2 디스플레이(210)와, 상기 제2 통신모듈(230) 및 상기 제2 디스플레이(210)를 제어하는 제2 제어모듈(220)을 포함한다.
여기서, 상기 디스플레이장치(200)는 상기 단말기(100)와 상이한 별개의 디스플레이장치이다. 예를 들어, 상기 단말기(100)가 스마트폰인 경우, 상기 디스플레이장치(200)는 태블릿피씨, 노트북, 데스크탑피씨, 디지털티비 중 하나일 수 있다.
상기 제2 제어모듈(220)은 상기 단말기(100)로부터 수신된 상기 복수 개의 영상객체정보의 위치정보 및 색상정보에 기초하여 상기 출력 영상데이터(O)를 재생성하도록 구성된다.
구체적으로, 도 3에 도시된 바와 같이, 상기 제2 제어모듈(220)은 배경객체정보 재생성모듈(221), 동적객체정보 재생성모듈(223) 및 영상객체정보 결합모듈(225)을 포함한다.
배경객체정보 재생성모듈(221)은 상기 단말기(100)로부터 수신된 상기 원본 배경객체정보(Ib)에 기초하여 상기 출력 영상데이터(O)의 출력 배경객체정보(Ob)를 실시간으로 재생성한다. 즉, 상기 배경객체정보 재생성모듈(221)은 원본 배경객체정보(Ib)의 위치정보(면적정보 및 좌표정보), 색상정보 및 형상정보(즉, 소스정보)에 기초하여 제2 디스플레이(210)에 출력하고자 하는 출력 배경객체정보(Ob)를 재작성한다.
동적객체정보 재생성모듈(223)은 상기 단말기(100)로부터 수신된 상기 원본 동적객체정보(Id)에 기초하여 상기 출력 영상데이터(O)의 출력 동적객체정보(Od)를 실시간으로 재생성한다. 즉, 상기 동적객체정보 재생성모듈(223)은 원본 동적객체정보(Id)의 위치정보(면적정보 및 좌표정보), 색상정보 및 형상정보(즉, 소스정보)에 기초하여 제2 디스플레이(210)에 출력하고자 하는 출력 동적객체정보(Od)를 재작성한다.
바람직하게는, 상기 배경객체정보 재생성모듈(221)은, 상기 제1 디스플레이(110)에 대한 상기 제2 디스플레이(210)의 크기 비율(즉, 화면 크기 비율) 및 해상도 비율(예를 들어, 픽셀값)에 기초하여 상기 출력 배경객체정보(Ob)를 실시간으로 재생성할 수 있다.
전술한 바와 같이, 프레임의 좌표계를 기준으로 하는 배경객체정보의 상대적인 좌표값 및 프레임의 면적에 대한 배경객체정보의 상대적인 면적값에 기초하여 상기 제1 디스플레이(110)에 대한 상기 제2 디스플레이(210)의 크기 비율 및 해상도 비율를 반영함으로써, 제1 디스플레이(110)와 제2 디스플레이(210) 사이의 해상도의 차이가 존재한다 하더라도 원본 영상데이터(I)의 해상도가 저하되지 않고 제2 디스플레이(210)의 해상도에 대응되는 해상도를 가지는 출력 영상데이터(O)를 제2 디스플레이(210)에 출력할 수 있다.
영상전송시스템(1000) 결합모듈은 배경객체정보 재생성모듈(221)에서 재생성된 출력 배경객체정보(Ob)와 동적객체정보 재생성모듈(223)에서 재생성된 출력 동적객체정보(Od)를 실시간으로 결합하여 상기 출력 영상데이터(O)를 완성하여 제2 디스플레이(210)에 출력한다.
바람직하게는, 상기 동적객체정보 재생성모듈(223)은, 상기 제1 디스플레이(110)에 대한 상기 제2 디스플레이(210)의 크기 비율(즉, 화면 크기 비율) 및 해상도 비율(예를 들어, 픽셀값)에 기초하여 상기 출력 동적객체정보(Od)를 실시간으로 재생성할 수 있다.
전술한 바와 같이, 배경객체정보의 좌표계를 기준으로 하는 동적객체정보의 상대적인 좌표값 및 배경객체정보의 면적에 대한 동적객체정보의 상대적인 면적값에 기초하여 상기 제1 디스플레이(110)에 대한 상기 제2 디스플레이(210)의 크기 비율 및 해상도 비율를 반영함으로써, 제1 디스플레이(110)와 제2 디스플레이(210) 사이의 해상도의 차이가 존재한다 하더라도 원본 영상데이터(I)의 해상도의 열화(劣化)현상 없이 제2 디스플레이(210)의 해상도에 대응되는 해상도를 가지는 출력 영상데이터(O)를 제2 디스플레이(210)에 출력할 수 있다.
변형 실시예로서, 도 2에 도시된 바와 같이, 상기 디스플레이장치(200)는 제2 디스플레이와는 별도로 구성된 셋탑박스(230)를 더 포함할 수 있고, 상기 제2 제어모듈은 상기 셋탑박스(230) 내에 구비될 수 있다. 즉, 본 실시예에 따르면, 디스플레이장치는 단말기로부터 영상객체정보의 소스정보를 수신하여 출력 영상데이터를 재생성하는 셋탑박스(230)와, 상기 셋탑박스(230)로부터 상기 출력 영상데이터를 수신하여 그대로 출력하는 제1 디스플레이로 구성될 수 있다.
이하에서는, 본 발명에 따른 영상전송시스템(1000)을 이용하여 제1 디스플레이(110)의 원본 영상데이터(I)를 제2 디스플레이(210)의 출력 영상데이터(O)로 전송하는 방법, 즉 본 발명에 따른 영상전송방법(S2000)에 대하여 보다 구체적으로 기술하기로 한다.
도 4는 본 발명에 따른 영상전송방법(S2000)에 대한 개략적인 플로우챠트이고, 도 5는 본 발명에 따른 영상전송방법(S2000)에 포함되는 일단계에 대한 개략적인 플로우챠트이고, 도 6은 도 5의 실행과정에 대한 개략적인 개념도이고, 도 7은 원본 동적객체정보(Id)의 위치정보 및 형상정보를 추출하는 과정에 대한 개략도이고, 도 8은 본 발명에 따른 영상전송방법(S2000)에 포함되는 다른 일단계에 대한 개략적인 플로우챠트이고, 도 9는 도 8의 실행과정에 대한 개략적인 개념도이다.
도 4에 도시된 바와 같이, 본 발명에 따른 영상전송방법(S2000)은 전체적으로, 단말기에서 디스플레이장치로 영상을 송신하는 영상송신방법과, 상기 단말기로부터 송싱된 영상을 디스플레이장치에서 수신하여 재생하는 영상수신 및 재생방법을 포함한다.
구체적으로, 상기 영상전송방법은, 단말기(100)의 제1 디스플레이(110)에 출력되는 그래픽화된 원본 영상데이터(I)에 포함되는 복수 개의 영상객체정보를 추출하는 단계(S2100); 추출된 상기 영상객체정보를 상기 단말기(100)에서 디스플레이장치(200)로 전송하는 단계(S2200); 및 상기 단말기(100)로부터 수신된 상기 영상객체정보에 기초하여 상기 디스플레이장치(200)의 제2 디스플레이(210)에 출력되는 출력 영상데이터(O)를 재생성하는 단계(S2300);를 포함한다.
여기서, 상기 영상객체정보는, 상기 영상객체의 위치정보, 색상정보 및 형상정보를 포함한다. 구체적으로, 상기 영상객체정보는 적어도 하나 이상의 배경객체정보의 소스정보(즉, 위치정보, 색상정보 및 형상정보) 및 적어도 하나 이상의 동적객체정보의 소스정보(즉, 위치정보, 색상정보 및 형상정보)를 포함한다.
도 5 및 도 6에 도시된 바와 같이, 상기 영상객체정보의 위치정보 및 색상정보를 추출하는 단계(S2100)는, 상기 영상객체정보를 프레임 내에서 위치가 변하지 않는 원본 배경객체정보(Ib)와, 프레임 내에서 위치가 가변적인 원본 동적객체정보(Id)로 분해하여 추출하는 단계(S2110)와, 상기 원본 배경객체정보(Ib)의 색상정보, 위치정보 및 형상정보를 추출하는 단계(S2120)와, 상기 원본 동적객체정보(Id)의 색상정보, 위치정보 및 형상정보를 추출하는 단계(S2130)를 포함한다.
우선, 단말기(100)의 입력모듈(140)을 통하여 사용자로부터 제1 디스플레이(110)에 출력되고 있는 원본 영상데이터(I)를 디스플레이장치(200)의 제2 디스플레이(210)에 출력하고자 하는 입력신호를 수신하는 경우, 상기 제1 제어모듈(120)은 영상객체정보 분해모듈(121), 배경객체정보 추출모듈(125) 및 동적객체정보 추출모듈(123)을 활성화시켜 디스플레이장치(200)로 전송할 데이터 및 정보를 생성한다.
이후, 단말기(100)의 제1 제어모듈(120)에 포함되는 영상객체정보 추출모듈은 제1 디스플레이(110)에 출력되고 및/또는 단말기(100)의 메모리모듈에 저장되어 있는 원본 영상데이터(I)를 적어도 하나 이상의 원본 배경객체정보(Ib)와 적어도 하나 이상의 원본 동적객체정보(Id)로 분해하여 추출한다(S2110). 이후, 상기 영상객체정보 추출모듈은 분해하여 추출된 적어도 하나 이상의 원본 배경객체정보(Ib) 및 적어도 하나 이상의 원본 영상객체정보를 각각 배경객체정보 추출모듈(125) 및 동적객체정보 추출모듈(123)로 전송한다.
이후, 상기 배경객체정보 추출모듈(125)은 원본 배경객체정보(Ib)에서 소스정보인 프레임 내에서의 원본 배경객체의 위치정보, 형상정보 및 색상정보를 추출하고, 상기 동적객체정보 추출모듈(123)은 원본 동적객체정보(Id)에서 소스정보인 원본 배경객체 내에서의 원본 동적객체의 위치정보, 형상정보 및 색상정보를 추출한다(S2120).
상기 배경객체정보 추출모듈(125)은 상기 영상객체정보 분해모듈(121)로부터 수신된 원본 배경객체정보(Ib)에서 상기 원본 배경객체정보(Ib)의 색상정보, 위치정보 및 형상정보를 추출한다.
구체적으로, 도 7에 도시된 바와 같이, 상기 배경객체정보 추출모듈(125)은 프레임 내에서 프레임의 면적에 대한 상기 원본 배경객체정보(Ib)의 상대적인 면적을 계산하여 상기 원본 배경객체정보(Ib)의 면적정보를 계산하여 데이터화한다. 그리고, 상기 배경객체정보 추출모듈(125)은 프레임 내에서 상기 프레임의 좌표계에 대한 상기 원본 배경객체정보(Ib)의 좌표계(O-X-Y 좌표계 참고)를 설정하여 상기 원본 배경객체정보(Ib)의 상대적인 좌표(값)를 계산하여 상기 원본 배경객체정보(Ib)의 좌표정보를 계산하여 데이터화한다.
그리고, 상기 동적객체정보 추출모듈(123)은 상기 원본 배경객체정보(Ib) 위에서 상기 원본 배경객체정보(Ib)의 면적에 대한 상기 원본 동적객체정보(Id)의 상대적인 면적을 계산하여 상기 원본 동적객체정보(Id)의 면적정보를 실시간으로 계산하여 데이터화한다(S2130). 그리고, 상기 동적객체정보 추출모듈(123)은 상기 원본 배경객체정보(Ib) 위에서 상기 원본 배경객체정보(Ib)의 좌표계(O-X-Y 좌표계 참고)에 대한 상기 원본 동적객체정보(Id)의 좌표계(O'-X'-Y' 좌표계 참고)를 설정하여 상기 원본 배경객체정보(Ib)의 좌표계(O-X-Y 좌표계 참고)에 대한 상기 원본 동적객체정보(Id)의 상대적인 좌표(값)를 실시간으로 계산하여 상기 원본 동적객체정보(Id)의 좌표정보를 실시간으로 계산하여 데이터화한다.
여기서, 원본 동적객체정보(Id)의 좌표계(O'-X'-Y' 좌표계 참고)를 설정하기 위하여, 상기 동적객체정보 추출모듈(123)은 상기 원본 배경객체정보(Ib) 위에서 상기 원본 배경객체정보(Ib)의 좌표계(O-X-Y 좌표계 참고)에서 상기 원본 동적객체정보(Id)의 기준점인 좌표계의 원점(즉, O'지점)을 실시간으로 계산하여 설정한 후 상기 O'지점을 기준으로 X'축 및 Y'축을 설정하여 원본 동적객체정보(Id)의 좌표계(O'-X'-Y' 좌표계 참고)를 완성한다. 상기 O'지점은 동적객체정보의 위치가 가변함에 따라 배경객체정보의 좌표계 상에서 함께 가변한다.
또한, 상기 동적객체정보 추출모듈(123)은, 상기 원본 배경객체정보(Ib)의 좌표계에 대한 상기 원본 동적객체정보(Id)의 상대적인 좌표계를 실시간으로 계산한 후, 상기 상대적인 좌표계(O'-X'-Y' 좌표계 참고)에 대한 상기 원본 동적객체정보(Id)의 윤곽선의 상대적인 좌표(O'-X'-Y' 좌표계를 기준으로 한 원본 동적객체의 윤곽선의 좌표임)를 계산하여 상기 윤곽선의 상대적인 좌표를 기준으로 상기 원본 동적객체정보(Id)의 형상정보를 실시간으로 계산하여 데이터화한다.
이후, 제1 제어모듈(120)은 배경객체정보 추출모듈(125) 및 동적객체정보 추출모듈(123)에서 추출된 데이터 및 정보(즉, 원본 영상데이터(I)의 소스정보)를 제1 통신모듈(130) 및 제2 통신모듈(230)을 통하여 디스플레이장치(200)로 전송한다.
도 8 및 도 9에 도시된 바와 같이, 상기 디스플레이장치(200)의 제2 디스플레이(210)에 출력되는 출력 영상데이터(O)를 재생성하는 단계(S2300)는, 상기 단말기(100)로부터 수신된 상기 원본 배경객체정보(Ib)에 기초하여 상기 출력 영상데이터(O)의 출력 배경객체정보(Ob)를 실시간으로 재생성하는 단계(S2310)와, 상기 단말기(100)로부터 수신된 상기 원본 동적객체정보(Id)에 기초하여 상기 출력 영상데이터(O)의 출력 동적객체정보(Od)를 실시간으로 재생성하는 단계(S2320)와, 상기 출력 배경객체정보(Ob)와 상기 출력 동적객체정보(Od)를 실시간으로 결합하는 단계(S2330)를 포함한다.
우선, 외부 단말기(100)의 제2 제어모듈(220)은 단말기(100)로부터 수신된 원본 배경객체정보(Ib)의 소스정보(위치정보, 색성정보 및 형상정보)를 배경객체정보 재생성모듈(221)로 전송하고, 단말기(100)로부터 수신된 원본 동적객체정보(Id)의 소스정보(위치정보, 색성정보 및 형상정보)를 동적객체정보 재생성모듈(223)로 전송한다.
이후, 상기 제2 제어모듈(220)은 제1 디스플레이(110)에 대한 제2 디스플레이(210)의 크기 비율 및 해상도 비율을 계산하여 데이터화한다.
이후, 상기 배경객체정보 재생성모듈(221)은 데이터화된 상기 원본 배경객체정보(Ib)의 소스정보에 기초하여 제1 디스플레이(110)에 대한 제2 디스플레이(210)의 크기 비율 및 해상도 비율을 반영하여 출력 배경객체정보(Ob)의 위치정보 및 형상정보를 계산한다. 예를 들어, 제1 디스플레이(110)에 대한 제2 디스플레이(210)의 크기 비율 및/또는 해상도 비율이 1:2인 경우, 프레임의 좌표계에 대한 배경객체정보의 좌표계의 크기 및 간격을 2배로 확대되도록 계산한다.
이후, 배경객체정보 재생성모듈(221)은, 계산된 상기 출력 배경객체정보(Ob)의 위치정보 및 형상정보에 기초하여 상기 출력 배경객체정보(Ob)를 재생성한다.
즉, 배경객체정보 재생성모듈(221)은 상기 원본 배경객체정보(Ib)의 소스정보에 포함되는 각각의 상대적인 좌표값 및 상대적인 면적값을 입력데이터로 하여 CAD의 작도방식 또는 그래픽 툴에서 그래픽 작도방식과 유사하게 출력 배경객체정보(Ob)를 작도한다. 즉, 제1 디스플레이(110)에 대한 제2 디스플레이(210)의 크기 비율 및/또는 해상도 비율이 1:2인 경우 프레임의 좌표계에 대한 배경객체정보의 좌표계의 크기 및 간격을 2배로 확대되도록 계산한 후, 계산된 배경객체정보의 좌표계 및 배경객체정보의 상대적인 좌표값에 기초하여 출력 배경객체정보(Ob)를 생성한다.
그리고, 상기 동적객체정보 재생성모듈(223)은 상기 제1 디스플레이(110)에 대한 상기 제2 디스플레이(210)의 크기 비율 및 해상도 비율에 기초하여 상기 출력 동적객체정보(Od)의 위치정보 및 형상정보를 실시간으로 계산한다. 예를 들어, 제1 디스플레이(110)에 대한 제2 디스플레이(210)의 크기 비율 및/또는 해상도 비율이 1:2인 경우, 배경객체정보의 좌표계에 대한 동적객체정보의 좌표계의 크기 및 간격을 2배로 확대되도록 계산하고, 이에 기초하여 좌표계을 새로이 계산한다(예를 들어, 좌표값이 (3,4)인 지점의 새로운 좌표값을 (6,8)로 계산함).
이후, 동적객체정보 재생성모듈(223)은 계산된 상기 출력 동적객체정보(Od)의 위치정보 및 형상정보에 기초하여 상기 출력 동적영상정보를 실시간으로 재생성한다. 즉, 동적객체정보 재생성모듈(223)은 상기 원본 동적객체정보(Id)의 소스정보에 포함되는 각각의 상대적인 좌표값 및 상대적인 면적값을 입력데이터로 하여 CAD의 작도방식 또는 그래픽 툴에서 그래픽 작도방식과 유사하게 출력 동적객체정보(Od)를 작도한다. 즉, 제1 디스플레이(110)에 대한 제2 디스플레이(210)의 크기 비율 및/또는 해상도 비율이 1:2인 경우 배경객체정보의 좌표계에 대한 동적객체정보의 좌표계의 크기 및 간격을 2배로 확대되도록 계산한 후(상대적인 좌표값도 2배로 확대하여 계산한 후), 계산된 동적객체정보의 좌표계 및 동적객체정보의 상대적인 좌표값에 기초하여 출력 동적객체정보(Od)를 실시간으로 생성한다.
이후, 배경객체정보 재생성모듈(221)은 재생성된 출력 배경객체정보(Ob)를 영상객체정보 결합모듈(225)로 전송하고, 동적객체정보 재생성모듈(223)도 재생성된 출력 동적객체정보(Od)를 영상객체정보 결합모듈(225)로 전송한다.
이후, 상기 영상객체정보 결합모듈(225)은 출력 배경객체정보(Ob) 위에 동적객체정보를 결합하여 제2 디스플레이(210)에 출력한다.
전술한 바에 의하면, 본 발명은 영상 전송시 단말기의 디스플레이부와 디스플레이장치 사이의 영상전송 지연성(latency)을 현저히 감소시킬 수 있다. 이로 인해, 본 발명은 영상전송 지연 없이 사용자가 디스플레이장치로 게임 영상을 보면서 동시에 단말기로 게임을 조작할 수 있는 편의성을 제공할 수 있다.
또한, 본 발명은 디스플레이장치의 해상도에 맞게 출력 영상데이터를 디스플레이장치에 출력할 수 있다. 이로 인해, 본 발명은 사용자에게 원본 영상데이터 이상의 선명한 해상도로 출력 영상데이터를 제공할 수 있다.
이상에서 본 발명의 기술적 사상을 예시하기 위해 구체적인 실시 예로 도시하고 설명하였으나, 본 발명은 상기와 같이 구체적인 실시 예와 동일한 구성 및 작용에만 국한되지 않고, 여러가지 변형이 본 발명의 범위를 벗어나지 않는 한도 내에서 실시될 수 있다. 따라서, 그와 같은 변형도 본 발명의 범위에 속하는 것으로 간주해야 하며, 본 발명의 범위는 후술하는 특허청구범위에 의해 결정되어야 한다.
1000 : 영상전송시스템
100 : 단말기
120 : 제1 제어모듈
121 : 영상객체정보 분해모듈
123 : 배경객체정보 추출모듈
125 : 동적객체정보 추출모듈
200 : 디스플레이장치
220 : 제2 제어모듈
221 : 배경객체정보 재생성모듈
223 : 동적객체정보 재생성모듈
225 : 영상객체정보 결합모듈

Claims (19)

  1. 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법으로서,
    상기 단말기는 메모리모듈에 저장된 원본 영상데이터가 출력되는 제1 디스플레이와, 상기 원본 영상데이터에 포함되는 복수 개의 영상객체정보를 추출하는 제1 제어모듈과, 상기 제1 제어모듈에 의하여 추출된 상기 복수 개의 영상객체정보를 상기 디스플레이장치로 송신하는 제1 통신모듈을 구비하고,
    상기 제1 제어모듈은 상기 디스플레이장치가 송신된 상기 복수 개의 영상객체정보에 기초하여 출력 영상데이터를 재생성하여 출력할 수 있도록 상기 복수 개의 영상객체정보 각각에 포함되는 정보들을 추출하고,
    상기 제1 제어모듈을 사용하여 상기 단말기의 제1 디스플레이에 출력되고 있는 원본 영상데이터에 포함되는 복수 개의 영상객체정보를 추출하는 단계; 및
    상기 제1 통신모듈을 사용하여 추출된 상기 복수 개의 영상객체정보를 상기 단말기에서 디스플레이장치로 실시간으로 송신하는 단계;를 포함하는 것을 특징으로 하는 영상송신방법.
  2. 제1항에 있어서,
    상기 복수 개의 영상객체정보는, 상기 원본 영상데이터에서 정적인 요소로서 상기 원본 영상데이터의 배경이 되는 원본 배경객체정보와 상기 원본 영상데이터에서 상기 원본 배경객체정보 위에서 위치가 가변하는 동적요소인 원본 동적객체정보로 구성되는 것을 특징으로 하는 영상송신방법.
  3. 제2항에 있어서,
    상기 원본 배경객체정보 및 상기 원본 동적객체정보는 각각, 상기 원본 배경객체정보 및 상기 원본 동적객체정보 각각에 포함되는 영상객체의 위치정보, 색상정보 및 형상정보를 포함하는 것을 특징으로 하는 영상송신방법.
  4. 제3항에 있어서,
    상기 영상객체의 위치정보는, 상기 영상객체의 면적정보 및 상기 영상객체의 좌표정보를 포함하는 것을 특징으로 하는 영상송신방법.
  5. 제1항에 있어서,
    상기 제1 제어모듈은,
    상기 영상 객체정보를 원본 배경객체정보와 상기 원본 배경객체정보 위에서 위치가 가변하는 적어도 하나 이상의 원본 동적객체정보로 분해하여 각 정보를 추출하는 영상객체정보 분해모듈과,
    상기 원본 배경객체정보의 색상정보 및 위치정보를 추출하는 배경객체정보 추출모듈과,
    상기 원본 동적객체정보의 위치정보 및 색상정보를 추출하는 동적객체정보 추출모듈을 포함하는 것을 특징으로 하는 영상송신방법.
  6. 삭제
  7. 제1항에 있어서,
    상기 복수 개의 영상객체정보를 추출하는 단계는,
    상기 영상객체정보를 프레임 내에서 위치가 변하지 않는 원본 배경객체정보와, 프레임 내에서 위치가 가변적인 원본 동적객체정보로 분해하여 추출하는 단계와,
    상기 원본 배경객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계와,
    상기 원본 동적객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계를 포함하는 것을 특징으로 하는 영상송신방법.
  8. 제7항에 있어서,
    상기 원본 배경객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계는,
    상기 프레임 내에서 상기 프레임의 면적에 대한 상기 원본 배경객체정보의 상대적인 면적을 계산하여 상기 원본 배경객체정보의 면적정보를 계산하고,
    상기 프레임 내에서 상기 프레임의 좌표계에 대한 상기 원본 배경객체정보의 상대적인 좌표를 계산하여 상기 원본 배경객체정보의 좌표정보를 계산하도록 실행되는 것을 특징으로 하는 영상송신방법.
  9. 제7항에 있어서,
    상기 원본 동적객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계는,
    상기 원본 배경객체정보 위에서 상기 원본 배경객체정보의 면적에 대한 상기 원본 동적객체정보의 상대적인 면적을 계산하여 상기 원본 동적객체정보의 면적정보를 실시간으로 계산하고,
    상기 원본 배경객체정보 위에서 상기 원본 배경객체정보의 좌표계에 대한 상기 원본 동적객체정보의 상대적인 좌표를 실시간으로 계산하여 상기 원본 동적객체정보의 좌표정보를 실시간으로 계산하도록 실행되는 것을 특징으로 하는 영상송신방법.
  10. 제7항에 있어서,
    상기 원본 동적객체정보의 색상정보, 위치정보 및 형상정보를 추출하는 단계는,
    상기 원본 배경객체정보의 좌표계에 대한 상기 원본 동적객체정보의 상대적인 좌표계를 실시간으로 계산하고, 상기 상대적인 좌표계에 대한 상기 원본 동적객체정보의 윤곽선의 상대적인 좌표를 계산하여 상기 윤곽선의 상대적인 좌표를 기준으로 상기 원본 동적객체정보의 형상정보를 실시간으로 계산하도록 실행되는 것을 특징으로 하는 영상송신방법.
  11. 제1항, 제2항, 제3항, 제4항, 제5항, 제7항, 제8항, 제9항 및 제10항 중 어느 한 항에 있어서,
    상기 원본 영상데이터는 그래픽화된 영상데이터인 것을 특징으로 하는 영상송신방법.
  12. 제1항, 제2항, 제3항, 제4항, 제5항, 제7항, 제8항, 제9항 및 제10항 중 어느 한 항에 기재된 영상송신방법을 컴퓨터 또는 단말기에서 실행시키기 위한 프로그램을 기록한 컴퓨터 또는 단말기로 읽을 수 있는 기록매체.
  13. 단말기에서 디스플레이장치로 송신된 영상데이터를 수신하여 재생하는 영상수신 및 재생방법으로서,
    상기 디스플레이장치는 상기 단말기의 제1 디스플레이에서 출력되는 원본 영상데이터에서 추출된 복수 개의 영상객체정보를 상기 단말기로부터 수신하는 제2 통신모듈과, 출력 영상데이터가 출력되는 제2 디스플레이와, 상기 복수 개의 영상객체정보에 기초하여 상기 출력 영상데이터를 재생성하는 제2 제어모듈을 구비하고,
    상기 제2 제어모듈은 상기 복수 개의 영상객체정보에 기초하여 상기 제2 디스플레이의 화면크기 및 해상도에 대응되게 상기 출력 영상데이터를 재생성하는 것을 특징으로 하는 영상수신 및 재생방법.
  14. 제13항에 있어서,
    상기 복수 개의 영상객체정보는, 상기 원본 영상데이터에서 정적인 요소로서 상기 원본 영상데이터의 배경이 되는 원본 배경객체정보와 상기 원본 영상데이터에서 상기 원본 배경객체정보 위에서 위치가 가변하는 동적요소인 원본 동적객체정보로 구성되는 것을 특징으로 하는 영상수신 및 재생방법.
  15. 제14항에 있어서,
    상기 디스플레이장치가 상기 제2 통신모듈을 사용하여 상기 단말기에서 추출된 상기 복수 개의 영상객체정보를 상기 단말기로부터 수신하는 단계; 및
    상기 단말기로부터 수신된 상기 복수 개의 영상객체정보에 기초하여 상기 디스플레이장치의 제2 디스플레이에 출력되는 출력 영상데이터를 재생성하는 단계;를 포함하는 영상수신 및 재생방법.
  16. 제15항에 있어서,
    상기 디스플레이장치의 제2 디스플레이에 출력되는 출력 영상데이터를 재생성하는 단계는,
    상기 단말기로부터 수신된 상기 원본 배경객체정보에 기초하여 상기 출력 영상데이터의 출력 배경객체정보를 실시간으로 재생성하는 단계와,
    상기 단말기로부터 수신된 상기 원본 동적객체정보에 기초하여 상기 출력 영상데이터의 출력 동적객체정보를 실시간으로 재생성하는 단계와,
    상기 출력 배경객체정보와 상기 출력 동적객체정보를 실시간으로 결합하는 단계를 포함하는 것을 특징으로 하는 영상수신 및 재생방법.
  17. 제16항에 있어서,
    상기 출력 영상데이터의 출력 배경객체정보를 실시간으로 재생성하는 단계는,
    상기 제1 디스플레이에 대한 상기 제2 디스플레이의 크기 비율 및 해상도 비율에 기초하여 상기 출력 배경객체정보의 위치정보 및 형상정보를 계산하는 단계와,
    계산된 상기 출력 배경객체정보의 위치정보 및 형상정보에 기초하여 상기 출력 배경객체정보를 재생성하는 단계를 포함하는 것을 특징으로 하는 영상수신 및 재생방법.
  18. 제16항에 있어서,
    상기 출력 영상데이터의 출력 동적객체정보를 실시간으로 재생성하는 단계는,
    상기 제1 디스플레이에 대한 상기 제2 디스플레이의 크기 비율 및 해상도 비율에 기초하여 상기 출력 동적객체정보의 위치정보 및 형상정보를 실시간으로 계산하는 단계와,
    계산된 상기 출력 동적객체정보의 위치정보 및 형상정보에 기초하여 상기 출력 동적영상정보를 실시간으로 재생성하는 단계를 포함하는 것을 특징으로 하는 영상수신 및 재생방법.
  19. 제13항 내지 제18항 중 어느 한 항에 기재된 영상수신 및 재생방법을 컴퓨터 또는 단말기에서 실행시키기 위한 프로그램을 기록한 컴퓨터 또는 단말기로 읽을 수 있는 기록매체.
KR1020130124781A 2013-10-18 2013-10-18 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법 KR101516996B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130124781A KR101516996B1 (ko) 2013-10-18 2013-10-18 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130124781A KR101516996B1 (ko) 2013-10-18 2013-10-18 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법

Publications (2)

Publication Number Publication Date
KR20150045274A KR20150045274A (ko) 2015-04-28
KR101516996B1 true KR101516996B1 (ko) 2015-05-04

Family

ID=53037303

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130124781A KR101516996B1 (ko) 2013-10-18 2013-10-18 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법

Country Status (1)

Country Link
KR (1) KR101516996B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100211055B1 (ko) 1996-10-28 1999-07-15 정선종 내용기반으로 분할된 영상객체들의 스케러블 전송방법
JP2006101063A (ja) 2004-09-29 2006-04-13 Seiko Epson Corp 再生側の環境を考慮した動画像データの送信
KR100731581B1 (ko) 2005-07-25 2007-06-22 경북대학교 산학협력단 객체 인식을 통한 원격감시 영상데이터의 송수신 방법 및그 시스템
KR101269223B1 (ko) 2010-10-01 2013-06-13 주식회사 코리아퍼스텍 스마트폰을 이용한 원격 제어방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100211055B1 (ko) 1996-10-28 1999-07-15 정선종 내용기반으로 분할된 영상객체들의 스케러블 전송방법
JP2006101063A (ja) 2004-09-29 2006-04-13 Seiko Epson Corp 再生側の環境を考慮した動画像データの送信
KR100731581B1 (ko) 2005-07-25 2007-06-22 경북대학교 산학협력단 객체 인식을 통한 원격감시 영상데이터의 송수신 방법 및그 시스템
KR101269223B1 (ko) 2010-10-01 2013-06-13 주식회사 코리아퍼스텍 스마트폰을 이용한 원격 제어방법 및 장치

Also Published As

Publication number Publication date
KR20150045274A (ko) 2015-04-28

Similar Documents

Publication Publication Date Title
CN106296781B (zh) 特效图像生成方法及电子设备
KR20170132098A (ko) 레거시 및 몰입형 렌더링 디바이스를 위한 몰입형 비디오를 포맷팅하는 방법, 장치 및 스트림
US20170186243A1 (en) Video Image Processing Method and Electronic Device Based on the Virtual Reality
WO2018120657A1 (zh) 一种共享虚拟现实数据的方法和设备
US11590415B2 (en) Head mounted display and method
RU2733218C2 (ru) Способ, аппарат и поток для форматирования иммерсивного видеоизображения для традиционных и иммерсивных устройств воспроизведения
CN113891117B (zh) 沉浸媒体的数据处理方法、装置、设备及可读存储介质
KR102566276B1 (ko) 원격 단말을 위한 몰입형 원격 회의 및 텔레프레즌스를 위한 오버레이 처리용 파라미터
US11985381B2 (en) Mapping architecture of immersive technologies media format (ITMF) specification with rendering engines
CN114072792A (zh) 用于音频渲染的基于密码的授权
CN111464828A (zh) 虚拟特效显示方法、装置、终端及存储介质
EP3742737A2 (en) Image acquisition system and method
JP5800569B2 (ja) 情報処理システム、情報処理方法、情報処理プログラム
US11798195B2 (en) Method and apparatus for encoding and decoding three-dimensional scenes in and from a data stream
CN114445600A (zh) 一种特效道具的展示方法、装置、设备及存储介质
JP2023506832A (ja) 補助パッチを有する容積ビデオ
WO2014171066A1 (ja) 三次元画像表示システム、三次元画像表示システムのサーバ及び三次元画像表示方法
JP6934052B2 (ja) 表示制御装置、表示制御方法及びプログラム
KR101516996B1 (ko) 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법
CN112019906A (zh) 直播方法、计算机设备及可读存储介质
US20180160133A1 (en) Realtime recording of gestures and/or voice to modify animations
KR20180108967A (ko) 멀티비전 화면 영상 렌더링 시스템, 장치 및 방법
KR20200095408A (ko) 이머시브 비디오 포맷팅 방법 및 장치
JP2022549431A (ja) 容積ビデオを符号化、送信、及び復号化するための方法及び装置
KR20180031137A (ko) 360도 영상 기반의 클라우드 오디오 렌더링 서버

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180313

Year of fee payment: 6