KR20110068784A - 영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법 - Google Patents

영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법 Download PDF

Info

Publication number
KR20110068784A
KR20110068784A KR1020100042382A KR20100042382A KR20110068784A KR 20110068784 A KR20110068784 A KR 20110068784A KR 1020100042382 A KR1020100042382 A KR 1020100042382A KR 20100042382 A KR20100042382 A KR 20100042382A KR 20110068784 A KR20110068784 A KR 20110068784A
Authority
KR
South Korea
Prior art keywords
image
image data
divided
transmission
data
Prior art date
Application number
KR1020100042382A
Other languages
English (en)
Inventor
이인환
Original Assignee
(주) 정훈데이타
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 정훈데이타 filed Critical (주) 정훈데이타
Priority to KR1020100042382A priority Critical patent/KR20110068784A/ko
Publication of KR20110068784A publication Critical patent/KR20110068784A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/38—Transmitter circuitry for the transmission of television signals according to analogue transmission standards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

네트워크를 통해 실시간으로 영상을 전송하는 영상 전송 시스템 및 그 방법이 개시된다. 본 발명의 일 측면에 따르면, 영상소스를 수집하는 영상 수집부; 상기 수집된 영상소스에 대해서 표시화면 내에서의 위치, 크기, 정렬순서 중 하나 이상을 설정하는 영상 배열부; 상기 영상 배열부에 의해 상기 영상소스가 배열되어 표시되는 상기 표시화면 중 하나 이상의 전송영역을 설정하는 전송영역 설정부; 상기 전송영역에 상응하는 전송소스에 대하여 영상 분할을 수행하여 복수의 분할 영상 데이터를 생성하는 영상 분할부; 상기 분할 영상 데이터를 압축하는 압축부; 및 상기 압축된 분할 영상 데이터 각각을 네트워크를 통해 송신하는 복수의 전역 송신부를 포함하는 영상 송신 장치가 제공된다. 이에 의하면, 다양한 영상소스에 대하여 높은 자유도를 가지고 화면에 배열하여 표시하며, 화면 중 특정 부분을 전송할 수 있으며, 타 영상 송신 장치로부터의 영상 스트림을 재생하고 재전송할 수 있고, 하나 이상의 영상 송신 장치로부터 전송되는 영상 스트림 중 선택을 통해 원하는 화면 배열로 수신하여 재생가능한 효과가 있다.

Description

영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법{Apparatus for transmitting video, Apparatus for receiving video, System for transferring video including them and Method thereof}
본 발명은 영상 전송 시스템에 관한 것으로, 보다 상세하게는 네트워크를 통해 실시간으로 영상을 전송하는 영상 전송 시스템 및 그 방법에 관한 것이다.
최근에 영상 정보를 디지털 변환하여 네트워크를 통해 전송하는 기술이 많이 사용되고 있다. 영상 전송 기술은 인터넷을 이용하여 방송 및 기타 콘텐츠를 텔레비전 수상기로 제공하는 서비스 방식인 IPTV 또는 웹 브라우저(web browser) 등을 통해 사용자에게 제공되는 스트리밍 서비스(streaming service)를 위한 필수적인 기술이라 할 수 있다.
영상 정보를 디지털 변환하여 전송하기 위해서는 네트워크가 허용하는 대역폭 이하로 영상 정보를 가공할 필요가 있으며, 이 경우 영상 압축 기술이 사용되고 있다. 많이 사용되는 영상 압축 방식으로는 현재 MPEG2/4 방식이 있으며, 보다 높은 압축효율을 위해서는 H.264 방식도 채택되고 있다.
압축된 영상 정보는 네트워크를 통해 전송하기 위하여 멀티플렉싱(multiplexing)을 통해 패킷(packet) 형태의 데이터로 가공되어 송신된다.
영상 수신 장치는 패킷 형태의 데이터를 수신한 경우 상기 과정과는 역으로 디멀티플렉싱(demultiplexing), 압축 복원 과정을 거쳐 재생 가능한 최초 영상을 복원하게 된다.
스트리밍 서비스 등과 같이 영상을 제공하고자 하는 경우에는 상술한 것과 같이 송신과 수신을 포함하는 전 과정이 실시간으로 이루어져야 필요가 있다. 어느 한 과정이라도 제 기능을 다하지 못할 경우 영상의 끊김, 부자연스러운 동작, 영상과 오디오의 시간 어긋남 등의 현상이 나타나게 되는 문제점이 있다.
SD(표준화질, Standard Definition, 720X480 픽셀)급 영상의 경우 MPEG2/4나 H.264 방식을 사용하여 전송에 필요한 영상데이터로 가공한 후 인공위성이나 전용망을 통해 실시간 전송을 함으로써 현재 스트리밍 서비스 등에 이용되고 있다.
하지만, 영상의 화면 크기가 HD(고화질, High Definition, 1920X1080 픽셀)급에서는 SD급에 비하여 6배의 화면이 요구된다. 이는 시스템이 처리해야 하는 데이터 양이 6배로 증가하고 네트워크를 통해 전송되어야 하는 데이터 양이 6배로 증가해야 함을 의미한다. 이로 인해 시스템과 네트워크에 SD급 영상을 전송할 때와는 비교되지 않을 정도의 부하가 걸리고 HD급 영상 전송을 위하여 고대역 네트워크가 필요하게 된다.
특히, 스포츠 중계와 같이 움직임이 빠른 HD급 영상을 화질 열화나 영상의 끊김 없이 실시간으로 전송하고자 하는 경우 고대역 네트워크를 갖추기 위한 고가의 장치를 필요로 하는 문제점이 있다.
전술한 배경기술은 발명자가 본 발명의 도출을 위해 보유하고 있었거나, 본 발명의 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.
본 발명은 다양한 영상소스에 대하여 높은 자유도를 가지고 화면에 배열하여 표시하며, 화면 중 특정 부분을 전송할 수 있으며, 타 영상 송신 장치로부터의 영상 스트림을 재생하고 재전송할 수 있는 영상 송신 장치와, 하나 이상의 영상 송신 장치로부터 전송되는 영상 스트림 중 선택을 통해 원하는 화면 배열로 수신하여 재생가능한 영상 수신 장치와, 이를 포함하는 영상 전송 시스템 및 그 방법을 제공하기 위한 것이다.
또한, 본 발명은 영상 정보의 병렬 처리 시스템 및 영상 정보의 네트워크 전송 시스템을 결합하여 대용량 고화질 영상을 전송함에 있어서 저대역 네트워크 환경 하에서도 실시간 전송 능력을 향상시키면서 시간 동기화 문제를 해결한 영상 전송 시스템 및 그 방법을 제공하기 위한 것이다.
또한, 본 발명은 전송영역의 설정을 통해 전송을 원하는 영역에 한하여 전송을 수행할 수 있으며, 전송을 필요로 하지 않는 영역에 대해서는 처리하지 않음으로써, 네트워크 대역폭을 절감할 수 있는 영상 전송 시스템과 그 방법을 제공하기 위한 것이다.
또한, 본 발명은 전송영역의 설정을 통해 복수의 수신자 각각에게 필요로 하는 영상에 상응하는 영역만을 전송할 수 있는 사용자 맞춤형 영상 전송이 가능한 영상 전송 시스템과 그 방법을 제공하기 위한 것이다.
본 발명의 이외의 목적들은 하기의 설명을 통해 쉽게 이해될 수 있을 것이다.
본 발명의 일 측면에 따르면, 영상소스를 수집하는 영상 수집부; 상기 수집된 영상소스에 대해서 표시화면 내에서의 위치, 크기, 정렬순서 중 하나 이상을 설정하는 영상 배열부; 상기 영상 배열부에 의해 상기 영상소스가 배열되어 표시되는 상기 표시화면 중 하나 이상의 전송영역을 설정하는 전송영역 설정부; 상기 전송영역에 상응하는 전송소스에 대하여 영상 분할을 수행하여 복수의 분할 영상 데이터를 생성하는 영상 분할부; 상기 분할 영상 데이터를 압축하는 압축부; 및 상기 압축된 분할 영상 데이터 각각을 네트워크를 통해 송신하는 복수의 전역 송신부를 포함하는 영상 송신 장치가 제공된다.
상기 전송영역 설정부는 상기 표시화면 전체 혹은 상기 표시화면 중 일부 영역을 상기 전송영역으로 설정하며, 하나의 표시화면 내에 하나 이상의 전송영역을 설정할 수 있다.
상기 영상 분할부는 상기 전송소스에 대하여 공간적으로 M X N 개의 블록으로 분할하며, 상기 블록이 상기 분할 영상 데이터이고, 상기 M과 N은 자연수일 수 있다. 여기서, 상기 영상 분할부는 상기 분할 영상 데이터가 속하는 프레임에 관한 프레임 식별 정보와, 상기 분할 영상 데이터에 대응되는 블록의 위치에 관한 위치 정보를 포함하는 분할 정보를 함께 생성할 수 있다. 상기 복수의 전역 송신부 각각은 상기 분할 정보에 기초하여 구분되는 상기 압축된 분할 영상 데이터를 각각 송신할 수 있다.
상기 전송소스는 복수의 프레임으로 구성된 동화상 데이터이고, 상기 영상 분할부는 상기 전송소스 내의 일정 간격 마다의 프레임들을 동일한 분할 영상 데이터 그룹으로 그룹화하며, 상기 분할 영상 데이터 그룹 내에 속하는 각 프레임들이 상기 분할 영상 데이터일 수 있다. 여기서, 상기 영상 분할부는 상기 분할 영상 데이터의 프레임에 관한 프레임 식별 정보를 포함하는 분할 정보를 함께 생성할 수 있다. 상기 복수의 전역 송신부 각각은 상기 분할 영상 데이터 그룹에 따라 구분되는 상기 압축된 분할 영상 데이터를 각각 송신할 수 있다.
상기 압축부는 상기 전송소스의 특성에 따라 압축 비트 레이트를 가변시켜 압축시킬 수 있다.
상기 영상소스는 상기 영상 송신 장치에 연결된 카메라의 영상 데이터, 타 영상 송신 장치로부터 수신된 영상 스트림, 문서화면을 포함하는 그래픽 디바이스 메모리에 올려져 있어 화면에 표시되고 있는 매핑 데이터 중 하나 이상을 포함할 수 있다.
한편, 본 발명의 다른 측면에 따르면, 네트워크를 통해 복수의 분할 영상 데이터를 각각 수신하는 복수의 전역 수신부; 상기 분할 영상 데이터를 압축 복원하는 복원부; 상기 압축 복원된 분할 영상 데이터를 합성하여 완전한 복원 영상 데이터를 생성하는 합성부; 상기 복원 영상 데이터를 표시하기 위한 표시영역을 설정하는 표시영역 설정부; 및 상기 표시영역 내에서 상기 복원 영상 데이터를 재생하는 재생부를 포함하되, 상기 분할 영상 데이터는 하나의 전송소스가 분할된 것을 특징으로 하는 영상 수신 장치가 제공된다.
상기 표시영역 설정부는 상기 표시영역의 위치 및 크기 중 하나 이상을 설정할 수 있다.
상기 재생부는 상기 표시영역 설정부에 의해 설정된 상기 표시영역의 위치에 대하여 상기 표시영역의 크기에 상응하도록 상기 복원 영상 데이터를 확대 혹은 축소하여 재생할 수 있다.
상기 복원 영상 데이터와 상응하는 오디오 데이터를 동기화하는 동기부를 더 포함하되, 상기 재생부는 상기 복원 영상 데이터 및 상기 동기화된 오디오 데이터를 함께 재생할 수 있다.
상기 복수의 분할 영상 데이터가 일 프레임에 대하여 공간적으로 M X N 개로 분할된 블록이고, 상기 M과 N은 자연수인 경우, 상기 복수의 분할 영상 데이터는 상기 분할 영상 데이터가 속하는 프레임에 관한 프레임 식별 정보와, 상기 분할 영상 데이터에 대응되는 블록의 위치에 관한 위치 정보를 포함하는 분할 정보와 함께 수신되며, 상기 합성부는 상기 프레임 식별 정보 및 상기 위치 정보를 기초로 하여 상기 복수의 분할 영상 데이터를 하나의 프레임 내에 정렬할 수 있다.
상기 영상 데이터가 복수의 프레임으로 구성된 동화상 데이터인 경우, 상기 분할 영상 데이터는 상기 영상 데이터 내의 프레임들 중 동일한 분할 영상 데이터 그룹으로 그룹화되는 일정 간격 마다의 프레임 중 하나이며, 상기 복수의 분할 영상 데이터는 상기 분할 영상 데이터의 프레임에 관한 프레임 식별 정보를 포함하는 분할 정보와 함께 수신되며, 상기 합성부는 상기 프레임 식별 정보를 기초로 하여 상기 복수의 분할 영상 데이터를 프레임 순서대로 정렬할 수 있다.
한편, 본 발명의 또 다른 측면에 따르면, 표시화면 내에 하나 이상의 전송영역이 설정되고, 상기 전송영역 각각에 상응하는 하나 이상의 전송소스에 대하여 복수의 분할 영상 데이터로 분할하여 병렬 압축 전송하는 하나 이상의 영상 송신 장치; 및 상기 하나 이상의 영상 송신 장치로부터 상기 복수의 분할 영상 데이터를 병렬 수신하여 압축 복원하고, 표시화면 내에서 설정된 하나 이상의 표시영역 내에 상기 압축 복원된 전송소스를 재생하는 하나 이상의 영상 수신 장치를 포함하는 영상 전송 시스템이 제공된다.
서로 대응되는 상기 영상 송신 장치와 상기 영상 수신 장치는 서로 일대일 대응되는 동일 개수의 전역 송신부와 전역 수신부를 각각 포함할 수 있다.
상기 영상 송신 장치는 상기 전송소스에 대하여 공간적 영상 분할, 시간적 영상 분할 또는 이들의 결합 중 어느 하나를 수행할 수 있다.
한편, 본 발명의 또 다른 측면에 따르면, 영상소스를 수집하는 단계; 상기 수집된 영상소스에 대해서 표시화면 내에서의 위치, 크기, 정렬순서 중 하나 이상을 설정하는 단계; 상기 영상소스가 배열되어 표시되는 상기 표시화면 중 하나 이상의 전송영역을 설정하는 단계; 상기 전송영역에 상응하는 전송소스에 대하여 영상 분할을 수행하여 복수의 분할 영상 데이터를 생성하는 단계; 상기 분할 영상 데이터를 압축하는 단계; 및 상기 압축된 분할 영상 데이터 각각을 네트워크를 통해 병렬 송신하는 단계를 포함하는 영상 송신 방법 및 이를 수행하기 위한 프로그램이 기록된 기록매체가 제공된다.
한편, 본 발명의 또 다른 측면에 따르면, 네트워크를 통해 복수의 분할 영상 데이터를 병렬 수신하는 단계; 상기 분할 영상 데이터를 압축 복원하는 단계; 상기 압축 복원된 분할 영상 데이터를 합성하여 완전한 복원 영상 데이터를 생성하는 단계; 상기 복원 영상 데이터를 표시하기 위한 표시영역을 설정하는 단계; 및 상기 표시영역 내에서 상기 복원 영상 데이터를 재생하는 단계를 포함하되, 상기 분할 영상 데이터는 하나의 전송소스가 분할된 것을 특징으로 하는 영상 수신 방법 및 이를 수행하기 위한 프로그램이 기록된 기록매체가 제공된다.
전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해질 것이다.
본 발명의 실시예에 따르면, 다양한 영상소스에 대하여 높은 자유도를 가지고 화면에 배열하여 표시하며, 화면 중 특정 부분을 전송할 수 있으며, 타 영상 송신 장치로부터의 영상 스트림을 재생하고 재전송할 수 있고, 하나 이상의 영상 송신 장치로부터 전송되는 영상 스트림 중 선택을 통해 원하는 화면 배열로 수신하여 재생가능한 효과가 있다.
또한, 영상 정보의 병렬 처리 시스템 및 영상 정보의 네트워크 전송 시스템을 결합하여 대용량 고화질 영상을 전송함에 있어서 저대역 네트워크 환경 하에서도 실시간 전송 능력을 향상시키면서 시간 동기화 문제를 해결할 수 있다.
또한, 전송영역의 설정을 통해 전송을 원하는 영역에 한하여 전송을 수행할 수 있으며, 전송을 필요로 하지 않는 영역에 대해서는 처리하지 않음으로써, 네트워크 대역폭을 절감할 수 있다.
또한, 전송영역의 설정을 통해 복수의 수신자 각각에게 필요로 하는 영상에 상응하는 영역만을 전송할 수 있는 사용자 맞춤형 영상 전송이 가능하다.
도 1은 본 발명의 일 실시예에 따른 영상 전송 시스템에서 영상이 전송되는 과정을 나타내는 도면.
도 2는 본 발명의 일 실시예에 따른 영상 송신 장치의 구성을 나타낸 블록도.
도 3은 본 발명의 일 실시예에 따른 영상 송신 장치에서의 전송소스 생성을 위한 전송영역 설정을 설명하기 위한 도면.
도 4는 본 발명의 일 실시예에 따른 영상 송신 장치에서의 공간적 영상 분할의 일 예를 설명하기 위한 도면.
도 5는 본 발명의 일 실시예에 따른 영상 송신 장치에서의 시간적 영상 분할을 설명하기 위한 도면.
도 6은 본 발명의 일 실시예에 따른 영상 수신 장치의 구성을 나타내는 불록도.
도 7은 본 발명의 일 실시예에 따른 영상 송신 장치의 전역 송신부에서 영상 수신 장치의 전역 수신부로 데이터를 전송하는 과정을 나타낸 도면.
도 8은 본 발명의 일 실시예에 따른 영상 분할을 이용한 영상 송신 방법의 순서도.
도 9는 본 발명의 일 실시예에 따른 영상 분할을 이용한 영상 수신 방법의 순서도.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
또한, 명세서에 기재된 "…부", "…모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
이하, 본 발명의 실시예에 대해 관련 도면들을 참조하여 상세히 설명하기로 한다.
본 발명의 일 실시예에 따른 영상 전송 시스템은 원격 지점에서 생성된 영상을 네트워크를 통해 타 지점으로 전송하여 실시간으로 재생되도록 한다. 이러한 영상 전송 시스템은 네트워크를 통해 영상을 송신하는 하나 이상의 영상 송신 장치와, 네트워크를 통해 수신한 영상을 복원하여 재생하는 하나 이상의 영상 수신 장치를 포함한다. 영상 송신 장치는 영상 데이터를 분할하고 압축하여 네트워크의 전송 대역폭에 적합하도록 데이터량을 축소시키고, 네트워크를 통해 전송이 이루어질 수 있도록 하는 패킷 형태의 데이터를 생성하여 네트워크를 통해 송신한다. 영상 수신 장치는 네트워크를 통해 송신된 패킷을 수신한 후 압축 복원하고 합성 및 정렬하여 원래의 영상 데이터를 복원한 후 재생한다.
이러한 영상 송신 장치 및 영상 수신 장치의 화면 구성에 대하여 도 1을 참조하여 설명하기로 한다. 도 1은 본 발명의 일 실시예에 따른 영상 전송 시스템에서 영상이 전송되는 과정을 나타내는 도면이다.
영상 송신 장치 A의 표시화면(10A)에는 카메라 영상 A, 카메라 영상 B, 문서화면 1이 배열되어 재생 혹은 표시되고 있다. 영상 송신 장치 B의 표시화면(10B)에는 카메라 영상 B, 카메라 영상 C, 문서화면 2가 배열되어 재생 혹은 표시되고 있다.
영상 송신 장치는 카메라 영상과 같은 영상 스트림, 문서화면과 같은 매핑 데이터 등의 영상소스에 대하여 표시화면 내에서의 배열을 사용자 임의로 변경시킬 수 있다. 즉, 도 1에서는 영상 송신 장치 A의 표시화면(10A) 좌측 상단에 카메라 영상 A가 재생되고 좌측 하단에 카메라 영상 B가 재생되는 것으로 도시되어 있지만, 사용자 입력에 따라 배열을 변경하여 카메라 영상 A가 좌측 하단에 위치하고 카메라 영상 B가 좌측 상단에 위치하도록 할 수 있다.
또한, 영상 송신 장치는 화면의 특정 부분을 선택하여 전송할 수 있다. 영상 송신 장치 A의 표시화면(10A)의 카메라 영상 A 중 일부 화면(1)에 대해서만 선택하여 영상 수신 장치 A로 전송할 수 있으며, 영상 수신 장치 A는 수신된 카메라 영상 A 중 일부 화면(2)에 대해서 재생할 수 있을 것이다.
또한, 영상 송신 장치는 타 영상 송신 장치에서 전송된 영상 스트림을 재생하고, 이를 재전송할 수 있다. 영상 송신 장치 B는 표시화면(10B)에 재생되고 있는 카메라 영상 B를 영상 송신 장치 A로 전송하여 영상 송신 장치 A의 표시화면(10A) 내의 소정 위치에서 재생되도록 할 수 있으며, 영상 수신 장치로 재전송될 수 있다.
영상 수신 장치는 하나 이상의 영상 송신 장치에서 전송되는 전송소스에 대해 수신 여부를 선택하고, 원하는 화면 배열을 가지도록 할 수 있다.
영상 수신 장치 A의 표시화면(20A)에는 영상 송신 장치 A에서 전송된 카메라 영상 A의 일부 화면(2)과, 문서화면 1이 재생 혹은 표시되며, 영상 송신 장치 B에서 전송된 카메라 영상 B가 재생된다. 한편, 영상 수신 장치 B의 표시화면(20B)에는 영상 송신 장치 B에서 전송된 카메라 영상 B와, 그룹화된 카메라 영상 C 및 문서화면 2가 재생 혹은 표시되면서, 화면 배열이 영상 송신 장치 B의 표시화면(10B)과는 다르도록 할 수 있다.
전술한 특징을 가지는 영상 송신 장치 및 영상 수신 장치에 대하여 관련 도면을 참조하여 상세히 설명하기로 한다. 도 2는 본 발명의 일 실시예에 따른 영상 송신 장치의 구성을 나타낸 블록도이고, 도 3은 본 발명의 일 실시예에 따른 영상 송신 장치에서의 전송소스 생성을 위한 전송영역 설정을 설명하기 위한 도면이며, 도 4는 본 발명의 일 실시예에 따른 영상 송신 장치에서의 공간적 영상 분할의 일 예를 설명하기 위한 도면이고, 도 5는 본 발명의 일 실시예에 따른 영상 송신 장치에서의 시간적 영상 분할을 설명하기 위한 도면이다.
도 2를 참조하면, 영상 송신 장치(100)는 영상 수집부(110), 영상 배열부(120), 전송영역 설정부(130), 영상 분할부(140), 압축부(150-1, 150-2, …, 150-n, 이하 '150'으로 통칭함), 전역 송신부(160-1, 160-2, …, 160-n, 이하 '160'으로 통칭함), 사용자 입력부(170)를 포함한다.
본 발명의 일 실시예에 따른 영상 송신 장치(100)는 카메라 영상 데이터 혹은 수신된 영상 스트림, 매핑 데이터 등 그래픽 디바이스 메모리에 올려져 있어 화면에 표시되고 있는 영상소스에 대해서 화면 내에서 크기, 위치, 정렬순서 등을 조정하여 그 배열을 결정하고, 화면 전체 혹은 임의의 크기, 위치, 개수 등으로 분할된 전송영역에 상응하는 전송소스에 대하여 병렬 압축 전송을 수행한다.
영상 수집부(110)는 영상소스를 수집하여 영상 송신 장치(100)의 화면에 표시한다. 수집된 영상소스는 그래픽 디바이스 메모리(미도시)에 올려놓아 화면에 출력가능하게 하여 사용자가 확인하도록 할 수 있다. 그래픽 디바이스 메모리는 모니터 등과 같이 영상 송신 장치(100)에 구비되거나 외부에 연결된 표시 장치를 통해 표시되는 내용을 보여주는 메모리를 나타낸다.
영상소스는 영상 송신 장치(100)의 바탕화면 혹은 영상 송신 장치(100)에 저장된 문서 파일을 열거나 설치된 프로그램을 실행할 경우 화면에 표시되는 매핑 데이터와, 영상 송신 장치(100)에 연결된 영상 촬영 장치(미도시)를 통해 촬영되고 있는 외부 영상에 대한 카메라 영상 데이터와, 타 영상 송신 장치(100)로부터 수신한 영상 스트림 등 중 하나 이상을 포함할 수 있다.
카메라 영상 데이터는 컴포지트(composite), S-Video, 컴포넌트(component) 등의 방식을 통해 영상 송신 장치(100)에 입력된, 캠코더 등의 영상 촬영 장치에 의해 촬영된 소스 데이터(source data)이다. 카메라 영상은 정지화상 및/또는 동화상을 포함하며, 이하에서는 연속된 복수의 프레임으로 구성된 동화상을 중심으로 설명하기로 한다.
적색(R), 녹색(G), 청색(B)로 구성된 카메라 영상 데이터는 휘도를 나타내는 밝기 신호 Y와, 색의 조합을 나타내는 색차 신호 Cb, Cr로 변화되어 표현될 수 있다. 여기서, 컴포지트 방식은 밝기 신호 Y와 색차 신호 Cb, Cr을 하나로 합친 상태로 전송하는 방식이며, S-Video 방식은 밝기 신호 Y와 색차 신호 Cb, Cr을 두개로 분리하여 전송하는 방식으로 컴포지트 방식에 비하여 보다 섬세하고 높은 해상도를 표현할 수 있다. 컴포넌트 방식은 Y, Cb, Cr 신호를 각각 독립적인 선으로 분리 하여 전송하는 방식으로, 더 정확한 색상표현이 가능하게 한 방식이다. 이는 하나의 실시예에 불과하며, RGB, RGBHV, YUV, YCbCr, YPbPr 신호 등이 다양한 방식을 통해 영상 송신 장치(100)에 입력될 수 있다.
영상 수집부(110)는 영상 송신 장치(100)에 입력된 카메라 영상 데이터가 아날로그 신호인 경우 후단에서의 영상 신호 처리를 위해 디지털 신호로 변환하는 A/D 변환 모듈(미도시)을 포함할 수 있다. 영상 송신 장치(100)에 입력된 카메라 영상 데이터가 디지털 신호인 경우에는 A/D 변환 모듈이 포함되지 않거나 혹은 포함되어 있더라도 동작하지 않을 수 있다.
또한, 영상 수집부(110)는 재생 모듈(미도시)을 포함하여 타 영상 송신 장치(100)로부터 수신한 영상 스트림에 대하여 디코딩을 수행하여 재생(playback)시킬 수 있다.
또한, 영상 수집부(110)는 매핑 모듈(미도시)을 포함하여 바탕화면을 표시하거나 문서 파일을 열거나 설치된 프로그램을 실행하는 경우의 영상을 화면에 매핑시킬 수 있다.
영상 배열부(120)는 영상 수집부(110)에 의해 수집되어 화면에 표시되고 있는 영상소스에 대하여, 사용자 입력부(170)를 통해 입력받은 사용자 입력에 따라 그 크기, 위치, 정렬순서 등 중 하나 이상을 포함하는 배열 속성을 설정한다. 설정된 배열 속성에 따라 영상소스는 영상 송신 장치(100)의 표시화면 내에서 그 크기, 위치, 정렬순서 등이 정해져 배열될 수 있다. 여기서, 정렬순서는 복수의 영상소스가 겹치는 부분이 있는 경우에 표시화면에 표시되는 우선순위를 나타낸다.
전송영역 설정부(130)는 영상 배열부(120)에 의해 각 영상소스가 배열된 표시화면에 대해서 네트워크를 통해 전송할 전송영역을 설정하고, 해당 전송영역에 대한 전송소스를 생성한다.
전송영역은 표시화면 전체 혹은 표시화면 내의 일부 영역일 수 있으며, 하나의 표시화면에 대하여 하나 이상이 설정될 수 있다. 이러한 전송영역은 하나 이상의 카메라 화면, 카메라 화면의 일부, 영상 스트림이 재생되는 화면, 바탕화면, 문서화면, 이들의 조합 등일 수 있다.
도 3을 참조하면, 영상 배열부(120)에 의해 복수의 영상소스(카메라 영상 데이터, 매핑 데이터, 영상 스트림 등)가 배열된 영상 송신 장치(100)의 표시화면(10)이 도시되어 있다. 표시화면(10) 내에는 좌측 상단에 제1 카메라 영상 데이터가 재생되는 카메라 A 화면, 좌측 하단에 제2 카메라 영상 데이터가 재생되는 카메라 B 화면, 우측에 매핑 데이터가 표시되는 문서화면이 각각 배열되어 있으며, 카메라 A 화면, 카메라 B 화면, 문서화면이 각각 별개의 전송영역(12, 14, 16)으로 설정되어 있다.
설정된 전송영역(12, 14, 16) 내의 화면이 후술할 병렬 압축 전송의 대상되는 전송소스에 해당하며, 영상소스와 비교할 때 그 크기, 위치, 개수 등 중 하나 이상이 동일하거나 다를 수 있다. 이러한 전송영역(12, 14, 16)의 선택은 영상소스 단위로 정해져 있거나 사용자가 임의로 그 크기, 위치, 개수 등을 결정할 수도 있을 것이다.
전송영역의 자유로운 설정을 통해 영상 송신 장치(100)의 표시화면 중 전송을 원하는 영역과 전송을 원하지 않는 영역을 구분하여 원하는 영역에 한하여 전송할 수 있게 된다. 따라서, 전송을 필요로 하지 않는 영역의 크기만큼 대역폭 절감이 가능하다.
또한, 하나의 영상 송신 장치(100) 내에 복수의 수신자를 위한 자료가 모두 표시되고 있는 경우, 예를 들면 제1 수신자를 위한 자료(제1 영역)와, 제2 수신자를 위한 자료(제2 영역)와, 제1 수신자 및 제2 수신자 모두를 위한 자료(제3 영역)가 있는 경우에 전송영역을 제1 영역, 제2 영역, 제3 영역으로 각각 구분하여 3개로 전송하면, 제1 수신자는 제1 영역과 제3 영역에 대한 데이터를 수신하고 제2 수신자는 제2 영역과 제3 영역에 대한 데이터를 수신하면 되므로, 각각 자신에 적합한 영상만의 수신이 가능한 효과가 있다.
또한, 전송영역의 특성에 따라, 예를 들면 전송영역 내에 포함되는 움직임이 많은 화면(카메라 A 화면, 카메라 B 화면 등)과 움직임이 적은 화면(문서화면)을 구분하여 후술할 압축부(150)에서 압축 비트 레이트를 다르게 적용하는 등 전송영역, 즉 전송소스별로 압축 방법을 다르게 설정할 수도 있다.
또한, 전송영역의 설정시 하나의 표시화면 내에서 둘 이상의 전송영역에 중복되어 포함되는 영역이 발생할 수도 있다. 예를 들면, 카메라 A 화면의 차지하는 영역의 일부 또는 전체가 제1 전송영역과 제2 전송영역에 모두 포함될 수 있을 것이다.
영상 분할부(140)는 전송영역 설정부(130)에 의해 설정된 하나 이상의 전송영역에 상응하는 각 전송소스에 대해서 네트워크를 통해 전송하기에 적합하도록 공간적으로 및/또는 시간적으로 분할한 복수의 분할 영상 데이터를 생성한다.
여기서, 영상 분할부(140)는 각 전송소스에 대해서 동시에 분할 영상 데이터 생성을 수행하거나 순차적으로 혹은 임의의 순서로 분할 영상 데이터 생성을 수행할 수 있다.
분할 영상 데이터를 생성함에 있어서, 영상 분할부(140)는 공간적 영상 분할 혹은 시간적 영상 분할 중 어느 하나를 수행하거나 공간적 영상 분할 및 시간적 영상 분할을 함께 수행할 수 있다.
분할 영상 데이터는 후술할 영상 수신 장치에서의 합성을 위한 분할 정보를 더 포함할 수 있다. 분할 정보는 분할 영상 데이터의 헤더(header) 내에 포함되거나 메타데이터(metadata)로 함께 전송될 수 있다.
공간적 영상 분할인 경우 분할 정보는 분할 영상 데이터가 속하는 프레임에 관한 프레임 식별 정보 및 해당 프레임 내에서 해당 분할 영상 데이터의 크기, 위치, 개수에 관한 속성 정보를 포함하며, 시간적 영상 분할인 경우 분할 정보는 분할 영상 데이터의 프레임에 관한 프레임 식별 정보를 포함한다.
우선 공간적 영상 분할에 대하여 도 4를 참조하여 설명하며, 이후 시간적 영상 분할에 대하여 도 5를 참조하여 설명하기로 한다.
공간적 영상 분할은 표시화면 중 선택된 전송영역에 속하는 픽셀들을 기준으로 그 위치에 따라 복수의 공간으로 그룹화함으로써 수행된다. 이러한 공간적 영상 분할로는 분할 영상 데이터의 크기가 모두 동일하도록 한 균등 분할과, 각 분할 영상 데이터가 임의의 크기, 위치, 개수를 가지도록 한 임의 분할이 있다.
도 4을 참조하면, 하나의 전송 단위인 전송 영역(14)이 도시되어 있다. 발명의 설명과 이해의 편의를 위해 해당 전송영역(14)이 카메라 영상 데이터 혹은 영상 스트림과 같은 동화상 데이터로서, 연속된 복수의 프레임으로 구성되어 있는 경우를 가정하지만, 본 발명의 권리범위가 이에 한정되지 않음은 물론이다.
전송영역(14)은 가로 방향으로는 M개의 블록으로 분할되며, 세로 방향으로는 N개의 블록으로 분할된다. 즉, 전송영역(14)은 블록 단위로 N개의 행과 M개의 열을 가지며, 총 M X N 개의 블록으로 분할된다. 여기서, M과 N은 자연수이며, 미리 결정되어 있거나 사용자에 의해 가변될 수 있다.
각 블록은 동일한 크기를 가지며, 각 블록 내에는 동일한 수의 픽셀이 포함된다. 또한, 각 블록의 형태는 직사각형 또는 정사각형일 수 있다. 각 블록의 구분은 블록이 위치한 행을 r, 열을 c라 할 때, (r, c)로 표현될 수 있다. 즉, (1, 1)은 1행 1열에 위치한 블록이며, (n, m)은 n행 m열에 위치한 블록이다.
영상 분할부(140)는 하나의 전송영역에 해당하는 영상 데이터를 공간적으로 도 4에 도시된 바와 같이 균등 분할할 수 있다.
일 실시예에서 각 블록들((1, 1), (1, 2), …, (N, M) 블록)이 분할 영상 데이터에 해당한다.
다른 실시예에서 각 블록들((1, 1), (1, 2), …, (N, M) 블록)은 그룹화될 수 있다. 동일한 행에 위치하거나 동일한 열에 위치한 블록들에 대해서 동일한 분할 영상 데이터 그룹으로 그룹화할 수 있다. 예를 들어, 도 2를 참조하면 행을 기준으로 하는 경우, 1행의 (1, 1), (1, 2), …, (1, M) 블록은 제1 그룹(Group 1)에 포함되며, 2행의 (2, 1), (2, 2), …, (2, M) 블록은 제2 그룹(Group 2)에 포함되고, N행의 (N, 1), (N, 2), …, (N, M) 블록은 제N 그룹(Group N)에 포함될 수 있다. 또는 도시되지 않았지만 열을 기준으로 하는 경우, 1열의 (1, 1), (2, 1), …, (N, 1) 블록은 제1 그룹에 포함되며, 2열의 (1, 2), (2, 2), …, (N, 2) 블록은 제2 그룹에 포함되며, M열의 (1, M), (2, M), …, (N, M) 블록은 제M 그룹에 포함될 수 있다.
압축부(150)는 영상 분할부(140)에 의해 생성된 분할 영상 데이터(블록 자체 또는 블록들을 그룹화한 그룹)의 데이터량을 축소시키기 위하여 소정의 코덱(codec)을 사용하여 압축 작업을 수행한다. 영상 데이터의 압축에는 손실 압축이 이용된다. 영상의 경우 오디오에 비하여 정보량이 많은 관계로 실시간 전송을 위해서 영상 압축을 이용한다. 이를 위하여 정지화상의 경우 JPEG(Joint Photographic Experts Group) 등의 압축 방식을 이용하며, 동화상의 경우 MPEG(Moving Picture Experts Group) 또는 H.264 등의 압축 방식을 이용한다. 이러한 영상 데이터의 압축 방식은 당업자에게 자명한 바 상세한 설명은 생략하기로 한다.
일 실시예에서 압축부(150)는 하나가 존재하며, 분할 영상 데이터에 대하여 순차적으로 또는 임의의 순서로 압축 작업을 수행할 수 있다.
또는 다른 실시예에서 압축부(150)의 수는 영상 분할부(140)에 의해 생성된 일 프레임에 대한 분할 영상 데이터의 수와 동일하거나 비례할 수 있다. 둘 이상의 압축부(150)를 구비함으로써 일 프레임에 대한 복수의 분할 영상 데이터에 대하여 병렬 처리가 가능하며 데이터 처리 속도를 증가시키는 것이 가능하다.
예를 들어, 영상 분할부(140)에 의해 영상 데이터가 N X M 개의 블록으로 균등 분할된 경우, 압축부(150)의 수도 N X M 개가 있어 블록당 하나의 압축부(150)가 할당되어 동시에 압축 작업을 수행할 수 있다. 또는 영상 분할부(140)에 의해 영상 데이터가 N 개(행 기준) 또는 M 개(열 기준)의 그룹으로 그룹화된 경우, 압축부(150)의 수도 N 개 또는 M 개가 있어 분할 영상 데이터 그룹당 하나의 압축부(150)가 할당되어 동시에 압축 작업을 수행할 수 있다.
또한, 압축부(150)는 전송영역의 특성에 따라, 예를 들면 움직임이 많은 화면 혹은 움직임이 적은 화면 등을 포함하는지 여부에 따라 압축 비트 레이트를 다르게 하여 압축 작업을 수행할 수 있다.
압축부(150)에서 압축된 분할 영상 데이터는 LAN(Local Area Network)을 통해 전역 송신부(160)로 전송된다. 전역 송신부(160)는 압축부(150)로부터 전송된 압축 분할 영상 데이터를 인터넷(internet), 인트라넷(intranet) 등의 전역 네트워크를 통해 송신한다.
전역 송신부(160)의 수는 분할 영상 데이터의 수와 동일하거나 비례할 수 있다. 복수의 전역 송신부(160)를 구비함으로써 일 프레임에 대한 복수의 분할 영상 데이터에 대하여 병렬 처리가 가능하며, 전역 네트워크가 저대역 네트워크인 경우에도 동시에 많은 양의 데이터를 전송하는 것이 가능하다.
압축부(150)의 수가 1개인 경우 각 분할 영상 데이터에 포함된 분할 정보를 기초로 하여 각 전역 송신부(160)에 분배되어 전송된다.
압축부(150)의 수가 분할 영상 데이터의 수와 동일하거나 비례하는 경우, 각 압축부(150)에서 압축된 분할 영상 데이터에 포함된 분할 정보를 기초로 한 각 전역 송신부(160) 또는 각 압축부(150)에 대해서 미리 설정된 각 전역 송신부(160)에 분배되어 전송될 수 있다.
다음으로 시간적 공간 분할에 대하여 도 5를 참조하여 설명하기로 한다. 도 5를 참조하면, 연속된 복수의 프레임으로 구성되는 전송소스가 도시되어 있다. 여기서, 발명의 설명과 이해의 편의를 위해 해당 전송소스가 카메라 영상 데이터 혹은 영상 스트림과 같은 동화상 데이터로서, 연속된 복수의 프레임으로 구성되어 있는 경우를 가정하지만, 본 발명의 권리범위가 이에 한정되지 않음은 물론이다.
시간적 공간 분할은 전송소스를 구성하는 복수의 프레임에 대하여 일정 간격을 가지는 프레임들을 동일 그룹으로 그룹화함으로써 수행된다.
도 4에 도시된 것과 같이, 1, 5, 9, …, (4k+1) 프레임을 제1 그룹(Group 1)으로, 2, 6, 10, …, (4k+2) 프레임을 제2 그룹(Group 2)으로, 3, 7, …, (4k+3) 프레임을 제3 그룹으로, 4, 8, …, (4k+4) 프레임을 제4 그룹으로 그룹화할 수 있다. 여기서, k는 0 이상의 정수이다. 이는 하나의 예시에 불과하며, 그룹화 간격이 2 프레임 경우 홀수번째 프레임 그룹과 짝수번째 프레임 그룹으로의 그룹화되는 등 그룹화 간격은 경우에 따라 가변적일 수 있다.
압축부(150)는 영상 분할부(140)에 의해 생성된 분할 영상 데이터(복수의 프레임을 그룹화한 분할 영상 데이터 그룹 내에 포함됨)의 데이터량을 축소시키기 위하여 압축 작업을 수행한다. 영상 데이터의 압축에는 손실 압축이 이용된다. 영상의 경우 음성오디오에 비하여 정보량이 많은 관계로 실시간 전송을 위해서 영상 압축을 이용한다. 이를 위하여 정지 화상의 경우 JPEG 등의 압축 방식을 이용하며, 동화상의 경우 MPEG 또는 H.264 등의 압축 방식을 이용한다.
일 실시예에서 압축부(150)는 하나가 존재하며, 분할 영상 데이터에 대하여 순차적으로 또는 임의의 순서로 압축 작업을 수행할 수 있다.
또는 다른 실시예에서 압축부(150)의 수는 영상 분할부(140)에 의해 생성된 분할 영상 데이터 그룹의 수와 동일하거나 비례할 수 있다. 둘 이상의 압축부(150)를 구비함으로써 복수의 프레임을 그룹화한 복수의 분할 영상 데이터 그룹에 대하여 병렬 처리가 가능하며 데이터 처리 속도를 증가시키는 것이 가능하다.
예를 들어, 영상 분할부(140)에 의해 영상 데이터에 포함되는 복수의 프레임이 L(자연수) 개의 그룹으로 그룹화된 경우, 압축부(150)의 수도 L 개가 있어 그룹당 하나의 압축부(150)가 할당되어 동시에 압축 작업을 수행할 수 있다.
압축부(150)에서 압축된 분할 영상 데이터는 LAN을 통해 전역 송신부(160)로 전송된다. 전역 송신부(160)는 압축부(150)로부터 전송된 압축 분할 영상 데이터를 인터넷, 인트라넷 등의 전역 네트워크를 통해 송신한다.
전역 송신부(160)의 수는 분할 영상 데이터 그룹의 수와 동일하거나 비례할 수 있다. 복수의 전역 송신부(160)를 구비함으로써 복수의 프레임을 그룹화한 복수의 분할 영상 데이터 그룹에 대하여 병렬 처리가 가능하며, 전역 네트워크가 저대역 네트워크인 경우에도 동시에 많은 양의 데이터를 전송하는 것이 가능하다.
압축부(150)의 수가 1개인 경우 각 분할 영상 데이터에 포함된 분할 정보를 기초로 하여 각 전역 송신부(160)에 분배되어 전송된다.
압축부(150)의 수가 분할 영상 데이터 그룹의 수와 동일하거나 비례하는 경우, 각 압축부(150)에서 압축된 분할 영상 데이터에 포함된 분할 정보를 기초로 한 각 전역 송신부(160) 또는 각 압축부(150)에 대해서 미리 설정된 각 전역 송신부(160)에 분배되어 전송될 수 있다.
또 다른 실시예에서 영상 분할부(140)는 공간적 영상 분할과 시간적 영상 분할을 함께 수행할 수 있다. 복수의 프레임에 대해서 시간적 영상 분할을 수행하며, 각 프레임에 대해서는 공간적 영상 분할을 수행할 수 있다. 시간적 영상 분할 및 공간적 영상 분할 각각에 대해서는 앞서 상세히 설명하였는 바 여기서 설명은 생략하기로 한다.
영상 송신 장치(100)에 포함된 전역 송신부(160)는 필요에 따라 소정 개수 이상이 미리 구비되어 있으며, 영상 분할부(140)에서의 공간적 영상 분할 및/또는 시간적 영상 분할에 의해 생성되는 분할 영상 데이터의 수와 동일하거나 비례하는 수의 전역 송신부(160)만이 활성화되어 동작하며, 나머지 전역 송신부(160)는 비활성화되어 동작하지 않을 수 있다.
사용자 입력부(170)는 영상 수집부(110)에 의해 수집된 영상소스에 대한 배열 속성의 설정, 표시화면 내에서 전송영역의 설정, 전송영역에 대한 속성 정보의 설정 등을 위한 사용자 입력을 받는다. 사용자 입력부(170)는 키보드, 키패드, 터치스크린, 포인팅 장치 등과 같이 다양할 수 있다.
본 발명에서 영상과 오디오가 동기화되어 재생 가능한 합성 신호는 영상 데이터와 오디오 데이터로 분리 가능하다. 영상 송신 장치는 합성 신호 중 영상 데이터를 오디오 데이터와 분리한 후, 영상 데이터를 시/공간적으로 분할하여 전송함에 있어서 상응하는 오디오 데이터를 함께 전송할 수도 있다. 그리고 후술할 영상 수신 장치는 오디오 데이터와 분리되어 분할된 영상 데이터를 수신하여 시/공간적으로 정렬하여 재생함에 있어서 상응하는 오디오 데이터를 영상 전송 장치로부터 함께 수신할 수도 있다.
이상에서는 영상 데이터를 분할하여 송신하는 영상 송신 장치에 대하여 설명하였으며, 이하에서는 영상 송신 장치에서 송신된 데이터를 수신하여 압축 복원하고 합성 및 정렬하여 원래의 영상 데이터를 획득하여 재생하는 영상 수신 장치에 대하여 설명하기로 한다.
도 6은 본 발명의 일 실시예에 따른 영상 수신 장치의 구성을 나타내는 불록도이고, 도 7은 본 발명의 일 실시예에 따른 영상 송신 장치의 전역 송신부에서 영상 수신 장치의 전역 수신부로 데이터를 전송하는 과정을 나타낸 도면이다.
도 6을 참조하면, 영상 수신 장치(200)는 전역 수신부(260-1, 260-2, …, 260-n, 이하 '260'으로 통칭함), 복원부(250-1, 250-2, …, 250-n, 이하 '250'으로 통칭함), 합성부(240), 표시영역 설정부(230), 재생부(210), 사용자 입력부(270)를 포함한다. 필요에 따라 동기부(220)를 더 포함할 수 있다.
전역 수신부(260)는 영상 송신 장치(100)에서 송신한 분할 영상 데이터를 수신한다. 전역 수신부(260)의 수는 전역 송신부(160)의 수와 동일하거나 그 이상일 수 있다.
이를 위해 전역 수신부(260)는 필요에 따라 소정 개수 이상이 미리 구비되어 있으며, 설정 등에 의해 대응되는 영상 송신 장치(100) 내에 활성화된 전역 송신부(160)의 수와 동일한 수의 전역 수신부(260)만이 활성화되어 동작하며, 나머지 전역 수신부(260)는 비활성화되어 동작하지 않을 수 있다.
도 7을 참조하면, 전역 송신부(160)가 n(2 이상의 자연수) 개인 경우 전역 수신부(260)도 n 개가 있으며, 전역 송신부(160)와 전역 수신부(260)는 서로 일대일 대응된다. 즉, 하나의 전역 송신부(160)에 대해서는 타 전역 송신부가 연결되지 않은 하나의 전역 수신부(260)가 네트워크(300)를 통해 연결된다.
복원부(250)는 전역 수신부(260)에 수신된 분할 영상 데이터의 압축을 복원한다. 복원부(250)는 전역 수신부(260)와 LAN을 통해 연결되어 있을 수 있다.
복원부(250)의 수는 하나이거나 복수일 수 있다. 복원부(250)의 수가 하나인 경우, 각 전역 수신부(260)에 수신된 분할 영상 데이터는 하나의 복원부(250)에 집중되어 순차적으로 또는 임의의 순서로 복원된다. 복원부(250)의 수가 복수인 경우, 각 전역 수신부(260)마다 하나씩의 복원부(250)가 할당되어 있어 각 복원부(250)는 할당된 전역 수신부(260)에 수신된 분할 영상 데이터의 압축을 복원할 수 있다.
합성부(240)는 복원부(250)에서 압축 복원된 분할 영상 데이터를 합성하여 원래의 영상 데이터와 동일한 복원 영상 데이터를 생성한다.
합성부(240)는 분할 정보를 이용하여 분할 영상 데이터를 합성한다. 공간적 영상 합성을 수행하는 경우 분할 정보 중 프레임 식별 번호를 이용하여 동일한 프레임에 속하는 분할 영상 데이터를 검색한 후, 분할 정보 중 위치 정보를 이용하여 해당 프레임 내에서 각 분할 영상 데이터의 위치를 정렬한다. 시간적 영상 합성을 수행하는 경우 프레임 식별 번호를 이용하여 각 분할 영상 데이터를 프레임 순서대로 정렬한다.
또는 합성부(240)가 공간적 영상 합성을 수행하는 경우 위치 정보 대신에 전역 송신부(160)와 전역 수신부(260) 사이의 일대일 대응 관계를 이용하여 각 분할 영상 데이터의 위치를 정렬할 수 있다. 전역 송신부(160)와 전역 수신부(260)가 소정 위치의 분할 영상 데이터를 송수신하도록 설정되어 있는 경우 해당 전역 수신부(260)를 통해 수신된 분할 영상 데이터를 항상 일정한 위치에 정렬되도록 할 수 있다.
표시영역 설정부(230)는 합성부(240)에 의해 합성된 복원 영상 데이터에 대해서 영상 수신 장치(200)의 표시화면 내에의 정해진 위치에 정해진 크기의 표시영역을 설정하여 배치한다. 복원 영상 데이터는 영상 송신 장치(100)에서의 해당 전송영역 내에 표시되는 영상에 해당하는 것으로, 영상 수신 장치(200)의 표시영역 내에서 실시간으로 표시될 수 있다.
표시영역의 위치 및 크기 중 하나 이상은 디폴트로 정해져 있거나 사용자의 입력에 따라 가변될 수 있다. 도 1에 도시된 것과 같이 영상 수신 장치 A의 표시화면(20A)이 영상 송신 장치 A의 표시화면(10A)과 동일하도록 표시영역이 설정되거나 영상 수신 장치 B의 표시화면(20B)이 영상 송신 장치 B의 표시화면(10B)과는 좌우가 바뀌도록 표시영역이 설정될 수 있다.
재생부(210)는 표시영역 설정부(230)에 의해 설정된 표시영역 내에서 최종적으로 복원 완료된 해당 복원 영상 데이터를 재생한다. 전역 수신부(260) 또는/및 복원부(250)의 병렬 처리 과정을 통해 대용량의 영상 데이터를 실시간으로 수신하여 재생하는 것이 가능하다.
여기서, 재생부(210)는 표시영역의 위치에 상응하여 복원 영상 데이터를 재생하되, 표시영역의 크기에 맞춰 복원 영상 데이터를 확대 또는 축소하어 영상 수신 장치(200)의 표시화면에 재생할 수 있다. 복원 영상 데이터는 스크린 헤더에 원래의 크기(WIDTH, HEIGHT)가 포함되어 있지만, 표시영역의 크기에 따라 가변되어 표시영역 내에 해당 복원 영상 데이터의 전체 영상이 재생되도록 할 수 있다.
동기부(220)는 복원 영상 데이터에 상응하는 오디오 데이터가 있는 경우 활성화된다. 동기부(220)는 표시영역 설정부(230)와 재생부(210) 사이에 구비되며, 표시영역 설정부(230)에 의해 재생될 표시영역이 설정된 복원 영상 데이터와, 이에 상응하는 오디오 데이터 간의 동기화를 위한 시간 차이를 계산하고, 복원 영상 데이터 또는 오디오 데이터를 해당 시간 차이만큼 지연시켜 복원 영상 데이터와 오디오 데이터 간의 시간 어긋남을 제거한다.
사용자 입력부(270)는 표시화면 내에서 표시영역의 설정, 재생할 복원 영상 데이터의 선택 등을 위한 사용자 입력을 받는다. 사용자 입력부(270)는 키보드, 키패드, 터치스크린, 포인팅 장치 등과 같이 다양할 수 있다.
본 발명의 일 실시예에 따른 영상 수신 장치(200)는 하나 이상의 영상 송신 장치(100)로부터 분할 영상 데이터를 수신하여 표시화면에 표시할 수 있다. 즉, 하나의 표시화면에 서로 다른 영상 송신 장치(100)로부터 전송된 전송소스를 복원하여 각 전송소스에 상응하여 설정된 표시영역 내에서 표시함으로써 복수의 영상 재생이 가능하다. 따라서, 영상 수신 장치(100)를 이용하여 이러닝(e-learning), 업무협의 등의 작업 수행시 단일 영상을 재생하는 것보다 업무 효율을 향상시킬 수 있는 효과가 있다.
도 8은 본 발명의 일 실시예에 따른 영상 분할을 이용한 영상 송신 방법의 순서도이다. 이하에서 설명되는 각각의 단계는 영상 송신 장치의 각각의 내부 구성 요소에 의해 수행될 수 있으나 이해와 설명의 편의를 도모하기 위해 영상 송신 장치로 통칭하여 설명하기로 한다.
단계 S410에서, 영상 송신 장치는 카메라 영상 데이터, 영상 스트림, 매핑 데이터 등의 영상소스를 수집한다. 수집된 영상소스는 그래픽 디바이스 메모리를 통해 영상 송신 장치의 표시화면에 표시된다.
단계 S420에서, 영상 송신 장치는 표시되는 영상소스에 대하여 위치, 크기, 정렬순서 등을 포함하는 배열 속성을 설정한다. 각 영상소스가 설정된 배열 속성에 따라 영상 송신 장치의 표시화면에 표시되게 된다.
단계 S430에서, 영상 송신 장치의 표시화면에 대해서 하나 이상의 전송영역을 설정하고, 해당 전송영역에 대한 전송소스를 생성한다. 전송영역은 표시화면 전체 혹은 표시화면 내의 일부 영역일 수 있으며, 하나 이상의 카메라 화면, 카메라 화면의 일부, 영상 스트림이 재생되는 화면, 바탕화면, 문서화면, 이들의 조합 등일 수 있다.
단계 S440에서, 각 전송소스에 대해서 공간적 또는/및 시간적으로 분할한 복수의 분할 영상 데이터를 생성한다. 영상 분할을 수행하면서 추후 영상 재생시 합성을 위해 프레임 식별 정보 또는/및 위치 정보를 포함하는 분할 정보를 생성하여 해당 분할 영상 데이터에 대응시킬 수 있다. 분할 영상 데이터의 생성은 도 4 및 도 5를 참조하여 전술하였는 바 이하에서는 생략하기로 한다.
단계 S450에서, 생성된 분할 영상 데이터에 대하여 소정의 코덱을 사용하여 압축 작업을 수행하여 그 데이터량을 축소시킬 수 있다. 정지화상의 경우 JPEG 등의 압축 방식을, 동화상의 경우 MEPG, H.264 등의 압축 방식을 이용할 수 있다. 여기서, 복수의 분할 영상 데이터와 동일한 수의 압축부가 있는 경우 병렬 처리가 가능하며, 데이터 처리 속도를 증가시키는 것이 가능하다. 또는 하나의 압축부가 있는 경우 복수의 분할 영상 데이터는 순차적으로 또는 임의의 순서로 압축될 수도 있다.
단계 S460에서, 압축된 분할 영상 데이터에 대하여 복수의 전역 송신부를 통해 영상 수신 장치로 송신한다. 전역 송신부의 수는 분할 영상 데이터의 수와 동일하거나 비례할 수 있으며, 병렬 전송이 가능하여 영상 수신 장치로의 전역 네트워크가 저대역 네트워크인 경우에도 동시에 많은 양의 데이터를 전송하는 것이 가능하다.
전송소스가 영상과 오디오가 동기화되어 재생 가능한 합성 신호인 경우에 영상 데이터와 오디오 데이터로 분리될 수 있다. 따라서, 영상 송신 장치는 합성 신호 중 영상 데이터를 오디오 데이터와 분리하는 단계를 단계 S440 이전에 선수행할 수 있다.
도 9는 본 발명의 일 실시예에 따른 영상 분할을 이용한 영상 수신 방법의 순서도이다. 이하에서 설명되는 각각의 단계는 영상 수신 장치의 각각의 내부 구성 요소에 의해 수행될 수 있으나 이해와 설명의 편의를 도모하기 위해 영상 수신 장치로 통칭하여 설명하기로 한다.
단계 S510에서, 영상 수신 장치는 영상 송신 장치로부터 송신된 복수의 분할 영상 데이터를 병렬 수신한다. 여기서, 전역 수신부의 수는 전역 송신부의 수와 동일하거나 비례할 수 있으며, 대응되는 영상 송신 장치 내에 구비된 전역 송신부의 수와 동일한 것이 바람직하다. 이 경우 전역 수신부와 전역 송신부는 일대일 대응 관계에 있게 된다.
복수의 분할 영상 데이터는 복수의 전역 수신부를 통해 병렬 수신되어 영상 송신 장치로부터의 전역 네트워크가 저대역 네트워크인 경우에도 동시에 많은 양의 데이터를 수신하는 것이 가능하다.
단계 S520에서, 수신된 복수의 분할 영상 데이터를 소정의 코덱으로 압축 복원한다.
단계 S530에서, 압축 복원된 복수의 분할 영상 데이터를 원래의 전송소스, 즉 전송영역과 동일한 화면을 구성하도록 공간적 또는/및 시간적으로 합성한 복원 영상 데이터를 생성한다. 이 과정에서 단계 S440에서 생성되어 함께 전송된 분할 정보를 이용하여 합성을 수행할 수 있다.
공간적 영상 합성을 수행하는 경우 프레임 식별 번호를 이용하여 동일한 프레임에 속하는 분할 영상 데이터를 검색하여 수집하며, 위치 정보를 이용하여 해당 프레임 내에서 각 분할 영상 데이터의 위치를 정렬하는 것이 가능하다. 시간적 영상 합성을 수행하는 경우 프레임 식별 번호를 이용하여 각 분할 영상 데이터를 프레임 순서대로 정렬하는 것이 가능하다.
또는 공간적 영상 합성을 수행하는 경우 위치 정보 대신에 전역 송신부와 전역 수신부 사이의 일대일 대응 관계를 이용하여 각 분할 영상 데이터의 위치를 정렬할 수 있다. 전역 송신부와 전역 수신부가 소정 위치의 분할 영상 데이터를 송수신하도록 설정되어 있는 경우 해당 전역 수신부를 통해 수신된 분할 영상 데이터를 항상 일정한 위치에 정렬되도록 할 수 있다.
합성된 복원 영상 데이터에 상응하는 오디오 데이터가 있는 경우, 복원 영상 데이터와 오디오 데이터를 동기화시킬 수 있다. 이를 위해 복원 영상 데이터와 이에 상응하는 오디오 데이터 간의 동기화를 위한 시간 차이를 계산하고, 복원 영상 데이터 또는 오디오 데이터를 해당 시간 차이만큼 지연시켜 복원 영상 데이터와 오디오 데이터 간의 시간 어긋남을 제거한다.
단계 S540에서, 영상 수신 장치의 표시화면 내에서 복원 영상 데이터가 표시될 표시영역을 설정한다. 표시영역의 설정은 디폴트로 정해져 있거나 사용자 입력에 따라 그 위치 및 크기 중 하나 이상이 가변될 수 있다.
단계 S550에서, 설정된 표시영역의 크기에 따라 복원 영상 데이터도 확대 또는 축소되어 영상 수신 장치의 표시화면 내에서 재생됨으로써 사용자가 실시간으로 대용량 고화질 영상을 볼 수 있게 된다.
한편, 상술한 영상 송신 방법 및 영상 수신 방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 영상 송신 방법 및 영상 재생 방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체 및 캐리어 웨이브 매체를 포함한다.
본 발명의 실시예들에서 하나 이상의 구성 요소가 통합되어 구현되거나 또는 일부 구성 요소가 기능적으로 세분화되어 구현될 수 있으며, 이는 본 발명의 권리범위에 속함을 이해해야 할 것이다.
상기에서는 본 발명의 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
100: 영상 송신 장치 110: 영상 수집부
120: 영상 배열부 130: 전송영역 설정부
140: 영상 분할부 150-1, 150-2, 150-n: 압축부
160-1, 160-2, 160-n: 전역 송신부
170: 사용자 입력부 200: 영상 수신 장치
210: 재생부 220: 동기부
230:: 표시영역 설정부 240: 합성부
250-1, 250-2, 250-n: 복원부 260-1, 260-2, 260-n: 전역 수신부
270: 사용자 입력부

Claims (18)

  1. 복수의 영상소스를 수집하는 영상 수집부-여기서, 상기 영상소스는 영상 송신 장치에 연결된 카메라의 영상 데이터, 타 영상 송신 장치로부터 수신된 영상 스트림, 문서화면을 포함하는 매핑 데이터 중 하나 이상을 포함함-;
    수집된 상기 복수의 영상소스에 대해서 사용자 입력에 따라 표시화면 내에서의 위치, 크기, 정렬순서 중 하나 이상을 설정하는 영상 배열부;
    상기 영상 배열부에 의해 상기 복수의 영상소스가 배열되어 표시되는 상기 표시화면 내에 하나 이상의 전송영역을 설정하는 전송영역 설정부;
    설정된 상기 전송영역에 상응하는 하나 이상의 전송소스에 대하여 공간적 영상 분할, 시간적 영상 분할 또는 이들의 결합 중 어느 하나를 수행하여 상기 전송소스에 대한 복수의 분할 영상 데이터를 생성하는 영상 분할부;
    상기 복수의 분할 영상 데이터를 각각 압축하는 복수의 압축부; 및
    압축된 상기 분할 영상 데이터 각각을 네트워크를 통해 병렬 송신하는 복수의 전역 송신부를 포함하는 영상 송신 장치.
  2. 제1항에 있어서,
    상기 전송영역 설정부는 상기 표시화면 전체 혹은 상기 표시화면 중 일부 영역을 상기 전송영역으로 설정하며, 상기 전송영역의 일부는 서로 중복 가능한 것을 특징으로 하는 영상 송신 장치.
  3. 제1항에 있어서,
    상기 영상 분할부는 상기 전송소스에 대하여 공간적으로 M X N 개의 블록으로 분할하되,
    상기 블록 각각이 상기 분할 영상 데이터이고, 상기 M과 N은 자연수인 것을 특징으로 하는 영상 송신 장치.
  4. 제3항에 있어서,
    상기 영상 분할부는 상기 분할 영상 데이터가 속하는 프레임에 관한 프레임 식별 정보와, 상기 분할 영상 데이터에 대응되는 블록의 위치에 관한 위치 정보를 포함하는 분할 정보를 함께 생성하는 것을 특징으로 하는 영상 송신 장치.
  5. 제4항에 있어서,
    상기 복수의 전역 송신부 각각은 상기 분할 정보에 기초하여 구분되는 상기 압축된 분할 영상 데이터를 각각 병렬 송신하는 것을 특징으로 하는 영상 송신 장치.
  6. 제1항 또는 제3항에 있어서,
    상기 전송소스는 복수의 프레임으로 구성된 동화상 데이터이고,
    상기 영상 분할부는 상기 전송소스 내의 일정 간격 마다의 프레임들을 동일한 분할 영상 데이터 그룹으로 그룹화하며,
    상기 분할 영상 데이터 그룹 내에 속하는 각 프레임들이 상기 분할 영상 데이터를 구성하는 것을 특징으로 하는 영상 송신 장치.
  7. 제6항에 있어서,
    상기 영상 분할부는 상기 분할 영상 데이터의 프레임에 관한 프레임 식별 정보를 포함하는 분할 정보를 함께 생성하는 것을 특징으로 하는 영상 송신 장치.
  8. 제6항에 있어서,
    상기 복수의 전역 송신부 각각은 상기 분할 영상 데이터 그룹에 따라 구분되는 상기 압축된 분할 영상 데이터를 각각 병렬 송신하는 것을 특징으로 하는 영상 송신 장치.
  9. 제1항에 있어서,
    상기 압축부는 상기 전송소스의 특성에 따라 압축 비트 레이트를 가변시켜 압축시키는 것을 특징으로 하는 영상 송신 장치.
  10. 네트워크를 통해 하나의 전송소스에 대한 복수의 분할 영상 데이터 각각을 병렬 수신하는 복수의 전역 수신부;
    상기 분할 영상 데이터를 압축 복원하는 복원부;
    상기 압축 복원된 분할 영상 데이터를 합성하여 완전한 복원 영상 데이터를 생성하는 합성부;
    상기 복원 영상 데이터를 표시하기 위한 표시영역의 위치 및 크기 중 하나 이상을 설정하는 표시영역 설정부; 및
    상기 표시영역 내에서 상기 복원 영상 데이터를 재생하는 재생부를 포함하되,
    상기 분할 영상 데이터는 상기 하나의 전송소스가 공간적 영상 분할, 시간적 영상 분할 및 이들의 결합 중 하나의 방법으로 영상 분할된 것을 특징으로 하는 영상 수신 장치.
  11. 제10항에 있어서,
    상기 재생부는 상기 표시영역 설정부에 의해 설정된 상기 표시영역의 위치에 대하여 상기 표시영역의 크기에 상응하도록 상기 복원 영상 데이터를 확대 혹은 축소하여 재생하는 것을 특징으로 하는 영상 수신 장치.
  12. 제10항에 있어서,
    상기 복원 영상 데이터와 상응하는 오디오 데이터를 동기화하는 동기부를 더 포함하되,
    상기 재생부는 상기 복원 영상 데이터 및 상기 동기화된 오디오 데이터를 함께 재생하는 것을 특징으로 하는 영상 수신 장치.
  13. 제10항에 있어서,
    상기 복수의 분할 영상 데이터가 일 프레임에 대하여 공간적으로 M X N 개로 분할된 블록이고, 상기 M과 N은 자연수인 경우,
    상기 복수의 분할 영상 데이터는 상기 분할 영상 데이터가 속하는 프레임에 관한 프레임 식별 정보와, 상기 분할 영상 데이터에 대응되는 블록의 위치에 관한 위치 정보를 포함하는 분할 정보와 함께 수신되며,
    상기 합성부는 상기 프레임 식별 정보 및 상기 위치 정보를 기초로 하여 상기 복수의 분할 영상 데이터를 하나의 프레임 내에 정렬하는 것을 특징으로 하는 영상 수신 장치.
  14. 제10항에 있어서,
    상기 영상 데이터가 복수의 프레임으로 구성된 동화상 데이터인 경우,
    상기 분할 영상 데이터는 상기 영상 데이터 내의 프레임들 중 동일한 분할 영상 데이터 그룹으로 그룹화되는 일정 간격 마다의 프레임 중 하나이며,
    상기 복수의 분할 영상 데이터는 상기 분할 영상 데이터의 프레임에 관한 프레임 식별 정보를 포함하는 분할 정보와 함께 수신되며,
    상기 합성부는 상기 프레임 식별 정보를 기초로 하여 상기 복수의 분할 영상 데이터를 프레임 순서대로 정렬하는 것을 특징으로 하는 영상 수신 장치.
  15. 사용자 입력에 따라 상기 영상소스의 위치, 크기, 정렬순서 중 하나 이상이 설정된 복수의 영상소스를 표시하는 표시화면 내에 하나 이상의 전송영역이 설정되고, 상기 전송영역 각각에 상응하는 하나 이상의 전송소스에 대하여 공간적 영상 분할, 시간적 영상 분할 또는 이들의 결합 중 어느 하나를 수행하여 복수의 분할 영상 데이터로 분할하여 병렬 압축 전송하는 하나 이상의 영상 송신 장치; 및
    상기 하나 이상의 영상 송신 장치로부터 상기 복수의 분할 영상 데이터를 병렬 수신하여 복원하고, 표시화면 내에서 위치 및 크기 중 하나 이상이 설정된 하나 이상의 표시영역 내에서 상기 복원된 전송소스 각각을 재생하는 하나 이상의 영상 수신 장치를 포함하는 영상 전송 시스템.
  16. 제15항에 있어서,
    서로 대응되는 상기 영상 송신 장치와 상기 영상 수신 장치는 서로 일대일 대응되는 동일 개수의 전역 송신부와 전역 수신부를 각각 포함하는 것을 특징으로 하는 영상 전송 시스템.
  17. 복수의 영상소스를 수집하는 단계-여기서, 상기 영상소스는 영상 송신 장치에 연결된 카메라의 영상 데이터, 타 영상 송신 장치로부터 수신된 영상 스트림, 문서화면을 포함하는 매핑 데이터 중 하나 이상을 포함함-;
    수집된 상기 복수의 영상소스에 대해서 사용자 입력에 따라 표시화면 내에서의 위치, 크기, 정렬순서 중 하나 이상을 설정하는 단계;
    상기 영상소스가 배열되어 표시되는 상기 표시화면 내에 하나 이상의 전송영역을 설정하는 단계;
    설정된 상기 전송영역에 상응하는 하나 이상의 전송소스에 대하여 공간적 영상 분할, 시간적 영상 분할 또는 이들의 결합 중 어느 하나를 수행하여 복수의 분할 영상 데이터를 생성하는 단계;
    상기 복수의 분할 영상 데이터를 압축하는 단계; 및
    압축된 상기 분할 영상 데이터 각각을 네트워크를 통해 병렬 송신하는 단계를 포함하는 영상 송신 방법.
  18. 네트워크를 통해 하나의 전송소스에 대한 복수의 분할 영상 데이터 각각을 병렬 수신하는 단계;
    상기 분할 영상 데이터를 압축 복원하는 단계;
    상기 압축 복원된 분할 영상 데이터를 합성하여 완전한 복원 영상 데이터를 생성하는 단계;
    상기 복원 영상 데이터를 표시하기 위한 표시영역의 위치 및 크기 중 하나 이상을 설정하는 단계; 및
    상기 표시영역 내에서 상기 복원 영상 데이터를 재생하는 단계를 포함하되,
    상기 분할 영상 데이터는 하나의 전송소스가 공간적 영상 분할, 시간적 영상 분할 및 이들의 결합 중 하나의 방법으로 영상 분할된 것을 특징으로 하는 영상 수신 방법.
KR1020100042382A 2010-05-06 2010-05-06 영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법 KR20110068784A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100042382A KR20110068784A (ko) 2010-05-06 2010-05-06 영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100042382A KR20110068784A (ko) 2010-05-06 2010-05-06 영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020090124423 Division 2009-12-15

Publications (1)

Publication Number Publication Date
KR20110068784A true KR20110068784A (ko) 2011-06-22

Family

ID=44400962

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100042382A KR20110068784A (ko) 2010-05-06 2010-05-06 영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법

Country Status (1)

Country Link
KR (1) KR20110068784A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018030658A1 (ko) * 2016-08-11 2018-02-15 이노뎁 주식회사 재구조화 영상 처리를 통한 cctv 저장영상의 이동객체 검출 방법
KR20220109520A (ko) * 2021-01-28 2022-08-05 주식회사 앤다스 이벤트 영상 제공 시스템, 이벤트 영상 제공 방법 및 기록 매체에 저장된 프로그램

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018030658A1 (ko) * 2016-08-11 2018-02-15 이노뎁 주식회사 재구조화 영상 처리를 통한 cctv 저장영상의 이동객체 검출 방법
US10303952B2 (en) 2016-08-11 2019-05-28 Innodep Co., Ltd. Method of detecting a moving object by reconstructive image processing
KR20220109520A (ko) * 2021-01-28 2022-08-05 주식회사 앤다스 이벤트 영상 제공 시스템, 이벤트 영상 제공 방법 및 기록 매체에 저장된 프로그램

Similar Documents

Publication Publication Date Title
JP5979499B2 (ja) 再生装置、再生方法、集積回路、放送システム、及び放送方法
JP6493765B2 (ja) 情報処理装置および方法
CN1306796C (zh) 解码器装置和利用它的接收机
US8681859B2 (en) Systems and methods for multi-stream image processing
JP3617573B2 (ja) フォーマット変換回路並びに該フォーマット変換回路を備えたテレビジョン受像機
JP4974984B2 (ja) 映像記録装置及び方法
US8639046B2 (en) Method and system for scalable multi-user interactive visualization
US20030086003A1 (en) Video data processing apparatus and method, data distributing apparatus and method, data receiving apparatus and method, storage medium, and computer program
KR101528863B1 (ko) 파노라마 영상의 스트리밍 서비스 제공 시스템에서 타일링 영상 동기화 방법
KR101416062B1 (ko) 무선 통신 시스템에서의 데이터 전송률 조절 방법 및 장치
US20110044664A1 (en) Three-dimensional video conversion recording device, three-dimensional video conversion recording method, recording medium, three-dimensional video conversion device, and three-dimensional video transmission device
US8724912B2 (en) Method, apparatus, and program for compressing images, and method, apparatus, and program for decompressing images
JP2014146924A (ja) ソース機器、シンク機器、通信システムおよび画像送信方法
US20200084516A1 (en) Device and method for processing high-definition 360-degree vr image
US20110069225A1 (en) Method and system for transmitting and processing high definition digital video signals
Sakaida et al. The super hi-vision codec
KR20110068784A (ko) 영상 송신 장치, 영상 수신 장치, 이를 포함하는 영상 전송 시스템과 그 방법
KR20120019754A (ko) 초고화질 영상 모듈을 이용한 디지털 방송수신 시스템
JP2013518458A (ja) デジタルビデオストリーム内の情報及び／又はアプリケーションデータを転送する方法、及び、ビデオストリームを生成及び再生するための関連装置
JP2004040351A (ja) 画像配信システム及び画像配信再生システム
KR100970992B1 (ko) 그래픽스 가속을 통한 고화질 영상의 스테레오스코픽 다중화 및 저비율 압축 전송 장치 및 그 방법과 그 프로그램 소스를 저장한 기록매체
KR20070077381A (ko) 고해상도 화면 분할장치
JP3928485B2 (ja) 映像信号表示装置
JP2013247582A (ja) 映像合成方法、映像記録方法、映像合成装置、映像記録装置、映像表示システム
KR100952309B1 (ko) 고화질 영상방송 방법 및 그 시스템

Legal Events

Date Code Title Description
A107 Divisional application of patent
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid