KR20070050575A - 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치및 그 방법 - Google Patents

Abstract

1. 청구범위에 기재된 발명이 속한 기술분야

본 발명은 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치 및 그 방법에 관한 것임.

2. 발명이 해결하려고 하는 기술적 과제

본 발명은 복수 개의 다시점 영상을 영상 간의 상호 연관성과 위치 관계에 따라 단일의 대영상으로 변환함으로써, 종래의 영상 재상 장치(예 : 셋탑 박스)를 그대로 활용하면서도 복수 개의 다시점 영상을 한번에 표시할 수 있도록 하기 위한, 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치 및 그 방법을 제공하는데 그 목적이 있음.

3. 발명의 해결방법의 요지

본 발명은, 영상 변환 장치에 있어서, 복수 개의 다시점 영상을 획득하기 위한 다시점 영상 획득 수단; 상기 다시점 영상 획득 수단에서 획득한 복수 개의 다시점 영상에 대하여 전처리를 수행하기 위한 다시점 영상 처리 수단; 상기 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 입력받기 위한 입력 수단; 및 상기 다시점 영상 처리 수단에서 전처리한 복수 개의 다시점 영상에 대하여 상기 입력 수단으로부터 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성하기 위한 대영상 생성 수단을 포함함.

4. 발명의 중요한 용도

본 발명은 영상 처리 기술 분야 등에 이용됨.

복수 개의 다시점 영상, 단일의 대영상, 변환, 상호 연관성, 위치 관계, 셋탑 박스

Description

복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치 및 그 방법{Apparatus and Method for Converting Plurality of Multi-View Image Into Single Big Image}

도 1은 본 발명에 따른 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치의 일실시예 구성도,

도 2는 본 발명에 따른 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 방법에 대한 일실시예 흐름도,

도 3은 본 발명에 의한 대영상이 재생되는 단말기 측의 일예시도,

도 4는 본 발명에 의해 변환된 대영상의 비디오 시퀀스의 일예시도이다.

* 도면의 주요 부분에 대한 부호의 설명

10 : 다시점 영상 획득부 20 : 다시점 영상 처리부

30 : 입력부 40 : 대영상 생성부

50 : 전송망 60 : 디스플레이부

본 발명은 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 복수 개의 다시점 영상을 영상 간의 상호 연관성과 위치 관계에 따라 단일의 대영상으로 변환함으로써, 종래의 영상 재상 장치(예 : 셋탑 박스)를 그대로 활용하면서도 복수 개의 다시점 영상을 한번에 표시할 수 있도록 하기 위한, 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치 및 그 방법에 관한 것이다.

종래의 복수화면 영상신호 표시장치(특허출원번호 : 10-1996-0038783)는 하나의 표시장치에 여러 가지의 영상신호를 평면적으로 화면 분할하거나, 겹침 상태에서 화면 분할하여 표시시키는 기기에 관한 것으로, 화면 분할 수가 증가한 경우에도 조작 기기의 조작성을 현저하게 저하시키는 일이 없고, 기기의 크기도 종래와 변함이 없는 사이즈로 실현 가능하게 하는 영상신호 표시장치를 제공하기 위하여, 영상표시수단에 의해 표시된 복수의 화면의 일부를 선택하는 화면선택수단을 형성하고, 이 선택된 화면을 특수표시하는 동시에, 이 특수표시된 화면의 조정을 행할 수 있는 것을 특징으로 한다.

그리고 종래의 다수 데이터의 통합영상 디스플레이 시스템 및 방법(특허출원번호 : 10-2000-0059645)은 복수 개의 개별 데이터를 결합하여 하나의 통합 영상 데이터를 생성하는 영상 결합 수단과, 상기 통합 영상 데이터가 행 방향 또는 열 방향 중 어느 하나의 방향으로 분할되어, 최소한 두 부분 이상의 하위 부분으로 분 할되고, 상기 분할된 하위 부분들을 저장하는 저장 수단과, 상기 저장 수단에 저장된 데이터를 독출하여 임시 기록하되, 상기 임시 기록된 데이터가 소정의 크기 단위를 채우면 입력된 데이터를 모두 출력하는 제1 임시 기록 수단을 포함하여, 복수 개의 개별 데이터를 하나의 영상 화면으로 제공함으로써, 사용자가 손쉽게 정보를 검색할 수 있도록 한다.

상기와 같은 종래 기술은 복수 개의 개별 데이터를 결합할 때, 그 시점이 모두 동일한 경우에 적용되는 기술로서, 복수 개의 개별 데이터마다 그 시점이 다른 경우에는 적용이 불가능하다.

이처럼, 현재에는 다시점 영상을 셋탑 박스가 설치된 플레이어에서 재생할 때, 여러 개의 다시점 영상을 재생할 수 없다. 왜냐하면, 현재의 셋탑 박스에는 비디오 복호화 칩이 하나가 설치되어 있으므로, 복수 개의 다시점 영상을 재생하는 것이 불가능하다.

본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로, 복수 개의 다시점 영상을 영상 간의 상호 연관성과 위치 관계에 따라 단일의 대영상으로 변환함으로써, 종래의 영상 재상 장치(예 : 셋탑 박스)를 그대로 활용하면서도 복수 개의 다시점 영상을 한번에 표시할 수 있도록 하기 위한, 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치 및 그 방법을 제공하는데 그 목적이 있다.

본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.

상기 목적을 달성하기 위한 본 발명의 장치는, 영상 변환 장치에 있어서, 복수 개의 다시점 영상을 획득하기 위한 다시점 영상 획득 수단; 상기 다시점 영상 획득 수단에서 획득한 복수 개의 다시점 영상에 대하여 전처리를 수행하기 위한 다시점 영상 처리 수단; 상기 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 입력받기 위한 입력 수단; 및 상기 다시점 영상 처리 수단에서 전처리한 복수 개의 다시점 영상에 대하여 상기 입력 수단으로부터 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성하기 위한 대영상 생성 수단을 포함한다.

한편, 상기 목적을 달성하기 위한 본 발명의 방법은, 영상 변환 방법에 있어서, 복수 개의 다시점 영상을 획득하는 단계; 상기 획득한 복수 개의 다시점 영상에 대하여 전처리를 수행하는 단계; 상기 전처리한 복수 개의 다시점 영상을 각 영상 데이터별로 입력받는 단계; 상기 복수 개의 다시점 영상 데이터 상호 간의 연관성과 위치 관계를 입력받는 단계; 및 상기 입력받은 복수 개의 다시점 영상에, 상기 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성하는 단계를 포함한다.

또한 상기 본 발명의 방법은, 상기 전처리되어 입력되는 각 개별 영상 데이터 파일을 모두 동일한 파일 형식으로 변환하는 단계를 더 포함한다.

상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.

도 1은 본 발명에 따른 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치의 일실시예 구성도이다.

도 1에 도시된 바와 같이, 본 발명에 따른 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치는, 복수 개의 다시점 영상을 획득하기 위한 다시점 영상 획득부(10), 상기 다시점 영상 획득부(10)에서 획득한 복수 개의 다시점 영상에 대하여 카메라 보정, 카메라 모션 추출, 객체 추출 등과 같은 전처리 과정을 수행하기 위한 다시점 영상 처리부(20), 상기 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 입력받기 위한 입력부(30), 및 상기 다시점 영상 처리부(20)에서 전처리한 복수 개의 다시점 영상에 대하여 상기 입력부(30)로부터 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성하기 위한 대영상 생성부(40)를 포함한다.

상기 다시점 영상 획득부(10)는 단일의 카메라를 이동시키면서 사용하거나 복수 개의 카메라를 사용하여 복수 개의 다시점 영상을 획득한다.

그리고 상기 다시점 영상 처리부(20)는 상기 다시점 영상 획득부(10)에 의해 획득된 복수 개의 다시점 영상들에 대해서 카메라 보정, 카메라 모션 추출, 객체 추출 등과 같은 전처리 과정을 수행한다.

그리고 입력부(30)는 상기 복수 개의 다시점 영상 상호 간의 연관성을 입력받고, 상기 복수 개의 다시점 영상 상호 간의 위치 관계를 입력받는다. 여기서, 영상 상호 간의 연관성은 영상 상호 간의 상하좌우 관계로서, 예를 들어 소정의 객체를 복수 개의 카메라를 사용하여 촬영할 때에 1번영상이 a 카메라에 의해 촬영된 것이고, 2번 영상이 a 카메라의 아래쪽에 배치된 카메라에 의해 촬영된 영상이라면, 1번 영상과 2번 영상의 관계는 상하 관계로 정의되어 입력된다. 그리고 위치 관계는 각 개별 영상 데이터가 상기 생성한 대영상 비디오 시권스 내에서 차지하는 위치 정보를 말한다. 예를 들어, 상기 1번 영상이 도 3의 대영상 화면에서 V1의 위치에 배열되고, 상기 2번 영상이 도 3의 V4의 위치에 배열될 때, 이러한 위치 정보를 각각의 영상에 대해서 규정하여 입력한다.

그리고 대영상 생성부(40)는 상기 다시점 영상 처리부(20)에 의해 어느 정도 전처리된 복수 개의 다시점 영상을 입력받고 상기 입력부(30)로부터 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 입력받아, 상기 복수 개의 다시점 영상에 상기 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성한 후에, 전송망(50)을 통하여 디스플레이부(60)로 전달하여 디스플레이되도록 한다. 이때, 상기 대영상 생성부(40)는 먼저 상기 복수 개의 다시점 영상의 각 개별 영상 데이터 파일을 모두 동일한 파일 형식으로 변환하는 기능을 더 수행할 수도 있다. 이에 대한 상세 설명은 후술하기로 한다.

도 4는 본 발명에 의해 변환된 대영상의 비디오 시퀀스의 일예시도로서, 상기 대영상 생성부(40)에 의하여 생성된 대영상 비디오 시퀀스(400)의 일예를 나타내고 있다. 즉, 획득한 복수 개의 다시점 영상에 관한 각각의 영상 데이터(a1, a2, a3, a4, a5, a6)를 연결하여 하나의 대영상 비디오 시퀀스로 구성한다. 이때, 상기 생성된 대영상 비디오 시퀀스 내에는 복수 개의 다시점 영상 각각의 정보, 그리고 각 영상 간의 연관성에 대한 정보, 각 영상이 대영상 비디오 재생시 화면상의 어느 위치에 배치되어야 하는지 여부에 대한 위치 정보 등이 포함되는 것이 바람직하다.

예를 들어, 상기 영상 데이터 a1 내지 a6이 총 6대의 카메라를 통해 획득한 영상이라면 이 각각의 영상 데이터를 수집하여, 만약 파일 형식이 다른 영상 데이터가 있다면 이를 단일화하는 작업 등을 거쳐서 비디오 데이터를 서로 연결하되, 대영상으로 구현하기 위한 정보 즉, 영상들 사이의 연관성, 그리고 대영상 내에서의 위치 정보 등을 포함시켜서 하나의 대영상 파일로 구성한다.

그리고 전송망(50)은 대영상 비디오 시퀀스의 전송이 가능한 것이라면 어느 통신망이든 사용 가능하다. 그리고 디스플레이부(60)는 텔레비젼이나 컴퓨터 모니터 등이 될 수 있는데, 셋탑 박스가 설치되어 있는 것이 바람직하다.

도 2는 본 발명에 따른 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 방법에 대한 일실시예 흐름도이다.

먼저, 다시점 영상 획득부(10)가 복수 개의 다시점 영상을 획득한다(210). 이때, 단일의 카메라를 이동시키거나 복수 개의 카메라를 이용하여 복수 개의 다시점 영상을 획득한다.

이후, 다시점 영상 처리부(20)가 다시점 영상 획득부(10)에 의해 획득된 복수 개의 다시점 영상에 대하여 카메라 보정, 카메라 모션 추출, 객체 추출 등과 같은 전처리 과정을 수행한다(220).

이후, 대영상 생성부(40)가 상기 전처리한 복수 개의 다시점 영상을 각 영상 데이터별로 입력받는다(230). 이때, 상기 다시점 영상 처리부(20)로부터 상기 대영상 생성부(40)가 입력받는 개별 영상 데이터는, 상기 다시점 영상 처리부(20)에 의해서 전처리된 다시점 비디오 영상 각각의 데이터이다.

이후, 상기 대영상 생성부(40)가 입력부(30)를 통하여 상기 복수 개의 다시점 영상 데이터 상호 간의 연관성을 입력받는다(240). 그리고 상기 대영상 생성부(40)가 상기 복수 개의 다시점 영상 데이터 상호 간의 위치 관계를 입력받는다(250). 즉, 상기 연관성을 가지는 다시점 영상들이, 최종 변환되는 대영상 데이터에서 어떤 위치를 가지게 될지를 입력받는다.

이후, 상기 대영상 생성부(40)가 각 개별 영상 데이터 파일을 모두 동일한 파일 형식으로 변환한다(260). 이러한 파일 형식 변환 과정(260)은 대영상 비디오 시퀀스를 디스플레이부(50)에서 재생하기 위하여 필요하다. 즉, 하나의 대영상 비디오 시퀀스 내에 여러 형식의 다시점 영상 데이터(정보)가 포함되어 있다면 재생이 어렵기 때문이다. 그러나 다시점 영상 처리부(20)에서 전처리된 복수 개의 다시 점 영상 데이터가 모두 같은 단일의 형식이라면 상기 파일 형식 변환 과정(260)은 불필요하므로 생략해도 된다.

이후, 상기 대영상 생성부(40)가 상기 다시점 영상 처리부(20)에 의해 어느 정도 전처리된 복수 개의 다시점 영상에, 상기 입력부(30)를 통하여 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성한다(270).

이후에, 상기 생성된 대영상 비디오 시퀀스는 전송망(50)을 통하여 디스플레이부(60)로 전달되어 디스플레이된다.

도 3은 본 발명에 의한 대영상이 재생되는 단말기 측의 일예시도로서, 전술한 과정을 거쳐서 생성된 대용량 비디오 시퀀스가 입력되어 재생되는 셋탑 박스(55)와 디스플레이부(50)를 타나내고 있다.

즉, 대영상 비디오 시퀀스를 입력받은 셋탑 박스(55)는 이를 처리하여 디스플레이부(50)의 화면에 표시하게 해 주는데, 도 3의 예에서는 여섯 개의 다시점 영상이 하나의 대영상으로 디스플레이부(50)의 화면에 표시되는 예를 나타내고 있다. 도 4에 도시된 바와 같은 대영상 비디오 시퀀스(400)의 다시점 영상 정보 a1 내지 a6은 각각 도 3에 표시된 영상 V1 내지 V6를 표시하게 해 준다.

이렇게 표시된 영상을 시청하는 시청자는 컨트롤러의 조작을 통하여 영상의 선택 등이 가능해 질 수 있다.

상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 롬, 램, 플로피 디스크, 하드 디스크, 광자기 디 스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.

상기와 같은 본 발명은, 복수 개의 다시점 영상을 영상 간의 상호 연관성과 위치 관계에 따라 단일의 대영상(하나의 대영상 비디오 시퀀스)으로 변환함으로써, 종래의 영상 재상 장치(예 : 셋탑 박스)를 그대로 활용하면서도 복수 개의 다시점 영상을 하나의 영상으로 표시할 수 있도록 할 수 있는 효과가 있다.

Claims (6)

1. 영상 변환 장치에 있어서,

   복수 개의 다시점 영상을 획득하기 위한 다시점 영상 획득 수단;

   상기 다시점 영상 획득 수단에서 획득한 복수 개의 다시점 영상에 대하여 전처리를 수행하기 위한 다시점 영상 처리 수단;

   상기 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 입력받기 위한 입력 수단; 및

   상기 다시점 영상 처리 수단에서 전처리한 복수 개의 다시점 영상에 대하여 상기 입력 수단으로부터 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성하기 위한 대영상 생성 수단

   을 포함하는 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치.
2. 제 1 항에 있어서,

   상기 대영상 생성 수단은,

   상기 다시점 영상 처리 수단에서 전처리한 복수 개의 다시점 영상의 각 개별 영상 데이터 파일을 모두 동일한 파일 형식으로 변환하는 기능을 더 수행하는 것을 특징으로 하는 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치.
3. 제 1 항 또는 제 2 항에 있어서,

   상기 대영상 생성 수단에서 생성한 대영상 비디오 시퀀스는,

   복수 개의 다시점 영상 각각의 정보, 각 영상 간의 연관성에 대한 정보, 및 각 영상이 대영상 비디오 재생시 화면상의 어느 위치에 배치되어야 하는지 여부에 대한 위치 정보를 포함하는 것을 특징으로 하는 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치.
4. 영상 변환 방법에 있어서,

   복수 개의 다시점 영상을 획득하는 단계;

   상기 획득한 복수 개의 다시점 영상에 대하여 전처리를 수행하는 단계;

   상기 전처리한 복수 개의 다시점 영상을 각 영상 데이터별로 입력받는 단계;

   상기 복수 개의 다시점 영상 데이터 상호 간의 연관성과 위치 관계를 입력받는 단계; 및

   상기 입력받은 복수 개의 다시점 영상에, 상기 입력받은 복수 개의 다시점 영상 상호 간의 연관성과 위치 관계를 적용하여 대영상 비디오 시퀀스를 생성하는 단계

   를 포함하는 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 방법.
5. 제 4 항에 있어서,

   상기 전처리되어 입력되는 각 개별 영상 데이터 파일을 모두 동일한 파일 형식으로 변환하는 단계

   를 더 포함하는 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 방법.
6. 제 4 항 또는 제 5 항에 있어서,

   상기 생성한 대영상 비디오 시퀀스는,

   복수 개의 다시점 영상 각각의 정보, 각 영상 간의 연관성에 대한 정보, 및 각 영상이 대영상 비디오 재생시 화면상의 어느 위치에 배치되어야 하는지 여부에 대한 위치 정보를 포함하는 것을 특징으로 하는 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 방법.

Images