KR101471927B1 - 멀티카메라 및 이를 이용한 영상표시장치와 그 방법 - Google Patents

멀티카메라 및 이를 이용한 영상표시장치와 그 방법 Download PDF

Info

Publication number
KR101471927B1
KR101471927B1 KR1020130110571A KR20130110571A KR101471927B1 KR 101471927 B1 KR101471927 B1 KR 101471927B1 KR 1020130110571 A KR1020130110571 A KR 1020130110571A KR 20130110571 A KR20130110571 A KR 20130110571A KR 101471927 B1 KR101471927 B1 KR 101471927B1
Authority
KR
South Korea
Prior art keywords
image
photographed
output reference
images
output
Prior art date
Application number
KR1020130110571A
Other languages
English (en)
Inventor
우석 계
Original Assignee
우석 계
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 우석 계 filed Critical 우석 계
Priority to KR1020130110571A priority Critical patent/KR101471927B1/ko
Application granted granted Critical
Publication of KR101471927B1 publication Critical patent/KR101471927B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

멀티카메라 및 이를 이용한 영상표시장치와 그 방법이 개시된다. 멀티카메라를 통해 다양한 촬영 방향에 대한 영상을 획득하고, 다양한 방향에 대한 영상들 중 사용자의 머리 방향에 해당하는 영상을 자연스럽게 변경하여 선택 제공함으로써 입체적인 공간 영상을 제공할 수 있다.

Description

멀티카메라 및 이를 이용한 영상표시장치와 그 방법{Multi-camera, display apparatus and method using the multi-camera}
본 발명은 다수 방향의 영상을 동시에 획득하는 멀티카메라와 이를 이용한 화면 표시장치 및 그 방법에 관한 것이다.
종래 사진이나 영화 등은 한 방향에서 촬영한 이미지나 동영상을 사용자에게 수동적으로 제공한다. 여러 장의 사진을 겹쳐 찍은 후 이를 합쳐 하나의 사진으로 만들어 좀 더 넓은 화면을 제공하는 파노라마 영상이 있으나 여러 방향에서 찍은 사진을 합성하기 위한 별도의 과정이 필요할 뿐만 아니라 각도가 변화면서 가까운 곳과 먼 곳의 사물의 위치와 각도가 변하는 영상을 표현하는 것에 한계가 있다. 또한 사진을 구 형태로 만들어 표현해야 하므로 너무 심한 렌즈 굴곡으로 인한 현실감이 떨어져 사진이나 동영상으로 제공하는 데에 일정한 한계가 있다.
특허공개공보 제2013-0059658호 특허공개공보 제2013-0055967호
본 발명이 이루고자 하는 기술적 과제는, 사람의 머리 회전시 변화되는 시선이 바라보는 사물의 위치와 각도가 다름을 표현하기 위해 머리 회전시 안구의 위치와 유사한 다수의 촬상소자의 배치를 통해 여러 방향의 영상을 동시에 촬영할 수 있는 멀티카메라를 제공하는 데 있다.
본 발명이 이루고자 하는 또 다른 기술적 과제는, 멀티카메라를 통해 획득한 다수 방향의 영상들 중 사용자의 머리 회전 등의 입력 방향 변화에 해당하는 영상을 선택하여 보여주는 영상표시장치 및 그 방법을 제공하는 데 있다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 멀티카메라의 일 실시 예는, 구형의 틀; 상기 구형의 틀에서 촬영 방향이 방사형으로 배치된 적어도 둘 이상의 촬상소자; 및 상기 적어도 둘 이상의 촬상소자의 초점을 제어하고, 상기 적어도 둘 이상의 촬상소자를 통해 촬영된 영상을 각 촬상소자의 고유식별정보와 맵핑하여 저장하거나 전송하는 제어부;를 포함한다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 영상표시장치의 일 실시예는, 적어도 둘 이상의 촬상소자에서 촬영된 적어도 둘 이상의 촬영 영상을 수신하는 영상수신부; 상기 수신한 적어도 둘 이상의 촬영 영상을 저장하는 저장부; 사용자 입력수단을 통해 방향정보를 입력받는 방향파악부; 이웃하는 촬상소자의 촬영 영상들이 서로 겹쳐지는 부분의 면적을 기준으로 출력화면크기를 정의하고, 상기 적어도 둘 이상의 촬영 영상 중 하나를 출력기준영상으로 정의하고, 상기 출력기준영상의 일정 위치에서 상기 정의된 출력화면크기에 해당하는 영역을 출력기준영역으로 설정하는 기준설정부; 상기 출력기준영상의 상기 출력기준영역을 사용자에게 제공하기 위해 추출하는 영상출력부; 및 상기 방향정보에 따라 상기 출력기준영역을 상하 또는 좌우로 이동시키고, 상기 출력기준영역이 이웃하는 촬영 영상의 서로 겹쳐지는 부분을 벗어나는 경우 상기 출력기준영상을 이웃하는 촬영 영상으로 변경하는 영상선택부;를 포함한다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 영상표시방법의 일 실시예는, 이웃하는 촬상소자의 촬영 영상에서 서로 겹쳐지는 부분의 면적을 기준으로 출력화면크기를 정의하고, 상기 적어도 둘 이상의 촬영 영상 중 하나를 출력기준영상으로 정의하고, 상기 출력기준영상의 일정 위치에서의 출력화면크기에 해당하는 영역을 출력기준영역으로 설정하는 단계; 적어도 둘 이상의 촬상소자에서 촬영된 적어도 둘 이상의 촬영 영상을 저장하는 단계; 사용자 입력수단을 통해 방향정보를 입력받는 단계; 상기 방향정보에 따라 상기 출력기준영역을 상하 또는 좌우로 이동시킬 때 상기 출력기준영역이 이웃하는 촬상소자의 촬영 영상에서 서로 겹쳐지는 부분을 벗어나는지 파악하는 단계; 상기 서로 겹쳐지는 부분을 벗어나면, 상기 출력기준영상을 이웃하는 촬영 영상으로 변경하는 단계; 및 출력기준영상의 출력기준영역을 추출하여 사용자에게 제공하는 단계;를 포함한다.
본 발명에 따르면, 사람의 머리크기 정도의 구형 틀에 머리 회전에 따라 변화하는 촬영 방향을 가진 다수의 촬상소자를 배치한 멀티카메라를 통해 구에 붙어있는 렌즈 들의 위치와 각도의 변화에 해당하는 최적의 영상을 촬영하고 제공할 수 있다. 사용자는 일반 표시장치를 통해 표시되는 단순한 평면적인 영상이 아닌 자신의 머리 방향에 위치된 렌즈들에 해당하는 바뀐 각도에서 입수되는 영상을 바탕으로 가까운 곳의 사물과 먼 거리의 사물이 다르게 위치와 각도가 바뀌는 모습을 표현할 수 있어 입체적인 공간 영상을 보듯 그때의 시공간에 들어온 것 같은 효과를 받을 수 있다.
도 1은 본 발명에 따른 멀티카메라의 일 예를 도시한 도면,
도 2는 본 발명에 따라 평면의 360도를 촬영할 수 있는 멀티카메라의 일 예를 도시한 도면,
도 3은 본 발명에 따라 공간 전체를 촬영할 수 있는 멀티카메라의 일 예를 도시한 도면,
도 4는 본 발명에 멀티카메라의 일 실시예의 구성을 도시한 도면,
도 5는 본 발명에 따른 영상표시장치의 일 실시예의 구성을 도시한 도면,
도 6은 도 2의 멀티카메라를 통해 촬영한 영상의 일 예를 도시한 도면,
도 7은 도 3의 멀티카메라를 통해 촬영한 영상의 일 예를 도시한 도면,
도 8은 본 발명에 따른 멀티카메라의 촬상소자 배치 정보 표시의 일 예를 도시한 도면,
도 9는 본 발명에 따른 멀티카메라의 촬영 영상의 저장형태의 일 예를 도시한 도면, 그리고,
도 10은 본 발명에 따른 영상표시방법의 일 실시예의 흐름을 도시한 도면이다.
이하에서, 첨부된 도면들을 참조하여 본 발명에 따른 멀티카메라와 이를 이용한 영상표시장치 및 그 방법에 대해 상세히 설명한다.
도 1은 본 발명에 따른 멀티카메라의 일 예를 도시한 도면이다.
도 1을 참조하면, 멀티카메라는 구형 틀(100)의 원점을 기준으로 방사형의 촬영 방향(130)을 가진 다수의 촬상소자(110)를 포함한다. 촬상소자(110)는 구형 틀(100)의 360도에 모두 배치되어야 하는 것은 아니며 적용 예에 따라 0~180도 구간에서 배치될 수 있는 등 촬상소자의 개수 및 배치 구조는 다양하게 변경 가능하다. 또한 이웃하는 촬상소자에서 촬영한 영상은 서로 겹쳐지는 부분(140)을 가지며, 그 겹쳐지는 부분은 찰상소자의 화각(120)의 크기와 촬상소자의 위치에 따라 달라진다.
도 2는 본 발명에 따라 평면의 360도를 촬영할 수 있는 멀티카메라의 일 예를 도시한 도면이다. 도 6은 도 2의 멀티카메라를 통해 촬영한 영상의 일 예를 도시한 도면이다.
도 2 및 도 6을 함께 참조하면, 멀티카메라(200)에서 일정 각도로 방사형으로 배치된 촬상소자(210)를 통해 촬영된 영상은 이웃하는 촬영 영상과 일정범위 겹쳐지는 부분을 가진다. 예를 들어, 도 6을 참조하면, 촬상소자 C1,C2,C3가 각각 촬영한 영상 1,2,3(600,610,620)은 서로 겹쳐지는 영역(605,615)을 가진다.
사용자에게 제공되는 화면의 크기(650)는 각 촬상소자에서 촬영한 영상 전체가 아니라 이웃하는 촬영 영상의 겹쳐지는 부분(605,615)의 크기를 기준으로 결정된다. 예를 들어, 사용자에게 제공되는 화면의 크기(650)는 두 영상이 겹지는 부분의 크기와 같거나 그보다 작다.
예를 들어, 도 6에서 촬영 영상이 겹쳐지는 부분(605,610)의 크기가 촬영소자 화각의 양쪽 끝의 10도에 해당하는 부분이며, 멀티카메라의 각 촬영소자의 화각이 90도이고, 6의 예에서 C1이 0~90도 사이의 촬영 영상이라고 가정하자. 사용자의 머리 방향이 0~80도 사이에 위치하면 영상표시장치는 촬상소자 C1의 영상1(600)에서 사용자 머리 방향에 따른 사용자 화면을 제공하고, 머리 방향이 80~90도이면 촬상소자 C1과 C2의 겹쳐지는 촬영 영상(605)에서 사용자 화면을 선택하여 제공하고, 머리 방향이 90~170도이면 촬상소자 C2의 영상(610)을 기준으로 제공한다. 따라서 사용자가 머리를 돌리면 해당 머리의 방향을 파악하여 그 방향에 해당하는 영상을 선택하여 사용자에게 용이하게 제공할 수 있다. 이에 대해서는 도 5를 참조하여 보다 상세하게 살펴본다.
도 3은 본 발명에 따라 공간 전체를 촬영할 수 있는 멀티카메라의 일 예를 도시한 도면이다. 도 7은 도 3의 멀티카메라를 통해 촬영한 영상의 일 예를 도시한 도면이다.
도 3 및 도 7을 함께 참조하면, 구형의 멀티카메라(300)는 표면 전체에 걸쳐 배치된 촬상소자(310)를 통해 상하좌우 등 전체 공간에 대한 촬영 영상을 획득한다. 촬영 영상은 도 7에 도시된 바와 같이 좌우의 이웃하는 촬영 영상(도 7의 영상1과2, 영상2와3)과 겹쳐질 뿐만 아니라 상하의 이웃하는 촬영 영상(도 7의 영상1과4, 영상2와5, 영상3과6)과도 겹쳐진다.
사용자에게 제공되는 화면의 크기(750)는 앞서 살핀 예와 같이 영상이 겹쳐지는 부분의 크기(700,710)를 기준으로 결정된다. 다만 도 3의 멀티카메라(300)의 경우 상하좌우에서 모두 겹쳐지는 부분(720)이 존재하므로 바람직하게는 4개의 이웃하는 촬영 영상이 겹쳐지는 부분(720)의 크기를 기준으로 사용자에게 제공할 화면의 크기(750)를 결정하는 것이 바람직하다.
도 4는 본 발명에 멀티카메라의 일 실시예의 구성을 도시한 도면이다.
도 4를 참조하면, 멀티카메라(400)는 적어도 둘 이상의 촬상소자(410,412,414), 제어부(420), 입력부(430), 표시부(440), 저장부(450) 및 전송부(460)를 포함한다.
촬상소자(410,412,414)는 도 1 내지 도 3에 도시된 바와 같이 일정 각도 이격되어 구형의 틀에 배치된다. 제어부(420)는 다수의 촬상소자(410,412,414)의 초점과 촬영 등을 제어하고 촬상소자가 촬영한 영상을 저장부(450)에 저장하거나 전송부(460)를 통해 전송하는 등 멀티카메라(400)의 구동을 위한 각종 제어동작을 수행한다. 입력부(430)는 사용자로부터 각종 명령이나 제어 명령을 입력받아 제어부(420)에 전달한다. 저장부(450)의 저장형태의 일 예는 도 9에 도시되어 있다.
보다 구체적으로, 멀티카메라(400)는 하나의 촬상소자가 아니라 다수의 촬상소자(410,412,414)를 통해 정지화상이나 동영상 등을 촬영하므로, 각각의 촬상소자가 촬영한 영상을 구분하기 위하여 고유식별정보가 각각의 촬상소자(410,412,414)에 할당된다. 제어부(420)는 각각의 촬상소자(410,412,414)가 촬영한 영상을 해당 촬상소자의 고유식별정보와 맵핑하여 저장하거나 전송한다. 또한 제어부는 다수의 촬상소자가 촬영한 영상이 시간 동기화될 수 있도록 각 촬상소자의 촬영 시각 정보를 촬영 영상과 함께 저장하거나 전송한다.
촬상소자의 배치 간격이나 촬상소자의 화각 등을 정보를 기초로 이웃하는 촬영 영상의 겹쳐지는 부분(605,615)의 크기가 결정된다. 촬영 영상의 겹쳐지는 부분(605,615)의 크기는 멀티카메라(200)에 사전에 정의되어 저장된 후 영상표시장치로 전송되거나 영상표시장치에서 촬상소자의 배치간격이나 화각 등의 정보를 이용하여 실시간 파악될 수 있다.
보다 구체적으로, 제어부(420)는 각 촬상소자의 물리적 배치에 관한 정보(예를 들어, 90도 간격으로 배치)나 이웃하는 촬영 영상들의 겹쳐지는 영역의 크기(예를 들어, 촬상소자 화각의 양 끝의 10도 크기 또는 촬영영상의 양 끝의 10% 크기 등) 등을 영상표시장치에 제공할 수 있다. 촬상소자의 물리적 배치 정보 표시의 일 예는 도 8에 도시되어 있다. 도 8을 참조하면, 멀티카메라에 배치된 찰상소자가 i*j개(i 및 j 는 2 이상의 정수)있는 경우, 촬상소자 C11부터 촬상소자 Cij까지의 배치 관계를 각 촬상소자에 부여된 고유식별정보를 이용하여 배열로 표시할 수 있다. 따라서 화면표시장치는 고유식별정보와 맵핑된 촬영 영상이 멀티카메라의 어떤 방향에 배치된 촬상소자에서 촬영한 영상인지 판별할 수 있다.
도 5는 본 발명에 따른 영상표시장치의 일 실시예의 구성을 도시한 도면이다.
도 5를 참조하면, 영상표시장치(500)는 영상수신부(510), 저장부(520), 기준설정부(530), 방향파악부(540), 영상선택부(550) 및 영상출력부(560)를 포함한다.
본 실시예의 영상표시장치(500)는 설명의 편의를 위해 멀티카메라와 별도의 구성으로 도시하였으나 영상표시장치는 도 2 및 도 3의 구형 틀 내부에 구현될 수도 있다.
영상수신부(510)는 멀티카메라(570)로부터 촬영 영상을 수신한다. 저장부(520)는 영상수신부(510)가 수신한 촬영 영상을 저장한다. 저장부(520)의 저장형태의 일 예는 도 9에 도시되어 있다. 도 9를 참조하여 살펴보면, 영상수신부(510)가 수신한 영상이 동영상인 경우 저장부(520)는 각각의 촬상소자별(C1,C2,C3)로 수신한 영상을 저장한다. 도 9의 경우 각각의 촬상소자에서 촬영된 영상의 시간이 모두 t0에서부터 시작하는 예를 도시하였으나 각각의 촬상소자의 시작시간이 모두 동일할 필요는 없으며 시간 동기화를 위한 시각정보를 포함하고 있으면 된다. 영상표시장치(500)가 멀티카메라의 촬영 영상을 실시간으로 표시장치(590)에 출력하는 경우 저장부(520)는 생략될 수 있다.
기준설정부(530)는 사용자에게 촬영 영상을 제공하기 위한 화면 크기 등을 설정한다. 구체적으로 기준설정부(530)는 이웃하는 촬상소자들의 촬영 영상에서 겹쳐지는 부분의 크기를 기준으로 사용자 제공 화면의 크기를 설정한다. 도 6 및 도 7과 같이 사용자 제공 화면의 크기(650,750)는 촬영 영상의 겹쳐지는 부분의 크기와 같거나 그보다 작게 미리 설정된다.
또한 기준설정부(530)는 다수의 촬상소자가 촬영한 다수의 촬영 영상 중 어느 하나를 출력기준영상으로 설정하고, 그 출력기준영상의 특정 위치를 사용자에게 제공하는 화면인 출력기준영역으로 설정한다.
방향파악부(540)는 사용자 입력수단(580)을 통해 방향정보를 수신한다. 예를 들어, 사용자가 안경형 TV 등과 같은 머리 부착형 표시장치(590)를 가지고 있는 경우, 방향파악부(540)는 머리 부착형 표시장치에 내장된 회전센서 등을 통해 방향을 파악한다. 또 다른 예로서 사용자 입력수단은 종래의 마우스나 키보드 등이 될 수 있으며, 표시장치(590)는 종래의 디스플레이 장치가 될 수도 있다. 이 경우 방향파악부(540)는 마우스나 키보드 등의 사용자 입력수단(580)을 통해 방향정보를 수신한다.
영상선택부(550)는 방향파악부(540)에 의해 파악된 방향정보에 따라 출력기준영상 및 출력기준영역을 선택한다. 예를 들어, 방향파악부(540)가 좌측으로 10도 이동의 방향정보를 파악하면, 영상선택부(550)는 출력기준영상에서 출력기준영역을 10도에 해당하는 거리만큼 이동시킨다.
출력기준영역이 방향파악부(540)에 의해 파악된 방향정보에 따라 이동하는 경우 촬영 영상의 겹쳐지는 영역에서 촬영 영상의 겹쳐지는 영역을 벗어나 이웃하는 촬영 영상의 영역으로 진입하게 되는 경우가 발생한다. 도 6의 겹쳐지는 영역에 위치한 사용자 크기 화면의 크기가 현재 출력기준영역에 해당한다고 가정하면, 출력기준영역이 왼쪽이나 오른쪽으로 이동하면 겹쳐지는 영역을 벗어난다.
따라서 영상선택부(550)는 방향파악부(540)가 파악한 방향정보에 따라 출력기준영상을 이동시키되, 출력기준영상이 이웃하는 촬영 영상의 겹쳐지는 영역을 벗어나는지 파악하고, 벗어나는 경우 이웃하는 촬영 영상을 새로운 출력기준영상으로 변경한다. 도 6의 경우 현재 출력기준영상이 영상1이고, 촬영기준영역이 영상1(600)과 영상2(610)의 겹쳐지는 영역(605)에서 영상2(610) 방향으로 벗어나는 경우에, 영상선택부(550)는 영상2를 출력기준영상으로 변경한다.
또한, 영상이 정지화상이 아닌 동영상인 경우, 영상선택부(550)는 이전 출력기준영상에서의 시각정보를 이용하여 새롭게 선택된 출력기준영상의 시각을 동기화한다. 예를 들어, 도 9에서 현재 촬상소자 C1의 촬영영상에 대해 t1까지의 프레임이 재생된 시점에 출력기준영상이 촬상소자 C2의 촬영 영상으로 변경된 경우, 영상선택부(550)는 촬상소자 C2의 촬영 영상에서 t1이후의 프레임부터 출력되도록 선택한다.
사용자에게 출력되는 화면의 크기는 이웃하는 촬영 영상의 겹쳐지는 영역의 범위보다 작거나 같으므로, 출력기준영역이 촬영 영상의 겹쳐지는 영역에 위치하는 경우 이웃하는 두 촬영 영상 중 어느 영상을 통해서도 각도가 달라 원근에 각각 위치한 사물들의 위치와 각도는 다르지만 바라보는 시선은 같다. 따라서 출력기준영역이 겹쳐지는 영역을 지나쳐 이웃하는 촬영 영역으로 진입하는 경우 단순히 출력기준영상을 이웃하는 촬영 영상으로 변경하여 끊김 없는 영상을 사용자에게 제공할 수 있다. 영상출력부(560)는 현재의 촬영기준영상의 촬영기준영역을 추출하여 표시장치(590)로 출력한다.
도 10은 본 발명에 따른 영상표시방법의 일 실시예의 흐름을 도시한 도면이다.
도 10을 참조하면, 영상표시장치는 멀티카메라로부터 촬상소자의 배치에 관한 정보 또는 촬상소자 사이의 겹쳐지는 영역의 크기 정보 등을 사전에 수신하고 초기 사용자에게 제공한 출력기준영상 및 출력기준영역을 설정한다(S1000). 기준 설정은 영상표시마다 매번 이루어질 필요는 없으며 이전과 다른 멀티카메라를 통해 영상을 수신한 경우에만 수행되면 된다.
영상표시장치는 멀티카메라의 수신 영상을 실시간 출력하는 경우가 아니면 수신 영상을 저장한다(S1010). 이하에서는 영상표시장치가 저장부에 저장된 영상을 출력하는 경우를 가정하여 설명한다.
영상표시장치는 사용자 입력수단을 통해 방향정보를 수신한다(S1020). 영상표시장치는 방향정보를 기초로 출력기준영역을 이동시키면서 출력한다(S1050,S1060). 만약 촬영 영상의 겹쳐지는 부분에 위치한 출력기준영역이 현재 위치한 출력기준영역의 이웃하는 영역으로 진입하는 경우에(S1030), 영상표시장치는 새롭게 진입하는 이웃 영역의 촬영 영상을 새로운 출력기준영상으로 선택하여 출력기준영역을 이동시켜 출력한다(S1050,S1060).
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (10)

  1. 구형의 틀;
    상기 구형의 틀에서 촬영 방향이 방사형으로 배치된 적어도 둘 이상의 촬상소자; 및
    상기 적어도 둘 이상의 촬상소자의 초점을 제어하고, 상기 적어도 둘 이상의 촬상소자를 통해 촬영된 영상을 각 촬상소자의 고유식별정보와 맵핑하여 저장하거나 전송하는 제어부;를 포함하고,
    영상표시장치에 표시되는 영상은 상기 적어도 둘 이상의 촬상소자 중 어느 하나의 제1 촬상소자에 의해 촬영된 촬영 영상의 일부 영역이고,
    상기 일부 영역은 상기 촬상소자의 촬영 영상들이 서로 겹쳐지는 부분의 면적 이하의 크기이며,
    사용자 입력수단에 의해 입력된 방향정보에 따라 상기 일부 영역이 촬영 영상들의 서로 겹쳐지는 부분을 벗어나는 경우, 상기 영상표시장치에 표시되는 영상은 상기 적어도 둘 이상의 촬상소자 중 상기 제1 촬상소자에 이웃한 제2 촬상소자에 의해 촬영된 촬영 영상의 일부 영역으로 변경되는 것을 특징으로 하는 멀티카메라.
  2. 제 1항에 있어서,
    이웃하는 촬상소자 사이의 촬영 방향의 사이각은, 이웃하는 촬상소자의 촬영 영상이 사용자에게 제공할 화면 크기 이상으로 겹쳐지는 각도인 것을 특징으로 하는 멀티카메라.
  3. 제 1항에 있어서,
    상기 제어부는 상기 적어도 둘 이상의 촬상소자 사이의 시간 동기화를 제어하고 상기 촬영된 영상을 촬상소자의 고유식별정보 및 시간정보와 함께 저장하거나 전송하는 것을 특징으로 하는 멀티카메라.
  4. 적어도 둘 이상의 촬상소자에서 촬영된 적어도 둘 이상의 촬영 영상을 수신하는 영상수신부;
    상기 수신한 적어도 둘 이상의 촬영 영상을 저장하는 저장부;
    사용자 입력수단을 통해 방향정보를 입력받는 방향파악부;
    이웃하는 촬상소자의 촬영 영상들이 서로 겹쳐지는 부분의 면적 이하의 일정 크기를 출력화면크기로 정의하고, 상기 적어도 둘 이상의 촬영 영상 중 제1 촬상소자의 촬영영상을 출력기준영상으로 정의하고, 상기 출력기준영상의 일정 위치에서 상기 정의된 출력화면크기에 해당하는 영역을 출력기준영역으로 설정하는 기준설정부;
    상기 출력기준영상의 상기 출력기준영역을 사용자에게 제공하기 위해 추출하는 영상출력부; 및
    상기 방향정보에 따라 상기 출력기준영역을 상하 또는 좌우로 이동시키고, 상기 출력기준영역이 이웃하는 제1 촬상소자와 제2 촬상소자의 촬영 영상의 서로 겹쳐지는 부분을 벗어나는 경우 상기 출력기준영상을 이웃하는 제2 촬상소자의 촬영 영상으로 변경하는 영상선택부;를 포함하는 것을 특징으로 하는 영상표시장치.
  5. 제 4항에 있어서, 상기 영상수신부는,
    가상의 원점을 기점으로 방사방향의 촬영방향을 가지도록 배치된 적어도 둘 이상의 촬상소자로부터 적어도 둘 이상의 촬영 영상을 수신하는 것을 특징으로 하는 영상표시장치.
  6. 제 4항에 있어서, 상기 방향파악부는,
    사용자의 머리에 부착된 회전인식센서를 통해 머리의 회전방향을 파악하는 것을 특징으로 하는 영상표시장치.
  7. 제 4항에 있어서,
    상기 영상수신부는, 상기 적어도 둘 이상의 촬상소자에 부여된 고유식별정보와 함께 촬영 영상을 수신하고,
    상기 기준설정부는, 상기 적어도 둘 이상의 촬상소자의 물리적 배치에 관한 정보와 상기 고유식별정보를 정의하고,
    상기 영상선택부는, 상기 출력기준영역이 이웃하는 촬상소자의 촬영 영상에서 서로 겹쳐지는 부분을 벗어나면 상기 물리적 배치에 관한 정보를 통해 이웃하는 촬영 영상에 대한 고유식별정보를 파악하고, 파악된 고유식별정보의 촬영 영상을 출력기준영상으로 선택하는 것을 특징으로 하는 영상표시장치.
  8. 제 4항에 있어서,
    상기 적어도 둘 이상의 촬영 영상은 정지화상 또는 동영상인 것을 특징으로 하는 영상표시장치.
  9. 제 4항에 있어서,
    상기 적어도 둘 이상의 촬영 영상은 서로 간에 시간 동기화된 동영상이고,
    상기 영상출력부는, 상기 영상선택부에 의해 출력기준영상이 변경된 경우에 변경된 출력기준영상의 출력시점을 변경 이전 출력기준영상의 출력시점과 동기화하여 출력하는 것을 특징으로 하는 영상표시장치.
  10. 이웃하는 촬상소자의 촬영 영상에서 서로 겹쳐지는 부분의 면적을 기준으로 출력화면크기를 정의하고, 촬상소자들에 의해 각각 촬영된 적어도 둘 이상의 촬영 영상 중 제1 촬상소자의 촬영영상을 출력기준영상으로 정의하고, 상기 출력기준영상의 일정 위치에서의 출력화면크기에 해당하는 영역을 출력기준영역으로 설정하는 단계;
    적어도 둘 이상의 촬상소자에서 촬영된 적어도 둘 이상의 촬영 영상을 저장하는 단계;
    사용자 입력수단을 통해 방향정보를 입력받는 단계;
    상기 방향정보에 따라 상기 출력기준영역을 상하 또는 좌우로 이동시킬 때 상기 출력기준영역이 이웃하는 제1 촬상소자와 제2 촬상소자의 촬영 영상에서 서로 겹쳐지는 부분을 벗어나는지 파악하는 단계;
    상기 서로 겹쳐지는 부분을 벗어나면, 상기 출력기준영상을 이웃하는 제2 촬상소자의 촬영 영상으로 변경하는 단계; 및
    출력기준영상의 출력기준영역을 추출하여 사용자에게 제공하는 단계;를 포함하는 것을 특징으로 하는 화면표시방법.
KR1020130110571A 2013-09-13 2013-09-13 멀티카메라 및 이를 이용한 영상표시장치와 그 방법 KR101471927B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130110571A KR101471927B1 (ko) 2013-09-13 2013-09-13 멀티카메라 및 이를 이용한 영상표시장치와 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130110571A KR101471927B1 (ko) 2013-09-13 2013-09-13 멀티카메라 및 이를 이용한 영상표시장치와 그 방법

Publications (1)

Publication Number Publication Date
KR101471927B1 true KR101471927B1 (ko) 2014-12-11

Family

ID=52678624

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130110571A KR101471927B1 (ko) 2013-09-13 2013-09-13 멀티카메라 및 이를 이용한 영상표시장치와 그 방법

Country Status (1)

Country Link
KR (1) KR101471927B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101782516B1 (ko) 2015-11-24 2017-09-27 한국건설기술연구원 포인터를 이용한 중공관 촬영장치 및 이를 이용하여 중공관을 촬영하는 방법
CN107610139A (zh) * 2017-08-25 2018-01-19 信利光电股份有限公司 用于消除360度拍摄图像重叠偏差的装置及方法
KR20210004929A (ko) * 2019-04-25 2021-01-13 강성철 다초점 영상 재생 장치 및 방법
WO2022085836A1 (ko) * 2020-10-23 2022-04-28 강성철 다초점 영상 재생 장치, 다초점 영상을 이용한 영상 서비스 제공 시스템 및 그 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020025301A (ko) * 2000-09-28 2002-04-04 오길록 다중 사용자를 지원하는 파노라믹 이미지를 이용한증강현실 영상의 제공 장치 및 그 방법
JP2004514951A (ja) * 2000-11-29 2004-05-20 アールヴイシー エルエルシー 球面立体視撮影システム及びその方法
JP2004266409A (ja) * 2003-02-28 2004-09-24 Canon Inc 撮像体
JP2007043225A (ja) * 2005-07-29 2007-02-15 Univ Of Electro-Communications 撮像画像処理装置及び撮像画像処理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020025301A (ko) * 2000-09-28 2002-04-04 오길록 다중 사용자를 지원하는 파노라믹 이미지를 이용한증강현실 영상의 제공 장치 및 그 방법
JP2004514951A (ja) * 2000-11-29 2004-05-20 アールヴイシー エルエルシー 球面立体視撮影システム及びその方法
JP2004266409A (ja) * 2003-02-28 2004-09-24 Canon Inc 撮像体
JP2007043225A (ja) * 2005-07-29 2007-02-15 Univ Of Electro-Communications 撮像画像処理装置及び撮像画像処理方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101782516B1 (ko) 2015-11-24 2017-09-27 한국건설기술연구원 포인터를 이용한 중공관 촬영장치 및 이를 이용하여 중공관을 촬영하는 방법
CN107610139A (zh) * 2017-08-25 2018-01-19 信利光电股份有限公司 用于消除360度拍摄图像重叠偏差的装置及方法
KR20210004929A (ko) * 2019-04-25 2021-01-13 강성철 다초점 영상 재생 장치 및 방법
KR102334503B1 (ko) 2019-04-25 2021-12-13 주식회사 와일드비전 다초점 영상 재생 장치 및 방법
WO2022085836A1 (ko) * 2020-10-23 2022-04-28 강성철 다초점 영상 재생 장치, 다초점 영상을 이용한 영상 서비스 제공 시스템 및 그 방법

Similar Documents

Publication Publication Date Title
US11330174B2 (en) Panoramic camera
JP5715842B2 (ja) 情報提供システム、情報提供方法、及びプログラム
EP3198862B1 (en) Image stitching for three-dimensional video
EP3007038B1 (en) Interaction with three-dimensional video
KR101481830B1 (ko) 구도 판정 장치, 구도 판정 방법 및 기록 매체
US8208048B2 (en) Method for high dynamic range imaging
KR101694689B1 (ko) 동영상 데이터 생성 방법 및 이를 적용한 영상 촬영 장치
CN106233722B (zh) 多相机系统中的图像传感器的自动对准
KR20100099041A (ko) 화상 처리 장치, 동화상 재생 장치, 이들에서의 처리 방법 및 프로그램
CN104580878A (zh) 电子装置以及自动效果方法
US20110304693A1 (en) Forming video with perceived depth
KR20150050172A (ko) 관심 객체 추적을 위한 다중 카메라 동적 선택 장치 및 방법
KR20100043138A (ko) 화상 처리 장치, 동화상 재생 장치, 이들에서의 처리 방법 및 프로그램
JP2002503893A (ja) 仮想現実カメラ
TW201205181A (en) Video camera providing videos with perceived depth
KR102082300B1 (ko) 삼차원 영상 생성 또는 재생을 위한 장치 및 방법
KR101471927B1 (ko) 멀티카메라 및 이를 이용한 영상표시장치와 그 방법
JP4692849B2 (ja) 立体画像記録装置および立体画像記録方法
KR20150058871A (ko) 촬상 장치 및 촬상 이미지 스티칭 방법
CN107710276A (zh) 基于空间上协同定位的区域的组合图像的统一图像处理
US10860166B2 (en) Electronic apparatus and image processing method for generating a depth adjusted image file
JP2010268128A (ja) 制御装置、撮像装置、撮像システム、画像取得方法、及びプログラム
JP6649010B2 (ja) 情報処理装置
JP5704885B2 (ja) 撮影機器、撮影方法及び撮影制御プログラム
JP2011193066A (ja) 撮像装置

Legal Events

Date Code Title Description
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171201

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20181204

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191128

Year of fee payment: 6