KR20200069078A - 파노라마 이미지 생성 시스템 및 방법 - Google Patents

파노라마 이미지 생성 시스템 및 방법 Download PDF

Info

Publication number
KR20200069078A
KR20200069078A KR1020180156217A KR20180156217A KR20200069078A KR 20200069078 A KR20200069078 A KR 20200069078A KR 1020180156217 A KR1020180156217 A KR 1020180156217A KR 20180156217 A KR20180156217 A KR 20180156217A KR 20200069078 A KR20200069078 A KR 20200069078A
Authority
KR
South Korea
Prior art keywords
photographing
subject
panoramic image
devices
server
Prior art date
Application number
KR1020180156217A
Other languages
English (en)
Other versions
KR102127764B1 (ko
Inventor
안희준
Original Assignee
서울과학기술대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울과학기술대학교 산학협력단 filed Critical 서울과학기술대학교 산학협력단
Priority to KR1020180156217A priority Critical patent/KR102127764B1/ko
Publication of KR20200069078A publication Critical patent/KR20200069078A/ko
Application granted granted Critical
Publication of KR102127764B1 publication Critical patent/KR102127764B1/ko

Links

Images

Classifications

    • H04N5/23238—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H04N5/23222—
    • H04N5/232935—
    • H04N5/247—

Abstract

본 발명의 파노라마 이미지 생성 시스템은 피사체를 촬영하여 파노라마 이미지를 생성하는 복수개의 촬영장치를 포함하는 촬영부; 및 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 각각의 촬영장치를 제어하고, 복수개의 촬영장치에서 촬영된 피사체의 정보를 취합하여 파노라마 이미지를 생성하는 서버;를 포함할 수 있다.

Description

파노라마 이미지 생성 시스템 및 방법{SYSTEM AND METHOD FOR GENERATING PANORAMA IMAGE}
본 발명은 파노라마 이미지 생성 시스템 및 방법에 관한 것으로, 더욱 상세하게는 피사체의 상이 맺히는 연결선 및 연결선들의 교차점의 위치를 조절하여 파노라마 이미지를 생성하는 시스템 및 방법에 관한 것이다.
영상기기의 발전 및 영상 처리 방법의 발전에 따라, 사용자는 영상기기를 이용하여 다양한 영상이 획득할 수 있게 되었다.
특히, 스마트폰의 성능이 향상되면서 여러 개의 이미지들을 순차적으로 촬영한 후 각 이미지들을 적절한 위치에서 이어 붙이는 image stitching 알고리즘을 수행하여 파노라마 이미지(사진)을 생성할 수 있다. 그러나 이러한 파노라마 이미지는 여러 시점들에서 촬영한 이미지(사진)를 하나로 잇는 것이므로, 동영상 녹화나 움직이는 대상에 대한 촬영에 쓰일 수 없고 촬영을 하는 행위도 번거롭다.
또한, 종래의 스마트폰에 채용된 카메라의 화각(시야각)은 대개 50~60도 정도이므로, 이 각도를 넘어가는 카메라 전방의 좌우 및 상하에는 사각 영역이 넓게 존재하므로, 화각을 넓히기 위해 종래에는 볼록거울이나 오목렌즈를 써서 화각을 넓혔다. 그러나 종래의 렌즈나 거울을 사용한 방법은 가격이 비쌀 뿐 아니라, 정해져 있는 카메라에 구비된 촬상 센서(촬상 영역)의 면적에 더 많은 이미지가 들어가므로 해상도가 떨어질 수 밖에 없으며, 초광각 렌즈는 구매 비용이 매우 비싸고, 모든 영상기기에 파노라마 촬영 모드가 지원되지 않으므로, 사용자는 쉽게 파노라마 영상을 획득할 수가 없는 문제점이 있다.
한국등록특허 제10-1509948호
본 발명의 기술적 과제는 이러한 점에서 착안된 것으로 본 발명의 목적은 초광각 렌즈를 추가하지 않고 사용자가 원하는 파노라마 이미지를 획득할 수 있는 파노라마 이미지 생성 시스템 및 방법을 제공하는데 있다.
본 발명의 다른 목적은 사용자가 직접 이동하지 않고, 촬영장치를 제어하여 파노라마 이미지를 촬영할 수 있는 파노라마 이미지 생성 시스템을 제공하는데 있다.
본 발명의 실시 예를 따르는 파노라마 이미지 생성 시스템은 피사체를 촬영하여 파노라마 이미지를 생성하는 복수개의 촬영장치를 포함하는 촬영부; 및 상기 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 각각의 촬영장치를 제어하고, 상기 복수개의 촬영장치에서 촬영된 피사체의 정보를 취합하여 파노라마 이미지를 생성하는 서버;를 포함한다.
또한, 상기 촬영부는, 고정된 상태로 피사체를 촬영하는 기준 촬영장치; 및 상기 기준 촬영장치와 상기 피사체의 배치에 기초하여 위치가 변경되어 상기 피사체를 촬영하는 보조 촬영장치;를 포함하고, 상기 서버는, 상기 기준 촬영장치의 주변에 위치한 상기 보조 촬영장치의 렌즈를 조절하여 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 제어할 수 있다.
또한, 본 발명의 실시 예를 따르는 파노라마 이미지 생성 시스템은 상기 촬영부와 연결되며, 상기 서버의 제어를 기초로 상기 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 상기 기준 촬영장치의 주변에 위치한 상기 보조 촬영장치의 위치를 조절하는 구동부;를 더 포함할 수 있다.
또한, 본 발명의 실시 예를 따르는 파노라마 이미지 생성 시스템은 상기 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 사용자를 안내하는 가이드라인 또는 상기 서버에서 생성된 파노라마 이미지를 출력하는 출력부;를 더 포함할 수 있다.
또한, 본 발명의 실시 예를 따르는 파노라마 이미지 생성 시스템을 이용한 파노라마 이미지 생성 방법은 상기 복수의 촬영장치에서 각각 독립적인 촬영영역을 설정하고, 상기 피사체와 상기 복수의 촬영장치의 렌즈를 각각 연결한 선을 산출하는 촬영준비 단계; 상기 촬영준비 단계에서 설정된 상기 촬영영역 간 중복영역을 산출하고, 상기 복수의 촬영장치의 렌즈와 상기 피사체를 연결한 선들의 교차점을 산출하여 상기 중복영역과 상기 교차점이 미리 정해진 범위내로 존재하도록 상기 시스템을 제어하는 촬영제어 단계; 상기 촬영제어 단계에서 제어된 상기 복수의 촬영장치에서 상기 피사체의 이미지를 촬영하는 파노라마 이미지 촬영 단계; 및 상기 파노라마 이미지 촬영 단계에서 촬영된 이미지를 기초로 상기 출력부에서 파노라마 이미지를 출력하는 파노라마 이미지 출력 단계;를 포함한다.
본 발명에 따른 파노라마 이미지 생성 시스템 및 방법은 각 촬영장치의 연결선을 독립적으로 산출하고, 이격된 연결선과 이들의 교차점을 포커싱시키기 위한 명령을 구동부로 전달하여 카메라의 위치를 자동적으로 변경함으로써 촬영자의 직접적인 이동이 요구되지 않은 상태로, 향상된 품질의 파노라마 이미지를 획득할 수 있다.
또한, 본 발명에 따른 파노라마 이미지 생성 시스템 및 방법은 각 촬영장치당 피사체를 촬영하는 범위의 과도한 중복을 방지하기 위한 가이드를 사용자에게 제공하여, 촬영장치에 익숙하지 않은 초심자도 고품질의 파노라마 이지미를 용이하게 획득할 수 있는 이점이 있다.
도 1은 본 발명의 일 실시 예에 따른 파노라마 이미지 생성 시스템의 개략도이다.
도 2는 도 1의 시스템의 각 촬영장치와 피사체를 연결하는 선을 설명하기 위한 도면이다.
도 3은 도 1의 시스템의 각 촬영장치의 연결선의 교차점을 포커싱 하는 과정을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 파노라마 이미지 생성 방법의 흐름도이다.
도 5 및 도 6은 도 1의 시스템의 촬영부가 촬영영역을 조율하는 과정을 설명하기 위한 도면이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시 예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시 예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시 예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시 예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시 예로 구현될 수 있다. 또한, 각각의 개시된 실시 예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하, 도면들을 참조하여 본 발명의 바람직한 실시 예들을 보다 상세하게 설명하기로 한다.
본 발명에 따른 파노라마 이미지 생성 시스템 및 방법은 각 촬영장치의 연결선을 독립적으로 산출하고, 이격된 연결선 및 이들의 교차점을 포커싱시키기 위한 명령을 구동부로 전달하여 카메라의 위치를 자동적으로 변경함으로써 촬영자의 직접적인 이동이 요구되지 않은 상태로, 향상된 품질의 파노라마 이미지를 획득할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 파노라마 이미지 생성 시스템의 개략도이고, 도 2 및 도 3은 도 1의 시스템의 각 촬영장치와 피사체를 연결하는 선과, 각 촬영장치의 연결선의 교차점을 포커싱 하는 과정을 설명하기 위한 도면이다.
도 1 내지 도 3을 참조하면, 본 발명의 일 실시 예에 따른 파노라마 이미지 생성 시스템(1)은 촬영부(11) 및 서버(13)를 포함하고, 구동부(15) 및 출력부(17)를 더 포함할 수 있다.
촬영부(11)는 피사체(9)를 촬영하여 파노라마 이미지를 생성하는 복수개의 촬영장치를 포함할 수 있다. 촬영부(11)는 피사체(9)의 촬영시 렌즈와 피사체(9)를 연결하는 직선을 렌즈방향으로 연장한 선이 설정되는 독립적으로 이동가능한 복수의 촬영장치(111, 113, 115)를 포함할 수 있다.
촬영부(11)는 기준 촬영장치와 보조 촬영장치를 포함할 수 있으며, 기준 촬영장치는 고정된 상태로 피사체(9)를 촬영할 수 있다. 보조 촬영장치는 기준 촬영장치와 피사체(9)의 배치에 기초하여 위치가 변경되어 피사체(9)를 촬영할 수 있다.
기준 촬영장치와 보조 촬영장치의 설명을 위해 도 2 및 도 3을 참조하도록 한다. 도 2 및 도 3을 참조하면, 촬영부(11)는 제1 촬영장치(111) 제2 촬영장치(113) 및 제3 촬영장치(115)를 포함할 수 있다. 이때, 제1 촬영장치(111)는 기준 촬영장치이고, 제2 및 제3 촬영장치 는 보조 촬영장치이다.
상세하게, 제1 촬영장치(111)는 가상평면이 고정된 상태로 피사체를 촬영할 수 있다. 제1 촬영장치(111)는 피사체(9)와 연결된 임의의 제1 연결선(L1)을 형성할 수 있다. 또한, 제1 연결선(L1)을 고정시키기 위해 제1 촬영장치(111)의 이동은 배제될 수 있다.
제2 및 제3 촬영장치(113, 115)는 제1 촬영장치(111)의 제1 연결선(L1)에 맞추어 각각의 연결선(L3, L5)이 변경될 수 있다. 제2 촬영장치(113)와 피사체(9)를 연결하는 연결선은 제2 연결선(L3)으로 정의되고, 제3 촬영장치(115)와 피사체(9)를 연결하는 연결선은 제3 연결선(L5)으로 정의될 수 있다.
더욱 상세하게, 제1 연결선(L1)은 도 2와 같이 제1 촬영장치(111)와 피사체(9)를 연결하는 임의의 선을 가정하고, 임의의 선을 제1 촬영장치(111)의 후방으로 연장한 선으로 정의될 수 있다. 즉, 제1 연결선(L1)은 제1 촬영장치(111)와 피사체(9) 간 거리 및 각도 등에 의해 유동적으로 설정될 수 있다. 제1 연결선(L1)이 산출된 제1 촬영장치(111)는 시스템(1)의 기준 촬영장치로 지정되어 연결선의 위치 또는 각도의 변경없이 피사체(9)를 촬영할 수 있다.
이와 유사하게, 제2 및 제3 연결선(L3, L5)은 제2 및 제3 촬영장치(113, 115)와 피사체(9)를 연결하는 임의의 선을 가정하고, 각 임의의 선을 제2 및 제3 촬영장치(113, 115)의 후방으로 연장한 선으로 정의될 수 있다. 즉, 제2 연결선(L3)은 제2 촬영장치(113)와 피사체(9)간 거리 및 각도 등에 의해 설정될 수 있으며, 제3 연결선(L5)은 제3 촬영장치(115)와 피사체(9)간 거리 및 각도 등에 의해 유동적으로 설정될 수 있다.
한편, 제1 연결선(L1)이 산출되어 제1 촬영장치(111)가 고정된 경우, 제2 및 제3 촬영장치(115)는 각각의 연결선(L3, L5)이 제1 연결선(L1)과 교차하도록 촬영조건이 변경될 수 있다. 이때. 각 연결선이 교차하는 점을 교차점으로 정의할 수 있으며, 제1 연결선(L1)과 제2 연결선(L3)의 교차점을 제1 교차점(P1)으로 정의하고, 제1 연결선(L1)과 제3 연결선(L5)의 교차점을 제2 교차점(P3)으로 정의하며, 제2 연결선(L3)과 제3 연결선(L5)의 교차점을 제3 교차점(P5)로 정의할 수 있다. 이 같은 복수의 교차점(P1, P3, P5)를 인접하게 포커싱시키기 위해 촬영조건이 변경될 수 있다. 변경되는 촬영조건은 각 촬영장치의 렌즈설정, 각 촬영장치와 피사체(9)간 앵글, 각 촬영장치의 위치 등을 포함할 수 있으나 이에 제한되지 않는다. 특히, 촬영조건의 변경을 위해, 서버(13)는 포커싱 명령을 생성하여 구동부(15)로 전달할 수 있으며, 각 촬영장치에 연결된 각각의 구동기는 명령을 기반으로 각 교차점(P1, P3, P5)의 위치가 유효영역(P0) 내측에 위치하도록 촬영장치의 위치를 독립적으로 이동시킬 수 있다. 유효영역(P0)은 파노라마 이미지를 생성하기 위한 최적의 거리를 산출한 것으로, 유효영역 내측에 각 교차점들이 위치함으로써 고품질의 파노라마 이미지를 획득할 수 있다.
서버(13)는 복수개의 촬영장치(111, 113, 115) 각각의 렌즈와 피사체(9)를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 각각의 촬영장치(111, 113, 115)를 제어하고, 복수개의 촬영장치(111, 113, 115)에서 촬영된 피사체(9)의 정보를 취합하여 파노라마 이미지를 생성할 수 있다.
서버(13)는 기준 촬영장치의 주변에 위치한 보조 촬영장치의 렌즈를 조절하여 복수개의 촬영장치(111, 113, 115) 각각의 렌즈와 피사체(9)를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 제어할 수 있다. 서버(13)는 복수의 촬영장치의 각 가상평면을 인접시키기 위해 복수의 촬영장치를 제어하는 포커싱 명령을 생성할 수 있다. 서버(13)는 포커싱 명령에 따라 포커싱된 각각의 교차점(P1, P3, P5)을 갖는 복수의 촬영장치에서 촬영된 피사체(9)의 정보를 취합할 수 있다. 서버(13)는 취합된 정보를 기초로 파노라마 이미지를 생성할 수 있다. 서버(13)는 생성된 파노라마 이미지를 출력부(17)로 전달할 수 있다.
이를 위해, 서버(13)는 통신모듈, 연산모듈 및 제어모듈을 포함할 수 있다. 서버(13)는 통신모듈을 통해 촬영부(11)에서 촬영한 데이터 및 촬영조건에 대한 정보를 전송받을 수 있다. 통신모듈은 유/무선 통신을 수행할 수 있으며, 블루투스, 비콘, NFC, 무선인터넷 등을 사용할 수 있으나 이에 제한되지 않는다.
서버(13)는 연산모듈을 통해 촬영부(11)로부터 전달받은 정보를 기초로 연결선을 산출할 수 있다. 또한, 서버(13)는 제어모듈을 통해 산출된 연결선과 연결선이 교차되는 교차점을 기초로 각 촬영장치의 포커싱 명령을 생성할 수 있다. 전술한 각각의 모듈은 통합 모듈로 형성되거나 하나 이상의 모듈로 이루어질 수 있다. 또는, 이와 반대로 각 구성은 별도의 모듈로 이루어질 수 있다.
또한, 서버(13)는 피사체(9)와 촬영부(11)의 위치에 따른 촬영조건을 데이터화 하여 저장하고, 유사한 환경에서 재촬영이 이루어지는 경우 저장된 촬영조건을 기반으로 사용자에게 최적의 촬영조건을 추천할 수 있다. 또한, 서버(13)는 각각의 연결선 및 교차점과 촬영장소의 지형 및 피사체(9)의 크기에 따라 각 교차점 간 가용한 최대 이격거리를 산출할 수 있으며, 최대 이격거리 내에서 모든 촬영장치의 교차점을 유효영역(P0) 내부에 포커싱시키는 명령을 구동부(15)로 전달할 수 있다. 특히, 교차점 간 이격거리는 피사체(9)의 크기에 따라 상이하게 조절될 수 있으며, 서버(13)는 최초 촬영을 통해 피사체(9)의 대략적인 크기를 파악하여 교차점간 이격거리를 최소화하기 위한 촬영위치를 산출할 수 있다.
구동부(15)는 촬영부(11)와 연결되며, 서버(13)의 제어를 기초로 복수개의 촬영장치(111, 113, 115) 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 기준 촬영장치의 주변에 위치한 보조 촬영장치의 위치를 조절할 수 있다.
상세하게, 구동부(15)는 촬영부(11)의 종류, 크기와 무관하게 결합/분리가 용이한 구조를 포함할 수 있다. 촬영부(11)의 구동부(15)는 촬영장치가 구비된 개수에 대응되는 복수의 구동기(151, 153, 155)를 포함할 수 있다. 복수의 촬영장치와 독립적으로 연결된 복수의 구동기를 포함하는 구동부(15)는 서버(13)에서 생성된 포커싱 명령에 따라 각 촬영장치의 연결선 및 이들의 교차점이 인접하게 포커싱되도록 촬영장치의 전체 또는 일부를 이동시킬 수 있다.
일 예로, 도 2 또는 도 3과 같이 제1, 제2 및 제3 촬영장치(115)로 구성된 촬영부(11)와 각 촬영장치에 대응되는 제1, 제2 및 제3 구동기(151, 153, 155)로 구성된 구동부가 시스템(1)에 포함될 수 있다.
구동부(15)는 서버(13)로부터 포커싱 명령을 전달받을 수 있으며, 제1 내지 제3 구동기(155)는 독립된 명령을 수행할 수 있다. 상세하게, 포커싱 명령을 전달받은 제1 구동기(151)는 제1 촬영장치(111)의 위치 및 촬영조건을 변경시키지 않으나, 제2 구동기(153)와 제3 구동기(155)는 각각 제2 촬영장치(113)와 제3 촬영장치(115)의 연결선을 변경시키기 위해 이동할 수 있다. 제2 및 제3 구동기(153, 155)의 이동을 통해 제2 및 제3 연결선(L3, L5)이 제1 연결선(L1)과 인접하게 포커싱될 수 있으며, 이를 통해 제1 내지 제3 교차점(P1, P3, P5)이 인접하게 포커싱될 수 있다. 이때, 서버(13)는 각각의 교차점(P1, P3, P5)를 포함하는 임의의 유효영역(P0)을 설정할 수 있으며, 이처럼 유효영역(P0)에 모든 교차점이 포커싱된 시스템(1)은 높은 품질의 파노라마 이미지를 획득할 수 있다.
한편, 제2 구동기(153)와 제3 구동기(155)를 통해 이동하는 과정에서, 제2 촬영장치(113) 및 제3 촬영장치(115)에서 피사체(9)를 촬영하는 부분이 변경될 수 있다. 구동부(15)의 움직임을 통해 포커싱되는 각각의 교차점은 동일한 위치로 설정될 수 있으나, 피사체(9)의 크기, 촬영장소의 지형 등의 조건에 따라 인접한 범위로 포커싱 될 수 있다.
이처럼, 본 발명에 따른 파노라마 이미지 생성 시스템(1)은 사용자의 이동이나 제어없이, 복수의 촬영장치의 연결선 및 교차점을 자체적으로 포커싱시킴으로써, 파노라마 영상촬영에 익숙하지 않은 초심자도 용이하게 고품질의 파노라마 이미지를 촬영할 수 있다. 또한, 구동부(15)를 통한 촬영부(11)의 이동이 수행됨에 따라, 초광각 렌즈가 구비되지 않은 촬영장치를 통해서도 용이하게 파노라마 이미지를 생성할 수 있는 이점이 있다.
한편, 서버(13)에서 생성한 포커싱 명령은 출력부(17)로 전달되어 사용자가 구동부(15) 또는 촬영부(11)를 제어하기 위한 가이드라인이 출력부(17)에서 출력될 수 있다.
출력부(17)는 복수개의 촬영장치(111, 113, 115) 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 사용자를 안내하는 가이드라인 또는 상기 서버에서 생성된 파노라마 이미지를 출력할 수 있다. 출력부(17)는 각 촬영장치에서 촬영된 피사체(9)의 이미지를 독립적으로 출력할 수 있고, 서버(13)를 통해 취합된 파노라마 이미지 형태의 피사체(9)를 출력할 수 있다.
사용자는 출력부(17)를 통해 각 촬영장치에서 촬영된 이미지를 확인하고, 촬영된 이미지들의 중복영역, 촬영각도, 광 노출정도 등을 확인할 수 있다. 또한, 출력부(17)는 서버(13)를 통해 생성된 가이드라인을 출력할 수 있다. 상세하게, 가이드라인은 각 촬영장치의 촬영각도, 위치 및 촬영조건의 변경을 요청하는 이미지, 문구, 경고음 등을 포함할 수 있다. 사용자는 이 같은 가이드라인을 기초로 촬영부(11) 및 구동부(15)를 제어하여 피사체(9)를 재촬영 할 수 있으며, 이를 통해 향상된 품질의 파노라마 이미지를 생성할 수 있다.
이하, 본 발명의 실시 예에 따른 파노라마 이미지 생성 방법에 대하여 설명한다. 하기의 설명에서 파노라마 이미지 생성 시스템의 구성 및 특성과 관련되어 중복된 부분은 생략하며, 파노라마 이미지 생성 방법에 관련한 서술을 추가적으로 기재하도록 한다.
도 4는 본 발명의 일 실시 예에 따른 파노라마 이미지 생성 방법의 흐름도이다.
도 4를 참조하면, 본 발명의 일 실시 예에 따른 파노라마 이미지 생성 방법은 촬영준비 단계(S1), 촬영제어 단계(S3), 파노라마 이미지 촬영 단계(S5) 및 파노라마 이미지 출력 단계(S7)를 포함한다.
촬영준비 단계(S1)는 복수의 촬영장치에서 각각 독립적인 촬영영역을 설정하고, 피사체와 상기 복수의 촬영장치의 렌즈를 각각 연결한 선을 산출할 수 있다. 촬영준비 단계(S1)는 복수의 촬영장치로 피사체를 촬영할 수 있다. 촬영준비 단계(S1)에서는 복수의 촬영장치가 피사체를 촬영하기 위해 배치될 수 있으며, 각각의 촬영장치에서 촬영된 영상을 기초로 촬영장치의 연결선이 형성될 수 있다.
촬영제어 단계(S3)는 촬영준비 단계(S1)에서 설정된 촬영영역 간 중복영역을 산출하고, 복수의 촬영장치의 렌즈와 피사체를 연결한 선들의 교차점을 산출하여 중복영역과 교차점이 미리 정해진 범위내로 존재하도록 시스템을 제어할 수 있다. 촬영제어 단계(S3)는 복수의 촬영장치 각각의 연장선이 교차하는 교차점을 산출할 수 있다. 촬영제어 단계(S3)에서는 산출된 교차점을 유효영역 내측으로 포커싱시킬 수 있다. 촬영제어 단계(S3)에서 교차점의 포커싱 명령은 서버를 통해 촬영부 또는 구동부로 전달될 수 있다. 촬영제어 단계(S3)에서 촬영영역과 중복영역을 제어하는 원리는 도 5 및 도 6을 통해 상세히 설명하도록 한다.
파노라마 이미지 촬영 단계(S5)는 촬영제어 단계(S5)에서 제어된 복수의 촬영장치에서 피사체의 이미지를 촬영할 수 있다. 파노라마 이미지 촬영 단계(S5)는 교차점이 인접하게 포커싱된 상태에서 파노라마 이미지를 촬영할 수 있으며, 각 촬영장치에서 촬영된 이미지는 서버를 통해 종합될 수 있다. 또한, 파노라마 이미지 촬영 단계(S5)는 촬영제어 단계(S5)에서 보정된 촬영영역을 갖는 촬영장치를 통해 피사체를 촬영할 수 있으며, 중복영역이 최적화된 상태에서 피사체를 촬영함으로써 고품질의 파노라마 이미지를 촬영할 수 있다.
파노라마 이미지 출력 단계(S7)는 유효영역으로 포커싱된 교차점을 갖는 촬영장치에서 각각 재촬영된 데이터를 취합하여 파노라마 형태의 이미지를 출력할 수 있다. 또한, 파노라마 이미지 출력 단계(S7)에서는 중복영역이 최적화된 촬영장치에서 촬영된 이미지를 종합하여 파노라마 이미지를 출력할 수 있다. 파노라마 이미지 출력 단계(S7)에서는 교차점이 포커싱된 상태에서 각 촬영장치가 재촬영한 피사체의 이미지 및 중복영역이 최적화된 촬영장치에서 촬영된 이미지를 서버에서 종합할 수 있으며, 서버에서 종합된 데이터는 출력부로 전달되어 파노라마 이미지 또는 형상 형태로 출력될 수 있다.
도 5 및 도 6은 도 1의 시스템의 촬영부가 촬영영역을 조율하는 과정을 설명하기 위한 도면이다.
도 5 및 도 6을 참조하면, 촬영부(11)는 촬영장치의 렌즈, 조리개 또는 위치 중 적어도 하나를 조절하여 촬영영역을 제어할 수 있다. 파노라마 이미지 촬영 단계(S5)에서는 서버에서 산출한 각 촬영영역을 제어하여 중복영역을 최적화 할 수 있다.
일 예로, 제1 촬영장치(111)의 촬영영역을 제1 촬영영역(Z1)으로 정의하고, 제2 촬영장치(113)의 촬영영역을 제2 촬영영역(Z3)으로 정의하는 경우, 제2 촬영영역(Z3)이 도 5와 같이 기울어진 형태로 형성되어 중복영역(Z0)이 과도하게 설정될 수 있다. 이때, 서버(13)는 제2 촬영장치(113)를 제어하는 명령을 전달하여 제2 촬영영역(Z3)을 재설정할 수 있다. 이를 통해, 도 6과 같이 제2 촬영영역(Z3)이 제1 촬영영역(Z1)과 평행하게 설정될 수 있으며, 중복영역(Z0)이 최적화 되어 피사체(9)를 재촬영할 수 있다. 이를 통해, 시스템(1)의 각 촬영장치 간 과도한 중복영역이 형성되는 것을 방지할 수 있으며, 고품질의 파노라마 이미지를 촬영할 수 있다.
한편, 서버(13)를 통해 생성되는 포커싱 명령은 구동부(15)로 먼저 전달되어 촬영부(11)의 위치를 변경할 수 있으며, 촬영부(11)로 직접 전달되어 촬영영역을 제어할 수 있다. 또한, 서버(13)를 통해 생성되는 포커싱 명령은 촬영부(11) 및 구동부(15)로 전달되어 촬영부(11)의 위치와 촬영영역이 동시에 제어될 수 있다.
이처럼, 본 발명에 따른 파노라마 이미지 생성 시스템 및 방법은 자체적으로 촬영부 및 구동부의 설정을 변경하는 제어가 가능하여, 파노라마 전용 촬영장치가 아닌 기기를 통해서도 용이하게 파노라마 이미지를 생성할 수 있다.
또한, 본 발명에 따른 파노라마 이미지 생성 시스템 및 방법은 각 촬영장치당 피사체를 촬영하는 범위의 과도한 중복을 방지하기 위한 가이드를 사용자에게 제공하여, 촬영장치에 익숙하지 않은 초심자도 고품질의 파노라마 이지미를 용이하게 획득할 수 있는 이점이 있다.
이상에서 대표적인 실시 예를 통하여 본 발명을 상세하게 설명하였으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 상술한 실시 예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리 범위는 설명한 실시 예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 특허청구범위와 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태에 의하여 정해져야 한다.
1: 파노라마 이미지 생성 시스템
11: 촬영부
111: 제1 촬영장치
113: 제2 촬영장치
115: 제3 촬영장치
13: 서버
15: 구동부
151: 제1 구동기
153: 제2 구동기
155: 제3 구동기
17: 출력부
9: 피사체
L1: 제1 연결선
L3: 제2 연결선
L5: 제3 연결선
P0: 유효영역
P1: 제1 교차점
P3: 제2 교차점
P5: 제3 교차점
Z0: 중복영역
Z1: 제1 촬영영역
Z3: 제2 촬영영역

Claims (5)

  1. 피사체를 촬영하여 파노라마 이미지를 생성하는 복수개의 촬영장치를 포함하는 촬영부; 및
    상기 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 각각의 촬영장치를 제어하고, 상기 복수개의 촬영장치에서 촬영된 피사체의 정보를 취합하여 파노라마 이미지를 생성하는 서버;를 포함하는, 파노라마 이미지 생성 시스템.
  2. 제 1 항에 있어서,
    상기 촬영부는,
    고정된 상태로 피사체를 촬영하는 기준 촬영장치; 및
    상기 기준 촬영장치와 상기 피사체의 배치에 기초하여 위치가 변경되어 상기 피사체를 촬영하는 보조 촬영장치;를 포함하고,
    상기 서버는,
    상기 기준 촬영장치의 주변에 위치한 상기 보조 촬영장치의 렌즈를 조절하여 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 제어하는, 파노라마 이미지 생성 시스템.
  3. 제 2 항에 있어서,
    상기 촬영부와 연결되며, 상기 서버의 제어를 기초로 상기 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 상기 기준 촬영장치의 주변에 위치한 상기 보조 촬영장치의 위치를 조절하는 구동부;를 더 포함하는, 파노라마 이미지 생성 시스템.
  4. 제 2 항에 있어서,
    상기 복수개의 촬영장치 각각의 렌즈와 피사체를 연결한 선의 교차점 간의 간격이 미리 정해진 범위 내에 존재하도록 사용자를 안내하는 가이드라인 또는 상기 서버에서 생성된 파노라마 이미지를 출력하는 출력부;를 더 포함하는, 파노라마 이미지 생성 시스템.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 따른 파노라마 이미지 생성 시스템을 이용한 파노라마 이미지 생성 방법에 있어서,
    상기 복수의 촬영장치에서 각각 독립적인 촬영영역을 설정하고, 상기 피사체와 상기 복수의 촬영장치의 렌즈를 각각 연결한 선을 산출하는 촬영준비 단계;
    상기 촬영준비 단계에서 설정된 상기 촬영영역 간 중복영역을 산출하고, 상기 복수의 촬영장치의 렌즈와 상기 피사체를 연결한 선들의 교차점을 산출하여 상기 중복영역과 상기 교차점이 미리 정해진 범위내로 존재하도록 상기 시스템을 제어하는 촬영제어 단계;
    상기 촬영제어 단계에서 제어된 상기 복수의 촬영장치에서 상기 피사체의 이미지를 촬영하는 파노라마 이미지 촬영 단계; 및
    상기 파노라마 이미지 촬영 단계에서 촬영된 이미지를 기초로 상기 출력부에서 파노라마 이미지를 출력하는 파노라마 이미지 출력 단계;를 포함하는 파노라마 이미지 생성 방법.
KR1020180156217A 2018-12-06 2018-12-06 파노라마 이미지 생성 시스템 및 방법 KR102127764B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180156217A KR102127764B1 (ko) 2018-12-06 2018-12-06 파노라마 이미지 생성 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180156217A KR102127764B1 (ko) 2018-12-06 2018-12-06 파노라마 이미지 생성 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20200069078A true KR20200069078A (ko) 2020-06-16
KR102127764B1 KR102127764B1 (ko) 2020-07-09

Family

ID=71141708

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180156217A KR102127764B1 (ko) 2018-12-06 2018-12-06 파노라마 이미지 생성 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102127764B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021251670A1 (ko) 2020-06-08 2021-12-16 주식회사 엘지에너지솔루션 배터리 모듈이 다단으로 적층된 전지 팩
WO2023042937A1 (ko) * 2021-09-16 2023-03-23 엘지전자 주식회사 무선 통신 시스템에서 메타렌즈 인공지능 시스템에 기초하여 신호를 송수신하는 방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006080580A (ja) * 2004-09-07 2006-03-23 Hitachi Ltd 広視野角映像撮影装置
KR101509948B1 (ko) 2013-10-23 2015-04-08 서울과학기술대학교 산학협력단 차량용 초광각 파노라마 영상 촬영 장치
WO2017203796A1 (ja) * 2016-05-25 2017-11-30 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006080580A (ja) * 2004-09-07 2006-03-23 Hitachi Ltd 広視野角映像撮影装置
KR101509948B1 (ko) 2013-10-23 2015-04-08 서울과학기술대학교 산학협력단 차량용 초광각 파노라마 영상 촬영 장치
WO2017203796A1 (ja) * 2016-05-25 2017-11-30 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021251670A1 (ko) 2020-06-08 2021-12-16 주식회사 엘지에너지솔루션 배터리 모듈이 다단으로 적층된 전지 팩
DE202021004367U1 (de) 2020-06-08 2023-12-08 Lg Energy Solution, Ltd. Batteriepack einschliesslich in mehreren Stufen gestapelter Batteriemodule
WO2023042937A1 (ko) * 2021-09-16 2023-03-23 엘지전자 주식회사 무선 통신 시스템에서 메타렌즈 인공지능 시스템에 기초하여 신호를 송수신하는 방법 및 장치

Also Published As

Publication number Publication date
KR102127764B1 (ko) 2020-07-09

Similar Documents

Publication Publication Date Title
US10425638B2 (en) Equipment and method for promptly performing calibration and verification of intrinsic and extrinsic parameters of a plurality of image capturing elements installed on electronic device
JP6849584B2 (ja) 高速度可変焦点フィールドレンズ組立体及び関連方法
CN103763477B (zh) 一种双摄像头拍后调焦成像装置和方法
US8760502B2 (en) Method for improving 3 dimensional effect and reducing visual fatigue and apparatus enabling the same
JP5814692B2 (ja) 撮像装置及びその制御方法、プログラム
JP5609562B2 (ja) 立体画像撮像装置
JP2011139368A (ja) 撮像装置の制御装置および制御方法
US20210377432A1 (en) Information processing apparatus, information processing method, program, and interchangeable lens
KR102127764B1 (ko) 파노라마 이미지 생성 시스템 및 방법
WO2019023914A1 (zh) 一种图像处理方法、无人机、地面控制台及其图像处理系统
JP6418770B2 (ja) 画像処理装置、撮像装置、画像処理方法、プログラム、および記憶媒体
JP5886781B2 (ja) 焦点検出装置、焦点検出方法およびプログラム、並びに撮像装置
KR100915039B1 (ko) 다중 초점 2차원 영상을 이용한 3차원 입체 영상 변환 방법및 변환 장치와 이를 위한 기록매체
JP2021078124A (ja) インテリジェント撮影システムの撮影制御方法、装置、記憶媒体及びシステム
JP6700935B2 (ja) 撮像装置、その制御方法、および制御プログラム
US20130021442A1 (en) Electronic camera
JP5889022B2 (ja) 撮像装置、画像処理装置、画像処理方法及びプログラム
CN108513122B (zh) 基于3d成像技术的模型调整方法及模型生成装置
WO2015141185A1 (ja) 撮像制御装置、撮像制御方法および記録媒体
JP2013105002A (ja) ３ｄ映像撮影制御システム、３ｄ映像撮影制御方法、およびプログラム
KR100709370B1 (ko) 입체영상을 생성하는 광학계
US9602701B2 (en) Image-pickup apparatus for forming a plurality of optical images of an object, control method thereof, and non-transitory computer-readable medium therefor
JP6218615B2 (ja) 表示機器、表示方法、撮影装置及び撮影システム
KR101283825B1 (ko) 3-ｄ 오토-컨버전스 카메라
JP2022029567A (ja) 制御装置、制御方法およびプログラム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant