KR20170081522A - 다시점 영상 보정 장치 및 방법 - Google Patents

다시점 영상 보정 장치 및 방법 Download PDF

Info

Publication number
KR20170081522A
KR20170081522A KR1020160000654A KR20160000654A KR20170081522A KR 20170081522 A KR20170081522 A KR 20170081522A KR 1020160000654 A KR1020160000654 A KR 1020160000654A KR 20160000654 A KR20160000654 A KR 20160000654A KR 20170081522 A KR20170081522 A KR 20170081522A
Authority
KR
South Korea
Prior art keywords
image
view image
correction parameter
object images
images
Prior art date
Application number
KR1020160000654A
Other languages
English (en)
Inventor
정재숙
김상원
정일권
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020160000654A priority Critical patent/KR20170081522A/ko
Publication of KR20170081522A publication Critical patent/KR20170081522A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H04N13/0014—
    • H04N13/0282—
    • H04N13/0445—

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

본 발명의 일 실시예에 따른 다시점 영상 보정 장치는 기준 물체를 포함하는 기준 다시점 영상 및 기준 다시점 영상과 동일한 시점(view point) 및 방향에 따른 촬영을 통해 생성된 다시점 영상을 입력 받는 영상 입력부, 기준 다시점 영상으로부터 기준 물체에 해당하는 픽셀을 포함하는 물체 이미지를 추출하는 물체 이미지 추출부, 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 보정 파라미터 산출부 및 보정 파라미터에 따라 다시점 영상을 보정하여 보정 영상을 생성하는 영상 보정부를 포함한다.

Description

다시점 영상 보정 장치 및 방법{APPARATUS AND METHDO FOR CORRECTING MULTI VIEW IMAGE}
본 발명은 다시점 영상의 객체 위치, 방향 및 크기를 보정하는 기술에 관한 것으로, 보다 상세하게는 기준 물체를 기준으로 다시점 영상의 피사체인 객체의 위치, 방향 및 크기가 서로 유사하도록 보정된 보정 영상을 생성하는 기술에 관한 것이다.
다시점 영상의 촬영에 사용되는 카메라 그룹에 대한 캘리브레이션(calibration) 작업은 시간이 많이 걸리는 작업이다. 또한, 캘리브레이션 작업은 카메라의 시점 및 위치가 바뀔 때마다 수행되어야 한다. 따라서, 다시점 영상에 대한 촬영은 시간이 많이 소요되기 때문에 다시점 영상을 제작하기 위해 소요되는 비용은 크다. 또한, 실외 촬영에서 캘리브레이션 작업은 실내 촬영의 캘리브레이션 작업에 비해 정확도가 떨어질 가능성이 높다.
즉, 캘리브레이션 작업이 진행되었다고 하더라도, 카메라 그룹을 통해 촬영된 다시점 영상에 포함된 각 시점에 해당하는 영상에서 피사체인 객체의 위치나 높낮이 등이 약간씩 틀릴 수 있다.
본 발명이 해결하고자 하는 과제는 카메라 그룹을 통해 촬영된 각 시점에 대한 영상에 포함된 객체의 위치, 방향 및 크기가 서로 유사하도록 보정하여 보정 영상을 생성하는 다시점 영상 보정 장치 및 방법을 제공하는 것이다.
본 발명의 일 측면에 따르면, 기준 물체를 포함하는 기준 다시점 영상 및 상기 기준 다시점 영상과 동일한 시점(view point) 및 촬영 방향에 따른 촬영을 통해 생성된 다시점 영상을 입력 받는 영상 입력부; 상기 기준 다시점 영상으로부터 상기 기준 물체에 해당하는 픽셀을 포함하는 물체 이미지를 추출하는 물체 이미지 추출부; 상기 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 보정 파라미터 산출부; 및 상기 보정 파라미터에 따라 상기 다시점 영상을 보정하여 보정 영상을 생성하는 영상 보정부를 포함하는 다시점 영상 보정 장치가 제공된다.
상기 기준 물체는 구 또는 타원 회전체의 형태일 수 있다.
상기 기준 물체는 카메라 배열면에 대한 수직 방향의 축을 기준으로 형성되는 구 또는 타원 회전체의 형태일 수 있다.
상기 기준 물체의 표면은 미리 지정된 무늬를 띨 수 있다.
상기 보정 파라미터 산출부는 각 상기 물체 이미지의 크기가 상이한 경우, 하나 이상의 상기 물체 이미지를 축소 또는 확대하여 각 물체 이미지의 크기 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하고, 각 상기 물체 이미지의 위치가 상이한 경우, 하나 이상의 상기 물체 이미지를 이동하여 각 물체 이미지의 위치 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하고, 각 기준 다시점 영상의 물체 이미지의 방향이 상이한 경우, 하나 이상의 물체 이미지를 회전하여 각 물체 이미지의 방향 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다.
본 발명의 다른 측면에 따르면, 다시점 영상 보정 장치가 다시점 영상을 보정하는 방법에 있어서, 복수의 카메라를 통해 기준 물체를 촬영하여 기준 다시점 영상을 각각 생성하는 단계; 상기 기준 다시점 영상으로부터 상기 기준 물체에 해당하는 픽셀을 포함하는 물체 이미지를 추출하는 단계; 상기 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 단계; 상기 기준 다시점 영상의 촬영과 동일한 시점(view point)에서 촬영을 수행하여 다시점 영상을 생성하는 단계; 및 상기 보정 파라미터에 따라 상기 다시점 영상을 보정하여 보정 영상을 생성하는 단계; 를 포함하는 다시점 영상 보정 방법이 제공된다.
상기 기준 물체는 구 또는 타원 회전체의 형태일 수 있다.
상기 기준 물체는 카메라 배열면에 대한 수직 방향의 축을 기준으로 형성되는 구 또는 타원 회전체의 형태일 수 있다.
상기 기준 물체의 표면은 미리 지정된 무늬를 띨 수 있다.
상기 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 단계는, 각 상기 물체 이미지의 크기가 상이한 경우, 하나 이상의 상기 물체 이미지를 축소 또는 확대하여 각 물체 이미지의 크기 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 단계; 각 상기 물체 이미지의 위치가 상이한 경우, 하나 이상의 상기 물체 이미지를 이동하여 각 물체 이미지의 위치 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 단계; 각 기준 다시점 영상의 물체 이미지의 방향이 상이한 경우, 하나 이상의 물체 이미지를 회전하여 각 물체 이미지의 방향 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 단계;를 포함할 수 있다.
상술한 바와 같이 본 발명의 일 실시예에 따르면, 각 시점에 따른 영상에 포함된 객체의 위치가 서로 동일하도록 다시점 영상을 보정할 수 있다.
또한, 본 발명의 일 실시예에 따르면, 카메라 캘리브레이션 과정을 간소화하거나 생략하더라도 다시점 영상의 보정을 통해 객체의 위치가 상이한 오류를 제거하도록 하여 고품질의 다시점 영상의 촬영에 소요되는 시간을 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 다시점 영상 보정 장치를 예시한 블록도.
도 2는 본 발명의 일 실시예에 따른 다시점 영상 보정 장치의 기준 물체를 구 형태로 예시한 도면.
도 3은 본 발명의 일 실시예에 따른 다시점 영상 보정 장치의 기준 물체를 타원 회전체 형태로 예시한 도면.
도 4는 본 발명의 일 실시에에 따른 다시점 영상 보정 장치가 영상의 객체의 위치를 보정하는 과정을 예시한 순서도.
도 5는 발명의 일 실시예에 따른 다시점 영상 보정 장치가 구현된 컴퓨터 시스템을 예시한 도면.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 이를 상세한 설명을 통해 상세히 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
또한, 본 명세서에서, 일 구성요소가 다른 구성요소로 신호를 “전송한다”로 언급된 때에는, 상기 일 구성요소가 상기 다른 구성요소와 직접 연결되어 신호를 전송할 수 있지만, 특별히 반대되는 기재가 존재하지 않는 이상, 중간에 또 다른 구성요소를 매개하여 신호를 전송할 수도 있다고 이해되어야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 다시점 영상 보정 장치를 예시한 블록도이고, 도 2는 본 발명의 일 실시예에 따른 다시점 영상 보정 장치의 기준 물체를 구 형태로 예시한 도면이고, 도 3은 본 발명의 일 실시예에 따른 다시점 영상 보정 장치의 기준 물체를 타원 회전체 형태로 예시한 도면이다. 도 1을 참조하면, 다시점 영상 보정 장치는 영상 입력부(120), 물체 이미지 추출부(130), 보정 파라미터 산출부(140) 및 영상 보정부(150)를 포함한다.
영상 입력부(120)는 기준 물체(110)가 위치한 영역을 촬영하여 생성된 기준 다시점 영상을 수신한다. 또한, 영상 입력부(120)는 해당 영역에서 기준 물체가 제거된 상태에서 재촬영을 수행하여 다시점 영상을 생성한다. 즉, 이하에서 설명하는 기준 다시점 영상은 각 영상 입력부(120)가 각 시점(veiw point) 및 촬영 방향에 따라 기준 물체가 놓여진 영역을 촬영한 영상을 지칭하고, 다시점 영상은 기준 다시점 영상과 동일한 시점 및 촬영 방향에 따라 각 영상 입력부(120)가 기준 물체가 제거된 상태에서 촬영한 영상을 지칭하도록 한다. 영상 입력부(120)는 기준 다시점 영상을 물체 이미지 추출부(130)로 전송하고, 다시점 영상을 영상 보정부(150)로 전송한다. 이 때, 영상 입력부(120)는 기준 다시점 영상 및 다시점 영상을 복수의 카메라(125)로부터 직접 수신하거나, 네트워크를 통해 수신하거나, 각 카메라(125)에 의해 촬영된 기준 다시점 영상 및 다시점 영상이 저장된 저장 매체로부터 수신할 수 있다.
기준 물체(110)는 복수의 영상 입력부(120)를 통해 촬영된 각 영상의 확대/축소, 회전 및 이동 중 하나 이상을 수행하는 보정 과정에서 각 영상의 보정이 되는 정도를 나타내는 보정 파라미터를 산출하기 위한 기준을 제공하는 물체이다. 기준 물체(110)는 카메라(125)의 수직 방향(예를 들어, 복수의 카메라를 배열하기 위한 기준이 되는 가상의 면인 카메라 배열면과 수직한 방향 -각 카메라는 카메라 좌표계 상에서 카메라 배열면이 수평이 되도록 배열될 수 있음-)과 유사한 방향의 선 중 하나를 기준으로 형성되는 회전체일 수 있다. 예를 들어, 기준 물체(110)는 도 2와 같이 구의 형상일 수 있다. 또한, 기준 물체(110)는 도 3과 같이 타원 회전체의 형상일 수 있다. 이 때, 이 때,　기준 물체는 표면에 기준 물체가 포함된 영상에서 기준 물체의 상하 좌우의 크기를 비교할 수 있는 무늬를 가질 수 있다. 또한, 도 2 및 도 3과 같이 기준 물체를 사용자가 잡기 용이하도록 손잡이가 기준 물체(110)에 부착되거나, 특정 위치에 기준 물체가 지지될 수 있도록 기준 물체(110)에 받침대가 부착될 수 있다. 도 2 및 도 3을 기준으로 상술한 기준 물체(110)의 무늬는 일 실시예로 제시한 것으로, 기준 물체(110) 상에 형성되는 무늬는 도 2 및 도 3과 상이한 형태일 수 있음은 자명하다.
물체 이미지 추출부(130)는 영상 입력부(120)로부터 수신한 기준 다시점 영상에서 기준 물체(110)가 위치하는 영역인 물체 영역을 추출한다. 이 때, 물체 이미지 추출부(130)는 공지된 객체 영역을 추출하는 알고리즘을 통해 기준 다시점 영상에서 물체 영역을 추출할 수 있다. 물체 이미지 추출부(130)는 물체 영역에 해당하는 픽셀을 포함하는 이미지(이하, 물체 이미지라 지칭)을 보정 파라미터 산출부(140)로 전송한다.
보정 파라미터 산출부(140)는 각 기준 다시점 영상의 물체 이미지를 비교하여 보정 파라미터를 산출한다. 이 때, 보정 파라미터는 각 영상 입력부(120)로부터 수신된 다시점 영상에 대한 확대, 축소, 회전, 이동 중 하나 이상이 적용되어야 하는 정도를 나타내는 파라미터이다. 예를 들어, 보정 파라미터는 일 카메라에서 생성된 다시점 영상을 2배 확대 시키고, 시계방향으로 2도 회전시키고, 다시점 영상의 각 픽셀의 값을 우측 방향으로 두 픽셀씩 이동시켜야 함을 나타내는 파라미터일 수 있다.
구체적으로 설명하면, 보정 파라미터 산출부(140)는 각 기준 다시점 영상의 물체 이미지의 방향이 상이한 경우, 하나 이상의 물체 이미지를 회전하여 각 물체 이미지의 방향 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다. 예를 들어, 임의의 물체 이미지 쌍의 일 물체 이미지의 위치가 타 물체 이미지보다 반시계 방향으로 2도 틀어진 경우, 보정 파라미터 산출부(140)는 일 물체 이미지를 미리 지정된 수치(1도)만큼 회전한 후, 타 물체 이미지와 일 물체 이미지의 크기의 방향 차이가 미리 지정된 수치 이하인지 확인할 수 있다. 보정 파라미터 산출부(140)는 상술한 일 물체 이미지의 회전 및 물체 이미지 간의 방향 비교 과정을 타 물체 이미지와 일 물체 이미지의 방향 차이가 미리 지정된 수치 이하일 때까지 반복 수행할 수 있다. 보정 파라미터 산출부(140)는 모든 물체 이미지 쌍에 대해 상술한 과정을 적용하여 모든 물체 이미지 간 방향 차이가 미리 지정된 수치 이하인 경우, 각 물체 이미지와 동일한 카메라(125)에 의해 생성되는 다시점 영상의 방향을 각 물체 이미지를 회전시킨 정도만큼 이동하는 것을 나타내는 보정 파라미터를 생성할 수 있다. 이 때, 보정 파라미터 산출부(140)는 각 물체 이미지의 형상 또는 각 물체 이미지 내의 무늬(기준 물체의 무늬의 방향)를 비교하여, 각 물체 이미지의 방향이 상이한지 판단할 수 있다. 보정 파라미터 산출부(140)는 보정 파라미터를 영상 보정부(150)로 전송한다.
또한, 보정 파라미터 산출부(140)는 각 기준 다시점 영상의 물체 이미지의 크기가 상이한 경우, 하나 이상의 물체 이미지를 축소 또는 확대하여 각 물체 이미지의 크기 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다. 예를 들어, 임의의 두 물체 이미지(물체 이미지 쌍) 중 일 물체 이미지의 크기가 타 물체 이미지의 크기보다 작은 경우, 보정 파라미터 산출부(140)는 일 물체 이미지를 미리 지정된 수치만큼 확대한 후, 타 물체 이미지와 일 물체 이미지의 크기의 차이가 미리 지정된 수치 이하인지 확인할 수 있다. 보정 파라미터 산출부(140)는 상술한 일 물체 이미지의 확대 및 물체 이미지 간의 크기 비교 과정을 타 물체 이미지와 일 물체 이미지의 크기의 차이가 미리 지정된 수치 이하일 때까지 반복 수행할 수 있다. 또한, 보정 파라미터 산출부(140)는 모든 물체 이미지 쌍에 대해 상술한 과정을 적용하여 모든 물체 이미지의 크기의 차이가 미리 지정된 수치 이하인 경우, 각 물체 이미지와 동일한 카메라(125)에 의해 생성되는 다시점 영상의 크기를 각 물체 이미지를 확대한 비율만큼 확대하는 것을 나타내는 보정 파라미터를 생성할 수 있다.
또한, 보정 파라미터 산출부(140)는 각 기준 다시점 영상의 물체 이미지의 위치가 상이한 경우, 하나 이상의 물체 이미지를 이동하여 각 물체 이미지의 위치 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다. 예를 들어, 임의의 물체 이미지 쌍의 일 물체 이미지의 위치가 타 물체 이미지보다 2 픽셀 왼쪽으로 치우친 경우, 보정 파라미터 산출부(140)는 일 물체 이미지를 미리 지정된 수치(예를 들어, 1 픽셀)만큼 이동한 후, 타 물체 이미지와 일 물체 이미지의 크기의 위치 차이가 미리 지정된 수치 이하인지 확인할 수 있다. 보정 파라미터 산출부(140)는 상술한 일 물체 이미지의 이동 및 물체 이미지 간의 위치 비교 과정을 타 물체 이미지와 일 물체 이미지의 위치의 차이가 미리 지정된 수치 이하일 때까지 반복 수행할 수 있다. 보정 파라미터 산출부(140)는 모든 물체 이미지 쌍에 대해 상술한 과정을 적용하여 모든 물체 이미지의 위치의 차이가 미리 지정된 수치 이하인 경우, 각 물체 이미지와 동일한 카메라(125)에 의해 생성되는 다시점 영상의 위치를 각 물체 이미지를 이동시킨 픽셀만큼 이동하는 것을 나타내는 보정 파라미터를 생성할 수 있다.
이 때, 상술한 보정 파라미터 산출부(140)는 물체 이미지의 확대, 이동 및 회전을 물체 이미지 쌍 중 하나의 물체 이미지에 대해서만 수행하는 것으로 설명하였으나, 물체 이미지 쌍 모두에 대해 회전, 확대 및 이동이 적용되도록 변경될 수 있다.
영상 보정부(150)는 보정 파라미터에 따라 각 영상 입력부(120)로부터 수신한 하나 이상의 다시점 영상을 보정하여 보정 영상을 생성한다. 즉, 영상 보정부(150)는 보정 파라미터에 따라 회전, 확대(또는 축소), 이동 중 하나 이상의 보정 과정을 다시점 영상 중 하나 이상에 대해 적용하여 보정 영상을 생성한다. 따라서, 영상 보정부(150)가 생성한 보정 영상은 각 카메라(125)에 정확한 캘리브레이션이 적용되지 않거나, 캘리브레이션이 생략되는 경우에도, 정확한 캘리브레이션이 적용된 상황에서 촬영된 다시점 영상과 유사하다.
도 4는 본 발명의 일 실시에에 따른 다시점 영상 보정 장치가 영상의 객체의 위치를 보정하는 과정을 예시한 순서도이다. 이하 설명하는 각 과정은 다시점 영상 보정 장치가 포함하는 각 기능부에 의해 수행되는 과정이나, 발명의 간결하고 명확한 설명을 위해 각 단계의 주체는 다시점 영상 보정 장치로 통칭하도록 한다.
도 4를 참조하면, 단계 410에서 다시점 영상 보정 장치는 기준 물체(110)가 위치한 영역을 복수의 카메라(125)를 통해 촬영하여 생성된 기준 다시점 영상을 수신한다. 예를 들어, 특정 장면의 촬영을 위해 카메라(125)가 설치되고, 각 카메라(125)에 대해 캘리브레이션 과정이 적용된 후, 다시점 영상 보정 장치는 설치된 카메라를 통해 생성되는 기준 다시점 영상을 수신할 수 있다. 다시점 영상 보정 장치는 기준 다시점 영상을 복수의 카메라(125)로부터 직접 수신하거나, 네트워크를 통해 수신하거나, 각 카메라(125)에 의해 촬영된 기준 다시점 영상이 저장된 저장 매체로부터 수신할 수 있다.
단계 420에서 다시점 영상 보정 장치는 각 기준 다시점 영상으로부터 물체 이미지를 추출한다. 이 때, 물체 이미지는 기준 다시점 영상에 포함된 픽셀 중 기준 물체(110)에 해당하는 픽셀을 포함하는 이미지를 지칭한다.
단계 430에서 다시점 영상 보정 장치는 물체 이미지 간의 비교를 통해 보정 파라미터를 생성한다. 예를 들어, 다시점 영상 보정 장치는 각 기준 다시점 영상의 물체 이미지의 크기가 상이한 경우, 하나 이상의 물체 이미지에 상응하는 다시점 영상을 축소 또는 확대하여 각 물체 이미지의 크기 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다. 또한, 다시점 영상 보정 장치는 각 기준 다시점 영상의 물체 이미지의 위치가 상이한 경우, 하나 이상의 물체 이미지에 상응하는 다시점 영상을 이동하여 각 물체 이미지의 위치 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다. 또한, 다시점 영상 보정 장치는 각 기준 다시점 영상의 물체 이미지의 방향이 상이한 경우, 하나 이상의 물체 이미지에 상응하는 다시점 영상을 회전하여 각 물체 이미지의 방향 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성할 수 있다.
단계 440에서 다시점 영상 보정 장치는 다시점 영상은 기준 다시점 영상과 동일한 시점에서 각 카메라(125)가 기준 물체가 제거된 상태에서 촬영한 영상인 다시점 영상을 수신한다. 다시점 영상 보정 장치는 다시점 영상을 복수의 카메라(125)로부터 직접 수신하거나, 네트워크를 통해 수신하거나, 각 카메라(125)에 의해 촬영된 다시점 영상이 저장된 저장 매체로부터 수신할 수 있다.
단계 450에서 다시점 영상 보정 장치는 단계 430에서 생성한 보정 파라미터에 따라 다시점 영상을 보정하여 보정 영상을 생성한다. 예를 들어, 다시점 영상 보정 장치는 보정 파라미터에 따라 확대, 축소, 회전, 이동 중 하나 이상의 보정 과정을 다시점 영상 중 하나 이상에 대해 적용하여 보정 영상을 생성한다.
따라서, 본 발명의 일 실시예에 따른 다시점 영상 보정 장치는 카메라(125)에 대해 간소화된 캘리브레이션을 수행하거나 캘리브레이션 과정 자체를 생략하더라도, 각 시점의 영상 간의 오차가 적은 다시점 영상을 생성할 수 있다.
상술한 본 발명의 일 실시예에 따른 다시점 영상 보정 장치는 컴퓨터 시스템으로 구현될 수 있다.
도 5는 발명의 일 실시예에 따른 다시점 영상 보정 장치가 구현된 컴퓨터 시스템을 예시한 도면이다.
본 발명에 따른 실시예는 컴퓨터 시스템 내에, 예를 들어, 컴퓨터 판독가능 기록매체로 구현될 수 있다. 도 5에 도시된 바와 같이, 컴퓨터 시스템(500)은 하나 이상의 프로세서(510), 메모리(520), 저장부(530), 사용자 인터페이스 입력부(540) 및 사용자 인터페이스 출력부(550) 중 적어도 하나 이상의 요소를 포함할 수 있으며, 이들은 버스(560)를 통해 서로 통신할 수 있다. 또한, 컴퓨터 시스템(500)은 네트워크 에 접속하기 위한 네트워크 인터페이스(570)를 또한 포함할 수 있다. 프로세서(510)는 메모리(520) 및/또는 저장부(530)에 저장된 처리 명령어를 실행시키는 CPU 또는 반도체 소자일 수 있다. 메모리(520) 및 저장부(530)는 다양한 유형의 휘발성/비휘발성 기억 매체를 포함할 수 있다. 예를 들어, 메모리는 ROM(524) 및 RAM(525)를 포함할 수 있다.
이제까지 본 발명에 대하여 그 실시 예를 중심으로 살펴보았다. 전술한 실시 예 외의 많은 실시 예들이 본 발명의 특허청구범위 내에 존재한다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예는 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (10)

  1. 기준 물체를 포함하는 기준 다시점 영상 및 상기 기준 다시점 영상과 동일한 시점(view point) 및 방향에 따른 촬영을 통해 생성된 다시점 영상을 입력 받는 영상 입력부;
    상기 기준 다시점 영상으로부터 상기 기준 물체에 해당하는 픽셀을 포함하는 물체 이미지를 추출하는 물체 이미지 추출부;
    상기 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 보정 파라미터 산출부; 및
    상기 보정 파라미터에 따라 상기 다시점 영상을 보정하여 보정 영상을 생성하는 영상 보정부
    를 포함하는 다시점 영상 보정 장치.
  2. 제1 항에 있어서,
    상기 기준 물체는 구 또는 타원 회전체의 형태인 것을 특징으로 하는 다시점 영상 보정 장치.
  3. 제2 항에 있어서,
    상기 기준 물체는 카메라 배열면에 대한 수직 방향의 축을 기준으로 형성되는 구 또는 타원 회전체의 형태인 것을 특징으로 하는 다시점 영상 보정 장치.
  4. 제2 항에 있어서,
    상기 기준 물체의 표면은 미리 지정된 무늬를 띠는 것을 특징으로 하는 다시점 영상 보정 장치.
  5. 제1 항에 있어서,
    상기 보정 파라미터 산출부는
    각 상기 물체 이미지의 크기가 상이한 경우, 하나 이상의 상기 물체 이미지를 축소 또는 확대하여 각 물체 이미지의 크기 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하고,
    각 상기 물체 이미지의 위치가 상이한 경우, 하나 이상의 상기 물체 이미지를 이동하여 각 물체 이미지의 위치 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하고,
    각 기준 다시점 영상의 물체 이미지의 방향이 상이한 경우, 하나 이상의 물체 이미지를 회전하여 각 물체 이미지의 방향 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 것을 특징으로 하는 다시점 영상 보정 장치.
  6. 다시점 영상 보정 장치가 다시점 영상을 보정하는 방법에 있어서,
    기준 물체를 포함하는 기준 다시점 영상을 입력 받는 단계;
    상기 기준 다시점 영상으로부터 상기 기준 물체에 해당하는 픽셀을 포함하는 물체 이미지를 추출하는 단계;
    상기 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 단계;
    상기 기준 다시점 영상과 동일한 시점(view point) 및 방향에 따른 촬영을 통해 생성된 다시점 영상을 입력 받는 단계; 및
    상기 보정 파라미터에 따라 상기 다시점 영상을 보정하여 보정 영상을 생성하는 단계;
    를 포함하는 다시점 영상 보정 방법.
  7. 제6 항에 있어서,
    상기 기준 물체는 구 또는 타원 회전체의 형태인 것을 특징으로 하는 다시점 영상 보정 방법.
  8. 제7 항에 있어서,
    상기 기준 물체는 카메라 배열면에 대한 수직 방향의 축을 기준으로 형성되는 구 또는 타원 회전체의 형태인 것을 특징으로 하는 다시점 영상 보정 방법.
  9. 제7 항에 있어서,
    상기 기준 물체의 표면은 미리 지정된 무늬를 띠는 것을 특징으로 하는 다시점 영상 보정 방법.
  10. 제6 항에 있어서,
    상기 물체 이미지를 서로 비교하여 보정 파라미터를 산출하는 단계는,
    각 상기 물체 이미지의 크기가 상이한 경우, 하나 이상의 상기 물체 이미지를 축소 또는 확대하여 각 물체 이미지의 크기 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 단계;
    각 상기 물체 이미지의 위치가 상이한 경우, 하나 이상의 상기 물체 이미지를 이동하여 각 물체 이미지의 위치 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 단계;
    각 기준 다시점 영상의 물체 이미지의 방향이 상이한 경우, 하나 이상의 물체 이미지를 회전하여 각 물체 이미지의 방향 간 차이가 미리 지정된 수치 이하가 되도록 하는 보정 파라미터를 생성하는 단계;
    를 포함하는 것을 특징으로 하는 다시점 영상 보정 방법.

KR1020160000654A 2016-01-04 2016-01-04 다시점 영상 보정 장치 및 방법 KR20170081522A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160000654A KR20170081522A (ko) 2016-01-04 2016-01-04 다시점 영상 보정 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160000654A KR20170081522A (ko) 2016-01-04 2016-01-04 다시점 영상 보정 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20170081522A true KR20170081522A (ko) 2017-07-12

Family

ID=59352870

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160000654A KR20170081522A (ko) 2016-01-04 2016-01-04 다시점 영상 보정 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20170081522A (ko)

Similar Documents

Publication Publication Date Title
US9774837B2 (en) System for performing distortion correction and calibration using pattern projection, and method using the same
JP6619105B2 (ja) カメラ較正システム
US11039121B2 (en) Calibration apparatus, chart for calibration, chart pattern generation apparatus, and calibration method
JP6391130B2 (ja) カメラキャリブレーション
CN112767542A (zh) 一种多目相机的三维重建方法、vr相机和全景相机
US20150124059A1 (en) Multi-frame image calibrator
KR101804205B1 (ko) 영상 처리 장치 및 방법
CN108734738B (zh) 相机标定方法及装置
US10692262B2 (en) Apparatus and method for processing information of multiple cameras
CN106570907B (zh) 一种相机标定方法及装置
EP3318053A1 (en) Full-spherical video imaging system and computer-readable recording medium
CN112862897B (zh) 一种基于相位移编码圆的相机离焦状态下的快速标定方法
CN112396663A (zh) 一种多深度相机的可视化标定方法、装置、设备和介质
CN111292380B (zh) 图像处理方法及装置
CN111353945B (zh) 鱼眼图像校正方法、装置及存储介质
JP7033294B2 (ja) 撮像システム、撮像方法
US10726528B2 (en) Image processing apparatus and image processing method for image picked up by two cameras
KR20170081522A (ko) 다시점 영상 보정 장치 및 방법
KR102430726B1 (ko) 멀티 카메라의 정보 처리 장치 및 방법
CN114399553A (zh) 基于相机姿态的虚拟视点生成方法及装置
CN117689899B (zh) 一种手势采集装置参数点检方法、系统、设备及存储介质
CN102110292A (zh) 一种虚拟体育中的变焦镜头标定方法及装置
CN118154698A (zh) 一种双目相机标定匹配方法、系统、设备及存储介质
JP2024537798A (ja) 撮影測定方法、装置、機器及び記憶媒体
WO2017002360A1 (en) Full-spherical video imaging system and computer-readable recording medium