KR20130059733A - 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 - Google Patents

2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 Download PDF

Info

Publication number
KR20130059733A
KR20130059733A KR1020110125865A KR20110125865A KR20130059733A KR 20130059733 A KR20130059733 A KR 20130059733A KR 1020110125865 A KR1020110125865 A KR 1020110125865A KR 20110125865 A KR20110125865 A KR 20110125865A KR 20130059733 A KR20130059733 A KR 20130059733A
Authority
KR
South Korea
Prior art keywords
image
control point
depth
information
depth information
Prior art date
Application number
KR1020110125865A
Other languages
English (en)
Inventor
김하윤
김아란
전병기
정원석
박영환
김대현
Original Assignee
에스케이플래닛 주식회사
(주)리얼디스퀘어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사, (주)리얼디스퀘어 filed Critical 에스케이플래닛 주식회사
Priority to KR1020110125865A priority Critical patent/KR20130059733A/ko
Priority to PCT/KR2012/007372 priority patent/WO2013081281A1/ko
Publication of KR20130059733A publication Critical patent/KR20130059733A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/158—Switching image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것으로서, 2차원 영상에서 선택된 객체에 Z 컨트롤 포인트를 설정하여 상기 Z 컨트롤 포인트를 Z축 방향으로 이동시켜 깊이 정보를 입력하는 사용자 입력부; 상기 Z 컨트롤 포인트의 이동에 따라 상기 객체의 깊이 정보를 인식하여 깊이 맵을 생성하는 깊이 맵 생성부; 상기 2차원 영상과 상기 선택된 객체를 디스플레이하는 디스플레이부; 및 상기 2차원 영상을 상기 디스플레이부에 표시하고, 상기 객체에 선택된 Z 컨트롤 포인트가 이동하는 경우 상기 Z 컨트롤 포인트를 포함하는 가상의 평면에 상기 객체를 투영하여 표시하는 영상 제어부를 포함한다. 이에 의해, 사용자가 입력된 깊이 정보를 시각적으로 확인하여 직관적인 방법으로 객체의 깊이 정보를 용이하게 입력할 수 있다.

Description

2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체{CONVERSION DEVICE FOR TWO DIMENSIONAL IMAGE TO THREE DIMENSIONAL IMAGE, METHOD THEREOF AND RECORDABLE MEDIUM STORING THE METHOD}
본 발명은 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것으로서, 보다 상세하게는 2차원 영상을 3차원 영상으로 변환하기 위해 깊이 맵을 생성하는 경우 사용자가 2차원 영상에서 객체를 선택하고 선택된 객체를 Z축 방향으로 이동시켜 깊이정보를 입력하도록 함으로써, 사용자가 전체 객체의 깊이와 위치를 직관적으로 인식하여 깊이 정보를 용이하게 입력 및 편집할 수 있도록 하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것이다.
3차원 입체 영상(stereoscopic image)에 대한 관심이 높아지면서 입체영상을 생성하기 위한 다양한 방법들이 개발되고 있다. 입체 영상을 생성하는 방법 중에는 2차원 비디오 영상을 3차원 입체 영상으로 변환하는 방법이 있다. 2차원 비디오 영상을 3차원 입체 영상으로 변환하는 경우, 이미 만들어진 비디오 콘텐츠를 활용할 수 있으며 별도의 촬영장비를 이용하지 않고도 3차원 입체 영상을 얻을 수 있다는 장점이 있다.
2차원 평면 영상을 3차원 입체 영상으로 변환시키기 위해서는, 2차원 평면 영상으로부터 서로 다른 시차 정보를 가지는 좌측 영상과 우측 영상을 생성해야 한다. 이에, 2차원 평면 영상에 표시된 객체들에 깊이(depth)정보를 부여하여 깊이 맵(Depth Map)을 생성하고 깊이 맵에 기초하여 좌측 영상과 우측 영상을 생성함으로써 2차원 평면 영상을 3차원 입체 영상으로 변환하고 있다. 이에, 3차원 입체 영상의 품질은 깊이 맵의 정확성에 따라 크게 좌우된다.
한편, 깊이 맵을 생성하는 방법으로는 자동으로 생성하는 방법과, 사용자가 직접 2차원 객체의 깊이 정보를 입력하는 수동 생성 방법이 있다.
자동 생성 방법의 경우 2차원 영상의 픽셀 값들을 산출하거나 움직임 벡터를 측정하여 깊이 맵을 자동으로 생성한다. 이에, 단시간에 깊이 맵을 생성할 수 있다는 장점이 있으나, 고품질의 3차원 입체 영상을 생성하는 데에는 기술적 한계가 있다.
반면, 수동 생성 방법의 경우 사용자가 직접 객체를 선택하고 해당 객체에 대해 수치적인 깊이 정보를 일일이 입력해야 한다. 이에, 상대적으로 고품질의 3차원 입체 영상을 생성할 수 있다는 장점이 있으나, 자동 생성 방법에 비해 많은 시간이 소요되고 작업자의 숙련도에 따라 작업 시간이나 결과물의 품질이 크게 달라질 수 있다는 문제점이 있다.
한국공개특허 2011-0099526 평면 영상을 입체 영상으로 변환하는 방법
본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 2차원 영상을 3차원 영상으로 변환하기 위해 깊이 맵을 생성하는 경우 사용자가 2차원 영상에서 객체를 선택하고 선택된 객체를 Z축 방향으로 이동시켜 깊이정보를 입력하도록 함으로써, 사용자가 전체 객체의 깊이와 위치를 직관적으로 인식하여 깊이 정보를 용이하게 입력 및 편집할 수 있도록 하는 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체를 제공하는데 그 기술적 과제가 있다.
상술한 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 2차원 영상에서 선택된 객체에 Z 컨트롤 포인트를 설정하여 상기 Z 컨트롤 포인트를 Z축 방향으로 이동시켜 깊이 정보를 입력하는 사용자 입력부; 상기 Z 컨트롤 포인트의 이동에 따라 상기 객체의 깊이 정보를 인식하여 깊이 맵을 생성하는 깊이 맵 생성부; 상기 2차원 영상과 상기 선택된 객체를 디스플레이하는 디스플레이부; 및 상기 2차원 영상을 상기 디스플레이부에 표시하고, 상기 객체에 선택된 Z 컨트롤 포인트가 이동하는 경우 상기 Z 컨트롤 포인트를 포함하는 가상의 평면에 상기 객체를 투영하여 표시하는 영상 제어부를 포함하는 영상 변환 장치가 제공된다.
여기서, 상기 깊이 맵 생성부는, 상기 사용자 입력부에서 선택된 객체정보를 추출하는 객체정보 추출모듈; 상기 Z 컨트롤 포인트의 Z값을 상기 객체의 깊이정보로 인식하는 깊이정보 설정모듈; 및 인식된 상기 객체의 인식정보에 기초하여 깊이 맵을 생성하는 깊이 맵 생성모듈을 포함할 수 있다.
그리고, 상기 영상 제어부는, 상기 사용자의 선택에 따라 각기 다른 깊이 정보가 입력된 적어도 둘 이상의 객체를 깊이에 따라 세로축으로 정렬시켜 표시할 수 있다.
또한, 상기 깊이정보에 기초하여 깊이 맵을 생성하는 깊이 맵 생성부를 더 포함할 수 있다.
여기서, 상기 깊이 맵에 기초하여 상기 2차원 영상에 대해 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성하는 3차원 영상 렌더링부를 더 포함할 수 있다.
상술한 목적을 달성하기 위한 본 발명의 다른 측면에 따르면, 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계; 상기 2차원 영상에서 객체를 정의한 객체정보를 입력 받는 단계; 상기 선택된 객체의 위치를 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계; 및 상기 객체의 Z 값에 따라 상기 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법이 제공된다.
여기서, 상기 선택된 객체의 위치를 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계는, 상기 객체의 영역에 포함되는 Z 컨트롤 포인트를 입력 받는 단계; 및 상기 Z 컨트롤 포인트가 Z축 방향으로 이동된 경우, 상기 Z 컨트롤 포인트를 포함하는 평면에 상기 객체를 투영하여 표시하는 단계를 포함할 수 있다.
그리고, 상기 사용자의 선택에 따라 각기 다른 깊이 정보가 입력된 적어도 둘 이상의 객체를 깊이에 따라 세로축으로 정렬시켜 표시하는 단계를 더 포함할 수 있다.
또한, 상기 객체의 Z 값에 따라 상기 객체의 깊이 정보를 인식하는 단계는, 상기 Z 컨트롤 포인트에 설정된 Z 값에 따라 상기 객체의 깊이정보를 인식하는 단계를 포함할 수 있다.
그리고, 상기 각 객체에 입력된 깊이정보에 기초하여 깊이 맵을 생성하는 단계; 및 상기 깊이 맵에 따라 3차원 영상을 렌더링하는 단계를 더 포함할 수 있다.
상술한 목적을 달성하기 위한 본 발명의 또 다른 측면에 따르면, 2차원 영상을 3차원 영상으로 변환함에 있어서, 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계; 상기 2차원 영상에서 객체를 정의한 객체정보를 입력 받는 단계; 상기 객체의 영역에 포함되는 Z 컨트롤 포인트를 입력 받는 단계; 상기 Z 컨트롤 포인트가 Z축 방향으로 이동된 경우, 상기 Z 컨트롤 포인트를 포함하는 평면에 상기 객체를 투영하여 표시하는 단계; 및 상기 객체의 Z 값에 따라 상기 객체의 깊이 정보를 인식하여 깊이 맵을 생성하는 단계를 포함하는 영상 처리 방법이 프로그램으로 기록되고 전자 장치에서 판독 가능한 기록매체가 제공된다.
상술한 바와 같이 본 발명은 2차원 영상을 3차원 영상으로 변환하기 위해 깊이 맵을 생성하는 경우 사용자가 2차원 영상에서 객체를 선택하고 선택된 객체를 Z축 방향으로 이동시키는 방법으로 깊이 정보를 입력하도록 함으로써, 사용자가 입력된 깊이 정보를 시각적으로 확인하여 직관적인 방법으로 객체의 깊이 정보를 용이하게 입력할 수 있다.
또한, 본 발명은 전체 객체의 깊이와 위치를 시각적으로 용이하게 인식할 수 있도록 하여 깊이 정보 입력의 편의성을 증진시키고 세밀한 편집 결과물을 얻을 수 있으며, 이에, 변환된 3차원 영상의 품질을 향상시킬 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치의 제어블럭도,
도 2는 본 발명의 실시예에 따른 깊이 맵 생성부의 제어블럭도,
도 3은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 방법의 흐름도,
도 4는 본 발명의 실시예에 따른 영상 변환 장치의 작업 화면의 표시 상태도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 보다 상세히 설명하기로 한다. 첨부 도면을 참조하여 설명함에 있어 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치(100)의 제어블럭도이다. 본 발명의 실시예에 따른 영상 변환 장치(100)는 입력된 2차원 영상에 대해 사용자가 직접 깊이 정보를 설정할 수 있도록 그래픽 인터페이스를 제공하고, 사용자의 입력에 따라 깊이 맵(depth map)을 생성하여 3차원 영상을 모델링한다.
도 1에 도시된 바와 같이, 본 발명의 영상 변환 장치(100)는 2차원 영상 입력부(110), 사용자 입력부(120), 디스플레이부(130), 영상 제어부(140), 깊이 맵 생성부(200) 및 3차원 영상 렌더링부(160)를 포함한다.
2차원 영상 입력부(110)는 3차원 영상으로 변환하고자 하는 2차원 영상을 입력 받는다.
사용자 입력부(120)는 영상 변환 장치(100)의 기능 선택 및 제어를 위한 사용자 인터페이스를 제공한다. 사용자는 사용자 입력부(120)를 통해 2차원 영상에 표시된 객체를 폐곡선으로 선택하고 해당 객체에 깊이 정보를 입력할 수 있다. 영상에서 선택되는 객체는 에지 인식 등의 영상 인식 기술을 이용하여 자동으로 선택되도록 하거나, 혹은 사용자 입력부(120)를 통해 베지어 곡선(Bezier curve)을 설정하여 객체를 선택하도록 할 수 있다. 베지어 곡선은 몇 개의 제어점을 선택하여 점과 점 사이가 연결되도록 함으로써 생성되는 불규칙한 곡선을 뜻한다. 또한, 자동으로 인식된 객체를 사용자가 편집하여 객체를 선택하는 것도 가능하다.
사용자는 사용자 입력부(120)를 통해 객체를 선택하여 깊이 정보를 입력할 수 있다. 사용자는 객체의 소정 영역을 클릭하여 Z 컨트롤 포인트를 선택하고, Z 컨트롤 포인트 Z축 방향으로 드래그함으로써 깊이 정보를 입력할 수 있다.
디스플레이부(130)는 입력된 2차원 영상과 영상변환을 위해 깊이 정보를 입력하는 일련의 작업 과정과 입력 결과, 처리 결과 등을 사용자에게 표시한다. 깊이 정보 입력을 위한 디스플레이부(130) 화면에는 3차원 공간의 x, y평면에 2차원 영상이 위치한다. Z 컨트롤 포인트가 이동하면 객체는 Z 컨트롤 포인트를 포함하는 가상의 평면에 투영된다.
영상 제어부(140)는 2차원 영상 입력부(110)로 입력된 2차원 영상을 디스플레이부(130)에 표시한다. 영상 제어부(140)는 사용자 입력부(120)를 통해 Z 컨트롤 포인트를 입력받아, Z 컨트롤 포인트를 포함하는 가상의 평면에 객체를 표시하고 깊이 맵 생성부(200)에 Z 컨트롤 포인트의 위치정보, 예컨대, 좌표정보를 제공한다.
깊이 맵 생성부(200)는 사용자가 입력한 객체정보를 추출하고 해당 객체에 부여된 Z 컨트롤 포인트의 위치정보를 깊이 정보로 인식하여 깊이 맵(depth map)을 생성한다.
3차원 영상 렌더링부(160)는 깊이 맵 생성부(200)에서 생성된 깊이 맵(depth map)을 이용하여 입력된 2차원 영상을 3차원 영상으로 변환한다. 3차원 영상 렌더링부(160)는 깊이 맵(depth map)을 이용하여 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성한다.
영상 제어부(140)는 2차원 영상 입력부(110)로 입력된 2차원 영상을 디스플레이부(130)에 표시하고 사용자 입력부(120)로 입력되는 사용자의 객체 선택 신호에 따라 2차원 영상에서 선택된 객체를 표시한다. 영상 제어부(140)는 Z 컨트롤 포인트 입력에 따라 선택된 객체가 Z 컨트롤 포인트를 포함하는 평면에 표시되도록 제어하여 사용자가 2차원 영상에서 특정 객체를 선택하고 해당 객체에 Z 컨트롤 포인트를 부여하여 깊이 정보를 입력하는 과정을 디스플레이부(130)에 표시한다.
영상 제어부(140)는 객체 선택 신호와 Z 컨트롤 포인트 신호를 깊이 맵 생성부(200)에 전달하여 사용자가 입력한 Z 컨트롤 포인트에 따라 깊이 맵이 생성되도록 깊이 맵 생성부(200)를 제어한다.
영상 제어부(140)는 깊이 맵 생성부(200)를 통해 생성된 깊이 맵(depth map)을 이용하여 3차원 영상 렌더링부(160)를 제어하여 3차원 영상을 생성하고 이를 디스플레이부(130)에 표시한다.
이러한 구성에 따라, 본 발명에 따른 영상 변환 장치(100)는 입력된 2차원 영상에서 객체를 선택하고, 객체에 Z 컨트롤 포인트를 부여하여 드래그함으로써 객체의 Z 값을 시각적으로 확인하는 동시에 깊이 정보를 입력할 수 있다.
도 2는 본 발명의 실시예에 따른 깊이 맵 생성부(200)의 제어블럭도이다.
도 2에 도시된 바와 같이 깊이 맵 생성부(200)는 객체정보 추출모듈(210), 깊이정보 설정모듈(220), 깊이 맵 생성모듈(230)을 포함한다.
객체정보 추출모듈(210)은 2차원 영상에서 깊이 정보 설정을 위해 선택된 객체의 정보를 추출한다. 객체 정보는 2차원 영상에서 선택된 객체의 식별정보, x, y좌표, 벡터 값 등을 포함할 수 있다.
깊이정보 설정모듈(220)은 객체에 설정된 Z 컨트롤 포인트에 따라 해당 객체의 깊이 정보를 설정할 수 있다. 2차원 영상에서 선택된 객체는 Z 컨트롤 포인트의 이동에 따라 3차원 공간의 소정 Z지점에 위치하게 된다. 깊이정보 설정모듈(220)은 이러한 객체의 Z값을 이용하여 해당 객체의 깊이 정보를 인식할 수 있다.
깊이 맵 생성모듈(230)은 깊이정보 설정모듈(220)에서 인식된 각 객체의 깊이 정보에 기초하여 입력된 2차원 영상의 깊이 맵(depth map)을 생성한다.
이러한 구성에 따라, 깊이 맵 생성부(200)는 사용자가 Z 컨트롤 포인트를 이용하여 입력한 깊이 값을 인식하여 깊이 맵을 출력할 수 있다.
도 3은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 방법의 흐름도이다.
영상 변환 장치(100)에 2차원 영상이 입력되면(S110), 영상 제어부(140)는 2차원 영상을 3차원 공간의 XY 평면에 디스플레이한다.
사용자는 디스플레이부(130)에서 2차원 영상을 확인하고 사용자 입력부(120)를 통해 객체를 선택 입력할 수 있다. 이에, 객체정보 추출모듈(210)은 해당 객체의 정보를 추출한다(S120).
사용자는 디스플레이부(130)에 표시된 객체에 Z 컨트롤 포인트를 설정하고 이를 Z축 방향으로 드래그하여 Z 컨트롤 포인트를 3차원 공간상의 소정 위치로 이동시킬 수 있다(S130).
영상 제어부(140)는 사용자가 설정한 Z 컨트롤 포인트를 포함하는 가상의 평면에 해당 객체를 투영하여 디스플레이한다(S140).
깊이정보 설정 모듈은 입력된 Z 컨트롤 포인트로부터 깊이 정보를 추출하여 깊이 맵 생성모듈(230)에 전달한다. 이에, 사용자가 설정한 Z 컨트롤 포인트 값에 따라 깊이 맵이 생성된다(S150).
이상 설명한 바와 같이, 본 발명은 2차원 평면에서 객체를 선택하고 해당 객체에 Z 컨트롤 포인트를 설정하여 드래그하는 방법으로 깊이 정보를 설정한다. 이에, 3차원 공간에서 객체가 갖는 Z값이 곧 깊이 정보가 되므로 사용자는 객체의 Z값, 즉, x, y 평면으로부터의 높이를 통해 해당 객체들에 부여된 깊이 정보를 시각적으로 인식할 수 있다. 또한, 여러 개의 객체에 각각 Z 컨트롤 포인트를 부여한 경우, 각 객체들의 Z값을 한 화면에서 확인하여 객체들 간 깊이 정보의 차이를 상호 비교할 수 있기 때문에 전체적인 깊이 정보를 용이하게 인식하고 편집할 수 있다.
또한, 상술한 과정은 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계, 2차원 영상에서 객체를 정의한 객체정보를 입력 받는 단계, 객체의 영역에 포함되는 Z 컨트롤 포인트를 입력 받는 단계, Z 컨트롤 포인트가 Z축 방향으로 이동된 경우, Z 컨트롤 포인트를 포함하는 평면에 객체를 투영하여 표시하는 단계 및 객체의 Z 값에 따라 객체의 깊이 정보를 인식하여 깊이 맵을 생성하는 단계를 포함하는 영상 처리 방법을 수행하는 프로그램으로 기록될 수 있다.
본 발명의 실시예에 따른 영상 변환 장치(100)의 작업 과정을 도 4를 참조하여 설명한다.
영상 변환 장치(100)의 디스플레이부(130)에는 2차원 영상이 표시되고 사용자는 표시된 영상에서 깊이 정보를 부여하고자 하는 객체(A)를 추출할 수 있다(S210). 선택된 객체(A)는 배경으로부터 분리되어 이동이 가능하다.
사용자는 선택된 객체(A)의 소정 영역에 Z 컨트롤 포인트를 부여한다(S220).
Z 컨트롤 포인트를 Z축 방향으로 드래그하여 조절함으로써 Z값, 즉, 깊이 정보를 입력한다(S230). Z 컨트롤 포인트를 드래그하면 선택된 객체(A)는 Z 컨트롤 포인트를 포함하는 가상의 평면상에 투영되어 깊이 정보가 입력된 객체(A')로 표시된다. 사용자는 깊이 정보가 입력된 객체(A')의 Z값을 조절하여 깊이 정보를 직관적으로 설정할 수 있다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 2차원 영상을 3차원 영상으로 변환하기 위해 깊이 맵을 생성하는 경우 사용자가 2차원 영상에서 객체를 선택하고 선택된 객체를 Z축 방향으로 이동시켜 깊이정보를 입력하도록 함으로써, 사용자가 전체 객체의 깊이와 위치를 직관적으로 인식하여 깊이 정보를 용이하게 입력 및 편집할 수 있도록 하는 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체를 제공하는 데에 이용할 수 있다.
100 : 영상 변환 장치 110 : 2차원 영상 입력부
120 : 사용자 입력부 130 : 디스플레이부
140 : 영상 제어부 160 : 3차원 영상 렌더링부
200 : 깊이 맵 생성부 210 : 객체정보 추출모듈
220 : 깊이정보 설정모듈 230 : 깊이 맵 생성모듈

Claims (11)

  1. 2차원 영상에서 선택된 객체에 Z 컨트롤 포인트를 설정하여 상기 Z 컨트롤 포인트를 Z축 방향으로 이동시켜 깊이 정보를 입력하는 사용자 입력부;
    상기 Z 컨트롤 포인트의 이동에 따라 상기 객체의 깊이 정보를 인식하여 깊이 맵을 생성하는 깊이 맵 생성부;
    상기 2차원 영상과 상기 선택된 객체를 디스플레이하는 디스플레이부; 및
    상기 2차원 영상을 상기 디스플레이부에 표시하고, 상기 객체에 선택된 Z 컨트롤 포인트가 이동하는 경우 상기 Z 컨트롤 포인트를 포함하는 가상의 평면에 상기 객체를 투영하여 표시하는 영상 제어부를 포함하는 영상 변환 장치.
  2. 제1항에 있어서,
    상기 깊이 맵 생성부는,
    상기 사용자 입력부에서 선택된 객체정보를 추출하는 객체정보 추출모듈;
    상기 Z 컨트롤 포인트의 Z값을 상기 객체의 깊이정보로 인식하는 깊이정보 설정모듈; 및
    인식된 상기 객체의 인식정보에 기초하여 깊이 맵을 생성하는 깊이 맵 생성모듈을 포함하는 것을 특징으로 하는 영상 변환 장치.
  3. 제1항에 있어서,
    상기 영상 제어부는,
    상기 사용자의 선택에 따라 각기 다른 깊이 정보가 입력된 적어도 둘 이상의 객체를 깊이에 따라 세로축으로 정렬시켜 표시하는 것을 특징으로 하는 영상 변환 장치.
  4. 제1항에 있어서,
    상기 깊이정보에 기초하여 깊이 맵을 생성하는 깊이 맵 생성부를 더 포함하는 것을 특징으로 하는 영상 변환 장치.
  5. 제4항에 있어서,
    상기 깊이 맵에 기초하여 상기 2차원 영상에 대해 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성하는 3차원 영상 렌더링부를 더 포함하는 것을 특징으로 하는 영상 변환 장치.
  6. 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계;
    상기 2차원 영상에서 객체를 정의한 객체정보를 입력 받는 단계;
    상기 선택된 객체의 위치를 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계; 및
    상기 객체의 Z 값에 따라 상기 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법.
  7. 제6항에 있어서,
    상기 선택된 객체의 위치를 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계는,
    상기 객체의 영역에 포함되는 Z 컨트롤 포인트를 입력 받는 단계; 및
    상기 Z 컨트롤 포인트가 Z축 방향으로 이동된 경우, 상기 Z 컨트롤 포인트를 포함하는 평면에 상기 객체를 투영하여 표시하는 단계를 포함하는 것을 특징으로 하는 영상 변환 방법.
  8. 제6항에 있어서,
    상기 사용자의 선택에 따라 각기 다른 깊이 정보가 입력된 적어도 둘 이상의 객체를 깊이에 따라 세로축으로 정렬시켜 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 변환 방법.
  9. 제6항에 있어서,
    상기 객체의 Z 값에 따라 상기 객체의 깊이 정보를 인식하는 단계는,
    상기 Z 컨트롤 포인트에 설정된 Z 값에 따라 상기 객체의 깊이정보를 인식하는 단계를 포함하는 것을 특징으로 하는 영상 변환 방법.
  10. 제6항에 있어서,
    상기 각 객체에 입력된 깊이정보에 기초하여 깊이 맵을 생성하는 단계; 및
    상기 깊이 맵에 따라 3차원 영상을 렌더링하는 단계를 더 포함하는 것을 특징으로 하는 영상 변환 방법.
  11. 2차원 영상을 3차원 영상으로 변환함에 있어서,
    3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계; 상기 2차원 영상에서 객체를 정의한 객체정보를 입력 받는 단계; 상기 객체의 영역에 포함되는 Z 컨트롤 포인트를 입력 받는 단계; 상기 Z 컨트롤 포인트가 Z축 방향으로 이동된 경우, 상기 Z 컨트롤 포인트를 포함하는 평면에 상기 객체를 투영하여 표시하는 단계; 및 상기 객체의 Z 값에 따라 상기 객체의 깊이 정보를 인식하여 깊이 맵을 생성하는 단계를 포함하는 영상 처리 방법이 프로그램으로 기록되고 전자 장치에서 판독 가능한 기록매체.
KR1020110125865A 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 KR20130059733A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020110125865A KR20130059733A (ko) 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
PCT/KR2012/007372 WO2013081281A1 (ko) 2011-11-29 2012-09-14 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110125865A KR20130059733A (ko) 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체

Publications (1)

Publication Number Publication Date
KR20130059733A true KR20130059733A (ko) 2013-06-07

Family

ID=48858503

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110125865A KR20130059733A (ko) 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체

Country Status (1)

Country Link
KR (1) KR20130059733A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113273184A (zh) * 2018-11-30 2021-08-17 Pcms控股公司 将3d对象镜像到光场显示器的方法
KR20220004404A (ko) 2020-07-03 2022-01-11 한림대학교 산학협력단 2차원 유방 영상을 바탕으로 3차원 위치 정보를 획득하기 위한 시스템의 제어 방법, 장치 및 프로그램

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113273184A (zh) * 2018-11-30 2021-08-17 Pcms控股公司 将3d对象镜像到光场显示器的方法
KR20220004404A (ko) 2020-07-03 2022-01-11 한림대학교 산학협력단 2차원 유방 영상을 바탕으로 3차원 위치 정보를 획득하기 위한 시스템의 제어 방법, 장치 및 프로그램

Similar Documents

Publication Publication Date Title
EP3176678B1 (en) Gesture-based object measurement method and apparatus
US8648808B2 (en) Three-dimensional human-computer interaction system that supports mouse operations through the motion of a finger and an operation method thereof
JP5709440B2 (ja) 情報処理装置、情報処理方法
JP2018536915A (ja) ３次元再構成において構造特徴を検出し、組み合わせるための方法およびシステム
US20200258309A1 (en) Live in-camera overlays
JP2015212849A (ja) 画像処理装置、画像処理方法および画像処理プログラム
US10606241B2 (en) Process planning apparatus based on augmented reality
US11357462B2 (en) 3D perspective indicator and generation method therefor and application thereof
JPWO2020179065A1 (ja) 画像処理装置、画像処理方法及びプログラム
TW201710646A (zh) 描繪大視場內容一部份時，決定導航資訊之方法和裝置，以及大視場內容描繪器
CN104349157A (zh) 3d显示装置及其方法
Bleyer et al. Temporally consistent disparity maps from uncalibrated stereo videos
JP2022058753A (ja) 情報処理装置、情報処理方法及びプログラム
KR20130059733A (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
KR101388668B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
EP3723365A1 (en) Image processing apparatus, system that generates virtual viewpoint video image, control method of image processing apparatus and storage medium
KR101330523B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
KR20130039173A (ko) 매칭 정보에 의한 입체 영상 보정 장치 및 그 방법
KR20120052669A (ko) 사용자 동작에 기초한 입력 제어 시스템 및 방법
KR101285111B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치 및 방법
KR101390961B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 시스템과 방법 및 그에 대한 기록매체
KR20130026078A (ko) 컨텐츠변환장치 및 컨텐츠변환방법
KR20130058871A (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
JP5994320B2 (ja) 奥行き制作支援装置、奥行き制作支援方法、及びプログラム
KR20140062253A (ko) 전장 설비 설계 시스템 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right