KR20130059734A - 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 - Google Patents

2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 Download PDF

Info

Publication number
KR20130059734A
KR20130059734A KR1020110125866A KR20110125866A KR20130059734A KR 20130059734 A KR20130059734 A KR 20130059734A KR 1020110125866 A KR1020110125866 A KR 1020110125866A KR 20110125866 A KR20110125866 A KR 20110125866A KR 20130059734 A KR20130059734 A KR 20130059734A
Authority
KR
South Korea
Prior art keywords
image
grid
unit
information
depth
Prior art date
Application number
KR1020110125866A
Other languages
English (en)
Other versions
KR101388668B1 (ko
Inventor
김하윤
김아란
전병기
정원석
박영환
윤민주
김대현
Original Assignee
에스케이플래닛 주식회사
(주)리얼디스퀘어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사, (주)리얼디스퀘어 filed Critical 에스케이플래닛 주식회사
Priority to KR1020110125866A priority Critical patent/KR101388668B1/ko
Priority to PCT/KR2012/007372 priority patent/WO2013081281A1/ko
Publication of KR20130059734A publication Critical patent/KR20130059734A/ko
Application granted granted Critical
Publication of KR101388668B1 publication Critical patent/KR101388668B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것으로서, 본 발명에 따른 영상 변환 장치는, 2차원 영상에서 선택된 객체의 정보를 추출하는 객체정보 추출부; 상기 선택된 2차원 객체의 위치를 Z축 방향으로 이동시켜 깊이 정보를 입력받는 사용자 입력부; 상기 Z축 방향으로 동일한 값을 갖는 위치를 그리드로 표시하는 그리드 설정부; 및 상기 2차원 영상을 3차원 공간에 표시하고 상기 2차원 영상의 Z축 방향으로 그리드가 표시되도록 상기 그리드 설정부를 제어하며, 상기 사용자 입력부를 통해 상기 객체가 Z축 방향으로 이동한 경우 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 영상 제어부를 포함한다. 이에 의해, 2차원 영상에서 선택된 객체를 3차원 공간에 배열하여 깊이 정보를 입력할 수 있도록 하고 3차원 공간의 Z축 방향에는 깊이가 동일한 위치를 나타내는 그리드를 표시함으로써, 사용자에게 직관적인 작업 환경을 제공하여 용이하게 편집할 수 있도록 하고 사용자의 숙련도와는 관계없이 세밀한 편집 결과물을 얻을 수 있다.

Description

2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체{CONVERSION DEVICE FOR TWO DIMENSIONAL IMAGE TO THREE DIMENSIONAL IMAGE, METHOD THEREOF AND RECORDABLE MEDIUM STORING THE METHOD}
본 발명은 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것으로서, 보다 상세하게는 2차원 영상을 3차원 영상으로 변환하기 위해 사용자가 2차원 영상의 객체에 깊이 정보를 입력하고자 하는 경우, 2차원 영상에서 선택된 객체를 3차원 공간에 배열하여 깊이 정보를 입력할 수 있도록 하고 3차원 공간의 Z축 방향에는 깊이가 동일한 위치를 나타내는 그리드를 표시함으로써, 사용자에게 직관적인 작업 환경을 제공하여 용이하게 편집할 수 있도록 하고 사용자의 숙련도와는 관계없이 세밀한 편집 결과물을 얻을 수 있도록 하는 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것이다.
3차원 입체 영상(stereoscopic image)에 대한 관심이 높아지면서 입체영상을 생성하기 위한 다양한 방법들이 개발되고 있다. 입체 영상을 생성하는 방법 중에는 2차원 비디오 영상을 3차원 입체 영상으로 변환하는 방법이 있다. 2차원 비디오 영상을 3차원 입체 영상으로 변환하는 경우, 이미 만들어진 비디오 콘텐츠를 활용할 수 있으며 별도의 촬영장비를 이용하지 않고도 3차원 입체 영상을 얻을 수 있다는 장점이 있다.
2차원 평면 영상을 3차원 입체 영상으로 변환시키기 위해서는, 2차원 평면 영상으로부터 서로 다른 시차 정보를 가지는 좌측 영상과 우측 영상을 생성해야 한다. 이에, 2차원 평면 영상에 표시된 객체들에 깊이(depth)정보를 부여하여 깊이 맵(Depth Map)을 생성하고 깊이 맵(depth map)에 기초하여 좌측 영상과 우측 영상을 생성함으로써 2차원 평면 영상을 3차원 입체 영상으로 변환하고 있다. 이에, 3차원 입체 영상의 품질은 깊이 맵(Depth Map)의 정확성에 따라 크게 좌우된다.
한편, 깊이 맵(depth map)를 생성하는 방법으로는 2차원 영상의 픽셀 값들을 산출하거나 움직임 벡터를 측정하여 깊이 지도를 자동으로 생성하는 방법과, 사용자가 직접 2차원 객체의 깊이 정보를 입력하는 수동 생성 방법이 있다.
자동 생성 방법의 경우 작업속도를 단축할 수 있다는 장점이 있으나 고품질의 3차원 입체 영상을 생성하는 데에는 기술적 한계가 있다.
반면, 수동 생성 방법의 경우 상대적으로 고품질의 3차원 입체 영상을 생성할 수 있으나, 작업자의 숙련도에 따라 작업 시간이나 결과물의 품질이 크게 달라질 수 있다는 문제점이 있다.
한국공개특허 2011-0099526 평면 영상을 입체 영상으로 변환하는 방법
본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 본 발명은 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체에 관한 것으로서, 보다 상세하게는 2차원 영상을 3차원 영상으로 변환하기 위해 사용자가 2차원 영상의 객체에 깊이 정보를 입력하고자 하는 경우, 2차원 영상에서 선택된 객체를 3차원 공간에 배열하여 깊이 정보를 입력할 수 있도록 하고 3차원 공간의 Z축 방향에는 깊이가 동일한 위치를 나타내는 그리드를 표시함으로써, 사용자에게 직관적인 작업 환경을 제공하여 용이하게 편집할 수 있도록 하고 사용자의 숙련도와는 관계없이 세밀한 편집 결과물을 얻을 수 있도록 하는 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체를 제공하는데 그 기술적 과제가 있다.
상술한 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 2차원 영상에서 선택된 객체의 정보를 추출하는 객체정보 추출부; 상기 선택된 2차원 객체의 위치를 Z축 방향으로 이동시켜 깊이 정보를 입력받는 사용자 입력부; 상기 Z축 방향으로 동일한 값을 갖는 위치를 그리드로 표시하는 그리드 설정부; 및 상기 2차원 영상을 3차원 공간에 표시하고 상기 2차원 영상의 Z축 방향으로 그리드가 표시되도록 상기 그리드 설정부를 제어하며, 상기 사용자 입력부를 통해 상기 객체가 Z축 방향으로 이동한 경우 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 영상 제어부를 포함하는 영상 변환 장치가 제공된다.
여기서, 상기 그리드 설정부는, 그리드 간격 조절을 위한 그리드 간격 설정부; 상기 그리드의 그래픽 설정을 위한 그래픽 설정부; 및 상기 그리드의 표시 여부를 설정하는 활성화 및 비화활성화 설정부를 포함할 수 있다.
그리고, 상기 깊이 정보에 기초하여 깊이 맵을 생성하는 깊이 맵 생성부를 더 포함할 수 있다.
또한, 상기 깊이 맵에 기초하여 상기 2차원 영상에 대해 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성하는 3차원 영상 렌더링부를 더 포함할 수 있다.
한편, 상기 객체가 갖는 Z축 값에 기초하여 상기 객체의 깊이 정보를 인식하는 깊이 정보 인식부를 더 포함할 수 있다.
한편, 상술한 목적을 달성하기 위한 본 발명의 다른 측면에 따르면, 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계; 사용자의 선택에 따라, 상기 2차원 영상의 Z축 방향으로 동일한 깊이 값을 나타내는 그리드를 표시하는 단계; 상기 선택된 2차원 객체의 위치를 상기 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계; 및 상기 2차원 영상에서 선택된 객체의 정보를 추출하고, 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법이 제공된다.
여기서, 상기 그리드의 표시 여부와, 그리드 간격, 상기 그리드의 그래픽 설정 중 적어도 어느 하나를 설정받는 단계를 더 포함할 수 있다.
그리고, 상기 인식된 깊이 정보에 기초하여 깊이 맵을 생성하는 단계를 더 포함할 수 있다.
또한, 상기 깊이 맵에 기초하여 상기 2차원 영상에 대해 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하는 단계와; 상기 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성하는 단계를 더 포함할 수 있다.
그리고, 상기 객체가 갖는 Z축 값에 기초하여 상기 객체의 깊이 정보를 인식하는 단계를 더 포함할 수 있다.
한편, 상술한 목적을 달성하기 위한 본 발명의 또 다른 측면에 따르면, 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계; 사용자의 선택에 따라, 상기 2차원 영상의 Z축 방향으로 동일한 깊이 값을 나타내는 그리드를 표시하는 단계; 상기 선택된 2차원 객체의 위치를 상기 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계; 및 상기 2차원 영상에서 선택된 객체의 정보를 추출하고, 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법 제어방법이 프로그램으로 기록되고 전자 장치에서 판독 가능한 기록매체가 제공된다.
상술한 바와 같이 본 발명에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체는, 2차원 영상을 3차원 영상으로 변환하기 위해 사용자가 2차원 영상의 객체에 깊이 정보를 입력하고자 하는 경우, 2차원 영상에서 선택된 객체를 3차원 공간에 배열하여 깊이 정보를 입력할 수 있도록 함으로써 직관적인 작업 환경을 제공하여 용이하게 편집할 수 있도록 하는 효과가 있다.
또한, 3차원 공간의 Z축 방향에는 깊이가 동일한 위치를 나타내는 그리드를 표시함으로써, 편집작업을 수행하는 사용자의 숙련도와는 관계없이 세밀한 편집 결과물을 얻을 수 있으며, 이에, 변환된 3차원 영상의 품질을 향상시킬 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치의 제어블럭도,
도 2는 도 1의 그리드 설정부의 제어블럭도,
도 3은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 방법의 흐름도,
도 4는 본 발명의 실시예에 따른 영상 변환 장치의 작업 화면의 표시상태도,
도 5는 본 발명의 실시예에 따른 영상 변환 장치의 작업 상태도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 보다 상세히 설명하기로 한다. 첨부 도면을 참조하여 설명함에 있어 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치(100)의 제어블럭도이다. 본 발명의 실시예에 따른 영상 변환 장치(100)는 입력된 2차원 영상에 대해 사용자가 깊이 정보를 설정할 수 있도록 그래픽 인터페이스를 제공하고, 사용자의 입력에 따라 깊이 맵(depth map)을 생성하여 3차원 영상을 모델링한다.
도 1에 도시된 바와 같이, 본 발명의 영상 변환 장치(100)는 영상 제어부(110), 3차원 영상 렌더링부(120), 사용자 입력부(130), 디스플레이부(140), 객체 정보 추출부(150), 깊이 정보 인식부(160), 깊이 맵 생성부(170) 및 그리드 설정부(200)를 포함한다.
객체 정보 추출부(150)는 입력된 2차원 영상에서 깊이 정보가 부여되는 객체의 정보가 입력된다. 객체 정보는 2차원 영상에서 선택된 객체의 식별정보, xy좌표 등을 포함할 수 있다. 2차원 영상에서 객체는 사용자가 직접 그 영역을 선택하거나, 에지 검출기술 등의 영상인식 기능을 이용하여 자동으로 선택될 수 있으며, 자동 및 수동작업을 병행하여 객체를 선택하는 것도 가능하다.
디스플레이부(140)는 입력된 2차원 영상과 영상변환을 위해 깊이 정보를 입력하는 일련의 작업 과정과 입력 결과, 처리 결과 등을 사용자에게 표시한다. 디스플레이부(140)에는 입력된 2차원 영상이 xy평면에 위치하고 Z축 방향으로 일정 간격의 그리드가 표시된다.
사용자 입력부(130)는 영상변환 장치의 기능 선택 및 제어를 위한 사용자 인터페이스를 제공하고, 사용자의 입력을 영상 제어부(110)에 전달한다. 사용자는 사용자 입력부(130)를 통해 2차원 영상에서 소정 객체를 선택하여 깊이 정보를 입력할 수 있다. 사용자는 마우스 커서로 객체를 선택한 후 원하는 위치로 이동시키는 방법으로 객체의 Z값, 즉, 깊이 정보를 입력할 수 있다.
깊이 정보 인식부(160)는 객체의 Z값에 따라 해당 객체의 깊이 정보를 추출한다. 2차원 영상에서 선택된 객체는 사용자의 선택에 따라 3차원 공간의 소정 Z지점에 위치하게 된다. 깊이 정보 인식부(160)는 이러한 객체의 Z값을 이용하여 해당 객체의 깊이 정보를 인식할 수 있다.
깊이 맵 생성부(170)는 사용자가 입력한 객체의 깊이 정보에 기초하여 깊이 맵(depth map)을 생성한다.
그리드 설정부(200)는 디스플레이부(140)에 표시된 3차원 공간의 Z축 방향에 동일 Z값을 갖는 지점을 표시하는 그리드를 표시한다. 이에, 사용자가 특정 객체를 선택하고 해당 객체를 Z축 방향으로 이동시켜 깊이 정보를 입력하고자 하는 경우, 사용자는 그리드를 통해 각 객체의 깊이를 확인하여 이동시키고자 하는 객체의 위치를 정확하게 설정할 수 있다. 예컨대, 둘 이상의 객체에 동일한 깊이를 설정하고자 하는 경우, 사용자는 동일한 그리드 선상에 각 객체를 배열할 수 있다.
3차원 영상 렌더링부(120)는 깊이 맵 생성부(170)에서 생성된 깊이 맵(depth map)을 이용하여 입력된 2차원 영상을 3차원 영상으로 변환한다. 3차원 영상 렌더링부(120)는 깊이 맵(depth map)을 이용하여 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성한다.
영상 제어부(110)는 영상 변환 장치(100)에 입력된 2차원 영상에 대해 사용자가 특정 객체를 선택하고 해당 객체를 Z축 방향으로 이동시켜 깊이 정보를 입력하고자 하는 경우 Z축 방향에 동일 깊이 영역을 표시하는 그리드가 표시되도록 그리드 설정부(200)를 제어한다. 사용자의 선택에 따라 객체의 배열이 완료되면 영상 제어부(110)는 객체 정보 추출부(150), 깊이 정보 인식부(160), 깊이 맵 생성부(170)를 이용하여 2차원 영상의 깊이 맵(depth map)을 생성한다.
영상 제어부(110)는 생성된 깊이 맵(depth map)을 이용하여 3차원 영상 렌더링부(120)를 제어하여 3차원 영상을 생성하고 이를 디스플레이부(140)에 표시한다.
한편, 2차원 영상의 객체에 깊이 정보를 설정하는 작업을 수행하는 경우 3차원 공간에 Z축 방향의 그리드를 표시하는 그리드 설정부(200)는 도 2와 같이 구성될 수 있다.
도 2는 본 발명의 실시예에 따른 그리드 설정부(200)의 제어블럭도로서, 그리드 간격 설정부(210), 그래픽 설정부(220), 활성화/비활성화 설정부(230)를 포함한다.
그리드 간격 설정부(210)는 사용자의 선택에 따라 3차원 공간에 표시된 그리드의 간격을 설정할 수 있다. 사용자는 편집하고자 하는 객체의 크기나 객체들의 배열상태 등에 따라 그리드의 간격이 넓게 표시되거나 좁게 표시되도록 그리드 간격을 조절할 수 있다.
그래픽 설정부(220)는 사용자의 선택에 따라 3차원 공간에 표시된 그리드의 색상, 두께, 선 종류 등의 그래픽 설정을 변경할 수 있다. 사용자는 편집하고자 하는 영상의 색상이나 각 개별 객체의 색상, 객체들의 위치 등에 따라 그리드가 더 선명히 표시되도록 그래픽 설정을 조절할 수 있다.
활성화/비활성화 설정부(230)는 사용자의 선택에 따라 그리드를 표시하거나 숨길 수 있다.
이러한 구성에 따라, 사용자는 작업중인 2차원 영상의 특성과 개인 취향에 따라 그리드의 간격, 그래픽, 활성화 여부 등을 선택하여 사용할 수 있다. 이에, 사용자는 2차원 영상에 깊이 정보를 부여하는 편집 작업을 용이하게 수행할 수 있다.
도 3은 본 발명의 실시예에 따른 2차원 영상을 3차원 영상으로 변환하는 영상 변환 방법의 흐름도이다.
영상 변환 장치(100)에 2차원 영상이 입력되면(S110), 영상 제어부(110)는 2차원 영상을 3차원 공간의 XY 평면에 표시하고 그리드 설정부(200)를 제어하여 Z축 방향으로 그리드를 표시한다(S120).
객체 정보 추출부(150)는 2차원 영상에서 선택된 객체의 정보를 추출하여 저장한다(S130). 여기서, 객체는 사용자가 직접 사용자 입력부(130)를 통해 선택하거나, 혹은, 에지 검출 등의 방법으로 자동 선택될 수 있으며, 자동 및 수동 기술을 병행하여 선택하는 것도 가능하다.
사용자는 사용자 입력부(130)를 통해 객체의 위치를 이동시킴으로써 깊이 정보를 입력한다. 깊이 정보 추출부(150)는 객체가 위치한 그리드에 기초하여 해당 객체의 객체 정보를 감지한다(S140).
깊이 맵 생성부(170)는 감지된 깊이 정보에 기초하여 입력된 2차원 영상의 깊이 맵(depth map)을 생성한다(S150).
3차원 영상 렌더링부(120)는 영상 제어부(110)의 제어에 따라, 깊이 맵(depth map)을 입력받아 2차원 영상을 3차원 영상으로 변환한다(S160). 3차원 영상 렌더링부(120)는 깊이 맵(depth map)을 이용하여 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성할 수 있다.
이상 설명한 바와 같이, 본 발명은 사용자가 특정 객체를 선택하고 해당 객체를 Z축 방향으로 이동시켜 깊이 정보를 입력하고자 하는 경우, 그리드를 통해 각 객체의 깊이를 확인할 수 있도록 한다. 이에, 사용자는 이동시키고자 하는 객체의 위치를 용이하고 정확하게 설정할 수 있으며, 사용자의 숙련도와는 관계없이 세밀한 깊이 맵(depth map)을 얻을 수 있다.
또한, 상술한 방법은 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계, 사용자의 선택에 따라 2차원 영상의 Z축 방향으로 동일한 깊이 값을 나타내는 그리드를 표시하는 단계, 선택된 2차원 객체의 위치를 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계 및 2차원 영상에서 선택된 객체의 정보를 추출하고, 객체가 위치한 그리드에 기초하여 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법 제어방법이 프로그램으로 기록되고 전자 장치에서 판독 가능한 기록매체의 형태로도 제공될 수 있다.
본 발명의 실시예에 따른 영상 변환 장치(100)의 작업 과정을 도 4 및 도 5를 참조하여 설명한다. 도 4는 본 발명의 실시예에 따른 영상 변환 장치(100)의 작업 화면의 표시 상태도이고, 도 5는 도 4의 영상 변환 장치(100)의 작업 상태도이다.
도 4 및 도 5에 도시된 바와 같이, 디스플레이부(140)에는 2차원 영상이 xy평면에 위치하고 Z축 방향으로 일정 간격의 그리드가 표시된다.
사용자는 2차원 영상에서 객체 A를 선택하고 이를 Z축 방향으로 이동시켜 객체 B의 위치로 이동시킬 수 있다. 이에, 객체 B는 깊이 정보 Z'를 갖게 된다.
한편, 2차원 영상에서 객체 C를 선택하고 이에 대해 깊이 정보를 설정하고자 하는 경우, 사용자는 그리드를 이용하여 용이하게 깊이 정보를 설정할 수 있다.
객체 C가 객체 A와 동일한 깊이를 갖도록 설정하고자 하는 경우, 사용자는 객체 깊이 정보 Z'와 동일 그리드 상에 객체 C를 이동시킬 수 있다.
객체 C의 깊이를 객체 A보다 크거나 작도록 설정하는 경우에도 마찬가지로, Z'를 기준으로 객체 C를 Z'의 위로 이동시키거나 아래로 이동시킴으로써 세밀한 편집이 가능하다.
이상 설명한 바와 같이, 2차원 영상을 3차원 영상으로 변환하기 위해 사용자가 2차원 영상의 객체에 깊이 정보를 입력하고자 하는 경우, 2차원 영상에서 선택된 객체를 3차원 공간에 배열하여 깊이 정보를 입력할 수 있도록 함으로써 직관적인 작업 환경을 제공하여 용이하게 편집할 수 있도록 한다.
또한, 3차원 공간의 Z축 방향에는 깊이가 동일한 위치를 나타내는 그리드를 표시함으로써, 편집작업을 수행하는 사용자의 숙련도와는 관계없이 세밀한 편집 결과물을 얻을 수 있으며, 이에, 변환된 3차원 영상의 품질을 향상시킬 수 있다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 2차원 영상을 3차원 영상으로 변환하기 위해 사용자가 2차원 영상의 객체에 깊이 정보를 입력하고자 하는 경우, 2차원 영상에서 선택된 객체를 3차원 공간에 배열하여 깊이 정보를 입력할 수 있도록 하고 3차원 공간의 Z축 방향에는 깊이가 동일한 위치를 나타내는 그리드를 표시함으로써, 사용자에게 직관적인 작업 환경을 제공하여 용이하게 편집할 수 있도록 하고 사용자의 숙련도와는 관계없이 세밀한 편집 결과물을 얻을 수 있도록 하는 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체를 제공하는 데에 이용할 수 있다.
100 : 영상 변환 장치 110 : 영상 제어부
120 : 3차원 영상 렌더링부 130 : 사용자 입력부
140 : 디스플레이부 150 : 객체 정보 추출부
160 : 깊이 정보 인식부 170 : 깊이 맵 생성부
200 : 그리드 설정부 210 : 그리드 간격 설정부
220 : 그래픽 설정부 230 : 활성화/비활성화 설정부

Claims (11)

  1. 2차원 영상에서 선택된 객체의 정보를 추출하는 객체정보 추출부;
    상기 선택된 2차원 객체의 위치를 Z축 방향으로 이동시켜 깊이 정보를 입력받는 사용자 입력부;
    상기 Z축 방향으로 동일한 값을 갖는 위치를 그리드로 표시하는 그리드 설정부; 및
    상기 2차원 영상을 3차원 공간에 표시하고 상기 2차원 영상의 Z축 방향으로 그리드가 표시되도록 상기 그리드 설정부를 제어하며, 상기 사용자 입력부를 통해 상기 객체가 Z축 방향으로 이동한 경우 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 영상 제어부를 포함하는 영상 변환 장치.
  2. 제1항에 있어서,
    상기 그리드 설정부는,
    그리드 간격 조절을 위한 그리드 간격 설정부;
    상기 그리드의 그래픽 설정을 위한 그래픽 설정부; 및
    상기 그리드의 표시 여부를 설정하는 활성화 및 비화활성화 설정부를 포함하는 것을 특징으로 하는 영상 변환 장치.
  3. 제1항에 있어서,
    상기 깊이 정보에 기초하여 깊이 맵을 생성하는 깊이 맵 생성부를 더 포함하는 것을 특징으로 하는 영상 변환 장치.
  4. 제3항에 있어서,
    상기 깊이 맵에 기초하여 상기 2차원 영상에 대해 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하고 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성하는 3차원 영상 렌더링부를 더 포함하는 것을 특징으로 하는 영상 변환 장치.
  5. 제1항에 있어서,
    상기 객체가 갖는 Z축 값에 기초하여 상기 객체의 깊이 정보를 인식하는 깊이 정보 인식부를 더 포함하는 것을 특징으로 하는 영상 변환 장치.
  6. 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계;
    사용자의 선택에 따라, 상기 2차원 영상의 Z축 방향으로 동일한 깊이 값을 나타내는 그리드를 표시하는 단계;
    상기 선택된 2차원 객체의 위치를 상기 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계; 및
    상기 2차원 영상에서 선택된 객체의 정보를 추출하고, 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법.
  7. 제6항에 있어서,
    상기 그리드의 표시 여부와, 그리드 간격, 상기 그리드의 그래픽 설정 중 적어도 어느 하나를 설정받는 단계를 더 포함하는 것을 특징으로 하는 영상 변환 방법.
  8. 제6항에 있어서,
    상기 인식된 깊이 정보에 기초하여 깊이 맵을 생성하는 단계를 더 포함하는 것을 특징으로 하는 영상 변환 방법.
  9. 제8항에 있어서,
    상기 깊이 맵에 기초하여 상기 2차원 영상에 대해 서로 다른 시차 정보를 가진 좌측 영상과 우측 영상을 생성하는 단계와;
    상기 좌측 영상과 우측 영상을 조합하여 3차원 영상을 생성하는 단계를 더 포함하는 것을 특징으로 하는 영상 변환 방법.
  10. 제6항에 있어서,
    상기 객체가 갖는 Z축 값에 기초하여 상기 객체의 깊이 정보를 인식하는 단계를 더 포함하는 것을 특징으로 하는 영상 변환 방법.
  11. 3차원 변환을 위해 입력된 2차원 영상을 3차원 공간에 표시하는 단계; 사용자의 선택에 따라, 상기 2차원 영상의 Z축 방향으로 동일한 깊이 값을 나타내는 그리드를 표시하는 단계; 상기 선택된 2차원 객체의 위치를 상기 사용자의 선택에 따라 Z축 방향으로 이동시켜 표시하는 단계; 및 상기 2차원 영상에서 선택된 객체의 정보를 추출하고, 상기 객체가 위치한 그리드에 기초하여 상기 객체의 깊이 정보를 인식하는 단계를 포함하는 영상 변환 방법이 프로그램으로 기록되고 전자 장치에서 판독 가능한 기록매체.
KR1020110125866A 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 KR101388668B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020110125866A KR101388668B1 (ko) 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
PCT/KR2012/007372 WO2013081281A1 (ko) 2011-11-29 2012-09-14 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110125866A KR101388668B1 (ko) 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체

Publications (2)

Publication Number Publication Date
KR20130059734A true KR20130059734A (ko) 2013-06-07
KR101388668B1 KR101388668B1 (ko) 2014-04-25

Family

ID=48858504

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110125866A KR101388668B1 (ko) 2011-11-29 2011-11-29 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체

Country Status (1)

Country Link
KR (1) KR101388668B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160105214A (ko) * 2015-02-27 2016-09-06 한국전자통신연구원 깊이 맵 생성 장치 및 방법
KR20230077471A (ko) * 2021-11-25 2023-06-01 (주)천재교육 서로 다른 위치에서 획득한 복수의 2차원 이미지들을 이용하여 3차원 공간 모델링 데이터를 생성하는 장치 및 방법과 이를 위한 프로그램

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4698831B2 (ja) * 1997-12-05 2011-06-08 ダイナミック ディジタル デプス リサーチ プロプライエタリー リミテッド 画像変換および符号化技術
JP5067407B2 (ja) * 2009-09-10 2012-11-07 パナソニック株式会社 表示装置および表示方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160105214A (ko) * 2015-02-27 2016-09-06 한국전자통신연구원 깊이 맵 생성 장치 및 방법
KR20230077471A (ko) * 2021-11-25 2023-06-01 (주)천재교육 서로 다른 위치에서 획득한 복수의 2차원 이미지들을 이용하여 3차원 공간 모델링 데이터를 생성하는 장치 및 방법과 이를 위한 프로그램

Also Published As

Publication number Publication date
KR101388668B1 (ko) 2014-04-25

Similar Documents

Publication Publication Date Title
US20200286242A1 (en) Image processing apparatus, control method for image processing apparatus, and computer program
US9342925B2 (en) Information processing apparatus, information processing method, and program
JP5709440B2 (ja) 情報処理装置、情報処理方法
US20180158247A1 (en) Augmented reality simulation device and computer-readable medium
JP4666060B2 (ja) 情報処理装置、情報処理システム及びプログラム
CN102595159A (zh) 信息处理装置、立体显示方法以及程序
KR102314787B1 (ko) 가상 공간 제공 방법 및 장치
US10606241B2 (en) Process planning apparatus based on augmented reality
CN102469333B (zh) 信息处理设备、立体显示方法和程序
CN102819385A (zh) 信息处理装置、信息处理方法和程序
Zhang et al. A multi-regional computation scheme in an AR-assisted in situ CNC simulation environment
CN110573992B (zh) 使用增强现实和虚拟现实编辑增强现实体验
US20130093760A1 (en) Apparatus and method for generating depth information
CN105912101B (zh) 一种投影控制方法和电子设备
CN202738033U (zh) 信息处理设备
RU2013109310A (ru) Устройство обработки информации, способ обработки информации и программа
JP2022058753A (ja) 情報処理装置、情報処理方法及びプログラム
KR101388668B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
CN103164862A (zh) 基于智能识别绘图工具的平面cad/cam绘图方法
KR20130059733A (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
KR101330523B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체
JP2020086759A (ja) ３次元モデル作成装置、加工シミュレーション装置、工具経路自動生成装置
KR20120052669A (ko) 사용자 동작에 기초한 입력 제어 시스템 및 방법
KR101211178B1 (ko) 증강 현실 컨텐츠 재생 시스템 및 방법
JP7451084B2 (ja) 情報処理装置および情報処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170407

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180413

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190405

Year of fee payment: 6