KR102076494B1 - 3차원 데이터 처리 장치 및 방법 - Google Patents

3차원 데이터 처리 장치 및 방법 Download PDF

Info

Publication number
KR102076494B1
KR102076494B1 KR1020140006675A KR20140006675A KR102076494B1 KR 102076494 B1 KR102076494 B1 KR 102076494B1 KR 1020140006675 A KR1020140006675 A KR 1020140006675A KR 20140006675 A KR20140006675 A KR 20140006675A KR 102076494 B1 KR102076494 B1 KR 102076494B1
Authority
KR
South Korea
Prior art keywords
data
dimensional
format
format data
algorithm
Prior art date
Application number
KR1020140006675A
Other languages
English (en)
Other versions
KR20150087446A (ko
Inventor
박일규
김도형
박성진
최진성
구본기
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020140006675A priority Critical patent/KR102076494B1/ko
Priority to US14/309,820 priority patent/US9609304B2/en
Publication of KR20150087446A publication Critical patent/KR20150087446A/ko
Application granted granted Critical
Publication of KR102076494B1 publication Critical patent/KR102076494B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 다양한 포맷의 3차원 데이터에 동일한 3차원 영상처리 알고리즘을 적용하기 위하여 각 포맷의 3차원 입체영상 데이터를 변환하여 공통적인 3차원 영상정보를 보존하는 3차원 입체영상 공통 포맷 데이터를 정의하고, 각 포맷별로 해당 포맷의 장점을 유지하기 위하여 각 포맷의 네이티브 포맷 데이터를 유지하며, 공통된 3차원 영상처리 기능에 대해 포맷 고유 알고리즘 테이블을 유지함으로써 동일한 3차원 영상처리 알고리즘을 다양한 3차원 데이터에 적용할 수 있게 하는 동시에 각 3차원 데이터의 장점을 유지할 수 있도록 하는 고유한 알고리즘을 적용할 수 있도록 한다.

Description

3차원 데이터 처리 장치 및 방법 {3-Dimensional Data Processing Apparatus and Method}
본 발명은 다양한 센서를 통해 획득한 3차원 데이터를 처리하는 장치 및 방법에 관한 것으로서, 구체적으로는, 다양한 종류의 3차원 입체영상 데이터들에 대하여 적합한 3차원 입체영상 처리 알고리즘의 적용이 가능하도록 하는 3차원 데이터 처리 장치 및 그 방법에 관한 것이다.
레이저 스캐닝, 스테레오 카메라, 구조광 스캐너, 마이크로소프트 키넥트, 라이트필드 카메라 등 3차원 정보를 갖는 데이터를 기록할 수 있는 센서들의 발전에 따라 다양한 종류의 3차원 입체영상 데이터의 취득이 가능해졌다. 각각의 센서들은 각기 다른 포맷의 3차원 데이터를 생성해내며, 이렇게 다른 포맷의 데이터는 각기 다른 장점과 단점이 있으므로 사용하는 용도에 따라 서로 다른 방식으로 저장되고 다른 알고리즘이 적용되어 처리되고 있다.
3차원 입체영상 처리를 하는 소프트웨어의 프레임워크는 이러한 다양한 종류의 데이터 포맷을 이용하여 3차원 입체영상 처리를 수행한다. 각 포맷은 데이터 형태가 서로 다르기 때문에 동일한 입체영상 처리 알고리즘을 적용할 때에도 데이터 포맷별로 공통된 형태의 중간 데이터로 변환하고 입체영상 처리 알고리즘을 적용하는 단계가 추가된다. 이 때문에, 취득된 3차원 입체영상 데이터는 취득된 자체 포맷이 아닌 중간 포맷으로의 변환된 후, 변환된 중간 포맷에 3차원 영상처리 알고리즘이 적용되게 된다.
그러나 3차원 영상처리 기법은 그 종류와 데이터의 종류에 따라 공통된 알고리즘이 아닌 그 데이터 포맷에만 사용할 수 있는 네이티브 알고리즘이 존재하는 경우가 있다. 이러한 경우에는 해당 포맷에만 적용되는 네이티브 알고리즘을 사용하여야 속도나 품질 면에서 나은 결과를 얻을 수 있다.
또한, 취득 또는 생성 당시부터 3차원 정보를 저장하고 있는 데이터(예컨대, 레이저 스캐닝된 포인트 클라우드, 사람에 의해 모델링으로 생성된 3차원 메쉬 등)의 경우에는 2차원 영상을 기반으로 하는 3차원 영상 데이터들과 데이터 특성의 차이가 크기 때문에 공통된 포맷으로 변환하여 공통된 알고리즘을 적용하게 되면 많은 데이터 손실이 발생하게 된다.
본 발명은 전술한 문제점을 해결하기 위하여, 여러 종류의 센서를 이용하여 취득한 3차원 입체영상 데이터와 디자이너에 의해 만들어진 3차원 입체영상 데이터들을 데이터의 포맷과 관계없이 동일한 3차원 영상처리 알고리즘을 적용할 수 있게 하면서 각각의 포맷이 가지는 장점을 활용할 수 있도록 포맷별로 고유한 3차원 영상처리 알고리즘을 적용할 수 있는 3차원 데이터 처리 장치 및 방법을 제공하는 것을 목적으로 한다.
본 발명의 일면에 따르면, 3차원 데이터를 획득하는 3차원데이터획득부; 상기 3차원 데이터의 네이티브 포맷 데이터와 상기 3차원 데이터를 이용하여 생성한 공통 포맷 데이터를 통합하여 통합 포맷 데이터를 생성하는 통합포맷데이터생성부; 및 영상처리 알고리즘에 따라 상기 통합 포맷 데이터를 처리하는 통합포맷데이터처리부를 포함하는 3차원 데이터 처리 장치를 제공한다.
통합포맷데이터처리부는 통합 포맷 데이터의 네이티브 포맷 데이터에 대한 네이티브 알고리즘이 존재하는지 여부를 확인하고, 네이티브 알고리즘이 존재하면 네이티브 알고리즘에 따라 통합 포맷 데이터의 네이티브 포맷 데이터를 처리하고, 통합 포맷 데이터의 네이티브 포맷 데이터에 대한 네이티브 알고리즘이 존재하지 않으면 공통 알고리즘에 따라 통합 포맷 데이터의 공통 포맷 데이터를 처리한다.
그리고 통합 포맷 데이터를 처리하기 위한 네이티브 알고리즘과 공통 알고리즘이 존재하지 않으면 에러를 반환한다.
통합포맷데이터생성부는 3차원 데이터의 2차원 영상정보와 2차원 깊이정보를 이용하여 공통 포맷 데이터를 생성하되, 3차원 데이터에 깊이정보가 포함되어 있지 않으면 깊이 복원 알고리즘을 통해 3차원 데이터의 깊이정보를 복원하고 공통 포맷 데이터를 생성한다.
본 발명의 다른 일면에 따르면, 3차원 데이터를 획득하는 단계; 상기 3차원 데이터를 이용하여 공통 포맷 데이터를 생성하는 단계; 상기 3차원 데이터의 네이티브 포맷 데이터 및 상기 공통 포맷 데이터를 통합하여 통합 포맷 데이터를 생성하는 단계; 영상처리 알고리즘에 따라 상기 통합 포맷 데이터를 처리하는 단계; 및 상기 영상처리 알고리즘에 따라 상기 통합 포맷 데이터를 처리하여 생성된 입체영상을 출력하는 단계를 포함하는 3차원 데이터 처리 방법을 제공한다.
본 발명은 다양한 종류의 센서를 통해 획득한 3차원 입체영상 데이터에 대하여 동일한 알고리즘을 적용하여 3차원 입체영상 처리를 수행할 수 있으며, 데이터 포맷별로 다른 장점이 있을 경우 그 장점을 이용할 수 있는 포맷별 네이티브 알고리즘을 단일한 프레임워크 안에서 적용할 수 있도록 한다.
또한, 공통 알고리즘을 적용하는 경우에는 공통 포맷으로의 변환이 미리 수행되어 있으므로 입체영상 처리시에는 데이터 변환에 걸리는 시간만큼의 처리시간을 단축할 수 있는 이점을 제공한다.
도 1은 본 발명의 일실시예에 따른 3차원 데이터 처리 장치의 구조를 나타낸 블록도.
도 2는 본 발명의 일실시예에 따른 3차원 데이터 처리 방법의 과정을 나타낸 흐름도.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술 되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 기재에 의해 정의된다.
한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자에 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가함을 배제하지 않는다. 이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세히 설명하기로 한다.
본 발명에서 사용하는 용어에 대한 정의는 아래와 같다.
* 3차원 입체영상 데이터: 스테레오, 라이트필드, 레인지 스캔 데이터 등 2차원의 컬러 혹은 그레이 영상 정보를 가지면서 3차원 정보를 가지고 있거나 고유한 알고리즘을 통하여 추출 또는 변환할 수 있는 데이터
* 3차원 데이터: 3차원 입체영상 데이터를 포함하며, 입체영상 데이터가 아닌 3차원 메쉬나 포인트 클라우드 등 3차원 정보를 포함하고 영상으로 변환할 수 있는 데이터
* 3차원 입체영상 공통 포맷: 3차원 데이터를 변환하여 공통 알고리즘에서 요구하는 2차원 영상정보와 2차원 깊이정보를 저장하는 데이터의 포맷
* 3차원 입체영상 네이티브 포맷: 3차원 데이터를 입체영상으로 변환하기 전 상태인 스테레오, 라이프틸드, 레인지 스캔 등 원본 데이터 및 이 데이터를 가공하여 사용하기 쉽도록 깊이 데이터 등 추가적인 데이터를 더한 데이터의 포맷
* 3차원 입체영상 통합 포맷: 3차원 입체영상 공통 포맷 데이터에 3차원 입체영상 네이티브 포맷을 더한 데이터의 포맷
* 3차원 영상처리 기능, 알고리즘: 컬러 또는 그레이 영상의 색상 값에 추가하여 깊이 값을 이용하여 안개효과 등의 3차원 특수효과나 시점변환 등의 3차원 변환 등을 제공하는 기능 또는 알고리즘
* 3차원 깊이 복원 알고리즘: 픽셀별 깊이 값을 갖지 않은 3차원 입체영상 데이터로부터 픽셀별 깊이를 추정하거나 계산해내는 알고리즘
도 1은 본 발명의 일실시예에 따른 3차원 데이터 처리 장치의 구조를 나타낸 것이다.
본 발명의 일실시예에 따른 3차원 데이터 처리 장치는 3차원데이터획득부(100), 통합포맷데이터생성부(110) 및 통합포맷데이터처리부(120)를 포함한다.
3차원데이터획득부(100)는 센서를 통해 3차원 데이터를 획득하거나 소프트웨어에 의하여 생성된 3차원 데이터를 획득한다.
3차원데이터획득부(100)는 3차원 데이터의 종류에 따라 실제 존재하는 대상을 센서를 통해 3차원 입체영상으로 획득할 수 있고, 실제로 존재하지 않거나 센서로 취득하기 어려운 대상은 3D 모델링 툴과 같은 소프트웨어를 디자이너가 이용하여 가상적으로 만들어낸 데이터를 3차원 데이터로 획득할 수도 있다.
센서는 스테레오 카메라, 라이트필드 카메라, 레이저 스캐너 등과 같이 입체영상을 취득할 수 있는 모든 종류의 장치를 의미하며, 3차원 데이터는 3차원 입체영상 데이터와 3차원 입체영상 데이터 이외에 3차원 메쉬나 포인트 클라우드 등 3차원 정보를 포함하고 영상으로 변환할 수 있는 데이터를 포함한다.
3차원데이터획득부(100)는 획득한 3차원 데이터의 원본 데이터를 네이티브 포맷 데이터로 지정하거나 획득한 3차원 데이터에 깊이정보를 추가한 데이터를 네이티브 포맷 데이터로 지정한다.
사용할 센서의 종류별로 센서에서 출력되는 데이터의 네이티브 포맷을 정한다. 스테레오 카메라의 경우 좌/우 컬러 영상과 이를 이용하여 계산되는 깊이 영상이 포맷이 되며, 라이트필드 카메라의 경우에는 4차원 라이트필드 데이터 및 계산된 깊이 값이 네이티브 포맷이 된다. 레이저 스캐너를 이용하는 경우에는 포인트 클라우드 형태의 데이터 또는 2차원 컬러 영상과 깊이 영상이 네이티브 포맷이 된다.
각각의 3차원 데이터는 네이티브 포맷별로 고유의 3차원 알고리즘을 제공하므로 각 포맷별로 제공하는 알고리즘의 종류를 정의한다. 스테레오 영상의 경우 좌/우 시점변환 기능을 제공하며 라이트필드 영상은 상하좌우 시점변환 기능을 제공한다.
3차원데이터획득부(100)는 획득한 3차원 데이터가 3차원 입체영상 데이터 이외의 데이터인 경우 렌더링을 적용하여 영상정보와 깊이정보를 생성할 수도 있다.
3차원데이터획득부(100)는 획득한 3차원 데이터와 3차원 데이터의 네이티브 포맷 데이터에 대한 정보를 통합포맷데이터생성부(110)로 전달하며, 3차원 데이터로부터 생성한 영상정보와 깊이정보도 함께 전달할 수도 있다.
통합포맷데이터생성부(110)는 3차원데이터획득부(100)로부터 전달받은 3차원 데이터의 네이티브 포맷 데이터와 3차원 데이터를 이용하여 생성한 공통 포맷 데이터를 통합하여 통합 포맷 데이터를 생성한다.
구체적으로, 통합포맷데이터생성부(110)는 3차원 데이터의 2차원 영상정보와 2차원 깊이정보를 이용하여 공통 포맷 데이터를 생성한다. 통합포맷데이터생성부(110)는 3차원 데이터가 2차원 영상정보와 2차원 깊이정보를 포함하고 있는 경우에는 3차원 데이터에 포함된 정보를 이용하여 공통 포맷 데이터를 생성하고, 그렇지 않은 경우에는 3차원 데이터로부터 2차원 영상정보 또는 2차원 깊이정보를 생성하여 공통 포맷 데이터를 생성할 수도 있다.
한편, 3차원 데이터에 깊이정보가 포함되어 있지 않은 경우에는 깊이 복원 알고리즘을 통해 3차원 데이터의 깊이정보를 복원하고 복원한 깊이정보를 이용하여 공통 포맷 데이터를 생성할 수도 있다.
획득한 3차원 데이터는 종류에 따라 깊이 데이터를 포함하고 있을 수도 있고(예컨대, 레이저 스캐너 등) 깊이 데이터를 포함하고 있지 않을 수도 있다(예컨대, 스테레오 데이터 등). 공통 포맷 데이터에는 깊이 데이터가 필요하기 때문에 깊이 데이터가 없는 데이터에 대해서는 3차원 깊이 복원 알고리즘을 적용하여 깊이 데이터를 계산해낸다. 깊이 데이터를 복원한 경우 복원된 깊이 데이터와 2차원 영상정보를 통합하여 3차원 입체영상 공통 포맷의 데이터를 생성해내고, 이를 3차원 입체영상 네이티브 포맷 데이터와 합쳐 3차원 입체영상 통합 데이터를 생성한다.
통합포맷데이터생성부(110)는 3차원 데이터의 네이티브 포맷 데이터와 공통 포맷 데이터를 통합한 통합 포맷 데이터를 생성한 후에, 생성한 통합 포맷 데이터를 통합포맷데이터처리부(120)로 전달한다.
통합포맷데이터처리부(120)는 통합포맷데이터생성부(110)로부터 전달받은 통합 포맷 데이터를 영상처리 알고리즘에 따라 처리하고 처리된 입체영상을 출력한다.
구체적으로, 통합포맷데이터처리부(120)는 통합 포맷 데이터를 처리함에 있어서 통합 포맷 데이터의 네이티브 포맷 데이터에 대한 고유의 네이티브 알고리즘이 존재하는지 여부를 확인한다. 고유의 네이티브 알고리즘이 존재하면 처리하고자 하는 통합 포맷 데이터의 공통 포맷 데이터를 이용하지 않고 네이티브 포맷 데이터에 네이티브 알고리즘을 적용하여 데이터를 처리한다.
통합 포맷 데이터의 네이티브 포맷 데이터에 대한 네이티브 알고리즘이 존재하지 않으면 통합 포맷 데이터의 공통 포맷 데이터를 공통 알고리즘을 적용하여 처리하고 처리된 입체영상을 출력한다.
그리고 적용하고자 하는 3차원 입체영상 처리 기능에 대한 네이티브 알고리즘과 공통 알고리즘이 모두 존재하지 않으면 에러를 리턴한다.
3차원 입체영상 처리의 하나의 예로서 초점 변경 기능을 스테레오 기반 3차원 입체영상 데이터와 라이트필드 기반 3차원 입체영상 데이터에 적용하는 경우에, 초점 변경을 스테레오 데이터에 적용할 때에는 네이티브 알고리즘이 존재하지 않으므로 공통 포맷 데이터에 대해 초점 변경 공통 알고리즘을 적용하여 결과를 만들게 된다. 라이트필드 기반의 데이터에 대해 초점 변경을 수행하는 경우에는 공통 알고리즘을 사용하지 않고 라이트필드 전용의 네이티브 초점 변경 알고리즘을 적용하여 결과를 만들게 된다.
이렇게 각 포맷별 네이티브 알고리즘을 적용하게 되면 네이티브 데이터를 한번 처리하여 데이터의 손실이 있는 공통 포맷 데이터에 대해 공통 알고리즘을 수행하는 것보다 속도나 품질 면에서 나은 결과를 얻을 수 있다.
도 2는 본 발명의 일실시예에 따른 3차원 데이터 처리 방법의 과정을 나타낸 것이다.
본 발명의 일실시예에 따른 3차원 데이터 처리 장치는 센서를 통해 획득한 또는 소프트웨어에 의하여 생성된 3차원 데이터를 획득한다(S200). 3차원 데이터를 획득하면 3차원 데이터의 2차원 영상정보와 2차원 깊이정보를 포함하는 공통 포맷 데이터를 생성하고(S210), 3차원 데이터의 네이티브 포맷 데이터와 공통 포맷 데이터를 통합하여 통합 포맷 데이터를 생성한다(S220).
3차원 데이터 처리 장치가 통합 포맷 데이터를 처리할 때(S230), 통합 포맷 데이터의 네이티브 포맷 데이터에 대한 고유의 네이티브 알고리즘이 존재하는지 여부를 확인한다(S240).
네이티브 알고리즘이 존재하면 네이티브 알고리즘을 통합 포맷 데이터의 네이티브 포맷 데이터에 적용하여 처리하고(S250), 처리된 입체영상을 출력한다(S260).
네이티브 알고리즘이 존재하지 않으면 적용하고자 하는 영상처리 기능을 지원하는 공통 알고리즘이 존재하는지 여부를 확인하고(S241), 공통 알고리즘을 통합 포맷 데이터의 공통 포맷 데이터에 적용하여 데이터를 처리한다(S251).
적용하고자 하는 영상처리 기능에 대한 네이티브 알고리즘과 공통 알고리즘이 모두 존재하지 않으면 에러를 리턴한다(S252).
이상의 설명은 본 발명의 기술적 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면, 본 발명의 본질적 특성을 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능하다. 따라서, 본 발명에 표현된 실시예들은 본 발명의 기술적 사상을 한정하는 것이 아니라, 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 권리범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 특허청구범위에 의하여 해석되어야 하고, 그와 동등하거나, 균등한 범위 내에 있는 모든 기술적 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (20)

  1. 3차원 데이터를 획득하는 3차원데이터획득부;
    상기 3차원 데이터의 네이티브 포맷 데이터와 상기 3차원 데이터를 이용하여 생성한 공통 포맷 데이터를 통합하여 통합 포맷 데이터를 생성하는 통합포맷데이터생성부; 및
    상기 통합 포맷 데이터의 네이티브 포맷 데이터에 대한 네이티브 알고리즘의 존재 여부에 따라 네이티브 알고리즘에 따라 상기 통합 포맷 데이터의 네이티브 포맷 데이터를 처리하거나 공통 알고리즘에 따라 상기 통합 포맷 데이터의 공통 포맷 데이터를 처리하는 통합포맷데이터처리부
    를 포함하는 3차원 데이터 처리 장치.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서, 상기 통합포맷데이터처리부는
    상기 통합 포맷 데이터를 처리하기 위한 네이티브 알고리즘과 공통 알고리즘이 존재하지 않으면 에러를 반환하는 것
    인 3차원 데이터 처리 장치.
  5. 제1항에 있어서, 상기 통합포맷데이터생성부는
    상기 3차원 데이터의 2차원 영상정보와 2차원 깊이정보를 이용하여 상기 공통 포맷 데이터를 생성하는 것
    인 3차원 데이터 처리 장치.
  6. 제1항에 있어서, 상기 통합포맷데이터생성부는
    상기 3차원 데이터를 변환하여 2차원 영상정보 또는 2차원 깊이정보를 생성하고, 상기 2차원 영상정보 또는 상기 2차원 깊이정보를 이용하여 상기 공통 포맷 데이터를 생성하는 것
    인 3차원 데이터 처리 장치.
  7. 제1항에 있어서, 상기 통합포맷데이터생성부는
    상기 3차원 데이터에 깊이정보가 포함되어 있지 않으면 깊이 복원 알고리즘을 통해 상기 3차원 데이터의 깊이정보를 복원하고 상기 공통 포맷 데이터를 생성하는 것
    인 3차원 데이터 처리 장치.
  8. 제1항에 있어서, 상기 3차원데이터획득부는
    센서를 통해 3차원 데이터를 획득하거나 소프트웨어에 의하여 생성된 3차원 데이터를 획득하는 것
    인 3차원 데이터 처리 장치.
  9. 제1항에 있어서, 상기 3차원데이터획득부는
    상기 획득한 3차원 데이터의 원본 데이터를 네이티브 포맷 데이터로 지정하거나 상기 획득한 3차원 데이터에 깊이정보를 추가한 데이터를 네이티브 포맷 데이터로 지정하는 것
    인 3차원 데이터 처리 장치.
  10. 제1항에 있어서, 상기 3차원데이터획득부는
    상기 획득한 3차원 데이터가 3차원 입체영상 데이터 이외의 데이터인 경우 렌더링을 적용하여 영상정보와 깊이정보를 생성하는 것
    인 3차원 데이터 처리 장치.
  11. 3차원 데이터를 획득하는 단계;
    상기 3차원 데이터를 이용하여 공통 포맷 데이터를 생성하는 단계;
    상기 3차원 데이터의 네이티브 포맷 데이터 및 상기 공통 포맷 데이터를 통합하여 통합 포맷 데이터를 생성하는 단계; 및
    영상처리 알고리즘에 따라 상기 통합 포맷 데이터를 처리하는 단계를 포함하고,
    상기 영상처리 알고리즘에 따라 상기 통합 포맷 데이터를 처리하는 단계는,
    상기 통합 포맷 데이터의 네이티브 포맷 데이터에 대한 네이티브 알고리즘이 존재하는지 여부를 확인하는 단계;
    상기 네이티브 알고리즘이 존재하면 상기 네이티브 알고리즘에 따라 상기 통합 포맷 데이터의 네이티브 포맷 데이터를 처리하는 단계; 및
    상기 네이티브 알고리즘이 존재하지 않으면 공통 알고리즘에 따라 상기 통합 포맷 데이터의 공통 포맷 데이터를 처리하는 단계를 포함하는 3차원 데이터 처리 방법.
  12. 삭제
  13. 삭제
  14. 삭제
  15. 제11항에 있어서, 상기 3차원 데이터를 이용하여 공통 포맷 데이터를 생성하는 단계는
    상기 3차원 데이터의 2차원 영상정보 및 2차원 깊이정보를 이용하여 상기 공통 포맷 데이터를 생성하는 것
    인 3차원 데이터 처리 방법.
  16. 제11항에 있어서, 상기 3차원 데이터를 이용하여 공통 포맷 데이터를 생성하는 단계는
    상기 3차원 데이터를 변환하여 2차원 영상정보 또는 2차원 깊이정보를 생성하고, 상기 2차원 영상정보 또는 상기 2차원 깊이정보를 이용하여 상기 공통 포맷 데이터를 생성하는 것
    인 3차원 데이터 처리 방법.
  17. 제11항에 있어서, 상기 3차원 데이터를 이용하여 공통 포맷 데이터를 생성하는 단계는
    상기 3차원 데이터에 깊이정보가 포함되어 있는지 여부를 확인하는 단계; 및
    상기 3차원 데이터에 깊이정보가 포함되어 있지 않으면 깊이 복원 알고리즘을 통해 상기 3차원 데이터의 깊이정보를 복원하고 상기 공통 포맷 데이터를 생성하는 단계를 포함하는 것
    인 3차원 데이터 처리 방법.
  18. 제11항에 있어서, 상기 3차원 데이터를 획득하는 단계는
    센서를 통해 3차원 데이터를 획득하거나 소프트웨어에 의하여 생성된 3차원 데이터를 획득하는 것
    인 3차원 데이터 처리 방법.
  19. 제11항에 있어서, 상기 3차원 데이터를 획득하는 단계는
    상기 3차원 데이터가 3차원 입체영상 데이터 이외의 데이터인 경우 렌더링을 적용하여 영상정보와 깊이정보를 생성하는 단계를 포함하는 것
    인 3차원 데이터 처리 방법.
  20. 제11항에 있어서,
    상기 영상처리 알고리즘에 따라 상기 통합 포맷 데이터를 처리하여 생성된 입체영상을 출력하는 단계
    를 더 포함하는 3차원 데이터 처리 방법.
KR1020140006675A 2014-01-20 2014-01-20 3차원 데이터 처리 장치 및 방법 KR102076494B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140006675A KR102076494B1 (ko) 2014-01-20 2014-01-20 3차원 데이터 처리 장치 및 방법
US14/309,820 US9609304B2 (en) 2014-01-20 2014-06-19 3-dimensional data processing apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140006675A KR102076494B1 (ko) 2014-01-20 2014-01-20 3차원 데이터 처리 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20150087446A KR20150087446A (ko) 2015-07-30
KR102076494B1 true KR102076494B1 (ko) 2020-02-14

Family

ID=53545939

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140006675A KR102076494B1 (ko) 2014-01-20 2014-01-20 3차원 데이터 처리 장치 및 방법

Country Status (2)

Country Link
US (1) US9609304B2 (ko)
KR (1) KR102076494B1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106500629B (zh) * 2016-11-29 2022-09-27 深圳大学 一种显微三维测量装置及系统
CN106842216B (zh) * 2017-02-13 2019-05-24 大连理工大学 一种基于Kinect与三维激光协同的工件位姿在线检测方法
CN107730555A (zh) * 2017-08-25 2018-02-23 徐州科融环境资源股份有限公司 一种基于机器视觉的输煤皮带煤块粒度在线识别监控方法
US11516453B2 (en) * 2018-07-06 2022-11-29 Sony Corporation Information processing apparatus, information processing method, and program for point cloud sample processing
WO2020055779A1 (en) * 2018-09-10 2020-03-19 Aveva Software, Llc Integration of 3rd party geometry for visualization of large data sets system and method
US11924397B2 (en) 2020-07-23 2024-03-05 Samsung Electronics Co., Ltd. Generation and distribution of immersive media content from streams captured via distributed mobile devices

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2010215135B2 (en) 2009-02-17 2016-05-12 Koninklijke Philips Electronics N.V. Combining 3D image and graphical data
JP2011120233A (ja) 2009-11-09 2011-06-16 Panasonic Corp 3d映像特殊効果装置、3d映像特殊効果方法、および、3d映像特殊効果プログラム
US8624960B2 (en) * 2010-07-30 2014-01-07 Silicon Image, Inc. Multi-view display system
KR20120056105A (ko) * 2010-11-24 2012-06-01 한국전자통신연구원 표면 변형 기반의 다중 감각 인터페이스 장치 및 방법
TWI483612B (zh) * 2011-12-22 2015-05-01 Nat Univ Chung Cheng Converting the video plane is a perspective view of the video system
KR101938205B1 (ko) 2012-03-19 2019-01-14 한국전자통신연구원 깊이 영상 필터링 방법 및 그 장치
US20130336640A1 (en) * 2012-06-15 2013-12-19 Efexio, Inc. System and method for distributing computer generated 3d visual effects over a communications network
US20150237323A1 (en) * 2012-07-23 2015-08-20 Thomlson Licensing 3d video representation using information embedding
JP5962393B2 (ja) * 2012-09-28 2016-08-03 株式会社Jvcケンウッド 画像処理装置、画像処理方法及び画像処理プログラム
US9967546B2 (en) * 2013-10-29 2018-05-08 Vefxi Corporation Method and apparatus for converting 2D-images and videos to 3D for consumer, commercial and professional applications

Also Published As

Publication number Publication date
US20150208056A1 (en) 2015-07-23
US9609304B2 (en) 2017-03-28
KR20150087446A (ko) 2015-07-30

Similar Documents

Publication Publication Date Title
KR102076494B1 (ko) 3차원 데이터 처리 장치 및 방법
JP7403528B2 (ja) シーンの色及び深度の情報を再構成するための方法及びシステム
JP6187640B2 (ja) 画像合成方法及び装置
US9846804B2 (en) Apparatus and method for creating three-dimensional personalized figure
KR20190082066A (ko) 포인트 클라우드 데이터를 복구하기 위한 방법 및 장치
US20130258062A1 (en) Method and apparatus for generating 3d stereoscopic image
KR101345458B1 (ko) 객체의 3 차원 모델 생성 방법, 시스템 및 3차원 모델 생성기
KR102152436B1 (ko) 3차원 포인트 클라우드 기반의 동적 3차원 모델 생성을 위한 뼈대 정보 처리 시스템 및 방법
US20140300941A1 (en) Method and apparatus for generating hologram based on multi-view image
CN108124489B (zh) 信息处理方法、装置、云处理设备以及计算机程序产品
KR102199458B1 (ko) 3차원 컬러 메쉬 복원 방법 및 장치
TW201610915A (zh) 用以轉換二維影像為三維模型的影像處理方法
KR20170103253A (ko) 다중 텍스처를 이용한 3d 프린팅 모델 생성 장치 및 방법
KR20150068895A (ko) 삼차원 출력 데이터 생성 장치 및 방법
JPWO2015098222A1 (ja) 情報処理装置及び情報処理方法及びプログラム
EP3756164B1 (en) Methods of modeling a 3d object, and related devices and computer program products
JP2016048467A (ja) 運動視差再現方法、装置およびプログラム
KR102252947B1 (ko) 양자화된 뎁스-맵을 이용한 이미지-홀로그램 변환 방법 및 시스템
JP2008310724A (ja) 3次元形状復元装置,3次元形状復元方法,3次元形状復元プログラム及びそのプログラムを格納した記録媒体
JP6719168B1 (ja) 教師データとしてのデプス画像にラベルを付与するプログラム、装置及び方法
WO2017182448A1 (en) Method and device for determining a 3d model
CN117237544B (zh) 一种训练数据的生成方法、装置、电子设备及存储介质
KR102151250B1 (ko) 객체 좌표를 도출하는 장치 및 방법
CN111696144B (zh) 深度信息确定方法、深度信息确定装置及电子设备
US11783501B2 (en) Method and apparatus for determining image depth information, electronic device, and media

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)