KR20140008226A - 다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치 - Google Patents

다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치 Download PDF

Info

Publication number
KR20140008226A
KR20140008226A KR1020120100654A KR20120100654A KR20140008226A KR 20140008226 A KR20140008226 A KR 20140008226A KR 1020120100654 A KR1020120100654 A KR 1020120100654A KR 20120100654 A KR20120100654 A KR 20120100654A KR 20140008226 A KR20140008226 A KR 20140008226A
Authority
KR
South Korea
Prior art keywords
motion
time
images
point
information
Prior art date
Application number
KR1020120100654A
Other languages
English (en)
Other versions
KR101966920B1 (ko
Inventor
박승호
박세혁
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to BR112015000303A priority Critical patent/BR112015000303A2/pt
Priority to JP2015521531A priority patent/JP2015527804A/ja
Priority to EP13816970.1A priority patent/EP2859727B1/en
Priority to PCT/KR2013/003833 priority patent/WO2014010820A1/en
Priority to CN201380039625.2A priority patent/CN104488264B/zh
Priority to AU2013287585A priority patent/AU2013287585B2/en
Priority to US13/890,791 priority patent/US9798919B2/en
Publication of KR20140008226A publication Critical patent/KR20140008226A/ko
Application granted granted Critical
Publication of KR101966920B1 publication Critical patent/KR101966920B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/285—Analysis of motion using a sequence of stereo image pairs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

다시점 영상을 처리하는 방법에 관한 것으로, 제1 시점 및 제2 시점의 영상 간의 시차 정보를 추출하고, 상기 추출된 시차 정보에 따라 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 다시점 영상 처리 방법이 개시된다.

Description

다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치 {Method and apparatus for estimating motion of image using disparity information of multi view image}
본 발명은 다시점 영상(multi view image)의 시차 정보(disparity information)를 이용하여 다시점 영상의 움직임을 추정(motion estimation)하여 처리하는 방법 및 장치에 대한 것이다.
다시점 영상에서, 두 영상 사이의 영상을 생성하기 위해 영상간 움직임을 추정할 때, 시간적으로 연속된 두 영상 간에 움직임을 추정하거나 시점이 다른 두 영상 간에 움직임을 추정하는 두 가지 방식의 움직임 추정이 수행될 수 있다. 시점이 다른 두 영상 간에 움직임을 추정하는 방식은 시차 정보를 획득함으로써 수행될 수 있고, 시간적으로 연속된 두 영상 간에 움직임을 추정하는 방식은 움직임 벡터(motion vector)를 획득함으로써 수행될 수 있다.
이 때 각 시점에서 독립적으로 시간적으로 연속된 두 영상 간에 움직임을 추정하는 경우, 각 시점의 움직임 추정 값은 일관성이 결여될 수 있는 문제점이 존재한다.
위와 같은 과제를 해결하기 위한 본 발명의 일 실시예는, 다시점 영상을 처리하는 방법에 있어서, 제1 시점 및 제2 시점의 영상 간의 시차 정보를 추출하는 단계; 및 상기 추출된 시차 정보에 따라 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계를 포함하는 것을 특징으로 한다.
더하여, 상기 움직임을 추정하는 단계는 상기 추출된 시차 정보를 이용하여 제1 시점 및 제2 시점 영상의 대응 영역을 획득하는 단계; 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 상기 대응 영역의 움직임을 추정하는 단계; 및 상기 각 시점의 추정된 움직임 정보를 이용하여 상기 각 시점의 추정된 움직임 정보를 보정하는 단계를 포함하는 것을 특징으로 한다.
더하여, 상기 움직임을 추정하는 단계는 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계; 및 상기 추출된 시차 정보를 이용하여 상기 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 추정된 움직임 정보를 보정하는 단계를 포함하는 것을 특징으로 한다.
더하여, 상기 움직임을 추정하는 단계는 제1 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계; 및 상기 추출된 시차 정보 및 상기 제1 시점에서 추정된 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계를 포함하는 것을 특징으로 한다.
더하여, 상기 시차 정보를 추출하는 단계는 제1 시점 및 제2 시점에서 시간적으로 동일한 영상 간의 시차 정보를 추출하는 단계를 포함하는 것을 특징으로 한다.
더하여, 상기 연속된 두 영상 중 적어도 하나의 영상의 시간은 상기 시차 정보가 추출된 시간과 동일하거나 인접한 시간인 점을 특징으로 한다.
더하여, 상기 움직임을 추정하는 단계는 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임 벡터를 획득하는 단계를 포함하는 것을 특징으로 한다.
더하여, 상기 추정된 움직임 정보에 따라 각 시점에서 시간적으로 연속된 두 영상 사이의 영상을 생성하는 단계를 더 포함하는 것을 특징으로 한다.
도 1은 본 발명의 일 실시예에 의한 다시점 영상을 처리하는 방법의 예시를 나타낸 예시도이다.
도 2는 본 발명의 일 실시예에 의한 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 3A 및 도 3B는 본 발명의 제1 실시 예에 의한 다시점 영상을 처리하는 방법을 도시한 블록도이다.
도 4는 본 발명의 제1 실시 예에 의한 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 5는 본 발명의 제2 실시 예에 의한 다시점 영상을 처리하는 방법을 도시한 블록도이다.
도 6은 본 발명의 제2 실시 예에 의한 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 7 및 도 8은 본 발명의 일 실시 예에 의한 다시점 영상을 나타낸 예시도이다.
도 9는 본 발명의 제3 실시 예에 의한 대응 영역을 획득하여 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 10은 본 발명의 제4 실시 예에 의한 대응 영역을 획득하여 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 11은 본 발명의 일 실시 예에 의한 다시점 영상을 처리하는 다시점 영상 처리 장치를 도시한 블록도이다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 다만, 하기의 설명 및 첨부된 도면에서 본 발명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타내고 있음에 유의하여야 한다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위한 용어로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.
도 1은 본 발명의 일 실시예에 의한 다시점 영상을 처리하는 방법의 예시를 나타낸 예시도이다.
도 1을 참조하면, 다시점 영상의 영상 데이터는 각 시점별로 시간에 따라 T0, T1, T2, T3, T4에서 존재할 수 있다. 다시점 영상을 디스플레이할 수 있는 디스플레이 장치가 도 1과 같이 각 시점별로 시간에 따라 영상 데이터가 존재하는 다시점 영상을 디스플레이하는 경우, 영상이 자연스럽게 디스플레이될 수 있도록 영상의 움직임 추정 정보를 획득하여 시간적으로 연속된 영상 사이의 영상을 추가적으로 생성하는 것이 필요하다.
본 발명의 일 실시예에 의하면, 다시점 영상 처리 장치가 다시점 영상의 각 시점에서 시간적으로 연속된 두 영상 사이의 움직임 추정 정보를 획득하여 시간적으로 연속된 영상 사이의 영상을 추가적으로 생성할 때, 두 시점 간 시차 차이를 고려하여 시간적으로 연속된 두 영상 사이의 움직임 추정 정보를 획득함으로써, 두 시점 간의 시간적 움직임 추정 정보의 일관성을 강화하고, 움직임 추정 성능을 향상시킬 수 있다.
도 2는 본 발명의 일 실시예에 의한 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 2를 참조하면, 본 발명에 의한 다시점 영상 처리 장치는 제1 시점 및 제2 시점의 영상 간 시차 정보를 추출할 수 있다(S201). 이때, 시차 정보가 추출되는 제1 시점 및 제2 시점의 영상은 동일 시간에서의 영상일 수 있고, 상기 시차 정보는 다시점 영상 데이터에 존재하는 메타 데이터로부터 추출될 수 있다. 시차 정보를 추출하는 방법은 이에 한정되지 않고 다양한 방법이 존재할 수 있다.
그리고, 다시점 영상 처리 장치는 각 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 때 상기 추출된 시차 정보를 고려하여 추정할 수 있다(S203). 이때, 시간적으로 연속된 두 영상 중 적어도 하나의 영상의 시간은 상기 시차 정보가 추출된 시간과 동일 시간이거나 인접한 시간일 수 있다. 또한, 다시점 영상 처리 장치는 각 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 때, 움직임 추정 정보에 의해 생성될 수 있는 각 시점의 영상이 상기 추정된 시차만큼의 시차를 가지도록 영상의 움직임을 추정할 수 있다.
도 3A 및 도 3B는 본 발명의 제1 실시 예에 의한 다시점 영상을 처리하는 방법을 도시한 블록도이다. 움직임 추정 모듈(300, 320), 시차 추출 모듈(310) 및 움직임 추정 보정 모듈(330)은 본 발명에 의한 다시점 영상 처리 장치의 메모리에 저장되는 프로그램일 수 있다.
도 3A를 참조하면, 움직임 추정 모듈(Vn)(300)은 제1 시점에서 시간적으로 연속된 두 영상인 VnTm 영상과 Vn
Figure pat00001
Figure pat00002
영상 사이의 움직임을 추정할 수 있다. 이때 추정될 수 있는 움직임 정보는 움직임 벡터인
Figure pat00003
로 표시될 수 있다. 움직임 추정 모듈(
Figure pat00004
)(320)은 제2 시점에서 시간적으로 연속된 두 영상인
Figure pat00005
영상과
Figure pat00006
영상 사이의 움직임을 추정할 수 있고, 움직임 추정 모듈(
Figure pat00007
)(320)에 의해 추정될 수 있는 움직임 정보는 움직임 벡터인
Figure pat00008
로 표시될 수 있다. 시차 추출 모듈(310)은 제1 시점 및 제2 시점의 영상인 VnTm 영상과
Figure pat00009
영상 간의 시차 정보(
Figure pat00010
)를 추출할 수 있다.
본 발명의 제1 실시 예에 의하면, 움직임 추정 모듈(Vn)(300)과 움직임 추정 모듈(
Figure pat00011
)(320)은 시차 정보(
Figure pat00012
)를 고려하여 시간적으로 연속된 두 영상 사이의 움직임을 추정할 수 있다.
도 3B는 움직임 추정 모듈(300, 320)에 의해 추정된 움직임 벡터
Figure pat00013
및
Figure pat00014
를 보정하는 움직임 추정 보정 모듈(330)을 더 포함할 수 있다.
도 3B를 참조하면, 움직임 추정 보정 모듈(330)은 시차 정보(
Figure pat00015
) 또는 다른 시점의 움직임 추정 정보(
Figure pat00016
또는
Figure pat00017
)를 고려하여, 움직임 추정 모듈(Vn)(300)과 움직임 추정 모듈(
Figure pat00018
)(320)에 의해 추정된 움직임 벡터
Figure pat00019
및
Figure pat00020
를 보정할 수 있다.
자세히 설명하면, 움직임 추정 보정 모듈(330)은 시차 정보(
Figure pat00021
) 또는 제1 시점의 움직임 추정 정보(
Figure pat00022
)를 이용하여, 제2 시점의 움직임 추정 정보(
Figure pat00023
)를 보정할 수 있다. 보정된 제2 시점의 움직임 추정 정보는 움직임 벡터인
Figure pat00024
로 표시될 수 있다.
또한, 움직임 추정 보정 모듈(330)은 시차 정보(
Figure pat00025
) 또는 제2 시점의 움직임 추정 정보(
Figure pat00026
)를 이용하여, 제1 시점의 움직임 추정 정보(
Figure pat00027
)를 보정할 수 있다. 보정된 제1 시점의 움직임 추정 정보는 움직임 벡터인
Figure pat00028
로 표시될 수 있다.
도 4는 본 발명의 제1 실시 예에 의한 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 4를 참조하면, 본 발명에 의한 다시점 영상 처리 장치는 제1 시점 및 제2 시점의 영상 간 시차 정보를 추출할 수 있다(S401). 그리고, 상기 다시점 영상 처리 장치는 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 수 있다(S403). 이때, 상기 다시점 영상 처리 장치는 추출된 시차 정보를 이용하여 S403 단계에서 추정된 움직임 정보를 보정할 수 있다(S405). 예를 들면, 움직임 정보에 의해 생성될 수 있는 두 시점의 영상이 상기 추정된 시차만큼의 시차를 가지도록 움직임 정보가 보정될 수 있다.
도 5는 본 발명의 제2 실시 예에 의한 다시점 영상을 처리하는 방법을 도시한 블록도이다. 움직임 추정 모듈(500, 520) 및 시차 추출 모듈(510)은 본 발명에 의한 다시점 영상 처리 장치의 메모리에 저장되는 프로그램일 수 있다.
도 5를 참조하면, 움직임 추정 모듈(Vn)(500)은 제1 시점에서 시간적으로 연속된 두 영상인 VnTm 영상과 Vn
Figure pat00029
Figure pat00030
영상 사이의 움직임을 추정할 수 있다. 이때 추정될 수 있는 움직임 정보는 움직임 벡터인
Figure pat00031
로 표시될 수 있다. 움직임 추정 모듈(
Figure pat00032
)(520)은 제2 시점에서 시간적으로 연속된 두 영상인
Figure pat00033
영상과
Figure pat00034
영상 사이의 움직임을 추정할 수 있고, 움직임 추정 모듈(
Figure pat00035
)(320)에 의해 추정될 수 있는 움직임 정보는 움직임 벡터인
Figure pat00036
로 표시될 수 있다. 시차 추출 모듈(510)은 제1 시점 및 제2 시점의 영상인 VnTm 영상과
Figure pat00037
영상 간의 시차 정보(
Figure pat00038
)를 추출할 수 있다.
본 발명의 제2 실시 예에 의하면, 움직임 추정 모듈(
Figure pat00039
)(520)은 시차 정보(
Figure pat00040
)와 움직임 벡터인
Figure pat00041
로 획득될 수 있는 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상인
Figure pat00042
영상과
Figure pat00043
영상 사이의 움직임 정보를 추정할 수 있으며, 상기 움직임 정보는 움직임 벡터인
Figure pat00044
로 획득될 수 있다. 다시 말하면, 본 발명의 제2 실시 예에 의한 다시점 영상 처리 장치는 두 시점 간 시차 정보와 어느 한 시점의 움직임 정보를 이용하여 다른 한 시점의 움직임 정보를 추정할 수 있다.
도 6은 본 발명의 제2 실시 예에 의한 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 6을 참조하면, 본 발명의 일 실시 예에 의한 다시점 영상 처리 장치는 제1 시점 및 제2 시점의 영상 간 시차 정보를 추출할 수 있다(S601). 그리고, 상기 다시점 영상 처리 장치는 제1 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 수 있다(S603). 다시점 영상 처리 장치는 시차정보와 제1 시점에서 추정된 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 수 있다(S605). 예를 들면, 제1 시점에서 추정된 움직임 정보에 의해 생성될 수 있는 제1 시점의 영상에서 상기 추출된 시차만큼 차이가 나도록 제2 시점의 움직임 정보가 추정될 수 있다.
도 7 및 도 8은 본 발명의 일 실시 예에 의한 다시점 영상을 나타낸 예시도이다.
도 7(a) 및 도 7(b)는 동일한 시간에 두 개의 카메라에 의해 촬영된 서로 다른 시점(view)의 영상을 도시한다. 도 7(a) 및 도 7(b)를 참조하면, 다시점 영상에서는 서로 다른 시점에 대하여 생성된 영상들은 카메라의 위치 차이에 기인하는 전역적인 차이를 가진다. 도 7(a)에 도시된 영상 중 좌측의 영역(710)은 도 7(b)에는 나타나지 않는 영역이다. 또한, 도 7(b)에 도시된 영상 중 우측의 영역(740)은 도 7(a)에는 나타나지 않는 영역이다. 도 7(a)에 도시된 영상을 전역적으로 우측으로 이동시키면, 도 7(b)에 도시된 영상과 유사한 영상이 된다.
따라서, 본 발명에 의한 다시점 영상 처리 장치는 시차 정보(disparity information)를 이용하여 도 7(a)의 현재 영역(720)과 대응되는 도 7(b)에서의 대응 영역(730)을 획득할 수 있다.
도 8(a)는 카메라로부터 떨어진 위치가 상이한 두 물체(830, 840)를 촬영하는 카메라(810, 820)를 도시한 그림이다. 도 8(b)는 도 8(a)에서 왼쪽에 위치한 카메라(810)에 의해 촬영된 영상을 나타낸 것이고, 도 8(b)는 도 8(a)에서 오른쪽에 위치한 카메라(820)에 의해 촬영된 영상을 나타낸 것이다. 도 8(a)에서와 같이 영상면에서 떨어진 위치가 상이한 두 물체(830, 840)가 다른 위치(810, 820)에서 촬영되는 경우, 도 8(b) 및 도 8(c)에서와 같이 각 물체의 시차 차이가 달라지게 된다. 도 8(b) 및 도 8(c)를 참조하면, 카메라로부터 멀리 떨어진 물체(830)의 시차(disparity)가 카메라와 가까이 있는 물체(840)의 시차보다 작다. 즉, 물체(object)와 카메라 사이의 거리에 따라 다시점 영상의 영역별로 시차가 다를 수 있다. 따라서, 본 발명에 의한 다시점 영상 처리 장치는 다시점 영상의 영역별로 시차 정보를 추출하고, 시차 정보를 이용하여 각 영역의 대응 영역을 획득하여 움직임을 추정함으로써 움직임 추정 성능을 향상시킬 수 있다.
도 9는 본 발명의 제3 실시 예에 의한 대응 영역을 획득하여 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 9를 참조하면, 본 발명의 일 실시 예에 의한 다시점 영상 처리 장치는 제1 시점 및 제2 시점의 영상 간 시차 정보를 추출할 수 있다(S901). 상기 다시점 영상 처리 장치는 상기 시차 정보를 이용하여 각 시점의 영상의 대응 영역을 획득할 수 있다(S903). 그리고, 상기 다시점 영상 처리 장치는 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 대응 영역 별로 추정할 수 있다(S905). 이때, 상기 다시점 영상 처리 장치는 추출된 시차 정보를 이용하여 S905 단계에서 추정된 움직임 정보를 대응 영역 별로 보정할 수 있다(S907).
도 10은 본 발명의 제4 실시 예에 의한 대응 영역을 획득하여 다시점 영상을 처리하는 방법을 나타낸 순서도이다.
도 10을 참조하면, 본 발명의 일 실시 예에 의한 다시점 영상 처리 장치는 제1 시점 및 제2 시점의 영상 간 시차 정보를 추출할 수 있다(S1001). 상기 다시점 영상 처리 장치는 상기 시차 정보를 이용하여 각 시점의 영상의 대응 영역을 획득할 수 있다(S1003). 그리고, 상기 다시점 영상 처리 장치는 제1 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 대응 영역 별로 추정할 수 있다(S1005). 다시점 영상 처리 장치는 시차정보와 제1 시점에서 추정된 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 대응 영역별로 추정할 수 있다(S1007). 예를 들면, 제1 시점에서 추정된 움직임 정보에 의해 생성될 수 있는 제1 시점의 영상에서 상기 추출된 시차만큼 차이가 나도록 제2 시점의 움직임 정보가 각 시점의 대응 영역 별로 추정될 수 있다.
도 11은 본 발명의 일 실시 예에 의한 다시점 영상을 처리하는 다시점 영상 처리 장치를 도시한 블록도이다.
도 11을 참조하면, 다시점 영상 처리 장치(1100)는 다시점 영상(1140)과 다시점 영상을 처리하기 위한 프로그램을 저장하는 메모리(1110)와 다시점 영상을 처리하는 프로세서(1120)로 구성될 수 있다. 더하여, 본 발명의 일 실시 예에 있어서, 다시점 영상 처리 장치(1100)는 처리된 다시점 영상을 디스플레이하는 디스플레이부(1120)와 사용자로부터 입력을 수신하는 입력부(1110)를 더 포함할 수 있다.
프로세서(1120)는 메모리(1110)에 저장된 프로그램들을 실행함으로써 다시점 영상을 처리할 수 있다. 메모리(1110)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있으며, 시차 추출 모듈(1142), 움직임 추정 모듈(1143), 다시점 영상 디코딩 모듈(1144) 및 다시점 영상 재생 모듈(1145)로 분류될 수 있다.
시차 추출 모듈(1142)은 제1 시점 및 제2 시점의 영상 간의 시차 정보를 추출할 수 있다. 이때 추출되는 시차 정보는 영상 전 영역에 대한 것이거나 영상 일부 영역에 대한 것일 수 있다. 이때 시차 정보가 추출되는 각 시점의 영상은 시간적으로 동일할 수 있다.
움직임 추정 모듈(1143)은 시차 추출 모듈(1142)에 의해 추출된 시차 정보에 따라 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 수 있다. 이때, 영상의 영역별로 시차 정보가 상이한 경우, 움직임 추정 모듈(1143)은 시차 정보를 이용하여 각 시점에 대한 대응 영역을 획득하고, 대응 영역별로 움직임 추정이 수행될 수 있다.
본 발명의 일 실시 예에 의하면, 움직임 추정 모듈(1143)은 각 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하고, 시차 정보를 이용하여 각 시점의 추정된 움직임 정보를 보정할 수 있다.
본 발명의 다른 실시 예에 의하면, 움직임 추정 모듈(1143)은 제1 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하고, 시차 정보와 제1 시점에서 추정된 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정할 수 있다. 상기 제1 시점과 제2 시점은 특정 시점으로 한정되지 않는다. 이때, 시간적으로 연속된 두 영상 중 적어도 하나의 영상의 시간은 상기 시차 정보가 추출된 시간과 동일하거나 인접한 시간일 수 있다. 즉, 움직임 추정 모듈(1143)은 시차 정보가 추출된 시간에서 영상의 시간적으로 변하는 움직임 정보를 추정할 수 있다. 또한, 움직임 추정 모듈(1143)의 영상의 움직임 추정은 움직임 벡터를 획득함으로써 수행될 수 있다.
움직임 추정 보정 모듈(1144)은 시차 정보 또는 다른 시점의 움직임 추정 정보를 고려하여, 추정된 움직임 벡터를 보정할 수 있다.
자세히 설명하면, 움직임 추정 보정 모듈(1144)은 시차 정보 또는 제1 시점에서 추정된 움직임 정보를 이용하여, 제2 시점에서 추정된 움직임 정보를 보정할 수 있다. 또한, 움직임 추정 보정 모듈(1144)은 시차 정보 또는 제2 시점에서 추정된 움직임 정보를 이용하여, 제1 시점에서 추정된 움직임 정보를 보정할 수 있다.
다시점 영상 디코딩 모듈(1145)은 움직임 추정 모듈(1143)에 의해 추정된 움직임 정보 또는 움직임 추정 보정 모듈(1144)에 의해 보정된 움직임 정보를 이용하여 각 시점에서 시간적으로 연속된 두 영상 사이에 영상을 생성할 수 있다.
다시점 영상 재생 모듈(1146)은 다시점 영상 디코딩 모듈(1145)에 의해 생성된 영상을 이용하여 디스플레이부(1120)가 다시점 영상을 디스플레이하도록 제어할 수 있다. 본 발명의 일 실시 예에 의하면, 다시점 영상 재생 모듈(1146)은 다시점 영상 디코딩 모듈(1145)에 의해 생성된 영상을 이용하여 영상이 자연스럽게 디스플레이되도록 디스플레이부(1120)를 제어할 수 있다.
본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터(정보 처리 기능을 갖는 장치를 모두 포함한다)가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장 장치 등이 있다.
비록 상기 설명이 다양한 실시예들에 적용되는 본 발명의 신규한 특징들에 초점을 맞추어 설명되었지만, 본 기술 분야에 숙달된 기술을 가진 사람은 본 발명의 범위를 벗어나지 않으면서도 상기 설명된 장치 및 방법의 형태 및 세부 사항에서 다양한 삭제, 대체, 및 변경이 가능함을 이해할 것이다. 따라서, 본 발명의 범위는 상기 설명에서보다는 첨부된 특허청구범위에 의해 정의된다. 특허청구범위의 균등 범위 안의 모든 변형은 본 발명의 범위에 포섭된다.
300, 320, 500, 520: 움직임 추정 모듈
310, 510: 시차 추출 모듈 1100: 다시점 영상 처리 장치
1110: 입력부 1120: 디스플레이부
1130: 프로세서 1140: 메모리
1141: 다시점 영상 1142: 시차 추출 모듈
1143: 움직임 추정 모듈 1144: 다시점 영상 디코딩 모듈
1145: 다시점 영상 재생 모듈

Claims (21)

  1. 다시점 영상을 처리하는 방법에 있어서,
    제1 시점 및 제2 시점의 영상 간의 시차 정보를 추출하는 단계; 및
    상기 추출된 시차 정보에 따라 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  2. 제1항에 있어서, 상기 움직임을 추정하는 단계는
    상기 추출된 시차 정보를 이용하여 제1 시점 및 제2 시점 영상의 대응 영역을 획득하는 단계;
    제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 상기 대응 영역의 움직임을 추정하는 단계; 및
    상기 각 시점의 추정된 움직임 정보를 이용하여 상기 각 시점의 추정된 움직임 정보를 보정하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  3. 제1항에 있어서, 상기 움직임을 추정하는 단계는
    제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계; 및
    상기 추출된 시차 정보를 이용하여 상기 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 추정된 움직임 정보를 보정하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  4. 제1항에 있어서, 상기 움직임을 추정하는 단계는
    제1 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계; 및
    상기 추출된 시차 정보 및 상기 제1 시점에서 추정된 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  5. 제1항에 있어서, 상기 시차 정보를 추출하는 단계는
    제1 시점 및 제2 시점에서 시간적으로 동일한 영상 간의 시차 정보를 추출하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  6. 제5항에 있어서, 상기 연속된 두 영상 중 적어도 하나의 영상의 시간은
    상기 시차 정보가 추출된 시간과 동일하거나 인접한 시간인 점을 특징으로 하는 다시점 영상 처리 방법.
  7. 제1항에 있어서, 상기 움직임을 추정하는 단계는
    제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임 벡터를 획득하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  8. 제1항에 있어서,
    상기 추정된 움직임 정보에 따라 각 시점에서 시간적으로 연속된 두 영상 사이의 영상을 생성하는 단계를 더 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  9. 제1항에 있어서, 상기 움직임을 추정하는 단계는
    상기 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계; 및
    상기 추출된 시차 정보 또는 상기 제1 시점에서 추정된 움직임 정보를 이용하여, 상기 제2 시점에서 추정된 움직임 정보를 보정하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  10. 제1항에 있어서, 상기 움직임을 추정하는 단계는
    상기 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계; 및
    상기 추출된 시차 정보 또는 상기 제2 시점에서 추정된 움직임 정보를 이용하여, 상기 제1 시점에서 추정된 움직임 정보를 보정하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 처리 방법.
  11. 다시점 영상을 저장하는 메모리; 및
    상기 다시점 영상에서, 제1 시점 및 제2 시점의 영상 간의 시차 정보를 추출하고, 상기 추출된 시차 정보에 따라 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 프로세서를 포함하는 것을 특징으로 하는 다시점 영상 처리 장치.
  12. 제11항에 있어서, 상기 프로세서는
    상기 추출된 시차 정보를 이용하여 제1 시점 및 제2 시점 영상의 대응 영역을 획득하고, 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 상기 대응 영역의 움직임을 추정하고, 상기 각 시점의 추정된 움직임 정보를 이용하여 상기 각 시점의 추정된 움직임 정보를 보정하는 것을 특징으로 하는 다시점 영상 처리 장치.
  13. 제11항에 있어서, 상기 프로세서는
    제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하고, 상기 추출된 시차 정보를 이용하여 상기 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 추정된 움직임 정보를 보정하는 것을 특징으로 하는 다시점 영상 처리 장치.
  14. 제11항에 있어서, 상기 프로세서는
    제1 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하고, 상기 추출된 시차 정보 및 상기 제1 시점에서 추정된 움직임 정보를 이용하여 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 것을 특징으로 하는 다시점 영상 처리 장치.
  15. 제11항에 있어서, 상기 프로세서는
    제1 시점 및 제2 시점에서 시간적으로 동일한 영상 간의 시차 정보를 추출하는 것을 특징으로 하는 다시점 영상 처리 장치.
  16. 제15항에 있어서, 상기 연속된 두 영상 중 적어도 하나의 영상의 시간은
    상기 시차 정보가 추출된 시간과 동일하거나 인접한 시간인 점을 특징으로 하는 다시점 영상 처리 장치.
  17. 제11항에 있어서, 상기 프로세서는
    제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임 벡터를 획득하는 것을 특징으로 하는 다시점 영상 처리 장치.
  18. 제11항에 있어서, 상기 프로세서는
    상기 추정된 움직임 정보에 따라 각 시점에서 시간적으로 연속된 두 영상 사이의 영상을 생성하는 것을 특징으로 하는 다시점 영상 처리 장치.
  19. 제11항에 있어서, 상기 프로세서는
    상기 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하고, 상기 추출된 시차 정보 또는 상기 제1 시점에서 추정된 움직임 정보를 이용하여, 상기 제2 시점에서 추정된 움직임 정보를 보정하는 것을 특징으로 하는 다시점 영상 처리 장치.
  20. 제11항에 있어서, 상기 프로세서는
    상기 제1 시점 및 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하고, 상기 추출된 시차 정보 또는 상기 제2 시점에서 추정된 움직임 정보를 이용하여, 상기 제1 시점에서 추정된 움직임 정보를 보정하는 것을 특징으로 하는 다시점 영상 처리 장치.
  21. 비디오 신호를 처리하는 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체에 있어서, 상기 장치를 제어하는 방법은,
    제1 시점 및 제2 시점의 영상 간의 시차 정보를 추출하는 단계; 및
    상기 추출된 시차 정보에 따라 제1 시점 또는 제2 시점에서 시간적으로 연속된 두 영상 사이의 움직임을 추정하는 단계를 포함하는 것을 특징으로 하는 기록 매체.
KR1020120100654A 2012-07-10 2012-09-11 다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치 KR101966920B1 (ko)

Priority Applications (7)

Application Number Priority Date Filing Date Title
BR112015000303A BR112015000303A2 (pt) 2012-07-10 2013-05-03 método para processar uma imagem de múltipla visualização, aparelho para processar uma imagem de múltipla visualização, e mídia de gravação permanente legível por computador
JP2015521531A JP2015527804A (ja) 2012-07-10 2013-05-03 多視点映像の視差情報を利用して、映像の動きを推定する方法及びその装置
EP13816970.1A EP2859727B1 (en) 2012-07-10 2013-05-03 Method and apparatus for estimating image motion using disparity information of a multi-view image
PCT/KR2013/003833 WO2014010820A1 (en) 2012-07-10 2013-05-03 Method and apparatus for estimating image motion using disparity information of a multi-view image
CN201380039625.2A CN104488264B (zh) 2012-07-10 2013-05-03 使用多视点图像的差异信息来估计图像运动的方法和装置
AU2013287585A AU2013287585B2 (en) 2012-07-10 2013-05-03 Method and apparatus for estimating image motion using disparity information of a multi-view image
US13/890,791 US9798919B2 (en) 2012-07-10 2013-05-09 Method and apparatus for estimating image motion using disparity information of a multi-view image

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201261669757P 2012-07-10 2012-07-10
US61/669,757 2012-07-10

Publications (2)

Publication Number Publication Date
KR20140008226A true KR20140008226A (ko) 2014-01-21
KR101966920B1 KR101966920B1 (ko) 2019-04-08

Family

ID=50142202

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120100654A KR101966920B1 (ko) 2012-07-10 2012-09-11 다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치

Country Status (8)

Country Link
US (1) US9798919B2 (ko)
EP (1) EP2859727B1 (ko)
JP (1) JP2015527804A (ko)
KR (1) KR101966920B1 (ko)
CN (1) CN104488264B (ko)
AU (1) AU2013287585B2 (ko)
BR (1) BR112015000303A2 (ko)
WO (1) WO2014010820A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160094222A (ko) * 2015-01-30 2016-08-09 삼성전자주식회사 컴퓨터 단층 촬영 장치 및 그에 따른 ct 영상 복원 방법
WO2016163719A1 (en) * 2015-04-09 2016-10-13 Samsung Electronics Co., Ltd. Tomography apparatus and method of reconstructing tomography image by using the tomography apparatus

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160119532A1 (en) * 2015-01-22 2016-04-28 Mediatek Inc. Method And Apparatus Of Utilizing Image/Video Data From Multiple Sources
US10389128B2 (en) * 2016-01-25 2019-08-20 Rolls-Royce Corporation Power control system
US20180091797A1 (en) * 2016-09-27 2018-03-29 The Boeing Company Apparatus and method of compensating for relative motion of at least two aircraft-mounted cameras
CN108693970B (zh) * 2017-04-11 2022-02-18 杜比实验室特许公司 用于调适可穿戴装置的视频图像的方法和设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11252586A (ja) * 1998-03-03 1999-09-17 Kdd Corp ステレオ動画像用符号化装置
KR20070076356A (ko) * 2006-01-18 2007-07-24 엘지전자 주식회사 비디오 영상의 부호화/복호화 방법 및 장치
US20110254930A1 (en) * 2010-04-14 2011-10-20 Canon Kabushiki Kaisha Image processing apparatus and image processing method
WO2011152039A1 (ja) * 2010-06-01 2011-12-08 パナソニック株式会社 立体映像処理装置及び立体映像処理方法
KR20110139882A (ko) * 2010-06-24 2011-12-30 삼성전자주식회사 다시점 깊이 영상 부호화 장치 및 그 방법, 그리고, 다시점 깊이 영상 복호화 장치 및 그 방법

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005013623A1 (en) * 2003-08-05 2005-02-10 Koninklijke Philips Electronics N.V. Multi-view image generation
KR100779875B1 (ko) * 2005-01-14 2007-11-27 주식회사 휴맥스 다-시점 코딩을 위한 참조 프레임 순서 설정 방법 및 그방법을 기록한 기록매체
WO2007011147A1 (en) 2005-07-18 2007-01-25 Electronics And Telecommunications Research Institute Apparatus of predictive coding/decoding using view-temporal reference picture buffers and method using the same
MX2008002391A (es) * 2005-08-22 2008-03-18 Samsung Electronics Co Ltd Metodo y aparato para codificar video de vistas multiples.
KR100728009B1 (ko) * 2005-08-22 2007-06-13 삼성전자주식회사 다시점 동영상을 부호화하는 방법 및 장치
KR100667830B1 (ko) 2005-11-05 2007-01-11 삼성전자주식회사 다시점 동영상을 부호화하는 방법 및 장치
KR101370919B1 (ko) * 2006-07-12 2014-03-11 엘지전자 주식회사 신호처리방법 및 장치
US8179969B2 (en) * 2006-08-18 2012-05-15 Gwangju Institute Of Science And Technology Method and apparatus for encoding or decoding frames of different views in multiview video using global disparity
JP4999864B2 (ja) * 2006-12-28 2012-08-15 日本電信電話株式会社 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記憶媒体
TWI355205B (en) 2007-01-24 2011-12-21 Lg Electronics Inc A method and an apparatus for processing a video s
JP2009049979A (ja) 2007-07-20 2009-03-05 Fujifilm Corp 画像処理装置、画像処理方法、画像処理システム、及びプログラム
DE112007003762A5 (de) * 2007-12-27 2010-11-25 3D Television Systems Gmbh & Co Kg Verfahren und Vorrichtung zur Echtzeit-Multiview-Erzeugung
KR101502362B1 (ko) 2008-10-10 2015-03-13 삼성전자주식회사 영상처리 장치 및 방법
EP2332340B1 (en) * 2008-10-10 2015-12-23 Koninklijke Philips N.V. A method of processing parallax information comprised in a signal
JP2011019202A (ja) * 2009-07-10 2011-01-27 Sony Corp 映像信号処理装置および映像表示装置
JP2011239169A (ja) 2010-05-10 2011-11-24 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
KR101126294B1 (ko) * 2010-06-30 2012-03-21 엘지이노텍 주식회사 다시점 영상의 부호화 장치 및 방법
JP5505154B2 (ja) 2010-07-16 2014-05-28 ソニー株式会社 画像処理装置と画像処理方法
JP5633259B2 (ja) * 2010-09-06 2014-12-03 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置
JP5977964B2 (ja) * 2012-03-08 2016-08-24 日本放送協会 多視点映像フレーム内挿装置、方法及びプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11252586A (ja) * 1998-03-03 1999-09-17 Kdd Corp ステレオ動画像用符号化装置
KR20070076356A (ko) * 2006-01-18 2007-07-24 엘지전자 주식회사 비디오 영상의 부호화/복호화 방법 및 장치
US20110254930A1 (en) * 2010-04-14 2011-10-20 Canon Kabushiki Kaisha Image processing apparatus and image processing method
JP2011223493A (ja) * 2010-04-14 2011-11-04 Canon Inc 画像処理装置および画像処理方法
WO2011152039A1 (ja) * 2010-06-01 2011-12-08 パナソニック株式会社 立体映像処理装置及び立体映像処理方法
KR20110139882A (ko) * 2010-06-24 2011-12-30 삼성전자주식회사 다시점 깊이 영상 부호화 장치 및 그 방법, 그리고, 다시점 깊이 영상 복호화 장치 및 그 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160094222A (ko) * 2015-01-30 2016-08-09 삼성전자주식회사 컴퓨터 단층 촬영 장치 및 그에 따른 ct 영상 복원 방법
US10032293B2 (en) 2015-01-30 2018-07-24 Samsung Electronics Co., Ltd. Computed tomography (CT) apparatus and method of reconstructing CT image
WO2016163719A1 (en) * 2015-04-09 2016-10-13 Samsung Electronics Co., Ltd. Tomography apparatus and method of reconstructing tomography image by using the tomography apparatus
US10013778B2 (en) 2015-04-09 2018-07-03 Samsung Electronics Co., Ltd. Tomography apparatus and method of reconstructing tomography image by using the tomography apparatus

Also Published As

Publication number Publication date
WO2014010820A1 (en) 2014-01-16
JP2015527804A (ja) 2015-09-17
EP2859727B1 (en) 2020-02-19
EP2859727A4 (en) 2016-07-06
AU2013287585A1 (en) 2015-02-05
KR101966920B1 (ko) 2019-04-08
CN104488264B (zh) 2017-09-01
EP2859727A1 (en) 2015-04-15
AU2013287585B2 (en) 2016-11-10
CN104488264A (zh) 2015-04-01
US20140015936A1 (en) 2014-01-16
US9798919B2 (en) 2017-10-24
BR112015000303A2 (pt) 2017-06-27

Similar Documents

Publication Publication Date Title
KR101966920B1 (ko) 다시점 영상의 시차 정보를 이용하여 영상의 움직임을 추정하는 방법 및 장치
KR101665567B1 (ko) 3차원 뎁스 영상 시간 보간 방법 및 장치
US9661227B2 (en) Method, circuit and system for stabilizing digital image
US8798160B2 (en) Method and apparatus for adjusting parallax in three-dimensional video
JP5977591B2 (ja) 画像処理装置及びそれを備えた撮像装置、画像処理方法、並びに画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体
US8441521B2 (en) Method and apparatus for determining view of stereoscopic image for stereo synchronization
US20110298898A1 (en) Three dimensional image generating system and method accomodating multi-view imaging
US10586378B2 (en) Stabilizing image sequences based on camera rotation and focal length parameters
KR100888081B1 (ko) 2차원 영상 신호의 3차원 영상 신호로의 변환 절차 및 변환장치
KR101666019B1 (ko) 외삽 뷰 생성을 위한 장치 및 방법
US9380206B2 (en) Image processing apparatus that combines images
US20170127039A1 (en) Ultrasonic proximity detection system
JP7184748B2 (ja) 場面の積層深度データを生成するための方法
KR20120123087A (ko) 3ｄ 텍스트를 3ｄ 콘텐츠와 결합하기 위한 시스템 및 방법
JP2014035597A (ja) 画像処理装置、コンピュータプログラム、記録媒体及び画像処理方法
CN103871037A (zh) 图像之间颜色转换的方法和装置
WO2015158570A1 (en) System, method for computing depth from video
KR101973460B1 (ko) 다중 입력 영상 보정 장치 및 방법
US9288473B2 (en) Creating apparatus and creating method
KR101826463B1 (ko) 동영상의 시간 축을 동기화하기 위한 방법 및 장치
JP5953142B2 (ja) 画像処理装置及びそれを備えた撮像装置、画像処理方法、並びに画像処理プログラム
CN116843752A (zh) 一种视频路线信息的确定方法、装置和设备
KR20140118091A (ko) 영상 제작 시스템 및 변위 맵 생성방법
KR101694522B1 (ko) 2차원 동영상을 3차원 동영상으로 변환하는 방법 및 장치
KR20140118370A (ko) 입체 영상 제작 시스템 및 다시점 영상 정렬방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant