KR20030027004A - 전환 유닛 및 방법 및 화상 처리 장치 - Google Patents
전환 유닛 및 방법 및 화상 처리 장치 Download PDFInfo
- Publication number
- KR20030027004A KR20030027004A KR10-2003-7001703A KR20037001703A KR20030027004A KR 20030027004 A KR20030027004 A KR 20030027004A KR 20037001703 A KR20037001703 A KR 20037001703A KR 20030027004 A KR20030027004 A KR 20030027004A
- Authority
- KR
- South Korea
- Prior art keywords
- input
- series
- pictures
- image
- output
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
- H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/002—Special television systems not provided for by H04N7/007 - H04N7/18
Abstract
본 발명은 입력 화상의 시리즈(110 내지 114)를 출력 화상의 시리즈(116 내지 126)로 전환하기 위한 전환 유닛(200)에 관한 것이다. 연속하는 입력 화상들(110 내지 114) 간의 시간 간격들(128, 130)이 동일하지 않을 수 있다. 연속하는 출력 화상들 간의 시간 간격들(예를 들어, 132)은 실질적으로 서로 동일하다(116 내지 126). 그 출력 화상들(116 내지 126)은 입력 화상들(110 내지 114) 간의 모션 보상된 보간(interpolation)에 의해 계산된다.
Description
서두에 기재된 종류의 화상 처리 장치가 1996년 Addison-Wesley, Reading 출신의 J.D.Foley, A.van Dam, S.K.Feiner, J.F.Hughes 등이 저자인 서적 "Computer Graphics Principles and Practice"에 공지되어 있다. 이 서적의 4장에는, 그래픽 파이프라인으로부터 초래한 화상 데이터가 전통적으로 프레임 버퍼에 저장된다는 것을 기재하고 있다. 비디오 콘트롤러는 프레임 버퍼가 데이터를 그 디스플레이 디바이스에 전송하도록 억세스한다.
그 디스플레이 디바이스에 화상들을 디스플레이하는 주파수는 디스플레이 업데이트 레이트라고 명명된다. 그 프레임 버퍼 업데이트, 즉 화상 데이터를 그 프레임 버퍼에 기록하는 것은 통상적으로 가변적이고, 디스플레이 업데이트 레이트에 적절하게 맞지는 않는다. 그 디스플레이 상의 화상들에서 가시적인 아티팩츠(artifacts)를 보호하기 위해서, 더블 버퍼링(double buffering)이 적용될 수 있다. 이것은 다른 프레임 버퍼들이 그래픽 파이프라인에 의해 업데이트되는 동안, 그 프레임 버퍼들 중 하나가 비디오 콘트롤러에 의해 억세스될 수 있음을 의미한다. 그 프레임 버퍼(들)과 비디오 콘트롤러의 조합이 전환 유닛이다.
그러나, 예를 들어, 그래픽 파이프라인을 위한 불충분한 시스템 자원들에 기인하여, 그 프레임 버퍼 업데이트 레이트는 그 디스플레이 프레임 레이트와 비교하여 느릴 수 있다. 이는 그 디스플에이 상에 보여질 화상들의 품질에 악영향을 미친다. 특히, 움직임이 흔들려 보일 수 있다. 그 그래픽 파이프라인의 자원들은 처리기, 메모리 디바이스 및 데이터 버스를 포함할 수 있다.
본 발명은 화상 처리 장치에 관한 것으로서, 제 1 입력 화상 및 제 2 입력 화상을 연속으로 포함하는 제 1 입력 화상들의 시리즈를 생성하기 위한 처리기에 기초한 그래픽 파이프라인과, 전환 유닛으로서, 상기 제 1 입력 화상들의 시리즈를 수신하기 위한 수단과, 상기 제 1 입력 화상들의 시리즈에 기초하여 출력 화상들의 시리즈를 계산하기 위한 수단으로서, 이격된다면, 출력 화상이 처리기로부터 소정의 시간 간격만큼 이격되는, 상기 계산 수단을 포함하는, 상기 전환 유닛과, 상기 출력 화상들의 시리즈를 디스플레이하기 위한 디스플레이 디바이스를 포함하는, 상기 화상 처리 장치에 관한 것이다.
본 발명은 또한 전환 유닛으로서, 제 1 입력 화상과 제 2 입력 화상을 연속하여 포함하는 제 1 입력 화상들의 시리즈를 수신하기 위한 수단과, 상기 제 1 입력 화상들의 시리즈에 기초하여 출력 화상들의 시리즈를 계산하기 위한 수단으로서, 이격된다면, 출력 화상이 처리기로부터 소정의 시간 간격만큼 이격되는, 상기 계산 수단을 포함하는, 상기 전환 유닛에 관한 것이다.
본 발명은 또한 전환 방법으로서, 제 1 입력 화상 및 제 2 입력 화상을 연속하여 포함하는 제 1 입력 화상들의 시리즈를 수신하는 단계와, 상기 제 1 입력 화상들의 시리즈에 기초하여 출력 화상들의 시리즈를 계산하는 단계로서, 이격된다면, 출력 화상이 처리기로부터 소정의 시간 간격만큼 이격되는, 상기 계산 단계를 포함하는, 상기 전환 방법에 관한 것이다.
도 1a는 화상 처리 장치의 실시예를 개략적으로 도시하는 도면.
도 1b는 모션 추정기를 갖는 화상 처리 장치의 실시예를 개략적으로 도시한 도면.
도 1c는 두 입력 화상들의 시리즈를 동시에 처리하도록 설계된 화상 처리 장치의 실시예를 개략적으로 도시한 도면.
도 2a는 전환 유닛의 실시예를 개략적으로 도시한 도면.
도 2b는 모션 추정기를 갖는 전환 유닛의 실시예를 개략적으로 도시한 도면.
도 2c는 두 입력 화상들의 시리즈를 동시에 처리하도록 설계된 전환 유닛의 실시예를 개략적으로 도시한 도면.
도 3은 두 입력 화상들의 시리즈이 일시적인 도메인(domain)으로 보간되고, 한 출력 화상들의 시리즈로 병합되는 것을 개략적으로 도시하는 도면.
본 발명의 제 1 목적은 화상들에서의 모션이 비교적 부드럽게 보일 수 있는 서두에 기재된 종류의 화상 처리 장치를 제공하기 위한 것이다.
본 발명의 제 2 목적은 비교적 부드러운 모션을 보여주는 출력 화상들의 시리즈를 생성할 수 있는 서두에 기재된 종류의 전환 유닛을 제공하기 위한 것이다.
본 발명의 제 3 목적은 비교적 부드러운 모션을 보여주는 출력 화상의 시리즈를 생성하는 서두에 기재된 종류의 전환 방법을 제공하기 위한 것이다.
본 발명의 제 1 목적은 전환 유닛이 제 1 입력 화상의 제 1 생성 시간과 제 2 입력 화상의 제 2 생성 시간 간의 제 1 시간 간격을 결정하고, 제 1 시간 간격에 기초하여 제 1 입력 화상과 제 2 입력 화상 간에 보간함으로써 특정 출력 화상를 계산하도록 설계되는 것이 달성된다. 이러한 전환 유닛의 주요 이점은 입력 시리즈의 화상들의 일시적인 보간(temporal interpolation)에 의해 새로운 화상들을 생성한다는 것이다. 종래 기술에 따른 화상 장치는 화상들을 단지 "복제한다": 이는 최초 화상들을 수차례 디스플레이한다. 본 발명에 따른 전환 유닛으로, 출력 화상들의 시리즈는 새로운 화상들 외에도 입력 화상들의 시리즈의 카피들을 포함하는 것이 가능하다. 그 전환 유닛은 보간을 제어하기 위해서, 다양한 입력 화상들의 생성 시간에 대한 정보를 요구한다. 그 결과, 비록 제 1 시간 간격이 그 입력 시리즈의제 2 입력 화상의 제 2 생성 시간과 제 3 입력 화상의 제 3 생성 시간 간의 제 2 시간 간격과 실질적으로 다를지라도, 그 전환 유닛은 동작하게 된다. 그 제 1 시간 간격 및 제 2 시간 간격은 예를 들어, 그래픽 파이프라인의 자원들 상에서 가변하는 부하때문에, 다를 수 있다. 일시적인 보간은 Philips 텔레비전 시스템들의 업-컨버전(up-conversion)에 공지되어 있다. 그러나, 그 경우, 시리즈의 연속하는 입력 화상들 간의 시간 간격이 서로 동일하다. 그러므로, 그 경우에 그 보간을 제어하기 위해, 그 시간 간격을 결정할 필요는 없다.
본 발명에 따른 화상 처리 장치의 실시예는 모션 보상된 보간을 수행하기 위해서, 출력 화상들의 시리즈를 계산하기 위한 모션 추정기(motion estimator)를 더 포함한다. 이는 예를 들어, 1994년 비디오 기술의 회로들 및 시스템들의 회보 IEEE 트랜잭션들 3권 페이지 249 ~ 256에 명칭이 "True motion estimation with 3-D resursive search block-matching"인 G.de Haan 등에 의해 기재된 모션 추정기가 될 수 있다. 그 모션 보상된 보간은 화질이 개선되는 이점이 있다. 모션 추정에 대해, 둘 이상의 연속하는 화상들을 사용하는 것이 가능하다. 보간을 위해, 둘 이상의 연속하는 화상들을 사용하는 것이 또한 가능하다.
본 발명에 따른 화상 처리 장치의 실시예는 제 2 입력 화상들의 시리즈를 수신하기 위한 제 2 수단을 더 포함하며, 그 전환 유닛은 제 1 입력 화상들의 시리즈 및 제 2 입력 화상들의 시리즈의 화상들에 기초하여 출력 화상들의 시리즈를 계산하도록 설계된다. 이러한 실시예의 예가 TV, 즉 온스크린 디스플레이의 설정들을 나타내는 그래픽 파이프라인에 의해 생성되는 그래픽들과 함께 비디오 화상들의 시퀀스를 업컨버팅할 수 있는 TV이다. 그 전환 유닛의 몇몇 부분들은 비용을 절약하기 위해 공유될 수 있다. 공유의 두가지 형태들이 구별될 수 있다:
- 시간적: 전환 유닛의 부분들이 제 1 입력 시리즈의 화상과 제 2 입력 시리즈의 화상을 처리하기 위해 번갈아 사용된다. 선택적으로, 중간의 결과들이 일시적으로 저장된다.
- 공간적: 제 1 시리즈의 화상들의 부분들이 제 2 입력 시리즈의 화상들의 부분들과 병합되어야 한다는 사실이 이용된다. 예를 들어, 이러한 부분들과 대응하는 메모리 위치들을 공유하는 것이 가능하다.
본 발명에 따른 화상 처리 장치의 일실시예에서, 그 전환 유닛이 :
- 제 1 입력 화상들의 시리즈를 제 1 입력 화상과 제 2 입력 화상 간에 보간함으로써 제 1 중간 모션 보상된 보간된 화상을 계산하고,
- 상기 제 2 입력 화상들의 시리즈를 화상들 간에 보간함으로써 제 2 중간 모션 보상된 보간된 화상을 계산하고,
- 결합된 출력 화상을 생성하기 위해, 그 제 2 중간 화상을 제 1 중간 화상과 병합하도록 설계되어 있다.
보간과 병합의 순서를 변경하는 것이 가능하다. 그러나, 이러한 실시예를 위해 선택된 순서는 출력 화상들의 최고의 화질을 초래하게 된다.
본 발명의 제 2 목적은 그 전환 유닛이
제 1 입력 화상의 제 1 생성 시간과 제 2 입력 화상의 제 2 생성 시간 간의 제 1 시간 간격을 결정하고, 제 1 시간 간격에 기초하여 제 1 입력 화상(110)과 제2 입력 화상 간에 보간함으로써 특정 출력 화상을 계산하도록 설계되는 것으로 달성된다.
본 발명에 따른 화상 처리 장치 및 전환 유닛의 이들 및 다른 양상들이 이후 기재될 구현들 및 실시예들을 참조하고, 첨부 도면들을 참조하여 분명해지고 명백해질 것이다.
도 1a는 화상 처리 장치(100)로서,
처리기(108)를 갖는 그래픽 파이프라인(101)과,
전환 유닛(105)으로서,
그 그래픽 파이프라인(101)에 의해 생성된 제 1 입력 화상들의 시리즈(110 내지 114)를 수신하기 위한 수단(102)과,
출력 화상들의 시리즈를 계산하기 위한 수단(104)을 갖는, 상기 전환 유닛(105)과,
그 출력 화상들을 디스플레이 하기 위한 디스플레이 디바이스(106)를 포함하는, 화상 처리 장치(100)의 실시예를 개략적으로 도시한다. 이러한 디스플레이 디바이스는 선택적인 것이다. 출력 화상들이 예를 들어, Set Top Box의 경우에, 화상 처리 장치(100) 외부의 디스플레이 디바이스에 디스플레이되는 것이 또한 가능하다.
제 1 입력 화상(110), 제 2 입력 화상(112), 제 3 입력 화상(114)은 시간 T1, T2, T3에서 각각 생성된다. 그 전환 유닛(105)은 연속하는 입력 화상들 간의 시간 간격, 예를 들어, T1과 T2 간의 제 1 시간 간격(128) 또는 T2와 T3 간의 제 2 시간 간격(130)을 결정하도록 설계된다. 시간 간격(128, 130)을 결정하기 위해, 그 전환 유닛(105)은 입력 화상들의 생성 시간에 대한 정보를 요구한다. 이러한 정보는 그래픽 파이프라인(101)의 처리기(108)에 의해 제공된다. 입력 화상들 간의 생성 간의 그 다양한 시간 간격들(128, 130)은 동등하지 않을 수 있다. 그 출력 화상들(116 내지 126)은 각각 TA, TB, TC, TE, TF로 생성된다. 두 입력 화상들, 예를 들어, 116, 118 간의 시간 간격(132)은 소정 값과 실질적으로 동일하다. 그 출력 화상들(116 내지 126)은 입력 화상들의 시리즈의 화상들 간에 보간함으로써 계산된다. 아래 표는 입력과 출력 화상들 간의 관계의 예를 제공한다.
| 출력 화상 | 입력 화상들에 기초함 |
| 116 | 110 및 112 |
| 118 | 110 및 112 |
| 120 | 112 및 114 |
| 122 | 112 및 114 |
| 124 | 112 및 114 |
| 126 | 112 및 114 |
도 1b는 모션 추정기(109)를 포함하는 전환 유닛(107)을 갖는 화상 처리 장치(103)의 실시예를 개략적으로 도시한다. 이는 예를 들어, 1994년 비디오 기술의 회로들 및 시스템들의 IEEE 국제 협회 회보 3권 페이지 249 ~ 256에 명칭이 "True motion estimation with 3-D resursive search block-matching"인 G.de Haan 등에 의해 기재된 모션 추정기가 될 수 있다. 그 모션 추정기(109)는 출력 화상들(116 내지 126)의 시리즈를 계산하기 위한 수단(104)에 모션 벡터 필드들을 제공한다. 이러한 모션 벡터 필드들의 벡터들은 모션 보상된 출력 화상들(116 내지 126)을 계산하기 위해서, 픽셀들의 블록들, 즉 입력 화상들(110 내지 114)의 부분들을 시프트하는데 사용된다. 출력 화상들의 시리즈를 계산하기 위한 수단(104)은 입력의 3가지 형태:
- 픽셀 값들의 2차원 어레이인 입력 화상들과;
- 벡터들의 2차원 어레이인 모션 벡터 필드들과;
- 여러 화상들의 생성 시간을 나타내는 타이밍 스칼라 값들을 요구한다.
도 1c는 두 입력 화상들의 시리즈를 동시에 처리하도록 설계된 화상 처리 장치(111)의 실시예를 개략적으로 도시한다. 입력 화상들(308, 310)의 제 1 시리즈 외에도, 입력 화상들(302 내지 306)의 제 2 시리즈가 제공된다. 제 2 입력 화상들의 시리즈(302 내지 306)은 화상 처리 장치(111) 외부에 생성된다. 제 2 입력 화상들의 시리즈(302 내지 306)은 입력 커넥터(106)를 통해 화상 처리 장치(111)에 제공된다. 이러한 화상들은 예를 들어, 방송으로부터 또는 로컬 저장 디바이스로부터 올 수 있다. 그 전환 유닛(113)은 입력 화상들(302 내지 306)의 제 2 시리즈를 버퍼링하고 수신하기 위한 제 2 수단(115)을 포함한다. 입력 화상들(302, 304, 306) 각각의 생성의 시간 모멘트들(T1, T3, T4)은 시간 공간에서 등거리(equidistant)이다. 제 1 시리즈 및 제 2 시리즈의 화상들의 크기는 다를 수 있다. 출력 화상들의 시리즈를 계산하기 위한 수단(104)은 그들이 크기가 다를지라도 화상들을 병합하도록 설계된다. 이는 주밍(zooming)에 의해 달성될 수 있다. 이후의 화상이 이전의 화상보다 실질적으로 더 큰 경우에, 한 시리즈의 전체 화상이 다른 시리즈들의 부분과 병합되는 것이 가능하다.
도 2a는 전환 유닛(200)의 실시예를 개략적으로 도시한다. 그 전환 유닛(200)은 그 입력 커넥터(206)에 입력 화상들의 시리즈(110 내지 114)를 요구한다. 입력 화상들(110 내지 114)은 수신 수단(202)의 메모리 디바이스에서 버퍼링된다. 그 수신 수단의 메모리 디바이스는 적어도 두 개의 입력 화상들을 저장하도록 설계된다. 그 전환 유닛(200)은 각각의 입력 화상들(110 내지 114)에 대해, 그 제어 커넥터(201)에 생성 시간(T1 내지 T3)에 대한 정보를 요구한다. 그 출력 화상들(116 내지 126)은 시공간(time space)에서 등거리로 생성된다 : 각각의 소정의 시간 간격(132) 후에, 새로운 출력 화상이 수신 수단(202)의 메모리 디바이스에 저장되는 입력 화상들에 기초하여 계산하기 위한 수단(204)에 의해 생성된다. 계산하기 위한 수단(204)에 의해 적용된 보간은 입력 화상들의 생성 시간(T1 내지 T3)과 특정 출력 화상의 생성 시간(TA, TB, TC, TD, TE, TF) 간의 관계에 의해 제어된다.
도 2b는 모션 추정기(205)를 포함하는 전환 유닛(203)의 실시예를 개략적으로 도시한다. 그 모션 추정기(205)는 출력 화상들의 시리즈를 계산하기 위한 수단(204)에 모션 벡터 필드들을 제공한다. 이러한 모션 벡터 필드들의 벡터들은 모션 보상된 출력 화상들(116 내지 126)을 계산하기 위해, 픽셀들의 블록들, 즉, 입력 화상들(110 내지 114)의 부분들을 시프트하는데 사용된다.
도 2c는 두 입력 화상들의 시리즈를 동시에 처리하도록 설계된 전환 유닛(207)의 실시예를 개략적으로 도시한다. 제 1 입력 화상들의 시리즈은 제 1 입력 커넥터(206)로 전환 유닛(207)에 제공된다. 제 2 입력 화상들의 시리즈은 제 2 입력 커넥터(211)로 전환 유닛(207)에 제공된다. 제 1 시리즈의 서브세트(subset)가 제 1 수신 수단(202)의 메모리 디바이스에 저장된다. 제 2 시리즈의 서브세트가 제 2 수신 수단(209)의 메모리 디바이스에 저장된다. 그 모션 추정기(205)는 제 1 시리즈의 화상들에 대응하는 모션 벡터 필드를 계산하는 단계와 제 2 시리즈의 화상들에 대응하는 모션 벡터 필드를 계산하는 단계 간을 스위칭한다. 이러한 모션 벡터 필드들은 계산 수단(204)에 대한 입력이다. 선택적으로 모션 벡터 필드들은 일시적으로 저장된다. 그 계산 수단(204)은 입력 시리즈 중 하나의 입력 화상들의 모션 보상된 보간에 의해 제 1 중간 화상을 계산한다. 다른 입력 화상들의 시리즈에 기초하여 제 2 중간 화상이 계산된 후, 제 1 및 제 2 중간 화상이 출력커넥터(208)에 제공된다.
도 3은 두 입력 화상들의 시리즈(302 내지 310)이 일시적인 도메인에 보간되고, 한 출력 화상들의 시리즈(316 내지 324)에 병합되는 것을 개략적으로 도시한다. 입력 화상들의 제 1 시리즈는 각각 T1, T5에서 생성되는 화상들(308, 310)을 포함한다. 화상들(308)의 하부 좌측 코너에는, 화살표(312)가 수직 방향으로 표시되어 있다. 화상(310)의 하부 좌측 코너에는, 화살표(314)가 수평으로 표시되어 있다. 그 두 시리즈의 화상들은 도 2c에 기재된 바와 같이 전환 유닛(207)에 제공된다. 전환 유닛(207)의 출력은 모션 보상된 보간된 출력 화상들의 시리즈(316 내지 324)이다. 이러한 각각의 후자의 화상들에서, 수직과 수평 사이의 몇가지 상태를 묘사하는 화살표(326 내지 334)가 표시되어 있다. 제 1 입력 시리즈의 화상들 및 제 2 입력 시리즈의 화상들의 개별적인 보간때문에, 어떠한 가시적인 아티팩츠도 출력 화상들(316 내지 324)에 표시된 바와 같은 화살표들(326 내지 334)에 대응하는 픽셀들의 직접적인 이웃(neighborhood)에 도입되지 않는다.
앞서 언급된 실시예들은 본 발명을 제한한다기보다는 설명하는 것이고, 본 기술 분야의 숙련자들이 첨부 청구항들의 범위로부터 벗어나지 않고 대안의 실시예들을 설계할 수 있을 것임을 이해해야 한다. 청구항들에서, 괄호안에 위치된 임의의 참조 부호들이 청구항을 제한하는 것으로 추론되어서는 안된다. 용어 '포함하는'은 청구항에 기입되지 않은 요소들 또는 단계들의 존재를 배제하는 것이 아니다. 용어 "a" 또는 "an"은 그러한 요소들의 복수의 존재를 배제하는 것이 아니다. 본 발명은 몇몇 별개의 요소들을 포함하는 하드웨어 및 적절히 프로그램된 컴퓨터에 의해 구현될 수 있다. 몇가지 수단을 열거하고 있는 독립항에서, 이러한 몇가지 수단은 하드웨어 및 하드웨어와 동일한 아이템으로 구체화될 수 있다.
Claims (10)
- 화상 처리 장치(100)로서,제 1 입력 화상(110) 및 제 2 입력 화상(112)을 연속으로 포함하는 제 1 입력 화상들의 시리즈(110 내지 114)를 생성하기 위한 처리기(108)에 기초한 그래픽 파이프라인(101)과,전환 유닛(105)으로서,상기 제 1 입력 화상들의 시리즈(110 내지 114)를 수신하기 위한 수단과,상기 제 1 입력 화상들의 시리즈에 기초하여 출력 화상들의 시리즈(116 내지 126)를 계산하기 위한 수단(104)으로서, 이격된다면, 출력 화상(118)이 처리기(116)로부터 소정의 시간 간격(132)만큼 이격되는, 상기 수단(104)을 포함하는, 상기 전환 유닛(105)과,상기 출력 화상들의 시리즈(116 내지 126)를 디스플레이하기 위한 디스플레이 디바이스(106)를 포함하는, 상기 화상 처리 장치(100)에 있어서,상기 전환 유닛(100)은 상기 제 1 입력 화상(110)의 제 1 생성 시간(T1)과 상기 제 2 입력 화상(112)의 제 2 생성 시간(T2) 간의 제 1 시간 간격(128)을 결정하고, 상기 제 1 시간 간격(128)에 기초하여 상기 제 1 입력 화상(110)과 상기 제 2 입력 화상(112) 간에 보간함으로써 특정 출력 화상(122)를 계산하도록 설계되어 있는 것을 특징으로 하는, 화상 처리 장치(100).
- 제 1 항에 있어서,상기 전환 유닛(107)은 모션 보상된 보간을 수행하기 위해, 상기 출력 화상들의 시리즈(116 내지 126)를 계산하기 위한 수단(104)을 제어하기 위한 모션 추정기(motion estimator)(109)를 더 포함하는, 화상 처리 장치(103).
- 제 2 항에 있어서,상기 전환 유닛(113)은 제 2 입력 화상들의 시리즈(302 내지 306)를 수신하기 위한 제 2 수단을 더 포함하고, 상기 전환 유닛(113)은 상기 제 1 입력 화상들의 시리즈(308, 310) 및 상기 제 2 입력 화상들의 시리즈(302 내지 306)에 기초하여, 상기 출력 화상들의 시리즈(316 내지 324)를 계산하도록 설계되어 있는 것을 특징으로 하는, 화상 처리 장치(111).
- 제 3 항에 있어서,상기 전환 유닛(113)은상기 제 1 입력 화상들의 시리즈의 상기 제 1 입력 화상(110)과 상기 제 2 입력 화상(112) 간에 보간함으로써 제 1 중간 모션 보상된 보간된 화상을 계산하고,상기 제 2 입력 화상들의 시리즈의 화상들 간에 보간함으로써 제 2 중간 모션 보상된 보간된 화상을 계산하고,결합된 출력 화상을 생성하기 위해, 상기 제 2 중간 화상을 상기 제 1 중간화상과 병합하도록 설계되어 있는, 화상 처리 장치(111).
- 전환 유닛(200)으로서,제 1 입력 화상(110)과 제 2 입력 화상(122)을 연속하여 포함하는 제 1 입력 화상들의 시리즈를 수신하기 위한 수단(202)과,상기 제 1 입력 화상들의 시리즈(110)에 기초하여 출력 화상들의 시리즈(116 내지 126)를 계산하기 위한 수단(104)으로서, 이격된다면, 출력 화상(118)이 처리기(116)로부터 소정의 시간 간격(132)만큼 이격되는, 상기 수단(104)을 포함하는, 상기 전환 유닛(200)에 있어서,상기 제 1 입력 화상(110)의 제 1 생성 시간(T1)과 상기 제 2 입력 화상(112)의 제 2 생성 시간(T2) 간의 제 1 시간 간격(128)을 결정하고, 상기 제 1 시간 간격(128)에 기초하여 상기 제 1 입력 화상(110)과 상기 제 2 입력 화상(112) 간에 보간함으로써 특정 출력 화상(122)을 계산하도록 설계되어 있는 것을 특징으로하는, 전환 유닛(200).
- 제 5 항에 있어서,모션 보상된 보간을 수행하기 위해서, 상기 출력 화상들의 시리즈(116 내지 126)를 계산하기 위한 수단을 제어하기 위한 모션 추정기(205)를 더 포함하는 것을 특징으로 하는, 전환 유닛(203).
- 제 5 항에 있어서,제 2 입력 화상들의 시리즈(308, 310)를 수신하기 위한 제 2 수신 수단(209)을 더 포함하고, 상기 전환 유닛(207)은 상기 제 1 입력 화상들의 시리즈(308, 310)와 상기 제 2 입력 화상들의 시리즈(302, 306)의 화상들에 기초하여 상기 출력 화상들의 시리즈(316 내지 326)를 계산하도록 설계되어 있는 것을 특징으로 하는, 전환 유닛(207).
- 제 6 항에 있어서,제 2 입력 화상들의 시리즈(308, 310)를 수신하기 위한 제 2 수신 수단(209)을 더 포함하고, 상기 전환 유닛(207)은 상기 제 1 입력 화상들의 시리즈(308, 310) 및 상기 제 2 입력 화상들의 시리즈(302, 306)의 화상들에 기초하여 상기 출력 화상들의 시리즈(316 내지 326)를 계산하도록 설계되어 있는 것을 특징으로 하는, 전환 유닛(207).
- 제 7 항에 있어서,상기 제 1 입력 화상들의 시리즈의 상기 제 1 입력 화상(110)과 상기 제 2 입력 화상(112) 간에 보간함으로써 제 1 중간 모션 보상된 보간된 화상을 계산하고,상기 제 2 입력 화상들의 시리즈의 화상들 간에 보간함으로써 제 2 중간 모션 보상된 보간된 화상을 계산하고,결합된 출력 화상을 생성하기 위해, 상기 제 2 중간 화상과 상기 제 1 중간 화상을 병합하도록 설계되어 있는 것을 특징으로 하는, 전환 유닛(207).
- 전환 방법으로서,제 1 입력 화상(110) 및 제 2 입력 화상(122)을 연속하여 포함하는 제 1 입력 화상들의 시리즈를 수신하는 단계와,상기 제 1 입력 화상들의 시리즈에 기초하여 출력 화상들의 시리즈를 계산하는 단계로서, 이격된다면, 출력 화상(118)이 처리기(116)로부터 소정의 시간 간격(132)만큼 이격되는, 상기 계산 단계를 포함하는, 상기 전환 방법에 있어서,상기 방법은 상기 제 1 입력 화상(110)의 제 1 생성 시간(T1)과 상기 제 2 입력 화상(112)의 제 2 생성 시간(T2) 간의 제 1 시간 간격(128)을 결정하기 위한 타이밍 단계(timing step)를 포함하고,상기 출력 화상들의 시리즈(116 내지 126)를 계산하는 단계에서, 특정 출력 화상들이 상기 제 1 시간 간격(128)에 기초하여 상기 제 1 입력 화상(110)과 상기 제 2 입력 화상(112) 간에 보간함으로써 계산되는 것을 특징으로 하는, 전환 방법.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP01202165 | 2001-06-06 | ||
| EP01202165.5 | 2001-06-06 | ||
| PCT/IB2002/002064 WO2002099749A2 (en) | 2001-06-06 | 2002-06-03 | Conversion unit and method and image processing apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20030027004A true KR20030027004A (ko) | 2003-04-03 |
| KR100880116B1 KR100880116B1 (ko) | 2009-01-23 |
Family
ID=8180428
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020037001703A KR100880116B1 (ko) | 2001-06-06 | 2002-06-03 | 화상 시간 간격 전환 유닛 및 방법, 및 화상 처리 장치 |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US20040165110A1 (ko) |
| EP (1) | EP1399883B1 (ko) |
| JP (1) | JP4232869B2 (ko) |
| KR (1) | KR100880116B1 (ko) |
| CN (1) | CN1273930C (ko) |
| AT (1) | ATE354138T1 (ko) |
| DE (1) | DE60218159T2 (ko) |
| WO (1) | WO2002099749A2 (ko) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008004150A2 (en) * | 2006-06-30 | 2008-01-10 | Nxp B.V. | A method and device for video stitching |
| CN101191719A (zh) * | 2006-12-01 | 2008-06-04 | 鸿富锦精密工业（深圳）有限公司 | 影像焦点合成系统及方法 |
| JP4513873B2 (ja) * | 2008-02-18 | 2010-07-28 | ソニー株式会社 | 映像処理装置、及び映像処理方法 |
| FR2958824A1 (fr) | 2010-04-09 | 2011-10-14 | Thomson Licensing | Procede de traitement d'images stereoscopiques et dispositif correspondant |
| CN106357967B (zh) * | 2016-11-29 | 2018-01-19 | 广东欧珀移动通信有限公司 | 控制方法、控制装置和电子装置 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2259212B (en) * | 1991-08-27 | 1995-03-29 | Sony Broadcast & Communication | Standards conversion of digital video signals |
| US5835160A (en) * | 1995-09-13 | 1998-11-10 | Oak Technology, Inc. | Sampling rate conversion using digital differential analyzers |
-
2002
- 2002-06-03 KR KR1020037001703A patent/KR100880116B1/ko not_active IP Right Cessation
- 2002-06-03 US US10/479,361 patent/US20040165110A1/en not_active Abandoned
- 2002-06-03 EP EP02735726A patent/EP1399883B1/en not_active Expired - Lifetime
- 2002-06-03 WO PCT/IB2002/002064 patent/WO2002099749A2/en active IP Right Grant
- 2002-06-03 AT AT02735726T patent/ATE354138T1/de not_active IP Right Cessation
- 2002-06-03 JP JP2003502786A patent/JP4232869B2/ja not_active Expired - Fee Related
- 2002-06-03 CN CNB028112016A patent/CN1273930C/zh not_active Expired - Fee Related
- 2002-06-03 DE DE60218159T patent/DE60218159T2/de not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| KR100880116B1 (ko) | 2009-01-23 |
| JP4232869B2 (ja) | 2009-03-04 |
| US20040165110A1 (en) | 2004-08-26 |
| JP2004522356A (ja) | 2004-07-22 |
| CN1526114A (zh) | 2004-09-01 |
| EP1399883B1 (en) | 2007-02-14 |
| WO2002099749A2 (en) | 2002-12-12 |
| DE60218159T2 (de) | 2007-10-25 |
| WO2002099749A3 (en) | 2004-01-15 |
| DE60218159D1 (de) | 2007-03-29 |
| ATE354138T1 (de) | 2007-03-15 |
| EP1399883A2 (en) | 2004-03-24 |
| CN1273930C (zh) | 2006-09-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6970206B1 (en) | Method for deinterlacing interlaced video by a graphics processor | |
| US6788309B1 (en) | Method and apparatus for generating a video overlay | |
| KR100410710B1 (ko) | 움직임보상된보간방법및그장치 | |
| US7321396B2 (en) | Deinterlacing apparatus and method | |
| KR100976718B1 (ko) | 필드 레이트 업변환을 위한 방법 및 장치 | |
| KR940025337A (ko) | 영상신호처리장치 및 처리방법 | |
| JP2011166705A (ja) | 映像処理装置、映像処理方法 | |
| JP4322114B2 (ja) | 画像プロセッサ及びそのような画像プロセッサを備える画像表示装置 | |
| KR100880116B1 (ko) | 화상 시간 간격 전환 유닛 및 방법, 및 화상 처리 장치 | |
| JP2003189258A (ja) | 画像信号処理装置及び方法 | |
| JP2003189256A (ja) | 画像信号処理装置及び方法 | |
| JP4099830B2 (ja) | 特殊効果装置、画像処理方法及び対象画像生成方法 | |
| US10015513B2 (en) | Image processing apparatus and image processing method thereof | |
| US9277168B2 (en) | Subframe level latency de-interlacing method and apparatus | |
| TW201740725A (zh) | 影像處理裝置及其影像處理方法 | |
| JP2998417B2 (ja) | マルチメディア情報処理装置 | |
| JP2004120594A (ja) | 幾何変換装置 | |
| JP3019735B2 (ja) | 画像処理装置 | |
| JPH0453315B2 (ko) | ||
| JPH10174061A (ja) | 映像データのバス転送方式 | |
| JPH0823505A (ja) | 静止画処理装置 | |
| JPH05268598A (ja) | テレビ電話装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130104 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20140102 Year of fee payment: 6 |
|
| LAPS | Lapse due to unpaid annual fee |