KR101192648B1 - 영상 신호 처리 장치 및 영상 신호 처리 방법 - Google Patents

영상 신호 처리 장치 및 영상 신호 처리 방법 Download PDF

Info

Publication number
KR101192648B1
KR101192648B1 KR1020117003025A KR20117003025A KR101192648B1 KR 101192648 B1 KR101192648 B1 KR 101192648B1 KR 1020117003025 A KR1020117003025 A KR 1020117003025A KR 20117003025 A KR20117003025 A KR 20117003025A KR 101192648 B1 KR101192648 B1 KR 101192648B1
Authority
KR
South Korea
Prior art keywords
video signal
pull
frame
video
motion compensation
Prior art date
Application number
KR1020117003025A
Other languages
English (en)
Other versions
KR20110039553A (ko
Inventor
히데키 아이바
Original Assignee
닛뽕빅터 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 닛뽕빅터 가부시키가이샤 filed Critical 닛뽕빅터 가부시키가이샤
Publication of KR20110039553A publication Critical patent/KR20110039553A/ko
Application granted granted Critical
Publication of KR101192648B1 publication Critical patent/KR101192648B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • H04N7/0115—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard with details on the detection of a particular field or frame pattern in the incoming video signal, e.g. 3:2 pull-down pattern
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • H04N7/0132—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter the field or frame frequency of the incoming video signal being multiplied by a positive integer, e.g. for flicker reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/0147—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes the interpolation using an indication of film mode or an indication of a specific pattern, e.g. 3:2 pull-down pattern

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

화상 메모리(10)는 입력 영상 신호를 1프레임 기간 지연하고, 움직임 벡터 검출 회로(20)는 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출한다. 풀 다운 판정 회로(22)는 영상 신호가 풀 다운 변환되어 있는지 아닌지를 판정하고, 움직임 벡터 변환 회로(21)는, 움직임 벡터와 풀 다운 변환의 판정 결과에 기초하여, 지연 회로(30~32)에서의 지연량을 제어하기 위한 제어 신호를 생성한다. 지연 회로는 제어 신호에 기초하여 영상 신호를 움직임 보상하여 움직임 보상 영상 신호를 생성하고, 시간축 강조 회로(40, 41)는 움직임 보상 영상 신호를 영상 신호에 의해 시간축 방향으로 강조하여 강조 영상 신호를 생성한다. 시계열 변환 메모리(50)는 강조 영상 신호를 고(高)프레임 레이트로 변환하여 출력한다.

Description

영상 신호 처리 장치 및 영상 신호 처리 방법{VIDEO SIGNAL PROCESSOR AND VIDEO SIGNAL PROCESSING METHOD}
본 발명은 입력된 영상 신호를, 그 영상 신호가 갖는 프레임 주파수보다도 높은 프레임 주파수로 변환하여 액정 패널 등의 표시부에 표시하는 영상 신호 처리 장치 및 영상 신호 처리 방법에 관한 것이다.
액정 패널을 이용한 액정 표시 장치에 있어서는, 동화(動畵)를 표시했을 때에 잔상을 발생한다는 문제점이 있다. 이 문제점을 저감하는 하나의 방법으로서, 특허문헌 1에는, 입력된 영상 신호의 프레임 간에 보간(補間) 프레임을 끼워넣어, 입력 영상 신호보다 높은 프레임 레이트(frame rate)로 변환하여 액정 패널에 표시하는 영상 표시 장치가 개시되어 있다. 특허문헌 1에 기재된 화상 표시 장치에 의하면, 프레임 주파수 60㎐의 영상 신호를 예를 들면 프레임 주파수 120㎐로 변환할 수 있다.
한편, 영화 필름은 매초 24컷 혹은 30컷의 정지 화상을 바꿈으로써 동화상을 표현하고 있다. 이러한 영화 필름의 영상 신호를, 표준의 텔레비전 신호인 수직 주파수 60㎐로 변환할 때에는, 2-3 풀 다운 변환 혹은 2-2 풀 다운 변환이 행해진다. 예를 들면, 2-3 풀 다운 변환된 영상 신호를 표시할 때, 동일 프레임이 2매, 다음의 프레임이 3매 연속하는 패턴이 반복된다. 그 때문에, 모션 저더(motion judder)라고 불리는 화상의 움직임의 매끄러움이 손상된다는 문제가 발생한다.
일본공개특허공보 2006-337448호
그런데, 특허문헌 1에 기재된 화상 표시 장치에 영화 필름의 화상 신호를 입력한 경우, 연속하여 입력되는 프레임의 패턴이 동일하면, 프레임 간에 끼워 넣어지는 보간 프레임도 전후의 프레임과 동일한 패턴이 된다. 따라서, 특허문헌 1에 기재된 화상 표시 장치에서는, 영화 필름에 의한 영상 신호에 대하여 모션 저더를 개선할 수 없어, 시청자에게는 위화감이 있는 화상이 되어 버린다.
최근, 고(高)프레임 레이트로 변환 가능한 영상 신호 처리 장치가 주류가 되어 있다. 그 때문에, 영화 필름의 영상 신호에 대해서도 모션 저더를 개선함과 함께 지금까지와 동등 이상의 프레임 레이트로 변환할 수 있는 영상 신호 처리 장치가 요구된다. 또한, 고프레임 레이트로 변환할 수 있음과 함께, 처리 속도의 저속화(低速化)와 프레임 메모리를 삭감한 영상 신호 처리 장치가 요망된다.
본 발명은 이러한 문제점을 감안하여 이루어진 것으로, 입력 영상 신호가 영화 필름에 의한 영상 신호인 경우, 모션 저더를 개선함과 함께 입력 영상 신호와 동등 이상의 프레임 레이트로 변환하고, 또한 입력 영상 신호가 표준의 텔레비전 신호인 경우, 종래와 동일하게 고프레임 레이트로 변환할 수 있고, 그리고 처리 속도의 저속화와 프레임 메모리의 삭감을 한 영상 신호 처리 장치를 제공하는 것을 목적으로 한다.
본 발명은, 전술한 종래의 기술의 과제를 해결하기 위해, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 프레임 메모리와, 상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터(motion vector)를 검출하는 움직임 벡터 검출 수단과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 풀 다운 판정 수단과, 상기 풀 다운 판정 수단의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 시퀀스 발생 수단과, 상기 제1 또는 제2 영상 신호를 지연시키는(N+1)개 (단, N은 2이상의 자연수)의 가변 지연 수단을 갖고, 상기(N+1)개의 가변 지연 수단에 의한 각 지연량은, 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (N+1)개의 가변 지연 수단에 의한 각 지연량은 서로 상이하고, 상기 (N+1)개의 가변 지연 수단에 의해, 상기 제1 또는 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여, 상기 (N+1) 개의 각각 상이한 움직임 보상 영상 신호를 생성하는 화상 시프트 수단과, 상기 (N+1) 개의 각각 상이한 움직임 보상 영상 신호 중에서 N개의 움직임 보상 영상 신호를, 시계열(time series) 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향(time axis direction)으로 강조하여, N개의 각각 상이한 강조 영상 신호를 출력하는 시간축 강조 수단과, 상기 N개의 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 시계열 변환 메모리를 갖는 것을 특징으로 하는 영상 신호 처리 장치이다.
또한, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 프레임 메모리와, 상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 움직임 벡터 검출 수단과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 풀 다운 판정 수단과, 상기 풀 다운 판정 수단의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 시퀀스 발생 수단과, 상기 제1 또는 제2 영상 신호를 지연시키는 (M+1)개(단,M은 2이상의 자연수인 N을 우수리 없이 나눈 수)의 가변 지연 수단을 갖고, 상기 (M+1)개의 가변 지연 수단에 의한 각 지연량은, 상기 풀 다운 판정 수단이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우의 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (M+1)개의 가변 지연 수단에 의한 각 지연량은 서로 상이하고, 상기 (M+1)개의 가변 지연 수단에 의해, 상기 제1 또는 상기 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여, 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 화상 시프트 수단과, 상기 풀 다운 판정 수단이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 M개의 움직임 보상 영상 신호를, 시계열 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, M개의 각각 상이한 강조 영상 신호를 출력하는 시간축 강조 수단과, 상기 풀 다운 판정 수단이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 M개의 움직임 보상 영상 신호의 각각에 대하여, 하나의 움직임 보상 영상 신호에 기초하는 적어도 1개의 강조 영상 신호와 상기 움직임 보상 영상 신호를 합쳐 N/M회씩 반복하여 출력함과 함께, 상기 움직임 보상 영상 신호 및 상기 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 시계열 변환 메모리를 갖는 것을 특징으로 하는 영상 신호 처리 장치이다.
또한, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 프레임 메모리와, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 풀 다운 판정 수단과, 상기 풀 다운 판정 수단이 상기 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우에 발생하는 풀 다운 시퀀스 정보를 기초하여, 제1 지연량으로 지연시킨 상기 제1 영상 신호 또는 제2 의 지연량으로 지연시킨 제2 의 영상 신호의 어느 쪽을 선택하여 선택 영상 신호로서 출력하는 선택 수단과, 상기 제1 지연량으로 지연시킨 제1 영상 신호를 상기 선택 영상 신호를 기초하여 시간축 방향으로 강조하여 제1 영상 신호를 출력하고, 상기 제2 지연량으로 지연시킨 상기 제2 영상 신호를 기초하여 시간축 방향으로 강조하여 제2 영상 신호를 출력하는 시간축 강조 수단과, 상기 시간축 강조 수단에 의해 출력된 상기 제1 영상 신호 및 상기 제2 영상 신호를, 상기 프레임 메모리에 입력된 제1 영상 신호의 프레임 주파수의 N배(단, N은 짝수)로 변환하여 5K(단,K는 N의 1/2)개씩 반복 시계열 순으로 출력하는 시계열 변환 메모리를 갖는 것을 특징으로 하는 영상 신호 처리 장치이다
삭제
또한, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과,상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 스텝과,상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝과, 상기 풀 다운 변환된 영상 신호인지 아닌지 및 풀 다운 변환의 종류의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 스텝과, 상기 제1 또는 제2 영상 신호를 지연시키는 (N+1)개(단, N은 2이상의 자연수)의 가변 지연시키는 스텝을 갖고, 상기 (N+1)개의 가변 지연시키는 스텝에 의한 각 지연량은, 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (N+1)개의 가변 지연시키는 스텝에 의한 각 지연량은 서로 상이하고, 상기 (N+1)개의 가변 지연시키는 스텝에 의해, 상기 제1 또는 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여, 상기 (N+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 스텝과, 상기 (N+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 N개의 움직임 보상 영상 신호를, 시계열 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, N개의 각각 상이한 강조 영상 신호를 출력하는 스텝과, 상기 N개의 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법이다.
또한, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과,상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 스텝과,상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 스텝과, 상기 제1 또는 제2 영상 신호를 지연시키는 (M+1)개(단, M은 2이상의 자연수인 N을 우수리 없이 나눈 수)의 가변 지연시키는 스텝을 갖고, 상기 (M+1)개의 가변 지연시키는 스텝에 의한 각 지연량은, 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우의 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수의 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (M+1)개의 가변 지연시키는 스텝에 의한 각 지연량은 서로 상이하고, 상기 (M+1)개의 가변 지연시키는 스텝에 의해, 상기 제1 또는 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 스텝과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 M개의 움직임 보상 영상 신호를, 시계열 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, M개의 각각 상이한 강조 영상 신호를 출력하는 스텝과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 M개의 움직임 보상 영상 신호의 각각에 대하여, 하나의 움직임 보상 영상 신호에 기초하는 적어도 1개의 강조 영상 신호와 상기 움직임 보상 영상 신호를 합쳐 N/M회씩 반복하여 출력함과 함께, 상기 움직임 보상 영상 신호 및 상기 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법이다.
또한, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝과, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝이, 상기 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우에 발생하는 풀 다운 시퀸스 정보를 기초하여, 제1 지연량으로 지연시킨 제1 영상 신호 또는 제2 지연량으로 지연시킨 제2 영상 신호의 어느쪽을 선택하여 선택 영상 신호로서 출력하는 스텝과, 상기 시간축 방향으로 영상 신호를 강조하는 스텝에 의해 출력된 상기 제1 영상 신호 및 상기 제2 영상 신호를, 상기 프레임 메모리에 입력된 제1 영상 신호의 N배(단, N은 짝수)로 변환하여 5K개(단, K는 N의 1/2)씩 반복 시계열순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법이다.
또한, 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과, 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝과, 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝이, 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우, 움직임 벡터에 기초하여, L－(L＋1) 풀 다운 시퀀스 정보(L은 2N＋(N－1)/2이고, N은 3 이상의 홀수)를 발생하는 스텝과, 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝이, 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우, 제1 영상 신호 또는 제2 영상 신호를 선택하여 시계열이 동일한 영상 신호를 1프레임 주기마다 L개, (L＋1)개씩 반복에 의해, 선택 영상 신호로서 출력하는 스텝과, 시계열이 1프레임 주기 바뀐 후의 선택 영상 신호를, 1프레임 주기 앞의 선택 영상 신호에 기초하여 시간축 방향으로 강조하는 스텝과, 제1 영상 신호의 프레임 주파수를 N배로 변환하여 선택 영상 신호를 1프레임 주기마다 L개, (L＋1)개씩의 반복에 의해 시계열 순으로 출력하는 스텝을 갖는 영상 신호 처리 방법이다.
삭제
도 1은 제1 실시 형태에 있어서의 영상 신호 처리 장치의 일 예를 나타내는 블록 구성도이다.
도 2는 제1~제3 실시 형태에 있어서의 시간축 강조 회로의 일 예를 나타내는 블록도이다.
도 3은 제1 실시 형태에 있어서의 영상 신호 처리 장치에 대한 입력 영상 신호가 2-3 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다.
도 4는 제1 실시 형태에 있어서의 영상 신호 처리 장치에 대한 입력 영상 신호가 2-2 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다.
도 5는 제1 실시 형태에 있어서의 영상 신호 처리 장치에 입력된 영상 신호가 표준 텔레비전 신호인 경우의 시퀀스 차트의 일 예를 나타내는 도면이다.
도 6은 제2 실시 형태에 있어서의 영상 신호 처리 장치의 일 예를 나타내는 블록 구성도이다.
도 7은 제2 실시 형태에 있어서의 영상 신호 처리 장치에 입력된 영상 신호가 2-3 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다.
도 8은 제3 실시 형태에 있어서의 영상 신호 처리 장치의 일 예를 나타내는 블록 구성도이다.
도 9는 제3 실시 형태에 있어서의 영상 신호 처리 장치에 입력된 영상 신호가 2-3 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다.
(발명을 실시하기 위한 형태)
<제1 실시 형태>
이하, 제1 실시 형태에 있어서의 영상 신호 처리 장치 및 영상 신호 처리 방법에 대해서, 도 1 내지 도 5를 참조하여 설명한다. 도 1은 제1 실시 형태에 있어서의 영상 신호 처리 장치의 블록 구성도의 일 예이다. 도 1에 있어서, 영상 신호 처리 장치(1)에 입력되는 영상 신호(제1 영상 신호)(F0)는, 화상(프레임) 메모리(10)에 공급된다.
또한, 화상 메모리(10)는, 제1 영상 신호(F0)를 1프레임분(分) 기억하고, 1프레임 기간 지연시켜 제2 영상 신호(F1)를 출력한다. 즉, 제2 영상 신호(F1)는, 제1 영상 신호(F0)보다 1프레임 앞의 영상 신호이다. 제1 영상 신호(F0)와 제2 영상 신호(F1)는, 각각 움직임 벡터 검출 수단을 갖는 움직임 벡터 검출 회로(20) 및 풀 다운 판정 수단을 갖는 풀 다운 판정 회로(22)에 공급된다.
움직임 벡터 검출 회로(20)는, 공급된 제1 영상 신호(F0)와 제2 영상 신호(F1)와의 프레임 간의 움직임 벡터(MV)를 검출한다. 움직임 벡터의 검출에는, 예를 들면 매칭(matching)법 등을 이용하는 것이 가능하다. 검출된 움직임 벡터(MV)는, 움직임 벡터 변환 회로(21)에 공급된다.
풀 다운 판정 회로(22)는, 입력된 제1 영상 신호(F0)와 제2 영상 신호(F1)에 의해, 제1 영상 신호(F0)가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 판정 결과를 시퀀스 발생 회로(23)로 공급한다. 예를 들면, 제1 영상 신호(F0)와 제2 영상 신호(F1)의 프레임 간의 차분(差分)을 둠으로써, 풀 다운 변환된 영상 신호인지 아닌지의 판정을 하는 것이 가능하다. 그 경우, 프레임 간의 차분이 커지는 주기를 검출함으로써, 2-2 풀 다운 변환, 혹은 2-3 풀 다운 변환된 영상 신호인지 아닌지의 판정도 가능하다.
또한, 제1 영상 신호(F0)에 풀 다운 변환된 정보가 포함되어 있는 경우는, 그 정보를 이용하여 풀 다운 변환된 영상 신호인지 아닌지의 판정을 하는 것도 가능하다. 또한, 그 외의 공지 기술을 이용하여 풀 다운 변환된 영상 신호인지 아닌지 및 풀 다운 변환의 종류를 판정해도 좋다.
시퀀스 발생 수단을 갖는 시퀀스 발생 회로(23)는, 풀 다운 판정 회로(22)로부터 공급되는 판정 결과에 기초하여 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호(풀 다운 시퀀스 정보)를 발생시켜, 움직임 벡터 변환 회로(21)로 공급한다. 풀 다운 시퀀스란, 제1 영상 신호(F0)의 풀 다운 변환의 종류에 따라, 움직임 벡터 변환 회로(21) 등에서 미리 정해진 제어를 하는 것을 말한다. 또한, 풀 다운 변환의 종류에는, 풀 다운 변환되어 있지 않은 경우도 포함하는 것이다. 움직임 벡터 변환 회로(21)는, 움직임 벡터(MV)와 시퀀스 신호에 기초하여, 후술하는 각 가변 지연 회로(30~32)에 있어서의 지연량을 제어하기 위한 3종류의 지연 제어 신호(a1~a3)를 생성한다. 지연 제어 신호(a1~a3)는, 화상 시프트 수단을 갖는 각 가변 지연 회로(30~32)로 공급된다.
가변 지연 회로(30)는, 지연 제어 신호(a1)에 기초하여 제2 영상 신호(F1)를 소정량 지연시켜, 움직임 보상된 움직임 보상 영상 신호(b1)를 발생하여, 움직임 보상 영상 신호(b1)를 시간축 강조 회로(40)로 공급한다. 가변 지연 회로(31)는, 지연 제어 신호(a2)에 기초하여 제1 영상 신호(F0)를 소정량 지연시켜, 움직임 보상된 움직임 보상 영상 신호(b2)를 생성하여, 시간축 강조 회로(40, 41)에 공급한다. 가변 지연 회로(32)는, 지연 제어 신호(a3)에 기초하여 제1 영상 신호(F0)를 소정량 지연시켜, 움직임 보상된 움직임 보상 영상 신호(b3)를 생성하여 시간축 강조 회로(41)로 공급한다.
또한, 가변 지연 회로(30~32)는, 각 지연 제어 신호(a1~a3)에 기초하여 영상 신호를 가변으로 지연할 수 있는 회로이다. 또한, 화상 시프트 수단은, 도 1에 나타내는 가변 지연 회로로 한정되지 않는다. 즉, 제1 영상 신호(F0) 또는 제2 영상 신호(F1) 중 적어도 1개의 영상 신호와 움직임 벡터(MV)에 기초하여, 움직임 보상된 화상을 형성하는 영상 신호를 생성하는 구성이면 좋고, 이후의 설명에 있어서도 동일하다.
한편, 액정 패널에 의해 화상을 표시시키는 경우에는, 응답 속도가 늦기 때문에, 동화(動畵)를 표시했을 때에 잔상을 발생한다는 문제점이 있다. 이 잔상을 저감하기 위해서는, 영상 신호를 시계열 순으로 나열했을 때에 그 영상 신호에 가까운 영상 신호에서 시간축 방향으로 강조할 필요가 있다.
시간축 강조 수단을 갖는 시간축 강조 회로(40, 41)는, 화상 신호를 시간축 방향으로 강조하는 필터이고, 소망하는 영상 신호의 전압을 급격히 끌어올려, 잔상을 막기 위한 필터이다. 도 2는 시간축 강조 회로의 블록 구성도의 일 예이다. 도 2에 나타내는 시간축 강조 회로(40, 41)는, 입력되는 2종류의 영상 신호를 fa, fb로 하고 있다. 감산기(40A)에 의해 fa로부터 fb를 감산하고, 그 결과에 대하여 승산기(40B)를 이용하여 이득 계수(c)를 곱한다. 또한, 그 결과에 대하여 가산기(40C)를 이용하여 영상 신호(fa)를 가산하여, 영상 신호(fo)를 출력한다. 즉, 시간축 강조 회로(40, 41)의 출력 화상 신호(fo)는,
fo＝fa＋c(fa－fb)…(1)
로 얻어진다. 여기에서 이득 계수(c)는 영상 신호(fa)를 강조하는 정도를 결정하는 것이고, 액정의 응답 특성에 따라서 설정된다. 예를 들면, 액정 재료의 응답 속도가 비교적 빠르고, 동화(動畵) 표시 때의 잔상이 적은 경우에는 이득 계수(c)를 작게 설정하고, 응답 속도가 비교적 늦고, 동화 표시 때의 잔상이 많은 경우에는 이득 계수(c)를 크게 설정한다.
시간축 강조 회로(40)에 있어서는, 영상 신호(fa)가 움직임 보상 영상 신호(b2)이고, 영상 신호(fb)가 움직임 보상 영상 신호(b1)이다. 또한, 시간축 강조 회로(41)에 있어서는, 영상 신호(fa)가 움직임 보상 영상 신호(b3)이고, 영상 신호(fb)가 움직임 보상 영상 신호(b2)이다. 그리고, 시간축 강조 회로(40)는, 움직임 보상 영상 신호(b1)에 기초하여, 움직임 보상 영상 신호(b2)를 시간축 방향으로 강조하여 강조 영상 신호(DF0)를 생성하여 시계열 변환 메모리(50)로 공급한다. 또한, 시간축 강조 회로(41)는, 움직임 보상 영상 신호(b2)에 기초하여, 움직임 보상 영상 신호(b3)를 시간축 방향으로 강조하여 강조 영상 신호(DF1)를 생성하여 시계열 변환 메모리(50)로 공급한다.
또한, 시간축 강조 회로(40, 41)는 도 2에 나타내는 구성으로 한정되지 않는다. 예를 들면, 시간축 강조 회로(40, 41)는, 영상 신호를 시계열 순으로 나열했을 때에, 강조하는 영상 신호의 1개 앞의 영상 신호를 포함하는 복수의 영상 신호를 이용하여 영상 신호를 시간축 방향으로 강조해도 좋다. 또한, 강조하는 영상 신호의 1개 앞의 영상 신호를 포함하지 않고 그 영상 신호에 시계열에서 가까운 1개 혹은 복수의 영상 신호를 이용해도 좋다.
시계열 변환 메모리(50)는, 공급되는 영상 신호(DF0 및 DF1)를 일단 기억하고, 영상 신호(DF0, DF1)의 순으로 영상 신호(F0')로서 도시하지 않은 액정 패널로 출력한다. 또한, 시계열 변환 메모리(50)는, 프레임 주파수를 2배로 변환하여 영상 신호(F0')를 출력한다.
다음으로, 영화 필름 등의 매초 24컷으로 기록된 영상 신호를 2-3 풀 다운 변환한 영상 신호(F0)가 영상 신호 처리 장치(1)에 입력된 경우에 대해서 설명한다. 2-3 풀 다운 변환이란, 홀수번째의 컷은 2필드로, 짝수번째의 컷은 3필드로 변환하는 것을 말한다. 한편, 그 반대인 3-2 풀 다운 변환은, 홀수번째의 컷은 3필드로, 짝수번째의 컷은 2필드로 변환하는 것을 말한다. 이후의 설명에 있어서, 2-3 풀 다운 변환은 3-2 풀 다운 변환을 포함하는 것으로 한다. 풀 다운 판정 회로(22)가 제1 영상 신호(F0)는 2-3 풀 다운 변환된 신호라고 판정한 경우, 시퀀스 발생 회로(23)는 2-3 풀 다운 시퀀스 정보를 실행하기 위한 시퀀스 신호를 발생하여, 움직임 벡터 변환 회로(21)로 송신한다.
도 3은, 영상 신호 처리 장치(1)에 입력된 제1 영상 신호(F0)가 2-3 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다. 도 3(A)은, 영상 신호 처리 장치(1)에 입력되는 화상 패턴을 나타내고 있다. 도 3(A)에 나타내는 바와 같이, 제1 영상 신호(F0)는, 1/60초마다 프레임(S1, S2, S3…)의 시계열 순으로, 영상 신호 처리 장치(1)로 입력된다. 도 3에 있어서, 흑색의 동그라미는 물체의 위치를 나타내고 있고, 또한 파선의 동그라미는 영상 신호 처리 장치(1)로 입력된 영상 신호의 원래의 물체의 위치를 나타내고 있다. 또한, 이후의 시퀀스 차트에 있어서도 도 3과 동일한 기호를 이용한다.
프레임(S2, S3, S4)은 동일한 화상 패턴, 프레임(S5, S6)은 동일한 화상 패턴이고, 이후 3프레임 연속하여 동일한 화상 패턴, 그 후 2프레임 연속하여 동일한 화상 패턴이 반복하여 입력된다.
움직임 벡터 검출 회로(20)는, 프레임(S1로부터 S2)으로 변화할 때의 움직임 벡터량을 MV로 하여 검출한다. 입력된 제1 영상 신호(F0)가 영상 신호 처리 장치(1)에서 어떠한 처리도 되지 않는 경우는, 도 3(A)에 나타내는 바와 같이 시선의 추적 방향과 움직이는 물체와의 사이에 어긋남이 발생한다. 그 때문에, 시청자에게는 움직임이 딱딱하고 부자연스러운 화상으로서 보이게 된다.
움직임 벡터 변환 회로(21)는, 움직임 벡터 검출 회로(20)로부터 공급된 움직임 벡터량(MV)과 시퀀스 신호에 기초하여, 예를 들면 표 1에 나타내는 지연량이 되도록 제어하기 위한 지연 제어 신호(a1~a3)를 각 가변 지연 회로(30~32)에 공급한다. 표 1은, 5/60초 주기로 동일한 지연량이고, 제1 영상 신호(F0)(현재 입력되어 있는 프레임)가 S2와 S7일 때의 지연량을 동일하게 한다. 또한, 표 1에 나타내는 지연량은 상대적인 지연량을 나타낸다. 또한, 가변 지연 회로(30)에 있어서 부(負)의 방향으로 지연하는 처리는 실현할 수 없기 때문에, 이후 설명하는 각 지연 회로에서의 지연량은 상대적인 것으로 한다.
Figure 112011009139255-pct00001
가변 지연 회로(31, 32)는, 움직임 벡터 가변 회로(21)에 의해 공급된 지연 제어 신호(a2, a3)에 기초하여, 제1 영상 신호(F0)를 지연시킨다. 예를 들면, 가변 지연 회로(32)는 공급되는 제1 영상 신호(F0)가 프레임(S2)일 때, 제1 영상 신호(F0)를 －2·MV/5의 지연량으로 지연시켜 움직임 보상 영상 신호(b3)를 발생한다. 가변 지연 회로(31)는 공급 입력되는 제1 영상 신호(F0)가 프레임(S2)일 때, 제1 영상 신호(F0)를 －3·MV/5 지연시켜 움직임 보상 영상 신호(b2)를 생성한다.
도 3(B)은, 가변 지연 회로(31, 32)로부터 출력시킨 움직임 보상 영상 신호(b2, b3)를 1/120초마다 YA1, YB1, YA2, YB2…의 시계열 순으로 나열한 것이다. 도 3(B)에 나타내는 바와 같이, 영상 신호 처리 장치(1)에 의해 새롭게 프레임이 보간되고 그리고 움직임 보상이 이루어진다. 따라서, 시선의 추적 방향과 움직이는 물체가 일치하여 모션 저더가 개선되어, 시청자에게는 움직임이 매끄러운 화상으로써 보인다.
가변 지연 회로(30)는, 움직임 벡터 변환 회로(21)에 의해 공급된 지연 제어 신호(a1)에 기초하여, 1프레임 앞의 영상 신호인 제2 영상 신호(F1)를 지연시킨다. 예를 들면, 가변 지연 회로(30)는 공급되는 제2 영상 신호(F1)가 프레임(S1)일 때, 제2 영상 신호(F1)를 ＋MV/5의 지연량으로 지연시켜 움직임 보상 영상 신호(b1)를 생성한다.
또한, 가변 지연 회로(30)에 있어서의 제2 영상 신호(F1)에 대한 지연 처리는, 1프레임 앞의 가변 지연 회로(32)의 제1 영상 신호(F0)에 대한 처리와 동일한 것이다. 따라서, 가변 지연 회로(30)를 대신하여 가변 지연 회로(32)의 영상 신호의 출력을 1프레임분 지연시켜 움직임 보상 영상 신호(b3)를 생성해도 좋다. 그 경우는, 1프레임분 지연시키는 메모리가 필요하게 된다.
다음으로, 매초 30컷의 동화상을 2-2 풀 다운 변환한 제1 영상 신호(F0)가 영상 신호 처리 장치(1)에 입력된 경우에 대해서 설명한다. 풀 다운 판정 회로(22)가 제1 영상 신호(F0)는 2-2 풀 다운 변환된 신호라고 판정한 경우, 시퀀스 발생 회로(23)는 2-2 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호를 발생하여, 움직임 벡터 변환 회로(21)로 송신한다.
도 4는, 영상 신호 처리 장치(1)에 입력된 제1 영상 신호(F0)가 2-2 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다. 도 4(A)는, 영상 신호 처리 장치(1)에 입력되는 화상 패턴을 나타내고 있다. 도 4(A)에 나타내는 바와 같이, 제1 영상 신호(F0)는, 1/60초마다 프레임(S1, S2, S3…)의 시계열 순으로, 영상 신호 처리 장치(1)로 입력된다. 프레임(S2, S3)은 동일한 화상 패턴, 프레임(S4, S5)은 동일한 화상 패턴이고, 이후 2프레임 연속하여 동일한 화상 패턴이 반복하여 영상 신호 처리 장치(1)로 입력된다.
움직임 벡터 검출 회로(20)는, 2-3 풀 다운의 경우와 동일하게, S1로부터 S2로 변화할 때의 움직임 벡터량을 MV로 하여 검출한다. 입력된 제1 영상 신호(F0)가 영상 신호 처리 장치(1)에서 어떠한 처리도 되지 않는 경우는, 도 4(A)에 나타내는 바와 같이 시선의 추적 방향과 움직이는 물체와의 사이에 어긋남이 발생한다. 그 때문에, 시청자에게는 움직임이 딱딱하고 부자연스러운 화상으로서 보이게 된다.
움직임 벡터 변환 회로(21)는, 움직임 벡터 검출 회로(20)로부터 공급된 움직임 벡터량(MV)과 시퀀스 신호에 기초하여, 예를 들면 표2에 나타내는 지연량이 되도록 제어하기 위한 지연 제어 신호(a1~a3)를 각 가변 지연 회로(30~32)에 공급한다. 또한, 표 2에 나타내는 지연량은, 2/60초 주기로 동일한 지연량이고, 제1 영상 신호(F0)의 프레임이 S2와 S4일 때의 지연량을 동일하게 한다.
Figure 112011009139255-pct00002
가변 지연 회로(31, 32)는, 움직임 벡터 변환 회로(21)에 의해 공급된 지연 제어 신호(a2, a3)에 기초하여, 제1 영상 신호(F0)를 지연시킨다. 예를 들면, 가변 지연 회로(32)는 공급되는 제1 영상 신호(F0)의 프레임이 S2일 때, 제1 영상 신호(F0)를 －MV/4의 지연량으로 지연시켜 움직임 보상 영상 신호(b3)를 생성한다. 또한, 가변 지연 회로(31)는, 공급되는 제1 영상 신호(F0)의 프레임이 S2일 때, 그 영상 신호(F0)를 －MV/2 지연시켜 움직임 보상 영상 신호(b2)를 생성한다.
도 4(B)는, 가변 지연 회로(31, 32)로부터 출력된 움직임 보상 영상 신호(b2, b3)를 1/120초마다 YA1, YB1, YA2, YB2…의 시계열 순으로 나열한 것이다. 도 4(B)에 나타내는 바와 같이, 영상 신호 처리 장치(1)에 의해 새롭게 프레임이 보간되고 그리고 움직임 보상이 이루어진다. 따라서, 시선의 추적 방향과 움직이는 물체가 일치하여 모션 저더가 개선되어, 시청자에게는 움직임이 매끄러운 화상으로서 보인다.
가변 지연 회로(30)는, 움직임 벡터 변환 회로(21)에 의해 공급된 지연 제어 신호(a1)에 기초하여, 제2 영상 신호(F1)를 지연시킨다. 예를 들면, 가변 지연 회로(30)는 공급되는 제2 영상 신호(F1)가 프레임(S1)일 때, 제2 영상 신호(F1)를 ＋MV/4의 지연량으로 지연시켜 움직임 보상 영상 신호(b1)를 생성한다.
다음으로, 영상 신호 처리 장치(1)에 표준의 텔레비전의 영상신호인 수직 주파수 60㎐의 영상 신호(F0)가 입력된 경우에 대해서 설명한다. 풀 다운 판정 회로(22)가 제1 영상 신호(F0)는 풀 다운 변환된 신호가 아니라고 판정한 경우, 시퀀스 발생 회로(23)는 풀 다운 변환되어 있지 않은 경우의 제어를 하기 위한 시퀀스 신호를 발생하여, 움직임 벡터 변환 회로(21)로 송신한다.
도 5는, 영상 신호 처리 장치(1)에 입력된 제1 영상 신호(F0)가 수직 주파수 60㎐의 표준 텔레비전의 화상 신호인 경우의 시퀀스 차트의 일 예를 나타내는 도면이다. 도 5(A)는, 화상 신호 처리 장치(1)에 입력되는 화상 패턴을 나타내고 있다. 도 5(A)에 나타내는 바와 같이, 제1 영상 신호(F0)는 S1, S2, S3…의 시계열 순으로, 영상 신호 처리 장치(1)로 입력된다.
움직임 벡터 검출 회로(20)는, S1로부터 S2로 변화할 때의 움직임 벡터량을 MV로 하여 검출한다. 움직임 벡터 변환 회로(21)는, 움직임 벡터 검출 회로(20)로부터 공급된 움직임 벡터량(MV)과 시퀀스 신호에 기초하여, 예를 들면 표 3에 나타내는 지연량이 되도록 제어하기 위한 지연 제어 신호(a1~a3)를 각 가변 지연 회로(30~32)로 공급한다. 표 3에 나타내는 지연량은, 프레임에 의하지 않고 항상 동일한 지연량으로 되어 있다.
Figure 112011009139255-pct00003
가변 지연 회로(32)는, 움직임 벡터 변환 회로(21)에 의해 공급되는 지연 제어 신호(a3)에 의해 지연량을 0으로 하기 때문에, 제1 영상 신호(F0)를 지연시키지 않고 그대로 움직임 보상 영상 신호(b3)로 한다. 가변 지연 회로(31)는, 움직임 벡터 변환 회로(21)에 의해 공급되는 지연 제어 신호(a2)에 기초하여, 제1 영상 신호(F0)를 －MV/2 지연하여 움직임 보상 영상 신호(b2)를 생성한다.
도 5(B)는, 가변 지연 회로(31, 32)로부터 출력된 움직임 보상 영상 신호(b2, b3)를 1/120초마다 YA1, YB1, YA2, YB2…의 시계열 순으로 나열한 것이다. 도 5(B)에 나타내는 바와 같이, 영상 신호 처리 장치(1)에 의해 새롭게 프레임이 보간되고 그리고 움직임 보상이 이루어진다. 따라서, 시선의 추적 방향과 움직이는 물체가 일치하여 모션 저더가 개선되어, 시청자에게는 움직임이 매끄러운 화상으로서 보인다.
이상 설명해 온 바와 같이, 제1 실시 형태에 의하면, 풀 다운 변환된 영상 신호인지 아닌지에 의해, 가변 지연 회로(30~32)에서의 지연량을 바꾸어 움직임 보상을 할 수 있고, 고프레임 레이트를 실현할 수 있다. 그 때문에, 영상 신호가 풀 다운 변환되어 있는지 아닌지에 관계없이, 매끄러운 화상을 제공할 수 있다.
또한, 제1 실시 형태에서는, 3개의 움직임 보상 영상 신호를 생성하는 3개의 가변 지연 회로(화상 시프트 수단)를 이용하고, 2개의 움직임 보상 영상 신호에 기초하여 2개의 강조 영상 신호를, 입력 영상 신호인 제1 영상 신호(F0)의 2배의 프레임 레이트로 변환하고 있지만, 이에 한정되는 것은 아니다. 예를 들면, 입력 영상 신호의 프레임 레이트를 N(N은 2 이상의 자연수)배로 변환하는 경우, 복수의 N개 이상의 움직임 보상 영상 신호를 생성하는 화상 시프트 수단(가변 지연 회로)을 필요로 한다. 그리고, 복수의 움직임 보상 영상 신호 중에서 N개의 움직임 보상 영상 신호를 선택하여, 시간축 방향으로 강조된 N개의 강조 영상 신호를 생성하면 좋다.
또한, 가변 지연 회로(30~32)에 공급되는 지연 제어 신호(a1~a3)에 포함되는 지연량은 표 1~표 3에 나타내는 이외의 지연량이라도 좋다. 가변 지연 회로(30~32)에는, 제1 영상 신호(F0)와, 1프레임분 지연된 제2 영상 신호(F1)의 한쪽, 혹은 양쪽이 공급되어, 움직임 보상 영상 신호(b1~b3)가 생성되는 구성이라도 좋다. 또한, 도 1에 나타내는 바와 같이, 시계열 변환을 행하기 전에 움직임 보상과 시간축 강조를 행하는 구성으로 할 수 있기 때문에, 고속의 프레임 메모리를 필요로 하지 않는다. 그 때문에, 처리 속도의 저속화와 프레임 메모리의 삭감이 가능한 화상 신호 처리 장치(1)의 구성이다.
<제2 실시 형태>
제2 실시 형태는, 제1 영상 신호(F0)가 풀 다운 변환되어 있는 신호라고 판정된 경우, 시계열 변환 메모리가 동일한 움직임 보상 영상 신호에 기초하는 복수의 영상 신호를 출력하도록 한 점이 제1 실시 형태와 상이하다. 제2 실시 형태에서는, 제1 실시 형태와 상이한 점을 설명한다.
도 6은, 제2 실시 형태에 있어서의 영상 신호 처리 장치의 일 예를 나타내는 블록 구성도이다. 도 6의 영상 신호 처리 장치(2)에 있어서, 도 1과 동일한 구성 블록에 대해서는 동일 부호를 붙이고 있다. 고정 지연 회로(33)는, 제1 영상 신호(F0)가 풀 다운 변환된 것인지 아닌지에 의하는 일 없이, 제1 영상 신호(F0)에 대하여 미리 고정된 지연량으로 지연(화상 시프트)을 행한다.
선택 회로(60)는, 풀 다운 판정 회로(22)에 있어서 제1 영상 신호(F0)가 풀 다운 변환된 신호라고 판정된 경우, 가변 지연 회로(31)에 있어서 소정의 지연량으로 지연된 움직임 보상 영상 신호(b2)를 선택한다. 한편, 풀 다운 판정 회로(22)에 있어서 제1 영상 신호(F0)가 풀 다운 변환된 신호가 아니라고 판정된 경우, 시간축 강조 회로(41)에 있어서 생성된 영상 신호를 선택한다.
풀 다운 판정 회로(22)가, 제1 영상 신호(F0)를 2-3 풀 다운 변환된 영상 신호라고 판정한 경우에 대해서 설명한다. 움직임 벡터 검출 회로(20)는, 프레임 S1으로부터 프레임 S2로 변화할 때의 움직임 벡터량을 MV로 하여 검출한다. 풀 다운 판정 회로(22)가 제1 영상 신호(F0)는 풀 다운 변환된 신호라고 판정한 경우, 시퀀스 발생 회로(23)는 풀 다운 변환된 신호인 경우의 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호를 발생하여, 움직임 벡터 변환 회로(21)로 송신한다.
움직임 벡터 변환 회로(21)는, 움직임 벡터 검출 회로(20)로부터 공급된 움직임 벡터량(MV)과 시퀀스 신호에 기초하여, 예를 들면 표 4에 나타내는 지연량이 되도록 제어하기 위한 지연 제어 신호(a1, a2)로서 가변 지연 회로(30, 31)로 공급한다. 표 4에 나타내는 지연량은, 5/60초 주기로 동일한 지연량이고, 제1 영상 신호(F0)의 프레임이 S2와 S7일 때의 지연량을 동일하게 한다.
Figure 112011009139255-pct00004
가변 지연 회로(31)는, 움직임 벡터 변환 회로(21)에 의해 공급된 지연 제어 신호(a2)에 기초하여, 제1 영상 신호(F0)를 지연시킨다. 예를 들면, 가변 지연 회로(31)는 공급되는 제1 영상 신호(F0)가 프레임(S2)일 때, 제1 영상 신호(F0)를 －2·MV/5의 지연량으로 지연시켜 움직임 보상 영상 신호(b2)를 생성한다.
가변 지연 회로(30)는, 움직임 벡터 변환 회로(21)로부터 공급된 소정의 지연량분, 1프레임 앞의 제2 영상 신호(F1)를 지연시킨다. 예를 들면, 가변 지연 회로(30)에 입력되는 제2 영상 신호(F1)가 프레임(S1)일 때, 그 영상 신호(F1)를 ＋MV/5의 지연량으로 지연시킨다.
도 7은, 영상 신호 처리 장치(2)에 입력된 제1 영상 신호(F0)가 2-3 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다. 도 7(A)는, 영상 신호 처리 장치(1)에 입력되는 화상 패턴을 나타내고 있다. 도 7(A)에 나타내는 바와 같이, 프레임(S2, S3, S4)은 동일한 화상 패턴, 프레임(S5, S6)은 동일한 화상 패턴이고, 이후 3프레임 연속하여 동일한 화상 패턴, 그 후 2프레임 연속하여 동일한 화상 패턴이 반복하여 입력된다.
도 7(B)은, 가변 지연 회로(30)로부터 출력된 움직임 보상 영상 신호(b2)를 1/120초마다 Y1, Y1, Y2, Y2…의 시계열 순으로 나열한 것이다. 제2 실시 형태에 있어서 제1 영상 신호(F0)가 풀 다운 변환된 영상 신호의 경우, 시계열 변환 메모리(50)는, 움직임 보상 영상 신호(b2)를 시간축 강조 회로(40)에 의해 강조한 영상 신호(DF0), 선택 회로(60)에서 선택된 움직임 보상 영상 신호(b2)를 영상 신호(DF1)로서 일단 기억한다.
시계열 변환 메모리(50)는, 프레임 주파수를 2배로 변환하고, 영상 신호(DF0, DF1)의 순으로 영상 신호(F0')로서 도시하지 않은 액정 패널로 출력한다. 따라서, 도 7(B)에 나타내는 바와 같이, 도 7(A)에 나타내는 제1 영상 신호(F0)는, 1/60초 주기씩, 즉 2프레임씩 동일한 움직임 보상 영상 신호(b2)를 베이스로 한 영상 신호가 된다. 그리고, 영상 신호 처리 장치(2)에 의해, 프레임이 보간되고 그리고 부드러운 움직임 보상이 이루어진다. 따라서, 시선의 추적 방향과 움직이는 물체가 거의 일치하여 모션 저더가 개선되어, 시청자에게는 움직임이 어느 정도 매끄러운 화상으로서 보인다.
본래 영화 필림의 정지 화상을 풀 다운 변환한 영상 신호는, 그 콘텐츠에 따라서는 모션 저더나 동화(動畵) 흐릿해짐을 지나치게 개선하지 않는 편이 좋은 경우가 있다. 즉, 제1 실시 형태의 영상 신호 처리 장치(1)를 이용한 경우에, 모션 저더가 지나치게 개선되어 오히려 위화감이 발생하는 경우가 있다. 그러한 경우는, 제2 실시 형태에서 설명한 선택 회로(60)를 이용하여 2프레임씩 동일한 움직임 보상 영상 신호(b2)를 베이스로 한 영상 신호를 출력하여, 부드러운 움직임 보상으로 하는 것이 좋다. 또한, 풀 다운 변환한 영상 신호에는 시간축 강조 회로(41)를 이용하지 않기 때문에, 동화(動畵) 흐릿해짐을 보정하는 효과를 강하게 하지 않도록 할 수도 있다.
다음으로, 표준의 텔레비전 신호인 수직 주파수 60㎐의 영상 신호가 영상 신호 처리 장치(2)로 입력된 경우를 설명한다. 풀 다운 판정 회로(22)가 제1 영상 신호(F0)가 풀 다운 변환된 신호가 아니라고 판정한 경우, 선택 회로(60)는, 고정 지연 회로(33)로부터 공급되는 움직임 보상 영상 신호(b3)를 시간축 강조 회로(41)에 의해 시간축 방향으로 강조한 영상 신호를 영상 신호(DF1)로서 선택한다.
이 경우, 시계열 변환 메모리(50)는, 시간축 강조 회로(41)에 의해 시간축 방향으로 강조된 영상 신호(DF1)와, 시간축 강조 회로(40)에 의해 시간축 방향으로 강조된 영상 신호(DF0)를 일단 기억한다. 시계열 변환 메모리(50)는, 프레임 주파수를 2배로 변환하고, 영상 신호(DF0, DF1)의 순으로 영상 신호(F0')로서 도시하지 않은 액정 패널로 출력한다. 또한, 가변 지연 회로(30, 31)에서 지연되는 지연량은 제1 실시 형태에 있어서의 표 3과 동일하다. 따라서, 제1 실시 형태에 있어서의 도 5와 동일해지고, 도 5(B)에 나타내는 바와 같이 영상 신호 처리 장치(2)에 의해 새롭게 프레임이 보간되어, 시청자에게는 움직임이 매끄러운 영상으로서 보인다.
이상 설명해 온 바와 같이, 제2 실시 형태에 의하면, 입력 영상 신호인 제1 영상 신호(F0)가 풀 다운 변환된 영상 신호의 경우는, 입력 영상 신호보다는 고프레임 레이트로 변환할 수 있지만, 제1 실시 형태보다는 부드러운 움직임 보상으로 할 수 있다. 또한, 제1 영상 신호(F0)가 표준의 텔레비전 영상 신호의 경우는, 제1 실시 형태와 동일한 움직임 보상을 할 수 있어, 고프레임 레이트를 실현할 수 있다.
또한, 시간축 강조 회로(40, 41)는, 움직임 보상 영상 신호(b2, b3)를 각각 시계열에서 1개 앞의 움직임 보상 영상 신호만을 이용하여 시간축 방향으로 강조하고 있지만, 1개 앞으로 한정하는 것은 아니다. 또한, 복수의 움직임 보상 영상 신호를 이용하여 시간축 방향으로 강조해도 좋다.
또한, 제2 실시 형태에 있어서 풀 다운 변환된 입력 영상 신호인 경우, 2개의 움직임 보상 영상 신호를 생성하는 2개의 가변 지연 회로(화상 시프트 수단)를 이용하고, 1개의 움직임 보상 영상 신호와, 그 움직임 보상 영상 신호에 기초하는 1개의 강조 영상 신호를, 입력 영상 신호인 제1 영상 신호(F0)의 2배의 프레임 레이트로 변환하고 있지만, 이에 한정되는 것은 아니다.
예를 들면, 입력 영상 신호의 프레임 레이트를 N(N은 2 이상의 자연수)배로 변환하는 경우, 영상 신호 처리 장치(2)는, 복수의 움직임 보상 영상 신호를 생성하는 화상 시프트 수단(가변 지연 회로)을 필요로 한다. 그리고, 선택 회로를 이용하여, 복수의 움직임 보상 영상 신호 중에서 M개(M은 N을 나누는 자연수)의 움직임 보상 영상 신호와 그 각 움직임 보상 영상 신호를 시간축 방향으로 강조한 강조 영상 신호를 선택한다. 또한, 선택된 M개의 시계열이 동일한 영상 신호(움직임 보상 영상 신호 또는 강조 영상 신호)의 각각에 대해서, 움직임 보상 영상 신호와 그 움직임 보상 영상 신호에 기초하는 시계열이 동일한 강조 영상 신호를 합쳐 N/M(M은 N을 나누는 자연수)회씩 출력한다. 따라서, 영상 신호 처리 장치(2)는, 시계열이 동일한 각 영상 신호를 N/M회씩 출력하여 합계 N개의 영상 신호를 생성하여, 프레임 레이트를 N배로 변환하는 것이다. 또한, 선택된 M개 중 각각에 대해서, 적어도 1개 이상의 강조 영상 신호도 합쳐 출력시킴으로써 잔상을 저감하는 것이 좋다.
제2 실시 형태에서는, N＝2, M＝1로 하여 설명했지만, N＝3의 경우는 M＝1이 되고, 동일한 움직임 보상 영상 신호에 기초하는 영상 신호가 1/60초간에 3프레임분 출력된다. N＝4의 경우는 M＝1 또는 2, N＝5의 경우는 M＝1, N＝6의 경우는 M＝1, 2 또는 3과의 관계가 된다. 그 결과, 동일한 움직임 보상 영상 신호를 베이스로 한 영상 신호의 프레임이 2개 이상의 동수(同數)씩 출력되어, 모션 저더가 개선된다.
또한, 가변 지연 회로(30, 31)에 공급되는 지연 제어 신호(a1~a3)에 포함되는 지연량은 표 4에 나타내는 이외의 지연량이라도 좋다. 또한, 가변 지연 회로(30, 31)에는, 제1 영상 신호(F0)와 프레임분 지연된 제2 영상 신호(F1)의 한쪽, 혹은 양쪽이 공급되어, 움직임 보상 영상 신호(b1~b3)가 생성되는 구성이라도 좋다. 또한, 도 6에 나타내는 바와 같이, 시계열 변환을 행하기 전에 움직임 보상과 시간축 강조를 행하는 구성으로 할 수 있기 때문에, 고속의 프레임 메모리를 필요로 하지 않는다. 그 때문에, 처리 속도의 저속화와 프레임 메모리의 삭감이 가능한 영상 신호 처리 장치(2)의 구성이다.
<제3 실시 형태>
제3 실시 형태는, 제1 영상 신호(F0)가 2-3 풀 다운 변환되어 있는 신호라고 판정된 경우, 영상 신호 처리 장치는 5-5 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호를 발생하여, 동일한 움직임 보상 영상 신호에 기초하는 복수의 영상 신호를 5개씩 출력하도록 한 점이 제1, 제2 실시 형태와 상이하다. 제3 실시 형태에서는, 제1, 제2 실시 형태와 상이한 점을 설명한다.
도 8은, 제3 실시 형태에 있어서의 영상 신호 처리 장치의 일 예를 나타내는 블록 구성도이다. 도 8의 영상 신호 처리 장치(3)에 있어서, 도 1, 도 6과 동일한 구성 블록에 대해서는 동일 부호를 붙이고 있다. 고정 지연 회로(34)는, 제1 영상 신호(F0)가 풀 다운 변환된 것인지 아닌지에 의하지 않고, 제2 영상 신호(F1)에 대하여 미리 고정된 지연량에서의 지연을 행한다.
선택 수단을 갖는 선택 회로(61)는, 풀 다운 판정 회로(22)에 의해 제1 영상 신호(F0)가 풀 다운 변화된 신호라고 판정된 경우, 시퀀스 발생 회로(23)에 있어서 발생된 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호에 기초하여, 고정 지연 회로(33)에 있어서 소정의 지연량으로 지연된 영상 신호(b3), 또는 고정 지연 회로(34)에 있어서 소정의 지연량으로 지연된 영상 신호(b1) 중 어느 하나를 선택한다.
선택 회로(62)는, 풀 다운 판정 회로(22)에 있어서 제1 영상 신호(F0)가 풀 다운 변환된 신호라고 판정된 경우는, 선택 회로(61)에서 선택된 영상 신호를 선택하여 선택 영상 신호로 한다. 한편, 풀 다운 변환이 되어진 신호가 아니라고 판정된 경우는, 가변 지연 회로(31)로부터 공급되는 움직임 보상 영상 신호(b2)를 선택하여 선택 영상 신호로 한다.
풀 다운 판정 회로(22)가 제1 영상 신호(F0)를 2-3 풀 다운 변환된 영상 신호라고 판정한 경우에 대해서 설명한다. 시퀀스 발생 회로(23)는, 5-5 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호를 발생한다. 선택 회로(61)는, 시퀀스 신호에 기초하여 영상 신호(b1 또는 b3)를 선택하여 선택 영상 신호로 한다. 시계열 변환 메모리(50)는, 5프레임씩 동일한 영상 신호를 베이스로 한 영상 신호(F0')를 출력한다. 즉, 5/120초 주기로 영상 신호(F0')가 바뀐다.
도 9는, 영상 신호 처리 장치(3)에 입력된 제1 영상 신호(F0)가 2-3 풀 다운 변환되어 있는 경우의 시퀀스 차트의 일 예를 나타내는 도면이다. 도 9(A)는, 영상 신호 처리 장치(3)에 입력되는 화상 패턴을 나타내고 있다. 프레임(S2, S3, S4)은 동일한 화상 패턴, 프레임(S5, S6)은 동일한 화상 패턴이고, 이후 3프레임 연속하여 동일한 화상 패턴, 그 후 2프레임 연속하여 동일한 화상 패턴이 반복하여 입력된다.
도 9(B)는, 고정 지연 회로(33, 34)로부터 입력된 영상 신호(b1 또는 b3)를 1/120초마다 S1, S2, S2, S3, S3, S4, S5, S5, S5, S6…의 시계열 순으로 나열한 것이다. 제3 실시 형태에 있어서 제1 영상 신호(F0)가 풀 다운 변환된 신호의 경우, 각 시간축 강조 회로(40, 41)에 동일한 영상 신호(b1 또는 b3)가 선택 영상 신호로서 공급된 경우는, (1) 식에 나타내는 바와 같이 선택 영상 신호를 시간축 방향으로 강조하는 효과는 얻어지지 않는다. 그러나, 5/120초 주기(5프레임분씩)로 영상 신호(F0')가 바뀔 때의 전후의 영상 신호(b1 또는 b3) 간에서, 그 영상 신호(b1 또는 b3)를 시간축 방향으로 강조할 수 있다. 그리고, 영상 신호 처리 장치(3)는, 영상 신호(F0')가 1프레임 주기 바뀔 때마다, 영상 신호(b1 또는 b3)를 시간축 방향으로 강조하여 잔상을 저감하는 것이 바람직하다.
시계열 변환 메모리(50)는, 시간축 강조 회로(40)를 통한 영상 신호(b1 또는 b3)로 이루어지는 선택 영상 신호를 DF0, 시간축 강조 회로(41)를 통한 영상 신호(b1 또는 b3)로 이루어지는 선택 영상 신호(DF1)로서 일단 기억한다. 그리고, 프레임 주파수를 2배로 변환하여, 영상 신호 DF0, DF1의 순으로 영상 신호(F0')로서 도시하지 않은 액정 패널로 출력한다. 도 9(B)에 나타내는 바와 같이, 도 9(A)에 나타내는 제1 영상 신호(F0)는, 5/120초 주기씩, 즉 5프레임씩 동일한 영상 신호를 베이스로 한 영상 신호가 된다.
제1 영상 신호(F0)가 2-2 풀 다운 변환된 신호의 경우는, 시계열 변환 메모리(50)가 4프레임씩 동일한 영상 신호를 베이스로 한 영상 신호(F0')를 출력하도록, 선택 회로(61)에 의해 선택된 영상 신호(b1 또는 b3)를 선택 영상 신호로 한다. 또한, 제1 영상 신호(F0)가 표준의 텔레비전 신호의 경우, 가변 지연 회로(31)에서 지연된 움직임 보상 영상 신호가 선택 회로(61 및 62)에 의해 선택되어, 제1 실시 형태와 동일한 처리가 된다.
이상 설명해 온 바와 같이, 제3 실시 형태에 의하면, 입력 영상 신호인 제1 영상 신호(F0)가 2-3 풀 다운 변환된 영상 신호의 경우는, 영상 신호 처리 장치(3)에 의해 움직임 보상이 이루어지지 않는다. 그러나, 2프레임, 3프레임의 반복인 제1 영상 신호(F0)는, 항상 5프레임의 반복의 영상 신호(F0')가 되고 모션 저더는 조금 개선되어, 시청자에게는 움직임이 어느 정도 위화감이 없는 화상으로서 보인다.
본래 영화 필름의 정지 화상을 풀 다운 변환한 영상 신호는, 그 콘텐츠에 따라서는 움직임 보상을 하지 않는 편이 좋은 경우가 있다. 즉, 제2 실시 형태에서도 움직임 보상이 지나치게 강해 위화감이 발생하는 경우는, 제3 실시 형태에서 설명한 바와 같이, 풀 다운 변환한 영상 신호의 움직임 보상을 행하지 않는 것이 좋다.
또한, 제2 실시 형태에 있어서 2-3 풀 다운 변환된 입력 영상 신호의 경우, 선택 회로를 이용하여, 시간축 방향으로 강조된 영상 신호를 포함하는 동일한 선택 영상 신호에 기초하는 영상 신호를 5개씩 출력하여, 2배의 프레임 레이트로 변환하는 구성을 나타냈지만, 이에 한정되는 것은 아니다.
예를 들면, 2개의 움직임 보상 영상 신호를 생성하는 2개의 가변 지연 회로(화상 시프트 수단)를 이용하고, 1개의 움직임 보상 영상 신호와, 그 움직임 보상 영상 신호에 기초하는 1개의 강조 영상 신호를, 입력 영상 신호인 제1 영상 신호(F0)의 2배의 프레임 레이트로 변환하고 있지만, 이에 한정되는 것은 아니다.
예를 들면, 입력 영상 신호의 프레임 레이트를 N(N은 2 이상의 짝수)배로 변환하는 영상 신호 처리 장치(3)에 2-3 풀 다운 변환된 제1 영상 신호(F0)가 입력된 경우, 시퀀스 발생 회로(23)는 5K-5K(K는 N/2) 풀 다운 시퀀스를 실행하기 위한 시퀀스 신호를 발생하면 좋다. 5K-5K 풀 다운 시퀀스란, 시계열이 동일한 움직임 보상 영상 신호에 기초하는 영상 신호를 5K개씩 출력하도록 제어하는 것을 말한다.
제3 실시 형태의 영상 신호 처리 장치(3)에서는, N＝2, K＝1로 하여 설명하고 있지만, N＝4의 경우는 K＝2가 되고, 10－10 풀 다운 시퀀스가 실행된다. 따라서, 동일한 선택 영상 신호에 기초하는 화상 신호가 5/120초간에 10개 출력된다. 그 후, 1프레임 주기 떨어진 동일한 선택 영상 신호에 기초하는 영상 신호가 5/120초간에 10개 출력된다. 따라서, 5/60초간에 2종류의 선택 영상 신호에 기초하는 영상 신호가 10개씩 합계 20개 출력된다. 마찬가지로, N＝6의 경우는 K＝3이 되고, 15－15 풀 다운 시퀀스가 실행된다. 따라서, 영상 신호 처리 장치(3)는, 동일한 선택 영상 신호를 베이스로 한 영상 신호의 프레임을 5K개씩 출력하여, 모션 저더를 조금 개선한다.
입력 영상 신호의 프레임 레이트를 N(N은 3 이상의 홀수)배로 변환하는 영상 신호 처리 장치(3)에 대하여 2-3 풀 다운 변환된 제1 영상 신호(F0)가 입력된 경우, 시퀀스 발생 회로(23)는 L－(L＋1) 풀 다운 시퀀스를 발생하면 좋다. L－(L＋1) 풀 다운 시퀀스란, 시계열이 동일한 영상 신호를 L개, 다음으로 시계열이 동일한 영상 신호를 (L＋1)개, 이후 L개, (L＋1)개씩의 반복에 의해 출력하도록 제어하는 것을 말한다. 단, L은 2N＋(N－1)/2이다. 또한, 2-3 풀 다운 시퀀스와 동일하게, L－(L＋1) 풀 다운 시퀀스는, (L＋1)－L 풀 다운 시퀀스를 포함하는 것이다.
예를 들면, N＝3의 경우는 L＝7이 되고, 7-8 풀 다운 시퀀스가 실행된다. 따라서, 시계열이 동일한 영상 신호(선택 영상 신호 또는 강조 영상 신호)가 7/180초간에 7개 출력된다. 그 후, 1프레임 주기 떨어진 시계열이 동일한 영상 신호(선택 영상 신호 또는 강조 영상 신호)가 8/180초간에 8개 출력된다. 따라서, 5/60초간에, 시계열이 상이한 2종류의 영상 신호가 7개, 8개로 출력된다. 마찬가지로, N＝5의 경우는 L＝9가 되고, 12-13 풀 다운 시퀀스가 실행된다. 따라서, 영상 신호 처리 장치(3)는, 임의의 L에 대하여, 시계열이 동일한 영상 신호의 프레임을 L개, 다음으로 시계열이 동일한 영상 신호를 (L＋1)개씩 반복하여 출력하고, N이 3 이상의 홀수라도 모션 저더를 조금 개선한다.
또한, 시청자의 기호에 맞춰, 제1~제3 실시 형태의 2개 이상의 형태를 선택할 수 있도록 하는 것이 바람직하다. 그 경우, 제1~제3 실시 형태에 있어서 공통되는 회로는 1개로 좋다.
본 발명에 의하면, 입력 영상 신호가 영화 필름에 의한 신호인 경우, 모션 저더를 개선함과 함께 입력 영상 신호와 동등 이상의 프레임 레이트로 변환하고, 또한 입력 영상 신호가 표준의 텔레비전 신호인 경우에도 종래와 동일하게 입력 영상 신호보다 높은 프레임 레이트로 변환할 수 있다. 또한, 처리 속도의 저속화와 프레임 메모리의 삭감이 가능하다.
1, 2, 3 : 영상 신호 처리 장치
10 : 프레임 메모리
20 : 움직임 벡터 검출 회로
22 : 풀 다운 판정 회로
23 : 시퀀스 발생 회로
30~32 : 가변 지연 회로
33, 34 : 고정 지연 회로
40, 41 : 시간축 강조 회로
50 : 시계열 변동 메모리
60~62 : 선택 회로

Claims (10)

  1. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 프레임 메모리와,
    상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터(motion vector)를 검출하는 움직임 벡터 검출 수단과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 풀 다운 판정 수단과,
    상기 풀 다운 판정 수단의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 시퀀스 발생 수단과,
    상기 제1 또는 제2 영상 신호를 지연시키는(N+1)개 (단, N은 2이상의 자연수)의 가변 지연 수단을 갖고, 상기(N+1)개의 가변 지연 수단에 의한 각 지연량은, 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (N+1)개의 가변 지연 수단에 의한 각 지연량은 서로 상이하고, 상기 (N+1)개의 가변 지연 수단에 의해, 상기 제1 또는 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여, 상기 (N+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 화상 시프트 수단과,
    상기 (N+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 N개의 움직임 보상 영상 신호를, 시계열(time series) 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, N개의 각각 상이한 강조 영상 신호를 출력하는 시간축 강조 수단과,
    상기 N개의 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 시계열 변환 메모리를 갖는 것을 특징으로 하는 영상 신호 처리 장치.
  2. 제1항에 있어서,
    상기 풀 다운 판정 수단은, 상기 제1 영상 신호가 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 제1 영상 신호가 2-2 풀 다운 변환된 신호인지 2-3 풀다운 변환된 신호인지를 판정하고,
    상기 시퀀스 발생 수단은, 상기 제1 영상 신호가 2-2 풀 다운 변환된 신호인지 2-3 풀 다운 변환된 신호인지에 의해 상기 각 지연량이 제어되는 소정의 복수 프레임에 의한 주기가 상이하도록 풀 다운 시퀀스 정보를 발생하는 것을 특징으로 하는 영상 신호 처리 장치.
  3. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 프레임 메모리와,
    상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 움직임 벡터 검출 수단과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 풀 다운 판정 수단과,
    상기 풀 다운 판정 수단의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 시퀀스 발생 수단과,
    상기 제1 또는 제2 영상 신호를 지연시키는 (M+1)개(단,M은 2이상의 자연수인 N을 우수리 없이 나눈 수)의 가변 지연 수단을 갖고, 상기 (M+1)개의 가변 지연 수단에 의한 각 지연량은, 상기 풀 다운 판정 수단이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우의 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (M+1)개의 가변 지연 수단에 의한 각 지연량은 서로 상이하고, 상기 (M+1)개의 가변 지연 수단에 의해, 상기 제1 또는 상기 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여, 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 화상 시프트 수단과,
    상기 풀 다운 판정 수단이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 M개의 움직임 보상 영상 신호를, 시계열 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, M개의 각각 상이한 강조 영상 신호를 출력하는 시간축 강조 수단과,
    상기 풀 다운 판정 수단이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 M개의 움직임 보상 영상 신호의 각각에 대하여, 하나의 움직임 보상 영상 신호에 기초하는 적어도 1개의 강조 영상 신호와 상기 움직임 보상 영상 신호를 합쳐 N/M회씩 반복하여 출력함과 함께, 상기 움직임 보상 영상 신호 및 상기 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 시계열 변환 메모리를 갖는 것을 특징으로 하는 영상 신호 처리 장치.
  4. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 프레임 메모리와,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 풀 다운 판정 수단과,
    상기 풀 다운 판정 수단이 상기 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우에 발생하는 풀 다운 시퀀스 정보를 기초하여, 제1 지연량으로 지연시킨 상기 제1 영상 신호 또는 제2 지연량으로 지연시킨 제2 영상 신호의 어느 쪽을 선택하여 선택 영상 신호로서 출력하는 선택 수단과,
    상기 제1 지연량으로 지연시킨 제1 영상 신호를 상기 선택 영상 신호를 기초하여 시간축 방향으로 강조하여 제1 영상 신호를 출력하고, 상기 제2 지연량으로 지연시킨 상기 제2 영상 신호를 기초하여 시간축 방향으로 강조하여 제2 영상 신호를 출력하는 시간축 강조 수단과,
    상기 시간축 강조 수단에 의해 출력된 상기 제1 영상 신호 및 상기 제2 영상 신호를, 상기 프레임 메모리에 입력된 제1 영상 신호의 프레임 주파수의 N배(단, N은 짝수)로 변환하여 5K(단,K는 N의 1/2)개씩 반복 시계열 순으로 출력하는 시계열 변환 메모리를 갖는 것을 특징으로 하는 영상 신호 처리 장치.
  5. 삭제
  6. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과,
    상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝과,
    상기 풀 다운 변환된 영상 신호인지 아닌지 및 풀 다운 변환의 종류의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 스텝과,
    상기 제1 또는 제2 영상 신호를 지연시키는 (N+1)개(단, N은 2이상의 자연수)의 가변 지연시키는 스텝을 갖고, 상기 (N+1)개의 가변 지연시키는 스텝에 의한 각 지연량은, 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (N+1)개의 가변 지연시키는 스텝에 의한 각 지연량은 서로 상이하고, 상기 (N+1)개의 가변 지연시키는 스텝에 의해, 상기 제1 또는 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여, 상기 (N+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 스텝과,
    상기 (N+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 N개의 움직임 보상 영상 신호를, 시계열 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, N개의 각각 상이한 강조 영상 신호를 출력하는 스텝과,
    상기 N개의 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법.
  7. 제6항에 있어서,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝은, 제1 영상 신호가 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 제1 영상 신호가 2-2 풀 다운 변환된 신호인지 2-3 풀 다운 변환된 신호인지를 판정하고,
    상기 풀 다운 시퀀스 정보를 발생하는 스텝은, 상기 제1 영상 신호가 2-2 풀 다운 변환된 신호인지 2-3 풀 다운 변환된 신호인지에 의해 상기 각 지연량이 제어되는 소정의 복수 프레임에 의한 주기가 상이하도록 풀 다운 시퀀스 정보를 발생하는 것을 특징으로 하는 영상 신호 처리 방법.
  8. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과,
    상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝의 판정 결과에 기초하여, 풀 다운 시퀀스 정보를 발생하는 스텝과,
    상기 제1 또는 제2 영상 신호를 지연시키는 (M+1)개(단, M은 2이상의 자연수인 N을 우수리 없이 나눈 수)의 가변 지연시키는 스텝을 갖고, 상기 (M+1)개의 가변 지연시키는 스텝에 의한 각 지연량은, 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우의 상기 풀 다운 시퀀스 정보와 상기 움직임 벡터에 기초하여, 소정의 복수의 프레임을 주기로서 반복하도록 제어되어, 1프레임 내에서의 상기 (M+1)개의 가변 지연시키는 스텝에 의한 각 지연량은 서로 상이하고, 상기 (M+1)개의 가변 지연시키는 스텝에 의해, 상기 제1 또는 제2 영상 신호 중 적어도 1개의 영상 신호를 움직임 보상하여 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호를 생성하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 (M+1)개의 각각 상이한 움직임 보상 영상 신호 중에서 M개의 움직임 보상 영상 신호를, 시계열 순에 있어서의 옆의 움직임 보상 영상 신호를 포함하는 적어도 1개 이상의 움직임 보상 영상 신호에 기초하여 각각 시간축 방향으로 강조하여, M개의 각각 상이한 강조 영상 신호를 출력하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하는 스텝이 상기 제1 영상 신호는 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 M개의 움직임 보상 영상 신호의 각각에 대하여, 하나의 움직임 보상 영상 신호에 기초하는 적어도 1개의 강조 영상 신호와 상기 움직임 보상 영상 신호를 합쳐 N/M회씩 반복하여 출력함과 함께, 상기 움직임 보상 영상 신호 및 상기 강조 영상 신호의 프레임 주파수를 N배로 변환하여 시계열 순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법.
  9. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝이, 상기 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우에 발생하는 풀 다운 시퀸스 정보를 기초하여, 제1 지연량으로 지연시킨 제1 영상 신호 또는 제2 지연량으로 지연시킨 제2 영상 신호의 어느쪽을 선택하여 선택 영상 신호로서 출력하는 스텝과,
    상기 제 1 지연량으로 지연시킨 제1 영상 신호를 상기 선택 영상 신호를 기초하여 시간축 방향으로 강조하여 제1 영상 신호를 출력하고, 상기 제2 지연량으로 지연시킨 상기 제2 영상 신호를 기초하여 시간축 방향으로 강조하여 제2 영상 신호를 출력하는, 시간축 방향으로 영상 신호를 강조하는 스텝과,
    상기 시간축 방향으로 영상 신호를 강조하는 스텝에 의해 출력된 상기 제1 영상 신호 및 상기 제2 영상 신호를, 상기 프레임 메모리에 입력된 제1 영상 신호의 N배(단, N은 짝수)로 변환하여 5K개(단, K는 N의 1/2)씩 반복 시계열순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법.
  10. 입력된 제1 영상 신호의 각 프레임을 1프레임 기간 지연시켜 제2 영상 신호를 출력하는 스텝과,
    상기 제1 영상 신호와 상기 제2 영상 신호의 프레임 간에 있어서의 움직임 벡터를 검출하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝이, 상기 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 움직임 벡터에 기초하여, L－(L＋1) 풀 다운 시퀀스 정보(L은 2N＋(N－1)/2이고, N은 3 이상의 홀수)를 발생하는 스텝과,
    상기 제1 영상 신호가 풀 다운 변환된 영상 신호인지 아닌지를 판정하여, 풀 다운 변환된 영상 신호인 경우에는 풀 다운 변환의 종류를 판정하는 스텝이, 상기 제1 영상 신호는 2-3 풀 다운 변환된 영상 신호라고 판정한 경우, 상기 제1 영상 신호 또는 제2 영상 신호를 선택하여 시계열이 동일한 영상 신호를 1프레임 주기마다 L개, (L＋1)개씩의 반복에 의해 선택 영상 신호로서 출력하는 스텝과,
    시계열이 1프레임 주기 바뀐 후의 상기 선택 영상 신호를, 1프레임 주기 전의 상기 선택 영상 신호에 기초하여 시간축 방향으로 강조하는 스텝과,
    상기 제1 영상 신호의 프레임 주파수를 N배로 변환하여 상기 선택 영상 신호를 1프레임 주기마다 L개, (L＋1)개씩의 반복에 의해 시계열 순으로 출력하는 스텝을 갖는 것을 특징으로 하는 영상 신호 처리 방법.
KR1020117003025A 2008-07-18 2009-07-16 영상 신호 처리 장치 및 영상 신호 처리 방법 KR101192648B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2008-187739 2008-07-18
JP2008187739A JP4964197B2 (ja) 2008-07-18 2008-07-18 映像信号処理装置及び映像信号処理方法
PCT/JP2009/062859 WO2010008039A1 (ja) 2008-07-18 2009-07-16 映像信号処理装置及び映像信号処理方法

Publications (2)

Publication Number Publication Date
KR20110039553A KR20110039553A (ko) 2011-04-19
KR101192648B1 true KR101192648B1 (ko) 2012-10-19

Family

ID=41550439

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117003025A KR101192648B1 (ko) 2008-07-18 2009-07-16 영상 신호 처리 장치 및 영상 신호 처리 방법

Country Status (6)

Country Link
US (1) US20110122312A1 (ko)
EP (1) EP2320649A4 (ko)
JP (1) JP4964197B2 (ko)
KR (1) KR101192648B1 (ko)
CN (1) CN102100066A (ko)
WO (1) WO2010008039A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4513913B2 (ja) * 2008-08-07 2010-07-28 ソニー株式会社 画像信号処理装置および方法
WO2012137394A1 (ja) * 2011-04-05 2012-10-11 パナソニック株式会社 フレームレート変換方法及びそのフレームレート変換方法を用いた映像処理装置
JP2012231303A (ja) * 2011-04-26 2012-11-22 Sony Corp 画像処理装置および方法、並びにプログラム
CN102811332B (zh) * 2011-05-31 2015-04-15 Jvc建伍株式会社 影像信号处理装置以及方法
JP5880165B2 (ja) * 2012-03-13 2016-03-08 株式会社Ｊｖｃケンウッド 映像信号処理装置、映像信号処理方法、映像信号処理プログラム
JP6085395B2 (ja) * 2014-06-04 2017-02-22 堺ディスプレイプロダクト株式会社 液晶表示装置及び表示方法
JP6362116B2 (ja) * 2016-11-30 2018-07-25 キヤノン株式会社 表示装置及びその制御方法、プログラム、記憶媒体

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003189257A (ja) 2001-10-09 2003-07-04 Sony Corp 画像信号処理装置及び方法
JP2005148521A (ja) 2003-11-18 2005-06-09 Victor Co Of Japan Ltd 画像表示装置
JP2006033748A (ja) 2004-07-21 2006-02-02 Matsushita Electric Ind Co Ltd 薄膜バルク音波共振子
JP2006091412A (ja) 2004-09-24 2006-04-06 Victor Co Of Japan Ltd 画像処理装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5428399A (en) * 1991-04-15 1995-06-27 Vistek Electronics Limited Method and apparatus for image translation with improved motion compensation
JP3905922B2 (ja) * 1995-04-11 2007-04-18 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像信号処理方法及び装置
JP3495485B2 (ja) * 1995-12-19 2004-02-09 日本放送協会 画像変換装置
JP4003713B2 (ja) * 2003-08-06 2007-11-07 ソニー株式会社 画像処理装置および画像処理方法
US7400321B2 (en) * 2003-10-10 2008-07-15 Victor Company Of Japan, Limited Image display unit
KR100553893B1 (ko) * 2003-10-14 2006-02-24 삼성전자주식회사 타임 시프트와 움직임 보상을 이용한 프레임 레이트 변환장치 및 그 방법
JP3916637B2 (ja) * 2005-03-08 2007-05-16 三菱電機株式会社 映像信号処理装置、映像信号処理方法、及び映像信号表示装置
JP4290140B2 (ja) * 2005-04-04 2009-07-01 キヤノン株式会社 表示装置及びその表示制御方法
JP4569388B2 (ja) * 2005-05-31 2010-10-27 日本ビクター株式会社 画像表示装置
JP4181592B2 (ja) * 2006-09-20 2008-11-19 シャープ株式会社 画像表示装置及び方法、画像処理装置及び方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003189257A (ja) 2001-10-09 2003-07-04 Sony Corp 画像信号処理装置及び方法
JP2005148521A (ja) 2003-11-18 2005-06-09 Victor Co Of Japan Ltd 画像表示装置
JP2006033748A (ja) 2004-07-21 2006-02-02 Matsushita Electric Ind Co Ltd 薄膜バルク音波共振子
JP2006091412A (ja) 2004-09-24 2006-04-06 Victor Co Of Japan Ltd 画像処理装置

Also Published As

Publication number Publication date
EP2320649A4 (en) 2011-07-27
JP4964197B2 (ja) 2012-06-27
JP2010028472A (ja) 2010-02-04
CN102100066A (zh) 2011-06-15
KR20110039553A (ko) 2011-04-19
US20110122312A1 (en) 2011-05-26
EP2320649A1 (en) 2011-05-11
WO2010008039A1 (ja) 2010-01-21

Similar Documents

Publication Publication Date Title
KR101192648B1 (ko) 영상 신호 처리 장치 및 영상 신호 처리 방법
JP5080899B2 (ja) 映像処理装置及びその制御方法
JP4396496B2 (ja) フレームレート変換装置、及び映像表示装置、並びにフレームレート変換方法
JP4513913B2 (ja) 画像信号処理装置および方法
JP5398365B2 (ja) 画像処理装置、画像処理方法
KR20090015868A (ko) 화상 처리 장치 및 제어 방법
JP4840519B2 (ja) 立体画像表示装置
US6522339B1 (en) Resolution conversion method and device
KR101016493B1 (ko) 움직임 보정 장치 및 방법
JP5077037B2 (ja) 画像処理装置
JP2006174123A (ja) 順次走査変換装置
JP2012227799A (ja) 画像表示装置
JP2010124257A (ja) 映像処理装置、映像表示装置、及びフレームレート変換方法
JP2005107437A (ja) 液晶表示装置
KR101361649B1 (ko) 영상 신호 처리 장치
JP2009147767A (ja) 画像変換装置、画像表示装置
JP2006173657A (ja) 映像信号処理回路
JP3292233B2 (ja) 補間処理回路
JP2012182691A (ja) 画像変換装置
JP2013031195A (ja) 画像処理装置
JP2014112765A (ja) 映像信号処理装置及び映像信号処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150917

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160921

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170920

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180920

Year of fee payment: 7