KR101000580B1

KR101000580B1 - 화상 처리 장치 및 화상 처리 방법, 및 기록 매체

Info

Publication number: KR101000580B1
Application number: KR1020030056381A
Authority: KR
Inventors: 구메쯔또무; 이시이신야; 야마다도꾸이찌로
Original assignee: 소니 주식회사
Priority date: 2002-08-16
Filing date: 2003-08-14
Publication date: 2010-12-10
Also published as: EP1389873A3; TWI228374B; CN1225120C; US7411617B2; TW200410570A; JP2004080327A; US20040119847A1; KR20040016414A; EP1389873A2; CN1496121A

Abstract

화상 데이터를, 출력에 관련되지 않은 프레임 레이트로 처리한 후, 출력에 적합한 프레임 레이트로 변환하여 출력한다. 비디오 출력이 PAL인 경우의 화상 데이터의 기록 처리에 있어서, 표시 신호 처리부(63)는, 버스(16)를 통하여, 메모리(19)에 기록되어 있는, 프레임 레이트 30 ㎐의 화상 데이터의 공급을 받아, 프레임 레이트의 비에 대응한 추출에 의한 프레임 레이트 변환 방법에 의해, 프레임 레이트를 NTSC의 29.97 ㎐로 변환하여, 표시부(21), 및 코딕 IC 인터페이스(64)로 출력하고, 또한, 프레임 레이트를 PAL의 25 ㎐로 변환하여, 비디오 출력 인터페이스(22)로 출력한다. 본 발명은, 디지털 카메라에 적응할 수 있다.

화상 데이터, 프레임 레이트, PAL, NTSC, 셀렉터, 플립플롭, 디지털 카메라

Description

화상 처리 장치 및 화상 처리 방법, 및 기록 매체{IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD, AND RECORDING MEDIUM}

도 1은 종래의 디지털 카메라의 구성을 도시하는 블록도.

도 2는 본 발명을 적용한 디지털 카메라의 구성을 도시하는 블록도.

도 3은 30 ㎐ 프레임과, NTSC의 29.97 ㎐ 프레임과의 관계를 도시하는 도면.

도 4는 30 ㎐ 프레임과, PAL의 25 ㎐ 프레임과의 관계를 도시하는 도면.

도 5는 코딕 IC에 의한 재생 시의 프레임 변환에 대하여 설명하는 도면.

도 6은 메모리의 어드레스 지정을 위한 회로 구성의 예를 도시하는 도면.

도 7은 D 플립플롭의 동작에 대하여 설명하기 위한 도면.

도 8은 셀렉터의 동작에 대하여 설명하기 위한 도면.

도 9는 촬영 시의 컨트롤 신호에 대하여 설명하기 위한 도면.

도 10은 코딕 IC에 의한 재생 시의 컨트롤 신호에 대하여 설명하기 위한 도면.

도 11은 도 2의 표시 신호 처리부의 동작에 대하여 설명하기 위한 도면.

도 12는 도 2의 표시 신호 처리부의 동작에 대하여 설명하기 위한 도면.

도 13은 도 2의 표시 신호 처리부의 동작에 대하여 설명하기 위한 도면.

도 14는 도 2의 표시 신호 처리부의 동작에 대하여 설명하기 위한 도면.

<도면의 주요 부분에 대한 부호의 설명>

11 : CCD 카메라부

12 : A/D 변환부

13 : 신호 처리부

17 : 화상 압축 처리부

18 : 해상도 변환 처리부

19 : 메모리

21 : 표시부

22 : 비디오 출력 인터페이스

61 : 메모리 컨트롤러

62 : CPU

63 : 표시 신호 처리부

64 : 코딕 IC 인터페이스

71 : 동기 신호 생성부

본 발명은, 화상 처리 장치 및 화상 처리 방법, 기록 매체, 및 프로그램에 관한 것으로, 특히, 소정의 포맷으로 화상 출력을 행하는 경우에 이용하기에 적합한, 화상 처리 장치 및 화상 처리 방법, 기록 매체, 및 프로그램에 관한 것이다.

디지털 카메라(디지털 스틸 카메라, 디지털 비디오 카메라, 및, 정지 화상 및 동화상을 촬상하는 것이 가능한 디지털 카메라)에 있어서는, 촬상하는 화상을 확인하기 위해서, 광학 파인더 대신에, 액정 파인더가 이용된다. 또한, 디지털 카메라는, 예를 들면, 텔레비전 수상기 등의 모니터를 이용하여, 촬상한 화상을 표시시키기 위해서, 내부에 기록하고 있는 화상 데이터를 외부의 표시 기기로 출력하기 위한 비디오 출력 단자를 구비하고 있다.

비디오 출력의 포맷으로서는, 예를 들면, NTSC(National Television System Committee) 방식이나, PAL(Phase Alternating Line) 방식 등이 있다. PAL은, 1962년에 서독일에서 제안된 컬러 텔레비전 방송의 표준이고, 주사선이 625개(50 필드), 프레임 레이트는, 25 프레임/초, 화면비(애스펙트비) 3:4로, 주로 프랑스를 제외한 서유럽 각국에서 채용되고 있다. NTSC는, 1953년에 표준화된 컬러 텔레비전 신호 방식으로서, 주사선이 525개(60 필드), 프레임 레이트는, 29.97 프레임/초, 화면비(애스펙트비) 3:4로, 주로 미국과 일본에서 채용되고 있다.

종래의 디지털 카메라에서는, 장치 내의 처리의 전체가, 비디오 출력의 포맷에 맞추어서, PAL이나 NTSC의 프레임 레이트에 맞춘 기준 클럭으로 동작하고 있었기 때문, 액정 파인더에도 PAL이나 NTSC의 영상이 표시되고 있었다.

도 1은, 종래의 디지털 카메라(1)의 구성을 도시하는 블록도이다. 또, 도면 중, 실선은 화상 신호의 수수를 도시하는 것이고, 점선은 제어 신호의 수수를 도시하는 것이고, 일점 파선은 부호 신호의 수수를 도시하는 것이고, 이점 파선은 동기 신호의 수수를 도시하는 것이다.

CCD(Charge Coupled Device:전하 결합 소자) 카메라부(11)로 촬상된 화상 신호는, A/D 변환부(12)에서 디지털 신호로 변환되고, 신호 처리부(13)에 입력된다. 신호 처리부(13)는, 입력된 신호에 대하여, 예를 들면, 감마 처리나, RGB 신호를 Y/Cb/Cr 신호로 변환하는 처리 등을 행하고, 처리 후의 화상 데이터를, 메모리 컨트롤러(14)에 공급한다.

메모리 컨트롤러(14)는, CPU(Central Processing Unit)(15)의 제어에 의해, 입력된 화상 데이터를, 버스(16)를 통하여, 메모리(19)에 기입하여 기록시키거나, 메모리(19)에 기입되어 있는 화상 데이터를, 버스(16)를 통하여, 화상 압축 처리부(17)나 해상도 변환 처리부(18)에 공급하여 처리시키고, 다시 메모리(19)에 기록시킨다. 또한, 메모리 컨트롤러(14)는, 메모리(19)에 기록되어 있는 신호 처리부(13)에서 처리된 상태의 화상 데이터, 혹은, 필요에 따라서 화상 압축 처리부(17), 혹은 해상도 변환 처리부(18)에 의해서 처리된 화상 데이터를, 버스(16)를 통하여, 표시 신호 처리부(20)에 공급하거나, 버스(16)를 통하여 판독하여, 드라이브(23)로 출력한다.

CPU(15)는, 디지털 카메라(1)의 동작을 제어하는 것으로서, 후술하는 동기 신호 생성부(31)로부터, 기준이 되는 타이밍 신호의 입력을 받아, 신호 처리부(13), 메모리 컨트롤러(14), 및, 표시 신호 처리부(20)의 동작을 제어하기 위한 제어 신호를 생성하여 출력한다.

화상 압축 처리부(17)는, 공급된 화상 데이터를, 예를 들면, JPEG 등의 소정의 압축 부호화 방법으로 압축 부호화(소프트웨어 코딩)한다. 해상도 변환 처리부(18)는, 공급된 데이터에 대하여, 수평, 혹은 수직의 화상 해상도 변환 처리를 행한다.

표시 신호 처리부(20)는, 버스(16)를 통하여, 메모리(19)에 기록된 화상 데이터의 입력을 받아, 내부에 갖는 동기 신호 생성부(31)가 생성하는 기준 신호에 기초하여, 표시부(21)로 출력하고 표시하는 데 적합한 신호, 혹은, 비디오 출력 인터페이스(22)를 통하여 외부의 기기로 출력하는 데 적합한 신호로 변환하는 처리를 실행한다. 동기 신호 생성부(31)가 생성하는 기준 신호는, CCD 카메라부(11), 신호 처리부(13), 및 CPU(15)에 공급된다.

표시부(21)는, 예를 들면, 액정 패널 등으로 구성되고, 표시 신호 처리부(20)로부터 공급된 소정의 표시 포맷(예를 들면, PAL이나 NTSC)의 화상 데이터를 표시한다. 비디오 출력 인터페이스(22)는, 소정의 인터페이스 형식으로, 외부의 기기와 접속되어, 표시 신호 처리부(20)로부터 공급된 소정의 비디오 출력 포맷(예를 들면, PAL이나 NTSC)의 화상 데이터를 외부의 기기로 출력한다. 또, 비디오 출력 인터페이스(22)와 외부의 기기는, 유선으로 접속되어 있더라도, 무선으로 접속되어 있더라도 된다.

또한, 메모리 컨트롤러(14)에는, 필요에 따라서, 드라이브(23)가 접속되어, 자기 디스크(41), 광 디스크(42), 광 자기 디스크(43), 혹은, 반도체 메모리(44) 등이 장착되어, 예를 들면, 메모리 컨트롤러(14)의 처리에 의해, 화상 압축 처리부(17)에 있어서 압축 처리된 화상이 공급되어, 이들의 기록 매체에 기록된다.

촬영 시에 있어서, CCD 카메라부(11)로부터 입력된 신호는, A/D 변환부(12) 에서 디지털 신호로 변환되어, 신호 처리부(13)에 입력된다. 신호 처리부(13)는, 입력된 신호에 대하여, 예를 들면, 감마 처리나, RGB 신호를 Y/Cb/Cr 신호로 변환하는 처리 등을 행하고, 처리 후의 화상 데이터를, 메모리 컨트롤러(14)에 공급한다. 화상의 사이즈 변환이 있는 경우, 화상 데이터는, 메모리 컨트롤러(14)의 처리에 의해, 버스(16)를 통하여, 해상도 변환 처리부(18)에 공급되고, 수평, 수직의 화상 변환이 행하여지고, 변환된 데이터가, 메모리 컨트롤러(14)의 처리에 의해, 버스(16)를 통하여, 메모리(19)에 기록된다.

화상 데이터가, 드라이브(23)에 장착되어 있는 기록 매체 등에 기록되는 경우, 화상 데이터는, 메모리 컨트롤러(14)의 처리에 의해, 버스(16)를 통하여, 화상 압축 처리부(17)에 공급되어, 예를 들면, JPEG 등의 소정의 압축 부호화 방식에 의해서 압축된다. 압축된 화상 데이터는, 다시, 메모리 컨트롤러(14)의 처리에 의해, 드라이브(23)로 출력되어, 자기 디스크(41), 광 디스크(42), 광 자기 디스크(43), 혹은, 반도체 메모리(44) 등의 기록 매체에 기록된다.

특히, 동화상의 촬영시에는, CCD 카메라부(11)로 촬상되어, A/D 변환부(12) 및 신호 처리부(13)에서 소정의 처리가 실시된 화상 신호는, 메모리 컨트롤러(14)의 처리에 의해, 메모리(19)에 프레임마다 기록된다. 메모리 컨트롤러(14)는, CPU(15)의 제어를 받아, 화상 압축 처리부(17)에, 메모리(19)에 기록된 화상 신호를 공급한다. 화상 압축 처리부(17)는, 동화상의 프레임 레이트의 사양(예를 들면, 15 프레임/초나, 16.6 프레임/초)에 따라서, 공급된 화상 신호에 대하여 화상 압축을 실시한다. 즉, 화상 압축 처리부(17)는, 프레임 레이트의 사양이 15 프레 임/초인 경우에는, 공급된 화상 신호를 66.6 msec 마다의 화상으로 압축하고, 프레임 레이트의 사양이 16.6 프레임/초인 경우에는, 공급된 화상 신호를 60 msec 간격의 화상으로 압축한다. 압축 처리 후의 화상 데이터는, 메모리 컨트롤러(14)의 처리에 의해, 메모리(19), 혹은, 드라이브(23)에 장착된 기록 매체에 기입된다.

이상 설명한 처리의 타이밍의 기준이 되고 있는 것은, 표시 신호 처리부(20) 내의 동기 신호 생성부(31)가 발생시키고 있는 수직 동기 신호 VD이고, 이 신호가, CPU(15)나 신호 처리부(13)에 입력되어, 필요한 신호의 처리나 CPU(15)의 처리의 기준이 되고있다.

종래에는, 이 기준의 타이밍(수직 동기 신호 VD)은, 비디오 출력 인터페이스로부터 출력되는 비디오 신호의 포맷(예를 들면, NTSC이나 PAL 등)의 프레임 레이트를 기준으로 하여 발생되고 있었다.

대부분의 경우, 액정 파인더에 이용되고 있는 표시부(21)의 액정 패널의 주사선의 수는, NTSC에 맞추어서 240개이다. 이러한 액정 패널을 이용하여 PAL로 동작하는 디지털 스틸 카메라에 있어서는, 액정 패널에 화상을 표시하는 경우에, 주사선의 추출을 행하고 있다.

NTSC에 맞는 주사선을 갖는 액정 패널에 PAL의 화상을 표시시키는 경우, 주사선의 추출을 행하기 때문에, 화상이 열화하게 된다. 또한, 이러한 경우, 표시 내용에 OSD(On Screen Display)에 의한 문자 정보가 포함되어 있을 때, 주사선이 추출에 따라서 문자가 누락된다고 된다고 하는 문제가 생긴다.

최근, 촬상 소자인 CCD의 성능 향상에 수반하여, 동화상의 표시에 있어서의 프레임 레이트의 향상이나, 화질의 향상이 요구되고 있다. 상술한 바와 같이, 종래의 디지털 카메라(1)에 있어서, 처리의 기준이 되고 있는 것은, 비디오 출력의 포맷에 맞추어서 발생되는 수직 동기 신호 VD 이다. 따라서, CCD 카메라부(11), 신호 처리부(13), 및 CPU(15)은, 비디오 출력의 포맷에 맞추어서, PAL 방식이나 NTSC 방식을 기준으로 한 타이밍으로 동작하고 있다.

그러나, 처리의 기준이 NTSC나 PAL인 경우, 상품의 형태로서, 2개의 포맷이 가능하게 되는 것은 바람직하지 않고, 동화상을 촬영할 때에 프레임 레이트가 서로 다른 화상 데이터를 처리할 필요가 생기게 되는 것은 피하고자 한다. 그 때문에, 종래의 디지털 카메라에 있어서는, 보다 낮은 프레임 레이트인 PAL의 경우의 25 프레임/초의 프레임 레이트에 맞추어서 화상 처리를 행하도록 설정되게 되고, NTSC 동작에서도 25 프레임/초의 프레임 레이트로 처리하게 된다. 즉, 고 프레임 레이트를 실현할 수 없게 된다.

또한, 화상 압축 처리부(17)의 처리에 의해, 동화상의 압축 파일을 소프트웨어로 작성하는 경우, NTSC 방식에 정합한 29.97 ㎐의 주파수는, 화상과 음성의 동기를 취하기 어려운 주파수이었다. 이 때문에, 화상 압축 처리부(17)에 있어서, 실제로 소프트웨어로 인코드를 행함에 있어서는, NTSC 방식에 의하지 않은 프레임 레이트(예를 들면, 15 프레임/초, 16.6 프레임/초, 혹은, 30 프레임/초) 등이 선택되어 있었다.

그러나, 화상 압축 처리부(17)에 있어서, 소프트웨어의 처리에 의해서 인코 드를 행하는 경우, 움직임 벡터 등을 이용한 고압축을 행할 수 없기 때문, 비트 레이트를 크게 낮출 수 없고, 고화질을 얻는 것도 할 수 없다. 또한, 소프트웨어의 처리에 의해서 인코드를 행하는 경우, 촬영 모드와 재생 모드에서, 기준이 되는 타이밍이 동일하지 않으면 안 된다.

그에 대하여, 동화상을 고화질로 촬상하여 기록하기 위해서는, 전용의 코딕 IC(Integrated Circuit)를 이용하여 인코드를 행하도록 하면 적합하다. 최근에는, 동화상을 고화질로 촬상하여 기록하기에 적합한 전용의 코딕 IC가 수많이 개발되고, 상품화되어 있다.

그러나, 이미 상품화되어 있는 코딕 IC는, 종래의 비디오 출력에 맞추어서, PAL 방식이나 NTSC 방식으로 동작하도록 설정되어 있다. 또한, 코딕 IC를 이용하는 것은, 비용 상승이 되기 때문에, 소프트웨어로 프레임 레이트가 높은 인코드를 행하는 방식과, 전용의 코딕 IC로 고화질의 인코드를 행하는 방식의 쌍방이 가능한 시스템이 요구되고 있다. 쌍방의 인코드 방식이 가능한 시스템이면, 비용과 품질의 요구에 기초하여, 코딕 IC를 이용하지 않은 구성, 및, 코딕 IC를 이용하는 구성의 비디오 카메라 중 어디에 있어서도 대응하는 것이 가능한, 즉, 코딕 IC를 접속하는 것이 가능한 비디오 카메라를 구성할 수 있다.

본 발명은 이러한 상황을 감안하여 이루어진 것으로, 고 프레임 레이트의 소프트웨어에서의 동화상 인코드, 및, 외부 코딕 IC에 의한 고화질 동화상 인코드의 쌍방을 가능하게 하여, 재생 처리의 기준의 타이밍을, 비디오 출력되는 동화상의 포맷에 상관없이 일정한 타이밍에서 행하고, 또한, 표시되는 화질의 열화를 없앨 수 있도록 하는 것이다.

본 발명의 화상 처리 장치는, 처리 타이밍의 기준이 되는 제1 기준 신호, 및 제2 기준 신호를 생성하는 기준 신호 생성 수단과, 화상 데이터를 취득하는 제1 취득 수단과, 제1 취득 수단에 의해 취득된 화상 데이터를, 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 수단과, 생성 수단에 의해 생성된 제1 프레임 레이트를 갖는 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 수단과, 변환 수단에 의해, 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 수단과, 변환 수단에 의해, 제3 프레임 레이트로 변환된 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 수단을 포함하는 것을 특징으로 한다.

변환 수단에 의해, 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 화상 데이터를 표시하는 표시 수단을 더 구비하도록 할 수 있다.

제2 프레임 레이트는, 제1 출력 수단에 의해 화상 데이터가 출력되는 제1 다른 화상 처리 장치가 처리하는 화상 포맷의 프레임 레이트인 것으로 할 수 있다.

제3 프레임 레이트는, 제2 출력 수단에 의해 화상 데이터가 출력되는 제2 다른 화상 처리 장치가 처리하는 화상 포맷의 프레임 레이트인 것으로 할 수 있다.

제2 프레임 레이트는, 제1 출력 수단에 의해 화상 데이터가 출력되는 제1 다른 화상 처리 장치가 처리하는 제1 화상 포맷의 프레임 레이트인 것으로 할 수가 있고, 제3 프레임 레이트는, 제2 출력 수단에 의해 화상 데이터가 출력되는 제2 다른 화상 처리 장치가 처리하는 제2 화상 포맷의 프레임 레이트인 것으로 할 수가 있고, 제1 프레임 레이트는, 제1 화상 포맷, 및 제2 화상 포맷에 관련되지 않은 프레임 레이트인 것으로 할 수 있다.

제2 프레임 레이트와 제3 프레임 레이트는 동일한 프레임 레이트인 것으로 할 수 있다.

제1 다른 정보 처리 장치로부터, 제2 프레임 레이트의 화상 데이터의 입력을 받는 입력 수단을 더 구비하도록 할 수가 있고, 변환 수단에는, 입력 수단에 의해 입력된 제2 프레임 레이트의 화상 데이터를, 제3 프레임 레이트로 더욱 변환시키도록 할 수 있다.

제1 출력 수단에 의해 제2 프레임 레이트의 화상 데이터의 입력을 받는 제1 다른 화상 처리 장치는, 제1 출력 수단에 의해 출력된 화상 데이터를, 소정의 화상 포맷으로 인코드하는 것으로 할 수 있다.

제2 출력 수단에 의해 제3 프레임 레이트의 화상 데이터의 입력을 받는 제2 다른 화상 처리 장치는, 제2 출력 수단에 의해 출력된 화상 데이터를, 소정의 화상 포맷으로 표시하는 것으로 할 수 있다.

취득 수단에 의해 취득된 화상 데이터를, 제1 기준 신호에 의해서 정해지는 타이밍에서, 소프트웨어에 의한 처리에 의해 인코드하는 인코드 수단을 더 구비하도록 할 수 있다.

본 발명의 화상 처리 방법은, 처리 타이밍의 기준이 되는 제1 기준 신호, 및 제2 기준 신호를 생성하는 기준 신호 생성 단계와, 화상 데이터의 취득을 제어하는 취득 제어 단계와, 취득 제어 단계의 처리에 의해 취득이 제어된 화상 데이터를, 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 단계와, 생성 단계의 처리에 의해 생성된 제1 프레임 레이트를 갖는 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 단계와, 변환 단계의 처리에 의해, 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 단계와, 변환 단계의 처리에 의해, 제3 프레임 레이트로 변환된 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 단계를 포함하는 것을 특징으로 한다.

본 발명의 기록 매체에 기록되어 있는 프로그램은, 처리 타이밍의 기준이 되는 제1 기준 신호, 및 제2 기준 신호를 생성하는 기준 신호 생성 단계와, 화상 데이터의 취득을 제어하는 취득 제어 단계와, 취득 제어 단계의 처리에 의해 취득이 제어된 화상 데이터를, 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 단계와, 생성 단계의 처리에 의해 생성된 제1 프레임 레이트를 갖는 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 단계와, 변환 단계의 처리에 의해, 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 단계와, 변환 단계의 처리에 의해, 제3 프레임 레이트로 변환된 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 단계를 포함하는 것을 특징으로 한다.

본 발명의 프로그램은, 처리 타이밍의 기준이 되는 제1 기준 신호, 및 제2 기준 신호를 생성하는 기준 신호 생성 단계와, 화상 데이터의 취득을 제어하는 취득 제어 단계와, 취득 제어 단계의 처리에 의해 취득이 제어된 화상 데이터를, 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 단계와, 생성 단계의 처리에 의해 생성된 제1 프레임 레이트를 갖는 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 단계와, 변환 단계의 처리에 의해, 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 단계와, 변환 단계의 처리에 의해, 제3 프레임 레이트로 변환된 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 단계를 포함하는 것을 특징으로 한다.

본 발명의 화상 처리 장치 및 화상 처리 방법, 및 프로그램에 있어서는, 처리 타이밍의 기준이 되는 제1 기준 신호, 및 제2 기준 신호가 생성되고, 화상 데이터가 취득되고, 취득된 화상 데이터가, 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리되어, 제1 프레임 레이트를 갖는 화상 데이터가 생성되고, 제1 프레임 레이트를 갖는 화상 데이터가, 상이한 프레임 레이트로 변환되고, 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 화상 데이터가 제1 다른 화상 처리 장치로 출력되고, 제3 프레임 레이트로 변환된 화상 데이터가, 제2 다른 화상 처리 장치로 출력된다.

<발명의 실시 형태>

이하, 도면을 참조하여, 본 발명의 실시 형태에 대하여 설명한다.

도 2는, 본 발명을 적용한, 디지털 카메라(51)의 구성을 도시하는 블록도이다.

또, 종래의 경우와 대응하는 부분에는 동일한 부호를 붙이고, 그 설명은 적절하게 생략한다.

즉, 도 2의 디지털 카메라(51)는, 메모리 컨트롤러(14)에 대신하여, 메모리 컨트롤러(61)가 구비되고, CPU(15)에 대신하여, CPU(62)가 구비되고, 동기 신호 생성부(31)를 갖는 표시 신호 처리부(20)에 대신하여, 동기 신호 생성부(71)를 갖는 표시 신호 처리부(63)가 구비되고, 새롭게, 코딕 IC 인터페이스(64)가 구비되어 있는 이외에는, 도 1의 디지털 카메라(1)와 기본적으로 마찬가지의 구성을 갖는 것이다.

또한, 도 2에 있어서도, 도 1에 있어서의 경우와 같이, 도 2의 실선은 화상 신호의 수수를 도시하는 것이고, 점선은 제어 신호의 수수를 도시하는 것이고, 일점 파선은 부호 신호의 수수를 도시하는 것이고, 이점 파선은 동기 신호의 수수를 도시하는 것이다.

동기 신호 생성부(71)는, CCD 카메라부(11), 신호 처리부(13), 및 CPU(62)에 공급하는 제1 기준 신호인 수직 동기 신호 VD1 이외에, CPU(62) 및 코딕 IC 인터페이스(64)에 공급하는 제2 기준 신호인 수직 동기 신호 VD2 및 수평 동기 신호 HD1을 발생시킨다.

제1 기준 신호인 수직 동기 신호 VD1은, 종래에서의 기준 신호인 수직 동기 신호 VD에 대응하는 것이지만, 종래에서의 경우와 달리, 출력의 비디오 신호의 NTSC, 혹은 PAL을 기준으로 한 주파수가 발생되는 것은 아니고, 예를 들면, 60 ㎐나 120 ㎐ 등의 소정의 주파수가 발생된다. 그리고, 제2 기준 신호인 수직 동기 신호 VD2 및 수평 동기 신호 HD1은, CPU(62), 및, 코딕 IC 인터페이스(64)에 공급되어, 예를 들면, PAL이나 NTSC 등의 화상 포맷을 기준으로 한 주파수가 발생된다. 이하, 수직 동기 신호 VD1은, 필드 주파수 60 ㎐(프레임 주파수 30 ㎐)인 것으로 하고 설명한다.

메모리 컨트롤러(61)는, CPU(62)의 제어에 의해, 입력된 화상 데이터를, 버스(16)를 통하여, 메모리(19)에 기입하여 기록시키거나, 필요에 따라서, 메모리(19)에 기록되어 있는 화상 데이터를, 버스(16)를 통하여, 화상 압축 처리부(17)나 해상도 변환 처리부(18)에 공급한다. 또한, 메모리 컨트롤러(61)는, CPU(62)의 제어에 따라서, 메모리(19)에 기록되어 있는 화상 데이터(필요에 따라서, 화상 압축 처리부(17), 혹은, 해상도 변환 처리부(18)로 처리되어 있는 화상 데이터)를, 버스(16)를 통하여 표시 신호 처리부(63)에 공급하거나, 버스(16)를 통하여 판독하여, 드라이브(23)로 출력한다. 이들의 처리에 있어서, 메모리 컨트롤러(61)는, CPU(62)으로부터 공급된 어드레스 설정 신호에 기초하여, 메모리(19)의 소정의 어드레스에 화상 데이터를 기록시키거나, 메모리(19)의 소정의 어드레스에서 화상 데이터를 판독한다.

또한, 메모리 컨트롤러(61)는, 코딕 IC 인터페이스(64) 및 표시 신호 처리부(63)를 통하여 입력된, 코딕 IC에 의해 처리된 화상 데이터를, 드라이브(23)로 출력하여, 장착되어 있는 기록 매체에 기록시킨다.

CPU(62)는, 디지털 카메라(51)의 동작을 제어하는 것으로서, 동기 신호 생성부(71)로부터, 기준이 되는 타이밍 신호(제1 기준 신호인 수직 동기 신호 VD1, 및, 제2 기준 신호인 수직 동기 신호 VD2 및 수평 동기 신호 HD1)의 입력을 받아, 신호 처리부(13), 메모리 컨트롤러(61), 및, 표시 신호 처리부(63)의 동작을 제어하기 위한 제어 신호를 생성하여 출력하거나, 메모리(19)의 어드레스 설정 신호를 생성하여, 메모리 컨트롤러(61)로 출력한다.

표시 신호 처리부(63)는, 메모리 컨트롤러(61)의 처리에 의해, 메모리(19)에 기록된 화상 데이터의 입력을 받아, 내부에 갖는 동기 신호 생성부(71)가 생성하는 기준 신호에 기초하여, 표시부(21)로 출력하고 표시하는 데 적합한 신호, 비디오 출력 인터페이스(22)를 통하여 외부의 기기로 출력하는 데 적합한 신호, 혹은, 코딕 IC 인터페이스(64)를 통하여, 디지털 카메라(51)의 외부에 접속되어 있는 코딕 IC로 출력하는 데 적합한 신호로 변환하는 처리를 실행한다. 또한, 표시 신호 처리부(63)는, 코딕 IC 인터페이스(64)를 통하여, 코딕 IC에 의해 처리된 화상 데이터의 입력을 받아, 메모리 컨트롤러(61)의 제어에 의해, 메모리(19)로 출력한다.

동기 신호 생성부(71)가 생성하는 기준 신호는, 제1 기준 신호인 수직 동기 신호 VD1과, 제2 기준 신호인 수직 동기 신호 VD2 및 수평 동기 신호 HD1의 2 계열이다. 상술한 바와 같이, CCD 카메라부(11), 신호 처리부(13), 및 CPU(62)에는, 제1 기준 신호인 수직 동기 신호 VD1이 공급되고, CPU(62) 및 코딕 IC 인터페이스(64)에는, 제2 기준 신호인 수직 동기 신호 VD2 및 수평 동기 신호 HD1이 공급된다.

코딕 IC 인터페이스(64)는, 디지털 카메라(51)의 외부에 접속되는 도시 생략된 코딕 IC와의 인터페이스이고, 표시 신호 처리부(63)로부터 공급된 화상 데이터를 코딕 IC로 출력함과 함께, 코딕 IC에서, 처리된 화상 데이터의 입력을 받아, 표시 신호 처리부(63)에 공급한다.

또한, 드라이브(23)에 장착되어 있는 자기 디스크(41), 광 디스크(42), 광 자기 디스크(43), 혹은, 반도체 메모리(44) 등에는, 메모리 컨트롤러(61)의 처리에 의해, 필요한 처리가 실시된 화상 신호가 기록된다. 또한, 드라이브(23)에 장착되어 있는 자기 디스크(41), 광 디스크(42), 광 자기 디스크(43), 혹은, 반도체 메모리(44)등 기록되어 있던 프로그램은, 필요에 따라서, CPU(62)에 의해 판독되고 실행되거나, 메모리 컨트롤러(61)의 처리에 의해 메모리(19)에 기록되어, CPU(62)에 의해 판독되고 실행된다.

이러한 디지털 카메라(51)에 있어서, 프레임 레이트를 향상시키기 위해서는, 디지털 비디오 카메라(51) 내의 화상 처리를, 비디오 출력의 PAL이나 NTSC에 상관없이, 일정한 주기로 행하고, 표시부(21)에 있어서의 표시 화상의 포맷과, 코딕 IC가 대응하는 화상의 포맷을 동일한 것으로 하고, 비디오 출력 만을 PAL, 혹은 NTSC로, 임의로 행할 수 있도록 하면 된다. 디지털 비디오 카메라(51) 내의 화상 처리를, 비디오 출력의 PAL이나 NTSC에 상관없이, 일정한 주기로 행하도록 하면, 예를 들면, CCD 등의 소자의 성능이 향상됨으로써, 출력되는 화상 데이터의 프레임 레이트에 관계없이, 화상 처리의 프레임 레이트를 더욱 높게 하는 것이 가능해진다. 즉, 소프트웨어 코딩 등의 처리를, 더욱 고 프레임 레이트로 행하도록 할 수 있다.

이 경우, 표시 신호 처리부(63)는, 표시부(21)를 구성하는 액정 패널에 합치한 주사선 수의 화상 신호를 출력할 수 있으므로, 예를 들면, 화상 열화나 OSD의 문자 누락 등의 문제를 해결할 수 있다. 또한, 디지털 카메라(51)는, 이러한 구성을 취함으로써, 비디오 출력의 포맷에 따르지 않고 고화질의 동화상의 기록/재생이 가능해진다. 그리고, 코딕 IC 인터페이스(64)에 접속되어 있는 코딕 IC가 대응하고 있는 화상 포맷이, NTSC 방식인가, PAL 방식인가에 상관없이, 비디오 출력 인터페이스(22)에 접속되는 기기에 의해서, 비디오 출력의 프레임 레이트를, NTSC 방식 및 PAL 방식 중의 어느 것으로라도 임의로 선택하는 것이 가능해진다.

다음에, 디지털 비디오 카메라(51)의 동작에 대하여 설명한다.

촬영 시에 있어서, CCD 카메라부(11) 및 신호 처리부(13)는, 동기 신호 생성부(71)에 의해 발생된 제1 기준 신호인 수직 동기 신호 VD1의 입력을 받는, 필드 주파수 60 ㎐를 최소 단위로 하는 타이밍으로 동작을 행한다.

CCD 카메라부(11)로 촬상된 화상 신호는, A/D 변환부(12)에서 디지털 신호로 변환되어, 신호 처리부(13)에 입력된다. 신호 처리부(13)는, 입력된 신호에 대하여, 예를 들면, 감마 처리나, RGB 신호를 Y/Cb/Cr 신호로 변환하는 처리 등을 행하고, 처리 후의 화상 데이터를, 메모리 컨트롤러(61)에 공급한다.

메모리 컨트롤러(61)는, CPU(62)의 제어에 의해, 입력된 화상 데이터를, 버스(16)를 통하여, 메모리(19)에 기입하여 기록시킨다. 또한, 메모리 컨트롤러(61)는, 메모리(19)에 기록되어 있는 화상 데이터를, 필요에 따라서, 버스(16)를 통하여, 화상 압축 처리부(17)나 해상도 변환 처리부(18)에 공급하여 처리시키고, 다시 메모리(19)에 기록시킨다. 그리고, 메모리 컨트롤러(61)는, CPU(62)의 제어에 따라서, 메모리(19)에 기록되어 있는 화상 데이터를, 버스(16)를 통하여, 표시 신호 처리부(63)에 공급한다.

여기서, 메모리 컨트롤러(61)에 공급되어, 메모리(19)에 기록되거나, 화상 압축 처리부(17)나 해상도 변환 처리부(18)에 있어서 처리되는 화상 데이터는, 제1 기준 신호인 수직 동기 신호 VD1을 기준으로 한, 30 ㎐의 프레임 레이트를 갖는 화상 데이터이다.

표시 신호 처리부(63)는, 입력된 화상 데이터를 표시시키는 경우, 표시부(21)를 구성하는 액정 패널에 합치한 주사선 수의 화상 신호를 표시부(21)로 출력한다. 즉, 표시 신호 처리부(63)는, 입력된 30 ㎐의 프레임 레이트를 갖는 화상 데이터를, 표시되는 화상 데이터의 포맷으로 변환하여 출력한다.

또한, 표시 신호 처리부(63)는, 입력된 화상 데이터를 비디오 출력 인터페이스(22)로부터 출력시키는 경우, 입력된 30 ㎐의 프레임 레이트를 갖는 화상 데이터를, 비디오 출력 인터페이스(22)에 접속되어 있는 기기가 처리 가능한 화상 포맷에 합치한 프레임 레이트로 변환하여, 비디오 출력 인터페이스(22)로부터 외부로 출력한다.

그리고, 표시 신호 처리부(63)는, 입력된 화상 데이터를, 코딕 IC 인터페이스(64)로부터, 도시 생략된 코딕 IC로 출력하는 경우, 입력된 30 ㎐의 프레임 레이트를 갖는 화상 데이터를, 코딕 IC가 처리 가능한 화상 포맷의 프레임 레이트로 변환하여, 코딕 IC 인터페이스(64)로 출력한다.

또한, 코딕 IC의 처리에 의한 재생 처리에 있어서, 표시 신호 처리부(63)는, 코딕 IC 인터페이스(64)로부터, 코딕 IC가 처리 가능한 화상 포맷의 재생 화상 데이터의 입력을 받아, 버스(16)를 통하여, 메모리(19)로 출력한다. 그리고, 표시 신호 처리부(63)는, 메모리 컨트롤러(61)에 의한 어드레스 제어에 따라서, 메모리(19)에 기록시킨 재생 화상 신호를 판독하여, 동일한 화상 포맷으로 화상을 표시하도록 이루어져 있는 표시부(21)로 출력하거나, 비디오 출력 인터페이스(22)에 접속되어 있는 기기가 처리 가능한 화상 포맷에 합치한 프레임 레이트로 변환하여, 비디오 출력 인터페이스(22)로부터 외부로 출력한다.

도 3 및 도 4를 이용하여, 화상 기록 시에 있어서의 프레임 레이트의 변환 처리에 대하여 설명한다.

도 3에 도시된 바와 같이, 신호 처리부(13)에 있어서 신호 처리가 행하여지고 생성된, 프레임 주파수 30 ㎐ 인 30 ㎐ 프레임(81)과, NTSC에 의한 29.97 ㎐ 프레임(82)의 프레임 레이트는, 1001:1000의 비례 관계가 있다. 따라서, 표시 신호 처리부(63)는, 메모리 컨트롤러(61)로부터 공급된 30 ㎐ 프레임(81)의 화상의 1001매에 1매를 추출함으로써, 프레임 주파수 30 ㎐ 인 30 ㎐ 프레임(81)을 NTSC의 프레임 레이트를 갖는 29.97 ㎐ 프레임(82)으로 변환하는 처리를 실행한다.

예를 들면, 표시부(21)의 표시 포맷, 및, 코딕 IC가 처리할 수 있는 화상 데이터의 포맷이 NTSC 방식인 경우, 표시 신호 처리부(63)에 있어서, 입력된 30 ㎐ 프레임(81)이, NTSC 방식의 29.97 ㎐ 프레임(82)으로 변환된 후, 코딕 IC 인터페이스(64)로 출력되거나, 표시부(21)로 출력되고 표시된다. 이 경우, 도 3에 도시된 바와 같이, 30 ㎐ 프레임(81)의 1001 프레임 째와, NTSC에 의한 29.97 ㎐ 프레임(82)의 1000 프레임 째는, 동일한 시간이기 때문에, 30 ㎐ 프레임(81)의 1000 프레임 째는, NTSC 에의 변환 시에 추출되고 표시되지 않는다.

그리고, 마찬가지로, 도 4에 도시된 바와 같이, 프레임 주파수 30 ㎐ 인 30 ㎐ 프레임(81)에 대하여, PAL은 25 ㎐ 이기 때문에, 표시 신호 처리부(63)는, 메모리 컨트롤러(61)에 의해 공급된 30 ㎐ 프레임(81)의 화상의 6매에 1매를 추출함으로써, PAL의 프레임 레이트를 갖는 25 ㎐ 프레임(91)으로 변환할 수 있다.

예를 들면, 표시부(21)의 표시 포맷, 및, 코딕 IC가 처리할 수 있는 화상 데이터의 포맷이 PAL 방식인 경우, 표시 신호 처리부(63)에 있어서, 입력된 30 ㎐ 프레임(81)이, PAL 방식의 25 ㎐ 프레임(91)으로 변환된 후, 코딕 IC 인터페이스(64)로 출력되거나, 표시부(21)로 출력되고 표시된다. 이 경우, 도 4에 도시된 바와 같이, 30 ㎐ 프레임(81)의 6 프레임 째와, PAL에 의한 25 ㎐ 프레임(91)의 5 프레임 째는, 동일한 시간이기 때문에, 30 ㎐ 프레임(81)의 6프레임 째는, PAL에의 변환 시에 추출되고 표시되지 않는다.

이러한 변환 처리에 있어서, 추출에 의한 화상의 추월이 발생하지 않도록 하기 위해서는, 표시 신호 처리부(63)에, 프레임 화상을 일시 기억하는 영역을, 적어도 3 프레임분(도 3 및 도 4에 도시되는 프레임 A, 프레임 B, 및 프레임 C의 분) 구비하도록 하면 된다.

또한, 기록된 화상 데이터가 비디오 출력 인터페이스(22)로부터 비디오 출력되는 경우에 있어서도, 도 3 및 도 4를 이용하여 설명한 처리와 마찬가지의 처리에 의해, 입력된 30 ㎐ 프레임(81)을, NTSC 방식의 29.97 ㎐ 프레임(82), 혹은, PAL 방식의 25 ㎐ 프레임(91)으로 변환할 수 있기 때문에, 표시 신호 처리부(63)는, 입력된 30 ㎐ 프레임(81)을, 비디오 출력 인터페이스(22)에 접속되어 있는 기기가 처리 가능한 화상 포맷에 합치한 프레임 레이트로 변환하여, 비디오 출력 인터페이스(22)로부터 외부로 출력할 수 있다.

이러한 변환을 행함으로써, 비디오 출력과 코딕 IC의 처리 포맷이 서로 다른 경우에 있어서도, 각각 적합한 프레임 레이트의 신호를 공급하고, 또한, 표시에 이용되는 액정 패널 등의 주사선 수에 적합한 프레임 레이트로 표시 처리를 행하도록 할 수 있다.

다음에, 코딕 IC의 재생 시의 변환 처리에 대하여 설명한다. 도 5에서는, 코딕 IC의 재생 모드가 NTSC이고, 비디오 출력이 NTSC와 PAL의 각각인 경우에 있어서의 프레임 레이트의 변환에 대하여 도시되어 있다. 이 경우의 디지털 카메라(51)의 동작에 대하여 설명한다.

CPU(62)는, 제1 기준 신호인 수직 동기 신호 VD1에 기초하여, 즉, 30 ㎐ 주기로, 코딕 IC로부터의 입력 화상을, 메모리(19)의 어느 면에 배치하는 가를 나타내는 어드레스의 설정을, 프레임 A, 프레임 B, 프레임 C, 프레임 D, 프레임 E의 순으로 행하게 하도록, 메모리 컨트롤러(61)를 제어한다. 그리고, 그 설정된 어드레스는, 표시 신호 처리부(63)의 처리에 의해, NTSC의 타이밍에서 래치되어, 실제의 어드레스가 확정된다. 즉, 30 ㎐ 주기로 설정되어 있는 어드레스에 대하여, 1001회에 1회, 반영되지 않은 어드레스가 발생하기 때문에, 그 면이 스킵되어, 다음의 면에 화상이 기입된다.

도 5에 도시된 바와 같이, CPU(62)는, CPU 설정 프레임(101)의 1000프레임 째에, C 면을 설정하지만, 실제의 기입면(102)에 있어서는, C 면은 스킵되고, B 면의 다음에는 D 면에 화상이 기입된다. 이 때의 기입면(102)을, 실제의 비디오 출력의 프레임 레이트로 래치하여 고침으로써, 비디오 출력 NTSC 표시면(103), 혹은, 비디오 출력 PAL 표시면(104)에 도시된 바와 같이, 비디오 출력되는 면(프레임)이 결정된다.

또, 비디오 출력 인터페이스(22)로부터의 비디오 출력이 PAL 방식인 경우, 코딕 IC의 재생 모드가 NTSC(프레임 레이트는 29.97 ㎐)이므로, 출력되는 화상 데이터의 프레임 레이트는, 도 3을 이용하여 설명한 경우와 역의 방법, 즉, 추출되고 있는 1001 프레임 중의 1 프레임을 가하는 것에 의해, 일단 30 ㎐로 변환된 뒤, 도 4를 이용하여 설명한 바와 같이, 6 프레임 중의 1 프레임이 추출되고, PAL의 프레임 레이트의 25 ㎐로 변환된다.

코딕 IC의 재생 모드도, 비디오 출력 인터페이스(22)로부터의 비디오 출력도 NTSC인 경우, 추월을 발생시키지 않기 위해서는, 표시 신호 처리부(63)에, 이 처리를 위해 화상을 일시 기억하는 영역을 4 프레임분 구비하도록 하면 된다. 이것에 대하여, 코딕 IC의 재생 모드가 NTSC 방식이고, 비디오 출력 인터페이스(22)로부터의 비디오 출력이 PAL 방식인 경우, 추월을 발생시키지 않기 위해서는, 표시 신호 처리부(63)에, 이 처리를 위해 화상을 일시 기억하는 영역을 5 프레임분 구비하지 않으면 안 된다. 따라서, 비디오 출력 인터페이스(22)로부터의 비디오 출력을, NTSC과 PAL과의 양방에 대응시키고자 하는 경우에는, 표시 신호 처리부(63)에, 화상을 일시 기억하는 영역을 5 프레임분 구비하지 않으면 안 된다.

추출 처리를 실행하기 위한 어드레스 설정을 행하는 회로 구성 예를 도 6에 도시한다. 도 6의 어드레스 설정 회로(111)는, 인에이블부의 D 플립플롭인 플립플롭(121-1 내지 121-6), 및, 셀렉터(121-1 및 121-2)로 구성되고, 특히, 촬영시 및 코딕 IC 재생 시의 쌍방에 대응하기 위해서, VIDEO AD 신호를 발생시키는 회로에, 코딕 IC 측의 어드레스와의 셀렉터인, 셀렉터(122-1)가 구비되고 있는 것을 특징으로 한다. 도 6에 있어서는, 플립플롭(121-1 내지 121-6), 및, 셀렉터(122-1 및 122-2)의 클럭 입력 단자의 도시를 생략하고 있다.

도 7에, 플립플롭(121-1 내지 121-6)의 진리치표를 도시한다. 플립플롭(121-1 내지 121-6)은, 클럭 엣지(예를 들면, 입력 클럭의 상승의 타이밍)에 있어서, 입력된 데이터를 출력하는 인에이블부의 D 플립플롭이다.

도 8에, 셀렉터(122-1 및 122-2)의 진리치표를 도시한다. 셀렉터(122-1 및 122-2)는, S 단자(셀렉터 입력 단자) 입력이 L(즉 0)인 경우에는, 0 입력 단자에 입력된 논리를 출력하고, S 단자 입력이 H(즉 1)인 경우에는, 1 입력 단자에 입력된 논리를 출력하는 것이다.

도 6으로 되돌아가, 어드레스 설정 회로(111)의 동작에 대하여 설명한다. 촬영시에 있어서, CPU(62)는, VIDEO AD와 코딕 IC AD로서 A, B, C의 메모리 어드레스를 30 ㎐ 주기로 설정한다. 촬영시의 모드와 각 컨트롤 신호를 도 9에 도시한다. EN1에는, 30 ㎐에 1회의 EN(인에이블) 신호가 입력된다. EN2에는 비디오 출 력이 NTSC 이면 29.97 ㎐ 주기의, 비디오 출력이 PAL 이면 25 ㎐ 주기의 EN 신호가 입력된다. 그리고, EN3에는, 코딕 IC의 처리(코딕 모드)가 NTSC 이면 29.97 ㎐ 주기, PAL 이면 25 ㎐ 주기의 EN 신호가 입력된다.

도 6의 회로에서, 플립플롭(121-1)에는, VIDEO AD가 입력되고, EN 신호로서, EN1이 주어진다. 플립플롭(121-1)의 출력은, S 단자에 CONT1이 공급되는 셀렉터(122-1)의 0 입력 단자에 공급된다. 여기서, 촬영시에는, CONT1에 0이 입력된다. 따라서, 셀렉터(122-1)로부터의 출력은, 플립플롭(121-1)으로부터의 출력이 되기 때문에, 촬영시에 있어서는, CONT2의 입력은 관계가 없다. 셀렉터(122-1)의 출력은, 플립플롭(121-2)에 입력되어, 플립플롭(121-2)의 EN 신호로서, EN2가 주어진다. 그리고, 플립플롭(121-2)의 출력이, 메모리 컨트롤러(61)가 비디오 출력의 어드레스를 설정하기 위한 VIDEO AD OUT으로서 출력된다.

또한, 플립플롭(121-3)에는, 코딕 IC AD가 입력되고, EN 신호로서 EN1이 주어진다. 플립플롭(121-3)의 출력은, EN 신호로서 EN3이 주어지고 있는 플립플롭(121-4)에 입력된다. 그리고, 플립플롭(121-4)의 출력이, 코딕 IC의 어드레스를 설정하기 위한 코딕 IC AD OUT로서 출력된다.

마찬가지로, 코딕 IC를 이용한 재생 처리 시에 있어서, CPU(62)는, 코딕 IC AD로서, A, B, C, D, E의 어드레스를 30 ㎐ 주기로 기입한다. 코딕 IC를 이용한 재생 처리 시의 모드와 각 컨트롤 신호를 도 10에 도시한다. EN1에는 30 ㎐에 1회의 EN 신호, EN2에는 비디오 출력이 NTSC 이면 29.97 ㎐ 주기의, 비디오 출력이 PAL 이면 25 ㎐ 주기의 EN 신호가, EN3에는, 코딕 모드가 NTSC 이면 29.97 ㎐ 주 기, PAL 이면 25 ㎐ 주기의 EN 신호가 입력된다.

도 6의 회로에서, 플립플롭(121-3)에는, 코딕 IC AD가 입력되고, EN 신호로서 EN1이 주어진다. 플립플롭(121-3)의 출력은, EN 신호로서 EN3이 주어지고 있는 플립플롭(121-4)에 입력된다. 플립플롭(121-4)의 출력은, 코딕 IC의 어드레스를 설정하기 위한 코딕 IC AD OUT로서 출력되고, S 단자에 CONT2가 공급되는 셀렉터(122-2)의 0 입력 단자에 공급되고, 또한, EN 신호로서 EN1이 주어지고 있는 플립플롭(121-5)에 입력된다. 그리고, 플립플롭(121-5)의 출력은, EN 신호로서 EN1이 주어지고 있는 플립플롭(121-6)에 입력된다.

플립플롭(121-6)의 출력은, S 단자에 CONT2가 공급되는 셀렉터(122-2)의 1 입력 단자에 공급된다. 비디오 출력과 코딕 IC의 코딕 모드가 다른 경우, CONT2에는, 1이 입력되기 때문에, 셀렉터(122-2)의 출력은, 플립플롭(121-6)의 출력이 된다. 이 셀렉터(122-2)의 출력에 의해서 나타내어지는 어드레스는, 코딕 IC에서 기입이 종료한 최신의 어드레스를 30 ㎐에 바꿔 실은 것이다.

셀렉터(122-2)의 출력은, 셀렉터(122-1)의 1 입력 단자에 입력되어 있지만, 코딕 IC를 이용한 재생 처리 시에 있어서, CONT1에는 1이 입력되기 때문에, 셀렉터(122-2)의 출력이 셀렉터(122-1)로부터 출력된다. 셀렉터(122-1)의 출력은, 플립플롭(121-2)에 입력되어, 플립플롭(121-2)의 EN 신호로서, EN2가 주어진다. 그리고, 플립플롭(121-2)의 출력이, 메모리 컨트롤러(61)가 비디오 출력의 어드레스를 설정하기 위한 VIDEO AD로서 출력된다.

한편, 비디오 출력과 코딕 IC의 코딕 모드가 동일한 경우, CONT2에는, 0이 입력되기 때문에, 셀렉터(122-2)의 출력은, 플립플롭(121-4)의 출력이 되고, 셀렉터(122-2)의 출력이 셀렉터(122-1)로부터 출력된다. 셀렉터(122-1)의 출력은, 플립플롭(121-2)에 입력되어, 플립플롭(121-2)의 EN 신호로서, EN2가 주어진다. 그리고, 플립플롭(121-2)의 출력이, 메모리 컨트롤러(61)가 비디오 출력의 어드레스를 설정하기 위한 VIDEO AD로서 출력된다.

이상 설명한 프레임 레이트의 변환 처리에 대하여, 코딕 IC의 코딕 모드, 및 표시부(21)의 표시 포맷이 NTSC 인 경우의, 비디오 출력 별 프레임 레이트의 변환에 대하여, 도 11 내지 도 14를 이용하여 설명한다. 또, 도 11 내지 도 14에 있어서는, 메모리(19), 표시 신호 처리부(63), 표시부(21), 비디오 출력 인터페이스(22), 및 코딕 IC 인터페이스(64) 이외의 도시는 생략하고 설명한다.

비디오 출력이 NTSC 인 경우의 화상 데이터의 기록 처리에 있어서, 표시 신호 처리부(63)는, 도 11에 도시된 바와 같이, 버스(16)를 통하여, 메모리(19)에 기록되어 있는, 프레임 레이트 30 ㎐의 화상 데이터의 공급을 받고, 상술한 변환 방법에 의해, 프레임 레이트를 NTSC의 29.97 ㎐로 변환하여, 표시부(21), 비디오 출력 인터페이스(22), 및 코딕 IC 인터페이스(64)로 출력한다.

비디오 출력이 PAL인 경우의 화상 데이터의 기록 처리에 있어서, 표시 신호 처리부(63)는, 도 12에 도시된 바와 같이, 버스(16)를 통하여, 메모리(19)에 기록되어 있는, 프레임 레이트 30 ㎐의 화상 데이터의 공급을 받고, 상술한 변환 방법에 의해, 프레임 레이트를 NTSC의 29.97 ㎐로 변환하여, 표시부(21), 및 코딕 IC 인터페이스(64)로 출력하고, 또한, 프레임 레이트를 PAL의 25 ㎐로 변환하여, 비디 오 출력 인터페이스(22)로 출력한다.

비디오 출력이 NTSC 인 경우의 코딕 IC를 이용한 재생 처리에 있어서, 표시 신호 처리부(63)는, 도 13에 도시된 바와 같이, 코딕 IC 인터페이스(64)로부터, 프레임 레이트 29.97 ㎐의 NTSC 화상 데이터의 입력을 받는다. NTSC 화상 데이터는, 메모리 컨트롤러(61)의 처리에 의해, 버스(16)를 통하여, 메모리(19)에 기입된다. 그리고, 표시 신호 처리부(63)는, 메모리(19)에 기입된, 프레임 레이트 29.97 ㎐의 NTSC 화상 데이터의 공급을 받아, 표시부(21), 및, 비디오 출력 인터페이스(22)로, 변환하지 않고서, 그대로 출력한다.

비디오 출력이 PAL인 경우의 코딕 IC를 이용한 재생 처리에 있어서, 표시 신호 처리부(63)는, 도 14에 도시된 바와 같이, 코딕 IC 인터페이스(64)로부터, 프레임 레이트 29.97 ㎐의 NTSC 화상 데이터의 입력을 받는다. NTSC 화상 데이터는, 메모리 컨트롤러(61)의 처리에 의해, 버스(16)를 통하여, 메모리(19)에 기입된다. 그리고, 표시 신호 처리부(63)는, 메모리(19)에 기입된, 프레임 레이트 29.97 ㎐의 NTSC 화상 데이터의 공급을 받아, 표시부(21)에는, 변환하지 않고서 그대로 출력함과 함께, 프레임 레이트 29.97 ㎐의 NTSC 화상 데이터를, 일단, 프레임 레이트 30 ㎐의 화상 데이터로 변환한 후에, 프레임 레이트를 PAL의 25 ㎐로 변환하여, 비디오 출력 인터페이스(22)로 출력한다.

이와 같이, 촬영시 및 재생 시에 있어서, 출력 포맷의 프레임 레이트에 관련되지 않은 소정의 타이밍(예를 들면, 60 ㎐) 등을 기준으로 하여 처리를 행하고, 그 화상 데이터에 대한 NTSC나 PAL 에의 프레임 레이트 변환을, 출력의 포맷에 기 초하여, 임의로 행할 수 있도록 하였기 때문에, 비디오 출력 모드에 관계없이, 프레임 레이트가 높은 동화상을 촬영할 수가 있어, 더욱, 코딕 IC를 이용한 기록 재생이 가능해진다.

또한, 촬영시, 재생시 모두, 화상 데이터의 촬상이나, 소프트웨어 코딩 등의 처리는, 비디오 출력 모드에 상관없이, 예를 들면, 30 ㎐ 등의 소정의 타이밍 단위로 동작에 설계하는 것이 가능해지므로, 소프트웨어 설계가 용이하게 되어, 비용을 삭감할 수 있다.

더욱, 표시부(21)에 표시되는 화상의 화질에 있어서도, 예를 들면, 코딕 IC의 처리 포맷이 NTSC 인 경우, 표시부(21)를 구성하는 액정 패널 등의 주사선의 수도, NTSC 대응의 것으로서, 항상, NTSC로 변환한 신호를 표시하면 되기 때문, OSD의 누락 등의 화질 열화가 없는 화상을 출력할 수 있다.

상술한 일련의 처리는, 소프트웨어에 의해 실행할 수도 있다. 그 소프트웨어는, 그 소프트웨어를 구성하는 프로그램이, 전용의 하드웨어에 내장되어 있는 컴퓨터, 또는, 각종의 프로그램을 인스톨함으로써, 각종의 기능을 실행하는 것이 가능한, 예를 들면 범용의 퍼스널 컴퓨터 등에, 기록 매체로부터 인스톨된다.

이 기록 매체는, 도 1, 및 도 2에 도시한 바와 같이, 컴퓨터와는 별도로, 사용자에게 프로그램을 제공하기 위해서 배포되는, 프로그램이 기록되어 있는 자기 디스크(41)(플렉시블 디스크를 포함), 광 디스크(42)(CD-ROM(Compact Disk-Read Only Memory), DVD(Digital Versatile Disk)를 포함), 광 자기 디스크(43)(MD(Mini-Disk)(상표)를 포함), 혹은 반도체 메모리(44) 등으로 이루어 지는 패키지 미디어 등으로 구성된다.

또한, 본 명세서에 있어서, 기록 매체에 기록되는 프로그램을 기술하는 단계는, 기재된 순서에 따라서 시계열적으로 행해지는 처리는 물론, 반드시 시계열적으로 처리되지 않더라도, 병렬적 혹은 개별적으로 실행되는 처리도 포함하는 것이다.

본 발명에 따르면, 취득된 화상 데이터를 소정의 프레임 레이트로 출력할 수 있다.

또한, 본 발명에 따르면, 취득된 화상 데이터를 출력에 관련되지 않은 프레임 레이트로 처리한 후, 출력에 적합한 프레임 레이트로 변환하여 출력할 수 있으므로, 고 프레임 레이트의 소프트웨어에 의한 동화상 인코드, 및, 외부 코딕 IC에 의한 고화질 동화상 인코드의 쌍방을 행할 수 있다.

또한, 본 발명에 따르면, 화상 처리의 기준의 타이밍을, 비디오 출력되는 동화상의 포맷에 따르지 않고 일정한 타이밍에서 행할 수 있어, 더욱, 표시되는 화질의 열화를 없앨 수 있다.

Claims

화상 데이터를 출력할 수 있는 화상 처리 장치에 있어서,

처리 타이밍의 기준이 되는 제1 기준 신호 및 제2 기준 신호를 생성하는 기준 신호 생성 수단과,

화상 데이터를 취득하는 제1 취득 수단과,

상기 제1 취득 수단에 의해 취득된 상기 화상 데이터를, 상기 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 수단과,

상기 생성 수단에 의해 생성된 상기 제1 프레임 레이트를 갖는 상기 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 수단과,

상기 변환 수단에 의해, 상기 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 상기 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 수단과,

상기 변환 수단에 의해, 제3 프레임 레이트로 변환된 상기 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 수단

을 포함하는 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 변환 수단에 의해, 상기 제2 기준 신호에 의해서 정해지는 상기 제2 프 레임 레이트로 변환된 상기 화상 데이터를 표시하는 표시 수단을 더 포함하는 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제2 프레임 레이트는, 상기 제1 출력 수단에 의해 상기 화상 데이터가 출력되는 상기 제1 다른 화상 처리 장치가 처리하는 화상 포맷의 프레임 레이트인 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제3 프레임 레이트는, 상기 제2 출력 수단에 의해 상기 화상 데이터가 출력되는 상기 제2 다른 화상 처리 장치가 처리하는 화상 포맷의 프레임 레이트인 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제2 프레임 레이트는, 상기 제1 출력 수단에 의해 상기 화상 데이터가 출력되는 상기 제1 다른 화상 처리 장치가 처리하는 제1 화상 포맷의 프레임 레이트이고,

상기 제3 프레임 레이트는, 상기 제2 출력 수단에 의해 상기 화상 데이터가 출력되는 상기 제2 다른 화상 처리 장치가 처리하는 제2 화상 포맷의 프레임 레이트이고,

상기 제1 프레임 레이트는, 상기 제1 화상 포맷 및 상기 제2 화상 포맷에 관련되지 않은 프레임 레이트인 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제2 프레임 레이트와 상기 제3 프레임 레이트는 동일한 프레임 레이트인 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제1 다른 화상 처리 장치로부터, 상기 제2 프레임 레이트의 상기 화상 데이터의 입력을 받는 입력 수단을 더 포함하며,

상기 변환 수단은, 상기 입력 수단에 의해 입력된 상기 제2 프레임 레이트의 상기 화상 데이터를, 제3 프레임 레이트로 또한 변환하는 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제1 출력 수단에 의해 상기 제2 프레임 레이트의 상기 화상 데이터의 입력을 받는 상기 제1 다른 화상 처리 장치는, 상기 제1 출력 수단에 의해 출력된 상기 화상 데이터를, 소정의 화상 포맷으로 인코드하는 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제2 출력 수단에 의해 상기 제3 프레임 레이트의 상기 화상 데이터의 입력을 받는 상기 제2 다른 화상 처리 장치는, 상기 제2 출력 수단에 의해 출력된 상기 화상 데이터를, 소정의 화상 포맷으로 표시하는 것을 특징으로 하는 화상 처리 장치.
제1항에 있어서,

상기 제1 취득 수단에 의해 취득된 상기 화상 데이터를, 상기 제1 기준 신호에 의해서 정해지는 타이밍에서, 소프트웨어에 의한 처리에 의해 인코드하는 인코드 수단을 더 포함하는 것을 특징으로 하는 화상 처리 장치.
화상 데이터를 출력할 수 있는 화상 처리 장치의 화상 처리 방법에 있어서,

처리 타이밍의 기준이 되는 제1 기준 신호 및 제2 기준 신호를 생성하는 기준 신호 생성 단계와,

화상 데이터의 취득을 제어하는 취득 제어 단계와,

상기 취득 제어 단계의 처리에 의해 취득이 제어된 상기 화상 데이터를, 상기 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 단계와,

상기 생성 단계의 처리에 의해 생성된 상기 제1 프레임 레이트를 갖는 상기 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 단계와,

상기 변환 단계의 처리에 의해, 상기 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 상기 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 단계와,

상기 변환 단계의 처리에 의해, 제3 프레임 레이트로 변환된 상기 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 단계

를 포함하는 것을 특징으로 하는 화상 처리 방법.
화상 데이터를 출력할 수 있는 화상 처리 장치용의 프로그램이 기록되어 있는 기록 매체이며,

처리 타이밍의 기준이 되는 제1 기준 신호 및 제2 기준 신호를 생성하는 기준 신호 생성 단계와,

화상 데이터의 취득을 제어하는 취득 제어 단계와,

상기 취득 제어 단계의 처리에 의해 취득이 제어된 상기 화상 데이터를, 상기 제1 기준 신호에 의해서 정해지는 타이밍에 기초하여 처리하여, 제1 프레임 레이트를 갖는 화상 데이터를 생성하는 생성 단계와,

상기 생성 단계의 처리에 의해 생성된 상기 제1 프레임 레이트를 갖는 상기 화상 데이터를, 상이한 프레임 레이트로 변환하는 변환 단계와,

상기 변환 단계의 처리에 의해, 상기 제2 기준 신호에 의해서 정해지는 제2 프레임 레이트로 변환된 상기 화상 데이터를 제1 다른 화상 처리 장치로 출력하는 제1 출력 단계와,

상기 변환 단계의 처리에 의해, 제3 프레임 레이트로 변환된 상기 화상 데이터를, 제2 다른 화상 처리 장치로 출력하는 제2 출력 단계

를 포함하는 것을 특징으로 하는 컴퓨터가 판독 가능한 프로그램이 기록되어 있는 기록 매체.
삭제