KR100478612B1

KR100478612B1 - 멀티화면재생기능을 구비한 동화상재생장치 및동화상재생방법

Info

Publication number: KR100478612B1
Application number: KR10-2002-0021120A
Authority: KR
Inventors: 하야시데츠야
Original assignee: 가시오게산키 가부시키가이샤
Priority date: 2001-04-20
Filing date: 2002-04-18
Publication date: 2005-03-28
Also published as: JP3738353B2; US7092023B2; US20020154238A1; KR20020082113A; JP2002320192A

Abstract

본 발명은 동화상을 재생하는 것이 가능한 동화상재생장치 및 동화상재생방법에 관한 것으로서,

복수의 동화상데이터를 기록하는 플래시메모리(28)와, 이 메모리(28)에 기록되어 있는 동화상데이터를 표시하는 표시부(25)와, 메모리(28)에 기록되어 있는 복수의 동화상데이터를 표시부(25)상에 동시재생시키는 CPU(21)를 구비하고, CPU(21)는 표시부(25)에 동시재생되는 복수의 동화상데이터 중에서 동화상재생시간이 가장 긴 동화상데이터의 동화상재생종료시간에 다른 동화상데이터의 동화상재생종료시간을 맞추기 위해 다른 동화상데이터의 동화상재생개시시간을 지연시키는 것을 특징으로 한다.

Description

멀티화면재생기능을 구비한 동화상재생장치 및 동화상재생방법{MOVING IMAGE PLAYBACK APPARATUS AND METHOD THEREOF HAVING MULTI-PICTURE PLAYBACK FUNCTION}

본 발명은 동화상을 재생하는 것이 가능한 동화상재생장치 및 동화상재생방법에 관한 것이다.

근래 디지털비디오카메라만이 아니라 디지털스틸카메라에 있어서도 시계열로 연속한 복수의 정지화로 이루어지는 동화상데이터파일을 플래시메모리 등으로 이루어지는 메모리카드에 기록하고, 또는 해당 메모리카드에 기록되어 있는 동화상데이터파일을 재생 가능한 것이 수많이 판매되고 있다.

또 이 종류의 디지털스틸카메라에 있어서는, 메모리카드에 기록한 정지화데이터를 복수 선택하는 것으로 카메라뒷면에 설치된 표시부에 복수의 정지화데이터를 동시에 재생시키는, 이른바 멀티화면표시기능을 탑재한 것이 있지만, 메모리카드에 기록한 복수의 동화상데이터를 표시부에 동시재생시킬 수는 없었다.

하나의 바람직한 형태에서는,

동화상재생장치에 복수의 동화상데이터를 기록하는 메모리와, 이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와, 메모리에 기록되어 있는 복수의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하도록 구성하고, 또한 프로세서는 디스플레이상에 동시 재생되는 복수의 동화상데이터 중에서 동화상재생시간이 가장 긴 동화상데이터를 동화상재생의 기준이 되는 기준동화상데이터로서 선택하고, 남은 다른 동화상데이터에 관해서는 상기 기준동화상데이터와 동화상재생종료시간이 일치하도록 각 동화상데이터의 동화상 재생시간에 근거하여 각 동화상데이터의 동화상 재생 개시시간을 산출하고, 이 산출된 각 동화상 재생 개시시간을 각 동화상데이터에 대응하여 설정하며, 기준동화상데이터의 동화상재생을 개시하고 나서의 경과시간이 각 동화상데이터에 대응하여 설정된 동화상재생개시시간이 된 경우에 각 동화상데이터의 동화상재생을 개시하도록 구성함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능한 동화상재생장치를 제공할 수 있게 된다.

또 다른 하나의 바람직한 형태에서는,

동화상재생장치에 3개 이상의 동화상데이터를 기록하는 메모리와, 이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와, 메모리에 기록되어 있는 3개 이상의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하도록 구성하고, 또한 프로세서는 동화상데이터에 포함되는 각 프레임화상을 재생할 때마다 상기 복수의 동화상데이터 중에서 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하인지 여부를 판정하고, 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하임이 판정된 경우에는 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터를 포함하는 복수의 동화상데이터의 재생을 종료하도록 구성함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능한 동화상재생장치를 제공할 수 있게 된다.

또 다른 하나의 바람직한 형태에서는,

동화상재생장치에 프레임레이트가 다른 복수의 동화상데이터를 기록하는 메모리와, 이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와, 메모리에 기록되어 있는, 프레임레이트가 다른 복수의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하도록 구성하고, 또한 프로세서를, 디스플레이상에 프레임레이트가 다른 복수의 동화상데이터를 동시재생시키기 위해 복수의 동화상데이터 중의 적어도 1개의 동화상데이터의 프레임레이트를 변경하도록 구성함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능한 동화상재생장치를 제공할 수 있게 된다.

또 다른 하나의 바람직한 형태에서는,

동화상재생장치에 복수의 동화상데이터를 기록하는 메모리와, 이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와, 메모리에 기록되어 있는 복수의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하도록 구성하고, 또한 프로세서를 동화상데이터 중의 1프레임화상의 재생에 요하는 시간에 따라서 동화상데이터 중의 프레임화상을 솎아내어 복수의 동화상데이터를 디스플레이상에 동시재생시키도록 구성함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능한 동화상재생장치를 제공할 수 있게 된다.

또 다른 하나의 바람직한 형태에서는,

동화상데이터를 디스플레이상에 재생시키기 위한 동화상재생방법으로서, 메모리에 기록되어 있는 복수의 동화상데이터를 디스플레이상에 동시재생시키는 스텝과, 디스플레이상에 동시재생되는 복수의 동화상데이터 중에서 동화상재생시간이 가장 긴 동화상데이터의 동화상재생종료시간에 다른 동화상데이터의 동화상재생종료시간을 맞추기 위해 다른 동화상데이터의 동화상재생개시시간을 지연시키는 스텝으로 이루어지는 동화상재생방법을 제공함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능하게 된다.

또 다른 하나의 바람직한 형태에서는,

동화상데이터를 디스플레이상에 재생시키기 위한 동화상재생방법으로서, 메모리에 기록되어 있는 3개 이상의 동화상데이터를 디스플레이상에 동시재생시키는 스텝과, 3개 이상의 동화상데이터의 동화상재생을 개시시킨 후 동화상재생이 종료되어 있지 않은 동화상데이터의 수가 하나가 된 시점에서 해당 동화상데이터의 동화상재생을 정지시키는 스텝으로 이루어지는 동화상재생방법을 제공함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능하게 된다.

또 다른 하나의 바람직한 형태에서는,

동화상데이터를 디스플레이상에 재생시키기 위한 동화상재생방법으로서, 메모리에 기록되어 있는, 프레임레이트가 다른 복수의 동화상데이터를 디스플레이상에 동시재생시키는 스텝과, 동화상데이터에 포함되는 각 프레임화상을 재생할 때마다 복수의 동화상데이터 중에서 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하인지 여부를 판정하고, 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하임이 판정된 경우에는 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터를 포함하는 복수의 동화상데이터의 재생을 종료하는 스텝으로 이루어지는 동화상재생방법을 제공함으로써 복수의 동화상을 양호하게 동시재생시키는 것이 가능하게 된다.

(제 1 실시형태)

이하 본 발명을 디지털카메라에 적용한 경우의 제 1 실시형태에 대하여 도면을 참조해서 설명한다.

도 1은 그 회로구성을 나타내는 것으로, “10”이 디지털카메라이다. 이 디지털카메라(10)는 기록모드와 재생모드를 설정 가능하며, 기록모드의 상태에 있어서는, 렌즈(11)의 뒤쪽에 배치된 CCD(12)는 타이밍발생기(TG)(13), 수직드라이버(14)에 의하여 주사구동되고, 일정주기마다 광전변환출력을 1화면분 출력한다.

이 광전변환출력은 아날로그값의 신호의 상태에서 RGB의 각 원색성분마다 적절히 게인조정된 후에 샘플홀드(S/H)회로(15)에서 샘플홀드되고, A/D변환기(16)에서 디지털데이터로 변환되며, 컬러프로세스회로(17)에서 화소보간처리를 포함하는컬러프로세스처리가 실시되고, 디지털값의 휘도신호(Y) 및 색차신호(Cb, Cr)가 생성되며, DMA(Direct Memory Access)컨트롤러(18)에 출력된다.

DMA컨트롤러(18)는 컬러프로세스회로(17)가 출력하는 휘도신호(Y) 및 색차신호(Cb, Cr)를 DRAM인터페이스(I/F)(19)를 통하여 DRAM(20)의 DMA영역에 DMA전송을 실시한다.

CPU(프로세서)(21)는 이 디지털카메라(10) 전체의 동작제어를 실시하는 것으로, 상기 휘도 및 색차신호의 DRAM(20)의 DMA영역으로의 DMA전송종료 후에, 이 휘도 및 색차신호를 DRAM인터페이스(19)를 통하여 DRAM(20)의 DMA영역으로부터 판독하고, VRAM컨트롤러(22)를 통하여 VRAM(23)에 기입한다.

디지털비디오엔코더(이하 「비디오엔코더」라 약칭한다)(24)는 상기 휘도 및 색차신호를 VRAM컨트롤러(22)를 통하여 VRAM(23)으로부터 정기적으로 판독하고, 이들 데이터를 토대로 비디오신호를 발생하여 표시부(25)에 출력한다.

이 표시부(디스플레이)(25)는 예를 들면 백라이트부착의 컬러액정표시패널과 그 구동회로로 구성되고, 카메라본체의 뒷면측에 설치되어 기록모드시에는 EVF(Electronic View Finder)로서 기능하는 것이고, 비디오엔코더(24)로부터의 비디오신호에 의거한 표시를 실시하는 것으로, 그 시점에서 VRAM컨트롤러(22)로부터 받아들이고 있는 화상정보에 의거하는 스루화상을 표시하게 된다.

이와 같이 표시부(25)에 그 시점에서의 화상이 모니터화상으로서 리얼타임으로 표시되어 있는 상태에서 기록보존을 실시하고 싶은 타이밍으로 키입력부(26)를 구성하는 복수의 키 중의 셔터키를 조작하면 트리거신호를 발생한다.

촬영모드로서 정지화촬영모드가 설정되어 있는 경우 CPU(21)는 이 트리거신호에 따라서 그 시점에서 CCD(12)로부터 받아들이고 있는 1화면분의 휘도 및 색차신호의 DRAM(20)의 DMA영역으로의 DMA전송의 종료 후 즉시 CCD(12)로부터의 DRAM(20)으로의 경로를 정지하고 기록보존의 상태로 천이한다.

이 정지화데이터의 기록보존의 상태에서는 CPU(21)가 DRAM(20)에 기입되어 있는 1프레임분의 휘도 및 색차신호를 DRAM인터페이스(19)를 통하여 Y, Cb, Cr의 각 컴퍼넌트마다 세로 8화소×가로 8화소의 기본블록이라 호칭되는 단위로 판독하여 JPEG회로(27)에 기입하고, 이 JPEG회로(27)에서 ADCT(Adaptive Discrete Cosine Transform), 엔트로피부호화방식인 하프만부호화 등의 처리에 의해 데이터압축한다.

CPU(21)는 이 데이터압축에 의해 얻은 부호데이터를 데이터파일로서 해당 JPEG회로(27)로부터 판독하고, 이 디지털카메라(10)의 기억매체로서 착탈 자유롭게 장착되는 불휘발성 메모리인 플래시메모리(28)에 정지화파일로서 기입한다.

또 촬영모드로서 동화상촬영모드가 설정되어 있는 경우 CPU(21)는 상기 셔터키의 조작에 의해 트리거신호에 대응하여 CCD(12)로부터의 DRAM(20)으로의 경로를 정지하는 일 없이 DRAM(20)에 기입되어 있는 1프레임분의 휘도 및 색차신호를 DRAM인터페이스(19)를 통하여 Y, Cb, Cr의 각 컴퍼넌트마다 세로 8화소×가로 8화소의 기본블록이라 호칭되는 단위로 판독하여 JPEG회로(27)에 기입하고, 이 JPEG회로(27)에서 ADCT, 엔트로피부호화방식인 하프만부호화 등의 처리에 의해 데이터압축한다.

CPU(21)는 이 데이터압축에 의해 얻은 부호데이터를 해당 JPEG회로(27)로부터 판독하고, DRAM인터페이스(19)를 통하여 DRAM(20)의 격납영역에 일시 격납한다.

이 CCD(12)에서 촬상이 이루어지고나서 DRAM(20)의 격납영역에 격납되기까지의 일련의 처리가 동화상을 구성하는 1프레임분의 정지화상에 대한 처리로 되는 것이고, 이 처리를 종료하면 CPU(21)는 아직 셔터키가 계속해서 조작되고 있는 것을 확인한 후에 다음의 프레임의 화상이 CCD(12)로부터 전송되어 오는 것을 기다린다.

이렇게 하여 셔터키가 조작되고 있는 사이 각 프레임마다 똑같은 처리를 계속하고, 해당 셔터키가 떨어졌다고(또는 DRAM(20)이 가득해졌다고) 판단한 시점에서 CPU(21)는 DRAM(20)의 격납영역에 격납되어 있는 복수프레임분의 정지화데이터를 미리 정해져 있는 포맷의 동화상데이터에 모아서 상기 플래시메모리(28)에 전송하고, 소정의 파라미터값 등의 정보와 함께 동화상파일로서 기록시킨다.

이 동화상데이터의 플래시메모리(28)로의 기입시에 CPU(21)는 아울러서 동화상파일을 구성하는 복수의 정지화데이터 중 선두에 위치하는 것의 구성화소수를 대폭으로 솎아낸 화상데이터를 작성하고, 이것을 플레뷰화상으로서 원래의 동화상데이터에 관련지워서 플래시메모리(28)에 기억시킨다.

또한 상기 실시형태에 있어서는, JPEG회로(27)에 의해 데이터압축된 부호데이터를 DRAM(20)의 격납영역에 차례로 격납해 가도록 했는데, 비압축의 휘도 및 색차신호의 상태의 정지화상을 DRAM(20)의 격납영역에 차례로 격납해 가고, 셔터키가 떨어졌다고(또는 DRAM(20)이 가득해졌다고) 판단한 시점에서 DRAM(20)의 격납영역에 격납되어 있는 복수의 정지화데이터를 차례로 JPEG회로(27)를 이용하여 데이터압축하고, 플래시메모리(28)에 기입하도록 해도 좋다.

또 동화상데이터의 포맷 중에는 1개의 동화상데이터파일 중에서는 일정한 프레임레이트밖에 설정할 수 없는 것도 있다. 그 때문에 셔터키의 조작이 이루어진 시점에서 각 프레임마다의 일련의 처리에 요하는 시간을 미리 산출하고, 각 프레임마다 정지화데이터의 처리를 실시하고 있는 사이는 CCD(12)에서 얻은 화상데이터가 샘플홀드회로(15), A/D변환기(16)를 통하여 컬러프로세스회로(17)에 전송되지 않도록 CCD(12)의 구동을 제한하는 것으로 일정한 프레임간격으로 동화상데이터를 재생하는 것이 가능하게 된다.

그 때에 CCD(12)로부터 컬러프로세스회로(17)에 화상데이터의 전송요구를 실시하는 시간간격은 동화상데이터의 플래시메모리(28)로의 기록을 종료하기까지 변경할 수 없는 것으로 한다.

또한 상기 키입력부(26)는 상기한 셔터키 외에 기록(REC)모드와 재생(PLAY)모드를 전환하는 기록/재생모드전환키, 각종 촬영모드를 선택하기 위한 모드키, 화상선택이나 화이트밸런스의 화면 속에서의 중점조정위치의 지정 등을 위해 상하좌우 각 방향을 지시하는 커서키나 선택내용을 결정하기 위한 「Enter」키 등으로 구성되고, 키조작에 동반하는 신호는 직접 CPU(21)에 송출된다.

또 재생모드에서 플래시메모리(28)에 기록한 정지화데이터를 재생하는 경우에는 CPU(21)는 CCD(12)로부터 DRAM(20)으로의 경로를 정지하고, 키입력부(26)의 화상선택키 등의 조작에 따라서 CPU(21)가 플래시메모리(28)로부터 특정한 1프레임분의 부호데이터를 판독하여 JPEG회로(27)에 보내고, JPEG회로(27)에서 신장처리를 실시하여 얻어진 세로 8화소×가로 8화소의 기본블록단위로 VRAM컨트롤러(22)를 통해서 VRAM(23)에 1프레임분의 휘도 및 색차신호를 전개기억시킨다.

이에 대하여 비디오엔코더(24)는 VRAM(23)에 전개기억되어 있는 1프레임분의 휘도 및 색차신호를 토대로 비디오신호를 발생하고, 표시부(25)에서 표시시킨다.

또한 CPU(21)는 CPU(21)를 포함하는 모든 회로에 전력을 공급하고, 이 디지털카메라(10)의 전원으로 되는 전지(29)의 소모상태를, 전압값을 검출하는 것으로 항상 체크하고 있으며, 그 소모가 현저하다고 판단한 경우에는 일부의 동작을 제한하도록 제어하는 것으로 한다.

다음으로 상기 실시형태의 동작에 대하여 설명한다.

도 2 및 도 3은 재생모드시에 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터(동화상파일)를 판독하여 멀티화면표시에 의해 동시재생할 때의 주로 CPU(21)에 의한 처리내용을 나타내는 것이다.

동일도면에서 우선 플래시메모리(28)에 기록되어 있는 동화상데이터 중에서 임의의 것을 복수 선택하면(스텝A01), 선택한 동화상데이터의 수(n)가 설정된다.

이에 따라 CPU(21)는 우선 동화상데이터를 지정하는 포인터(i)에 초기값「1」을 설정하고(스텝A02), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 각 파라미터값, 구체적으로는 「전체재생시간」「프레임레이트」를 판독한다(스텝A03).

이어서 그 동화상데이터를 재생하는 프레임범위의 설정으로서 「개시프레임번호」「종료프레임번호」의 지정을 실시한다(스텝A04). 이것은 예를 들면 동화상데이터를 구성하는 연속한 복수의 정지화데이터를 표시부(25)에 멀티화면표시한 후에 키입력부(26)에서의 커서키조작에 의해 커서를 소망의 정지화상으로 이동시킨 후에 「Enter」키를 조작하는 것으로 개시프레임 또는 종료프레임을 결정한다.

이렇게 하여 동화상데이터의 재생표시하는 프레임범위를 설정하면 그에 따라서 재생시간의 계산을 다음 식

재생시간＝(종료프레임번호－개시프레임번호＋1)×프레임레이트

으로 실시한다(스텝A05).

다음으로 동화상데이터의 포인터(i)가 선택한 전체동화상데이터의 수(n)는 아닌 것을 확인한 후에(스텝A06), 이 포인터(i)의 값을 「＋1」 갱신설정하고(스텝A07), 다시 상기 스텝A03로부터의 처리로 되돌아간다.

이렇게 하여 스텝A03∼A07의 처리를 반복실행하는 것으로 선택한 복수의 동화상데이터마다 똑같은 처리를 실시해 간다.

도 4A∼도 4C는 플래시메모리(28)에 기록되어 있는 3개의 동화상데이터 1∼3에 대하여 각각 개시프레임과 종료프레임을 지정하는 것으로 재생표시하는 프레임범위를 설정한 경우를 예시하고 있으며, 여기에서는 설명을 용이하게 하기 위해 동일한 프레임레이트를 갖는 것으로 하면 동화상 1, 동화상 3, 동화상 2의 순서로 재생시간이 긴 것을 알 수 있다.

선택한 모든 동화상데이터에 대해서의 처리를 끝내고, 스텝A06에서 동화상데이터의 포인터(i)가 선택한 전체동화상데이터의 수(n)가 되어 있다고 판단하면 각각 산출한 재생시간 중에서 가장 긴 동화상데이터를 선택하고(스텝A08), 남는 다른 동화상데이터에 관해서는 가장 긴 재생시간의 동화상데이터와 종료의 타이밍이 일치하도록 각 동화상데이터의 재생시간, 프레임수, 프레임레이트 등에 의거하여 각 동화상의 동화상표시를 개시하는 타이밍을 산출하고, 그 개시시간을 설정한다(스텝A09).

이상으로 재생의 준비로서의 처리를 끝내고, 재생을 개시하기 위해 셔터키의 조작이 이루어지는 것을 대기한다(스텝A10).

그리고 스텝A10에서 재생표시를 개시시키기 위해 셔터가 조작되면 이것을 판단하고, 각 동화상데이터의 재생프레임의 초기설정으로서, 각각 개시프레임으로서 지정된 프레임번호를 설정한 후에(스텝A11), 그 각 프레임번호의 정지화데이터를 플래시메모리(28)로부터 차례로 판독하고, JPEG회로(27)에서 기록시와는 반대의 신장처리를 실시하여 디코드하며, 멀티화면표시를 위해 축소하고나서 얻어진 복수의 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)에 전개기억시키고, 비디오엔코더(24)에 의해 대응하는 멀티화면표시를 위한 비디오신호를 발생시켜서 표시부(25)에서 표시시킨다(스텝A12).

이 경우 선택한 동화상데이터의 수(n)는 「3」이기 때문에 예를 들면 표시부(25)에서는 화면을 세로 2×가로 2의 4개의 영역으로 분할하고, 그 중의 3개를 사용하여 멀티화면표시를 실시하는 것으로 한다.

표시를 개시하면 CPU(21)가 갖는 기본타이머를 재생타이머로서 기동하고, 이후 1프레임분의 표시시간(프레임레이트)에 대응한 시간간격으로 인터럽트신호가 얻어지도록 하며(스텝A13), 이 후 그 인터럽트신호가 얻어지는 것을 대기한다(스텝A14).

스텝A14에서 재생타이머로부터의 인터럽트가 얻어졌다고 판단하면, 그 시점에서 동화상데이터의 포인터(i)를 초기값「1」로 설정한 후(스텝A15), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 동화상표시를 개시하는 타이밍인지 아닌지, 또는 개시하는 타이밍을 지나 있는지 아닌지를 판단한다(스텝A16).

이 동화상 1은 상기한 바와 같이 가장 재생시간이 길고, 당초부터 재생타이머의 인터럽트에 대응하여 차례로 프레임을 갱신해서 동화상재생을 실시하기 때문에 여기에서는 동화상표시를 개시하는 타이밍인 것으로 판단하고, 다음으로 각 동화상데이터의 프레임레이트가 다른 경우에 대처하여 그 동화상 1의 프레임을 갱신해서 표시하는 시간인 것을 확인한다(스텝A17).

이 스텝A17은 프레임레이트가 다른 복수의 동화상데이터를 멀티화면표시할 때에 각 동화상데이터의 1프레임당의 표시시간간격의 최대공약수에 상당하는 시간을 상기 재생타이머에 설정하고, 그 재생타이머로부터의 인터럽트에 대응하여 프레임레이트가 다른 각각의 동화상데이터로 표시프레임을 갱신하는 타이밍으로 되었는지 아닌지를 판단하기 위한 것이다.

여기에서 동화상 1의 프레임을 갱신하여 표시하는 시간이라고 판단하면 해당하는 프레임, 여기에서는 「2」의 정지화데이터를 플래시메모리(28)로부터 판독하고(스텝A18), JPEG회로(27)에서 신장을 위한 디코드를 실시하며(스텝A19), 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 동화상 1의 표시영역에 전개기억하고(스텝A20), 멀티화면 중의 동화상 1의 표시프레임을 갱신설정한다.

이어서 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝A21), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝A22), 이번에는 동화상 2에 관하여 상기 스텝A16으로부터의 처리를 반복실시하는 것으로 표시프레임의 갱신이 필요한지 아닌지 판단하고, 필요하면 그를 위한 처리를 실행한다.

이 경우 동화상 2는 3개의 동화상데이터 중에서 가장 재생시간이 짧고, 스텝A16에서 아직 동화상의 재생을 개시할 시간은 아닌 것이라고 판단하여 스텝A17∼A20의 처리는 실행하지 않고 스텝A21을 통하여 스텝A22에서 동화상데이터의 포인터(i)의 값을 「＋1」 갱신설정해서 「3」으로 한다.

이 시점에서 동화상 3도 마찬가지로 아직 동화상의 재생을 개시할 시간은 아닌것으로 하여 스텝A17∼A20의 처리는 실행하지 않고 스텝A21에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면 다음으로 그 시점에서 표시하고 있는 각 동화상데이터의 프레임이 종료프레임의 것은 아닌 것을 확인한 후에(스텝A23), 다시 다음으로 상기 스텝A14로 되돌아가서 다음의 재생타이머로부터의 인터럽트신호가 얻어지는 것을 대기한다.

이렇게 하여 재생타이머로부터의 인터럽트가 있을 때마다 스텝A15 이하의 처리를 반복실행함으로써 이미 동화상표시를 개시하고 있는 동화상데이터에 관해서는 멀티화면 속의 그 동화상데이터에 대하여 프레임을 갱신설정해서 표시내용을 개서하고, 또 동화상표시를 개시할 시간으로 된 동화상데이터에 대해서는 개시프레임의 다음의 프레임으로 갱신설정하여 표시내용을 개서하기 위한 처리를 실행한다.

도 4D는 이렇게 하여 3개의 동화상 1∼3을 멀티화면표시에 의해 표시부(25)에서 재생할 때의 표시타이밍을 예시하는 것으로, 가장 재생시간이 긴 동화상 1에 맞추어서 동화상 2와 동화상 3이 각각 동화상표시를 개시하기까지의 사이 선두에 위치해 있는 개시프레임을 중복(계속)하여 표시하고, 동화상표시를 개시한 후에 전체동화상 1∼3이 종료프레임을 갖추어서 동시에 동화상표시를 끝내고 있는 것을 알 수 있다.

그리고 상기 스텝A21에서 포인터(i)의 값이 이미 전체동화상데이터수(n)이며, 또한 스텝A23에서 그 시점에서 표시하고 있는 각 동화상데이터의 프레임이 종료프레임의 것이라고 판단한 시점에서 이상으로 이 도 2 및 도 3의 처리를 종료한다.

또한 종료타이밍을 일치시키는 것은 아니고, 각 동화상데이터 속의 임의의 프레임위치를 지정하는 것으로, 그 프레임위치를 중심으로 하여 그보다 전의 재생시간이 가장 긴 동화상데이터와 그보다 후의 재생시간이 가장 긴 동화상데이터를 나누어 산출하고, 각각 다른 동화상데이터의 선두프레임과 종료프레임을 중복시키는 것으로 멀티화면표시를 실시하게 하는 것으로 해도 좋다.

또 상기 제 1 실시형태에 있어서는, 동화상의 표시를 개시하기까지의 사이 선두에 위치해 있는 개시프레임을 정지화표시시키도록 했는데, 동화상의 표시를 개시하기까지의 사이 화상의 표시를 실시하지 않도록 해도 좋다.

(제 2 실시형태)

이하 본 발명을 디지털카메라에 적용한 경우의 제 2 실시형태에 대하여 도면을 참조해서 설명한다.

또한 그 회로구성에 대해서는 상기 도 1에서 나타낸 것과 기본적으로 똑같기 때문에 동일부분에는 동일부호를 이용하는 것으로, 그 도시 및 설명은 생략하는 것으로 한다.

도 5 및 도 6은 재생모드시에 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터를 판독하여 멀티화면표시에 의해 동시재생할 때의 주로 CPU(21)에 의한 처리내용을 나타내는 것이다.

동일도면에서 우선 플래시메모리(28)에 기록되어 있는 동화상데이터 중에서 임의의 것을 복수 선택하면(스텝B01), 선택한 동화상데이터의 수(n)가 설정된다.

이에 따라 CPU(21)는 우선 동화상데이터를 지정하는 포인터(i)에 초기값「1」을 설정하고(스텝B02), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 각 파라미터값, 구체적으로는 「전체재생시간」「프레임레이트」를 판독한다(스텝B03).

이어서 그 동화상데이터를 재생하는 프레임범위의 설정으로서 「개시프레임번호」「종료프레임번호」의 지정을 실시한다(스텝B04). 이것은 예를 들면 동화상데이터를 구성하는 연속한 복수의 정지화데이터를 표시부(25)에 멀티화면표시한 후에 키입력부(26)에서의 커서키와 「Enter」키의 조작을 받아들이는 것으로 실시한다.

으로 실시한다(스텝B05).

다음으로 동화상데이터의 포인터(i)가 선택한 전체동화상데이터의 수(n)는 아닌 것을 확인한 후에(스텝B06), 이 포인터(i)의 값을 「＋1」 갱신설정하고(스텝B07), 다시 상기 스텝B03로부터의 처리로 되돌아간다.

이렇게 하여 스텝B03∼B07의 처리를 반복실행하는 것으로 선택한 복수의 동화상데이터마다 똑같은 처리를 실시해 간다.

도 7A∼도 7C는 플래시메모리(28)에 기록되어 있는 3개의 동화상 1∼3에 대하여 각각 개시프레임과 종료프레임을 지정하는 것으로 재생표시하는 프레임범위를 설정한 경우를 예시하고 있으며, 여기에서는 설명을 용이하게 하기 위해 동일한 프레임레이트를 갖는 것으로 하면 동화상 1, 동화상 3, 동화상 2의 순서로 재생시간이 긴 것을 알 수 있다.

선택한 모든 동화상데이터에 대해서의 처리를 끝내고, 스텝B06에서 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)가 되어 있다고 판단하면 그들 전체동화상데이터 중에서 가장 재생시간이 긴, 즉 프레임수가 많은 동화상데이터를 선택한다(스텝B08).

이상으로 재생의 준비로서의 처리를 끝내고, 재생을 개시하기 위해 셔터키의 조작이 이루어지는 것을 대기한다(스텝B09).

그리고 스텝B09에서 재생표시를 개시시키기 위해 셔터키가 조작되면 이것을 판단하고, 각 동화상데이터의 재생프레임의 초기설정으로서, 각각 개시프레임으로서 지정된 프레임번호를 설정한 후에(스텝B10), 그 프레임번호의 정지화데이터를 플래시메모리(28)로부터 차례로 판독하고, JPEG회로(27)에서 기록시와는 반대의 신장처리를 실시하여 디코드하며, 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)에 전개기억시키고, 비디오엔코더(24)에 의해 대응하는 멀티화면표시를 위한 비디오신호를 발생시켜서 표시부(25)에서 표시시킨다(스텝B11).

표시를 개시하면 CPU(21)가 갖는 기본타이머를 재생타이머로서 기동하고, 이후 CPU(21)로부터 일정한 표시시간에 대응한 시간간격으로 인터럽트신호가 얻어지도록 하며(스텝B12), 이 후 그 인터럽트신호가 얻어지는 것을 대기한다(스텝B13).

스텝B13에서 재생타이머로부터의 인터럽트가 얻어졌다고 판단하면, 그 시점에서 동화상데이터를 지정하는 포인터(i)를 초기값「1」로 설정한 후(스텝B14), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상 1의 프레임을 갱신하여 표시하는 시간인지 아닌지를 판단한다(스텝B15).

이 스텝B15는 프레임레이트가 다른 복수의 동화상데이터를 멀티화면표시할 때에 각 동화상데이터의 1프레임당의 표시시간간격의 최대공약수에 상당하는 시간을 상기 재생타이머에 설정하고, 그 재생타이머로부터의 인터럽트에 대응하여 프레임레이트가 다른 각각의 동화상데이터에서 표시프레임을 갱신하는 타이밍으로 되었는지 아닌지를 판단하기 위한 것이다.

여기에서 동화상 1의 프레임을 갱신하여 표시하는 시간이라고 판단하면 해당하는 프레임, 여기에서는 「2」의 정지화데이터를 플래시메모리(28)로부터 판독하고(스텝B16), JPEG회로(27)에서 신장을 위한 디코드를 실시하며(스텝B17), 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 동화상 1의 표시영역에 전개기억하고(스텝B18), 멀티화면 중의 동화상 1의 표시프레임을 갱신설정한다.

이어서 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝B19), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝B20), 이번에는 동화상 2에 관하여 상기 스텝B15으로부터의 처리를 반복실시하는 것으로 표시프레임의 갱신이 필요한지 아닌지 판단하고, 필요하면 그를 위한 처리를 실행한다.

이 경우 동화상 2에 관해서도 스텝B15에서 표시프레임의 갱신이 필요하다고 판단하고, 스텝B16∼B18의 처리에 의해 새로이 표시프레임을 판독하여 갱신표시하고나서 스텝B19을 통하여 스텝B20에서 동화상데이터의 포인터(i)의 값을 「＋1」 갱신설정해서 「3」으로 한다.

그리고 동화상 3에 관해서도 스텝B15에서 표시프레임의 갱신이 필요하다고 판단하고, 스텝B16∼B18의 처리에 의해 새로이 표시프레임을 판독하여 갱신표시하고나서, 이번에는 스텝B19에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면, 다음의 갱신타이밍으로 판독해야 할 새로운 프레임의 정지화데이터의 수가 복수 있는지 없는지를 판단하고(스텝B21), 복수 있다고 확인한 후에, 다시 다음으로 상기 스텝B13으로 되돌아가서 다음의 재생타이머로부터의 인터럽트신호가 얻어지는 것을 대기한다.

이렇게 하여 재생타이머로부터의 인터럽트가 있을 때마다 스텝B14 이하의 처리를 반복실행함으로써 각 동화상데이터에 관해서 멀티화면 속의 그 동화상데이터에 대하여 프레임을 갱신설정해서 표시내용을 개서하기 위한 처리를 실행한다.

그리고 재생시간이 가장 짧은 동화상 2의 종료프레임「7」을 표시한 후, 이것을 갱신하는 타이밍으로 된 시점에서는 이미 지정한 프레임범위의 동화상표시는 끝내고 있으며, 판독해야 할 새로운 프레임의 정지화데이터는 없기 때문에 그대로 동화상 2의 표시데이터에 관해서는 종료프레임의 표시내용을 개서하는 일 없이 계속하여 실시한다. 물론 종료프레임의 표시를 계속하지 않고 표시를 종료하도록 해도 좋다.

이 때 동화상 3의 프레임「10」으로의 갱신표시를 끝낸 후 스텝B19에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하여 스텝B21으로 진행하면, 그 시점에서는 아직 동화상 1과 동화상 3의 동화상표시는 끝내고 있지 않고, 각각 새로운 프레임「7」(동화상 1)과 프레임「11」(동화상 3)이 존재하기 때문에 동화상표시를 끝내고 있지 않은 동화상데이터의 수가 복수 있다고 판단하고 동화상표시는 계속한다.

또한 그 후 다음으로 재생시간이 짧은 동화상 3의 종료프레임「12」를 표시하고, 스텝B19에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하여 스텝B21으로 진행하면, 다음으로 판독해야 할 동화상 1의 프레임「9」에 대하여 동화상 2 및 (3)의 어느 쪽도 이미 종료프레임을 표시하고 있어서 새로이 갱신표시해야 할 프레임이 없고, 화상의 비교를 실시할 수 없는 것으로 하여 이상으로 이 도 5 및 도 6의 처리를 종료한다.

도 7D는 이렇게 하여 3개의 동화상 1∼3을 멀티화면표시에 의해 표시부(25)에서 재생할 때의 표시타이밍을 예시하는 것으로, 상기한 바와 같이 가장 재생시간이 짧은 동화상 2는 그 종료프레임의 표시를 끝낸 후에도 아직 동화상 1과 동화상 3의 동화상표시를 끝내고 있지 않기 때문에 종료프레임「7」을 정지화로 하여 표시를 계속하지만, 다음으로 재생시간이 짧은 동화상 3이 그 종료프레임「12」의 표시를 끝낸 시점에서 비교대상으로서 복수의 동화상을 멀티표시할 수는 없게 된다.

그 때문에 동화상 1의 프레임「8」, 동화상 2의 종료프레임「7」 및 동화상 3의 종료프레임「12」의 표시타이밍을 끝낸 시점에서 각각 다음의 프레임표시를 위한 처리는 실시하지 않고 멀티화면표시를 종료한다.

따라서 동화상 1의 프레임「9」「10」에 관해서는 표시는 실시하지 않는다.

또한 상기 제 2 실시형태에 있어서는, 복수의 동화상데이터의 표시내용의 비교를 실시할 수 없게 된 시점에서 표시를 정지시키도록 했는데, 표시를 정지하지 않고 복수의 동화상데이터의 표시내용의 비교를 실시할 수 없게 된 시점의 프레임, 즉 동화상 1의 프레임「8」, 동화상 2의 프레임「7」, 동화상 3의 프레임「12」를 정지화표시시키도록 해도 좋다.

(제 3 실시형태)

이하 본 발명을 디지털카메라에 적용한 경우의 제 3 실시형태에 대하여 도면을 참조해서 설명한다.

도 8 및 도 9는 재생모드시에 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터를 판독하여 멀티화면표시에 의해 동시재생할 때의 주로 CPU(21)에 의한 처리내용을 나타내는 것이다.

동일도면에서 우선 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터 중에서 임의의 것을 복수 선택하면(스텝C01), 선택한 동화상데이터의 수(n)가 설정된다.

이에 따라 CPU(21)는 우선 동화상데이터를 지정하는 포인터(i)에 초기값「1」을 설정하고(스텝C02), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 각 파라미터값, 구체적으로는 「전체재생시간」「프레임레이트」를 판독한다(스텝C03).

이어서 그 동화상데이터를 재생하는 프레임범위의 설정으로서 「개시프레임번호」「종료프레임번호」의 지정을 실시한다(스텝C04). 이것은 예를 들면 동화상데이터를 구성하는 연속한 정지화데이터를 표시부(25)에 멀티화면표시한 후에 키입력부(26)에서의 커서키와 「Enter」키의 조작을 받아들이는 것으로 실시한다.

으로 실시한다(스텝C05).

다음으로 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)는 아닌 것을 확인한 후에(스텝C06), 이 포인터(i)의 값을 「＋1」 갱신설정하고(스텝C07), 다시 상기 스텝C03로부터의 처리로 되돌아간다.

이렇게 하여 스텝C03∼C07의 처리를 반복실행하는 것으로 선택한 복수의 동화상데이터마다 똑같은 처리를 실시해 간다.

선택한 모든 동화상데이터에 대해서의 처리를 끝내고, 스텝C06에서 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)가 되어 있다고 판단하면 그들 전체동화상데이터 중에서 가장 재생간격이 긴, 즉 프레임레이트가 낮은 동화상데이터를 선택한다(스텝C08).

이상으로 재생의 준비로서의 처리를 끝내고, 재생을 개시하기 위해 셔터키의 조작이 이루어지는 것을 대기한다(스텝C09).

그리고 스텝C09에서 재생표시를 개시시키기 위해 셔터키가 조작되면 이것을 판단하고, 각 동화상데이터의 재생프레임의 초기설정으로서, 각각 개시프레임으로서 지정된 프레임번호를 설정한 후에(스텝C10), 그 프레임번호의 정지화데이터를 플래시메모리(28)로부터 판독하고, JPEG회로(27)에서 기록시와는 반대의 신장처리를 실시하여 디코드하며, 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)에 전개기억시키고, 비디오엔코더(24)에 의해 대응하는 멀티화면표시를 위한 비디오신호를 발생시켜서 표시부(25)에서 표시시킨다(스텝C11).

동화상표시를 개시하면 CPU(21)가 상기 스텝C08에서 선택한 가장 긴 재생시간간격을 재생타이머에 설정한 후에 이 재생타이머를 기동하고, 이후 CPU(21)가 이 재생타이머로부터 일정한 표시시간에 대응한 시간간격으로 인터럽트신호가 얻어지도록 한 후(스텝C12), 그 인터럽트신호가 얻어지는 것을 대기한다(C13).

스텝C13에서 재생타이머로부터의 인터럽트가 얻어졌다고 판단하면, 그 시점에서 동화상데이터를 지정하는 포인터(i)를 초기값「1」로 설정한 후(스텝C14), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상 1의 프레임번호를 갱신하여 해당하는 새로운 정지화데이터를 플래시메모리(28)로부터 판독한다(스텝C15).

이 경우 판독해야 할 정지화데이터의 새로운 프레임번호는 연산

재생타이머의 계시값(현시점까지의 재생시간)/동화상(i)의 프레임레이트(재생시간간격)

을 실시하여 그 나눗셈결과에 가장 가까운 수치의 프레임번호의 정지화데이터를 재생해야 할 정지화데이터로 하는 것으로 복수의 동화상 중의 가장 재생간격이 긴 동화상의 프레임간격에 대응하여 가장 재생타이밍이 가까운 프레임번호의 정지화를 얻도록 하는 것이다.

이렇게 하여 판독한 정지화데이터에 대해서 JPEG회로(27)에서 신장을 위한 디코드를 실시하고(스텝C16), 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 동화상 1의 표시영역에 전개기억하고(스텝C17), 멀티화면 중의 동화상 1의 표시프레임을 갱신설정한다.

이어서 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝C18), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝C19), 이번에는 동화상 2에 관하여 상기 스텝C15로부터의 처리를 반복실시하는 것으로 표시프레임의 갱신을 위한 처리를 실행한다.

이렇게 하여 스텝C15∼19의 처리를 반복실행하는 것으로 동화상데이터를 지정하는 포인터(i)의 값을 갱신설정하면서 차례로 각 동화상데이터에 대하여 가장 긴 재생간격에 대응해서 가장 재생타이밍이 가까운 프레임번호의 정지화데이터로 갱신설정하는 처리를 실행해 간다.

그리고 동화상 3의 표시프레임의 갱신설정을 실시한 후 스텝C18에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면, 다음으로 그 시점에서 표시하고 있는 가장 재생간격이 긴 동화상 3의 프레임화상이 미리 설정한 프레임범위내의 최종화상인지 아닌지에 의해 그 이상의 프레임갱신이 불가능한지 아닌지를 판단하고(스텝C20), 아직 최종화상은 아니고 프레임갱신이 가능하다고 판단하면 다시 상기 스텝C13으로 되돌아가서 다음의 재생타이머로부터의 인터럽트신호가 얻어지는 것을 대기한다.

이렇게 하여 재생타이머로부터의 인터럽트가 있을 때마다 스텝C14 이하의 처리를 반복실행함으로써 각 동화상데이터에 관해서 멀티화면 속의 그 동화상데이터에 대하여 프레임을 갱신설정해서 표시내용을 개서하기 위한 처리를 실행한다.

그리고 스텝C20에서 그 시점에서 표시하고 있는 프레임화상이 미리 설정한 프레임범위내의 최종화상이며, 갱신해야 할 표시프레임이 더 없다고 판단하면 이상으로 이 도 8 및 도 9의 처리를 종료한다.

도 10 중의 동화상 1∼3은 플래시메모리(28)에 기록되어 있는 3개의 동화상 1∼3에 대하여 각각 그 선두의 제 1 프레임을 개시프레임으로 하여 재생표시하는 프레임범위를 설정한 경우를 예시한 것이다.

여기에서는 각 동화상 1∼3이 각각 프레임레이트를 다르게 하는 것이라고 하여 그 중 동화상 3이 가장 프레임레이트가 낮고, 1프레임마다의 재생간격이 긴것으로 하며, 이 동화상 3의 프레임갱신에 맞추어서 다른 동화상 1, 2도 표시프레임을 갱신하는 것으로 하고 있다.

도 10 중의 동화상 1∼3의 재생은 각각 프레임갱신마다 재생표시에 공급되는 프레임번호를 예시하고 있으며, 여기에서는 상기한 바와 같이 동화상 3의 프레임레이트가 가장 낮기 때문에 이 동화상 3에 관해서는 그 프레임레이트에 따라서 전체프레임이 차례로 갱신되어 표시되고 있다.

이에 대하여 동화상 1, 2에서는 동화상 3의 프레임레이트에 맞추어서 가장 재생타이밍이 가까운 프레임의 정지화데이터가 그 때마다 선택되고, 갱신표시되고 있는 것을 알 수 있다.

(제 4 실시형태)

이하 본 발명을 디지털카메라에 적용한 경우의 제 4 실시형태에 대하여 도면을 참조해서 설명한다.

도 11 및 도 12는 재생모드시에 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터를 판독하여 멀티화면표시에 의해 동시재생할 때의 주로 CPU(21)에 의한 처리내용을 나타내는 것이다.

동일도면에서 우선 플래시메모리(28)에 기록되어 있는 동화상데이터 중에서 임의의 것을 복수 선택하면(스텝D01), 선택한 동화상데이터의 수(n)가 설정된다.

이에 따라 CPU(21)는 우선 동화상데이터를 지정하는 포인터(i)에 초기값「1」을 설정하고(스텝D02), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 각 파라미터값, 구체적으로는 「전체재생시간」「프레임레이트」를 판독한다(스텝D03).

이어서 그 동화상데이터를 재생하는 프레임범위의 설정으로서 「개시프레임번호」「종료프레임번호」의 지정을 실시한다(스텝D04). 이것은 예를 들면 동화상데이터를 구성하는 연속한 정지화데이터를 표시부(25)에 멀티화면표시한 후에 키입력부(26)에서의 커서키와 「Enter」키의 조작을 받아들이는 것으로 실시한다.

으로 실시한다(스텝D05).

다음으로 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)는 아닌 것을 확인한 후에(스텝D06), 이 포인터(i)의 값을 「＋1」 갱신설정하고(스텝D07), 다시 상기 스텝D03로부터의 처리로 되돌아간다.

이렇게 하여 스텝D03∼D07의 처리를 반복실행하는 것으로 선택한 복수의 동화상데이터마다 똑같은 처리를 실시해 간다.

선택한 모든 동화상데이터에 대해서의 처리를 끝내고, 스텝D06에서 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)가 되어 있다고 판단하면 그들 전체동화상데이터 중에서 가장 재생시간이 짧은, 즉 프레임레이트가 높은 동화상데이터를 선택한다(스텝D08).

이상으로 재생의 준비로서의 처리를 끝내고, 재생을 개시하기 위해 셔터키의 조작이 이루어지는 것을 대기한다(스텝D09).

그리고 스텝D09에서 재생표시를 개시시키기 위해 셔키가 조작되면 이것을 판단하고, 각 동화상데이터의 재생프레임의 초기설정으로서, 각각 개시프레임으로서 지정된 프레임번호를 설정한 후에(스텝D10), 그 프레임번호의 정지화데이터를 플래시메모리(28)로부터 판독하고, JPEG회로(27)에서 기록시와는 반대의 신장처리를 실시하여 디코드하며, 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)에 전개기억시키고, 비디오엔코더(24)에 의해 대응하는 멀티화면표시를 위한 비디오신호를 발생시켜서 표시부(25)에서 표시시킨다(스텝D11).

동화상표시를 개시하면 CPU(21)가 상기 스텝D08에서 선택한 가장 짧은 재생시간간격을 재생타이머에 설정한 후에 이 재생타이머를 기동하고, 이후 CPU(21)가 이 재생타이머로부터 일정한 표시시간에 대응한 시간간격으로 인터럽트신호가 얻어지도록 한 후(스텝D12), 그 인터럽트신호가 얻어지는 것을 대기한다(스텝D13).

스텝D13에서 재생타이머로부터의 인터럽트가 얻어졌다고 판단하면, 그 시점에서 동화상데이터를 지정하는 포인터(i)를 초기값「1」로 설정한 후(스텝D14), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상 1의 프레임번호를 갱신하여 해당하는 새로운 정지화데이터를 플래시메모리(28)로부터 판독한다(스텝D15).

재생타이머의 계시값/동화상(i)의 프레임레이트

을 실시하여 그 나눗셈결과에 가장 가까운 수치의 프레임번호의 정지화데이터를 재생해야 할 정지화데이터로 하는 것으로 복수의 동화상 중의 가장 재생간격이 짧은 동화상의 프레임간격에 대응하여 가장 재생타이밍이 가까운 프레임번호의 정지화데이터를 중복재생시키도록 하는 것이다.

이렇게 하여 판독한 정지화데이터에 대해서 JPEG회로(27)에서 신장을 위한 디코드를 실시하고(스텝D16), 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 동화상 1의 표시영역에 전개기억하고(스텝D17), 멀티화면 중의 동화상 1의 표시프레임을 갱신설정한다.

이어서 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝D18), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝D19), 이번에는 동화상 2에 관하여 상기 스텝C15으로부터의 처리를 반복실시하는 것으로 표시프레임의 갱신을 위한 처리를 실행한다.

이렇게 하여 스텝D15∼D19의 처리를 반복실행하는 것으로 동화상데이터를 지정하는 포인터(i)의 값을 갱신설정하면서 차례로 각 동화상데이터에 대하여 가장 짧은 재생간격에 대응해서 가장 재생타이밍이 가까운 프레임번호의 정지화데이터로 갱신설정하는 처리를 실행해 간다.

그리고 동화상 3의 표시프레임의 갱신설정을 실시한 후 스텝D18에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면, 다음으로 그 시점에서 표시하고 있는 가장 재생간격이 짧은 동화상 1의 프레임화상이 미리 설정한 프레임범위내의 최종화상인지 아닌지에 의해 그 이상의 프레임갱신이 불가능한지 아닌지를 판단하고(스텝D20), 아직 최종화상은 아니고 프레임갱신이 가능하다고 판단하면 다시 상기 스텝D13으로 되돌아가서 다음의 재생타이머로부터의 인터럽트신호가 얻어지는 것을 대기한다.

이렇게 하여 재생타이머로부터의 인터럽트가 있을 때마다 스텝D14 이하의 처리를 반복실행함으로써 각 동화상데이터에 관해서 멀티화면 속의 그 동화상데이터에 대하여 프레임을 갱신설정해서 표시내용을 개서하기 위한 처리를 실행한다.

그리고 스텝D20에서 그 시점에서 표시하고 있는 프레임화상이 미리 설정한 프레임범위내의 최종화상이며, 갱신해야 할 표시프레임이 더 없다고 판단하면 이상으로 이 도 11 및 도 12의 처리를 종료한다.

도 13 중의 동화상 1∼3은 플래시메모리(28)에 기록되어 있는 3개의 동화상 1∼3에 대하여 각각 그 선두의 제 1 프레임을 개시프레임으로 하고, 재생표시하는 프레임범위를 설정한 경우를 예시한 것이다.

여기에서는 각 동화상 1∼3이 각각 프레임레이트를 다르게 하는 것이라고 하여 그 중 동화상 1이 가장 프레임레이트가 높고, 1프레임마다의 재생간격이 짧은 것으로 하며, 이 동화상 1의 프레임갱신에 맞추어서 다른 동화상 1, 2도 표시프레임을 갱신하는 것으로 하고 있다.

도 13 중의 동화상 1∼3의 재생은 각각 프레임갱신마다 재생표시에 공급되는 프레임번호를 예시하고 있으며, 여기에서는 상기한 바와 같이 동화상 1의 프레임레이트가 가장 높기 때문에 이 동화상 1에 관해서는 그 프레임레이트에 따라서 전체프레임이 차례로 갱신되어 표시되고 있다.

이에 대하여 동화상 2, 3에서는 동화상 1의 프레임레이트에 맞추어서 가장 재생타이밍이 가까운 프레임의 정지화데이터가 그 때마다 중복하여 선택되는 것으로 갱신표시되어 있는 것을 알 수 있다.

또한 상기 제 3 실시형태에 있어서는, 가장 프레임레이트가 낮은 동화상 3의 재생간격에 동화상 1, 2의 재생간격을 맞추고, 상기 제 4 실시형태에 있어서는, 가장 프레임레이트가 높은 동화상 1의 재생간격에 동화상 2, 3의 재생간격을 맞추도록 했는데, 동화상 1의 프레임레이트보다 낮고 동화상 3의 프레임레이트보다 높은 동화상 2의 재생간격에 동화상 1, 3의 재생간격을 맞추도록 해도 좋다. 이 경우 동화상 2는 그 프레임레이트에 따라서 전체프레임이 차례로 재생되며, 동화상 1은 제 3 실시형태와 같이 프레임화상이 솎아냄(스킵)재생되고, 동화상 3은 제 4 실시형태와 같이 프레임화상이 중복재생되게 된다.

또 상기한 바와 같이 동화상 1∼3의 어느 쪽인가의 프레임레이트(재생간격)에 맞추지 않고 동화상 1∼3의 각 프레임레이트에 의거하여 동화상 1∼3의 각 프레임레이트와는 다른 최적의 프레임레이트를 산출하며, 이 프레임레이트에 따라서 동화상 1∼3을 솎아냄재생 또는 중복재생하도록 해도 좋다.

또 상기 제 3 실시형태에 있어서는, 프레임화상을 중복재생하는 경우이어도 동일한 프레임번호의 각 정지화데이터에 대하여 플래시메모리(28)로부터 판독하고, 이 정지화데이터에 대하여 JPEG회로(27)에서 신장을 위한 디코드를 실시하며, 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 대응영역에 전개기억해서 멀티화면 속의 동화상의 표시프레임을 갱신설정한다는 일련의 처리(스텝D15∼D17)를 실행하도록 했는데, 판독해야 할 정지화데이터의 프레임번호가 VRAM(23)에 이미 전개기억되어 있는 표시프레임의 프레임번호와 동일한 경우는 상기 스텝D15∼D17의 처리를 생략(스킵)하도록 해도 좋다.

(제 5 실시형태)

이하 본 발명을 디지털카메라에 적용한 경우의 제 5 실시형태에 대하여 도면을 참조해서 설명한다.

도 14 및 도 15는 재생모드시에 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터를 판독하여 멀티화면표시에 의해 동시재생할 때의 주로 CPU(21)에 의한 처리내용을 나타내는 것이다.

동일도면에서 우선 플래시메모리(28)에 기록되어 있는 동화상데이터 중에서 임의의 것을 복수 선택하면(스텝E01), 선택한 동화상데이터의 수(n)가 설정된다.

이에 따라 CPU(21)는 우선 동화상데이터를 지정하는 포인터(i)에 초기값「1」을 설정하고(스텝E02), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 각 파라미터값, 구체적으로는 「전체재생시간」「프레임레이트」를 판독한다(스텝E03).

이어서 그 동화상데이터를 재생하는 프레임범위의 설정으로서 「개시프레임번호」「종료프레임번호」의 지정을 실시한다(스텝E04). 이것은 예를 들면 동화상데이터를 구성하는 연속한 정지화데이터를 표시부(25)에 멀티화면표시한 후에 키입력부(26)에서의 커서키와 「Enter」키의 조작을 받아들이는 것으로 실시한다.

으로 실시한다(스텝E05).

다음으로 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)는 아닌 것을 확인한 후에(스텝E06), 이 포인터(i)의 값을 「＋1」 갱신설정하고(스텝E07), 다시 상기 스텝E03로부터의 처리로 되돌아간다.

이렇게 하여 스텝E03∼E07의 처리를 반복실행하는 것으로 선택한 복수의 동화상데이터마다 똑같은 처리를 실시해 간다.

선택한 모든 동화상데이터에 대해서의 처리를 끝내고, 스텝E06에서 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)가 되어 있다고 판단하면 그들 전체동화상데이터 중에서 가장 재생간격이 긴, 즉 프레임레이트가 낮은 동화상데이터를 선택한다(스텝E08).

덧붙여서 이번에는 전체동화상데이터 중에서 가장 재생간격이 짧은, 즉 프레임레이트가 높은 동화상데이터를 아울러서 선택한다(스텝E09).

이상으로 재생의 준비로서의 처리를 끝내고, 재생을 개시하기 위해 셔터키의 조작이 이루어지는 것을 대기한다(스텝E10).

그리고 스텝E10에서 재생표시를 개시시키기 위해 셔터키가 조작되면 이것을 판단하고, 각 동화상데이터의 재생프레임의 초기설정으로서, 각각 개시프레임으로서 지정된 프레임번호를 설정한 후에(스텝E11), 그 프레임번호의 정지화데이터를 플래시메모리(28)로부터 판독하고, JPEG회로(27)에서 기록시와는 반대의 신장처리를 실시하여 디코드하며, 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)에 전개기억시키고, 비디오엔코더(24)에 의해 대응하는 멀티화면표시를 위한 비디오신호를 발생시켜서 표시부(25)에서 표시시킨다(스텝E12).

동화상표시를 개시하면 CPU(21)는 재생타이머를 기동한 후에(스텝E13), 그 시점에서 전지(29)로부터 얻어지는 전원전압(Vbatt)이 미리 설정된 전압의 한계값(Vth) 이상인지 아닌지에 의해 전지(29)가 소모되어 있는지 아닌지를 판단한다(스텝E14).

여기에서 전원전압(Vbatt)이 한계값(Vth) 이상이라고 판단한 경우에는 우선 전지(29)는 그다지 소모되어 있지 않은 것으로 하여 상기 스텝E09에서 선택한 가장 재생간격이 짧은 동화상데이터의 프레임레이트로 인터럽트를 걸도록 상기 재생타이머를 설정한다(스텝E15).

또 상기 스텝E14에서 전원전압(Vbatt)이 한계값(Vth)보다 낮다고 판단한 경우에는 전지(29)가 소모되어 있는 것으로 하여 상기 스텝E08에서 선택한 가장 재생간격이 긴 동화상데이터의 프레임레이트로 인터럽트를 걸도록 상기 재생타이머를 설정한다(스텝E16).

이렇게 하여 스텝E15 또는 E16에서 CPU(21)가 재생타이머로부터 설정한 시간간격으로 인터럽트신호가 얻어지도록 설정한 후 실제로 그 인터럽트신호가 얻어지는 것을 대기한다(스텝E17).

스텝E17에서 재생타이머로부터의 인터럽트가 얻어졌다고 판단하면, 그 시점에서 동화상데이터를 지정하는 포인터(i)를 초기값「1」로 설정한 후(스텝E18), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상 1의 프레임번호를 갱신하여 해당하는 새로운 정지화데이터를 플래시메모리(28)로부터 판독한다(스텝E19).

재생타이머의 계시값/동화상(i)의 프레임레이트

을 실시하여 그 나눗셈결과에 가장 가까운 수치의 프레임번호의 정지화데이터를 재생해야 할 정지화데이터로 하는 것으로 복수의 동화상 중의 가장 재생간격이 긴 또는 짧은 동화상의 프레임간격에 대응하여 가장 재생타이밍이 가까운 프레임번호의 정지화데이터를 얻도록 하는 것이다.

이렇게 하여 판독한 정지화데이터에 대해서 JPEG회로(27)에서 신장을 위한 디코드를 실시하고(스텝E20), 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 동화상 1의 표시영역에 전개기억하고(스텝E21), 멀티화면 중의 동화상 1의 표시프레임을 갱신설정한다.

이어서 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝E22), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝E23), 이번에는 동화상 2에 관하여 상기 스텝E19으로부터의 처리를 반복실시하는 것으로 표시프레임의 갱신을 위한 처리를 실행한다.

이렇게 하여 스텝E19∼E23의 처리를 반복실행하는 것으로 동화상데이터를 지정하는 포인터(i)의 값을 갱신설정하면서 차례로 각 동화상데이터에 대하여 설정한 프레임레이트에서 가장 재생타이밍이 가까운 프레임번호의 정지화데이터로 갱신설정하는 처리를 실행해 간다.

그리고 동화상 3의 표시프레임의 갱신설정을 실시한 후 스텝E22에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면, 다음으로 그 시점에서 표시하고 있는 가장 재생간격이 긴 또는 짧은 동화상 1의 프레임화상이 미리 설정한 프레임범위내의 최종화상인지 아닌지에 의해 그 이상의 프레임갱신이 불가능한지 아닌지를 판단하고(스텝E24), 아직 최종화상은 아니고 프레임갱신이 가능하다고 판단하면 다시 상기 스텝E14로 되돌아가서 다음의 재생타이머로부터의 인터럽트신호가 얻어지는 것을 대기한다.

이렇게 하여 재생타이머로부터의 인터럽트가 있을 때마다 스텝E14 이하의 처리를 반복실행함으로써 전원인 전지(29)의 소모상태에 따른 프레임레이트로 각 동화상데이터에 관하여 멀티화면 속의 그 동화상데이터에 대하여 프레임을 갱신설정해서 표시내용을 개서하기 위한 처리를 실행한다.

그리고 스텝E24에서 그 시점에서 표시하고 있는 프레임화상이 미리 설정한 프레임범위내의 최종화상이며, 갱신해야 할 표시프레임이 더 없다고 판단하면 이상으로 이 도 14 및 도 15의 처리를 종료한다.

도 16 중의 동화상 1∼3은 플래시메모리(28)에 기록되어 있는 3개의 동화상 1∼3에 대하여 각각 그 선두의 제 1 프레임을 개시프레임으로 하고, 재생표시하는 프레임범위를 설정한 경우를 예시한 것이다.

여기에서는 각 동화상 1∼3이 각각 프레임레이트를 다르게 하는 것이라고 하여 그 중 동화상 1이 가장 프레임레이트가 높고, 1프레임마다의 재생간격이 짧은 것으로 하며, 반대로 동화상 3이 가장 프레임레이트가 낮고, 1프레임마다의 재생간격이 긴 것으로 한다.

도 16 중의 동화상 1∼3의 재생은 각각 프레임갱신마다 재생표시에 공급되는 프레임번호를 예시하고 있으며, 전지(29)의 전압(Vbatt)이 미리 설정된 전압의 한계값(Vth) 이상이고, 아직 전지(29)는 그다지 소모되어 있지 않다고 판단한 경우에는 제 4 실시형태와 마찬가지로 CPU(21)는 재생간격이 짧은 동화상 1의 프레임레이트에 맞추어서 다른 동화상 2, 3도 표시프레임을 갱신하는 것으로 하고 있다.

그 후 전지(29)의 전압(Vbatt)이 미리 설정된 전압의 한계값(Vth)보다 낮아졌다고 판단한 시점에서 전지(29)가 소모되어 있다고 판단하면 제 3 실시형태와 마찬가지로 CPU(21)는 재생간격이 긴 동화상 3의 프레임레이트에 맞추어서 다른 동화상 1, 2도 표시프레임을 갱신하는 것으로 한다.

또한 상기 제 5 실시형태에 있어서는, 전지(29)가 소모되어 있지 않은 경우는 가장 프레임레이트가 높은 동화상 1의 재생간격에 다른 동화상 2, 3의 재생간격을 맞추고, 전지(29)가 소모되어 있는 경우는 가장 프레임레이트가 낮은 동화상 3의 재생간격에 다른 동화상 1, 2의 재생간격을 맞추도록 했는데, 전지(29)가 소모되어 있지 않은 경우의 프레임레이트보다도 전지(29)가 소모되어 있는 경우의 프레임레이트가 낮으면 좋고, 상기 프레임레이트에 한정되지 않는다. 예를 들면 전지(29)가 소모되어 있지 않은 경우는 동화상 2(동화상 1)의 재생간격에 다른 동화상 1, 3(동화상 2, 3)의 재생간격을 맞추고, 전지(29)가 소모되어 있는 경우는 동화상 3(동화상 2)의 재생간격에 다른 동화상 1, 2(1, 3)의 재생간격을 맞추도록 해도 좋다.

또 상기한 바와 같이 동화상 1∼3의 어느 쪽인가의 프레임레이트(재생간격)에 다른 동화상의 프레임레이트를 맞추지 않고, 동화상 1∼3의 각 프레임레이트에 의거하여 동화상 1∼3의 어느 쪽의 프레임레이트와도 다른, 전지소모시에 최적인 프레임레이트와 전지미소모시에 최적인 프레임레이트를 산출하고, 이들 최적인 프레임레이트에 동화상 1∼3의 프레임레이트를 맞추도록 해도 좋다.

(제 6 실시형태)

이하 본 발명을 디지털카메라에 적용한 경우의 제 6 실시형태에 대하여 도면을 참조해서 설명한다.

여기에서 상기 제 1 내지 제 5 실시형태에 있어서는, 동화상데이터의 프레임레이트에 비하여 플래시메모리(28)로부터 동화상데이터를 구성하는 개개의 정지화데이터를 판독하고나서 JPEG회로(27)에서 디코드하고, VRAM(23)에 축소한 것을 전개기억시켜서 표시부(25)에서 표시시키기까지의 재생처리에 요하는 시간이 충분히 짧고, 다음의 프레임의 표시타이밍에 맞게 하는 것을 전제로 하여 설명했는데, 본 실시형태에 있어서는, 비교적 재생처리에 시간을 요하는 처리속도가 낮은 회로를 이용하는 경우에 대하여 설명한다.

도 17 및 도 18은 재생모드시에 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터를 판독하여 멀티화면표시에 의해 동시재생할 때의 주로 CPU(21)에 의한 처리내용을 나타내는 것이다.

동일도면에서 우선 플래시메모리(28)에 기록되어 있는 복수의 동화상데이터 중에서 임의의 것을 복수 선택하면(스텝F01), 선택한 동화상데이터의 수(n)가 설정된다.

이에 따라 CPU(21)는 우선 동화상데이터를 지정하는 포인터(i)에 초기값「1」을 설정하고(스텝F02), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상데이터의 각 파라미터값, 구체적으로는 「전체재생시간」「프레임레이트」를 판독한다(스텝F03).

이어서 그 동화상데이터를 재생하는 프레임범위의 설정으로서 「개시프레임번호」「종료프레임번호」의 지정을 실시한다(스텝F04). 이것은 예를 들면 동화상데이터를 구성하는 연속한 정지화데이터를 표시부(25)에 멀티화면표시한 후에 키입력부(26)에서의 커서키와 「Enter」키의 조작을 받아들이는 것으로 실시한다.

으로 실시한다(스텝F05).

다음으로 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)는 아닌 것을 확인한 후에(스텝F06), 이 포인터(i)의 값을 「＋1」 갱신설정하고(스텝F07), 다시 상기 스텝F03로부터의 처리로 되돌아간다.

이렇게 하여 스텝F03∼F07의 처리를 반복실행하는 것으로 선택한 복수의 동화상데이터마다 똑같은 처리를 실시해 간다.

선택한 모든 동화상데이터에 대해서의 처리를 끝내고, 스텝F06에서 동화상데이터를 지정하는 포인터(i)가 선택한 전체동화상데이터의 수(n)가 되어 있다고 판단하면 이상으로 재생의 준비로서의 처리를 끝내고, 재생을 개시하기 위해 셔터키의 조작이 이루어지는 것을 대기한다(스텝F08).

그리고 스텝F08에서 재생표시를 개시시키기 위해 셔터키가 조작되면 이것을 판단하고, 각 동화상데이터의 재생프레임의 초기설정으로서, 각각 개시프레임으로서 지정된 프레임번호를 설정한 후에(스텝F09), 그 프레임번호의 정지화데이터를 플래시메모리(28)로부터 판독하고, JPEG회로(27)에서 기록시와는 반대의 신장처리를 실시하여 디코드하며, 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)에 전개기억시키고, 비디오엔코더(24)에 의해 대응하는 멀티화면표시를 위한 비디오신호를 발생시켜서 표시부(25)에서 표시시킨다는 일련의 재생처리를 전체동화상데이터의 수(n)분만큼 반복실행한다(스텝F10).

또 이 때 동시에 동화상 1∼3의 3장분의 정지화데이터를 차례로 플래시메모리(28)로부터 판독하고, JPEG회로(27)에서 디코드하며, VRAM(23)에 전송기억시켜서 표시부(25)에서 표시시키기까지에 요하는 시간을 기본타이머에 의해 계시해 둔다.

동화상 1∼3의 개시프레임인 3장분의 정지화데이터의 표시처리가 완료되면, 동화상데이터를 지정하는 포인터(i)를 초기값「1」로 설정한 후(스텝F11), 이 포인터(i)의 값「1」에 따라서 동화상 1의 다음에 표시해야 할 정지화데이터의 프레임번호의 산출을 실시한다(스텝F12).

이 프레임번호의 산출은 기본타이머의 계시값을 그 동화상데이터(1)의 프레임레이트로 나눗셈하고, 그 나눗셈결과를 그때까지 표시하고 있던 프레임번호에 가산하는 것으로, 가장 재생타이밍이 가까운 프레임번호를 얻도록 하는 것이다(다만 기본타이머의 계시값(동화상 1∼3의 3장분의 정지화를 표시하는 데 요하는 시간)이 동화상 1∼3의 전체의 프레임레이트와 동기하고 있는 경우).

프레임번호를 산출한 후 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝F13), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝F15), 이번에는 동화상 2에 관하여 상기 스텝F12로부터의 처리를 반복실시하는 것으로 다음에 표시해야 할 정지화데이터의 프레임번호의 산출을 실시한다.

이렇게 하여 스텝F12∼F14의 처리를 반복실행하는 것으로 동화상데이터를 지정하는 포인터(i)의 값을 갱신설정하면서 차례로 각 동화상데이터에 대하여 다음에 표시해야 할 정지화데이터의 프레임번호의 산출을 실시해 간다. 여기에서 스텝F12∼F14에 의한 프레임번호의 산출처리에 요하는 시간은 한없이 0에 가까운 것으로 한다.

그리고 동화상 3의 프레임번호의 산출을 실시한 후 스텝F13에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면, 이번에는 다시 동화상데이터를 지정하는 포인터(i)를 초기값「1」로 설정한 후(스텝F15), 그 포인터(i)의 값「1」에 따라서 첫번째로 선택한 동화상 1의 상기 산출한 프레임번호의 정지화데이터를 플래시메모리(28)로부터 판독한다(스텝F16).

판독한 정지화데이터에 대하여 JPEG회로(27)에서 신장을 위한 디코드를 실시하고(스텝F17), 또한 멀티화면표시를 위해 축소하고나서 얻어진 정지화데이터를 VRAM컨트롤러(22)를 통하여 VRAM(23)의 동화상 1의 표시영역에 전개기억하고(스텝F18), 멀티화면 중의 동화상 1의 표시프레임을 갱신설정한다.

이어서 포인터(i)의 값이 아직 전체동화상데이터수(n)는 아닌 것을 확인한 후에(스텝F19), 이 포인터의 값을 「＋1」 갱신설정하여 「2」로 하고(스텝F20), 이번에는 동화상 2에 관하여 상기 스텝F16으로부터의 처리를 반복실시하는 것으로 표시프레임의 갱신을 위한 처리를 실행한다.

이렇게 하여 스텝F16∼F20의 처리를 반복실행하는 것으로 동화상데이터의 포인터(i)의 값을 갱신설정하면서 차례로 각 동화상데이터에 대하여 산출한 프레임번호의 정지화데이터로 갱신설정하는 처리를 실행해 간다.

그리고 동화상 3의 표시프레임의 갱신설정을 실시한 후 스텝F19에서 포인터(i)의 값이 전체동화상데이터수(n)로 되어 있다고 판단하면 다음으로 그 시점에서 표시하고 있는 프레임화상이 미리 설정한 프레임범위내의 최종화상인지 아닌지에 의해 그 이상의 프레임갱신이 불가능한지 아닌지를 판단하고(스텝F21), 아직 최종화상은 아니고 프레임갱신이 가능하다고 판단하면 다시 상기 스텝F11으로 되돌아가서 다음에 표시해야 할 정지화데이터의 표시프레임의 산출로 이행한다.

이렇게 하여 스텝F11 이하의 처리를 반복실행함으로써 플래시메모리(28)로부터 정지화데이터를 판독하여 디코드하고, VRAM(23)에 전송설정하여 표시부(25)에서 표시시키는 데 요하는 처리시간을 감안해서 복수의 동화상데이터를 실시간으로 멀티화면표시시켜 간다.

그리고 스텝F21에서 그 시점에서 표시하고 있는 프레임화상이 미리 설정한 프레임범위내의 최종화상이며, 갱신해야 할 표시프레임이 더 없다고 판단하면 이상으로 이 도 17 및 도 18의 처리를 종료한다.

도 19의 동화상 1∼3은 플래시메모리(28)에 기록되어 있는 3개의 동화상 1∼3에 대하여 각각 그 선두의 제 1 프레임을 개시프레임으로 해서 재생표시하는 프레임범위를 설정한 경우를 예시한 것이다.

여기에서는 각 동화상 1∼3이 각각 프레임레이트를 다르게 하는 것이라고 하고, 그 중 동화상 1이 가장 프레임레이트가 높고, 1프레임마다의 재생간격이 짧은 것으로 하며, 반대로 동화상 3이 가장 프레임레이트가 낮고, 1프레임마다의 재생간격이 긴 것으로 한다.

도 19의 동화상 1∼3의 재생처리는 각각 실제로 프레임마다의 정지화데이터가 플래시메모리(28)로부터 판독되고, 디코드되고나서 VRAM(23)에 축소전송설정되어 표시에 공급되기까지의 처리타이밍을 나타내는 것으로, 각 동화상마다 상기 처리에 요하는 시간에 대응하여 가장 가까운 재생타이밍의 프레임번호를 산출해서 선택하고, 차례로 표시하는 것으로 복수의 동화상데이터를 실시간으로 멀티화면표시시키는 것이 가능하게 된다.

또한 상기 제 1 내지 제 6 실시형태에 있어서는, 어느 쪽도 본 발명을 디지털카메라에 적용한 경우에 대하여 설명한 것인데, 본 발명은 이에 한정되지 않고 디지털카메라에서 사용한 플래시메모리(28)를 장착하는 것으로 복수의 동화상데이터를 멀티화면표시로 재생시키는 것이 가능한, 예를 들면 퍼스널컴퓨터, 휴대정보단말(PDA), 휴대전화, 텔레비젼수상기, 전자앨범장치 등에도 적용 가능한 것은 물론이다.

그 밖에 본 발명은 상기 실시형태에 한정되지 않고, 그 요지를 일탈하지 않는 범위내에서 여러 가지로 변형하여 실시하는 것이 가능한 것으로 한다.

또한 상기 실시형태에는 여러 가지 단계의 발명이 포함되어 있으며, 개시되는 복수의 구성요건에 있어서의 적절한 조합에 의해 여러 가지의 발명이 추출될 수 있다. 예를 들면 실시형태에 나타내어지는 전체구성요건으로부터 몇 개인가의 구성요건이 삭제되어도 발명이 해결하고자 하는 과제의 란에서 서술한 과제의 적어도 하나를 해결할 수 있고, 발명의 효과의 란에서 서술되어 있는 효과의 적어도 하나가 얻어지는 경우에는, 이 구성요건이 삭제된 구성이 발명으로서 추출될 수 있다.

도 1은 본 발명의 제 1 실시형태에 관련되는 디지털카메라의 회로구성을 나타내는 블록도.

도 2는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 3은 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 4A∼도 4D는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생상태를 나타내는 도면.

도 5는 본 발명의 제 2 실시형태에 관련되는 디지털카메라에서의 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 6은 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 7A∼도 7D는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생상태를 나타내는 도면.

도 8은 본 발명의 제 3 실시형태에 관련되는 디지털카메라에서의 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 9는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 10은 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생상태를 나타내는 도면.

도 11은 본 발명의 제 4 실시형태에 관련되는 디지털카메라에서의 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 12는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 13은 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생상태를 나타내는 도면.

도 14는 본 발명의 제 5 실시형태에 관련되는 디지털카메라에서의 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 15는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 16은 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생상태를 나타내는 도면.

도 17은 본 발명의 제 6 실시형태에 관련되는 디지털카메라에서의 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 18은 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생시의 처리내용을 나타내는 흐름도.

도 19는 동 실시형태에 관련되는 복수의 동화상데이터의 동시재생상태를 나타내는 도면이다.

※도면의 주요부분에 대한 부호의 설명

10: 디지털카메라 11: 렌즈

12: CCD 13: 타이밍발생기(TG)

14: 수직드라이버 15: 샘플홀드(S/H)회로

16: AD변환기 17: 컬러프로세스회로

18: DMA컨트롤러 19: DRAM인터페이스(I/F)

20: DRAM 21: CPU(프로세서)

22: VRAM컨트롤러 23: VRAM

24: 디지털비디오엔코더 25: 표시부

26: 키입력부 27: JPEG회로

28: 플래시메모리 29: 전지

Claims

복수의 동화상데이터를 기록하는 메모리와,

이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와,

메모리에 기록되어 있는 복수의 동화상데이터를 디스플레이상에 동시 재생시키는 프로세서를 구비하고,

상기 프로세서는 상기 디스플레이상에 동시 재생되는 복수의 동화상데이터 중에서 동화상재생시간이 가장 긴 동화상데이터를 동화상재생의 기준이 되는 기준동화상데이터로서 선택하고, 남은 다른 동화상데이터에 관해서는 상기 기준동화상데이터와 동화상재생종료시간이 일치하도록 각 동화상데이터의 동화상 재생시간에 근거하여 각 동화상데이터의 동화상 재생 개시시간을 산출하고, 이 산출된 각 동화상 재생 개시시간을 각 동화상데이터에 대응하여 설정하며, 상기 기준동화상데이터의 동화상재생을 개시하고 나서의 경과시간이 각 동화상데이터에 대응하여 설정된 상기 동화상재생개시시간이 된 경우에 각 동화상데이터의 동화상재생을 개시하는 것을 특징으로 하는 동화상재생장치.
제 1 항에 있어서,

프로세서는 다른 동화상데이터의 동화상재생개시시간까지 해당 다른 동화상데이터의 개시프레임화상을 정지화재생시키는 것을 특징으로 하는 동화상재생장치.
제 1 항에 있어서,

메모리에 기록되어 있는 복수의 동화상데이터 중에서 임의의 동화상데이터를 복수 선택하는 선택부를 구비하고,

프로세서는 이 선택부에 의해 선택된 복수의 동화상데이터를 디스플레이상에 동시재생시키는 것을 특징으로 하는 동화상재생장치.
제 1 항에 있어서,

메모리에 기록되어 있는 동화상데이터 중의 임의의 프레임화상을 지정하는 지정부를 구비하고,

프로세서는 이 지정부에 의해 지정된 프레임화상으로부터의 동화상데이터를 디스플레이상에 동화상재생시키는 것을 특징으로 하는 동화상재생장치.
제 1 항에 있어서,

메모리에 기억되어 있는 동화상데이터 중의 임의의 프레임화상을 지정하는 지정부를 구비하고,

프로세서는 이 지정부에 의해 지정된 프레임화상까지의 동화상데이터를 디스플레이상에 동화상재생시키는 것을 특징으로 하는 동화상재생장치.
제 1 항에 있어서,

피사체를 촬상하여 동화상데이터를 출력하는 동화상촬상부를 구비하고,

메모리는 이 동화상촬상부로부터 출력된 동화상데이터를 기록하는 것을 특징으로 하는 동화상재생장치.
3개 이상의 동화상데이터를 기록하는 메모리와,

이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와,

메모리에 기록되어 있는 3개 이상의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하고,

상기 프로세서는 상기 동화상데이터에 포함되는 각 프레임화상을 재생할 때마다 상기 복수의 동화상데이터 중에서 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하인지 여부를 판정하고, 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하임이 판정된 경우에는 상기 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터를 포함하는 상기 복수의 동화상데이터의 재생을 종료하는 것을 특징으로 하는 동화상재생장치.
제 7 항에 있어서,

메모리에 기록되어 있는 복수의 동화상데이터 중에서 임의의 동화상데이터를 3개 이상 선택하는 선택부를 구비하고,

프로세서는 이 선택부에 의해 선택된 3개 이상의 동화상데이터를 디스플레이상에 동시재생시키는 것을 특징으로 하는 동화상재생장치.
제 7 항에 있어서,

메모리에 기록되어 있는 동화상데이터 중의 임의의 프레임화상을 지정하는 지정부를 구비하고,

프로세서는 이 지정부에 의해 지정된 프레임화상으로부터의 동화상데이터를 디스플레이상에 동화상재생시키는 것을 특징으로 하는 동화상재생장치.
제 7 항에 있어서,

메모리에 기억되어 있는 동화상데이터 중의 임의의 프레임화상을 지정하는 지정부를 구비하고,

프로세서는 이 지정부에 의해 지정된 프레임화상까지의 동화상데이터를 디스플레이상에 동화상재생시키는 것을 특징으로 하는 동화상재생장치.
제 7 항에 있어서,

피사체를 촬상하여 동화상데이터를 출력하는 동화상촬상부를 구비하고,

메모리는 이 동화상촬상부로부터 출력된 동화상데이터를 기록하는 것을 특징으로 하는 동화상재생장치.
프레임레이트가 다른 복수의 동화상데이터를 기록하는 메모리와,

이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와,

메모리에 기록되어 있는, 프레임레이트가 다른 복수의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하고,

프로세서는 디스플레이상에 프레임레이트가 다른 복수의 동화상데이터를 동시재생시키기 위해 복수의 동화상데이터 중의 적어도 1개의 동화상데이터의 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 12 항에 있어서,

프로세서는 디스플레이상에 동시재생되는 복수의 동화상데이터의 프레임레이트가 동일한 프레임레이트로 되도록 동화상데이터의 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 13 항에 있어서,

프로세서는 디스플레이상에 동시재생되는 복수의 동화상데이터 중의 어느 쪽인가 1개의 동화상데이터의 프레임레이트와 같아지도록 다른 동화상데이터의 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 14 항에 있어서,

프로세서는 디스플레이상에 동시재생되는 복수의 동화상데이터 중에서 프레임레이트가 가장 높은 동화상데이터의 프레임레이트와 같아지도록 다른 동화상데이터의 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 14 항에 있어서,

프로세서는 디스플레이상에 동시재생되는 복수의 동화상데이터 중에서 프레임레이트가 가장 낮은 동화상데이터의 프레임레이트와 같아지도록 다른 동화상데이터의 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 12 항에 있어서,

프로세서는 동화상데이터 중의 동일프레임화상을 중복하여 재생함으로써 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 12 항에 있어서,

프로세서는 동화상데이터 중의 프레임화상을 솎아내어 재생함으로써 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 12 항에 있어서,

해당 동화상재생장치는 휴대기기이며, 해당 휴대기기의 전원으로 되는 전지의 소모상태를 검출하는 검출부를 구비하고,

프로세서는 이 검출부의 검출결과에 의거하여 디스플레이상에 동시재생되는 복수의 동화상데이터의 맞추어 넣어야 할 프레임레이트를 변경하는 것을 특징으로 하는 동화상재생장치.
제 12 항에 있어서,

메모리에 기록되어 있는 복수의 동화상데이터 중에서 임의의 동화상데이터를 복수 선택하는 선택부를 구비하고,

프로세서는 이 선택부에 의해 선택된 복수의 동화상데이터를 디스플레이상에 동시재생시키는 것을 특징으로 하는 동화상재생장치.
제 12 항에 있어서,

피사체를 촬상하여 동화상데이터를 출력하는 동화상촬상부를 구비하고,

메모리는 이 동화상촬상부로부터 출력된 동화상데이터를 기록하는 것을 특징으로 하는 동화상재생장치.
복수의 동화상데이터를 기록하는 메모리와,

이 메모리에 기록되어 있는 동화상데이터를 표시하는 디스플레이와,

메모리에 기록되어 있는 복수의 동화상데이터를 디스플레이상에 동시재생시키는 프로세서를 구비하고,

상기 프로세서는 상기 동화상데이터 중의 프레임화상을 상기 메모리에서 독출하여 상기 디스플레이에 표시시키는 재생처리를 상기 복수의 동화상데이터에 대하여 시분할로 실시하고, 상기 재생처리에 요하는 시간에 따라서 각 동화상데이터중의 프레임화상을 솎아내어 동화상재생을 실시하는 것을 특징으로 하는 동화상재생장치.
동화상데이터를 디스플레이상에 재생시키기 위한 동화상재생방법이며,

메모리에 기록되어 있는 복수의 동화상데이터를 디스플레이상에 동시재생시키는 스텝과,

상기 디스플레이상에 동시 재생되는 복수의 동화상데이터 중에서 동화상재생시간이 가장 긴 동화상데이터를 동화상재생의 기준이 되는 기준동화상데이터로서 선택하고, 남은 다른 동화상데이터에 관해서는 상기 기준동화상데이터와 동화상재생종료시간이 일치하도록 각 동화상데이터의 동화상 재생시간에 근거하여 각 동화상데이터의 동화상 재생 개시시간을 산출하고, 이 산출된 각 동화상 재생 개시시간을 각 동화상데이터에 대응하여 설정하며, 상기 기준동화상데이터의 동화상재생을 개시하고 나서의 경과시간이 각 동화상데이터에 대응하여 설정된 상기 동화상재생개시시간이 된 경우에 각 동화상데이터의 동화상재생을 개시하는 스텝으로 이루어지는 것을 특징으로 하는 동화상재생방법.
동화상데이터를 디스플레이상에 재생시키기 위한 동화상재생방법이며,

메모리에 기록되어 있는 3개 이상의 동화상데이터를 디스플레이상에 동시재생시키는 스텝과,

상기 동화상데이터에 포함되는 각 프레임화상을 재생할 때마다 상기 복수의 동화상데이터 중에서 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하인지 여부를 판정하고, 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하임이 판정된 경우에는 상기 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터를 포함하는 상기 복수의 동화상데이터의 재생을 종료하는 스텝으로 이루어지는 것을 특징으로 하는 동화상재생방법.
동화상데이터를 디스플레이상에 재생시키기 위한 동화상재생방법이며,

메모리에 기록되어 있는, 프레임레이트가 다른 복수의 동화상데이터를 디스플레이상에 동시재생시키는 스텝과,

디스플레이상에 프레임레이트가 다른 복수의 동화상데이터를 동시재생시키기 위해 복수의 동화상데이터 중의 적어도 1개의 동화상데이터의 프레임레이트를 변경하는 스텝으로 이루어지는 것을 특징으로 하는 동화상재생방법.
제 1 항에 있어서,

상기 동화상데이터의 프레임 레이트에 대응한 시간간격을 미리 설정하는 것에 따라 이 시간간격마다 인터럽트신호를 반복 발생하는 재생타이머를 구비하고,

상기 프로세서는 상기 재생타이머에서의 인터럽트신호가 발생할 때마다 기존에 재생이 개시되어 있는 동화상데이터에 포함되는 각 프레임동화상을 차례로 표시시키는 처리와, 상기 기준동화상데이터의 동화상재생을 개시하고나서의 경과시간이 각 동화상데이터에 대응하여 설정된 상기 동화상 재생 개시시간이 되었는지 여부를 판정하고, 동화상 재생 개시시간이 된 동화상데이터가 있는 경우에는 그 동화상데이터의 동화상재생을 개시시키는 처리를 실행하는 것을 특징으로 하는 동화상재생장치.
제 7 항에 있어서,

상기 동화상데이터의 프레임 레이트에 대응한 시간간격을 미리 설정하는 것에 따라 이 시간간격마다 인터럽트신호를 반복 발생하는 재생타이머를 구비하고,

상기 프로세서는 상기 재생타이머에서의 인터럽트신호가 발생할 때마다 각 동영상데이터에 포함되는 각 프레임동화상을 차례로 표시시키는 처리와, 상기 복수의 동화상데이터중에서 최후의 프레임동화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하인지 여부를 판정하고, 최후의 프레임화상의 재생이 종료하고 있지 않은 동화상데이터의 수가 1 이하라고 판정된 경우에 상기 최후 프레임화상의 재생이 종료하고 있지 않은 동화상데이터를 포함하는 상기 복수의 동화상데이터의 재생을 종료하는 처리를 실행하는 것을 특징으로 하는 동화상재생장치.
제 22 항에 있어서,

동화상재생을 개시하고 나서의 경과시간을 계측하는 타이머를 구비하고,

상기 프로세서는 상기 타이머에 의하여 계측되는 경과시간을 각 동화상데이터의 프레임 레이트에서 나눈 값을 산출하고, 이 산출된 값에 가장 가까운 프레임번호의 프레임화상을 각 동화상데이터에서 선택하여 재생하는 처리를 실행하는 것을 특징으로 하는 동화상재생장치.