JP4758240B2

JP4758240B2 - camera

Info

Publication number: JP4758240B2
Application number: JP2006027612A
Authority: JP
Inventors: 修野中
Original assignee: Olympus Imaging Corp
Current assignee: Olympus Imaging Corp
Priority date: 2006-02-03
Filing date: 2006-02-03
Publication date: 2011-08-24
Anticipated expiration: 2026-02-03
Also published as: JP2007208850A

Description

この発明は、カメラの記録制御に関して、特に静止画撮影と連続撮影が同時にできる機能を備えるカメラの記録制御技術に関する。 The present invention relates to camera recording control, and more particularly to a camera recording control technique having a function capable of simultaneously capturing still images and continuous shooting.

動画カメラ（ムービー）の記録媒体は、従来その容量からテープに限られたいたが、近年は、ＤＶＤ（Digital Versatile Disk）だけでなくハードディスクやフラッシュメモリも、利用されるようになっている。特にデジタルメモリは、生産技術の進歩によって、大容量のメモリが安価で入手できるような状況にある。そこで、固体メモリを主に利用するデジタルカメラでも、静止画だけではなく動画も記録できるものも商品化されている。とはいえ、デジタルカメラのメモリ量は、例えハードディスクを搭載しても、動画は長時間記録するほど大きくはなく、ＭＰＥＧで圧縮しても長時間記録は容易でない。 Recording media for video cameras (movies) have been limited to tapes due to their capacity, but in recent years not only DVDs (Digital Versatile Disks) but also hard disks and flash memories have been used. Digital memory, in particular, is in a situation where a large-capacity memory can be obtained at a low price due to progress in production technology. Therefore, even digital cameras that mainly use solid-state memory are commercially available that can record not only still images but also moving images. However, the amount of memory of a digital camera is not so large that a moving image is recorded for a long time even if a hard disk is installed, and long-time recording is not easy even if it is compressed by MPEG.

そこで、限られたメモリ量のデジタルカメラでは、以下のようにメモリを効率よく使って動画を記録することが提案されている。例えば、動画撮影中に所定の指示があった場合に圧縮率を下げて画像を記録するようにして、重要でない部分は高い圧縮率で記録することで、長時間記録できるようにするカメラが提案されている（特許文献１）。また、記録された画像の所定の部分を切出して高圧縮率で再記録することでデータ量を低減するカメラも提案されている（特許文献２）
特開２０００−３３３１３０号特開２００２−１０２０９号 Therefore, it has been proposed that a digital camera with a limited amount of memory records moving images using the memory efficiently as follows. For example, a camera is proposed that can record for a long time by recording images with a low compression ratio when a predetermined instruction is given during movie shooting, and recording a non-important part at a high compression ratio. (Patent Document 1). There has also been proposed a camera that reduces a data amount by cutting out a predetermined portion of a recorded image and re-recording it at a high compression rate (Patent Document 2).
JP 2000-333130 A JP 2002-10209 A

特許文献１のようなカメラでは、撮影中に圧縮率を低圧縮にする指示を行う必要があるが、その指示に気をとられ撮影に集中しずらいという課題がある。また、高圧縮率で記録した画像については、撮影後に低圧縮率の画像に変更することはできないという課題もある。また、特許文献２のようなカメラでは、データ低減領域の指定に手間取るという課題もある。画像の領域の一部を高圧縮率に変換するためには、例えば主要被写体以外の背景を高圧縮率領域として指定しなければならない。デジタルカメラでは、連続撮影や動画撮影中であっても、高品位の静止画像が簡単に撮影できることが必要な条件である。
上記課題に鑑み、高品位な静止画と長時間の動画像の両方を得ることができるカメラを提供することを本発明の目的とする。 In a camera like Patent Document 1, it is necessary to give an instruction to reduce the compression rate during shooting. However, there is a problem that it is difficult to concentrate on shooting because the instruction is taken care of. Another problem is that an image recorded with a high compression rate cannot be changed to an image with a low compression rate after shooting. In addition, the camera as in Patent Document 2 has a problem that it takes time to specify a data reduction area. In order to convert a part of the image area into a high compression ratio, for example, a background other than the main subject must be designated as the high compression ratio area. In digital cameras, it is a necessary condition that high-quality still images can be easily taken even during continuous shooting or moving image shooting.
In view of the above problems, an object of the present invention is to provide a camera capable of obtaining both a high-quality still image and a long-time moving image.

上記目的を達成するために、本発明によるカメラは、連続画像を撮影する撮像部と、画像データを圧縮する圧縮部と、表示部に第１記録部及び第２記録部に記録された画像を同時に表示する再生部と、撮影時に前記第２記録部に圧縮処理された前記連続画像を記録すると同時に、前記連続画像を前記第２記録部への圧縮よりも低圧縮処理にて前記第１記録部に記録し、撮影後に当該第１記録部に記録された低圧縮処理の連続画像の中で選択された静止画像を前記第２記録部に転送し、当該転送後当該低圧縮処理の連続画像を前記第１記録部から消去する記録制御部と、再生時には、前記第２記録部に記録された前記静止画を前記第１記録部に転送してから、前記第１記録部に記録された静止画像と、第２記録部に記録された連続画像を再生して、前記表示部に同時に表示を行わせるよう前記再生部を制御する制御部と、を備えることを特徴とする。 In order to achieve the above object, a camera according to the present invention includes an imaging unit that captures continuous images, a compression unit that compresses image data, and images recorded in a first recording unit and a second recording unit on a display unit. The playback unit for displaying simultaneously and the continuous image compressed in the second recording unit at the time of shooting are recorded, and at the same time, the continuous recording of the first recording is performed in a lower compression process than the compression to the second recording unit. A still image selected from the low-compression continuous images recorded in the first recording unit after shooting is transferred to the second recording unit, and after the transfer, the low-compression continuous images A recording control unit for deleting the image from the first recording unit, and at the time of reproduction, the still image recorded in the second recording unit is transferred to the first recording unit and then recorded in the first recording unit. a still image, the continuous image recorded on the second recording unit reproduced , Characterized in that it comprises a control unit for controlling the reproduction unit so as to perform simultaneously displayed on the display unit.

この発明によれば、高品位な静止画と長時間の動画像の両方を得ることのできるカメラを提供することができる。 According to the present invention, it is possible to provide a camera capable of obtaining both a high-quality still image and a long-time moving image.

以下本発明を実施するための最良の形態を図面を参照して説明する。 The best mode for carrying out the present invention will be described below with reference to the drawings.

図１から図５を用いて、実施例1についてを説明する。図１は、本発明が適用されたデジタルカメラの全体ブロック図である。カメラには、ＭＰＵ１と、ＭＰＵ１に接続される操作部１６（スイッチ１６ａ、１６ｂ、１６ｃ）および第１記録部７が設けられる。第１記録部７は、不揮発性でかつ記録可能なメモリで例えばフラッシュＲＯＭからなる。第１記録部７には、カメラ処理を行う制御用のプログラムが格納されるとともに、後述するように撮影中の画像データも一時的格納される。ＭＰＵ１は、第１記録部７に記憶されたプログラムに従って、撮影や再生等カメラの全体の制御を司る制御部である。ＭＰＵ１の中の記録制御部１ａは、プログラムに従って撮影時に動作するＭＰＵ１の１つの機能で、画像データの記録を制御する。操作部１６の一例として、スイッチ１６ａ、１６ｂ、１６ｃは、レリース、モード切替指示、電源のＯＮ／ＯＦＦ等の撮影者の指示を、ＭＰＵ１に通知する。 Example 1 will be described with reference to FIGS. FIG. 1 is an overall block diagram of a digital camera to which the present invention is applied. The camera is provided with an MPU 1, an operation unit 16 (switches 16 a, 16 b, 16 c) connected to the MPU 1, and a first recording unit 7. The first recording unit 7 is a non-volatile and recordable memory, for example, a flash ROM. The first recording unit 7 stores a control program for performing camera processing, and temporarily stores image data being shot as described later. The MPU 1 is a control unit that controls the entire camera, such as shooting and playback, according to a program stored in the first recording unit 7. The recording control unit 1a in the MPU 1 controls the recording of image data with one function of the MPU 1 that operates at the time of shooting according to a program. As an example of the operation unit 16, the switches 16a, 16b, and 16c notify the MPU 1 of a photographer's instruction such as release, mode switching instruction, and power ON / OFF.

カメラには、撮像部１９、信号処理部５、ＲＡＭ６や第２記録部９が設けられる。撮像部１９は、撮影レンズ２、撮像素子３、アナログフロントエンド４から構成される。撮影レンズ２から入射した被写体２０の像が、ＣＣＤやＣＭＯＳからなる撮像素子３に結像し電気信号に変換される。アナログフロントエンド４は、撮像素子３からの電気信号をＡＤ変換してデジタル画像データとして出力する。信号処理部５は、画像データに対して色補正や信号圧縮などの処理を行うものである。ＲＡＭ６は、種々の演算データの一時的な格納や圧縮伸張時の画像データのワークエリアとして使用される。 The camera includes an imaging unit 19, a signal processing unit 5, a RAM 6, and a second recording unit 9. The imaging unit 19 includes a photographic lens 2, an imaging element 3, and an analog front end 4. An image of the subject 20 incident from the photographing lens 2 is formed on the image sensor 3 made of a CCD or CMOS and converted into an electrical signal. The analog front end 4 AD-converts the electrical signal from the image sensor 3 and outputs it as digital image data. The signal processing unit 5 performs processing such as color correction and signal compression on the image data. The RAM 6 is used as a work area for temporary storage of various calculation data and image data during compression / decompression.

信号処理部５内には、補助ブロック５ａの他に、他圧縮部５ｂ、伸張部５ｃ、切換え部５ｄ等が設けられる。補助ブロック５ａは、画像処理時に補正のかけ方を変更して、画像の特徴を判定したりして特定の信号を付加するものである。さらに圧縮部５ｂには、画像データを第１記録部７や第２記録部９に記録するための例えばＪＰＥＧ圧縮部やＭＰＥＧ圧縮部、また音声圧縮等の音声圧縮部が設けられる。伸張部５ｃは、圧縮された画像データをもとに戻す処理を行う部である。切換え部５ｄは、圧縮部５ｂの圧縮率の切換として、ＪＰＥＧ圧縮部の圧縮率の切換えや、ＪＰＥＧ圧縮部とＭＰＥＧ圧縮部の切換え等を行う。 In the signal processing unit 5, in addition to the auxiliary block 5a, another compression unit 5b, an expansion unit 5c, a switching unit 5d, and the like are provided. The auxiliary block 5a adds a specific signal by changing the correction method during image processing, determining the characteristics of the image, and the like. Further, the compression unit 5b is provided with, for example, a JPEG compression unit or an MPEG compression unit for recording image data in the first recording unit 7 or the second recording unit 9, and an audio compression unit such as audio compression. The decompressing unit 5c is a unit that performs processing for restoring the compressed image data. The switching unit 5d performs switching of the compression rate of the JPEG compression unit, switching of the JPEG compression unit and the MPEG compression unit, and the like as switching of the compression rate of the compression unit 5b.

信号処理部５で処理された画像データが撮影画像として第１記録部７や第２記録部９に記録される。第２記録部９は、画像データの保存用メモリで、例えば、フラッシュメモリやハードディスクで構成される。第２記録部９には、送信用メモリ９ａの領域も設けられる。 The image data processed by the signal processing unit 5 is recorded in the first recording unit 7 and the second recording unit 9 as a captured image. The second recording unit 9 is a memory for storing image data, and includes, for example, a flash memory or a hard disk. The second recording unit 9 is also provided with an area for a transmission memory 9a.

また、カメラには、音声記録用として、マイク１２、スピーカ１３が設けられる。上記の圧縮部５ｂの音声圧縮部で圧縮処理がされて、第１記録部７や第２記録部９に記録される。記録された音声は、伸張処理されてスピーカ１３から出力される。 Further, the camera is provided with a microphone 12 and a speaker 13 for voice recording. Compression processing is performed by the audio compression unit of the compression unit 5 b described above and is recorded in the first recording unit 7 and the second recording unit 9. The recorded sound is decompressed and output from the speaker 13.

さらに、カメラには画像表示用の表示部８、プリント信号出力部１０、無線送信部１１、時計部１４及び位置検出部１５が設けられる。撮影時には、画像確認用として、表示部８に撮像素子３から出力される画像が逐次再生して表示される。再生時には、第１記録部７や第２記録部９から記録された圧縮画像が読み出され、伸張部５ｃで伸張されて表示部８に表示される。 Further, the camera is provided with a display unit 8 for image display, a print signal output unit 10, a wireless transmission unit 11, a clock unit 14, and a position detection unit 15. At the time of shooting, images output from the image sensor 3 are sequentially reproduced and displayed on the display unit 8 for image confirmation. At the time of reproduction, the compressed image recorded from the first recording unit 7 and the second recording unit 9 is read out, expanded by the expansion unit 5c, and displayed on the display unit 8.

プリント信号出力部１０は、接続されるプリンタに対して、撮影した画像データを出力させるインターフェース部である。無線送信部１１は、プリンタやＰＣ（Personal Computer）に無線で画像データを送信するインターフェース部である。時計部１４は、撮影日時の記録用や露出時間や動画の撮影時間を記録したり、所定のタイミング間隔を測定するときに用いられる。位置検出部１５は、ＧＰＳセンサーで構成され、撮影した位置を検出して位置データをＭＰＵ１に通知する。検出された撮影位置が画像データに付帯して記録される。時計部１４と位置検出部１５は、ＭＰＵ１に接続される。 The print signal output unit 10 is an interface unit that outputs captured image data to a connected printer. The wireless transmission unit 11 is an interface unit that wirelessly transmits image data to a printer or a PC (Personal Computer). The clock unit 14 is used for recording the shooting date and time, recording the exposure time and the shooting time of a moving image, and measuring a predetermined timing interval. The position detection unit 15 includes a GPS sensor, detects a captured position, and notifies the MPU 1 of position data. The detected shooting position is recorded along with the image data. The clock unit 14 and the position detection unit 15 are connected to the MPU 1.

図２は、画像記録を詳細に説明するための機能ブロック図である。図２は、図１の全体ブロック図から本発明の特徴たる画像記録に関する機能部を抽出したものである。図１と同一の構成部位は同じ符号で示し、その説明は省略する。信号処理部５内部には、前述したように、圧縮部５ｂ、伸張部５ｃ、切換え部５ｄが設けられる。また、第２記録部９では、画像データを記録するファイルは、第１ファイル９ｂと第２ファイル９ｃとして区別して記録される。第１ファイル９ｂは、撮影画像が高画質の画像、代表的には静止画として保存されるファイルである。第２ファイル９ｃは、撮影画像が低画質の画像、代表的には動画として保存されるファイルである。 FIG. 2 is a functional block diagram for explaining image recording in detail. FIG. 2 is a functional block relating to image recording, which is a feature of the present invention, extracted from the overall block diagram of FIG. The same components as those in FIG. 1 are denoted by the same reference numerals, and description thereof is omitted. Inside the signal processing unit 5, as described above, the compression unit 5b, the expansion unit 5c, and the switching unit 5d are provided. In the second recording unit 9, the files for recording the image data are recorded separately as the first file 9b and the second file 9c. The first file 9b is a file in which the captured image is saved as a high-quality image, typically a still image. The second file 9c is a file in which the captured image is saved as a low-quality image, typically a moving image.

図２のブロック図の動作を説明する。撮影時には、撮像部１９で被写体像２０が撮影され、撮像部１９から画像データが連続して出力される。この画像データは、切換え部５ｄにより第１の圧縮率に設定された圧縮部５ｂで圧縮され、第１記録部７に記録される。ここで第１の圧縮率は、それほど高くない圧縮率である。これにより１回の撮影で、高品位の画像が複数枚第１記録部７に記録される。しかし、このままでは第１記録部７が満杯になって（斜線部がデータ量を示す）、次の撮影が行えなくなくなる。そこで、撮影後には、図２（Ｂ）で示すように、第１記録部７の画像データを第２記録部９に転送する。ただし、このうち高品質で残したいと指示された画像データについては、そのまま転送する。一方、それ以外の画像データはまず伸張部５ｃで一旦伸張してから、切換え部５ｄで第２の圧縮率に設定された圧縮部５ｂで再圧縮して、第２記録部９に記録する。第２の圧縮率は第１の圧縮率より高い圧縮率である。 The operation of the block diagram of FIG. 2 will be described. At the time of photographing, the subject image 20 is photographed by the imaging unit 19 and image data is continuously output from the imaging unit 19. The image data is compressed by the compression unit 5 b set to the first compression rate by the switching unit 5 d and recorded in the first recording unit 7. Here, the first compression rate is a compression rate that is not so high. As a result, a plurality of high-quality images are recorded in the first recording unit 7 in one shooting. However, in this state, the first recording unit 7 becomes full (the hatched portion indicates the data amount), and the next shooting cannot be performed. Therefore, after shooting, the image data of the first recording unit 7 is transferred to the second recording unit 9 as shown in FIG. However, the image data instructed to remain high quality is transferred as it is. On the other hand, other image data is first decompressed by the decompression unit 5c, then re-compressed by the compression unit 5b set to the second compression rate by the switching unit 5d, and recorded in the second recording unit 9. The second compression rate is higher than the first compression rate.

図３は、第１記録部７から第２記録部９へ転送される画像データの流れを示す図である。図２（Ｂ）の動作をさらに詳しく説明するための図である。図３（Ａ）は、指定された画像データを第２記録部９へ転送する流れを示す図である。図３（Ｂ）は、図３（Ａ）の処理後に、画像データ全体を第２記録部９に転送する流れである。この図では、第１記録部７と第２記録部９のメモリ量を模式的に示している。今回撮影した全画像のデータ量をシングルハッチングで示し、その中で指定された画像を指定画像ｍとし、指定画像ｍのデータ量をダブルハッチングで示す。 FIG. 3 is a diagram illustrating a flow of image data transferred from the first recording unit 7 to the second recording unit 9. It is a figure for demonstrating the operation | movement of FIG.2 (B) further in detail. FIG. 3A is a diagram showing a flow of transferring designated image data to the second recording unit 9. FIG. 3B is a flow of transferring the entire image data to the second recording unit 9 after the processing of FIG. In this figure, memory amounts of the first recording unit 7 and the second recording unit 9 are schematically shown. The data amount of all the images taken this time is indicated by single hatching, the image specified therein is designated as designated image m, and the data amount of designated image m is indicated by double hatching.

図３（Ａ）で示すように、撮影後に撮影者により指定画像が指定されると、第１記録部７の中の指定画像ｍの画像データのみがコピーされて第２記録部９に転送される。転送に際しては、圧縮部５ｂや伸張部５ｃを通さないで、そのまま第２記録部９に転送されて、第１ファイル９ｂとして記録される。なお、この段階では、指定画像ｍの画像データは、第１記録部７と第２記録部９の両方に存在している。 As shown in FIG. 3A, when the designated image is designated by the photographer after photographing, only the image data of the designated image m in the first recording unit 7 is copied and transferred to the second recording unit 9. The At the time of transfer, the data is transferred to the second recording unit 9 as it is without passing through the compression unit 5b and the expansion unit 5c, and is recorded as the first file 9b. At this stage, the image data of the designated image m exists in both the first recording unit 7 and the second recording unit 9.

そして、図３（Ｂ）に進む。第１記録部７の全画像データは、第１記録部７から第２記録部９に転送されるが、この際には、伸張部５ｃで一旦伸張され、再度圧縮部５ｂで圧縮される。そしてこのときの圧縮部５ｂの圧縮率は、切換え部５ｄによって、第２の圧縮率に設定される。第２の圧縮率は、第１記録部７に記録したときよりも大きな圧縮率である。そこで、第２記録部９に転送記録されるデータ量は、第１記録部７のデータ量よりも小さくなる。そして、転送された画像データは、第２記録部９で第２ファイル９ｃとして記録される。なお転送後は、第１記録部７は転送した全画像は消去される。 Then, the process proceeds to FIG. All the image data in the first recording unit 7 is transferred from the first recording unit 7 to the second recording unit 9. At this time, the image data is temporarily expanded by the expansion unit 5 c and compressed again by the compression unit 5 b. The compression rate of the compression unit 5b at this time is set to the second compression rate by the switching unit 5d. The second compression rate is a higher compression rate than that recorded in the first recording unit 7. Therefore, the data amount transferred and recorded in the second recording unit 9 is smaller than the data amount of the first recording unit 7. The transferred image data is recorded as a second file 9c by the second recording unit 9. After the transfer, the first recording unit 7 erases all transferred images.

図４は、上記図２，３で説明した画像データの転送が実行される撮影時の処理手順を示すフローチャートである。なおこの処理は、主に記録制御部１ａの制御により実行される。カメラは動画撮影モードまたは連写モードに設定されているとする。撮影者により動画の撮影及び録画の指示がレリース押下によりされる。レリース指示を検知して撮影を実行し、撮像部１９で撮影された連続の画像データを第1記録部７に低圧縮率（第１の圧縮率）で記録させる（ステップＳ１）。撮影者による終了指示があるまで撮影が続行される（ステップＳ２）。終了指示があったと判断すると（ステップＳ２Ｙ）、撮影の終了動作をするとともに、第1記録部７に記録された撮影画像を表示部８に表示させる（ステップＳ３）。 FIG. 4 is a flowchart showing a processing procedure at the time of shooting in which the transfer of the image data described in FIGS. This process is mainly executed under the control of the recording control unit 1a. Assume that the camera is set to the moving image shooting mode or the continuous shooting mode. The photographer gives an instruction to shoot and record a moving image by pressing the release button. A release instruction is detected and shooting is performed, and continuous image data shot by the imaging unit 19 is recorded in the first recording unit 7 at a low compression rate (first compression rate) (step S1). Shooting is continued until an end instruction is issued by the photographer (step S2). If it is determined that there is an end instruction (step S2Y), the photographing end operation is performed, and the captured image recorded in the first recording unit 7 is displayed on the display unit 8 (step S3).

図５は、表示部８に表示される画像の例である。図５（Ａ）は、撮影された連続画像を撮影の順番に並べて示したものである。Ｐ１が撮影最初の画像で、Ｐ２、Ｐ３がその次に順に撮影された画像を示す。撮影に費やした時間をｔ０とし、全撮影枚数を９コマとし、一定間隔で撮影されたとする。各撮影時間は、最初の画像Ｐ１ではｔ＝０、Ｐ２ではｔ＝（１／９）×ｔ０、Ｐ３ではｔ＝（２／９）×ｔ０となる。 FIG. 5 is an example of an image displayed on the display unit 8. FIG. 5A shows a sequence of captured images arranged in the order of shooting. P1 is the first image taken, and P2 and P3 are the next images taken in order. It is assumed that the time spent for shooting is t0, the total number of shots is 9 frames, and shooting is performed at regular intervals. Each shooting time is t = 0 in the first image P1, t = (1/9) × t0 in P2, and t = (2/9) × t0 in P3.

図５（Ｂ）は、ステップＳ３で表示部８に表示される画面である。撮影画像から静止画像を選択するための画面である。上記Ｐ１、Ｐ２等の画像を縮小して、表示部８に撮影の順番に表示させる。カメラ背面の表示部８の横には、操作部１６に含まれるＸＹ操作キー１６−１、選択ボタン１６−２が設けられている。撮影者は、この画面で、静止画像として保存したい画像を選択する。選択された画像には、画像を囲む枠である選択マークＱが付される。撮影者は、ＸＹ操作キー１６−１で選択マークＱを移動させて特定の画像を選択する。そして、選択ボタン１６−２を用いて確定する。 FIG. 5B is a screen displayed on the display unit 8 in step S3. It is a screen for selecting a still image from a photographed image. The images such as P1 and P2 are reduced and displayed on the display unit 8 in the order of shooting. An XY operation key 16-1 and a selection button 16-2 included in the operation unit 16 are provided beside the display unit 8 on the back of the camera. The photographer selects an image to be saved as a still image on this screen. A selection mark Q, which is a frame surrounding the image, is attached to the selected image. The photographer selects the specific image by moving the selection mark Q with the XY operation key 16-1. And it confirms using the selection button 16-2.

図４に戻る。上記の画像選択がされたかを判断して（ステップＳ４Ｙ）、選択された選択画像を第１記録部７からそのまま第２記録部９に転送して、第１ファイル９ｂとして記録する（ステップＳ５）。
そして、選択画像がない場合および選択画像の転送後は、ステップＳ６に進む。ステップＳ６では、、第１記録部７に記録されている連続画像データの全てを伸張部５ｃで伸張してから、高い圧縮率（第２の圧縮率）で圧縮部５ｂで再度圧縮して、第２記録部９に記録する。この連続画像データを第２記録部９で第２ファイル９ｃとして記録する。第２記録部９への記録後に、転送された第１記録部７の連続画像データを消去する。 Returning to FIG. It is determined whether or not the image is selected (step S4Y), and the selected image is transferred from the first recording unit 7 to the second recording unit 9 as it is and recorded as the first file 9b (step S5). .
Then, when there is no selected image and after the selected image is transferred, the process proceeds to step S6. In step S6, all the continuous image data recorded in the first recording unit 7 is expanded by the expansion unit 5c, and then compressed again by the compression unit 5b at a high compression rate (second compression rate). Records in the second recording unit 9. The continuous image data is recorded by the second recording unit 9 as the second file 9c. After the recording in the second recording unit 9, the transferred continuous image data in the first recording unit 7 is erased.

以上のような処理により、第２記録部９には、高画質画像で短時間の画像である第１ファイルと、長時間の録画を行い動画として鑑賞できる画質レベルの第２ファイルが得られる。 Through the processing as described above, the second recording unit 9 obtains a first file that is a high-quality image and a short-time image, and a second file that has an image-quality level that allows long-time recording and viewing as a moving image.

図５（Ｃ）は、第１ファイルと第２ファイルの画像が同時に再生された画面を示す。表示部８には、大きなサイズで第１ファイルとして記録された画像８ａを表示し、小さなサイズで第２ファイルとして記録された画像８ｂを表示させる。これにより、表情もわかり動きもわかる鑑賞が可能となる。 FIG. 5C shows a screen on which images of the first file and the second file are reproduced simultaneously. The display unit 8 displays an image 8a recorded as a first file with a large size and an image 8b recorded as a second file with a small size. As a result, appreciation that understands facial expressions and movements becomes possible.

なお、上記で圧縮部５ｂの具体的構成は色々あるが、例として２つを示す。１つは、圧縮部としてＪＰＥＧ（Joint Photographic Coding Experts Group）圧縮部を備える例である。このときは、第１の圧縮率と第２圧縮率でＪＰＥＧ圧縮の圧縮率を変更すればよい。もう１つは、ＪＰＥＧ圧縮５ｂａとＭＰＥＧ（Motion Picture Experts Group）圧縮５ｂｂの２つの異なる圧縮部を備える例である。このときは、第１の圧縮率を適用する場合にはＪＰＥＧ圧縮５ｂａ、第２の圧縮率を適用するときはＭＰＥＧ圧縮５ｂｂをそれぞれ用いればよい。連写画像では、ＪＰＥＧ圧縮５ｂａにより圧縮される画像データよりも、ＭＰＥＧ圧縮５ｂｂにより圧縮される画像データの方が小さくなるからである。 Although there are various specific configurations of the compression unit 5b in the above, two are shown as examples. One is an example in which a JPEG (Joint Photographic Coding Experts Group) compression unit is provided as the compression unit. In this case, the JPEG compression rate may be changed between the first compression rate and the second compression rate. The other is an example provided with two different compression units, JPEG compression 5ba and MPEG (Motion Picture Experts Group) compression 5bb. In this case, JPEG compression 5ba may be used when the first compression ratio is applied, and MPEG compression 5bb may be used when the second compression ratio is applied. This is because in the continuous shot image, the image data compressed by the MPEG compression 5bb is smaller than the image data compressed by the JPEG compression 5ba.

以上のように、実施例１のカメラによれば、１回の撮影をするだけで、画質の良いところは静止画として鑑賞し、長く撮影した部分は動画として鑑賞するといった使い方が可能となる。従来動画を撮影するカメラでは、次のような不満があり、気楽に動画を動画を楽しむ用意が不十分であった。
１）動画は撮影したあと鑑賞するのに時間がかかる。
２）撮影した画像すべての鑑賞するのに、静止画に比べて鑑賞する機会も限られる。
３）しかし、メモリ容量を多く必要とする。
このような不満を解消するために、本発明は有効である。つまり、動画の中で重要な部分のみ選んで高画質のみで残しておくので、１）の鑑賞時間はその選択した部分のみ鑑賞するからかなり改善される。 As described above, according to the camera of the first embodiment, it is possible to view a portion with good image quality as a still image and view a long portion as a moving image only by shooting once. Conventional cameras that shoot moving images have the following dissatisfaction and are not ready to enjoy moving images with ease.
1) It takes time to watch videos after shooting.
2) Opportunities for viewing all captured images are limited compared to still images.
3) However, a large memory capacity is required.
In order to eliminate such dissatisfaction, the present invention is effective. That is, since only an important part in the moving image is selected and left with only high image quality, the viewing time of 1) is considerably improved because only the selected part is viewed.

また２）のように撮影画像の鑑賞機会が少ないものに対して、３）のように容量を多く必要とするのは無駄なので、本発明ではそのときの様子や表情などを折りにふれ回想するための第１ファイルと、主に動きの面白さの記録などを行うためのあまり鑑賞の機会のない第２ファイルを分けて持つようにした。これにより、鑑賞や画像保存に負担のない動画撮影用カメラを提供することができる。 Also, it is useless to require a large capacity as in 3) in contrast to the case where there are few opportunities for viewing captured images as in 2), so in the present invention, the state and expression at that time are recollected. The first file for this purpose and the second file with little opportunity for viewing, mainly for recording the fun of the movement, etc. are provided separately. As a result, it is possible to provide a video shooting camera that does not have a burden on viewing and image storage.

また、第１ファイルについては静止画としても十分に鑑賞が可能な圧縮率にしておけば、サービスサイズのプリントにも耐えられるような画質が得られる。また、最近はＣＣＤやＣＭＯＳ撮像センサや画像読み出し回路の発達によって、ハイビジョン画像で３０フレーム／秒の撮影が可能となっているので、このようなデバイスを使い適度な圧縮で記録しておけば、動画撮影であっても全くプリント画質にも問題のない記録ファイル（第１ファイル）の作成も可能となる。 In addition, if the first file has a compression rate that allows sufficient viewing even as a still image, an image quality that can withstand service-size printing can be obtained. Recently, with the development of CCD and CMOS image sensors and image readout circuits, high-definition images can be taken at 30 frames / second, so if you use such a device and record with moderate compression, It is possible to create a recording file (first file) with no problem in print image quality even when shooting moving images.

次に、実施例１として、さらに大きな写真プリントを得るための高解像度画像を作成する方法を説明する。以下、図６から図８を用いて実施例２を説明する。 Next, as Example 1, a method for creating a high-resolution image for obtaining a larger photographic print will be described. Hereinafter, the second embodiment will be described with reference to FIGS.

図６は、高解像度画像作成の原理を説明するための図である。図６各図はいずれも撮像素子３の画素マップの一部を模式的に示したものである。１区画が１画素に対応し、Ｐ１１、Ｐ１２、Ｐ１３等が各画素の番号を示す。まず図6（Ａ）は、撮像素子３の撮像面に結像された光像をラインＬとして斜線で示すものである。ここで、ラインＬの幅は、撮像素子３の１画素の幅Ｗよりも細い幅とする。 FIG. 6 is a diagram for explaining the principle of creating a high-resolution image. Each drawing in FIG. 6 schematically shows a part of the pixel map of the image sensor 3. One section corresponds to one pixel, and P11, P12, P13, etc. indicate the number of each pixel. First, FIG. 6A shows a light image formed on the image pickup surface of the image pickup device 3 as a line L by hatching. Here, the width of the line L is smaller than the width W of one pixel of the image sensor 3.

同図（Ｂ）は、このラインＬによる信号が出力される画素を斜線で示す。ｔ＝ｔ１時点での状態である。画素の幅ＷはラインＬよりも広いので、画素Ｐ１２からは、ラインＬとラインＬの周囲の画像が混じった状態の信号が出力される。画素Ｐ１２の下の画素（斜線）も同様である。当然に画素以下の細かさで、再現することはできない。 FIG. 5B shows the pixels to which signals from the line L are output by hatching. This is the state at time t = t1. Since the pixel width W is wider than that of the line L, the pixel P12 outputs a signal in which the line L and the image around the line L are mixed. The same applies to the pixels (hatched lines) below the pixel P12. Naturally, it cannot be reproduced with the fineness below the pixel.

同図（Ｃ）は、さらに同図（Ｂ）から所定時間経過後（ｔ＝ｔ２）のラインＬによる信号が出力される画素を示す図である。ここでｔ＝ｔ１時点から、ラインＬと撮像素子３の相対位置が、ちょうど半画素分（Ｗ／２）であるずれΔＸ分、本図で右方向にずれたとする。ずれの原因は、例えば手振れや被写体のうごきによる。ΔＸの算出については後述する。（Ｂ）と同様に信号出力される画素を斜線で示す。そして、この半画素分ずれた（Ｃ）の状態でも、例えば画素Ｐ１２からはラインＬの信号が出力される。一方、画素Ｐ１１はラインＬが入射していないのでその信号が出力されない。 FIG. 6C is a diagram showing a pixel to which a signal is output from the line L after a predetermined time has elapsed (t = t2) from FIG. Here, it is assumed that the relative position between the line L and the image pickup device 3 is shifted to the right in the figure by a shift ΔX that is exactly half a pixel (W / 2) from the time point t = t1. The cause of the shift is due to, for example, camera shake or moving subject. The calculation of ΔX will be described later. Pixels to which signals are output are indicated by diagonal lines as in (B). Even in the state of (C) shifted by half a pixel, for example, the signal of the line L is output from the pixel P12. On the other hand, since the line L is not incident on the pixel P11, the signal is not output.

同図（Ｄ）は、上記ｔ１とｔ２時点の各画素の出力信号から作成された仮想の画素マップである。図（Ｂ）のｔ１時点と図（Ｃ）のｔ２時点の各画素の出力信号を、比較演算することで、同図（Ｄ）のような仮想の画素マップが作成できる。この図で、Ｐ１、Ｐ２、Ｐ３等は演算から算出された仮想の画素の番号である。斜線が付された画素はラインＬによる信号を出力すると考えられる画素である。この図で、例えばＰ４の画素は、計算上でラインＬの信号を受ける画素になる。 FIG. 4D is a virtual pixel map created from the output signals of the pixels at the time points t1 and t2. By comparing the output signals of each pixel at time t1 in FIG. (B) and time t2 in FIG. (C), a virtual pixel map as shown in FIG. In this figure, P1, P2, P3, etc. are virtual pixel numbers calculated from the calculation. The hatched pixels are pixels that are considered to output signals from the line L. In this figure, for example, the pixel P4 is a pixel that receives the signal of the line L in the calculation.

このような演算をすることによって、本来カメラの撮像素子が持っている画素の細かさ以上の画像を得ることができる。本例では、本来の画素幅Ｗの半分のピッチ、つまり倍の解像度の画像がえられる。特に動画像では連続的に画像を得るので、時間的に隣接する画像を利用して、ΔＸの微小変位した画像から比較的容易に、より高精度な静止画を得ることができる。また、図６では横方向のみ画像を細かくしたが同様の考え方で縦方向の高精細化処理も当然可能である。縦横を組み合わせても良い。 By performing such a calculation, an image that is more than the fineness of the pixels originally possessed by the image sensor of the camera can be obtained. In this example, an image having a pitch that is half the original pixel width W, that is, a double resolution, is obtained. In particular, since a moving image is obtained continuously, a still image with higher accuracy can be obtained relatively easily from an image that is slightly displaced by ΔX by using temporally adjacent images. Further, in FIG. 6, the image is made fine only in the horizontal direction, but naturally, high definition processing in the vertical direction is also possible with the same concept. You may combine length and breadth.

次に、図７を用いて上記ΔＸの算出を説明する。ΔＸは、２像の一致を検出する方式によって求めることできる。図７は、時分割で得られた画像信号から、ΔＸを算出する原理を説明するための図である。まず、図７（Ａ）、（Ｂ）は、撮像素子３の画素の一部分の出力パターンを示す図である。図７（Ａ）、（Ｂ）は、同じ画素で、短時間経過後の出力の変化を示している。横軸に５つの画素を並べ、縦軸にその画素から出力される信号出力の大きさを示す。ｔ＝ｔ１の各画素の出力レベルが（ａ０、ａ１…）で、ｔ＝ｔ２の各画素の出力レベルが（ｂ０、ｂ１…）である。 Next, the calculation of ΔX will be described with reference to FIG. ΔX can be obtained by a method of detecting coincidence of two images. FIG. 7 is a diagram for explaining the principle of calculating ΔX from the image signal obtained by time division. First, FIGS. 7A and 7B are diagrams illustrating output patterns of a part of pixels of the image sensor 3. FIGS. 7A and 7B show the change in output after a short time has elapsed for the same pixel. Five pixels are arranged on the horizontal axis, and the magnitude of the signal output output from the pixels is shown on the vertical axis. The output level of each pixel at t = t1 is (a0, a1...), and the output level of each pixel at t = t2 is (b0, b1...).

同図（Ａ）、（Ｂ）で示されるように、異なる時間の２つの出力パターンが得られると、この２つのパターンのずれ量がどれくらいかは相関演算と呼ばれる計算によって算出することができる。以下の式が、相関演算式である。 As shown in FIGS. 2A and 2B, when two output patterns at different times are obtained, the amount of deviation between the two patterns can be calculated by a calculation called correlation calculation. The following formula is the correlation calculation formula.

〔数１〕
｜ｂ３−ａ３｜＋｜ｂ２−ａ２｜＋｜ｂ１−ａ１｜＝ｆ（０）
｜ｂ３−ａ２｜＋｜ｂ２−ａ１｜＋｜ｂ１−ａ０｜＝ｆ（−１）
｜ｂ３−ａ４｜＋｜ｂ２−ａ３｜＋｜ｂ１−ａ２｜＝ｆ（＋１）
といった計算により、ｆ（ｎ）が得られる。 [Equation 1]
| B3-a3 | + | b2-a2 | + | b1-a1 | = f (0)
| B3-a2 | + | b2-a1 | + | b1-a0 | = f (-1)
| B3-a4 | + | b2-a3 | + | b1-a2 | = f (+1)
Thus, f (n) is obtained.

図７（Ｃ）は、このｆ（ｎ）をグラフ化した図である。そして、このグラフより、ピークの値をとるｎ値を求め、このｎ値を画素ピッチＷを用いて換算して、ずれΔＸを算出することができる。 FIG. 7C is a graph of f (n). From this graph, an n value that takes a peak value is obtained, and the n value can be converted using the pixel pitch W to calculate the deviation ΔX.

図８は、ΔＸから高精細化処理の手順を説明するフローチャートである。上述したように、ΔＸを２つの画像から算出した。そこで、ユーザーが最もベストなタイミングとして選んだ画像に対し、その前後のタイミングの画像から最も適当なずれΔＸを得るようにすれば、ユーザーの希望する画像を高精細の画像にすることができる。図８を用いて、ユーザーの希望する画像を高精細の画像にする処理手順を説明する。 FIG. 8 is a flowchart for explaining the procedure of high definition processing from ΔX. As described above, ΔX was calculated from the two images. Therefore, if the most suitable shift ΔX is obtained from the images at the timings before and after the image selected as the best timing by the user, the image desired by the user can be made a high-definition image. A processing procedure for converting an image desired by the user into a high-definition image will be described with reference to FIG.

この処理は、信号処理部５内に設けられる高精細化部５ｆによって主に実行される。なお、実施例２のカメラのブロック図は、図１のブロック図の信号処理部５内に高精細化部５ｆが追加されただけので、簡便のため省略する。 This process is mainly executed by the high definition unit 5f provided in the signal processing unit 5. The block diagram of the camera according to the second embodiment is omitted for the sake of simplicity because the high-definition unit 5f is simply added to the signal processing unit 5 in the block diagram of FIG.

まず、ユーザーによって選ばれたベストタイミングの画像が選択され、この画像を選択画像とする（ステップＳ１０）。次に、選択画像とこの選択画像よりも若干前に撮影されたいくつかの画像を読み出して、それぞれ相関演算を行いΔＸを検出する（ステップＳ１１）。ΔＸは、複数算出しておく。続いて、逆に遅れて撮影された画像のΔＸを検出する（ステップＳ１２）。ここでも、ΔＸは、複数算出しておく。 First, an image at the best timing selected by the user is selected, and this image is set as a selected image (step S10). Next, the selected image and several images taken slightly before the selected image are read out, and correlation calculation is performed to detect ΔX (step S11). A plurality of ΔX are calculated. Subsequently, ΔX of an image taken with a delay is detected (step S12). Again, a plurality of ΔX is calculated.

そして、算出したΔＸの中から、全くずれていないものや逆にずれの大きいものは捨てて、０．５画素程度ずれている適当なΔＸに相当する画像を選択する（ステップＳ１３）。これで、ユーザーにより選択された画像と、選択画像に対して０．５画素ずれの画像が得られることになる。そして、図６（Ｄ）で示したように、この２つの画像を比較し、両画像の出力が一致した部分、例えば図６（ｄ）のＰ４を残し、Ｐ３，Ｐ５のような一方しか出力のない所は、信号を押さえる等の処理を行う。画面の全画素に対して同様な処理を行うことにより、希望する画像に対して高精細化処理された画像が得られる。以上実施例２に係る発明により、希望する画像に対して高精細化処理された画像が得られる。 Then, from the calculated ΔX, those that are not shifted at all or those that are largely shifted are discarded, and an image corresponding to an appropriate ΔX that is shifted by about 0.5 pixels is selected (step S13). As a result, an image selected by the user and an image shifted by 0.5 pixels from the selected image are obtained. Then, as shown in FIG. 6D, the two images are compared, and the output of both images is the same, for example, P4 in FIG. 6D is left, and only one of P3 and P5 is output. Where there is no signal, processing such as signal suppression is performed. By performing similar processing on all the pixels on the screen, an image obtained by performing high definition processing on a desired image can be obtained. As described above, according to the invention according to the second embodiment, an image obtained by performing high definition processing on a desired image can be obtained.

図９、図１０を用いて実施例３を説明する。実施例３は、高精細化された低圧縮画像の再生及び、高圧縮画像と高精細化された低圧縮画像の両方を同時に再生する技術に関する。図９は、高精細化画像の出力動作を順番に説明するためのブロック図である。図９は、実施例３が適用されるカメラの要部ブロック図である。基本構成は図１のブロック図と同じであるので、要部のみ記載し、同一構成要件には同じ符号を付して示す。 Embodiment 3 will be described with reference to FIGS. Example 3 relates to a technique for reproducing a high-definition low-compression image and simultaneously reproducing both a high-compression image and a high-definition low-compression image. FIG. 9 is a block diagram for sequentially explaining the output operation of the high definition image. FIG. 9 is a principal block diagram of a camera to which the third embodiment is applied. Since the basic configuration is the same as that of the block diagram of FIG. 1, only the main parts are described, and the same components are denoted by the same reference numerals.

信号処理部５の圧縮部５ｂには、さらに高圧縮部５ｂ−１と低圧縮部５ｂ−２が設けられる。高圧縮部５ｂ−１は、画像データを高い圧縮率で圧縮する部である。低圧縮部５ｂ−２は、逆に画像データを低い圧縮率で圧縮する部である。また、信号処理部５には高精細化部５ｆが設けられる。高精細化部５ｆは、実施例２で説明した高精細化処理を施す部である。以下の処理は、主に記録制御部１ａにより制御される。 The compression unit 5b of the signal processing unit 5 is further provided with a high compression unit 5b-1 and a low compression unit 5b-2. The high compression unit 5b-1 is a unit that compresses image data at a high compression rate. Conversely, the low compression unit 5b-2 is a unit that compresses image data at a low compression rate. The signal processing unit 5 is provided with a high definition unit 5f. The high definition unit 5f is a unit that performs the high definition processing described in the second embodiment. The following processing is mainly controlled by the recording control unit 1a.

図９（Ａ）は、撮影時の画像データの流れを示す図である。撮像部１９から出力された画像信号が信号処理部５に入力される。入力された画像信号は、高圧縮部５ｂ−１及び低圧縮部５ｂ−２の両方で圧縮処理される。高圧縮部５ｂ−１で圧縮処理された画像データは、第２記録部９に記録される。一方、低圧縮部５ｂ−２で圧縮処理された画像データは、第１記録部７に記録される。これにより、実施例１に比べて、再生しながらの再圧縮処理がなくなるので圧縮等の処理時間が短縮される。 FIG. 9A is a diagram showing the flow of image data at the time of shooting. An image signal output from the imaging unit 19 is input to the signal processing unit 5. The input image signal is compressed by both the high compression unit 5b-1 and the low compression unit 5b-2. The image data compressed by the high compression unit 5b-1 is recorded in the second recording unit 9. On the other hand, the image data compressed by the low compression unit 5b-2 is recorded in the first recording unit 7. Thereby, as compared with the first embodiment, the recompression process while reproducing is eliminated, so that the processing time for compression and the like is shortened.

図９（Ｂ）は選択された画像データが第１記録部７から第２記録部９に転送される流れを示す図である。撮影者から高精細化指示がされると、図８のフローチャートで説明した処理が開始される。まず、ユーザーにより画像が選択される（図８のステップＳ１０）と、その選択された画像を、第１記録部７から第２記録部９に転送させる。転送される画像は、低圧縮のまま第２記録部９に記録される。 FIG. 9B is a diagram illustrating a flow in which selected image data is transferred from the first recording unit 7 to the second recording unit 9. When a high definition instruction is issued from the photographer, the processing described in the flowchart of FIG. 8 is started. First, when an image is selected by the user (step S10 in FIG. 8), the selected image is transferred from the first recording unit 7 to the second recording unit 9. The transferred image is recorded in the second recording unit 9 with low compression.

図９（Ｃ）は選択された画像が第２記録部９から高精細化部５ｆを介して出力される流れを示す図である。次に、第２記録部９に転送記録された画像が、高精細化部５ｆに入力され、高精細化処理をされて、例えばプリント信号出力部１０から出力される。なお、これらはＭＰＵ１により制御される。以上により、低圧縮画像をさらに高品位化して出力するので、大画面での鑑賞や高画質でのプリントが可能になる。 FIG. 9C is a diagram illustrating a flow in which a selected image is output from the second recording unit 9 via the high definition unit 5f. Next, the image transferred and recorded in the second recording unit 9 is input to the high definition unit 5f, subjected to high definition processing, and output from the print signal output unit 10, for example. These are controlled by the MPU 1. As described above, since the low-compressed image is output with higher quality, it is possible to view on a large screen and print with high image quality.

図１０は、実施例１で説明した図５（Ｃ）のような、２つのファイルを同時に表示部８に表示する例である。図１０も、適用されるデジタルカメラの要部ブロック図である。基本構成は図９のブロック図と同じであるので、要部のみ記載し、同一構成要件には同じ符号を付して示す。信号処理部５には再生部５ｇが設けられる。再生部５ｇは、表示部８に表示する画像データに再生用の画像処理を施す部である。 FIG. 10 is an example in which two files are simultaneously displayed on the display unit 8 as shown in FIG. 5C described in the first embodiment. FIG. 10 is also a principal block diagram of the applied digital camera. Since the basic configuration is the same as that of the block diagram of FIG. 9, only the main parts are described, and the same reference numerals are given to the same configuration requirements. The signal processing unit 5 is provided with a reproduction unit 5g. The reproduction unit 5g is a unit that performs image processing for reproduction on the image data displayed on the display unit 8.

図１０（Ａ）のように、同時期に撮影した画像が第２記録部９の第１ファイル９ｂと第２ファイル９ｃに２つに記録されているとする。実施例１で説明したように、第１ファイル９ｂは低圧縮（高画質）の画像が保存されるファイルで、第２ファイル９ｃは高圧縮（低画質）の画像が保存されるファイルである。まず、第２記録部９から第１ファイル９ｂまたは第２ファイル９ｃいずれか１つの画像データを第１記録部７に転送する。ここでは、第２ファイル９ｃの画像データを転送する。
そして、図１０（Ｂ）に示すように、第２記録部９からは転送していない方の画像データ（第１ファイル９ｂ）を再生部５ｇに入力し、第１記録部７からは転送された画像データを再生部５ｇに入力する。再生部５ｇは、それぞれ入力された画像データについて表示用の再生処理をし、表示部８に出力させる。表示部８では、この２つの画像を表示させる。表示部８には、図５（Ｃ）のような画像が表示される。これにより、動きと表示が同時に楽しめる画像再生が可能になる。このとき、第１ファイル９ｂの短時間画像は、前述の高精細化処理を施して静止画表示を行うようにしてもよい。
Assume that two images taken at the same time are recorded in the first file 9b and the second file 9c of the second recording unit 9 as shown in FIG. 10 (A). As described in the first embodiment, the first file 9b is a file that stores a low-compression (high-quality) image, and the second file 9c is a file that stores a high-compression (low-quality) image. First, one of the first file 9 b and the second file 9 c is transferred from the second recording unit 9 to the first recording unit 7. Here, the image data of the second file 9c is transferred.
Then, as shown in FIG. 10 (B), the image data (first file 9b) which has not been transferred from the second recording unit 9 is input to the reproduction unit 5g and transferred from the first recording unit 7. The received image data is input to the reproduction unit 5g. The reproduction unit 5g performs display reproduction processing for each input image data, and causes the display unit 8 to output it. The display unit 8 displays these two images. An image as shown in FIG. 5C is displayed on the display unit 8. As a result, it is possible to reproduce an image in which movement and display can be enjoyed simultaneously. At this time, the short-time image of the first file 9b may be subjected to the above-described high-definition processing to display a still image.

以上説明した実施例１，２、３により、以下の発明が抽出される。
１）被写体を連続して撮影する撮像部１９と、
画像データを圧縮する圧縮部５ｂと、
第１記録部７および第２記録部９として複数用意された記録部への画像データの記録を制御する記録制御部１ａを備え、
上記記録制御部１ａは、撮影された連続画像データを圧縮して上記第１記録部７に記録させ、
その後、第１記録部７に記録された連続画像データの中で選択された一部画像データｍについてはそのまま上記第２記録部９に記録させるとともに、第１記録部７に記録されたこの一部画像データを含む連続画像データについては、データ量が第１記録部でのデータ量に比べて少なくなるように圧縮して第２記録部９に記録させることを特徴とするカメラ。 The following inventions are extracted by the first, second, and third embodiments described above.
1) an imaging unit 19 that continuously shoots a subject;
A compression unit 5b for compressing image data;
A recording control unit 1a for controlling the recording of image data in a plurality of recording units prepared as a first recording unit 7 and a second recording unit 9;
The recording control unit 1a compresses and records the captured continuous image data in the first recording unit 7,
Thereafter, the partial image data m selected from the continuous image data recorded in the first recording unit 7 is recorded in the second recording unit 9 as it is, and this one recorded in the first recording unit 7 is also recorded. A camera characterized in that continuous image data including partial image data is compressed and recorded in the second recording unit 9 so that the data amount is smaller than the data amount in the first recording unit.

２）１）に加えて、
圧縮された画像データを伸張する伸張部５ｃを備え、
上記記録制御部１ａは、データ量が第１記録部７でのデータ量に比べて少なくなるように圧縮をする前に、上記伸張部５ｃで当該連続画像データを伸張させることを特徴とするカメラ。 2) In addition to 1)
A decompression unit 5c for decompressing the compressed image data;
The recording control unit 1a uses the expansion unit 5c to expand the continuous image data before compressing the data so that the data amount is smaller than the data amount in the first recording unit 7. .

３）１）に加えて、
上記圧縮部５ｂは、静止画用の圧縮部５ｂａと動画用の圧縮部５ｂｂを有し、
上記記録制御部1ａは、上記撮影された連続画像データを第１記録部７に記録させる際の圧縮には、上記静止画用の圧縮部を用い、上記第１記録部７に記録された連続画像データを第２記録部９に記録させる際の圧縮には、動画用の圧縮を用いることを特徴とするカメラ。 3) In addition to 1)
The compression unit 5b includes a still image compression unit 5ba and a moving image compression unit 5bb.
The recording control unit 1a uses the still image compression unit for compression when recording the captured continuous image data in the first recording unit 7, and the continuous recording recorded in the first recording unit 7 is used. A camera that uses compression for moving images for compression when image data is recorded in the second recording unit 9.

４）１）に加えて、
上記記録制御部１ａは、上記第２記録部９に記録される一部画像データｍと連続画像データを異なるファイル（９ｃ、９ｂ）として記録させることを特徴とするカメラ。 4) In addition to 1)
The recording control unit 1a records the partial image data m and the continuous image data recorded in the second recording unit 9 as different files (9c, 9b).

５）１）に加えて、
時間差のある画像データから相関演算によって高精細化画像を作成する高精細化部５ｆと、
上記第２記録部に記録された一部画像データから上記高精細化部５ｆによって高精細化画像を作成して出力させる
制御部（ＭＰＵ１）とを備えることを特徴とするカメラ。 5) In addition to 1)
A high-definition unit 5f that creates a high-definition image by correlation calculation from image data having a time difference;
A camera comprising: a control unit (MPU1) that generates and outputs a high-definition image from the partial image data recorded in the second recording unit by the high-definition unit 5f.

なお、以上の実施例１，２、３で説明したＭＰＵ１（記録制御部１ａ）と信号処理部５に関してであるが、記録制御部１ａをハードウェアで構成してもよいし、信号処理部５をソフトウェア処理しても当然良い。具体的な構成は設計事項である。 The MPU 1 (recording control unit 1a) and the signal processing unit 5 described in the first, second, and third embodiments are described above. However, the recording control unit 1a may be configured by hardware, or the signal processing unit 5 may be configured. Of course, it may be processed by software. The specific configuration is a design matter.

また、記録制御部１ａの制御機能は、第１記録部７に格納されたソフトウェアプログラムがＭＰＵ１（記録制御部１ａ）に供給され、供給されたプログラムに従って上記動作させることによって実現されるものである。従って、上記ソフトウェアのプログラム自体が記録制御部１ａの機能を実現することになり、そのプログラム自体は本発明を構成する。また、そのプログラムを格納する記録媒体も本発明を構成する。記録媒体としては、フラッシュメモリ以外でも、ＣＤ−ＲＯＭ、ＤＶＤ等の光学記録媒体、ＭＤ等の磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリー等を用いることができる。 The control function of the recording control unit 1a is realized by a software program stored in the first recording unit 7 being supplied to the MPU 1 (recording control unit 1a) and operating according to the supplied program. . Therefore, the software program itself realizes the function of the recording control unit 1a, and the program itself constitutes the present invention. A recording medium for storing the program also constitutes the present invention. As a recording medium, besides a flash memory, an optical recording medium such as a CD-ROM or DVD, a magnetic recording medium such as an MD, a tape medium, a semiconductor memory such as an IC card, or the like can be used.

さらに、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。 Furthermore, the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined.

本発明の実施例１に係る図１は、本発明が適用されたデジタルカメラの全体ブロック図。FIG. 1 according to Embodiment 1 of the present invention is an overall block diagram of a digital camera to which the present invention is applied. 実施例１において、画像記録を詳細に説明するための機能ブロック図。FIG. 3 is a functional block diagram for explaining image recording in detail in the first embodiment. 実施例１において、第１記録部７から第２記録部９へ転送される画像データの流れを示す図。6 is a diagram illustrating a flow of image data transferred from the first recording unit 7 to the second recording unit 9 in Embodiment 1. FIG. 実施例１において、画像データの転送が実行される撮影時の処理手順を示すフローチャート。6 is a flowchart illustrating a processing procedure at the time of shooting in which transfer of image data is executed in the first embodiment. 実施例１において、表示部８に表示される画像の例を示す図。FIG. 6 is a diagram illustrating an example of an image displayed on the display unit 8 in the first embodiment. 実施例２において、高解像度画像作成の原理を説明するための図。FIG. 9 is a diagram for explaining the principle of creating a high-resolution image in the second embodiment. 実施例２において、時分割で得られた画像信号から、ΔＸを算出する原理を説明するための図。FIG. 10 is a diagram for explaining the principle of calculating ΔX from an image signal obtained by time division in the second embodiment. 実施例２において、ΔＸから高精細化処理の手順を説明するフローチャート。9 is a flowchart for explaining a procedure of high definition processing from ΔX in the second embodiment. 実施例３において、高精細化画像の出力動作を順番に説明するためのブロック図。FIG. 10 is a block diagram for sequentially explaining the output operation of a high-definition image in the third embodiment. 実施例３において、２つのファイルを同時に表示部８に表示する例を示す図。In Example 3, it is a figure which shows the example which displays two files on the display part 8 simultaneously.

Explanation of symbols

１…ＭＰＵ、２…撮影レンズ、３…撮像素子、４…アナログフロントエンド、５…信号処理部、
５ａ…補助ブロック、５ｂ…圧縮部、５ｂ−１…高圧縮部、５ｂ−２…低圧縮部、５ｂａ…ＪＰＥＧ圧縮部、５ｂｂ…ＭＰＥＧ圧縮部、５ｃ…伸張部、５ｄ…切換え部、５ｆ…高精細化部、５ｇ…再生部、
６…ＲＡＭ、７…第１記録部、８…表示部、
９…第２記録部、９ａ…送信用メモリ、９ｂ…第１ファイル、９ｃ…第２ファイル、
１０…プリント信号出力部、１１…無線送信部、１２…マイク、１３…スピーカ、１４…時計部、
１５…位置検出部、１６…操作部、１９…撮像部、２０…被写体像、ΔＸ…ずれ

DESCRIPTION OF SYMBOLS 1 ... MPU, 2 ... Shooting lens, 3 ... Imaging element, 4 ... Analog front end, 5 ... Signal processing part,
5a ... auxiliary block, 5b ... compression unit, 5b-1 ... high compression unit, 5b-2 ... low compression unit, 5ba ... JPEG compression unit, 5bb ... MPEG compression unit, 5c ... expansion unit, 5d ... switching unit, 5f ... High-definition part, 5g ... playback part,
6 ... RAM, 7 ... first recording unit, 8 ... display unit,
9 ... 2nd recording part, 9a ... Memory for transmission, 9b ... 1st file, 9c ... 2nd file,
DESCRIPTION OF SYMBOLS 10 ... Print signal output part, 11 ... Wireless transmission part, 12 ... Microphone, 13 ... Speaker, 14 ... Clock part,
DESCRIPTION OF SYMBOLS 15 ... Position detection part, 16 ... Operation part, 19 ... Imaging part, 20 ... Subject image, (DELTA) X ... Deviation

Claims

An imaging unit that captures continuous images;
A compression unit for compressing image data;
A playback unit for simultaneously displaying images recorded in the first recording unit and the second recording unit on the display unit;
The continuous image compressed in the second recording unit is recorded at the time of shooting, and at the same time, the continuous image is recorded in the first recording unit by a compression process lower than the compression to the second recording unit. The still image selected from the low-compression processing continuous images recorded in the first recording unit is transferred to the second recording unit, and after the transfer, the low-compression processing continuous images are transferred from the first recording unit. A recording control unit to be erased ;
During reproduction, the still image recorded in the second recording unit is transferred to the first recording unit, and then the still image recorded in the first recording unit and the continuous image recorded in the second recording unit And a control unit for controlling the reproduction unit to cause the display unit to perform display simultaneously,
A camera comprising:

Equipped with a high-definition unit that creates high-definition images by correlation calculation from image data with a time difference,
The camera according to claim 1, wherein the playback unit displays an image that has been refined by the refinement unit.