JP5622535B2 - Imaging device - Google Patents

Imaging device Download PDF

Info

Publication number
JP5622535B2
JP5622535B2 JP2010256776A JP2010256776A JP5622535B2 JP 5622535 B2 JP5622535 B2 JP 5622535B2 JP 2010256776 A JP2010256776 A JP 2010256776A JP 2010256776 A JP2010256776 A JP 2010256776A JP 5622535 B2 JP5622535 B2 JP 5622535B2
Authority
JP
Japan
Prior art keywords
image
display
kaleidoscope
image data
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010256776A
Other languages
Japanese (ja)
Other versions
JP2012109778A (en
Inventor
佐藤 和宏
和宏 佐藤
健世 伊藤
健世 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Imaging Corp
Original Assignee
Olympus Imaging Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Imaging Corp filed Critical Olympus Imaging Corp
Priority to JP2010256776A priority Critical patent/JP5622535B2/en
Publication of JP2012109778A publication Critical patent/JP2012109778A/en
Application granted granted Critical
Publication of JP5622535B2 publication Critical patent/JP5622535B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/38Circuits or arrangements for blanking or otherwise eliminating unwanted parts of pictures

Description

本発明は、ユーザに興趣を与える画像をライブビュー表示とともに表示する撮像装置に関する。   The present invention relates to an imaging apparatus that displays an image that gives interest to a user together with a live view display.

撮像装置において、撮像素子に結蔵された被写体像をリアルタイムに表示部に表示させる表示形態が広く行われており、一般にライブビューと呼ばれている。このライブビューにおいて、撮像された被写体像に画像処理を施したものを表示することも行われている。   In an imaging apparatus, a display form in which a subject image stored in an imaging element is displayed on a display unit in real time is widely used, and is generally called a live view. In this live view, an image obtained by subjecting a captured subject image to image processing is also displayed.

表示部への表示方式として、4つの領域から構成されたCRT上の一つの領域をライトペンによって指定すると、選択された領域の画像を元に残りの3表示面に対象の図形を表示して万華鏡的な画像を表示する万華鏡表示法(特許文献1参照)が知られている。   As a display method on the display unit, when one area on the CRT composed of four areas is designated with a light pen, the target graphic is displayed on the remaining three display surfaces based on the image of the selected area. A kaleidoscope display method for displaying a kaleidoscopic image (see Patent Document 1) is known.

また、スクラップブックで使用することができる万華鏡像を、コンピュータ等のディスプレイ上で生成する方法(特許文献2参照)も知られている。   A method of generating a kaleidoscope image that can be used in a scrapbook on a display such as a computer (see Patent Document 2) is also known.

特開昭56−78882号公報JP-A-56-78882 特開2003−143392号公報JP 2003-143392 A

デジタルカメラにおいて、被写体像を観察するために、ライブビュー表示(スルー画表示、モニタ表示とも呼ばれる)を行うことができる。通常のライブビュー表示は、撮像部で取得した画像をリアルタイムでそのまま表示するものである。   In a digital camera, live view display (also called through image display or monitor display) can be performed in order to observe a subject image. In normal live view display, an image acquired by the imaging unit is displayed as it is in real time.

一方で、ライブビュー表示には、単に被写体を観察する目的に限定されず、様々な機能が望まれている。そこで、ライブビュー表示に前述の万華鏡状画像のような趣向性あふれる表示を行うことも可能である。   On the other hand, live view display is not limited to the purpose of simply observing a subject, and various functions are desired. In view of this, it is possible to display a full-fledged display such as the above-described kaleidoscope image in the live view display.

しかし、ライブビュー表示で、画像の一部を部分画像として万華鏡像を構成する場合は、この部分画像の選択が適切でないと、ユーザが、実際の万華鏡を見たときのような楽しさを感じることができない。   However, when configuring a kaleidoscope image with a part of the image as a partial image in live view display, if this partial image is not properly selected, the user feels the joy of seeing the actual kaleidoscope. I can't.

本発明はこのような問題点に鑑みてなされたものであり、ライブビュー表示において、万華鏡像を生成しこれを表示することにより、ユーザに興趣を与える表示を行える撮像装置を提供することを目的とする。   The present invention has been made in view of such problems, and an object of the present invention is to provide an imaging apparatus that can display a display that gives interest to a user by generating a kaleidoscope image and displaying it in a live view display. And

本発明のある態様に係る撮像装置は、被写体を結像する撮影レンズと、撮影レンズによって結像された光学像を画像データに変換して出力する撮像部と、撮像部から出力された画像データをライブビュー表示可能な表示部と、光学像から被写体を検出する被写体検出部と、画像データの一部から万華鏡状画像データを生成する万華鏡状画像生成部と、撮像部から出力された画像データを表示部にライブビュー表示させるとともに、万華鏡状画像生成部によって生成された万華鏡状画像データを表示部に表示させる制御部と、を備え、制御部は、ライブビュー表示において、被写体検出部が被写体を検出したときに、表示部に、当該被写体を用いて生成した万華鏡状画像をライブビュー表示と共に表示する第1表示モードと、被写体検出部が被写体を検出しないときに、万華鏡状画像を表示部に表示しない第2表示モードと、を切り換えることを特徴とする。   An imaging apparatus according to an aspect of the present invention includes a photographing lens that forms an image of a subject, an imaging unit that converts an optical image formed by the photographing lens into image data and outputs the image data, and image data output from the imaging unit A live-view display unit, a subject detection unit that detects a subject from an optical image, a kaleidoscopic image generation unit that generates kaleidoscopic image data from a part of the image data, and image data output from the imaging unit And a control unit that displays kaleidoscopic image data generated by the kaleidoscopic image generation unit on the display unit, and the control unit is configured to display the subject in the live view display. A first display mode in which a kaleidoscope image generated using the subject is displayed on the display unit together with the live view display, and the subject detection unit When not detecting the body, and wherein the switching and the second display mode without displaying the kaleidoscope-like image on the display unit.

本発明のある態様によると、検出された被写体に基づいて表示部にライブビュー表示と共に万華鏡状画像データを表示させ、被写体が検出されなくなった場合に万華鏡状画像を表示しないので、状況に応じたダイナミックな表示を行うことができ、ユーザの興趣を高めることができて、ユーザが撮像装置を親しみながら使用することができる。   According to an aspect of the present invention, the kaleidoscope image data is displayed together with the live view display on the display unit based on the detected subject, and the kaleidoscope image is not displayed when the subject is no longer detected. Dynamic display can be performed, the user's interest can be enhanced, and the user can use the imaging apparatus while getting familiar with it.

本発明の実施形態のデジタルカメラの構成ブロック図である。1 is a configuration block diagram of a digital camera according to an embodiment of the present invention. 本発明の実施形態のシステムコントローラが実行する制御のフローチャートである。It is a flowchart of the control which the system controller of embodiment of this invention performs. 本発明の実施形態の万華鏡状画像の表示方法の一例を示す説明図である。It is explanatory drawing which shows an example of the display method of the kaleidoscopic image of embodiment of this invention. 本発明の実施形態の万華鏡画像生成回路によって実行される万華鏡状画像の生成方法の一例を示す説明図である。It is explanatory drawing which shows an example of the generation method of the kaleidoscope-like image performed by the kaleidoscope image generation circuit of embodiment of this invention. 本発明の実施形態の万華鏡画像生成回路によって実行される万華鏡状画像の生成方法の一例を示す説明図である。It is explanatory drawing which shows an example of the generation method of the kaleidoscope-like image performed by the kaleidoscope image generation circuit of embodiment of this invention. 本発明の実施形態のメモリカードに記録される画像データの記録形式の一例を示す説明図である。It is explanatory drawing which shows an example of the recording format of the image data recorded on the memory card of embodiment of this invention. 本発明の実施形態のメモリカードに記録される画像データの記録形式の他の例を示す説明図である。It is explanatory drawing which shows the other example of the recording format of the image data recorded on the memory card of embodiment of this invention. 本発明の実施形態の万華鏡画像生成回路によって生成される万華鏡状画像の他の例を示す説明図である。It is explanatory drawing which shows the other example of the kaleidoscope-like image produced | generated by the kaleidoscope image generation circuit of embodiment of this invention. 本発明の実施形態のライブビュー表示において、生成された万華鏡状画像を表示するときの他の例を示す。The live view display of embodiment of this invention WHEREIN: The other example when displaying the produced kaleidoscope-like image is shown.

図1は、本発明の実施形態のデジタルカメラ100の内部構成を示すブロック図である。   FIG. 1 is a block diagram showing an internal configuration of a digital camera 100 according to an embodiment of the present invention.

デジタルカメラ100の動作を制御するための制御部として機能するシステムコントローラ300は、CPU302と、複数の回路ブロック(機能ブロック)とを備える。複数の回路ブロックは、画像処理回路304と、圧縮・伸長回路306と、表示画像生成回路307と、動きベクトル検出回路308と、顔認識回路309と、万華鏡画像生成回路310等である。CPU302とこれら各回路ブロックとは、制御ラインやバスラインを介して互いに接続され、CPU302の指令によって各回路ブロックは制御される。   A system controller 300 that functions as a control unit for controlling the operation of the digital camera 100 includes a CPU 302 and a plurality of circuit blocks (functional blocks). The plurality of circuit blocks are an image processing circuit 304, a compression / decompression circuit 306, a display image generation circuit 307, a motion vector detection circuit 308, a face recognition circuit 309, a kaleidoscope image generation circuit 310, and the like. The CPU 302 and these circuit blocks are connected to each other via a control line and a bus line, and each circuit block is controlled by a command from the CPU 302.

システムコントローラ300(制御部)は、撮像素子IF(InterFace)回路312、絞り駆動機構316、シャッタ駆動機構318、表示素子駆動回路332、タッチパネル検出回路336、メモリカード340、FlashRom(フラッシュ・リードオンリー・メモリ)342、SDRAM(シンクロナス・ダイナミック・ランダム・アクセス・メモリ)344、カメラ操作部350に電気的に接続する。撮像素子IF回路312は、撮像素子314に電気的に接続し、表示素子駆動回路332は表示素子334に接続し、タッチパネル検出回路336は表示素子334に備えられるタッチパネル338に接続する。   The system controller 300 (control unit) includes an imaging element IF (InterFace) circuit 312, an aperture driving mechanism 316, a shutter driving mechanism 318, a display element driving circuit 332, a touch panel detection circuit 336, a memory card 340, FlashRom (flash read only Memory) 342, SDRAM (synchronous dynamic random access memory) 344, and camera operation unit 350 are electrically connected. The imaging element IF circuit 312 is electrically connected to the imaging element 314, the display element driving circuit 332 is connected to the display element 334, and the touch panel detection circuit 336 is connected to a touch panel 338 provided in the display element 334.

撮影レンズ102は、カメラ外部から取り込んだ被写体からの光を撮像素子314に結像する。撮像素子314は、光電変換により、撮像素子314に結像された光学像を画像信号に変換する。撮像素子314は、例えば、CCD(電荷結合素子)センサ、CMOS(相補型金属酸化膜半導体)センサである。撮像素子IF回路312は、システムコントローラ300の制御信号に応じて撮像素子314の駆動信号を生成する回路や、撮像素子314の出力をAD変換するAD変換回路等を含んでいる。光学像の画像信号は、撮像素子IF回路312によってAD変換されて、システムコントローラ300へ画像データとして入力される。   The photographing lens 102 forms an image on the image sensor 314 from light from a subject captured from outside the camera. The image sensor 314 converts an optical image formed on the image sensor 314 into an image signal by photoelectric conversion. The image sensor 314 is, for example, a CCD (charge coupled device) sensor or a CMOS (complementary metal oxide semiconductor) sensor. The imaging element IF circuit 312 includes a circuit that generates a drive signal for the imaging element 314 in accordance with a control signal from the system controller 300, an AD conversion circuit that performs AD conversion on the output of the imaging element 314, and the like. The image signal of the optical image is AD converted by the image sensor IF circuit 312 and input to the system controller 300 as image data.

すなわち、撮像素子314及び撮像素子IF回路312が、撮影レンズによって結像された被写体像を画像データに変換して出力する撮像部を構成する。   That is, the imaging device 314 and the imaging device IF circuit 312 constitute an imaging unit that converts the subject image formed by the imaging lens into image data and outputs the image data.

焦点・焦点距離調整機構315は、撮影レンズ102の焦点を調整して被写体像を撮像素子314に結像させるレンズ駆動部として構成される。また、焦点・焦点距離調節機構315は、撮影レンズ102の焦点距離を調節して撮像素子314に結像する被写体像の倍率を変更する。   The focal point / focal length adjusting mechanism 315 is configured as a lens driving unit that adjusts the focal point of the photographing lens 102 and forms an object image on the image sensor 314. The focal point / focal length adjusting mechanism 315 adjusts the focal length of the taking lens 102 to change the magnification of the subject image formed on the image sensor 314.

絞り駆動機構316は、撮影レンズ102を通過する光の量を制御する絞りを駆動する。シャッタ駆動機構318は、撮像素子314を露光状態と遮光状態とに設定するシャッタを駆動する。   The aperture driving mechanism 316 drives an aperture that controls the amount of light passing through the taking lens 102. The shutter drive mechanism 318 drives a shutter that sets the image sensor 314 to an exposure state and a light shielding state.

システムコントローラ300のCPU302は、回路ブロックを以下の動作を行うように制御する。画像処理回路304は、撮像素子IF回路312から出力される画像データにγ補正、色変換、デモザイキング等の処理をし、圧縮・伸長回路306に出力する。画像処理回路304は、また、デジタルカメラ100が撮像前の状態にあるときに、撮像素子IF回路312から入力した表示用の画像データを所定のフレームレート(30fps、60fps)で処理し、表示素子駆動回路332へ出力してよい。この撮像前の状態は、デジタルカメラ100が画像記録モードに設定されていて、ユーザがデジタルカメラ100を被写体に向けている状態である。   The CPU 302 of the system controller 300 controls the circuit block so as to perform the following operations. The image processing circuit 304 performs processing such as γ correction, color conversion, and demosaicing on the image data output from the image sensor IF circuit 312 and outputs the processed data to the compression / decompression circuit 306. The image processing circuit 304 also processes display image data input from the imaging element IF circuit 312 at a predetermined frame rate (30 fps, 60 fps) when the digital camera 100 is in a state before imaging, and displays the display element. You may output to the drive circuit 332. This state before imaging is a state in which the digital camera 100 is set to the image recording mode and the user points the digital camera 100 toward the subject.

表示素子駆動回路332は、画像処理回路304から出力される画像データに基づく画像を表示素子334へ表示する。このとき表示素子に表示される画像は、一般にスルー画像、ライブビュー画像、モニター画像等と称される。   The display element driving circuit 332 displays an image based on the image data output from the image processing circuit 304 on the display element 334. An image displayed on the display element at this time is generally called a through image, a live view image, a monitor image, or the like.

圧縮・伸長回路306は、画像処理回路304から出力された画像データを圧縮し、メモリカード340に記録する。また、圧縮・伸長回路306は、デジタルカメラ100が画像再生モードに設定されているときに、メモリカードから読み込んだ圧縮画像データを伸長し、表示画像生成回路307を介して、表示素子駆動回路332へ出力する。   The compression / decompression circuit 306 compresses the image data output from the image processing circuit 304 and records it on the memory card 340. The compression / decompression circuit 306 decompresses the compressed image data read from the memory card when the digital camera 100 is set to the image reproduction mode, and displays the display element drive circuit 332 via the display image generation circuit 307. Output to.

動きベクトル検出回路308は、ライブビュー中の画像から、異なるフレーム間の画像データを比較して撮影領域内から移動する被写体を検出し、その被写体の位置及び大きさの情報を出力する。   The motion vector detection circuit 308 detects a subject moving from within the imaging region by comparing image data between different frames from the image in the live view, and outputs information on the position and size of the subject.

顔認識回路309は、パターンマッチング等の手法により、人物又はペット(犬、猫等)の顔を被写体として検出し、その被写体の位置及び大きさを出力する。   The face recognition circuit 309 detects the face of a person or a pet (dog, cat, etc.) as a subject by a method such as pattern matching, and outputs the position and size of the subject.

万華鏡画像生成回路310は、動きベクトル検出回路308又は顔検出回路309によって検出された被写体等に基づいて、検出された画像データを用いて万華鏡状画像を生成して出力する。   The kaleidoscope image generation circuit 310 generates and outputs a kaleidoscope image using the detected image data based on the subject detected by the motion vector detection circuit 308 or the face detection circuit 309.

表示素子駆動回路332は、圧縮・伸長回路306から入力した画像データに基づく画像を表示素子334へ表示する。   The display element driving circuit 332 displays an image based on the image data input from the compression / decompression circuit 306 on the display element 334.

表示素子334は、タッチパネル338が配置される。タッチパネル検出回路336は、タッチパネル上の操作位置(後述のモード設定部材、指、ペン等で押圧(接触)された位置)を検出してシステムコントローラ300へ出力する。これら表示素子334及びタッチパネル338は一体に構成されており、画像データやデジタルカメラ100の情報を表示するディスプレイ132として機能する。   The display element 334 is provided with a touch panel 338. The touch panel detection circuit 336 detects an operation position on the touch panel (a position pressed (contacted) with a mode setting member, a finger, a pen, etc., which will be described later) and outputs the detected position to the system controller 300. The display element 334 and the touch panel 338 are integrally configured and function as a display 132 that displays image data and information of the digital camera 100.

SDRAM344は、画像処理回路304、圧縮・伸長回路306が上述した処理をする際の作業領域(WorkArea)として主に用いられる。CPU302は、回路ブロックをFlashRom342に記録されたプログラムコードと制御パラメータに基づき制御する。   The SDRAM 344 is mainly used as a work area (WorkArea) when the image processing circuit 304 and the compression / decompression circuit 306 perform the above-described processing. The CPU 302 controls the circuit block based on the program code and the control parameter recorded in the FlashRom 342.

カメラ操作部350は、電源スイッチ(SW)106、レリーズスイッチ(SW)108、モード設定スイッチ(SW)120等の各種スイッチに対するユーザからの操作を検出して、検出結果をシステムコントローラ300に出力する。   The camera operation unit 350 detects user operations on various switches such as the power switch (SW) 106, the release switch (SW) 108, and the mode setting switch (SW) 120, and outputs the detection result to the system controller 300. .

次に、本発明の実施形態における万華鏡状画像の生成について説明する。   Next, generation of a kaleidoscope image in the embodiment of the present invention will be described.

万華鏡と呼ばれる玩具は、例えば3枚の長方形の鏡を三角柱状に組み合わせた筒状の形状を有し、筒の一端にはビーズ等のガラス片や色紙片を入れる収納部屋がある。この筒の他端からのぞき込むことにより、このガラス片や色紙片が、鏡によって無数の対称像が生成されるものである。   A toy called a kaleidoscope has a cylindrical shape in which, for example, three rectangular mirrors are combined in a triangular prism shape, and there is a storage room in which one piece of glass or colored paper such as beads is placed at one end of the cylinder. By looking into the other end of the cylinder, an infinite number of symmetrical images are generated from the glass pieces and the colored paper pieces by a mirror.

万華鏡は、収納部屋に収納されたガラス片や色紙片が鏡によって無数の対称像からなる幾何学的模様として観察されることにより、のぞき込む者に興趣を与える。また、万華鏡に振動を与えてガラス片や色紙片を移動させると、この幾何学模様に予期しない変化が発生することによる楽しさも存在する。   The kaleidoscope is interesting for those who look into it by observing glass pieces and colored paper pieces stored in the storage room as geometric patterns consisting of innumerable symmetrical images. In addition, when a kaleidoscope is vibrated to move a piece of glass or a piece of colored paper, there is a pleasure due to an unexpected change in the geometric pattern.

本発明は、この万華鏡を模した画像を画像処理技術によってデジタルカメラ100のディスプレイ132に再現するにあたり、次に説明するような動作を実行する。   In the present invention, when an image imitating this kaleidoscope is reproduced on the display 132 of the digital camera 100 by image processing technology, the following operation is executed.

図2は、本実施形態のデジタルカメラ100のシステムコントローラ300が実行する制御のフローチャートである。図2に示すフローチャートは、実施形態の特徴部分に関しての手順が記載されその他の手順は省略されている。   FIG. 2 is a flowchart of control executed by the system controller 300 of the digital camera 100 according to the present embodiment. In the flowchart shown in FIG. 2, a procedure regarding the characteristic part of the embodiment is described, and other procedures are omitted.

ユーザによって電源スイッチ106がオンされると、システムコントローラ300が起動する。システムコントローラ300は、まず、初期設定の動作(メモリの初期化、周辺回路の初期化など)を行う。そして、システムコントローラ300は、撮像素子314から所定のフレームレートで画像を取得し、被写体の画像を表示素子334に表示する動作(ライブビュー動作)を開始する(S100)。   When the power switch 106 is turned on by the user, the system controller 300 is activated. First, the system controller 300 performs initial setting operations (memory initialization, peripheral circuit initialization, etc.). Then, the system controller 300 acquires an image from the image sensor 314 at a predetermined frame rate, and starts an operation (live view operation) for displaying an image of the subject on the display element 334 (S100).

次に、システムコントローラ300は、タッチパネル検出回路336の動作を許可し、タッチパネル338に入力される情報の検出を開始する(S102)。また、顔認識回路309の動作を許可し、撮像された画像データから被写体の顔の情報の検出を開始する(S104)。また、動きベクトル検出回路308の動作を許可し、撮像された画像データから、移動する被写体の検出を開始する(S106)。   Next, the system controller 300 permits the operation of the touch panel detection circuit 336 and starts detecting information input to the touch panel 338 (S102). Further, the operation of the face recognition circuit 309 is permitted, and detection of the face information of the subject is started from the captured image data (S104). Further, the operation of the motion vector detection circuit 308 is permitted, and detection of the moving subject is started from the captured image data (S106).

次に、システムコントローラ300は、操作部材350のモード設定SW120によって、万華鏡モードが選択されているか否かを判定する。万華鏡モードが選択されたと判定した場合はステップS110へ移行し、選択されていないと判定した場合はステップS200へ移行する。ステップS200では、本フローチャートでは規定しないその他のカメラ動作(測光、合焦、撮像、再生等)が実行される。   Next, the system controller 300 determines whether or not the kaleidoscope mode is selected by the mode setting SW 120 of the operation member 350. If it is determined that the kaleidoscope mode is selected, the process proceeds to step S110. If it is determined that the kaleidoscope mode is not selected, the process proceeds to step S200. In step S200, other camera operations (photometry, focusing, imaging, reproduction, etc.) not defined in this flowchart are executed.

なお、このときユーザは、万華鏡モードを選択するだけではなく、どのような分割方法(例えば、2分割、4分割、8分割等)を選択するように構成してもよい。   At this time, the user may select not only the kaleidoscope mode but also any division method (for example, 2-division, 4-division, 8-division, etc.).

ステップS110では、システムコントローラ300は、顔認識回路309によって、被写体の中から顔を検出したか否かを判定する。顔が検出された場合はステップS118に移行する、顔が検出されなかった場合はステップS112に移行する。   In step S110, the system controller 300 determines whether the face recognition circuit 309 has detected a face from the subject. If a face is detected, the process proceeds to step S118. If a face is not detected, the process proceeds to step S112.

ステップS112では、システムコントローラ300は、動きベクトル検出回路308によって、被写体の動きベクトルを検出したか否かを判定する。動きベクトルが検出された場合はステップS118に移行する、動きベクトルが検出されなかった場合はステップS114に移行する。   In step S112, the system controller 300 determines whether the motion vector detection circuit 308 has detected a motion vector of the subject. If a motion vector is detected, the process proceeds to step S118. If a motion vector is not detected, the process proceeds to step S114.

ステップS114では、システムコントローラ300は、タッチパネル検出回路336により、タッチパネル338から万華鏡状画像生成のための領域が指定されたか否かを判定する。領域が指定された場合はステップS118に移行する、領域が指定されなかった場合はステップS116に移行する。   In step S <b> 114, the system controller 300 determines whether or not an area for generating a kaleidoscope image is specified from the touch panel 338 by the touch panel detection circuit 336. If an area is designated, the process proceeds to step S118. If no area is designated, the process proceeds to step S116.

これらステップS110〜S114の処理により、万華鏡状画像の元画像となる被写体(顔、移動被写体等)が検出される。すなわち、被写体検出部が構成されている。   By the processes in steps S110 to S114, a subject (face, moving subject, etc.) that is the original image of the kaleidoscope image is detected. That is, a subject detection unit is configured.

ステップS116では、システムコントローラ300は、レリーズSW108の操作等によって、撮影開始の動作がされたか否かを判定する。撮影開始がされたと判定した場合はステップS130に移行する。撮影開始がされていない場合はステップS110に戻り、処理を繰り返す。   In step S116, the system controller 300 determines whether or not a shooting start operation has been performed by operating the release SW 108 or the like. If it is determined that shooting has started, the process proceeds to step S130. If shooting has not started, the process returns to step S110 and the process is repeated.

ステップS118では、システムコントローラ300は、万華鏡状画像の生成の元となる元画像の領域を設定する。ここで設定される領域は、ライブビュー中の画像データから顔が検出された場合はその顔を含む領域が設定される。ライブビュー中の画像データから動きベクトルが検出された場合は移動中の被写体を含む領域が設定される。また、ユーザによって画像データ中の所定の領域が指定された場合は、指定された領域が設定される。   In step S <b> 118, the system controller 300 sets an area of the original image that is a source for generating the kaleidoscopic image. The area set here is an area including the face when a face is detected from the image data in the live view. When a motion vector is detected from image data in live view, an area including a moving subject is set. When a predetermined area in the image data is designated by the user, the designated area is set.

次に、ステップS120では、システムコントローラ300は、万華鏡画像生成回路310の動作を許可して、万華鏡画像生成回路310による万華鏡生成処理を実行する。   Next, in step S120, the system controller 300 permits the operation of the kaleidoscope image generation circuit 310, and executes the kaleidoscope generation process by the kaleidoscope image generation circuit 310.

万華鏡画像生成回路310は、設定された元画像から複数の鏡対象の画像を生成し、これを表示素子334に表示する。なお、万華鏡画像生成回路310による万華鏡状画像の生成の処理は後述する。   The kaleidoscope image generation circuit 310 generates a plurality of mirror target images from the set original image and displays them on the display element 334. The kaleidoscope image generation process by the kaleidoscope image generation circuit 310 will be described later.

次に、ステップS122において、システムコントローラ300は、顔認識回路309が顔を検出しなくなった、又は、動きベクトル検出回路が、設定した領域の動きベクトルを検出しなくなった、等、被写体として設定された元画像が画像データの撮像領域から消失したか否かを判定する。設定された元画像が撮像領域から消失した場合は、ステップS126に移行する。設定した元画像データが撮像領域から消失していない場合はステップS124に移行する。   Next, in step S122, the system controller 300 is set as a subject such that the face recognition circuit 309 no longer detects a face, or the motion vector detection circuit no longer detects a motion vector in the set area. It is determined whether or not the original image has disappeared from the imaging area of the image data. When the set original image disappears from the imaging area, the process proceeds to step S126. If the set original image data has not disappeared from the imaging region, the process proceeds to step S124.

ステップS124では、システムコントローラ300は、レリーズSW108の操作等によって、ユーザから撮影開始の操作がされたか否かを判定する。撮影開始の操作がされたと判定した場合はステップS130に移行する。撮影開始の操作がされていない場合はステップS122に戻り、処理を繰り返す。   In step S124, the system controller 300 determines whether or not an operation for starting shooting is performed by the user by operating the release SW 108 or the like. If it is determined that an operation for starting shooting has been performed, the process proceeds to step S130. If the shooting start operation has not been performed, the process returns to step S122 and the process is repeated.

ステップS126では、システムコントローラ300は、万華鏡画像生成回路310の動作の許可を禁止して、万華鏡状画像をディスプレイ132に表示せず、通常のライブビュー画像表示に変更する。その後、ステップS110に戻る。   In step S126, the system controller 300 prohibits the operation of the kaleidoscope image generation circuit 310 and changes the display to normal live view image display without displaying the kaleidoscope image on the display 132. Then, it returns to step S110.

ステップS130では、システムコントローラ300は、撮影準備動作を行う。具体的には、合焦や測光、ホワイトバランス等の対象となる被写体を、撮像素子314における撮像範囲の中から抽出し、抽出された被写体に対して合焦、測光、ホワイトバランスの設定を行う。   In step S130, the system controller 300 performs a shooting preparation operation. Specifically, a subject to be focused, photometric, white balance, or the like is extracted from the imaging range of the image sensor 314, and focusing, photometry, and white balance are set for the extracted subject. .

次に、ステップS131では、システムコントローラ300は、ディスプレイ132でのライブビュー動作を停止する。次に、ステップS133では、システムコントローラ300は、撮像素子314によって取得された信号を、撮像素子IF回路312を介して取得し、これを画像データとして生成する。   Next, in step S131, the system controller 300 stops the live view operation on the display 132. Next, in step S133, the system controller 300 acquires the signal acquired by the image sensor 314 via the image sensor IF circuit 312, and generates this as image data.

次に、ステップS133では、システムコントローラ300は、万華鏡状画像の生成が可能か否かを判定する。前述のステップS110〜S114において、既に万華鏡状画像の元画像が設定されている場合は、万華鏡状画像が生成可能であると判定する。元画像が設定されなかった場合は、万華鏡状画像の生成が不可能であると判定する。   Next, in step S133, the system controller 300 determines whether or not a kaleidoscopic image can be generated. If the original image of the kaleidoscope image has already been set in steps S110 to S114, it is determined that the kaleidoscope image can be generated. When the original image is not set, it is determined that a kaleidoscopic image cannot be generated.

万華鏡状画像の生成が可能でないと判定した場合は、ステップS134に移行し、撮像された画像データをそのままメモリカード340に格納する。   If it is determined that a kaleidoscopic image cannot be generated, the process proceeds to step S134, and the captured image data is stored in the memory card 340 as it is.

万華鏡状画像の生成が可能であると判定した場合は、ステップS135に移行し、撮像された画像データをそのままメモリカード340に格納すると共に、万華鏡画像生成回路310によって生成された万華鏡状画像を、メモリカード340に格納する。   If it is determined that the kaleidoscopic image can be generated, the process proceeds to step S135, the captured image data is stored in the memory card 340 as it is, and the kaleidoscope image generated by the kaleidoscope image generating circuit 310 is Store in the memory card 340.

以上のような処理によって、システムコントローラ300は、ライブビュー中の画面に万華鏡状画像を表示してユーザにどのような画像効果があるのかを指し示すと共に、撮像後は、これを万華鏡状画像として保存することができる。   Through the above processing, the system controller 300 displays a kaleidoscope image on the screen during live view to indicate what kind of image effect the user has, and saves this as a kaleidoscope image after imaging. can do.

なお、ステップS110〜114の処理によって万華鏡画像生成の元画像となる被写体が検出された場合は、ライブビュー表示と共に万華鏡画像の表示を許可する。このときの表示態様を「第1表示モード」と呼ぶ。また、ステップS110〜114の処理によって被写体が検出されなかった、又は、ステップS122の処理において被写体が画面内から存在しなくなった場合は、万華鏡状画像の表示を許可しない。このときの表示態様を「第2表示モード」と呼ぶ。   In addition, when the subject used as the original image of kaleidoscope image generation is detected by the process of step S110-114, display of a kaleidoscope image is permitted with live view display. The display mode at this time is referred to as “first display mode”. Further, when the subject is not detected by the processing of steps S110 to 114, or when the subject no longer exists in the screen in the processing of step S122, display of the kaleidoscope image is not permitted. The display mode at this time is referred to as “second display mode”.

また、本実施形態では、前述のステップS110〜S114において、顔認識回路309によって検出された顔を万華鏡状画像の元画像として設定することを優先し、顔が検出されなかった場合は、動きベクトル検出回路308によって検出された移動する被写体を元画像として選択する。なお、これは逆でもよく、移動する被写体を顔よりも優先させてもよい。   Also, in this embodiment, in steps S110 to S114 described above, priority is given to setting the face detected by the face recognition circuit 309 as the original image of the kaleidoscope image, and if no face is detected, the motion vector A moving subject detected by the detection circuit 308 is selected as an original image. This may be reversed, and the moving subject may be given priority over the face.

また、顔認識回路309が複数の顔を検出した場合に、ディスプレイ132にこれら複数の被写体を示して、タッチパネル338によってユーザにそのうちの一つを選択させてもよい。また、顔認識回路309が複数の顔を検出した場合に、最も撮像装置に近いものを元画像として選択してもよい。また、移動する被写体は、画面内の移動速度が最も大きい被写体を元画像として選択してもよい。   When the face recognition circuit 309 detects a plurality of faces, the plurality of subjects may be shown on the display 132 and the touch panel 338 may cause the user to select one of them. Further, when the face recognition circuit 309 detects a plurality of faces, an image closest to the imaging device may be selected as an original image. As the moving subject, a subject having the highest moving speed in the screen may be selected as the original image.

また、ユーザがモード選択SW120やタッチパネル338を操作することによって、さらに異なる形状の万華鏡状画像を生成できるように構成してもよい。原理的には偶数の領域に分割可能な正多角形形状の万華鏡状画像を生成することが可能である。また、タッチパネル338によってユーザが元画像を選択するときは、前述のように検出された顔や移動被写体の複数の候補の中から一つ選択してもよいし、ユーザが大まかに範囲を指定し、デジタルカメラ100側でそれを正三角形等の元画像領域に修正してもよい。   In addition, a kaleidoscope-like image having a different shape may be generated by the user operating the mode selection SW 120 or the touch panel 338. In principle, a regular polygonal kaleidoscopic image that can be divided into even regions can be generated. When the user selects the original image using the touch panel 338, one of a plurality of candidates for the detected face or moving subject may be selected as described above, or the user may roughly specify a range. The digital camera 100 may modify the original image area such as a regular triangle.

また、前述のフローチャートでは静止画を撮像する例を示したが、動画データを作成してもよい。例えば万華鏡画像生成回路310が元画像に基づいて万華鏡状画像を生成した段階で、その万華鏡状画像を動画データとして記録を開始し、被写体が消失した時点で動画データの記録を終了するようにしてもよい。   Moreover, although the example which image | photographs a still image was shown in the above-mentioned flowchart, you may produce moving image data. For example, when the kaleidoscope image generation circuit 310 generates a kaleidoscope image based on the original image, the recording of the kaleidoscope image is started as moving image data, and the recording of the moving image data is ended when the subject disappears. Also good.

次に、万華鏡画像生成回路310によって行われる万華鏡状画像の生成について説明する。   Next, generation of a kaleidoscope image performed by the kaleidoscope image generation circuit 310 will be described.

図3は、本実施形態の万華鏡状画像の表示方法の一例を示す説明図である。   FIG. 3 is an explanatory diagram illustrating an example of a kaleidoscopic image display method according to the present embodiment.

この図3は、万華鏡画像生成回路310によって生成された万華鏡状画像を、ライブビュー表示中のディスプレイ132に表示する場合の一例を示す。   FIG. 3 shows an example in which the kaleidoscope image generated by the kaleidoscope image generation circuit 310 is displayed on the display 132 during live view display.

図3(A)は、ディスプレイ132におけるライブビュー表示中において、ユーザが、カメラ操作部材350のモード選択SW120によって万華鏡モードを選択した場合の一例を示す。また、ライブビュー画像は、背景(*0)に人物(*2)が画面右側に表示されている例を示す。   FIG. 3A shows an example when the user selects the kaleidoscope mode by the mode selection SW 120 of the camera operation member 350 during the live view display on the display 132. The live view image shows an example in which a person (* 2) is displayed on the right side of the screen in the background (* 0).

図示するように、万華鏡モードが選択された場合は、ディスプレイ132の左上部分に、万華鏡モードが選択されたことを示すアイコン(*1)が表示される。このアイコンは、正六角形の万華鏡状画像が表示される場合の例であり、他の形状(例えば、正方形、正八角形等)では、その形状に対応したアイコンが表示される。   As illustrated, when the kaleidoscope mode is selected, an icon (* 1) indicating that the kaleidoscope mode is selected is displayed in the upper left portion of the display 132. This icon is an example in which a regular hexagonal kaleidoscope-like image is displayed. In other shapes (for example, square, regular octagon, etc.), an icon corresponding to the shape is displayed.

また、このライブビュー表示における画像データから、顔認識回路309によって検出された顔の位置を示す指示枠(*3)が表示される。そして、この顔画像を元画像として万華鏡状画像を生成する場合に、元画像として設定された領域(*4)が表示される。   In addition, an instruction frame (* 3) indicating the position of the face detected by the face recognition circuit 309 is displayed from the image data in the live view display. When a kaleidoscopic image is generated using this face image as an original image, an area (* 4) set as the original image is displayed.

図3(B)及び図3(C)は、ライブビュー表示において、生成された万華鏡状画像を表示したときの一例を示す。   FIG. 3B and FIG. 3C show an example when the generated kaleidoscope-like image is displayed in the live view display.

ディスプレイ132には、設定された元画像から生成された万華鏡状画像(*6)が表示される。なお、このときは、背景部分(*7)は表示せず、無地とする。   A kaleidoscope image (* 6) generated from the set original image is displayed on the display 132. At this time, the background (* 7) is not displayed and is plain.

万華鏡状画像を表示するときは、撮像中の画像データの全体を縮小してディスプレイ132内の縮小表示部(*5)にライブビュー画像を縮小して表示する。また、縮小表示部(*5)に、元画像として設定された領域(*4)も縮小表示する。ユーザは、縮小表示部(*5)を観察することによって、万華鏡状画像(*6)の元画像が、ライブビュー画像中のどの部分に存在するのかを認識することができる。   When displaying a kaleidoscope image, the entire image data being captured is reduced and the live view image is reduced and displayed on the reduced display portion (* 5) in the display 132. Also, the area (* 4) set as the original image is reduced and displayed on the reduced display portion (* 5). The user can recognize in which part in the live view image the original image of the kaleidoscope image (* 6) exists by observing the reduced display portion (* 5).

万華鏡状画像を表示しているときに元画像として選択された被写体が移動した場合は、ユーザは、図3(C)に示すように、縮小表示部(*5)において元画像の領域(*4)の移動を確認することができる。   When the subject selected as the original image moves while displaying the kaleidoscope-like image, as shown in FIG. 3C, the user displays the area (* of the original image in the reduced display portion (* 5). The movement of 4) can be confirmed.

さらに被写体が移動して、元画像の領域(*4)が撮像中のライブビュー画像の範囲外へと移動した場合は、図3(D)に示すような表示へと切り替わる。   When the subject further moves and the area (* 4) of the original image moves outside the range of the live view image being captured, the display is switched to the display as shown in FIG.

図3(D)に示すように、人物(*2)が撮像中のライブビュー画像の撮像範囲外へと移動し、元画像(*3)が撮像範囲外へと移動した場合は、元画像となる顔等を検出できなくなる。これにより、第2表示モードに移行し、万華鏡状画像の表示を禁止する。なお、万華鏡モードは設定されたままであるので、万華鏡モードであることを示すアイコン(*1)を表示したまま、図3(A)と同様に、ディスプレイ132全体でライブビュー表示を行う。   As shown in FIG. 3D, when the person (* 2) moves outside the imaging range of the live view image being captured and the original image (* 3) moves outside the imaging range, the original image It becomes impossible to detect the face and the like. Thereby, it transfers to 2nd display mode and the display of a kaleidoscope-like image is prohibited. Since the kaleidoscope mode remains set, the live view display is performed on the entire display 132 as in FIG. 3A while the icon (* 1) indicating the kaleidoscope mode is displayed.

次に、万華鏡画像生成回路310による万華鏡状画像の生成方法を説明する。   Next, a method for generating a kaleidoscope image by the kaleidoscope image generation circuit 310 will be described.

図4及び図5は、万華鏡画像生成回路310によって実行される万華鏡状画像の生成方法の一例を示す説明図である。   4 and 5 are explanatory diagrams illustrating an example of a kaleidoscopic image generation method executed by the kaleidoscope image generation circuit 310. FIG.

なお、この図4及び図5に示す例では、元画像に対して線対称又は点対称に正六角形状に形成される万華鏡状画像の例を示す。   The examples shown in FIGS. 4 and 5 show examples of kaleidoscopic images formed in a regular hexagonal shape with respect to the original image in line symmetry or point symmetry.

図4に示すように、万華鏡状画像データは、正六角形を6つの領域に分割し、分割された各々の三角形形状の領域を、それぞれSEG1〜SEG6と呼ぶ。また、正六角形の中心部分をP0と呼び、各頂点をそれぞれP1〜P6と呼ぶ。   As shown in FIG. 4, in the kaleidoscope image data, a regular hexagon is divided into six regions, and each of the divided triangular regions is referred to as SEG1 to SEG6. Moreover, the center part of a regular hexagon is called P0, and each vertex is called P1-P6, respectively.

万華鏡画像生成回路310は、顔認識回路309によって検出された顔を元画像として設定する。元画像は、検出された顔を含む正三角形の領域として設定する。図5(A)に示すように、検出された顔を含む正三角形の領域を、SEG1としてまず設定する。   The kaleidoscope image generation circuit 310 sets the face detected by the face recognition circuit 309 as an original image. The original image is set as an equilateral triangle area including the detected face. As shown in FIG. 5A, an equilateral triangle area including the detected face is first set as SEG1.

次に、万華鏡画像生成回路310は、設定されたSEG1に対して、この正三角形の一つの辺(P0−P2)を基準とした鏡対称な画像を生成する。この画像をSEG2として設定し、SEG1に合成する。同様に、設定されたSEG1に対して、この正三角形の一つの辺(P0−P1)を基準とした鏡対称な画像を生成する。この画像をSEG6として設定し、SEG1及びSEG2に合成する。このときの状態を図5(B)に示す。   Next, the kaleidoscope image generation circuit 310 generates a mirror-symmetric image with respect to the set SEG1 with reference to one side (P0-P2) of the equilateral triangle. This image is set as SEG2 and synthesized with SEG1. Similarly, a mirror-symmetric image is generated with respect to the set SEG1 with reference to one side (P0-P1) of the equilateral triangle. This image is set as SEG6 and combined with SEG1 and SEG2. The state at this time is shown in FIG.

次に、万華鏡画像生成回路310は、SEG1、SEG2及びSEG6から、正六角形中心を経由する辺(P6−P0−P3)を基準とした鏡対称の画像を生成する。このときの三つの領域がそれぞれSEG3、SEG4及びSEG5として生成する。そして、生成されたSEG3、SEG4及びSEG5を、SEG1、SEG2及びSEG6に合成する。このときの状態を図5(C)に示す。   Next, the kaleidoscope image generation circuit 310 generates a mirror-symmetric image based on the side (P6-P0-P3) passing through the center of the regular hexagon from SEG1, SEG2, and SEG6. The three regions at this time are generated as SEG3, SEG4, and SEG5, respectively. Then, the generated SEG3, SEG4, and SEG5 are synthesized into SEG1, SEG2, and SEG6. The state at this time is shown in FIG.

このようにして、万華鏡生成回路310は、元画像に基づいて五つの鏡対称の画像を生成することによって、正六角形に分割された万華鏡状画像を生成する。   In this way, the kaleidoscope generation circuit 310 generates a kaleidoscope-like image divided into regular hexagons by generating five mirror-symmetric images based on the original image.

次に、本実施形態のデジタルカメラ100における画像データの記録形式について説明する。   Next, a recording format of image data in the digital camera 100 of the present embodiment will be described.

図6は、メモリカード340に記録される画像データの記録形式の一例を示す説明図である。   FIG. 6 is an explanatory diagram showing an example of a recording format of image data recorded on the memory card 340.

デジタルカメラ100において、通常撮像された画像データ(通常画像データ)と、万華鏡状画像として生成された画像データ(万華鏡状画像データ)との画像データの組が生成される。この一組の画像データを1ファイルとして記録し、一つのファイルのみで通常画像データと万華鏡状画像データとを再生、保存、コピー等を行うことができる。   In the digital camera 100, a set of image data of normally captured image data (normal image data) and image data (kaleidoscopic image data) generated as a kaleidoscopic image is generated. This set of image data is recorded as one file, and normal image data and kaleidoscopic image data can be reproduced, stored, copied, etc. with only one file.

複数の画像データを1ファイルとして記録する場合は、マルチピクチャフォーマット(CIPA DC−007−2009)に規定された方法によって記録することができる。   When recording a plurality of image data as one file, it can be recorded by a method defined in a multi-picture format (CIPA DC-007-2009).

マルチピクチャフォーマットは、一つのファイルに複数の画像データを記録するフォーマットであり、本実施形態においては、通常画像データと、通常画像データに基づいて万華鏡状画像として生成された画像データとを、一のファイルとして記録する。   The multi-picture format is a format for recording a plurality of image data in one file. In this embodiment, normal image data and image data generated as a kaleidoscope image based on the normal image data are combined. Record as a file.

より具体的には、通常画像データ及びその画像データの情報を示すヘッダ情報1と、万華鏡状画像データ及びその画像データを示すヘッダ情報2とを一つのファイルとして生成する。生成されたファイルは、DCF規格に準拠したフォルダ名及びファイル名で、メモリカード340に記録される。   More specifically, the normal image data and header information 1 indicating information of the image data, and kaleidoscopic image data and header information 2 indicating the image data are generated as one file. The generated file is recorded in the memory card 340 with a folder name and a file name conforming to the DCF standard.

ヘッダ情報1には、例えば、通常画像データに対応する万華鏡状画像データの情報が記録される。また、万華鏡状画像データは1つではなく、2又はそれ以上の万華鏡状画像データが追加されていてもよい。   In the header information 1, for example, information of kaleidoscopic image data corresponding to normal image data is recorded. Further, the kaleidoscopic image data is not one, and two or more kaleidoscopic image data may be added.

このように記録されたファイルは、コンピュータ等で再生するときに、通常画像データと万華鏡状画像データを同時に表示したり、通常画像データと万華鏡状画像データとを連続で表示したり、一方をアイコン表示としてクリック表示により拡大表示する等の表示方法を採ることができる。   When the recorded file is played back on a computer or the like, normal image data and kaleidoscopic image data are displayed simultaneously, normal image data and kaleidoscopic image data are displayed continuously, or one of them is displayed as an icon. As a display, a display method such as an enlarged display by clicking display can be adopted.

図7は、メモリカード340に記録される画像データの記録形式の他の例を示す説明図である。   FIG. 7 is an explanatory diagram showing another example of the recording format of the image data recorded on the memory card 340.

図6で説明したように、一つのファイル内に複数の画像データを記録する方法とは別に、通常画像データと万華鏡状画像データとを、それぞれ別のフォルダに記録することもできる。   As described with reference to FIG. 6, apart from the method of recording a plurality of image data in one file, normal image data and kaleidoscopic image data can also be recorded in separate folders.

より具体的には、通常画像データをDCF規格に準拠したフォルダ名及びファイル名で、メモリカード340に記録される。   More specifically, normal image data is recorded on the memory card 340 with a folder name and a file name conforming to the DCF standard.

一方で、万華鏡状画像データは、万華鏡状画像データを記録するための専用のフォルダとして万華鏡状画像フォルダをメモリカード340内に生成し、この万華鏡状画像フォルダ内に万華鏡状画像データを記録する。なお、図7に示す例では、万華鏡状画像フォルダのフォルダ名を「Kaleidoscope Photo」としている。   On the other hand, the kaleidoscope image data generates a kaleidoscope image folder in the memory card 340 as a dedicated folder for recording the kaleidoscope image data, and records the kaleidoscope image data in the kaleidoscope image folder. In the example illustrated in FIG. 7, the folder name of the kaleidoscope image folder is “Kaleidoscope Photo”.

万華鏡状画像フォルダに記録する万華鏡状画像データのファイル名は、通常画像データと同一でもよいし、通常画像データのファイル名に所定の文字列を負荷するなど、通常画像データのファイル名に関連した名称としてもよい。   The file name of the kaleidoscope image data to be recorded in the kaleidoscope image folder may be the same as that of the normal image data, or it is related to the file name of the normal image data, such as loading a predetermined character string into the file name of the normal image data. It is good also as a name.

またさらに、万華鏡状画像フォルダには、通常画像データと万華鏡状画像データとの関連づけを示す関連付けファイルを記録する。なお、図7に示す例では、関連付けファイルの名称を「LinkData.dat」としている。   Furthermore, an association file indicating the association between the normal image data and the kaleidoscope image data is recorded in the kaleidoscope image folder. In the example illustrated in FIG. 7, the name of the association file is “LinkData.dat”.

次に、本発明の実施形態の万華鏡状画像の変形例を説明する。   Next, a modified example of the kaleidoscopic image of the embodiment of the present invention will be described.

図4及び図5で前述したように、本実施形態では、正三角形の元画像領域を6つ組み合わせた正六角形の万華鏡状画像を一例として示したが、この形状に限られない。   As described above with reference to FIGS. 4 and 5, in the present embodiment, a regular hexagonal kaleidoscopic image obtained by combining six original image areas of regular triangles is shown as an example, but the shape is not limited thereto.

図8は、万華鏡画像生成回路310によって生成される万華鏡状画像の他の例を示す説明図である。   FIG. 8 is an explanatory diagram illustrating another example of a kaleidoscope image generated by the kaleidoscope image generation circuit 310.

図8(A)は、正方形の万華鏡状画像の一例である。この場合は、元画像となる領域は二等辺三角形となり、この二等辺三角形を4つ組み合わせて正方形の万華鏡状画像を生成する。   FIG. 8A is an example of a square kaleidoscopic image. In this case, the region to be the original image is an isosceles triangle, and a square kaleidoscope-like image is generated by combining four isosceles triangles.

図8(B)は、正八角形の万華鏡状画像の一例である。この場合は、元画像となる領域は二等辺三角形となり、この二等辺三角形を8つ組み合わせて正八角形の万華鏡状画像を生成する。   FIG. 8B is an example of a regular octagon kaleidoscopic image. In this case, the region to be the original image is an isosceles triangle, and a regular octagon kaleidoscope-like image is generated by combining eight isosceles triangles.

このように、万華鏡画像生成回路310によって生成される万華鏡状画像は、様々な形状の態様を取ることができる。画像データの解像度にもよるが、原理的には偶数の領域に分割可能な正多角形形状の万華鏡状画像を生成することが可能であり、万華鏡状画像をどのような形状とするかをユーザによって選択するように構成してもよい。また、正n角形という選択ではなく、元画像の中心角度を、例えば60°(正六角形)、45°(正八角形)、30°(正十二角形)という数値としてユーザが指定するように構成してもよい。   As described above, the kaleidoscope image generated by the kaleidoscope image generation circuit 310 can take various forms. Although it depends on the resolution of the image data, it is possible in principle to generate a kaleidoscopic image with a regular polygon shape that can be divided into even regions. You may comprise so that it may select by. Further, instead of selecting a regular n-gon, the center angle of the original image is specified by the user as numerical values such as 60 ° (regular hexagon), 45 ° (regular octagon), and 30 ° (regular dodecagon), for example. May be.

次に、ライブビュー表示において、万華鏡状画像を表示する際の変形例を説明する。   Next, a modified example of displaying a kaleidoscope-like image in live view display will be described.

図3で説明したように、ディスプレイ132に、生成され万華鏡状画像をライブビュー表示と共に表示する例を示したがこの表示形態に限られない。   As described with reference to FIG. 3, an example is shown in which the generated kaleidoscope-like image is displayed on the display 132 together with the live view display. However, the display form is not limited thereto.

図9は、ライブビュー表示において、生成されたた万華鏡状画像を表示するときの他の例を示す。   FIG. 9 shows another example when displaying the generated kaleidoscope image in the live view display.

図9に示す例では、ライブビュー画像を縮小表示とせずに、ディスプレイ132に撮像領域全体のライブビュー表示を行う。そして、生成された万華鏡状画像を、ライブビュー表示中の画像データに重ねて表示する。   In the example illustrated in FIG. 9, live view display of the entire imaging region is performed on the display 132 without reducing the live view image. Then, the generated kaleidoscopic image is displayed so as to be superimposed on the image data being displayed in live view.

このように、生成された万華鏡状画像を表示する際もディスプレイ132の全体でライブビュー表示を行うことで、万華鏡状画像が表示される部分が隠れてしまうものの、ユーザは撮像している画像の全体を把握しやすいという利点がある。   In this way, when displaying the generated kaleidoscope image, the live view display is performed on the entire display 132, so that the portion where the kaleidoscope image is displayed is hidden, but the user does not capture the captured image. There is an advantage that it is easy to grasp the whole.

以上説明したように、本発明の実施形態では、デジタルカメラ100において、被写体検出部(動きベクトル検出回路308、顔検出回路309等)によって被写体(例えば顔)が検出された場合に、当該被写体を元画像として生成した万華鏡状画像をライブビュー表示中のディスプレイ132に表示する。また、被写体が検出されなくなった場合には、万華鏡状画像の表示を終了する。   As described above, in the embodiment of the present invention, when a subject (for example, a face) is detected by the subject detection unit (motion vector detection circuit 308, face detection circuit 309, etc.) in the digital camera 100, the subject is detected. The kaleidoscopic image generated as the original image is displayed on the display 132 during live view display. If the subject is no longer detected, the display of the kaleidoscope image is terminated.

このようにすることによって、デジタルカメラ100に単に万華鏡状画像を表示するのみでなく、ライブビュー表示される撮像中の画像と関連して表示されることで、状況に応じたダイナミックな表示を行うことができ、ユーザの興趣を高めることができて、ユーザが撮像装置を親しみながら使用することができる。   By doing so, not only a kaleidoscope-like image is displayed on the digital camera 100 but also a dynamic display corresponding to the situation is performed by being displayed in association with the image being captured displayed in the live view display. It is possible to enhance the interest of the user, and the user can use the imaging apparatus while getting familiar with it.

また、万華鏡状画像を表示するときに、撮像領域の全体をディスプレイ132の一部に、万華鏡状画像と重なることなく縮小してライブビュー表示することによって、ライブビュー表示が万華鏡状画像によって妨げられることなく撮像中の画像を観察することができる。   Further, when displaying a kaleidoscopic image, the entire imaging area is reduced to a part of the display 132 and displayed in a live view without overlapping with the kaleidoscopic image, so that the live view display is hindered by the kaleidoscopic image. The image being imaged can be observed without any problem.

なお、ディスプレイ132全体でライブビュー表示を行い、その上に万華鏡状画像を重ねて表示してもよい。これにより、ユーザは撮像している画像の全体を把握しやすい。   In addition, live view display may be performed on the entire display 132, and a kaleidoscope-like image may be superimposed on the display. As a result, the user can easily grasp the entire image being captured.

また、被写体検出部は、顔検出回路309による顔を検出する、又は、動きベクトル検出部308による移動被写体を検出するので、万華鏡状画像として生成される元画像をデジタルカメラ100が自動的に検出し、自動的に万華鏡状画像を生成することにより、ユーザは顔等によって生成された万華鏡状画像により興趣を感じると共に、ライブビュー表示される予期しない変化の発生することによる楽しさを感じることができる。また、被写体としてはユーザがタッチパネル等によって指示することも可能であり、ユーザの意図に沿った万華鏡状画像を生成することもできる。   The subject detection unit detects the face by the face detection circuit 309 or the moving subject by the motion vector detection unit 308, so the digital camera 100 automatically detects the original image generated as a kaleidoscope image. In addition, by automatically generating a kaleidoscope image, the user can feel interest by the kaleidoscope image generated by the face and the like, and can also enjoy the pleasure caused by unexpected changes that are displayed in live view. it can. In addition, the subject can be instructed by the user using a touch panel or the like, and a kaleidoscope-like image in accordance with the user's intention can be generated.

なお、本発明は上記の実施形態や変形例に限定されずに、その技術的な思想の範囲内において種々の変更がなしうることは明白である。また、被写体像を画像データとして取得し、表示できる電子機器全てに適用可能であることも明白である。   It should be noted that the present invention is not limited to the above-described embodiments and modifications, and it is obvious that various modifications can be made within the scope of the technical idea. It is also apparent that the present invention is applicable to all electronic devices that can acquire and display subject images as image data.

100 デジタルカメラ
102 撮影レンズ
132 タッチパネルディスプレイ
300 システムコントローラ(制御部)
308 動きベクトル検出回路
309 顔検出回路
310 万華鏡画像生成回路
314 撮像素子
350 カメラ操作部
100 Digital Camera 102 Photography Lens 132 Touch Panel Display 300 System Controller (Control Unit)
308 Motion vector detection circuit 309 Face detection circuit 310 Kaleidoscope image generation circuit 314 Image sensor 350 Camera operation unit

Claims (6)

被写体を結像する撮影レンズと、
前記撮影レンズによって結像された光学像を画像データに変換して出力する撮像部と、
前記撮像部から出力された画像データをライブビュー表示可能な表示部と、
前記光学像から被写体を検出する被写体検出部と、
前記画像データの一部から万華鏡状画像データを生成する万華鏡状画像生成部と、
前記撮像部から出力された画像データを前記表示部にライブビュー表示させるとともに、前記万華鏡状画像生成部によって生成された万華鏡状画像データを前記表示部に表示させる制御部と、
を備え、
前記制御部は、ライブビュー表示において、前記被写体検出部が被写体を検出したときに、前記表示部に、当該被写体を用いて生成した万華鏡状画像をライブビュー表示と共に表示する第1表示モードと、前記被写体検出部が被写体を検出しないときに、万華鏡状画像を前記表示部に表示しない第2表示モードと、を切り換えることを特徴とする撮像装置。
A photographic lens for imaging the subject;
An imaging unit that converts an optical image formed by the photographing lens into image data and outputs the image data;
A display unit capable of live view display of image data output from the imaging unit;
A subject detection unit for detecting a subject from the optical image;
A kaleidoscope image generator for generating kaleidoscope image data from a part of the image data;
A control unit that displays the image data output from the imaging unit on the display unit in a live view, and displays the kaleidoscope image data generated by the kaleidoscope image generation unit on the display unit;
With
In the live view display, the control unit displays a kaleidoscope image generated using the subject together with the live view display on the display unit when the subject detection unit detects the subject, and a first display mode; An image pickup apparatus that switches between a second display mode in which a kaleidoscope-like image is not displayed on the display unit when the subject detection unit does not detect a subject.
請求項1に記載の撮像装置において、
前記制御部は、前記第1表示モードにおいて、前記表示部に、生成された万華鏡状画像を表示させるとともに、前記撮像部によって出力される画像データの全体を前記表示部の一部に前記万華鏡状画像と重なることなく縮小してライブビュー表示させることを特徴とする撮像装置。
The imaging device according to claim 1,
In the first display mode, the control unit causes the display unit to display the generated kaleidoscopic image, and the entire image data output by the imaging unit is displayed on the display unit as a part of the kaleidoscope shape. An image pickup apparatus that displays a live view by reducing the image without overlapping the image.
請求項1又は2に記載の撮像装置において、
前記制御部は、前記第1表示モードにおいて、前記撮像部によって出力される画像データを前記表示部にライブビュー表示させるとともに、生成された万華鏡状画像を、前記ライブビュー表示に重ね合わせて表示することを特徴とする撮像装置。
The imaging device according to claim 1 or 2,
In the first display mode, the control unit displays the image data output by the imaging unit on the display unit in a live view, and displays the generated kaleidoscope image superimposed on the live view display. An imaging apparatus characterized by that.
請求項1から3に記載の撮像装置において、
前記被写体検出部は、人物又は動物の顔の位置を検出することを特徴とする撮像装置。
In the imaging device according to claims 1 to 3,
The imaging device according to claim 1, wherein the subject detection unit detects a position of a human or animal face.
請求項1から4に記載の撮像装置において、
前記被写体検出部は、移動中の物体の位置を検出することを特徴とする撮像装置。
The imaging device according to claim 1, wherein
The imaging device according to claim 1, wherein the subject detection unit detects a position of a moving object.
被写体を結像する撮影レンズによって結像された光学像を画像データに変換し、前記画像データをライブビュー表示可能な表示部を備える撮像装置の表示方法であって、
前記表示部にライブビュー表示を行い、
前記光学像から被写体を検出したときに、被写体を用いて生成した万華鏡状画像をライブビュー表示と共に表示し、
前記光学像から被写体を検出しないときは、万華鏡状画像を前記表示部に表示しないことを特徴とする撮像装置の表示方法。
An optical image formed by a photographic lens that forms an object is converted into image data, and the display method of an imaging apparatus including a display unit capable of performing live view display of the image data,
Live view display on the display unit,
When a subject is detected from the optical image, a kaleidoscope image generated using the subject is displayed together with a live view display,
A display method of an imaging apparatus, wherein when a subject is not detected from the optical image , a kaleidoscopic image is not displayed on the display unit.
JP2010256776A 2010-11-17 2010-11-17 Imaging device Expired - Fee Related JP5622535B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010256776A JP5622535B2 (en) 2010-11-17 2010-11-17 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010256776A JP5622535B2 (en) 2010-11-17 2010-11-17 Imaging device

Publications (2)

Publication Number Publication Date
JP2012109778A JP2012109778A (en) 2012-06-07
JP5622535B2 true JP5622535B2 (en) 2014-11-12

Family

ID=46494932

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010256776A Expired - Fee Related JP5622535B2 (en) 2010-11-17 2010-11-17 Imaging device

Country Status (1)

Country Link
JP (1) JP5622535B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9459781B2 (en) 2012-05-09 2016-10-04 Apple Inc. Context-specific user interfaces for displaying animated sequences
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
EP4321088A2 (en) 2015-08-20 2024-02-14 Apple Inc. Exercise-based watch face
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
DK202070625A1 (en) 2020-05-11 2022-01-04 Apple Inc User interfaces related to time
CN115552375A (en) 2020-05-11 2022-12-30 苹果公司 User interface for managing user interface sharing
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004265168A (en) * 2003-03-03 2004-09-24 Sharp Corp Image generating device, image generating method, image generating program, program recording medium and portable telephone terminal
JP5328277B2 (en) * 2008-09-26 2013-10-30 任天堂株式会社 Image processing program and image processing apparatus

Also Published As

Publication number Publication date
JP2012109778A (en) 2012-06-07

Similar Documents

Publication Publication Date Title
JP5622535B2 (en) Imaging device
JP5115139B2 (en) Composition determination apparatus, composition determination method, and program
KR20010100929A (en) Image-capturing apparatus
US9596415B2 (en) Control apparatus, imaging system, control method, and program for changing a composition of an image
JP2007295547A (en) Digital camera
KR20120114177A (en) Image processing device capable of generating wide-range image
JP2009218807A (en) Imaging apparatus and image reproducing apparatus
KR20120115127A (en) Image processing device capable of generating wide-range image
JP5966778B2 (en) Imaging apparatus, imaging method, and program
JP2019012881A (en) Imaging control device and control method of the same
JP2007251927A (en) Camera with red-eye correction function
JP2003179798A (en) Digital camera
JP2023164919A (en) Video creating method
JP2010087899A (en) Imaging apparatus, control method thereof, and program
JP2005229209A (en) Imaging apparatus, photographing condition setting method, and program
JP2012124614A (en) Imaging apparatus and imaging apparatus control method
JP5289354B2 (en) Imaging device
JP5623247B2 (en) Imaging apparatus and control method thereof
JP2010200243A (en) Camera
JP2008065851A (en) Information processing apparatus and recording medium
JP2007282279A (en) Information processing apparatus and recording medium
JP6289037B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
JP5648563B2 (en) Image processing apparatus, image processing method, and program
US20230300469A1 (en) Image capture apparatus and control method therefor
JP2007124521A (en) Image processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140623

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140701

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140819

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140909

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140922

R151 Written notification of patent or utility model registration

Ref document number: 5622535

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees