JP4447966B2 - Imaging device - Google Patents

Imaging device Download PDF

Info

Publication number
JP4447966B2
JP4447966B2 JP2004173013A JP2004173013A JP4447966B2 JP 4447966 B2 JP4447966 B2 JP 4447966B2 JP 2004173013 A JP2004173013 A JP 2004173013A JP 2004173013 A JP2004173013 A JP 2004173013A JP 4447966 B2 JP4447966 B2 JP 4447966B2
Authority
JP
Japan
Prior art keywords
search
image
search key
key image
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004173013A
Other languages
Japanese (ja)
Other versions
JP2005354416A5 (en
JP2005354416A (en
Inventor
隆 帖佐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2004173013A priority Critical patent/JP4447966B2/en
Priority to PCT/JP2005/010754 priority patent/WO2005122564A1/en
Priority to US10/576,212 priority patent/US7911510B2/en
Priority to EP05748084A priority patent/EP1759527B1/en
Priority to CN2005800015877A priority patent/CN1906934B/en
Publication of JP2005354416A publication Critical patent/JP2005354416A/en
Publication of JP2005354416A5 publication Critical patent/JP2005354416A5/ja
Application granted granted Critical
Publication of JP4447966B2 publication Critical patent/JP4447966B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、被写体の画像(以下、被撮像画像という。)を撮像して記憶媒体に記憶する撮像装置に係り、とりわけ、画像検索機能を備える撮像装置に関するものである。   The present invention relates to an imaging apparatus that captures an image of a subject (hereinafter referred to as an image to be captured) and stores the captured image in a storage medium, and more particularly to an imaging apparatus having an image search function.

かねてより、被撮像画像を撮像して記憶媒体に記憶する撮像装置が実用化されているが、記憶媒体の大容量化に伴い、記憶した画像を平易に検索できることが望まれている。   An image pickup apparatus that picks up an image to be picked up and stores it in a storage medium has been put into practical use. However, as the capacity of the storage medium increases, it is desired that the stored image can be easily searched.

この要望に対し、特許文献1によれば、記憶媒体内に記憶されている画像データの特徴量と、検索キー画像データの特徴量とを抽出し、両者を比較することで所望の画像データを検索抽出する撮像装置が提案されている。
特開2000−76302号公報。
In response to this demand, according to Patent Document 1, the feature amount of the image data stored in the storage medium and the feature amount of the search key image data are extracted, and the desired image data is obtained by comparing the two. An image pickup apparatus for searching and extracting has been proposed.
JP 2000-76302 A.

しかしながら、上記文献に開示されている画像検索手段は、検索キー画像の撮像、設定、及び検索キー画像の管理方法等の点において、ユーザーからみた使い勝手が十分に考慮されておらず、改善の余地が多々あった。   However, the image search means disclosed in the above document does not sufficiently consider the user-friendliness in terms of the imaging of the search key image, the setting, the search key image management method, etc., and there is room for improvement. There were many.

例えば、通常の画像データを撮像するときと、検索キー画像データを撮像するときとでは、操作の一貫性を崩すことなく、双方の操作を明確に区別できたほうがユーザーには好ましいであろう。   For example, it would be preferable for the user to be able to clearly distinguish between the operations when capturing normal image data and when capturing search key image data without breaking the consistency of operations.

ところで、通常の画像データと検索キー画像データとを区別なく撮像して記憶媒体に保存する撮像装置では、記憶媒体に多数の画像データが記憶されていると、検索キー画像データを選択する作業が面倒なものとなる。とりわけ、今後は、記憶媒体の容量が急激に増加し、記憶媒体に記憶される画像データの数も膨大とることが予想されるため、検索キー画像データを見つける作業は従来にもまして困難なものとなるだろう。   By the way, in an imaging device that captures normal image data and search key image data without distinction and saves them in a storage medium, if a large number of image data is stored in the storage medium, an operation of selecting search key image data is required. It will be troublesome. In particular, in the future, it is expected that the capacity of the storage medium will increase rapidly and the number of image data stored in the storage medium will be enormous, so it will be more difficult than ever to find the search key image data. It will be.

したがって、通常の画像データと検索キー画像データとを、撮像の段階から切り分けて保存しておくほうが、後の画像検索における検索キー画像データの設定作業が容易となろう。   Therefore, if the normal image data and the search key image data are separated and stored from the imaging stage, the setting operation of the search key image data in the subsequent image search will be easier.

そこで、本発明は、このような課題および他の課題の少なくとも一つを解決することを目的とする。例えば、撮影した画像に基づく画像の検索中に他の画像の撮影を可能とするとともに、他の検索キー画像に基づく検索処理中である場合は、検索キー画像を撮像してもその画像に基づく検索処理を開始させないように制御することで検索処理の負荷を軽減することを目的とする。なお、他の課題については明細書の全体を通して理解できよう。 Accordingly, the present invention aims to solve at least one of such problems and other problems. For example, while searching for an image based on a captured image, it is possible to capture another image, and when a search process based on another search key image is being performed, the search key image is captured based on that image. An object is to reduce the load of the search process by controlling the search process not to start. Other issues can be understood throughout the specification.

上記課題を解決すべく、本発明は、画像を撮影して記録媒体に記録する撮像装置であって、画像検索の検索キーとなる検索キー画像の撮像指示に応じて、検索キー画像を撮像する撮像手段と、前記撮像手段により撮像された検索キー画像に基づいて、前記記録媒体に記録されている画像の中から画像を検索する検索手段と、前記検索キー画像が撮像されたことに応じて、前記検索手段による検索を開始させる制御手段と、前記検索手段により検索された画像を表示する表示手段を有し、前記撮像手段は、前記検索手段による検索キー画像に基づく検索処理と並行して、画像の撮像が可能であり、前記制御手段は、前記検索キー画像に基づく画像の検索処理中に、新たな検索キー画像の撮影指示が入力された場合、前記新たな検索キー画像が撮像されても、当該新たな検索キー画像に基づく検索処理は開始しないように制御し、前記表示手段は、画像を撮影する撮影モードから画像を再生する再生モードに切り替えられたことに応じて、前記検索手段により検索された画像を表示することを特徴とする。 In order to solve the above-described problems, the present invention is an imaging apparatus that captures an image and records it on a recording medium, and captures a search key image in response to an imaging instruction for a search key image that serves as a search key for image search. An image pickup means, a search means for searching for an image from images recorded on the recording medium based on a search key image picked up by the image pickup means, and in response to the search key image being picked up A control means for starting a search by the search means; and a display means for displaying an image searched by the search means , wherein the imaging means is in parallel with a search process based on a search key image by the search means. An image can be captured, and the control means captures the new search key image when an instruction to capture a new search key image is input during the image search process based on the search key image. Be, the new based on the search key image retrieval processing is controlled not to start, the display means, in response to switched from shooting mode for capturing an image on a reproduction mode for reproducing an image, the The image retrieved by the retrieval means is displayed .

また、本発明は、画像を撮影して記録媒体に記録する撮像装置であって、検索キー画像の撮像指示に応じて、検索キー画像を撮像する撮像手段と、前記撮像手段により撮像された検索キー画像に基づいて、前記記録媒体に記録されている画像の中から画像を検索する検索手段と、前記検索キー画像が撮像されたことに応じて、前記検索手段による検索を開始させる制御手段と、を有し、前記撮像手段は、前記検索手段による検索キー画像に基づく検索処理と並行して、画像の撮像が可能であり、前記検索手段による画像の検索中に、新たな検索キー画像の撮影指示が入力された場合、他の検索キー画像に基づく検索処理中であることを通知する通知手段とを有し、前記撮像手段は、画像を撮影する撮影モード時には、シャッターボタンが操作されたことに応じて通常画像を撮像し、前記シャッターボタンと検索ボタンが同時に操作されたことに応じて検索キー画像を撮像し、画像を再生する再生モード時には、前記シャッターボタンが操作されたことに応じて、検索キー画像を撮像することを特徴とする。 In addition, the present invention is an imaging device that captures an image and records it on a recording medium, the imaging device capturing a search key image in response to an imaging instruction for the search key image, and a search captured by the imaging unit Search means for searching for an image from images recorded on the recording medium based on a key image; and control means for starting a search by the search means in response to the search key image being captured. The imaging means can capture an image in parallel with the search processing based on the search key image by the search means, and a new search key image can be acquired during the image search by the search means. when a photographing instruction is inputted, have a notification means for notifying that the search process in which based on other key images, the imaging means, the imaging mode for capturing an image, the shutter button is operated When a normal image is captured in response to the operation, the search key image is captured in response to simultaneous operation of the shutter button and the search button, and the shutter button is operated in the playback mode in which the image is played back. According to this, a search key image is captured .

以上説明したように、本発明によれば、撮影した画像に基づく画像の検索中に他の画像の撮影を可能とするとともに、他の検索キー画像に基づく検索処理中である場合は、検索キー画像を撮像してもその画像に基づく検索処理を開始させないように制御することで検索処理の負荷を軽減することが可能となる。 As described above, according to the present invention, it is possible to shoot another image while searching for an image based on the captured image, and when a search process based on another search key image is being performed, Even if an image is captured, it is possible to reduce the load of the search process by controlling so that the search process based on the image is not started.

以下に本発明の上位概念、中位概念および下位概念の理解に役立つ一実施形態を示す。なお、以下の実施形態に含まれる概念について、そのすべてが特許請求の範囲に記載されているとは限らない。ただし、これは特許発明の技術的範囲から意識的に除外したのではなく、特許発明と均等の関係にあるため特許請求の範囲には記載していない場合があることを理解していただきたい。   In the following, an embodiment useful for understanding the high-level concept, middle-level concept, and low-level concept of the present invention is shown. Note that not all of the concepts included in the following embodiments are described in the claims. However, it should be understood that this is not intentionally excluded from the technical scope of the patented invention, but is not described in the scope of claims because it is equivalent to the patented invention.

以下に示す本発明の各実施形態において、主として、画像検索機能を有する撮像装置を念頭に置いている。画像検索とは、ある画像を検索キー画像とした場合に、この検索キー画像と関連性のある他の画像を抽出するものである。画像検索の詳細な方法については、上記従来技術等に開示されている画像同士を比較するもののほか、ファイル名、取得時刻、コメント情報などを比較する技術がある。なお、本願発明は、画像検索方法によって左右されるものではなく、種々の画像検索方法を採用できることはいうまでもない。   In the following embodiments of the present invention, an imaging apparatus having an image search function is mainly taken into consideration. In the image search, when an image is used as a search key image, another image related to the search key image is extracted. As a detailed method of image search, there is a technique for comparing file names, acquisition times, comment information, and the like in addition to comparing images disclosed in the above-described prior art. Needless to say, the present invention is not influenced by the image search method, and various image search methods can be adopted.

[第1の実施形態]
図1は、第1の実施形態に係る撮像装置の構成例を示す図である。この例の撮像装置100には、PCやプリンタなどの他の情報機器200を接続することができる。また、図2は、第1の実施形態に係る撮像装置の外観図である。
[First Embodiment]
FIG. 1 is a diagram illustrating a configuration example of an imaging apparatus according to the first embodiment. Other information devices 200 such as a PC and a printer can be connected to the imaging apparatus 100 in this example. FIG. 2 is an external view of the imaging apparatus according to the first embodiment.

図1及び図2において、100は、デジタルカメラ、デジタルビデオカメラ、カメラ付き携帯電話およびカメラ付きPDA等の撮像装置であり、静止画及び動画を電子データとして記憶することができる。撮像装置100には、22Aのシャッターボタン、22Bの検索ボタン、22Cのモード設定用ジョグダイヤル、22Dの電源スイッチ、22Eの表示&ファイル操作関連ボタン、22FのZOOM&WIDEボタン、22GのDISPボタン等が備わっている。そして、これらによって操作部22が形成されている。   1 and 2, reference numeral 100 denotes an imaging device such as a digital camera, a digital video camera, a camera-equipped mobile phone, and a camera-equipped PDA, and can store still images and moving images as electronic data. The imaging apparatus 100 includes a 22A shutter button, a 22B search button, a 22C mode setting jog dial, a 22D power switch, a 22E display & file operation related button, a 22F ZOOM & WIDE button, a 22G DISP button, and the like. Yes. And the operation part 22 is formed by these.

表示部20は、液晶ディスプレー等によって形成されており、被撮像画像、既に撮像された画像、検索処理を行なう場合の検索キー画像や検索結果、及び、ユーザーへの操作ガイド等を表示する。また、撮像装置100の側面には、撮像時等は蓋によって覆われている記憶媒体収納部が設けられており、そこに記憶媒体30が装着される。記憶媒体30の一例としては、CFカード(コンパクトフラッシュ(登録商標)カード)等の繰り返しリードライト可能なメモリカードや、磁気記録媒体、光記録媒体または光磁気記録媒体などがある。   The display unit 20 is formed by a liquid crystal display or the like, and displays an image to be captured, an image that has already been captured, a search key image and a search result when performing a search process, an operation guide to a user, and the like. In addition, a storage medium storage unit that is covered with a lid at the time of imaging or the like is provided on the side surface of the imaging apparatus 100, and the storage medium 30 is attached thereto. Examples of the storage medium 30 include a memory card that can be repeatedly read and written, such as a CF card (Compact Flash (registered trademark) card), a magnetic recording medium, an optical recording medium, or a magneto-optical recording medium.

一方、撮像装置100の内部構造等に関して説明すると、図1のAは被撮像画像、11はレンズ等の光学系、12は撮像素子であるCCD(またはCMOSエリアセンサ等)、13はAD変換部である。14は、AD変換部13を経由して入力されたデジタル画像入力信号に対してシェーディング補正やガンマ変換など、人間の視覚に適応したRGB信号に信号処理等する画像処理部である。また、15はRAMコントローラであり、メインCPUバス29に接続されるとともに記憶手段としてのRAM16に接続されている。   On the other hand, the internal structure and the like of the image pickup apparatus 100 will be described. In FIG. 1, A is an image to be picked up, 11 is an optical system such as a lens, 12 is a CCD (or a CMOS area sensor, etc.) that is an image pickup device, It is. Reference numeral 14 denotes an image processing unit that performs signal processing on RGB signals adapted to human vision, such as shading correction and gamma conversion, on the digital image input signal input via the AD conversion unit 13. Reference numeral 15 denotes a RAM controller, which is connected to the main CPU bus 29 and also connected to the RAM 16 as storage means.

17は、この撮像装置100全体の制御をつかさどる(メイン)CPUである。18は、この撮像装置全体の制御方法等が記述されたプログラムを記憶するROMである。19は、当該ROM18とメインCPUバス29とのインターフェースの役割を果たすROMIFである。24は、スピーカやブザー等の音声出力部、25は、DA変換器等を含む音声出力部IF、26は、マイク等の音声入力部、27は、AD変換器等を含む音声入力部IFである。   Reference numeral 17 denotes a (main) CPU that controls the entire imaging apparatus 100. Reference numeral 18 denotes a ROM that stores a program describing a control method and the like of the entire imaging apparatus. Reference numeral 19 denotes a ROMIF that serves as an interface between the ROM 18 and the main CPU bus 29. 24 is an audio output unit such as a speaker or buzzer, 25 is an audio output unit IF including a DA converter, 26 is an audio input unit such as a microphone, and 27 is an audio input unit IF including an AD converter. is there.

28は、他の情報機器等との通信機能を果たすべき通信手段としての通信用回路である。この通信用回路28は、USB、LAN、無線LAN、IrDA、ブルートゥース、IEEE1394等といった規格に準拠した動作を実行する。この通信用回路28は、PCやプリンタ等の他の情報機器200に搭載されている通信部228を介して、他の情報機器200と通信する。これにより、当該撮像装置100で撮像した画像データ等をPCに転送して保存したり、プリンタ等で直接印刷したりすることが可能となる。また、他の情報機器200から当該撮像装置100を遠隔操作することも可能となる。   Reference numeral 28 denotes a communication circuit as a communication means that should perform a communication function with other information devices. The communication circuit 28 performs operations compliant with standards such as USB, LAN, wireless LAN, IrDA, Bluetooth, IEEE 1394, and the like. The communication circuit 28 communicates with another information device 200 via a communication unit 228 mounted on another information device 200 such as a PC or a printer. As a result, the image data captured by the imaging apparatus 100 can be transferred to a PC and stored, or directly printed by a printer or the like. It is also possible to remotely control the imaging apparatus 100 from another information device 200.

また、上述した表示部20は、表示部IF21を介してメインCPUバス29に接続され、(メイン)CPU17から駆動することが可能となっている。同様に、上述した22Aのシャッターボタン、22Bの検索ボタン、22Cのモード設定用ジョグダイヤル、22Dの電源スイッチ、22Eの表示&ファイル操作関連ボタン、22FのZOOM&WIDEボタン、22GのDISPボタン等を含む操作部22は操作部IF23を介してメインCPUバス29に接続される。この結果、操作部22から入力される命令を、操作部IF23を通じて当該撮像装置100は認識する。   The display unit 20 described above is connected to the main CPU bus 29 via the display unit IF 21 and can be driven from the (main) CPU 17. Similarly, the operation unit including the above-described 22A shutter button, 22B search button, 22C mode setting jog dial, 22D power switch, 22E display & file operation related button, 22F ZOOM & WIDE button, 22G DISP button, and the like. 22 is connected to the main CPU bus 29 via the operation unit IF23. As a result, the imaging apparatus 100 recognizes a command input from the operation unit 22 through the operation unit IF23.

さらに、図1に示す通り、上述した記憶媒体30は、記憶媒体用IF31を介してメインCPUバス29に接続されている。ここで当該記憶媒体30の内部領域を、通常画像記憶領域301と検索キー画像記憶領域302の2つに分けることもできる。なお、2つの領域に分離する手段は各種考えられる。例えば、当該撮像装置のイニシャルシーケンス等において別々のフォルダ(ディレクトリ)を作成することにより2つの領域を分離してもよいし、あるいはアドレス領域に応じてそれぞれの領域をアクセスできるように分離してもよい。   Further, as shown in FIG. 1, the above-described storage medium 30 is connected to the main CPU bus 29 via the storage medium IF 31. Here, the internal area of the storage medium 30 can be divided into a normal image storage area 301 and a search key image storage area 302. Various means for separating the two regions are conceivable. For example, the two areas may be separated by creating separate folders (directories) in the initial sequence of the imaging apparatus, or may be separated so that each area can be accessed according to the address area. Good.

検索エンジン50は、検索キー画像データと通常画像データとを比較し、類似する画像データを検索抽出する回路である。これはDMA(ダイレクトメモリアクセス)機能を有するASICなどによって構成しても良いが、CPU17と並列して動作可能なサブのCPUによって構成することもできる。   The search engine 50 is a circuit that compares the search key image data with the normal image data and searches for similar image data. This may be constituted by an ASIC having a DMA (direct memory access) function, or may be constituted by a sub CPU operable in parallel with the CPU 17.

(撮像モードにおける動作)
図3は、第1の実施形態に係る撮像装置のモード遷移を示す状態遷移図である。図4は、第1の実施形態に係る撮像動作と記憶媒体30への書き込み処理などを示すフローチャートである。図5は、第1の実施形態に係る撮像動作と検索処理などを示すフローチャートである。これらの図面を用いて、まず、撮像モードにおける動作を説明する。
(Operation in imaging mode)
FIG. 3 is a state transition diagram illustrating mode transition of the imaging apparatus according to the first embodiment. FIG. 4 is a flowchart showing an imaging operation and a writing process to the storage medium 30 according to the first embodiment. FIG. 5 is a flowchart illustrating an imaging operation and search processing according to the first embodiment. First, the operation in the imaging mode will be described with reference to these drawings.

モード設定用ジョグダイヤル22Cが撮像モードに設定され、かつ、電源スイッチ22Dが押されることによって電源がONにされたとする。この場合、電源ONの後、相当の時間が経過し、イニシャルシーケンス等も終了すると、図3にいう撮像モードの状態(T1)に遷移し、撮像装置100はスタンバイ状態となる。   It is assumed that the mode setting jog dial 22C is set to the imaging mode and the power is turned on by pressing the power switch 22D. In this case, when a considerable time elapses after the power is turned on and the initial sequence and the like are completed, the state transitions to the imaging mode state (T1) shown in FIG. 3, and the imaging apparatus 100 enters a standby state.

現在、撮像モード(T1)であり、かつスタンバイ状態である撮像装置100において、シャッターボタン22Aが押釦されると、通常の撮像処理が実行される。すなわち、撮像部により被撮像画像が撮像され、通常画像として記憶媒体30に記憶される。その一方で、実施形態においては、この状態からも検索キー画像を撮像、記憶することが可能である。例えば、シャッターボタン22Aと検索ボタン22Bが同時に押釦されることにより検索キー画像を撮像、記憶しうる。かかる構成を採用することにより、撮像モードにおいて、通常画像の撮像と検索キー画像の撮像を容易に切り分けることができる。   When the shutter button 22A is pressed in the imaging apparatus 100 that is currently in the imaging mode (T1) and is in a standby state, normal imaging processing is executed. That is, an image to be captured is captured by the imaging unit and stored in the storage medium 30 as a normal image. On the other hand, in the embodiment, it is possible to capture and store a search key image even from this state. For example, a search key image can be captured and stored by simultaneously pressing the shutter button 22A and the search button 22B. By adopting such a configuration, it is possible to easily separate the imaging of the normal image and the imaging of the search key image in the imaging mode.

ステップS400において、CPU17は、操作部IF23のジョグダイヤル22Cの状態をポーリングし、撮像モードが終了したかどうかを判定する。終了であれば、本フローチャートを終了する、一方で、撮像モードのままであれば、ステップS401に進む。   In step S400, the CPU 17 polls the state of the jog dial 22C of the operation unit IF 23 to determine whether or not the imaging mode has ended. If completed, this flowchart is terminated. On the other hand, if the imaging mode is maintained, the process proceeds to step S401.

ステップS401において、CPU17は、少なくともシャッターボタン22Aが押釦されたか否かを判定する。例えば、シャッターボタン22Aが押釦されると操作部IF23においてシャッターボタンON信号発生されるため、CPU17はポーリングを実行することで、当該ON信号を検知できる。一方、シャッターボタン22Aと検索ボタン22Bが同時に押釦されると、操作部IF23には、上記シャッターボタンON信号に加えて、検索キー画像撮像信号(同時押釦信号)が発生する。発生した上記シャッターボタンON信号は、通常画像の撮像、または検索キー画像の撮像のいずれにおいても、(メイン)CPU17に伝えられる。尚、シャッターボタンON信号の検知に際しては、ポーリング動作に代えて、例えば、割り込み処理によって検知する構成を採用してもよい。シャッターボタンON信号を検知できなければ、ステップS400にもどる。一方、検知したならば、ステップS402へ進む。 In step S401, the CPU 17 determines whether or not at least the shutter button 22A has been pressed. For example, since the shutter button ON signal is generated in the operation unit IF23 when the shutter button 22A is pressed, the CPU 17 can detect the ON signal by executing polling. On the other hand, when the shutter button 22A and the search button 22B are simultaneously pressed, a search key image pickup signal (simultaneous push button signal) is generated in the operation unit IF 23 in addition to the shutter button ON signal. The generated shutter button ON signal is transmitted to the (main) CPU 17 regardless of whether the normal image is captured or the search key image is captured. In detecting the shutter button ON signal, instead of the polling operation, for example, a configuration of detecting by an interrupt process may be adopted. If the shutter button ON signal cannot be detected, the process returns to step S400. On the other hand, if detected, the process proceeds to step S402.

ステップS402において、CPU17は、撮像動作を開始する。具体的には、光学系11を介してCCD12に入射されている被撮像画像Aの像について、CCD12が画素ごとに光電変換し、AD変換部13へ送出する。AD変換部13は各画素各色の濃淡に関するアナログ値をAD変換し、画像処理部14へ送出する。次に、画像処理部14は、入力されたデジタル画像入力信号に対してシェーディング補正やガンマ変換等の信号処理を実行することで、人間の視覚に適応したRGB信号に変換する。その結果、画像処理された静止画像データの各画素データ等はRAMコントローラ15を介して次々にRAM16に書き込まれ格納される。1枚の画像についての全画素データ及び付属データがRAM16に書き込まれることにより、1枚の画像についての撮像動作は終了する。尚、本実施形態においては、1枚の撮像動作が終了する度に当該データをすぐに記憶媒体30に書き込むことはせずに、まとめて書き込むようにする。   In step S402, the CPU 17 starts an imaging operation. Specifically, the image of the image A to be captured that is incident on the CCD 12 via the optical system 11 is photoelectrically converted by the CCD 12 for each pixel and sent to the AD conversion unit 13. The AD conversion unit 13 performs AD conversion on analog values relating to the shade of each color of each pixel, and sends the analog value to the image processing unit 14. Next, the image processing unit 14 performs signal processing such as shading correction and gamma conversion on the input digital image input signal to convert it into an RGB signal suitable for human vision. As a result, each pixel data of the still image data subjected to the image processing is sequentially written and stored in the RAM 16 via the RAM controller 15. When all pixel data and attached data for one image are written in the RAM 16, the imaging operation for one image is completed. In the present embodiment, every time an image capturing operation is completed, the data is not immediately written to the storage medium 30, but is written together.

ステップS403において、CPU17は、RAM16に格納された画像データが通常の画像データであるか、検索キー画像データであるかを判定する。この判定は、CPU17が操作部IF23へアクセスすることにより、上記検索キー画像撮像信号の発生の有無を確認することによりなされる。上記判断の結果、撮像動作が通常画像の撮像であれば、ステップS404(T3)に進む。一方、検索キー画像データの撮像であれば、ステップS405(T4)に進む。   In step S403, the CPU 17 determines whether the image data stored in the RAM 16 is normal image data or search key image data. This determination is made by checking whether or not the search key image pickup signal is generated by the CPU 17 accessing the operation unit IF23. If the result of the determination is that the imaging operation is a normal image, the process proceeds to step S404 (T3). On the other hand, if it is imaging of search key image data, it will progress to step S405 (T4).

ステップS404において、CPU17は、RAM16に書き込まれて格納されている画像を通常画像として記憶媒体30に書き込む。例えば、CPU17は、RAM16に格納されている画像を、記憶媒体30の通常画像記憶領域301へ転送し、記憶する。   In step S404, the CPU 17 writes the image written and stored in the RAM 16 into the storage medium 30 as a normal image. For example, the CPU 17 transfers the image stored in the RAM 16 to the normal image storage area 301 of the storage medium 30 and stores it.

ステップS405において、CPU17は、RAM16に書き込まれて格納されている画像を検索キー画像として記憶媒体30に書き込む。例えば、当該撮像装置100は、RAM16に格納されている画像を記憶媒体30の検索キー画像記憶領域302へ転送し、記憶する。   In step S405, the CPU 17 writes the image written and stored in the RAM 16 into the storage medium 30 as a search key image. For example, the imaging apparatus 100 transfers the image stored in the RAM 16 to the search key image storage area 302 of the storage medium 30 and stores it.

このように、通常画像データを取得する際にはシャッターボタンのみの操作を操作入力とし、一方で、検索キー画像データを取得する際には、シャッターボタンと検索ボタンとの同時押釦を操作入力とすることで、両者は異なる操作態様にてCPU17に入力されることになる。したがって、ユーザーは、2種類の撮像動作を明確に切り分けて選択しやすくなろう。   As described above, when acquiring normal image data, the operation of only the shutter button is used as an operation input. On the other hand, when acquiring search key image data, the simultaneous push button of the shutter button and the search button is used as an operation input. Thus, both are input to the CPU 17 in different operation modes. Therefore, the user will be able to clearly select and select two types of imaging operations.

また、通常画像と検索キー画像を同一の記憶媒体に記憶し、かつ、通常画像の記憶領域と検索キー画像の記憶領域を分離することにより、検索キー画像データとを通常画像データとは区別しうる態様にて記憶媒体に記憶することができる。一般に、通常画像データの数よりも、検索キー画像データの数は少ないため、記憶媒体30から検索キー画像を容易かつ迅速に取り出して選択できるようになる。   Further, the normal image and the search key image are stored in the same storage medium, and the search key image data is distinguished from the normal image data by separating the normal image storage area and the search key image storage area. It can be stored in a storage medium in such a manner. In general, since the number of search key image data is smaller than the number of normal image data, the search key image can be easily and quickly extracted from the storage medium 30 and selected.

また、不揮発性の記憶媒体30に検索キー画像データを記憶するようにしたので、検索キー画像データを繰り返し使用できる。   Further, since the search key image data is stored in the nonvolatile storage medium 30, the search key image data can be used repeatedly.

また、検索キー画像データと通常画像データとが異なる記憶領域に記憶されているため、両者を容易に区別することができるようになり、非常に有益である。   In addition, since the search key image data and the normal image data are stored in different storage areas, it is possible to easily distinguish them from each other, which is very useful.

特に、今後、記憶媒体の容量の増加により、1枚の記憶媒体に記憶される通常画像は飛躍的に増大するものと見込まれる。このような状況にあっても検索キー画像を迅速に取り出すことができ、非常に有効な技術である。   In particular, it is expected that the number of normal images stored in one storage medium will increase dramatically in the future due to the increase in the capacity of the storage medium. Even in such a situation, the retrieval key image can be quickly extracted, which is a very effective technique.

また、好ましくは、検索キー画像を撮像した場合に、RAM16に書き込まれて格納されている画像を検索キー画像記憶領域302へ転送、記憶する前に、ステップS405において、CPU17が、画像データの圧縮または間引を行った上で記憶媒体30に転送、記憶する構成としてもよい。この場合、通常画像の圧縮率よりも高い圧縮率を採用することが望ましい。これは、検索キー画像については、通常画像ほど高画質であることが、必ずしも必要ではないからである。したがって、圧縮処理等を施すことにより、検索キー画像の記憶に必要な記憶容量を節約でき、その結果、記憶媒体30内により多くの画像データを記憶でき、非常に有益である。   Preferably, when a search key image is captured, the CPU 17 compresses the image data in step S405 before transferring and storing the image written and stored in the RAM 16 to the search key image storage area 302. Alternatively, the data may be transferred to and stored in the storage medium 30 after thinning out. In this case, it is desirable to employ a compression rate higher than that of the normal image. This is because it is not always necessary for the search key image to have a higher image quality than a normal image. Therefore, by performing compression processing or the like, it is possible to save the storage capacity necessary for storing the search key image, and as a result, it is possible to store more image data in the storage medium 30, which is very useful.

ところで、上記のように、撮像モード(T1)においてシャッターボタン22Aと検索ボタン22Bが同時に押釦された場合、検索キー画像が撮像されるとともに、当該撮像装置100における記憶媒体30内の検索処理を開始してもよい。   By the way, as described above, when the shutter button 22A and the search button 22B are pressed at the same time in the imaging mode (T1), a search key image is captured and search processing in the storage medium 30 in the imaging device 100 is started. May be.

以下、この場合の動作については、図5に示すフローチャートを用いて説明する。なお、図4で説明した個所には同一の参照符号を付すことにより説明を省略する。   Hereinafter, the operation in this case will be described with reference to the flowchart shown in FIG. The portions described in FIG. 4 are denoted by the same reference numerals, and the description thereof is omitted.

ステップS403において、CPU17が、例えば、シャッターボタン22Aと検索ボタン22Bが同時に押釦されて検索キー画像の撮像動作が指示されたと判定すると、ステップS501に進む。なお、シャッターボタン22Aと検索ボタン22Bの同時押釦は、画像検索処理の開始を意味することになる。なお、画像検索処理は、検索キー画像の撮像完了(すなわち検索処理に使用可能となったこと)を契機として開始される。   In step S403, for example, if the CPU 17 determines that the shutter button 22A and the search button 22B are pressed simultaneously to instruct the search key image capturing operation, the process proceeds to step S501. Note that the simultaneous pressing of the shutter button 22A and the search button 22B means the start of the image search process. Note that the image search process is started upon completion of imaging of the search key image (that is, the image can be used for the search process).

ステップS501において、CPU17は、既に他の検索処理が起動中か否かを判定する。検索処理は非常に負荷の重い処理であるため、複数の検索処理を並列に起動してしまうと、撮像処理や再生処理等に悪影響を及ぼすおそれがある。そこで、複数の検索処理の並列起動を禁止している。他の検索処理が起動済みであれば、ステップS502に進み、CPU17は、表示部IF21を介して表示部20に「他の検索中」を意味するメッセージを表示する。一方、他の検索処理が起動されていなければステップS503に進む。なお、ステップS501とS502はオプションであり、省略してもよい。すなわち、CPU17や検索エンジン50の処理能力が高ければ、複数の画像検索を並列に実施することも可能だからである。   In step S501, the CPU 17 determines whether another search process is already running. Since the search process is an extremely heavy process, if a plurality of search processes are started in parallel, there is a risk of adversely affecting the imaging process, the reproduction process, and the like. Therefore, the parallel activation of a plurality of search processes is prohibited. If another search process has been started, the process proceeds to step S502, and the CPU 17 displays a message indicating “other search is in progress” on the display unit 20 via the display unit IF21. On the other hand, if no other search process is activated, the process proceeds to step S503. Note that steps S501 and S502 are optional and may be omitted. That is, if the processing capacity of the CPU 17 or the search engine 50 is high, a plurality of image searches can be performed in parallel.

ステップS503において、CPU17は、撮像モード(T1)の状態のまま、検索処理を起動する。当該検索処理では、例えば次のような動作を行なう。検索処理が起動されると、検索エンジン50内に検索中フラグがセットされる。検索エンジン50は、CPU17を介さずにダイレクトメモリアクセス(DMA)動作によって、当該記憶媒体30内の通常画像を順次読み出し、RAM16に転送する。この際に、通常画像を検索キー画像とは別のエリアに転送してもよい。そして、検索エンジン50は、DMA動作によって読み出された画像と、いま撮像された画像とを順次比較する。そして、類似の画像がある場合、その画像をRAM16内のまた別のエリアへと保存する。このようにして当該記憶媒体30内の通常画像をすべて比較し終えたならば、RAM16内の上記別のエリアに保存された検索結果である類似画像を保持したまま、検索エンジン50は、検索中フラグを解除するとともに当該検索エンジン内の検索結果存在フラグをセットする。また、検索エンジン50は、CPU17に対して検索終了割り込みを発生する。これにより一連の検索処理は終了する。尚、検索結果は、検索終了後にCPU17が、表示部20に表示するようにしてもよいし、後述する再生モードに入った場合に、表示するようにしてもよい。後者の場合は、CPU17が検索結果存在フラグを読み出し、検索結果が存在すると判定した場合には、この検索結果の画像を表示部20に表示することになる。   In step S <b> 503, the CPU 17 starts the search process while maintaining the imaging mode (T <b> 1). In the search process, for example, the following operation is performed. When the search process is activated, a search flag is set in the search engine 50. The search engine 50 sequentially reads the normal images in the storage medium 30 and transfers them to the RAM 16 by direct memory access (DMA) operation without going through the CPU 17. At this time, the normal image may be transferred to an area different from the search key image. Then, the search engine 50 sequentially compares the image read by the DMA operation with the image that has just been captured. If there is a similar image, the image is stored in another area in the RAM 16. When all the normal images in the storage medium 30 have been compared in this manner, the search engine 50 is searching while holding the similar image that is the search result stored in the other area in the RAM 16. The flag is canceled and the search result presence flag in the search engine is set. In addition, the search engine 50 generates a search end interrupt to the CPU 17. As a result, a series of search processing ends. The search result may be displayed on the display unit 20 by the CPU 17 after the search is completed, or may be displayed when a playback mode described later is entered. In the latter case, if the CPU 17 reads the search result presence flag and determines that there is a search result, the search result image is displayed on the display unit 20.

なお、上記のように検索処理が起動されるとともに、当該RAM16内に記憶されている撮像されたばかりの検索キー画像を記憶媒体30の検索キー画像記憶領域302へ転送し、記憶してもよい(S405)。もっともこの場合の検索キー画像は、検索処理が終了すると書き込み動作を行なわずにRAM16から削除しても構わない。   The search process is started as described above, and the search key image that has just been captured and stored in the RAM 16 may be transferred and stored in the search key image storage area 302 of the storage medium 30 ( S405). However, the search key image in this case may be deleted from the RAM 16 without performing the writing operation when the search process is completed.

なお、検索処理の起動(S503)と、必要に応じて行った検索キー画像データの書き込み動作 (S405)が終了したならば、CPU17は、検索エンジン50の検索処理の終了を待たずに、一連の検索画像データの撮像処理を終了する。この場合、CPU17が次の撮像動作を実行可能な状態になっても、バックグラウンドで検索エンジン50が検索処理を継続している場合がある。すなわち、検索処理は検索エンジン50によるDMA動作によって行われているため、CPU17は、並行して画像の撮像処理を実行できる。すなわち、通常画像は撮像できるし、検索キー画像の撮像もできる。但し、検索キー画像の撮像は検索終了割り込みの発生や検索中フラグの解除があるまで、CPU17が拒否または禁止するように制御する。ちなみに、検索中に再生モード(T2)に移行して、再生動作を行なうことも可能である。再生モードに関する処理はほとんどCPU17が担当しているからである。   When the search process is started (S503) and the search key image data writing operation (S405) performed as necessary is completed, the CPU 17 does not wait for the search engine 50 to end the search process. The search image data imaging process ends. In this case, even if the CPU 17 becomes ready to execute the next imaging operation, the search engine 50 may continue the search process in the background. That is, since the search process is performed by the DMA operation by the search engine 50, the CPU 17 can execute the image capturing process in parallel. That is, a normal image can be captured, and a search key image can also be captured. However, the retrieval of the retrieval key image is controlled so that the CPU 17 rejects or prohibits the retrieval end interrupt or the retrieval flag is released. Incidentally, it is possible to shift to the playback mode (T2) during the search and perform the playback operation. This is because the CPU 17 is almost in charge of processing related to the playback mode.

一方、検索中に上記検索中フラグをCPU17が参照することにより、検索中である旨を表示部20に表示することができる。したがって、ユーザーは、撮像モードにおいて、バックグランドで検索処理が実行されていることを認識できる。また、CPU17が、検索終了割り込みの発生や検索中フラグの解除を認識すれば、表示部20に検索が終了した旨を表示してもよい。このようにすれば、ユーザーは、検索キー画像の撮像が可能かどうかを把握できよう。すなわち、検索が終了すれば、検索キー画像の撮像が可能になるからである。なお、検索エンジン50により使用中の検索キー画像を上書きしないようにCPU17が制御すれば、検索中であても、他の検索キー画像を撮像することができる。   On the other hand, when the CPU 17 refers to the searching flag during the search, the fact that the search is being performed can be displayed on the display unit 20. Therefore, the user can recognize that the search process is being executed in the background in the imaging mode. Further, if the CPU 17 recognizes the occurrence of the search end interrupt or the cancellation of the searching flag, the fact that the search has ended may be displayed on the display unit 20. In this way, the user can grasp whether or not the retrieval key image can be captured. That is, when the search is completed, the search key image can be captured. If the search engine 50 controls the search engine 50 so as not to overwrite the search key image being used, another search key image can be captured even during the search.

以上説明したように、本実施形態によれば、シャッターボタンと検索ボタンを同時に押すだけで、検索キー画像データを撮像して、当該検索キー画像データによる画像検索処理を開始するため、通常画像と検索キー画像とを容易に区別できるだけでなく、検索キー画像を撮像してすぐに画像検索を開始しうることとなる。すなわち、撮像処理後に検索ボタンを押すといった作業が不要になり、ユーザーの操作を軽減できる。   As described above, according to the present embodiment, the search key image data is imaged only by pressing the shutter button and the search button at the same time, and the image search process using the search key image data is started. Not only can the search key image be easily distinguished, but the image search can be started immediately after the search key image is captured. That is, the operation of pressing the search button after the imaging process is unnecessary, and the user's operation can be reduced.

また、CPU17と並列に動作可能な検索エンジン50を採用することにより、検索処理を裏で継続しつつ、撮像動作や再生動作を適宜実行できるため、非常に有益な撮像装置が提供されよう。   Further, by adopting the search engine 50 that can operate in parallel with the CPU 17, it is possible to appropriately perform the imaging operation and the reproduction operation while continuing the search process, so that a very useful imaging device will be provided.

(再生モードにおける動作)
次に、モード設定用ジョグダイヤル22Cが再生モードに設定され、かつ、電源スイッチ22Dが押されることによって電源がONにされたとする。この場合、電源ONの後、相当の時間が経過し、イニシャルシーケンス等も終了したならば、図3にいう再生モードの状態(T2)で、撮像装置100はスタンバイ状態に遷移する。以下、図6乃至図9を用いて再生モードにおける処理を説明する。とりわけ、図6は、第1の実施形態に係る再生モードの動作を示すフローチャートである。当該フローチャートは、再生モードにおいてスタンバイ状態(T2)に遷移すると開始されるものとする。
(Operation in playback mode)
Next, it is assumed that the mode setting jog dial 22C is set to the reproduction mode and the power is turned on by pressing the power switch 22D. In this case, when a considerable time has elapsed after the power is turned on and the initial sequence and the like are completed, the imaging apparatus 100 transitions to the standby state in the reproduction mode state (T2) shown in FIG. Hereinafter, processing in the reproduction mode will be described with reference to FIGS. In particular, FIG. 6 is a flowchart showing the operation of the playback mode according to the first embodiment. It is assumed that this flowchart is started when a transition is made to the standby state (T2) in the reproduction mode.

ステップS601において、CPU17は、検索エンジン50にアクセスし、当該検索エンジン内に記憶されている検索結果存在フラグを読み出す。なお、アクセスとは、命令の送信、応答の受信、データや信号等の送受信、データの読み出し書き込みなどを意味する。   In step S601, the CPU 17 accesses the search engine 50 and reads a search result presence flag stored in the search engine. Note that access means transmission of a command, reception of a response, transmission / reception of data or a signal, reading / writing of data, and the like.

ステップS602において、CPU17は、読み出した検索結果存在フラグが検索結果の存在を意味するようにセットされているかどうかを判定する。すなわち、このフラグがアサートされていれば、撮像モードにおいて検索処理が実行され、かつ、検索処理が終了していることを意味している。よって、ステップS603に進む。   In step S602, the CPU 17 determines whether or not the read search result presence flag is set to mean the presence of the search result. That is, if this flag is asserted, it means that the search process is executed in the imaging mode and the search process is finished. Accordingly, the process proceeds to step S603.

ステップS603において、CPU17は、RAM16の一部エリアに記憶されている検索結果(類似画像データ)を読み出して表示部20に表示する。このように、撮像モード中に検索された結果は、再生モード(T2)に遷移するとすぐに表示される。一般に再生モードに遷移するときは、ユーザーにゆとりがある場合が多いため、ユーザーが検索結果を確認するのに好適であろう。   In step S <b> 603, the CPU 17 reads out the search result (similar image data) stored in a partial area of the RAM 16 and displays it on the display unit 20. As described above, the search result during the imaging mode is displayed as soon as the mode is changed to the reproduction mode (T2). In general, when the mode is changed to the reproduction mode, there are many cases where the user has room, so that it is preferable for the user to check the search result.

ステップS604において、CPU17は、検索結果の表示の終了を意味するボタン(例えば検索ボタン)が押されたか否かを判定する。この場合、検索ボタン22Bに連動して、操作部IF23は検索表示終了フラグを発生させる。CPU17は、これをポーリングにより、または割り込みにより検出することにより検索結果の表示命令を検出することができる。すなわち、ユーザーが検索結果を確認した後で再度検索ボタンを押すことにより、検索結果の表示を終了し、ステップS605に遷移する。   In step S604, the CPU 17 determines whether or not a button (for example, a search button) indicating the end of display of the search result has been pressed. In this case, the operation unit IF23 generates a search display end flag in conjunction with the search button 22B. The CPU 17 can detect a search result display command by detecting this by polling or by interrupt. That is, when the user confirms the search result and presses the search button again, the display of the search result is terminated, and the process proceeds to step S605.

ステップS605において、CPU17は、通常の再生モードの動作に遷移する。   In step S605, the CPU 17 transitions to an operation in a normal playback mode.

一方で、ステップS602において、検索エンジン50内の検索結果存在フラグを読み出した結果、このフラグがアサートされていなければ、撮像モード中に検索処理が行われていないか、検索処理が終了していないこととなる。このときは、ステップS605に進み、CPU17は、通常画像を表示部20に表示する。この場合の表示の仕方については、最新の画像を1枚だけ表示する方法や、サムネイル画像を複数表示する方法などさまざまな方法を採用できる。   On the other hand, if the search result existence flag in the search engine 50 is read in step S602 and this flag is not asserted, the search process is not performed during the imaging mode or the search process is not completed. It will be. In this case, the process proceeds to step S605, and the CPU 17 displays a normal image on the display unit 20. As a display method in this case, various methods such as a method of displaying only one latest image and a method of displaying a plurality of thumbnail images can be adopted.

当該フローチャート上には図示しないが、表示部20に通常画像が表示されると、表示操作やファイル操作を入力する矢印キー等の操作関連ボタン22Eの操作入力に応じて、CPU17は、記憶媒体30に記憶されている通常画像を順次表示させる。また、CPU17は、サムネイル表示や、画像データのズーム表示などを実行してもよい。なお、サムネイル表示やズーム表示は公知の技術であり、当業者であれば十分に実施可能なので、これ以上の説明は省略する。   Although not shown in the flowchart, when a normal image is displayed on the display unit 20, the CPU 17 stores the storage medium 30 in response to an operation input of the operation related button 22E such as an arrow key for inputting a display operation or a file operation. The normal images stored in are sequentially displayed. Further, the CPU 17 may execute thumbnail display, zoom display of image data, and the like. It should be noted that thumbnail display and zoom display are well-known techniques, and those skilled in the art can sufficiently implement them.

ステップS606において、CPU17は、表示部20への表示処理と並行して、再生モードの終了を検出するためのポーリングを実行する。終了でなければ、ステップS607に進み、CPU17は、検索結果存在フラグに関するポーリングを繰り返す。検索結果が新たに記憶媒体30等に記憶されていれば、ステップS603に進み、検索結果を表示する。表示動作が終了したならば、CPU17は、検索エンジン50の検索結果存在フラグをネゲートする(S604)。よって、次に撮像モードに切り替わるまでは、必ずS608に進むこととなる。   In step S606, the CPU 17 performs polling for detecting the end of the reproduction mode in parallel with the display process on the display unit 20. If not completed, the process proceeds to step S607, and the CPU 17 repeats polling regarding the search result presence flag. If the search result is newly stored in the storage medium 30 or the like, the process proceeds to step S603, and the search result is displayed. If the display operation is finished, the CPU 17 negates the search result existence flag of the search engine 50 (S604). Therefore, the process always proceeds to S608 until the next switching to the imaging mode.

このように、検索結果が存在しなければ、ステップS608に進み、CPU17は、各種ボタンの押釦をポーリングし続ける。各種ボタンとしては、例えば、シャッターボタン22A、検索ボタン22B、及び表示&ファイル操作関連ボタン22Eの中の検索キー画像選択ボタンなどがある。もちろん、ボーリングに代えて、これらの各種ボタンの押釦を割り込み処理によって検出してもよい。ユーザーによってシャッターボタン22A(操作部22)が押釦されると、図1に示した操作部IF23がシャッターボタンON信号を発生する。一方、シャッターボタン22Aと検索ボタン22Bが同時に押釦されると、操作部IF23には、上記シャッターボタンON信号に加えて、同時押し信号が発生する。   Thus, if there is no search result, the process proceeds to step S608, and the CPU 17 continues to poll the push buttons of various buttons. Examples of the various buttons include a shutter button 22A, a search button 22B, and a search key image selection button in the display & file operation related button 22E. Of course, instead of boring, push buttons of these various buttons may be detected by interrupt processing. When the shutter button 22A (operation unit 22) is pressed by the user, the operation unit IF23 shown in FIG. 1 generates a shutter button ON signal. On the other hand, when the shutter button 22A and the search button 22B are pressed at the same time, a simultaneous pressing signal is generated in the operation unit IF23 in addition to the shutter button ON signal.

ステップS606のポーリング処理において、CPU17が、モード設定用ジョグダイヤル22Cが撮像モード等他の動作モードに変更されるか、電源スイッチ22Dが押釦されたことを検知すると、再生モードを終了する。   In the polling process of step S606, when the CPU 17 detects that the mode setting jog dial 22C has been changed to another operation mode such as the imaging mode or the power switch 22D has been pressed, the playback mode is terminated.

一方、CPU17は、シャッターボタン22Aの押釦を検出すると、ステップS609に進み、検索キー画像の撮像処理を実行する(図7)。検索ボタン22Bの押釦を検出すると、ステップS610に進み、検索処理を実行する(図8)。また検索キー画像選択ボタンの押釦を検出すると、ステップS611に進み、検索キー画像の選択処理を実行する(図9)。   On the other hand, when the CPU 17 detects the push button of the shutter button 22A, the CPU 17 proceeds to step S609 and executes a search key image imaging process (FIG. 7). When the push button of the search button 22B is detected, the process proceeds to step S610, and search processing is executed (FIG. 8). If a push button of the search key image selection button is detected, the process advances to step S611 to execute search key image selection processing (FIG. 9).

(a)シャッターボタン22Aの押釦を検知した場合
図7は、第1の実施形態に係る検索キー画像撮像サブルーチンを示すフローチャートである。本フローチャートは、図6のステップS609に対応するものであり、再生モードにおいて、例えば、シャッターボタン22Aの押釦をCPU17が検知すると開始される。この場合は、通常画像の撮像ではなく、画像検索のための検索キー画像を撮像することになる。
(A) When Push Button of Shutter Button 22A is Detected FIG. 7 is a flowchart showing a search key image capturing subroutine according to the first embodiment. This flowchart corresponds to step S609 in FIG. 6, and is started when the CPU 17 detects, for example, the push button of the shutter button 22A in the reproduction mode. In this case, instead of capturing a normal image, a search key image for image search is captured.

このように、モード選択部としてのジョグダイヤルを再生モードに設定された状態で、シャッターボタンが押釦されたことを検出したときは、CPU17は、検索キー画像データを撮像する。すなわち、上述したように撮像モードにてシャッターボタンを押釦すると通常画像データが撮像される場合とは、異なる操作態様となる。したがって、通常画像の撮像と検索キー画像の撮像とを容易に切り分けることができる。さらに、撮像モードに切り替えることなく、再生モードにおいても容易に検索キー画像を撮像することができる利点もある。   As described above, when it is detected that the shutter button is pressed while the jog dial as the mode selection unit is set to the reproduction mode, the CPU 17 captures the search key image data. That is, as described above, when the shutter button is pressed in the imaging mode, the operation mode is different from the case where normal image data is captured. Therefore, it is possible to easily separate normal image capturing and search key image capturing. Further, there is an advantage that the search key image can be easily captured even in the reproduction mode without switching to the imaging mode.

ステップS701において、CPU17は、過渡的なモードである検索キー画像撮像モード(T3)へと移行する。一般に、再生モードは、撮像装置100が撮像可能な状態ではないため撮像の準備が必要である。たとえば、CPU17は、CCD(またはCMOSエリアセンサ等)12等やAD変換部13や画像処理部14等を活性化させ、撮像可能な状態に変更し、また沈胴式レンズではレンズを撮像時の位置へと移動させ撮像準備が整った状態にする。撮像準備が整ったならば、検索キー画像の撮像動作へと進む。   In step S701, the CPU 17 shifts to a search key image capturing mode (T3) which is a transitional mode. In general, since the playback mode is not a state in which the imaging apparatus 100 can capture an image, preparation for imaging is necessary. For example, the CPU 17 activates the CCD (or CMOS area sensor or the like) 12 or the like, the AD conversion unit 13 or the image processing unit 14 or the like, and changes to a state in which imaging is possible. To make it ready for imaging. When the imaging preparation is completed, the process proceeds to the search key image imaging operation.

ステップS702において、CPU17は、撮像動作を実行する。CPU17は、撮像モードでの撮像と同様の原理、動作にて、1枚の画像についての全画素データ及び付属データをRAM16に書き込む。これにより、1枚の画像についての検索キー画像の撮像動作は終了する。尚、本実施形態においては、撮像動作の1枚ごとの終了に対して、記憶媒体30に当該データをすぐに書き込むことはせずに、後述するようにまとめて書き込む形態をとるのは撮像モードと同様である。   In step S702, the CPU 17 performs an imaging operation. The CPU 17 writes all pixel data and attached data for one image in the RAM 16 by the same principle and operation as the imaging in the imaging mode. Thus, the search key image capturing operation for one image is completed. Note that in the present embodiment, it is the imaging mode that does not immediately write the data to the storage medium 30 at the end of each imaging operation, but writes them together as described later. It is the same.

ステップS703において、CPU17は、操作部IF23の同時押し信号が発生しているかどうかを検出および判定する。同時押し信号が発生している場合、シャッターボタン22Aと検索ボタン22Bが同時に押釦されたことになる。本発明の実施形態によれば、当該再生モードにおいて両ボタンが同時に押釦された場合、CPU17は、検索キー画像の撮像、及び当該検索キー画像の記憶媒体30への記憶を行なうとともに、検索エンジン50の検索処理を起動する。一方、シャッターのみが押釦された場合、CPU17は、検索キー画像を撮像して記憶媒体30に記憶するだけで検索処理は起動しない。つまり、再生モードにおいては、同時押しするか、しないかで、検索キー画像を撮像した上ですぐに検索処理をスタートさせるか、検索キー画像を撮像して記憶のみを行なうどうかを切り分けることができる。尚、同時押しする場合を撮像・記憶とし、シャッターボタンだけを押す場合を、撮像と検索処理の開始としてもよい。要するに、シャッターボタンは共通に操作されるものの、全体としては、異なる操作態様とすればよい。なお、必ずしもシャッターボタンの操作が必須というわけではなく、結果として通常画像の撮像と、検索キー画像の撮像とを明確に切り分けられるように、それぞれ異なる操作態様とすればよい。   In step S703, the CPU 17 detects and determines whether or not the simultaneous pressing signal for the operation unit IF23 is generated. When the simultaneous push signal is generated, the shutter button 22A and the search button 22B are pushed simultaneously. According to the embodiment of the present invention, when both buttons are pressed simultaneously in the playback mode, the CPU 17 captures the search key image and stores the search key image in the storage medium 30 and also searches the search engine 50. Start the search process. On the other hand, when only the shutter button is pressed, the CPU 17 simply captures the search key image and stores it in the storage medium 30 and does not start the search process. In other words, in the playback mode, it is possible to determine whether to start the search process immediately after capturing the search key image or to perform only storing by capturing the search key image, depending on whether or not they are simultaneously pressed. . Note that the simultaneous pressing may be imaging / memory, and the case where only the shutter button is pressed may be the start of imaging and search processing. In short, although the shutter buttons are operated in common, the operation modes may be different as a whole. Note that the operation of the shutter button is not necessarily required, and as a result, different operation modes may be used so that the normal image capturing and the search key image capturing can be clearly separated.

同時押し信号が検出されたならば、ステップS704に進み、同時押し信号が検出されなかったならばステップS712に進む。   If the simultaneous pressing signal is detected, the process proceeds to step S704, and if the simultaneous pressing signal is not detected, the process proceeds to step S712.

ステップS704において、CPU17は、検索中フラグにアクセスして、他の検索処理がまだ残っているかどうかを確認する。この時点で、撮像モード時等で以前に起動された検索処理がまだ実行中である可能性もあるが、検索処理を2つ以上起動するのは好ましくないたため、このフラグを確認する。もっとも、検索エンジンを複数設けるなどして、検索負荷を軽減できるのであれば、検索処理を複数並行して動作させてもよい。もし、検索中フラグがアサートされているならば、他の検索処理が現在実行されているということであるから、ステップS711に進む。一方、検索中フラグがアサートされていなかったならば、ステップS705に進む。   In step S704, the CPU 17 accesses the searching flag to check whether another search process still remains. At this time, there is a possibility that the search process that was previously started in the imaging mode or the like is still being executed, but it is not preferable to start two or more search processes, so this flag is checked. However, if a plurality of search engines can be provided to reduce the search load, a plurality of search processes may be operated in parallel. If the searching flag is asserted, it means that another search process is currently being executed, and the process proceeds to step S711. On the other hand, if the searching flag is not asserted, the process proceeds to step S705.

ステップS711において、CPU17は、他の検索が実行中である旨を表示部20に表示した上で、新しい検索処理は立ち上げずに、ステップS712に進む。   In step S711, the CPU 17 displays on the display unit 20 that another search is being executed, and proceeds to step S712 without starting a new search process.

ステップS705において、CPU17は、撮像され、RAM16に記憶されている検索キー画像に基づいて検索するよう検索命令を検索エンジン50に送出する。検索エンジン50は、この命令に従い、上述した検索処理を起動する。   In step S <b> 705, the CPU 17 sends a search command to the search engine 50 so as to search based on the search key image that has been captured and stored in the RAM 16. The search engine 50 starts the above-described search process according to this command.

ステップS706およびステップS712において、CPU17は、RAM16内に記憶されている最新の検索キー画像を記憶媒体30の検索キー画像記憶領域302に書き込む。もっとも、S705において検索処理が開始されているならば、検索処理に使用されている検索キー画像を記憶媒体30には記憶することなく、検索処理の終了後に廃棄しても構わない。   In step S706 and step S712, the CPU 17 writes the latest search key image stored in the RAM 16 in the search key image storage area 302 of the storage medium 30. However, if the search process is started in S705, the search key image used for the search process may be discarded after the search process is completed without being stored in the storage medium 30.

ステップS707およびS713において、CPU17は、検索キー画像撮像モード(T6)を抜け、再生モードのスタンバイ状態(T2)へと戻る。例えば、光学系11が沈胴式レンズを採用している場合、CPU17は、レンズを収納時の位置へと移動制御する。   In steps S707 and S713, the CPU 17 exits the search key image capturing mode (T6) and returns to the standby state (T2) of the reproduction mode. For example, when the optical system 11 employs a retractable lens, the CPU 17 controls the movement of the lens to the retracted position.

なお、この再生モードで検索処理が起動されずにS713が終了したならば、一連の手順はここで終了し、サブルーチンを抜ける。すなわち、CPU17は、通常画像を表示部20に表示し(S605)、元のポーリング状態等に戻る(S606〜S608)。   If the search process is not activated in this playback mode and S713 ends, the series of procedures ends here, and the subroutine is exited. That is, the CPU 17 displays the normal image on the display unit 20 (S605), and returns to the original polling state and the like (S606 to S608).

一方、検索処理が起動されている場合、ステップS708において、CPU17は、検索終了割り込みの発生や検索中フラグの解除をポーリングにより待つ。検索処理が終了するまでの間、表示部20には何も表示しなかったり、通常画像等を表示したりしてもよい。また、CPU17は、検索抽出された画像を順次表示したり、当該画像らをサムネイル方式で表示したりしてもよい。そして検索処理が終了したと判定されたならば、ステップS709に進む。   On the other hand, when the search process is activated, in step S708, the CPU 17 waits for polling to generate a search end interrupt or to release the searching flag. Until the search process is completed, nothing may be displayed on the display unit 20, or a normal image or the like may be displayed. Further, the CPU 17 may sequentially display the searched and extracted images, or display the images using a thumbnail method. If it is determined that the search process has been completed, the process proceeds to step S709.

ステップS709において、CPU17は、表示部20に全結果を順次、またはサムネイル方式等で表示する。これにより、ユーザーは検索結果すべてにアクセス可能となる。   In step S709, the CPU 17 displays all the results on the display unit 20 sequentially or in a thumbnail format. This allows the user to access all search results.

ステップS710において、CPU17は、検索キー画像の撮像モードを終了するか否かを判定する。例えば、操作部IF23において、再度検索ボタン22Bが押釦され、検索ボタンON信号が発生しているかどうかをCPU17が確認する。終了を意味する検索ボタンON信号を検知すると、CPU17は本サブルーチンを終了し、メインルーチンに復帰する。すなわち、CPU17は、通常画像を表示部20に表示し(S605)、元のポーリング状態等に戻る(S606〜S608)。   In step S710, the CPU 17 determines whether or not to end the search key image capturing mode. For example, in the operation unit IF 23, the search button 22B is pushed again, and the CPU 17 checks whether or not a search button ON signal is generated. When detecting the search button ON signal indicating the end, the CPU 17 ends this subroutine and returns to the main routine. That is, the CPU 17 displays the normal image on the display unit 20 (S605), and returns to the original polling state and the like (S606 to S608).

(b)検索ボタン22Bの押釦を検知した場合
図6のステップS608において、再生モード中に検索ボタン22Bが押されると、この時点で選択されている検索キー画像を使用して検索処理が実行される。
(B) When the push button of the search button 22B is detected In step S608 in FIG. 6, when the search button 22B is pressed during the playback mode, the search process is executed using the search key image selected at this time. The

図8は、第1の実施形態に係る検索サブルーチンのフローチャートである。本サブルーチンは、ステップS610に相当する。   FIG. 8 is a flowchart of a search subroutine according to the first embodiment. This subroutine corresponds to step S610.

ステップS801において、CPU17は、検索中フラグにアクセスして、他の検索処理が起動中であるかどうかを確認する。もし、検索中フラグがアサートされているならば、他の検索処理が現在実行されているということであるから、ステップS806に進み、CPU17は、他の検索処理が実行中である旨を表示部20に表示し、新しい検索処理を起動せずに、サブルーチンを終了する。一方、検索中フラグがアサートされていなかったならば、他の検索処理が現在実行されていないということであるから、ステップS802に進む。   In step S801, the CPU 17 accesses the searching flag and checks whether another search process is being activated. If the search flag is asserted, it means that another search process is currently being executed, and the process advances to step S806, and the CPU 17 displays a message indicating that another search process is being executed. The subroutine is terminated without starting a new search process. On the other hand, if the search flag is not asserted, it means that no other search process is currently being executed, and the process advances to step S802.

ステップS802において、CPU17は、検索エンジン50に対し、検索処理の起動命令を送出する。検索エンジン50は、現在設定されている検索キー画像に基づいて、検索処理を開始する。なお、CPU17によって、常に任意の検索キー画像が検索キーとして選択され、RAM16の特定エリアに保存されているものとする。   In step S <b> 802, the CPU 17 sends a search processing start command to the search engine 50. The search engine 50 starts search processing based on the currently set search key image. It is assumed that an arbitrary search key image is always selected as a search key by the CPU 17 and stored in a specific area of the RAM 16.

この選択された検索キー画像は、例えば、最新に取得された検索キー画像が選択される構成を採用すれば、ユーザーは再生モードにあっては検索ボタン22Bを押すだけのワンタッチ操作で検索を開始できる利点がある。また、検索に使用される可能性が高い検索キー画像がセットされうることとなる。一方で、もっとも最古に取得された検索キー画像が選択される構成を採用してもよい。また、選択されている検索キー画像を表示部20の全部または一部に表示してもよい。一方、当該撮像装置100によって選択されたキー画像とは別の検索キー画像で検索処理を行ないたい場合には、図9において後述する検索キー画像選択ボタンの押釦することで、検索キー画像の変更設定等を行なうことができる。   For example, if the selected search key image adopts a configuration in which the most recently acquired search key image is selected, the user can start a search with a one-touch operation by simply pressing the search button 22B in the playback mode. There are advantages you can do. In addition, a search key image that is highly likely to be used for search can be set. On the other hand, you may employ | adopt the structure from which the search key image acquired the oldest is selected. Further, the selected search key image may be displayed on all or part of the display unit 20. On the other hand, when it is desired to perform a search process using a search key image different from the key image selected by the imaging apparatus 100, the search key image is changed by pressing a search key image selection button described later in FIG. Settings can be made.

ステップS803において、CPU17は、検索終了割り込みの発生や検索中フラグの解除をポーリングにより待つ。検索処理が終了するまでの間、表示部20には何も表示しなかったり、通常画像等を表示したりしてもよい。あるいは、検索抽出された画像を順次表示したり、サムネイル方式で表示したりしてもよい。そして検索処理が終了したと判定されると、ステップS804に進む。   In step S <b> 803, the CPU 17 waits for polling to generate a search end interrupt or release the searching flag. Until the search process is completed, nothing may be displayed on the display unit 20, or a normal image or the like may be displayed. Alternatively, the searched and extracted images may be sequentially displayed or displayed by a thumbnail method. If it is determined that the search process has been completed, the process proceeds to step S804.

ステップS804において、CPU17は、表示部20に全結果を順次、またはサムネイル方式等で表示する。こいれにより、ユーザーは、検索結果すべてにアクセス可能となる。   In step S804, the CPU 17 displays all the results on the display unit 20 sequentially or in a thumbnail format. This gives the user access to all search results.

ステップS805において、CPU17は、検索処理を終了すべきか否かを判定する。これは、ステップS710で説明したとおりなので、説明を省略する。   In step S805, the CPU 17 determines whether or not the search process should be terminated. Since this is as described in step S710, description thereof is omitted.

(c)検索キー画像選択ボタンの押釦を検知した場合
再生モードで、表示&ファイル操作関連ボタン22Eの一つである検索キー画像選択ボタンが押されたことを検出すると、検索に使用する検索キー画像の変更、選択処理が起動される。
(C) When the push button of the search key image selection button is detected When the search key image selection button, which is one of the display & file operation related buttons 22E, is detected in the playback mode, the search key used for the search is detected. Image change and selection processing is started.

図9は、第1の実施形態に係る検索キー画像選択サブルーチンのフローチャートである。本サブルーチンは、上述のステップS611に相当する。   FIG. 9 is a flowchart of a search key image selection subroutine according to the first embodiment. This subroutine corresponds to step S611 described above.

ステップS901において、CPU17は、検索中フラグにアクセスし、他の検索処理が起動中であるかどうかを確認する。この時点で、検索処理がまだ実行中である可能性もあるが、この検索処理においては従前に選択された検索キー画像が使用されている。検索キー画像をむやみに変更すると、起動中の検索処理に影響が生じるため、検索キー画像の選択変更処理を禁止する必要があろう。そこで、本ステップでは、以前に起動された検索処理がまだ実行中かどうかを確認している。他の検索処理が起動中でなければ、ステップS902に進む。一方、起動中であればステップS904に進み、CPU17は、「他の検索中」などの警告表示を表示部20に表示させ、本サブルーチンを抜ける。   In step S901, the CPU 17 accesses the searching flag and checks whether another search process is being activated. At this time, there is a possibility that the search process is still being executed. In this search process, the search key image selected previously is used. If the search key image is changed unnecessarily, the search processing during activation will be affected. Therefore, it is necessary to prohibit the selection change processing of the search key image. Therefore, in this step, it is confirmed whether or not the previously started search process is still being executed. If no other search process is active, the process advances to step S902. On the other hand, if it is activated, the process proceeds to step S904, where the CPU 17 displays a warning display such as “other search in progress” on the display unit 20, and exits this subroutine.

ステップS902において、CPU17は、検索キー画像セットモード(T8)へ移行する。ここではまず、CPU17が、記憶媒体30のうち、検索キー画像記憶領域302から検索キー画像を読み出して表示する。その際には、例えば、取得時刻順またはファイル名順でCPU17が画像データをソートし、ソートされた順序に従って画像データを読み出して表示する。もちろん、サムネイル表示としてもよい。かかる構成をとることにより、検索キー画像を発見することが容易となろう。   In step S902, the CPU 17 shifts to the search key image set mode (T8). Here, first, the CPU 17 reads the search key image from the search key image storage area 302 in the storage medium 30 and displays it. In that case, for example, the CPU 17 sorts the image data in order of acquisition time or file name, and reads out and displays the image data in accordance with the sorted order. Of course, thumbnail display is also possible. By taking such a configuration, it will be easy to find the search key image.

この検索キー画像セットモード(T8)では、表示&ファイル操作関連ボタン22Eの一つである矢印キー(三角キー)や、やはり表示&ファイル操作関連ボタン22Eの一つである確定ボタン等を、CPU17が受付可能な状態になる。よって、矢印キー(三角キー)を使用することにより、表示されている画像から、検索キー画像を1つ選択できる。すなわち、ユーザーは、記憶媒体30に記憶されている検索キー画像を1つ選択できる。選択した時点で確定ボタンの押釦を検出すると、CPU17は、検索に使用する検索キー画像が変更、選択される。   In the search key image set mode (T8), an arrow key (triangular key) that is one of the display & file operation related buttons 22E, a confirmation button that is also one of the display & file operation related buttons 22E, and the like are displayed on the CPU 17. Is ready to accept. Therefore, one search key image can be selected from the displayed images by using the arrow keys (triangular keys). That is, the user can select one search key image stored in the storage medium 30. When the push button of the confirmation button is detected at the time of selection, the CPU 17 changes and selects the search key image used for the search.

ステップS903において、CPU17は、検索キー画像のセットモードを終了すべきかどうかを判定する。例えば、再度検索キー画像選択ボタンの押釦を検出すると、本サブルーチンを終了し、ステップS605に戻る。   In step S903, the CPU 17 determines whether or not the search key image set mode should be terminated. For example, when the push button of the search key image selection button is detected again, this subroutine is terminated and the process returns to step S605.

以上述べたように第1の実施形態では、通常画像データを取得する際の第1の操作入力と検索キー画像データを取得する際の第2の操作入力とを異なる操作態様にて入力するようにしたので、通常画像と検索キー画像の2種類の撮像動作を明確に切り分けることができる。また、何れの場合もシャッターボタン22Aが少なくとも使用されるので、ユーザーは、撮像を行っていることを意識しつつ、上記2種類の撮像動作を明確に切り分けることのできる。また、検索キー画像データを取得する際の操作入力をシャッターボタン22Aと他のボタンを併用することで入力できるようにしたので、撮像処理であることを意識しつつ、しかも簡単な操作で、検索キー画像を撮像できる。なお、シャッターボタン22Aと他のボタンとは、同時に押釦できる位置に配置されることが望ましい。   As described above, in the first embodiment, the first operation input when acquiring normal image data and the second operation input when acquiring search key image data are input in different operation modes. Therefore, the two types of imaging operations of the normal image and the search key image can be clearly separated. In either case, since the shutter button 22A is used at least, the user can clearly separate the two types of imaging operations while being aware that imaging is being performed. In addition, since the operation input for acquiring the search key image data can be input by using the shutter button 22A in combination with another button, it is possible to perform the search with a simple operation while being aware of the imaging process. Key images can be taken. Note that it is desirable that the shutter button 22A and the other buttons be arranged at positions where they can be pressed simultaneously.

また、第1の実施形態では、再生モードにおいてシャッターボタンを少なくとも操作入力することで、撮像モード以外のモードにありながら検索キー画像データを取得できる。   In the first embodiment, the search key image data can be acquired while in a mode other than the imaging mode by at least operating the shutter button in the playback mode.

また、上記第1の実施形態では、撮像モードや再生モードにおいて、第2の操作入力を行なうことで、検索キー画像を撮像した後すぐに検索を開始できる。なお、再生モードにおいて第1の操作入力だけがなされたときは、検索キー画像を記録し、検索は省力する。よって、異なる複数の操作入力によって、これらを切り分けることができる。   In the first embodiment, the search can be started immediately after the retrieval key image is captured by performing the second operation input in the imaging mode and the reproduction mode. When only the first operation input is made in the playback mode, a search key image is recorded and the search is saved. Therefore, these can be separated by a plurality of different operation inputs.

また、撮像モードや再生モードといったモードに応じてシャッターボタンや検索ボタンを駆使することにより、撮像画像を使用して容易に検索ができるだけでなく、同一の記憶媒体に通常画像と検索キー画像を区別しうる態様にて記憶する。よって、撮像後においても、両者を区別して認識することができる。なお、フラッシュメモリなど不揮発性の記憶媒体に検索キー画像を記憶することで、検索キー画像を繰り返し使用することができる。   Also, by making full use of the shutter button and search button according to the mode such as the imaging mode and playback mode, not only can the search be performed easily using the captured image, but the normal image and the search key image can be distinguished on the same storage medium. Store in a possible manner. Therefore, even after imaging, both can be distinguished and recognized. Note that the search key image can be repeatedly used by storing the search key image in a non-volatile storage medium such as a flash memory.

また、上記実施形態においては、検索キー画像となる画像を直接撮像しうる。この結果、検索キー画像の入力が極めて容易となるため、簡便に検索機能を使用することができる。   Moreover, in the said embodiment, the image used as a search key image can be directly imaged. As a result, the input of the search key image becomes extremely easy, so that the search function can be easily used.

また、本実施形態によれば、撮像処理や再生処理等を制御するCPU17に加え、それと並行に動作する検索エンジン50を搭載するようにしたので、検索抽出処理の実行中であっても、画像の撮像や再生を継続できる利点がある。   In addition, according to the present embodiment, since the search engine 50 that operates in parallel with the CPU 17 that controls the imaging process, the reproduction process, and the like is mounted, the image can be obtained even during the execution of the search extraction process. There is an advantage that the image pickup and reproduction can be continued.

また、本実施形態の再生モードによれば、取得時刻が最新の検索画像データや最も古い検索画像データなど、予め任意の画像データを検索キーとして設定するようにしたので、ユーザーは任意のタイミングで検索ボタンを操作するだけで、検索処理を開始できる。   Also, according to the playback mode of this embodiment, arbitrary image data such as search image data with the latest acquisition time or the oldest search image data is set in advance as a search key. The search process can be started simply by operating the search button.

(第2の実施形態)
本実施形態では、上述の実施形態のうち、通常画像データと検索キー画像データとの管理方法を変更したものである。
(Second Embodiment)
In the present embodiment, the management method for normal image data and search key image data is changed from the above-described embodiments.

図10は、第2の実施形態に係る撮像装置の構成例を示す図である。図1と比較すると、記憶媒体30内部の画像データの記憶方法が異なっていることを理解できよう。第1の実施形態では、当該記憶媒体30には、通常画像記憶領域301と検索キー画像記憶領域302の2つが含まれていた。一方、第2の実施形態では、通常画像も検索キー画像も当該記憶媒体30の同一の領域に記憶されている。その代わり、通常画像ファイルのFAT(ファイル・アロケーション・テーブル)部と、検索キー画像のFAT部には異なるファイル管理情報が付されている。本実施形態では、通常画像のFAT部にはその参照部分にデータビットの“0”をたて、検索キー画像の参照部分にはデータビット“1”をたてるようにしている。なお、ファイル管理情報は、画像情報そのものの中に設けてもよい。   FIG. 10 is a diagram illustrating a configuration example of an imaging apparatus according to the second embodiment. As compared with FIG. 1, it can be understood that the storage method of the image data in the storage medium 30 is different. In the first embodiment, the storage medium 30 includes the normal image storage area 301 and the search key image storage area 302. On the other hand, in the second embodiment, both the normal image and the search key image are stored in the same area of the storage medium 30. Instead, different file management information is attached to the FAT (file allocation table) portion of the normal image file and the FAT portion of the search key image. In the present embodiment, a data bit “0” is set in the reference portion of the FAT portion of the normal image, and a data bit “1” is set in the reference portion of the search key image. Note that the file management information may be provided in the image information itself.

すなわち、CPU17は、S405、S706、またはS712において、検索キー画像を記憶媒体30に記憶する際には、記憶領域を特に意識することなく記憶するが、FAT部または検索キー画像データのファイル内等に、通常画像データのものとは異なるファイル管理情報を付して記憶する。このような構成にすることで、通常画像と検索キー画像とを容易に区別することができる。   That is, when storing the search key image in the storage medium 30 in S405, S706, or S712, the CPU 17 stores the storage area without being particularly conscious of it, but in the FAT unit or the search key image data file, etc. In addition, file management information different from that of normal image data is added and stored. With this configuration, the normal image and the search key image can be easily distinguished.

また、ステップS902において、検索キー画像を指定する際に、CPU17は、検索キー画像を示すファイル管理情報が付された画像データを記憶媒体30から読み出すことにより、検索キー画像の候補を表示部20に表示できる。   In step S902, when designating the search key image, the CPU 17 reads the image data with the file management information indicating the search key image from the storage medium 30, thereby displaying the search key image candidates on the display unit 20. Can be displayed.

以上説明したように本実施形態によれば、検索キー画像データのファイル管理情報に、通常画像データとは異なることを示す識別情報を付加して記憶媒体30に記憶することで、両者の記憶領域を区分けせずとも、第1の実施形態と同様の利便性を得ることができる。   As described above, according to the present embodiment, the identification information indicating that it is different from the normal image data is added to the file management information of the search key image data and stored in the storage medium 30, thereby storing both storage areas. The same convenience as in the first embodiment can be obtained without dividing the above.

(第3の実施形態)
上述の実施形態では、通常画像と検索キー画像とをそれぞれ分けて記憶媒体30に記憶するものであった。
(Third embodiment)
In the above embodiment, the normal image and the search key image are separately stored in the storage medium 30.

しかしながら、検索キー画像を通常画像として使用できないのは不便であろう。特に検索キー画像の出来がよかったときには問題が多い。例えば、検索キー画像を複製して通常画像データとすることも考えられるが、この場合は、同一の画像データが二重に保存されることになり、記憶媒体の記憶容量が浪費されてしまう。だからといって、従来のように、検索キー画像となる画像をすべての通常画像の中から探して設定するとなると、操作が煩雑になってしまう。   However, it may be inconvenient that the search key image cannot be used as a normal image. There are many problems especially when the search key image is good. For example, it is conceivable to duplicate the search key image as normal image data, but in this case, the same image data is stored twice, and the storage capacity of the storage medium is wasted. However, if the search key image is searched for and set from all the normal images as in the prior art, the operation becomes complicated.

そこで、第3の実施形態では、すべての画像は通常画像として扱うが、検索キー画像としても使用したい通常画像には、FAT部またはファイルの内部に他とは異なるファイル管理情報を付すようにする。ここでは、第2の実施形態と同様に、通常画像の参照部分にデータビットの“0”をたて、検索キー画像の参照部分にはデータビット“1”をたてるようにしている。   Therefore, in the third embodiment, all images are handled as normal images. However, normal images that are also used as search key images are given different file management information inside the FAT section or file. . Here, as in the second embodiment, the data bit “0” is set in the reference portion of the normal image, and the data bit “1” is set in the reference portion of the search key image.

図11は、第3の実施形態に係る撮像装置の構成例を示す図である。第3の実施形態では、第1および第2の実施形態で検索キー画像(専用)として扱ってきたものを、検索キー画像と通常画像の兼用画像として扱うようにしている。   FIG. 11 is a diagram illustrating a configuration example of an imaging apparatus according to the third embodiment. In the third embodiment, what has been handled as a search key image (dedicated) in the first and second embodiments is handled as a combined image of the search key image and the normal image.

CPU17は、S404、S405、S706、またはS712において、検索キー画像を記憶媒体30に記憶する際には、FAT部または検索キー画像データのファイル内等に、兼用画像を意味するファイル管理情報を付して記憶する。兼用画像を意味するファイル管理情報は、通常画像専用のファイル管理情報や、検索キー画像専用のファイル管理情報とは区別できるような情報であれば、どのような情報であっても良い。   When storing the search key image in the storage medium 30 in S404, S405, S706, or S712, the CPU 17 attaches file management information indicating a combined image to the FAT unit or the search key image data file. And remember. The file management information meaning the combined image may be any information as long as it can be distinguished from the file management information dedicated to the normal image and the file management information dedicated to the search key image.

なお、記憶領域を特に意識することなく記憶してもよいし、図1で示したように通常画像記憶領域301と検索キー画像記憶領域302とに分けて記憶してもよい。すなわち、検索キー画像記憶領域302に記憶されている検索キー画像データを兼用画像として扱うこともできるし、通常画像記憶領域301に記憶されている通常画像データを兼用画像として扱うこともできる。何れの場合も兼用画像についてはファイル管理情報により区別できるからである。   Note that the storage area may be stored without being particularly conscious, or may be stored separately into the normal image storage area 301 and the search key image storage area 302 as shown in FIG. That is, the search key image data stored in the search key image storage area 302 can be handled as a combined image, and the normal image data stored in the normal image storage area 301 can be handled as a combined image. This is because the shared image can be distinguished by the file management information in any case.

ステップS902において、検索キー画像を指定する際に、CPU17は、兼用画像を示すファイル管理情報が付された画像データを記憶媒体30から読み出すことにより、検索キー画像の候補を表示部20に表示できる。このようにして、第1の実施形態と同様の利便性を得ることができ、非常に有益である。   In step S <b> 902, when designating a search key image, the CPU 17 can display search key image candidates on the display unit 20 by reading out image data with file management information indicating a shared image from the storage medium 30. . In this way, the same convenience as in the first embodiment can be obtained, which is very useful.

以上説明したように、第3の実施形態では、通常画像のうち検索キー画像としても兼用する画像データ、または、検索キー画像のうち通常画像としても兼用する画像データについては、兼用画像を意味する情報を付すようにしたので、両者を重複して保存する必要がなくなり、記憶媒体の記憶容量を有効に活用できる。しかも、容易に検索キー画像を探すことができる利点もある。   As described above, in the third embodiment, image data that is also used as a search key image among normal images or image data that is also used as a normal image among search key images means a common image. Since the information is attached, it is not necessary to store both of them in duplicate, and the storage capacity of the storage medium can be used effectively. In addition, there is an advantage that the search key image can be easily searched.

(第4の実施形態)
第1、第2、および第3の実施形態においては、いずれも記憶媒体30へ画像データを書き込む際に、検索キー画像か通常画像かを区別しうる態様にて記憶していた。しかしながら、記憶媒体30が着脱交換可能なものである場合は、他の撮像装置により撮像された画像データを記憶していることがある。しかもこのような記憶媒体30を当該撮像装置100で使用する場合は、記憶媒体30内の検索キー画像と通常画像とを区別できない場合もあろう。
(Fourth embodiment)
In each of the first, second, and third embodiments, when image data is written to the storage medium 30, the search key image or the normal image is stored in a distinguishable manner. However, when the storage medium 30 is detachable and replaceable, image data captured by another imaging device may be stored. In addition, when such a storage medium 30 is used in the imaging apparatus 100, the search key image in the storage medium 30 may not be distinguished from the normal image.

そこで、第4の実施形態においては、かかる場合にも有益な撮像装置について説明する。   Therefore, in the fourth embodiment, an imaging apparatus that is useful even in such a case will be described.

図12は、第4の実施形態に係る撮像装置の構成例を示す図である。この例では、説明の便宜上、すべての画像データは同一の状態で記憶媒体30に記憶されているものとする。なお、図12に示す撮像装置100は、第1の実施形態で説明した各機能を有していても有していなくても構わない。また、その場合の当該撮像装置は、検索キー画像と通常画像を分けて記憶媒体30に記憶しなくてもよいし、分けて記憶してもよい。   FIG. 12 is a diagram illustrating a configuration example of an imaging apparatus according to the fourth embodiment. In this example, for convenience of explanation, it is assumed that all the image data is stored in the storage medium 30 in the same state. Note that the imaging apparatus 100 illustrated in FIG. 12 may or may not have the functions described in the first embodiment. In this case, the imaging apparatus may not store the search key image and the normal image separately in the storage medium 30, or may store them separately.

図13は、第4の実施形態に係る再生モードの動作を示すフローチャートである。図6で説明した個所は同一の参照符号を付すことにより説明を省略する。なお、再生モードにおいてシャッターボタンを押す場合の動作等は、図6に示す動作と同一であるものとして説明するが、相違があっても構わない。   FIG. 13 is a flowchart showing the operation of the playback mode according to the fourth embodiment. The portions described in FIG. 6 are denoted by the same reference numerals, and the description thereof is omitted. Note that the operation when the shutter button is pressed in the playback mode is described as being the same as the operation shown in FIG. 6, but there may be differences.

図13によれば、ステップS608において、検索キー画像の特定ボタンが検知されると、ステップS1301に進み、検索キー画像の特定処理が実行される。検索キー画像の特定ボタンも操作部22に含まれているものとする。   According to FIG. 13, if a search key image specifying button is detected in step S608, the process proceeds to step S1301, and search key image specifying processing is executed. It is assumed that a specific button of the search key image is also included in the operation unit 22.

すなわち、他の撮像装置等により書き込まれた画像データについても検索キー画像として使用するためには、検索キー画像を特定する処理が必要となる。   That is, in order to use image data written by another imaging device or the like as a search key image, a process for specifying the search key image is required.

この検索キー画像特定ボタンは、すべての画像の中から検索キー画像に割り当てる画像を探すモードに入るという意味で、検索キー画像のみを対象にした上述の検索キー画像選択ボタンとは異なっている。この検索キー画像特定ボタンは表示&ファイル操作関連ボタン22Eのうち、一つのボタンを新たに割り当ててもよいし、または、検索キー画像選択ボタンの代わりに割り当ててもよい。   This search key image specifying button is different from the above-described search key image selection button for only the search key image in the sense that it enters a mode for searching for an image to be assigned to the search key image from all images. As the search key image specifying button, one of the display & file operation related buttons 22E may be newly assigned, or may be assigned instead of the search key image selection button.

図14は、第の実施形態に係る検索キー画像特定サブルーチンを示すフローチャートである。当該サブルーチンは、図13のステップS1301に相当する。なお、図9において説明した個所は、同一の参照符号を付すことで説明を省略する。 FIG. 14 is a flowchart showing a search key image specifying subroutine according to the fourth embodiment. This subroutine corresponds to step S1301 in FIG. In addition, the description is abbreviate | omitted by attaching | subjecting the same reference number about the part demonstrated in FIG.

CPU17は、ステップS901において、他の検索処理の起動確認する。ステップS902において、記憶媒体30に記憶されている画像データを読み出し、候補として表示部20に表示する。操作部22によりいずれかの画像データが特定されると、ステップS1401に進む。ここでは、すべての画像を対象にして、その中から検索キー画像を特定する点で、上述した検索キー画像の変更、選択とは異なっている。   In step S901, the CPU 17 confirms activation of another search process. In step S902, the image data stored in the storage medium 30 is read and displayed as a candidate on the display unit 20. When any image data is specified by the operation unit 22, the process proceeds to step S1401. This is different from the above-described change and selection of the search key image in that the search key image is specified from all the images.

ステップS1401において、CPU17は、検索キー画像セットモードの状態、または特定処理が終了した後で、操作部20により特定された画像データを検索キー画像として保存するかどうかを判定する。たとえば、表示&ファイル操作関連ボタン22Eの1つを割り当てた保存ボタンの押釦を検知することで、CPU17は、当該画像データを検索キー画像として記憶媒体30に保存すべき、と判定する。保存すべき時は、ステップS1402に進む。   In step S1401, the CPU 17 determines whether or not to store the image data specified by the operation unit 20 as a search key image after the state of the search key image set mode or the specifying process ends. For example, the CPU 17 determines that the image data should be stored in the storage medium 30 as a search key image by detecting the push button of the save button assigned with one of the display & file operation related buttons 22E. If it should be saved, the process proceeds to step S1402.

ステップS1402において、CPU17は、特定された画像データを検索キー画像として記憶媒体30に記憶する。   In step S1402, the CPU 17 stores the specified image data in the storage medium 30 as a search key image.

このように、単に記憶媒体30に記憶されているにすぎなかった画像データの1つを特定し、検索キー画像として記憶媒体30に上書き記憶または改めて記憶することができる。この際には、検索キー画像記憶領域302を作成してそこに記憶してもよいし、検索キー画像または兼用画像を表すファイル管理情報を付して記憶してもよい。   In this way, one of the image data that has only been stored in the storage medium 30 can be identified and overwritten or stored in the storage medium 30 as a search key image. At this time, the search key image storage area 302 may be created and stored there, or may be stored with file management information representing the search key image or the combined image.

その後、ステップS903において特定処理を終了すべきと判定すると、CPU17は、メインルーチンに戻る。   Thereafter, when it is determined in step S903 that the specific process should be terminated, the CPU 17 returns to the main routine.

第4の実施形態によれば、記憶媒体30に記憶されている画像データが検索キー画像なのか通常画像なのか区別できない場合であっても、容易に検索キー画像を特定できるようになる。例えば、他の撮像装置などにより撮像された画像データを含んだ記憶媒体30を当該撮像装置100で使用する場合に有効である、
また、検索キー画像として特定された画像データを、検索キー画像として記憶媒体30に記憶するようにしたので、当該検索キー画像を、第1、第2、または第3の実施形態に係る撮像装置100において有意義に使用できる。
According to the fourth embodiment, even when it is not possible to distinguish whether the image data stored in the storage medium 30 is a search key image or a normal image, the search key image can be easily specified. For example, this is effective when the storage device 30 including image data captured by another imaging device is used in the imaging device 100.
Since the image data specified as the search key image is stored in the storage medium 30 as the search key image, the search key image is stored in the imaging device according to the first, second, or third embodiment. 100 can be used meaningfully.

(第5の実施形態)
第5の実施形態は、図8に示した検索サブルーチンを改良したものである。ユーザーの都合によっては、例えば、所望の検索キー画像から若干遠い画像を選択して検索処理を開始することが考えられる。その場合、検索中に、所望の検索キー画像またはそれにより近い画像が検索抽出される可能性がある。その場合は、検索抽出されたより近い画像を検索キー画像に設定して検索したほうが、検索ノイズが減り、洗練された検索結果を得られると考えられる。そこで、本実施形態では、検索処理中に発見された画像データを検索キーとして選択し、再度検索処理を実行できるようにする。
(Fifth embodiment)
In the fifth embodiment, the search subroutine shown in FIG. 8 is improved. Depending on the convenience of the user, for example, it is conceivable to select an image slightly far from the desired search key image and start the search process. In that case, a desired search key image or an image closer thereto may be searched and extracted during the search. In that case, it is considered that the search noise is reduced and a refined search result can be obtained by performing a search by setting an image closer to the search and extraction as a search key image. Therefore, in this embodiment, image data discovered during the search process is selected as a search key so that the search process can be executed again.

図15は、第5の実施形態に係る検索サブルーチンを示すフローチャートである。当該サブルーチンは、図6や図13のステップS610に相当するものである。なお、図8において説明した個所は同一の参照符号を付すことで、説明を省略する。以下は、ステップS804において、新たに検索キー画像として指定したい画像データが検索抽出され表示部20に表示されているものとする。   FIG. 15 is a flowchart showing a search subroutine according to the fifth embodiment. This subroutine corresponds to step S610 in FIG. 6 or FIG. In addition, the part demonstrated in FIG. 8 attaches | subjects the same referential mark, and abbreviate | omits description. In the following, it is assumed that image data that is newly specified as a search key image is retrieved and displayed on the display unit 20 in step S804.

ステップS1501において、CPU17は、検索結果から新しい検索キー画像が指定されたかを判定する。例えば、検索結果から出現した画像を矢印キー(三角キー)等で指定された上で、再度検索ボタン22Bが押されたことを検出すると、CPU17は、指定された画像データを検索キー画像として再選択し、ステップS802に進み、当該検索キー画像を用いて画像検索を起動する。   In step S1501, the CPU 17 determines whether a new search key image has been designated from the search result. For example, when an image appearing from the search result is designated by an arrow key (triangular key) or the like and the search button 22B is detected again, the CPU 17 re-uses the designated image data as a search key image. In step S802, image search is activated using the search key image.

一方、再選択でなければ、ステップS1502に進み、CPU17は、検索結果を検索キー画像として保存するかどうかを判定する。例えば、検索結果としての画像や、そのときに使用された検索キー画像を、矢印キー(三角キー)等で指定され、かつ、保存ボタンが押されたことを検出することで、判定処理を実行する。検索結果を検索キー画像として保存すべきと判定した場合は、ステップS1503に進み、そうでなければ、ステップS805に進む。   On the other hand, if it is not re-selection, the process proceeds to step S1502, and the CPU 17 determines whether or not to save the search result as a search key image. For example, the determination process is executed by detecting that the search result image or the search key image used at that time is designated by an arrow key (triangle key) or the like and the save button is pressed. To do. If it is determined that the search result should be saved as a search key image, the process proceeds to step S1503, and if not, the process proceeds to step S805.

ステップ1503において、CPU17は、指定された画像データを、記憶媒体30に記憶する。検索キー画像の保存方法はすでに説明したとおりである。   In step 1503, the CPU 17 stores the designated image data in the storage medium 30. The method for storing the search key image is as described above.

以上説明したように本実施形態によれば、検索抽出された画像データのなかから新たな検索キー画像を指定して再度の検索処理を実行できるようにしたので、絞り込み検索や新たな検索を簡易な操作により実行できる利点がある。例えば、記憶媒体30に記憶されている画像データの数が膨大であるため、最初は、所望の検索キー画像から若干遠い画像で検索処理を開始し、より近い画像データが出現してきた時は、その画像を新たな検索キー画像として指定し、再度、検索を実行できる。このようにして検索を繰り返しているうちに、所望の検索キー画像に近い画像の抽出確率が向上しよう。   As described above, according to the present embodiment, a new search key image can be specified from the image data that has been searched and extracted so that the search process can be executed again. There is an advantage that can be executed by simple operation. For example, since the number of image data stored in the storage medium 30 is enormous, first, search processing is started with an image slightly distant from the desired search key image, and when closer image data appears, The image can be designated as a new search key image and the search can be executed again. As the search is repeated in this way, the extraction probability of an image close to the desired search key image will be improved.

(第6の実施形態)
第6の実施形態において、検索キー画像と通常画像とを相互に変換する技術について説明する。
(Sixth embodiment)
A technique for mutually converting a search key image and a normal image in the sixth embodiment will be described.

図16は、第6の実施形態に係る再生モードの動作を示すフローチャートである。なお、図6において説明した個所については同一の参照符号を付すことにより説明を省略する。   FIG. 16 is a flowchart showing the operation of the playback mode according to the sixth embodiment. In addition, about the location demonstrated in FIG. 6, description is abbreviate | omitted by attaching | subjecting the same referential mark.

まず、ステップS605において、表示部20に通常画像が表示されている際に、矢印キー(三角キー)で特定の通常画像指定されたものとする。   First, in step S605, when a normal image is displayed on the display unit 20, it is assumed that a specific normal image is designated with an arrow key (triangular key).

ステップS1601において、CPU17は、表示&ファイル操作関連ボタン22Eの1つを割り当てた変更ボタンの押釦を検出する。検出すると、ステップS1602に進み、CPU17は、指定された通常画像を検索キー画像に変更して、記憶媒体30に記憶する。変更処理の実現手法は種々ある。例えば、通常画像を複製して検索キー画像を作成してもよい。あるいは、通常画像のファイル管理情報を、検索キー画像を示すものに変更してもよい。あるいは、通常画像データのリンクを作成し、検索キー画像記憶領域302に記憶してもよい。あるいは、通常画像記憶領域301から、検索キー画像記憶領域302へと画像データを移動させてもよい。もちろん、上述の兼用画像として管理してもよいことはいうまでもない。   In step S1601, the CPU 17 detects the push button of the change button to which one of the display & file operation related buttons 22E is assigned. If detected, the process proceeds to step S1602, and the CPU 17 changes the designated normal image into a search key image and stores it in the storage medium 30. There are various methods for implementing change processing. For example, the search key image may be created by duplicating the normal image. Alternatively, the file management information of the normal image may be changed to indicate the search key image. Alternatively, a link of normal image data may be created and stored in the search key image storage area 302. Alternatively, the image data may be moved from the normal image storage area 301 to the search key image storage area 302. Of course, it is needless to say that it may be managed as the above-described combined image.

なお、ステップS1601およびS1602は、図13のフローチャートに挿入してもよいことはいうまでもない。   Needless to say, steps S1601 and S1602 may be inserted into the flowchart of FIG.

図17は、第6の実施形態に係る検索サブルーチンを示す図である。なお、図9において説明した個所については同一の参照符号を付すことにより説明を省略する。   FIG. 17 is a diagram showing a search subroutine according to the sixth embodiment. In addition, about the location demonstrated in FIG. 9, description is abbreviate | omitted by attaching | subjecting the same referential mark.

ステップS902において、検索キー画像が選択されている場合に、ステップS1701において、上述の変更ボタンの押釦すると、CPU17は、ステップS1702に進み、選択されている検索キー画像を通常画像に変更する。変更処理の具体例は、変換対象が反対になっていることを除き、ステップS1602に関して説明したとおりである。   When the search key image is selected in step S902, if the change button described above is pressed in step S1701, the CPU 17 proceeds to step S1702 and changes the selected search key image to a normal image. A specific example of the change process is as described for step S1602 except that the conversion target is reversed.

なお、ステップS1701およびS1702は、図15のフローチャートに挿入してもよいことはいうまでもない。   Needless to say, steps S1701 and S1702 may be inserted into the flowchart of FIG.

以上説明したように第6の実施形態によれば、検索キー画像と通常画像とを相互に変換できる。例えば、検索キー画像として撮像した画像が、出来のよい画像であった場合に通常画像として活用することができるようになる。一方で、通常画像として撮像した画像が検索キー画像としても活用が見込める場合には、当該通常画像を検索キー画像としても使用できる。   As described above, according to the sixth embodiment, the search key image and the normal image can be mutually converted. For example, when an image captured as a search key image is a good image, it can be used as a normal image. On the other hand, when an image captured as a normal image can be used as a search key image, the normal image can be used as a search key image.

(その他の実施形態)
以上種々の実施形態を説明してきたが、本発明の技術思想を逸脱しない範囲で、上記以外のフローチャートを使用したり、上述したいくつかのバリエーションを矛盾しない範囲で組み合わせたりしてもよいことはいうまでもない。そのような変形例であっても、特許請求の範囲に記載された発明の構成と実質的に同一であるかぎり、本発明の技術的範囲に属することはいうまでもない。
(Other embodiments)
Although various embodiments have been described above, it is possible to use flowcharts other than those described above and to combine some of the above-described variations without departing from the technical idea of the present invention. Needless to say. It goes without saying that such a modification belongs to the technical scope of the present invention as long as it is substantially the same as the configuration of the invention described in the claims.

図18および図19は、変形例に関する撮像装置の外観図である。図18によれば、左手人差し指の位置に検索ボタン22Bを配置している。また図19によれば、左手親指の位置に検索ボタン22Bを配置している。要するに、シャッターボタン22Aと同時に操作しやすい位置であれば、どのような位置に検索ボタン22Bを配置してもよい。例えば、撮像装置100の前面、背面、左側面、右側面、上面、下面等、あらゆる位置に配置できる。
なお、上記各実施形態では、検索ボタンとシャッターボタンとを同時に押釦することにより検索キー画像の撮像等の動作を開始するようにしたが、動作開始を指示するためのUIとしてはこれに限るものではなく、カメラ内部で検索ボタンON信号とシャッターボタンON信号の両方を検知した状態を得られるものであれば、異なるUIの形態をとってもよい。例えば、検索ボタンを押しながらシャッターボタンを押す、検索ボタンを押して所定時間内にシャッターボタンを押す、等の形態でもよい。
FIG. 18 and FIG. 19 are external views of an imaging apparatus regarding a modification. According to FIG. 18, the search button 22B is arranged at the position of the left index finger. Further, according to FIG. 19, the search button 22B is arranged at the position of the left thumb. In short, the search button 22B may be arranged at any position as long as it is easy to operate simultaneously with the shutter button 22A. For example, the image pickup apparatus 100 can be arranged at any position such as the front, back, left side, right side, top surface, and bottom surface.
In each of the above embodiments, the search button image capturing operation or the like is started by simultaneously pressing the search button and the shutter button. However, the UI for instructing the operation start is not limited to this. Instead, it may take different UI forms as long as it can obtain a state in which both the search button ON signal and the shutter button ON signal are detected inside the camera. For example, the shutter button may be pressed while the search button is pressed, or the search button may be pressed and the shutter button pressed within a predetermined time.

また、本発明においては、再生モードで検索処理を実行するように説明した部分もあったが、別途検索の用途に用いることを主眼とした検索モードを設けてもよい。その場合においても本発明の構成を適用しうることは言うまでもない。   Further, in the present invention, there is a part that is explained to execute the search process in the playback mode, but a search mode that is mainly intended for use in a search may be provided. It goes without saying that the configuration of the present invention can be applied even in this case.

また、本発明は、前述した実施形態の各機能を実現するソフトウェアプログラム(本実施形態では図4〜図9、図13〜図17のいずれかに示すフローチャートに対応したプログラム)を、システム若しくは装置に対して直接または遠隔から供給し、そのシステム若しくは装置に含まれるコンピュータが該供給されたプログラムコードを読み出して実行することによっても達成される。   The present invention also provides a software program (in this embodiment, a program corresponding to the flowchart shown in any one of FIGS. 4 to 9 and FIGS. 13 to 17) that implements each function of the above-described embodiment. It is also achieved by supplying the program code directly or remotely, and reading and executing the supplied program code by a computer included in the system or apparatus.

従って、本発明の機能・処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、上記機能・処理を実現するためのコンピュータプログラム自体も本発明の一つである。   Accordingly, since the functions and processes of the present invention are implemented by a computer, the program code itself installed in the computer also implements the present invention. That is, the computer program itself for realizing the functions and processes is also one aspect of the present invention.

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等、プログラムの形態を問わない。   In this case, the program may be in any form as long as it has a program function, such as an object code, a program executed by an interpreter, or script data supplied to the OS.

プログラムを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、MO、CD−ROM、CD−R、CD−RW、磁気テープ、不揮発性のメモリカード、ROM、DVD(DVD−ROM,DVD−R)などがある。   As a storage medium for supplying the program, for example, flexible disk, hard disk, optical disk, magneto-optical disk, MO, CD-ROM, CD-R, CD-RW, magnetic tape, nonvolatile memory card, ROM, DVD (DVD-ROM, DVD-R).

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記憶媒体にダウンロードすることによっても供給できる。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザーに対してダウンロードさせるWWWサーバも、本発明の構成要件となる場合がある。   As another program supply method, a client computer browser is used to connect to an Internet homepage, and the computer program itself of the present invention or a compressed file including an automatic installation function is downloaded from the homepage to a storage medium such as a hard disk. Can also be supplied. It can also be realized by dividing the program code constituting the program of the present invention into a plurality of files and downloading each file from a different homepage. In other words, a WWW server that allows a plurality of users to download a program file for realizing the functional processing of the present invention on a computer may be a constituent requirement of the present invention.

また、本発明のプログラムを暗号化してCD−ROM等の記憶媒体に格納してユーザーに配布し、所定の条件をクリアしたユーザーに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。   In addition, the program of the present invention is encrypted, stored in a storage medium such as a CD-ROM, distributed to users, and key information for decryption is downloaded from a homepage via the Internet to users who have cleared predetermined conditions. It is also possible to execute the encrypted program by using the key information and install the program on a computer.

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているOSなどが、実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現され得る。   In addition to the functions of the above-described embodiments being realized by the computer executing the read program, the OS running on the computer based on the instruction of the program is a part of the actual processing. Alternatively, the functions of the above-described embodiment can be realized by performing all of the processes.

さらに、記憶媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現される。   Furthermore, after the program read from the storage medium is written to a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion board or The CPU or the like provided in the function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are realized by the processing.

図1は、第1の実施形態に係る撮像装置の構成例を示す図である。FIG. 1 is a diagram illustrating a configuration example of an imaging apparatus according to the first embodiment. 図2は、第1の実施形態に係る撮像装置の外観図である。FIG. 2 is an external view of the imaging apparatus according to the first embodiment. 図3は、第1の実施形態に係る撮像装置のモード遷移を示す状態遷移図である。FIG. 3 is a state transition diagram illustrating mode transition of the imaging apparatus according to the first embodiment. 図4は、第1の実施形態に係る撮像動作と記憶媒体30への書き込みに関連する動作を示すフローチャートである。FIG. 4 is a flowchart showing an operation related to the imaging operation and writing to the storage medium 30 according to the first embodiment. 図5は、第1の実施形態に係る撮像動作と検索処理等を示すフローチャートである。FIG. 5 is a flowchart illustrating an imaging operation, search processing, and the like according to the first embodiment. 図6は、第1の実施形態に係る再生モードの動作を示すフローチャートである。FIG. 6 is a flowchart showing the operation in the playback mode according to the first embodiment. 図7は、第1の実施形態か係る検索キー画像の撮像サブルーチンに関するフローチャートである。FIG. 7 is a flowchart relating to a retrieval key image imaging subroutine according to the first embodiment. 図8は、第1の実施形態に係る検索サブルーチンのフローチャートである。FIG. 8 is a flowchart of a search subroutine according to the first embodiment. 図9は、第1の実施形態に検索キー画像選択サブルーチンのフローチャートである。FIG. 9 is a flowchart of a search key image selection subroutine according to the first embodiment. 図10は、第2の実施形態に係る撮像装置の構成例を示す図である。FIG. 10 is a diagram illustrating a configuration example of an imaging apparatus according to the second embodiment. 図11は、第3の実施形態に係る撮像装置の構成例を示す図である。FIG. 11 is a diagram illustrating a configuration example of an imaging apparatus according to the third embodiment. 図12は、第4の実施形態に係る撮像装置の構成例を示す図である。FIG. 12 is a diagram illustrating a configuration example of an imaging apparatus according to the fourth embodiment. 図13は、第4の実施形態に係る再生モードの動作を示すフローチャートである。FIG. 13 is a flowchart showing the operation of the playback mode according to the fourth embodiment. 図14は、第の実施形態に係る検索キー画像特定サブルーチンを示すフローチャートである。FIG. 14 is a flowchart showing a search key image specifying subroutine according to the fourth embodiment. 図15は、第5の実施形態に係る検索サブルーチンを示すフローチャートである。FIG. 15 is a flowchart showing a search subroutine according to the fifth embodiment. 図16は、第6の実施形態に係る再生モードの動作を示すフローチャートである。FIG. 16 is a flowchart showing the operation of the playback mode according to the sixth embodiment. 図17は、第6の実施形態に係る検索サブルーチンを示す図である。FIG. 17 is a diagram showing a search subroutine according to the sixth embodiment. , 図18および図19は、変形例に関する撮像装置の外観図である。FIG. 18 and FIG. 19 are external views of an imaging apparatus regarding a modification.

Claims (11)

画像を撮影して記録媒体に記録する撮像装置であって、
画像検索の検索キーとなる検索キー画像の撮像指示に応じて、検索キー画像を撮像する撮像手段と、
前記撮像手段により撮像された検索キー画像に基づいて、前記記録媒体に記録されている画像の中から画像を検索する検索手段と、
前記検索キー画像が撮像されたことに応じて、前記検索手段による検索を開始させる制御手段と、
前記検索手段により検索された画像を表示する表示手段を有し、
前記撮像手段は、前記検索手段による検索キー画像に基づく検索処理と並行して、画像の撮像が可能であり、
前記制御手段は、前記検索キー画像に基づく画像の検索処理中に、新たな検索キー画像の撮影指示が入力された場合、前記新たな検索キー画像が撮像されても、当該新たな検索キー画像に基づく検索処理は開始しないように制御し、
前記表示手段は、画像を撮影する撮影モードから画像を再生する再生モードに切り替えられたことに応じて、前記検索手段により検索された画像を表示することを特徴とする撮像装置。
An imaging device that captures an image and records it on a recording medium,
In accordance with an imaging instruction for a search key image serving as a search key for image search, an imaging means for imaging a search key image;
Search means for searching for an image from images recorded on the recording medium based on a search key image picked up by the image pickup means;
Control means for starting a search by the search means in response to the search key image being captured;
Display means for displaying an image searched by the search means ;
The imaging means is capable of imaging an image in parallel with a search process based on a search key image by the search means,
In the case where an instruction to capture a new search key image is input during the image search process based on the search key image, the control means is configured to input the new search key image even if the new search key image is captured. search process is controlled so as not to start on the basis of,
The image pickup apparatus , wherein the display unit displays an image searched by the search unit in response to switching from a shooting mode for shooting an image to a playback mode for playing back an image.
前記検索手段による画像の検索処理中に、前記新たな検索キー画像の撮影指示が入力された場合、他の検索キー画像に基づく検索処理中であることを通知する通知手段を有することを特徴とする請求項1に記載の撮像装置。   And a notification means for notifying that a search process based on another search key image is being performed when an instruction to capture a new search key image is input during the image search process by the search means. The imaging device according to claim 1. 画像を撮影して記録媒体に記録する撮像装置であって、
検索キー画像の撮像指示に応じて、検索キー画像を撮像する撮像手段と、
前記撮像手段により撮像された検索キー画像に基づいて、前記記録媒体に記録されている画像の中から画像を検索する検索手段と、
前記検索キー画像が撮像されたことに応じて、前記検索手段による検索を開始させる制御手段と、を有し、
前記撮像手段は、前記検索手段による検索キー画像に基づく検索処理と並行して、画像の撮像が可能であり、
さらに、前記撮像装置は、
前記検索手段による画像の検索中に、新たな検索キー画像の撮影指示が入力された場合、他の検索キー画像に基づく検索処理中であることを通知する通知手段を有し、
前記撮像手段は、画像を撮影する撮影モード時には、シャッターボタンが操作されたことに応じて通常画像を撮像し、前記シャッターボタンと検索ボタンが同時に操作されたことに応じて検索キー画像を撮像し、画像を再生する再生モード時には、前記シャッターボタンが操作されたことに応じて、検索キー画像を撮像することを特徴とする撮像装置。
An imaging device that captures an image and records it on a recording medium,
In accordance with an instruction to capture the search key image, an imaging unit that captures the search key image;
Search means for searching for an image from images recorded on the recording medium based on a search key image picked up by the image pickup means;
Control means for starting a search by the search means in response to the search key image being captured,
The imaging means is capable of imaging an image in parallel with a search process based on a search key image by the search means,
Furthermore, the imaging device includes:
During the search of the image by said retrieval means, if the imaging instruction of the new search key image is input, have a notification means for notifying that the search process in which based on other key images,
In the shooting mode for shooting an image, the imaging means captures a normal image in response to the operation of the shutter button, and captures a search key image in response to the simultaneous operation of the shutter button and the search button. An image pickup apparatus for picking up a search key image in response to an operation of the shutter button in a playback mode for playing back an image.
画像を撮影して記録媒体に記録する撮像装置であって、
検索キー画像の撮像指示に応じて、検索キー画像を撮像する撮像手段と、
前記撮像手段により撮像された検索キー画像に基づいて、前記記録媒体に記録されている画像の中から画像を検索する検索手段と、
前記検索キー画像が撮像されたことに応じて、前記検索手段による検索を開始させる制御手段と、
前記検索手段により検索された画像を表示する表示手段とを有し、
前記撮像手段は、前記検索手段による検索キー画像に基づく検索処理と並行して、画像の撮像が可能であり、
前記検索手段による画像の検索中に、新たな検索キー画像の撮影指示が入力された場合、他の検索キー画像に基づく検索処理中であることを通知する通知手段をさらに有し、
前記表示手段は、画像を撮影する撮影モードから画像を再生する再生モードに切り替えられたことに応じて、前記検索手段により検索された画像を表示することを特徴とする撮像装置
An imaging device that captures an image and records it on a recording medium,
In accordance with an instruction to capture the search key image, an imaging unit that captures the search key image;
Search means for searching for an image from images recorded on the recording medium based on a search key image picked up by the image pickup means;
Control means for starting a search by the search means in response to the search key image being captured;
Display means for displaying an image searched by the search means;
The imaging means is capable of imaging an image in parallel with a search process based on a search key image by the search means,
A notification means for notifying that a search process based on another search key image is being performed when a shooting instruction for a new search key image is input during an image search by the search means;
The image pickup apparatus , wherein the display unit displays an image searched by the search unit in response to switching from a shooting mode for shooting an image to a playback mode for playing back an image .
画像を撮影して記録媒体に記録する撮像装置であって、
画像検索の検索キーとなる検索キー画像の撮像指示に応じて、検索キー画像を撮像する撮像手段と、
前記撮像手段により撮像された検索キー画像に基づいて、前記記録媒体に記録されている画像の中から画像を検索する検索手段と、
前記検索キー画像が撮像されたことに応じて、前記検索手段による検索を開始させる制御手段と、を有し、
前記撮像手段は、前記検索手段による検索キー画像に基づく検索処理と並行して、画像の撮像が可能であり、
前記制御手段は、前記検索キー画像に基づく画像の検索処理中に、新たな検索キー画像の撮影指示が入力された場合、前記新たな検索キー画像が撮像されても、当該新たな検索キー画像に基づく検索処理は開始しないように制御し、
前記撮像手段は、画像を撮影する撮影モード時には、シャッターボタンが操作されたこと応じて通常画像を撮像し、前記シャッターボタンと検索ボタンが同時に操作されたこと応じて検索キー画像を撮像し、画像を再生する再生モード時には、前記シャッターボタンが操作されたこと応じて、検索キー画像を撮像することを特徴とする撮像装置
An imaging device that captures an image and records it on a recording medium,
In accordance with an imaging instruction for a search key image serving as a search key for image search, an imaging means for imaging a search key image;
Search means for searching for an image from images recorded on the recording medium based on a search key image picked up by the image pickup means;
Control means for starting a search by the search means in response to the search key image being captured,
The imaging means is capable of imaging an image in parallel with a search process based on a search key image by the search means,
In the case where an instruction to capture a new search key image is input during the image search process based on the search key image, the control means is configured to input the new search key image even if the new search key image is captured. To prevent the search process based on
In the shooting mode for shooting an image, the imaging means captures a normal image in response to the operation of the shutter button, and captures a search key image in response to the simultaneous operation of the shutter button and the search button. An image pickup apparatus for picking up a search key image in response to an operation of the shutter button in a playback mode for playing back an image .
前記撮像手段により撮像した画像を前記記録媒体に記録する記録手段を有し、 前記記録手段は、通常画像の撮像指示に応じて前記撮像手段により撮像された画像を、通常画像として記録し、検索キー画像の撮像指示に応じて撮像された画像を、検索キー画像として記録することを特徴とする請求項1ないしのいずれか1項に記載の撮像装置。 A recording unit configured to record an image captured by the imaging unit on the recording medium, wherein the recording unit records and retrieves an image captured by the imaging unit as a normal image in response to an imaging instruction for a normal image; the image captured in accordance with an imaging instruction of the key image, the imaging apparatus according to any one of claims 1 to 5, characterized in that the recording as a retrieval key image. 前記記記録手段は、前記通常画像と前記検索キー画像とで前記記録媒体中の領域を分けて記録することを特徴とする請求項6に記載の撮像装置。 The imaging apparatus according to claim 6 , wherein the recording unit records an area in the recording medium separately for the normal image and the search key image. 前記記録手段は、前記通常画像と前記検索キー画像とでフォルダを分けて記録することを特徴とする請求項7に記載の撮像装置。 The imaging apparatus according to claim 7 , wherein the recording unit separately records folders for the normal image and the search key image. 前記検索手段は、前記記録媒体に記録されている画像の中から、前記検索キー画像に類似する画像を検索することを特徴とする請求項1ないしのいずれか1項に記載の撮像装置。 Said retrieval means, said out of the recording medium is recorded in the image, the imaging apparatus according to any one of claims 1 to 8, characterized in that search for images similar to the search key image. 前記撮像手段は、画像を再生する再生モード時に、シャッターボタンと検索ボタンとが同時に操作された場合も検索キー画像を撮像し、
前記制御手段は、前記シャッターボタンと前記検索ボタンへの同時操作に応じて前記検索キー画像が撮像された場合は前記検索手段による検索処理を開始させ、前記シャッターボタンへの操作に応じて前記検索キー画像が撮像された場合は前記検索手段による検索処理を開始しないように制御することを特徴とする請求項3または5に記載の撮像装置。
The imaging means captures a search key image even when the shutter button and the search button are operated at the same time in a playback mode for reproducing an image,
The control means starts a search process by the search means when the search key image is captured in response to simultaneous operation of the shutter button and the search button, and the search means in response to an operation on the shutter button. 6. The image pickup apparatus according to claim 3, wherein when a key image is picked up, control is performed so that the search processing by the search means is not started.
前記通知手段は、前記検索手段による検索キー画像に基づく検索処理の実行中であることを前記表示手段に表示することを特徴とする請求項2または4に記載の撮像装置。 5. The imaging apparatus according to claim 2 , wherein the notification unit displays on the display unit that a search process based on a search key image by the search unit is being executed.
JP2004173013A 2004-06-10 2004-06-10 Imaging device Expired - Fee Related JP4447966B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2004173013A JP4447966B2 (en) 2004-06-10 2004-06-10 Imaging device
PCT/JP2005/010754 WO2005122564A1 (en) 2004-06-10 2005-06-07 Imaging apparatus
US10/576,212 US7911510B2 (en) 2004-06-10 2005-06-07 Imaging apparatus using a key image in image retrieval or reading out
EP05748084A EP1759527B1 (en) 2004-06-10 2005-06-07 Imaging apparatus
CN2005800015877A CN1906934B (en) 2004-06-10 2005-06-07 Imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004173013A JP4447966B2 (en) 2004-06-10 2004-06-10 Imaging device

Publications (3)

Publication Number Publication Date
JP2005354416A JP2005354416A (en) 2005-12-22
JP2005354416A5 JP2005354416A5 (en) 2007-07-26
JP4447966B2 true JP4447966B2 (en) 2010-04-07

Family

ID=35588487

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004173013A Expired - Fee Related JP4447966B2 (en) 2004-06-10 2004-06-10 Imaging device

Country Status (2)

Country Link
JP (1) JP4447966B2 (en)
CN (1) CN1906934B (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4751348B2 (en) * 2007-02-13 2011-08-17 株式会社リコー IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
KR101396341B1 (en) * 2007-06-22 2014-05-26 삼성전자주식회사 Method of controlling digital image processing apparatus wherein moving-picture photographing mode is performed, and digital image processing apparatus adopting the method
CN103354597B (en) * 2008-08-01 2017-03-01 奥林巴斯株式会社 Image-reproducing means and imaging reconstruction method
CN116567405B (en) * 2023-07-05 2023-09-12 北京华盛恒辉科技有限公司 Picture change identification and shooting method, equipment and medium

Also Published As

Publication number Publication date
CN1906934B (en) 2010-07-07
JP2005354416A (en) 2005-12-22
CN1906934A (en) 2007-01-31

Similar Documents

Publication Publication Date Title
JP5268595B2 (en) Image processing apparatus, image display method, and image display program
KR100971741B1 (en) Image pickup apparatus
JP4277592B2 (en) Information processing apparatus, imaging apparatus, and content selection method
JP2005293339A (en) Information processor and information processing method
US20070013788A1 (en) Image storage apparatus, image storage method, and control program executed in image storage apparatus
JP4423131B2 (en) Information management device
JP2006197156A (en) Camera for microscope
JP4653904B2 (en) Camera with audio playback function
JP4751348B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
JP4447966B2 (en) Imaging device
US20080144976A1 (en) Imaging Apparatus
US8314855B2 (en) Reproducing apparatus and recording apparatus
JP4227458B2 (en) Imaging apparatus, imaging system, and control method
JP4557610B2 (en) Image recording apparatus and control method thereof
JP4826480B2 (en) Imaging apparatus, image management method, and program
JP4656240B2 (en) Information processing apparatus and content selection method
EP1759527B1 (en) Imaging apparatus
JP5487758B2 (en) camera
JP2005167547A (en) Image outputting device, electronic camera, and program thereof
JP5564897B2 (en) Image display device
JP4533008B2 (en) Image recording apparatus and control method thereof
JP2002247429A (en) Electronic still camera, image processing system, image processing program and recording medium for recording the image processing program
JP2003189212A (en) Imaging device, imaging method, program, and storage medium
JP4666064B2 (en) Image data recording apparatus and image data recording method
JP5042980B2 (en) Camera with audio playback function

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070606

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070606

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20070606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090810

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090928

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091023

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100118

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100121

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130129

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4447966

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140129

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees