JP2012249155A - 電子機器 - Google Patents

Abstract

【課題】電子機器を扱いやすい学習器として動作させること。
【解決手段】電子機器は、被写体像を撮像する撮像部１２と、撮像部１２で撮像された画像から所定の対象物を認識する第１認識部１６と、対象物に対応する音声情報を記憶する音声情報記憶部１４と、音声情報を再生する音声再生部２２，２３と、指示に応じて、第１認識部１６で認識された対象物に対応する音声情報を再生するように音声再生部２２，２３および音声情報記憶部１４をそれぞれ制御する第１制御部１６と、を備える。
【選択図】図１

Description

本発明は、電子機器に関する。

画像に対応付けた音声ファイルを画像ファイルの非画像部分に記録する技術が知られている（特許文献１参照）。画像を表示装置に再生表示するとともにボイスマークアイコンを表示させる。ボイスメモの再生が指示されると、対応付けられている音声ファイルの内容をスピーカから再生する。

特開２００８−１５８７８８号公報

従来技術では、学習器として用いる検討がなされていなかった。

本発明による電子機器は、被写体像を撮像する撮像部と、撮像部で撮像された画像から所定の対象物を認識する第１認識部と、対象物に対応する音声情報を記憶する音声情報記憶部と、音声情報を再生する音声再生部と、指示に応じて、第１認識部で認識された対象物に対応する音声情報を再生するように音声再生部および音声情報記憶部をそれぞれ制御する第１制御部と、を備えることを特徴とする。

本発明による電子機器では、扱いやすい学習器として動作させることができる。

本発明の第一の実施形態による電子カメラの構成例を説明するブロック図である。 電子カメラの背面を例示する図である。 学習器として動作するＣＰＵが実行する「学習器モード」処理の流れを説明するフローチャートである。 第二の実施形態によるＣＰＵが実行する「学習器モード」処理の流れを説明するフローチャートである。 第三の実施形態によるＣＰＵが実行する「学習器モード」処理の流れを説明するフローチャートである。 第四の実施形態によるＣＰＵが実行する「学習器モード」処理の流れを説明するフローチャートである。

以下、図面を参照して本発明を実施するための形態について説明する。
（第一実施形態）
図１は、本発明の第一の実施形態による電子カメラ１の構成例を説明するブロック図である。図１において、電子カメラ１は、撮影光学系１１と、撮像素子１２と、画像処理部１３と、ＲＡＭ１４と、ＬＣＤモニタ１５と、ＣＰＵ１６と、不揮発性メモリ１７と、カードインターフェース(I/F)１８と、通信インターフェース(I/F)１９と、操作部材２０とを備える。

ＣＰＵ１６、不揮発性メモリ１７、カードインターフェース１８、通信インターフェース１９、画像処理部１３、ＲＡＭ１４およびＬＣＤモニタ１５は、それぞれがバス２５を介して接続されている。

撮影光学系１１は、ズームレンズやフォーカシングレンズを含む複数のレンズ群で構成され、被写体像を撮像素子１２の受光面に結像させる。なお、図１を簡単にするため、撮影光学系１１を単レンズとして図示している。

撮像素子１２は、画素を構成する受光素子のフォトダイオードが受光面に二次元配列されたＣＭＯＳイメージセンサなどによって構成される。撮像素子１２は、撮影光学系１１を通過した光束による像を光電変換し、デジタル画像データを生成する。デジタル画像データは、画像処理部１３に入力される。画像処理部１３は、デジタル画像データに対して各種の画像処理（色補間処理、階調変換処理、輪郭強調処理、ホワイトバランス調整処理など）を施す。

ＬＣＤモニタ１５は液晶パネルなどによって構成される。ＬＣＤモニタ１５は、ＣＰＵ１６からの指示に応じて画像や操作アイコン、メニュー画面などを表示する。ＲＡＭ１４は、画像処理部１３による画像処理の前工程や後工程でのデジタル画像データを一時的に記憶する他、ＣＰＵ１６によるプログラム実行時に用いられる。ＲＡＭ１４は、電源オフ時には記憶内容を消失する揮発性メモリである。不揮発性メモリ１７は、フラッシュメモリなどによって構成される。不揮発性メモリ１７は、電源オフ時に記憶内容を消失することなく保持するので、ＣＰＵ１６が実行するプログラムなどを記憶する。

ＣＰＵ１６は、不揮発性メモリ１７が記憶するプログラムを実行することにより、電子カメラ１が行う動作を制御する。カードインターフェース１８はコネクタ（不図示）を有し、該コネクタにメモリカードなどの記憶媒体３０が接続される。カードインターフェース１８は、接続された記憶媒体３０に対するデータの書き込みや、記憶媒体３０からのデータの読み込みを行う。記憶媒体３０は、半導体メモリを内蔵したメモリカード、またはハードディスクドライブなどで構成される。

通信インターフェース１９は、たとえば、不図示のコネクタに接続された外部機器との間で所定の通信を行う。この通信により、外部機器からのコマンドやデータを受信したり、記憶媒体３０に記録されている画像データなどを外部機器へ送信したりする。また、外部の表示装置に再生画像を表示させるための信号を送信してもよい。操作部材２０は、レリーズボタン２０１（図２）やモードボタン２０２（図２）などを含む。操作部材２０は、撮影操作、モード切替え操作やアイコン選択操作など、各操作に応じた操作信号をＣＰＵ１６へ送出する。

音声処理回路２２は、マイク２２で集音された音声信号を増幅し、増幅後の信号をＡ／Ｄ変換回路（不図示）によってデジタル音声データに変換する。音声処理回路２２はさらに、デジタル音声データに基づいて音声信号を復元し、該音声信号をスピーカ２３から再生する。

＜学習器モード＞
上述した電子カメラ１は、学習器として使用する「学習器モード」を備える。本実施形態は、学習器としての動作に特徴を有するので、以下の説明は「学習器モード」の動作を中心に行う。図２は、電子カメラ１の背面を例示する図である。図２において、電子カメラ１の背面には、ＬＣＤモニタ１５と、モードボタン２０２と、音声再生ボタン２０３と、十字スイッチ２０５と、ＯＫボタン２０４とが設けられている。電子カメラ１の上面には、レリーズボタン２０１が設けられている。

学習器としての動作の概要を例示すると以下の通りである。電子カメラ１のユーザは、モードボタン２０２を操作して「学習器モード」に切替え操作を行う。「学習器モード」に切替わったＣＰＵ１６は、撮像素子１２で所定時間ごと（たとえば、３０フレーム／毎秒）に撮像したスルー画像をＬＣＤモニタ１５に逐次表示させる。スルー画像は、撮影指示前に繰り返し取得するモニタ用の画像である。

ユーザは、電子カメラ１の撮影光学系１１を学習対象の被写体（本例ではシマウマ）に向けて、当該被写体の画像がＬＣＤモニタ１５に表示されるようにする。ＣＰＵ１６は、ＬＣＤモニタ１５に表示中のスルー画像に対して公知のテンプレートマッチング処理を施すことにより、スルー画像に含まれている対象物を探す。

対象物は、あらかじめ不揮発性メモリ１７に記憶されているテンプレート情報に基づく。テンプレート情報は、たとえば、動物、植物、おもちゃ、人形、文字、数字、色（見本）などを表す特徴量に基づいて生成されている。ＣＰＵ１６は、テンプレートマッチング処理によってスルー画像の中に対象物（本例では、動物のシマウマ）を検出すると、検出した対象物（本例ではシマウマ）の位置を示す認証マーク１５１をスルー画像に重ねてＬＣＤモニタ１５に表示させる。ＣＰＵ１６はさらに、対象物（本例ではシマウマ）に関連付けた音声ファイルがＲＡＭ１４または記憶媒体３０に記録されている場合には、スルー画像に重ねて「音声を再生しますか？」というメッセージをＬＣＤモニタ１５に表示させる。

ユーザによって操作部材２０を構成するＯＫボタン２０４が操作されると、ＣＰＵ１６は、上記関連づけられている音声ファイルに基づいてスピーカ２３から音声を再生させる。この音声ファイルの音声データは、たとえば、対象物（本例ではシマウマ）の名称を読み上げた音、またはその対象物（本例ではシマウマ）が発した声（いななき、鳴き声など）である。ユーザは、このような再生音を聞くことにより、その対象物（本例ではシマウマ）の名称を知る、またはその対象物（本例ではシマウマ）の声を聞いて学習できる。

＜学習器モード処理＞
図３は、上述した学習器として動作するＣＰＵ１６が実行する「学習器モード」処理の流れを説明するフローチャートである。ＣＰＵ１６は、操作部材２０を構成するモードボタン２０２が操作され、「学習器モード」に設定されると図３による処理を実行するプログラムを繰り返し実行する。なお、モードボタン２０２が押下されるごとに、「撮影モード」→「再生モード」→「学習器モード」への切替をサイクリックに行うように構成されている。「撮影モード」は、レリーズボタン２０１の押下操作に応じて被写体画像を撮影し、該撮影画像のデータを格納した画像ファイルをメモリカードなどの記憶媒体３０へ記録する動作モードである。「再生モード」は、記憶媒体３０に記録されている画像ファイルに格納されている画像データに基づく再生画像をＬＣＤモニタ１５に再生表示する動作モードである。

図３のステップＳ１１において、ＣＰＵ１６は、「学習器モード」における「音声登録モード」へ切替えてステップＳ１２へ進む。「学習器モード」の中に、「音声登録モード」と後述する「画像保存モード」、および「画像読出しモード」がそれぞれ設けられる。ステップＳ１２において、ＣＰＵ１６は、ＬＣＤモニタ１５へのスルー画像の表示を開始させてステップＳ１３へ進む。これにより、撮像素子１２が上記３０フレーム／毎秒のフレームレートで撮像を開始する。

ステップＳ１３において、ＣＰＵ１６は、認証処理を開始してステップＳ１４へ進む。ＣＰＵ１６は、たとえば、あらかじめ設定されているジャンルのテンプレート情報に基づいてテンプレートマッチング処理を施すことによって、上述したようにスルー画像の中で対象物を探す。対象物のジャンルは、上述した動物、植物、おもちゃ、人形、文字、数字、色（見本）などである。

ステップＳ１４において、ＣＰＵ１６は、登録データ（たとえば、対象物に対応させて登録されているテンプレート情報）と合致する画像領域をスルー画像の中に見つけた場合はステップＳ１４を肯定判定してステップＳ２０へ進む。ＣＰＵ１６は、登録データと合致する画像領域をスルー画像の中に見つけなかった場合には、ステップＳ１４を否定判定してステップＳ１５へ進む。

ステップＳ２０において、ＣＰＵ１６は、対象物に関連付けた音声ファイルがＲＡＭ１４または記憶媒体３０に記録されている場合には、スルー画像に重ねて「音声を再生しますか？」というメッセージをＬＣＤモニタ１５に表示させてステップＳ２１へ進む。このときＣＰＵ１６は、検出した対象物の位置を示す認証マーク１５１をスルー画像に重ねてＬＣＤモニタ１５に表示させる（図２）。なお、対象物に関連付けた音声ファイルがＲＡＭ１４にも記憶媒体３０にも記録されていない場合は、ステップＳ２１およびＳ２２をスキップして図３による処理を終了する。

ステップＳ２１において、ＣＰＵ１６は、音声再生が指示されたか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ２１を肯定判定してステップＳ２２へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ２１を否定判定して図３による処理を終了する。ステップＳ２２において、ＣＰＵ１６は音声処理回路２２へ指示を送り、上記関連づけられている音声ファイルに基づいてスピーカ２３から音声を再生させる。ＯＫボタン２０４が押下されるごとに繰り返し音声再生させる。ＯＫボタン２０４が操作されないまま所定時間が経過すると、図３による処理を終了する。

ステップＳ２２の音声再生により、対象物が動物の場合はその名称や鳴き声を学習できる。対象物が植物の場合はその名称や説明（たとえば、どんな花が咲くか）を学習できる。おもちゃの場合はその名称を学習できる。文字の場合はその読み方を学習できる。数字の場合はその読み方を学習できる。色（見本）の場合は、その名称を学習できる。

上述したステップＳ１４を否定判定して進むステップＳ１５において、ＣＰＵ１６は、スルー画像に重ねて「音声を記録しますか？」というメッセージを表示させてステップＳ１６へ進む。ステップＳ１６において、ＣＰＵ１６は、音声記録が指示されたか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ１６を肯定判定してステップＳ１７へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１６を否定判定してステップＳ２３へ進む。

ステップＳ１７において、ＣＰＵ１６は音声処理回路２２へ指示を送り、マイク２１から集音させるとともに、撮像素子１２に撮像させてステップＳ１８へ進む。ステップＳ１８において、ＣＰＵ１６は撮像素子１２で取得された画像データに基づいて画像ファイルを生成するとともに、音声処理回路２２へ指示を送り、集音した音声データに基づいて音声ファイルを生成させてステップＳ１９へ進む。ステップＳ１９において、ＣＰＵ１６は、画像ファイルおよび音声ファイルをＲＡＭ１４に記録して図３による処理を終了する。なお、ＣＰＵ１６は、画像データに基づいてテンプレート情報を生成し、このテンプレート情報を不揮発性メモリ１７に記憶させておく。テンプレート情報および音声ファイルは、対象物と関連付けておく。これにより、次にステップＳ１３の認証処理を行う際に参照可能になる（音声登録）。

ステップＳ１６を否定判定して進むステップＳ２３において、ＣＰＵ１６は、「学習器モード」における「画像保存モード」へ切替えてステップＳ２４へ進む。ステップＳ２４において、ＣＰＵ１６は、画像保存モード処理を行ってステップＳ２５へ進む。画像保存モード処理では、レリーズボタン２０１の押下操作に応じて被写体画像を撮影し、該撮影画像のデータを格納した画像ファイルをメモリカードなどの記憶媒体３０へ記録する。

ステップＳ２５において、ＣＰＵ１６は、「学習器モード」における「画像読出しモード」へ切替えるか否かを判定する。ＣＰＵ１６は、たとえば、新たな撮影指示（レリーズボタン２０１の押下操作）が所定時間（たとえば１０秒）なされなかった場合にステップＳ２５を肯定判定してステップＳ２６へ進む。ＣＰＵ１６は、新たな撮影指示（レリーズボタン２０１の押下操作）がなされた場合はステップＳ２４へ戻って画像保存モード処理を繰り返す。

ステップＳ２６において、ＣＰＵ１６は、「学習器モード」における「画像読出しモード」へ切替えてステップＳ２７へ進む。ステップＳ２７において、ＣＰＵ１６は、画像選択操作を受け付ける。ＣＰＵ１６は、たとえば、記憶媒体３０に記録されている画像ファイルの中で、対応する音声ファイルが存在しない画像ファイルを抽出する。ＣＰＵ１６は、抽出した画像ファイルにそれぞれ格納されているサムネイル画像を並べてＬＣＤモニタ１５に再生表示させる。ユーザによって操作部材２０を構成する十字スイッチ２０５が操作されると、ＣＰＵ１６は、ＬＣＤモニタ１５の画面内で不図示のカーソルを十字スイッチ２０５の操作方向に対応させて移動させる。ユーザによって操作部材２０を構成するＯＫボタン２０４が操作されると、ＣＰＵ１６は、その時点のカーソル位置に対応するサムネイル画像を選択し、ステップＳ２８へ進む。

ステップＳ２８において、ＣＰＵ１６は、音声記録が指示されたか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ２８を肯定判定してステップＳ２９へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ２８を否定判定してステップＳ２７へ戻る。

ステップＳ２９において、ＣＰＵ１６は音声処理回路２２へ指示を送り、マイク２１から集音させてステップＳ３０へ進む。ステップＳ３０において、ＣＰＵ１６は音声処理回路２２へ指示を送り、集音した音声データに基づいて音声ファイルを生成させてステップＳ３１へ進む。ステップＳ３１において、ＣＰＵ１６は、カードインターフェース１８に指示を送り、上記選択したサムネイル画像に対応する画像ファイルを記憶媒体３０から読み出させる。そして、読み出された画像ファイルおよび生成した音声ファイルをＲＡＭ１４に記録してステップＳ３２へ進む。なお、ＣＰＵ１６は、画像データに基づいてテンプレート情報を生成し、このテンプレート情報を不揮発性メモリ１７に記憶させておく。テンプレート情報および音声ファイルは、対象物と関連付けておく。これにより、次にステップＳ１３の認証処理を行う際に参照可能になる（音声登録）。

ステップＳ３２において、ＣＰＵ１６は、他に音声を記録するか否かを判定する。ＣＰＵ１６は、たとえば、操作部材２０を構成する十字スイッチ２０５によるサムネイル画像選択操作が所定時間（たとえば１０秒）なされなかった場合にステップＳ３２を否定判定して図３による処理を終了する。ＣＰＵ１６は、十字スイッチ２０５によるサムネイル画像選択操作がなされた場合は、ステップＳ３２を肯定判定してステップＳ２７へ戻る。ＣＰＵ１６は、新たにサムネイル画像が選択される場合はステップＳ２７へ戻って上述した処理を繰り返す。

以上説明した第一の実施形態によれば、次の作用効果が得られる。
（１）電子カメラ１は、被写体像を撮像する撮像素子１２と、撮像素子１２で撮像された画像から所定の対象物を認識するＣＰＵ１６、不揮発性メモリ１７と、対象物に対応する音声ファイルを記憶するＲＡＭ１４と、音声ファイルを再生する音声処理回路２２、スピーカ２３と、ＯＫボタン２０４の操作信号に応じて、ＣＰＵ１６で認識された対象物に対応する音声ファイルを再生するように音声処理回路２２、スピーカ２３およびＲＡＭ１４をそれぞれ制御するＣＰＵ１６と、を備えるようにしたので、操作が簡単で扱いやすい学習器が得られる。また、ＯＫボタン２０４の操作信号に応じて再生するので、学習者に考える時間を与えられる。たとえば、幼児などが覚えたての動物名である「シマウマ」を思い出そうとしているにもかかわらず、学習器が勝手に音声「シマウマ」を再生してしまうことを防止できる。

（２）上記（１）の電子カメラ１において、ＣＰＵ１６で認識されない対象物を含む画像を認識するためのテンプレート情報を不揮発性メモリ１７に記憶させるとともに、当該画像に対応する音声ファイルをＲＡＭ１４に記憶させるＣＰＵ１６をさらに備えるので、学習の対象物を増やしていくことができる。

（３）上記（１）の電子カメラ１において、ＣＰＵ１６は、保存されている画像に対して当該画像を認識するためのテンプレート情報を不揮発性メモリ１７に記憶させるとともに、当該画像に対応する音声ファイルをＲＡＭ１４に記憶させるので、保存済みの画像を用いて学習の対象物を増やしていくことができる。

（４）上記電子カメラ１において、ＲＡＭ１４は、撮影画像を保存する記憶媒体３０と異ならせたので、撮影用の記録領域である記憶媒体３０を「学習器モード」のために費やしてしまうことを抑えて、適切に学習器を構成できる。

（第二の実施形態）
図４は、第二の実施形態によるＣＰＵ１６が実行する「学習器モード」処理の流れを説明するフローチャートである。ＣＰＵ１６は、操作部材２０を構成するモードボタン２０２が操作され、「学習器モード」に設定されると図４による処理を実行するプログラムを繰り返し実行する。第二の実施形態では、ＬＣＤモニタ１５の表示面に不図示のタッチ操作部材が設けられている。タッチ操作部材は、ユーザによる表示画面上のタッチ位置を示す操作信号をＣＰＵ１６へ送出する。

図４のステップＳ５１において、ＣＰＵ１６は、「学習器モード」における「音声登録モード」へ切替えてステップＳ５２へ進む。ステップＳ５２において、ＣＰＵ１６は、ＬＣＤモニタ１５へスルー画像の表示を開始させてステップＳ５３へ進む。ここまでは第一の実施形態の場合と同様である。ステップＳ５３において、ＣＰＵ１６は、ユーザによるタッチ操作を受け付ける。ＣＰＵ１６は、タッチ操作部材からの操作信号が入力されるとステップＳ５４へ進む。

ステップＳ５４において、ＣＰＵ１６は公知のＡＦ（オートフォーカス）処理を行う。ＣＰＵ１６は、たとえば、スルー画像のうちタッチ位置に対応する所定領域内の画像データに基づいてコントラスト情報を算出し、このコントラスト情報を示す値が大きくなるように撮影光学系１１を構成するフォーカシングレンズ（不図示）を光軸方向に進退移動させる。ＣＰＵ１６は、このようにフォーカス調節を行うとステップＳ５５へ進む。

ステップＳ５５において、ＣＰＵ１６はＡＦ処理後に撮像素子１２で撮像された画像データに基づいて画像ファイルを生成し、該画像ファイルをＲＡＭ１４に記録してステップＳ５６へ進む。ステップＳ５６において、ＣＰＵ１６は認証処理を行うべく、取得画像の中で対象物を探す。対象物は第一の実施形態と同様である。ＣＰＵ１６は、登録データ（本例では不揮発性メモリ１７に記憶されるテンプレート情報）と合致する画像領域を取得画像の中に見つけた場合はステップＳ５６を肯定判定してステップＳ５７へ進む。ＣＰＵ１６は、登録データと合致する画像領域を取得画像の中に見つけなかった場合には、ステップＳ５６を否定判定してステップＳ６２へ進む。

ステップＳ５７において、ＣＰＵ１６はＬＣＤモニタ１５に認証表示を行わせる。たとえば、テンプレートマッチング処理によって取得画像の中に対象物（本例ではシマウマ）を検出すると、検出した対象物（本例ではシマウマ）の位置を示す認証マーク１５１を取得画像に重ねてＬＣＤモニタ１５に表示させる（図２）。ＣＰＵ１６はさらに、対象物に関連付けた音声ファイルがＲＡＭ１４または記憶媒体３０に記録されている場合には、取得画像に重ねて「音声を再生しますか？」というメッセージをＬＣＤモニタ１５に表示させてステップＳ５８へ進む。なお、対象物に関連付けた音声ファイルがＲＡＭ１４にも記憶媒体３０にも記録されていない場合は、ステップＳ５８およびＳ５９をスキップしてステップＳ６０へ進む。

ステップＳ５８において、ＣＰＵ１６は、音声再生が指示されたか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ５８を肯定判定してステップＳ５９へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ５８を否定判定してステップＳ６０へ進む。ステップＳ５９において、ＣＰＵ１６は音声処理回路２２へ指示を送り、上記関連づけられている音声ファイルに基づいてスピーカ２３から音声を再生させる。ＣＰＵ１６はＯＫボタン２０４が押下されるごとに繰り返し音声再生させる。ＯＫボタン２０４が操作されないまま所定時間が経過すると、ステップＳ６０へ進む。

ステップＳ５９の音声再生により、対象物が動物の場合はその名称や鳴き声を学習できる。対象物が植物の場合はその名称や説明（たとえば、どんな花が咲くか）を学習できる。おもちゃの場合はその名称を学習できる。文字の場合はその読み方を学習できる。数字の場合はその読み方を学習できる。色（見本）の場合は、その名称を学習できる。

ステップＳ６０において、ＣＰＵ１６は、ＲＡＭ１４に記録されている画像データを記憶媒体３０へ保存するか否かを判定する。ＣＰＵ１６は、たとえば、取得画像に重ねて「メモリカードに保存しますか？」というメッセージを表示させて、操作部材２０を構成するシャッターボタン２０１の押下操作を受け付ける。ＣＰＵ１６は、シャッターボタン２０１が押下操作された場合にステップＳ６０を肯定判定してステップＳ６７へ進み、シャッターボタン２０１が押下操作されない場合には、ステップＳ６０を否定判定してステップＳ６１へ進む。

ステップＳ６１において、ＣＰＵ１６は、ステップＳ５５でＲＡＭ１４に記録した画像ファイルをＲＡＭ１４から削除して図４による処理を終了する。ステップＳ６０を肯定判定した場合に進むステップＳ６７において、ＣＰＵ１６はカードインターフェース１８に指示を送り、ステップＳ５５でＲＡＭ１４に記録した画像ファイルを記憶媒体３０にコピー記録させて図４による処理を終了する。

上述したステップＳ５６を否定判定して進むステップＳ６２において、ＣＰＵ１６は、取得画像に重ねて「対象被写体は登録されていません」というメッセージを表示させてステップＳ６３へ進む。ステップＳ６３において、ＣＰＵ１６は、音声記録が指示されたか否かを判定する。ＣＰＵ１６は、たとえば、取得画像に重ねて「音声を記録しますか？」というメッセージを表示させて、操作部材２０を構成するＯＫボタン２０４の押下操作を受け付ける。ＣＰＵ１６は、ＯＫボタン２０４が押下操作された場合にステップＳ６３を肯定判定してステップＳ６４へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ６３を否定判定してステップＳ５３へ戻る。なお、音声記録をしない場合にステップＳ６３を否定判定してステップＳ６０へ進むように構成してもよい。この場合のＣＰＵ１６は、上述したように、ステップＳ５５でＲＡＭ１４に記録した画像ファイルを記憶媒体３０に保存させるか否かを判定する。

ステップＳ６４において、ＣＰＵ１６は音声処理回路２２へ指示を送り、マイク２１から集音させてステップＳ６５へ進む。ステップＳ６５において、ＣＰＵ１６は音声処理回路２２へ指示を送り、集音した音声データに基づいて音声ファイルを生成させてステップＳ６６へ進む。ステップＳ６６において、ＣＰＵ１６は、生成した音声ファイルをＲＡＭ１４に記録して図４による処理を終了する。なお、ＣＰＵ１６は、画像データに基づいてテンプレート情報を生成し、このテンプレート情報を不揮発性メモリ１７に記憶させておく。テンプレート情報および音声ファイルは、対象物と関連付けておく。これにより、次にステップＳ５６において認証を行う際に参照可能になる（音声登録）。

以上説明した第二の実施形態によれば、上述した第一の実施形態の場合に比べて、さらに次の作用効果が得られる。すなわち、上記電子カメラ１は、撮像素子１２で撮像された画像を一次記憶するＲＡＭ１４をさらに備え、ＣＰＵ１６はＲＡＭ１４に記憶されている画像に対して認識を行い、ＣＰＵ１６はさらに、ＯＫボタン２０４の操作信号に応じて、音声ファイルの再生後にＲＡＭ１４から記憶媒体３０へ画像をコピー記録するようにＲＡＭ１４を制御するので、学習の対象物を含む画像を、記憶媒体３０に保存しておくことができる。

（第三の実施形態）
図５は、第三の実施形態によるＣＰＵ１６が実行する「学習器モード」処理の流れを説明するフローチャートである。ＣＰＵ１６は、操作部材２０を構成するモードボタン２０２が操作され、「学習器モード」に設定されると図５による処理を実行するプログラムを繰り返し実行する。第三の実施形態では、ＬＣＤモニタ１５の表示面に不図示のタッチ操作部材が設けられている。

図５のステップＳ１０１において、ＣＰＵ１６は、「学習器モード」における「音声登録モード」へ切替えてステップＳ１０２へ進む。ステップＳ１０２において、ＣＰＵ１６は、ＬＣＤモニタ１５へのスルー画像の表示を開始させてステップＳ１０３へ進む。ここまでは第一の実施形態や第三の実施形態と同様である。ステップＳ１０３において、ＣＰＵ１６は認証被写体があるか否かを判定する。

ＣＰＵ１６は、たとえば、スルー画像の中で対象物を探す。対象物は第一の実施形態および第二の実施形態の場合と同様である。ＣＰＵ１６は、登録データ（本例では不揮発性メモリ１７に記憶されるテンプレート情報）と合致する画像領域をスルー画像の中に見つけた場合はステップＳ１０３を肯定判定してステップＳ１０４へ進む。ＣＰＵ１６は、登録データと合致する画像領域をスルー画像の中に見つけなかった場合には、ステップＳ１０３を否定判定してステップＳ１１２へ進む。

ステップＳ１０４において、ＣＰＵ１６は公知のＡＦ処理を行う。ＣＰＵ１６は、たとえば、スルー画像の全域の画像データに基づいてコントラスト情報を算出し、コントラスト情報を示す値が大きくなるように撮影光学系１１を構成するフォーカシングレンズ（不図示）を光軸方向に進退移動させる。ここでは、最至近の被写体を対象にフォーカス調節を行うとステップＳ１０５へ進む。

ステップＳ１０５において、ＣＰＵ１６はＬＣＤモニタ１５に認証表示を行わせる。たとえば、テンプレートマッチング処理によって取得画像の中に対象物（本例ではシマウマ）を検出すると、検出した対象物（本例ではシマウマ）の位置を示す認証マーク１５１を取得画像に重ねてＬＣＤモニタ１５に表示させる（図２）。

ステップＳ１０６において、ＣＰＵ１６は、被写体選択操作がなされたか否かを判定する。たとえば、ステップＳ１０３において登録データと合致する画像領域を複数検出している場合であって、最至近の被写体と異なる他の被写体を選びたいユーザが、タッチ操作部材の該当する被写体の表示位置をタッチ操作する。ＣＰＵ１６は、タッチ操作部材からの操作信号が入力されるとステップＳ１０６を肯定判定してステップＳ１０７へ進み、タッチ操作部材からの操作信号が所定時間（たとえば１０秒）入力されない場合には、ステップＳ１０６を否定判定してステップＳ１０３へ戻る。

ステップＳ１０７において、ＣＰＵ１６はＡＦ処理後に撮像素子１２で撮像された画像データに基づいて画像ファイルを生成し、該画像ファイルをＲＡＭ１４に記録してステップＳ１０８へ進む。ＡＦ処理は、スルー画像のうちタッチ位置に対応する所定領域内の画像データに基づいて行う。ステップＳ１０８において、ＣＰＵ１６は、音声再生が指示されたか否かを判定する。ＣＰＵ１６は、たとえば、対象物に関連付けた音声ファイルがＲＡＭ１４または記憶媒体３０に記録されている場合に、取得画像に重ねて「音声を再生しますか？」というメッセージをＬＣＤモニタ１５に表示させて、操作部材２０を構成するＯＫボタン２０４の押下操作を受け付ける。なお、対象物に関連付けた音声ファイルがＲＡＭ１４にも記憶媒体３０にも記録されていない場合は、ステップＳ１０８およびＳ１０９をスキップする。

ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ１０８を肯定判定してステップＳ１０９へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１０８を否定判定してステップＳ１１０へ進む。ステップＳ１０９において、ＣＰＵ１６は音声処理回路２２へ指示を送り、上記関連づけられている音声ファイルに基づいてスピーカ２３から音声を再生させ、ステップＳ１１０へ進む。ＯＫボタン２０４が押下されるごとに繰り返し音声再生させる。ＯＫボタン２０４が操作されないまま所定時間が経過すると、ステップＳ１１０へ進む。

ステップＳ１１９の音声再生により、対象物が動物の場合はその名称や鳴き声を学習できる。対象物が植物の場合はその名称や説明（たとえば、どんな花が咲くか）を学習できる。おもちゃの場合はその名称を学習できる。文字の場合はその読み方を学習できる。数字の場合はその読み方を学習できる。色（見本）の場合は、その名称を学習できる。

ステップＳ１１０において、ＣＰＵ１６は、ＲＡＭ１４に記録されている画像データを記憶媒体３０へ保存するか否かを判定する。ＣＰＵ１６は、たとえば、取得画像に重ねて「メモリカードに保存しますか？」というメッセージを表示させて、操作部材２０を構成するシャッターボタン２０１の押下操作を受け付ける。ＣＰＵ１６は、シャッターボタン２０１が押下操作された場合にステップＳ１１０を肯定判定してステップＳ１２２へ進み、シャッターボタン２０１が押下操作されない場合には、ステップＳ１１０を否定判定してステップＳ１１１へ進む。

ステップＳ１１１において、ＣＰＵ１６は、ステップＳ１０７でＲＡＭ１４に記録した画像ファイルをＲＡＭ１４から削除して図５による処理を終了する。ステップＳ１２２において、ＣＰＵ１６はカードインターフェース１８に指示を送り、ＲＡＭ１４に記録されている画像ファイル（後述するステップＳ１２１を肯定判定した場合は画像ファイルおよび音声ファイル）を記憶媒体３０にコピー記録させて図５による処理を終了する。

上述したステップＳ１０３を否定判定して進むステップＳ１１２において、ＣＰＵ１６は、スルー画像に重ねて「対象被写体は登録されていません」というメッセージを表示させてステップＳ１１３へ進む。ステップＳ１１３において、ＣＰＵ１６は、画像取得が指示されたか否かを判定する。ＣＰＵ１６は、たとえば、スルー画像に重ねて「画像を取得しますか？」というメッセージを表示させて、タッチ操作部材（不図示）のタッチ操作を受け付ける。ＣＰＵ１６はタッチ操作部材が操作された場合にステップＳ１１３を肯定判定してステップＳ１１４へ進み、タッチ操作部材が所定時間（たとえば１０秒）操作されない場合には、ステップＳ１１３を否定判定して図５による処理を終了する。

ステップＳ１１４において、ＣＰＵ１６は公知のＡＦ処理後に撮像素子１２で取得された画像データに基づいて画像ファイルを生成し、該画像ファイルをＲＡＭ１４に記録してステップＳ１１５へ進む。ＡＦ処理は、タッチ操作信号で示される所定領域の画像データに基づいて行う。

ステップＳ１１５において、ＣＰＵ１６は、音声記録が指示されたか否かを判定する。ＣＰＵ１６は、たとえば、取得画像に重ねて「音声を記録しますか？」というメッセージを表示させて、操作部材２０を構成するＯＫボタン２０４の押下操作を受け付ける。ＣＰＵ１６は、ＯＫボタン２０４が押下操作された場合にステップＳ１１５を肯定判定してステップＳ１１６へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１１５を否定判定して図５による処理を終了する。

ステップＳ１１６において、ＣＰＵ１６は音声処理回路２２へ指示を送り、マイク２１から集音させてステップＳ１１７へ進む。ステップＳ１１７において、ＣＰＵ１６は音声処理回路２２へ指示を送り、集音した音声データに基づいて音声ファイルを生成させてステップＳ１１８へ進む。ステップＳ１１８において、ＣＰＵ１６は、生成した音声ファイルをＲＡＭ１４に記録してステップＳ１１９へ進む。なお、ＣＰＵ１６は、画像データに基づいてテンプレート情報を生成し、このテンプレート情報を不揮発性メモリ１７に記憶させておく。テンプレート情報および音声ファイルは、対象物と関連付けておく。これにより、次にステップＳ１０３のいて認証を行う際に参照可能になる（音声登録）。

ステップＳ１１９において、ＣＰＵ１６は、音声再生が指示されたか否かを判定する。ＣＰＵ１６は、たとえば、取得画像に重ねて「音声を再生しますか？」というメッセージをＬＣＤモニタ１５に表示させて、操作部材２０を構成するＯＫボタン２０４の押下操作を受け付ける。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ１１９を肯定判定してステップＳ１２０へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１１９を否定判定して図５による処理を終了する。ステップＳ１２０において、ＣＰＵ１６は音声処理回路２２へ指示を送り、上記音声ファイルに基づいてスピーカ２３から音声を再生させ、ステップＳ１２１へ進む。ＯＫボタン２０４が押下されるごとに繰り返し音声再生させる。ＯＫボタン２０４が操作されないまま所定時間が経過すると、ステップＳ１２１へ進む。

ステップＳ１２０の音声再生により、対象物が動物の場合はその名称や鳴き声を学習できる。対象物が植物の場合はその名称や説明（たとえば、どんな花が咲くか）を学習できる。おもちゃの場合はその名称を学習できる。文字の場合はその読み方を学習できる。数字の場合はその読み方を学習できる。色（見本）の場合は、その名称を学習できる。

ステップＳ１２１において、ＣＰＵ１６は、ＲＡＭ１４に記録されている画像ファイル、音声ファイルを記憶媒体３０へ保存するか否かを判定する。ＣＰＵ１６は、たとえば、取得画像に重ねて「メモリカードに保存しますか？」というメッセージを表示させて、操作部材２０を構成するシャッターボタン２０１の押下操作を受け付ける。ＣＰＵ１６は、シャッターボタン２０１が押下操作された場合にステップＳ１２１を肯定判定してステップＳ１２２へ進み、シャッターボタン２０１が押下操作されない場合には、ステップＳ１２１を否定判定してステップＳ１２２へ進む。

以上説明した第三の実施形態によれば、以下の作用効果が得られる。すなわち、上記電子カメラ１は、撮像素子１２で撮像された画像を一次記憶するＲＡＭ１４をさらに備え、ＣＰＵ１６はＲＡＭ１４に記憶されている画像に対して認識を行い、ＣＰＵ１６はさらに、ＯＫボタン２０４の操作信号に応じて、音声ファイルの再生後にＲＡＭ１４から記憶媒体３０へ画像をコピー記録するようにＲＡＭ１４を制御するので、学習の対象物を含む画像を、記憶媒体３０に保存しておくことができる。

（第四の実施形態）
図６は、第四の実施形態によるＣＰＵ１６が実行する「学習器モード」処理の流れを説明するフローチャートである。第四の実施形態では、「学習器モード」の中に「画像登録モード」が設けられる。ＣＰＵ１６は、操作部材２０を構成するモードボタン２０２が操作され、「学習器モード」に設定されると図６による処理を実行するプログラムを繰り返し実行する。

図６のステップＳ１５１において、ＣＰＵ１６は、「学習器モード」における「画像登録モード」へ切替えてステップＳ１５２へ進む。ステップＳ１５２において、ＣＰＵ１６は音声処理回路２２へ指示を送り、マイク２１からの音声入力を受け付けてステップＳ１５３へ進む。ステップＳ１５３において、ＣＰＵ１６は、公知の音声認識処理を行ってステップＳ１５４へ進む。

ステップＳ１５４において、ＣＰＵ１６は、音声ファイルの内容が音声認識結果と合致する音声ファイルをＲＡＭ１４または記憶媒体３０に見つけた場合はステップＳ１５４を肯定判定してステップＳ１６０へ進む。ＣＰＵ１６は、音声認識結果と合致する音声ファイルをＲＡＭ１４、記憶媒体３０の中に見つけなかった場合には、ステップＳ１５４を否定判定してステップＳ１５５へ進む。

ステップＳ１６０において、ＣＰＵ１６は、見つけた音声ファイルに対応する画像ファイルがＲＡＭ１４または記憶媒体３０に記録されている場合には、「画像が登録されています」というメッセージをＬＣＤモニタ１５に表示させてステップＳ１６１へ進む。

ステップＳ１６１において、ＣＰＵ１６は、画像再生が指示されたか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ１６１を肯定判定してステップＳ１６２へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１６１を否定判定して図６による処理を終了する。ステップＳ１６２において、ＣＰＵ１６は上記対応する画像ファイルに基づいてＬＣＤモニタ１５に再生画像を表示させ、図６による処理を終了する。

ステップＳ１６２の画像再生表示により、対象物が動物の場合はその姿を学習できる。対象物が植物の場合は、その花や葉などを学習できる。おもちゃの場合はその形態を学習できる。文字の場合はその形を学習できる。数字の場合はその形を学習できる。色（見本）の場合は、その色を学習できる。

上述したステップＳ１５４を否定判定して進むステップＳ１５５において、ＣＰＵ１６は「記憶媒体内の画像から登録しますか？」というメッセージをＬＣＤモニタ１５に表示させてステップＳ１５６へ進む。ステップＳ１５６において、ＣＰＵ１６は、記憶媒体３０内の画像から登録するか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ１５６を肯定判定してステップＳ１６３へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１５６を否定判定してステップＳ１５７へ進む。

ステップＳ１５７において、ＣＰＵ１６は撮像を行う。具体的には、公知のＡＦ処理後に撮像素子１２に撮像させてステップＳ１５８へ進む。ＡＦ処理は、たとえば画面中央の所定領域の画像データに基づいて算出したコントラスト情報に基づいて行う。ステップＳ１５８において、ＣＰＵ１６は、上記取得した画像データに基づいて画像ファイルを生成するとともに、ステップＳ１５２で受け付けた音声データに基づいて音声処理回路２２で音声ファイルを生成させてステップＳ１５９へ進む。ステップＳ１５９において、ＣＰＵ１６は、画像ファイルと音声ファイルとが対応するようにＲＡＭ１４に記録して図６による処理を終了する。これにより、次にステップＳ１５３の音声認識処理を行う際に参照可能になる（画像登録）。

ステップＳ１５６を肯定判定して進むステップＳ１６３において、ＣＰＵ１６は、記憶媒体３０からサムネイル画像を読出してステップＳ１６４へ進む。ステップＳ１６４において、ＣＰＵ１６は画像選択操作を受け付ける。ＣＰＵ１６は、たとえば、読出したサムネイル画像を並べてＬＣＤモニタ１５に再生表示させる。ユーザによって操作部材２０を構成する十字スイッチ２０５が操作されると、ＣＰＵ１６は、ＬＣＤモニタ１５の画面内で不図示のカーソルを十字スイッチ２０５の操作方向に対応させて移動させる。ユーザによって操作部材２０を構成するＯＫボタン２０４が操作されると、ＣＰＵ１６は、その時点のカーソル位置に対応するサムネイル画像を選択し、ステップＳ１６５へ進む。

ステップＳ１６５において、ＣＰＵ１６は、画像記録が指示されたか否かを判定する。ＣＰＵ１６は、操作部材２０を構成するＯＫボタン２０４が押下操作された場合にステップＳ１６５を肯定判定してステップＳ１６６へ進み、ＯＫボタン２０４が押下操作されない場合には、ステップＳ１６５を否定判定してステップＳ１６４へ戻る。

ステップＳ１６６において、ＣＰＵ１６は音声処理回路２２へ指示を送り、ステップＳ１５２で受け付けた音声データに基づいて音声ファイルを生成させるとともに、上記選択したサムネイル画像に対応する画像ファイルを記憶媒体３０から読み出させる。そして、ステップＳ１６７において、ＣＰＵ１６は、読出された画像ファイルおよび生成した音声ファイルをＲＡＭ１４に記録して図６による処理を終了する。なお、ＣＰＵ１６は、画像データに基づいてテンプレート情報を生成し、このテンプレート情報を不揮発性メモリ１７に記憶させておく。テンプレート情報および音声ファイルは、対象物と関連付けておく。これにより、次にステップＳ１５３の音声認識処理を行う際に参照可能になる（画像登録）。

以上説明した第四の実施形態によれば、以下の作用効果が得られる。
（１）電子カメラ１はさらに、音声を入力するマイク２１、音声処理回路２２と、マイク２１、音声処理回路２２から入力された音声に対応する対象物を認識するＣＰＵ１６と、対象物に対応する画像情報を記憶する不揮発性メモリ１７、ＲＡＭ１４と、画像情報に対応する画像を再生表示するＬＣＤモニタ１５と、ＯＫボタン２０４の操作信号に応じて、ＣＰＵ１６で認識された対象物に対応する画像を再生表示するようにＬＣＤモニタ１５および不揮発性メモリ１７、ＲＡＭ１４をそれぞれ制御するＣＰＵ１６と、をさらに備えるようにしたので、操作が簡単で扱いやすい学習器が得られる。また、ＯＫボタン２０４の操作信号に応じて再生表示するので、学習者に考える時間を与えられる。たとえば、幼児などが覚えたての動物名である「シマウマ」の姿を思い出そうとしているにもかかわらず、学習器が勝手に音声「シマウマ」の画像を再生してしまうことを防止できる。

（２）上記電子カメラ１において、ＲＡＭ１４は、撮影画像を保存する記憶媒体３０と異ならせたので、撮影用の記録領域である記憶媒体３０を「学習器モード」のために費やしてしまうことを抑えて、適切に学習器を構成できる。

（変形例１）
電子カメラ１を例に説明したが、撮影機能を有するものであれば、タブレット端末や携帯電話機などの電子機器で構成してもよい。

（変形例２）
以上の説明では、電子カメラ１のＬＣＤモニタ１５に画像を表示させる例を説明したが、通信インターフェース１９などを介して外部の表示装置（たとえばコンピュータのモニタ装置など）に表示させる構成にしてもよい。

（変形例３）
上述した第１の実施形態〜第四の実施形態を適宜組み合わせて構成してもよい。以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。

１…電子カメラ
１２…撮像素子
１４…ＲＡＭ
１５…ＬＣＤモニタ
１６…ＣＰＵ
１７…不揮発性メモリ
１８…カードインターフェース
２１…マイク
２２…音声処理回路
２３…スピーカ
３０…記憶媒体

Claims (7)

1. 被写体像を撮像する撮像部と、
   前記撮像部で撮像された画像から所定の対象物を認識する第１認識部と、
   前記対象物に対応する音声情報を記憶する音声情報記憶部と、
   前記音声情報を再生する音声再生部と
   指示に応じて、前記第１認識部で認識された対象物に対応する音声情報を再生するように前記音声再生部および前記音声情報記憶部をそれぞれ制御する第１制御部と、
   を備えることを特徴とする電子機器。
2. 請求項１に記載の電子機器において、
   前記撮像部で撮像された画像を一次記憶する一次記憶部をさらに備え、
   前記第１認識部は前記一次記憶部に記憶されている画像に対して前記認識を行い、
   前記第１制御部はさらに、指示に応じて、前記音声情報の再生後に前記一次記憶部から記憶媒体へ前記画像を複製するように前記一時記憶部を制御することを特徴とする電子機器。
3. 請求項１に記載の電子機器において、
   前記第１認識部で認識されない対象物を含む画像を認識するための情報を前記第１認識部に記憶させるとともに、当該画像に対応する音声情報を前記音声情報記憶部に記憶させる情報追加制御部をさらに備えることを特徴とする電子機器。
4. 請求項３に記載の電子機器において、
   前記情報追加制御部は、保存されている画像に対して当該画像を認識するための情報を前記第１認識部に記憶させるとともに、当該画像に対応する音声情報を前記音声情報記憶部に記憶させることを特徴とする電子機器。
5. 請求項１〜４のいずれか一項に記載の電子機器において、
   前記音声情報記憶部は、撮影画像を保存する記憶媒体と異なることを特徴とする電子機器。
6. 請求項１に記載の電子機器において、
   音声を入力する音声入力部と、
   前記音声入力部から入力された音声に対応する対象物を認識する第２認識部と、
   前記対象物に対応する画像情報を記憶する画像情報記憶部と、
   前記画像情報に対応する画像を再生表示する再生表示部と、
   指示に応じて、前記第２認識部で認識された対象物に対応する画像を再生表示するように前記再生表示部および前記画像情報記憶部をそれぞれ制御する第２制御部と、
   をさらに備えることを特徴とする電子機器。
7. 請求項６に記載の電子機器において、
   前記画像情報記憶部は、撮影画像を保存する記憶媒体と異なることを特徴とする電子機器。

Images