JP2005024792A

JP2005024792A - カメラ付き携帯通信端末

Info

Publication number: JP2005024792A
Application number: JP2003188869A
Authority: JP
Inventors: Kosuke Asami; 耕助浅見
Original assignee: NEC Saitama Ltd
Current assignee: NEC Saitama Ltd
Priority date: 2003-06-30
Filing date: 2003-06-30
Publication date: 2005-01-27

Abstract

【課題】被写体側からの音声による遠隔制御によりピントが合ったカメラ撮影を可能とする。
【解決手段】シャッタ等の撮影操作を遠隔制御するための音声認識機能（２３）と、カメラ部のピント調整機能（５、２１）と、ピント調整による計測距離の出力に連動して、マイク９の出力の信号レベルを可変する増幅機能（２６、２７）とを備え、音声コマンドを発することにより、マイク（９）出力の音声認識によりカメラ付き携帯電話機から離れた場所からカメラ撮影を可能とし、また、撮影画面のピントが合った時には、スピーカ（１０）から音でピントが合っていることを知らせ、ピントの合った撮影距離によりマイク９の出力の信号レベルを制御することにより、音声認識による撮影時の認識率の低下を防止する。
【選択図】図２

Description

【０００１】
【発明が属する技術分野】
本発明は、カメラ付き携帯通信端末に関し、特に、撮影動作の遠隔制御が可能なカメラ付き携帯通信端末に関する。
【０００２】
【従来の技術】
近年の携帯電話機においてはカメラ機能を装備するものが主流となりつつある等、特色のある機能を実装することが求められてきている。
【０００３】
また従来、カメラにおけるシャッタ操作において、手ぶれを防止するためにカメラから数センチ以内等の近距離から発音する音声に応動して動作する音声作動式シャッタの技術が知られている（特許文献１参照）。
【０００４】
【特許文献１】
特開昭５８−１３７８２８号公報
【０００５】
【発明が解決しようとする課題】
カメラ付き携帯電話機においてはカメラの多機能化等、特色のあるカメラ機能を装備することが売れるための重要な一要素となってきている。特許文献１記載の音声作動式シャッタ技術は手ぶれ防止を目的とするものであり、被写体側からの遠隔制御により正しいピントで確実に撮影することができるカメラ付き携帯電話機は存在していなかった。
【０００６】
（目的）
本発明の目的は、被写体側からの音声による遠隔制御によりピントが合ったカメラ撮影を可能とするカメラ付き携帯通信端末を提供することにある。
本発明の他の目的は、被写体までの距離にかかわらず音声認識による遠隔制御が確実に実行できるカメラ付き携帯通信端末を提供することにある。
本発明の他の目的は、音声認識による遠隔制御においてカメラ部の被写体までの距離計測が正しく行われていることを使用者が確認することが可能なカメラ付き携帯通信端末を提供することにある。
【０００７】
【課題を解決するための手段】
本発明のカメラ付き携帯通信端末は、音を集音し音声信号を出力する音声入力手段（例えば図２の９、２７）と、前記音声信号の音声認識を行いカメラ撮影を指示する指示信号を検出する音声認識手段（例えば図２の２３）と、カメラ部（例えば図２の５）のピント調整を行いピント調整終了時にピント調整終了音を報知する報知手段（例えば図２の２８、１０）と、前記報知手段がピント調整終了音を報知した後に前記音声認識手段がカメラ撮影を指示する指示信号を検出した場合にカメラ撮影を行う制御手段（例えば図２の２１）と、を備えることを特徴とする。また、前記音声入力手段からの音声信号の信号レベルを調整する信号レベル制御手段（例えば図２の２６）を備え、前記制御手段はピント調整終了時のカメラ部から被写体までの距離情報に応じて前記信号レベル制御手段を制御し、前記距離に応じて信号レベルを制御することを特徴とする。更に、前記制御手段は、前記距離情報を所定の閾値と比較し、前記距離情報が前記閾値より小さい範囲では前記信号レベルを距離に応じて小さい方向に制御し、前記閾値の以上の範囲では距離に応じて大きい方向に制御する特徴とする。
【０００８】
また、上記カメラ付き携帯通信端末の前記報知手段は、ピント調整終了時にピント調整終了音に加えてピント調整終了時のカメラ部から被写体までの距離情報をも音声により報知することを特徴とし、カメラ撮影を指示する指示信号は、使用者により予め登録することが可能であることを特徴とする。
【０００９】
つまり、本発明のカメラ付き携帯通信端末においては、シャッタ等の撮影操作を遠隔制御するためのマイクからの音声信号の音声認識機能と、カメラ部のピント調整機能と、ピント調整機能の計測距離の出力に連動し、マイク出力の信号レベルを可変する増幅機能と、を備え、音声認識によりカメラ付き携帯通信端末を離れた場所からカメラ撮影を可能とし、また、撮影画面のピントが合った時には、スピーカから音でピントが合っていること、更には計測距離を知らせることにより、ピントの合った撮影距離によりマイク出力の信号レベルを制御することにより、適正なピント状態で音声による遠隔撮影が可能であることを使用者等に認識できるようにし、音声認識による撮影時の認識率の低下を防止する。
【００１０】
【発明の実施の形態】
（構成の説明）
本発明の一実施の形態を折り畳み式のカメラ付き携帯電話機の例により説明する。
図１は本実施の形態のカメラ付き携帯電話機の外観を示す図である。本実施の形態はケースとカバーが係合することで構成される２つの筺体がヒンジにより回動可能に結合された折り畳み式携帯電話機として構成される。１は上ケース、２は上カバー、３は下ケース、４は下カバー、５は上カバー２側に設置された画像撮影や動画撮影等に用いるカメラ部、６は上ケース１側に設置された液晶表示パネル等の表示部、７は下ケース３側に組み込まれたキーボード等の操作部、８は上カバー２に設置されたアンテナ、１ａは上ケース１に設けられたレシーバ用のスピーカの音孔、２ａは上カバー２に設けられたスピーカの音孔、３ａは下ケース３に設けられたマイクの送話用音孔である。
【００１１】
図２は本実施の形態の内部の回路ブロックを示す図である。本実施の形態の主要な構成は、前述のカメラ部５、表示部６、操作部７、アンテナ８、マイク９、スピーカ１０、レシーバ用のスピーカ１１等に加えて、中央処理装置ＣＰＵ（ｃｅｎｔｒａｌｐｒｏｃｅｓｓｉｎｇｕｎｉｔ）２１、無線部２２、デジタル・シグナル・プロセッサＤＳＰ（ｄｉｇｉｔａｌｓｉｇｎａｌｐｒｏｃｅｓｓｏｒ）２３、メモリ２４、Ａ／Ｄ・Ｄ／Ａコンバータ２５、信号レベル制御部２６、マイク用アンプ２７、スピーカ用アンプ２８、レシーバ用アンプ２９を備える。
【００１２】
以下、各部の機能及び構成について説明する。
ＣＰＵ２１は、発着信、通話等に係る種々の指示、制御の処理、着信音、音声及び送受話に係る指示、制御等の処理、メニュー表示及び設定制御の処理、カメラ部５の撮影機能に関しピント調整の処理等、カメラ付き携帯電話機の全体を制御すると共に、本発明に係る制御機能として、ＤＳＰ２３と協働してマイク９から入力した音声信号の音声認識の処理を行い、特定の音声が検出された場合にカメラ部５のシャッタ等の撮影動作を制御するための指示、制御を行う処理機能と、使用者の特定の音声をマイク９から入力して登録する処理機能と、カメラ部５のピント調整時にカメラ部５と画像の中央部の被写体（単に被写体ともいう。）までの距離を計測し、ピントの合った被写体までの距離情報を算出し、信号レベル制御部２６に当該距離情報を出力する機能を有する。
【００１３】
ＤＳＰ２３は、ＣＰＵ２１、無線部２２、メモリ２４及びＡ／Ｄ・Ｄ／Ａコンバータ２５に接続されており、基地局との無線接続の処理、送受信における音声信号の処理、画像信号の処理、着信音、メロディー音の生成等、音声や画像などのグラフィックス処理等に加え、Ａ／Ｄ・Ｄ／Ａコンバータ２５からマイク９で集音された信号のデジタル信号を入力し、メモリ２４に予め格納した音声パターン等と照合して撮影動作を起動するための音声認識を行う音声認識機能を有する。
【００１４】
メモリ２４はＣＰＵ２１とＤＳＰ２３に接続されており、ＣＰＵ２１の演算結果やカメラ撮影された静止画、動画等の画像データ、種々の設定情報を格納するとともに、ＣＰＵ２１及びＤＳＰ２３による音声認識を行う際の使用者により予め設定された特定の音声の音声パターン又は当初から登録済みの音声コマンド等のデジタル信号、ピント調整が合ったときの音（ピント調整終了音）、音声、音楽等のデジタル信号等が格納される。
【００１５】
信号レベル制御部２６は、ＣＰＵ２１と、マイク９の出力を増幅するマイク用アンプ２７に接続されており、カメラ部５による撮影時にＣＰＵ２１がピント調整により出力するカメラ部５から被写体までの距離情報を入力し、マイク９からの音声信号を当該距離に応じた信号レベルに増幅する利得制御機能を有する。
【００１６】
Ａ／Ｄ・Ｄ／Ａコンバータ２５は、ＤＳＰ２３、スピーカ用アンプ２８及びマイク用アンプ２７等に接続されており、ＤＳＰ２３から出力されたピント調整終了音、音声、音楽のデジタル信号をアナログ信号に変換してスピーカ用アンプ１０等に出力し、また、逆にマイク９で集音したアナログ信号をデジタル信号に変換してＤＳＰ２３に出力する機能を有する。
【００１７】
表示部６はＣＰＵ２１に接続されており、機能設定時の選択、設定画面等の表示機能に加えて、カメラ部５で撮影した静止画、動画などの画像表示機能を有する。操作部７は前記ＣＰＵ２１に接続されており、発着呼、終了等に加え、撮影の手動シャッタ制御又は音声による遠隔制御等のメニュー選択時のキー入力を行うため使用者が操作するテンキー、機能キー等、キー入力操作部である。無線部２２はＣＰＵ２１、ＤＳＰ２３と接続されており、アンテナ８を介して図示を省略した基地局との通信を行う機能を有する。
【００１８】
スピーカ用アンプ２８はＡ／Ｄ・Ｄ／Ａコンバータ２５及びスピーカ１０と接続されており、着信音、動画撮影された音声信号等に加え、ピント調整時にピントが合ったことを報知するピント調整終了音の信号等を増幅してスピーカ１０を鳴動させるために使用される。またレシーバ用アンプ３０は同様に受話音声信号の増幅に使用される。
（動作の説明）
本発明の実施の形態のカメラ付き携帯電話機の動作について、図面を参照して説明する。
図３はカメラ付き携帯電話機から離れた場所からカメラ撮影する際のフローチャートを示す図である。
カメラ付き携帯電話機の撮影待ち受け状態において、使用者が操作部７の特定キーを押下して撮影機能を起動すると、ＣＰＵ２１及びＤＳＰ２３等が動作しカメラ部５及び表示部６のそれぞれ撮影及び表示の起動状態となる（ステップ１）。このとき表示部６には、操作部７の特定キーを手動で押下することにより撮影するモード（「通常撮影モード」という。）と、カメラ付き携帯電話機から離れた場所から撮影者の音声の指示により撮影するモード（「遠隔撮影モード」という。）の２通りの撮影モードの何れかを選択する選択メニュー画面が表示される。
【００１９】
使用者は操作部７により通常撮影モード又は遠隔撮影モードの何れかを選択する（ステップ２）。例えば使用者が通常撮影モードの撮影を選択する（ステップ２、ＮＯ）と、ＣＰＵ２１が通常撮影モードの選択を認識し、特定キーの押下により撮影する設定状態となり（ステップ３）、カメラ部５からの画像が表示部６に写し出され、使用者がカメラ部５を被写体に向け、表示部６の画像を確認しながら操作部７の特定キーを押下して撮影すると、表示部６には撮影した静止画が表示される（ステップ１１）。
【００２０】
撮影モードを選択するステップ２において、使用者が遠隔撮影モードを選択する（ステップ２、ＹＥＳ）と、ＣＰＵ２１が遠隔撮影モードの選択を認識し、カメラ部５からの画像が表示部６に表示されとともに、ＣＰＵ２１の指示によりマイク９及び信号レベル制御部２６が起動し、音声認識による撮影が可能となる（ステップ４）。音声認識による撮影はメモリ２４に格納されている特定の音声コマンド、または、使用者が予め設定した音声信号（例えば使用者本人の音声）等がマイク９から集音され音声認識されたときに行われる。ここでは予め設定されている特定の音声コマンドで撮影されることとする。
【００２１】
使用者は、大凡の撮影する範囲や撮影する箇所を特定した上で、カメラ付き携帯電話機を机上等に置いて、本人又は他の者等と撮影されるポイントに移動する。ＣＰＵ２１はカメラ部５が写している被写体の画像の中心部等で自動的なピント調整を行い、ピントが合ったときカメラ部６から当該中心部等までの距離を算出して出力する（ステップ５）。このときの信号処理はＣＰＵ２１からの指示によりＤＳＰ２３が行うように構成することができる。
【００２２】
カメラ部５のピント調整及びカメラ部５から被写体までの距離の算出が完了すると、ピント調整が完了したことを使用者に知らせるため、ＣＰＵ２１はメモリ２４に格納されているピント調整終了音又は音声のデータをスピーカ１０より鳴動させるようにＤＳＰ２３に指示し、ＤＳＰ２３は当該データをメモリ２４から読み出し、Ａ／Ｄ・Ｄ／Ａコンバータ２５に出力し、Ａ／Ｄ・Ｄ／Ａコンバータ２５はスピーカ用アンプ２８を介してスピーカ１０を鳴動して使用者に知らせる（ステップ６）。
【００２３】
同時にＣＰＵ２１は、算出した距離が所定の距離の閾値（所定距離）より大きいか否か、つまり、所定距離より遠いか近いかを判断し（ステップ７）、信号レベル制御部２６にマイク９の信号レベルを調整するように指示を出す。算出距離が前記所定距離より遠い場合はＣＰＵ２１は信号レベル制御部２６に距離に合わせて感度を上げるように指示し（ステップ８）、信号レベル制御部２６はマイク用アンプ２７の利得を上げるように制御する。また、算出距離が所定距離より近い場合はＣＰＵ２１は信号レベル制御部２６に距離に合わせて感度を下げるように指示し（ステップ９）。信号レベル制御部２６は、マイク用アンプ２７の利得を下げるように制御する。ここで信号レベル制御部２６には、前記距離とマイク９の感度特性に基づいて、前記算出距離に応じたマイク出力の信号レベルの例えば非線形な制御値を予め設定した変換テーブルを備えるように構成することができる。
【００２４】
使用者はピント調整終了音により、音声コマンドによる撮影が可能な状態にあることを確認し、予め設定してある撮影動作を命令する特定の音声コマンドを発声する。音声コマンドはマイク９から入力し、スピーカー用アンプ２７で前記算出距離に応じて増幅され、Ａ／Ｄ・Ｄ／Ａコンバータ２５を介してＤＳＰ２３で認識され、ＣＰＵ２１により画像が撮影される（ステップ１０）。撮影された静止画像は表示部６に表示される（ステップ１１）。表示部６に表示された撮影画像を確認し、静止画像を保存又は削除する場合は操作部７の特定のキーを押下し、保存／削除等のメニュー画面でデータ保存／削除を行うと、メモリ２４に画像データとして保存又は削除される。保存等が終了するとステップ１と同じカメラ起動状態に戻り、以上説明した処理を繰り返すことが可能となる。
【００２５】
（他の実施の形態）
図４は本発明の他の実施の形態を示す動作フローチャートを示す図である。本実施の形態では、使用者等がカメラ部５の撮影範囲に移動した後におけるカメラ部５のピント調整終了音の報知に加えて、ピントが合ったときのカメラ部５と画像の中央部の被写体までの距離をも音声で報知するように構成したものである。基本的な動作フローチャートは図３に示すものと同様であるが、本実施の形態ではステップ６において、被写体までの距離に相当する情報を音声により報知する点が異なる。
【００２６】
カメラ付き携帯電話機を机上等に置くと表示部７には撮影範囲の画像が表示されるので、通常、被写体として何れの場所に移動すればよいかが分かるので、図４に示すように敢えて距離情報をも報知する必要はないが、風景等の遠方を背景とする撮影環境においては、使用者が画像の中央部から外れたポジションで撮影しようとしたり、集合写真のような撮影を行う場合には画像の中央部には人物が存在しない場合が起こりうるし、また、画像の中央部の被写体より前方にピント調整上の障害物等がある場合等には、距離計測を間違うおそれがある。
【００２７】
また、このような状況では、信号レベル制御部２６も異常な制御を行うことになり、音声コマンドの認識が不可能となり正常な撮影動作が不可能になったり、周囲の雑音により撮影動作を行う等、誤動作する可能性もある。本実施の形態にように、距離情報の音声報知があれば容易に間違ったピント調整が行われていることがわかるので、人物の移動や撮影場所の移動等により間違ったピント調整による撮影を防止することが可能である。
【００２８】
以上の実施の形態では静止画像の撮影機能を有するカメラ付き携帯電話機の例を示したが、動画が撮影できる機能を有すカメラ付き携帯電話機においても同様な機能を実現することが可能である。つまり、動画撮影の機能を選択した状態で、撮影時に同様に撮影距離により、受信音声の信号レベルを調整するように制御させることにより、音声の途切れ等、聞こえにくい等の問題を起こすことなく音声認識による撮影を確実に実行することが可能である。
【００２９】
なお、信号レベル制御部２６による制御は、マイク出力の信号レベルをマイク用アンプにより制御する例を示したが、マイク自体の受話感度を制御するように構成することが可能であることは明らかである。
【００３０】
【発明の効果】
以上のように本発明によれば、カメラ付き携帯通信端末に音声認識機能を利用することで離れた場所からの撮影を可能とし、また、ピント調整ができたところでピント調整完了が音により報知されるため、ピンボケが無く、かつ撮影距離に応じてマイクの出力の信号レベルを調整することで受信した音声信号の信号レベルが小さすぎたり過大になるなどが防止されるので、音声認識率が向上し、音声制御の失敗が少ない遠隔制御の画像撮影が可能になる。また、ピント調整終了音に加えて距離情報をも音声により報知することにより、予定する被写体までの適正なピント調整が行われたことを確認することができるので、撮影環境による誤動作を防止することが可能である。
【図面の簡単な説明】
【図１】本発明の一実施の形態のカメラ付き折り畳み式携帯電話機の外観を示す図である。
【図２】本実施の形態の回路ブロックを示す図である。
【図３】カメラ付き携帯電話機から離れた場所からカメラ撮影する際のフローチャートを示す図である。
【図４】本発明の他の実施の形態のフローチャートを示す図である。
【符号の説明】
５カメラ部
６表示部
７操作部
８アンテナ
９マイク
１０、１１ピーカ
２１ＣＰＵ
２２無線部
２３ＤＳＰ
２４メモリ
２５Ａ／Ｄ・Ｄ／Ａコンバータ
２６信号レベル制御部
２７マイク用アンプ
２８スピーカ用アンプ

Claims

音を集音し音声信号を出力する音声入力手段と、前記音声信号の音声認識を行いカメラ撮影を指示する指示信号を検出する音声認識手段と、カメラ部のピント調整を行いピント調整終了時にピント調整終了音を報知する報知手段と、前記報知手段がピント調整終了音を報知した後に前記音声認識手段がカメラ撮影を指示する指示信号を検出した場合にカメラ撮影を行う制御手段と、を備えることを特徴とするカメラ付き携帯通信端末。
前記音声入力手段からの音声信号の信号レベルを調整する信号レベル制御手段を備え、前記制御手段はピント調整終了時のカメラ部から被写体までの距離情報に応じて前記信号レベル制御手段を制御し、前記距離に応じて信号レベルを制御することを特徴とする請求項１記載のカメラ付き携帯通信端末。
前記制御手段は、前記距離情報を所定の閾値と比較し、前記距離情報が前記閾値より小さい範囲では前記信号レベルを距離に応じて小さい方向に制御し、前記閾値の以上の範囲では距離に応じて大きい方向に制御する特徴とする請求項２記載のカメラ付き携帯通信端末。
前記報知手段は、ピント調整終了時にピント調整終了音に加えてピント調整終了時のカメラ部から被写体までの距離情報をも音声により報知することを特徴とする請求項１、２又は３記載のカメラ付き携帯通信端末。
カメラ撮影を指示する指示信号は、使用者により予め登録することが可能であることを特徴とする請求項１、２、３又は４記載のカメラ付き携帯通信端末。