JP4912972B2 - 撮像装置および撮像システム - Google Patents

Description

本発明は、撮像装置および撮像システムに関し、詳しくはテレビ等の再生装置の使用状態に応じて画像データの送信先を変更する撮像装置および撮像システムに関する。

近年、デジタルカメラ等の撮像装置の画像送信の容易さを利用して、ＰＣ通信やインターネット、携帯電話回線などを利用して画像を送信し、その環境下で画像を楽しむ画像鑑賞法が普及している。これらのネットワークの利用法として、インターネット上のサーバーにブログ等のページに自分の撮影した写真を掲載することにより多くの人が鑑賞できるようにし、また、知人等のパーソナルコンピュータや携帯電話に送信し、いち早く画像を見せるようなことが可能となっている。

従来、写真を鑑賞したい人は、撮影後に家庭内で鑑賞するためにアルバムを作成するだけであったが、このような写真活用の変化は、カメラの撮影方法に大きな変化をもたらす可能性がある。すなわち、従来は撮影者の好みが重要であったが、第三者も鑑賞することから、どのような写真が喜ばれるかを考慮した撮影が重要となる。

また、画像の再生方法として、例えば、家族団らんの場面ではテレビで、外出時には携帯電話で、ネットサーフィンしているときにはパーソナルコンピュータ（ＰＣ）で再生する等、様々な鑑賞シーンが想定される。このような機器は近年ネットワークに接続することが可能になってきている。

このようなデジタルカメラ等の撮像装置と画像再生装置をネットワークで接続する技術として、例えば、特許文献１には複数の送信先候補から選択して送信する監視カメラシステムがある。この監視カメラシステムは、ネットワークを利用して監視映像を配信するシステムであって、カメラとモニタを簡単な構成で切替を行なうようにしている。また、特許文献２には、画像内容によって表示すべきかどうかを判断する画像表示装置が示されている。この画像表示装置は、屋外に置かれ、大型フラットディスプレイに広告を表示させるような電子広告装置に表示される画像が、有害画像判定部によって判定され、表示許可された画像が表示されるようにしている。

さらに、特許文献３には、受信装置に適合したデータ形式に従って送信画像を選択する通信システムが開示されている。この通信システムは、デジタルカメラとプリンタ等の通信システムにおいて、送信側と受信側の処理に最適な形式を、例えばＶＧＡ係止式やＱ−ＶＧＡ形式等から選択するようにしている。さらに、特許文献４には、受信装置の機能を判別して送信する画像データ伝送システムが開示されている。この画像データ伝送システムは、受信装置側に伸張機能がない場合でも送信側の画像データを短時間で検索でき、画像データを有効に伝送するようにしている。
特開２００６−２４６０５１号公報 特開２００６−２５４２２２号公報 特開平１０−３４１３２７号公報 特開平８−２３７４９０号公報

このように、撮像装置と画像再生装置を、ネットワークを通じて接続するシステムは種々提案されているが、いずれも送信先の状態を検出して行なうものではない。すなわち、特許文献１に開示の監視カメラにおいては、送信先の状態を反映して画像を送信するものではない。また、特許文献２乃至特許文献４に開示の装置やシステムは、いずれも画像を見せたい送信先の再生装置の状態を検出して、画像を送信するものではない。

本願発明は、このような事情を鑑みてなされたものであり、鑑賞者の再生装置の状況を判断し、その状況で楽しめる画像を送信することのできる撮像装置および撮像システムを提供することを目的とする。

上記目的を達成するため第１の発明に係わる撮像装置は、画像を撮影する撮像手段と、上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶するデータベースと、上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、この利用状況判定手段による現在利用していると判定した上記画像再生機器に対して上記画像を表す画像データを送信する画像送信手段を備える。

第２の発明に係わる撮像装置は、上記第１の発明において、上記画像データを送信する送信先の上記画像再生機器に対応した撮影を行うための撮影情報を表示する表示部をさらに備える。
また、第３の発明に係わる撮像装置は、上記第２の発明において、上記撮影情報は上記利用優先順位が最も高い画像再生機器の表示画面のアスペクト比である。
さらに、第４の発明に係わる撮像装置は、上記第１の発明において、上記利用状況判定手段による判定の結果、上記画像再生機器がいずれも現在利用されていない場合は、上記画像データを上記画像再生機器以外の記憶装置に記憶する。
さらに、第５の発明に係わる撮像装置は、上記第１の発明において、上記利用状況判定手段は、上記画像再生機器の現在の利用状況を順次判定する動作をいずれかの画像再生機器が利用状態になるまで繰り返し行なう。

上記目的を達成するため第６の発明に係わる撮像方法は、画像を撮影する撮像手段を有する撮像装置の撮像方法であって、上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶部に記憶し、上記画像再生機器の現在の利用状況を順次判定し、この利用状況の判定の結果に基づいて、現在利用していると判定した上記画像再生機器に対して上記画像を表す画像データを送信するステップを備える。

上記目的を達成するため第７の発明に係わる撮像システムは、画像を撮影する撮像手段と、上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶するデータベースと、上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、この利用状況判定手段により現在利用していると判定した上記画像再生機器に対して上記画像を表す画像データを送信する画像送信手段を備える。

上記目的を達成するため第８の発明に係わる撮像装置は、画像を撮影する撮像手段と、上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶するデータベースと、上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、この利用状況判定手段による現在利用していると判定した上記画像再生機器を表示する表示手段を備える。

上記目的を達成するため第９の発明に係わる撮像装置は、画像を撮影する撮像手段と、上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報と、上記画像再生機器のそれぞれに適した撮影情報を記憶するデータベースと、上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、この利用状況判定手段による現在利用していると判定した上記画像再生機器に適した撮影情報を表示する表示手段を備える。

第１０の発明に係わる撮像装置は、上記第８または上記第９の発明において、上記撮影情報は、撮影モードおよびアスペクト比の少なくとも１つを含む。
第１１の発明に係わる撮像装置は、上記第８または上記第９の発明において、さらに上記画像を表す画像データを送信する画像送信手段を有し、上記データベースには、上記鑑賞者への送信先情報を含み、上記画像送信手段は、上記送信先情報に基づいて上記画像データの送信を行なう。

上記目的を達成するため第１２の発明に係わるサーバーは、画像を鑑賞する鑑賞者が利用できる複数の画像再生機器および撮像装置と通信するための通信手段と、上記鑑賞者の情報を記憶する記憶部と、上記画像再生機器の現在の利用状態を判定する利用状態判定手段と、上記記憶部および上記利用状態判定手段の出力に基づいて、上記鑑賞者の上記画像再生機器の使用状態を判別し、記憶するデータベースを具備し、上記データベースに記憶された上記画像再生機器の使用状態を上記撮像装置に出力する。

本発明によれば、鑑賞者の再生装置の状況を判断し、その状況で楽しめる画像を送信することのできる撮像装置および撮像システムを提供することができる。

以下、図面に従って本発明を適用したデジタルカメラを用いて好ましい実施形態について説明する。本発明の第１実施形態に係るカメラは、被写体像を撮像素子で光電変換し、取得した画像データをリアルタイムで動画像表示するライブビュー機能を有し、また撮影指令に応じて静止画や動画の画像データを記録媒体に記録可能となっている。また、このカメラは、ネットワークを通じてサーバーに接続し、そこから鑑賞者の画像再生機器の状態を検出し、カメラにフィードバックすることができる。

図１は、本発明の第１実施形態に係わるデジタルカメラとその周辺のブロック図である。ユーザーが使用するカメラ１００には、撮影レンズ２、ＡＦ（オートフォーカス）制御部２ａ、絞り２ｂ、絞り制御部２ｃ、撮像素子３、アナログフロントエンド（以下、ＡＦＥと略す）部４が設けられている。撮影レンズ２は、内部にフォーカスレンズを有し、入射した被写体２０の像を撮像素子３上に結像させる。

ＡＦ制御部２ａは、撮影レンズ２の合焦位置を、後述する画像処理部５内において画像処理を行い、いわゆる山登り法により検出し、フォーカスレンズを駆動して、合焦位置に移動させる。なお、山登り法は、撮影画像のコントラスト信号ピークから合焦位置（ピント位置）を検出する方式であるが、山登り法以外にも、例えば位相差法や三角測距法等公知の合焦方法に置き換えてもよい。ＡＦによって合焦位置に達すると、このときの撮影レンズ２を検出することにより、距離判定を行うことができる。この場合、撮影レンズ２がズームレンズのときには、ズーム位置等を加味して距離の判定を行う。

撮影レンズ２内または近傍に、シャッタや絞りの効果を奏する絞り２ｂが設けられる。絞り２ｂは、撮影時に所定の口径まで開き、露出が終了すると閉じて露光を終了させるものである。絞り制御部２ｃは、絞り２ｂを駆動して絞り径を設定する。この絞りを変えることによって、レンズの被写界深度が変化するので、背景のぼけ具合などを調整して、被写体を浮かび上がらせたり、背景をしっかりと描写したりするなど、表現の切り替えを行うことができる。撮像素子３は、多数の受光面（画素）からなるＣＣＤやＣＭＯＳセンサ等であり、撮影レンズ２を介して被写体２０からの像を受光しこれを画像信号に変換する。

アナログフロントエンド（ＡＦＥ）部４は、アナログデジタル変換（ＡＤ）手段を含み、撮像素子３からの信号をデジタル信号化する。そして、ＡＦＥ部４は、撮像素子３から出力される画像信号について各種処理を行う。また、ＡＦＥ部４には、撮像素子３のいくつかの画素をまとめて、一括して読み出す機能も設けられている。たとえば、４画素（２×２）や９画素（３×３）など、各画素の信号レベルが小さいときには、いくつかの画素信号を加算して、Ｓ／Ｎを向上させることができ、また、感度を上げることも出来る。

このような処理によって感度を上げることができ、シャッタスピードを速くする等、撮影上の工夫が可能となる。シャッタスピードが速いと、動いている被写体が止まっているように撮影することが可能となる。また、手振れなどを防止することができる。

また、ＡＦＥ部４は、撮像素子３の出力する信号を取捨選択する機能を有し、受光範囲の中から限られた範囲の画像データを抽出することが出来る。一般に撮像素子３の画素から間引いた画素信号を抽出する場合には、高速読出が可能となる。これにより構図確認用の画像信号を、画像処理部５によって高速処理し、表示制御部８ａを介して表示パネル８に表示することにより、フレーミングが可能となる。

ＡＦＥ部４の出力は、画像処理部５に接続されている。画像処理部５は、入力信号の色や階調やシャープネスを補正処理する。また、撮像素子３から得られた画像信号を所定のレベルに増幅して、正しい濃淡、正しい灰色レベルに設定する増感部を有している。これは、デジタル化された信号レベルが、所定レベルになるようにデジタル演算するものである。また、画像処理部５は、ライブ画像をリアルタイムに表示部に表示できるように、撮像素子３からの信号を表示パネル８に表示できるようなサイズに加工するリサイズ部を有する。この働きによって、撮影に先立って撮像素子に入射する像を確認でき、これを見ながら撮影時のタイミングやシャッタチャンスを決定することが出来る。

また、この画像処理部５の信号を利用して、撮像素子から入力されてくる画像の特徴などを判定する画像判定機能を有している。この画像判定機能としては、画像情報を加工して得られる輪郭情報から人の顔の目や口などの部分を判定する顔検出部５ａ、この顔検出部４ａを利用して顔等の表情を判定する表情判定部５ｂ、また個人の顔を識別して個人を認証する個人認証部５ｄを有している。また画像処理機能としては、さらに、画像の信号レベルのコントラストを判定して、被写体の距離を判定する距離判定部５ｃも有している。また、画像処理部５とその周辺補助部は、ＭＰＵ１と連携して、撮影画像の見栄を調整するにも用いられる。

このように、画像処理部５とその周辺の補助部（顔検出部５ａ、表情判定部５ｂ、個人認証部５ｄ等）は、写真撮影時に、ユーザーがどのような写真を撮ろうとしているかを判定して、さらに写真を見る鑑賞者の嗜好を判定して、撮影制御を最適化するために用いられる。

カメラ１００には、圧縮部６、記録部９ａ、記録メディア９、送受信部９ｃ、送信先状態判定＆データベース（ＤＢ）９ｄ、送信設定部９ｅ、表示パネル８、表示制御部８ａ及びマルチ画像処理部８ｂが設けられている。圧縮部６は、撮影時に画像処理部５から出力された信号を圧縮する。圧縮部６内には、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）４やＨ．２６４などの圧縮用コア部で構成される動画用の圧縮部及び ＪＰＥＧ（Ｊｏｉｎｔ
Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）コア部など静止画像用の圧縮部が設けられる。また、圧縮部６は記録メディア９に記録されている画像を表示パネル８に再生する際には、画像伸張も行なう。

記録部９ａは、圧縮された画像信号を記録メディア９に記録する。記録メディア９はカメラに着脱可能な保存用の記録媒体である。なお、画像信号の記録にあたっては、写真撮影した時の時間情報も併せて記録しても良い。撮影時間情報は、後述するＭＰＵ１内の時計部１ｔによって計測されており、ＭＰＵ１は画像と関連付を行なう。

メディア９や記録部９aに記録された撮影画像データは、送受信部９ｃによって、インターネット、携帯電話網や電話回線などの通信網３２経由で、画像を管理するサーバー３３等の他の機器に転送することができる。また、送受信部９ｃは送信設定部９ｅと接続されており、この送信設定部９ｅは画像を送信する場合等の送信先を指定する指定部である。撮影された画像は、指定先に即時送信も可能である。また、この際に、鑑賞者の嗜好情報を取得するようにしてもよい。

表示パネル８は、例えば液晶や有機ＥＬ等から構成され、撮影時には観察用に被写体画像をスルー画表示（ライブビュー表示とも言う）し、再生時には伸張処理された記録画像を再生表示する。

表示制御部８aは、表示パネル８への表示を制御する。マルチ画像処理部８ｂは、表示パネル８上に、複数の画像を表示する場合の制御部である。このマルチ画像処理部８ｂによって、撮影した画像や撮影する画像の上に、送信先のアドレスの文字表示や種々の警告表示をすることが可能である。なお、表示パネル８には、撮影して送信済み画像を一覧表示して、そこからサーバー３３が運営するブログサービスなどにアップする画像や、アップして、ブログに表示する時のレイアウトを選択できるようにしてもよい。また、マルチ画面表示機能８ｂによって、撮影をアシストする情報や、鑑賞者が好きな画像例など、いろいろな補助表示をしたりすることも可能となる。

また、表示パネル８における表示は、送信先状態判定＆データベース（ＤＢ）９ｄの出力に基づいて、送信先の再生機器の画面に合わせて、アスペクト比などを切り換えて表示すると共に、撮影もこのアスペクト比で行なうようにしている。例えば送信先の再生装置が、１６：９の画面の時には、そのアスペクト比で撮影を行い、また、４：３の画面時には、そのアスペクト比での撮影を行い、表示パネル８のライブビュー表示には、アスペクト比に応じた枠などを表示し、その範囲内のみを撮影する。

送信先状態判定＆データベース（ＤＢ）９ｄは、送信先に指定されている鑑賞者が、どのような機器で鑑賞するかといった傾向を記録するデータベースである。本実施形態においては、このデータベースの情報を基に、送信先の再生機器で鑑賞可能かどうかを判定し、撮影者に撮影を促すようにしている。なお、送信先状態判定＆データベース９ｄは、後述するサーバー３３から、送信先状態に関する情報を取得する。

カメラ１００には、補助光発光部１１、マイク１２、ＭＰＵ（Micro Processing Unit）１、レリーズスイッチ１ａ、モード切替スイッチ１ｂ、他のスイッチ１ｃが設けられる。補助光発光部１１は、白色ＬＥＤやＸｅ放電発光管を有し、電流量で光量が制御できるようになっている。状況に応じて被写体２０に光を照射して、明るさの不足や不均一な明るさを防止する。マイク１２は、集音を行い、周囲の音声情報を取り込み、圧縮部６によって音声圧縮し、記録部９によって記録メディア９に、画像データと関連付けて記録される。

ＭＰＵ１は、カメラ全体の制御を司る制御手段である。レリーズスイッチ１ａ、モード切替スイッチ１ｂ、他のスイッチ１ｃおよびプログラム等を記憶したＲＯＭ(不図示)が、ＭＰＵ１に接続される。ＭＰＵ１内には、日や時刻を検出するための時計部１ｔが設けられており、写真の撮影日時を検出し、撮影画像と関連付けを行う。なお、スイッチ１ｂ、１ｃは、スイッチを総称的に表示したものであって、実際には多数のスイッチ群から構成されている。また、ＭＰＵ１には、位置判定部１ｄが接続されており、この位置判定部１は、ＧＰＳ等により位置を検出する。この検出された位置を用いて撮影時の撮影位置と、前述の撮影日時を画像データと共にメディア９に記録する。

各スイッチ１ａ〜１ｃは、ユーザーの操作を検出して、その結果をマイクロコントローラからなる演算制御手段であるＭＰＵ１に通知する。ＭＰＵ１が、これらのスイッチの操作に従って動作を切り換える。また、ＭＰＵ１は撮影時には、ＡＦ制御部２ａや絞り制御部２ｃ等の制御を行う撮影制御機能や取得画像データ・取得音声データ等の記録部９ａや記録メディア９への記録制御機能を果たす。

このように構成されているカメラ１００は、通信網３２を介してサーバー３３に接続されており、このサーバー３３に、ユーザー３１の所有するパーソナルコンピュータ（ＰＣ）３４は接続可能である。また、サーバー３３は、大画面テレビ３４ａや携帯電話３４ｂ等の再生機器に接続可能であり、サーバー３３は、これらの再生機器の使用状況を判定し、その判定結果を、通信網３２を介してカメラ１００に送信可能である。サーバー３３とその周辺回路の構成については、図５を用いて後述する。

次に、このように構成されているカメラの動作について図を用いて説明する。図２は典型的な利用状態を示す図である。この図２に、孫の成長を楽しみにしている祖母３１（鑑賞者）の例を示す。祖母（鑑賞者）３１は、孫の写真を見るのを楽しみにしている。それが送られてくるのを心待ちにしているが、状況によって、その画像が簡単には見られないことがある。たとえば、大型テレビ（ＴＶ）３４ａを見ている時に、携帯電話３４ｂに画像を送っても、携帯３４ｂの電源はオフしてあったり、また着信音に気づかなかったりして、そのまますごしてしまうことも多い。また、大画面テレビ（ＴＶ）３４ａで見るほうが、迫力もあり大きく見えるのでうれしいが、外出時には携帯電話３４ｂで見るしかない。

前述した送信先状態判定＆データベース（ＤＢ）９ｄ内には、図３に示すような、鑑賞者の利用する再生機器の情報が記録されている。後述するように図４のフローチャートにおいて、カメラ１００の使用時に送信相手が利用可能な機器環境を判定し、カメラ１００のユーザーに、送信相手の鑑賞機器にふさわしい撮影を促すような表示や警告の制御をカメラ１００が行なう。これにより、鑑賞者が見やすい画像を、撮影してタイミング良く送ることができる。

大画面テレビ（ＴＶ）３４ａと携帯電話３４ｂでは、画面の大きさや分解能も異なり、音声が有効に再生できるかなど、再生にふさわしい画像が異なる。したがって、ここでの説明では、いつも大画面テレビ（ＴＶ）３４を見ている祖母（鑑賞者）３１を想定し、まず、大画面テレビ（ＴＶ）３４ａがオンしているかを、家電ネットワークで判定し、オンしている場合には、大画面に耐え、かつ、音声をきれいに録音した動画像を撮影して送信する。このような再生機器状況の判定結果を、カメラ１００の背面の表示部に表示する（図２参照）。

しかし、祖母（鑑賞者）３１の外出時には、大画面テレビ（ＴＶ）３４ａの電源はオフするので、電源オフを家電ネットワークを介して判定し、その場合は、携帯電話３４ｂに相応しい画像（例えば、ＶＧＡ（Video Graphics Array）の静止画）を、携帯電話３４ｂに送信する。もちろん、祖母（鑑賞者）３１が外出の機会が多いのであれば、優先順位は反対にして、まず、携帯電話３４ｂの電源を判定するようにして、携帯電話３４ｂに対する画像送信の優先度をアップするようにしてもよい。

携帯電話３４ｂがオフしているときは、大画面テレビ（ＴＶ）３４ａの電源を判定し、オンしていれば、大画面テレビ（ＴＶ）３４ａに送信するべき画像を撮影するようにしてもよい。両方、オフの時は、その場で送信するのは諦め、後で携帯に送信することにして、撮影はＶＧＡの静止画にしておき、カメラ内に画像を保持するようにする。

このように図３に示す鑑賞者の利用機器情報の優先順位に従って制御を行っているが、使用者としては祖母以外にもおり、図３には、祖父の使用機器の例を示す。ここでは、祖父は、目が悪いので大画面で鑑賞する方が好きなので、例えば、携帯電話と大画面テレビ（ＴＶ）の電源が両方オンの時は、画面の大きな大画面テレビ（ＴＶ）３４ａに送信することを期待している。

また、祖父が、パーソナルコンピュータ（ＰＣ）を使って、ネットやメールを楽しむようであるならば、大画面テレビ（ＴＶ）３４ａがオフでも、次に画面の大きなパーソナルコンピュータ（ＰＣ）に表示して欲しいと望む。こうした鑑賞者を想定する場合、携帯電話３４ｂの電源をチェックする前に、パーソナルコンピュータ（ＰＣ）の電源をチェックするようにする。パーソナルコンピュータ（ＰＣ）もオフしている時は、携帯電話３４ｂに画像を送信するようにしている。

また、パーソナルコンピュータ（ＰＣ）の画面でも見られるように、画像保管用のサービスを行うサーバーや、家庭用サーバーのサーバー３５（図５参照）に、画像記録するようにしてもよい。パーソナルコンピュータ（ＰＣ）のユーザーなら、このような場所に記録された画像を探して鑑賞することも容易にできる。したがって、携帯電話３４ｂには、画像が保管されているので閲覧を促す催促表示を行う。即時性には欠けるものの、祖父が好む大画面での画像鑑賞をすることが可能となる。

次に、図４に示すフローチャートを用いて、本実施形態の動作について説明する。画像撮影のメインルーチンに入ると、まず、撮影モードか否かの判定を行なう（Ｓ０）。カメラ１００を用いての撮影であれば、撮影モードと判定し、例えば、送信設定、再生モード、送信モード等、カメラ１００を用いての撮影を行う場合でなければ、非撮影モードとして、ステップＳ１に進む。

続いて、送信設定か否かの判定を行なう（Ｓ１）。これは、鑑賞者（例えば、祖母、祖父）３１に、画像データを送信するにあたっての事前設定を行なうか否かの判定である。判定の結果、送信設定を行なうのであれば、送信先状態判定＆データベース（ＤＢ）９ｄに記録されている送信先から送信者を選択し（Ｓ２）、送信先状態判定＆データベース（ＤＢ）９ｄの記録内容の参照を行なう（Ｓ３）。すなわち、再生機器の優先度およびモード・画像サイズ等を参照する。

送信先状態判定＆データベース（ＤＢ）９ｄの参照結果に基づいて、次に、優先度の高い機器の電源がオンしているか否かを判定する（Ｓ４）。この判定は、カメラ１００と再生機器との間で通信できれば、直接、電源状態を検出してもよいが、再生機器が通信網３２を介してサーバー３３と接続されている場合であれば、このサーバー３３を通じて電源状態を検出する。図３に示した例で、今、送信先として祖母を選択したとすると、優先度の高い機器は大画面テレビ（ＴＶ）３４ａであるので、ステップＳ４において、大画面テレビ（ＴＶ）３４ａが、現在、電源オンであるか否かの判定を行なう。

ステップＳ４における判定の結果、電源オンであれば、この再生機器の種別を表示すると共に、送信先状態判定＆データベース（ＤＢ）９ｄの記録内容に従った撮影モードを指示する（Ｓ５）。すなわち、送信先状態判定＆データベース（ＤＢ）９ｄには、機器に応じて最適なモードと画像サイズが記憶されており、祖母の例であれば、大画面テレビ（ＴＶ）３４ａの場合には、動画像でＨＤ（ハイビジョンサイズ）を選択する。なお、撮影モード等は、自動設定するようにしているが、手動で設定を促してもよい。

一方、ステップＳ４における判定の結果、優先順位の高い機器の電源がオフされていれば、その優先度の高い機器によって即時の画像鑑賞をしてもらえないので、次に優先度の高い機器を検索する（Ｓ６）。

次に、ステップＳ６における機器検索の結果、機器を検索できたか否かの判定を行なう（Ｓ７）。判定の結果、次に優先度の高い機器があると、ステップＳ４に戻り、その機器が電源オンであるか否かを検索する。このように優先度順に電源がオンであるか否かを検出し、その機器が電源オンであれば、その機器に適合する撮影モード等で撮影指示を行なう。この撮影指示は、文字表示やアイコン表示で行い、また、画面のアスペクト比などは、表示パネル８の表示画面の有効域８ｃ（図５参照）を変更したりして行う。

ステップＳ７において、全ての再生機器の電源がオンとなっていないことが検出された場合には、特定撮影モード設定を行う（Ｓ８）。すなわち、この場合には、デフォルト機器を想定した撮影モード指示を行う。対象機器がない場合に、デフォルト機器を想定した撮影モードとしては、カメラ内記録や、画像保存サーバーへの記録を行うことを前提とした撮影モードである。

ステップＳ８で特定撮影モード設定を終えると、またはステップＳ５の撮影モードの指示を終えると、次に、その他のモードか否かの判定を行なう（Ｓ９）。このその他のモードとしては、送信先設定以外のモードであり、例えば、再生モードや送信モードである。その他のモードが設定されていれば、そのモードを実行する（Ｓ１１）。その他のモードが設定されていない場合、またはその他のモードの実行が終了すると、リターンし、ステップＳ０から実行する。

ステップＳ０における撮影モードか否かの判定の結果、撮影モードであった場合には、撮像素子３からの画像データを、表示パネル８に表示するライブビュー表示を行うと共に、この時、撮影に必要な例えばシャッタスピードなどの表示や、送信設定されていれば、送り先の機器も合わせて、表示パネル８に表示する（Ｓ２１）。

次に、該当画像の撮影か否かの判定を行なう（Ｓ２２）。すなわち、ステップＳ１において送信先を設定した撮影（該当画像撮影、ステップＳ２２以下での処理）と、その他の通常撮影（Ｓ３１以下での処理）のいずれであるかを判定する。これは、例えば、カメラの背面のボタンを操作することなどで、設定が可能であり、ボタン操作によって送信先を想定した撮影であれば、その送信先に相応しいモードでの撮影となる。しかし、この操作のないときの撮影の場合には、送信を意識せず、カメラ内に画像を記録する一般的なカメラと同じ撮影シーケンスとなる。

ステップＳ２２における判定の結果、該当画像の撮影ではないと判定された場合には、次に、その他の撮影であるか、すなわち該当画像撮影以外の通常の撮影であるか否かの判定を行なう（Ｓ３１）。判定の結果、その他の撮影であった場合、若しくはステップＳ２３における判定の結果、所定被写体ではないと判定された場合には、レリーズ釦が全押しされ、レリーズ操作か否かの判定を行なう（Ｓ３２）。判定の結果、レリーズ釦が全押しされた場合には、撮影動作を行い、記録メディア９に通常の画像データの記録を行う（Ｓ３３）。

一方、ステップＳ２２における判定の結果、該当画像撮影であり、送り先指定がある場合には、撮像素子３からの画像を、表示パネル８に表示するライブビュー表示を行うと共に、写真を送って欲しい人の、観賞用機器情報（大画面テレビ等の機器の種類、撮影モード、画像サイズ等）などがある場合は、それも合わせて、表示パネル８に表示する。続いて、現在の画像が、鑑賞者が見たい被写体であるかどうか、図３の例では、祖母の孫であるか否かを判定する（Ｓ２３）。この判定は、顔検出部５ａ、表情判定部５ｂおよび個人認証部５ｄ等の検出出力に基づいて判定する。

ステップＳ２３における判定の結果、要求のあった所定の被写体である場合は、所定モードに設定する（Ｓ２４）。すなわち、送信先状態判定＆データベース（ＤＢ）９ｄに記憶されている撮影モード等に従って、撮影し鑑賞するのにふさわしいモード（図３参照）での撮影を行う。このステップは、ステップＳ１において送信設定して、例えば、孫の写真を撮影しようと思っていても、その後、目に入った別の被写体を撮影したくなる場合もある。このような場合に撮影した画像は、送信する必要がないので、ステップＳ２３における判断を入れたが、省略することも可能である。

所定モードが設定されると、次に、レリーズ操作されたか否かの判定を行なう（Ｓ２５）。判定の結果、レリーズ操作された場合には、撮影を行い、この撮影された画像データの送信を行う（Ｓ２６）。この画像送信は、送信先状態判定＆データベース（ＤＢ）９ｄの送り先の機器情報に従って、送信設定部９ｅが操作され、送受信部９ｃを介して、見せたい人に送信する。

なお、送信先の機器の電源がすべてオフで、送信できない状況下では、送信せずにカメラ１００内のメモリに記録するか、またはサーバー３３に送信の記録部に仮記憶する。また、特殊なモードで撮影する場合、撮影のコツをステップＳ２２において表示し、撮影を補助するようにしてもよい。ステップＳ３１において、その他の撮影でもなく、また、ステップＳ３２においてレリーズ操作されてもいないときには、リターンする。

以上のように、本発明の第１実施形態にかかわるカメラのフローチャートにおいては、送信先状態判定＆データベース（ＤＢ）９ｄに記憶された送信先に基づいて、送信先を事前設定するようにしている（Ｓ１〜Ｓ８）。また、撮影モードに入った際に、送信先に画像を送信する該当画像の撮影か否かを判定し、所定被写体であることを検出すると、送信先状態判定＆データベース（ＤＢ）９ｄに記憶された所定モードにおいて撮影を行うようにしている。このため、鑑賞者の再生機器に適合する写真撮影を容易に行うことができる。

次に、図５を用いて、鑑賞者の再生機器の情報を取得するためのサーバー３３について説明する。図５は、サーバー３３とその周辺を示すブロック図である。サーバー３３内には、カメラ１００と通信を行なうための通信部３３ａが設けられている。この通信部３３ａで受信した画像やコメントを記録するための日記・画像記録部３３ｂが設けられている。カレンダー部３３ｉは、イベント等のカレンダー情報を記憶する。表示制御部３３ｃは、パーソナルコンピュータからアクセスされた場合に、日記・画像記録部３３ｂに記録されている画像等のコンテツの表示制御を行う。

また、サーバー３３内の通信部３３ａは、前述したカメラ１００、祖母や祖父等が所有あるいは鑑賞可能な再生機器（大画面テレビ（ＴＶ）３４ａや、携帯電話３４ｂ）とネットワーク等を通じて接続可能となっており、再生機器の電源がオンとなっているか否か、また表示可能になっているかを、通信網３２、通信部３３ａを介してサーバー３３はモニタ可能となっている。また、画像保管用のサーバー３５とも接続されている。

サーバー３３内には、ユーザー情報部３３ｅおよび状態判定部３３ｆが設けられており、これらによって、ユーザー情報、電源や動作状態の状態判定が、関連付けられて記録される。また、これらの部位に接続された代替データベース（ＤＢ）３３ｇが設けられており、対象とする機器が電源オフしている場合、代替する機器がどれであるかを記憶する。送信相手が、ごく限られた身内だけなら、カメラ１００内部のメモリに直接、図３に示すようなデータを記録させてもよい。しかし、多くの鑑賞者を想定する場合には、すべての鑑賞者の鑑賞用機器を撮影者が入力していくのは大変なので、図３のようなデータベース（ＤＢ）を作るサーバーを設ける方がよい。

サーバー３３内には、鑑賞内容判定部３３ｄを有し、ユーザーの鑑賞する画像の内容（解像度やファイルサイズや形式、アスペクト比などを含む）を適宜モニタし、その傾向から、この代替データベース（ＤＢ）３３ｇの内容を作成する。また、サーバー３３内の日記・画像記録部３３ｂおよびカレンダー部３３ｉは、日記やブログ記事や画像や、カレンダーなど予定を入力、記録できるような機能を有しており、これによって鑑賞者の嗜好を読み取ることもできる。また、画像を各機器に送信できないときには、このような日記・画像記録部３３ｂ等に、画像を仮記憶できるようにしてもよい。

このように、構成されているので、サーバー３３に、カメラ１００がアクセスすることによって、現在、ユーザーが鑑賞可能な機器を判定し、それに相応しい画像の撮影が可能となる。たとえば、携帯電話３４ｂでの縦長の画面と、ワイド画面の大画面テレビ（ＴＶ）３４ａでは、撮影時の構図の決め方も変わってくるので、再生機器に合わせた構図での撮影が可能となる。図５に示す例では、１６：９のアスペクト比のハイビジョン（ＨＤ）動画を録画できるような画面表示にした例を示している。カメラ１００の背面に設けられた送信設定用のスイッチ（不図示）を操作することにより、送信設定ができ、送信相手の機器情報が送られてきて、相手先の機器の画面サイズを反映し、吹き出しで図５に示すような情報表示を行なうことができる。

次に、図６および図７を用いて、本発明の第２実施形態について説明する。第１実施形態では、撮影前に、送信先の状態を判定していたが、第２実施形態は、送信相手の機器の状態を判定してカメラ撮影を促すようにしている。第２実施形態におけるカメラ１００およびサーバー３３の構成は、第１実施形態と同様であるので、詳細な説明は省略する。

本実施形態における動作を図６に示すフローチャートを用いて説明する。ステップＳ０からステップＳ３までは、第１実施形態と同様である。ステップＳ３のデータベース参照が終わると、続いて、優先度の高い機器がオンかの判定を行なう（Ｓ４１）。優先度の高い機器がオンとなっていた場合には、次に、優先度の変更がなされたか否かの判定を行なう（Ｓ４４）。優先度の変更がなれば、撮影指示を行なう（Ｓ４６）。一方、優先度が変更されていれば、次に優先度の高い機器情報を検索し（Ｓ４５）、ステップＳ４６に進み、検索された機器情報に基づいて撮影指示を行なう。

ステップＳ４１において、優先度の高い機器の電源がオフの場合には、次に優先度の高い機器の検索を行い（Ｓ４２）、その他のモードであるか否かの判定を行なう（Ｓ４３）。その他のモードはステップ９（図４）と同様である。その他モードでなければ、ステップＳ４１に戻り、前述のステップを繰り返す。ステップＳ１０、Ｓ４３においてその他モードであれば、ステップＳ１１と同様にその他モードを実行する。

ステップＳ０における判定の結果、撮影モードであった場合には、ステップＳ２１以下を実行するが、ここでの処理は第１実施形態における図４のフローチャートと同様であるので、詳細な説明は省略する。

このように、図６に示すフローチャートにおいては、送信先機器の電源がオンしたかどうかをカメラ１００が常時モニタしており（Ｓ４１→４２、４３→Ｎ）、電源のオンを確認すると、送信相手が直ぐに画像を楽しめる状態になったと判定し、ステップＳ４１からステップＳ４６に進み、撮影指示、すなわち、どの機器がオンしたかという情報を表示し、撮影を促すようにしている。

また、最初に携帯電話の優先度が高くしておいても、鑑賞者の鑑賞環境が変わって、途中から大画面テレビ（ＴＶ）３４で見たくなるなど、優先度が変わる場合もある（図７のような状況）。この場合は、優先度切り替えの信号を受信して（Ｓ４４→４５）、別機器に対しての送信を促すようにしてもよい。

次に、本発明の第３実施形態について、図８および図９を用いて説明する。この第３実施形態は、再生機器を見ている最中に撮影画像が送信された際に、送信情報を表示するようにしたものである。すなわち、この第３実施形態においては、大画面テレビ（ＴＶ）３４ａの隅に、画像送信があったことを示す送信情報が表示され（図８（ａ））、撮影画像の再生を本格的に始める（図８（ｂ）→（ｃ））。この場合、例えば、図８（ｂ）のようにリモコン３４２によって操作がなされた場合などに、本格的な再生を行なうようにする。

この第３実施形態における構成は、第１及び第２実施形態と同様であるが、大画面テレビ３４ａの内部には、図５に示すように、画面分割制御部３４ａ１が設けられている。この画面分割制御部３４ａ１は、２画面を表示可能であり、主画面３４０と従画面３４１（図８参照）の表示制御を行う。

次に、この大画面テレビ（ＴＶ）３４ａの動作について、図９に示すフローチャートを用いて説明する。まず、カメラ１００から、直接、またはサーバー３３を介して画像を受信したか否かの判定を行なう（Ｓ１０１）。判定の結果、未受信の場合には、大画面テレビ３４ａの表示画面には、主画面３４０のみが表示されている。ステップＳ１０１における判定の結果、受信した場合には、受信表示を行う（Ｓ１０２）。この受信表示としては、図８（ａ）に示すように、従画面３４１に送信元をテキスト表示するが、これ以外にも、記号等を表示する等、適宜表示を行なえばよい。

次に、再生ＯＫか否かの判定を行なう（Ｓ１０３）。この再生ＯＫか否かは、リモコン３４２等によって行なう。再生ＯＫがなされないと、リターンするが、再生ＯＫがなされると、大画面テレビ（ＴＶ）３４ａは、カメラ１００で撮影した画像の再生を開始する。続いて、拡大再生を行なうか否かの判定を行なう（Ｓ１０５）。拡大再生もリモコン３４２等によってなされる。判定の結果、拡大再生を行う場合には、図８（ｃ）に示すように、撮影画像を拡大し主画面で表示し、一方テレビ画面は縮小し従画面３４１で表示する。

ステップＳ１０５において、拡大再生しない場合には、再生ＮＧか否かの判定を行なう（Ｓ１０７）。すなわち、鑑賞者として撮影画像の再生を行なわない場合には、次の候補者に撮影画像を転送する（Ｓ１０８）。再生を続行する場合には、ステップＳ１０７をＮｏで抜けて、リターンする。

また、みんなで大画面テレビ（ＴＶ）３４ａを見ている時に、撮影画像を表示したくない場合もあることから、まず、主に見せたい人の携帯電話３４ｂに画像送信し、その内容を大画面テレビ３４ａに表示してもよい時のみ、大画面テレビ３４ａでの画像再生を許可してもよい。この場合には、携帯電話３４ｂをリモコン代わりに、大画面テレビ３４ａを操作すればよい。このようなシステムは第２実施形態（図６参照）を利用すれば可能である。

大画面テレビ等の多くの人で見る再生機器においては、突然撮影画像の再生が始まると、視聴者は困惑してしまう場合もある。しかし、この第３実施形態によれば、撮影画像が送信されることが表示された後、許可された場合のみ、撮影画像を表示するようにしているので、前述したような不具合を防止することができる。

以上のように本発明の各実施形態においては、送信相手が、画像鑑賞をする状態にある場合に、画像送信を行なうようにしているので、即時性を追及しつつ、その再生機器に相応しい撮影を行うことができ、満足度の高い撮影を促すことができる。

また、本発明の実施形態においては、カメラ１００の表示パネル８に、送信先の再生機器に対応した撮影を行うための撮影情報、例えば動画と静止画の切り替えや、画像サイズを表示している。このため送信先の再生機器に最適な撮影を行うことができる。さらに、本発明の実施形態においては、送信先の再生機器がいずれも利用されていない場合、（電源オフ、受信不可能）には、カメラ１００やサーバー３３等の、再生機器以外の記憶装置に記憶するようにしている。このため、後日、送信することが可能となる。

さらに、本発明の実施形態においては、送信先の再生機器を複数設定可能であり、順次、相手先が利用状態にあるか否かを判定している。いずれかの再生機器が利用可能状態であれば、送信することができる。また、利用状態であるか否かの判定にあたって、優先順位の高い再生機器から順次、行なうようにしているので、最適な再生機器に送信することのできる可能性が高い。

なお、本発明の各実施形態においては、撮影モードに入ると、鑑賞者の再生機器が使用可能状態にあるかについて判定を行なっていなかったが、ステップＳ２１等においてライブビュー表示を行なっている際に、鑑賞者の再生機器の状態を判定するようにしても、勿論構わない。

また、本実施形態におけるカメラは、コンパクトカメラや一眼レフカメラでもよく、また携帯電話やＰＤＡ等に内蔵されるカメラであってもよい。本発明は、再生装置に画像送信可能な撮像装置であれば、適用できる。

本発明の第１実施形態に係わるカメラとその周辺のブロック図である。 本発明の第１実施形態に係わるカメラの典型的な使用状態を示す図である。 本発明の第１実施形態に係わるカメラ内の送信先＆データベースに記録される送信先の一例を示す図である。 本発明の第１実施形態に係わるカメラの画像撮影の動作を示すフローチャートである。 本発明の第１実施形態に係わるサーバーの内部構造とその周辺を示すブロック図である。 本発明の第２実施形態に係わるカメラの画像撮影の動作を示すフローチャートである。 本発明の第２実施形態に係わる再生機器での使用状態を示す図である。 本発明の第３実施形態に係わる再生機器での使用状態を示す図である。 本発明の第３実施形態に係わるテレビの動作を示すフローチャートである。

符号の説明

１・・・ＭＰＵ、１ａ・・・レリーズスイッチ、１ｂ・・・モード切替スイッチ、１ｃ・・・他のスイッチ、１ｄ・・・位置判定部、１ｔ・・・時計部、２・・・撮影レンズ、２ａ・・・ＡＦ(オートフォーカス)制御部、２ｂ・・・絞り、２ｃ・・・絞り制御部、３・・・撮像素子、４・・・アナログフロントエンド（ＡＦＥ）部、５・・・画像処理部、５ａ・・・顔検出部、５ｂ・・・表情判定部、５ｃ・・・距離判定部、５ｄ・・・個人認証部、６・・・圧縮部、８・・・表示パネル、８ａ・・・表示制御部、８ｂ・・・マルチ画像処理部、８ｃ・・・有効域、９・・・記録メディア、９ａ・・・記録部、９ｃ・・・送受信部、９ｄ・・・送信先状態判定＆データベース（ＤＢ）、９ｅ・・・送信設定部、１１・・・補助光発光部、１２・・・マイク、２０・・・被写体、３１・・・ユーザー（鑑賞者）、３２・・・通信網、３３・・・サーバー、３３ａ・・・通信部、３３ｂ・・・日記・画像記録部、３３ｃ・・・表示制御部、３３ｄ・・・鑑賞内容判定部、３３ｅ・・・ユーザー情報部、３３ｆ・・・状態判定部、３３ｇ・・・代替データベース（ＤＢ）、３３ｉ・・・カレンダー部、３４ａ・・・大画面テレビ（ＴＶ）、３４ｂ・・・携帯電話、３５・・・サーバー、１００・・・カメラ、３４０・・・主画面、３４１・・・従画面、３４２・・・リモコン

Claims (12)

1. 画像を撮影する撮像手段と、
   上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶するデータベースと、
   上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、
   この利用状況判定手段による現在利用していると判定した上記画像再生機器に対して上記画像を表す画像データを送信する画像送信手段と、
   を備えたことを特徴とする撮像装置。
2. 上記画像データを送信する送信先の上記画像再生機器に対応した撮影を行うための撮影情報を表示する表示部をさらに備えたことを特徴とする請求項１に記載の撮像装置。
3. 上記撮影情報は上記利用優先順位が最も高い画像再生機器の表示画面のアスペクト比であることを特徴とする請求項２に記載の撮像装置。
4. 上記利用状況判定手段による判定の結果、上記画像再生機器がいずれも現在利用されていない場合は、上記画像データを上記画像再生機器以外の記憶装置に記憶することを特徴とする請求項１に記載の撮像装置。
5. 上記利用状況判定手段は、上記画像再生機器の現在の利用状況を順次判定する動作をいずれかの画像再生機器が利用状態になるまで繰り返し行なうことを特徴とする請求項１に記載の撮像装置。
6. 画像を撮影する撮像手段を有する撮像装置の撮像方法であって、
   上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶部に記憶し、
   上記画像再生機器の現在の利用状況を順次判定し、
   この利用状況の判定の結果に基づいて、現在利用していると判定した上記画像再生機器に対して上記画像を表す画像データを送信する、
   ステップを備えたことを特徴とする撮像方法。
7. 画像を撮影する撮像手段と、
   上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶するデータベースと、
   上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、
   この利用状況判定手段により現在利用していると判定した上記画像再生機器に対して上記画像を表す画像データを送信する画像送信手段と、
   を備えたことを特徴とする撮像システム。
8. 画像を撮影する撮像手段と、
   上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報を記憶するデータベースと、
   上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、
   この利用状況判定手段による現在利用していると判定した上記画像再生機器を表示する表示手段と、
   を備えたことを特徴とする撮像装置。
9. 画像を撮影する撮像手段と、
   上記画像を鑑賞する鑑賞者が利用できる複数の画像再生機器の利用優先順位情報と、上記画像再生機器のそれぞれに適した撮影情報を記憶するデータベースと、
   上記画像再生機器の現在の利用状況を順次判定する利用状況判定手段と、
   この利用状況判定手段による現在利用していると判定した上記画像再生機器に適した撮影情報を表示する表示手段と、
   を備えたことを特徴とする撮像装置。
10. 上記撮影情報は、撮影モードおよびアスペクト比の少なくとも１つを含むことを特徴とする請求項９または請求項１０に記載の撮像装置。
11. さらに上記画像を表す画像データを送信する画像送信手段を有し、
    上記データベースには、上記鑑賞者への送信先情報を含み、
    上記画像送信手段は、上記送信先情報に基づいて上記画像データの送信を行なうことを特徴とする請求項９または請求項１０に記載の撮像装置。
12. 画像を鑑賞する鑑賞者が利用できる複数の画像再生機器および撮像装置と通信するための通信手段と、
    上記鑑賞者の情報を記憶する記憶部と、
    上記画像再生機器の現在の利用状態を判定する利用状態判定手段と、
    上記記憶部および上記利用状態判定手段の出力に基づいて、上記鑑賞者の上記画像再生機器の使用状態を判別し、記憶するデータベースと、
    を具備し、
    上記データベースに記憶された上記画像再生機器の使用状態を上記撮像装置に出力することを特徴とするサーバー。