JP3997796B2 - Photo composition system, image supply device, digital camera - Google Patents

Photo composition system, image supply device, digital camera Download PDF

Info

Publication number
JP3997796B2
JP3997796B2 JP2002046603A JP2002046603A JP3997796B2 JP 3997796 B2 JP3997796 B2 JP 3997796B2 JP 2002046603 A JP2002046603 A JP 2002046603A JP 2002046603 A JP2002046603 A JP 2002046603A JP 3997796 B2 JP3997796 B2 JP 3997796B2
Authority
JP
Japan
Prior art keywords
image
position information
digital camera
unit
composition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002046603A
Other languages
Japanese (ja)
Other versions
JP2003250082A (en
Inventor
和宏 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2002046603A priority Critical patent/JP3997796B2/en
Publication of JP2003250082A publication Critical patent/JP2003250082A/en
Application granted granted Critical
Publication of JP3997796B2 publication Critical patent/JP3997796B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、写真合成システムと画像供給装置、デジタルカメラに関する。
【0002】
【従来の技術】
従来、駅構内や観光地等には、装置本体の前に立った利用者を撮影するとともに、撮影した利用者の顔写真や全身写真を、予め用意されたフレーム画像であって利用者に所望された画像と合成して提供する装置が設置されている。また、このような装置にはフレーム画像を合成した写真(合成写真)を単に印刷して提供するだけでなく、機種によっては画像データとして記録メディア等に出力するものもある。
【0003】
【発明が解決しようとする課題】
しかしながら、上記装置においては、撮影対象となる利用者が装置本体の目の前にいる必要があって撮影場所が固定されており、また合成するフレーム画像が絵柄やイラスト等であることから、提供可能な写真(合成写真)が画一的であるとともに、写真としての性格が希薄なものとならざるを得ないという問題があった。
【0004】
本発明は、かかる従来の課題に鑑みてなされたものであり、写真としての性格が濃い多様な合成画像を得ることを可能とする写真合成システムと画像供給装置、デジタルカメラを提供することを目的とする。
【0005】
【課題を解決するための手段】
前記課題を解決するために請求項1の発明にあっては、撮像素子を用いて被写体を撮影するデジタルカメラと、このデジタルカメラと無線により接続される画像供給装置とからなる写真合成システムであって、前記デジタルカメラは、自己位置を示す位置情報を取得する位置取得手段と、カメラアングルを示す方向情報を取得する方向取得手段と、前記位置取得手段により取得された位置情報と前記方向取得手段により取得された方向情報とを前記画像供給装置に送信する送信手段と、前記画像供給装置から所定の合成用画像を受信する受信手段と、撮影した被写体の画像を、前記受信手段により受信した合成用画像と合成する合成手段と、この合成手段により合成された合成画像を記憶する記憶手段とを備え、前記画像供給装置は、所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像を、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応させて複数記憶する合成用画像記憶手段と、前記デジタルカメラから位置情報と方向情報とを受信する受信手段と、前記合成用画像記憶手段に記憶されている合成用画像であって、前記受信手段により受信した位置情報と方向情報とに対応する合成用画像を前記デジタルカメラへ送信する送信手段とを備えたものとした。
【0006】
かかる写真合成システムにおいては、所定の場所でデジタルカメラにより撮影された、撮影地点やカメラアングルといった撮影条件が個々に異なる画像が、それと同様の条件で得られる画面構成を備えた合成用画像と合成され、合成後の画像がデジタルカメラに記憶される。
【0007】
また、請求項2の発明にあっては、前記デジタルカメラは、前記画像供給装置の合成用画像記憶手段に記憶されている複数の合成用画像にそれぞれ対応する複数の位置情報を記憶する位置情報記憶手段と、前記位置取得手段により取得された位置情報により示される自己位置が、前記位置情報記憶手段に記憶されている複数の位置情報により示されるいずれかの撮影地点と一致するか否かを判断する判断手段と、この判断手段により自己位置がいずれかの撮影地点と一致すると判断されたとき、その旨を使用者に報知する報知手段とを備えたものとした。
【0008】
かかる構成においては、デジタルカメラが、画像供給装置に合成用画像が用意されている場所すなわち合成画像が取得可能な撮影場所に移動すると、それが判断手段により判断され、かつ報知手段によって使用者に知らされる。
【0009】
また、請求項3の発明にあっては、撮像素子を用いて被写体を撮影するデジタルカメラと無線により接続される画像供給装置であって、所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像を、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応させて複数記憶する合成用画像記憶手段と、前記デジタルカメラから位置情報と方向情報とを受信する受信手段と、前記合成用画像記憶手段に記憶されている合成用画像であって、前記受信手段により受信した位置情報と方向情報とに対応する合成用画像を前記デジタルカメラへ送信する送信手段とを備えたものとした。
【0010】
かかる画像供給装置においては、それを用いることにより請求項1の写真合成システムが実現可能となる。
【0011】
また、請求項4の発明にあっては、撮像素子を用いて被写体を撮影するデジタルカメラであって、自己位置を示す位置情報を取得する位置取得手段と、カメラアングルを示す方向情報を取得する方向取得手段と、撮影した被写体の画像を、前記位置取得手段により取得された位置情報が示す撮影地点にて前記方向取得手段により取得された方向情報が示すカメラアングルにより得られる画面構成を備えた合成用画像と合成する合成手段と、この合成手段により合成された合成画像を記憶する記憶手段とを備えたものとした。
【0012】
かかるデジタルカメラにおいては、所定の場所で撮影された撮影地点やカメラアングルといった撮影条件が個々に異なる画像を、それと同様の条件で得られる画面構成を備えた合成用画像と合成し、合成後の画像を記憶する。
【0013】
また、請求項5の発明にあっては、所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像を、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応させて複数記憶する画像供給装置に、前記位置取得手段により取得された位置情報と前記方向取得手段により取得された方向情報とを無線により送信する送信手段と、この送信手段により送信した位置情報と方向情報とに対応する合成用画像を前記画像供給装置から無線により受信する受信手段とを備え、前記合成手段は、撮影した被写体の画像を前記送受信手段により受信した合成用画像と合成するものとした。
【0014】
かかる構成においては、それを用いることにより請求項1の写真合成システムが実現可能となる。
【0015】
また、請求項6の発明にあっては、前記受信手段は前記送信手段により送信した位置情報と方向情報とに対応する合成用画像を前記画像供給装置から複数受信する一方、前記受信手段により受信された複数の合成用画像の中から所望の合成用画像を選択する選択手段をさらに備え、前記合成手段は、撮影した被写体の画像を前記選択手段により選択された合成用画像と合成するものとした。
【0016】
かかる構成においては、自分が撮影した画像と合成される合成用画像を使用者が自分で選択することができる。
【0017】
また、請求項7の発明にあっては、前記画像供給装置の合成用画像記憶手段に記憶されている複数の合成用画像にそれぞれ対応する複数の位置情報を記憶する位置情報記憶手段と、前記位置取得手段により取得された位置情報により示される自己位置が、前記位置情報記憶手段に記憶されている複数の位置情報により示されるいずれかの撮影地点と一致するか否かを判断する判断手段と、この判断手段により自己位置がいずれかの撮影地点と一致すると判断されたとき、その旨を使用者に報知する報知手段とを備えたものとした。
【0018】
かかる構成においては、使用時に画像供給装置に合成用画像が用意されている場所すなわち合成画像が取得可能な撮影場所に移動すると、それが判断手段により判断され、かつ報知手段によって使用者に知らされる。
【0019】
また、請求項8の発明にあっては、所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像が、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応して記憶されている合成用画像記憶手段を備え、前記合成手段は、撮影した被写体の画像を、前記位置取得手段により取得された位置情報および前記方向取得手段により取得された方向情報に対応して前記合成用画像記憶手段に記憶されている合成用画像と合成するものとした。
【0020】
かかる構成においては、所定の場所で撮影された撮影地点やカメラアングルといった撮影条件が個々に異なる画像を、それと同様の条件で得られる画面構成を備えた合成用画像と合成し、合成後の画像を記憶する動作を単独で行うことができる。
【0021】
また、請求項9の発明にあっては、前記合成用画像記憶手段には同一の位置情報および方向情報に対応する複数の合成用画像が記憶される一方、前記合成用画像記憶手段に記憶されている複数の合成用画像であって、前記位置取得手段により取得された位置情報および前記方向取得手段により取得された方向情報に対応する複数の合成用画像の中から所望の合成用画像を選択する選択手段をさらに備え、前記合成手段は、撮影した被写体の画像を、前記選択手段により選択された合成用画像と合成するものとした。
【0022】
かかる構成においては、自分が撮影した画像と合成される合成用画像を使用者が自分で選択することができる。
【0023】
また、請求項10の発明にあっては、前記位置取得手段により取得された位置情報により示される自己位置が、前記合成用画像記憶手段に記憶されている複数の位置情報により示されるいずれかの撮影地点と一致するか否かを判断する判断手段と、この判断手段により自己位置がいずれかの撮影地点と一致すると判断されたとき、その旨を使用者に報知する報知手段とを備えたものとした。
【0024】
かかる構成においては、デジタルカメラが、合成用画像記憶手段に合成用画像が記録されている場所すなわち合成画像が取得可能な撮影場所に移動すると、それが判断手段により判断され、かつ報知手段によって使用者に知らされる。
【0025】
また、請求項11の発明にあっては、実際に撮影した画像から人物部分を抽出する抽出手段をさらに備え、前記合成手段は、前記抽出手段により抽出された人物部分を前記合成用画像と合成するものとした。
【0026】
かかる構成においては、撮影した画像の人物部分が合成用画像と合成された合成画像を得ることができる。
【0027】
また、請求項12の発明にあっては、前記記憶手段は、前記合成画像と共に撮影した被写体の画像を記憶するものとした。
【0028】
かかる構成においては、一度の撮影操作で実際に撮影した画像と、合成後の画像との双方を得ることができる。
【0029】
【発明の実施の形態】
以下、本発明の一実施の形態を図にしたがって説明する。図1は、本実施の形態に係る写真合成システムの構成を示す図である。このシステムは、観光地やテーマパークといった特定の場所で行われる写真合成サービスに使用されるものであり、電話網100に接続された画像供給サーバ1と、PHSや携帯電話等の無線基地局101を介して電話網100に接続され、画像供給サーバ1との間で無線によるデータ通信が可能な1又は複数のデジタルカメラ2とによって構成されている。画像供給サーバ1は、上記サービスの運営者によって管理されている。また、デジタルカメラ2は、サービスの利用者に貸し出されるものであり、GPS衛星102(実際は4台以上)からの電波を受信することにより自己の現在地が取得可能となっている。
【0030】
・画像供給サーバの構成
図2は、前記画像供給サーバ1の概略構成を示すブロック図である。画像供給サーバ1は、装置全体を制御する制御部11、キーボードやマウス等からなる入力部12、CRTやLCD等の表示装置からなる表示部13、通信部14を有している。通信部14は本発明の送信手段、受信手段であり、電話網100を介して主としてデジタルカメラ2との間で各種のデータを送受信する。制御部11は、CPUや作業用のメモリ等から構成され、上記各部を制御するとともに各種データの転送、演算、一時記憶等の処理を行う。入力部12及び表示部13は、画像供給サーバ1に対する各種データの入出力や保守を行う際に用いられるインターフェイスである。また、画像供給サーバ1は、それぞれがハードディスクや光磁気ディスク等の記憶手段によって構成されたプログラムデータ記憶部15、合成用画像データベース16を備えている。プログラムデータ記憶部15には、制御部11に画像供給サーバ1における後述する動作に必要な処理を実行させるための制御プログラムが記憶されている。
【0031】
合成用画像データベース16は本発明の合成用画像記憶手段を構成しており、図3に示すように、写真合成サービスの対象区域内(観光地やテーマパーク等)の複数箇所に予め設けられた複数の撮影地点を示す地点番号160a、及び各撮影地点(登録地点)の位置を示す位置情報である緯度・経度データ160bと、それらに対応する複数の方向データ160c及び画像データ160dとによって構成されている。方向データ160cはカメラアングルを示す方向情報であり、緯度・経度データ160bにより示される登録地点でのカメラの撮影方向を、例えば「東」、「北北東」のように4方位、8方位、16方位により示すデータである。また、画像データ160dは、対応する登録地点で方向データ160cにより示される撮影方向つまりカメラアングルで得られる画面構成を備えた合成用画像のデータである。合成用画像としては、例えば予め作成されたコンピュータグラフィックスによる過去や未来の画像、実際に撮影されたいろいろな天候、時間、季節のもとでの画像、また、テーマパーク等においては、コンピュータグラフィックスにより合成されたり実際に撮影されたりした着ぐるみ(キャラクタ等に扮装した人物)が写った画像である。なお、図3には、方向データ160c及びそれと対応する画像データ160dの数が各登録地点で同一である場合を示したが、登録地点毎に方向データ160cと画像データ160dの数が異なっていてもよく、また方向データ160cと対応して複数の画像データ160dが記憶されていてもよい。
【0032】
・デジタルカメラの構成
図4は、前記デジタルカメラ2の概略構成を示すブロック図である。デジタルカメラ2は、撮影した被写体の光学像を撮像信号に変換するCCD21と、DSP/CPU22とを有している。DSP/CPU22はデジタル信号処理機能を有するとともにデジタルカメラ2の各部を制御するワンチップマイコンである。DSP/CPU22には、CCD21を駆動するTG(Timing Generator)23が接続され、TG23には、CCD21から出力されるアナログの撮像信号が入力するユニット回路24が接続されている。ユニット回路24は、入力した撮像信号を保持するCDSと、その撮像信号を増幅するゲイン調整アンプ(AGC)、増幅された撮像信号をデジタルの撮像信号に変換するA/D変換器(AD)から構成されており、CCD21の出力信号は、ユニット回路24を経てデジタル信号としてDSP/CPU22に送られる。
【0033】
DSP/CPU22には、表示装置25、キー入力部26、アラーム部27、通信部28、GPSモジュール29、方位センサ30が接続されるとともに、アドレス・データバス31を介してDRAM32、内蔵フラッシュメモリ33、外部フラッシュメモリ34、I/Oポート35が接続されている。DRAM32は、撮影待機モードの設定時にCCD21によって撮像され、デジタル化された被写体の画像データを一時保存するとともに、DSP/CPU22のワーキングメモリとして機能する。内蔵フラッシュメモリ33には、DSP/CPU22の動作プログラムや各部の制御に使用する各種データが記憶されている。そして、DSP/CPU22は、前記動作プログラムに従って動作することにより本発明の合成手段、判断手段、抽出手段として機能する。
【0034】
外部フラッシュメモリ34は本発明の記憶手段として機能する、装置本体に着脱自在な記録媒体(メモリカード等)であって、外部フラッシュメモリ34には、シャッタキーの押下による撮影操作に伴い取得され、DSP/CPU22によってJPEG形式等で圧縮された1フレーム分(1画面分)の画像データが記録される。さらに外部フラッシュメモリ34は本発明の位置情報記憶手段として機能するものであって、デジタルカメラ2の使用に先立ち、前述した画像供給サーバ1の合成用画像データベース16に記憶されている緯度・経度データ160bが予め記憶される。I/Oポート35は、DSP/CPU22でシリアル信号に変換された画像データ等を入出力するインターフェースであり、外部フラッシュメモリ34に記憶された画像データ(JPEG形式の画像ファイル)をケーブル接続により外部機器へ出力する際に用いられる。
【0035】
表示装置25はカラーLCDとその駆動回路とを含み、撮影待機モードの設定時にはCCD21によって撮像されデジタル化された被写体の画像データや後述する合成画像を表示し、再生モードの設定時には外部フラッシュメモリ34から読み出され伸張された画像データを表示する。キー入力部26は、シャッタキーや複数の操作キー、電源キー等を含み各キーの操作に応じたキー入力信号をDSP/CPU22に出力する。アラーム部27は本発明の報知手段であり、DSP/CPU22からの命令により必要に応じて報知音を発生する。通信部28はアンテナ36を有した本発明の送信手段、受信手段であり、後述するように前記画像供給サーバ1との間におけるデータ通信処理を行い、画像供給サーバ1から受信したデータをDSP/CPU22に送る。GPSモジュール29はGPSアンテナ37を有した本発明の位置取得手段であり、GPS衛星102から受信した衛星からのL1帯のC/Aコード(GPSデータ)を復調・解読して現在位置の緯度/経度を割り出し、割り出された緯度/経度情報等をDSP/CPU22へ送る。方位センサ30は、本発明の方向取得手段であり、カメラ本体のレンズがどちらの方向(方位)を向いているのかを計測し、その計測結果をDSP/CPU22に送る。
【0036】
次に、以上の構成からなる本実施の形態の動作を、特定の観光地における写真合成サービスに使用する場合を例にして説明する。ここで、本実施の形態における写真合成サービスの内容は、前記デジタルカメラ2を利用者に貸し出すとともに、それを回収したとき、デジタルカメラ2に記録されている画像を、利用者の希望に応じて印刷し、又は画像データとして記録メディアに出力して利用者に提供するものとする。
【0037】
まず、デジタルカメラ2は、前述した緯度・経度データ160bを外部フラッシュメモリ34に記憶する位置登録が行われた状態で写真合成サービスの利用者に貸し出される。貸し出されたデジタルカメラ2は電源投入とともに図5に示した待機処理を開始し、逐次GPSモジュール29による位置計測を行い(ステップSA1)、計測した自己位置が、前記緯度・経度データ160bにより示される登録地点から一定距離以内であるか否かを判別する(ステップSA2)。そして、自己位置が登録地点から一定距離以内に達すると(ステップSA2でYES)、アラーム部27から報知音を発生し、その地点が写真合成サービスが実施可能な地点であることを利用者に知らせる(ステップSA3)。これにより、利用者は、写真合成サービスを受けることができる地点を確実に知ることができる。そして、利用者により撮影待機モードが設定されたか否かを判別し(ステップSA4)、撮影待機モードが設定されなければ上記処理を繰り返し、その間に、いずれかの登録地点(又はその付近)において利用者により撮影待機モードが設定されると(ステップSA4でYES)、撮影処理を実行し(ステップSA5)、ステップSA1へ戻る。
【0038】
撮影処理においては、図6示したように、スルー画像を表示装置25に表示し(ステップSB1)、その間に、シャッターキーが予め決められた一定時間(例えば3秒間)半押しされたら(ステップSB2でYES)、CCD21により被写体像を取り込み、それをDRAM32に一時記憶した後(ステップSB3)、方位センサ30によって、その時点におけるカメラ本体の向き(撮影方向)を計測する(ステップSB4)。引き続き、前記画像供給サーバ1へアクセスするとともに、計測した撮影方向のデータと、その時点で計測されていた自己位置の緯度・経度データとを送信し(ステップSB5)、それらのデータと対応する画像データを画像供給サーバ1からダウンロードして外部フラッシュメモリ34に一時保存する(ステップSB6)。
【0039】
図7は、デジタルカメラの上記動作に対応する画像供給サーバ1側における画像供給処理を示すフローチャートである。画像供給サーバ1はデジタルカメラ2からアクセスがあると(ステップSC1でYES)、送られてきた緯度・経度データと撮影方向のデータとを受信した後(ステップSC2)、それらのデータと対応する画像データ160dを合成用画像データベース16において検索し(ステップSC3)、検索した複数の画像データ160dを読み出し、それをデジタルカメラ2へ送信する。
【0040】
一方、デジタルカメラ2は、画像データ160dのダウンロードが完了したら、スルー画像として表示した画像から画像認識処理等の公知の方法により人物部分を抽出し(ステップSB7)、人物部分の画像データをステップSB6でダウンロードした画像データと合成し、具体的には人物部分を前面にダウンロードした画像を背面とする合成を行い(ステップSB8)、その合成画像を表示装置25に表示する(ステップSB9)。また、その状態で、利用者による所定の切替操作があれば(ステップSB10でYES)、その度毎に、ステップSB7で抽出した人物部分の画像を、ダウンロードした他の画像と合成し(ステップSB11)、その合成画像を表示装置25に表示する(ステップSB9)。
【0041】
そして、利用者により所望とする合成画像が表示装置25に表示され、その状態でシャッターキーが全押しされると(ステップSB12)、表示中の合成画像と、ステップSB3において記憶しておいた撮影画像との双方を外部フラッシュメモリ34に記録する(ステップSB13)。なお、その時点で、画像供給サーバ1からダウンロードし、外部フラッシュメモリ34に記録されている全ての画像データ160dは消去して撮影処理を終了する。
【0042】
しかる後、デジタルカメラ2は写真合成サービスの提供者に回収され、その時点で外部フラッシュメモリ34に記録されている全ての画像が印刷されて、又は画像データとして記録メディアに出力されて利用者に提供される。
【0043】
ここで、本実施の形態において利用者に提供される合成画像は、予め設定されている登録地点でデジタルカメラにより撮影された、撮影地点やカメラアングルといった撮影条件が個々に異なる画像が、それと同様の条件で得られる画面構成を備えた合成用画像と合成されたものである。したがって、前述した写真合成システムを用いることにより、写真としての性格が濃く、同時に多様な合成写真を提供することができる。なお、本実施の形態においては、撮影した人物の背景だけが変更された合成写真を得る場合についてのみ説明したが、これ以外にも、前述したシステムを用いれば、例えばテーマパーク等において、実際に撮影した風景に、撮影時点には存在していなかった着ぐるみが合成された合成写真、すなわち実際に撮影した画像を背景とする合成写真を提供することもできる。
【0044】
また、移動中の利用者に対して、写真合成サービスを受けることができる登録地点(合成用画像が用意されている地点)を確実に知らせることができ、また利用者が、合成写真において背景となる合成用画像を自分で選択できるため、使い勝手がよい。なお、この点については、背景となる合成用画像を複数選択できるようにして、シャッターキーが全押しされたら、選択された複数の合成用画像と人物部分の画像とを合成し、それらを撮影画像とともに、又は合成した複数の画像だけを記録させるようにしてもよい。さらには、前述した撮影処理において、利用者に合成用画像を選択させる処理をなくして、シャッターキーが全押しされたら、人物部分の画像をデジタルカメラ2が受信した全ての合成用画像と自動的に合成し、合成した全ての画像を外部フラッシュメモリ34に記録させ、記録した合成画像を最終的に利用者に提供する時点で、利用者に所望する合成画像を選択させるようにしてもよい。また、本実施の形態では、一度の撮影操作で実際に撮影した画像(撮影画像)と、合成後の画像との双方を得ることができることから、これによっても使い勝手がよい。
【0045】
なお、本実施の形態においては、画像供給サーバ1とデジタルカメラ2が無線基地局101及び電話網100を介して緯度・経度データ及び画像データを送受信するシステムとしたが、各データの送受信を直接送受信する構成としてもよい。
【0046】
また、画像供給サーバ1に合成用画像が用意されている登録地点の位置を緯度・経度で特定するようにしたが、緯度・経度以外の他の位置情報によってそれを特定するようにしてもよい。例えば各登録地点に前述した地点番号160aを特定の範囲内で無線発信する発信器を設置しておき、デジタルカメラ2には、地点番号160aを受信する受信部を本発明の位置取得手段として設けておく。そして、デジタルカメラ2が画像供給サーバ1へ地点番号160aを送信するとともに、画像供給サーバ1が、受信した地点番号160aに対応する画像データ160dをデジタルカメラ2へ送信する構成としてもよい。その場合には、デジタルカメラ2に予め緯度・経度データ160bを記憶する位置登録作業が不要となる。また、地点番号160aを受信した時点でデジタルカメラ2に報知音を発生させるようにすれば、本実施の形態と同様、利用者に対して写真合成サービスを受けることができる地点を確実に知らせることができる。さらに、利用者の利便性は低下するが、登録地点の周囲に地点番号を示す立て札等を設けておき、利用者に手動で地点番号を入力させるようにしてもよい。
【0047】
また、本実施の形態においては、主としてデジタルカメラ2が画像供給サーバ1から合成用画像を供給される写真合成システムについて説明したが、例えばデジタルカメラ2の外部フラッシュメモリ34を本発明の合成用画像記憶手段とし、そこに図3に示した合成用画像データベース16を確保し、前述した撮影処理においては、各登録地点における緯度・経度等の位置情報に対応する画像データ160dを読み出し使用するようにしてもよい。その場合には、デジタルカメラ2だけで本実施の形態と同様の写真合成サービスを低コストにて実施することができる。
【0048】
また、本実施の形態では、最終的にデジタルカメラ2を回収した時点で、外部フラッシュメモリ34に記録されている画像を印刷、又は記録メディアに出力して利用者に提供するシステムについて説明したが、これとは別に、デジタルカメラ2に、前述した手順で合成した画像(及び実際に撮影した画像)を画像供給サーバ1へ転送させ、それらを画像供給サーバ1に蓄積しておき、利用者が必要に応じて、画像供給サーバ1にアクセス可能なプリント装置を備えた所定の販売店において、合成した画像等をプリントして購入するシステムとすることもできる。
【0049】
【発明の効果】
以上説明したように請求項1の写真合成システムにおいては、所定の場所でデジタルカメラにより撮影された、撮影地点やカメラアングルといった撮影条件が個々に異なる画像が、それと同様の条件で得られる画面構成を備えた合成用画像と合成され、合成後の画像がデジタルカメラに記憶されるようにした。よって、写真としての性格が濃い多様な合成写真を得ることが可能となる。
【0050】
また、請求項2の写真合成システムにおいては、デジタルカメラが合成用画像の用意されている場所すなわち合成画像が取得可能な撮影場所に移動すると、それが使用者に知らされるようにした。よって、使用者に対し、合成画像が取得可能な撮影場所を確実に知らせることができ、使い勝手が向上する。
【0051】
また、請求項3の画像供給装置においては、それを用いることにより請求項1の写真合成システムが実現可能となる。
【0052】
また、請求項4のデジタルカメラにおいては、所定の場所で撮影された撮影地点やカメラアングルといった撮影条件が個々に異なる画像を、それと同様の条件で得られる画面構成を備えた合成用画像と合成し、合成後の画像を記憶するようにした。よって、写真としての性格が濃い多様な合成写真を得ることが可能となる。
【0053】
また、請求項5のデジタルカメラにおいては、それを用いることにより請求項1の写真合成システムが実現可能となる。
【0054】
また、請求項6のデジタルカメラにおいては、使用者が自分が撮影した画像と合成される合成用画像を使用者が自分で選択することができるようにした。よって、より多様な合成写真を得ることが可能となる。
【0055】
また、請求項7のデジタルカメラにおいては、使用時に合成用画像の用意されている場所すなわち合成画像が取得可能な撮影場所に移動すると、それが使用者に知らされるようにした。よって、使用者に対し、合成画像が取得可能な撮影場所を確実に知らせることができ、使い勝手が向上する。
【0056】
また、請求項8のデジタルカメラにおいては、所定の場所で撮影された撮影地点やカメラアングルといった撮影条件が個々に異なる画像を、それと同様の条件で得られる画面構成を備えた合成用画像と合成し、合成後の画像を記憶する動作を単独で行うことができるようにした。よって、写真としての性格が濃い多様な合成写真を得ることができるだけでなく、それを低コストで実現することが可能となる。
【0057】
また、請求項9のデジタルカメラにおいては、自分が撮影した画像と合成される合成用画像を使用者が自分で選択することができるようにした。よって、より多様な合成写真を得ることが可能となる。
【0058】
また、請求項10のデジタルカメラにおいては、合成画像が取得可能な撮影場所に移動すると、それが判断手段により判断され、かつ報知手段によって使用者に知らされるようにした。よって、使用者に対し、合成画像が取得可能な撮影場所を確実に知らせることができ、使い勝手が向上する。
【0059】
また、請求項11のデジタルカメラにおいては、実際に撮影した画像の人物部分が合成用画像と合成された合成画像を得ることができるようにした。よって、使用者が撮影した人物の背景だけが変更された合成写真を得ることが可能となる。
【0060】
また、請求項12のデジタルカメラにおいては、一度の撮影操作で実際に撮影した画像と、合成後の画像との双方を得ることができるようにしたことから、これによっても使い勝手が向上する。
【図面の簡単な説明】
【図1】本発明の一実施の形態を示す写真合成システムの構成を示す図である。
【図2】画像供給サーバの概略構成を示すブロック図である。
【図3】合成用画像データベースの構成を示す模式図である。
【図4】デジタルカメラの概略構成を示すブロック図である。
【図5】デジタルカメラにおける待機処理に関する動作を示すフローチャートである。
【図6】デジタルカメラにおける撮影処理に関する動作を示すフローチャートである。
【図7】画像供給サーバにおける画像供給処理に関する動作を示すフローチャートである。
【符号の説明】
1 画像供給サーバ
11 制御部
14 通信部
15 プログラムデータ記憶部
16 合成用画像データベース
2 デジタルカメラ
21 CCD
22 DSP/CPU
26 キー入力部
27 アラーム
28 通信部
29 GPSモジュール
30 方位センサ
34 外部フラッシュメモリ
100 電話網
101 無線基地局
102 GPS衛星
160a 地点番号
160b 経度データ
160c 方向データ
160d 画像データ
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a photo composition system, an image supply device, and a digital camera.
[0002]
[Prior art]
Conventionally, in a station premises or a sightseeing spot, a user standing in front of the main body of the apparatus is photographed, and a photograph of the photographed user's face or whole body is a frame image prepared in advance and desired by the user. A device is provided that provides a synthesized image. In addition, such an apparatus not only provides a photograph (composite photograph) obtained by synthesizing frame images, but also outputs to a recording medium or the like as image data depending on the model.
[0003]
[Problems to be solved by the invention]
However, in the above device, the user who is to shoot needs to be in front of the main body of the device, the shooting location is fixed, and the frame image to be combined is a pattern or illustration, etc. There was a problem that possible photographs (composite photographs) were uniform and the characteristics as photographs had to be sparse.
[0004]
The present invention has been made in view of such conventional problems, and an object of the present invention is to provide a photo composition system, an image supply device, and a digital camera that can obtain a variety of composite images having a high character as a photograph. And
[0005]
[Means for Solving the Problems]
In order to solve the above-mentioned problem, the invention of claim 1 is a photo composition system comprising a digital camera for photographing a subject using an image sensor and an image supply device connected to the digital camera wirelessly. The digital camera includes position acquisition means for acquiring position information indicating its own position, direction acquisition means for acquiring direction information indicating a camera angle, position information acquired by the position acquisition means, and the direction acquisition means. Transmitting means for transmitting the direction information acquired by the image supply apparatus, receiving means for receiving a predetermined image for composition from the image supply apparatus, and composition for receiving the photographed subject image by the reception means. And a storage unit that stores the combined image combined by the combining unit, and the image supply device includes a predetermined unit. A composition image storage means for storing a plurality of composition images having a screen configuration obtained by a predetermined camera angle at a shadow point in correspondence with position information indicating the photographing point and direction information indicating the camera angle; Receiving means for receiving position information and direction information from the digital camera, and a compositing image stored in the compositing image storage means, corresponding to the position information and direction information received by the receiving means. Transmission means for transmitting the image for synthesis to the digital camera is provided.
[0006]
In such a photo composition system, an image taken with a digital camera at a predetermined location and combined with an image for composition having a screen configuration that can be obtained under the same conditions as images with different shooting conditions such as shooting points and camera angles. The combined image is stored in the digital camera.
[0007]
According to a second aspect of the present invention, the digital camera stores position information for storing a plurality of position information respectively corresponding to a plurality of compositing images stored in the compositing image storage means of the image supply device. Whether the self-position indicated by the storage means and the position information acquired by the position acquisition means coincides with any of the shooting points indicated by the plurality of position information stored in the position information storage means. It is provided with a judging means for judging and a notifying means for notifying the user of the fact when the judging means judges that the self-position is coincident with any of the photographing points.
[0008]
In such a configuration, when the digital camera moves to a place where an image for synthesis is prepared in the image supply device, that is, a shooting place where the composite image can be acquired, it is determined by the determination means, and the notification means notifies the user. Be informed.
[0009]
According to a third aspect of the present invention, there is provided an image supply device wirelessly connected to a digital camera for photographing a subject using an image sensor, and a screen configuration obtained by a predetermined camera angle at a predetermined shooting point A composite image storage means for storing a plurality of composite images corresponding to position information indicating the shooting point and direction information indicating the camera angle; and receiving position information and direction information from the digital camera. Transmitting means for transmitting to the digital camera a composition image stored in the composition image storage means and corresponding to position information and direction information received by the reception means And provided.
[0010]
In such an image supply apparatus, the photographic composition system of claim 1 can be realized by using it.
[0011]
According to a fourth aspect of the present invention, there is provided a digital camera for photographing a subject using an image sensor, wherein position acquisition means for acquiring position information indicating its own position and direction information indicating a camera angle are acquired. A direction acquisition unit, and a screen configuration in which an image of the photographed subject is obtained by a camera angle indicated by the direction information acquired by the direction acquisition unit at a shooting point indicated by the position information acquired by the position acquisition unit. The image forming apparatus includes a combining unit that combines with the combining image and a storage unit that stores the combined image combined by the combining unit.
[0012]
In such a digital camera, an image with different shooting conditions such as a shooting point and a camera angle shot at a predetermined place is synthesized with a synthesis image having a screen configuration obtained under the same conditions, and after the synthesis Store the image.
[0013]
In the invention of claim 5, a composition image having a screen configuration obtained by a predetermined camera angle at a predetermined shooting point is represented by position information indicating the shooting point and direction information indicating the camera angle. A transmission unit that wirelessly transmits the position information acquired by the position acquisition unit and the direction information acquired by the direction acquisition unit to an image supply device that stores a plurality of images corresponding to the position, and the position transmitted by the transmission unit Receiving means for wirelessly receiving a composite image corresponding to information and direction information from the image supply device, and the composite means combines the photographed subject image with the composite image received by the transmission / reception means. It was supposed to be.
[0014]
In such a configuration, the photographic composition system of claim 1 can be realized by using it.
[0015]
In the invention of claim 6, the receiving means receives a plurality of images for synthesis corresponding to the position information and the direction information transmitted by the transmitting means from the image supply device, and receives by the receiving means. Selecting means for selecting a desired combining image from the plurality of combining images, wherein the combining means combines the photographed subject image with the combining image selected by the selecting means; did.
[0016]
In such a configuration, the user can select a composition image to be synthesized with an image photographed by the user.
[0017]
According to a seventh aspect of the present invention, the position information storage means for storing a plurality of position information respectively corresponding to a plurality of composition images stored in the composition image storage means of the image supply device; Determining means for determining whether or not the self-position indicated by the position information acquired by the position acquiring means coincides with any of the photographing points indicated by the plurality of position information stored in the position information storage means; When it is determined by this determination means that the self-position is coincident with any of the photographing points, a notification means for notifying the user to that effect is provided.
[0018]
In such a configuration, when moving to a place where an image for synthesis is prepared in the image supply device at the time of use, that is, a shooting place where a composite image can be acquired, it is determined by the determination means and notified to the user by the notification means. The
[0019]
In the invention of claim 8, the composition image having a screen configuration obtained by a predetermined camera angle at a predetermined shooting point includes position information indicating the shooting point and direction information indicating the camera angle. And a compositing image storage means that stores the captured subject image in the position information acquired by the position acquisition means and the direction information acquired by the direction acquisition means. Correspondingly, it is synthesized with the synthesis image stored in the synthesis image storage means.
[0020]
In such a configuration, images with different shooting conditions such as shooting points and camera angles shot at a predetermined place are combined with a combining image having a screen configuration obtained under the same conditions, and the combined image Can be performed independently.
[0021]
In the invention of claim 9, a plurality of compositing images corresponding to the same position information and direction information are stored in the compositing image storage means, while stored in the compositing image storage means. A plurality of compositing images, and a desired compositing image is selected from a plurality of compositing images corresponding to the position information acquired by the position acquisition unit and the direction information acquired by the direction acquisition unit Selecting means for combining, and the combining means combines the photographed subject image with the combining image selected by the selecting means.
[0022]
In such a configuration, the user can select a composition image to be synthesized with an image photographed by the user.
[0023]
In the invention of claim 10, the self-position indicated by the position information acquired by the position acquisition means is any one of the plurality of position information stored in the composition image storage means. Judgment means for judging whether or not it coincides with the shooting point, and notifying means for notifying the user when the self-position is judged to coincide with any of the shooting points by this judging means It was.
[0024]
In such a configuration, when the digital camera moves to a place where the composite image is recorded in the composite image storage means, that is, a photographing place where the composite image can be acquired, it is determined by the determination means and used by the notification means. Is informed.
[0025]
The invention according to claim 11 further comprises an extracting means for extracting a person part from an actually captured image, wherein the synthesizing means synthesizes the person part extracted by the extracting means with the image for synthesis. To do.
[0026]
In such a configuration, it is possible to obtain a composite image in which the person portion of the captured image is combined with the composite image.
[0027]
In the invention of claim 12, the storage means stores an image of a subject photographed together with the composite image.
[0028]
In such a configuration, it is possible to obtain both an image actually taken by a single shooting operation and a combined image.
[0029]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a diagram showing a configuration of a photographic composition system according to the present embodiment. This system is used for a photo composition service performed in a specific place such as a tourist spot or a theme park, and includes an image supply server 1 connected to a telephone network 100 and a wireless base station 101 such as a PHS or a mobile phone. And one or a plurality of digital cameras 2 connected to the telephone network 100 and capable of wireless data communication with the image supply server 1. The image supply server 1 is managed by an operator of the service. The digital camera 2 is lent to a service user, and can receive his / her current location by receiving radio waves from the GPS satellites 102 (actually four or more).
[0030]
・ Configuration of image supply server
FIG. 2 is a block diagram showing a schematic configuration of the image supply server 1. The image supply server 1 includes a control unit 11 that controls the entire apparatus, an input unit 12 that includes a keyboard and a mouse, a display unit 13 that includes a display device such as a CRT and an LCD, and a communication unit 14. The communication unit 14 is a transmission unit and a reception unit of the present invention, and transmits and receives various data mainly to and from the digital camera 2 via the telephone network 100. The control unit 11 includes a CPU, a working memory, and the like. The control unit 11 controls the above-described units and performs processing such as transfer, calculation, and temporary storage of various data. The input unit 12 and the display unit 13 are interfaces used when inputting / outputting and maintaining various data with respect to the image supply server 1. In addition, the image supply server 1 includes a program data storage unit 15 and a composition image database 16 each of which is constituted by a storage unit such as a hard disk or a magneto-optical disk. The program data storage unit 15 stores a control program for causing the control unit 11 to execute processing necessary for an operation described later in the image supply server 1.
[0031]
The compositing image database 16 constitutes the compositing image storage means of the present invention. As shown in FIG. 3, the compositing image database 16 is provided in advance at a plurality of locations in the target area of the photo compositing service (tourist spot, theme park, etc.). It is composed of a spot number 160a indicating a plurality of shooting spots, latitude / longitude data 160b which is position information indicating the position of each shooting spot (registered spot), and a plurality of direction data 160c and image data 160d corresponding thereto. ing. The direction data 160c is direction information indicating the camera angle. The shooting direction of the camera at the registration point indicated by the latitude / longitude data 160b is, for example, 4 directions, 8 directions, 16 such as “east” and “north-northeast”. It is data indicated by the direction. The image data 160d is image data for composition having a screen configuration obtained by the shooting direction indicated by the direction data 160c, that is, the camera angle at the corresponding registration point. Examples of composite images include past and future images created in advance by computer graphics, images taken in various weather, time, and season, and computer graphics for theme parks. This is an image showing a costume (a person dressed up as a character, etc.) that has been synthesized by an image or actually photographed. FIG. 3 shows a case where the number of the direction data 160c and the corresponding image data 160d is the same at each registration point, but the number of the direction data 160c and the image data 160d is different for each registration point. Alternatively, a plurality of image data 160d may be stored corresponding to the direction data 160c.
[0032]
・ Configuration of digital camera
FIG. 4 is a block diagram showing a schematic configuration of the digital camera 2. The digital camera 2 includes a CCD 21 that converts an optical image of a photographed subject into an imaging signal, and a DSP / CPU 22. The DSP / CPU 22 is a one-chip microcomputer that has a digital signal processing function and controls each part of the digital camera 2. The DSP / CPU 22 is connected to a TG (Timing Generator) 23 that drives the CCD 21, and the TG 23 is connected to a unit circuit 24 to which an analog imaging signal output from the CCD 21 is input. The unit circuit 24 includes a CDS that holds an input imaging signal, a gain adjustment amplifier (AGC) that amplifies the imaging signal, and an A / D converter (AD) that converts the amplified imaging signal into a digital imaging signal. The output signal of the CCD 21 is sent to the DSP / CPU 22 as a digital signal through the unit circuit 24.
[0033]
The DSP / CPU 22 is connected to a display device 25, a key input unit 26, an alarm unit 27, a communication unit 28, a GPS module 29, and a direction sensor 30, and a DRAM 32 and a built-in flash memory 33 via an address / data bus 31. The external flash memory 34 and the I / O port 35 are connected. The DRAM 32 temporarily stores image data of a subject imaged and digitized by the CCD 21 when the shooting standby mode is set, and functions as a working memory of the DSP / CPU 22. The built-in flash memory 33 stores an operation program for the DSP / CPU 22 and various data used for controlling each unit. The DSP / CPU 22 functions as the synthesizing unit, the determining unit, and the extracting unit of the present invention by operating according to the operation program.
[0034]
The external flash memory 34 is a recording medium (such as a memory card) that can be attached to and detached from the apparatus main body and functions as a storage unit of the present invention. The external flash memory 34 is acquired in the external flash memory 34 when a shooting operation is performed by pressing a shutter key. Image data for one frame (one screen) compressed in the JPEG format or the like by the DSP / CPU 22 is recorded. Further, the external flash memory 34 functions as the position information storage means of the present invention. Prior to the use of the digital camera 2, the latitude / longitude data stored in the image database 16 for synthesis of the image supply server 1 described above is used. 160b is stored in advance. The I / O port 35 is an interface for inputting / outputting image data converted into a serial signal by the DSP / CPU 22, and externally connects the image data (JPEG format image file) stored in the external flash memory 34 by cable connection. Used when outputting to equipment.
[0035]
The display device 25 includes a color LCD and its drive circuit, and displays image data of a subject imaged and digitized by the CCD 21 and a composite image to be described later when the shooting standby mode is set, and an external flash memory 34 when the playback mode is set. The image data read from and decompressed is displayed. The key input unit 26 includes a shutter key, a plurality of operation keys, a power key, and the like, and outputs a key input signal corresponding to the operation of each key to the DSP / CPU 22. The alarm unit 27 is a notification unit of the present invention, and generates a notification sound as required by a command from the DSP / CPU 22. The communication unit 28 is a transmission unit and a reception unit of the present invention having an antenna 36, performs data communication processing with the image supply server 1 as will be described later, and transmits data received from the image supply server 1 to the DSP / Send to CPU22. The GPS module 29 is a position acquisition means of the present invention having a GPS antenna 37. The GPS module 29 demodulates and decodes the L1 band C / A code (GPS data) from the satellite received from the GPS satellite 102, and calculates the latitude / The longitude is calculated, and the calculated latitude / longitude information is sent to the DSP / CPU 22. The direction sensor 30 is a direction acquisition unit of the present invention, measures which direction (direction) the lens of the camera body is facing, and sends the measurement result to the DSP / CPU 22.
[0036]
Next, the operation of the present embodiment configured as described above will be described by taking as an example a case where it is used for a photo composition service in a specific sightseeing spot. Here, the content of the photo composition service in the present embodiment is that the digital camera 2 is lent out to the user, and when it is collected, the image recorded in the digital camera 2 is displayed according to the user's request. It is assumed that it is printed or outputted as image data to a recording medium and provided to the user.
[0037]
First, the digital camera 2 is lent to a user of the photo composition service in a state where the location registration for storing the latitude / longitude data 160b described above is stored in the external flash memory 34 is performed. The lent digital camera 2 starts the standby process shown in FIG. 5 when the power is turned on, sequentially measures the position by the GPS module 29 (step SA1), and the measured self position is indicated by the latitude / longitude data 160b. It is determined whether or not it is within a certain distance from the registration point (step SA2). When the self-position reaches within a certain distance from the registered point (YES in step SA2), a notification sound is generated from the alarm unit 27 to inform the user that the point is a point where the photo composition service can be performed. (Step SA3). Thus, the user can surely know the point where the photo composition service can be received. Then, it is determined whether or not the shooting standby mode has been set by the user (step SA4). If the shooting standby mode has not been set, the above processing is repeated and used at any registered point (or in the vicinity thereof) during that time. When the user sets the shooting standby mode (YES in step SA4), the shooting process is executed (step SA5), and the process returns to step SA1.
[0038]
In the photographing process, as shown in FIG. 6, a through image is displayed on the display device 25 (step SB1), and during that time, if the shutter key is pressed halfway for a predetermined time (for example, 3 seconds) (step SB2). In step SB3), the subject image is captured by the CCD 21 and temporarily stored in the DRAM 32 (step SB3), and then the orientation (photographing direction) of the camera body at that time is measured by the direction sensor 30 (step SB4). Subsequently, the image supply server 1 is accessed and the measured shooting direction data and the latitude / longitude data of the self-position measured at that time are transmitted (step SB5), and the image corresponding to these data is transmitted. Data is downloaded from the image supply server 1 and temporarily stored in the external flash memory 34 (step SB6).
[0039]
FIG. 7 is a flowchart showing image supply processing on the image supply server 1 side corresponding to the above operation of the digital camera. When the image supply server 1 is accessed from the digital camera 2 (YES in step SC1), the image supply server 1 receives the sent latitude / longitude data and shooting direction data (step SC2), and then images corresponding to those data. Data 160d is searched in the composition image database 16 (step SC3), and the plurality of searched image data 160d are read out and transmitted to the digital camera 2.
[0040]
On the other hand, when the download of the image data 160d is completed, the digital camera 2 extracts a person part from the image displayed as a through image by a known method such as image recognition processing (step SB7), and the image data of the person part is obtained in step SB6. Is combined with the downloaded image data, specifically, the image with the person portion downloaded to the front is combined (step SB8), and the combined image is displayed on the display device 25 (step SB9). In this state, if there is a predetermined switching operation by the user (YES in step SB10), the image of the person portion extracted in step SB7 is combined with the other downloaded images each time (step SB11). The composite image is displayed on the display device 25 (step SB9).
[0041]
Then, a desired composite image is displayed on the display device 25 by the user, and when the shutter key is fully pressed in that state (step SB12), the composite image being displayed and the image stored in step SB3 are stored. Both the image and the image are recorded in the external flash memory 34 (step SB13). At that time, all the image data 160d downloaded from the image supply server 1 and recorded in the external flash memory 34 is deleted, and the photographing process is terminated.
[0042]
Thereafter, the digital camera 2 is collected by the photo composition service provider, and all images recorded in the external flash memory 34 at that time are printed or output to a recording medium as image data to the user. Provided.
[0043]
Here, the composite image provided to the user in the present embodiment is an image taken by a digital camera at a preset registration point and having different shooting conditions such as a shooting point and a camera angle. And a composite image having a screen configuration obtained under the above conditions. Therefore, by using the above-described photo composition system, it is possible to provide a variety of composite photographs at the same time as having a high personality as a photograph. In this embodiment, only the case of obtaining a composite photo in which only the background of the photographed person is changed has been described. However, in addition to this, if the above-described system is used, for example, in a theme park or the like, It is also possible to provide a composite photograph in which a costume that has not existed at the time of photographing is combined with a photographed landscape, that is, a composite photograph with an actually photographed image as a background.
[0044]
In addition, it is possible to reliably notify a registered user of a registration point (a point where an image for composition is prepared) at which the user can receive a photo composition service. It is easy to use because it is possible to select a composition image by yourself. In this regard, it is possible to select a plurality of composition images to be used as a background, and when the shutter key is fully pressed, the plurality of composition images selected and the image of the person part are combined and photographed. Only a plurality of synthesized images may be recorded together with the images. Further, in the above-described shooting process, when the process for causing the user to select a composite image is eliminated and the shutter key is fully pressed, the image of the person portion is automatically combined with all the composite images received by the digital camera 2. The synthesized images may be recorded in the external flash memory 34, and the user may be allowed to select a desired synthesized image when the recorded synthesized image is finally provided to the user. Further, in the present embodiment, both an image actually captured by a single shooting operation (captured image) and a combined image can be obtained, which is also convenient for use.
[0045]
In the present embodiment, the image supply server 1 and the digital camera 2 transmit and receive latitude / longitude data and image data via the wireless base station 101 and the telephone network 100. It is good also as a structure which transmits / receives.
[0046]
Further, the position of the registration point where the composition image is prepared in the image supply server 1 is specified by latitude / longitude, but it may be specified by position information other than the latitude / longitude. . For example, a transmitter that wirelessly transmits the above-described spot number 160a within a specific range is installed at each registered spot, and the digital camera 2 is provided with a receiving unit that receives the spot number 160a as the position acquisition unit of the present invention. Keep it. The digital camera 2 may transmit the spot number 160a to the image supply server 1, and the image supply server 1 may transmit the image data 160d corresponding to the received spot number 160a to the digital camera 2. In this case, the position registration work for storing the latitude / longitude data 160b in the digital camera 2 in advance is not necessary. In addition, if the digital camera 2 generates a notification sound when the spot number 160a is received, the spot where the user can receive the photo composition service is surely notified as in the present embodiment. Can do. Furthermore, although the convenience for the user is reduced, a label or the like indicating the spot number may be provided around the registration spot so that the user can manually input the spot number.
[0047]
In the present embodiment, the photographic composition system in which the digital camera 2 is mainly supplied with the composition image from the image supply server 1 has been described. For example, the composition image of the present invention is stored in the external flash memory 34 of the digital camera 2. As a storage means, the composition image database 16 shown in FIG. 3 is secured, and in the above-described photographing process, image data 160d corresponding to position information such as latitude and longitude at each registered point is read and used. May be. In that case, the same photo composition service as that of the present embodiment can be implemented at low cost using only the digital camera 2.
[0048]
Further, in the present embodiment, a system has been described in which an image recorded in the external flash memory 34 is printed or output to a recording medium and provided to the user when the digital camera 2 is finally collected. Separately, the digital camera 2 is caused to transfer the image (and the actually captured image) synthesized by the above-described procedure to the image supply server 1 and store them in the image supply server 1 so that the user can If necessary, the system may be a system in which a synthesized image or the like is printed and purchased at a predetermined store equipped with a printing device accessible to the image supply server 1.
[0049]
【The invention's effect】
As described above, in the photo compositing system according to claim 1, the screen configuration is obtained under the same conditions as the images obtained by the digital camera at a predetermined location and having different shooting conditions such as shooting points and camera angles. And the synthesized image is stored in the digital camera. Therefore, it is possible to obtain a variety of composite photographs having a high personality as a photograph.
[0050]
In the photographic composition system according to the second aspect, when the digital camera moves to a place where a composition image is prepared, that is, a photographing place where a composite image can be obtained, this is notified to the user. Therefore, it is possible to reliably notify the user of the shooting location where the composite image can be acquired, and usability is improved.
[0051]
In the image supply apparatus according to the third aspect, the photographic composition system according to the first aspect can be realized by using the image supply apparatus.
[0052]
According to a fourth aspect of the present invention, an image having different shooting conditions such as a shooting point and a camera angle shot at a predetermined place is combined with a composition image having a screen configuration obtained under the same conditions. Then, the synthesized image is stored. Therefore, it is possible to obtain a variety of composite photographs having a high personality as a photograph.
[0053]
Further, in the digital camera according to claim 5, by using it, the photo composition system according to claim 1 can be realized.
[0054]
According to another aspect of the present invention, the user can select a composite image to be combined with an image photographed by the user. Therefore, it is possible to obtain more various composite photographs.
[0055]
In the digital camera according to the seventh aspect, the user is informed when the user moves to a place where a composite image is prepared, that is, a photographing place where a composite image can be acquired. Therefore, it is possible to reliably notify the user of the shooting location where the composite image can be acquired, and usability is improved.
[0056]
Further, in the digital camera according to claim 8, an image having different shooting conditions such as a shooting point and a camera angle shot at a predetermined place is combined with a combining image having a screen configuration obtained under the same conditions. Thus, the operation of storing the combined image can be performed independently. Therefore, it is possible not only to obtain a variety of composite photographs having a high personality as a photograph, but also to realize it at a low cost.
[0057]
According to another aspect of the present invention, the user can select a composite image to be combined with an image photographed by the user. Therefore, it is possible to obtain more various composite photographs.
[0058]
In the digital camera according to the tenth aspect, when moving to a shooting location where a composite image can be acquired, it is determined by the determining means, and is notified to the user by the notifying means. Therefore, it is possible to reliably notify the user of the shooting location where the composite image can be acquired, and usability is improved.
[0059]
In the digital camera according to the eleventh aspect, it is possible to obtain a composite image in which the person portion of the actually captured image is combined with the composite image. Therefore, it is possible to obtain a composite photo in which only the background of the person photographed by the user is changed.
[0060]
In the digital camera according to the twelfth aspect, it is possible to obtain both an image actually taken by one shooting operation and an image after the synthesis. This also improves usability.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration of a photographic composition system showing an embodiment of the present invention.
FIG. 2 is a block diagram illustrating a schematic configuration of an image supply server.
FIG. 3 is a schematic diagram showing a configuration of a composition image database.
FIG. 4 is a block diagram illustrating a schematic configuration of a digital camera.
FIG. 5 is a flowchart illustrating an operation related to standby processing in the digital camera.
FIG. 6 is a flowchart showing operations related to photographing processing in the digital camera.
FIG. 7 is a flowchart illustrating an operation related to an image supply process in the image supply server.
[Explanation of symbols]
1 Image supply server
11 Control unit
14 Communication Department
15 Program data storage
16 Image database for composition
2 Digital camera
21 CCD
22 DSP / CPU
26 Key input section
27 Alarm
28 Communication Department
29 GPS module
30 Direction sensor
34 External flash memory
100 telephone network
101 wireless base station
102 GPS satellite
160a Point number
160b Longitude data
160c direction data
160d image data

Claims (12)

撮像素子を用いて被写体を撮影するデジタルカメラと、このデジタルカメラと無線により接続される画像供給装置とからなる写真合成システムであって、
前記デジタルカメラは、
自己位置を示す位置情報を取得する位置取得手段と、
カメラアングルを示す方向情報を取得する方向取得手段と、
前記位置取得手段により取得された位置情報と前記方向取得手段により取得された方向情報とを前記画像供給装置に送信する送信手段と、
前記画像供給装置から所定の合成用画像を受信する受信手段と、
撮影した被写体の画像を、前記受信手段により受信した合成用画像と合成する合成手段と、
この合成手段により合成された合成画像を記憶する記憶手段と
を備え、
前記画像供給装置は、
所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像を、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応させて複数記憶する合成用画像記憶手段と、
前記デジタルカメラから位置情報と方向情報とを受信する受信手段と、
前記合成用画像記憶手段に記憶されている合成用画像であって、前記受信手段により受信した位置情報と方向情報とに対応する合成用画像を前記デジタルカメラへ送信する送信手段とを備えた
ことを特徴とする写真合成システム。
A photo composition system comprising a digital camera for photographing a subject using an image sensor and an image supply device connected to the digital camera wirelessly,
The digital camera is
Position acquisition means for acquiring position information indicating the self position;
Direction acquisition means for acquiring direction information indicating the camera angle;
Transmission means for transmitting the position information acquired by the position acquisition means and the direction information acquired by the direction acquisition means to the image supply device;
Receiving means for receiving a predetermined composition image from the image supply device;
Synthesizing means for synthesizing the photographed subject image with the synthesis image received by the receiving means;
Storage means for storing the composite image synthesized by the synthesis means,
The image supply device includes:
Combining image storage means for storing a plurality of compositing images having a screen configuration obtained by a predetermined camera angle at a predetermined shooting point in correspondence with position information indicating the shooting point and direction information indicating the camera angle. When,
Receiving means for receiving position information and direction information from the digital camera;
A transmission unit configured to transmit to the digital camera a synthesis image stored in the synthesis image storage unit and corresponding to the position information and the direction information received by the reception unit. This is a photo composition system.
前記デジタルカメラは、
前記画像供給装置の合成用画像記憶手段に記憶されている複数の合成用画像にそれぞれ対応する複数の位置情報を記憶する位置情報記憶手段と、
前記位置取得手段により取得された位置情報により示される自己位置が、前記位置情報記憶手段に記憶されている複数の位置情報により示されるいずれかの撮影地点と一致するか否かを判断する判断手段と、
この判断手段により自己位置がいずれかの撮影地点と一致すると判断されたとき、その旨を使用者に報知する報知手段と
を備えたことを特徴とする請求項1記載の写真合成システム。
The digital camera is
Position information storage means for storing a plurality of position information respectively corresponding to a plurality of composition images stored in the composition image storage means of the image supply device;
Judgment means for judging whether or not the self position indicated by the position information acquired by the position acquisition means coincides with any one of the photographing points indicated by the plurality of position information stored in the position information storage means. When,
2. The photographic composition system according to claim 1, further comprising notifying means for notifying the user when the self-position is determined to be coincident with any of the photographing points by the determining means.
撮像素子を用いて被写体を撮影するデジタルカメラと無線により接続される画像供給装置であって、
所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像を、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応させて複数記憶する合成用画像記憶手段と、
前記デジタルカメラから位置情報と方向情報とを受信する受信手段と、
前記合成用画像記憶手段に記憶されている合成用画像であって、前記受信手段により受信した位置情報と方向情報とに対応する合成用画像を前記デジタルカメラへ送信する送信手段と
を備えたことを特徴とする画像供給装置。
An image supply device wirelessly connected to a digital camera that captures an object using an image sensor,
Combining image storage means for storing a plurality of compositing images having a screen configuration obtained by a predetermined camera angle at a predetermined shooting point in correspondence with position information indicating the shooting point and direction information indicating the camera angle. When,
Receiving means for receiving position information and direction information from the digital camera;
A transmission unit configured to transmit to the digital camera a synthesis image stored in the synthesis image storage unit and corresponding to the position information and the direction information received by the reception unit. An image supply device.
撮像素子を用いて被写体を撮影するデジタルカメラであって、
自己位置を示す位置情報を取得する位置取得手段と、
カメラアングルを示す方向情報を取得する方向取得手段と、
撮影した被写体の画像を、前記位置取得手段により取得された位置情報が示す撮影地点にて前記方向取得手段により取得された方向情報が示すカメラアングルにより得られる画面構成を備えた合成用画像と合成する合成手段と、
この合成手段により合成された合成画像を記憶する記憶手段と
を備えたことを特徴とするデジタルカメラ。
A digital camera for photographing a subject using an image sensor,
Position acquisition means for acquiring position information indicating the self position;
Direction acquisition means for acquiring direction information indicating the camera angle;
The photographed subject image is synthesized with a composition image having a screen configuration obtained by the camera angle indicated by the direction information acquired by the direction acquisition means at the photographing point indicated by the position information acquired by the position acquisition means. A synthesis means to
A digital camera comprising storage means for storing a composite image synthesized by the synthesis means.
所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像を、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応させて複数記憶する画像供給装置に、前記位置取得手段により取得された位置情報と前記方向取得手段により取得された方向情報とを無線により送信する送信手段と、
この送信手段により送信した位置情報と方向情報とに対応する合成用画像を前記画像供給装置から無線により受信する受信手段とを備え、
前記合成手段は、撮影した被写体の画像を前記送受信手段により受信した合成用画像と合成することを特徴とする請求項4記載のデジタルカメラ。
In an image supply device that stores a plurality of compositing images having a screen configuration obtained by a predetermined camera angle at a predetermined shooting point in correspondence with position information indicating the shooting point and direction information indicating the camera angle, Transmitting means for wirelessly transmitting the position information acquired by the position acquisition means and the direction information acquired by the direction acquisition means;
Receiving means for wirelessly receiving an image for synthesis corresponding to the position information and direction information transmitted by the transmitting means from the image supply device;
5. The digital camera according to claim 4, wherein the synthesizing unit synthesizes the photographed subject image with the synthesizing image received by the transmitting / receiving unit.
前記受信手段は前記送信手段により送信した位置情報と方向情報とに対応する合成用画像を前記画像供給装置から複数受信する一方、前記受信手段により受信された複数の合成用画像の中から所望の合成用画像を選択する選択手段をさらに備え、前記合成手段は、撮影した被写体の画像を前記選択手段により選択された合成用画像と合成することを特徴とする請求項5記載のデジタルカメラ。The receiving unit receives a plurality of compositing images corresponding to the position information and the direction information transmitted by the transmitting unit from the image supply device, and selects a desired image from the plurality of compositing images received by the receiving unit. 6. The digital camera according to claim 5, further comprising selection means for selecting a synthesis image, wherein the synthesis means synthesizes the photographed subject image with the synthesis image selected by the selection means. 前記画像供給装置の合成用画像記憶手段に記憶されている複数の合成用画像にそれぞれ対応する複数の位置情報を記憶する位置情報記憶手段と、
前記位置取得手段により取得された位置情報により示される自己位置が、前記位置情報記憶手段に記憶されている複数の位置情報により示されるいずれかの撮影地点と一致するか否かを判断する判断手段と、
この判断手段により自己位置がいずれかの撮影地点と一致すると判断されたとき、その旨を使用者に報知する報知手段と
を備えたことを特徴とする請求項5又は6記載のデジタルカメラ。
Position information storage means for storing a plurality of position information respectively corresponding to a plurality of composition images stored in the composition image storage means of the image supply device;
Judgment means for judging whether or not the self position indicated by the position information acquired by the position acquisition means coincides with any one of the photographing points indicated by the plurality of position information stored in the position information storage means. When,
7. The digital camera according to claim 5, further comprising a notifying means for notifying a user of the fact that the determining means determines that the self position coincides with any of the photographing points.
所定の撮影地点で所定のカメラアングルにより得られる画面構成を備えた合成用画像が、前記撮影地点を示す位置情報と前記カメラアングルを示す方向情報とに対応して記憶されている合成用画像記憶手段を備え、前記合成手段は、撮影した被写体の画像を、前記位置取得手段により取得された位置情報および前記方向取得手段により取得された方向情報に対応して前記合成用画像記憶手段に記憶されている合成用画像と合成することを特徴とする請求項4記載のデジタルカメラ。A compositing image storage in which a compositing image having a screen configuration obtained by a predetermined camera angle at a predetermined photographing point is stored corresponding to position information indicating the photographing point and direction information indicating the camera angle. And the synthesizing unit stores the photographed subject image in the synthesizing image storage unit in correspondence with the position information acquired by the position acquiring unit and the direction information acquired by the direction acquiring unit. The digital camera according to claim 4, wherein the digital camera is combined with the combining image. 前記合成用画像記憶手段には同一の位置情報および方向情報に対応する複数の合成用画像が記憶される一方、前記合成用画像記憶手段に記憶されている複数の合成用画像であって、前記位置取得手段により取得された位置情報および前記方向取得手段により取得された方向情報に対応する複数の合成用画像の中から所望の合成用画像を選択する選択手段をさらに備え、前記合成手段は、撮影した被写体の画像を、前記選択手段により選択された合成用画像と合成することを特徴とする請求項8記載のデジタルカメラ。The composition image storage means stores a plurality of composition images corresponding to the same position information and direction information, and a plurality of composition images stored in the composition image storage means, A selecting unit that selects a desired combining image from a plurality of combining images corresponding to the position information acquired by the position acquiring unit and the direction information acquired by the direction acquiring unit; 9. The digital camera according to claim 8, wherein the photographed subject image is synthesized with the synthesis image selected by the selection means. 前記位置取得手段により取得された位置情報により示される自己位置が、前記合成用画像記憶手段に記憶されている複数の位置情報により示されるいずれかの撮影地点と一致するか否かを判断する判断手段と、
この判断手段により自己位置がいずれかの撮影地点と一致すると判断されたとき、その旨を使用者に報知する報知手段と
を備えたことを特徴とする請求項8又は9記載のデジタルカメラ。
Judgment to determine whether or not the self-position indicated by the position information acquired by the position acquisition means coincides with any one of the photographing points indicated by the plurality of position information stored in the composition image storage means Means,
10. The digital camera according to claim 8, further comprising a notifying unit for notifying a user of the fact that the determining unit determines that the self position coincides with any of the photographing points.
撮影した被写体の画像から人物部分を抽出する抽出手段をさらに備え、前記合成手段は、前記抽出手段により抽出された人物部分を前記合成用画像と合成することを特徴とする請求項4〜10のいずれか1項に記載のデジタルカメラ。11. The apparatus according to claim 4, further comprising extraction means for extracting a human part from a photographed subject image, wherein the synthesizing means synthesizes the human part extracted by the extraction means with the image for synthesis. The digital camera according to any one of the above. 前記記憶手段は、前記合成画像と共に撮影した被写体の画像を記憶することを特徴とする請求項4〜11のいずれか1項に記載のデジタルカメラ。The digital camera according to claim 4, wherein the storage unit stores an image of a subject photographed together with the composite image.
JP2002046603A 2002-02-22 2002-02-22 Photo composition system, image supply device, digital camera Expired - Fee Related JP3997796B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002046603A JP3997796B2 (en) 2002-02-22 2002-02-22 Photo composition system, image supply device, digital camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002046603A JP3997796B2 (en) 2002-02-22 2002-02-22 Photo composition system, image supply device, digital camera

Publications (2)

Publication Number Publication Date
JP2003250082A JP2003250082A (en) 2003-09-05
JP3997796B2 true JP3997796B2 (en) 2007-10-24

Family

ID=28659948

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002046603A Expired - Fee Related JP3997796B2 (en) 2002-02-22 2002-02-22 Photo composition system, image supply device, digital camera

Country Status (1)

Country Link
JP (1) JP3997796B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005286496A (en) * 2004-03-29 2005-10-13 Fujitsu Ltd Image processing method, image processing program, and image processing apparatus
US20050278749A1 (en) * 2004-05-14 2005-12-15 Ewert Joerg C System and method for automatic modification of multimedia messages
JP4679443B2 (en) * 2006-06-09 2011-04-27 ヤフー株式会社 Method, server and program for transmitting background data
JP6738209B2 (en) * 2016-06-08 2020-08-12 シャープ株式会社 Image processing apparatus, image processing system, image processing method, and program

Also Published As

Publication number Publication date
JP2003250082A (en) 2003-09-05

Similar Documents

Publication Publication Date Title
US6359837B1 (en) Camera, camera system, information recording system, timepiece, and link system for camera and timepiece
KR100518743B1 (en) Digital camera and photographing direction acquisition method
JP4240739B2 (en) Electronic camera and information acquisition system
KR100506725B1 (en) Shooting Condition providing Apparatus, Shooting Condition Setting System And Shooting Condition providing Method
US6957040B1 (en) Image communication system
US7477295B2 (en) System and method of photography using digital camera capable of detecting information on a photographed site
US8170411B2 (en) System and method for inputting position information in captured image
JP4240619B2 (en) Camera, image recording method, and additional information recording system
JP2010011410A (en) Imaging apparatus, imaging system and game machine
JP2001274936A (en) Image data transmission system and image pickup data transmission method
JP3997796B2 (en) Photo composition system, image supply device, digital camera
JP2005065235A (en) Composite equipment, power supply method, operation controlling method, and power supply program
JP2010176287A (en) Portable equipment, method for controlling portable equipment, and program for controlling portable equipment
JP2002009879A (en) Wearable network system
JP4602634B2 (en) Camera device and position information recording method
JP4399121B2 (en) Imaging system
JP2004214920A (en) Imaging device, server, and printer device
JP2000196987A (en) Portable information terminal
JP4202546B2 (en) Imaging apparatus and method
JP2001103409A (en) Camera, camera system, wrist watch and link system for the camera and the wrist watch
JPH11308588A (en) Transmission system for image data
KR100806395B1 (en) Image recording apparatus capable of recoding image and position information
JP3498082B2 (en) Mobile terminal
JP3795416B2 (en) Digital camera
JP2001103359A (en) Communication unit, image pickup device, communication system, communication method and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070705

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070717

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070730

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100817

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100817

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110817

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120817

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120817

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130817

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees