JP2004336476A - Apparatus and method for processing information, remote photographing system, and program - Google Patents

Apparatus and method for processing information, remote photographing system, and program Download PDF

Info

Publication number
JP2004336476A
JP2004336476A JP2003130513A JP2003130513A JP2004336476A JP 2004336476 A JP2004336476 A JP 2004336476A JP 2003130513 A JP2003130513 A JP 2003130513A JP 2003130513 A JP2003130513 A JP 2003130513A JP 2004336476 A JP2004336476 A JP 2004336476A
Authority
JP
Japan
Prior art keywords
image
information processing
information
user
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2003130513A
Other languages
Japanese (ja)
Inventor
Eriko Matsumura
衣里子 松村
Takashi Kuwayama
高史 桑山
Hiroshi Hasegawa
寛 長谷川
Tsukuru Yamada
作 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003130513A priority Critical patent/JP2004336476A/en
Publication of JP2004336476A publication Critical patent/JP2004336476A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To detect an end part of a pan tilt range and to notify the user of it. <P>SOLUTION: A command based on a user's operation input is supplied in a step S151 and, when it is decided that the operation input is either pan or tilt in a step S152, a timer starts counting. When it is decided in a step S154 that a specified time has passed, a status is acquired in a step S155. In a step S156, it is decided whether a screen has been moved in a direction in which the user's operation input indicates by referring to the acquired status. That is, when the status acquired in a state that the pan in a right direction is instructed indicates a state that the pan stops, it is detected that a photographing position is at an end part within a specified range where photographing is possible, and hence in a step S157, display processing for notifying a user that the position is at the end of the range where photographing is possible is performed. The present invention is applicable to a personal computer. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、情報処理装置および情報処理方法、遠隔撮影システム、並びにプログラムに関し、特に、遠隔地にある撮影装置を遠隔地に居ながらにして操作し、撮影させるときに用いて好適な、情報処理装置および情報処理方法、遠隔撮影システム、並びにプログラムに関する。
【０００２】
【従来の技術】
遠隔操作によりデジタルスチルカメラまたはデジタルビデオカメラを操作して、画像を撮影する技術が一般に普及しつつある。
【０００３】
従来、遠隔地に備えられているカメラであって、撮影される画像の向きを、横方向および縦方向に移動（パンおよびチルト）することができるカメラによって撮影されている画像がコンピュータに転送される場合に、撮影可能な範囲のパノラマ画像を用いて、そのカメラによる撮影範囲、すなわち、パンまたはチルト可能な範囲をユーザに通知するようになされているものがある（例えば、特許文献１参照）。
【０００４】
例えば、特許文献１参照に記載の発明においては、カメラから、撮影範囲内の複数の画像がコンピュータに伝送され、コンピュータにより、供給された複数の画像が合成されて、撮影可能な範囲のパノラマ画像が生成され、表示されるとともに、表示されたパノラマ画像上に、現在カメラによって撮影されている画枠や、パンチルタ操作（パンおよびチルト操作とも称する）を行うことが可能な範囲が示される。ユーザは、パノラマ画像の表示を参照して、パンチルタ操作の指示を行い、所望の画像を撮影することができる。
【０００５】
【特許文献１】
特開平１１−８８４４号公報（第４−５頁、図１、図４）
【０００６】
【発明が解決しようとする課題】
しかしながら、遠隔地からカメラを操作し、撮影させる場合に、撮影可能な範囲のパノラマ画像を用いて、そのカメラによる撮影範囲、すなわち、パンまたはチルト可能な範囲をユーザに通知するようにした場合、パノラマ画像を生成するための複雑な処理が必要であった。また、撮影された画像以外にパノラマ画像を表示させる必要があるため、撮影された画像の表示面積が狭くなってしまい、ユーザが、撮影する画像を充分に確認できなくなってしまうという問題が発生してしまう。
【０００７】
本発明はこのような状況に鑑みてなされたものであり、遠隔地にある撮影装置を遠隔地に居ながらにして操作し、撮影させる場合において、複雑な処理を行うことなく、ユーザに、撮影可能範囲の限界（撮影可能範囲の端部）であることを分かりやすく通知することができるようにするものである。
【０００８】
【課題を解決するための手段】
本発明の情報処理装置は、他の情報処理装置と通信し、情報の送受信を行う送受信手段と、ユーザの操作入力を受ける操作入力手段と、他の情報処理装置から送信され、送受信手段によって受信された画像情報を表示する表示手段と、他の情報処理装置の状態に関する情報を基に、表示手段により表示された画像の撮影位置が、所定の範囲の端部であることを検出する検出手段とを備え、表示手段により表示された画像情報は、操作入力手段により入力されたユーザの操作入力に対応し、送受信手段により送信された制御信号を受信した他の情報処理装置により、制御信号を基に画像の撮影方向が制御されて撮影された画像情報であることを特徴とする。
【０００９】
表示手段には、検出手段により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する情報を更に表示させるようにすることができる。
【００１０】
表示手段には、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力を行うためのボタンを更に表示させるようにすることができ、検出手段により所定の範囲の端部であることが検出された場合、ボタンを点滅させて表示させるようにすることができる。
【００１１】
表示手段には、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力を行うためのボタンを更に表示させるようにすることができ、検出手段により所定の範囲の端部であることが検出された場合、ボタンの表示色を変更させて表示させるようにすることができる。
【００１２】
表示手段には、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力を行うためのカーソルを更に表示させるようにすることができ、検出手段により所定の範囲の端部であることが検出された場合、カーソルを点滅させて表示させるようにすることができる。
【００１３】
表示手段には、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力を行うためのカーソルを更に表示させるようにすることができ、検出手段により所定の範囲の端部であることが検出された場合、カーソルの表示色を変更させて表示させるようにすることができる。
【００１４】
表示手段には、検出手段により所定の範囲の端部であることが検出された場合、所定の範囲の端部であることが検出されたことをユーザに通知するためのメッセージを更に表示させるようにすることができる。
【００１５】
音声出力を行う音声出力手段を更に備えさせるようにすることができ、音声出力手段には、検出手段により所定の範囲の端部であることが検出された場合、所定の範囲の端部であることが検出されたことをユーザに通知するための音声を出力させるようにすることができる。
【００１６】
情報処理装置を振動させるための駆動手段を更に備えさせるようにすることができ、駆動手段には、検出手段により所定の範囲の端部であることが検出された場合、所定の範囲の端部であることが検出されたことをユーザに通知するために、情報処理装置を振動させるようにすることができる。
【００１７】
他の情報処理装置の状態に関する情報には、他の情報処理装置が撮影する画像情報の撮影位置が所定の方向に変更されているか否かを示す情報を含ませるようにすることができ、検出手段には、他の情報処理装置の状態に関する情報を基に、画像情報の撮影位置が所定の方向に変更されていないことを検出した場合、所定の範囲の端部であることを検出させるようにすることができる。
【００１８】
本発明の情報処理方法は、他の情報処理装置により撮影された画像の受信を制御する受信制御ステップと、受信制御ステップの処理により受信が制御された画像の表示を制御する表示制御ステップと、ユーザの操作入力に対応する制御信号の送信を制御する送信制御ステップと、ユーザの操作入力が、所定の操作を指令する操作入力であった場合、他の情報処理装置の状態に関する情報を取得する取得ステップと、取得ステップの処理により取得された情報を基に、表示制御ステップの処理により表示が制御された画像情報の撮影位置が、所定の範囲の端部であることを検出する検出ステップと、検出ステップの処理により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する通知ステップとを含むことを特徴とする。
【００１９】
本発明のプログラムは、他の情報処理装置により撮影された画像の受信を制御する受信制御ステップと、受信制御ステップの処理により受信が制御された画像の表示を制御する表示制御ステップと、ユーザの操作入力に対応する制御信号の送信を制御する送信制御ステップと、ユーザの操作入力が、所定の操作を指令する操作入力であった場合、他の情報処理装置の状態に関する情報を取得する取得ステップと、取得ステップの処理により取得された情報を基に、表示制御ステップの処理により表示が制御された画像情報の撮影位置が、所定の範囲の端部であることを検出する検出ステップと、検出ステップの処理により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する通知ステップとを含むことを特徴とする。
【００２０】
本発明の情報処理装置および情報処理方法、並びに、プログラムにおいては、他の情報処理装置により撮影された画像が受信され、受信された画像が表示され、ユーザの操作入力に対応する制御信号が送信され、ユーザの操作入力が、所定の操作を指令するものであった場合、他の情報処理装置の状態に関する情報が取得され、取得された情報を基に、表示された画像情報の撮影位置が、所定の範囲の端部であることが検出される。
【００２１】
本発明の遠隔撮影システムは、第２の情報処理装置が、第１の情報処理装置と通信し、情報の送受信を行う第１の送受信手段と、ユーザの操作入力を受ける操作入力手段と、第１の情報処理装置から送信され、第１の送受信手段によって受信された画像情報を表示する表示手段と、第１の送受信手段によって受信された第１の情報処理装置の状態に関する情報を基に表示手段により表示された画像の撮影位置が、所定の範囲の端部であることを検出する検出手段とを備え、表示手段は、検出手段により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する表示を行い、第１の情報処理装置が、第２の情報処理装置と通信し、情報の送受信を行う第２の送受信手段と、第２の情報処理装置から送信され、第２の送受信手段により受信されたユーザの操作入力に対応する制御信号を基に、画像を撮影する撮影手段とを備え、第２の送受信手段は、撮影手段により撮影された画像信号と、制御信号を基に実行された処理の結果更新される、自分自身の状態に関する情報を第２の情報処理装置に送信することを特徴とする。
【００２２】
本発明の遠隔撮影システムにおいては、第２の情報処理装置で、第１の情報処理装置と通信して情報が送受信され、ユーザの操作が入力され、第１の情報処理装置から送信された画像情報が表示され、受信された第１の情報処理装置の状態に関する情報を基に、表示された画像の撮影位置が、所定の範囲の端部であることが検出され、所定の範囲の端部であることがユーザに通知され、第１の情報処理装置で、第２の情報処理装置と通信して情報が送受信され、第２の情報処理装置から送信されたユーザの操作入力に対応する制御信号を基に、画像が撮影され、撮影された画像信号と、制御信号を基に実行された処理の結果更新される自分自身の状態に関する情報が、第２の情報処理装置に送信される。
【００２３】
【発明の実施の形態】
以下に本発明の実施の形態を説明するが、特許請求の範囲に記載の発明の各手段および各ステップと以下の実施の形態との対応関係を明らかにするために、各手段および各ステップの後の括弧内に、対応する実施の形態（但し一例）を付加して本発明の特徴を記述すると、次のようになる。ただしもちろんこの記載は、各手段および各ステップを記載したものに限定することを意味するものではない。
【００２４】
請求項１に記載の情報処理装置（例えば、図１のパーソナルコンピュータ１）は、他の情報処理装置（例えば、図１のデジタルビデオカメラ２）と通信し、情報の送受信を行う送受信手段（例えば、図２の無線通信部５０）と、ユーザの操作入力を受ける操作入力手段（例えば、図２の入力部４７）と、他の情報処理装置から送信され、送受信手段によって受信された画像情報を表示する表示手段（例えば、図２の出力部４８）と、他の情報処理装置の状態に関する情報（例えば、ステータス）を基に、表示手段により表示された画像の撮影位置（撮影可能範囲内で、撮影されている画像の位置）が、所定の範囲の端部であることを検出する検出手段（例えば、図２のＣＰＵ４１）とを備え、表示手段により表示された画像情報は、操作入力手段により入力されたユーザの操作入力に対応し、送受信手段により送信された制御信号を受信した他の情報処理装置により、制御信号を基に画像の撮影方向が制御されて撮影された画像情報であることを特徴とする。
【００２５】
請求項２に記載の情報処理装置は、表示手段が、検出手段により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する情報（例えば、コントローラ２１９のパンチルトボタン２２３の点滅表示または表示色の変更、図１７のマウスカーソルアイコン２６１の点滅表示または表示色の変更、「これ以上、撮影の方向を変更できません」のメッセージが記載されたメッセージウィンドウ）を更に表示することを特徴とする。
【００２６】
請求項３に記載の情報処理装置は、表示手段が、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力（例えば、パン、チルト）を行うためのボタン（例えば、コントローラ２１９のパンチルトボタン２２３）を更に表示し、検出手段により所定の範囲の端部であることが検出された場合、ボタンを点滅させて表示させることを特徴とする。
【００２７】
請求項４に記載の情報処理装置は、表示手段が、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力（例えば、パン、チルト）を行うためのボタン（例えば、コントローラ２１９のパンチルトボタン２２３）を更に表示し、検出手段により所定の範囲の端部であることが検出された場合、ボタンの表示色を変更（例えば、色の変更、または、ネガポジ反転）させて表示させることを特徴とする。
【００２８】
請求項５に記載の情報処理装置は、表示手段が、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力（例えば、パン、チルト）を行うためのカーソル（例えば、図１７のマウスカーソルアイコン２６１）を更に表示し、検出手段により所定の範囲の端部であることが検出された場合、カーソルを点滅させて表示させることを特徴とする。
【００２９】
請求項６に記載の情報処理装置は、表示手段が、ユーザが、他の情報処理装置により撮影される画像情報の撮影位置を変更させるための操作入力（例えば、パン、チルト）を行うためのカーソル（例えば、図１７のマウスカーソルアイコン２６１）を更に表示し、検出手段により所定の範囲の端部であることが検出された場合、カーソルの表示色を変更させて表示させることを特徴とする。
【００３０】
請求項８に記載の情報処理装置は、音声出力を行う音声出力手段（例えば、図２の出力部４８）を更に備え、音声出力手段は、検出手段により所定の範囲の端部であることが検出された場合、所定の範囲の端部であることが検出されたことをユーザに通知するための音声（例えば、ブザー音または音声メッセージ）を出力することを特徴とする。
【００３１】
請求項９に記載の情報処理装置は、情報処理装置を振動させるための駆動手段（例えば、図２の出力部４８）を更に備え、駆動手段は、検出手段により所定の範囲の端部であることが検出された場合、所定の範囲の端部であることが検出されたことをユーザに通知するために、情報処理装置を振動させることを特徴とする。
【００３２】
請求項１０に記載の情報処理装置は、他の情報処理装置の状態に関する情報（例えば、ステータス）が、他の情報処理装置が撮影する画像情報の撮影位置が所定の方向に変更されているか否かを示す情報を含み、検出手段は、他の情報処理装置の状態に関する情報を基に、画像情報の撮影位置が所定の方向に変更されていないことを検出した場合、所定の範囲の端部であることを検出することを特徴とする。
【００３３】
請求項１１に記載の情報処理方法は、他の情報処理装置により撮影された画像の受信を制御する受信制御ステップ（例えば、図２５のステップＳ１１３の処理）と、受信制御ステップの処理により受信が制御された画像の表示を制御する表示制御ステップ（例えば、図２５のステップＳ１１４の処理）と、ユーザの操作入力に対応する制御信号の送信を制御する送信制御ステップ（例えば、図２０のステップＳ２４の処理）と、ユーザの操作入力が、所定の操作（例えば、パン、またはチルト）を指令する操作入力であった場合、他の情報処理装置の状態に関する情報（例えば、ステータス）を取得する取得ステップ（例えば、図２７のステップＳ１５５の処理）と、取得ステップの処理により取得された情報を基に、表示制御ステップの処理により表示が制御された画像情報の撮影位置が、所定の範囲の端部であることを検出する検出ステップ（例えば、図２７のステップＳ１５６の処理）と、検出ステップの処理により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する通知ステップ（例えば、図２７のステップＳ１５７の処理）とを含むことを特徴とする。
【００３４】
請求項１２に記載のプログラムは、他の情報処理装置により撮影された画像の受信を制御する受信制御ステップ（例えば、図２５のステップＳ１１３の処理）と、受信制御ステップの処理により受信が制御された画像の表示を制御する表示制御ステップ（例えば、図２５のステップＳ１１４の処理）と、ユーザの操作入力に対応する制御信号の送信を制御する送信制御ステップ（例えば、図２０のステップＳ２４の処理）と、ユーザの操作入力が、所定の操作（例えば、パン、またはチルト）を指令する操作入力であった場合、他の情報処理装置の状態に関する情報（例えば、ステータス）を取得する取得ステップ（例えば、図２７のステップＳ１５５の処理）と、取得ステップの処理により取得された情報を基に、表示制御ステップの処理により表示が制御された画像情報の撮影位置が、所定の範囲の端部であることを検出する検出ステップ（例えば、図２７のステップＳ１５６の処理）と、検出ステップの処理により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する通知ステップ（例えば、図２７のステップＳ１５７の処理）とを含むことを特徴とする。
【００３５】
請求項１３に記載の遠隔撮影システムは、所定の範囲の画像を撮影することが可能な第１の情報処理装置（例えば、図１のデジタルビデオカメラ２）と、第１の情報処理装置と通信可能な第２の情報処理装置（例えば、図１のパーソナルコンピュータ１）とで構成され、第２の情報処理装置は、第１の情報処理装置と通信し、情報の送受信を行う第１の送受信手段（例えば、図２の無線通信部５０）と、ユーザの操作入力を受ける操作入力手段（例えば、図２の入力部４７）と、第１の情報処理装置から送信され、第１の送受信手段によって受信された画像情報を表示する表示手段（例えば、図２の出力部４８）と、第１の送受信手段によって受信された第１の情報処理装置の状態に関する情報（例えば、ステータス）を基に表示手段により表示された画像の撮影位置が、所定の範囲の端部であることを検出する検出手段（例えば、図２のＣＰＵ４１）とを備え、表示手段は、検出手段により所定の範囲の端部であることが検出された場合、ユーザに、所定の範囲の端部であることを通知する表示を行い、第１の情報処理装置は、第２の情報処理装置と通信し、情報の送受信を行う第２の送受信手段（例えば、図３の無線通信部１０１）と、第２の情報処理装置から送信され、第２の送受信手段により受信されたユーザの操作入力に対応する制御信号を基に、画像を撮影する撮影手段（例えば、図３の撮影レンズ８１乃至デジタル信号処理部８６）とを備え、第２の送受信手段は、撮影手段により撮影された画像信号と、制御信号を基に実行された処理の結果更新される、自分自身の状態に関する情報（例えば、ステータス）を第２の情報処理装置に送信することを特徴とする。
【００３６】
以下、図を参照して、本発明の実施の形態について説明する。
【００３７】
図１は、本発明を適用した無線撮影システムの構成を示す図である。
【００３８】
本発明の無線撮影システムにおいては、パーソナルコンピュータ１上のソフトウェアプログラムによりデジタルビデオカメラ２を操作することができ、静止画、または、動画を撮影させる際、今現在撮影可能な画像を認識した上で、撮影させ、さらに、撮影した画像を確認することができる。
【００３９】
次に、図２を参照して、パーソナルコンピュータ１の構成について説明する。ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）４１は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）４２、または記憶部４９に記憶されているプログラム（通信プログラム４９ａ、画像転送プログラム４９ｂ、および、画像操作プログラム４９ｃ）にしたがって、各種の処理を実行する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）４３には、ＣＰＵ４１が実行するプログラムやデータなどが適宜記憶される。ＶＲＡＭ（Ｖｉｄｅｏ−ＲＡＭ）４４は、デジタルビデオカメラ２から送信されてくる画像を記憶する。ＣＰＵ４１、ＲＯＭ４２、ＲＡＭ４３、および、ＶＲＡＭ４４は、バス４５により相互に接続されている。
【００４０】
ＣＰＵ４１には、また、バス４５を介して入出力インタフェース４６が接続されている。入出力インタフェース４６には、キーボード、マウス、マイクロホンなどよりなる入力部４７、ディスプレイ、スピーカなどよりなる出力部４７が接続されている。ＣＰＵ４１は、入力部４７から入力される指令に対応して各種の処理を実行する。そして、ＣＰＵ４１は、処理の結果得られた画像や音声等を出力部４７に出力する。
【００４１】
入出力インタフェース４６に接続されている記憶部４９は、例えばハードディスクなどで構成され、ＣＰＵ４１が実行するプログラムや各種のデータを記憶する。
【００４２】
また、記憶部４９は、通信プログラム４９ａ、画像転送プログラム４９ｂ、および、画像操作プログラム４９ｃ等のプログラムを記憶しており、ＣＰＵ４１は、これらのプログラムを読み出して対応する処理を実行する。なお、各種のプログラムについては、図４を参照して後述する。
【００４３】
さらに、記憶部４９に記憶されるプログラムは、上述のほかのものを含んでいても良いことはもちろんであり、無線通信部５０を介して、各種プログラムが取得され、記憶部４９に記憶されるようにしてもよい。
【００４４】
無線通信部５０は、いわゆるブルートゥース（Ｂｌｕｅｔｏｏｔｈ）により、２．４５ＧＨｚ帯の電波を利用し、１Ｍｂｐｓの速度で他の装置と通信を行うことができる。ブルートゥースは赤外線を利用する通信とは異なり、機器間の距離が１０ｍ程度の範囲内であれば障害物があっても利用することができる。また、ブルートゥースは０．５平方インチの小型のトランシーバを利用するため、赤外線通信装置に比べ消費電力が小さく、製造コストも低く抑えられる。本発明では、ブルートゥースにおける拡張Ｂａｓｉｃ Ｉｍａｇｉｎｇ Ｐｒｏｆｉｌｅ（拡張ＢＩＰ）（画像送信に関するプロファイルを元にカメラ側を遠隔操作するためのコマンド送信に関する拡張を加えたプロファイル）を使用して、コンピュータと撮影機器との通信を行う。また、この無線通信部５０は、無線通信が行えるものであればブルートゥース以外のものであってもよく、例えば、ＩＥＥＥ８０２．１１ｂ規格に準じた無線通信装置であってもよい。
【００４５】
入出力インタフェース４６に接続されているドライブ５１は、磁気ディスク６１、光ディスク６２、光磁気ディスク６３、もしくは、半導体メモリ６４などが装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記憶部４９に転送され、記憶される。
【００４６】
次に、図３を参照して、デジタルビデオカメラ２の構成について説明する。ＣＰＵ９６は、操作部１０２からの信号入力に基づいて各回路を統括制御する制御部であり、液晶モニタ９０における表示の制御、ストロボ発光制御、オートフォーカス（ＡＦ）演算、及び自動露出（ＡＥ）演算等を行う。
【００４７】
操作部１０２は、指示入力手段を含むブロックである。電源がオンにされると、ＣＰＵ９６は、電源コントロール回路９８にコマンドを送り、電池９９またはＤＣ電源用端子（図示せず）に接続される外部電源からデジタルビデオカメラ２の各部に電源を供給し、各回路を動作可能にする。電池９９は充電式の電池（二次電池）でもよいし、市販の乾電池（一次電池）であってもよい。
【００４８】
撮影レンズ８１は、１枚または複数枚のレンズで構成され、単焦点レンズでもよいし、ズームレンズ等の焦点距離可変のものでもよい。撮影レンズ８１を通過した光は、絞り８２によって光量が調節された後、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）８３に入射する。ＣＣＤ８３の受光面には、フォトセンサが平面的に配列されており、ＣＣＤ８３の受光面に結像された被写体像は、各フォトセンサによって入射光量に応じた量の信号電荷に変換される。なお、ＣＣＤ８３は、各フォトセンサの電荷蓄積時間（シャッタスピード）を制御可能な、いわゆる電子シャッタ機能を有している。
【００４９】
こうして蓄積された信号電荷は、撮像系コントロール回路９２から与えられるパルスに基づいて信号電荷に応じた電圧信号（画像信号）として順次読み出される。
【００５０】
ＣＣＤ８３から出力された画像信号は、アナログ信号処理部８４に送られる。アナログ信号処理部８４は、サンプリングホールド回路、色分離回路、ゲイン調整回路等を含み、このアナログ信号処理部８４において、相関二重サンプリング（ＣＤＳ）処理並びにＲ，Ｇ，Ｂの各色信号に色分離処理され、各色信号の信号レベルの調整（プリホワイトバランス処理）が行われる。
【００５１】
アナログ信号処理部８４から出力された信号は、Ａ／Ｄ変換器８５によりデジタル信号に変換された後、デジタル信号処理部８６に供給される。デジタル信号処理部８６は、輝度・色差信号生成回路、ガンマ補正回路、シャープネス補正回路、コントラスト補正回路、ホワイトバランス補正回路等を含む画像処理手段であり、ＣＰＵ９６からのコマンドにしたがって画像信号を処理する。
【００５２】
デジタル信号処理部８６は、画像データを、輝度信号（Ｙ信号）および色差信号（Ｃｒ，Ｃｂ信号）に変換するとともに、ガンマ補正等の所定の処理を施した後、メモリ８７に格納する。メモリ８７に記憶された画像データは、ＣＰＵ９６の指令にしたがって読み出され、Ｄ／Ａ変換器８８によって、アナログ信号に変換されるとともに、ＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｔａｎｄａｒｄｓ Ｃｏｍｍｉｔｔｅｅ）方式などの所定の信号形式に変換されて、ビデオ出力端子８９および液晶モニタ９０に出力される。また、メモリ８７に記憶されている画像は、通常時は、プレビュ画像としてＣＰＵ９６に読み出される。
【００５３】
ＣＣＤ８３から出力される画像信号によってメモリ８７の画像データが定期的に書き換えられ、その画像データから生成される映像信号が液晶モニタ９０に供給されることにより、ＣＣＤ８３を介して入力する画像がリアルタイムに液晶モニタ９０に表示される。撮影者は、液晶モニタ９０に映し出される映像、または、光学式のファインダーによって撮影画角を確認することができる。
【００５４】
ユーザにより操作部１０２が操作され、撮影モードが設定されると、撮影開始指示（レリーズＯＮ）信号が発せられる。ＣＰＵ９６は、レリーズＯＮ信号を検知し、撮像系コントロール回路９２にコマンドを送る。撮像系コントロール回路９２は、ＡＦモータズームモータ９１を介してフォーカス制御を行うとともに、絞り８２やＣＣＤ８３での電荷蓄積時間を制御することにより露出制御を行う。
【００５５】
記録用の画像データの取り込みを指示する操作がなされると、記録が開始される。画像データを圧縮記録するモードが選択されている場合、ＣＰＵ９６は、圧縮伸張回路９３にコマンドを送る。これにより圧縮伸張回路９３は、メモリ８７上の画像データをＪＰＥＧ形式（その他の所定の形式であってもよい）にしたがって圧縮する。また、圧縮伸張回路９３は、プレビュ画像を出力するとき、無線通信部１０１として使用されているブルートゥースにおけるＢＩＰ（Ｂａｓｉｃ Ｉｍａｇｉｎｇ Ｐｒｏｆｉｌｅ）に定められている１６０×１２０のサイズ画像をＪＰＥＧ形式に圧縮して、ＣＰＵ９６に出力する。また、撮影された静止画は、設定された画像サイズのままＪＰＥＧ形式に圧縮される。
【００５６】
圧縮された画像データは、カードＩ／Ｆ（インタフェース）９４を介してメモリカード９５に記録される。非圧縮の画像データを記録するモード（非圧縮モード）が選択されている場合には、圧縮伸張回路９３による圧縮処理は省略され、非圧縮のまま画像データがメモリカード９５に記録される。
【００５７】
図３のデジタルビデオカメラ２では、画像データを保存する手段として、例えば半導体メモリであるメモリースティック（商標）などが適用される。記録媒体はこれに限定されず、ＰＣカード、コンパクトフラッシュ（登録商標）、磁気ディスク、光ディスク、光磁気ディスク、スマートメディアなどでもよく、電子的、磁気的、もしくは光学的、またはこれらの組み合わせによる方式にしたがって読み書き可能な種々の媒体を用いることができる。なお、カードＩ／Ｆ９４には、使用される記録媒体に応じた信号処理手段とインタフェースが適用されるとともに、異種、同種の記録媒体を問わず、複数の媒体を装着可能な構成にしてもよい。また、画像ファイルを保存する手段は、カメラ本体に着脱可能な記録媒体に限らず、カメラに内蔵された記録媒体（内部メモリ）であってもよい。
【００５８】
なお、ＣＣＤ８３は、記録用の画像データが取り込まれるときと、それ以外の場合では、動作状態が異なる。すなわち、記録用の画像データが取り込まれない場合、ＣＣＤ８３は、記録用の画像データが取り込まれるときよりも低解像度の画像を取得するモードになっており、結果として、画像データの量が抑制されてアナログ信号処理８４乃至Ｄ／Ａ変換機８８間の転送速度が高められることにより、液晶モニタ９０に画像が素早く表示される。したがって、この状態でメモリ８７に記憶されている画像は低解像度の画像となる。このため、この状態で読み出された画像は、低解像度のプレビュ画像となる。一方、記録用の静止画の画像データが取り込まれる場合、ＣＣＤ８３は解像度を高めて静止画を取得するので、結果として、データ量は大きいが高画質の画像データがメモリ８７に記憶されることになる。サムネイル画像生成部１０３は、ＣＰＵ９６からの指令に基づいて、このようにデータ量の大きい静止画を、サムネイル画像に変換する。なお、サムネイル画像とは、所定の画像が縮小された画像または文字を表示したものである。
【００５９】
所定の操作により再生モードが設定されると、メモリカード９５から画像データが読み出される。読み出された画像データは、必要に応じて圧縮伸張回路９３によって伸張処理され、Ｄ／Ａ変換器８８を介してビデオ出力端子８９、および液晶モニタ９０に出力される。
【００６０】
デジタルビデオカメラ２は、ブルートゥースからなる無線通信部１０１を有し、この無線通信部１０１を介して画像データおよび各種信号を送受信することができる。ＥＥＰＲＯＭ９７には、通信相手となる外部機器を特定するための識別情報（ＩＤ）が記憶され、ＣＰＵ９６は、ＥＥＰＲＯＭ９７に登録されている識別情報を基に通信対象機器を判別する。また、ＣＰＵ９６は、通信相手の識別情報を利用して伝送用データを暗号化回路８８において暗号化した後、これを無線通信部１０１より送信する。
【００６１】
次に、図４の機能ブロック図を参照して、図２，図３のパーソナルコンピュータ１、および、デジタルビデオカメラ２により実現される機能について説明する。
【００６２】
なお、図４で示される各プログラムは、専用のハードウェアにより実現するようにしてもよい。したがって、図４の機能ブロック図は、ハードウェア構成図とみても、ソフトウェア構成図とみてもよいものである。
【００６３】
通信プログラム４９ａは、無線通信部５０を制御して、他の無線通信部を有する機器との通信を制御する。通信プログラム４９ａは、無線通信部５０を制御して、通信可能な電子機器を検索させ、例えば、図５で示すような表示画面を出力部４８のディスプレイに表示させ、今現在通信可能な電子機器をユーザに通知する。図５においては、画面１２１の左側に自らを示す表示欄１２２が示され、今の場合「Ｍｙ ｃｏｍｐｕｔｅｒ ＰＣ」と表示されている。画面１２１の中央部には、プロファイルアイコン１２３乃至１２８が表示され、無線通信により送受信可能なブルートゥースのプロファイルが、アイコンとして表示されている。プロファイルは、例えば、送受信可能な画像データや音楽データである。
【００６４】
画面１２１の右側には、通信可能機器の表示欄１３１乃至１３５が示されており、その中で通信対象機器となっている機器が、上下方向に対して中央の表示欄１３３に表示される。今の場合、中央の表示欄１３３には、「デジタルビデオカメラ」と表示されており、表示欄１２２に表示されている「Ｍｙ Ｃｏｍｐｕｔｅｒ ＰＣ」の通信対象機器としてデジタルビデオカメラ２が選択されていることが示されている。
【００６５】
複数の機器が通信可能な場合、それらの機器が他の表示欄１３１乃至１３５に表示される。今の場合、デジタルビデオカメラの他に、「ＰＤＡ」、「ＰＣ−１」が表示されており、「ＰＤＡ」、「ＰＣ−１」も通信可能な機器として検出されたことが示されている。
【００６６】
ボタン１２９，１３０は、通信対象となる電子機器を変更するとき操作されるボタンであり、例えば、ボタン１２９が操作されると表示欄１３１が表示から消去され、表示欄１３２乃至１３５が図中上方向にスライドする。結果として、通信可能機器の中央には、「ＰＣ−１」が表示され、通信対象機器として「ＰＣ−１」が選択される。また、ボタン１３０が操作されると、表示欄１３５が消去され、図中下方向に表示欄１３１乃至１３４がスライドする。結果として、通信可能機器の中央には、「ＰＤＡ」が表示され、通信対象機器として「ＰＤＡ」が選択される。
【００６７】
プロファイルメニューアイコン１２３乃至１２８は、それぞれの左右に、通信機器が送受信可能なプロファイルであるか否かを示す括弧が表示される。今の場合、プロファイルメニューアイコン１２３乃至１２８の左側には、全て括弧１２３ａ乃至１２８ａが表示されており、表示欄１２２の「Ｍｙ Ｃｏｍｐｕｔｅｒ ＰＣ」に対応する電子機器がプロファイルメニューアイコンとして表示された全てのプロファイルを送受信することが可能であることが示されている。また、プロファイルメニューアイコン１２３乃至１２８のうち、右側には、括弧１２７ｂ，１２８ｂのみが表示されており、通信対象機器として選択されているデジタルビデオカメラは、プロファイルメニューアイコン１２７，１２８に対応するプロファイルしか送受信することができないことが示されている。したがって、選択する通信対象機器は、所望とするプロファイルメニューアイコンに括弧が無ければ、そのプロファイルを送受信することはできない。
【００６８】
このような表示とすることにより、ユーザは、通信対象機器が送受信可能なプロファイルか否かについて、プロファイルメニューアイコンの括弧の表示をみるだけで認識することができる。また、利用したいプロファイルを選択することにより、表示欄１２２に示されたパーソナルコンピュータ１と、表示欄１３３に示されたデジタルビデオカメラとが、画面１２１上で線により結ばれて、画像データに対応する選択されたプロファイルの通信が可能となっていることが示される。
【００６９】
また、通信プログラム４９ａは、無線通信部５０を制御して、通信可能な電子機器を検索させた場合、例えば、図６に示されるような表示画面１４１を、出力部４８のディスプレイに表示させることにより、今現在通信可能な電子機器をユーザに通知するようにしてもよい。
【００７０】
画面の中央の機器表示エリア１５１には、自分自身（すなわち、パーソナルコンピュータ１）からブルートゥース通信によって通信可能な範囲に存在する機器が列挙されている。機器表示エリア１５１に表示されている機器のうち、通信相手として選択された機器（ここでは、デジタルビデオカメラ２）がハイライト表示される。表示画面中央の部分、すなわち、機器表示エリア１５１の右側のプロファイル表示エリア１５２には、パーソナルコンピュータ１と、機器表示エリア１５１に表示されたそれぞれの機器との間で通信が可能なブルートゥースのプロファイルが列挙されている。本発明では、ブルートゥースにおける拡張Ｂａｓｉｃ Ｉｍａｇｉｎｇ Ｐｒｏｆｉｌｅ（拡張ＢＩＰ）（画像送信に関するプロファイルを元にカメラ側を遠隔操作するためのコマンド送信に関する拡張を加えたプロファイル）を使用した遠隔撮影処理が可能であることを示すアイコン１５３が表示されている。
【００７１】
また、通信プログラム４９ａは、パーソナルコンピュータ１とデジタルビデオカメラ２が通信可能な状態にされると、デジタルビデオカメラ２とパーソナルコンピュータ１間で行われる、画像要求や遠隔操作コマンドの送信、または、画像の受信処理などを行う。
【００７２】
さらに、通信プログラム４９ａは、プレビュ画像、サムネイル画像、または、静止画などの画像データがデジタルビデオカメラ２から転送された場合、受信したプレビュ画像、サムネイル画像、または、静止画などの画像データをＶＲＡＭ４４に記憶させる。ただし、高画質の静止画を受信するような場合、画像データは分割されて転送されるため、転送には時間がかかる。そこで、通信プログラム４９ａは、静止画の受信の進捗状態を示す進捗通知もあわせて画像転送プログラム４９ｂに通知する。
【００７３】
画像転送プログラム４９ｂは、通信プログラム４９ａからの通知、例えば、モニタ変更通知などに基づいて、ＶＲＡＭ４４に記憶されている画像を管理し、画像操作プログラム４９ｃから画像が要求された場合、それに対応する画像（プレビュ画像、サムネイル画像、または、静止画）をＶＲＡＭ４４から読み出して画像操作プログラム４９ｃに供給する。また、画像操作プログラム４９ｃから静止画の撮影要求や遠隔操作コマンドを受信すると、その旨を通信プログラム４９ａに転送する。
【００７４】
画像操作プログラム４９ｃは、プレビュ画像、サムネイル画像、または、静止画を画像転送プログラム４９ｂに要求し、要求に基づいて供給された画像を、例えば、図７で示すように表示したり、図７で示される表示画面に対してユーザが実行した操作入力を基に、遠隔操作コマンドを画像転送プログラム４９ｂに供給する。
【００７５】
図７においては、表示部２１８には、静止画、動画、または、定点観測画像（所定の時間内に撮影された複数の静止画の集まり）が表示され、その左側に、静止画モードボタン２０１、動画モードボタン２０２、および、定点観測モードボタン２０３が表示される。また、表示部２１８の右側には、サムネイル画像リスト２１７が設けられており、さらに、右側には、上から、モード切替ボタン２１１、保存ボタン２１２、メールボタン２１３、アップロードボタン２１４、および、ごみ箱ボタン２１５が設けられている。さらに、定点観測モードボタン２０３の下側には、デジタルビデオカメラ２に対する操作入力を行うためのコントローラ２１９が設けられている。
【００７６】
静止画モードボタン２０１は、ユーザが静止画モードを選択するとき操作される。動画モードボタン２０２は、ユーザが動画モードを選択するとき操作される。定点観測モードボタン２０３は、ユーザが定点観測モードを選択するとき操作される。
【００７７】
サムネイル画像リスト２１７は、今現在保存されていない状態（ファイルとして保存されていない状態であるが、撮影された画像がＶＲＡＭ４４、または、記憶部４９の所定領域に一時的に記憶された状態）の静止画、動画、または、定点観測画像のいずれかを示すサムネイル画像が表示される。このサムネイル画像は、静止画の場合、静止画そのもののサムネイル画像が表示されるが、動画の場合、録画開始時の画像（最初に取り込まれた画像）のサムネイル画像が表示され、また、定点観測画像の場合、定点観測画像として撮影された複数の静止画のうちのいずれかがサムネイル画像として表示されるが、デフォルトとして定点観測が開始されたときに最初に撮影された静止画がサムネイル画像として表示され、それ以降で撮影された静止画と変更することができる。また、この一時的に記憶された状態の画像が、所定数以上、または、記憶されている領域が所定の容量以上となった場合、最も古い画像が削除され、最新の画像が記憶される。
【００７８】
また、各サムネイル画像は、ユーザが、いわゆるマウスポインタをはじめとするポインタを、所望とするサムネイル画像の位置に移動させてクリックすることにより、指定（選択）することができ、指定されたサムネイル画像は、画像に縁取りが掛けられた表示となる。図７の場合、サムネイル画像リスト２１７に表示されたサムネイル画像のうち、図中最も下に位置するサムネイル画像が指定されている。
【００７９】
さらに、サムネイル画像リスト２１７に表示されている画像は、指定された状態で、ダブルクリックされることにより、表示部２１８における表示が指示され、静止画の場合、選択された静止画が表示部２１８に表示され、動画、または、定点観測画像の場合、動画として表示部２１８に表示される（定点観測画像の場合は、静止画が連続的に表示される）。
【００８０】
モード切替ボタン２１１は、サムネイル画像リスト２１７に表示されているサムネイル画像のうち、指定されているサムネイル画像の再生を指示するとき、操作されるボタンである。
【００８１】
保存ボタン２１２は、サムネイル画像リスト２１７に表示されたサムネイル画像のうち、指定された画像を保存するとき（ファイルとして保存するとき）、操作されるボタンである。
【００８２】
メールボタン２１３は、サムネイル画像リスト２１７に表示されたサムネイル画像のうち、指定された画像をメールで送信するとき、操作されるボタンである。
【００８３】
アップロードボタン２１４は、サムネイル画像リスト２１７に表示されたサムネイル画像のうち、指定された画像を所定のサーバにアップロードするとき、操作されるボタンである。
【００８４】
ごみ箱ボタン２１５は、サムネイル画像リスト２１７に表示されたサムネイル画像を消去するとき（記憶部４８の所定領域に一時的に記憶された画像を消去するとき）、操作されるボタンである。
【００８５】
コントローラ２１９は、デジタルビデオカメラ２に対して、望遠（ｔｅｌｅ）ズームを指令するための望遠ズームボタン２２１、広角（ｗｉｄｅ）ズームを指令するための広角ズームボタン２２２、撮影画像の方向の変更を指令するパンチルトボタン２２３、デジタルビデオカメラ２に装着されている記録媒体、または、内部に有する記録媒体への録画を指令する録画ボタン２２４で構成されている。パンチルトボタン２２３の中央のボタンは、撮影可能範囲の中央位置に撮影方向を戻すときに操作される（パンチルトセンタ）。また、録画ボタン２２４は、デジタルビデオカメラ２に装着されている記録媒体、または、内部に有する記録媒体への録画処理の開始および終了のいずれの操作も指令するボタンであるので、デジタルビデオカメラ２による録画処理中は、ユーザに、録画中であることを通知するために、表示画面のいずれかの位置に、例えば、「ＲＥＣ」などの文字を表示させるようにしても良い。
【００８６】
静止画モードボタン２０１が操作されると、図８で示すように、静止画モードボタン２０１の表示色が変化し、さらに表示部２１８の下の部分に撮影ボタン２３１ａが表示される。さらに、撮影ボタン２３１ａの右側には、設定ボタン２３２ａなどが表示される。このとき、画像操作プログラム４９ｃは、受信されたプレビュ画像を表示部２１８に表示させる。撮影ボタン２３１ａは、ユーザが表示部２１８に表示されているプレビュ画像の撮影を指示するとき操作されるボタンである。設定ボタン２３２ａは、静止画モードにおける各種の設定を行うとき操作されるボタンであり、このボタンが操作されると、静止画モードの設定画面が表示され、各種の設定をすることができる。
【００８７】
撮影ボタン２３１ａが操作されると、画像操作プログラム４９ｃは、図９で示すようにサムネイル画像リスト２１７に、それまで最新の画像であったサムネイル画像２１７ａの下に、今撮影した画像（静止画）に対応する新たなサムネイル画像２１７ｂを表示させる。
【００８８】
動画モードボタン２０２が操作されると、図１０で示すように、画像操作プログラム４９ｃは、動画モードボタン２０２の表示色を変化させ、さらに表示部２１８の下の部分に録画ボタン２３１ｂを表示する。さらに、録画ボタン２３１ｂの右側には、設定ボタン２３２ｂなどが表示される。このとき、画像操作プログラム４９ｃは、受信されたプレビュ画像を表示部２１８に表示させる。録画ボタン２３１ｂは、ユーザが表示部２１８に表示されているプレビュ画像の録画を指示するとき操作されるボタンである。設定ボタン２３２ｂは、動画モードにおける各種の設定を行うとき操作されるボタンであり、このボタンが操作されると、動画モードの設定画面が表示される。
【００８９】
この状態で、録画ボタン２３１ｂが操作された場合、画像操作プログラム４９ｃは、図１１で示すようにサムネイル画像リスト２１７に、図１０で示した、それまで最新の画像であったサムネイル画像２１７ａの下に、今撮影した画像（動画）に対応する新たなサムネイル画像２１７ｃを表示させる。このとき、画像操作プログラム４９ｃは、図１１で示すように、サムネイル画像２１７ｃ中に録画中であることを示す録画中マークのみを表示させるとともに、表示部２１８の下部の表示を、録画ボタン２３１ｂから終了ボタン２３１ｃに代えて表示させる。
【００９０】
この状態で、終了ボタン２３１ｃが操作されると、画像操作プログラム４９ｃは、録画を終了させ、図１１で示すように、録画中マークのみが表示されていたサムネイル画像２１７ｃを、図１２で示すように、録画した動画を識別するサムネイル画像２１７ｄにして表示する。このとき、サムネイル画像２１７ｄには、図１２で示すように、サムネイル画像２１７ｄ中の左上部分に動画であることを示す動画マーク（８ミリ撮影機のようなマーク）を付して、表示する。このように表示することにより、サムネイル画像として管理されている画像が、静止画であるか、または、動画であるかを一目で識別することが可能となる。
【００９１】
また、定点観測モードボタン２０３が操作されると、画像操作プログラム４９ｃは、図１３で示すように、定点観測モードボタン２０３の表示色を変化させ、さらに表示部２１８の下の部分に開始ボタン２３１ｄを表示する。さらに、開始ボタン２３１ｄの右側には、設定ボタン２３２ｅなどが表示される。このとき、画像操作プログラム４９ｃは、受信されたプレビュ画像を表示部２１８に表示させる。開始ボタン２３１ｄは、ユーザが表示部２１８に表示されている画像の定点観測を指示するとき操作されるボタンである。設定ボタン２３２ｅは、定点観測モードにおける各種の設定を行うとき操作されるボタンであり、このボタンが操作されると、定点観測モードの設定画面が表示される。また、開始ボタン２３１ｄの左側には、予約ボタン３４１が表示される。予約ボタン３４１は、定点観測による撮影を予め予約設定するとき、ユーザにより操作されるボタンである。
【００９２】
この状態で、開始ボタン２３１ｄが操作されると、画像操作プログラム４９ｃは、図１４で示すようにサムネイル画像リスト２１７に、図１３で示した、それまで最新の画像であったサムネイル画像２１７ａの下に、今撮影した画像（定点観測画像）に対応する新たなサムネイル画像２１７ｅを表示させる。このとき、画像操作プログラム４９ｃは、図１４で示すように、サムネイル画像２１７ｅ中に定点観測画像が撮影中であることを示す定点観測中マークのみを表示させるとともに、表示部２１８の下部の表示を、開始ボタン２３１ｅから終了ボタン２３１ｆに代えて表示させる。
【００９３】
この状態で、終了ボタン２３１ｆが操作された場合、画像操作プログラム４９ｃは、定点観測モードの撮影を終了させるとともに、定点観測中マークのみが表示されていたサムネイル画像２１７ｅを、図１５で示すように、定点観測により撮影された画像を識別するサムネイル画像２１７ｆにして表示する。このとき、サムネイル画像２１７ｆには、図１５で示すように、サムネイル画像２１７ｆ中の左上部分に定点観測画像であることを示す定点観測マーク（写真機のようなマーク）を付して、表示する。このように表示することにより、サムネイル画像として管理されている画像が、静止画であるか、動画像であるか、または、定点観測画像であるかを一目で識別することが可能となる。
【００９４】
また、コントローラ２１９に対して操作入力がなされた場合、デジタルビデオカメラ２に対して、遠隔操作コマンドが送信され、コマンドに基づいた処理を実行したデジタルビデオカメラ２から送信されるプレビュ画像が、表示部２１８に表示される。例えば、ユーザが、マウスカーソル２５１を移動させて、コントローラ２１９のパンチルトボタン２２３のうち、画面上、上方向の矢印を有するボタンを操作して、画像を撮影する位置を上方向に移動（チルト）させるための命令を入力した場合、図１６に示されるように、表示部２１８には、チルト操作に基づいて、撮影方向が変更された撮影画像が表示される。また、例えば、コントローラ２１９の望遠ズームボタン２２１が操作された場合、表示部２１８には、望遠ズーム操作に基づいて撮影された撮影画像が表示され、広角ズームボタン２２２が操作された場合、表示部２１８には、広角ズーム操作に基づいて撮影された撮影画像が表示され、録画ボタン２２４が操作された場合、デジタルビデオカメラ２は、自分自身に装着された記録媒体、または、内部に有する記録媒体への録画操作を開始または終了する。
【００９５】
デジタルビデオカメラ２に対するコマンドの送信処理の詳細については後述する。
【００９６】
また、ユーザが、マウスカーソル２５１を移動させて、コントローラ２１９のパンチルトボタン２２３を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ２の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、ユーザが操作中のパンチルトボタン２２３が点滅表示される。ユーザは、パンチルトボタン２２３が点滅表示されていることを確認することにより、撮影方向を、対応する操作入力方向に、これ以上移動することができないことを認識することが可能となる。
【００９７】
また、現在の撮影の方向が撮影可能範囲の限界位置であり、それ以上、撮影位置を変更することができない場合、パンチルトボタン２２３の表示をネガポジ反転させたり、表示色を変更させることにより、ユーザに、撮影可能範囲の限界位置であることを通知するようにしても良い。
【００９８】
更に、例えば、図１７に示されるように、マウスカーソルアイコン２６１を表示させ、ユーザが、パンチルトを操作入力するとき、マウスカーソルアイコン２６１を、撮影方向を移動したい所望の方向にドラックするようにすることができる。そして、ユーザが、マウスカーソルアイコン２６１を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ２の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、ユーザが操作中のマウスカーソルアイコン２６１が点滅表示される。ユーザは、マウスカーソルアイコン２６１が点滅表示されていることを確認することにより、撮影方向を、対応する操作入力方向に、これ以上移動することができないことを認識することが可能となる。
【００９９】
また、現在の撮影の方向が撮影可能範囲の限界位置であり、それ以上、撮影位置を変更することができない場合、マウスカーソルアイコン２６１の表示色を変更させることにより、ユーザに、撮影可能範囲の限界位置であることを通知するようにしても良い。
【０１００】
なお、ユーザが、図１６のパンチルトボタン２２３または図１７のマウスカーソルアイコン２６１を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ２の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、例えば、「これ以上、撮影の方向を変更できません」のメッセージが記載されたメッセージウィンドウを表示させたり、所定の図示しないＬＥＤを点灯または消灯させたり、ブザー音を発生したり、音声メッセージにより通知することなどにより、ユーザに対して、これ以上、撮影の方向を変更できないことを通知するようにしても良い。
【０１０１】
図４の説明に戻る。
【０１０２】
デジタルビデオカメラ２は、パーソナルコンピュータ１からの要求に応じて、メモリ８７に記憶されたプレビュ画像、サムネイル画像生成部１０３で生成されたサムネイル画像、または、メモリカード９５に記憶された静止画の画像を読み出してパーソナルコンピュータ１に送信する。ただし、静止画の要求の場合、デジタルビデオカメラ２は、画像を撮影し、撮影した画像をサムネイル画像にして送信するとともに、一旦メモリカード９５に記憶させてサムネイル画像を送信した後、このメモリカード９５に記憶された画像をパーソナルコンピュータ１に送信する。
【０１０３】
次に、図１８のフローチャートを参照して、デジタルビデオカメラ２の撮影処理について説明する。
【０１０４】
ステップＳ１において、デジタルビデオカメラ２のＣＰＵ９６は、無線通信部１０１を制御して、パーソナルコンピュータ１からプレビュ画像が要求されているか否かを判断する。例えば、後述する図２０のステップＳ２３の処理によりプレビュ画像が要求された場合、パーソナルコンピュータ１からプレビュ画像が要求されていると判断されるので、処理は、ステップＳ２に進む。
【０１０５】
ステップＳ２において、ＣＰＵ９６は、メモリ８７に記憶されている画像をプレビュ画像として取得し（すなわち、プレビュ画像を撮影し）、無線通信部１０１を介してパーソナルコンピュータ１に送信する。ステップＳ２の処理の終了後、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
【０１０６】
ステップＳ１において、プレビュ画像が要求されていないと判断された場合、ステップＳ３において、ＣＰＵ９６は、静止画の撮影が要求されたか否かを判断する。例えば、後述する図２０のフローチャートのステップＳ２９の処理により、静止画の撮影が要求された場合、静止画の撮影が要求されたと判断されるので、処理は、ステップＳ４に進む。
【０１０７】
ステップＳ４において、ＣＰＵ９６は、コントロール回路９２を制御して、ＣＣＤ８３を高解像度のモードに切り替えさせて、静止画の画像データをメモリ８７に記憶させ、撮影する。
【０１０８】
ステップＳ５において、ＣＰＵ９６は、サムネイル画像生成部１０３を制御して、メモリ８７に記憶されている静止画をサムネイル画像に変換させ、無線通信部１０１を制御して、パーソナルコンピュータ１に送信させる。ステップＳ５の処理の終了後、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
【０１０９】
ステップＳ３において、静止画の撮影が要求されていないと判断された場合、ステップＳ６において、ＣＰＵ９６は、静止画の転送が要求されたか否かを判断する。例えば、後述する図２０のステップＳ３２の処理により、静止画の転送が要求された場合、静止画の転送が要求されたと判断されるので、処理は、ステップＳ７に進む。
【０１１０】
ＣＰＵ９６は、ステップＳ７において、圧縮伸張回路９３を制御して、メモリ８７に記憶されている画像をＪＰＥＧ方式で圧縮させ、転送可能なサイズに分割し、ステップＳ８において、無線通信部１０１を制御して、順次分割した静止画をパーソナルコンピュータ１に送信させる。ステップＳ８の処理の終了後、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
【０１１１】
ステップＳ６において、静止画の転送が要求されていないと判断した場合、ステップＳ９において、ＣＰＵ９６は、無線通信部１０１を制御して、パーソナルコンピュータ１から遠隔操作コマンドを受信したか否かを判断する。例えば、後述する図２１のステップＳ６０、ステップＳ６１、または、ステップＳ６４の処理により決定された遠隔操作コマンドが送信された場合、パーソナルコンピュータ１から遠隔操作コマンドを受信したと判断されるので、その処理は、ステップＳ１０に進む。
【０１１２】
ステップＳ１０において、ＣＰＵ９６は、受信した遠隔操作コマンドに対応した操作を実行する。遠隔操作コマンドには、録画のスタートまたはストップ命令、ズーム命令、パン命令、チルト命令、およびステータス要求がある。遠隔操作コマンドに対応する処理が実行されることにより、内部のステータスが書き換えられる。ステータスは、図１９に示されるように、録画状態、パン状態、チルト状態、ズーム状態の４つの情報からなり、デジタルビデオカメラ２の現在の状態（録画しているか否か、いずれかの方向にパンを行っているか否か、いずれかの方向にチルトを行っているか否か、および、ズームを行っているか否か）が記載されている。ステップＳ１０の処理の終了後、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
【０１１３】
ステップＳ９において、パーソナルコンピュータ１から遠隔操作コマンドを受信していないと判断された場合、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
【０１１４】
このような処理により、デジタルビデオカメラ２においては、パーソナルコンピュータ１を用いてユーザが入力した操作に基づいた処理を実行することができる。
【０１１５】
次に、図２０のフローチャートを参照して、パーソナルコンピュータ１の通信プログラム４９ａによる通信処理について説明する。
【０１１６】
ステップＳ２１において、通信プログラム４９ａは、プレビュ画像を要求する必要があるか否かを判断する。通信プログラム４９ａは、所定の時間ごとに、プレビュ画像を要求するようになされているので、前にプレビュ画像を要求してから、所定の時間が経過していない場合、プレビュ画像を要求する必要がないと判断し、その処理は、ステップＳ２５に進む。ステップＳ２１において、プレビュ画像を要求する必要があると判断された場合、ステップＳ２２において、通信プログラム４９ａは、遠隔操作コマンドレジスタに、保存されているコマンドがあるか否かを判断する。
【０１１７】
例えば、図２１を用いて後述するステップＳ３９の送信コマンド決定処理が実行された場合、遠隔操作コマンドレジスタに保存されているコマンドがあると判断されるので、処理は、ステップＳ２４に進む。ステップＳ２２において、遠隔操作コマンドレジスタに、保存されているコマンドがないと判断された場合、ステップＳ２３において、通信プログラム４９ａは、無線通信部５０を制御して、デジタルビデオカメラ２に対して、プレビュ画像を要求する（転送を要求する）。ステップＳ２３の処理の終了後、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１１８】
ステップＳ２２において、遠隔操作コマンドレジスタに、保存されているコマンドがあると判断された場合、ステップＳ２４において、通信プログラム４９ａは、無線通信部５０を制御して、デジタルビデオカメラ２に対して、保存されているコマンドを含む、プレビュ画像要求を送信する。ステップＳ２４の処理の終了後、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１１９】
ステップＳ２５において、通信プログラム４９ａは、無線通信部５０を制御して、デジタルビデオカメラ２からステップＳ２３の処理のプレビュ画像の要求に対応したプレビュ画像が送信されてきたか否かを判断し、例えば、図１８のステップＳ２の処理により、プレビュ画像が送信されてきたと判断した場合、その処理は、ステップＳ２６に進む。
【０１２０】
ステップＳ２６において、通信プログラム４９ａは、無線通信部５０を制御して、送信されてきたプレビュ画像を受信させＶＲＡＭ４４に記憶させる。
【０１２１】
ステップＳ２７において、通信プログラム４９ａは、プレビュ画像がＶＲＡＭ４４に格納されたことを示すモニタ変更通知を画像転送プログラム４９ｂに送信するとともに、プレビュ画像とともに、ステータスが送信されてきた場合、そのステータスを画像転送プログラム４９ｂに送信する。例えば、図２１を用いて後述するステップＳ３９の送信コマンド決定処理が実行され、デジタルビデオカメラ２にステータスが要求された場合、デジタルビデオカメラ２は、図８のステップＳ１０の処理により、プレビュ画像とともに、ステータスを送信する。ステップＳ２７の処理の終了後、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１２２】
ステップＳ２５において、プレビュ画像が送信されてきていないと判断された場合、ステップＳ２８において、通信プログラム４９ａは、画像転送プログラム４９ｂから静止画の撮影が要求されたか否かを判断する。例えば、後述する図２４のフローチャートのステップＳ８８の処理により、画像転送プログラム４９ｂから静止画の撮影が要求された場合、ステップＳ２９において、画像転送プログラム４９ｂは、無線通信部５０を制御して、デジタルビデオカメラ２に対して静止画の撮影を要求する。ステップＳ２９の処理の終了後、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１２３】
ステップＳ２８において、静止画の撮影が要求されていないと判断された場合、ステップＳ３０において、通信プログラム４９ａは、無線通信部５０を制御して、デジタルビデオカメラ２からサムネイル画像が送信されたか否かを判断する。例えば、図１８のフローチャートのステップＳ５の処理により、デジタルビデオカメラ２からサムネイル画像が送信されてきた場合、サムネイル画像が送信されてきたと判断され、その処理は、ステップＳ３１に進む。
【０１２４】
ステップＳ３１において、通信プログラム４９ａは、無線通信部５０を制御して、デジタルビデオカメラ２から送信されてきたサムネイル画像を受信させ、ＶＲＡＭ４４に記憶させる。
【０１２５】
ステップＳ３２において、通信プログラム４９ａは、サムネイル画像がＶＲＡＭ４４に記憶されたことを示すモニタ変更通知を画像転送プログラム４９ｂに送信するとともに、無線通信部５０を制御して、デジタルビデオカメラ２に対して静止画を転送するように要求させる。ステップＳ３２の処理の終了後、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１２６】
ステップＳ３０において、サムネイル画像が送信されてきていないと判断された場合、ステップＳ３３において、通信プログラム４９ａは、無線通信部５０を制御して、デジタルビデオカメラ２から分割された静止画が送信されてきたか否かを判断する。例えば、図１８のフローチャートのステップＳ８の処理により分割された静止画が順次送信されてきた場合、分割された静止画が送信されてきたと判断し、その処理は、ステップＳ３４に進む。
【０１２７】
ステップＳ３４において、通信プログラム４９ａは、無線通信部５０を制御して、分割されて送信されてきた静止画を受信させ、順次、ＶＲＡＭ４４に記憶させる。ステップＳ３５において、通信プログラム４９ａは、ＶＲＡＭ４４に記憶された静止画の進捗状況を読出し、画像転送プログラム４９ｂに進捗通知を送信する。
【０１２８】
ステップＳ３６において、通信プログラム４９ａは、ＶＲＡＭ４４を確認し、転送されてきている分割された静止画の全てが記憶されたか否かを判断し、全ての静止画が記憶されていないと判断した場合、その処理は、ステップＳ３４に戻る。すなわち、静止画がデジタルビデオカメラから転送されている間は、ステップＳ３４乃至Ｓ３６の処理が繰り返される。
【０１２９】
ステップＳ３６において、全ての静止画がＶＲＡＭ４４に記憶されたと判断された場合、ステップＳ３７において、通信プログラム４９ａは、静止画の転送が完了したことを示す転送完了の通知を画像転送プログラム４９ｂに送信し、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１３０】
ステップＳ３３において、デジタルビデオカメラ２から分割された静止画が送信されていないと判断された場合、ステップＳ３８において、通信プログラム４９ａは、画像転送プログラム４９ｂから遠隔操作コマンドが供給されたか否かを判断する。例えば、後述する図２４のフローチャートのステップＳ９８の処理により、遠隔操作コマンドが送信された場合、遠隔操作コマンドが供給されたと判断し、ステップＳ３９において、図２１を用いて後述する送信コマンド決定処理が実行されて、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。ステップＳ３８において、画像転送プログラム４９ｂから遠隔操作コマンドが供給されていないと判断された場合、処理は、ステップＳ２１に戻り、それ以降の処理が繰り返される。
【０１３１】
次に、図２１のフローチャートを参照して、図２０のステップＳ４９において実行される、送信コマンド決定処理について説明する。
【０１３２】
ステップＳ５１において、通信プログラム４９ａは、画像転送プログラム４９ｂから供給されたコマンドは、パン、チルト、ズームのうちのいずれかであるか、または、その他のコマンド（パンチルトセンタ、または、録画開始・終了のいずれか）であるかを判断する。
【０１３３】
ここで、供給されるコマンドについて、図２２を用いて説明する。
【０１３４】
画像転送プログラム４９ｂから供給されるコマンドは、録画開始・終了、パンチルトセンタ、ズーム操作、パン操作、および、チルト操作の、５つの種別に分類される。それぞれのコマンドはコマンドＩＤを有し、録画開始・終了コマンド（Ｒｅｃ Ｓｔａｒｔ／Ｓｔｏｐ）（０ｘ１０）、および、パンチルトセンタ（Ｐａｎ／Ｔｉｌｔ Ｃｅｎｔｅｒ）（０ｘＢ０）は、種別に１つのみのコマンドである。ズーム操作には、望遠ズームコマンド（Ｚｏｏｍ＿ｔｅｌｅ）１乃至７、ズームストップコマンド（ｚｏｏｍ＿ｓｔｏｐ）、および、広角ズームコマンド（Ｚｏｏｍ＿ｗｉｄｅ）１乃至７（０ｘ８１乃至０ｘ８Ｆ）の１５のコマンドがある。パン操作には、左方向パン（Ｐａｎ＿ｌｅｆｔ）１乃至７、パンストップ（Ｐａｎ＿ｓｔｏｐ）、および、右方向パン（Ｐａｎ＿ｒｉｇｈｔ）（０ｘ９１乃至０ｘ９Ｆ）の１５のコマンドがある。チルト操作には、左方向チルト（Ｔｉｌｔ＿ｌｅｆｔ）１乃至７、チルトストップ（Ｔｉｌｔ＿ｓｔｏｐ）、および、右方向チルト（Ｔｉｌｔ＿ｒｉｇｈｔ）（０ｘＡ１乃至０ｘＡＦ） の１５のコマンドがある。なお、コマンド中の数字はスピードを表し、数字が大きいほうが速い。
【０１３５】
さらに、デジタルビデオカメラに送信するコマンドとして、現在のカメラステータス（図１９を用いて説明したステータス）を返してもらうように要求するステータス要求（Ｓｔａｔｕｓ＿ｒｅｑｕｅｓｔ）（０ｘ０２）がある。
【０１３６】
これらのコマンドは、プレビュ画像要求（Ｇｅｔ＿Ｍｏｎｉｔｏｒｉｎｇｉｍａｇｅ）（０ｘ００）の送信時に、いずれか１つだけ付加されて送信される。すなわち、１フレームのプレビュ画像が変わるたびに、１つのコマンドがデジタルカメラ２に送信される。
【０１３７】
それぞれのコマンドについて説明する。録画開始・終了コマンドは、録画の開始、終了操作を行うが、この命令は開始と終了で１つずつあるわけではなく、開始と終了のセットで１つである。すなわち、この命令は、いわゆるトグル状態になっていて、デジタルビデオカメラ２が録画状態でないときにこの命令を受けた場合、デジタルビデオカメラ２は録画を開始して録画状態となり、デジタルビデオカメラ２が録画状態のときにこの命令を受けた場合、デジタルビデオカメラ２は録画を停止する。ズーム操作、パン操作、チルト操作は、一度命令すると、それぞれ、ズームストップ、パンストップ、または、チルトストップ、または、パンチルトセンタが指令されるまで、その操作を継続することを指令するコマンドである。したがって、撮影方向を斜めに移動させたい場合においては、パンとチルトを順次命令すれば、それぞれ対応するストップ命令が発生されるまで、撮影方向は、斜め方向に移動される。パンチルトセンタコマンドは、撮影位置を撮影可能範囲の中央に戻すためのコマンドである。
【０１３８】
ステップＳ５１において、画像転送プログラム４９ｂから供給されたコマンドは、パン、チルト、ズームのうちのいずれかであると判断された場合、ステップＳ５２において、通信プログラム４９ａは、画像転送プログラム４９ｂから供給されたコマンドを、所定の規則に基づいて保存することにより、送信コマンドを決定するために用いられるコマンド履歴テーブルに、ステップＳ５１において供給されたコマンドと同一種別のコマンドがすでに記載されているか否かを判断する。
【０１３９】
図２３に、コマンド履歴テーブルを示す。コマンド履歴テーブルには、パン、チルト、ズームの種別ごとに、コマンド名と時刻を記載する欄が設けられ、それぞれの種別において、初めてコマンドが供給された場合、そのコマンド名と時刻が記載され、すでに記載のある種別の新たなコマンドが供給された場合、最も新しく供給されたコマンド名が記載（上書き）されるが、その時刻は上書きされない。すなわち、図２３に示されるように、コマンド履歴テーブルのパンおよびズームの欄において、最も最近供給されたコマンド名と、最も早く供給されたコマンドの供給時刻が記載されている状態で、チルトの種別のコマンドが供給された場合、そのコマンド名と供給時刻が記載され、パンまたはズームの種別のコマンドが供給された場合、コマンド名のみが上書きされる。
【０１４０】
すなわち、ステップＳ５２において、コマンド履歴テーブルに、同一種別のコマンドがすでに記載されていると判断された場合、ステップＳ５３において、通信プログラム４９ａは、受け取ったコマンドを、コマンド履歴テーブルの同一種別のコマンドの記載に上書きする（時刻情報は更新しない）。
【０１４１】
そして、ステップＳ５２において、コマンド履歴テーブルに、同一種別のコマンドが記載されていないと判断された場合、ステップＳ５４において、通信プログラム４９ａは、受け取ったコマンドを、受け取った時刻とともに、コマンド履歴テーブルの対応する個所に記載する。
【０１４２】
ステップＳ５１において、画像転送プログラム４９ｂから供給されたコマンドは、パン、チルト、ズームのうちのいずれかではない、すなわち、パンチルトセンタまたは録画開始・終了のコマンドを受け取ったと判断された場合、ステップＳ５５において、通信プログラム４９ａは、内部に有するパンチルトセンタコマンドを受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグをアクティブにする。
【０１４３】
ステップＳ５３、ステップＳ５４、または、ステップＳ５５の処理の終了後、ステップＳ５６において、通信プログラム４９ａは、プレビュ画像の要求タイミングであるか否かを判断する。
【０１４４】
拡張ＢＩＰにおいては、前述のプレビュ画像を取得するための要求信号に１つの遠隔操作コマンドを付け加えることができる仕様となっている。ここでプレビュ画像のやりとりは、ブルートゥースの通信状態によって、タイミングは一定ではない。また、遠隔操作コマンドも、ユーザ操作によって発生するため、コマンドの発生タイミングも一定ではない。すなわち、プレビュ画像の要求を送信するときに、２つ以上の遠隔操作コマンドが存在することもあれば、１つも存在しないこともある。したがって、ステップＳ５６において、プレビュ画像の要求タイミングではないと判断された場合、処理は、図２０のステップＳ２１に進む。
【０１４５】
ステップＳ５６において、プレビュ画像の要求タイミングであると判断された場合、ステップＳ５７において、通信プログラム４９ａは、前回送信されたコマンドは、録画開始・終了のコマンドであるか否かを判断する。ステップＳ５７において、前回送信されたコマンドは、録画開始・終了のコマンドであると判断された場合、処理は、後述するステップＳ６４に進む。
【０１４６】
ステップＳ５７において、前回送信されたコマンドは、録画開始・終了のコマンドではないと判断された場合、ステップＳ５８において、通信プログラム４９ａは、コマンド送信回数をカウントする内部のカウンタの値が５以上であるか否かを判断する。ステップＳ５８において、カウンタの値が５以上であると判断された場合、処理は、後述するステップＳ６４に進む。
【０１４７】
ステップＳ５８において、カウンタの値が５以上ではないと判断された場合、ステップＳ５９において、通信プログラム４９ａは、パンチルトセンタコマンド受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグがアクティブであるか否かを判断する。
【０１４８】
ステップＳ５９において、パンチルトセンタコマンド受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグがアクティブであると判断された場合、ステップＳ６０において、通信プログラム４９ａは、パンチルトセンタコマンド、または、録画開始・終了のコマンドのうち、フラグがアクティブであるコマンドを送信し、対応するフラグをインアクティブにする。なお、パンチルトセンタコマンド、または、録画開始・終了のコマンドには、予め優先順位が定められ、両方のフラグがアクティブ状態である場合、いずれか一方のコマンドが送信される。
【０１４９】
ステップＳ５９において、パンチルトセンタコマンド受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグがアクティブではないと判断された場合、ステップＳ６１において、通信プログラム４９ａは、図２３を用いて説明したコマンド履歴テーブルを参照し、時刻の一番古い種別の欄に記載されているコマンドを送信する。
【０１５０】
ステップＳ６２において、通信プログラム４９ａは、送信されたコマンドを、対応するコマンド種別の時刻情報とともに、コマンド履歴テーブルから削除する。
【０１５１】
ステップＳ６０、または、ステップＳ６２の処理の終了後、ステップＳ６３において、通信プログラム４９ａは、コマンド送信回数をカウントする内部のカウンタカウンタに１を加え、処理は、図２０のステップＳ２１に進む。
【０１５２】
ステップＳ５７において、前回送信されたコマンドは、録画開始・終了のコマンドであると判断された場合、または、ステップＳ５８において、カウンタの値が５以上であると判断された場合、ステップＳ６４において、通信プログラム４９ａは、ステータス要求を送信し、カウンタを０として、処理は、図２０のステップＳ２１に進む。
【０１５３】
すなわち、録画開始または終了のコマンドが送信された次のタイミング、または、プレビュ画像要求のうちの少なくとも５回に１回は、ステータスが要求されるものである。
【０１５４】
図２１を用いて説明した処理において、コマンドの供給時刻が最も古い種別のコマンドから送信されるようになされているのは、各種別のコマンドが平等に実行されるようにするためである。例えば、常に、最も新しく供給されたコマンド種別のコマンドが実行されるＬＩＦＯ（Ｌａｓｔ Ｉｎ Ｆｉｒｓｔ Ｏｕｔ）アルゴリズムが用いられた場合、新しいコマンドの到着タイミングによっては、以下のような不具合が発生する。
【０１５５】
例えば、右方向チルトコマンドと、広角ズームコマンドが供給され、その後、左方向チルトコマンドが供給され、プレビュ画像の要求タイミングとなった場合、左方向チルトコマンドが送信され、コマンド履歴テーブルには、広角ズームコマンドが残る。そして、その後、複数のコマンドが供給されても、プレビュ画像の要求タイミングの直前にチルトに関するコマンドが供給された場合、ユーザが、何度かズームを指令しているのにもかかわらず、ズーム系のコマンドが、まったく送信されなくなってしまう。
【０１５６】
このような不具合を防止するために、コマンドの供給時刻が最も古い種別のコマンドから送信されるようになされているので、各種別のコマンドが平等に実行される。
【０１５７】
そして、同一種別のコマンドのうち、最新のコマンドが送信されるのは、ユーザが指令した最新のコマンドを反映させるためである。通信プログラム４９ａが、例えば、１秒間に３回程度、デジタルビデオカメラ２にプレビュ画像の要求を行うようになされている場合、ＦＩＦＯ（Ｆｉｒｓｔ Ｉｎ Ｆｉｒｓｔ Ｏｕｔ）のアルゴリズムで、全てのコマンドを順次デジタルビデオカメラ２に送信するようにした場合、ユーザが操作したコマンドが実行されるまでに、時間遅れが生じてしまう。したがって、送信待ちのコマンドを全て残すのではなく、送信された種別のコマンドを、履歴から消去するようになされている。
【０１５８】
さらに、遠隔操作コマンド送信までの期間中に、例えば、右方向パンコマンドの後に、パンストップのコマンドが供給された場合、これら２つのコマンドを相殺して、結局何も行われなかったものとして、コマンドを一切送らないという方法も考えられる。しかしながら、コマンドの相殺を行うためには、コマンド発生のルールとして、相反するコマンドは、必ず連続して行われるというルールが必要である。すなわち、「望遠ズーム」「望遠ズーム」「ズームストップ」の順にコマンドが供給されて、「望遠ズーム」「ズームストップ」を相殺してしまっては、ユーザの最新の操作である「ズームストップ」が実行されず、「望遠ズーム」が実行されてしまうので、「望遠ズーム」の次に、ズーム実行のためのコマンドが供給されるよりも先に、必ず「ズームストップ」が供給されるのでなければ、コマンドの相殺によって、ユーザの意図が反映されないという状況を生じてしまう。
【０１５９】
したがって、本発明においては、ユーザの操作入力に制限を設けることを避けるため、コマンドの相殺を行わないものとする。
【０１６０】
このようにすることにより、簡単な処理方法で、送信待ちコマンドを記憶する領域が少なくてすみ、パン、チルト、ズームのコマンド種別間で、平等にコマンド送信が行われ、さらに、大量のコマンドが発生した場合においても、コマンド実行までの時間遅れがある一定以上にはならない。
【０１６１】
次に、図２４のフローチャートを参照して、画像転送プログラム４９ｂによる画像の転送処理について説明する。
【０１６２】
ステップＳ８１において、画像転送プログラム４９ｂは、モニタ変更通知を受信したか否かを判断する。例えば、図２０のステップＳ２７、または、ステップＳ３２の処理により通信プログラム４９ａよりモニタ変更通知が送信されてきた場合、画像転送プログラム４９ｂは、モニタ変更通知を受信したと判断し、その処理は、ステップＳ８２に進む。
【０１６３】
ステップＳ８２において、画像転送プログラム４９ｂは、ＶＲＡＭ４４に記憶されているプレビュ画像、または、サムネイル画像を読み出すとともに、同時に送信されたステータスがあった場合、そのステータスを保存する。ステップＳ８２の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１６４】
ステップＳ８１において、モニタ変更通知を受信していないと判断された場合、ステップＳ８３において、画像転送プログラム４９ｂは、画像操作プログラム４９ｃからステータスの要求があったか否かを判断する。ステップＳ８３において、ステータスの要求があったと判断された場合、ステップＳ８４において、画像転送プログラム４９ｂは、ステップＳ８２において保存されたステータスを、画像操作プログラム４９ｃに通知する。ステップＳ８４の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１６５】
ステップＳ８３において、ステータスの要求がなかったと判断された場合、ステップＳ８５において、画像転送プログラム４９ｂは、画像操作プログラム４９ｃからプレビュ画像、または、サムネイル画像の要求があったか否かを判断する。例えば、後述する、図２５のフローチャートのステップＳ１１２、または、Ｓ１２０の処理により、プレビュ画像、または、サムネイル画像の要求がなされた場合、プレビュ画像、または、サムネイル画像の要求があったと判断され、その処理は、ステップＳ８６に進む。
【０１６６】
ステップＳ８６において、画像転送プログラム４９ｂは、読み出したプレビュ画像、または、サムネイル画像を、画像操作プログラム４９ｃに送信する。ステップＳ８６の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１６７】
ステップＳ８５において、サムネイル画像、または、プレビュ画像の要求がないと判断された場合、ステップＳ８７において、画像転送プログラム４９ｂは、画像操作プログラム４９ｃから静止画の撮影が要求されたか否かを判断する。例えば、後述する、図２５のステップＳ１１８の処理により静止画の撮影要求が送信されてきた場合、静止画の撮影要求が受信されたと判断し、その処理は、ステップＳ８８に進む。
【０１６８】
ステップＳ８８において、画像転送プログラム４９ｂは、静止画の撮影要求を通信プログラム４９ａに送信する。ステップＳ８８の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１６９】
ステップＳ８７において、静止画の撮影が要求されていないと判断された場合、ステップＳ８９において、画像転送プログラム４９ｂは、進捗通知が通信プログラム４９ａから送信されてきたか否かを判断する。例えば、図２０のフローチャートのステップＳ３５の処理により、進捗通知が送信されてきた場合、進捗通知が送信されてきたと判断され、ステップＳ９０において、画像転送プログラム４９ｂは、送信されてきた進捗通知を受信して、記憶する。ステップＳ９０の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１７０】
ステップＳ８９において、進捗通知が送信されてきていないと判断された場合、ステップＳ９１において、画像転送プログラム４９ｂは、画像操作プログラム４９ｃから進捗通知が要求されたか否かを判断する。例えば、後述する、図２５のフローチャートにおけるステップＳ１２２の処理により進捗通知が要求された場合、進捗通知が要求されたと判断され、ステップＳ９２において、画像転送プログラム４９ｂは、ステップＳ９０の処理で受信した進捗通知を、画像操作プログラム４９ｃに送信する。ステップ９２の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１７１】
ステップＳ９１において、進捗通知が要求されていないと判断された場合、ステップＳ９３において、画像転送プログラム４９ｂは、静止画のＶＲＡＭ４４への転送が完了したことを示す完了通知が通信プログラム４９ａから送信されてきたか否かを判断する。例えば、図２０のフローチャートにおけるステップＳ３７の処理により通信プログラム４９ａから完了通知が送信されてきた場合、完了通知が送信されてきたと判断され、その処理は、ステップＳ９４に進む。
【０１７２】
ステップＳ９４において、画像転送プログラム４９ｂは、通信プログラム４９ａから送信されてきた完了通知を受信し、さらに、画像操作プログラム４９ｃに通知（送信）する。ステップＳ９４の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１７３】
ステップＳ９３において、完了通知が送信されてきていないと判断された場合、ステップＳ９５において、画像転送プログラム４９ｂは、画像操作プログラム４９ｃより静止画が要求されているか否かを判断する。例えば、後述する、図２５のステップＳ１２５の処理により、画像操作プログラム４９ｃより静止画の要求が送信されてきた場合、静止画の要求があったと判断し、ステップＳ９６において、画像転送プログラム４９ｂは、ＶＲＡＭ４４より静止画を読出し、画像操作プログラム４９ｃに送信する。ステップ９６の処理の終了後、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１７４】
ステップＳ９５において、静止画が要求されていないと判断された場合、ステップＳ９７において、画像転送プログラム４９ｂは、画像操作プログラム４９ｃより遠隔操作コマンドが供給されたか否かを判断する。例えば、図２５のステップＳ１１５の処理において、デジタルビデオカメラに対する操作が入力されたと判断され、図２７を用いて後述するコマンド供給およびステータス確認処理が実行された場合、遠隔操作コマンドが供給されたと判断されるので、ステップＳ９８において、画像転送プログラム４９ｂは、通信プログラム４９ａに、遠隔操作コマンドを送信し、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。ステップＳ９７において、遠隔操作コマンドが供給されなかったと判断された場合も、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。
【０１７５】
次に、図２５のフローチャートを参照して、画像操作プログラム４９ｃによる操作処理について説明する。
【０１７６】
ステップＳ１１１において、画像操作プログラム４９ａは、所定の時間が経過したか否かを判断し、所定の時間が経過していると判断した場合、その処理は、ステップＳ１１２に進む。
【０１７７】
ステップＳ１１２において、画像操作プログラム４９ｃは、プレビュ画像を画像転送プログラム４９ｂに対して要求する。この処理により、図２４のフローチャートにおけるステップＳ８６の処理が実行されて、画像転送プログラム４９ｂからプレビュ画像が送信される。そこで、画像操作プログラム４９ｃは、ステップＳ１１３において、送信されてきたプレビュ画像を受信し、ステップＳ１１４において、例えば、図８で示す表示部２１８にプレビュ画像を表示し、その処理は、ステップＳ１２７に進む。
【０１７８】
ステップＳ１１１において、所定時間が経過していないと判断された場合、ステップＳ１１５において、画像操作プログラム４９ｃは、例えば、図８のコントローラ２１９に対して入力される、パン、チルト、ズーム、録画開始・終了、パンチルトセンタなど、デジタルビデオカメラ２に対する操作入力が実行されたか否かを判断する。
【０１７９】
ステップＳ１１５において、デジタルビデオカメラ２に対する操作入力が実行されたと判断された場合、ステップＳ１１６において、図２７を用いて後述するコマンド供給およびステータス確認処理が実行される。
【０１８０】
ステップＳ１１５において、デジタルビデオカメラ２に対する操作入力が実行されなかったと判断された場合、または、ステップＳ１１６の処理の終了後、ステップＳ１１７において、画像操作プログラム４９ｃは、静止画の撮影が要求されたか否かを判断する。例えば、図８で示したように静止画モードの表示画面が表示されていた場合、撮影ボタン２３１ａが操作されるとき、画像操作プログラム４９ｃは、静止画の撮影が要求されたと判断し、その処理は、ステップＳ１１８に進む。
【０１８１】
ステップＳ１１８において、画像操作プログラム４９ｃは、静止画の撮影要求を画像転送プログラム４９ｂに送信する。
【０１８２】
ステップＳ１１９において、画像操作プログラム４９ｃは、所定の時間が経過したか否かを判断し、所定の時間が経過するまで、その処理を繰り返す。ステップＳ１１９において、所定の時間が経過したと判断された場合、ステップＳ１２０において、画像操作プログラム４９ｃは、画像転送プログラム４９ｂに、サムネイル画像、または、プレビュ画像を要求（プレビュ画像要求を発行）する。
【０１８３】
この要求に基づいて、例えば、図２４のフローチャートにおけるステップＳ８６の処理によりサムネイル画像、または、プレビュ画像が送信されてくる。
【０１８４】
すると、ステップＳ１２１において、画像操作プログラム４９ｃは、画像転送プログラムから送信されてくるプレビュ画像、または、サムネイル画像を受信し（取得し）、表示する。より正確には、基本的には、プレビュ画像が送信されてくるが、ステップＳ８２の処理でサムネイル画像が受信されている場合のみ、サムネイル画像を受信し、例えば、図９で示すように、サムネイル画像２１７ｂのように表示し、それ以外の場合、図９の表示部２１８で示すように、プレビュ画像を受信して表示する。
【０１８５】
ステップＳ１２２において、画像操作プログラム４９ｃは、画像転送プログラム４９ｂに進捗通知を要求する。この処理により、例えば、図２４のフローチャートのステップＳ９２により進捗通知が送信されてくる。すると、ステップＳ１２３において、画像操作プログラム４９ｃは、受信した進捗通知に基づいて、静止画の転送における進捗状態を表示する。すなわち、画像操作プログラム４９ｃは、静止画の転送における進捗状態をユーザに通知するために、例えば、図２６で示すように、転送状態を示すプログレスバー３１１を表示する。このプログレスバー３１１は、進捗状況を図中の白マスで示し、全体の進捗状態が０％であれば、白マスのない状態を表示し、進捗状態が５０％であれば、プログレスバー３１１の左から中央部まで白マスを表示し、さらに１００％の場合は、プログレスバーの全範囲を白マスで表示する。
【０１８６】
ステップＳ１２４において、画像操作プログラム４９ｃは、画像転送プログラム４９ｂから完了通知を受信したか否かを判断し、受信しなかったと判断された場合、その処理は、ステップＳ１１９に戻る。すなわち、完了通知が受信されるまでステップＳ１１９乃至Ｓ１２４の処理が繰り返される。
【０１８７】
例えば、図２４のフローチャートにおけるステップＳ９４の処理により完了通知が送信されてきた場合、ステップＳ１２４において、完了通知を受信したと判断されるので、ステップＳ１２５において、画像操作プログラム４９ｃは、画像転送プログラム４９ｂに静止画像を要求する。すると、図２４のフローチャートにけるステップＳ９６の処理により静止画が送信されてくることになる。そこで、ステップＳ１２６において、画像操作プログラム４９ｃは、画像転送プログラム４９ｂにより送信されてきた静止画を受信し、例えば、図９の表示部２１８に表示し、その処理は、ステップＳ１２７に進む。
【０１８８】
ステップＳ１１７において、静止画の撮影が要求されなかったと判断された場合、または、ステップＳ１２６の処理の終了後、ステップＳ１２７において、画像操作プログラム４９ｃは、動画の録画が要求されたか否かを判断する。例えば、図１０で示した録画ボタン２３１ｂが操作されると、画像操作プログラム４９ｃは、動画の録画が要求されたと判断し、その処理は、ステップＳ１２８に進む。
【０１８９】
ステップＳ１２８において、画像操作プログラム４９ｃは、ステップＳ１１３の処理で受信された今現在のプレビュ画像を録画する。
【０１９０】
ステップＳ１２９において、画像操作プログラム４９ｃは、終了が要求されているか否かを判断する。例えば、録画が継続されており、終了ではないと判断された場合、ステップＳ１３０において、画像操作プログラム４９ｃは、所定の時間が経過したか否かを判断し、所定の時間が経過するまで、その処理を繰り返し、所定の時間が経過したと判断した場合、その処理は、ステップＳ１３１に進む。
【０１９１】
ステップＳ１３１において、画像操作プログラム４９ｃは、プレビュ画像を画像転送プログラム４９ｂに対して要求する（要求を発行する）。この処理により、図２４のフローチャートにおけるステップＳ８６の処理によりプレビュ画像が送信されてくる。そこで、ステップＳ１３２において、画像操作プログラム４９ｃは、送信されてきたプレビュ画像を受信し、その処理は、ステップＳ１２８に戻る。このとき、画像操作プログラム４９ｃは、ステップＳ１２８において、新たに受信されたプレビュ画像を録画する（取得して録画する）。そして、ステップＳ１２９において、終了が指示されたと判断されるまで、ステップＳ１２８乃至Ｓ１３２の処理が繰り返されて録画が実行される。
【０１９２】
そして、ステップＳ１２９において、例えば、図１１で示す終了ボタン２３１ｃが操作されて終了が指示されたと判断された場合、または、ステップＳ１２７において、録画が指示されていないと判断された場合、その処理は、ステップＳ１１１に戻り、それ以降の処理が繰り返される。
【０１９３】
次に、図２７のフローチャートを参照して、図２５のステップＳ１１６において実行される、コマンド供給およびステータス確認処理について説明する。
【０１９４】
ステップＳ１５１において、画像操作プログラム４９ｃは、コントローラ２１９に対して実行されたユーザの操作入力に基づいたコマンドを、画像転送プログラム４９ｂに供給する。
【０１９５】
ステップＳ１５２において、画像操作プログラム４９ｃは、コントローラ２１９に対して実行されたユーザの操作入力は、パン、または、チルトであるか否かを判断する。ステップＳ１５２において、ユーザの操作入力は、パン、または、チルトのいずれでもないと判断された場合、処理は、図２５のステップＳ１１７に進む。
【０１９６】
ステップＳ１５２において、ユーザの操作入力は、パン、または、チルトのいずれかであると判断された場合、画像操作プログラム４９ｃは、ステップＳ１５３において、内部に有するタイマのカウントを開始し、ステップＳ１５４において、所定の時間が経過したか否かを判断する。ステップＳ１５４において、所定の時間が経過していないと判断された場合、所定の時間が経過したと判断されるまで、ステップＳ１５４の処理が繰り返される。
【０１９７】
ステップＳ１５４において、所定の時間が経過したと判断された場合、ステップＳ１５５において、画像操作プログラム４９ｃは、画像転送プログラム４９ｂが保持しているステータスを取得する。
【０１９８】
取得されたステータスについて、図２８を用いて説明する。
【０１９９】
ステータスには、図１９を用いて説明したように、録画状態、パン状態、チルト状態、および、ズーム状態の４つの状態が記されている。そして、パン状態ステータスは、図２８Ａに示されるように、コード０Ｘ００で、パンがストップしている状態（Ｐａｎ ｓｔｏｐ）を示し、コード０Ｘ０１で、左方向にパンされている状態（Ｐａｎ Ｌｅｆｔ）を示し、コード０Ｘ０２で、右方向にパンされている状態（Ｐａｎ Ｒｉｇｈｔ）を示す。そして、チルト状態ステータスは、図２８Ｂに示されるように、コード０Ｘ００で、チルトがストップしている状態（Ｔｉｌｔ ｓｔｏｐ）を示し、コード０Ｘ０１で、上方向にチルトされている状態（Ｔｉｌｔ Ｕｐ）を示し、コード０Ｘ０２で、下方向にチルトされている状態（Ｔｉｌｔ Ｄｏｗｎ）を示す。
【０２００】
ステップＳ１５６において、画像操作プログラム４９ｃは、取得されたステータスを参照して、ユーザの操作入力を受けている方向に画面が移動されているか否かを判断する。すなわち、右方向のパンが指令されている状態において取得されたステータスが、コード０Ｘ０２で、右方向にパンされている状態（Ｐａｎ Ｒｉｇｈｔ）を示していた場合、ユーザの操作入力を受けている方向に画面が移動されていると判断されるので、処理は、図２５のステップＳ１１７に進む。
【０２０１】
一方、右方向のパンが指令されている状態において取得されたステータスが、コード０Ｘ００で、パンがストップしている状態（Ｐａｎ ｓｔｏｐ）を示していた場合、左方向のパンが指令されている状態において取得されたステータスが、コード０Ｘ００で、パンがストップしている状態（Ｐａｎ ｓｔｏｐ）を示していた場合、上方向のチルトが指令されている状態において取得されたステータスが、コード０Ｘ００で、チルトがストップしている状態（Ｔｉｌｔ ｓｔｏｐ）を示していた場合、または、下方向のチルトが指令されている状態において取得されたステータスが、コード０Ｘ００で、チルトがストップしている状態（Ｔｉｌｔ ｓｔｏｐ）を示していた場合、ユーザの操作入力を受けている方向に画面が移動されていない、すなわち、撮影位置が、撮影可能な所定の範囲の端部であることが検出されるので、ステップＳ１５７において、画像操作プログラム４９ｃは、撮影可能範囲の端であることをユーザに通知するための表示処理を実行して、処理は、図２５のステップＳ１１７に進む。
【０２０２】
具体的には、画像操作プログラム４９ｃは、デジタルビデオカメラ２の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、図１６を用いて説明したように、ユーザが操作中のパンチルトボタン２２３を点滅表示させたり、パンチルトボタン２２３の表示をネガポジ反転させたり、表示色を変更させるようにするか、図１７を用いて説明したように、ユーザが操作中のマウスカーソルアイコン２６１を点滅表示させたり、マウスカーソルアイコン２６１の表示色を変更させる。ユーザは、これらの表示を確認することにより、撮影方向を、対応する操作入力方向に、これ以上移動することができないことを認識することが可能となる。
【０２０３】
なお、ユーザが、図１６のパンチルトボタン２２３または図１７のマウスカーソルアイコン２６１を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ２の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、例えば、「これ以上、撮影の方向を変更できません」のメッセージが記載されたメッセージウィンドウを表示させたり、所定の図示しないＬＥＤを点灯または消灯させたり、ブザー音を発生したり、音声メッセージにより通知することなどにより、ユーザに対して、これ以上、撮影の方向を変更できないことを通知するようにしても良い。
【０２０４】
次に、図２９のタイミングチャートを参照して、プレビュ画像を表示する処理についてデジタルビデオカメラ２、通信プログラム４９ａ、画像転送プログラム４９ｂ、および、画像操作プログラム４９ｃのそれぞれの処理の関係を説明する。なお、各処理は、図１８乃至図２７のフローチャートで説明しているので、相互の関係のみを説明する。
【０２０５】
まず、通信プログラム４９ａが、ステップＳ２３の処理によりプレビュ画像を要求する。この要求に応じて、デジタルビデオカメラ２が、ステップＳ２の処理により、メモリ８７に記憶されているプレビュ画像を取得して、通信プログラム４９ａに送信する。
【０２０６】
ステップＳ２５において、通信プログラム４９ａが、送信されてきたプレビュ画像を受信させてＶＲＡＭ４４に記憶させ、ステップＳ２７において、モニタ変更通知を画像転送プログラム４９ｂに送信する。
【０２０７】
通信プログラム４９ａから送信されてくるモニタ変更通知により、ステップＳ８２において、画像転送プログラム４９ｂは、プレビュ画像をＶＲＡＭ４４から読み出して取得する。
【０２０８】
画像操作プログラム４９ｃは、ステップＳ１１１乃至Ｓ１１４の処理が、所定の時間間隔で繰り返されているので、所定の時間間隔でステップＳ１１２の処理によりプレビュ画像が画像転送プログラム４９ｂに要求される。
【０２０９】
この要求に基づいて、画像転送プログラム４９ｂは、ステップＳ８６において、ステップＳ８２の処理で取得したプレビュ画像を画像操作プログラム４９ｃに送信する。
【０２１０】
画像操作プログラム４９ｃは、ステップＳ１１３において、プレビュ画像を受信し、ステップＳ１１４において、受信したプレビュ画像を表示する。
【０２１１】
再び、通信プログラム４９ａが、ステップＳ２３の処理によりプレビュ画像を要求すると、以上の処理が繰り返されることになり、プレビュ画像が表示部２１８に表示され続けることになる。
【０２１２】
以上の処理により、遠隔地に設置されているデジタルビデオカメラ２において、何を写しているのかをパーソナルコンピュータ１上でリアルタイムで確認することが可能となる。
【０２１３】
次に、図３０のタイミングチャートを参照して、静止画の撮影を要求し、撮影された静止画を表示する処理についてデジタルビデオカメラ２、通信プログラム４９ａ、画像転送プログラム４９ｂ、および、画像操作プログラム４９ｃのそれぞれの処理の関係を説明する。なお、各処理は、図１８乃至図２７のフローチャートで説明しているので、相互の関係のみを説明する。
【０２１４】
ステップＳ１１８において、画像操作プログラム４９ｃが、画像転送プログラム４９ｂに向けて静止画の撮影を要求する。これを受けて、ステップＳ８８において、画像転送プログラム４９ｂが、通信プログラム４９ａに対して、静止画の撮影を要求する。さらに、この要求に応じて、ステップＳ２９において、通信プログラム４９ａが、デジタルビデオカメラ２に対して静止画の撮影を要求する。
【０２１５】
デジタルビデオカメラ２は、ステップＳ４において、この静止画の撮影要求に応じて静止画を撮影し、ステップＳ５において、サムネイル画像に変換して、パーソナルコンピュータ１（通信プログラム４９ａ）に向けて送信する。通信プログラム４９ａは、ステップＳ３１において、この送信されてきたサムネイル画像を受信しＶＲＡＭ４４に記憶させ、ステップＳ３２において、サムネイル画像がＶＲＡＭ４４に記憶されたことを示すモニタ変更通知を画像転送プログラム４９ｂに送信するとともに、デジタルビデオカメラ２に対して静止画を転送するように要求する。
【０２１６】
ここで、デジタルビデオカメラ２は、静止画の転送要求を受けて、ステップＳ７において、静止画の画像データを分割し、ステップＳ８において、順次分割された静止画の画像データをパーソナルコンピュータ１（通信プログラム４９ａ）に向けて送信する。
【０２１７】
通信プログラム４９ａは、ステップＳ３４において、送信されてくる分割された静止画の画像データをＶＲＡＭ４４に順次記憶させていき、ステップＳ３５において、進捗通知を画像転送プログラム４９ｂに送信する。なお、この処理は、ステップＳ３６において、分割された全ての静止画がＶＲＡＭ４４に記憶されたと判断されるまで、ステップＳ３４乃至Ｓ３６の処理が繰り返される（すなわち、図３０には図示しないが、ステップＳ３４，Ｓ３５の処理は、繰り返されることがある）。
【０２１８】
このとき、画像転送プログラム４９ｂは、ステップＳ９０において、通信プログラム４９ａからステップＳ３５の処理により送信されてくる進捗通知を受信する。
【０２１９】
そして、分割された静止画の全てが、ＶＲＡＭ４４に転送された場合、ステップＳ３７において、通信プログラム４９ａは、画像転送プログラム４９ｂに静止画をＶＲＡＭ４４に転送したことを示す転送完了通知を画像転送プログラム４９ｂに送信する。
【０２２０】
一方、ステップＳ３２の処理により、通信プログラム４９ａから送信されたサムネイル画像がＶＲＡＭ４４に記憶されていることを示すモニタ変更通知により、画像転送プログラム４９ｂは、ステップＳ８２において、ＶＲＡＭ４４に記憶されているサムネイル画像を取得する。
【０２２１】
このとき、画像操作プログラム４９ｃは、画像転送プログラム４９ｂから転送完了通知が送信されるまで、ステップＳ１１９乃至Ｓ１２４の処理を所定の時間間隔で繰り返している。そこで、ステップＳ１２０において、画像操作プログラム４９ｃは、プレビュ画像、または、サムネイル画像を画像転送プログラム４９ｂに要求する。
【０２２２】
この要求に応じて、画像転送プログラム４９ｂは、ステップＳ８６において、サムネイル画像、または、プレビュ画像を画像操作プログラム４９ｃに送信する。
【０２２３】
なお、画像転送プログラム４９ｂは、サムネイル画像を受信した直後であれば、サムネイル画像を画像操作プログラム４９ｃに送信し、それ以降であれば、プレビュ画像を送信する。すなわち、図２９で示したプレビュ画像を表示する処理は、静止画の撮影が要求された場合でも実行されることになる。
【０２２４】
画像操作プログラム４９ｃは、ステップＳ８６の処理で送信されてきたサムネイル画像、または、プレビュ画像を、ステップＳ１２１において、受信し、表示する。
【０２２５】
さらに、画像操作プログラム４９ｃは、所定の時間間隔で画像転送プログラム４９ｂに進捗通知を要求する。このとき、上述のように、画像転送プログラム４９ｂは、ステップＳ９０の処理で受信した進捗通知を、ステップＳ９２において、画像操作プログラム４９ｃに送信する。
【０２２６】
画像操作プログラム４９ｃは、ステップＳ１２３において、画像転送プログラム４９ｂより送信されてくる進捗通知を受信し、表示する。上述のように、ステップＳ３４乃至ステップＳ３６の処理は、分割された全ての静止画がＶＲＡＭ４４に転送されるまで繰り返されるので、ステップＳ９０，ステップＳ９２の処理、および、ステップＳ１２２，ステップＳ１２３の処理も、分割された静止画がＶＲＡＭ４４に全て転送されるまで所定の時間間隔で繰り返される。
【０２２７】
そして、ステップＳ３７の処理により完了通知が送信されてくると、ステップＳ９４の処理により、画像転送プログラム４９ｂは、通信プログラム４９ａからの完了通知を受信するとともに、画像操作プログラム４９ｃに対して、転送完了通知を送信する。
【０２２８】
そして、この転送の完了通知が、画像転送プログラム４９ｂから送信されてくると、これに応じて、画像操作プログラム４９ｃが、ステップＳ１２５において、画像転送プログラム４９ｂに対して、静止画を要求する。
【０２２９】
この要求に応じて、ステップＳ９６において、画像転送プログラム４９ｂが、ＶＲＡＭ４４に記憶されている静止画を画像操作プログラム４９ｃに送信する。画像操作プログラム４９ｃは、ステップＳ１２６において、この送信されてくる静止画を受信して、表示する。
【０２３０】
以上の処理により、デジタルビデオカメラ２が遠隔地にあっても、パーソナルコンピュータ１により静止画を撮影させることができるとともに、撮影された静止画をパーソナルコンピュータ１が遠隔地からでも受信し、表示することが可能となる。
【０２３１】
また、動画を撮影する場合、上述の静止画を撮影する方法では、画像の転送に時間がかかるため、プレビュ画像を連続的に画像操作プログラム４９ｃが記録する。すなわち、図３１で示すように、図２９のステップＳ１１２，ステップＳ１１４の処理に代えて、ステップＳ１３１，ステップＳ１２８の処理を実行する。このような処理により動画を記録させることができる。
【０２３２】
さらに、定点観測画像を撮影する場合、図３１のタイミングチャートにおけるステップＳ１２８のプレビュ画像を録画する間隔を調整する。すなわち、録画されるプレビュ画像の１枚が、定点観測画像を構成する静止画として記録されるようにすることで、定点観測画像を撮影することができる。
【０２３３】
なお、通信プログラム４９ａは、プレビュ画像を要求し（ステップＳ２の処理）、プレビュ画像が受信され記憶される（ステップＳ２５の処理）と、再び、プレビュ画像を要求（ステップＳ２の処理）するといった処理を繰り返すが、無線通信部５０および無線通信部１０１が使用されているため、通信環境、通信距離などにより所要時間は一定とならない。
【０２３４】
一方、画像操作プログラム４９ｃは、プレビュ画像を表示する場合（静止画の撮影や動画の録画が要求されていない場合）、所定の時間間隔（ステップＳ１１１）で画像転送プログラム４９ｂに対して画像を要求し（ステップＳ１１２）、この要求に応じて、画像転送プログラム４９ｂは、モニタ変更通知ごとにＶＲＡＭ４４から読み出している（ステップＳ８２）プレビュ画像を送信する（ステップＳ８６）。結果として、ＶＲＡＭ４４から読み出されているプレビュ画像が、画像操作プログラム４９ｃに送信されて受信される（ステップＳ１１３）ので、所定の時間間隔でＶＲＡＭ４４からプレビュ画像が読み出されて表示される状態となる。
【０２３５】
したがって、画像操作プログラム４９ａは、例えば、１０ｆｐｓで画像の供給を受けたい場合、上述の所定の時間間隔を１００ｍｓに設定し、画像転送プログラム４９ｂに対して画像を要求する。このとき、画像操作プログラム４９ｃと画像転送プログラム４９ｂは、パーソナルコンピュータ１上にあるので転送にかかる時間はわずかであるため、デジタルビデオカメラ２では、所望とするフレームレートで画像を提供できない場合があり、画像転送プログラム４９ｂにプレビュ画像の要求を出したタイミングによっては、同じ画像が返ってくることがあるものの、画像操作プログラム４９ｃは、所望とするフレームレートのプレビュ画像を得ることができる。このようにして得られたプレビュ画像は、一定フレームレートの画像であるため、データとして扱いやすいものとなる。
【０２３６】
以上によれば、遠隔地に離れたデジタルビデオカメラ２が撮影可能な画像をプレビュ画像としてモニタすることが可能になるとともに、遠隔地に離れたデジタルカメラ２により画像（静止画、動画、または、定点観測画像を含む）を撮影させ、さらに、撮影された画像を遠隔地で確認することが可能となる。
【０２３７】
次に、図３２および図３３のタイミングチャートを参照して、パーソナルコンピュータ１が、デジタルビデオカメラ２に対して、遠隔操作コマンドを送信し、必要に応じて、ステータスを参照することにより、パンおよびチルトの動作限界を検出し、ユーザに通知するための表示処理を実行する場合について、デジタルビデオカメラ２、通信プログラム４９ａ、画像転送プログラム４９ｂ、および、画像操作プログラム４９ｃのそれぞれの処理の関係を説明する。なお、各処理は、図１８乃至図２７のフローチャートで説明しているので、相互の関係のみを説明する。
【０２３８】
ステップＳ１１５において、画像操作プログラム４９ｃが、デジタルビデオカメラ２に対する操作の入力、すなわち、コントローラ２１９に対する操作入力を受けたと判断した場合、ステップＳ１１６において、コマンド供給およびステータス確認処理が実行され、ステップＳ１５１において、画像転送プログラム４９ｂに向けて、遠隔操作コマンドが送信される。これを受けて、ステップＳ９８において、画像転送プログラム４９ｂは、通信プログラム４９ａに対して、遠隔操作コマンドを送信する。さらに、これを受けて、ステップＳ３９において、通信プログラム４９ａが、送信コマンド決定処理を実行する。ここで、プレビュ画像の送信タイミングではないと判断された場合、デジタルビデオカメラ２には、信号は送信されない。
【０２３９】
そして、さらに、ステップＳ１１５において、画像操作プログラム４９ｃが、デジタルビデオカメラ２に対する操作の入力、すなわち、コントローラ２１９に対する操作入力を受けたと判断した場合、ステップＳ１１６において、コマンド供給およびステータス確認処理が実行され、ステップＳ１５１において、画像転送プログラム４９ｂに向けて、遠隔操作コマンドが送信される。これを受けて、ステップＳ９８において、画像転送プログラム４９ｂは、通信プログラム４９ａに対して、遠隔操作コマンドを送信する。さらに、これを受けて、ステップＳ３９において、通信プログラム４９ａが、送信コマンド決定処理を実行する。ここで、プレビュ画像の送信タイミングであり、ステータス要求が送信されると判断された場合、通信プログラム４９ａは、ステップＳ２４において、デジタルビデオカメラ２に、プレビュ画像の要求およびステータス要求を示す遠隔操作コマンドを送信する。
【０２４０】
デジタルビデオカメラ２は、この要求に応じて、ステップＳ２およびステップＳ１０の処理により、メモリ８７に記憶されているプレビュ画像およびステータスを、通信プログラム４９ａに送信する。
【０２４１】
通信プログラム４９ａは、ステップＳ２５において、送信されてきたプレビュ画像を受信させてＶＲＡＭ４４に記憶させ、ステップＳ２７において、モニタ変更通知およびステータスを画像転送プログラム４９ｂに送信する。
【０２４２】
画像転送プログラム４９ｂは、通信プログラム４９ａから送信されてくるモニタ変更通知により、ステップＳ８２において、プレビュ画像をＶＲＡＭ４４から読み出して取得するとともに、ステータスを保存する。
【０２４３】
そして、さらに、ステップＳ１１５において、画像操作プログラム４９ｃが、デジタルビデオカメラ２に対する操作の入力、すなわち、コントローラ２１９に対する操作入力を受けたと判断した場合、ステップＳ１１６において、コマンド供給およびステータス確認処理が実行され、ステップＳ１５１において、画像転送プログラム４９ｂに向けて、遠隔操作コマンドが送信される。これを受けて、ステップＳ９８において、画像転送プログラム４９ｂは、通信プログラム４９ａに対して、遠隔操作コマンドを送信する。さらに、これを受けて、ステップＳ３９において、通信プログラム４９ａが、送信コマンド決定処理を実行する。ここで、プレビュ画像の送信タイミングであり、パン、チルト、または、ズームのいずれかのコマンドが送信されると判断された場合、通信プログラム４９ａは、ステップＳ２４において、デジタルビデオカメラ２に、プレビュ画像の要求、および、パン、チルト、または、ズームのいずれかの遠隔操作コマンドを送信する。
【０２４４】
デジタルビデオカメラ２は、この要求に応じて、ステップＳ１０の処理により、供給された遠隔操作コマンドに対応する処理を実行するとともに、ステップＳ２の処理により、メモリ８７に記憶されているプレビュ画像を、通信プログラム４９ａに送信する。
【０２４５】
通信プログラム４９ａは、ステップＳ２５において、送信されてきたプレビュ画像を受信させてＶＲＡＭ４４に記憶させ、ステップＳ２７において、モニタ変更通知を画像転送プログラム４９ｂに送信する。
【０２４６】
画像転送プログラム４９ｂは、通信プログラム４９ａから送信されてくるモニタ変更通知により、ステップＳ８２において、プレビュ画像をＶＲＡＭ４４から読み出して取得する。
【０２４７】
また、画像操作プログラム４９ｃは、ステップＳ１１５において入力された操作が、パンまたはチルトを指令するものであった場合、ステップＳ１５５において、画像転送プログラム４９ｂに保持されているステータスの取得処理を実行する。そして、画像操作プログラム４９ｃは、取得したステータスに基づいて、ステップＳ１５６において、撮影可能範囲端を検出した場合、ステップＳ１５７において、ユーザに通知するための表示処理を実行する。
【０２４８】
このような処理により、パーソナルコンピュータ１において、プレビュ画像の要求の送信と、次のプレビュ画像の要求の送信との間の期間に、複数のコマンドが発生された場合においても、複数のコマンドのうち、最適なコマンドが選択されて、デジタルビデオカメラ２に送信されるので、複雑なコマンド送受信処理を行うことなく、ユーザがパーソナルコンピュータ１に入力した操作に対応するコマンドを、効率よく、デジタルビデオカメラ２において実行させるようにすることができる。さらに、ユーザが、遠隔地に設置されているデジタルビデオカメラ２に対して、パーソナルコンピュータ１を用いて、パンまたはチルトの操作入力を行う場合、パーソナルコンピュータ１は、複雑な処理により撮影範囲の画像などを生成することなく、デジタルビデオカメラ２の撮影範囲の端を検出して、簡単な処理で、ユーザに分かりやすい表示方法で、撮影範囲の端であることをユーザに通知することが可能となる。
【０２４９】
また、本発明は、パーソナルコンピュータ１以外にも、例えば、ＰＤＡや携帯型電話機などの各種情報処理装置において、実現することが可能である。本発明に、例えば、ＰＤＡや携帯型電話機などの、小型の情報処理装置を用いた場合、撮影範囲の端部を検出したことをユーザに知らせるために、表示方法の変更や、文字または音声によるメッセージを用いるのみならず、出力部４８に、ＰＤＡや携帯型電話機などの、小型の情報処理装置の一部または全体に振動を発生することによりユーザに所定の通知を行うための図示しない駆動部を備えさせ、ＣＰＵ４１の処理により、駆動部を駆動させて、装置を振動させることにより、ユーザに、これ以上パンまたはチルトの操作を行うことができないことを通知することが可能である。
【０２５０】
さらに、遠隔操作される機器も、例えば、デジタルスチルカメラ、カメラ付携帯電話機、または、ＰＤＡなど、本発明を適用したパーソナルコンピュータ１などの情報処理装置と情報の授受を行うことができる装置であれば、デジタルビデオカメラ２以外の装置であってもかまわない。
【０２５１】
なお、本発明を適用したパーソナルコンピュータ１、ＰＤＡ、または、携帯型電話機などの情報処理装置と、これらの情報処理装置と情報を授受するデジタルビデオカメラ２、デジタルスチルカメラ、カメラ付携帯電話機、または、ＰＤＡなどの装置との通信は、無線通信でなくとも、ケーブル等による有線の通信であっても良いことは言うまでもない。
【０２５２】
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行させることが可能な、例えば汎用のパーソナルコンピュータなどに記録媒体からインストールされる。
【０２５３】
この記録媒体は、図２に示すようにパーソナルコンピュータ１に予め組み込まれた状態でユーザに提供される、プログラムが記録されている記憶部４８だけではなく、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク６１（フレキシブルディスクを含む）、光ディスク６２（ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）を含む）、光磁気ディスク６３（ＭＤ（Ｍｉｎｉ−Ｄｉｓｃ）（登録商標）を含む）、もしくは半導体メモリ６４（Ｍｅｍｏｒｙ Ｓｔｉｃｋを含む）などよりなるパッケージメディアにより構成される。
【０２５４】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。
【０２５５】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【０２５６】
【発明の効果】
このように、本発明によれば、他の情報処理装置から送信された画像を表示することができる。特に、表示された画像の撮影位置（撮影可能範囲内で、撮影されている画像の位置）が、所定の範囲の端部であることを検出して、ユーザに分かりやすく通知することができる。
【０２５７】
また、他の本発明によれば、第１の情報処理装置から送信された画像を第２の情報処理装置に表示することができる他、第２の情報処理装置において表示された画像の撮影位置（撮影可能範囲内で、撮影されている画像の位置）が、所定の範囲の端部であることを検出して、ユーザに分かりやすく通知することができる。
【図面の簡単な説明】
【図１】本発明を適用した無線撮影システムのブロック図である。
【図２】図１のパーソナルコンピュータの構成を示すブロック図である。
【図３】図１のデジタルビデオカメラの構成を示すブロック図である。
【図４】図１の無線撮影システムにより実現される機能を示す機能ブロック図である。
【図５】通信プログラムによる表示画像の例を示す図である。
【図６】通信プログラムによる表示画像の他の例を示す図である。
【図７】画像操作プログラムによる表示画像の例を示す図である。
【図８】画像操作プログラムによる表示画像の例を示す図である。
【図９】画像操作プログラムによる表示画像の例を示す図である。
【図１０】画像操作プログラムによる表示画像の例を示す図である。
【図１１】画像操作プログラムによる表示画像の例を示す図である。
【図１２】画像操作プログラムによる表示画像の例を示す図である。
【図１３】画像操作プログラムによる表示画像の例を示す図である。
【図１４】画像操作プログラムによる表示画像の例を示す図である。
【図１５】画像操作プログラムによる表示画像の例を示す図である。
【図１６】画像操作プログラムによる表示画像の例を示す図である。
【図１７】画像操作プログラムによる表示画像の例を示す図である。
【図１８】デジタルビデオカメラによる撮影処理を説明するフローチャートである。
【図１９】ステータスについて説明するための図である。
【図２０】通信プログラムによる通信処理を説明するフローチャートである。
【図２１】送信コマンド決定処理を説明するフローチャートである。
【図２２】コマンドについて説明するための図である。
【図２３】コマンド履歴テーブルについて説明するための図である。
【図２４】画像転送プログラムによる転送処理を説明するフローチャートである。
【図２５】画像操作プログラムによる操作処理を説明するフローチャートである。
【図２６】画像操作プログラムによる表示画像の例を示す図である。
【図２７】コマンド供給およびステータス確認処理を説明するフローチャートである。
【図２８】ステータスについて説明するための図である。
【図２９】プレビュ画像を表示するときのタイミングチャートである。
【図３０】静止画を撮影するときのタイミングチャートである。
【図３１】動画を録画するときのタイミングチャートである。
【図３２】遠隔操作コマンドを送信するときのタイミングチャートである。
【図３３】遠隔操作コマンドを送信するときのタイミングチャートである。
【符号の説明】
１ パーソナルコンピュータ， ２ デジタルビデオカメラ， ４１ ＣＰＵ，４７ 操作入力部， ４３ ＲＡＭ， ４９ａ 通信プログラム， ４９ｂ 画像転送プログラム， ４９ｃ 画像操作プログラム， ５０ 無線通信部， ８７ メモリ， ９３ 圧縮伸張部， ９５ メモリカード， ９６ ＣＰＵ， １０１ 無線通信部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information processing apparatus, an information processing method, a remote photographing system, and a program, and more particularly, to an information processing apparatus suitable for use in operating and photographing a remote photographing apparatus while staying at a remote place. The present invention relates to an apparatus, an information processing method, a remote photography system, and a program.
[0002]
[Prior art]
2. Description of the Related Art A technique of operating a digital still camera or a digital video camera by remote control to capture an image has become popular.
[0003]
2. Description of the Related Art Conventionally, an image captured by a camera provided in a remote place and capable of moving (panning and tilting) the direction of an image to be captured horizontally and vertically is transferred to a computer. In some cases, a panoramic image of a photographable range is used to notify a user of a photographing range by the camera, that is, a panable or tiltable range (for example, see Patent Document 1). .
[0004]
For example, in the invention described in Patent Literature 1, a plurality of images in a shooting range are transmitted from a camera to a computer, and the supplied plurality of images are combined by the computer to form a panoramic image in a shootable range. Are generated and displayed, and on the displayed panoramic image, an image frame currently captured by the camera and a range in which a pan / tilt operation (also referred to as a pan and tilt operation) can be performed are indicated. With reference to the display of the panoramic image, the user can give an instruction of the pan tilter operation and can take a desired image.
[0005]
[Patent Document 1]
JP-A-11-8844 (pages 4 to 5, FIGS. 1 and 4)
[0006]
[Problems to be solved by the invention]
However, when operating the camera from a remote location, when shooting, using a panoramic image of the shootable range, the shooting range by the camera, that is, if the user is notified of the panable or tiltable range, A complicated process for generating a panoramic image was required. In addition, since it is necessary to display a panoramic image other than the captured image, the display area of the captured image is reduced, and the user cannot confirm the captured image sufficiently. Would.
[0007]
The present invention has been made in view of such a situation, and in a case where a photographing device in a remote place is operated and photographed while being in a remote place, the user can perform photographing without performing complicated processing. It is intended to be able to easily notify that it is the limit of the possible range (the end of the photographable range).
[0008]
[Means for Solving the Problems]
An information processing apparatus of the present invention communicates with another information processing apparatus and transmits / receives information, an operation input means that receives an operation input by a user, and is transmitted from the other information processing apparatus and received by the transmission / reception means. Display means for displaying the displayed image information, and detection means for detecting that the shooting position of the image displayed by the display means is at the end of a predetermined range, based on information relating to the state of another information processing apparatus. The image information displayed by the display means corresponds to the operation input of the user input by the operation input means, the other information processing device having received the control signal transmitted by the transmitting and receiving means, the control signal, It is characterized in that the information is image information obtained by controlling the shooting direction of the image based on the image information.
[0009]
The display means may further display information notifying the user of the end of the predetermined range when the detection means detects the end of the predetermined range.
[0010]
The display means may further display a button for the user to perform an operation input for changing the photographing position of the image information photographed by another information processing apparatus. When the end of the range is detected, the button can be displayed by blinking.
[0011]
The display means may further display a button for the user to perform an operation input for changing the photographing position of the image information photographed by another information processing apparatus. When the end of the range is detected, the display color of the button can be changed and displayed.
[0012]
The display means may further display a cursor for the user to perform an operation input for changing the shooting position of the image information shot by another information processing apparatus. When it is detected that the cursor is at the end of the range, the cursor can be blinked and displayed.
[0013]
The display means may further display a cursor for the user to perform an operation input for changing the shooting position of the image information shot by another information processing apparatus. When it is detected that the cursor is at the end of the range, the display color of the cursor can be changed and displayed.
[0014]
The display means may further display a message for notifying the user that the end of the predetermined range is detected when the end of the predetermined range is detected by the detection means. Can be
[0015]
An audio output unit for outputting an audio may be further provided, and the audio output unit is an end of the predetermined range when the detection unit detects the end of the predetermined range. Can be output to notify the user that the event has been detected.
[0016]
Driving means for vibrating the information processing apparatus may be further provided, and the driving means includes an end portion in a predetermined range when the detection portion detects that the end portion is in a predetermined range. The information processing apparatus can be caused to vibrate in order to notify the user that the is detected.
[0017]
The information on the state of the other information processing apparatus may include information indicating whether or not the shooting position of the image information shot by the other information processing apparatus has been changed in a predetermined direction. Means for detecting, based on information relating to the state of the other information processing apparatus, that the shooting position of the image information has not been changed in a predetermined direction, to detect an end of a predetermined range. Can be
[0018]
The information processing method of the present invention includes a reception control step of controlling reception of an image captured by another information processing apparatus, a display control step of controlling display of an image whose reception is controlled by the processing of the reception control step, A transmission control step of controlling transmission of a control signal corresponding to a user's operation input; and acquiring information on a state of another information processing apparatus when the user's operation input is an operation input for instructing a predetermined operation. An acquiring step, based on the information acquired by the processing of the acquiring step, a detecting step of detecting that the shooting position of the image information whose display is controlled by the processing of the display control step is an end of a predetermined range; And a notification step of notifying the user of the end of the predetermined range when the end of the predetermined range is detected by the processing of the detection step. And wherein the Mukoto.
[0019]
A program of the present invention includes a reception control step of controlling reception of an image captured by another information processing apparatus, a display control step of controlling display of an image whose reception is controlled by the processing of the reception control step, A transmission control step of controlling transmission of a control signal corresponding to the operation input, and an acquisition step of acquiring information on the state of another information processing apparatus when the user's operation input is an operation input for instructing a predetermined operation A detection step of detecting that the shooting position of the image information whose display is controlled by the processing of the display control step is an end of a predetermined range, based on the information obtained by the processing of the obtaining step; And a notifying step of notifying the user of the end of the predetermined range when the end of the predetermined range is detected by the processing of the step. It is characterized in.
[0020]
According to the information processing apparatus, the information processing method, and the program of the present invention, an image captured by another information processing apparatus is received, the received image is displayed, and a control signal corresponding to a user operation input is transmitted. When the user's operation input is to instruct a predetermined operation, information on the state of another information processing apparatus is acquired, and the shooting position of the displayed image information is determined based on the acquired information. , The end of the predetermined range.
[0021]
In the remote photographing system of the present invention, the second information processing apparatus communicates with the first information processing apparatus to transmit and receive information, a first transmitting / receiving means, an operation input means for receiving a user's operation input, Display means for displaying image information transmitted from the first information processing apparatus and received by the first transmitting / receiving means, and displaying based on information on the state of the first information processing apparatus received by the first transmitting / receiving means Detecting means for detecting that the photographing position of the image displayed by the means is at the end of a predetermined range, wherein the display means detects that the end of the predetermined range is detected by the detecting means. A second transmitting / receiving means for performing a display notifying a user of the end of the predetermined range, communicating with the second information processing apparatus, and transmitting / receiving information; Sent from the second information processing device Photographing means for photographing an image based on a control signal corresponding to the user's operation input received by the second transmitting / receiving means, wherein the second transmitting / receiving means comprises: an image signal photographed by the photographing means; And transmitting information about its own state, which is updated as a result of processing executed based on the control signal, to the second information processing apparatus.
[0022]
In the remote photography system according to the present invention, the second information processing device communicates with the first information processing device to transmit and receive information, an operation of a user is input, and an image transmitted from the first information processing device. The information is displayed, and based on the received information on the state of the first information processing apparatus, it is detected that the shooting position of the displayed image is at the end of the predetermined range, and the end of the predetermined range is detected. Is notified to the user, the first information processing device communicates with the second information processing device, information is transmitted and received, and control corresponding to the user's operation input transmitted from the second information processing device is performed. An image is captured based on the signal, and the captured image signal and information relating to its own state, which is updated as a result of processing performed based on the control signal, are transmitted to the second information processing apparatus.
[0023]
BEST MODE FOR CARRYING OUT THE INVENTION
Embodiments of the present invention will be described below. In order to clarify the correspondence between each means and each step of the invention described in the claims and the following embodiments, each means and each step will be described. When the features of the present invention are described by adding corresponding embodiments (however, examples) in parentheses later, the following is achieved. However, of course, this description does not mean that each means and each step are limited to those described.
[0024]
The information processing apparatus according to claim 1 (for example, the personal computer 1 in FIG. 1) communicates with another information processing apparatus (for example, the digital video camera 2 in FIG. 1) to transmit and receive information. , A wireless communication unit 50 in FIG. 2), an operation input unit (for example, the input unit 47 in FIG. 2) for receiving an operation input by a user, and image information transmitted from another information processing apparatus and received by the transmission / reception unit. Based on display means for displaying (for example, the output unit 48 in FIG. 2) and information (for example, status) on the state of another information processing apparatus, the photographing position of the image displayed by the display means (within the photographable range) , The position of the image being shot) is at the end of a predetermined range (for example, the CPU 41 in FIG. 2), and the image information displayed by the display means In response to the user's operation input input by the step, the image processing direction of the image is controlled based on the control signal by another information processing apparatus that has received the control signal transmitted by the transmission / reception means, and the image information is captured. There is a feature.
[0025]
The information processing apparatus according to claim 2, wherein when the display means detects that the end of the predetermined range is detected by the detection means, the information (notifying the user of the end of the predetermined range). For example, a blinking display or a change in the display color of the pan / tilt button 223 of the controller 219, a blinking display or a change in the display color of the mouse cursor icon 261 in FIG. 17, or a message stating that “The shooting direction cannot be changed any more” is described. (Message window) is further displayed.
[0026]
The information processing apparatus according to claim 3, wherein the display means is for the user to perform an operation input (for example, pan, tilt) for changing a shooting position of image information shot by another information processing apparatus. A button (for example, a pan / tilt button 223 of the controller 219) is further displayed, and when the detection unit detects that the button is at an end of a predetermined range, the button is blinked and displayed.
[0027]
The information processing apparatus according to claim 4, wherein the display means is for the user to perform an operation input (for example, pan, tilt) for changing a shooting position of image information shot by another information processing apparatus. A button (for example, a pan / tilt button 223 of the controller 219) is further displayed, and when the detection unit detects that the button is at an end of a predetermined range, the display color of the button is changed (for example, a color change or a negative (Inverted) and displayed.
[0028]
The information processing apparatus according to claim 5, wherein the display unit is configured to allow the user to perform an operation input (for example, pan and tilt) for changing a shooting position of image information shot by another information processing apparatus. A cursor (for example, a mouse cursor icon 261 in FIG. 17) is further displayed, and when the detection unit detects that the cursor is at an end of a predetermined range, the cursor is blinked and displayed.
[0029]
The information processing apparatus according to claim 6, wherein the display means is configured to allow the user to perform an operation input (for example, pan, tilt) for changing a shooting position of image information shot by another information processing apparatus. A cursor (for example, a mouse cursor icon 261 in FIG. 17) is further displayed, and when the detection unit detects that the cursor is at an end of a predetermined range, the display color of the cursor is changed and displayed. .
[0030]
The information processing apparatus according to claim 8 further includes audio output means for outputting audio (for example, the output unit 48 in FIG. 2), and the audio output means may be an end of a predetermined range by the detection means. If detected, a sound (for example, a buzzer sound or a voice message) for notifying the user that the end of the predetermined range has been detected is output.
[0031]
The information processing apparatus according to claim 9 further includes a driving unit (for example, the output unit 48 in FIG. 2) for causing the information processing device to vibrate, and the driving unit is an end of a predetermined range by the detection unit. When the information is detected, the information processing apparatus is vibrated in order to notify the user that the end of the predetermined range has been detected.
[0032]
The information processing apparatus according to claim 10, wherein the information (for example, status) regarding the state of the other information processing apparatus determines whether the imaging position of image information captured by the other information processing apparatus has been changed in a predetermined direction. Detecting means for detecting that the shooting position of the image information has not been changed in the predetermined direction, based on the information on the state of the other information processing device, Is detected.
[0033]
In the information processing method according to the eleventh aspect, reception is performed by a reception control step of controlling reception of an image photographed by another information processing apparatus (for example, the processing of step S113 in FIG. 25) and reception processing. A display control step for controlling the display of the controlled image (for example, the process of step S114 in FIG. 25) and a transmission control step for controlling the transmission of a control signal corresponding to the user's operation input (for example, step S24 in FIG. 20) And if the user's operation input is an operation input for instructing a predetermined operation (for example, pan or tilt), obtaining information (for example, status) related to the state of another information processing apparatus Step (for example, the processing of step S155 in FIG. 27) and processing of the display control step based on the information acquired by the processing of the acquiring step. A detection step (for example, the processing of step S156 in FIG. 27) for detecting that the shooting position of the image information whose display is controlled by the control is an end of the predetermined range, and an end of the predetermined range by the processing of the detection step And a notification step (for example, the process of step S157 in FIG. 27) for notifying the user of the end of the predetermined range when it is detected that the copy is a copy.
[0034]
In the program according to the twelfth aspect, the reception is controlled by a reception control step (for example, the processing of step S113 in FIG. 25) for controlling the reception of an image captured by another information processing apparatus, and the reception control step. A display control step for controlling the display of the displayed image (for example, the processing of step S114 in FIG. 25) and a transmission control step for controlling the transmission of a control signal corresponding to the user's operation input (for example, the processing in step S24 in FIG. 20) ) And when the user's operation input is an operation input for instructing a predetermined operation (for example, pan or tilt), an acquisition step for acquiring information (for example, status) related to the state of another information processing apparatus ( For example, the processing in the display control step is performed based on the information acquired in the processing in the acquisition step in step S155 in FIG. 27). A detection step (for example, processing of step S156 in FIG. 27) for detecting that the shooting position of the image information whose display is more controlled is the end of the predetermined range, and an end of the predetermined range by the processing of the detection step And a notification step (for example, the process of step S157 in FIG. 27) for notifying the user of the end of the predetermined range when it is detected that the copy is a copy.
[0035]
The remote photographing system according to claim 13, wherein the first information processing device (for example, the digital video camera 2 in FIG. 1) capable of photographing an image in a predetermined range communicates with the first information processing device. A second information processing apparatus (for example, the personal computer 1 in FIG. 1) capable of communicating with the first information processing apparatus and transmitting and receiving information Means (for example, the wireless communication unit 50 in FIG. 2), operation input means (for example, the input unit 47 in FIG. 2) for receiving an operation input by the user, and first transmission / reception means transmitted from the first information processing apparatus. (For example, the output unit 48 of FIG. 2) for displaying the image information received by the first information processing apparatus based on information (for example, status) received by the first transmitting / receiving means. By display means Detecting means (for example, CPU 41 in FIG. 2) for detecting that the photographing position of the indicated image is an end of a predetermined range, and the display means is an end of the predetermined range by the detecting means. Is detected, the user is notified of the end of the predetermined range, and the first information processing apparatus communicates with the second information processing apparatus to transmit and receive information. 2 based on a control signal corresponding to a user's operation input transmitted from the second information processing apparatus and received by the second transmitting / receiving means (for example, the wireless communication unit 101 in FIG. 3). And a digital signal processing unit 86 in FIG. 3, and the second transmitting / receiving unit is executed based on an image signal captured by the capturing unit and a control signal. Myself updated as a result of processing Information about the state (e.g., status) and transmits to the second information processing apparatus.
[0036]
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0037]
FIG. 1 is a diagram showing a configuration of a wireless imaging system to which the present invention is applied.
[0038]
In the wireless photographing system of the present invention, the digital video camera 2 can be operated by a software program on the personal computer 1, and when a still image or a moving image is photographed, an image that can be photographed at present can be recognized. , And allows the user to confirm the captured image.
[0039]
Next, the configuration of the personal computer 1 will be described with reference to FIG. The CPU (Central Processing Unit) 41 performs various processing in accordance with programs (communication program 49a, image transfer program 49b, and image operation program 49c) stored in ROM (Read Only Memory) 42 or storage unit 49. Execute In a RAM (Random Access Memory) 43, programs executed by the CPU 41, data, and the like are stored as appropriate. The VRAM (Video-RAM) 44 stores an image transmitted from the digital video camera 2. The CPU 41, the ROM 42, the RAM 43, and the VRAM 44 are mutually connected by a bus 45.
[0040]
An input / output interface 46 is also connected to the CPU 41 via a bus 45. The input / output interface 46 is connected to an input unit 47 including a keyboard, a mouse, a microphone, and the like, and an output unit 47 including a display, a speaker, and the like. The CPU 41 executes various processes in response to a command input from the input unit 47. Then, the CPU 41 outputs an image, a sound, or the like obtained as a result of the processing to the output unit 47.
[0041]
The storage unit 49 connected to the input / output interface 46 is constituted by, for example, a hard disk, and stores programs executed by the CPU 41 and various data.
[0042]
The storage unit 49 stores programs such as a communication program 49a, an image transfer program 49b, and an image operation program 49c, and the CPU 41 reads out these programs and executes corresponding processing. The various programs will be described later with reference to FIG.
[0043]
Further, it goes without saying that the programs stored in the storage unit 49 may include other programs described above, and various programs are acquired via the wireless communication unit 50 and stored in the storage unit 49. You may do so.
[0044]
The wireless communication unit 50 can communicate with another device at a speed of 1 Mbps using a radio wave of the 2.45 GHz band by so-called Bluetooth (Bluetooth). Unlike communication using infrared light, Bluetooth can be used even if there is an obstacle if the distance between devices is within a range of about 10 m. In addition, since Bluetooth uses a small transceiver of 0.5 square inches, the power consumption is small and the manufacturing cost is low as compared with the infrared communication device. In the present invention, an extended Basic Imaging Profile (extended BIP) in Bluetooth (a profile obtained by adding an extension related to a command transmission for remotely controlling a camera based on a profile related to an image transmission) is used to connect a computer and a photographing device. Perform communication. The wireless communication unit 50 may be a device other than Bluetooth as long as it can perform wireless communication. For example, the wireless communication unit 50 may be a wireless communication device conforming to the IEEE 802.11b standard.
[0045]
The drive 51 connected to the input / output interface 46 drives a magnetic disk 61, an optical disk 62, a magneto-optical disk 63, a semiconductor memory 64, or the like when they are mounted, and drives programs and the like recorded thereon. Get data etc. The acquired programs and data are transferred and stored in the storage unit 49 as necessary.
[0046]
Next, the configuration of the digital video camera 2 will be described with reference to FIG. The CPU 96 is a control unit that performs overall control of each circuit based on a signal input from the operation unit 102, and controls display on the liquid crystal monitor 90, strobe light emission control, autofocus (AF) calculation, and automatic exposure (AE) calculation. And so on.
[0047]
The operation unit 102 is a block including an instruction input unit. When the power is turned on, the CPU 96 sends a command to the power control circuit 98 to supply power to each part of the digital video camera 2 from an external power supply connected to the battery 99 or a DC power terminal (not shown). And enable each circuit. The battery 99 may be a rechargeable battery (secondary battery) or a commercially available dry battery (primary battery).
[0048]
The photographing lens 81 includes one or a plurality of lenses, and may be a single focus lens or a variable focal length lens such as a zoom lens. The light passing through the photographing lens 81 is incident on a CCD (Charge Coupled Device) 83 after the amount of light is adjusted by an aperture 82. Photosensors are arranged two-dimensionally on the light receiving surface of the CCD 83, and the subject image formed on the light receiving surface of the CCD 83 is converted by each photosensor into signal charges of an amount corresponding to the amount of incident light. Note that the CCD 83 has a so-called electronic shutter function that can control the charge accumulation time (shutter speed) of each photosensor.
[0049]
The signal charges thus accumulated are sequentially read out as voltage signals (image signals) corresponding to the signal charges based on the pulse given from the imaging system control circuit 92.
[0050]
The image signal output from the CCD 83 is sent to an analog signal processing unit 84. The analog signal processing unit 84 includes a sampling and holding circuit, a color separation circuit, a gain adjustment circuit, and the like. The analog signal processing unit 84 performs correlated double sampling (CDS) processing and color separation into R, G, and B color signals. After that, the signal level of each color signal is adjusted (pre-white balance processing).
[0051]
The signal output from the analog signal processing unit 84 is converted into a digital signal by the A / D converter 85 and then supplied to the digital signal processing unit 86. The digital signal processing unit 86 is image processing means including a luminance / color difference signal generation circuit, a gamma correction circuit, a sharpness correction circuit, a contrast correction circuit, a white balance correction circuit, and the like, and processes an image signal according to a command from the CPU 96. .
[0052]
The digital signal processing unit 86 converts the image data into a luminance signal (Y signal) and color difference signals (Cr, Cb signals), performs predetermined processing such as gamma correction, and stores the processed data in the memory 87. The image data stored in the memory 87 is read in accordance with a command from the CPU 96, is converted into an analog signal by the D / A converter 88, and is converted into a predetermined signal format such as an NTSC (National Television Standards Committee) system. It is converted and output to the video output terminal 89 and the liquid crystal monitor 90. The image stored in the memory 87 is normally read out by the CPU 96 as a preview image.
[0053]
The image data in the memory 87 is periodically rewritten by the image signal output from the CCD 83, and the video signal generated from the image data is supplied to the liquid crystal monitor 90, so that the image input through the CCD 83 can be changed in real time. It is displayed on the liquid crystal monitor 90. The photographer can confirm the angle of view of the image displayed on the liquid crystal monitor 90 or the optical viewfinder.
[0054]
When the user operates the operation unit 102 to set a shooting mode, a shooting start instruction (release ON) signal is issued. The CPU 96 detects the release ON signal and sends a command to the imaging system control circuit 92. The imaging system control circuit 92 performs focus control via the AF motor zoom motor 91 and controls exposure by controlling the charge accumulation time in the aperture 82 and the CCD 83.
[0055]
When an operation for instructing to capture image data for recording is performed, recording is started. When the mode for compressing and recording image data is selected, the CPU 96 sends a command to the compression / expansion circuit 93. Thus, the compression / expansion circuit 93 compresses the image data in the memory 87 in accordance with the JPEG format (may be another predetermined format). Further, when outputting the preview image, the compression / expansion circuit 93 compresses a 160 × 120 size image defined by BIP (Basic Imaging Profile) in Bluetooth used as the wireless communication unit 101 into a JPEG format. , To the CPU 96. The photographed still image is compressed in the JPEG format with the set image size.
[0056]
The compressed image data is recorded on a memory card 95 via a card I / F (interface) 94. When a mode for recording non-compressed image data (non-compression mode) is selected, the compression processing by the compression / expansion circuit 93 is omitted, and the image data is recorded on the memory card 95 without compression.
[0057]
In the digital video camera 2 shown in FIG. 3, as a means for storing image data, for example, a memory stick (trademark) as a semiconductor memory is applied. The recording medium is not limited to this, and may be a PC card, a compact flash (registered trademark), a magnetic disk, an optical disk, a magneto-optical disk, a smart media, or the like, and may be an electronic, magnetic, optical, or a combination thereof. Various media that can be read and written according to the above can be used. In addition, the card I / F 94 may be configured so that a signal processing unit and an interface corresponding to a recording medium to be used are applied, and a plurality of media of different types or the same type may be mounted. . Further, the means for saving the image file is not limited to a recording medium detachable from the camera body, but may be a recording medium (internal memory) built in the camera.
[0058]
The operation state of the CCD 83 differs between when the image data for recording is taken in and in other cases. That is, when image data for recording is not captured, the CCD 83 is in a mode of acquiring an image with a lower resolution than when image data for recording is captured, and as a result, the amount of image data is suppressed. As a result, the transfer speed between the analog signal processing 84 and the D / A converter 88 is increased, so that an image is quickly displayed on the liquid crystal monitor 90. Therefore, the image stored in the memory 87 in this state is a low-resolution image. For this reason, the image read in this state is a low-resolution preview image. On the other hand, when image data of a still image for recording is taken in, the CCD 83 obtains a still image with a higher resolution, and as a result, image data with a large data amount but high quality is stored in the memory 87. Become. The thumbnail image generation unit 103 converts a still image having a large data amount into a thumbnail image based on an instruction from the CPU 96. Note that a thumbnail image is an image or a character obtained by reducing a predetermined image.
[0059]
When the reproduction mode is set by a predetermined operation, the image data is read from the memory card 95. The read image data is expanded by a compression / expansion circuit 93 as necessary, and output to a video output terminal 89 and a liquid crystal monitor 90 via a D / A converter 88.
[0060]
The digital video camera 2 has a wireless communication unit 101 made of Bluetooth, and can transmit and receive image data and various signals via the wireless communication unit 101. The EEPROM 97 stores identification information (ID) for specifying an external device to be a communication partner, and the CPU 96 determines a communication target device based on the identification information registered in the EEPROM 97. Further, the CPU 96 encrypts the transmission data using the identification information of the communication partner in the encryption circuit 88, and transmits the data from the wireless communication unit 101.
[0061]
Next, functions realized by the personal computer 1 and the digital video camera 2 shown in FIGS. 2 and 3 will be described with reference to a functional block diagram shown in FIG.
[0062]
Note that the programs shown in FIG. 4 may be realized by dedicated hardware. Therefore, the functional block diagram of FIG. 4 may be regarded as a hardware configuration diagram or a software configuration diagram.
[0063]
The communication program 49a controls the wireless communication unit 50 to control communication with a device having another wireless communication unit. The communication program 49a controls the wireless communication unit 50 to search for a communicable electronic device, for example, displays a display screen as shown in FIG. To the user. In FIG. 5, a display column 122 indicating itself is shown on the left side of the screen 121, and in this case, "My computer PC" is displayed. At the center of the screen 121, profile icons 123 to 128 are displayed, and a Bluetooth profile that can be transmitted and received by wireless communication is displayed as an icon. The profile is, for example, image data and music data that can be transmitted and received.
[0064]
On the right side of the screen 121, display columns 131 to 135 of the communicable devices are shown, and among them, the device which is the communication target device is displayed in the display column 133 at the center in the vertical direction. In this case, “Digital Video Camera” is displayed in the center display column 133, and the digital video camera 2 is selected as a communication target device of “My Computer PC” displayed in the display column 122. It has been shown.
[0065]
When a plurality of devices can communicate, those devices are displayed in other display columns 131 to 135. In this case, "PDA" and "PC-1" are displayed in addition to the digital video camera, indicating that "PDA" and "PC-1" have been detected as communicable devices. .
[0066]
The buttons 129 and 130 are operated when changing the electronic device to be communicated. For example, when the button 129 is operated, the display column 131 is deleted from the display, and the display columns 132 to 135 are displayed in the upper part of the figure. Slide in the direction. As a result, “PC-1” is displayed at the center of the communicable device, and “PC-1” is selected as the communication target device. When the button 130 is operated, the display column 135 is deleted, and the display columns 131 to 134 slide downward in the figure. As a result, “PDA” is displayed at the center of the communicable device, and “PDA” is selected as the communication target device.
[0067]
Parentheses are displayed on the left and right of each of the profile menu icons 123 to 128 to indicate whether the profile is a profile that the communication device can transmit and receive. In this case, parentheses 123a to 128a are all displayed on the left side of the profile menu icons 123 to 128, and all the electronic devices corresponding to “My Computer PC” in the display field 122 are displayed as the profile menu icons. It is shown that it is possible to send and receive profiles. Of the profile menu icons 123 to 128, only the parentheses 127b and 128b are displayed on the right side, and the digital video camera selected as the communication target device has only the profiles corresponding to the profile menu icons 127 and 128. It is indicated that transmission and reception are not possible. Therefore, the selected communication target device cannot transmit or receive the profile unless the desired profile menu icon has parentheses.
[0068]
With this display, the user can recognize whether or not the communication target device is a receivable / receivable profile only by looking at the display of the parentheses of the profile menu icon. Also, by selecting a profile to be used, the personal computer 1 shown in the display field 122 and the digital video camera shown in the display field 133 are connected by a line on the screen 121 to correspond to the image data. This indicates that communication of the selected profile is enabled.
[0069]
When the communication program 49a controls the wireless communication unit 50 to search for a communicable electronic device, for example, a display screen 141 as shown in FIG. 6 is displayed on the display of the output unit 48. Accordingly, the user may be notified of the electronic device that can communicate with the electronic device now.
[0070]
In the device display area 151 at the center of the screen, devices existing in a range where the device (that is, the personal computer 1) can communicate by Bluetooth communication are listed. Among the devices displayed in the device display area 151, the device (here, the digital video camera 2) selected as the communication partner is highlighted. In the center portion of the display screen, that is, in the profile display area 152 on the right side of the device display area 151, a Bluetooth profile that allows communication between the personal computer 1 and each device displayed in the device display area 151 is displayed. Are listed. According to the present invention, it is possible to perform remote shooting processing using an extended Basic Imaging Profile (extended BIP) in Bluetooth (a profile obtained by adding an extension relating to command transmission for remotely controlling a camera based on a profile relating to image transmission). Is displayed.
[0071]
When the personal computer 1 and the digital video camera 2 are set in a communicable state, the communication program 49a transmits an image request or a remote operation command between the digital video camera 2 and the personal computer 1, And the like.
[0072]
Further, when image data such as a preview image, a thumbnail image, or a still image is transferred from the digital video camera 2, the communication program 49a stores the received image data such as the preview image, the thumbnail image, or the still image in the VRAM 44. To memorize. However, when a high-quality still image is received, the image data is divided and transferred, so that the transfer takes time. Therefore, the communication program 49a also notifies the image transfer program 49b of a progress notification indicating the progress of the still image reception.
[0073]
The image transfer program 49b manages an image stored in the VRAM 44 based on a notification from the communication program 49a, for example, a monitor change notification, and when an image is requested from the image operation program 49c, the corresponding image (Preview image, thumbnail image, or still image) is read from the VRAM 44 and supplied to the image operation program 49c. Further, when a request for capturing a still image or a remote operation command is received from the image operation program 49c, the fact is transferred to the communication program 49a.
[0074]
The image operation program 49c requests a preview image, a thumbnail image, or a still image from the image transfer program 49b, and displays the image supplied based on the request, for example, as shown in FIG. The remote control command is supplied to the image transfer program 49b based on the operation input performed by the user on the displayed display screen.
[0075]
7, a still image, a moving image, or a fixed-point observation image (a collection of a plurality of still images captured within a predetermined time) is displayed on the display unit 218, and a still image mode button 201 is displayed on the left side thereof. , A moving image mode button 202, and a fixed point observation mode button 203 are displayed. On the right side of the display unit 218, a thumbnail image list 217 is provided, and on the right side, from the top, a mode switching button 211, a save button 212, a mail button 213, an upload button 214, and a trash button 215 are provided. Further, a controller 219 for performing an operation input to the digital video camera 2 is provided below the fixed point observation mode button 203.
[0076]
The still image mode button 201 is operated when the user selects the still image mode. The moving image mode button 202 is operated when the user selects the moving image mode. The fixed point observation mode button 203 is operated when the user selects the fixed point observation mode.
[0077]
The thumbnail image list 217 is in a state where it is not currently stored (in a state where it is not stored as a file but a captured image is temporarily stored in the VRAM 44 or a predetermined area of the storage unit 49). A thumbnail image indicating one of a still image, a moving image, and a fixed point observation image is displayed. In the case of a still image, the thumbnail image of the still image itself is displayed. In the case of a moving image, the thumbnail image of the image at the start of recording (the first captured image) is displayed. In the case of an image, one of a plurality of still images captured as a fixed-point observation image is displayed as a thumbnail image, but as a default, the first still image captured when fixed-point observation is started is used as a thumbnail image. It is displayed and can be changed to a still image taken after that. When the number of temporarily stored images is equal to or more than a predetermined number or when the stored area is equal to or more than a predetermined capacity, the oldest image is deleted and the latest image is stored.
[0078]
Further, each thumbnail image can be designated (selected) by the user moving a pointer such as a so-called mouse pointer to a position of a desired thumbnail image and clicking on the thumbnail image. Indicates that the image is bordered. In the case of FIG. 7, among the thumbnail images displayed in the thumbnail image list 217, the thumbnail image located at the bottom in the figure is designated.
[0079]
Furthermore, the image displayed in the thumbnail image list 217 is double-clicked in a designated state, and the display on the display unit 218 is instructed. In the case of a still image, the selected still image is displayed on the display unit 218. In the case of a moving image or a fixed-point observation image, the moving image is displayed on the display unit 218 as a moving image (in the case of a fixed-point observation image, still images are continuously displayed).
[0080]
The mode switching button 211 is a button that is operated when instructing reproduction of a specified thumbnail image among the thumbnail images displayed in the thumbnail image list 217.
[0081]
The save button 212 is a button operated when saving a specified image (when saving as a file) among the thumbnail images displayed in the thumbnail image list 217.
[0082]
The mail button 213 is a button that is operated when a specified image among the thumbnail images displayed in the thumbnail image list 217 is transmitted by e-mail.
[0083]
The upload button 214 is a button operated when uploading a specified image from the thumbnail images displayed in the thumbnail image list 217 to a predetermined server.
[0084]
The trash can button 215 is a button operated when deleting a thumbnail image displayed in the thumbnail image list 217 (when deleting an image temporarily stored in a predetermined area of the storage unit 48).
[0085]
The controller 219 instructs the digital video camera 2 to execute a telephoto zoom button 221 for instructing telephoto zoom, a wide-angle zoom button 222 for instructing wide-angle zoom, and a command to change the direction of a captured image. And a recording button 224 for instructing recording on a recording medium mounted on the digital video camera 2 or a recording medium provided therein. The center button of the pan / tilt button 223 is operated to return the photographing direction to the center position of the photographable range (pan / tilt center). The recording button 224 is a button for instructing both operations of starting and ending recording processing on a recording medium mounted on the digital video camera 2 or a recording medium provided therein. During the video recording process, characters such as "REC" may be displayed at any position on the display screen to notify the user that the video recording is being performed.
[0086]
When the still image mode button 201 is operated, as shown in FIG. 8, the display color of the still image mode button 201 changes, and a shooting button 231a is displayed below the display unit 218. Further, a setting button 232a and the like are displayed on the right side of the shooting button 231a. At this time, the image operation program 49c causes the display unit 218 to display the received preview image. The shooting button 231a is a button that is operated when the user gives an instruction to shoot a preview image displayed on the display unit 218. The setting button 232a is a button operated when performing various settings in the still image mode. When this button is operated, a setting screen of the still image mode is displayed, and various settings can be performed.
[0087]
When the photographing button 231a is operated, the image operation program 49c displays the currently photographed image (still image) in the thumbnail image list 217 below the thumbnail image 217a which was the latest image as shown in FIG. Is displayed, a new thumbnail image 217b corresponding to is displayed.
[0088]
When the moving image mode button 202 is operated, as shown in FIG. 10, the image operation program 49c changes the display color of the moving image mode button 202, and displays a recording button 231b below the display unit 218. Further, a setting button 232b and the like are displayed on the right side of the recording button 231b. At this time, the image operation program 49c causes the display unit 218 to display the received preview image. The recording button 231b is a button operated when the user instructs recording of the preview image displayed on the display unit 218. The setting button 232b is a button that is operated when performing various settings in the moving image mode. When this button is operated, a setting screen for the moving image mode is displayed.
[0089]
In this state, if the recording button 231b is operated, the image operation program 49c stores the thumbnail image list 217 as shown in FIG. 11 below the thumbnail image 217a shown in FIG. Then, a new thumbnail image 217c corresponding to the image (moving image) just taken is displayed. At this time, as shown in FIG. 11, the image operation program 49c displays only the recording mark indicating that recording is in progress in the thumbnail image 217c, and displays the lower part of the display unit 218 from the recording button 231b. It is displayed instead of the end button 231c.
[0090]
When the end button 231c is operated in this state, the image operation program 49c ends the recording, and as shown in FIG. 11, the thumbnail image 217c in which only the recording-in-progress mark is displayed is displayed as shown in FIG. Then, a thumbnail image 217d for identifying the recorded moving image is displayed. At this time, as shown in FIG. 12, the thumbnail image 217d is displayed with a moving image mark (a mark like an 8 mm camera) indicating that it is a moving image at the upper left portion in the thumbnail image 217d. By displaying in this way, it is possible to identify at a glance whether an image managed as a thumbnail image is a still image or a moving image.
[0091]
When the fixed-point observation mode button 203 is operated, the image operation program 49c changes the display color of the fixed-point observation mode button 203, as shown in FIG. Is displayed. Further, a setting button 232e and the like are displayed on the right side of the start button 231d. At this time, the image operation program 49c causes the display unit 218 to display the received preview image. The start button 231d is a button operated when the user instructs fixed-point observation of the image displayed on the display unit 218. The setting button 232e is a button operated when performing various settings in the fixed point observation mode. When this button is operated, a setting screen of the fixed point observation mode is displayed. Further, a reservation button 341 is displayed on the left side of the start button 231d. The reservation button 341 is a button that is operated by the user when a reservation is set in advance for imaging by fixed point observation.
[0092]
When the start button 231d is operated in this state, the image operation program 49c adds the thumbnail image list 217 to the thumbnail image list 217 shown in FIG. Then, a new thumbnail image 217e corresponding to the image just shot (fixed-point observation image) is displayed. At this time, as shown in FIG. 14, the image operation program 49c displays only the fixed point observation mark indicating that the fixed point observation image is being captured in the thumbnail image 217e, and displays the lower part of the display unit 218. Are displayed in place of the start button 231e to the end button 231f.
[0093]
When the end button 231f is operated in this state, the image operation program 49c terminates the photographing in the fixed-point observation mode and changes the thumbnail image 217e in which only the fixed-point observation mark is displayed, as shown in FIG. , And a thumbnail image 217f for identifying the image captured by the fixed point observation is displayed. At this time, as shown in FIG. 15, the thumbnail image 217f is displayed with a fixed-point observation mark (a mark like a camera) indicating that it is a fixed-point observation image in the upper left portion of the thumbnail image 217f. . By displaying in this way, it is possible to identify at a glance whether an image managed as a thumbnail image is a still image, a moving image, or a fixed-point observation image.
[0094]
When an operation input is made to the controller 219, a remote operation command is transmitted to the digital video camera 2, and a preview image transmitted from the digital video camera 2 that has performed processing based on the command is displayed. It is displayed in the section 218. For example, the user moves the mouse cursor 251 and operates one of the pan / tilt buttons 223 of the controller 219 having an upward arrow on the screen to move the image capturing position upward (tilt). When a command to input the instruction is input, as shown in FIG. 16, a captured image whose imaging direction has been changed based on the tilt operation is displayed on display unit 218. Also, for example, when the telephoto zoom button 221 of the controller 219 is operated, the display unit 218 displays an image captured based on the telephoto zoom operation, and when the wide-angle zoom button 222 is operated, the display unit 218 is displayed. In 218, a captured image captured based on the wide-angle zoom operation is displayed, and when the record button 224 is operated, the digital video camera 2 uses the recording medium mounted on itself or the recording medium contained therein. Start or end the recording operation to.
[0095]
The details of the process of transmitting the command to the digital video camera 2 will be described later.
[0096]
When the user moves the mouse cursor 251 and operates the pan / tilt button 223 of the controller 219 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 is changed to the shooting direction. When the position becomes the limit position of the possible range and the shooting direction cannot be changed any more, the pan / tilt button 223 operated by the user blinks. By confirming that the pan / tilt button 223 is blinking, the user can recognize that the shooting direction cannot be further moved in the corresponding operation input direction.
[0097]
If the current shooting direction is the limit position of the shooting range and the shooting position cannot be changed any more, the user can change the display of the pan / tilt button 223 to negative / positive or change the display color. Alternatively, it may be notified that it is the limit position of the photographable range.
[0098]
Further, for example, as shown in FIG. 17, a mouse cursor icon 261 is displayed, and when the user inputs a pan / tilt operation, the mouse cursor icon 261 is dragged in a desired direction in which the photographing direction is to be moved. be able to. Then, in a state where the user is operating the mouse cursor icon 261 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 becomes the limit position of the shootable range. If the photographing direction cannot be changed, the mouse cursor icon 261 being operated by the user blinks. By confirming that the mouse cursor icon 261 is blinking, the user can recognize that the shooting direction cannot be further moved in the corresponding operation input direction.
[0099]
If the current shooting direction is the limit position of the shooting range and the shooting position cannot be changed any more, the display color of the mouse cursor icon 261 is changed to allow the user to change the shooting range. You may be notified that it is the limit position.
[0100]
Note that when the user is operating the pan / tilt button 223 in FIG. 16 or the mouse cursor icon 261 in FIG. 17 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 is changed to the shooting direction. If the photographing direction cannot be changed any more, it becomes the limit position of the possible range.For example, a message window with a message "Cannot change the photographing direction any more" is displayed, or a predetermined not shown By turning on or off the LED, generating a buzzer sound, or notifying by a voice message, the user may be notified that the shooting direction cannot be changed any more.
[0101]
Returning to the description of FIG.
[0102]
In response to a request from the personal computer 1, the digital video camera 2 displays a preview image stored in the memory 87, a thumbnail image generated by the thumbnail image generation unit 103, or a still image stored in the memory card 95. Is read and transmitted to the personal computer 1. However, in the case of a request for a still image, the digital video camera 2 captures the image, transmits the captured image as a thumbnail image, temporarily stores the captured image in the memory card 95, and transmits the thumbnail image. The image stored in 95 is transmitted to the personal computer 1.
[0103]
Next, the photographing process of the digital video camera 2 will be described with reference to the flowchart of FIG.
[0104]
In step S1, the CPU 96 of the digital video camera 2 controls the wireless communication unit 101 to determine whether or not a preview image is requested from the personal computer 1. For example, when the preview image is requested by the process of step S23 in FIG. 20 described later, it is determined that the preview image is requested from the personal computer 1, and the process proceeds to step S2.
[0105]
In step S2, the CPU 96 acquires the image stored in the memory 87 as a preview image (that is, captures the preview image), and transmits the preview image to the personal computer 1 via the wireless communication unit 101. After the process of step S2 ends, the process returns to step S1, and the subsequent processes are repeated.
[0106]
If it is determined in step S1 that a preview image has not been requested, then in step S3, the CPU 96 determines whether or not a request to shoot a still image has been made. For example, when the photographing of the still image is requested by the processing of step S29 of the flowchart of FIG. 20 described later, it is determined that the photographing of the still image is requested, and the process proceeds to step S4.
[0107]
In step S4, the CPU 96 controls the control circuit 92 to switch the CCD 83 to the high-resolution mode, store the still image data in the memory 87, and shoot the image.
[0108]
In step S5, the CPU 96 controls the thumbnail image generation unit 103 to convert a still image stored in the memory 87 into a thumbnail image, controls the wireless communication unit 101, and transmits the thumbnail image to the personal computer 1. After the processing in step S5 ends, the processing returns to step S1, and the subsequent processing is repeated.
[0109]
If it is determined in step S3 that shooting of a still image has not been requested, in step S6, the CPU 96 determines whether transfer of a still image has been requested. For example, when the transfer of a still image is requested by the process of step S32 in FIG. 20 described later, it is determined that the transfer of the still image is requested, and the process proceeds to step S7.
[0110]
The CPU 96 controls the compression / expansion circuit 93 in step S7 to compress the image stored in the memory 87 by the JPEG method and divides the image into a transferable size, and controls the wireless communication unit 101 in step S8. Then, the divided still images are transmitted to the personal computer 1. After the process of step S8 ends, the process returns to step S1, and the subsequent processes are repeated.
[0111]
If it is determined in step S6 that transfer of a still image has not been requested, in step S9, the CPU 96 controls the wireless communication unit 101 to determine whether a remote operation command has been received from the personal computer 1. . For example, when the remote operation command determined by the processing of step S60, step S61, or step S64 of FIG. 21 described later is transmitted, it is determined that the remote operation command is received from the personal computer 1, and the processing is performed. Goes to step S10.
[0112]
In step S10, the CPU 96 executes an operation corresponding to the received remote operation command. The remote control commands include a recording start or stop command, a zoom command, a pan command, a tilt command, and a status request. By executing the processing corresponding to the remote control command, the internal status is rewritten. As shown in FIG. 19, the status includes four pieces of information of a recording state, a pan state, a tilt state, and a zoom state. The current state of the digital video camera 2 (whether or not recording is being performed, Whether panning is being performed, whether tilting is being performed in any direction, and whether zooming is being performed are described. After the processing in step S10 ends, the processing returns to step S1, and the subsequent processing is repeated.
[0113]
If it is determined in step S9 that the remote operation command has not been received from the personal computer 1, the process returns to step S1, and the subsequent processes are repeated.
[0114]
Through such processing, the digital video camera 2 can execute processing based on an operation input by a user using the personal computer 1.
[0115]
Next, a communication process by the communication program 49a of the personal computer 1 will be described with reference to a flowchart of FIG.
[0116]
In step S21, the communication program 49a determines whether it is necessary to request a preview image. Since the communication program 49a requests the preview image at predetermined time intervals, it is necessary to request the preview image if the predetermined time has not elapsed since the previous request for the preview image. If not, the process proceeds to Step S25. If it is determined in step S21 that a preview image needs to be requested, in step S22, the communication program 49a determines whether there is a command stored in the remote operation command register.
[0117]
For example, when the transmission command determination process of step S39 described later with reference to FIG. 21 is executed, it is determined that there is a command stored in the remote operation command register, and the process proceeds to step S24. If it is determined in step S22 that there is no command stored in the remote operation command register, in step S23, the communication program 49a controls the wireless communication unit 50 to preview the digital video camera 2. Request an image (request a transfer). After the process of step S23 ends, the process returns to step S21, and the subsequent processes are repeated.
[0118]
If it is determined in step S22 that there is a stored command in the remote operation command register, in step S24, the communication program 49a controls the wireless communication unit 50 to store the command in the digital video camera 2. A preview image request including the command being transmitted is transmitted. After the processing in step S24 ends, the processing returns to step S21, and the subsequent processing is repeated.
[0119]
In step S25, the communication program 49a controls the wireless communication unit 50 to determine whether a preview image corresponding to the preview image request in the process of step S23 has been transmitted from the digital video camera 2, and, for example, When it is determined that the preview image has been transmitted by the process of step S2 in FIG. 18, the process proceeds to step S26.
[0120]
In step S26, the communication program 49a controls the wireless communication unit 50 to receive the transmitted preview image and store it in the VRAM 44.
[0121]
In step S27, the communication program 49a transmits a monitor change notification indicating that the preview image has been stored in the VRAM 44 to the image transfer program 49b, and if a status has been transmitted together with the preview image, the status is transmitted to the image transfer program 49b. The program is transmitted to the program 49b. For example, when the transmission command determination process of step S39 described later with reference to FIG. 21 is executed and a status is requested to the digital video camera 2, the digital video camera 2 performs the process together with the preview image by the process of step S10 of FIG. , Send status. After the process of step S27 ends, the process returns to step S21, and the subsequent processes are repeated.
[0122]
If it is determined in step S25 that the preview image has not been transmitted, in step S28, the communication program 49a determines whether or not a request to shoot a still image has been issued from the image transfer program 49b. For example, if the image transfer program 49b requests a still image to be captured by the processing of step S88 in the flowchart of FIG. 24 described below, the image transfer program 49b controls the wireless communication unit 50 to control the digital communication in step S29. It requests the video camera 2 to shoot a still image. After the process of step S29 ends, the process returns to step S21, and the subsequent processes are repeated.
[0123]
If it is determined in step S28 that shooting of a still image has not been requested, in step S30, the communication program 49a controls the wireless communication unit 50 to determine whether a thumbnail image has been transmitted from the digital video camera 2. Judge. For example, when a thumbnail image is transmitted from the digital video camera 2 by the processing in step S5 of the flowchart in FIG. 18, it is determined that a thumbnail image has been transmitted, and the process proceeds to step S31.
[0124]
In step S31, the communication program 49a controls the wireless communication unit 50 to receive the thumbnail image transmitted from the digital video camera 2 and store the thumbnail image in the VRAM 44.
[0125]
In step S32, the communication program 49a transmits a monitor change notification indicating that the thumbnail image has been stored in the VRAM 44 to the image transfer program 49b, and controls the wireless communication unit 50 to stop the digital video camera 2. Ask the user to transfer the image. After the processing in step S32 ends, the processing returns to step S21, and the subsequent processing is repeated.
[0126]
If it is determined in step S30 that the thumbnail image has not been transmitted, in step S33, the communication program 49a controls the wireless communication unit 50 to transmit the divided still image from the digital video camera 2. Is determined. For example, when the still images divided by the process of step S8 in the flowchart of FIG. 18 are sequentially transmitted, it is determined that the divided still images have been transmitted, and the process proceeds to step S34.
[0127]
In step S34, the communication program 49a controls the wireless communication unit 50 to receive the divided and transmitted still images and sequentially store them in the VRAM 44. In step S35, the communication program 49a reads the progress of the still image stored in the VRAM 44, and transmits a progress notification to the image transfer program 49b.
[0128]
In step S36, the communication program 49a checks the VRAM 44, determines whether all of the transferred divided still images have been stored, and determines that all the still images have not been stored. The process returns to step S34. That is, while the still image is being transferred from the digital video camera, the processing of steps S34 to S36 is repeated.
[0129]
If it is determined in step S36 that all the still images have been stored in the VRAM 44, in step S37, the communication program 49a transmits a transfer completion notification indicating that the transfer of the still images has been completed to the image transfer program 49b. , The process returns to step S21, and the subsequent processes are repeated.
[0130]
If it is determined in step S33 that the divided still image has not been transmitted from the digital video camera 2, in step S38, the communication program 49a determines whether a remote operation command has been supplied from the image transfer program 49b. I do. For example, when the remote operation command is transmitted by the processing of step S98 of the flowchart of FIG. 24 described later, it is determined that the remote operation command is supplied, and in step S39, the transmission command determination processing described later with reference to FIG. When executed, the process returns to step S21, and the subsequent processes are repeated. If it is determined in step S38 that the remote control command has not been supplied from the image transfer program 49b, the process returns to step S21, and the subsequent processes are repeated.
[0131]
Next, the transmission command determination process executed in step S49 in FIG. 20 will be described with reference to the flowchart in FIG.
[0132]
In step S51, the communication program 49a determines whether the command supplied from the image transfer program 49b is any one of pan, tilt, and zoom, or another command (pan / tilt center or recording start / end). ) Is determined.
[0133]
Here, the supplied command will be described with reference to FIG.
[0134]
Commands supplied from the image transfer program 49b are classified into five types: recording start / end, pan / tilt center, zoom operation, pan operation, and tilt operation. Each command has a command ID, and a recording start / end command (Rec Start / Stop) (0x10) and a pan / tilt center (Pan / Tilt Center) (0xB0) are only one command for each type. The zoom operation includes 15 commands of telephoto zoom commands (Zoom_tele) 1 to 7, a zoom stop command (zoom_stop), and wide-angle zoom commands (Zoom_wide) 1 to 7 (0x81 to 0x8F). The pan operation includes 15 commands of pan left (Pan_left) 1 to 7, pan stop (Pan_stop), and pan right (Pan_right) (0x91 to 0x9F). The tilt operation includes 15 commands of leftward tilt (Tilt_left) 1 to 7, tilt stop (Tilt_stop), and rightward tilt (Tilt_right) (0xA1 to 0xAF). The number in the command indicates the speed, and the higher the number, the faster.
[0135]
Further, as a command to be transmitted to the digital video camera, there is a status request (Status_request) (0x02) for requesting that the current camera status (the status described with reference to FIG. 19) be returned.
[0136]
At the time of transmitting the preview image request (Get_Monitoringimage) (0x00), only one of these commands is added and transmitted. That is, each time the preview image of one frame changes, one command is transmitted to the digital camera 2.
[0137]
Each command will be described. The recording start / end command performs a recording start / end operation. However, this command is not one for the start and the end, but one for the set of the start and the end. That is, if this command is in a so-called toggle state and the digital video camera 2 is not in the recording state and receives this command, the digital video camera 2 starts recording and enters the recording state, and the digital video camera 2 If this command is received in the recording state, the digital video camera 2 stops recording. The zoom operation, the pan operation, and the tilt operation are commands that, when commanded once, continue the operations until a zoom stop, a pan stop, a tilt stop, or a pan / tilt center is commanded, respectively. Therefore, when the photographing direction is to be moved obliquely, if the pan and tilt are sequentially commanded, the photographing direction is moved obliquely until a corresponding stop command is issued. The pan / tilt center command is a command for returning the photographing position to the center of the photographable range.
[0138]
If it is determined in step S51 that the command supplied from the image transfer program 49b is one of pan, tilt, and zoom, in step S52, the communication program 49a is supplied from the image transfer program 49b. By storing the command based on a predetermined rule, it is determined whether or not the command of the same type as the command supplied in step S51 is already described in the command history table used for determining the transmission command. I do.
[0139]
FIG. 23 shows a command history table. In the command history table, columns for describing the command name and time are provided for each type of pan, tilt, and zoom. When a command is supplied for the first time in each type, the command name and time are described. When a new command of a certain type already described is supplied, the most recently supplied command name is described (overwritten), but the time is not overwritten. That is, as shown in FIG. 23, in the column of pan and zoom of the command history table, the name of the most recently supplied command and the supply time of the earliest supplied command are described, and the type of tilt is Is supplied, the command name and supply time are described. When a command of the pan or zoom type is supplied, only the command name is overwritten.
[0140]
That is, if it is determined in step S52 that a command of the same type has already been described in the command history table, in step S53, the communication program 49a replaces the received command with a command of the same type in the command history table. Overwrite the description (time information is not updated).
[0141]
If it is determined in step S52 that the command of the same type is not described in the command history table, in step S54, the communication program 49a transmits the received command together with the received time in the command history table. It is described where it does.
[0142]
If it is determined in step S51 that the command supplied from the image transfer program 49b is not one of pan, tilt, and zoom, that is, if it is determined that a command for pan / tilt center or recording start / end has been received, in step S55, The communication program 49a activates a flag indicating that an internal pan / tilt center command has been received or a flag indicating that a recording start / end command has been received.
[0143]
After the processing of step S53, step S54, or step S55 is completed, in step S56, the communication program 49a determines whether or not it is the request timing of the preview image.
[0144]
The extended BIP is designed so that one remote control command can be added to the request signal for acquiring the preview image. Here, the timing of the exchange of the preview image is not constant depending on the Bluetooth communication state. Further, since the remote operation command is also generated by a user operation, the command generation timing is not constant. That is, when transmitting a request for a preview image, there may be two or more remote control commands, or no remote control command. Therefore, if it is determined in step S56 that it is not the request timing of the preview image, the process proceeds to step S21 in FIG.
[0145]
If it is determined in step S56 that it is the preview image request timing, in step S57, the communication program 49a determines whether the previously transmitted command is a recording start / end command. If it is determined in step S57 that the previously transmitted command is a recording start / end command, the process proceeds to step S64 described below.
[0146]
If it is determined in step S57 that the previously transmitted command is not a command to start or end recording, in step S58, the communication program 49a determines that the value of the internal counter for counting the number of command transmissions is 5 or more. It is determined whether or not. If it is determined in step S58 that the value of the counter is 5 or more, the process proceeds to step S64 described below.
[0147]
If it is determined in step S58 that the value of the counter is not equal to or greater than 5, in step S59, the communication program 49a determines that a flag indicating that a pan / tilt center command has been received or that a recording start / end command has been received. It is determined whether or not the indicated flag is active.
[0148]
If it is determined in step S59 that the flag indicating that the pan / tilt center command has been received or the flag indicating that the recording start / end command has been received is active, in step S60, the communication program 49a sets the pan / tilt center Among the commands or the recording start / end commands, a command whose flag is active is transmitted, and the corresponding flag is made inactive. The pan / tilt center command or the recording start / end command has a priority determined in advance, and when both flags are in the active state, one of the commands is transmitted.
[0149]
If it is determined in step S59 that the flag indicating that the pan / tilt center command has been received or the flag indicating that the recording start / end command has been received is not active, in step S61, the communication program 49a executes the processing shown in FIG. The command described in the column of the type with the oldest time is transmitted with reference to the command history table described with reference to FIG.
[0150]
In step S62, the communication program 49a deletes the transmitted command together with the time information of the corresponding command type from the command history table.
[0151]
After the processing in step S60 or step S62 is completed, in step S63, the communication program 49a adds 1 to an internal counter for counting the number of command transmissions, and the processing proceeds to step S21 in FIG.
[0152]
If it is determined in step S57 that the previously transmitted command is a command to start or end recording, or if it is determined in step S58 that the value of the counter is equal to or greater than 5, communication is performed in step S64. The program 49a transmits a status request, sets the counter to 0, and the process proceeds to step S21 in FIG.
[0153]
That is, the status is requested at the next timing when the recording start or end command is transmitted, or at least once in every five preview image requests.
[0154]
In the processing described with reference to FIG. 21, the reason why the command supply time is transmitted from the command of the oldest type is to execute various commands equally. For example, if a LIFO (Last In First Out) algorithm for executing a command of the most recently supplied command type is always used, the following problems occur depending on the arrival timing of a new command.
[0155]
For example, when a rightward tilt command and a wide-angle zoom command are supplied, and then a leftward tilt command is supplied, and a timing for requesting a preview image comes, a leftward tilt command is transmitted, and the command history table includes a wide-angle command. The zoom command remains. After that, even if a plurality of commands are supplied, if a command related to tilt is supplied immediately before the request timing of the preview image, the zoom system is in spite of the fact that the user has issued a zoom command several times. Command will not be sent at all.
[0156]
In order to prevent such a problem, the command supply time is transmitted from the command of the oldest type, so that various commands are executed equally.
[0157]
The reason why the latest command among the commands of the same type is transmitted is to reflect the latest command instructed by the user. If the communication program 49a requests the digital video camera 2 to request a preview image, for example, about three times a second, all commands are sequentially transmitted to the digital video camera by a FIFO (First In First Out) algorithm. If the transmission is performed to the camera 2, a time delay occurs until the command operated by the user is executed. Therefore, the command of the transmitted type is deleted from the history, instead of leaving all the commands waiting for transmission.
[0158]
Further, if a pan stop command is supplied after the rightward pan command during the period until the remote control command is transmitted, for example, these two commands are canceled, and as a result, nothing is performed. A method of not sending any command is also conceivable. However, in order to cancel commands, it is necessary to have a rule that conflicting commands are always performed consecutively as a rule for command generation. That is, commands are supplied in the order of “telephoto zoom”, “telephoto zoom”, and “zoom stop”, and if “telephoto zoom” and “zoom stop” are canceled out, the user's latest operation, “zoom stop”, will not be performed. It is not executed, and "telephoto zoom" is executed, so unless "telephoto zoom" is supplied before "zoom stop" is supplied before the command for zoom execution is supplied , The cancellation of the command causes a situation in which the intention of the user is not reflected.
[0159]
Therefore, in the present invention, in order to avoid setting restrictions on the user's operation input, the commands are not offset.
[0160]
By doing so, with a simple processing method, the area for storing commands to be transmitted can be reduced, commands can be transmitted equally among the pan, tilt, and zoom command types, and a large number of commands can be transmitted. Even if it occurs, the time delay until command execution does not exceed a certain value.
[0161]
Next, an image transfer process by the image transfer program 49b will be described with reference to the flowchart in FIG.
[0162]
In step S81, the image transfer program 49b determines whether a monitor change notification has been received. For example, when the monitor change notification is transmitted from the communication program 49a by the processing in step S27 or step S32 in FIG. 20, the image transfer program 49b determines that the monitor change notification is received, and the processing is performed in step S27. Proceed to S82.
[0163]
In step S82, the image transfer program 49b reads the preview image or the thumbnail image stored in the VRAM 44 and, if there is a status transmitted at the same time, saves the status. After the process in step S82 ends, the process returns to step S81, and the subsequent processes are repeated.
[0164]
If it is determined in step S81 that the monitor change notification has not been received, in step S83, the image transfer program 49b determines whether a status request has been received from the image operation program 49c. If it is determined in step S83 that a status request has been made, in step S84, the image transfer program 49b notifies the image operation program 49c of the status saved in step S82. After the process in step S84 ends, the process returns to step S81, and the subsequent processes are repeated.
[0165]
If it is determined in step S83 that there has been no request for status, in step S85, the image transfer program 49b determines whether a request for a preview image or a thumbnail image has been made from the image operation program 49c. For example, when a request for a preview image or a thumbnail image is made by the processing of step S112 or S120 in the flowchart of FIG. 25 described later, it is determined that the request for the preview image or the thumbnail image has been made. The process proceeds to step S86.
[0166]
In step S86, the image transfer program 49b transmits the read preview image or thumbnail image to the image operation program 49c. After the process in step S86 ends, the process returns to step S81, and the subsequent processes are repeated.
[0167]
If it is determined in step S85 that there is no request for a thumbnail image or a preview image, in step S87, the image transfer program 49b determines whether or not a request to shoot a still image has been issued from the image operation program 49c. For example, when a still image shooting request is transmitted by the process of step S118 in FIG. 25 described later, it is determined that the still image shooting request has been received, and the process proceeds to step S88.
[0168]
In step S88, the image transfer program 49b transmits a request for capturing a still image to the communication program 49a. After the process in step S88 ends, the process returns to step S81, and the subsequent processes are repeated.
[0169]
If it is determined in step S87 that shooting of a still image has not been requested, in step S89, the image transfer program 49b determines whether a progress notification has been transmitted from the communication program 49a. For example, when the progress notification is transmitted by the process of step S35 in the flowchart of FIG. 20, it is determined that the progress notification has been transmitted, and in step S90, the image transfer program 49b receives the transmitted progress notification. And memorize. After the process in step S90 ends, the process returns to step S81, and the subsequent processes are repeated.
[0170]
If it is determined in step S89 that the progress notification has not been transmitted, in step S91, the image transfer program 49b determines whether a progress notification has been requested from the image operation program 49c. For example, when the progress notification is requested by the process of step S122 in the flowchart of FIG. 25 described later, it is determined that the progress notification is requested, and in step S92, the image transfer program 49b receives the progress notification received in the process of step S90. The notification is transmitted to the image operation program 49c. After the end of the process of the step 92, the process returns to the step S81, and the subsequent processes are repeated.
[0171]
If it is determined in step S91 that the progress notification has not been requested, in step S93, the image transfer program 49b transmits a completion notification indicating that the transfer of the still image to the VRAM 44 has been completed from the communication program 49a. Is determined. For example, when the completion notification is transmitted from the communication program 49a by the process of step S37 in the flowchart of FIG. 20, it is determined that the completion notification has been transmitted, and the process proceeds to step S94.
[0172]
In step S94, the image transfer program 49b receives the completion notification transmitted from the communication program 49a, and further notifies (transmits) the image operation program 49c. After the processing in step S94 ends, the processing returns to step S81, and the subsequent processing is repeated.
[0173]
If it is determined in step S93 that the completion notification has not been transmitted, in step S95, the image transfer program 49b determines whether a still image has been requested by the image operation program 49c. For example, when a request for a still image is transmitted from the image operation program 49c by the processing of step S125 in FIG. 25 described below, it is determined that there is a request for a still image, and in step S96, the image transfer program 49b The still image is read from the VRAM 44 and transmitted to the image operation program 49c. After the process of step 96 is completed, the process returns to step S81, and the subsequent processes are repeated.
[0174]
If it is determined in step S95 that a still image has not been requested, in step S97, the image transfer program 49b determines whether a remote operation command has been supplied from the image operation program 49c. For example, in the processing of step S115 in FIG. 25, when it is determined that an operation on the digital video camera has been input, and when the command supply and status confirmation processing described later with reference to FIG. 27 are executed, it is determined that the remote operation command has been supplied. Therefore, in step S98, the image transfer program 49b transmits a remote control command to the communication program 49a, and the process returns to step S81, and the subsequent processes are repeated. If it is determined in step S97 that the remote operation command has not been supplied, the process returns to step S81, and the subsequent processes are repeated.
[0175]
Next, operation processing by the image operation program 49c will be described with reference to the flowchart in FIG.
[0176]
In step S111, the image operation program 49a determines whether a predetermined time has elapsed. If it is determined that the predetermined time has elapsed, the process proceeds to step S112.
[0177]
In step S112, the image operation program 49c requests a preview image from the image transfer program 49b. With this process, the process of step S86 in the flowchart of FIG. 24 is executed, and the preview image is transmitted from the image transfer program 49b. Then, the image operation program 49c receives the transmitted preview image in step S113, displays the preview image on the display unit 218 shown in FIG. 8, for example, in step S114, and the processing proceeds to step S127. .
[0178]
If it is determined in step S111 that the predetermined time has not elapsed, in step S115, the image operation program 49c, for example, inputs the pan, tilt, zoom, and recording start / input to the controller 219 in FIG. It is determined whether an operation input to the digital video camera 2, such as end, pan / tilt center, etc., has been executed.
[0179]
If it is determined in step S115 that an operation input to the digital video camera 2 has been performed, a command supply and status confirmation process, which will be described later with reference to FIG. 27, is performed in step S116.
[0180]
If it is determined in step S115 that the operation input to the digital video camera 2 has not been performed, or after the processing in step S116 has been completed, in step S117, the image operation program 49c determines whether or not a request to shoot a still image has been issued. Judge. For example, when the display screen in the still image mode is displayed as shown in FIG. 8, when the photographing button 231a is operated, the image operation program 49c determines that the photographing of the still image is requested, and performs the processing. Proceeds to step S118.
[0181]
In step S118, the image operation program 49c transmits a still image shooting request to the image transfer program 49b.
[0182]
In step S119, the image operation program 49c determines whether a predetermined time has elapsed, and repeats the processing until the predetermined time has elapsed. If it is determined in step S119 that the predetermined time has elapsed, in step S120, the image operation program 49c requests a thumbnail image or a preview image (issues a preview image request) to the image transfer program 49b.
[0183]
Based on this request, for example, a thumbnail image or a preview image is transmitted by the process of step S86 in the flowchart of FIG.
[0184]
Then, in step S121, the image operation program 49c receives (acquires) and displays the preview image or the thumbnail image transmitted from the image transfer program. More precisely, basically, the preview image is transmitted, but only when the thumbnail image is received in the process of step S82, the thumbnail image is received. For example, as shown in FIG. The image is displayed as in an image 217b, and otherwise, the preview image is received and displayed as shown by the display unit 218 in FIG.
[0185]
In step S122, the image operation program 49c requests a progress notification from the image transfer program 49b. By this processing, for example, a progress notification is transmitted in step S92 of the flowchart in FIG. Then, in step S123, the image operation program 49c displays the progress of the still image transfer based on the received progress notification. That is, the image operation program 49c displays a progress bar 311 indicating the transfer status, for example, as shown in FIG. 26, in order to notify the user of the progress in the transfer of the still image. The progress bar 311 indicates the progress status by a white square in the figure. If the overall progress status is 0%, the progress bar 311 displays a status without a white square. If the progress status is 50%, the progress bar 311 indicates the progress status. White cells are displayed from the left to the center, and in the case of 100%, the entire range of the progress bar is displayed as white cells.
[0186]
In step S124, the image operation program 49c determines whether or not a completion notification has been received from the image transfer program 49b. If it is determined that the completion notification has not been received, the process returns to step S119. That is, the processing of steps S119 to S124 is repeated until the completion notification is received.
[0187]
For example, if a completion notification has been transmitted by the process of step S94 in the flowchart of FIG. 24, it is determined in step S124 that the completion notification has been received. Therefore, in step S125, the image operation program 49c Request a still image. Then, a still image is transmitted by the process of step S96 in the flowchart of FIG. Therefore, in step S126, the image operation program 49c receives the still image transmitted by the image transfer program 49b and displays it on, for example, the display unit 218 in FIG. 9, and the process proceeds to step S127.
[0188]
If it is determined in step S117 that the photographing of the still image has not been requested, or after the process of step S126 has been completed, in step S127, the image operation program 49c determines whether or not the recording of the moving image has been requested. . For example, when the recording button 231b shown in FIG. 10 is operated, the image operation program 49c determines that recording of a moving image has been requested, and the process proceeds to step S128.
[0189]
In step S128, the image operation program 49c records the current preview image received in the processing in step S113.
[0190]
In step S129, the image operation program 49c determines whether termination is requested. For example, when it is determined that the recording has been continued and the recording has not been completed, in step S130, the image operation program 49c determines whether or not a predetermined time has elapsed. If the process is repeated and it is determined that the predetermined time has elapsed, the process proceeds to step S131.
[0191]
In step S131, the image operation program 49c requests a preview image to the image transfer program 49b (issues a request). With this processing, the preview image is transmitted by the processing of step S86 in the flowchart of FIG. Therefore, in step S132, the image operation program 49c receives the transmitted preview image, and the processing returns to step S128. At this time, in step S128, the image operation program 49c records (acquires and records) the newly received preview image. Then, in step S129, the processes in steps S128 to S132 are repeated and recording is performed until it is determined that the end is instructed.
[0192]
In step S129, for example, when it is determined that the end button 231c shown in FIG. 11 has been operated and the end has been instructed, or in step S127, it has been determined that the recording has not been instructed, the processing is performed. , The process returns to step S111, and the subsequent processes are repeated.
[0193]
Next, the command supply and status confirmation processing executed in step S116 in FIG. 25 will be described with reference to the flowchart in FIG.
[0194]
In step S151, the image operation program 49c supplies a command based on a user's operation input to the controller 219 to the image transfer program 49b.
[0195]
In step S152, the image operation program 49c determines whether the user's operation input to the controller 219 is pan or tilt. If it is determined in step S152 that the user's operation input is neither pan nor tilt, the process proceeds to step S117 in FIG.
[0196]
If it is determined in step S152 that the user's operation input is either pan or tilt, the image operation program 49c starts counting the internal timer in step S153, and in step S154, It is determined whether a predetermined time has elapsed. If it is determined in step S154 that the predetermined time has not elapsed, the process of step S154 is repeated until it is determined that the predetermined time has elapsed.
[0197]
If it is determined in step S154 that the predetermined time has elapsed, in step S155, the image operation program 49c acquires the status held by the image transfer program 49b.
[0198]
The acquired status will be described with reference to FIG.
[0199]
As described with reference to FIG. 19, the status indicates four states: a recording state, a pan state, a tilt state, and a zoom state. As shown in FIG. 28A, the pan state status indicates a state where panning is stopped (Pan stop) with a code 0X00, and a state where panning is performed leftward (Pan Left) with a code 0X01. A code 0X02 indicates a state in which panning is performed in the right direction (Pan Right). Then, as shown in FIG. 28B, the tilt status indicates a state in which the tilt is stopped (Tilt stop) with code 0X00, and a state in which the tilt is upward (Tilt Up) with code 0X01. A code 0X02 indicates that the camera is tilted downward (Tilt Down).
[0200]
In step S156, the image operation program 49c refers to the obtained status to determine whether the screen has been moved in a direction in which a user operation input has been received. In other words, if the status acquired in the state where the panning in the right direction is instructed indicates the state of panning right (Pan Right) with the code 0X02, the direction in which the operation input by the user is received It is determined that the screen has been moved to step S117, and the process proceeds to step S117 in FIG.
[0201]
On the other hand, when the status acquired in the state where the panning in the right direction is commanded indicates the code 0X00 and the panning is stopped (Pan stop), the state in which the panning in the left direction is commanded In the case where the status obtained at the time is a code 0X00 and indicates a state where panning is stopped (Pan stop), the status obtained at the time when the upward tilt is commanded is a code 0X00 and the tilt is Indicates a stopped state (Tilt stop), or a state obtained in a state where a downward tilt is instructed is a code 0X00, and the tilt is stopped (Tilt stop). Indicates that the screen has not been moved in the direction That is, since it is detected that the shooting position is at the end of the predetermined range in which shooting is possible, in step S157, the image operation program 49c notifies the user that the shooting position is at the end of the shooting range. After executing the display process, the process proceeds to step S117 in FIG.
[0202]
Specifically, the image operation program 49c determines that the shooting direction of the digital video camera 2 is at the limit position of the shootable range and the shooting direction cannot be changed any more, as described with reference to FIG. 17, the pan / tilt button 223 being operated by the user is blinked, the display of the pan / tilt button 223 is inverted in the negative / positive manner, or the display color is changed. As described with reference to FIG. Of the mouse cursor icon 261 is blinked or the display color of the mouse cursor icon 261 is changed. By confirming these displays, the user can recognize that the shooting direction cannot be further moved in the corresponding operation input direction.
[0203]
Note that when the user is operating the pan / tilt button 223 in FIG. 16 or the mouse cursor icon 261 in FIG. 17 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 is changed to the shooting direction. If the photographing direction cannot be changed any more, it becomes the limit position of the possible range.For example, a message window with a message "Cannot change the photographing direction any more" is displayed, or a predetermined not shown By turning on or off the LED, generating a buzzer sound, or notifying by a voice message, the user may be notified that the shooting direction cannot be changed any more.
[0204]
Next, with reference to the timing chart of FIG. 29, the relationship between the processing of the digital video camera 2, the communication program 49a, the image transfer program 49b, and the image operation program 49c for the process of displaying the preview image will be described. Note that each process has been described with reference to the flowcharts of FIGS.
[0205]
First, the communication program 49a requests a preview image by the process of step S23. In response to this request, the digital video camera 2 acquires the preview image stored in the memory 87 and transmits the preview image to the communication program 49a by the process of step S2.
[0206]
In step S25, the communication program 49a receives the transmitted preview image and stores it in the VRAM 44, and in step S27, sends a monitor change notification to the image transfer program 49b.
[0207]
In response to the monitor change notification transmitted from the communication program 49a, the image transfer program 49b reads and acquires the preview image from the VRAM 44 in step S82.
[0208]
In the image operation program 49c, since the processing of steps S111 to S114 is repeated at predetermined time intervals, the preview image is requested to the image transfer program 49b by the processing of step S112 at predetermined time intervals.
[0209]
Based on this request, the image transfer program 49b transmits the preview image obtained in the process of step S82 to the image operation program 49c in step S86.
[0210]
The image operation program 49c receives the preview image in step S113, and displays the received preview image in step S114.
[0211]
When the communication program 49a requests the preview image again by the process of step S23, the above process is repeated, and the preview image is continuously displayed on the display unit 218.
[0212]
With the above processing, it is possible to check in real time what is being photographed on the personal computer 1 in the digital video camera 2 installed in a remote place.
[0213]
Next, with reference to the timing chart of FIG. 30, a process for requesting the photographing of a still image and displaying the photographed still image is described in the digital video camera 2, the communication program 49a, the image transfer program 49b, and the image operation program. The relationship between the respective processes of 49c will be described. Note that each process has been described with reference to the flowcharts of FIGS.
[0214]
In step S118, the image operation program 49c requests the still image capture to the image transfer program 49b. In response to this, in step S88, the image transfer program 49b requests the communication program 49a to shoot a still image. Further, in response to this request, in step S29, the communication program 49a requests the digital video camera 2 to shoot a still image.
[0215]
In step S4, the digital video camera 2 shoots a still image in response to the still image shooting request, and in step S5 converts the still image into a thumbnail image and transmits the thumbnail image to the personal computer 1 (communication program 49a). In step S31, the communication program 49a receives the transmitted thumbnail image and stores it in the VRAM 44. In step S32, the communication program 49a transmits a monitor change notification indicating that the thumbnail image has been stored in the VRAM 44 to the image transfer program 49b. At the same time, it requests the digital video camera 2 to transfer a still image.
[0216]
Here, the digital video camera 2 receives the transfer request of the still image, divides the image data of the still image in step S7, and converts the image data of the still image divided in order in step S8 into the personal computer 1 (communication). It is transmitted to the program 49a).
[0219]
In step S34, the communication program 49a sequentially stores the transmitted image data of the divided still images in the VRAM 44, and in step S35, transmits a progress notification to the image transfer program 49b. In this process, the processes in steps S34 to S36 are repeated until it is determined in step S36 that all the divided still images have been stored in the VRAM 44 (that is, although not shown in FIG. 30, step S34). , S35 may be repeated).
[0218]
At this time, in step S90, the image transfer program 49b receives the progress notification transmitted from the communication program 49a in step S35.
[0219]
When all of the divided still images have been transferred to the VRAM 44, in step S37, the communication program 49a sends a transfer completion notification indicating that the still image has been transferred to the VRAM 44 to the image transfer program 49b. Send to
[0220]
On the other hand, according to the monitor change notification indicating that the thumbnail image transmitted from the communication program 49a is stored in the VRAM 44 in the process of step S32, the image transfer program 49b executes the thumbnail image stored in the VRAM 44 in step S82. To get.
[0221]
At this time, the image operation program 49c repeats the processing of steps S119 to S124 at predetermined time intervals until the transfer completion notification is transmitted from the image transfer program 49b. Therefore, in step S120, the image operation program 49c requests the preview image or the thumbnail image from the image transfer program 49b.
[0222]
In response to this request, the image transfer program 49b transmits the thumbnail image or the preview image to the image operation program 49c in step S86.
[0223]
Note that the image transfer program 49b transmits the thumbnail image to the image operation program 49c immediately after receiving the thumbnail image, and transmits a preview image otherwise. That is, the process of displaying the preview image shown in FIG. 29 is executed even when a still image shooting is requested.
[0224]
In step S121, the image operation program 49c receives and displays the thumbnail image or the preview image transmitted in the processing in step S86.
[0225]
Further, the image operation program 49c requests a progress notification from the image transfer program 49b at predetermined time intervals. At this time, as described above, the image transfer program 49b transmits the progress notification received in the processing of Step S90 to the image operation program 49c in Step S92.
[0226]
In step S123, the image operation program 49c receives and displays the progress notification transmitted from the image transfer program 49b. As described above, the processing from step S34 to step S36 is repeated until all the divided still images are transferred to the VRAM 44. Therefore, the processing in step S90 and step S92, and the processing in step S122 and step S123 are also performed. Are repeated at predetermined time intervals until all the divided still images are transferred to the VRAM 44.
[0227]
When the completion notification is transmitted by the process of step S37, the image transfer program 49b receives the completion notification from the communication program 49a and transmits the transfer completion to the image operation program 49c by the process of step S94. Send notifications.
[0228]
When the transfer completion notification is transmitted from the image transfer program 49b, the image operation program 49c requests the still image from the image transfer program 49b in step S125.
[0229]
In response to this request, in step S96, the image transfer program 49b transmits the still image stored in the VRAM 44 to the image operation program 49c. In step S126, the image operation program 49c receives and displays the transmitted still image.
[0230]
According to the above processing, even when the digital video camera 2 is located at a remote location, a still image can be captured by the personal computer 1, and the captured still image can be received and displayed by the personal computer 1 from a remote location. It becomes possible.
[0231]
In addition, in the case of shooting a moving image, in the above-described method of shooting a still image, it takes time to transfer the image. Therefore, the image operation program 49c records the preview image continuously. That is, as shown in FIG. 31, the processes of steps S131 and S128 are executed instead of the processes of steps S112 and S114 of FIG. A moving image can be recorded by such processing.
[0232]
Further, when capturing a fixed point observation image, the interval at which the preview image is recorded in step S128 in the timing chart of FIG. 31 is adjusted. That is, one of the recorded preview images is recorded as a still image constituting the fixed-point observation image, so that the fixed-point observation image can be captured.
[0233]
The communication program 49a requests a preview image (step S2), and when the preview image is received and stored (step S25), requests the preview image again (step S2). Is repeated, but the required time is not constant depending on the communication environment, the communication distance, and the like because the wireless communication unit 50 and the wireless communication unit 101 are used.
[0234]
On the other hand, when displaying the preview image (when photographing of a still image or recording of a moving image is not requested), the image operation program 49c requests an image from the image transfer program 49b at a predetermined time interval (step S111). In response to this request (step S112), the image transfer program 49b transmits the preview image read from the VRAM 44 every time a monitor change notification is made (step S82) (step S86). As a result, the preview image read from the VRAM 44 is transmitted to and received by the image operation program 49c (step S113), so that the preview image is read from the VRAM 44 at predetermined time intervals and displayed. Become.
[0235]
Therefore, when it is desired to receive an image at 10 fps, for example, the image operation program 49a sets the above-mentioned predetermined time interval to 100 ms and requests the image to the image transfer program 49b. At this time, since the image operation program 49c and the image transfer program 49b are on the personal computer 1, the transfer time is very short. Therefore, the digital video camera 2 may not be able to provide an image at a desired frame rate. Depending on the timing at which a request for a preview image is issued to the image transfer program 49b, the same image may be returned, but the image operation program 49c can obtain a preview image at a desired frame rate. The preview image obtained in this manner is an image having a constant frame rate, and thus can be easily handled as data.
[0236]
According to the above, it is possible to monitor, as a preview image, an image that can be photographed by the digital video camera 2 at a remote place, and to display an image (still image, moving image, or (Including a fixed-point observation image), and the captured image can be confirmed at a remote location.
[0237]
Next, referring to the timing charts of FIGS. 32 and 33, the personal computer 1 transmits a remote control command to the digital video camera 2 and, if necessary, refers to the status, thereby performing pan and pan. A description will be given of the relationship between the respective processes of the digital video camera 2, the communication program 49a, the image transfer program 49b, and the image operation program 49c in the case of executing a display process for detecting a tilt operation limit and notifying the user. I do. Note that each process has been described with reference to the flowcharts of FIGS.
[0238]
In step S115, when the image operation program 49c determines that an operation input to the digital video camera 2, that is, an operation input to the controller 219 has been received, in step S116, command supply and status confirmation processing are executed, and in step S151, , A remote operation command is transmitted to the image transfer program 49b. In response to this, in step S98, the image transfer program 49b transmits a remote operation command to the communication program 49a. Further, in response to this, in step S39, the communication program 49a executes a transmission command determination process. If it is determined that it is not the transmission timing of the preview image, no signal is transmitted to the digital video camera 2.
[0239]
Further, if the image operation program 49c determines in step S115 that an operation input to the digital video camera 2, that is, an operation input to the controller 219 has been received, command supply and status confirmation processing are executed in step S116. In step S151, a remote control command is transmitted to the image transfer program 49b. In response to this, in step S98, the image transfer program 49b transmits a remote operation command to the communication program 49a. Further, in response to this, in step S39, the communication program 49a executes a transmission command determination process. Here, it is the transmission timing of the preview image, and when it is determined that the status request is transmitted, the communication program 49a sends the digital video camera 2 a remote control command indicating the preview image request and the status request in step S24. Send
[0240]
In response to the request, the digital video camera 2 transmits the preview image and the status stored in the memory 87 to the communication program 49a by the processes of steps S2 and S10.
[0241]
In step S25, the communication program 49a receives the transmitted preview image and stores it in the VRAM 44, and in step S27, transmits a monitor change notification and a status to the image transfer program 49b.
[0242]
In step S82, the image transfer program 49b reads and acquires the preview image from the VRAM 44 and stores the status in response to the monitor change notification transmitted from the communication program 49a.
[0243]
Further, if the image operation program 49c determines in step S115 that an operation input to the digital video camera 2, that is, an operation input to the controller 219 has been received, command supply and status confirmation processing are executed in step S116. In step S151, a remote control command is transmitted to the image transfer program 49b. In response to this, in step S98, the image transfer program 49b transmits a remote operation command to the communication program 49a. Further, in response to this, in step S39, the communication program 49a executes a transmission command determination process. Here, when it is the transmission timing of the preview image, and it is determined that any of the pan, tilt, and zoom commands is transmitted, the communication program 49a sends the preview image to the digital video camera 2 in step S24. And a remote control command of any of pan, tilt, and zoom is transmitted.
[0244]
In response to this request, the digital video camera 2 executes the processing corresponding to the supplied remote control command by the processing of step S10, and executes the preview image stored in the memory 87 by the processing of step S2. It is transmitted to the communication program 49a.
[0245]
In step S25, the communication program 49a receives the transmitted preview image and stores it in the VRAM 44, and in step S27, transmits a monitor change notification to the image transfer program 49b.
[0246]
In step S82, the image transfer program 49b reads and acquires the preview image from the VRAM 44 according to the monitor change notification transmitted from the communication program 49a.
[0247]
Further, when the operation input in step S115 is a command for panning or tilting, the image operation program 49c executes a process of acquiring the status held in the image transfer program 49b in step S155. If the image operation program 49c detects the end of the photographable range in step S156 based on the acquired status, the image operation program 49c executes display processing for notifying the user in step S157.
[0248]
By such processing, even when a plurality of commands are generated in the personal computer 1 during a period between transmission of a request for a preview image and transmission of a request for the next preview image, the plurality of commands among the plurality of commands are generated. , The most appropriate command is selected and transmitted to the digital video camera 2, so that the command corresponding to the operation input by the user to the personal computer 1 can be efficiently transmitted to the digital video camera without performing complicated command transmission / reception processing. 2 can be executed. Further, when the user performs a pan or tilt operation input using the personal computer 1 on the digital video camera 2 installed in a remote place, the personal computer 1 uses an image in the shooting range by complicated processing. It is possible to detect the end of the photographing range of the digital video camera 2 and generate a simple process to notify the user of the end of the photographing range in a display method that is easy for the user to understand without generating such information. Become.
[0249]
Further, the present invention can be realized in various information processing apparatuses such as a PDA and a mobile phone, other than the personal computer 1. In the present invention, for example, when a small information processing device such as a PDA or a mobile phone is used, in order to inform the user that the end of the shooting range has been detected, a display method is changed or characters or voices are used. Not only a message but also a driving unit (not shown) for notifying a user of a predetermined information by generating vibration in a part or the whole of a small information processing device such as a PDA or a portable telephone in the output unit 48. By driving the drive unit and vibrating the device by the processing of the CPU 41, it is possible to notify the user that the pan or tilt operation cannot be performed any more.
[0250]
Further, the device to be remotely controlled is also a device capable of exchanging information with an information processing device such as a personal computer 1 to which the present invention is applied, such as a digital still camera, a camera-equipped mobile phone, or a PDA. For example, a device other than the digital video camera 2 may be used.
[0251]
An information processing apparatus such as a personal computer 1, a PDA, or a mobile phone to which the present invention is applied, and a digital video camera 2, a digital still camera, a camera-equipped mobile phone, It is needless to say that communication with a device such as a PDA is not limited to wireless communication but may be wired communication using a cable or the like.
[0252]
The series of processes described above can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, a program constituting the software may be executed by a computer built into dedicated hardware or by installing various programs to execute various functions. It is installed from a recording medium into a possible general-purpose personal computer or the like.
[0253]
This recording medium is provided to the user in a state where it is incorporated in the personal computer 1 in advance as shown in FIG. 2, and is provided to the user separately from the computer in addition to the storage unit 48 in which the program is recorded. A magnetic disk 61 (including a flexible disk) on which a program is recorded, an optical disk 62 (including a CD-ROM (Compact Disk-Read Only Memory), a DVD (Digital Versatile Disk)), a magneto-optical It is constituted by a package medium including a disk 63 (including MD (Mini-Disc) (registered trademark)) or a semiconductor memory 64 (including Memory Stick).
[0254]
In the present specification, the step of describing a program recorded on a recording medium may be performed in a chronological order according to the described order. Alternatively, the processing includes individually executed processing.
[0255]
Also, in this specification, a system represents the entire device including a plurality of devices.
[0256]
【The invention's effect】
As described above, according to the present invention, an image transmitted from another information processing apparatus can be displayed. In particular, it is possible to detect that the photographing position of the displayed image (the position of the photographed image within the photographable range) is at the end of the predetermined range, and notify the user in an easy-to-understand manner.
[0257]
According to another aspect of the present invention, an image transmitted from the first information processing apparatus can be displayed on the second information processing apparatus, and a photographing position of the image displayed on the second information processing apparatus can be displayed. It is possible to detect that (the position of the image being photographed within the photographable range) is the end of the predetermined range and notify the user in an easy-to-understand manner.
[Brief description of the drawings]
FIG. 1 is a block diagram of a wireless imaging system to which the present invention is applied.
FIG. 2 is a block diagram showing a configuration of the personal computer of FIG.
FIG. 3 is a block diagram showing a configuration of the digital video camera of FIG.
FIG. 4 is a functional block diagram illustrating functions realized by the wireless imaging system in FIG. 1;
FIG. 5 is a diagram illustrating an example of a display image according to a communication program.
FIG. 6 is a diagram illustrating another example of a display image according to a communication program.
FIG. 7 is a diagram showing an example of a display image by the image operation program.
FIG. 8 is a diagram showing an example of a display image by the image operation program.
FIG. 9 is a diagram illustrating an example of a display image according to the image operation program.
FIG. 10 is a diagram showing an example of a display image by an image operation program.
FIG. 11 is a diagram showing an example of a display image by the image operation program.
FIG. 12 is a diagram showing an example of a display image by the image operation program.
FIG. 13 is a diagram showing an example of a display image by the image operation program.
FIG. 14 is a diagram showing an example of a display image by the image operation program.
FIG. 15 is a diagram showing an example of a display image by the image operation program.
FIG. 16 is a diagram showing an example of a display image by the image operation program.
FIG. 17 is a diagram showing an example of a display image by the image operation program.
FIG. 18 is a flowchart illustrating a photographing process performed by a digital video camera.
FIG. 19 is a diagram illustrating a status.
FIG. 20 is a flowchart illustrating communication processing by a communication program.
FIG. 21 is a flowchart illustrating a transmission command determination process.
FIG. 22 is a diagram illustrating a command.
FIG. 23 is a diagram illustrating a command history table.
FIG. 24 is a flowchart illustrating a transfer process by an image transfer program.
FIG. 25 is a flowchart illustrating operation processing by an image operation program.
FIG. 26 is a diagram illustrating an example of a display image according to the image operation program.
FIG. 27 is a flowchart illustrating command supply and status confirmation processing.
FIG. 28 is a diagram illustrating a status.
FIG. 29 is a timing chart when a preview image is displayed.
FIG. 30 is a timing chart when capturing a still image.
FIG. 31 is a timing chart when recording a moving image.
FIG. 32 is a timing chart when a remote operation command is transmitted.
FIG. 33 is a timing chart when a remote operation command is transmitted.
[Explanation of symbols]
Reference Signs List 1 personal computer, 2 digital video camera, 41 CPU, 47 operation input unit, 43 RAM, 49a communication program, 49b image transfer program, 49c image operation program, 50 wireless communication unit, 87 memory, 93 compression / decompression unit, 95 memory card , 96 CPU, 101 wireless communication unit

Claims (13)

所定の範囲の画像を撮影することが可能な他の情報処理装置と通信可能な情報処理装置において、
前記他の情報処理装置と通信し、情報の送受信を行う送受信手段と、
ユーザの操作入力を受ける操作入力手段と、
前記他の情報処理装置から送信され、前記送受信手段によって受信された画像情報を表示する表示手段と、
前記他の情報処理装置の状態に関する情報を基に、前記表示手段により表示された前記画像の撮影位置が、前記所定の範囲の端部であることを検出する検出手段と
を備え、
前記表示手段により表示された前記画像情報は、操作入力手段により入力された前記ユーザの操作入力に対応し、前記送受信手段により送信された制御信号を受信した前記他の情報処理装置により、前記制御信号を基に前記画像の撮影方向が制御されて撮影された画像情報である
ことを特徴とする情報処理装置。In an information processing apparatus capable of communicating with another information processing apparatus capable of capturing an image in a predetermined range,
A transmission / reception unit that communicates with the other information processing apparatus and transmits / receives information;
Operation input means for receiving an operation input by a user;
Display means for displaying image information transmitted from the other information processing apparatus and received by the transmitting and receiving means,
Detecting means for detecting that the shooting position of the image displayed by the display means is an end of the predetermined range, based on information on a state of the other information processing apparatus,
The image information displayed by the display means corresponds to the operation input of the user input by the operation input means, and the other information processing apparatus receiving the control signal transmitted by the transmission / reception means performs the control. An information processing apparatus, wherein the information is image information obtained by controlling a shooting direction of the image based on a signal. 前記表示手段は、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記ユーザに、前記所定の範囲の端部であることを通知する情報を更に表示する
ことを特徴とする請求項１に記載の情報処理装置。The display means further displays information for notifying the user of the end of the predetermined range when the detection means detects the end of the predetermined range. The information processing apparatus according to claim 1. 前記表示手段は、前記ユーザが、前記他の情報処理装置により撮影される前記画像情報の撮影位置を変更させるための操作入力を行うためのボタンを更に表示し、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記ボタンを点滅させて表示させる
ことを特徴とする請求項１に記載の情報処理装置。The display unit further displays a button for the user to perform an operation input for changing a photographing position of the image information photographed by the another information processing apparatus, and the detecting unit detects the predetermined range. The information processing apparatus according to claim 1, wherein, when it is detected that the button is at an end, the button is blinked and displayed. 前記表示手段は、前記ユーザが、前記他の情報処理装置により撮影される前記画像情報の撮影位置を変更させるための操作入力を行うためのボタンを更に表示し、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記ボタンの表示色を変更させて表示させる
ことを特徴とする請求項１に記載の情報処理装置。The display unit further displays a button for the user to perform an operation input for changing a photographing position of the image information photographed by the another information processing apparatus, and the detecting unit detects the predetermined range. 2. The information processing apparatus according to claim 1, wherein when it is detected that the button is the end, the display color of the button is changed and displayed. 前記表示手段は、前記ユーザが、前記他の情報処理装置により撮影される前記画像情報の撮影位置を変更させるための操作入力を行うためのカーソルを更に表示し、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記カーソルを点滅させて表示させる
ことを特徴とする請求項１に記載の情報処理装置。The display means further displays a cursor for the user to perform an operation input for changing a photographing position of the image information photographed by the another information processing device, and the detecting means detects the predetermined range. 2. The information processing apparatus according to claim 1, wherein, when it is detected that the cursor is at an end, the cursor is blinked and displayed. 前記表示手段は、前記ユーザが、前記他の情報処理装置により撮影される前記画像情報の撮影位置を変更させるための操作入力を行うためのカーソルを更に表示し、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記カーソルの表示色を変更させて表示させる
ことを特徴とする請求項１に記載の情報処理装置。The display means further displays a cursor for the user to perform an operation input for changing a photographing position of the image information photographed by the another information processing apparatus, and the detecting means detects the predetermined range. The information processing apparatus according to claim 1, wherein when it is detected that the cursor is at an end, the display color of the cursor is changed and displayed. 前記表示手段は、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記所定の範囲の端部であることが検出されたことをユーザに通知するためのメッセージを更に表示する
ことを特徴とする請求項１に記載の情報処理装置。The display means further includes a message for notifying a user that the end of the predetermined range has been detected when the end of the predetermined range is detected by the detection means. The information processing apparatus according to claim 1, wherein the information is displayed. 音声出力を行う音声出力手段を更に備え、
前記音声出力手段は、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記所定の範囲の端部であることが検出されたことをユーザに通知するための音声を出力する
ことを特徴とする請求項１に記載の情報処理装置。The apparatus further includes audio output means for outputting audio.
The sound output means outputs a sound for notifying a user that the end of the predetermined range is detected when the end of the predetermined range is detected by the detection means. The information processing apparatus according to claim 1, wherein the information is output. 前記情報処理装置を振動させるための駆動手段を更に備え、
前記駆動手段は、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記所定の範囲の端部であることが検出されたことをユーザに通知するために、前記情報処理装置を振動させる
ことを特徴とする請求項１に記載の情報処理装置。Further comprising a driving unit for vibrating the information processing device,
The driving unit, when the detecting unit detects the end of the predetermined range, the driving unit includes the information to notify a user that the end of the predetermined range is detected. The information processing device according to claim 1, wherein the processing device is vibrated. 前記他の情報処理装置の状態に関する情報は、前記他の情報処理装置が撮影する前記画像情報の撮影位置が所定の方向に変更されているか否かを示す情報を含み、
前記検出手段は、前記前記他の情報処理装置の状態に関する情報を基に、前記画像情報の撮影位置が所定の方向に変更されていないことを検出した場合、前記所定の範囲の端部であることを検出する
ことを特徴とする請求項１に記載の情報処理装置。The information on the state of the other information processing device includes information indicating whether or not the shooting position of the image information shot by the other information processing device has been changed in a predetermined direction,
The detecting unit detects an end of the predetermined range when detecting that a shooting position of the image information is not changed in a predetermined direction based on information on a state of the another information processing apparatus; The information processing apparatus according to claim 1, wherein the information is detected. 所定の範囲の画像を撮影することが可能な他の情報処理装置と通信可能な情報処理装置の情報処理方法において、
前記他の情報処理装置により撮影された前記画像の受信を制御する受信制御ステップと、
前記受信制御ステップの処理により受信が制御された前記画像の表示を制御する表示制御ステップと、
ユーザの操作入力に対応する制御信号の送信を制御する送信制御ステップと、
前記ユーザの操作入力が、所定の操作を指令する操作入力であった場合、前記他の情報処理装置の状態に関する情報を取得する取得ステップと、
前記取得ステップの処理により取得された前記情報を基に、前記表示制御ステップの処理により表示が制御された前記画像情報の撮影位置が、前記所定の範囲の端部であることを検出する検出ステップと、
前記検出ステップの処理により前記所定の範囲の端部であることが検出された場合、前記ユーザに、前記所定の範囲の端部であることを通知する通知ステップと
を含むことを特徴とする情報処理方法。In an information processing method of an information processing apparatus capable of communicating with another information processing apparatus capable of capturing an image in a predetermined range,
A reception control step of controlling reception of the image photographed by the other information processing apparatus,
A display control step of controlling display of the image whose reception is controlled by the processing of the reception control step,
A transmission control step of controlling transmission of a control signal corresponding to a user operation input;
When the operation input of the user is an operation input for instructing a predetermined operation, an obtaining step of obtaining information on a state of the other information processing apparatus;
A detecting step of detecting that a shooting position of the image information whose display is controlled by the processing of the display control step is an end of the predetermined range, based on the information obtained by the processing of the obtaining step; When,
And a notifying step of notifying the user of the end of the predetermined range when the end of the predetermined range is detected by the processing of the detecting step. Processing method. 所定の範囲の画像を撮影することが可能な他の情報処理装置と通信する処理をコンピュータに実行させるためのプログラムであって、
前記他の情報処理装置により撮影された前記画像の受信を制御する受信制御ステップと、
前記受信制御ステップの処理により受信が制御された前記画像の表示を制御する表示制御ステップと、
ユーザの操作入力に対応する制御信号の送信を制御する送信制御ステップと、
前記ユーザの操作入力が、所定の操作を指令する操作入力であった場合、前記他の情報処理装置の状態に関する情報を取得する取得ステップと、
前記取得ステップの処理により取得された前記情報を基に、前記表示制御ステップの処理により表示が制御された前記画像情報の撮影位置が、前記所定の範囲の端部であることを検出する検出ステップと、
前記検出ステップの処理により前記所定の範囲の端部であることが検出された場合、前記ユーザに、前記所定の範囲の端部であることを通知する通知ステップと
を含むことを特徴とするプログラム。A program for causing a computer to execute a process of communicating with another information processing device capable of capturing an image of a predetermined range,
A reception control step of controlling reception of the image photographed by the other information processing apparatus,
A display control step of controlling display of the image whose reception is controlled by the processing of the reception control step,
A transmission control step of controlling transmission of a control signal corresponding to a user operation input;
When the operation input of the user is an operation input for instructing a predetermined operation, an obtaining step of obtaining information on a state of the other information processing apparatus;
A detecting step of detecting that a shooting position of the image information whose display is controlled by the processing of the display control step is an end of the predetermined range, based on the information obtained by the processing of the obtaining step; When,
And a notifying step of notifying the user of the end of the predetermined range when the end of the predetermined range is detected by the processing of the detecting step. . 所定の範囲の画像を撮影することが可能な第１の情報処理装置と、
前記第１の情報処理装置と通信可能な第２の情報処理装置と
で構成される遠隔撮影システムにおいて、
前記第２の情報処理装置は、
前記第１の情報処理装置と通信し、情報の送受信を行う第１の送受信手段と、
ユーザの操作入力を受ける操作入力手段と、
前記第１の情報処理装置から送信され、前記第１の送受信手段によって受信
された画像情報を表示する表示手段と、
前記第１の送受信手段によって受信された前記第１の情報処理装置の状態に関する情報を基に前記表示手段により表示された前記画像の撮影位置が、前記
所定の範囲の端部であることを検出する検出手段と
を備え、
前記表示手段は、前記検出手段により前記所定の範囲の端部であることが検出された場合、前記ユーザに、前記所定の範囲の端部であることを通知する表
示を行い、
前記第１の情報処理装置は、
前記第２の情報処理装置と通信し、情報の送受信を行う第２の送受信手段と、
前記第２の情報処理装置から送信され、前記第２の送受信手段により受信された前記ユーザの操作入力に対応する制御信号を基に、画像を撮影する撮影手段と
を備え、
前記第２の送受信手段は、前記撮影手段により撮影された前記画像信号と、前記制御信号を基に実行された処理の結果更新される、自分自身の状態に関す
る前記情報を前記第２の情報処理装置に送信する
ことを特徴とする遠隔撮影システム。A first information processing device capable of capturing an image in a predetermined range,
In a remote imaging system including a second information processing device capable of communicating with the first information processing device,
The second information processing device includes:
A first transmission / reception unit that communicates with the first information processing apparatus and transmits / receives information;
Operation input means for receiving an operation input by a user;
Display means for displaying image information transmitted from the first information processing device and received by the first transmission / reception means;
Based on the information on the state of the first information processing device received by the first transmission / reception unit, it is detected that the shooting position of the image displayed by the display unit is an end of the predetermined range. Detecting means for detecting
The display means, when it is detected by the detection means is the end of the predetermined range, performs a display to notify the user that the end of the predetermined range,
The first information processing device includes:
A second transmission / reception unit that communicates with the second information processing apparatus and transmits / receives information;
Shooting means for shooting an image, based on a control signal transmitted from the second information processing device and corresponding to the user's operation input received by the second transmitting / receiving means,
The second transmission / reception unit transmits the image signal photographed by the photographing unit and the information relating to its own state, which is updated as a result of a process executed based on the control signal, to the second information processing. A remote photographing system for transmitting to a device.
JP2003130513A 2003-05-08 2003-05-08 Apparatus and method for processing information, remote photographing system, and program Withdrawn JP2004336476A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003130513A JP2004336476A (en) 2003-05-08 2003-05-08 Apparatus and method for processing information, remote photographing system, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003130513A JP2004336476A (en) 2003-05-08 2003-05-08 Apparatus and method for processing information, remote photographing system, and program

Publications (1)

Publication Number Publication Date
JP2004336476A true JP2004336476A (en) 2004-11-25

Family

ID=33506018

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003130513A Withdrawn JP2004336476A (en) 2003-05-08 2003-05-08 Apparatus and method for processing information, remote photographing system, and program

Country Status (1)

Country Link
JP (1) JP2004336476A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100246A (en) * 2007-10-17 2009-05-07 Hitachi Ltd Display device

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100246A (en) * 2007-10-17 2009-05-07 Hitachi Ltd Display device
CN102291555A (en) * 2007-10-17 2011-12-21 株式会社日立制作所 Display apparatus
US8446528B2 (en) 2007-10-17 2013-05-21 Hitachi, Ltd. Display apparatus
US8908095B2 (en) 2007-10-17 2014-12-09 Hitachi Maxell, Ltd. Display apparatus
US20170025090A1 (en) 2007-10-17 2017-01-26 Hitachi Maxell, Ltd. Display apparatus
US9858888B2 (en) 2007-10-17 2018-01-02 Hitachi Maxell, Ltd. Display apparatus
US10037744B2 (en) 2007-10-17 2018-07-31 Maxell, Ltd. Display apparatus
US10339893B2 (en) 2007-10-17 2019-07-02 Maxell, Ltd. Display apparatus
US10354612B2 (en) 2007-10-17 2019-07-16 Maxell, Ltd. Display apparatus
US10629160B2 (en) 2007-10-17 2020-04-21 Maxell, Ltd. Display apparatus
US10650780B2 (en) 2007-10-17 2020-05-12 Maxell, Ltd. Display apparatus
US10685622B2 (en) 2007-10-17 2020-06-16 Maxell, Ltd. Display apparatus
US10957278B2 (en) 2007-10-17 2021-03-23 Maxell, Ltd. Display apparatus
US11308914B2 (en) 2007-10-17 2022-04-19 Maxell, Ltd. Display apparatus
US11501735B2 (en) 2007-10-17 2022-11-15 Maxell, Ltd. Display apparatus
US11587524B2 (en) 2007-10-17 2023-02-21 Maxell, Ltd. Display apparatus
US11798515B2 (en) 2007-10-17 2023-10-24 Maxell, Ltd. Display apparatus

Similar Documents

Publication Publication Date Title
JP4890880B2 (en) Image transmitting apparatus, image transmitting method, program, and storage medium
US10542216B2 (en) Apparatus and method for storing moving image portions
JP5554218B2 (en) Electronic equipment, communication system
WO2004023795A1 (en) Electronic camera, electronic camera system, and imaging method
JP2003274335A (en) Information recording device
JP5743579B2 (en) Imaging apparatus, control method thereof, and program
JP3878035B2 (en) Image delivery method
US20100149345A1 (en) Digital camera
US7657568B2 (en) Image pickup apparatus and control method therefor
JP5213602B2 (en) Imaging apparatus, control method thereof, and program
US8102425B2 (en) Electronic camera and image transfer method adopted in electronic camera
JP2004336475A (en) Device and method for processing information, and program
JP2003333434A (en) Device and method for picking-up image, program, and recording medium
JP2004336476A (en) Apparatus and method for processing information, remote photographing system, and program
JP2004334582A (en) Information processing apparatus, method, and program
JP2004104370A (en) Information-processing apparatus and method therefor, and program
JP4883803B2 (en) COMMUNICATION DEVICE, ITS CONTROL METHOD, AND PROGRAM
JP2005051340A (en) Camera for remotely controlling cameras
JP2004104369A (en) Information-processing apparatus and method therefor, and program
JP3913046B2 (en) Imaging device
JP2009077305A (en) Imaging apparatus and imaging control method
JP5535183B2 (en) COMMUNICATION DEVICE, ITS CONTROL METHOD, AND PROGRAM
JP6283989B2 (en) Image scaling processor
JP4692971B2 (en) Shooting system
JP2009089325A (en) Information device and remaining battery level detection method

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20060801