JP2004336475A - Device and method for processing information, and program - Google Patents

Device and method for processing information, and program Download PDF

Info

Publication number
JP2004336475A
JP2004336475A JP2003130512A JP2003130512A JP2004336475A JP 2004336475 A JP2004336475 A JP 2004336475A JP 2003130512 A JP2003130512 A JP 2003130512A JP 2003130512 A JP2003130512 A JP 2003130512A JP 2004336475 A JP2004336475 A JP 2004336475A
Authority
JP
Japan
Prior art keywords
operation input
control signal
image
information processing
transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2003130512A
Other languages
Japanese (ja)
Inventor
Hiroshi Hasegawa
寛 長谷川
Takashi Kuwayama
高史 桑山
Atsushi Suzuki
淳 鈴木
Tsukuru Yamada
作 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003130512A priority Critical patent/JP2004336475A/en
Publication of JP2004336475A publication Critical patent/JP2004336475A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To select one out of a plurality of commands occurred during a specified period of term. <P>SOLUTION: A command history table is provided with a column to enter a name of command and a time of day by kind of pan, tilt, and zoom. When a command of each kind is supplied for the first time, the name of command and the time of day are entered; when a command of the kind which has already been entered is supplied, the name of the supplied command is entered (overwritten) but the time of day is not. That is, when a command of the kind of tilt is supplied in a state that newly supplied names of command and supplied time of day of the commands supplied earliest are entered, the name of command and the supplied time of day are entered; when a command of the kind of either pan or zoom, only the name of command is overwritten. At the time of transmitting a command, a command corresponding the earliest time of day is selected and transmitted. The present invention is applicable to a personal computer. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、情報処理装置および方法、並びにプログラムに関し、特に、遠隔地にある撮影装置を遠隔地に居ながらにして操作し、撮影させるときに用いて好適な、情報処理装置および方法、並びにプログラムに関する。
【0002】
【従来の技術】
遠隔操作によりデジタルスチルカメラまたはデジタルビデオカメラを操作して、画像を撮影する技術が一般に普及しつつある。
【0003】
従来、遠隔地に備えられているカメラであって、撮影される画像の向きを、横方向および縦方向に移動(パンおよびチルト)することができるカメラによって撮影されている画像がコンピュータに転送される場合に、撮影可能な範囲のパノラマ画像を用いて、そのカメラによる撮影範囲、すなわち、パンまたはチルト可能な範囲をユーザに通知するようになされているものがある(例えば、特許文献1参照)。
【0004】
例えば、特許文献1参照に記載の発明においては、カメラから、撮影範囲内の複数の画像がコンピュータに伝送され、コンピュータにより、供給された複数の画像が合成されて、撮影可能な範囲のパノラマ画像が生成され、表示されるとともに、表示されたパノラマ画像上に、現在カメラによって撮影されている画枠や、パンチルタ操作(パンおよびチルト操作とも称する)を行うことが可能な範囲が示される。ユーザは、パノラマ画像の表示を参照して、パンチルタ操作の指示を行い、所望の画像を撮影することができる。
【0005】
【特許文献1】
特開平11−8844号公報(第4−5頁、図1、図4)
【0006】
【発明が解決しようとする課題】
しかしながら、遠隔地からカメラを操作し、撮影させる場合に、パン、チルト、ズームなどをはじめとする、さまざまなコマンドを、そのつど、カメラに供給するようにした場合、例えば、ユーザの操作入力ごとにコマンドが送信されてしまうため、コマンドの送受信処理が煩雑になってしまい、カメラからの画像の送信処理が後れてしまう場合が発生してしまう恐れがある。
【0007】
本発明はこのような状況に鑑みてなされたものであり、遠隔地にある撮影装置を遠隔地に居ながらにして操作し、撮影させる場合において、カメラへ送信する情報をできるだけ少なくしつつ、必要な操作を行えるようにするものである。
【0008】
【課題を解決するための手段】
本発明の第1の情報処理装置は、他の情報処理装置と通信し、情報の送受信を行う送受信手段と、ユーザの操作入力を受ける操作入力手段と、操作入力手段により入力されたユーザの操作入力を基に、送受信手段による、他の情報処理装置への制御信号の送信を制御する制御手段とを備え、操作入力手段により入力されたユーザの操作入力は、複数の種別に分類され、複数の種別のうち、優先種別として、少なくともひとつの第1の種別が設定され、制御手段は、所定の期間中に操作入力手段により第1の種別の操作入力を含む複数の操作入力を受けた場合、第1の種別の操作入力に対応する制御信号の送信を制御することを特徴とする。
【0009】
制御手段には、所定の期間中に、第1の種別に対応する操作入力を受けなかった場合、第1の種別以外の複数の第2の種別において、最も早く操作入力を受けた第2の種別の操作入力に対応する制御信号の送信を制御させるようにすることができる。
【0010】
第2の種別の操作入力には、複数の操作入力を対応させるようにすることができ、制御手段には、所定の期間中に、第1の種別に対応する操作入力を受けなかった場合、第1の種別以外の複数の第2の種別において、最も早く操作入力を受けた第2の種別と同一の種別の操作入力のうち、最も後に受けた操作入力に対応する制御信号の送信を制御させるようにすることができる。
【0011】
制御手段には、制御信号を第2の種別ごとに記憶するテーブルへの、操作入力手段により入力された操作入力に対応する制御信号および時刻情報の記載を更に制御させるようにすることができ、所定の第2の種別に対応する初めての操作入力である第1の操作入力が実行された場合、テーブルに、第1の操作入力に対応する制御信号と対応する時刻情報を記載させ、すでに制御信号および時刻情報が記載されている第2の種別に対応する第2の操作入力が実行された場合、テーブルの第1の操作入力に対応する時刻情報は保持させ、第1の操作入力に対応する制御信号に第2の操作入力に対応する制御信号を上書きさせるようにすることができ、所定の期間が経過したと判断された場合、テーブルに記載されている時刻情報のうち、最も早い時刻を示す時刻情報に対応されている制御信号の送信を制御させるようにすることができる。
【0012】
所定の期間とは、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号が、他の情報処理装置へ送出されてから、次に送出されるまでの期間であるものとすることができ、制御手段には、転送要求信号とともに制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御させるようにすることができる。
【0013】
他の情報処理装置から送信され、送受信手段によって、受信された画像情報を表示する表示手段を更に備えさせるようにすることができる。
【0014】
送受信手段には、他の情報処理装置と無線で通信させるようにすることができる。
【0015】
本発明の第1の情報処理方法は、ユーザの操作入力が、複数の種別のうち、優先種別として設定されている種別の操作入力であるか否かを判断する判断ステップと、判断ステップの処理により、ユーザの操作入力は、優先種別として設定されている種別の操作入力であると判断された場合、優先種別として設定されている種別の操作入力に対応する制御信号の送信を制御する送信制御ステップとを含むことを特徴とする。
【0016】
本発明の第1のプログラムは、ユーザの操作入力が、複数の種別のうち、優先種別として設定されている種別の操作入力であるか否かを判断する判断ステップと、判断ステップの処理により、ユーザの操作入力は、優先種別として設定されている種別の操作入力であると判断された場合、優先種別として設定されている種別の操作入力に対応する制御信号の送信を制御する送信制御ステップとを含むことを特徴とする。
【0017】
本発明の第1の情報処理装置および方法、並びにプログラムにおいては、所定の期間中に行われたユーザの操作入力に、複数の種別のうちの優先種別として設定されている種別の操作入力がふくまれているか否かが判断され、優先種別として設定されている種別の操作入力であると判断された場合、優先種別として設定されている種別の操作入力に対応する制御信号が送信される。
【0018】
本発明の第2の情報処理装置は、他の情報処理装置と通信し、情報の送受信を行う送受信手段と、ユーザの操作入力を受ける操作入力手段と、操作入力手段により入力されたユーザの操作入力を基に、送受信手段による、他の情報処理装置への制御信号の送信を制御する制御手段とを備え、操作入力手段により入力されたユーザの操作入力は、複数の種別に分類され、複数の種別のうち、少なくともひとつの優先種別が設定され、制御手段は、前に送信された制御信号が、所定の第1の制御信号である場合、第1の制御信号に基づいて実行される他の情報処理装置の処理を確認するための第2の制御信号の送信を制御し、前に送信された制御信号が第1の制御信号ではなく、所定の期間中に操作入力手段により優先種別の操作入力を含む複数の操作入力を受けた場合、優先種別の操作入力に対応する第3の制御信号の送信を制御することを特徴とする。
【0019】
本発明の第2の情報処理方法は、ユーザの操作入力を受ける操作入力ステップと、前回送信された制御信号が、所定の第1の制御信号であるか否かを判断する第1の判断ステップと、第1の判断ステップの処理により、前回送信された制御信号は、第1の制御信号であると判断された場合、第1の制御信号による他の情報処理装置の処理を確認するための第2の制御信号の送信を制御する第1の送信制御ステップと、第1の判断ステップの処理により、前回送信された制御信号は、第1の制御信号ではないと判断された場合、操作入力ステップの処理により入力されたユーザの操作入力は、複数の種別のうちの優先種別に対応する操作入力であるか否かを判断する第2の判断ステップと、第2の判断ステップの処理により、ユーザの操作入力は、優先種別であると判断された場合、優先種別の操作入力に対応する第3の制御信号の送信を制御する送信制御ステップとを含むことを特徴とする。
【0020】
本発明の第2のプログラムは、ユーザの操作入力を受ける操作入力ステップと、前回送信された制御信号が、所定の第1の制御信号であるか否かを判断する第1の判断ステップと、第1の判断ステップの処理により、前回送信された制御信号は、第1の制御信号であると判断された場合、第1の制御信号による他の情報処理装置の処理を確認するための第2の制御信号の送信を制御する第1の送信制御ステップと、第1の判断ステップの処理により、前回送信された制御信号は、第1の制御信号ではないと判断された場合、操作入力ステップの処理により入力されたユーザの操作入力は、複数の種別のうちの優先種別に対応する操作入力であるか否かを判断する第2の判断ステップと、第2の判断ステップの処理により、ユーザの操作入力は、優先種別であると判断された場合、優先種別の操作入力に対応する第3の制御信号の送信を制御する送信制御ステップとを含むことを特徴とする。
【0021】
本発明の第2の情報処理装置および方法、並びにプログラムにおいては、前回送信された制御信号が、所定の第1の制御信号である場合、第1の制御信号による他の情報処理装置の処理を確認するための第2の制御信号が送信され、前回送信された制御信号は、第1の制御信号ではなく、ユーザの操作入力は、複数の種別のうちの優先種別に対応する操作入力である場合、優先種別の操作入力に対応する第3の制御信号が送信される。
【0022】
本発明の第3の情報処理装置は、他の情報処理装置と通信し、情報の送受信を行う送受信手段と、ユーザの操作入力を受ける操作入力手段と、操作入力手段により入力されたユーザの操作入力を基に、送受信手段による、他の情報処理装置への制御信号の送信を制御する制御手段とを備え、操作入力手段により入力されたユーザの操作入力は、複数の種別に分類され、複数の種別のうち、少なくともひとつの優先種別が設定され、制御手段は、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御するとともに、転送要求信号の送信の所定回数のうちの少なくとも1回は、他の情報処理装置の処理を確認するための第1の制御信号の送信を制御し、第1の制御信号の送信が制御されない場合、所定の期間中に操作入力手段により入力された複数の操作入力のうち、優先種別の操作入力に対応する第2の制御信号が優先的に送信されるように、制御信号の送信を制御することを特徴とする。
【0023】
本発明の第3の情報処理方法は、ユーザの操作入力を受ける操作入力ステップと、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに、操作入力ステップの処理により入力されたユーザの操作入力に対応する制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御する送信制御ステップとを含み、操作入力ステップの処理により入力されたユーザの操作入力は、複数の種別に分類され、複数の種別のうち、少なくともひとつの優先種別が設定され、送信制御ステップの処理では、転送要求信号の送信の所定回数のうちの少なくとも1回は、他の情報処理装置の処理を確認するための第1の制御信号の送信を制御し、第1の制御信号の送信が制御されない場合、所定の期間中に操作ステップの処理により入力された複数の操作入力のうち、優先種別の操作入力に対応する第2の制御信号が優先的に送信されるように、制御信号の送信を制御することを特徴とする。
【0024】
本発明の第3のプログラムは、ユーザの操作入力を受ける操作入力ステップと、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに、操作入力ステップの処理により入力されたユーザの操作入力に対応する制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御する送信制御ステップとを含み、操作入力ステップの処理により入力されたユーザの操作入力は、複数の種別に分類され、複数の種別のうち、少なくともひとつの優先種別が設定され、送信制御ステップの処理では、転送要求信号の送信の所定回数のうちの少なくとも1回は、他の情報処理装置の処理を確認するための第1の制御信号の送信を制御し、第1の制御信号の送信が制御されない場合、所定の期間中に操作ステップの処理により入力された複数の操作入力のうち、優先種別の操作入力に対応する第2の制御信号が優先的に送信されるように、制御信号の送信を制御することを特徴とする。
【0025】
本発明の第3の情報処理装置および方法、並びにプログラムにおいては、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに、ユーザの操作入力に対応する制御信号が他の情報処理装置へ送信され、ユーザの操作入力は、複数の種別に分類され、複数の種別のうち、少なくともひとつの優先種別が設定され、転送要求信号の送信の所定回数のうちの少なくとも1回は、他の情報処理装置の処理を確認するための第1の制御信号が送信され、それ以外は、所定の期間中に入力された複数の操作入力のうち、優先種別の操作入力に対応する第2の制御信号が優先的に送信される。
【0026】
【発明の実施の形態】
以下に本発明の実施の形態を説明するが、特許請求の範囲に記載の発明の各手段および各ステップと以下の実施の形態との対応関係を明らかにするために、各手段および各ステップの後の括弧内に、対応する実施の形態(但し一例)を付加して本発明の特徴を記述すると、次のようになる。但し勿論この記載は、各手段および各ステップを記載したものに限定することを意味するものではない。
【0027】
請求項1に記載の情報処理装置(例えば、図1のパーソナルコンピュータ1)は、他の情報処理装置(例えば、図1のデジタルビデオカメラ2)と通信し、情報の送受信を行う送受信手段(例えば、図2の無線通信部50)と、ユーザの操作入力を受ける操作入力手段(例えば、図2の入力部47)と、操作入力手段により入力されたユーザの操作入力を基に、送受信手段による、他の情報処理装置への制御信号(例えば、コマンド)の送信を制御する制御手段(例えば、図2のCPU41)とを備え、操作入力手段により入力されたユーザの操作入力は、複数の種別(例えば、録画開始・終了、パンチルトセンタ、ズーム、パン、チルト)に分類され、複数の種別のうち、優先種別として、少なくともひとつの第1の種別(例えば、録画開始・終了、パンチルトセンタ)が設定され、制御手段は、所定の期間中に操作入力手段により第1の種別の操作入力を含む複数の操作入力を受けた場合、第1の種別の操作入力に対応する制御信号の送信を制御することを特徴とする。
【0028】
請求項2に記載の情報処理装置は、制御手段が、所定の期間中に、第1の種別に対応する操作入力を受けなかった場合、第1の種別以外の複数の第2の種別(例えば、ズーム、パン、チルト)において、最も早く操作入力を受けた第2の種別の操作入力に対応する制御信号の送信を制御することを特徴とする。
【0029】
請求項3に記載の情報処理装置は、第2の種別の操作入力には、複数の操作入力(例えば、図22に示されるように、ズームに対して、広角ズームおよび望遠ズーム、パンに対して、右方向および左方法、チルトに対して、上方向および下方向、また、それぞれに対して、速度に対応する複数の操作入力)が対応し、制御手段は、所定の期間中に、第1の種別に対応する操作入力を受けなかった場合、第1の種別以外の複数の第2の種別において、最も早く操作入力を受けた第2の種別と同一の種別の操作入力のうち、最も後に受けた操作入力に対応する制御信号の送信を制御することを特徴とする。
【0030】
請求項4に記載の情報処理装置は、制御手段が、制御信号を第2の種別ごとに記憶するテーブル(例えば、図12に示されるコマンド履歴テーブル)への、操作入力手段により入力された操作入力に対応する制御信号および時刻情報の記載を更に制御し、所定の第2の種別に対応する初めての操作入力である第1の操作入力が実行された場合、テーブルに、第1の操作入力に対応する制御信号と対応する時刻情報を記載し、すでに制御信号および時刻情報が記載されている第2の種別に対応する第2の操作入力が実行された場合、テーブルの第1の操作入力に対応する時刻情報は保持し、第1の操作入力に対応する制御信号に第2の操作入力に対応する制御信号を上書きし、所定の期間が経過したと判断された場合、テーブルに記載されている時刻情報のうち、最も早い時刻を示す時刻情報に対応されている制御信号の送信を制御することを特徴とする。
【0031】
請求項5に記載の情報処理装置は、所定の期間とは、他の情報処理装置により撮影された画像情報(例えば、プレビュ画像)を転送するように要求する転送要求信号が、他の情報処理装置へ送出されてから、次に送出されるまでの期間であり、制御手段は、転送要求信号とともに制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御することを特徴とする。
【0032】
請求項6に記載の情報処理装置は、他の情報処理装置から送信され、送受信手段によって、受信された画像情報を表示する表示手段(例えば、図2の出力部48)を更に備えることを特徴とする。
【0033】
請求項8に記載の情報処理方法および請求項9に記載のプログラムは、ユーザの操作入力が、複数の種別(例えば、録画開始・終了、パンチルトセンタ、ズーム、パン、チルト)のうち、優先種別として設定されている種別の操作入力(例えば、録画開始・終了、パンチルトセンタ)であるか否かを判断する判断ステップ(例えば、図21のステップS59の処理)と、判断ステップの処理により、ユーザの操作入力は、優先種別として設定されている種別の操作入力であると判断された場合、優先種別として設定されている種別の操作入力に対応する制御信号の送信を制御する送信制御ステップ(例えば、図21のステップS60および図20のステップS24の処理)とを含むことを特徴とする。
【0034】
請求項10に記載の情報処理装置(例えば、図1のパーソナルコンピュータ1)は、他の情報処理装置(例えば、図1のデジタルビデオカメラ2)と通信し、情報の送受信を行う送受信手段(例えば、図2の無線通信部50)と、ユーザの操作入力を受ける操作入力手段(例えば、図2の入力部47)と、操作入力手段により入力されたユーザの操作入力を基に、送受信手段による、他の情報処理装置への制御信号の送信を制御する制御手段(例えば、図2のCPU41)とを備え、操作入力手段により入力されたユーザの操作入力は、複数の種別(例えば、録画開始・終了、パンチルトセンタ、ズーム、パン、チルト)に分類され、複数の種別のうち、少なくともひとつの優先種別(例えば、録画開始・終了、パンチルトセンタ)が設定され、制御手段は、前に送信された制御信号が、所定の第1の制御信号(例えば、録画開始・終了を指令するコマンド)である場合、第1の制御信号に基づいて実行される他の情報処理装置の処理を確認するための第2の制御信号(例えば、ステータス要求)の送信を制御し、前に送信された制御信号が第1の制御信号ではなく、所定の期間中に操作入力手段により優先種別の操作入力を含む複数の操作入力を受けた場合、優先種別の操作入力に対応する第3の制御信号の送信を制御することを特徴とする。
【0035】
請求項11に記載の情報処理方法および請求項12に記載のプログラムは、ユーザの操作入力を受ける操作入力ステップ(例えば、図25のステップS115の処理)と、前回送信された制御信号が、所定の第1の制御信号(例えば、録画開始・終了を指令するコマンド)であるか否かを判断する第1の判断ステップ(例えば、図21のステップS57の処理)と、第1の判断ステップの処理により、前回送信された制御信号は、第1の制御信号であると判断された場合、第1の制御信号による他の情報処理装置の処理を確認するための第2の制御信号(例えば、ステータス要求)の送信を制御する第1の送信制御ステップ(例えば、図20のステップS64の処理)と、第1の判断ステップの処理により、前回送信された制御信号は、第1の制御信号ではないと判断された場合、操作入力ステップの処理により入力されたユーザの操作入力は、複数の種別(例えば、録画開始・終了、パンチルトセンタ、ズーム、パン、チルト)のうちの優先種別に対応する操作入力(例えば、録画開始・終了、パンチルトセンタ)であるか否かを判断する第2の判断ステップ(例えば、図21のステップS59の処理)と、第2の判断ステップの処理により、ユーザの操作入力は、優先種別であると判断された場合、優先種別の操作入力に対応する第3の制御信号の送信を制御する送信制御ステップ(例えば、図21のステップS60および図20のステップS24の処理)とを含むことを特徴とする。
【0036】
請求項13に記載の情報処理装置(例えば、図1のパーソナルコンピュータ1)は、他の情報処理装置(例えば、図1のデジタルビデオカメラ2)と通信し、情報の送受信を行う送受信手段(例えば、図2の無線通信部50)と、ユーザの操作入力を受ける操作入力手段(例えば、図2の入力部47)と、操作入力手段により入力されたユーザの操作入力を基に、送受信手段による、他の情報処理装置への制御信号の送信を制御する制御手段(例えば、図2のCPU41)とを備え、操作入力手段により入力されたユーザの操作入力は、複数の種別(例えば、録画開始・終了、パンチルトセンタ、ズーム、パン、チルト)に分類され、複数の種別のうち、少なくともひとつの優先種別(例えば、録画開始・終了、パンチルトセンタ)が設定され、制御手段は、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御するとともに、転送要求信号の送信の所定回数(例えば、5回)のうちの少なくとも1回は、他の情報処理装置の処理を確認するための第1の制御信号(例えば、ステータス要求)の送信を制御し、第1の制御信号の送信が制御されない場合、所定の期間中に操作入力手段により入力された複数の操作入力のうち、優先種別の操作入力に対応する第2の制御信号が優先的に送信されるように、制御信号の送信を制御することを特徴とする。
【0037】
請求項14に記載の情報処理方法および請求項15に記載のプログラムは、ユーザの操作入力を受ける操作入力ステップ(例えば、図25のステップS115の処理)と、他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに、操作入力ステップの処理により入力されたユーザの操作入力に対応する制御信号が他の情報処理装置へ送信されるように、制御信号の送信を制御する送信制御ステップ(例えば、図20のステップS24の処理)とを含み、操作入力ステップの処理により入力されたユーザの操作入力は、複数の種別(例えば、録画開始・終了、パンチルトセンタ、ズーム、パン、チルト)に分類され、複数の種別のうち、少なくともひとつの優先種別(例えば、録画開始・終了、パンチルトセンタ)が設定され、送信制御ステップの処理では、転送要求信号の送信の所定回数(例えば、5回)のうちの少なくとも1回は、他の情報処理装置の処理を確認するための第1の制御信号(例えば、ステータス要求)の送信を制御し、第1の制御信号の送信が制御されない場合、所定の期間中に操作入力ステップの処理により入力された複数の操作入力のうち、優先種別の操作入力に対応する第2の制御信号が優先的に送信されるように、制御信号の送信を制御することを特徴とする。
【0038】
以下、図を参照して、本発明の実施の形態について説明する。
【0039】
図1は、本発明を適用した無線撮影システムの構成を示す図である。
【0040】
本発明の無線撮影システムにおいては、パーソナルコンピュータ1上のソフトウェアプログラムによりデジタルビデオカメラ2を操作することができ、静止画、または、動画を撮影させる際、今現在撮影可能な画像を認識した上で、撮影させ、さらに、撮影した画像を確認することができる。
【0041】
次に、図2を参照して、パーソナルコンピュータ1の構成について説明する。CPU(Central Processing Unit)41は、ROM(Read Only Memory)42、または記憶部49に記憶されているプログラム(通信プログラム49a、画像転送プログラム49b、および、画像操作プログラム49c)にしたがって、各種の処理を実行する。RAM(Random Access Memory)43には、CPU41が実行するプログラムやデータなどが適宜記憶される。VRAM(Video−RAM)44は、デジタルビデオカメラ2から送信されてくる画像を記憶する。CPU41、ROM42、RAM43、および、VRAM44は、バス45により相互に接続されている。
【0042】
CPU41には、また、バス45を介して入出力インタフェース46が接続されている。入出力インタフェース46には、キーボード、マウス、マイクロホンなどよりなる入力部47、ディスプレイ、スピーカなどよりなる出力部47が接続されている。CPU41は、入力部47から入力される指令に対応して各種の処理を実行する。そして、CPU41は、処理の結果得られた画像や音声等を出力部47に出力する。
【0043】
入出力インタフェース46に接続されている記憶部49は、例えばハードディスクなどで構成され、CPU41が実行するプログラムや各種のデータを記憶する。
【0044】
また、記憶部49は、通信プログラム49a、画像転送プログラム49b、および、画像操作プログラム49c等のプログラムを記憶しており、CPU41は、これらのプログラムを読み出して対応する処理を実行する。なお、各種のプログラムについては、図4を参照して後述する。
【0045】
さらに、記憶部49に記憶されるプログラムは、上述のほかのものを含んでいても良いことはもちろんであり、無線通信部50を介して、各種プログラムが取得され、記憶部49に記憶されるようにしてもよい。
【0046】
無線通信部50は、いわゆるブルートゥース(Bluetooth)により、2.45GHz帯の電波を利用し、1Mbpsの速度で他の装置と通信を行うことができる。ブルートゥースは赤外線を利用する通信とは異なり、機器間の距離が10m程度の範囲内であれば障害物があっても利用することができる。また、ブルートゥースは0.5平方インチの小型のトランシーバを利用するため、赤外線通信装置に比べ消費電力が小さく、製造コストも低く抑えられる。本発明では、ブルートゥースにおける拡張Basic Imaging Profile(拡張BIP)(画像送信に関するプロファイルを元にカメラ側を遠隔操作するためのコマンド送信に関する拡張を加えたプロファイル)を使用して、コンピュータと撮影機器との通信を行う。また、この無線通信部50は、無線通信が行えるものであればブルートゥース以外のものであってもよく、例えば、IEEE802.11b規格に準じた無線通信装置であってもよい。
【0047】
入出力インタフェース46に接続されているドライブ51は、磁気ディスク61、光ディスク62、光磁気ディスク63、もしくは、半導体メモリ64などが装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記憶部49に転送され、記憶される。
【0048】
次に、図3を参照して、デジタルビデオカメラ2の構成について説明する。CPU96は、操作部102からの信号入力に基づいて各回路を統括制御する制御部であり、液晶モニタ90における表示の制御、ストロボ発光制御、オートフォーカス(AF)演算、及び自動露出(AE)演算等を行う。
【0049】
操作部102は、指示入力手段を含むブロックである。電源がオンにされると、CPU96は、電源コントロール回路98にコマンドを送り、電池99又はDC電源用端子(図示せず)に接続される外部電源からデジタルビデオカメラ2の各部に電源を供給し、各回路を動作可能にする。電池99は充電式の電池(二次電池)でもよいし、市販の乾電池(一次電池)であってもよい。
【0050】
撮影レンズ81は、1枚又は複数枚のレンズで構成され、単焦点レンズでもよいし、ズームレンズ等の焦点距離可変のものでもよい。撮影レンズ81を通過した光は、絞り82によって光量が調節された後、CCD(Charge Coupled Device)83に入射する。CCD83の受光面には、フォトセンサが平面的に配列されており、CCD83の受光面に結像された被写体像は、各フォトセンサによって入射光量に応じた量の信号電荷に変換される。なお、CCD83は、各フォトセンサの電荷蓄積時間(シャッタスピード)を制御可能な、いわゆる電子シャッタ機能を有している。
【0051】
こうして蓄積された信号電荷は、撮像系コントロール回路92から与えられるパルスに基づいて信号電荷に応じた電圧信号(画像信号)として順次読み出される。
【0052】
CCD83から出力された画像信号は、アナログ信号処理部84に送られる。アナログ信号処理部84は、サンプリングホールド回路、色分離回路、ゲイン調整回路等を含み、このアナログ信号処理部84において、相関二重サンプリング(CDS)処理並びにR,G,Bの各色信号に色分離処理され、各色信号の信号レベルの調整(プリホワイトバランス処理)が行われる。
【0053】
アナログ信号処理部84から出力された信号は、A/D変換器85によりデジタル信号に変換された後、デジタル信号処理部86に供給される。デジタル信号処理部86は、輝度・色差信号生成回路、ガンマ補正回路、シャープネス補正回路、コントラスト補正回路、ホワイトバランス補正回路等を含む画像処理手段であり、CPU96からのコマンドに従って画像信号を処理する。
【0054】
デジタル信号処理部86は、画像データを、輝度信号(Y信号)及び色差信号(Cr,Cb信号)に変換するとともに、ガンマ補正等の所定の処理を施した後、メモリ87に格納する。メモリ87に記憶された画像データは、CPU96の指令に従って読み出され、D/A変換器88によって、アナログ信号に変換されるとともに、NTSC(National Television Standards Committee)方式などの所定の信号形式に変換されて、ビデオ出力端子89及び液晶モニタ90に出力される。また、メモリ87に記憶されている画像は、通常時は、プレビュ画像としてCPU96に読み出される。
【0055】
CCD83から出力される画像信号によってメモリ87の画像データが定期的に書き換えられ、その画像データから生成される映像信号が液晶モニタ90に供給されることにより、CCD83を介して入力する画像がリアルタイムに液晶モニタ90に表示される。撮影者は、液晶モニタ90に映し出される映像、または、光学式のファインダーによって撮影画角を確認することができる。
【0056】
ユーザにより操作部102が操作され、撮影モードが設定されると、撮影開始指示(レリーズON)信号が発せられる。CPU96は、レリーズON信号を検知し、撮像系コントロール回路92にコマンドを送る。撮像系コントロール回路92は、AFモータズームモータ91を介してフォーカス制御を行うとともに、絞り82やCCD83での電荷蓄積時間を制御することにより露出制御を行う。
【0057】
記録用の画像データの取り込みを指示する操作がなされると、記録が開始される。画像データを圧縮記録するモードが選択されている場合、CPU96は、圧縮伸張回路93にコマンドを送る。これにより圧縮伸張回路93は、メモリ87上の画像データをJPEG形式(その他の所定の形式であってもよい)に従って圧縮する。また、圧縮伸張回路93は、プレビュ画像を出力するとき、無線通信部101として使用されているブルートゥースにおけるBIP(Basic Imaging Profile)に定められている160×120のサイズ画像をJPEG形式に圧縮して、CPU96に出力する。また、撮影された静止画は、設定された画像サイズのままJPEG形式に圧縮される。
【0058】
圧縮された画像データは、カードI/F(インタフェース)94を介してメモリカード95に記録される。非圧縮の画像データを記録するモード(非圧縮モード)が選択されている場合には、圧縮伸張回路93による圧縮処理は省略され、非圧縮のまま画像データがメモリカード95に記録される。
【0059】
図3のデジタルビデオカメラ2では、画像データを保存する手段として、例えば半導体メモリであるメモリースティック(商標)などが適用される。記録媒体はこれに限定されず、PCカード、コンパクトフラッシュ(登録商標)、磁気ディスク、光ディスク、光磁気ディスク、スマートメディアなどでもよく、電子的、磁気的、若しくは光学的、又はこれらの組み合わせによる方式に従って読み書き可能な種々の媒体を用いることができる。なお、カードI/F94には、使用される記録媒体に応じた信号処理手段とインタフェースが適用されるとともに、異種、同種の記録媒体を問わず、複数の媒体を装着可能な構成にしてもよい。また、画像ファイルを保存する手段は、カメラ本体に着脱可能な記録媒体に限らず、カメラに内蔵された記録媒体(内部メモリ)であってもよい。
【0060】
なお、CCD83は、記録用の画像データが取り込まれるときと、それ以外の場合では、動作状態が異なる。すなわち、記録用の画像データが取り込まれない場合、CCD83は、記録用の画像データが取り込まれるときよりも低解像度の画像を取得するモードになっており、結果として、画像データの量が抑制されてアナログ信号処理84乃至D/A変換機88間の転送速度が高められることにより、液晶モニタ90に画像が素早く表示される。したがって、この状態でメモリ87に記憶されている画像は低解像度の画像となる。このため、この状態で読み出された画像は、低解像度のプレビュ画像となる。一方、記録用の静止画の画像データが取り込まれる場合、CCD83は解像度を高めて静止画を取得するので、結果として、データ量は大きいが高画質の画像データがメモリ87に記憶されることになる。サムネイル画像生成部103は、CPU96からの指令に基づいて、このようにデータ量の大きい静止画を、サムネイル画像に変換する。なお、サムネイル画像とは、所定の画像が縮小された画像または文字を表示したものである。
【0061】
所定の操作により再生モードが設定されると、メモリカード95から画像データが読み出される。読み出された画像データは、必要に応じて圧縮伸張回路93によって伸張処理され、D/A変換器88を介してビデオ出力端子89、及び液晶モニタ90に出力される。
【0062】
デジタルビデオカメラ2は、ブルートゥースからなる無線通信部101を有し、この無線通信部101を介して画像データ及び各種信号を送受信することができる。EEPROM97には、通信相手となる外部機器を特定するための識別情報(ID)が記憶され、CPU96は、EEPROM97に登録されている識別情報を基に通信対象機器を判別する。また、CPU96は、通信相手の識別情報を利用して伝送用データを暗号化回路88において暗号化した後、これを無線通信部101より送信する。
【0063】
次に、図4の機能ブロック図を参照して、図2,図3のパーソナルコンピュータ1、および、デジタルビデオカメラ2により実現される機能について説明する。
【0064】
なお、図4で示される各プログラムは、専用のハードウェアにより実現するようにしてもよい。従って、図4の機能ブロック図は、ハードウェア構成図とみても、ソフトウェア構成図とみてもよいものである。
【0065】
通信プログラム49aは、無線通信部50を制御して、他の無線通信部を有する機器との通信を制御する。通信プログラム49aは、無線通信部50を制御して、通信可能な電子機器を検索させ、例えば、図5で示すような表示画面を出力部48のディスプレイに表示させ、今現在通信可能な電子機器をユーザに通知する。図5においては、画面121の左側に自らを示す表示欄122が示され、今の場合「My computer PC」と表示されている。画面121の中央部には、プロファイルアイコン123乃至128が表示され、無線通信により送受信可能なブルートゥースのプロファイルが、アイコンとして表示されている。プロファイルは、例えば、送受信可能な画像データや音楽データである。
【0066】
画面121の右側には、通信可能機器の表示欄131乃至135が示されており、その中で通信対象機器となっている機器が、上下方向に対して中央の表示欄133に表示される。今の場合、中央の表示欄133には、「デジタルビデオカメラ」と表示されており、表示欄122に表示されている「My Computer PC」の通信対象機器としてデジタルビデオカメラ2が選択されていることが示されている。
【0067】
複数の機器が通信可能な場合、それらの機器が他の表示欄131乃至135に表示される。今の場合、デジタルビデオカメラの他に、「PDA」、「PC−1」が表示されており、「PDA」、「PC−1」も通信可能な機器として検出されたことが示されている。
【0068】
ボタン129,130は、通信対象となる電子機器を変更するとき操作されるボタンであり、例えば、ボタン129が操作されると表示欄131が表示から消去され、表示欄132乃至135が図中上方向にスライドする。結果として、通信可能機器の中央には、「PC−1」が表示され、通信対象機器として「PC−1」が選択される。また、ボタン130が操作されると、表示欄135が消去され、図中下方向に表示欄131乃至134がスライドする。結果として、通信可能機器の中央には、「PDA」が表示され、通信対象機器として「PDA」が選択される。
【0069】
プロファイルメニューアイコン123乃至128は、それぞれの左右に、通信機器が送受信可能なプロファイルであるか否かを示す括弧が表示される。今の場合、プロファイルメニューアイコン123乃至128の左側には、全て括弧123a乃至128aが表示されており、表示欄122の「My Computer PC」に対応する電子機器がプロファイルメニューアイコンとして表示された全てのプロファイルを送受信することが可能であることが示されている。また、プロファイルメニューアイコン123乃至128のうち、右側には、括弧127b,128bのみが表示されており、通信対象機器として選択されているデジタルビデオカメラは、プロファイルメニューアイコン127,128に対応するプロファイルしか送受信することができないことが示されている。従って、選択する通信対象機器は、所望とするプロファイルメニューアイコンに括弧が無ければ、そのプロファイルを送受信することはできない。
【0070】
このような表示とすることにより、ユーザは、通信対象機器が送受信可能なプロファイルか否かについて、プロファイルメニューアイコンの括弧の表示をみるだけで認識することができる。また、利用したいプロファイルを選択することにより、表示欄122に示されたパーソナルコンピュータ1と、表示欄133に示されたデジタルビデオカメラとが、画面121上で線により結ばれて、画像データに対応する選択されたプロファイルの通信が可能となっていることが示される。
【0071】
また、通信プログラム49aは、無線通信部50を制御して、通信可能な電子機器を検索させた場合、例えば、図6に示されるような表示画面141を、出力部48のディスプレイに表示させることにより、今現在通信可能な電子機器をユーザに通知するようにしてもよい。
【0072】
画面の中央の機器表示エリア151には、自分自身(すなわち、パーソナルコンピュータ1)からブルートゥース通信によって通信可能な範囲に存在する機器が列挙されている。機器表示エリア151に表示されている機器のうち、通信相手として選択された機器(ここでは、デジタルビデオカメラ2)がハイライト表示される。表示画面中央の部分、すなわち、機器表示エリア151の右側のプロファイル表示エリア152には、パーソナルコンピュータ1と、機器表示エリア151に表示されたそれぞれの機器との間で通信が可能なブルートゥースのプロファイルが列挙されている。本発明では、ブルートゥースにおける拡張Basic Imaging Profile(拡張BIP)(画像送信に関するプロファイルを元にカメラ側を遠隔操作するためのコマンド送信に関する拡張を加えたプロファイル)を使用した遠隔撮影処理が可能であることを示すアイコン153が表示されている。
【0073】
また、通信プログラム49aは、パーソナルコンピュータ1とデジタルビデオカメラ2が通信可能な状態にされると、デジタルビデオカメラ2とパーソナルコンピュータ1間で行われる、画像要求や遠隔操作コマンドの送信、または、画像の受信処理などを行う。
【0074】
さらに、通信プログラム49aは、プレビュ画像、サムネイル画像、または、静止画などの画像データがデジタルビデオカメラ2から転送された場合、受信したプレビュ画像、サムネイル画像、または、静止画などの画像データをVRAM44に記憶させる。ただし、高画質の静止画を受信するような場合、画像データは分割されて転送されるため、転送には時間がかかる。そこで、通信プログラム49aは、静止画の受信の進捗状態を示す進捗通知もあわせて画像転送プログラム49bに通知する。
【0075】
画像転送プログラム49bは、通信プログラム49aからの通知、例えば、モニタ変更通知などに基づいて、VRAM44に記憶されている画像を管理し、画像操作プログラム49cから画像が要求された場合、それに対応する画像(プレビュ画像、サムネイル画像、または、静止画)をVRAM44から読み出して画像操作プログラム49cに供給する。また、画像操作プログラム49cから静止画の撮影要求や遠隔操作コマンドを受信すると、その旨を通信プログラム49aに転送する。
【0076】
画像操作プログラム49cは、プレビュ画像、サムネイル画像、または、静止画を画像転送プログラム49bに要求し、要求に基づいて供給された画像を、例えば、図7で示すように表示したり、図7で示される表示画面に対してユーザが実行した操作入力を基に、遠隔操作コマンドを画像転送プログラム49bに供給する。
【0077】
図7においては、表示部218には、静止画、動画、または、定点観測画像(所定の時間内に撮影された複数の静止画の集まり)が表示され、その左側に、静止画モードボタン201、動画モードボタン202、および、定点観測モードボタン203が表示される。また、表示部218の右側には、サムネイル画像リスト217が設けられており、さらに、右側には、上から、モード切替ボタン211、保存ボタン212、メールボタン213、アップロードボタン214、および、ごみ箱ボタン215が設けられている。さらに、定点観測モードボタン203の下側には、デジタルビデオカメラ2に対する操作入力を行うためのコントローラ219が設けられている。
【0078】
静止画モードボタン201は、ユーザが静止画モードを選択するとき操作される。動画モードボタン202は、ユーザが動画モードを選択するとき操作される。定点観測モードボタン203は、ユーザが定点観測モードを選択するとき操作される。
【0079】
サムネイル画像リスト217は、今現在保存されていない状態(ファイルとして保存されていない状態であるが、撮影された画像がVRAM44、または、記憶部49の所定領域に一時的に記憶された状態)の静止画、動画、または、定点観測画像のいずれかを示すサムネイル画像が表示される。このサムネイル画像は、静止画の場合、静止画そのもののサムネイル画像が表示されるが、動画の場合、録画開始時の画像(最初に取り込まれた画像)のサムネイル画像が表示され、また、定点観測画像の場合、定点観測画像として撮影された複数の静止画のうちのいずれかがサムネイル画像として表示されるが、デフォルトとして定点観測が開始されたときに最初に撮影された静止画がサムネイル画像として表示され、それ以降で撮影された静止画と変更することができる。また、この一時的に記憶された状態の画像が、所定数以上、または、記憶されている領域が所定の容量以上となった場合、最も古い画像が削除され、最新の画像が記憶される。
【0080】
また、各サムネイル画像は、ユーザが、いわゆるマウスポインタをはじめとするポインタを、所望とするサムネイル画像の位置に移動させてクリックすることにより、指定(選択)することができ、指定されたサムネイル画像は、画像に縁取りが掛けられた表示となる。図7の場合、サムネイル画像リスト217に表示されたサムネイル画像のうち、図中最も下に位置するサムネイル画像が指定されている。
【0081】
さらに、サムネイル画像リスト217に表示されている画像は、指定された状態で、ダブルクリックされることにより、表示部218における表示が指示され、静止画の場合、選択された静止画が表示部218に表示され、動画、または、定点観測画像の場合、動画として表示部218に表示される(定点観測画像の場合は、静止画が連続的に表示される)。
【0082】
モード切替ボタン211は、サムネイル画像リスト217に表示されているサムネイル画像のうち、指定されているサムネイル画像の再生を指示するとき、操作されるボタンである。
【0083】
保存ボタン212は、サムネイル画像リスト217に表示されたサムネイル画像のうち、指定された画像を保存するとき(ファイルとして保存するとき)、操作されるボタンである。
【0084】
メールボタン213は、サムネイル画像リスト217に表示されたサムネイル画像のうち、指定された画像をメールで送信するとき、操作されるボタンである。
【0085】
アップロードボタン214は、サムネイル画像リスト217に表示されたサムネイル画像のうち、指定された画像を所定のサーバにアップロードするとき、操作されるボタンである。
【0086】
ごみ箱ボタン215は、サムネイル画像リスト217に表示されたサムネイル画像を消去するとき(記憶部48の所定領域に一時的に記憶された画像を消去するとき)、操作されるボタンである。
【0087】
コントローラ219は、デジタルビデオカメラ2に対して、望遠(tele)ズームを指令するための望遠ズームボタン221、広角(wide)ズームを指令するための広角ズームボタン222、撮影画像の方向の変更を指令するパンチルトボタン223、デジタルビデオカメラ2に装着されている記録媒体、または、内部に有する記録媒体への録画を指令する録画ボタン224で構成されている。パンチルトボタン223の中央のボタンは、撮影可能範囲の中央位置に撮影方向を戻すときに操作される(パンチルトセンタ)。また、録画ボタン224は、デジタルビデオカメラ2に装着されている記録媒体、または、内部に有する記録媒体への録画処理の開始および終了のいずれの操作も指令するボタンであるので、デジタルビデオカメラ2による録画処理中は、ユーザに、録画中であることを通知するために、表示画面のいずれかの位置に、例えば、「REC」などの文字を表示させるようにしても良い。
【0088】
静止画モードボタン201が操作されると、図8で示すように、静止画モードボタン201の表示色が変化し、さらに表示部218の下の部分に撮影ボタン231aが表示される。さらに、撮影ボタン231aの右側には、設定ボタン232aなどが表示される。このとき、画像操作プログラム49cは、受信されたプレビュ画像を表示部218に表示させる。撮影ボタン231aは、ユーザが表示部218に表示されているプレビュ画像の撮影を指示するとき操作されるボタンである。設定ボタン232aは、静止画モードにおける各種の設定を行うとき操作されるボタンであり、このボタンが操作されると、静止画モードの設定画面が表示され、各種の設定をすることができる。
【0089】
撮影ボタン231aが操作されると、画像操作プログラム49cは、図9で示すようにサムネイル画像リスト217に、それまで最新の画像であったサムネイル画像217aの下に、今撮影した画像(静止画)に対応する新たなサムネイル画像217bを表示させる。
【0090】
動画モードボタン202が操作されると、図10で示すように、画像操作プログラム49cは、動画モードボタン202の表示色を変化させ、さらに表示部218の下の部分に録画ボタン231bを表示する。さらに、録画ボタン231bの右側には、設定ボタン232bなどが表示される。このとき、画像操作プログラム49cは、受信されたプレビュ画像を表示部218に表示させる。録画ボタン231bは、ユーザが表示部218に表示されているプレビュ画像の録画を指示するとき操作されるボタンである。設定ボタン232bは、動画モードにおける各種の設定を行うとき操作されるボタンであり、このボタンが操作されると、動画モードの設定画面が表示される。
【0091】
この状態で、録画ボタン231bが操作された場合、画像操作プログラム49cは、図11で示すようにサムネイル画像リスト217に、図10で示した、それまで最新の画像であったサムネイル画像217aの下に、今撮影した画像(動画)に対応する新たなサムネイル画像217cを表示させる。このとき、画像操作プログラム49cは、図11で示すように、サムネイル画像217c中に録画中であることを示す録画中マークのみを表示させるとともに、表示部218の下部の表示を、録画ボタン231bから終了ボタン231cに代えて表示させる。
【0092】
この状態で、終了ボタン231cが操作されると、画像操作プログラム49cは、録画を終了させ、図11で示すように、録画中マークのみが表示されていたサムネイル画像217cを、図12で示すように、録画した動画を識別するサムネイル画像217dにして表示する。このとき、サムネイル画像217dには、図12で示すように、サムネイル画像217d中の左上部分に動画であることを示す動画マーク(8ミリ撮影機のようなマーク)を付して、表示する。このように表示することにより、サムネイル画像として管理されている画像が、静止画であるか、または、動画であるかを一目で識別することが可能となる。
【0093】
また、定点観測モードボタン203が操作されると、画像操作プログラム49cは、図13で示すように、定点観測モードボタン203の表示色を変化させ、さらに表示部218の下の部分に開始ボタン231dを表示する。さらに、開始ボタン231dの右側には、設定ボタン232eなどが表示される。このとき、画像操作プログラム49cは、受信されたプレビュ画像を表示部218に表示させる。開始ボタン231dは、ユーザが表示部218に表示されている画像の定点観測を指示するとき操作されるボタンである。設定ボタン232eは、定点観測モードにおける各種の設定を行うとき操作されるボタンであり、このボタンが操作されると、定点観測モードの設定画面が表示される。また、開始ボタン231dの左側には、予約ボタン341が表示される。予約ボタン341は、定点観測による撮影を予め予約設定するとき、ユーザにより操作されるボタンである。
【0094】
この状態で、開始ボタン231dが操作されると、画像操作プログラム49cは、図14で示すようにサムネイル画像リスト217に、図13で示した、それまで最新の画像であったサムネイル画像217aの下に、今撮影した画像(定点観測画像)に対応する新たなサムネイル画像217eを表示させる。このとき、画像操作プログラム49cは、図14で示すように、サムネイル画像217e中に定点観測画像が撮影中であることを示す定点観測中マークのみを表示させるとともに、表示部218の下部の表示を、開始ボタン231eから終了ボタン231fに代えて表示させる。
【0095】
この状態で、終了ボタン231fが操作された場合、画像操作プログラム49cは、定点観測モードの撮影を終了させるとともに、定点観測中マークのみが表示されていたサムネイル画像217eを、図15で示すように、定点観測により撮影された画像を識別するサムネイル画像217fにして表示する。このとき、サムネイル画像217fには、図15で示すように、サムネイル画像217f中の左上部分に定点観測画像であることを示す定点観測マーク(写真機のようなマーク)を付して、表示する。このように表示することにより、サムネイル画像として管理されている画像が、静止画であるか、動画像であるか、または、定点観測画像であるかを一目で識別することが可能となる。
【0096】
また、コントローラ219に対して操作入力がなされた場合、デジタルビデオカメラ2に対して、遠隔操作コマンドが送信され、コマンドに基づいた処理を実行したデジタルビデオカメラ2から送信されるプレビュ画像が、表示部218に表示される。たとえば、ユーザが、マウスカーソル251を移動させて、コントローラ219のパンチルトボタン223のうち、画面上、上方向の矢印を有するボタンを操作して、画像を撮影する位置を上方向に移動(チルト)させるための命令を入力した場合、図16に示されるように、表示部218には、チルト操作に基づいて、撮影方向が変更された撮影画像が表示される。また、例えば、コントローラ219の望遠ズームボタン221が操作された場合、表示部218には、望遠ズーム操作に基づいて撮影された撮影画像が表示され、広角ズームボタン222が操作された場合、表示部218には、広角ズーム操作に基づいて撮影された撮影画像が表示され、録画ボタン224が操作された場合、デジタルビデオカメラ2は、自分自身に装着された記録媒体、または、内部に有する記録媒体への録画操作を開始または終了する。
【0097】
デジタルビデオカメラ2に対するコマンドの送信処理の詳細については後述する。
【0098】
また、ユーザが、マウスカーソル251を移動させて、コントローラ219のパンチルトボタン223を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ2の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、ユーザが操作中のパンチルトボタン223が点滅表示される。ユーザは、パンチルトボタン223が点滅表示されていることを確認することにより、撮影方向を、対応する操作入力方向に、これ以上移動することができないことを認識することが可能となる。
【0099】
また、現在の撮影の方向が撮影可能範囲の限界位置であり、それ以上、撮影位置を変更することができない場合、パンチルトボタン223の表示をネガポジ反転させたり、表示色を変更させることにより、ユーザに、撮影可能範囲の限界位置であることを通知するようにしても良い。
【0100】
更に、例えば、図17に示されるように、マウスカーソルアイコン261を表示させ、ユーザが、パンチルトを操作入力するとき、マウスカーソルアイコン261を、撮影方向を移動したい所望の方向にドラックするようにすることができる。そして、ユーザが、マウスカーソルアイコン261を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ2の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、ユーザが操作中のマウスカーソルアイコン261が点滅表示される。ユーザは、マウスカーソルアイコン261が点滅表示されていることを確認することにより、撮影方向を、対応する操作入力方向に、これ以上移動することができないことを認識することが可能となる。
【0101】
また、現在の撮影の方向が撮影可能範囲の限界位置であり、それ以上、撮影位置を変更することができない場合、マウスカーソルアイコン261の表示色を変更させることにより、ユーザに、撮影可能範囲の限界位置であることを通知するようにしても良い。
【0102】
なお、ユーザが、図16のパンチルトボタン223または図17のマウスカーソルアイコン261を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ2の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、例えば、「これ以上、撮影の方向を変更できません」のメッセージが記載されたメッセージウィンドウを表示させたり、所定の図示しないLEDを点灯または消灯させたり、ブザー音を発生したり、音声メッセージにより通知することなどにより、ユーザに対して、これ以上、撮影の方向を変更できないことを通知するようにしても良い。
【0103】
図4の説明に戻る。
【0104】
デジタルビデオカメラ2は、パーソナルコンピュータ1からの要求に応じて、メモリ87に記憶されたプレビュ画像、サムネイル画像生成部103で生成されたサムネイル画像、または、メモリカード95に記憶された静止画の画像を読み出してパーソナルコンピュータ1に送信する。ただし、静止画の要求の場合、デジタルビデオカメラ2は、画像を撮影し、撮影した画像をサムネイル画像にして送信するとともに、一旦メモリカード95に記憶させてサムネイル画像を送信した後、このメモリカード95に記憶された画像をパーソナルコンピュータ1に送信する。
【0105】
次に、図18のフローチャートを参照して、デジタルビデオカメラ2の撮影処理について説明する。
【0106】
ステップS1において、デジタルビデオカメラ2のCPU96は、無線通信部101を制御して、パーソナルコンピュータ1からプレビュ画像が要求されているか否かを判断する。例えば、後述する図20のステップS23の処理によりプレビュ画像が要求された場合、パーソナルコンピュータ1からプレビュ画像が要求されていると判断されるので、処理は、ステップS2に進む。
【0107】
ステップS2において、CPU96は、メモリ87に記憶されている画像をプレビュ画像として取得し(すなわち、プレビュ画像を撮影し)、無線通信部101を介してパーソナルコンピュータ1に送信する。ステップS2の処理の終了後、処理は、ステップS1に戻り、それ以降の処理が繰り返される。
【0108】
ステップS1において、プレビュ画像が要求されていないと判断された場合、ステップS3において、CPU96は、静止画の撮影が要求されたか否かを判断する。例えば、後述する図20のフローチャートのステップS29の処理により、静止画の撮影が要求された場合、静止画の撮影が要求されたと判断されるので、処理は、ステップS4に進む。
【0109】
ステップS4において、CPU96は、コントロール回路92を制御して、CCD83を高解像度のモードに切り替えさせて、静止画の画像データをメモリ87に記憶させ、撮影する。
【0110】
ステップS5において、CPU96は、サムネイル画像生成部103を制御して、メモリ87に記憶されている静止画をサムネイル画像に変換させ、無線通信部101を制御して、パーソナルコンピュータ1に送信させる。ステップS5の処理の終了後、処理は、ステップS1に戻り、それ以降の処理が繰り返される。
【0111】
ステップS3において、静止画の撮影が要求されていないと判断された場合、ステップS6において、CPU96は、静止画の転送が要求されたか否かを判断する。例えば、後述する図20のステップS32の処理により、静止画の転送が要求された場合、静止画の転送が要求されたと判断されるので、処理は、ステップS7に進む。
【0112】
CPU96は、ステップS7において、圧縮伸張回路93を制御して、メモリ87に記憶されている画像をJPEG方式で圧縮させ、転送可能なサイズに分割し、ステップS8において、無線通信部101を制御して、順次分割した静止画をパーソナルコンピュータ1に送信させる。ステップS8の処理の終了後、処理は、ステップS1に戻り、それ以降の処理が繰り返される。
【0113】
ステップS6において、静止画の転送が要求されていないと判断した場合、ステップS9において、CPU96は、無線通信部101を制御して、パーソナルコンピュータ1から遠隔操作コマンドを受信したか否かを判断する。例えば、後述する図21のステップS60、ステップS61、または、ステップS64の処理により決定された遠隔操作コマンドが送信された場合、パーソナルコンピュータ1から遠隔操作コマンドを受信したと判断されるので、その処理は、ステップS10に進む。
【0114】
ステップS10において、CPU96は、受信した遠隔操作コマンドに対応した操作を実行する。遠隔操作コマンドには、録画のスタートまたはストップ命令、ズーム命令、パン命令、チルト命令、およびステータス要求がある。遠隔操作コマンドに対応する処理が実行されることにより、内部のステータスが書き換えられる。ステータスは、図19に示されるように、録画状態、パン状態、チルト状態、ズーム状態の4つの情報からなり、デジタルビデオカメラ2の現在の状態(録画しているか否か、いずれかの方向にパンを行っているか否か、いずれかの方向にチルトを行っているか否か、および、ズームを行っているか否か)が記載されている。ステップS10の処理の終了後、処理は、ステップS1に戻り、それ以降の処理が繰り返される。
【0115】
ステップS9において、パーソナルコンピュータ1から遠隔操作コマンドを受信していないと判断された場合、処理は、ステップS1に戻り、それ以降の処理が繰り返される。
【0116】
このような処理により、デジタルビデオカメラ2においては、パーソナルコンピュータ1を用いてユーザが入力した操作に基づいた処理を実行することができる。
【0117】
次に、図20のフローチャートを参照して、パーソナルコンピュータ1の通信プログラム49aによる通信処理について説明する。
【0118】
ステップS21において、通信プログラム49aは、プレビュ画像を要求する必要があるか否かを判断する。通信プログラム49aは、所定の時間ごとに、プレビュ画像を要求するようになされているので、前にプレビュ画像を要求してから、所定の時間が経過していない場合、プレビュ画像を要求する必要がないと判断し、その処理は、ステップS25に進む。ステップS21において、プレビュ画像を要求する必要があると判断された場合、ステップS22において、通信プログラム49aは、遠隔操作コマンドレジスタに、保存されているコマンドがあるか否かを判断する。
【0119】
例えば、図21を用いて後述するステップS39の送信コマンド決定処理が実行された場合、遠隔操作コマンドレジスタに保存されているコマンドがあると判断されるので、処理は、ステップS24に進む。ステップS22において、遠隔操作コマンドレジスタに、保存されているコマンドがないと判断された場合、ステップS23において、通信プログラム49aは、無線通信部50を制御して、デジタルビデオカメラ2に対して、プレビュ画像を要求する(転送を要求する)。ステップS23の処理の終了後、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0120】
ステップS22において、遠隔操作コマンドレジスタに、保存されているコマンドがあると判断された場合、ステップS24において、通信プログラム49aは、無線通信部50を制御して、デジタルビデオカメラ2に対して、保存されているコマンドを含む、プレビュ画像要求を送信する。ステップS24の処理の終了後、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0121】
ステップS25において、通信プログラム49aは、無線通信部50を制御して、デジタルビデオカメラ2からステップS23の処理のプレビュ画像の要求に対応したプレビュ画像が送信されてきたか否かを判断し、例えば、図18のステップS2の処理により、プレビュ画像が送信されてきたと判断した場合、その処理は、ステップS26に進む。
【0122】
ステップS26において、通信プログラム49aは、無線通信部50を制御して、送信されてきたプレビュ画像を受信させVRAM44に記憶させる。
【0123】
ステップS27において、通信プログラム49aは、プレビュ画像がVRAM44に格納されたことを示すモニタ変更通知を画像転送プログラム49bに送信するとともに、プレビュ画像とともに、ステータスが送信されてきた場合、そのステータスを画像転送プログラム49bに送信する。例えば、図21を用いて後述するステップS39の送信コマンド決定処理が実行され、デジタルビデオカメラ2にステータスが要求された場合、デジタルビデオカメラ2は、図8のステップS10の処理により、プレビュ画像とともに、ステータスを送信する。ステップS27の処理の終了後、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0124】
ステップS25において、プレビュ画像が送信されてきていないと判断された場合、ステップS28において、通信プログラム49aは、画像転送プログラム49bから静止画の撮影が要求されたか否かを判断する。例えば、後述する図24のフローチャートのステップS88の処理により、画像転送プログラム49bから静止画の撮影が要求された場合、ステップS29において、画像転送プログラム49bは、無線通信部50を制御して、デジタルビデオカメラ2に対して静止画の撮影を要求する。ステップS29の処理の終了後、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0125】
ステップS28において、静止画の撮影が要求されていないと判断された場合、ステップS30において、通信プログラム49aは、無線通信部50を制御して、デジタルビデオカメラ2からサムネイル画像が送信されたか否かを判断する。例えば、図18のフローチャートのステップS5の処理により、デジタルビデオカメラ2からサムネイル画像が送信されてきた場合、サムネイル画像が送信されてきたと判断され、その処理は、ステップS31に進む。
【0126】
ステップS31において、通信プログラム49aは、無線通信部50を制御して、デジタルビデオカメラ2から送信されてきたサムネイル画像を受信させ、VRAM44に記憶させる。
【0127】
ステップS32において、通信プログラム49aは、サムネイル画像がVRAM44に記憶されたことを示すモニタ変更通知を画像転送プログラム49bに送信するとともに、無線通信部50を制御して、デジタルビデオカメラ2に対して静止画を転送するように要求させる。ステップS32の処理の終了後、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0128】
ステップS30において、サムネイル画像が送信されてきていないと判断された場合、ステップS33において、通信プログラム49aは、無線通信部50を制御して、デジタルビデオカメラ2から分割された静止画が送信されてきたか否かを判断する。例えば、図18のフローチャートのステップS8の処理により分割された静止画が順次送信されてきた場合、分割された静止画が送信されてきたと判断し、その処理は、ステップS34に進む。
【0129】
ステップS34において、通信プログラム49aは、無線通信部50を制御して、分割されて送信されてきた静止画を受信させ、順次、VRAM44に記憶させる。ステップS35において、通信プログラム49aは、VRAM44に記憶された静止画の進捗状況を読出し、画像転送プログラム49bに進捗通知を送信する。
【0130】
ステップS36において、通信プログラム49aは、VRAM44を確認し、転送されてきている分割された静止画の全てが記憶されたか否かを判断し、全ての静止画が記憶されていないと判断した場合、その処理は、ステップS34に戻る。すなわち、静止画がデジタルビデオカメラから転送されている間は、ステップS34乃至S36の処理が繰り返される。
【0131】
ステップS36において、全ての静止画がVRAM44に記憶されたと判断された場合、ステップS37において、通信プログラム49aは、静止画の転送が完了したことを示す転送完了の通知を画像転送プログラム49bに送信し、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0132】
ステップS33において、デジタルビデオカメラ2から分割された静止画が送信されていないと判断された場合、ステップS38において、通信プログラム49aは、画像転送プログラム49bから遠隔操作コマンドが供給されたか否かを判断する。例えば、後述する図24のフローチャートのステップS98の処理により、遠隔操作コマンドが送信された場合、遠隔操作コマンドが供給されたと判断し、ステップS39において、図21を用いて後述する送信コマンド決定処理が実行されて、処理は、ステップS21に戻り、それ以降の処理が繰り返される。ステップS38において、画像転送プログラム49bから遠隔操作コマンドが供給されていないと判断された場合、処理は、ステップS21に戻り、それ以降の処理が繰り返される。
【0133】
次に、図21のフローチャートを参照して、図20のステップS49において実行される、送信コマンド決定処理について説明する。
【0134】
ステップS51において、通信プログラム49aは、画像転送プログラム49bから供給されたコマンドは、パン、チルト、ズームのうちのいずれかであるか、または、その他のコマンド(パンチルトセンタ、または、録画開始・終了のいずれか)であるかを判断する。
【0135】
ここで、供給されるコマンドについて、図22を用いて説明する。
【0136】
画像転送プログラム49bから供給されるコマンドは、録画開始・終了、パンチルトセンタ、ズーム操作、パン操作、および、チルト操作の、5つの種別に分類される。それぞれのコマンドはコマンドIDを有し、録画開始・終了コマンド(Rec Start/Stop)(0x10)、および、パンチルトセンタ(Pan/Tilt Center)(0xB0)は、種別に1つのみのコマンドである。ズーム操作には、望遠ズームコマンド(Zoom_tele)1乃至7、ズームストップコマンド(zoom_stop)、および、広角ズームコマンド(Zoom_wide)1乃至7(0x81乃至0x8F)の15のコマンドがある。パン操作には、左方向パン(Pan_left)1乃至7、パンストップ(Pan_stop)、および、右方向パン(Pan_right)(0x91乃至0x9F)の15のコマンドがある。チルト操作には、左方向チルト(Tilt_left)1乃至7、チルトストップ(Tilt_stop)、および、右方向チルト(Tilt_right)(0xA1乃至0xAF) の15のコマンドがある。なお、コマンド中の数字はスピードを表し、数字が大きいほうが速い。
【0137】
さらに、デジタルビデオカメラに送信するコマンドとして、現在のカメラステータス(図19を用いて説明したステータス)を返してもらうように要求するステータス要求(Status_request)(0x02)がある。
【0138】
これらのコマンドは、プレビュー画像要求(Get_Monitoringimage)(0x00)の送信時に、いずれか1つだけ付加されて送信される。すなわち、1フレームのプレビュ画像が変わるたびに、1つのコマンドがデジタルカメラ2に送信される。
【0139】
それぞれのコマンドについて説明する。録画開始・終了コマンドは、録画の開始、終了操作を行うが、この命令は開始と終了で1つずつあるわけではなく、開始と終了のセットで1つである。すなわち、この命令は、いわゆるトグル状態になっていて、デジタルビデオカメラ2が録画状態でないときにこの命令を受けた場合、デジタルビデオカメラ2は録画を開始して録画状態となり、デジタルビデオカメラ2が録画状態のときにこの命令を受けた場合、デジタルビデオカメラ2は録画を停止する。ズーム操作、パン操作、チルト操作は、一度命令すると、それぞれ、ズームストップ、パンストップ、または、チルトストップ、または、パンチルトセンタが指令されるまで、その操作を継続することを指令するコマンドである。したがって、撮影方向を斜めに移動させたい場合においては、パンとチルトを順次命令すれば、それぞれ対応するストップ命令が発生されるまで、撮影方向は、斜め方向に移動される。パンチルトセンタコマンドは、撮影位置を撮影可能範囲の中央に戻すためのコマンドである。
【0140】
ステップS51において、画像転送プログラム49bから供給されたコマンドは、パン、チルト、ズームのうちのいずれかであると判断された場合、ステップS52において、通信プログラム49aは、画像転送プログラム49bから供給されたコマンドを、所定の規則に基づいて保存することにより、送信コマンドを決定するために用いられるコマンド履歴テーブルに、ステップS51において供給されたコマンドと同一種別のコマンドがすでに記載されているか否かを判断する。
【0141】
図23に、コマンド履歴テーブルを示す。コマンド履歴テーブルには、パン、チルト、ズームの種別ごとに、コマンド名と時刻を記載する欄が設けられ、それぞれの種別において、初めてコマンドが供給された場合、そのコマンド名と時刻が記載され、すでに記載のある種別の新たなコマンドが供給された場合、最も新しく供給されたコマンド名が記載(上書き)されるが、その時刻は上書きされない。すなわち、図23に示されるように、コマンド履歴テーブルのパンおよびズームの欄において、最も最近供給されたコマンド名と、最も早く供給されたコマンドの供給時刻が記載されている状態で、チルトの種別のコマンドが供給された場合、そのコマンド名と供給時刻が記載され、パンまたはズームの種別のコマンドが供給された場合、コマンド名のみが上書きされる。
【0142】
すなわち、ステップS52において、コマンド履歴テーブルに、同一種別のコマンドがすでに記載されていると判断された場合、ステップS53において、通信プログラム49aは、受け取ったコマンドを、コマンド履歴テーブルの同一種別のコマンドの記載に上書きする(時刻情報は更新しない)。
【0143】
そして、ステップS52において、コマンド履歴テーブルに、同一種別のコマンドが記載されていないと判断された場合、ステップS54において、通信プログラム49aは、受け取ったコマンドを、受け取った時刻とともに、コマンド履歴テーブルの対応する個所に記載する。
【0144】
ステップS51において、画像転送プログラム49bから供給されたコマンドは、パン、チルト、ズームのうちのいずれかではない、すなわち、パンチルトセンタまたは録画開始・終了のコマンドを受け取ったと判断された場合、ステップS55において、通信プログラム49aは、内部に有するパンチルトセンタコマンドを受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグをアクティブにする。
【0145】
ステップS53、ステップS54、または、ステップS55の処理の終了後、ステップS56において、通信プログラム49aは、プレビュ画像の要求タイミングであるか否かを判断する。
【0146】
拡張BIPにおいては、前述のプレビュ画像を取得するための要求信号に1つの遠隔操作コマンドを付け加えることができる仕様となっている。ここでプレビュ画像のやりとりは、ブルートゥースの通信状態によって、タイミングは一定ではない。また、遠隔操作コマンドも、ユーザ操作によって発生するため、コマンドの発生タイミングも一定ではない。すなわち、プレビュ画像の要求を送信するときに、2つ以上の遠隔操作コマンドが存在することもあれば、1つも存在しないこともある。したがって、ステップS56において、プレビュ画像の要求タイミングではないと判断された場合、処理は、図20のステップS21に進む。
【0147】
ステップS56において、プレビュ画像の要求タイミングであると判断された場合、ステップS57において、通信プログラム49aは、前回送信されたコマンドは、録画開始・終了のコマンドであるか否かを判断する。ステップS57において、前回送信されたコマンドは、録画開始・終了のコマンドであると判断された場合、処理は、後述するステップS64に進む。
【0148】
ステップS57において、前回送信されたコマンドは、録画開始・終了のコマンドではないと判断された場合、ステップS58において、通信プログラム49aは、コマンド送信回数をカウントする内部のカウンタの値が5以上であるか否かを判断する。ステップS58において、カウンタの値が5以上であると判断された場合、処理は、後述するステップS64に進む。
【0149】
ステップS58において、カウンタの値が5以上ではないと判断された場合、ステップS59において、通信プログラム49aは、パンチルトセンタコマンド受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグがアクティブであるか否かを判断する。
【0150】
ステップS59において、パンチルトセンタコマンド受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグがアクティブであると判断された場合、ステップS60において、通信プログラム49aは、パンチルトセンタコマンド、または、録画開始・終了のコマンドのうち、フラグがアクティブであるコマンドを送信し、対応するフラグをインアクティブにする。なお、パンチルトセンタコマンド、または、録画開始・終了のコマンドには、予め優先順位が定められ、両方のフラグがアクティブ状態である場合、いずれか一方のコマンドが送信される。
【0151】
ステップS59において、パンチルトセンタコマンド受け取ったことを示すフラグ、または、録画開始・終了のコマンドを受け取ったことを示すフラグがアクティブではないと判断された場合、ステップS61において、通信プログラム49aは、図23を用いて説明したコマンド履歴テーブルを参照し、時刻の一番古い種別の欄に記載されているコマンドを送信する。
【0152】
ステップS62において、通信プログラム49aは、送信されたコマンドを、対応するコマンド種別の時刻情報とともに、コマンド履歴テーブルから削除する。
【0153】
ステップS60、または、ステップS62の処理の終了後、ステップS63において、通信プログラム49aは、コマンド送信回数をカウントする内部のカウンタカウンタに1を加え、処理は、図20のステップS21に進む。
【0154】
ステップS57において、前回送信されたコマンドは、録画開始・終了のコマンドであると判断された場合、または、ステップS58において、カウンタの値が5以上であると判断された場合、ステップS64において、通信プログラム49aは、ステータス要求を送信し、カウンタを0として、処理は、図20のステップS21に進む。
【0155】
すなわち、録画開始または終了のコマンドが送信された次のタイミング、または、プレビュ画像要求のうちの少なくとも5回に1回は、ステータスが要求されるものである。
【0156】
図21を用いて説明した処理において、コマンドの供給時刻が最も古い種別のコマンドから送信されるようになされているのは、各種別のコマンドが平等に実行されるようにするためである。例えば、常に、最も新しく供給されたコマンド種別のコマンドが実行されるLIFO(Last In First Out)アルゴリズムが用いられた場合、新しいコマンドの到着タイミングによっては、以下の様な不具合が発生する。
【0157】
例えば、右方向チルトコマンドと、広角ズームコマンドが供給され、その後、左方向チルトコマンドが供給され、プレビュ画像の要求タイミングとなった場合、左方向チルトコマンドが送信され、コマンド履歴テーブルには、広角ズームコマンドが残る。そして、その後、複数のコマンドが供給されても、プレビュ画像の要求タイミングの直前にチルトに関するコマンドが供給された場合、ユーザが、何度かズームを指令しているのにもかかわらず、ズーム系のコマンドが、まったく送信されなくなってしまう。
【0158】
このような不具合を防止するために、コマンドの供給時刻が最も古い種別のコマンドから送信されるようになされているので、各種別のコマンドが平等に実行される。
【0159】
そして、同一種別のコマンドのうち、最新のコマンドが送信されるのは、ユーザが指令した最新のコマンドを反映させるためである。通信プログラム49aが、例えば、1秒間に3回程度、デジタルビデオカメラ2にプレビュ画像の要求を行うようになされている場合、FIFO(First In First Out)のアルゴリズムで、全てのコマンドを順次デジタルビデオカメラ2に送信するようにした場合、ユーザが操作したコマンドが実行されるまでに、時間遅れが生じてしまう。したがって、送信待ちのコマンドを全て残すのではなく、送信された種別のコマンドを、履歴から消去するようになされている。
【0160】
さらに、遠隔操作コマンド送信までの期間中に、例えば、右方向パンコマンドの後に、パンストップのコマンドが供給された場合、これら2つのコマンドを相殺して、結局何も行われなかったものとして、コマンドを一切送らないという方法も考えられる。しかしながら、コマンドの相殺を行うためには、コマンド発生のルールとして、相反するコマンドは、必ず連続して行われるというルールが必要である。すなわち、「望遠ズーム」「望遠ズーム」「ズームストップ」の順にコマンドが供給されて、「望遠ズーム」「ズームストップ」を相殺してしまっては、ユーザの最新の操作である「ズームストップ」が実行されず、「望遠ズーム」が実行されてしまうので、「望遠ズーム」の次に、ズーム実行のためのコマンドが供給されるよりも先に、必ず「ズームストップ」が供給されるのでなければ、コマンドの相殺によって、ユーザの意図が反映されないという状況を生じてしまう。
【0161】
したがって、本発明においては、ユーザの操作入力に制限を設けることを避けるため、コマンドの相殺を行わないものとする。
【0162】
このようにすることにより、簡単な処理方法で、送信待ちコマンドを記憶する領域が少なくてすみ、パン、チルト、ズームのコマンド種別間で、平等にコマンド送信が行われ、さらに、大量のコマンドが発生した場合においても、コマンド実行までの時間遅れがある一定以上にはならない。
【0163】
次に、図24のフローチャートを参照して、画像転送プログラム49bによる画像の転送処理について説明する。
【0164】
ステップS81において、画像転送プログラム49bは、モニタ変更通知を受信したか否かを判断する。例えば、図20のステップS27、または、ステップS32の処理により通信プログラム49aよりモニタ変更通知が送信されてきた場合、画像転送プログラム49bは、モニタ変更通知を受信したと判断し、その処理は、ステップS82に進む。
【0165】
ステップS82において、画像転送プログラム49bは、VRAM44に記憶されているプレビュ画像、または、サムネイル画像を読み出すとともに、同時に送信されたステータスがあった場合、そのステータスを保存する。ステップS82の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0166】
ステップS81において、モニタ変更通知を受信していないと判断された場合、ステップS83において、画像転送プログラム49bは、画像操作プログラム49cからステータスの要求があったか否かを判断する。ステップS83において、ステータスの要求があったと判断された場合、ステップS84において、画像転送プログラム49bは、ステップS82において保存されたステータスを、画像操作プログラム49cに通知する。ステップS84の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0167】
ステップS83において、ステータスの要求がなかったと判断された場合、ステップS85において、画像転送プログラム49bは、画像操作プログラム49cからプレビュ画像、または、サムネイル画像の要求があったか否かを判断する。例えば、後述する、図25のフローチャートのステップS112、または、S120の処理により、プレビュ画像、または、サムネイル画像の要求がなされた場合、プレビュ画像、または、サムネイル画像の要求があったと判断され、その処理は、ステップS86に進む。
【0168】
ステップS86において、画像転送プログラム49bは、読み出したプレビュ画像、または、サムネイル画像を、画像操作プログラム49cに送信する。ステップS86の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0169】
ステップS85において、サムネイル画像、または、プレビュ画像の要求がないと判断された場合、ステップS87において、画像転送プログラム49bは、画像操作プログラム49cから静止画の撮影が要求されたか否かを判断する。例えば、後述する、図25のステップS118の処理により静止画の撮影要求が送信されてきた場合、静止画の撮影要求が受信されたと判断し、その処理は、ステップS88に進む。
【0170】
ステップS88において、画像転送プログラム49bは、静止画の撮影要求を通信プログラム49aに送信する。ステップS88の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0171】
ステップS87において、静止画の撮影が要求されていないと判断された場合、ステップS89において、画像転送プログラム49bは、進捗通知が通信プログラム49aから送信されてきたか否かを判断する。例えば、図20のフローチャートのステップS35の処理により、進捗通知が送信されてきた場合、進捗通知が送信されてきたと判断され、ステップS90において、画像転送プログラム49bは、送信されてきた進捗通知を受信して、記憶する。ステップS90の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0172】
ステップS89において、進捗通知が送信されてきていないと判断された場合、ステップS91において、画像転送プログラム49bは、画像操作プログラム49cから進捗通知が要求されたか否かを判断する。例えば、後述する、図25のフローチャートにおけるステップS122の処理により進捗通知が要求された場合、進捗通知が要求されたと判断され、ステップS92において、画像転送プログラム49bは、ステップS90の処理で受信した進捗通知を、画像操作プログラム49cに送信する。ステップ92の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0173】
ステップS91において、進捗通知が要求されていないと判断された場合、ステップS93において、画像転送プログラム49bは、静止画のVRAM44への転送が完了したことを示す完了通知が通信プログラム49aから送信されてきたか否かを判断する。例えば、図20のフローチャートにおけるステップS37の処理により通信プログラム49aから完了通知が送信されてきた場合、完了通知が送信されてきたと判断され、その処理は、ステップS94に進む。
【0174】
ステップS94において、画像転送プログラム49bは、通信プログラム49aから送信されてきた完了通知を受信し、さらに、画像操作プログラム49cに通知(送信)する。ステップS94の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0175】
ステップS93において、完了通知が送信されてきていないと判断された場合、ステップS95において、画像転送プログラム49bは、画像操作プログラム49cより静止画が要求されているか否かを判断する。例えば、後述する、図25のステップS125の処理により、画像操作プログラム49cより静止画の要求が送信されてきた場合、静止画の要求があったと判断し、ステップS96において、画像転送プログラム49bは、VRAM44より静止画を読出し、画像操作プログラム49cに送信する。ステップ96の処理の終了後、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0176】
ステップS95において、静止画が要求されていないと判断された場合、ステップS97において、画像転送プログラム49bは、画像操作プログラム49cより遠隔操作コマンドが供給されたか否かを判断する。例えば、図25のステップS115の処理において、デジタルビデオカメラに対する操作が入力されたと判断され、図27を用いて後述するコマンド供給およびステータス確認処理が実行された場合、遠隔操作コマンドが供給されたと判断されるので、ステップS98において、画像転送プログラム49bは、通信プログラム49aに、遠隔操作コマンドを送信し、処理は、ステップS81に戻り、それ以降の処理が繰り返される。ステップS97において、遠隔操作コマンドが供給されなかったと判断された場合も、処理は、ステップS81に戻り、それ以降の処理が繰り返される。
【0177】
次に、図25のフローチャートを参照して、画像操作プログラム49cによる操作処理について説明する。
【0178】
ステップS111において、画像操作プログラム49aは、所定の時間が経過したか否かを判断し、所定の時間が経過していると判断した場合、その処理は、ステップS112に進む。
【0179】
ステップS112において、画像操作プログラム49cは、プレビュ画像を画像転送プログラム49bに対して要求する。この処理により、図24のフローチャートにおけるステップS86の処理が実行されて、画像転送プログラム49bからプレビュ画像が送信される。そこで、画像操作プログラム49cは、ステップS113において、送信されてきたプレビュ画像を受信し、ステップS114において、例えば、図8で示す表示部218にプレビュ画像を表示し、その処理は、ステップS127に進む。
【0180】
ステップS111において、所定時間が経過していないと判断された場合、ステップS115において、画像操作プログラム49cは、例えば、図8のコントローラ219に対して入力される、パン、チルト、ズーム、録画開始・終了、パンチルトセンタなど、デジタルビデオカメラ2に対する操作入力が実行されたか否かを判断する。
【0181】
ステップS115において、デジタルビデオカメラ2に対する操作入力が実行されたと判断された場合、ステップS116において、図27を用いて後述するコマンド供給およびステータス確認処理が実行される。
【0182】
ステップS115において、デジタルビデオカメラ2に対する操作入力が実行されなかったと判断された場合、または、ステップS116の処理の終了後、ステップS117において、画像操作プログラム49cは、静止画の撮影が要求されたか否かを判断する。例えば、図8で示したように静止画モードの表示画面が表示されていた場合、撮影ボタン231aが操作されるとき、画像操作プログラム49cは、静止画の撮影が要求されたと判断し、その処理は、ステップS118に進む。
【0183】
ステップS118において、画像操作プログラム49cは、静止画の撮影要求を画像転送プログラム49bに送信する。
【0184】
ステップS119において、画像操作プログラム49cは、所定の時間が経過したか否かを判断し、所定の時間が経過するまで、その処理を繰り返す。ステップS119において、所定の時間が経過したと判断された場合、ステップS120において、画像操作プログラム49cは、画像転送プログラム49bに、サムネイル画像、または、プレビュ画像を要求(プレビュ画像要求を発行)する。
【0185】
この要求に基づいて、例えば、図24のフローチャートにおけるステップS86の処理によりサムネイル画像、または、プレビュ画像が送信されてくる。
【0186】
すると、ステップS121において、画像操作プログラム49cは、画像転送プログラムから送信されてくるプレビュ画像、または、サムネイル画像を受信し(取得し)、表示する。より正確には、基本的には、プレビュ画像が送信されてくるが、ステップS82の処理でサムネイル画像が受信されている場合のみ、サムネイル画像を受信し、例えば、図9で示すように、サムネイル画像217bのように表示し、それ以外の場合、図9の表示部218で示すように、プレビュ画像を受信して表示する。
【0187】
ステップS122において、画像操作プログラム49cは、画像転送プログラム49bに進捗通知を要求する。この処理により、例えば、図24のフローチャートのステップS92により進捗通知が送信されてくる。すると、ステップS123において、画像操作プログラム49cは、受信した進捗通知に基づいて、静止画の転送における進捗状態を表示する。すなわち、画像操作プログラム49cは、静止画の転送における進捗状態をユーザに通知するために、例えば、図26で示すように、転送状態をしめすプログレスバー311を表示する。このプログレスバー311は、進捗状況を図中の白マスで示し、全体の進捗状態が0%であれば、白マスのない状態を表示し、進捗状態が50%であれば、プログレスバー311の左から中央部まで白マスを表示し、さらに100%の場合は、プログレスバーの全範囲を白マスで表示する。
【0188】
ステップS124において、画像操作プログラム49cは、画像転送プログラム49bから完了通知を受信したか否かを判断し、受信しなかったと判断された場合、その処理は、ステップS119に戻る。すなわち、完了通知が受信されるまでステップS119乃至S124の処理が繰り返される。
【0189】
例えば、図24のフローチャートにおけるステップS94の処理により完了通知が送信されてきた場合、ステップS124において、完了通知を受信したと判断されるので、ステップS125において、画像操作プログラム49cは、画像転送プログラム49bに静止画像を要求する。すると、図24のフローチャートにけるステップS96の処理により静止画が送信されてくることになる。そこで、ステップS126において、画像操作プログラム49cは、画像転送プログラム49bにより送信されてきた静止画を受信し、例えば、図9の表示部218に表示し、その処理は、ステップS127に進む。
【0190】
ステップS117において、静止画の撮影が要求されなかったと判断された場合、または、ステップS126の処理の終了後、ステップS127において、画像操作プログラム49cは、動画の録画が要求されたか否かを判断する。例えば、図10で示した録画ボタン231bが操作されると、画像操作プログラム49cは、動画の録画が要求されたと判断し、その処理は、ステップS128に進む。
【0191】
ステップS128において、画像操作プログラム49cは、ステップS113の処理で受信された今現在のプレビュ画像を録画する。
【0192】
ステップS129において、画像操作プログラム49cは、終了が要求されているか否かを判断する。例えば、録画が継続されており、終了ではないと判断された場合、ステップS130において、画像操作プログラム49cは、所定の時間が経過したか否かを判断し、所定の時間が経過するまで、その処理を繰り返し、所定の時間が経過したと判断した場合、その処理は、ステップS131に進む。
【0193】
ステップS131において、画像操作プログラム49cは、プレビュ画像を画像転送プログラム49bに対して要求する(要求を発行する)。この処理により、図24のフローチャートにおけるステップS86の処理によりプレビュ画像が送信されてくる。そこで、ステップS132において、画像操作プログラム49cは、送信されてきたプレビュ画像を受信し、その処理は、ステップS128に戻る。このとき、画像操作プログラム49cは、ステップS128において、新たに受信されたプレビュ画像を録画する(取得して録画する)。そして、ステップS129において、終了が指示されたと判断されるまで、ステップS128乃至S132の処理が繰り返されて録画が実行される。
【0194】
そして、ステップS129において、例えば、図11で示す終了ボタン231cが操作されて終了が指示されたと判断された場合、または、ステップS127において、録画が指示されていないと判断された場合、その処理は、ステップS111に戻り、それ以降の処理が繰り返される。
【0195】
次に、図27のフローチャートを参照して、図25のステップS116において実行される、コマンド供給およびステータス確認処理について説明する。
【0196】
ステップS151において、画像操作プログラム49cは、コントローラ219に対して実行されたユーザの操作入力に基づいたコマンドを、画像転送プログラム49bに供給する。
【0197】
ステップS152において、画像操作プログラム49cは、コントローラ219に対して実行されたユーザの操作入力は、パン、または、チルトであるか否かを判断する。ステップS152において、ユーザの操作入力は、パン、または、チルトのいずれでもないと判断された場合、処理は、図25のステップS117に進む。
【0198】
ステップS152において、ユーザの操作入力は、パン、または、チルトのいずれかであると判断された場合、画像操作プログラム49cは、ステップS153において、内部に有するタイマのカウントを開始し、ステップS154において、所定の時間が経過したか否かを判断する。ステップS154において、所定の時間が経過していないと判断された場合、所定の時間が経過したと判断されるまで、ステップS154の処理が繰り返される。
【0199】
ステップS154において、所定の時間が経過したと判断された場合、ステップS155において、画像操作プログラム49cは、画像転送プログラム49bが保持しているステータスを取得する。
【0200】
取得されたステータスについて、図28を用いて説明する。
【0201】
ステータスには、図19を用いて説明したように、録画状態、パン状態、チルト状態、および、ズーム状態の4つの状態が記されている。そして、パン状態ステータスは、図28Aに示されるように、コード0X00で、パンがストップしている状態(Pan stop)を示し、コード0X01で、左方向にパンされている状態(Pan Left)を示し、コード0X02で、右方向にパンされている状態(Pan Right)を示す。そして、チルト状態ステータスは、図28Bに示されるように、コード0X00で、チルトがストップしている状態(Tilt stop)を示し、コード0X01で、上方向にチルトされている状態(Tilt Up)を示し、コード0X02で、下方向にチルトされている状態(Tilt Down)を示す。
【0202】
ステップS156において、画像操作プログラム49cは、取得されたステータスを参照して、ユーザの操作入力を受けている方向に画面が移動されているか否かを判断する。すなわち、右方向のパンが指令されている状態において取得されたステータスが、コード0X02で、右方向にパンされている状態(Pan Right)を示していた場合、ユーザの操作入力を受けている方向に画面が移動されていると判断されるので、処理は、図25のステップS117に進む。
【0203】
一方、右方向のパンが指令されている状態において取得されたステータスが、コード0X00で、パンがストップしている状態(Pan stop)を示していた場合、左方向のパンが指令されている状態において取得されたステータスが、コード0X00で、パンがストップしている状態(Pan stop)を示していた場合、上方向のチルトが指令されている状態において取得されたステータスが、コード0X00で、チルトがストップしている状態(Tilt stop)を示していた場合、または、下方向のチルトが指令されている状態において取得されたステータスが、コード0X00で、チルトがストップしている状態(Tilt stop)を示していた場合、ユーザの操作入力を受けている方向に画面が移動されていない、すなわち、撮影位置が、撮影可能な所定の範囲の端部であることが検出されるので、ステップS157において、画像操作プログラム49cは、撮影可能範囲の端であることをユーザに通知するための表示処理を実行して、処理は、図25のステップS117に進む。
【0204】
具体的には、画像操作プログラム49cは、デジタルビデオカメラ2の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、図16を用いて説明したように、ユーザが操作中のパンチルトボタン223を点滅表示させたり、パンチルトボタン223の表示をネガポジ反転させたり、表示色を変更させるようにするか、図17を用いて説明したように、ユーザが操作中のマウスカーソルアイコン261を点滅表示させたり、マウスカーソルアイコン261の表示色を変更させる。ユーザは、これらの表示を確認することにより、撮影方向を、対応する操作入力方向に、これ以上移動することができないことを認識することが可能となる。
【0205】
なお、ユーザが、図16のパンチルトボタン223または図17のマウスカーソルアイコン261を操作して、撮影方向を変更させるための操作を入力している状態において、デジタルビデオカメラ2の撮影方向が、撮影可能範囲の限界位置となり、それ以上、撮影方向を変更することができない場合、例えば、「これ以上、撮影の方向を変更できません」のメッセージが記載されたメッセージウィンドウを表示させたり、所定の図示しないLEDを点灯または消灯させたり、ブザー音を発生したり、音声メッセージにより通知することなどにより、ユーザに対して、これ以上、撮影の方向を変更できないことを通知するようにしても良い。
【0206】
次に、図29のタイミングチャートを参照して、プレビュ画像を表示する処理についてデジタルビデオカメラ2、通信プログラム49a、画像転送プログラム49b、および、画像操作プログラム49cのそれぞれの処理の関係を説明する。なお、各処理は、図18乃至図27のフローチャートで説明しているので、相互の関係のみを説明する。
【0207】
まず、通信プログラム49aが、ステップS23の処理によりプレビュ画像を要求する。この要求に応じて、デジタルビデオカメラ2が、ステップS2の処理により、メモリ87に記憶されているプレビュ画像を取得して、通信プログラム49aに送信する。
【0208】
ステップS25において、通信プログラム49aが、送信されてきたプレビュ画像を受信させてVRAM44に記憶させ、ステップS27において、モニタ変更通知を画像転送プログラム49bに送信する。
【0209】
通信プログラム49aから送信されてくるモニタ変更通知により、ステップS82において、画像転送プログラム49bは、プレビュ画像をVRAM44から読み出して取得する。
【0210】
画像操作プログラム49cは、ステップS111乃至S114の処理が、所定の時間間隔で繰り返されているので、所定の時間間隔でステップS112の処理によりプレビュ画像が画像転送プログラム49bに要求される。
【0211】
この要求に基づいて、画像転送プログラム49bは、ステップS86において、ステップS82の処理で取得したプレビュ画像を画像操作プログラム49cに送信する。
【0212】
画像操作プログラム49cは、ステップS113において、プレビュ画像を受信し、ステップS114において、受信したプレビュ画像を表示する。
【0213】
再び、通信プログラム49aが、ステップS23の処理によりプレビュ画像を要求すると、以上の処理が繰り返されることになり、プレビュ画像が表示部218に表示され続けることになる。
【0214】
以上の処理により、遠隔地に設置されているデジタルビデオカメラ2において、何を写しているのかをパーソナルコンピュータ1上でリアルタイムで確認することが可能となる。
【0215】
次に、図30のタイミングチャートを参照して、静止画の撮影を要求し、撮影された静止画を表示する処理についてデジタルビデオカメラ2、通信プログラム49a、画像転送プログラム49b、および、画像操作プログラム49cのそれぞれの処理の関係を説明する。なお、各処理は、図18乃至図27のフローチャートで説明しているので、相互の関係のみを説明する。
【0216】
ステップS118において、画像操作プログラム49cが、画像転送プログラム49bに向けて静止画の撮影を要求する。これを受けて、ステップS88において、画像転送プログラム49bが、通信プログラム49aに対して、静止画の撮影を要求する。さらに、この要求に応じて、ステップS29において、通信プログラム49aが、デジタルビデオカメラ2に対して静止画の撮影を要求する。
【0217】
デジタルビデオカメラ2は、ステップS4において、この静止画の撮影要求に応じて静止画を撮影し、ステップS5において、サムネイル画像に変換して、パーソナルコンピュータ1(通信プログラム49a)に向けて送信する。通信プログラム49aは、ステップS31において、この送信されてきたサムネイル画像を受信しVRAM44に記憶させ、ステップS32において、サムネイル画像がVRAM44に記憶されたことを示すモニタ変更通知を画像転送プログラム49bに送信するとともに、デジタルビデオカメラ2に対して静止画を転送するように要求する。
【0218】
ここで、デジタルビデオカメラ2は、静止画の転送要求を受けて、ステップS7において、静止画の画像データを分割し、ステップS8において、順次分割された静止画の画像データをパーソナルコンピュータ1(通信プログラム49a)に向けて送信する。
【0219】
通信プログラム49aは、ステップS34において、送信されてくる分割された静止画の画像データをVRAM44に順次記憶させていき、ステップS35において、進捗通知を画像転送プログラム49bに送信する。なお、この処理は、ステップS36において、分割された全ての静止画がVRAM44に記憶されたと判断されるまで、ステップS34乃至S36の処理が繰り返される(すなわち、図30には図示しないが、ステップS34,S35の処理は、繰り返されることがある)。
【0220】
このとき、画像転送プログラム49bは、ステップS90において、通信プログラム49aからステップS35の処理により送信されてくる進捗通知を受信する。
【0221】
そして、分割された静止画の全てが、VRAM44に転送された場合、ステップS37において、通信プログラム49aは、画像転送プログラム49bに静止画をVRAM44に転送したことを示す転送完了通知を画像転送プログラム49bに送信する。
【0222】
一方、ステップS32の処理により、通信プログラム49aから送信されたサムネイル画像がVRAM44に記憶されていることを示すモニタ変更通知により、画像転送プログラム49bは、ステップS82において、VRAM44に記憶されているサムネイル画像を取得する。
【0223】
このとき、画像操作プログラム49cは、画像転送プログラム49bから転送完了通知が送信されるまで、ステップS119乃至S124の処理を所定の時間間隔で繰り返している。そこで、ステップS120において、画像操作プログラム49cは、プレビュ画像、または、サムネイル画像を画像転送プログラム49bに要求する。
【0224】
この要求に応じて、画像転送プログラム49bは、ステップS86において、サムネイル画像、または、プレビュ画像を画像操作プログラム49cに送信する。
【0225】
なお、画像転送プログラム49bは、サムネイル画像を受信した直後であれば、サムネイル画像を画像操作プログラム49cに送信し、それ以降であれば、プレビュ画像を送信する。すなわち、図29で示したプレビュ画像を表示する処理は、静止画の撮影が要求された場合でも実行されることになる。
【0226】
画像操作プログラム49cは、ステップS86の処理で送信されてきたサムネイル画像、または、プレビュ画像を、ステップS121において、受信し、表示する。
【0227】
さらに、画像操作プログラム49cは、所定の時間間隔で画像転送プログラム49bに進捗通知を要求する。このとき、上述のように、画像転送プログラム49bは、ステップS90の処理で受信した進捗通知を、ステップS92において、画像操作プログラム49cに送信する。
【0228】
画像操作プログラム49cは、ステップS123において、画像転送プログラム49bより送信されてくる進捗通知を受信し、表示する。上述のように、ステップS34乃至ステップS36の処理は、分割された全ての静止画がVRAM44に転送されるまで繰り返されるので、ステップS90,ステップS92の処理、および、ステップS122,ステップS123の処理も、分割された静止画がVRAM44に全て転送されるまで所定の時間間隔で繰り返される。
【0229】
そして、ステップS37の処理により完了通知が送信されてくると、ステップS94の処理により、画像転送プログラム49bは、通信プログラム49aからの完了通知を受信するとともに、画像操作プログラム49cに対して、転送完了通知を送信する。
【0230】
そして、この転送の完了通知が、画像転送プログラム49bから送信されてくると、これに応じて、画像操作プログラム49cが、ステップS125において、画像転送プログラム49bに対して、静止画を要求する。
【0231】
この要求に応じて、ステップS96において、画像転送プログラム49bが、VRAM44に記憶されている静止画を画像操作プログラム49cに送信する。画像操作プログラム49cは、ステップS126において、この送信されてくる静止画を受信して、表示する。
【0232】
以上の処理により、デジタルビデオカメラ2が遠隔地にあっても、パーソナルコンピュータ1により静止画を撮影させることができるとともに、撮影された静止画をパーソナルコンピュータ1が遠隔地からでも受信し、表示することが可能となる。
【0233】
また、動画を撮影する場合、上述の静止画を撮影する方法では、画像の転送に時間がかかるため、プレビュ画像を連続的に画像操作プログラム49cが記録する。すなわち、図31で示すように、図29のステップS112,ステップS114の処理に代えて、ステップS131,ステップS128の処理を実行する。このような処理により動画を記録させることができる。
【0234】
さらに、定点観測画像を撮影する場合、図31のタイミングチャートにおけるステップS128のプレビュ画像を録画する間隔を調整する。すなわち、録画されるプレビュ画像の1枚が、定点観測画像を構成する静止画として記録されるようにすることで、定点観測画像を撮影することができる。
【0235】
なお、通信プログラム49aは、プレビュ画像を要求し(ステップS2の処理)、プレビュ画像が受信され記憶される(ステップS25の処理)と、再び、プレビュ画像を要求(ステップS2の処理)するといった処理を繰り返すが、無線通信部50および無線通信部101が使用されているため、通信環境、通信距離などにより所要時間は一定とならない。
【0236】
一方、画像操作プログラム49cは、プレビュ画像を表示する場合(静止画の撮影や動画の録画が要求されていない場合)、所定の時間間隔(ステップS111)で画像転送プログラム49bに対して画像を要求し(ステップS112)、この要求に応じて、画像転送プログラム49bは、モニタ変更通知毎にVRAM44から読み出している(ステップS82)プレビュ画像を送信する(ステップS86)。結果として、VRAM44から読み出されているプレビュ画像が、画像操作プログラム49cに送信されて受信される(ステップS113)ので、所定の時間間隔でVRAM44からプレビュ画像が読み出されて表示される状態となる。
【0237】
従って、画像操作プログラム49aは、例えば、10fpsで画像の供給を受けたい場合、上述の所定の時間間隔を100msに設定し、画像転送プログラム49bに対して画像を要求する。このとき、画像操作プログラム49cと画像転送プログラム49bは、パーソナルコンピュータ1上にあるので転送にかかる時間はわずかであるため、デジタルビデオカメラ2では、所望とするフレームレートで画像を提供できない場合があり、画像転送プログラム49bにプレビュ画像の要求を出したタイミングによっては、同じ画像が返ってくることがあるものの、画像操作プログラム49cは、所望とするフレームレートのプレビュ画像を得ることができる。このようにして得られたプレビュ画像は、一定フレームレートの画像であるため、データとして扱いやすいものとなる。
【0238】
以上によれば、遠隔地に離れたデジタルビデオカメラ2が撮影可能な画像をプレビュ画像としてモニタすることが可能になるとともに、遠隔地に離れたデジタルカメラ2により画像(静止画、動画、または、定点観測画像を含む)を撮影させ、さらに、撮影された画像を遠隔地で確認することが可能となる。
【0239】
次に、図32および図33のタイミングチャートを参照して、パーソナルコンピュータ1が、デジタルビデオカメラ2に対して、遠隔操作コマンドを送信し、必要に応じて、ステータスを参照することにより、パンおよびチルトの動作限界を検出し、ユーザに通知するための表示処理を実行する場合について、デジタルビデオカメラ2、通信プログラム49a、画像転送プログラム49b、および、画像操作プログラム49cのそれぞれの処理の関係を説明する。なお、各処理は、図18乃至図27のフローチャートで説明しているので、相互の関係のみを説明する。
【0240】
ステップS115において、画像操作プログラム49cが、デジタルビデオカメラ2に対する操作の入力、すなわち、コントローラ219に対する操作入力を受けたと判断した場合、ステップS116において、コマンド供給およびステータス確認処理が実行され、ステップS151において、画像転送プログラム49bに向けて、遠隔操作コマンドが送信される。これを受けて、ステップS98において、画像転送プログラム49bは、通信プログラム49aに対して、遠隔操作コマンドを送信する。さらに、これを受けて、ステップS39において、通信プログラム49aが、送信コマンド決定処理を実行する。ここで、プレビュ画像の送信タイミングではないと判断された場合、デジタルビデオカメラ2には、信号は送信されない。
【0241】
そして、さらに、ステップS115において、画像操作プログラム49cが、デジタルビデオカメラ2に対する操作の入力、すなわち、コントローラ219に対する操作入力を受けたと判断した場合、ステップS116において、コマンド供給およびステータス確認処理が実行され、ステップS151において、画像転送プログラム49bに向けて、遠隔操作コマンドが送信される。これを受けて、ステップS98において、画像転送プログラム49bは、通信プログラム49aに対して、遠隔操作コマンドを送信する。さらに、これを受けて、ステップS39において、通信プログラム49aが、送信コマンド決定処理を実行する。ここで、プレビュ画像の送信タイミングであり、ステータス要求が送信されると判断された場合、通信プログラム49aは、ステップS24において、デジタルビデオカメラ2に、プレビュ画像の要求およびステータス要求を示す遠隔操作コマンドを送信する。
【0242】
デジタルビデオカメラ2は、この要求に応じて、ステップS2およびステップS10の処理により、メモリ87に記憶されているプレビュ画像およびステータスを、通信プログラム49aに送信する。
【0243】
通信プログラム49aは、ステップS25において、送信されてきたプレビュ画像を受信させてVRAM44に記憶させ、ステップS27において、モニタ変更通知およびステータスを画像転送プログラム49bに送信する。
【0244】
画像転送プログラム49bは、通信プログラム49aから送信されてくるモニタ変更通知により、ステップS82において、プレビュ画像をVRAM44から読み出して取得するとともに、ステータスを保存する。
【0245】
そして、さらに、ステップS115において、画像操作プログラム49cが、デジタルビデオカメラ2に対する操作の入力、すなわち、コントローラ219に対する操作入力を受けたと判断した場合、ステップS116において、コマンド供給およびステータス確認処理が実行され、ステップS151において、画像転送プログラム49bに向けて、遠隔操作コマンドが送信される。これを受けて、ステップS98において、画像転送プログラム49bは、通信プログラム49aに対して、遠隔操作コマンドを送信する。さらに、これを受けて、ステップS39において、通信プログラム49aが、送信コマンド決定処理を実行する。ここで、プレビュ画像の送信タイミングであり、パン、チルト、または、ズームのいずれかのコマンドが送信されると判断された場合、通信プログラム49aは、ステップS24において、デジタルビデオカメラ2に、プレビュ画像の要求、および、パン、チルト、または、ズームのいずれかの遠隔操作コマンドを送信する。
【0246】
デジタルビデオカメラ2は、この要求に応じて、ステップS10の処理により、供給された遠隔操作コマンドに対応する処理を実行するとともに、ステップS2の処理により、メモリ87に記憶されているプレビュ画像を、通信プログラム49aに送信する。
【0247】
通信プログラム49aは、ステップS25において、送信されてきたプレビュ画像を受信させてVRAM44に記憶させ、ステップS27において、モニタ変更通知を画像転送プログラム49bに送信する。
【0248】
画像転送プログラム49bは、通信プログラム49aから送信されてくるモニタ変更通知により、ステップS82において、プレビュ画像をVRAM44から読み出して取得する。
【0249】
また、画像操作プログラム49cは、ステップS115において入力された操作が、パンまたはチルトを指令するものであった場合、ステップS155において、画像転送プログラム49bに保持されているステータスの取得処理を実行する。そして、画像操作プログラム49cは、取得したステータスに基づいて、ステップS156において、撮影可能範囲端を検出した場合、ステップS157において、ユーザに通知するための表示処理を実行する。
【0250】
このような処理により、パーソナルコンピュータ1において、プレビュ画像の要求の送信と、次のプレビュ画像の要求の送信との間の期間に、複数のコマンドが発生された場合においても、複数のコマンドのうち、最適なコマンドが選択されて、デジタルビデオカメラ2に送信されるので、複雑なコマンド送受信処理を行うことなく、ユーザがパーソナルコンピュータ1に入力した操作に対応するコマンドを、効率よく、デジタルビデオカメラ2において実行させるようにすることができる。さらに、ユーザが、遠隔地に設置されているデジタルビデオカメラ2に対して、パーソナルコンピュータ1を用いて、パンまたはチルトの操作入力を行う場合、パーソナルコンピュータ1は、複雑な処理により撮影範囲の画像などを生成することなく、デジタルビデオカメラ2の撮影範囲の端を検出して、簡単な処理で、ユーザに分かりやすい表示方法で、撮影範囲の端であることをユーザに通知することが可能となる。
【0251】
また、本発明は、パーソナルコンピュータ1以外にも、例えば、PDAや携帯型電話機などの各種情報処理装置において、実現することが可能である。本発明に、例えば、PDAや携帯型電話機などの、小型の情報処理装置を用いた場合、撮影範囲の端部を検出したことをユーザに知らせるために、表示方法の変更や、文字または音声によるメッセージを用いるのみならず、出力部48に、PDAや携帯型電話機などの、小型の情報処理装置の一部または全体に振動を発生することによりユーザに所定の通知を行うための図示しない駆動部を備えさせ、CPU41の処理により、駆動部を駆動させて、装置を振動させることにより、ユーザに、これ以上パンまたはチルトの操作を行うことができないことを通知することが可能である。
【0252】
さらに、遠隔操作される機器も、例えば、デジタルスチルカメラ、カメラ付携帯電話機、または、PDAなど、本発明を適用したパーソナルコンピュータ1などの情報処理装置と情報の授受を行うことができる装置であれば、デジタルビデオカメラ2以外の装置であってもかまわない。
【0253】
なお、本発明を適用したパーソナルコンピュータ1、PDA、または、携帯型電話機などの情報処理装置と、これらの情報処理装置と情報を授受するデジタルビデオカメラ2、デジタルスチルカメラ、カメラ付携帯電話機、または、PDAなどの装置との通信は、無線通信でなくとも、ケーブル等による有線の通信であっても良いことは言うまでもない。
【0254】
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行させることが可能な、例えば汎用のパーソナルコンピュータなどに記録媒体からインストールされる。
【0255】
この記録媒体は、図2に示すようにパーソナルコンピュータ1に予め組み込まれた状態でユーザに提供される、プログラムが記録されている記憶部48だけではなく、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク61(フレキシブルディスクを含む)、光ディスク62(CD−ROM(Compact Disk−Read Only Memory),DVD(Digital Versatile Disk)を含む)、光磁気ディスク63(MD(Mini−Disc)(登録商標)を含む)、もしくは半導体メモリ64(Memory Stickを含む)などよりなるパッケージメディアにより構成される。
【0256】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。
【0257】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【0258】
【発明の効果】
本発明によれば、遠隔地に離れた撮影機器により画像(静止画、動画、または、定点観測画像を含む)を撮影させることができ、特に、他の情報処理装置へ送信する情報をできるだけ少なくしつつ、他の情報処理装置に対して必要な操作を行えるようにすることが可能となる。
【図面の簡単な説明】
【図1】本発明を適用した無線撮影システムのブロック図である。
【図2】図1のパーソナルコンピュータの構成を示すブロック図である。
【図3】図1のデジタルビデオカメラの構成を示すブロック図である。
【図4】図1の無線撮影システムにより実現される機能を示す機能ブロック図である。
【図5】通信プログラムによる表示画像の例を示す図である。
【図6】通信プログラムによる表示画像の他の例を示す図である。
【図7】画像操作プログラムによる表示画像の例を示す図である。
【図8】画像操作プログラムによる表示画像の例を示す図である。
【図9】画像操作プログラムによる表示画像の例を示す図である。
【図10】画像操作プログラムによる表示画像の例を示す図である。
【図11】画像操作プログラムによる表示画像の例を示す図である。
【図12】画像操作プログラムによる表示画像の例を示す図である。
【図13】画像操作プログラムによる表示画像の例を示す図である。
【図14】画像操作プログラムによる表示画像の例を示す図である。
【図15】画像操作プログラムによる表示画像の例を示す図である。
【図16】画像操作プログラムによる表示画像の例を示す図である。
【図17】画像操作プログラムによる表示画像の例を示す図である。
【図18】デジタルビデオカメラによる撮影処理を説明するフローチャートである。
【図19】ステータスについて説明するための図である。
【図20】通信プログラムによる通信処理を説明するフローチャートである。
【図21】送信コマンド決定処理を説明するフローチャートである。
【図22】コマンドについて説明するための図である。
【図23】コマンド履歴テーブルについて説明するための図である。
【図24】画像転送プログラムによる転送処理を説明するフローチャートである。
【図25】画像操作プログラムによる操作処理を説明するフローチャートである。
【図26】画像操作プログラムによる表示画像の例を示す図である。
【図27】コマンド供給およびステータス確認処理を説明するフローチャートである。
【図28】ステータスについて説明するための図である。
【図29】プレビュ画像を表示するときのタイミングチャートである。
【図30】静止画を撮影するときのタイミングチャートである。
【図31】動画を録画するときのタイミングチャートである。
【図32】遠隔操作コマンドを送信するときのタイミングチャートである。
【図33】遠隔操作コマンドを送信するときのタイミングチャートである。
【符号の説明】
1 パーソナルコンピュータ, 2 デジタルビデオカメラ, 41 CPU, 47 操作入力部, 43 RAM, 49a 通信プログラム, 49b画像転送プログラム, 49c 画像操作プログラム, 50 無線通信部,87 メモリ, 93 圧縮伸張部, 95 メモリカード, 96 CPU, 101 無線通信部
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information processing apparatus, method, and program, and more particularly to an information processing apparatus, method, and program that are suitable for use when operating and photographing a remote imaging device while staying at a remote location. About.
[0002]
[Prior art]
2. Description of the Related Art A technique of operating a digital still camera or a digital video camera by remote control to capture an image has become popular.
[0003]
2. Description of the Related Art Conventionally, an image captured by a camera provided in a remote place and capable of moving (panning and tilting) the direction of an image to be captured horizontally and vertically is transferred to a computer. In some cases, a panoramic image of a photographable range is used to notify a user of a photographing range by the camera, that is, a panable or tiltable range (for example, see Patent Document 1). .
[0004]
For example, in the invention described in Patent Literature 1, a plurality of images in a shooting range are transmitted from a camera to a computer, and the supplied plurality of images are combined by the computer to form a panoramic image in a shootable range. Are generated and displayed, and on the displayed panoramic image, an image frame currently captured by the camera and a range in which a pan / tilt operation (also referred to as a pan and tilt operation) can be performed are indicated. With reference to the display of the panoramic image, the user can give an instruction of the pan tilter operation and can take a desired image.
[0005]
[Patent Document 1]
JP-A-11-8844 (pages 4 to 5, FIGS. 1 and 4)
[0006]
[Problems to be solved by the invention]
However, when the camera is operated from a remote location and shooting is performed, various commands such as pan, tilt, and zoom are supplied to the camera each time. Since the command is transmitted to the camera, the process of transmitting and receiving the command becomes complicated, and there is a possibility that the process of transmitting the image from the camera may be delayed.
[0007]
The present invention has been made in view of such a situation, and when operating a photographic device in a remote place while staying in a remote place to perform shooting, it is necessary to minimize the information transmitted to the camera while minimizing the information transmitted to the camera. This allows the user to perform various operations.
[0008]
[Means for Solving the Problems]
A first information processing apparatus of the present invention communicates with another information processing apparatus to transmit and receive information, an operation input means for receiving a user operation input, and a user operation input by the operation input means Control means for controlling transmission of a control signal to another information processing device by the transmission / reception means based on the input, wherein the user's operation input input by the operation input means is classified into a plurality of types, and Among the types, at least one first type is set as a priority type, and the control unit receives a plurality of operation inputs including the first type of operation input by the operation input unit during a predetermined period The transmission of the control signal corresponding to the first type of operation input is controlled.
[0009]
The control means, when the operation input corresponding to the first type is not received during the predetermined period, in the plurality of second types other than the first type, Transmission of a control signal corresponding to the type of operation input can be controlled.
[0010]
A plurality of operation inputs can be made to correspond to the second type of operation input, and when no operation input corresponding to the first type is received by the control means during a predetermined period, In a plurality of second types other than the first type, among the operation types of the same type as the second type that received the operation input earliest, the transmission of a control signal corresponding to the operation input received last is controlled. You can make it.
[0011]
The control means can further control the description of the control signal and the time information corresponding to the operation input input by the operation input means in the table storing the control signal for each second type, When the first operation input, which is the first operation input corresponding to the predetermined second type, is executed, a control signal corresponding to the first operation input and time information corresponding to the first operation input are described in the table, and the control is performed. When the second operation input corresponding to the second type in which the signal and the time information are described is executed, the time information corresponding to the first operation input in the table is held, and the time information corresponding to the first operation input is stored. The control signal corresponding to the second operation input can be overwritten on the control signal to be performed, and when it is determined that the predetermined period has elapsed, the earliest time information among the time information described in the table is used. It may be so as to control the transmission of the control signal being corresponding to the time information representing the time.
[0012]
The predetermined period is a period from when a transfer request signal for requesting to transfer image information captured by another information processing device is sent to another information processing device to when it is next sent. The control means can control the transmission of the control signal so that the control signal is transmitted to another information processing device together with the transfer request signal.
[0013]
A display unit for displaying image information transmitted from another information processing apparatus and received by the transmission / reception unit may be further provided.
[0014]
The transmission / reception means can be made to wirelessly communicate with another information processing device.
[0015]
A first information processing method according to the present invention includes a determining step of determining whether a user's operation input is an operation input of a type set as a priority type among a plurality of types; Transmission control that controls transmission of a control signal corresponding to the operation input of the type set as the priority type when it is determined that the operation input of the user is the operation input of the type set as the priority type And a step.
[0016]
The first program according to the present invention includes: a determination step of determining whether an operation input of a user is an operation input of a type set as a priority type among a plurality of types; A transmission control step of controlling transmission of a control signal corresponding to the operation input of the type set as the priority type when it is determined that the operation input of the user is the operation input of the type set as the priority type; It is characterized by including.
[0017]
In the first information processing apparatus, method, and program of the present invention, the user's operation input performed during a predetermined period includes an operation input of a type set as a priority type among a plurality of types. It is determined whether or not the operation input is an operation input of the type set as the priority type, and a control signal corresponding to the operation input of the type set as the priority type is transmitted.
[0018]
A second information processing apparatus of the present invention communicates with another information processing apparatus and transmits / receives information, an operation input means for receiving a user operation input, and a user operation input by the operation input means Control means for controlling transmission of a control signal to another information processing device by the transmission / reception means based on the input, wherein the user's operation input input by the operation input means is classified into a plurality of types, and At least one priority type is set among the types, and when the previously transmitted control signal is a predetermined first control signal, the control means executes based on the first control signal. Control of the transmission of the second control signal for confirming the processing of the information processing device of the first embodiment, the control signal transmitted earlier is not the first control signal, but the priority type is determined by the operation input means during a predetermined period. Multiple including operation input When receiving an operation input, and controlling the transmission of the third control signal corresponding to the operation input of the priority category.
[0019]
According to a second information processing method of the present invention, an operation input step of receiving an operation input of a user and a first determination step of determining whether a previously transmitted control signal is a predetermined first control signal And when the control signal transmitted last time is determined to be the first control signal by the processing of the first determining step, the processing for confirming the processing of another information processing apparatus by the first control signal. If the control signal transmitted last time is determined not to be the first control signal by the processing of the first transmission control step for controlling the transmission of the second control signal and the first determination step, the operation input The second determination step of determining whether the user's operation input input in the step processing is an operation input corresponding to the priority type of the plurality of types, and the processing of the second determination step User operation input If it is determined that the priority classification, characterized in that it comprises a transmission control step of controlling transmission of the third control signal corresponding to the operation input of the priority category.
[0020]
A second program according to the present invention includes an operation input step of receiving an operation input of a user, a first determination step of determining whether or not the previously transmitted control signal is a predetermined first control signal, When the control signal transmitted last time is determined to be the first control signal by the processing of the first determination step, the second control signal for confirming the processing of another information processing apparatus by the first control signal is performed. When the control signal transmitted last time is determined not to be the first control signal by the processing of the first transmission control step of controlling the transmission of the control signal and the first determination step, A second determining step of determining whether or not the user's operation input input by the processing is an operation input corresponding to the priority type of the plurality of types, and processing of the second determining step Operation input is If it is determined that the priority classification, characterized in that it comprises a transmission control step of controlling transmission of the third control signal corresponding to the operation input of the priority category.
[0021]
In the second information processing apparatus, method, and program according to the present invention, when the previously transmitted control signal is a predetermined first control signal, processing of another information processing apparatus by the first control signal is performed. A second control signal for confirmation is transmitted, and the control signal transmitted last time is not the first control signal, but the operation input of the user is an operation input corresponding to a priority type among a plurality of types. In this case, a third control signal corresponding to the operation input of the priority type is transmitted.
[0022]
A third information processing apparatus of the present invention communicates with another information processing apparatus and transmits / receives information, an operation input means for receiving a user operation input, and a user operation input by the operation input means Control means for controlling transmission of a control signal to another information processing device by the transmission / reception means based on the input, wherein the user's operation input input by the operation input means is classified into a plurality of types, and At least one priority type is set among the types, and the control means transmits a control signal to the other information processing device together with a transfer request signal requesting to transfer image information captured by the other information processing device. As described above, the control signal transmission is controlled, and at least one of the predetermined number of transmissions of the transfer request signal is performed by the first control signal for confirming the processing of another information processing apparatus. If the transmission of the first control signal is not controlled, the second control signal corresponding to the priority-type operation input among the plurality of operation inputs input by the operation input means during a predetermined period The transmission of the control signal is controlled so that is transmitted preferentially.
[0023]
According to a third information processing method of the present invention, an operation input step of receiving an operation input of a user, a transfer request signal requesting to transfer image information captured by another information processing apparatus, and a process of the operation input step A transmission control step of controlling transmission of a control signal so that a control signal corresponding to a user's operation input input by the user is transmitted to another information processing apparatus. The operation input is classified into a plurality of types, at least one of a plurality of types is set, and in the process of the transmission control step, at least one of a predetermined number of times of transmission of the transfer request signal is The transmission of the first control signal for confirming the processing of another information processing device is controlled, and when the transmission of the first control signal is not controlled, the operation switch is performed during a predetermined period. The transmission of the control signal is controlled such that the second control signal corresponding to the operation input of the priority type among the plurality of operation inputs input by the step-up processing is preferentially transmitted. .
[0024]
A third program according to the present invention includes an operation input step of receiving an operation input of a user, a transfer request signal requesting that image information captured by another information processing apparatus be transferred, and an input performed by the operation input step. And a transmission control step of controlling transmission of a control signal so that a control signal corresponding to the input operation of the user is transmitted to another information processing apparatus. The input is classified into a plurality of types, at least one priority type is set among the plurality of types, and in the process of the transmission control step, at least one of a predetermined number of times of transmission of the transfer request signal is another type. The transmission of the first control signal for confirming the processing of the information processing device is controlled. If the transmission of the first control signal is not controlled, the operation step is performed during a predetermined period. Among the plurality of operation input entered by the process of flops, so that the second control signal corresponding to the operation input of the priority type is preferentially transmitted, and controls the transmission of the control signal.
[0025]
In the third information processing apparatus, method, and program according to the present invention, a control signal corresponding to a user's operation input is included together with a transfer request signal requesting that image information captured by another information processing apparatus be transferred. The operation input of the user is transmitted to another information processing apparatus, and the operation input of the user is classified into a plurality of types, at least one priority type is set among the plurality of types, and at least one of a predetermined number of transmissions of the transfer request signal is transmitted. At this time, the first control signal for confirming the processing of the other information processing device is transmitted, and the other control signals correspond to the operation input of the priority type among the plurality of operation inputs input during the predetermined period. Is transmitted preferentially.
[0026]
BEST MODE FOR CARRYING OUT THE INVENTION
Embodiments of the present invention will be described below. In order to clarify the correspondence between each means and each step of the invention described in the claims and the following embodiments, each means and each step will be described. When the features of the present invention are described by adding corresponding embodiments (however, examples) in parentheses later, the following is achieved. However, of course, this description does not mean that each means and each step are limited to those described.
[0027]
The information processing apparatus according to claim 1 (for example, the personal computer 1 in FIG. 1) communicates with another information processing apparatus (for example, the digital video camera 2 in FIG. 1) to transmit and receive information. , A wireless communication unit 50 in FIG. 2), an operation input unit (for example, the input unit 47 in FIG. 2) for receiving an operation input of the user, and a transmission / reception unit based on the operation input of the user input by the operation input unit. And control means (for example, CPU 41 in FIG. 2) for controlling transmission of a control signal (for example, command) to another information processing apparatus. (For example, recording start / end, pan / tilt center, zoom, pan, tilt), and among a plurality of types, at least one first type (for example, recording open (End, pan / tilt center) is set, and the control means responds to the first type of operation input when receiving a plurality of operation inputs including the first type of operation input by the operation input means during a predetermined period The transmission of the control signal is controlled.
[0028]
The information processing device according to claim 2, wherein the control unit does not receive an operation input corresponding to the first type during a predetermined period, and the plurality of second types other than the first type (for example, , Zoom, pan, tilt), the transmission of a control signal corresponding to the second type of operation input that has received the operation input earliest is controlled.
[0029]
The information processing apparatus according to claim 3, wherein the second type of operation input includes a plurality of operation inputs (for example, as shown in FIG. 22, for zoom, wide-angle zoom and telephoto zoom, and for pan). In the right and left directions, the tilt corresponds to the upward and downward directions, and each corresponds to a plurality of operation inputs corresponding to the speeds. When the operation input corresponding to the first type is not received, among the plurality of second types other than the first type, of the operation inputs of the same type as the second type that received the operation input earliest, The transmission of a control signal corresponding to an operation input received later is controlled.
[0030]
The information processing apparatus according to claim 4, wherein the control unit inputs the operation input by the operation input unit to a table (for example, the command history table illustrated in FIG. 12) storing the control signal for each second type. Further controlling the description of the control signal and the time information corresponding to the input, and when the first operation input which is the first operation input corresponding to the predetermined second type is executed, the first operation input is stored in the table. When the second operation input corresponding to the second type in which the control signal and the time information are already described is executed, the first operation input in the table is described. Is held, and the control signal corresponding to the first operation input is overwritten with the control signal corresponding to the second operation input. If it is determined that a predetermined period has elapsed, the time information is described in the table. And Of the time information, and controlling the transmission of the control signal being corresponding to the time information representing the earliest time.
[0031]
The information processing apparatus according to claim 5, wherein the predetermined period means that a transfer request signal requesting to transfer image information (for example, a preview image) captured by another information processing apparatus is transmitted to another information processing apparatus. It is a period from the transmission to the device to the next transmission, and the control means controls the transmission of the control signal so that the control signal is transmitted to another information processing device together with the transfer request signal. Features.
[0032]
The information processing apparatus according to claim 6, further comprising a display unit (for example, the output unit 48 in FIG. 2) that displays image information transmitted from another information processing apparatus and received by the transmission / reception unit. And
[0033]
In the information processing method according to the eighth aspect and the program according to the ninth aspect, the user's operation input is a priority type among a plurality of types (for example, recording start / end, pan / tilt center, zoom, pan, and tilt). A determination step (for example, processing of step S59 in FIG. 21) for determining whether or not an operation input of a type set as (for example, recording start / end, pan / tilt center), and a processing of the determination step Is determined to be an operation input of the type set as the priority type, a transmission control step of controlling transmission of a control signal corresponding to the operation input of the type set as the priority type (for example, , Step S60 in FIG. 21 and step S24 in FIG. 20).
[0034]
An information processing apparatus (for example, the personal computer 1 in FIG. 1) according to claim 10 communicates with another information processing apparatus (for example, the digital video camera 2 in FIG. 1) to transmit and receive information (for example, , A wireless communication unit 50 in FIG. 2), an operation input unit (for example, the input unit 47 in FIG. 2) for receiving an operation input of the user, and a transmission / reception unit based on the operation input of the user input by the operation input unit. And control means (for example, CPU 41 in FIG. 2) for controlling the transmission of control signals to other information processing apparatuses.・ End, pan / tilt center, zoom, pan, tilt), and at least one of the plurality of types (for example, recording start / end, pan / tilt center) is set. When the previously transmitted control signal is a predetermined first control signal (for example, a command for instructing recording start / end), the control unit may execute another control signal based on the first control signal. The transmission of a second control signal (for example, a status request) for confirming the processing of the information processing device is controlled, and the previously transmitted control signal is not the first control signal but an operation input during a predetermined period. When a plurality of operation inputs including the priority type operation input are received by the means, transmission of a third control signal corresponding to the priority type operation input is controlled.
[0035]
The information processing method according to claim 11 and the program according to claim 12 are characterized in that an operation input step of receiving an operation input by a user (for example, the processing of step S115 in FIG. 25) and a control signal transmitted last time are A first determination step (for example, the processing of step S57 in FIG. 21) for determining whether or not the first control signal is a first control signal (for example, a command for instructing start / end of recording); When the control signal transmitted last time is determined to be the first control signal by the processing, the second control signal (for example, for confirming the processing of another information processing apparatus by the first control signal) As a result of the first transmission control step (for example, the processing of step S64 in FIG. 20) for controlling the transmission of the status request) and the processing of the first determination step, the control signal transmitted last time is the first transmission signal. If it is determined that the control signal is not a control signal, the user's operation input input in the operation input step processing is a priority type among a plurality of types (for example, recording start / end, pan / tilt center, zoom, pan, tilt). A second determination step (for example, the processing of step S59 in FIG. 21) for determining whether or not the input is an operation input (for example, recording start / end, pan / tilt center) corresponding to. If it is determined that the user's operation input is of the priority type, a transmission control step of controlling transmission of a third control signal corresponding to the priority type of operation input (for example, step S60 in FIG. 21 and step S60 in FIG. 20). Step S24).
[0036]
The information processing apparatus according to claim 13 (for example, the personal computer 1 in FIG. 1) communicates with another information processing apparatus (for example, the digital video camera 2 in FIG. 1) to transmit and receive information. , A wireless communication unit 50 in FIG. 2), an operation input unit (for example, the input unit 47 in FIG. 2) for receiving an operation input of the user, and a transmission / reception unit based on the operation input of the user input by the operation input unit. And control means (for example, CPU 41 in FIG. 2) for controlling the transmission of control signals to other information processing apparatuses.・ End, pan / tilt center, zoom, pan, tilt), and at least one of the plurality of types (for example, recording start / end, pan / tilt center) is set. The control means controls the transmission of the control signal so that the control signal is transmitted to the other information processing device together with the transfer request signal requesting that the image information captured by the other information processing device be transmitted. Controlling the transmission of a first control signal (for example, a status request) for confirming the processing of another information processing device is performed at least once out of a predetermined number of times (for example, five times) of transmitting the transfer request signal. If the transmission of the first control signal is not controlled, the second control signal corresponding to the operation input of the priority type is preferentially given among the plurality of operation inputs input by the operation input means during the predetermined period. The transmission of the control signal is controlled so as to be transmitted.
[0037]
The information processing method according to the fourteenth aspect and the program according to the fifteenth aspect include an operation input step of receiving an operation input of a user (for example, the processing of step S115 in FIG. 25) and an image captured by another information processing apparatus. Transmission of a control signal is performed so that a control signal corresponding to the user's operation input input in the operation input step processing is transmitted to another information processing device together with a transfer request signal requesting to transfer image information. And a transmission control step (for example, processing of step S24 in FIG. 20) for controlling the user. The operation input of the user input by the processing of the operation input step includes a plurality of types (for example, recording start / end, pan / tilt center, zoom) , Pan, tilt), and at least one priority type (for example, recording start / end, pan / tilt, In the processing of the transmission control step, at least one of the predetermined number of transmissions of the transfer request signal (for example, five times) is performed by the first processing for confirming the processing of another information processing apparatus. If the transmission of the control signal (for example, status request) is controlled and the transmission of the first control signal is not controlled, the priority type of the plurality of operation inputs input by the operation input step during a predetermined period is controlled. The transmission of the control signal is controlled so that the second control signal corresponding to the operation input is preferentially transmitted.
[0038]
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0039]
FIG. 1 is a diagram showing a configuration of a wireless imaging system to which the present invention is applied.
[0040]
In the wireless photographing system of the present invention, the digital video camera 2 can be operated by a software program on the personal computer 1, and when a still image or a moving image is photographed, an image that can be photographed at present can be recognized. , And allows the user to confirm the captured image.
[0041]
Next, the configuration of the personal computer 1 will be described with reference to FIG. The CPU (Central Processing Unit) 41 performs various processing in accordance with programs (communication program 49a, image transfer program 49b, and image operation program 49c) stored in ROM (Read Only Memory) 42 or storage unit 49. Execute In a RAM (Random Access Memory) 43, programs executed by the CPU 41, data, and the like are stored as appropriate. The VRAM (Video-RAM) 44 stores an image transmitted from the digital video camera 2. The CPU 41, the ROM 42, the RAM 43, and the VRAM 44 are mutually connected by a bus 45.
[0042]
An input / output interface 46 is also connected to the CPU 41 via a bus 45. The input / output interface 46 is connected to an input unit 47 including a keyboard, a mouse, a microphone, and the like, and an output unit 47 including a display, a speaker, and the like. The CPU 41 executes various processes in response to a command input from the input unit 47. Then, the CPU 41 outputs an image, a sound, or the like obtained as a result of the processing to the output unit 47.
[0043]
The storage unit 49 connected to the input / output interface 46 is constituted by, for example, a hard disk, and stores programs executed by the CPU 41 and various data.
[0044]
The storage unit 49 stores programs such as a communication program 49a, an image transfer program 49b, and an image operation program 49c, and the CPU 41 reads out these programs and executes corresponding processing. The various programs will be described later with reference to FIG.
[0045]
Further, it goes without saying that the programs stored in the storage unit 49 may include other programs described above, and various programs are acquired via the wireless communication unit 50 and stored in the storage unit 49. You may do so.
[0046]
The wireless communication unit 50 can communicate with another device at a speed of 1 Mbps using a radio wave of the 2.45 GHz band by so-called Bluetooth (Bluetooth). Unlike communication using infrared light, Bluetooth can be used even if there is an obstacle if the distance between devices is within a range of about 10 m. In addition, since Bluetooth uses a small transceiver of 0.5 square inches, the power consumption is small and the manufacturing cost is low as compared with the infrared communication device. In the present invention, an extended Basic Imaging Profile (extended BIP) in Bluetooth (a profile obtained by adding an extension related to a command transmission for remotely controlling a camera based on a profile related to an image transmission) is used to connect a computer and a photographing device. Perform communication. The wireless communication unit 50 may be a device other than Bluetooth as long as it can perform wireless communication. For example, the wireless communication unit 50 may be a wireless communication device conforming to the IEEE 802.11b standard.
[0047]
The drive 51 connected to the input / output interface 46 drives a magnetic disk 61, an optical disk 62, a magneto-optical disk 63, a semiconductor memory 64, or the like when they are mounted, and drives programs and the like recorded thereon. Get data etc. The acquired programs and data are transferred and stored in the storage unit 49 as necessary.
[0048]
Next, the configuration of the digital video camera 2 will be described with reference to FIG. The CPU 96 is a control unit that performs overall control of each circuit based on a signal input from the operation unit 102, and controls display on the liquid crystal monitor 90, strobe light emission control, autofocus (AF) calculation, and automatic exposure (AE) calculation. And so on.
[0049]
The operation unit 102 is a block including an instruction input unit. When the power is turned on, the CPU 96 sends a command to the power control circuit 98 to supply power to each part of the digital video camera 2 from the battery 99 or an external power supply connected to a DC power terminal (not shown). And enable each circuit. The battery 99 may be a rechargeable battery (secondary battery) or a commercially available dry battery (primary battery).
[0050]
The photographing lens 81 includes one or a plurality of lenses, and may be a single focus lens or a variable focal length lens such as a zoom lens. The light passing through the photographing lens 81 is incident on a CCD (Charge Coupled Device) 83 after the amount of light is adjusted by an aperture 82. Photosensors are arranged two-dimensionally on the light receiving surface of the CCD 83, and the subject image formed on the light receiving surface of the CCD 83 is converted by each photosensor into signal charges of an amount corresponding to the amount of incident light. Note that the CCD 83 has a so-called electronic shutter function that can control the charge accumulation time (shutter speed) of each photosensor.
[0051]
The signal charges thus accumulated are sequentially read out as voltage signals (image signals) corresponding to the signal charges based on the pulse given from the imaging system control circuit 92.
[0052]
The image signal output from the CCD 83 is sent to an analog signal processing unit 84. The analog signal processing unit 84 includes a sampling and holding circuit, a color separation circuit, a gain adjustment circuit, and the like. The analog signal processing unit 84 performs correlated double sampling (CDS) processing and color separation into R, G, and B color signals. After that, the signal level of each color signal is adjusted (pre-white balance processing).
[0053]
The signal output from the analog signal processing unit 84 is converted into a digital signal by the A / D converter 85 and then supplied to the digital signal processing unit 86. The digital signal processing unit 86 is image processing means including a luminance / color difference signal generation circuit, a gamma correction circuit, a sharpness correction circuit, a contrast correction circuit, a white balance correction circuit, and the like, and processes an image signal according to a command from the CPU 96.
[0054]
The digital signal processing unit 86 converts the image data into a luminance signal (Y signal) and color difference signals (Cr, Cb signals), performs predetermined processing such as gamma correction, and stores the processed data in the memory 87. The image data stored in the memory 87 is read out according to a command from the CPU 96, converted into an analog signal by the D / A converter 88, and converted into a predetermined signal format such as the NTSC (National Television Standards Committee) system. Then, it is output to the video output terminal 89 and the liquid crystal monitor 90. The image stored in the memory 87 is normally read out by the CPU 96 as a preview image.
[0055]
The image data in the memory 87 is periodically rewritten by the image signal output from the CCD 83, and the video signal generated from the image data is supplied to the liquid crystal monitor 90, so that the image input through the CCD 83 can be changed in real time. It is displayed on the liquid crystal monitor 90. The photographer can confirm the angle of view of the image displayed on the liquid crystal monitor 90 or the optical viewfinder.
[0056]
When the user operates the operation unit 102 to set a shooting mode, a shooting start instruction (release ON) signal is issued. The CPU 96 detects the release ON signal and sends a command to the imaging system control circuit 92. The imaging system control circuit 92 performs focus control via the AF motor zoom motor 91 and controls exposure by controlling the charge accumulation time in the aperture 82 and the CCD 83.
[0057]
When an operation for instructing to capture image data for recording is performed, recording is started. When the mode for compressing and recording image data is selected, the CPU 96 sends a command to the compression / expansion circuit 93. Thus, the compression / expansion circuit 93 compresses the image data in the memory 87 in accordance with the JPEG format (or another predetermined format). Further, when outputting the preview image, the compression / expansion circuit 93 compresses a 160 × 120 size image defined by BIP (Basic Imaging Profile) in Bluetooth used as the wireless communication unit 101 into a JPEG format. , To the CPU 96. The photographed still image is compressed in the JPEG format with the set image size.
[0058]
The compressed image data is recorded on a memory card 95 via a card I / F (interface) 94. When a mode for recording non-compressed image data (non-compression mode) is selected, the compression processing by the compression / expansion circuit 93 is omitted, and the image data is recorded on the memory card 95 without compression.
[0059]
In the digital video camera 2 shown in FIG. 3, as a means for storing image data, for example, a memory stick (trademark) as a semiconductor memory is applied. The recording medium is not limited to this, and may be a PC card, a compact flash (registered trademark), a magnetic disk, an optical disk, a magneto-optical disk, a smart media, or the like, and may be electronic, magnetic, optical, or a combination thereof. Various media that can be read and written according to the above can be used. In addition, the card I / F 94 may be configured so that a signal processing unit and an interface corresponding to a recording medium to be used are applied, and a plurality of media of different types or the same type may be mounted. . Further, the means for saving the image file is not limited to a recording medium detachable from the camera body, but may be a recording medium (internal memory) built in the camera.
[0060]
The operation state of the CCD 83 differs between when the image data for recording is taken in and in other cases. That is, when image data for recording is not captured, the CCD 83 is in a mode of acquiring an image with a lower resolution than when image data for recording is captured, and as a result, the amount of image data is suppressed. As a result, the transfer speed between the analog signal processing 84 and the D / A converter 88 is increased, so that an image is quickly displayed on the liquid crystal monitor 90. Therefore, the image stored in the memory 87 in this state is a low-resolution image. For this reason, the image read in this state is a low-resolution preview image. On the other hand, when image data of a still image for recording is taken in, the CCD 83 obtains a still image with a higher resolution, and as a result, image data with a large data amount but high quality is stored in the memory 87. Become. The thumbnail image generation unit 103 converts a still image having a large data amount into a thumbnail image based on an instruction from the CPU 96. Note that a thumbnail image is an image or a character obtained by reducing a predetermined image.
[0061]
When the reproduction mode is set by a predetermined operation, the image data is read from the memory card 95. The read image data is expanded by a compression / expansion circuit 93 as necessary, and output to a video output terminal 89 and a liquid crystal monitor 90 via a D / A converter 88.
[0062]
The digital video camera 2 has a wireless communication unit 101 made of Bluetooth, and can transmit and receive image data and various signals via the wireless communication unit 101. The EEPROM 97 stores identification information (ID) for specifying an external device to be a communication partner, and the CPU 96 determines a communication target device based on the identification information registered in the EEPROM 97. Further, the CPU 96 encrypts the transmission data using the identification information of the communication partner in the encryption circuit 88, and transmits the data from the wireless communication unit 101.
[0063]
Next, functions realized by the personal computer 1 and the digital video camera 2 shown in FIGS. 2 and 3 will be described with reference to a functional block diagram shown in FIG.
[0064]
Note that the programs shown in FIG. 4 may be realized by dedicated hardware. Therefore, the functional block diagram of FIG. 4 may be regarded as a hardware configuration diagram or a software configuration diagram.
[0065]
The communication program 49a controls the wireless communication unit 50 to control communication with a device having another wireless communication unit. The communication program 49a controls the wireless communication unit 50 to search for a communicable electronic device, for example, displays a display screen as shown in FIG. To the user. In FIG. 5, a display column 122 indicating itself is shown on the left side of the screen 121, and in this case, "My computer PC" is displayed. At the center of the screen 121, profile icons 123 to 128 are displayed, and a Bluetooth profile that can be transmitted and received by wireless communication is displayed as an icon. The profile is, for example, image data and music data that can be transmitted and received.
[0066]
On the right side of the screen 121, display columns 131 to 135 of the communicable devices are shown, and among them, the device which is the communication target device is displayed in the display column 133 at the center in the vertical direction. In this case, “Digital Video Camera” is displayed in the center display column 133, and the digital video camera 2 is selected as a communication target device of “My Computer PC” displayed in the display column 122. It has been shown.
[0067]
When a plurality of devices can communicate, those devices are displayed in other display columns 131 to 135. In this case, "PDA" and "PC-1" are displayed in addition to the digital video camera, indicating that "PDA" and "PC-1" have been detected as communicable devices. .
[0068]
The buttons 129 and 130 are operated when changing the electronic device to be communicated. For example, when the button 129 is operated, the display column 131 is deleted from the display, and the display columns 132 to 135 are displayed in the upper part of the figure. Slide in the direction. As a result, “PC-1” is displayed at the center of the communicable device, and “PC-1” is selected as the communication target device. When the button 130 is operated, the display column 135 is deleted, and the display columns 131 to 134 slide downward in the figure. As a result, “PDA” is displayed at the center of the communicable device, and “PDA” is selected as the communication target device.
[0069]
Parentheses are displayed on the left and right of each of the profile menu icons 123 to 128 to indicate whether the profile is a profile that the communication device can transmit and receive. In this case, parentheses 123a to 128a are all displayed on the left side of the profile menu icons 123 to 128, and all the electronic devices corresponding to “My Computer PC” in the display field 122 are displayed as the profile menu icons. It is shown that it is possible to send and receive profiles. Of the profile menu icons 123 to 128, only the parentheses 127b and 128b are displayed on the right side, and the digital video camera selected as the communication target device has only the profiles corresponding to the profile menu icons 127 and 128. It is indicated that transmission and reception are not possible. Therefore, the communication target device to be selected cannot transmit or receive the profile unless the desired profile menu icon has parentheses.
[0070]
With this display, the user can recognize whether or not the communication target device is a receivable / receivable profile only by looking at the display of the parentheses of the profile menu icon. Also, by selecting a profile to be used, the personal computer 1 shown in the display field 122 and the digital video camera shown in the display field 133 are connected by a line on the screen 121 to correspond to the image data. This indicates that communication of the selected profile is enabled.
[0071]
When the communication program 49a controls the wireless communication unit 50 to search for a communicable electronic device, for example, a display screen 141 as shown in FIG. 6 is displayed on the display of the output unit 48. Accordingly, the user may be notified of the electronic device that can communicate with the electronic device now.
[0072]
In the device display area 151 at the center of the screen, devices existing in a range where the device (that is, the personal computer 1) can communicate by Bluetooth communication are listed. Among the devices displayed in the device display area 151, the device (here, the digital video camera 2) selected as the communication partner is highlighted. In the center portion of the display screen, that is, in the profile display area 152 on the right side of the device display area 151, a Bluetooth profile that allows communication between the personal computer 1 and each device displayed in the device display area 151 is displayed. Are listed. According to the present invention, it is possible to perform remote shooting processing using an extended Basic Imaging Profile (extended BIP) in Bluetooth (a profile obtained by adding an extension relating to command transmission for remotely controlling a camera based on a profile relating to image transmission). Is displayed.
[0073]
When the personal computer 1 and the digital video camera 2 are set in a communicable state, the communication program 49a transmits an image request or a remote operation command between the digital video camera 2 and the personal computer 1, And the like.
[0074]
Further, when image data such as a preview image, a thumbnail image, or a still image is transferred from the digital video camera 2, the communication program 49a stores the received image data such as the preview image, the thumbnail image, or the still image in the VRAM 44. To memorize. However, when a high-quality still image is received, the image data is divided and transferred, so that the transfer takes time. Therefore, the communication program 49a also notifies the image transfer program 49b of a progress notification indicating the progress of the still image reception.
[0075]
The image transfer program 49b manages an image stored in the VRAM 44 based on a notification from the communication program 49a, for example, a monitor change notification, and when an image is requested from the image operation program 49c, the corresponding image (Preview image, thumbnail image, or still image) is read from the VRAM 44 and supplied to the image operation program 49c. Further, when a request for capturing a still image or a remote operation command is received from the image operation program 49c, the fact is transferred to the communication program 49a.
[0076]
The image operation program 49c requests a preview image, a thumbnail image, or a still image from the image transfer program 49b, and displays the image supplied based on the request, for example, as shown in FIG. The remote control command is supplied to the image transfer program 49b based on the operation input performed by the user on the displayed display screen.
[0077]
7, a still image, a moving image, or a fixed-point observation image (a collection of a plurality of still images captured within a predetermined time) is displayed on the display unit 218, and a still image mode button 201 is displayed on the left side thereof. , A moving image mode button 202, and a fixed point observation mode button 203 are displayed. On the right side of the display unit 218, a thumbnail image list 217 is provided, and on the right side, from the top, a mode switching button 211, a save button 212, a mail button 213, an upload button 214, and a trash button 215 are provided. Further, a controller 219 for performing an operation input to the digital video camera 2 is provided below the fixed point observation mode button 203.
[0078]
The still image mode button 201 is operated when the user selects the still image mode. The moving image mode button 202 is operated when the user selects the moving image mode. The fixed point observation mode button 203 is operated when the user selects the fixed point observation mode.
[0079]
The thumbnail image list 217 is in a state where it is not currently stored (in a state where it is not stored as a file but a captured image is temporarily stored in the VRAM 44 or a predetermined area of the storage unit 49). A thumbnail image indicating one of a still image, a moving image, and a fixed point observation image is displayed. In the case of a still image, the thumbnail image of the still image itself is displayed. In the case of a moving image, the thumbnail image of the image at the start of recording (the first captured image) is displayed. In the case of an image, one of a plurality of still images captured as a fixed-point observation image is displayed as a thumbnail image, but as a default, the first still image captured when fixed-point observation is started is used as a thumbnail image. It is displayed and can be changed to a still image taken after that. When the number of temporarily stored images is equal to or more than a predetermined number or when the stored area is equal to or more than a predetermined capacity, the oldest image is deleted and the latest image is stored.
[0080]
Further, each thumbnail image can be designated (selected) by the user moving a pointer such as a so-called mouse pointer to a position of a desired thumbnail image and clicking on the thumbnail image. Indicates that the image is bordered. In the case of FIG. 7, among the thumbnail images displayed in the thumbnail image list 217, the thumbnail image located at the bottom in the figure is designated.
[0081]
Furthermore, the image displayed in the thumbnail image list 217 is double-clicked in a designated state, and the display on the display unit 218 is instructed. In the case of a still image, the selected still image is displayed on the display unit 218. In the case of a moving image or a fixed-point observation image, the moving image is displayed on the display unit 218 as a moving image (in the case of a fixed-point observation image, still images are continuously displayed).
[0082]
The mode switching button 211 is a button that is operated when instructing reproduction of a specified thumbnail image among the thumbnail images displayed in the thumbnail image list 217.
[0083]
The save button 212 is a button operated when saving a specified image (when saving as a file) among the thumbnail images displayed in the thumbnail image list 217.
[0084]
The mail button 213 is a button that is operated when a specified image among the thumbnail images displayed in the thumbnail image list 217 is transmitted by e-mail.
[0085]
The upload button 214 is a button operated when uploading a specified image from the thumbnail images displayed in the thumbnail image list 217 to a predetermined server.
[0086]
The trash can button 215 is a button operated when deleting a thumbnail image displayed in the thumbnail image list 217 (when deleting an image temporarily stored in a predetermined area of the storage unit 48).
[0087]
The controller 219 instructs the digital video camera 2 to execute a telephoto zoom button 221 for instructing telephoto zoom, a wide-angle zoom button 222 for instructing wide-angle zoom, and a command to change the direction of a captured image. And a recording button 224 for instructing recording on a recording medium mounted on the digital video camera 2 or a recording medium provided therein. The center button of the pan / tilt button 223 is operated to return the photographing direction to the center position of the photographable range (pan / tilt center). The recording button 224 is a button for instructing both operations of starting and ending recording processing on a recording medium mounted on the digital video camera 2 or a recording medium provided therein. During the video recording process, characters such as "REC" may be displayed at any position on the display screen to notify the user that the video recording is being performed.
[0088]
When the still image mode button 201 is operated, as shown in FIG. 8, the display color of the still image mode button 201 changes, and a shooting button 231a is displayed below the display unit 218. Further, a setting button 232a and the like are displayed on the right side of the shooting button 231a. At this time, the image operation program 49c causes the display unit 218 to display the received preview image. The shooting button 231a is a button that is operated when the user gives an instruction to shoot a preview image displayed on the display unit 218. The setting button 232a is a button operated when performing various settings in the still image mode. When this button is operated, a setting screen of the still image mode is displayed, and various settings can be performed.
[0089]
When the photographing button 231a is operated, the image operation program 49c displays the currently photographed image (still image) in the thumbnail image list 217 below the thumbnail image 217a which was the latest image as shown in FIG. Is displayed, a new thumbnail image 217b corresponding to is displayed.
[0090]
When the moving image mode button 202 is operated, as shown in FIG. 10, the image operation program 49c changes the display color of the moving image mode button 202, and displays a recording button 231b below the display unit 218. Further, a setting button 232b and the like are displayed on the right side of the recording button 231b. At this time, the image operation program 49c causes the display unit 218 to display the received preview image. The recording button 231b is a button operated when the user instructs recording of the preview image displayed on the display unit 218. The setting button 232b is a button that is operated when performing various settings in the moving image mode. When this button is operated, a setting screen for the moving image mode is displayed.
[0091]
In this state, if the recording button 231b is operated, the image operation program 49c stores the thumbnail image list 217 as shown in FIG. 11 below the thumbnail image 217a shown in FIG. Then, a new thumbnail image 217c corresponding to the image (moving image) just taken is displayed. At this time, as shown in FIG. 11, the image operation program 49c displays only the recording mark indicating that recording is in progress in the thumbnail image 217c, and displays the lower part of the display unit 218 from the recording button 231b. It is displayed instead of the end button 231c.
[0092]
When the end button 231c is operated in this state, the image operation program 49c ends the recording, and as shown in FIG. 11, the thumbnail image 217c in which only the recording-in-progress mark is displayed is displayed as shown in FIG. Then, a thumbnail image 217d for identifying the recorded moving image is displayed. At this time, as shown in FIG. 12, the thumbnail image 217d is displayed with a moving image mark (a mark like an 8 mm camera) indicating that it is a moving image at the upper left portion in the thumbnail image 217d. By displaying in this way, it is possible to identify at a glance whether an image managed as a thumbnail image is a still image or a moving image.
[0093]
When the fixed-point observation mode button 203 is operated, the image operation program 49c changes the display color of the fixed-point observation mode button 203, as shown in FIG. Is displayed. Further, a setting button 232e and the like are displayed on the right side of the start button 231d. At this time, the image operation program 49c causes the display unit 218 to display the received preview image. The start button 231d is a button operated when the user instructs fixed-point observation of the image displayed on the display unit 218. The setting button 232e is a button operated when performing various settings in the fixed point observation mode. When this button is operated, a setting screen of the fixed point observation mode is displayed. Further, a reservation button 341 is displayed on the left side of the start button 231d. The reservation button 341 is a button that is operated by the user when a reservation is set in advance for imaging by fixed point observation.
[0094]
When the start button 231d is operated in this state, the image operation program 49c adds the thumbnail image list 217 to the thumbnail image list 217 shown in FIG. Then, a new thumbnail image 217e corresponding to the image just shot (fixed-point observation image) is displayed. At this time, as shown in FIG. 14, the image operation program 49c displays only the fixed point observation mark indicating that the fixed point observation image is being captured in the thumbnail image 217e, and displays the lower part of the display unit 218. Are displayed in place of the start button 231e to the end button 231f.
[0095]
When the end button 231f is operated in this state, the image operation program 49c terminates the photographing in the fixed-point observation mode and changes the thumbnail image 217e in which only the fixed-point observation mark is displayed, as shown in FIG. , And a thumbnail image 217f for identifying the image captured by the fixed point observation is displayed. At this time, as shown in FIG. 15, the thumbnail image 217f is displayed with a fixed-point observation mark (a mark like a camera) indicating that it is a fixed-point observation image in the upper left portion of the thumbnail image 217f. . By displaying in this way, it is possible to identify at a glance whether an image managed as a thumbnail image is a still image, a moving image, or a fixed-point observation image.
[0096]
When an operation input is made to the controller 219, a remote operation command is transmitted to the digital video camera 2, and a preview image transmitted from the digital video camera 2 that has performed processing based on the command is displayed. It is displayed in the section 218. For example, the user moves the mouse cursor 251 and operates one of the pan / tilt buttons 223 of the controller 219 having an upward arrow on the screen to move the image capturing position upward (tilt). When a command for inputting a command is input, as shown in FIG. 16, a captured image in which the capturing direction has been changed based on the tilt operation is displayed on display unit 218. Also, for example, when the telephoto zoom button 221 of the controller 219 is operated, the display unit 218 displays an image captured based on the telephoto zoom operation, and when the wide-angle zoom button 222 is operated, the display unit 218 is displayed. In 218, a captured image captured based on the wide-angle zoom operation is displayed, and when the record button 224 is operated, the digital video camera 2 uses the recording medium mounted on itself or the recording medium contained therein. Start or end the recording operation to.
[0097]
The details of the process of transmitting the command to the digital video camera 2 will be described later.
[0098]
When the user moves the mouse cursor 251 and operates the pan / tilt button 223 of the controller 219 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 is changed to the shooting direction. When the position becomes the limit position of the possible range and the shooting direction cannot be changed any more, the pan / tilt button 223 operated by the user blinks. By confirming that the pan / tilt button 223 is blinking, the user can recognize that the shooting direction cannot be further moved in the corresponding operation input direction.
[0099]
If the current shooting direction is the limit position of the shooting range and the shooting position cannot be changed any more, the user can change the display of the pan / tilt button 223 to negative / positive or change the display color. Alternatively, it may be notified that it is the limit position of the photographable range.
[0100]
Further, for example, as shown in FIG. 17, a mouse cursor icon 261 is displayed, and when the user inputs a pan / tilt operation, the mouse cursor icon 261 is dragged in a desired direction in which the photographing direction is to be moved. be able to. Then, in a state where the user is operating the mouse cursor icon 261 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 becomes the limit position of the shootable range. If the photographing direction cannot be changed, the mouse cursor icon 261 being operated by the user blinks. By confirming that the mouse cursor icon 261 is blinking, the user can recognize that the shooting direction cannot be further moved in the corresponding operation input direction.
[0101]
If the current shooting direction is the limit position of the shooting range and the shooting position cannot be changed any more, the display color of the mouse cursor icon 261 is changed to allow the user to change the shooting range. You may be notified that it is the limit position.
[0102]
Note that when the user is operating the pan / tilt button 223 in FIG. 16 or the mouse cursor icon 261 in FIG. 17 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 is changed to the shooting direction. If the photographing direction cannot be changed any more, it becomes the limit position of the possible range.For example, a message window with a message "Cannot change the photographing direction any more" is displayed, or a predetermined not shown By turning on or off the LED, generating a buzzer sound, or notifying by a voice message, the user may be notified that the shooting direction cannot be changed any more.
[0103]
Returning to the description of FIG.
[0104]
In response to a request from the personal computer 1, the digital video camera 2 displays a preview image stored in the memory 87, a thumbnail image generated by the thumbnail image generation unit 103, or a still image stored in the memory card 95. Is read and transmitted to the personal computer 1. However, in the case of a request for a still image, the digital video camera 2 captures the image, transmits the captured image as a thumbnail image, temporarily stores the captured image in the memory card 95, and transmits the thumbnail image. The image stored in 95 is transmitted to the personal computer 1.
[0105]
Next, the photographing process of the digital video camera 2 will be described with reference to the flowchart of FIG.
[0106]
In step S1, the CPU 96 of the digital video camera 2 controls the wireless communication unit 101 to determine whether or not a preview image is requested from the personal computer 1. For example, when the preview image is requested by the process of step S23 in FIG. 20 described later, it is determined that the preview image is requested from the personal computer 1, and the process proceeds to step S2.
[0107]
In step S2, the CPU 96 acquires the image stored in the memory 87 as a preview image (that is, captures the preview image), and transmits the preview image to the personal computer 1 via the wireless communication unit 101. After the process of step S2 ends, the process returns to step S1, and the subsequent processes are repeated.
[0108]
If it is determined in step S1 that a preview image has not been requested, then in step S3, the CPU 96 determines whether or not a request to shoot a still image has been made. For example, when the photographing of the still image is requested by the processing of step S29 of the flowchart of FIG. 20 described later, it is determined that the photographing of the still image is requested, and the process proceeds to step S4.
[0109]
In step S4, the CPU 96 controls the control circuit 92 to switch the CCD 83 to the high-resolution mode, store the still image data in the memory 87, and shoot the image.
[0110]
In step S5, the CPU 96 controls the thumbnail image generation unit 103 to convert a still image stored in the memory 87 into a thumbnail image, controls the wireless communication unit 101, and transmits the thumbnail image to the personal computer 1. After the processing in step S5 ends, the processing returns to step S1, and the subsequent processing is repeated.
[0111]
If it is determined in step S3 that shooting of a still image has not been requested, in step S6, the CPU 96 determines whether transfer of a still image has been requested. For example, when the transfer of a still image is requested by the process of step S32 in FIG. 20 described later, it is determined that the transfer of the still image is requested, and the process proceeds to step S7.
[0112]
The CPU 96 controls the compression / expansion circuit 93 in step S7 to compress the image stored in the memory 87 by the JPEG method and divides the image into a transferable size, and controls the wireless communication unit 101 in step S8. Then, the divided still images are transmitted to the personal computer 1. After the process of step S8 ends, the process returns to step S1, and the subsequent processes are repeated.
[0113]
If it is determined in step S6 that transfer of a still image has not been requested, in step S9, the CPU 96 controls the wireless communication unit 101 to determine whether a remote operation command has been received from the personal computer 1. . For example, when the remote operation command determined by the processing of step S60, step S61, or step S64 of FIG. 21 described later is transmitted, it is determined that the remote operation command is received from the personal computer 1, and the processing is performed. Goes to step S10.
[0114]
In step S10, the CPU 96 executes an operation corresponding to the received remote operation command. The remote control commands include a recording start or stop command, a zoom command, a pan command, a tilt command, and a status request. By executing the processing corresponding to the remote control command, the internal status is rewritten. As shown in FIG. 19, the status includes four pieces of information of a recording state, a pan state, a tilt state, and a zoom state. The current state of the digital video camera 2 (whether or not recording is being performed, Whether panning is being performed, whether tilting is being performed in any direction, and whether zooming is being performed are described. After the processing in step S10 ends, the processing returns to step S1, and the subsequent processing is repeated.
[0115]
If it is determined in step S9 that the remote operation command has not been received from the personal computer 1, the process returns to step S1, and the subsequent processes are repeated.
[0116]
Through such processing, the digital video camera 2 can execute processing based on an operation input by a user using the personal computer 1.
[0117]
Next, a communication process by the communication program 49a of the personal computer 1 will be described with reference to a flowchart of FIG.
[0118]
In step S21, the communication program 49a determines whether it is necessary to request a preview image. Since the communication program 49a requests the preview image at predetermined time intervals, it is necessary to request the preview image if the predetermined time has not elapsed since the previous request for the preview image. If not, the process proceeds to Step S25. If it is determined in step S21 that a preview image needs to be requested, in step S22, the communication program 49a determines whether there is a command stored in the remote operation command register.
[0119]
For example, when the transmission command determination process of step S39 described later with reference to FIG. 21 is executed, it is determined that there is a command stored in the remote operation command register, and the process proceeds to step S24. If it is determined in step S22 that there is no command stored in the remote operation command register, in step S23, the communication program 49a controls the wireless communication unit 50 to preview the digital video camera 2. Request an image (request a transfer). After the process of step S23 ends, the process returns to step S21, and the subsequent processes are repeated.
[0120]
If it is determined in step S22 that there is a stored command in the remote operation command register, in step S24, the communication program 49a controls the wireless communication unit 50 to store the command in the digital video camera 2. A preview image request including the command being transmitted is transmitted. After the processing in step S24 ends, the processing returns to step S21, and the subsequent processing is repeated.
[0121]
In step S25, the communication program 49a controls the wireless communication unit 50 to determine whether a preview image corresponding to the preview image request in the process of step S23 has been transmitted from the digital video camera 2, and, for example, When it is determined that the preview image has been transmitted by the process of step S2 in FIG. 18, the process proceeds to step S26.
[0122]
In step S26, the communication program 49a controls the wireless communication unit 50 to receive the transmitted preview image and store it in the VRAM 44.
[0123]
In step S27, the communication program 49a transmits a monitor change notification indicating that the preview image has been stored in the VRAM 44 to the image transfer program 49b, and if a status has been transmitted together with the preview image, the status is transmitted to the image transfer program 49b. The program is transmitted to the program 49b. For example, when the transmission command determination process of step S39 described later with reference to FIG. 21 is executed and a status is requested to the digital video camera 2, the digital video camera 2 performs the process together with the preview image by the process of step S10 of FIG. , Send status. After the process of step S27 ends, the process returns to step S21, and the subsequent processes are repeated.
[0124]
If it is determined in step S25 that the preview image has not been transmitted, in step S28, the communication program 49a determines whether or not a request to shoot a still image has been issued from the image transfer program 49b. For example, if the image transfer program 49b requests a still image to be captured by the processing of step S88 in the flowchart of FIG. 24 described below, the image transfer program 49b controls the wireless communication unit 50 to control the digital communication in step S29. It requests the video camera 2 to shoot a still image. After the process of step S29 ends, the process returns to step S21, and the subsequent processes are repeated.
[0125]
If it is determined in step S28 that shooting of a still image has not been requested, in step S30, the communication program 49a controls the wireless communication unit 50 to determine whether a thumbnail image has been transmitted from the digital video camera 2. Judge. For example, when a thumbnail image is transmitted from the digital video camera 2 by the processing in step S5 of the flowchart in FIG. 18, it is determined that a thumbnail image has been transmitted, and the process proceeds to step S31.
[0126]
In step S31, the communication program 49a controls the wireless communication unit 50 to receive the thumbnail image transmitted from the digital video camera 2 and store the thumbnail image in the VRAM 44.
[0127]
In step S32, the communication program 49a transmits a monitor change notification indicating that the thumbnail image has been stored in the VRAM 44 to the image transfer program 49b, and controls the wireless communication unit 50 to stop the digital video camera 2. Ask the user to transfer the image. After the processing in step S32 ends, the processing returns to step S21, and the subsequent processing is repeated.
[0128]
If it is determined in step S30 that the thumbnail image has not been transmitted, in step S33, the communication program 49a controls the wireless communication unit 50 to transmit the divided still image from the digital video camera 2. Is determined. For example, when the still images divided by the process of step S8 in the flowchart of FIG. 18 are sequentially transmitted, it is determined that the divided still images have been transmitted, and the process proceeds to step S34.
[0129]
In step S34, the communication program 49a controls the wireless communication unit 50 to receive the divided and transmitted still images and sequentially store them in the VRAM 44. In step S35, the communication program 49a reads the progress of the still image stored in the VRAM 44, and transmits a progress notification to the image transfer program 49b.
[0130]
In step S36, the communication program 49a checks the VRAM 44, determines whether all of the transferred divided still images have been stored, and determines that all the still images have not been stored. The process returns to step S34. That is, while the still image is being transferred from the digital video camera, the processing of steps S34 to S36 is repeated.
[0131]
If it is determined in step S36 that all the still images have been stored in the VRAM 44, in step S37, the communication program 49a transmits a transfer completion notification indicating that the transfer of the still images has been completed to the image transfer program 49b. , The process returns to step S21, and the subsequent processes are repeated.
[0132]
If it is determined in step S33 that the divided still image has not been transmitted from the digital video camera 2, in step S38, the communication program 49a determines whether a remote operation command has been supplied from the image transfer program 49b. I do. For example, when the remote operation command is transmitted by the processing of step S98 of the flowchart of FIG. 24 described later, it is determined that the remote operation command is supplied, and in step S39, the transmission command determination processing described later with reference to FIG. When executed, the process returns to step S21, and the subsequent processes are repeated. If it is determined in step S38 that the remote control command has not been supplied from the image transfer program 49b, the process returns to step S21, and the subsequent processes are repeated.
[0133]
Next, the transmission command determination process executed in step S49 in FIG. 20 will be described with reference to the flowchart in FIG.
[0134]
In step S51, the communication program 49a determines whether the command supplied from the image transfer program 49b is any one of pan, tilt, and zoom, or another command (pan / tilt center or recording start / end). ) Is determined.
[0135]
Here, the supplied command will be described with reference to FIG.
[0136]
Commands supplied from the image transfer program 49b are classified into five types: recording start / end, pan / tilt center, zoom operation, pan operation, and tilt operation. Each command has a command ID, and a recording start / end command (Rec Start / Stop) (0x10) and a pan / tilt center (Pan / Tilt Center) (0xB0) are only one command for each type. The zoom operation includes 15 commands of telephoto zoom commands (Zoom_tele) 1 to 7, a zoom stop command (zoom_stop), and wide-angle zoom commands (Zoom_wide) 1 to 7 (0x81 to 0x8F). The pan operation includes 15 commands of pan left (Pan_left) 1 to 7, pan stop (Pan_stop), and pan right (Pan_right) (0x91 to 0x9F). The tilt operation includes 15 commands of leftward tilt (Tilt_left) 1 to 7, tilt stop (Tilt_stop), and rightward tilt (Tilt_right) (0xA1 to 0xAF). The number in the command indicates the speed, and the higher the number, the faster.
[0137]
Further, as a command to be transmitted to the digital video camera, there is a status request (Status_request) (0x02) for requesting that the current camera status (the status described with reference to FIG. 19) be returned.
[0138]
At the time of transmitting the preview image request (Get_Monitoringimage) (0x00), only one of these commands is added and transmitted. That is, each time the preview image of one frame changes, one command is transmitted to the digital camera 2.
[0139]
Each command will be described. The recording start / end command performs a recording start / end operation. However, this command is not one for the start and the end, but one for the set of the start and the end. That is, if this command is in a so-called toggle state and the digital video camera 2 is not in the recording state and receives this command, the digital video camera 2 starts recording and enters the recording state, and the digital video camera 2 If this command is received in the recording state, the digital video camera 2 stops recording. The zoom operation, the pan operation, and the tilt operation are commands that, when commanded once, continue the operations until a zoom stop, a pan stop, a tilt stop, or a pan / tilt center is commanded, respectively. Therefore, when the photographing direction is to be moved obliquely, if the pan and tilt are sequentially commanded, the photographing direction is moved obliquely until a corresponding stop command is issued. The pan / tilt center command is a command for returning the photographing position to the center of the photographable range.
[0140]
If it is determined in step S51 that the command supplied from the image transfer program 49b is one of pan, tilt, and zoom, in step S52, the communication program 49a is supplied from the image transfer program 49b. By storing the command based on a predetermined rule, it is determined whether or not the command of the same type as the command supplied in step S51 is already described in the command history table used for determining the transmission command. I do.
[0141]
FIG. 23 shows a command history table. In the command history table, columns for describing the command name and time are provided for each type of pan, tilt, and zoom. When a command is supplied for the first time in each type, the command name and time are described. When a new command of a certain type already described is supplied, the most recently supplied command name is described (overwritten), but the time is not overwritten. That is, as shown in FIG. 23, in the column of pan and zoom of the command history table, the name of the most recently supplied command and the supply time of the earliest supplied command are described, and the type of tilt is Is supplied, the command name and supply time are described. When a command of the pan or zoom type is supplied, only the command name is overwritten.
[0142]
That is, if it is determined in step S52 that a command of the same type has already been described in the command history table, in step S53, the communication program 49a replaces the received command with a command of the same type in the command history table. Overwrite the description (time information is not updated).
[0143]
If it is determined in step S52 that the command of the same type is not described in the command history table, in step S54, the communication program 49a transmits the received command together with the received time in the command history table. It is described where it does.
[0144]
If it is determined in step S51 that the command supplied from the image transfer program 49b is not one of pan, tilt, and zoom, that is, if it is determined that a command for pan / tilt center or recording start / end has been received, in step S55, The communication program 49a activates a flag indicating that an internal pan / tilt center command has been received or a flag indicating that a recording start / end command has been received.
[0145]
After the processing of step S53, step S54, or step S55 is completed, in step S56, the communication program 49a determines whether or not it is the request timing of the preview image.
[0146]
The extended BIP is designed so that one remote control command can be added to the request signal for acquiring the preview image. Here, the timing of the exchange of the preview image is not constant depending on the Bluetooth communication state. Further, since the remote operation command is also generated by a user operation, the command generation timing is not constant. That is, when transmitting a request for a preview image, there may be two or more remote control commands, or no remote control command. Therefore, if it is determined in step S56 that it is not the request timing of the preview image, the process proceeds to step S21 in FIG.
[0147]
If it is determined in step S56 that it is the preview image request timing, in step S57, the communication program 49a determines whether the previously transmitted command is a recording start / end command. If it is determined in step S57 that the previously transmitted command is a recording start / end command, the process proceeds to step S64 described below.
[0148]
If it is determined in step S57 that the previously transmitted command is not a command to start or end recording, in step S58, the communication program 49a determines that the value of the internal counter for counting the number of command transmissions is 5 or more. It is determined whether or not. If it is determined in step S58 that the value of the counter is 5 or more, the process proceeds to step S64 described below.
[0149]
If it is determined in step S58 that the value of the counter is not equal to or greater than 5, in step S59, the communication program 49a determines that a flag indicating that a pan / tilt center command has been received or that a recording start / end command has been received. It is determined whether or not the indicated flag is active.
[0150]
If it is determined in step S59 that the flag indicating that the pan / tilt center command has been received or the flag indicating that the recording start / end command has been received is active, in step S60, the communication program 49a sets the pan / tilt center Among the commands or the recording start / end commands, a command whose flag is active is transmitted, and the corresponding flag is made inactive. The pan / tilt center command or the recording start / end command has a priority determined in advance, and when both flags are in the active state, one of the commands is transmitted.
[0151]
If it is determined in step S59 that the flag indicating that the pan / tilt center command has been received or the flag indicating that the recording start / end command has been received is not active, in step S61, the communication program 49a executes the processing shown in FIG. The command described in the column of the type with the oldest time is transmitted with reference to the command history table described with reference to FIG.
[0152]
In step S62, the communication program 49a deletes the transmitted command together with the time information of the corresponding command type from the command history table.
[0153]
After the processing in step S60 or step S62 is completed, in step S63, the communication program 49a adds 1 to an internal counter for counting the number of command transmissions, and the processing proceeds to step S21 in FIG.
[0154]
If it is determined in step S57 that the previously transmitted command is a command to start or end recording, or if it is determined in step S58 that the value of the counter is equal to or greater than 5, communication is performed in step S64. The program 49a transmits a status request, sets the counter to 0, and the process proceeds to step S21 in FIG.
[0155]
That is, the status is requested at the next timing when the recording start or end command is transmitted, or at least once in every five preview image requests.
[0156]
In the processing described with reference to FIG. 21, the reason why the command supply time is transmitted from the command of the oldest type is to execute various commands equally. For example, when a LIFO (Last In First Out) algorithm for executing a command of the most recently supplied command type is always used, the following problems occur depending on the arrival timing of a new command.
[0157]
For example, when a rightward tilt command and a wide-angle zoom command are supplied, and then a leftward tilt command is supplied, and a timing for requesting a preview image comes, a leftward tilt command is transmitted, and the command history table includes a wide-angle command. The zoom command remains. After that, even if a plurality of commands are supplied, if a command related to tilt is supplied immediately before the request timing of the preview image, the zoom system is in spite of the fact that the user has issued a zoom command several times. Command will not be sent at all.
[0158]
In order to prevent such a problem, the command supply time is transmitted from the command of the oldest type, so that various commands are executed equally.
[0159]
The reason why the latest command among the commands of the same type is transmitted is to reflect the latest command instructed by the user. If the communication program 49a requests the digital video camera 2 to request a preview image, for example, about three times a second, all commands are sequentially transmitted to the digital video camera by a FIFO (First In First Out) algorithm. If the transmission is performed to the camera 2, a time delay occurs until the command operated by the user is executed. Therefore, the command of the transmitted type is deleted from the history, instead of leaving all the commands waiting for transmission.
[0160]
Further, if a pan stop command is supplied after the rightward pan command during the period until the remote control command is transmitted, for example, these two commands are canceled, and as a result, nothing is performed. A method of not sending any command is also conceivable. However, in order to cancel commands, it is necessary to have a rule that conflicting commands are always performed consecutively as a rule for command generation. That is, commands are supplied in the order of “telephoto zoom”, “telephoto zoom”, and “zoom stop”, and if “telephoto zoom” and “zoom stop” are canceled out, the user's latest operation, “zoom stop”, will not be performed. It is not executed, and "telephoto zoom" is executed, so unless "telephoto zoom" is supplied before "zoom stop" is supplied before the command for zoom execution is supplied , The cancellation of the command causes a situation in which the intention of the user is not reflected.
[0161]
Therefore, in the present invention, in order to avoid setting restrictions on the user's operation input, the commands are not offset.
[0162]
By doing so, with a simple processing method, the area for storing commands to be transmitted can be reduced, commands can be transmitted equally among the pan, tilt, and zoom command types, and a large number of commands can be transmitted. Even if it occurs, the time delay until command execution does not exceed a certain value.
[0163]
Next, an image transfer process by the image transfer program 49b will be described with reference to the flowchart in FIG.
[0164]
In step S81, the image transfer program 49b determines whether a monitor change notification has been received. For example, when the monitor change notification is transmitted from the communication program 49a by the processing in step S27 or step S32 in FIG. 20, the image transfer program 49b determines that the monitor change notification is received, and the processing is performed in step S27. Proceed to S82.
[0165]
In step S82, the image transfer program 49b reads the preview image or the thumbnail image stored in the VRAM 44 and, if there is a status transmitted at the same time, saves the status. After the process in step S82 ends, the process returns to step S81, and the subsequent processes are repeated.
[0166]
If it is determined in step S81 that the monitor change notification has not been received, in step S83, the image transfer program 49b determines whether a status request has been received from the image operation program 49c. If it is determined in step S83 that a status request has been made, in step S84, the image transfer program 49b notifies the image operation program 49c of the status saved in step S82. After the process in step S84 ends, the process returns to step S81, and the subsequent processes are repeated.
[0167]
If it is determined in step S83 that there has been no request for status, in step S85, the image transfer program 49b determines whether a request for a preview image or a thumbnail image has been made from the image operation program 49c. For example, when a request for a preview image or a thumbnail image is made by the processing of step S112 or S120 in the flowchart of FIG. 25 described later, it is determined that the request for the preview image or the thumbnail image has been made. The process proceeds to step S86.
[0168]
In step S86, the image transfer program 49b transmits the read preview image or thumbnail image to the image operation program 49c. After the process in step S86 ends, the process returns to step S81, and the subsequent processes are repeated.
[0169]
If it is determined in step S85 that there is no request for a thumbnail image or a preview image, in step S87, the image transfer program 49b determines whether or not a request to shoot a still image has been issued from the image operation program 49c. For example, when a still image shooting request is transmitted by the process of step S118 in FIG. 25 described later, it is determined that the still image shooting request has been received, and the process proceeds to step S88.
[0170]
In step S88, the image transfer program 49b transmits a request for capturing a still image to the communication program 49a. After the process in step S88 ends, the process returns to step S81, and the subsequent processes are repeated.
[0171]
If it is determined in step S87 that shooting of a still image has not been requested, in step S89, the image transfer program 49b determines whether a progress notification has been transmitted from the communication program 49a. For example, when the progress notification is transmitted by the process of step S35 in the flowchart of FIG. 20, it is determined that the progress notification has been transmitted, and in step S90, the image transfer program 49b receives the transmitted progress notification. And memorize. After the process in step S90 ends, the process returns to step S81, and the subsequent processes are repeated.
[0172]
If it is determined in step S89 that the progress notification has not been transmitted, in step S91, the image transfer program 49b determines whether a progress notification has been requested from the image operation program 49c. For example, when the progress notification is requested by the process of step S122 in the flowchart of FIG. 25 described later, it is determined that the progress notification is requested, and in step S92, the image transfer program 49b receives the progress notification received in the process of step S90. The notification is transmitted to the image operation program 49c. After the end of the process of the step 92, the process returns to the step S81, and the subsequent processes are repeated.
[0173]
If it is determined in step S91 that the progress notification has not been requested, in step S93, the image transfer program 49b transmits a completion notification indicating that the transfer of the still image to the VRAM 44 has been completed from the communication program 49a. Is determined. For example, when the completion notification is transmitted from the communication program 49a by the process of step S37 in the flowchart of FIG. 20, it is determined that the completion notification has been transmitted, and the process proceeds to step S94.
[0174]
In step S94, the image transfer program 49b receives the completion notification transmitted from the communication program 49a, and further notifies (transmits) the image operation program 49c. After the processing in step S94 ends, the processing returns to step S81, and the subsequent processing is repeated.
[0175]
If it is determined in step S93 that the completion notification has not been transmitted, in step S95, the image transfer program 49b determines whether a still image has been requested by the image operation program 49c. For example, when a request for a still image is transmitted from the image operation program 49c by the processing of step S125 in FIG. 25 described below, it is determined that there is a request for a still image, and in step S96, the image transfer program 49b The still image is read from the VRAM 44 and transmitted to the image operation program 49c. After the process of step 96 is completed, the process returns to step S81, and the subsequent processes are repeated.
[0176]
If it is determined in step S95 that a still image has not been requested, in step S97, the image transfer program 49b determines whether a remote operation command has been supplied from the image operation program 49c. For example, in the processing of step S115 in FIG. 25, when it is determined that an operation on the digital video camera has been input, and when the command supply and status confirmation processing described later with reference to FIG. 27 are executed, it is determined that the remote operation command has been supplied. Therefore, in step S98, the image transfer program 49b transmits a remote control command to the communication program 49a, and the process returns to step S81, and the subsequent processes are repeated. If it is determined in step S97 that the remote operation command has not been supplied, the process returns to step S81, and the subsequent processes are repeated.
[0177]
Next, operation processing by the image operation program 49c will be described with reference to the flowchart in FIG.
[0178]
In step S111, the image operation program 49a determines whether a predetermined time has elapsed. If it is determined that the predetermined time has elapsed, the process proceeds to step S112.
[0179]
In step S112, the image operation program 49c requests a preview image from the image transfer program 49b. With this process, the process of step S86 in the flowchart of FIG. 24 is executed, and the preview image is transmitted from the image transfer program 49b. Then, the image operation program 49c receives the transmitted preview image in step S113, displays the preview image on the display unit 218 shown in FIG. 8, for example, in step S114, and the processing proceeds to step S127. .
[0180]
If it is determined in step S111 that the predetermined time has not elapsed, in step S115, the image operation program 49c, for example, inputs the pan, tilt, zoom, and recording start / input to the controller 219 in FIG. It is determined whether an operation input to the digital video camera 2, such as end, pan / tilt center, etc., has been executed.
[0181]
If it is determined in step S115 that an operation input to the digital video camera 2 has been performed, a command supply and status confirmation process, which will be described later with reference to FIG. 27, is performed in step S116.
[0182]
If it is determined in step S115 that the operation input to the digital video camera 2 has not been performed, or after the processing in step S116 has been completed, in step S117, the image operation program 49c determines whether or not a request to shoot a still image has been issued. Judge. For example, when the display screen in the still image mode is displayed as shown in FIG. 8, when the photographing button 231a is operated, the image operation program 49c determines that the photographing of the still image is requested, and performs the processing. Proceeds to step S118.
[0183]
In step S118, the image operation program 49c transmits a still image shooting request to the image transfer program 49b.
[0184]
In step S119, the image operation program 49c determines whether a predetermined time has elapsed, and repeats the processing until the predetermined time has elapsed. If it is determined in step S119 that the predetermined time has elapsed, in step S120, the image operation program 49c requests a thumbnail image or a preview image (issues a preview image request) to the image transfer program 49b.
[0185]
Based on this request, for example, a thumbnail image or a preview image is transmitted by the process of step S86 in the flowchart of FIG.
[0186]
Then, in step S121, the image operation program 49c receives (acquires) and displays the preview image or the thumbnail image transmitted from the image transfer program. More precisely, basically, the preview image is transmitted, but only when the thumbnail image is received in the process of step S82, the thumbnail image is received. For example, as shown in FIG. The image is displayed as in an image 217b, and otherwise, the preview image is received and displayed as shown by the display unit 218 in FIG.
[0187]
In step S122, the image operation program 49c requests a progress notification from the image transfer program 49b. By this processing, for example, a progress notification is transmitted in step S92 of the flowchart in FIG. Then, in step S123, the image operation program 49c displays the progress of the still image transfer based on the received progress notification. That is, the image operation program 49c displays a progress bar 311 indicating the transfer state, for example, as shown in FIG. 26, in order to notify the user of the progress in the transfer of the still image. The progress bar 311 indicates the progress status by a white square in the figure. If the overall progress status is 0%, the progress bar 311 displays a status without a white square. If the progress status is 50%, the progress bar 311 indicates the progress status. White cells are displayed from the left to the center, and in the case of 100%, the entire range of the progress bar is displayed as white cells.
[0188]
In step S124, the image operation program 49c determines whether or not a completion notification has been received from the image transfer program 49b. If it is determined that the completion notification has not been received, the process returns to step S119. That is, the processing of steps S119 to S124 is repeated until the completion notification is received.
[0189]
For example, if a completion notification has been transmitted by the process of step S94 in the flowchart of FIG. 24, it is determined in step S124 that the completion notification has been received. Therefore, in step S125, the image operation program 49c Request a still image. Then, a still image is transmitted by the process of step S96 in the flowchart of FIG. Therefore, in step S126, the image operation program 49c receives the still image transmitted by the image transfer program 49b and displays it on, for example, the display unit 218 in FIG. 9, and the process proceeds to step S127.
[0190]
If it is determined in step S117 that the photographing of the still image has not been requested, or after the process of step S126 has been completed, in step S127, the image operation program 49c determines whether or not the recording of the moving image has been requested. . For example, when the recording button 231b shown in FIG. 10 is operated, the image operation program 49c determines that recording of a moving image has been requested, and the process proceeds to step S128.
[0191]
In step S128, the image operation program 49c records the current preview image received in the processing in step S113.
[0192]
In step S129, the image operation program 49c determines whether termination is requested. For example, when it is determined that the recording has been continued and the recording has not been completed, in step S130, the image operation program 49c determines whether or not a predetermined time has elapsed. If the process is repeated and it is determined that the predetermined time has elapsed, the process proceeds to step S131.
[0193]
In step S131, the image operation program 49c requests a preview image to the image transfer program 49b (issues a request). With this processing, the preview image is transmitted by the processing of step S86 in the flowchart of FIG. Therefore, in step S132, the image operation program 49c receives the transmitted preview image, and the processing returns to step S128. At this time, in step S128, the image operation program 49c records (acquires and records) the newly received preview image. Then, in step S129, the processes in steps S128 to S132 are repeated and recording is performed until it is determined that the end is instructed.
[0194]
In step S129, for example, when it is determined that the end button 231c shown in FIG. 11 has been operated and the end has been instructed, or in step S127, it has been determined that the recording has not been instructed, the processing is performed. , The process returns to step S111, and the subsequent processes are repeated.
[0195]
Next, the command supply and status confirmation processing executed in step S116 in FIG. 25 will be described with reference to the flowchart in FIG.
[0196]
In step S151, the image operation program 49c supplies a command based on a user's operation input to the controller 219 to the image transfer program 49b.
[0197]
In step S152, the image operation program 49c determines whether the user's operation input to the controller 219 is pan or tilt. If it is determined in step S152 that the user's operation input is neither pan nor tilt, the process proceeds to step S117 in FIG.
[0198]
If it is determined in step S152 that the user's operation input is either pan or tilt, the image operation program 49c starts counting the internal timer in step S153, and in step S154, It is determined whether a predetermined time has elapsed. If it is determined in step S154 that the predetermined time has not elapsed, the process of step S154 is repeated until it is determined that the predetermined time has elapsed.
[0199]
If it is determined in step S154 that the predetermined time has elapsed, in step S155, the image operation program 49c acquires the status held by the image transfer program 49b.
[0200]
The acquired status will be described with reference to FIG.
[0201]
As described with reference to FIG. 19, the status indicates four states: a recording state, a pan state, a tilt state, and a zoom state. As shown in FIG. 28A, the pan state status indicates a state where panning is stopped (Pan stop) with a code 0X00, and a state where panning is performed leftward (Pan Left) with a code 0X01. A code 0X02 indicates a state in which panning is performed in the right direction (Pan Right). Then, as shown in FIG. 28B, the tilt status indicates a state in which the tilt is stopped (Tilt stop) with code 0X00, and a state in which the tilt is upward (Tilt Up) with code 0X01. A code 0X02 indicates that the camera is tilted downward (Tilt Down).
[0202]
In step S156, the image operation program 49c refers to the obtained status to determine whether the screen has been moved in a direction in which a user operation input has been received. In other words, if the status acquired in the state where the panning in the right direction is instructed indicates the state of panning right (Pan Right) with the code 0X02, the direction in which the operation input by the user is received It is determined that the screen has been moved to step S117, and the process proceeds to step S117 in FIG.
[0203]
On the other hand, when the status acquired in the state where the panning in the right direction is commanded indicates the code 0X00 and the panning is stopped (Pan stop), the state in which the panning in the left direction is commanded In the case where the status obtained at the time is a code 0X00 and indicates a state where panning is stopped (Pan stop), the status obtained at the time when the upward tilt is commanded is a code 0X00 and the tilt is Indicates a stopped state (Tilt stop), or a state obtained in a state where a downward tilt is instructed is a code 0X00, and the tilt is stopped (Tilt stop). Indicates that the screen has not been moved in the direction That is, since it is detected that the shooting position is at the end of the predetermined range in which shooting is possible, in step S157, the image operation program 49c notifies the user that the shooting position is at the end of the shooting range. After executing the display process, the process proceeds to step S117 in FIG.
[0204]
Specifically, the image operation program 49c determines that the shooting direction of the digital video camera 2 is at the limit position of the shootable range and the shooting direction cannot be changed any more, as described with reference to FIG. 17, the pan / tilt button 223 being operated by the user is blinked, the display of the pan / tilt button 223 is inverted in the negative / positive manner, or the display color is changed. As described with reference to FIG. Of the mouse cursor icon 261 is blinked or the display color of the mouse cursor icon 261 is changed. By confirming these displays, the user can recognize that the shooting direction cannot be further moved in the corresponding operation input direction.
[0205]
Note that when the user is operating the pan / tilt button 223 in FIG. 16 or the mouse cursor icon 261 in FIG. 17 to input an operation for changing the shooting direction, the shooting direction of the digital video camera 2 is changed to the shooting direction. If the photographing direction cannot be changed any more, it becomes the limit position of the possible range.For example, a message window with a message "Cannot change the photographing direction any more" is displayed, or a predetermined not shown By turning on or off the LED, generating a buzzer sound, or notifying by a voice message, the user may be notified that the shooting direction cannot be changed any more.
[0206]
Next, with reference to the timing chart of FIG. 29, the relationship between the processing of the digital video camera 2, the communication program 49a, the image transfer program 49b, and the image operation program 49c for the process of displaying the preview image will be described. Since each process has been described with reference to the flowcharts of FIGS. 18 to 27, only the mutual relationship will be described.
[0207]
First, the communication program 49a requests a preview image by the process of step S23. In response to this request, the digital video camera 2 acquires the preview image stored in the memory 87 and transmits the preview image to the communication program 49a by the process of step S2.
[0208]
In step S25, the communication program 49a receives the transmitted preview image and stores it in the VRAM 44, and in step S27, sends a monitor change notification to the image transfer program 49b.
[0209]
In response to the monitor change notification transmitted from the communication program 49a, the image transfer program 49b reads and acquires the preview image from the VRAM 44 in step S82.
[0210]
In the image operation program 49c, since the processing of steps S111 to S114 is repeated at predetermined time intervals, the preview image is requested to the image transfer program 49b by the processing of step S112 at predetermined time intervals.
[0211]
Based on this request, the image transfer program 49b transmits the preview image obtained in the process of step S82 to the image operation program 49c in step S86.
[0212]
The image operation program 49c receives the preview image in step S113, and displays the received preview image in step S114.
[0213]
When the communication program 49a requests the preview image again by the process of step S23, the above process is repeated, and the preview image is continuously displayed on the display unit 218.
[0214]
With the above processing, it is possible to check in real time what is being photographed on the personal computer 1 in the digital video camera 2 installed in a remote place.
[0215]
Next, with reference to the timing chart of FIG. 30, a process for requesting the photographing of a still image and displaying the photographed still image is described in the digital video camera 2, the communication program 49a, the image transfer program 49b, and the image operation program. The relationship between the respective processes of 49c will be described. Since each process has been described with reference to the flowcharts of FIGS. 18 to 27, only the mutual relationship will be described.
[0216]
In step S118, the image operation program 49c requests the still image capture to the image transfer program 49b. In response to this, in step S88, the image transfer program 49b requests the communication program 49a to shoot a still image. Further, in response to this request, in step S29, the communication program 49a requests the digital video camera 2 to shoot a still image.
[0219]
In step S4, the digital video camera 2 shoots a still image in response to the still image shooting request, and in step S5 converts the still image into a thumbnail image and transmits the thumbnail image to the personal computer 1 (communication program 49a). In step S31, the communication program 49a receives the transmitted thumbnail image and stores it in the VRAM 44. In step S32, the communication program 49a transmits a monitor change notification indicating that the thumbnail image has been stored in the VRAM 44 to the image transfer program 49b. At the same time, it requests the digital video camera 2 to transfer a still image.
[0218]
Here, the digital video camera 2 receives the transfer request of the still image, divides the image data of the still image in step S7, and converts the image data of the still image divided in order in step S8 into the personal computer 1 (communication). It is transmitted to the program 49a).
[0219]
In step S34, the communication program 49a sequentially stores the transmitted image data of the divided still images in the VRAM 44, and in step S35, transmits a progress notification to the image transfer program 49b. In this process, the processes in steps S34 to S36 are repeated until it is determined in step S36 that all the divided still images have been stored in the VRAM 44 (that is, although not shown in FIG. 30, step S34). , S35 may be repeated).
[0220]
At this time, in step S90, the image transfer program 49b receives the progress notification transmitted from the communication program 49a in step S35.
[0221]
When all of the divided still images have been transferred to the VRAM 44, in step S37, the communication program 49a sends a transfer completion notification indicating that the still image has been transferred to the VRAM 44 to the image transfer program 49b. Send to
[0222]
On the other hand, according to the monitor change notification indicating that the thumbnail image transmitted from the communication program 49a is stored in the VRAM 44 in the process of step S32, the image transfer program 49b executes the thumbnail image stored in the VRAM 44 in step S82. To get.
[0223]
At this time, the image operation program 49c repeats the processing of steps S119 to S124 at predetermined time intervals until the transfer completion notification is transmitted from the image transfer program 49b. Therefore, in step S120, the image operation program 49c requests the preview image or the thumbnail image from the image transfer program 49b.
[0224]
In response to this request, the image transfer program 49b transmits the thumbnail image or the preview image to the image operation program 49c in step S86.
[0225]
Note that the image transfer program 49b transmits the thumbnail image to the image operation program 49c immediately after receiving the thumbnail image, and transmits a preview image otherwise. That is, the process of displaying the preview image shown in FIG. 29 is executed even when a still image shooting is requested.
[0226]
In step S121, the image operation program 49c receives and displays the thumbnail image or the preview image transmitted in the processing in step S86.
[0227]
Further, the image operation program 49c requests a progress notification from the image transfer program 49b at predetermined time intervals. At this time, as described above, the image transfer program 49b transmits the progress notification received in the processing of Step S90 to the image operation program 49c in Step S92.
[0228]
In step S123, the image operation program 49c receives and displays the progress notification transmitted from the image transfer program 49b. As described above, the processing from step S34 to step S36 is repeated until all the divided still images are transferred to the VRAM 44. Therefore, the processing in step S90 and step S92, and the processing in step S122 and step S123 are also performed. Are repeated at predetermined time intervals until all the divided still images are transferred to the VRAM 44.
[0229]
When the completion notification is transmitted by the process of step S37, the image transfer program 49b receives the completion notification from the communication program 49a and transmits the transfer completion to the image operation program 49c by the process of step S94. Send notifications.
[0230]
When the transfer completion notification is transmitted from the image transfer program 49b, the image operation program 49c requests the still image from the image transfer program 49b in step S125.
[0231]
In response to this request, in step S96, the image transfer program 49b transmits the still image stored in the VRAM 44 to the image operation program 49c. In step S126, the image operation program 49c receives and displays the transmitted still image.
[0232]
According to the above processing, even when the digital video camera 2 is located at a remote location, a still image can be captured by the personal computer 1, and the captured still image can be received and displayed by the personal computer 1 from a remote location. It becomes possible.
[0233]
In addition, in the case of shooting a moving image, in the above-described method of shooting a still image, it takes time to transfer the image. Therefore, the image operation program 49c records the preview image continuously. That is, as shown in FIG. 31, the processes of steps S131 and S128 are executed instead of the processes of steps S112 and S114 of FIG. A moving image can be recorded by such processing.
[0234]
Further, when capturing a fixed point observation image, the interval at which the preview image is recorded in step S128 in the timing chart of FIG. 31 is adjusted. That is, one of the recorded preview images is recorded as a still image constituting the fixed-point observation image, so that the fixed-point observation image can be captured.
[0235]
The communication program 49a requests a preview image (step S2), and when the preview image is received and stored (step S25), requests the preview image again (step S2). Is repeated, but the required time is not constant depending on the communication environment, the communication distance, and the like because the wireless communication unit 50 and the wireless communication unit 101 are used.
[0236]
On the other hand, when displaying the preview image (when photographing of a still image or recording of a moving image is not requested), the image operation program 49c requests an image from the image transfer program 49b at a predetermined time interval (step S111). Then, in response to this request, the image transfer program 49b transmits the preview image read from the VRAM 44 every time the monitor change is notified (step S82) (step S86). As a result, the preview image read from the VRAM 44 is transmitted to and received by the image operation program 49c (step S113), so that the preview image is read from the VRAM 44 at predetermined time intervals and displayed. Become.
[0237]
Therefore, when it is desired to receive an image at 10 fps, for example, the image operation program 49a sets the above-mentioned predetermined time interval to 100 ms and requests the image transfer program 49b for an image. At this time, since the image operation program 49c and the image transfer program 49b are on the personal computer 1, the transfer time is very short. Therefore, the digital video camera 2 may not be able to provide an image at a desired frame rate. Depending on the timing at which a request for a preview image is issued to the image transfer program 49b, the same image may be returned, but the image operation program 49c can obtain a preview image at a desired frame rate. The preview image obtained in this manner is an image having a constant frame rate, and thus can be easily handled as data.
[0238]
According to the above, it is possible to monitor, as a preview image, an image that can be photographed by the digital video camera 2 at a remote place, and to display an image (still image, moving image, or (Including a fixed-point observation image), and the captured image can be confirmed at a remote location.
[0239]
Next, referring to the timing charts of FIGS. 32 and 33, the personal computer 1 transmits a remote control command to the digital video camera 2 and, if necessary, refers to the status, thereby performing pan and pan. A description will be given of the relationship between the respective processes of the digital video camera 2, the communication program 49a, the image transfer program 49b, and the image operation program 49c in the case of executing a display process for detecting a tilt operation limit and notifying the user. I do. Note that each process has been described with reference to the flowcharts of FIGS.
[0240]
In step S115, when the image operation program 49c determines that an operation input to the digital video camera 2, that is, an operation input to the controller 219 has been received, in step S116, command supply and status confirmation processing are executed, and in step S151, , A remote operation command is transmitted to the image transfer program 49b. In response to this, in step S98, the image transfer program 49b transmits a remote operation command to the communication program 49a. Further, in response to this, in step S39, the communication program 49a executes a transmission command determination process. If it is determined that it is not the transmission timing of the preview image, no signal is transmitted to the digital video camera 2.
[0241]
Further, if the image operation program 49c determines in step S115 that an operation input to the digital video camera 2, that is, an operation input to the controller 219 has been received, command supply and status confirmation processing are executed in step S116. In step S151, a remote control command is transmitted to the image transfer program 49b. In response to this, in step S98, the image transfer program 49b transmits a remote operation command to the communication program 49a. Further, in response to this, in step S39, the communication program 49a executes a transmission command determination process. Here, it is the transmission timing of the preview image, and when it is determined that the status request is transmitted, the communication program 49a sends the digital video camera 2 a remote control command indicating the preview image request and the status request in step S24. Send
[0242]
In response to the request, the digital video camera 2 transmits the preview image and the status stored in the memory 87 to the communication program 49a by the processes of steps S2 and S10.
[0243]
In step S25, the communication program 49a receives the transmitted preview image and stores it in the VRAM 44, and in step S27, transmits a monitor change notification and a status to the image transfer program 49b.
[0244]
In step S82, the image transfer program 49b reads and acquires the preview image from the VRAM 44 and stores the status in response to the monitor change notification transmitted from the communication program 49a.
[0245]
Further, if the image operation program 49c determines in step S115 that an operation input to the digital video camera 2, that is, an operation input to the controller 219 has been received, command supply and status confirmation processing are executed in step S116. In step S151, a remote control command is transmitted to the image transfer program 49b. In response to this, in step S98, the image transfer program 49b transmits a remote operation command to the communication program 49a. Further, in response to this, in step S39, the communication program 49a executes a transmission command determination process. Here, when it is the transmission timing of the preview image, and it is determined that any of the pan, tilt, and zoom commands is transmitted, the communication program 49a sends the preview image to the digital video camera 2 in step S24. And a remote control command of any of pan, tilt, and zoom is transmitted.
[0246]
In response to this request, the digital video camera 2 executes the processing corresponding to the supplied remote control command by the processing of step S10, and executes the preview image stored in the memory 87 by the processing of step S2. It is transmitted to the communication program 49a.
[0247]
In step S25, the communication program 49a receives the transmitted preview image and stores it in the VRAM 44, and in step S27, transmits a monitor change notification to the image transfer program 49b.
[0248]
In step S82, the image transfer program 49b reads and acquires the preview image from the VRAM 44 according to the monitor change notification transmitted from the communication program 49a.
[0249]
Further, when the operation input in step S115 is a command for panning or tilting, the image operation program 49c executes a process of acquiring the status held in the image transfer program 49b in step S155. If the image operation program 49c detects the end of the photographable range in step S156 based on the acquired status, the image operation program 49c executes display processing for notifying the user in step S157.
[0250]
By such processing, even when a plurality of commands are generated in the personal computer 1 during a period between transmission of a request for a preview image and transmission of a request for the next preview image, the plurality of commands among the plurality of commands are generated. , The most appropriate command is selected and transmitted to the digital video camera 2, so that the command corresponding to the operation input by the user to the personal computer 1 can be efficiently transmitted to the digital video camera without performing complicated command transmission / reception processing. 2 can be executed. Further, when the user performs a pan or tilt operation input using the personal computer 1 on the digital video camera 2 installed in a remote place, the personal computer 1 uses an image in the shooting range by complicated processing. It is possible to detect the end of the photographing range of the digital video camera 2 and generate a simple process to notify the user of the end of the photographing range in a display method that is easy for the user to understand without generating such information. Become.
[0251]
Further, the present invention can be realized in various information processing apparatuses such as a PDA and a mobile phone, other than the personal computer 1. In the present invention, for example, when a small information processing device such as a PDA or a mobile phone is used, in order to inform the user that the end of the shooting range has been detected, a display method is changed or characters or voices are used. Not only a message but also a driving unit (not shown) for notifying a user of a predetermined information by generating vibration in a part or the whole of a small information processing device such as a PDA or a portable telephone in the output unit 48. By driving the drive unit and vibrating the device by the processing of the CPU 41, it is possible to notify the user that the pan or tilt operation cannot be performed any more.
[0252]
Further, the device to be remotely controlled is also a device capable of exchanging information with an information processing device such as a personal computer 1 to which the present invention is applied, such as a digital still camera, a camera-equipped mobile phone, or a PDA. For example, a device other than the digital video camera 2 may be used.
[0253]
An information processing apparatus such as a personal computer 1, a PDA, or a mobile phone to which the present invention is applied, and a digital video camera 2, a digital still camera, a camera-equipped mobile phone, It is needless to say that communication with a device such as a PDA is not limited to wireless communication but may be wired communication using a cable or the like.
[0254]
The series of processes described above can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, a program constituting the software may be executed by a computer built into dedicated hardware or by installing various programs to execute various functions. It is installed from a recording medium into a possible general-purpose personal computer or the like.
[0255]
This recording medium is provided to the user in a state where it is incorporated in the personal computer 1 in advance as shown in FIG. 2, and is provided to the user separately from the computer in addition to the storage unit 48 in which the program is recorded. A magnetic disk 61 (including a flexible disk) on which a program is recorded, an optical disk 62 (including a CD-ROM (Compact Disk-Read Only Memory), a DVD (Digital Versatile Disk)), a magneto-optical It is constituted by a package medium including a disk 63 (including MD (Mini-Disc) (registered trademark)) or a semiconductor memory 64 (including Memory Stick).
[0256]
In the present specification, the step of describing a program recorded on a recording medium may be performed in a chronological order according to the described order. Alternatively, the processing includes individually executed processing.
[0257]
Also, in this specification, a system represents the entire device including a plurality of devices.
[0258]
【The invention's effect】
According to the present invention, an image (including a still image, a moving image, or a fixed-point observation image) can be captured by a remote imaging device, and in particular, information transmitted to another information processing apparatus is minimized. In addition, it becomes possible to perform necessary operations on other information processing apparatuses.
[Brief description of the drawings]
FIG. 1 is a block diagram of a wireless imaging system to which the present invention is applied.
FIG. 2 is a block diagram showing a configuration of the personal computer of FIG.
FIG. 3 is a block diagram showing a configuration of the digital video camera of FIG.
FIG. 4 is a functional block diagram illustrating functions realized by the wireless imaging system in FIG. 1;
FIG. 5 is a diagram illustrating an example of a display image according to a communication program.
FIG. 6 is a diagram illustrating another example of a display image according to a communication program.
FIG. 7 is a diagram showing an example of a display image by the image operation program.
FIG. 8 is a diagram showing an example of a display image by the image operation program.
FIG. 9 is a diagram illustrating an example of a display image according to the image operation program.
FIG. 10 is a diagram showing an example of a display image by an image operation program.
FIG. 11 is a diagram showing an example of a display image by the image operation program.
FIG. 12 is a diagram showing an example of a display image by the image operation program.
FIG. 13 is a diagram showing an example of a display image by the image operation program.
FIG. 14 is a diagram showing an example of a display image by the image operation program.
FIG. 15 is a diagram showing an example of a display image by the image operation program.
FIG. 16 is a diagram showing an example of a display image by the image operation program.
FIG. 17 is a diagram showing an example of a display image by the image operation program.
FIG. 18 is a flowchart illustrating a photographing process performed by a digital video camera.
FIG. 19 is a diagram illustrating a status.
FIG. 20 is a flowchart illustrating communication processing by a communication program.
FIG. 21 is a flowchart illustrating a transmission command determination process.
FIG. 22 is a diagram illustrating a command.
FIG. 23 is a diagram illustrating a command history table.
FIG. 24 is a flowchart illustrating a transfer process by an image transfer program.
FIG. 25 is a flowchart illustrating operation processing by an image operation program.
FIG. 26 is a diagram illustrating an example of a display image according to the image operation program.
FIG. 27 is a flowchart illustrating command supply and status confirmation processing.
FIG. 28 is a diagram illustrating a status.
FIG. 29 is a timing chart when a preview image is displayed.
FIG. 30 is a timing chart when capturing a still image.
FIG. 31 is a timing chart when recording a moving image.
FIG. 32 is a timing chart when a remote operation command is transmitted.
FIG. 33 is a timing chart when a remote operation command is transmitted.
[Explanation of symbols]
1 personal computer, 2 digital video camera, 41 CPU, 47 operation input section, 43 RAM, 49a communication program, 49b image transfer program, 49c image operation program, 50 wireless communication section, 87 memory, 93 compression / decompression section, 95 memory card , 96 CPU, 101 wireless communication unit

Claims (15)

他の情報処理装置と通信可能な情報処理装置において、
前記他の情報処理装置と通信し、情報の送受信を行う送受信手段と、
ユーザの操作入力を受ける操作入力手段と、
前記操作入力手段により入力された前記ユーザの操作入力を基に、前記送受信手段による、前記他の情報処理装置への制御信号の送信を制御する制御手段と
を備え、
前記操作入力手段により入力された前記ユーザの操作入力は、複数の種別に分類され、複数の前記種別のうち、優先種別として、少なくともひとつの第1の種別が設定され、
前記制御手段は、所定の期間中に前記操作入力手段により前記第1の種別の前記操作入力を含む複数の操作入力を受けた場合、前記第1の種別の前記操作入力に対応する前記制御信号の送信を制御する
ことを特徴とする情報処理装置。
In an information processing device capable of communicating with another information processing device,
A transmission / reception unit that communicates with the other information processing apparatus and transmits / receives information;
Operation input means for receiving an operation input by a user;
Control means for controlling transmission of a control signal to the other information processing device by the transmission / reception means based on the operation input of the user input by the operation input means,
The user's operation input input by the operation input unit is classified into a plurality of types, and among the plurality of types, at least one first type is set as a priority type,
The control means, when receiving a plurality of operation inputs including the first type of operation input by the operation input means during a predetermined period, the control signal corresponding to the first type of operation input An information processing apparatus characterized by controlling transmission of a message.
前記制御手段は、前記所定の期間中に、前記第1の種別に対応する操作入力を受けなかった場合、前記第1の種別以外の複数の第2の種別において、最も早く操作入力を受けた前記第2の種別の操作入力に対応する前記制御信号の送信を制御する
ことを特徴とする請求項1に記載の情報処理装置。
If the control unit does not receive an operation input corresponding to the first type during the predetermined period, the control unit receives the operation input first among a plurality of second types other than the first type. The information processing apparatus according to claim 1, wherein transmission of the control signal corresponding to the second type of operation input is controlled.
前記第2の種別の前記操作入力には、複数の前記操作入力が対応し、
前記制御手段は、前記所定の期間中に、前記第1の種別に対応する操作入力を受けなかった場合、前記第1の種別以外の複数の第2の種別において、最も早く操作入力を受けた前記第2の種別と同一の種別の操作入力のうち、最も後に受けた操作入力に対応する前記制御信号の送信を制御する
ことを特徴とする請求項2に記載の情報処理装置。
A plurality of the operation inputs correspond to the operation input of the second type,
If the control unit does not receive an operation input corresponding to the first type during the predetermined period, the control unit receives the operation input first among a plurality of second types other than the first type. The information processing apparatus according to claim 2, wherein transmission of the control signal corresponding to an operation input received last among the operation inputs of the same type as the second type is controlled.
前記制御手段は、
前記制御信号を前記第2の種別ごとに記憶するテーブルへの、前記操作入力手段により入力された前記操作入力に対応する前記制御信号および時刻情報の記載を更に制御し、
所定の第2の種別に対応する初めての操作入力である第1の操作入力が実行された場合、前記テーブルに、前記第1の操作入力に対応する前記制御信号と対応する時刻情報を記載し、すでに前記制御信号および前記時刻情報が記載されている前記第2の種別に対応する第2の操作入力が実行された場合、前記テーブルの前記第1の操作入力に対応する時刻情報は保持し、前記第1の操作入力に対応する前記制御信号に前記第2の操作入力に対応する前記制御信号を上書きし、
前記所定の期間が経過したと判断された場合、前記テーブルに記載されている前記時刻情報のうち、最も早い時刻を示す時刻情報に対応されている前記制御信号の送信を制御する
ことを特徴とする請求項3に記載の情報処理装置。
The control means,
Further controlling the description of the control signal and the time information corresponding to the operation input input by the operation input means to a table storing the control signal for each of the second types,
When the first operation input, which is the first operation input corresponding to the predetermined second type, is executed, the time information corresponding to the control signal corresponding to the first operation input is described in the table. When a second operation input corresponding to the second type in which the control signal and the time information are already described is executed, the time information corresponding to the first operation input in the table is held. Overwriting the control signal corresponding to the second operation input with the control signal corresponding to the first operation input,
When it is determined that the predetermined period has elapsed, among the time information described in the table, controlling the transmission of the control signal corresponding to the time information indicating the earliest time, The information processing apparatus according to claim 3, wherein:
前記所定の期間とは、前記他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号が、前記他の情報処理装置へ送出されてから、次に送出されるまでの期間であり、
前記制御手段は、前記転送要求信号とともに前記制御信号が前記他の情報処理装置へ送信されるように、前記制御信号の送信を制御する
ことを特徴とする請求項1に記載の情報処理装置。
The predetermined period is a period from when a transfer request signal for requesting to transfer image information captured by the other information processing device is transmitted to the other information processing device until the next transmission is performed. Period.
The information processing apparatus according to claim 1, wherein the control unit controls transmission of the control signal so that the control signal is transmitted to the another information processing apparatus together with the transfer request signal.
前記他の情報処理装置から送信され、前記送受信手段によって、受信された画像情報を表示する表示手段
を更に備えることを特徴とする請求項1に記載の情報処理装置。
The information processing apparatus according to claim 1, further comprising a display unit that displays image information transmitted from the another information processing apparatus and received by the transmission / reception unit.
前記送受信手段は、他の情報処理装置と無線で通信する
ことを特徴とする請求項1に記載の情報処理装置。
The information processing apparatus according to claim 1, wherein the transmission / reception unit wirelessly communicates with another information processing apparatus.
他の情報処理装置と通信可能な情報処理装置の情報処理方法において、
ユーザの操作入力が、複数の種別のうち、優先種別として設定されている種別の操作入力であるか否かを判断する判断ステップと、
前記判断ステップの処理により、前記ユーザの操作入力は、前記優先種別として設定されている種別の操作入力であると判断された場合、前記優先種別として設定されている種別の操作入力に対応する制御信号の送信を制御する送信制御ステップと
を含むことを特徴とする情報処理方法。
In an information processing method of an information processing device capable of communicating with another information processing device,
A determining step of determining whether or not the user's operation input is an operation input of a type set as a priority type among a plurality of types;
When it is determined that the user's operation input is the operation input of the type set as the priority type by the processing of the determining step, the control corresponding to the operation input of the type set as the priority type is performed. A transmission control step of controlling signal transmission.
他の情報処理装置と通信可能する処理をコンピュータに実行させるプログラムであって、
ユーザの操作入力が、複数の種別のうち、優先種別として設定されている種別の操作入力であるか否かを判断する判断ステップと、
前記判断ステップの処理により、前記ユーザの操作入力は、前記優先種別として設定されている種別の操作入力であると判断された場合、前記優先種別として設定されている種別の操作入力に対応する制御信号の送信を制御する送信制御ステップと
を含むことを特徴とするプログラム。
A program that causes a computer to execute a process capable of communicating with another information processing device,
A determining step of determining whether or not the user's operation input is an operation input of a type set as a priority type among a plurality of types;
When it is determined that the user's operation input is the operation input of the type set as the priority type by the processing of the determining step, the control corresponding to the operation input of the type set as the priority type is performed. A transmission control step of controlling signal transmission.
他の情報処理装置と通信可能な情報処理装置において、
前記他の情報処理装置と通信し、情報の送受信を行う送受信手段と、
ユーザの操作入力を受ける操作入力手段と、
前記操作入力手段により入力された前記ユーザの操作入力を基に、前記送受信手段による、前記他の情報処理装置への制御信号の送信を制御する制御手段と
を備え、
前記操作入力手段により入力された前記ユーザの操作入力は、複数の種別に分類され、複数の前記種別のうち、少なくともひとつの優先種別が設定され、
前記制御手段は、前に送信された前記制御信号が、所定の第1の制御信号である場合、前記第1の制御信号に基づいて実行される前記他の情報処理装置の処理を確認するための第2の制御信号の送信を制御し、前に送信された前記制御信号が前記第1の制御信号ではなく、所定の期間中に前記操作入力手段により前記優先種別の操作入力を含む複数の操作入力を受けた場合、前記優先種別の前記操作入力に対応する第3の制御信号の送信を制御する
ことを特徴とする情報処理装置。
In an information processing device capable of communicating with another information processing device,
A transmission / reception unit that communicates with the other information processing apparatus and transmits / receives information;
Operation input means for receiving an operation input by a user;
Control means for controlling transmission of a control signal to the other information processing device by the transmission / reception means based on the operation input of the user input by the operation input means,
The user's operation input input by the operation input unit is classified into a plurality of types, and among the plurality of types, at least one priority type is set,
The control unit is configured to, when the previously transmitted control signal is a predetermined first control signal, confirm a process of the other information processing device performed based on the first control signal. Controlling the transmission of the second control signal, wherein the previously transmitted control signal is not the first control signal, but includes a plurality of operations including the operation input of the priority type by the operation input means during a predetermined period. An information processing apparatus, comprising: when receiving an operation input, controlling transmission of a third control signal corresponding to the operation input of the priority type.
他の情報処理装置と通信可能な情報処理装置の情報処理方法において、
ユーザの操作入力を受ける操作入力ステップと、
前回送信された制御信号が、所定の第1の制御信号であるか否かを判断する第1の判断ステップと、
前記第1の判断ステップの処理により、前回送信された制御信号は、前記第1の制御信号であると判断された場合、前記第1の制御信号による前記他の情報処理装置の処理を確認するための第2の制御信号の送信を制御する第1の送信制御ステップと、
前記第1の判断ステップの処理により、前回送信された制御信号は、前記第1の制御信号ではないと判断された場合、前記操作入力ステップの処理により入力された前記ユーザの操作入力は、複数の種別のうちの優先種別に対応する操作入力であるか否かを判断する第2の判断ステップと、
前記第2の判断ステップの処理により、前記ユーザの操作入力は、前記優先種別であると判断された場合、前記優先種別の前記操作入力に対応する第3の制御信号の送信を制御する送信制御ステップと
を含むことを特徴とする情報処理方法。
In an information processing method of an information processing device capable of communicating with another information processing device,
An operation input step for receiving an operation input by the user;
A first determining step of determining whether the previously transmitted control signal is a predetermined first control signal;
When it is determined that the control signal transmitted last time is the first control signal by the processing of the first determining step, the processing of the other information processing device by the first control signal is confirmed. A first transmission control step of controlling transmission of a second control signal for
When it is determined that the control signal transmitted last time is not the first control signal by the processing of the first determination step, the operation input of the user input by the processing of the operation input step is plural. A second determining step of determining whether the input is an operation input corresponding to a priority type of the types;
Transmission control for controlling transmission of a third control signal corresponding to the operation input of the priority type when it is determined by the processing of the second determination step that the operation input of the user is the priority type. And an information processing method.
他の情報処理装置と通信する処理をコンピュータに実行させるためのプログラムであって、
ユーザの操作入力を受ける操作入力ステップと、
前回送信された制御信号が、所定の第1の制御信号であるか否かを判断する第1の判断ステップと、
前記第1の判断ステップの処理により、前回送信された制御信号は、前記第1の制御信号であると判断された場合、前記第1の制御信号による前記他の情報処理装置の処理を確認するための第2の制御信号の送信を制御する第1の送信制御ステップと、
前記第1の判断ステップの処理により、前回送信された制御信号は、前記第1の制御信号ではないと判断された場合、前記操作入力ステップの処理により入力された前記ユーザの操作入力は、複数の種別のうちの優先種別に対応する操作入力であるか否かを判断する第2の判断ステップと、
前記第2の判断ステップの処理により、前記ユーザの操作入力は、前記優先種別であると判断された場合、前記優先種別の前記操作入力に対応する第3の制御信号の送信を制御する送信制御ステップと
を含むことを特徴とするプログラム。
A program for causing a computer to execute a process of communicating with another information processing device,
An operation input step for receiving an operation input by the user;
A first determining step of determining whether the previously transmitted control signal is a predetermined first control signal;
When it is determined that the control signal transmitted last time is the first control signal by the processing of the first determining step, the processing of the other information processing device by the first control signal is confirmed. A first transmission control step of controlling transmission of a second control signal for
When it is determined that the control signal transmitted last time is not the first control signal by the processing of the first determination step, the operation input of the user input by the processing of the operation input step is plural. A second determining step of determining whether the input is an operation input corresponding to a priority type of the types;
Transmission control for controlling transmission of a third control signal corresponding to the operation input of the priority type when it is determined by the processing of the second determination step that the operation input of the user is the priority type. And a program.
他の情報処理装置と通信可能な情報処理装置において、
前記他の情報処理装置と通信し、情報の送受信を行う送受信手段と、
ユーザの操作入力を受ける操作入力手段と、
前記操作入力手段により入力された前記ユーザの操作入力を基に、前記送受信手段による、前記他の情報処理装置への制御信号の送信を制御する制御手段と
を備え、
前記操作入力手段により入力された前記ユーザの操作入力は、複数の種別に分類され、複数の前記種別のうち、少なくともひとつの優先種別が設定され、
前記制御手段は、前記他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに前記制御信号が前記他の情報処理装置へ送信されるように、前記制御信号の送信を制御するとともに、前記転送要求信号の送信の所定回数のうちの少なくとも1回は、前記他の情報処理装置の処理を確認するための第1の制御信号の送信を制御し、前記第1の制御信号の送信が制御されない場合、所定の期間中に前記操作入力手段により入力された複数の操作入力のうち、前記優先種別の前記操作入力に対応する第2の制御信号が優先的に送信されるように、前記制御信号の送信を制御する
ことを特徴とする情報処理装置。
In an information processing device capable of communicating with another information processing device,
A transmission / reception unit that communicates with the other information processing apparatus and transmits / receives information;
Operation input means for receiving an operation input by a user;
Control means for controlling transmission of a control signal to the other information processing device by the transmission / reception means based on the operation input of the user input by the operation input means,
The user's operation input input by the operation input unit is classified into a plurality of types, and among the plurality of types, at least one priority type is set,
The control means transmits the control signal so that the control signal is transmitted to the other information processing device together with a transfer request signal requesting to transfer image information captured by the other information processing device. And at least one of the predetermined number of transmissions of the transfer request signal controls transmission of a first control signal for confirming processing of the another information processing apparatus, When the transmission of the control signal is not controlled, the second control signal corresponding to the operation input of the priority type among the plurality of operation inputs input by the operation input unit during a predetermined period is preferentially transmitted. An information processing apparatus for controlling transmission of the control signal.
他の情報処理装置と通信可能な情報処理装置の情報処理方法において、
ユーザの操作入力を受ける操作入力ステップと、
前記他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに、前記操作入力ステップの処理により入力された前記ユーザの操作入力に対応する制御信号が前記他の情報処理装置へ送信されるように、前記制御信号の送信を制御する送信制御ステップと
を含み、
前記操作入力ステップの処理により入力された前記ユーザの操作入力は、複数の種別に分類され、複数の前記種別のうち、少なくともひとつの優先種別が設定され、
前記送信制御ステップの処理では、前記転送要求信号の送信の所定回数のうちの少なくとも1回は、前記他の情報処理装置の処理を確認するための第1の制御信号の送信を制御し、前記第1の制御信号の送信が制御されない場合、所定の期間中に前記操作ステップの処理により入力された複数の操作入力のうち、前記優先種別の前記操作入力に対応する第2の制御信号が優先的に送信されるように、前記制御信号の送信を制御する
ことを特徴とする情報処理方法。
In an information processing method of an information processing device capable of communicating with another information processing device,
An operation input step for receiving an operation input by the user;
A transfer request signal requesting that image information captured by the other information processing apparatus be transferred, and a control signal corresponding to the operation input of the user input by the processing of the operation input step are used for the other information processing. A transmission control step of controlling transmission of the control signal so as to be transmitted to the device,
The operation input of the user input by the process of the operation input step is classified into a plurality of types, at least one of the plurality of types, a priority type is set,
In the processing of the transmission control step, at least one of a predetermined number of times of transmission of the transfer request signal controls transmission of a first control signal for confirming processing of the another information processing apparatus, When the transmission of the first control signal is not controlled, the second control signal corresponding to the operation input of the priority type has a higher priority among a plurality of operation inputs input by the processing of the operation step during a predetermined period. An information processing method, comprising: controlling transmission of the control signal so that the control signal is transmitted.
他の情報処理装置と通信する処理をコンピュータに実行させるためのプログラムであって、
ユーザの操作入力を受ける操作入力ステップと、
前記他の情報処理装置により撮影された画像情報を転送するように要求する転送要求信号とともに、前記操作入力ステップの処理により入力された前記ユーザの操作入力に対応する制御信号が前記他の情報処理装置へ送信されるように、前記制御信号の送信を制御する送信制御ステップと
を含み、
前記操作入力ステップの処理により入力された前記ユーザの操作入力は、複数の種別に分類され、複数の前記種別のうち、少なくともひとつの優先種別が設定され、
前記送信制御ステップの処理では、前記転送要求信号の送信の所定回数のうちの少なくとも1回は、前記他の情報処理装置の処理を確認するための第1の制御信号の送信を制御し、前記第1の制御信号の送信が制御されない場合、所定の期間中に前記操作ステップの処理により入力された複数の操作入力のうち、前記優先種別の前記操作入力に対応する第2の制御信号が優先的に送信されるように、前記制御信号の送信を制御する
ことを特徴とするプログラム。
A program for causing a computer to execute a process of communicating with another information processing device,
An operation input step for receiving an operation input by the user;
A transfer request signal requesting that image information captured by the other information processing apparatus be transferred, and a control signal corresponding to the operation input of the user input by the processing of the operation input step are used for the other information processing. A transmission control step of controlling transmission of the control signal so as to be transmitted to the device,
The operation input of the user input by the process of the operation input step is classified into a plurality of types, at least one of the plurality of types, a priority type is set,
In the processing of the transmission control step, at least one of a predetermined number of times of transmission of the transfer request signal controls transmission of a first control signal for confirming processing of the another information processing apparatus, When the transmission of the first control signal is not controlled, the second control signal corresponding to the operation input of the priority type has a higher priority among a plurality of operation inputs input by the processing of the operation step during a predetermined period. A program for controlling transmission of the control signal so as to be transmitted in a controlled manner.
JP2003130512A 2003-05-08 2003-05-08 Device and method for processing information, and program Withdrawn JP2004336475A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003130512A JP2004336475A (en) 2003-05-08 2003-05-08 Device and method for processing information, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003130512A JP2004336475A (en) 2003-05-08 2003-05-08 Device and method for processing information, and program

Publications (1)

Publication Number Publication Date
JP2004336475A true JP2004336475A (en) 2004-11-25

Family

ID=33506017

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003130512A Withdrawn JP2004336475A (en) 2003-05-08 2003-05-08 Device and method for processing information, and program

Country Status (1)

Country Link
JP (1) JP2004336475A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014216702A (en) * 2013-04-23 2014-11-17 オリンパス株式会社 Operation terminal, imaging terminal, remote imaging system, remote imaging method, and program
WO2017199888A1 (en) * 2016-05-19 2017-11-23 株式会社東海理化電機製作所 Visual recognition device for vehicle
JP2019161271A (en) * 2018-03-07 2019-09-19 キヤノン株式会社 Information processing device and control method and program thereof

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014216702A (en) * 2013-04-23 2014-11-17 オリンパス株式会社 Operation terminal, imaging terminal, remote imaging system, remote imaging method, and program
US9350910B2 (en) 2013-04-23 2016-05-24 Olympus Corporation Operation device, imaging device, and remote imaging system
WO2017199888A1 (en) * 2016-05-19 2017-11-23 株式会社東海理化電機製作所 Visual recognition device for vehicle
JP2017206155A (en) * 2016-05-19 2017-11-24 株式会社東海理化電機製作所 Visual recognition device for vehicle
JP2019161271A (en) * 2018-03-07 2019-09-19 キヤノン株式会社 Information processing device and control method and program thereof
JP7118669B2 (en) 2018-03-07 2022-08-16 キヤノン株式会社 Information processing device and its control method and program

Similar Documents

Publication Publication Date Title
JP4890880B2 (en) Image transmitting apparatus, image transmitting method, program, and storage medium
US10542216B2 (en) Apparatus and method for storing moving image portions
JP2004215042A (en) Imaging system, camera, external equipment, imaging program, recording medium, and imaging method
JP2003274335A (en) Information recording device
WO2004023795A1 (en) Electronic camera, electronic camera system, and imaging method
JP5743579B2 (en) Imaging apparatus, control method thereof, and program
US20100094918A1 (en) Image pickup apparatus and control method therefor
JP5213602B2 (en) Imaging apparatus, control method thereof, and program
US8102425B2 (en) Electronic camera and image transfer method adopted in electronic camera
JP2004336475A (en) Device and method for processing information, and program
JP2004334582A (en) Information processing apparatus, method, and program
JP2004336476A (en) Apparatus and method for processing information, remote photographing system, and program
JP2003116040A (en) Rental digital camera system, controller, and digital camera
JP2003333434A (en) Device and method for picking-up image, program, and recording medium
JP2004104370A (en) Information-processing apparatus and method therefor, and program
JP4883803B2 (en) COMMUNICATION DEVICE, ITS CONTROL METHOD, AND PROGRAM
JP2021176237A (en) Electronic apparatus
JP2005051340A (en) Camera for remotely controlling cameras
JP3913046B2 (en) Imaging device
JP2004104369A (en) Information-processing apparatus and method therefor, and program
JP2009077305A (en) Imaging apparatus and imaging control method
JP5535183B2 (en) COMMUNICATION DEVICE, ITS CONTROL METHOD, AND PROGRAM
JP6654288B1 (en) Imaging support method, program, and data processing device
JP2009089325A (en) Information device and remaining battery level detection method
JP4692971B2 (en) Shooting system

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20060801