JP3782966B2 - 電子情報処理方法、クライアント装置、プログラム、および記録媒体 - Google Patents
電子情報処理方法、クライアント装置、プログラム、および記録媒体 Download PDFInfo
- Publication number
- JP3782966B2 JP3782966B2 JP2001389918A JP2001389918A JP3782966B2 JP 3782966 B2 JP3782966 B2 JP 3782966B2 JP 2001389918 A JP2001389918 A JP 2001389918A JP 2001389918 A JP2001389918 A JP 2001389918A JP 3782966 B2 JP3782966 B2 JP 3782966B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- client
- still image
- multipoint
- request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は電子情報処理方法に関し、特に電子報告書作成方法に関する。
【０００２】
【従来の技術】
産業界における機器保守等は膨大な製品知識と経験が必要である。しかし、現状では熟練者の不足から非熟練者が現場に出向いて保守作業を行う場合が多い。したがって、作業現場の非熟練者が復旧不可能な場合、熟練者が控えている遠隔地のセンタに指示を仰ぐ必要がある。
【０００３】
この場合、現場にカメラを搭載したＰＣ（Personal Computer）を持ちこみ、多地点双方向音声画像通信を行うことで、センタから現場へ適切な指示が行えると考えられる。
【０００４】
また、現場において作業履歴を画像を用いて記録することは非常に重要である。そこで、作業現場で作業を行いながら、作業履歴をＰＣ上で画像として記録し、電子的なマルチメディア報告書を作成することが考えられる。
【０００５】
【発明が解決しようとする課題】
しかし、従来の多地点双方向音声画像通信システムおよびマルチメディア報告書作成システムは各々独立したシステムであり、従来は、
１．多地点双方向画像通信システムを立ち上げ、作業者がセンタから作業および撮影ポイントの指示を受ける
２．多地点双方向画像通信システムを終了する
３．デジタルカメラで指示されたところを撮影する
４．マルチメディア報告書作成システムを立ち上げて、デジタルカメラで撮影した画像を追加する
という作業の流れであった。この場合、多地点双方向音声画像通信で作業者がセンタから指示を受けた後にカメラを備えなおして画像を撮影しなければならず、作業が煩雑である。
【０００６】
本発明の目的は、現場とセンタ間の人間が互いに協力しながら効率的に情報を取得するとともに、通信している任意のクライアントのカメラ画像を任意の通信参加クライアントが取得し、作業報告書に追加可能である、電子情報処理方法および装置を提供することにある。
【０００７】
本発明の電子情報処理方法は、複数のクライアント装置と多地点音声画像通信サーバ装置とこれらを互いに接続するネットワークから構成される電子情報処理システムにおけるクライアント装置が電子情報を処理する方法であって、
前記多地点音声画像通信サーバ装置を介して他クライアント装置と音声および動画像または静止画像の通信を行なうステップと、
前記多地点音声画像通信サーバ装置に問い合わせて現在前記多地点音声画像通信サーバ装置に接続しているクライアント装置のリストである多地点通信参加者リストを取得するステップと、
前記多地点音声画像通信サーバ装置に問い合わせて取得した前記多地点通信参加者リストから選択された自クライアント装置または他クライアント装置から精細な静止画像の取得要求を受取った場合、精細な静止画像を自クライアント装置内の画像共有部に転送するステップと、
前記精細な静止画像の取得要求元の他クライアント装置に対して、前記多地点音声画像通信サーバ装置を介さずに直接、自クライアント装置内の画像共有部に保持された画像を送信するステップと
を有することを特徴とする。
また、本発明のクライアント装置は、複数のクライアント装置と多地点音声画像通信サーバ装置とこれらを互いに接続するネットワークから構成される電子情報処理システムにおけるクライアント装置であって、
取得され、転送された精細な静止画像を保持する画像共有部と、
前記多地点音声画像通信サーバ装置を介して他クライアント装置と音声および動画像または静止画像の通信を行うとともに、前記多地点音声画像通信サーバ装置に問い合わせて現在前記多地点音声画像通信サーバ装置に接続しているクライアント装置のリストである多地点通信参加者リストを取得する多地点通信部と、
前記多地点通信部で取得した前記多地点通信参加者リストから選択された自クライアント装置または他クライアント装置から精細な静止画像の取得要求を受取った場合、精細な静止画像を自クライアント装置内の画像共有部に転送するとともに、前記精細な静止画像の取得要求元の他クライアント装置に対して、前記多地点音声画像通信サーバ装置を介さずに直接、自クライアント装置内の前記画像共有部に保持された精細な静止画像を送信する画像制御部と
を有することを特徴とする。
【０００８】
本発明は、多地点双方向音声画像通信システムとマルチメディア報告書作成システムを統合して、作業者側クライアントＰＣ−センタ側クライアントＰＣ間でやり取りしている通信画像を静止画として取得し、報告書に追加するものである。
【０００９】
この方法によれば、
１．多地点双方向画像通信システムを立ち上げ、作業者がセンタから作業および撮影ポイントの指示を受けながら、自分のＰＣのカメラ画像を静止画として保存する
２．マルチメディア報告書作成システムを介して、保存した静止画を報告書に追加する
というように、作業が効率化される。
【００１０】
また、多地点双方向画像通信システムとマルチメディア報告書作成システムをシームレスに結合することにより、任意の通信参加クライアントＰＣで、任意のクライアントＰＣのカメラ画像を用いて作業報告書を作成することが可能となる。
【００１１】
【発明の実施の形態】
次に、本発明の実施の形態について図面を参照して説明する。
【００１２】
図１を参照すると、本発明の一実施形態の電子情報処理システムは、作業現場に設置されたクライアントＰＣ１と、センタ側に設置されたクライアントＰＣ２，３と、多地点通信サーバ４と、報告書ＤＢサーバ５と、これらを互いに接続するネットワーク６で構成されている。
【００１３】
各クライアントＰＣ１，２，３にはマイク４１、スピーカ４２、モニタ４３、カメラ４４、入力Ｉ／Ｆ４５が備えられている（ただし、クライアントＰＣ２，３については図示せず）。クライアントＰＣ１は作業者が使用するモバイルＰＣであり、クライアントＰＣ２，３は画像を配信する無人クライアントＰＣ、あるいは遠隔地のセンタ側クライアントＰＣである。
【００１４】
クライアントＰＣ１はそれぞれマイク４１、スピーカ４２、モニタ４３、カメラ４４、入力Ｉ／Ｆに接続されたドライバ１１，１２，１３，１４，１５と、多地点通信部１６と、画像制御部１７と、画像共有部１８と、報告書作成部１９で構成されている。同様に、クライアントＰＣ２は多地点通信部２１と画像制御部２２と画像共有部２３と報告書作成部２４で構成され、クライアントＰＣ３は多地点通信部３１と画像制御部３２と画像共有部３３と報告書作成部３４で構成されている。
【００１５】
以下、画像制御部１７、画像共有部１８、報告書作成部１９、多地点通信部１６の機能について説明する。
●画像制御部１７
−ＧＵＩ（Graphical User Interface）から入力された「動画／静止画切り替え要求」を受け取り、多地点通信部１６に流す画像を決定する機能。つまり、
＊カメラ４４から入力された画像を動画のまま多地点通信部１６に流す機能。
【００１６】
＊多地点通信部１６は動画配信機能しかないことから、静止画を配信しつづけるようにある瞬間の静止画を繰り返し多地点通信部１６に流す機能。
【００１７】
−ＧＵＩから入力された「静止画取得要求」を受け取り、自クライアントＰＣ１のカメラ画像から静止画を取得し、自クライアントＰＣの画像共有部１８に転送する機能。また、その後、報告書作成部１９の静止画取得要求を呼び出す機能。
【００１８】
−ＧＵＩから入力された「静止画取得要求」が、他クライアントＰＣ２、３のカメラ画像の取得要求であった場合、指定された他のクライアントＰＣの画像制御部に直接アクセスして静止画を取得し、自クライアントＰＣ１の画像共有部１８に転送する機能。また、その後、報告書作成部１９の静止画取得要求を呼び出す機能。
【００１９】
−他クライアントＰＣ２，３から「静止画取得要求」を受け取った場合、自クライアントＰＣ１のカメラ画像から静止画を取得し、他クライアントＰＣ２，３の画像制御部２２、３２に転送する機能。
●画像共有部１８
−画像制御部１７で取得された静止画を保持し、報告書作成部１９から「静止画要求」があった場合に、報告書作成部１９に静止画情報を転送する機能。
●報告書作成部１９
−ＧＵＩから入力された「報告書作成要求」を受け取り、ＸＭＬ報告書データを新規に作成する機能。
【００２０】
−画像共有部１８に「静止画要求」を行い、画像共有部１８から静止画情報を取得する機能。なお、この報告書作成部１９の「静止画要求」は画像制御部１７から呼び出されるものである。
【００２１】
−取得した静止画情報をＸＭＬ報告書データに追加する機能。
【００２２】
−ＧＵＩからの指示に従い、作成したＸＭＬ（Extensible Markup Language）報告書データを報告書ＤＢサーバ５に転送する機能。
【００２３】
−その他、ＸＭＬ報告書データのテキスト情報入力ＧＵＩ表示、システム情報自動設定等の機能。
●多地点通信部１６
−多地点通信サーバ４へ「接続要求」を行い、接続後に多地点通信サーバ４へ自クライアントＰＣ１の画像制御部１７から受け取ったカメラ画像を転送する機能。
【００２４】
−多地点通信サーバ４から、多地点通信サーバ４に接続している他クライアントＰＣ２、３の動画を取得する機能。
【００２５】
−ＧＵＩからの指示に従って多地点通信サーバ４へ、多地点通信サーバ４に接続しているクライアントＰＣのリスト（参加者リスト）の要求を行い、それを取得する機能。
【００２６】
クライアントＰＣ２の多地点通信部２１、画像制御部２２、画像共有部２３、報告書作成部２４、クライアントＰＣ３の多地点通信部３１、画像制御部３２、画像共有部３３、報告書作成部３４も同様の機能を有する。
【００２７】
以上のように、全クライアントＰＣ１〜３は、多地点通信部１６（２１，３１）と報告書作成部１９（２４，３４）間で、画像制御部１７（２２，３２）および画像共有部１８（２３，３３）を介して静止画情報の授受を行う構成になっている。
【００２８】
次に、画像制御部１７の処理の流れを図２により説明する。
１．多地点接続が開始されると、ステップ５１で終了要求が無ければ、ステップ５２にカメラ４４から取得した動画像をそのまま多地点通信部１６に送信する。
２．ステップ５３の動画／静止画切り替え要求はＧＵＩ上のプレビュー画面を動画にするか、静止画にするか切り替えるものである。ここで、動画要求がある場合の流れを以下に示す。
【００２９】
ａ）静止画取得要求が無ければプレビュー画面で双方向通信を行っている動画が流れつづける。
【００３０】
ｂ）ステップ５４で静止画取得要求があると、ステップ５５で処理Ａを行う。つまり、ステップ６１で、カメラ４４から取得した動画像のうち、要求のあったタイミングの画像をＢＭＰファイルに変換し、画像共有部１８に送信する。
【００３１】
ｃ）ステップ６２で上記が他のクライアントＰＣからの要求であれば、ステップ６３で画像共有部１８の静止画ファイルを要求元クライアントＰＣの画像制御部２２または３２に転送する。
【００３２】
また、ステップ５３の動画／静止画切り替え要求で静止画切り替え要求がある場合の流れを以下に示す。
【００３３】
ａ）ステップ５６で、カメラ４４から取得した動画像のうち、要求のあったタイミングの画像をメモリ上に保持し、多地点通信部１６に送信する。こうすることで、ＧＵＩ上のプレビュー画面では動画でなくメモリ上に保持された静止画が表示される。
【００３４】
ｂ）ステップ５７で動画／静止画切り替え要求が動画要求があれば、ステップ５１で終了判断をした後、ステップ５２でカメラ４４から取得した動画像を多地点通信部１６に送信し、ＧＵＩ上のプレビュー画面では動画像が表示される。
【００３５】
次に、報告書作成部１９の処理の流れを図３により説明する。
１．報告書作成要求があると、ステップ７１で、報告書作成部１９がテンプレートとなるＸＭＬデータをメモリ上に読込む。
２．ステップ７２で、読込んだＸＭＬのＰａｒａｍｅｔｅｒタグの子要素である＜ＣｏｍｐｕｔｅｒＮａｍｅ＞，＜Ｄａｔｅ＞等のタグの内容を、システム情報を用いて設定する。
３．ステップ７３で、作業条件等をテキスト入力する場合は、ステップ７４でＴｅｘｔタグのＩｎｐｕｔＭｅｔｈｏｄおよびＩｎｐｕｔＥｌｅｍｅｎｔを解析して入力情報に適したダイアログを表示する。つまり＜ＩｎｐｕｔＭｅｔｈｏｄ＞の内容に応じて、異なる種類の入力用ダイアログを表示する。
４．ステップ７５で静止画取得要求がある場合には、画像制御部１７によって取得された静止画ファイルが画像共有部１８に保存されているため、ステップ７６で画像共有部１８に静止画取得要求を出し、ステップ７７でこれを取得する。
５．次に、ステップ７８で、取得した画像ファイルを、一意性を保持するために取得日時を考慮したファイル名に変更する。例えば、２００１年１１月８日の１３時４３分５秒に取得した静止画ファイルならば、Ｖｉｄｅｏｃａｐ２００１１１０８１３４３０５．ｊｐｇという名前に変更する。
６．ステップ７９で、図５に示す画像確認ＧＵＩを表示する。
７．ステップ８０でＯＫボタンが押され報告書に画像が追加される場合は、ステップ８１で、変更した静止画ファイル名を要素とするＦｉｌｅタグをＸＭＬに追加する。その際、ＧＵＩで指定されたコメント文がｃｏｍｍｅｎｔ属性に埋め込まれる。
８．ステップ８２で、作成した報告書ＸＭＬの保存要求があれば、ステップ８３で報告書ＸＭＬが保存される。保存要求がなければ報告書作成部１９の処理は終了する。
９．ステップ８４で報告書ＸＭＬの送信要求があれば、保存された報告書ＸＭＬを報告書ＤＢサーバ５に送信する。送信要求がなければ報告書作成部１９の処理は終了する。
【００３６】
次に、本システムを用いた実作業の流れを以下に示す。
１．図４にクライアントＰＣ１のＧＵＩを示す。他の各クライアントＰＣ２，３のＧＵＩも同様な構成になっている。なお、図１において報告書作成要求を出すＧＵＩは別のダイアログもしくは図４上にあるものとする。
【００３７】
作業者はクライアントＰＣ１のカメラ画像を多地点通信サーバ４を介して、遠隔地に設置されているクライアントＰＣ２，３等に伝送する。遠隔地（センタ）にいる熟練者は各クライアントＰＣ２，３に映し出される、クライアントＰＣ１のカメラ画像を見ることができる。同時に、熟練者から伝送された音声、データ等をクライアントＰＣ１で再生できる。そのため、熟練者からクライアントＰＣ１のユーザである作業者に指示を行なうことができる。図４では、クライアントＰＣ１上に、話者画像として遠隔地にいるクライアントＰＣ２を操作しているオペレータが表示されている。
２．報告書を作成するために、報告書作成ボタンを押し、ＸＭＬで記述されたテンプレートをあらかじめ読み込んでおく。図４では、クライアントＰＣ１上に自分のカメラ画像が自画像として表示されている。現場作業者はクライアントＰＣ１のカメラ画像を画像取得の「自画像」ボタンをクリックして取得する。また、クライアントＰＣ１で「更新」ボタンをクリックすることにより多地点通信サーバ４に問い合わせて多地点通信参加者リストを取得可能である。必要であれば、参加者リストから参照したいクライアントＰＣを選択し、「映像参照」ボタンをクリックすることで多地点通信を行っているクライアントＰＣ２，３のカメラ画像を参照映像として表示可能である。図４ではクライアントＰＣ１上に、他のクライアントＰＣ２のカメラ画像を参照映像として表示している。
【００３８】
図５に示すように、画像取得の「選択」ボタンをクリックすることで、参照している他クライアントＰＣの映像、ここではクライアントＰＣ２のカメラ画像を画像制御部１７を介して自クライアントＰＣの画像共有部１８に保存可能である。ここで、多地点通信部１６では、通信容量を低減するために画像圧縮を行って動画による多地点通信を行っており、通信している動画データから静止画を取り出しても画質が粗い静止画しか取り出せない。そこで、多地点通信している他クライアントＰＣ２、３の静止画を取得する場合、多地点通信部１６を介すと画像圧縮処理を行うために精細な静止画が得られないことから、各クライアントＰＣの画像制御部間で画像圧縮されない高精細な画像を直接やり取りし、画像共有部１８に保存している。また、この際、取得画像確認のためにダイアログが表示され、画像に付随したテキスト情報を付加することが可能となっている。
３．クライアントＰＣ１の画像共有部１８に保存された画像は、報告書作成時に取得した日時および時刻をもとにしたファイル名に変更され、ＸＭＬ形式の報告書データに追加される。
４．ＸＭＬ報告書データをクライアントＰＣ１から報告書ＤＢサーバ５に送信する。報告書ＤＢサーバ５では受信したＸＭＬ報告書データをパースして、ＤＢへ格納する。ＤＢに格納されたデータはＷｅｂブラウザを介して検索閲覧可能となっている。
【００３９】
ここで、ＸＭＬ形式の報告書データの一例を以下に示す。
また、上記ＸＭＬ報告書データを木構造で示すと図６に示すようになる。
【００４０】
Ｐａｇｅタグがルートタグであり、その子要素として、Ｐａｒａｍｅｔｅｒ、Ｔｅｘｔ、Ｍｕｌｔｉｍｅｄｉａ、Ｏｐｔｉｏｎタグがある。
【００４１】
Ｐａｒａｍｅｔｅｒタグの子要素を表１に示す。Ｐａｒａｍｅｔｅｒタグの子要素はプログラム上で自動的に設定されるものである。
【００４２】
【表１】
【００４３】
また、Ｔｅｘｔタグは作業者が入力するデータを意味し、子要素としてＤｉａｌｏｇ要素をもつ。Ｔｅｘｔタグおよびその子要素の役割については、特願２００１−１３１１１７（「キーボードレス入力装置とその方法及びこの方法の実行プログラムとその記録媒体」）に記述してあるとおり、作業者が入力するデータ形式および入力結果を示している。
【００４４】
また、ＭｕｌｔｉｍｅｄｉａタグはＤａｔａタグを持ち、Ｄａｔａタグは関連する静止画、動画、音声およびテキストファイルのファイル名を持つＦｉｌｅタグを一まとめにする役割がある。Ｆｉｌｅタグの属性であるＴＹＰＥはＩＭＡＧＥ，ＡＶＩ，ＷＡＶ，ＴＸＴ等を取ることができ、Ｆｉｌｅタグの中身がどのようなファイルであるかを示す。また、ｃｏｍｍｅｎｔ属性を持ち、マルチメディアファイルに対する簡単なコメントを付与可能である。
【００４５】
Ｏｐｔｉｏｎタグでは、外部機器の制御コマンド等の情報が入る。
【００４６】
図７に、このＸＭＬ報告書データにスタイルファイルを適用してＷｅｂブラウザで表示した一例を示す。ここで、「スタイルファイル」とはＸＭＬを解析して図７のようにグラフィカルに表示可能にするための処理ファイルである。
【００４７】
このデータを取得した状況を以下に示す。ロボットの溶接作業において何らかの原因で溶接対象物の位置がずれたために、ロボットの溶接トーチと溶接対象物が衝突して異常停止が生じた。この際、現場作業者は、ロボットを退避して対象物の位置を直して、再度ロボットを動かす作業を行わなければならない。このデータは、作業者がクライアントＰＣ１を使用して遠隔地のオペレータと双方向画像通信を行ってオペレータの指示どおりに、ロボットの溶接トーチと対象物が衝突している様子、ロボットを退避した後の対象物の位置ずれの様子、対象物を正常な位置に直した後の様子を画像として取得し作成したＸＭＬ報告書データである。
【００４８】
上記２から３の流れでは、作業者が使用するクライアントＰＣ１によって、クライアントＰＣ１および他のクライアントＰＣ２，３のカメラ画像を取得しているが、同様なことは遠隔地にあるセンタ側のクライアントＰＣ２，３、あるいは作業現場にある他ＰＣにおいても可能である。
【００４９】
例えば、
１．センタに設置されたクライアントＰＣ２から、上記と同様に作業現場のクライアントＰＣ１、あるいはクライアントＰＣ３等のカメラ画像をクライアントＰＣ２の画像共有部２３に保存する。
【００５０】
２．クライアントＰＣ２の画像共有部２３に保存された画像は、クライアントＰＣ２の報告書作成部２４においてＸＭＬ形式の報告書データに追加される。
というように、多地点通信に参加している任意のクライアントＰＣにおいて、任意の他クライアントＰＣに搭載されたカメラ画像を用いて作業報告書を作成することが可能である。
【００５１】
上記で、双方向音声画像通信で伝送されている画像を報告書データに追加可能であることから、遠隔地との協調作業において効率的な情報収集が可能となる。
【００５２】
なお、処理部（多地点通信部、画像制御部、画像共有部、報告書作成部）は専用のハードウェアにより実現されるもの以外に、その機能を実現するためのプログラムを、コンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するものであってもよい。コンピュータ読み取り可能な記録媒体とは、フロッピーディスク、光磁気ディスク、ＣＤ−ＲＯＭ等の記録媒体、コンピュータシステムに内蔵されるハードディスク装置等の記憶装置を指す。さらに、コンピュータ読み取り可能な記録媒体は、インターネットを介してプログラムを送信する場合のように、短時間の間、動的にプログラムを保持するもの（伝送媒体もしくは伝送波）、その場合のサーバとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含む。
【００５３】
【発明の効果】
以上説明したように、本発明は、遠隔に位置する作業現場とセンタ間で双方向画像通信を行い、かつ実際に通信している画像を報告書データに追加し、また、任意のクライアントＰＣにおいて任意のカメラ画像を用いて作業報告書を作成することにより、作業情報を遠隔者との協調作業により、効率的かつ適切に収集可能であるという効果がある。
【図面の簡単な説明】
【図１】本発明の一実施形態の電子情報処理システムの構成図である。
【図２】画像制御部１７の処理を示すフローチャートである。
【図３】報告書作成部１９の処理を示すフローチャートである。
【図４】クライアントＰＣ１におけるＧＵＩを示す図である。
【図５】クライアントＰＣ１において、他のクライアントＰＣ２のカメラ画像を取得した際のＧＵＩを示す図である。
【図６】ＸＭＬ報告書データを木構造で示した図である。
【図７】ＸＭＬ報告書データにスタイルファイルを適用してＷｅｂブラウザで表示した例を示す図である。
【符号の説明】
１，２，３ クライアントＰＣ
４ 多地点通信サーバ
５ 報告書ＤＢサーバ
６ ネットワーク
１１〜１５ ドライバ
１６，２１，３１ 多地点通信部
１７，２２，３２ 画像制御部
１８，２３，３３ 画像共有部
１９，２４，３４ 報告書作成部
４１ マイク
４２ スピーカ
４３ モニタ
４４ カメラ
４５ 入力Ｉ／Ｆ
５１〜５９，６１〜６３，７１〜８５ ステップ
【発明の属する技術分野】
本発明は電子情報処理方法に関し、特に電子報告書作成方法に関する。
【０００２】
【従来の技術】
産業界における機器保守等は膨大な製品知識と経験が必要である。しかし、現状では熟練者の不足から非熟練者が現場に出向いて保守作業を行う場合が多い。したがって、作業現場の非熟練者が復旧不可能な場合、熟練者が控えている遠隔地のセンタに指示を仰ぐ必要がある。
【０００３】
この場合、現場にカメラを搭載したＰＣ（Personal Computer）を持ちこみ、多地点双方向音声画像通信を行うことで、センタから現場へ適切な指示が行えると考えられる。
【０００４】
また、現場において作業履歴を画像を用いて記録することは非常に重要である。そこで、作業現場で作業を行いながら、作業履歴をＰＣ上で画像として記録し、電子的なマルチメディア報告書を作成することが考えられる。
【０００５】
【発明が解決しようとする課題】
しかし、従来の多地点双方向音声画像通信システムおよびマルチメディア報告書作成システムは各々独立したシステムであり、従来は、
１．多地点双方向画像通信システムを立ち上げ、作業者がセンタから作業および撮影ポイントの指示を受ける
２．多地点双方向画像通信システムを終了する
３．デジタルカメラで指示されたところを撮影する
４．マルチメディア報告書作成システムを立ち上げて、デジタルカメラで撮影した画像を追加する
という作業の流れであった。この場合、多地点双方向音声画像通信で作業者がセンタから指示を受けた後にカメラを備えなおして画像を撮影しなければならず、作業が煩雑である。
【０００６】
本発明の目的は、現場とセンタ間の人間が互いに協力しながら効率的に情報を取得するとともに、通信している任意のクライアントのカメラ画像を任意の通信参加クライアントが取得し、作業報告書に追加可能である、電子情報処理方法および装置を提供することにある。
【０００７】
本発明の電子情報処理方法は、複数のクライアント装置と多地点音声画像通信サーバ装置とこれらを互いに接続するネットワークから構成される電子情報処理システムにおけるクライアント装置が電子情報を処理する方法であって、
前記多地点音声画像通信サーバ装置を介して他クライアント装置と音声および動画像または静止画像の通信を行なうステップと、
前記多地点音声画像通信サーバ装置に問い合わせて現在前記多地点音声画像通信サーバ装置に接続しているクライアント装置のリストである多地点通信参加者リストを取得するステップと、
前記多地点音声画像通信サーバ装置に問い合わせて取得した前記多地点通信参加者リストから選択された自クライアント装置または他クライアント装置から精細な静止画像の取得要求を受取った場合、精細な静止画像を自クライアント装置内の画像共有部に転送するステップと、
前記精細な静止画像の取得要求元の他クライアント装置に対して、前記多地点音声画像通信サーバ装置を介さずに直接、自クライアント装置内の画像共有部に保持された画像を送信するステップと
を有することを特徴とする。
また、本発明のクライアント装置は、複数のクライアント装置と多地点音声画像通信サーバ装置とこれらを互いに接続するネットワークから構成される電子情報処理システムにおけるクライアント装置であって、
取得され、転送された精細な静止画像を保持する画像共有部と、
前記多地点音声画像通信サーバ装置を介して他クライアント装置と音声および動画像または静止画像の通信を行うとともに、前記多地点音声画像通信サーバ装置に問い合わせて現在前記多地点音声画像通信サーバ装置に接続しているクライアント装置のリストである多地点通信参加者リストを取得する多地点通信部と、
前記多地点通信部で取得した前記多地点通信参加者リストから選択された自クライアント装置または他クライアント装置から精細な静止画像の取得要求を受取った場合、精細な静止画像を自クライアント装置内の画像共有部に転送するとともに、前記精細な静止画像の取得要求元の他クライアント装置に対して、前記多地点音声画像通信サーバ装置を介さずに直接、自クライアント装置内の前記画像共有部に保持された精細な静止画像を送信する画像制御部と
を有することを特徴とする。
【０００８】
本発明は、多地点双方向音声画像通信システムとマルチメディア報告書作成システムを統合して、作業者側クライアントＰＣ−センタ側クライアントＰＣ間でやり取りしている通信画像を静止画として取得し、報告書に追加するものである。
【０００９】
この方法によれば、
１．多地点双方向画像通信システムを立ち上げ、作業者がセンタから作業および撮影ポイントの指示を受けながら、自分のＰＣのカメラ画像を静止画として保存する
２．マルチメディア報告書作成システムを介して、保存した静止画を報告書に追加する
というように、作業が効率化される。
【００１０】
また、多地点双方向画像通信システムとマルチメディア報告書作成システムをシームレスに結合することにより、任意の通信参加クライアントＰＣで、任意のクライアントＰＣのカメラ画像を用いて作業報告書を作成することが可能となる。
【００１１】
【発明の実施の形態】
次に、本発明の実施の形態について図面を参照して説明する。
【００１２】
図１を参照すると、本発明の一実施形態の電子情報処理システムは、作業現場に設置されたクライアントＰＣ１と、センタ側に設置されたクライアントＰＣ２，３と、多地点通信サーバ４と、報告書ＤＢサーバ５と、これらを互いに接続するネットワーク６で構成されている。
【００１３】
各クライアントＰＣ１，２，３にはマイク４１、スピーカ４２、モニタ４３、カメラ４４、入力Ｉ／Ｆ４５が備えられている（ただし、クライアントＰＣ２，３については図示せず）。クライアントＰＣ１は作業者が使用するモバイルＰＣであり、クライアントＰＣ２，３は画像を配信する無人クライアントＰＣ、あるいは遠隔地のセンタ側クライアントＰＣである。
【００１４】
クライアントＰＣ１はそれぞれマイク４１、スピーカ４２、モニタ４３、カメラ４４、入力Ｉ／Ｆに接続されたドライバ１１，１２，１３，１４，１５と、多地点通信部１６と、画像制御部１７と、画像共有部１８と、報告書作成部１９で構成されている。同様に、クライアントＰＣ２は多地点通信部２１と画像制御部２２と画像共有部２３と報告書作成部２４で構成され、クライアントＰＣ３は多地点通信部３１と画像制御部３２と画像共有部３３と報告書作成部３４で構成されている。
【００１５】
以下、画像制御部１７、画像共有部１８、報告書作成部１９、多地点通信部１６の機能について説明する。
●画像制御部１７
−ＧＵＩ（Graphical User Interface）から入力された「動画／静止画切り替え要求」を受け取り、多地点通信部１６に流す画像を決定する機能。つまり、
＊カメラ４４から入力された画像を動画のまま多地点通信部１６に流す機能。
【００１６】
＊多地点通信部１６は動画配信機能しかないことから、静止画を配信しつづけるようにある瞬間の静止画を繰り返し多地点通信部１６に流す機能。
【００１７】
−ＧＵＩから入力された「静止画取得要求」を受け取り、自クライアントＰＣ１のカメラ画像から静止画を取得し、自クライアントＰＣの画像共有部１８に転送する機能。また、その後、報告書作成部１９の静止画取得要求を呼び出す機能。
【００１８】
−ＧＵＩから入力された「静止画取得要求」が、他クライアントＰＣ２、３のカメラ画像の取得要求であった場合、指定された他のクライアントＰＣの画像制御部に直接アクセスして静止画を取得し、自クライアントＰＣ１の画像共有部１８に転送する機能。また、その後、報告書作成部１９の静止画取得要求を呼び出す機能。
【００１９】
−他クライアントＰＣ２，３から「静止画取得要求」を受け取った場合、自クライアントＰＣ１のカメラ画像から静止画を取得し、他クライアントＰＣ２，３の画像制御部２２、３２に転送する機能。
●画像共有部１８
−画像制御部１７で取得された静止画を保持し、報告書作成部１９から「静止画要求」があった場合に、報告書作成部１９に静止画情報を転送する機能。
●報告書作成部１９
−ＧＵＩから入力された「報告書作成要求」を受け取り、ＸＭＬ報告書データを新規に作成する機能。
【００２０】
−画像共有部１８に「静止画要求」を行い、画像共有部１８から静止画情報を取得する機能。なお、この報告書作成部１９の「静止画要求」は画像制御部１７から呼び出されるものである。
【００２１】
−取得した静止画情報をＸＭＬ報告書データに追加する機能。
【００２２】
−ＧＵＩからの指示に従い、作成したＸＭＬ（Extensible Markup Language）報告書データを報告書ＤＢサーバ５に転送する機能。
【００２３】
−その他、ＸＭＬ報告書データのテキスト情報入力ＧＵＩ表示、システム情報自動設定等の機能。
●多地点通信部１６
−多地点通信サーバ４へ「接続要求」を行い、接続後に多地点通信サーバ４へ自クライアントＰＣ１の画像制御部１７から受け取ったカメラ画像を転送する機能。
【００２４】
−多地点通信サーバ４から、多地点通信サーバ４に接続している他クライアントＰＣ２、３の動画を取得する機能。
【００２５】
−ＧＵＩからの指示に従って多地点通信サーバ４へ、多地点通信サーバ４に接続しているクライアントＰＣのリスト（参加者リスト）の要求を行い、それを取得する機能。
【００２６】
クライアントＰＣ２の多地点通信部２１、画像制御部２２、画像共有部２３、報告書作成部２４、クライアントＰＣ３の多地点通信部３１、画像制御部３２、画像共有部３３、報告書作成部３４も同様の機能を有する。
【００２７】
以上のように、全クライアントＰＣ１〜３は、多地点通信部１６（２１，３１）と報告書作成部１９（２４，３４）間で、画像制御部１７（２２，３２）および画像共有部１８（２３，３３）を介して静止画情報の授受を行う構成になっている。
【００２８】
次に、画像制御部１７の処理の流れを図２により説明する。
１．多地点接続が開始されると、ステップ５１で終了要求が無ければ、ステップ５２にカメラ４４から取得した動画像をそのまま多地点通信部１６に送信する。
２．ステップ５３の動画／静止画切り替え要求はＧＵＩ上のプレビュー画面を動画にするか、静止画にするか切り替えるものである。ここで、動画要求がある場合の流れを以下に示す。
【００２９】
ａ）静止画取得要求が無ければプレビュー画面で双方向通信を行っている動画が流れつづける。
【００３０】
ｂ）ステップ５４で静止画取得要求があると、ステップ５５で処理Ａを行う。つまり、ステップ６１で、カメラ４４から取得した動画像のうち、要求のあったタイミングの画像をＢＭＰファイルに変換し、画像共有部１８に送信する。
【００３１】
ｃ）ステップ６２で上記が他のクライアントＰＣからの要求であれば、ステップ６３で画像共有部１８の静止画ファイルを要求元クライアントＰＣの画像制御部２２または３２に転送する。
【００３２】
また、ステップ５３の動画／静止画切り替え要求で静止画切り替え要求がある場合の流れを以下に示す。
【００３３】
ａ）ステップ５６で、カメラ４４から取得した動画像のうち、要求のあったタイミングの画像をメモリ上に保持し、多地点通信部１６に送信する。こうすることで、ＧＵＩ上のプレビュー画面では動画でなくメモリ上に保持された静止画が表示される。
【００３４】
ｂ）ステップ５７で動画／静止画切り替え要求が動画要求があれば、ステップ５１で終了判断をした後、ステップ５２でカメラ４４から取得した動画像を多地点通信部１６に送信し、ＧＵＩ上のプレビュー画面では動画像が表示される。
【００３５】
次に、報告書作成部１９の処理の流れを図３により説明する。
１．報告書作成要求があると、ステップ７１で、報告書作成部１９がテンプレートとなるＸＭＬデータをメモリ上に読込む。
２．ステップ７２で、読込んだＸＭＬのＰａｒａｍｅｔｅｒタグの子要素である＜ＣｏｍｐｕｔｅｒＮａｍｅ＞，＜Ｄａｔｅ＞等のタグの内容を、システム情報を用いて設定する。
３．ステップ７３で、作業条件等をテキスト入力する場合は、ステップ７４でＴｅｘｔタグのＩｎｐｕｔＭｅｔｈｏｄおよびＩｎｐｕｔＥｌｅｍｅｎｔを解析して入力情報に適したダイアログを表示する。つまり＜ＩｎｐｕｔＭｅｔｈｏｄ＞の内容に応じて、異なる種類の入力用ダイアログを表示する。
４．ステップ７５で静止画取得要求がある場合には、画像制御部１７によって取得された静止画ファイルが画像共有部１８に保存されているため、ステップ７６で画像共有部１８に静止画取得要求を出し、ステップ７７でこれを取得する。
５．次に、ステップ７８で、取得した画像ファイルを、一意性を保持するために取得日時を考慮したファイル名に変更する。例えば、２００１年１１月８日の１３時４３分５秒に取得した静止画ファイルならば、Ｖｉｄｅｏｃａｐ２００１１１０８１３４３０５．ｊｐｇという名前に変更する。
６．ステップ７９で、図５に示す画像確認ＧＵＩを表示する。
７．ステップ８０でＯＫボタンが押され報告書に画像が追加される場合は、ステップ８１で、変更した静止画ファイル名を要素とするＦｉｌｅタグをＸＭＬに追加する。その際、ＧＵＩで指定されたコメント文がｃｏｍｍｅｎｔ属性に埋め込まれる。
８．ステップ８２で、作成した報告書ＸＭＬの保存要求があれば、ステップ８３で報告書ＸＭＬが保存される。保存要求がなければ報告書作成部１９の処理は終了する。
９．ステップ８４で報告書ＸＭＬの送信要求があれば、保存された報告書ＸＭＬを報告書ＤＢサーバ５に送信する。送信要求がなければ報告書作成部１９の処理は終了する。
【００３６】
次に、本システムを用いた実作業の流れを以下に示す。
１．図４にクライアントＰＣ１のＧＵＩを示す。他の各クライアントＰＣ２，３のＧＵＩも同様な構成になっている。なお、図１において報告書作成要求を出すＧＵＩは別のダイアログもしくは図４上にあるものとする。
【００３７】
作業者はクライアントＰＣ１のカメラ画像を多地点通信サーバ４を介して、遠隔地に設置されているクライアントＰＣ２，３等に伝送する。遠隔地（センタ）にいる熟練者は各クライアントＰＣ２，３に映し出される、クライアントＰＣ１のカメラ画像を見ることができる。同時に、熟練者から伝送された音声、データ等をクライアントＰＣ１で再生できる。そのため、熟練者からクライアントＰＣ１のユーザである作業者に指示を行なうことができる。図４では、クライアントＰＣ１上に、話者画像として遠隔地にいるクライアントＰＣ２を操作しているオペレータが表示されている。
２．報告書を作成するために、報告書作成ボタンを押し、ＸＭＬで記述されたテンプレートをあらかじめ読み込んでおく。図４では、クライアントＰＣ１上に自分のカメラ画像が自画像として表示されている。現場作業者はクライアントＰＣ１のカメラ画像を画像取得の「自画像」ボタンをクリックして取得する。また、クライアントＰＣ１で「更新」ボタンをクリックすることにより多地点通信サーバ４に問い合わせて多地点通信参加者リストを取得可能である。必要であれば、参加者リストから参照したいクライアントＰＣを選択し、「映像参照」ボタンをクリックすることで多地点通信を行っているクライアントＰＣ２，３のカメラ画像を参照映像として表示可能である。図４ではクライアントＰＣ１上に、他のクライアントＰＣ２のカメラ画像を参照映像として表示している。
【００３８】
図５に示すように、画像取得の「選択」ボタンをクリックすることで、参照している他クライアントＰＣの映像、ここではクライアントＰＣ２のカメラ画像を画像制御部１７を介して自クライアントＰＣの画像共有部１８に保存可能である。ここで、多地点通信部１６では、通信容量を低減するために画像圧縮を行って動画による多地点通信を行っており、通信している動画データから静止画を取り出しても画質が粗い静止画しか取り出せない。そこで、多地点通信している他クライアントＰＣ２、３の静止画を取得する場合、多地点通信部１６を介すと画像圧縮処理を行うために精細な静止画が得られないことから、各クライアントＰＣの画像制御部間で画像圧縮されない高精細な画像を直接やり取りし、画像共有部１８に保存している。また、この際、取得画像確認のためにダイアログが表示され、画像に付随したテキスト情報を付加することが可能となっている。
３．クライアントＰＣ１の画像共有部１８に保存された画像は、報告書作成時に取得した日時および時刻をもとにしたファイル名に変更され、ＸＭＬ形式の報告書データに追加される。
４．ＸＭＬ報告書データをクライアントＰＣ１から報告書ＤＢサーバ５に送信する。報告書ＤＢサーバ５では受信したＸＭＬ報告書データをパースして、ＤＢへ格納する。ＤＢに格納されたデータはＷｅｂブラウザを介して検索閲覧可能となっている。
【００３９】
ここで、ＸＭＬ形式の報告書データの一例を以下に示す。
【００４０】
Ｐａｇｅタグがルートタグであり、その子要素として、Ｐａｒａｍｅｔｅｒ、Ｔｅｘｔ、Ｍｕｌｔｉｍｅｄｉａ、Ｏｐｔｉｏｎタグがある。
【００４１】
Ｐａｒａｍｅｔｅｒタグの子要素を表１に示す。Ｐａｒａｍｅｔｅｒタグの子要素はプログラム上で自動的に設定されるものである。
【００４２】
【表１】
また、Ｔｅｘｔタグは作業者が入力するデータを意味し、子要素としてＤｉａｌｏｇ要素をもつ。Ｔｅｘｔタグおよびその子要素の役割については、特願２００１−１３１１１７（「キーボードレス入力装置とその方法及びこの方法の実行プログラムとその記録媒体」）に記述してあるとおり、作業者が入力するデータ形式および入力結果を示している。
【００４４】
また、ＭｕｌｔｉｍｅｄｉａタグはＤａｔａタグを持ち、Ｄａｔａタグは関連する静止画、動画、音声およびテキストファイルのファイル名を持つＦｉｌｅタグを一まとめにする役割がある。Ｆｉｌｅタグの属性であるＴＹＰＥはＩＭＡＧＥ，ＡＶＩ，ＷＡＶ，ＴＸＴ等を取ることができ、Ｆｉｌｅタグの中身がどのようなファイルであるかを示す。また、ｃｏｍｍｅｎｔ属性を持ち、マルチメディアファイルに対する簡単なコメントを付与可能である。
【００４５】
Ｏｐｔｉｏｎタグでは、外部機器の制御コマンド等の情報が入る。
【００４６】
図７に、このＸＭＬ報告書データにスタイルファイルを適用してＷｅｂブラウザで表示した一例を示す。ここで、「スタイルファイル」とはＸＭＬを解析して図７のようにグラフィカルに表示可能にするための処理ファイルである。
【００４７】
このデータを取得した状況を以下に示す。ロボットの溶接作業において何らかの原因で溶接対象物の位置がずれたために、ロボットの溶接トーチと溶接対象物が衝突して異常停止が生じた。この際、現場作業者は、ロボットを退避して対象物の位置を直して、再度ロボットを動かす作業を行わなければならない。このデータは、作業者がクライアントＰＣ１を使用して遠隔地のオペレータと双方向画像通信を行ってオペレータの指示どおりに、ロボットの溶接トーチと対象物が衝突している様子、ロボットを退避した後の対象物の位置ずれの様子、対象物を正常な位置に直した後の様子を画像として取得し作成したＸＭＬ報告書データである。
【００４８】
上記２から３の流れでは、作業者が使用するクライアントＰＣ１によって、クライアントＰＣ１および他のクライアントＰＣ２，３のカメラ画像を取得しているが、同様なことは遠隔地にあるセンタ側のクライアントＰＣ２，３、あるいは作業現場にある他ＰＣにおいても可能である。
【００４９】
例えば、
１．センタに設置されたクライアントＰＣ２から、上記と同様に作業現場のクライアントＰＣ１、あるいはクライアントＰＣ３等のカメラ画像をクライアントＰＣ２の画像共有部２３に保存する。
【００５０】
２．クライアントＰＣ２の画像共有部２３に保存された画像は、クライアントＰＣ２の報告書作成部２４においてＸＭＬ形式の報告書データに追加される。
というように、多地点通信に参加している任意のクライアントＰＣにおいて、任意の他クライアントＰＣに搭載されたカメラ画像を用いて作業報告書を作成することが可能である。
【００５１】
上記で、双方向音声画像通信で伝送されている画像を報告書データに追加可能であることから、遠隔地との協調作業において効率的な情報収集が可能となる。
【００５２】
なお、処理部（多地点通信部、画像制御部、画像共有部、報告書作成部）は専用のハードウェアにより実現されるもの以外に、その機能を実現するためのプログラムを、コンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するものであってもよい。コンピュータ読み取り可能な記録媒体とは、フロッピーディスク、光磁気ディスク、ＣＤ−ＲＯＭ等の記録媒体、コンピュータシステムに内蔵されるハードディスク装置等の記憶装置を指す。さらに、コンピュータ読み取り可能な記録媒体は、インターネットを介してプログラムを送信する場合のように、短時間の間、動的にプログラムを保持するもの（伝送媒体もしくは伝送波）、その場合のサーバとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含む。
【００５３】
【発明の効果】
以上説明したように、本発明は、遠隔に位置する作業現場とセンタ間で双方向画像通信を行い、かつ実際に通信している画像を報告書データに追加し、また、任意のクライアントＰＣにおいて任意のカメラ画像を用いて作業報告書を作成することにより、作業情報を遠隔者との協調作業により、効率的かつ適切に収集可能であるという効果がある。
【図面の簡単な説明】
【図１】本発明の一実施形態の電子情報処理システムの構成図である。
【図２】画像制御部１７の処理を示すフローチャートである。
【図３】報告書作成部１９の処理を示すフローチャートである。
【図４】クライアントＰＣ１におけるＧＵＩを示す図である。
【図５】クライアントＰＣ１において、他のクライアントＰＣ２のカメラ画像を取得した際のＧＵＩを示す図である。
【図６】ＸＭＬ報告書データを木構造で示した図である。
【図７】ＸＭＬ報告書データにスタイルファイルを適用してＷｅｂブラウザで表示した例を示す図である。
【符号の説明】
１，２，３ クライアントＰＣ
４ 多地点通信サーバ
５ 報告書ＤＢサーバ
６ ネットワーク
１１〜１５ ドライバ
１６，２１，３１ 多地点通信部
１７，２２，３２ 画像制御部
１８，２３，３３ 画像共有部
１９，２４，３４ 報告書作成部
４１ マイク
４２ スピーカ
４３ モニタ
４４ カメラ
４５ 入力Ｉ／Ｆ
５１〜５９，６１〜６３，７１〜８５ ステップ
Claims (8)
- 複数のクライアント装置と多地点音声画像通信サーバ装置とこれらを互いに接続するネットワークから構成される電子情報処理システムにおけるクライアント装置が電子情報を処理する方法であって、
前記多地点音声画像通信サーバ装置を介して他クライアント装置と音声および動画像または静止画像の通信を行なうステップと、
前記多地点音声画像通信サーバ装置に問い合わせて現在前記多地点音声画像通信サーバ装置に接続しているクライアント装置のリストである多地点通信参加者リストを取得するステップと、
前記多地点音声画像通信サーバ装置に問い合わせて取得した前記多地点通信参加者リストから選択された自クライアント装置または他クライアント装置から精細な静止画像の取得要求を受取った場合、精細な静止画像を自クライアント装置内の画像共有部に転送するステップと、
前記精細な静止画像の取得要求元の他クライアント装置に対して、前記多地点音声画像通信サーバ装置を介さずに直接、自クライアント装置内の画像共有部に保持された精細な静止画像を送信するステップと
を有することを特徴とする電子情報処理方法。 - 前記音声および動画像または静止画像の通信を行なうステップは、利用者からの動画像／静止画像切り替え要求に応じて、カメラから取得した動画像または静止画像を前記多地点音声画像通信サーバ装置に送信するステップを含むとともに、
利用者からの精細な静止画像の取得要求に応じて、カメラから取得した画像のうち、要求のあったタイミングの精細な静止画像を前記画像共有部に入力するステップをさらに有する
ことを特徴とする請求項１に記載の電子情報処理方法。 - 利用者からの電子報告書作成要求に応じて、報告書データを作成し、前記画像共有部に保持された精細な静止画像の情報を前記報告書データに追加し、電子報告書を作成するステップをさらに有する
ことを特徴とする請求項１に記載の電子情報処理方法。 - 複数のクライアント装置と多地点音声画像通信サーバ装置とこれらを互いに接続するネットワークから構成される電子情報処理システムにおけるクライアント装置であって、
取得され、転送された精細な静止画像を保持する画像共有部と、
前記多地点音声画像通信サーバ装置を介して他クライアント装置と音声および動画像または静止画像の通信を行うとともに、前記多地点音声画像通信サーバ装置に問い合わせて現在前記多地点音声画像通信サーバ装置に接続しているクライアント装置のリストである多地点通信参加者リストを取得する多地点通信部と、
前記多地点通信部で取得した前記多地点通信参加者リストから選択された自クライアント装置または他クライアント装置から精細な静止画像の取得要求を受取った場合、精細な静止画像を自クライアント装置内の画像共有部に転送するとともに、前記精細な静止画像の取得要求元の他クライアント装置に対して、前記多地点音声画像通信サーバ装置を介さずに直接、自クライアント装置内の前記画像共有部に保持された精細な静止画像を送信する画像制御部と
を有することを特徴とするクライアント装置。 - 前記画像制御部は、
利用者からの動画像/静止画像切り替え要求に応じて、カメラから取得した動画像または静止画像を前記多地点通信部に入力する手段と、
利用者からの精細な静止画像の取得要求に応じて、カメラから取得した画像のうち、要求のあったタイミングの精細な静止画像を前記画像共有部に入力する手段と
を有することを特徴とする請求項４に記載のクライアント装置。 - 利用者からの電子報告書作成要求に応じて、報告書データを作成し、前記画像共有部に保持された精細な静止画像の情報を前記報告書データに追加し、電子報告書を作成する報告書作成部をさらに有する
ことを特徴とする請求項４に記載のクライアント装置。 - 請求項１ないし３のいずれかに記載の電子情報処理方法における各ステップをコンピュータに実行させるための電子情報処理プログラム。
- 請求項１ないし３のいずれかに記載の電子情報処理方法における各ステップをコンピュータに実行させるための電子情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001389918A JP3782966B2 (ja) | 2001-12-21 | 2001-12-21 | 電子情報処理方法、クライアント装置、プログラム、および記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001389918A JP3782966B2 (ja) | 2001-12-21 | 2001-12-21 | 電子情報処理方法、クライアント装置、プログラム、および記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003199070A JP2003199070A (ja) | 2003-07-11 |
| JP3782966B2 true JP3782966B2 (ja) | 2006-06-07 |
Family
ID=27597992
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001389918A Expired - Lifetime JP3782966B2 (ja) | 2001-12-21 | 2001-12-21 | 電子情報処理方法、クライアント装置、プログラム、および記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3782966B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005059075A (ja) * | 2003-08-18 | 2005-03-10 | Matsushita Electric Ind Co Ltd | 生産システム |
| JP2009124328A (ja) * | 2007-11-13 | 2009-06-04 | Figla Co Ltd | 建築現場管理システム |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07123384A (ja) * | 1993-10-26 | 1995-05-12 | Toshiba Corp | マルチメディア会議録作成装置 |
| JP3185505B2 (ja) * | 1993-12-24 | 2001-07-11 | 株式会社日立製作所 | 会議録作成支援装置 |
| JPH09114857A (ja) * | 1995-10-17 | 1997-05-02 | T Jii T Eng Kk | 工事現場写真の登録・検索・編集方法及び装置 |
| JPH11196090A (ja) * | 1998-01-06 | 1999-07-21 | Nec Corp | 協同作業支援システム、装置及び記録媒体 |
| JP2001188837A (ja) * | 1999-12-28 | 2001-07-10 | Ntt Data Corp | 移動情報処理端末、野外情報管理装置、現場指揮・支援システム |
-
2001
- 2001-12-21 JP JP2001389918A patent/JP3782966B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003199070A (ja) | 2003-07-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6587870B2 (en) | Information sharing system, and information sharing system management apparatus and method | |
| US6856346B1 (en) | Camera operation apparatus | |
| US7683933B2 (en) | Image display apparatus, image display system, and image display method | |
| US11818496B2 (en) | Remotely accessed virtual recording room | |
| JP2007180828A (ja) | ネットワーク会議システム、ネットワーク会議方法、及び該方法を実行させるためのプログラム | |
| US6822676B1 (en) | Camera control system with electronic zoom processing | |
| JP2002116996A (ja) | 協調作業支援方法およびシステム、並びに協調作業用クライアント端末装置および協調作業コーディネータ並びに記録媒体 | |
| JP2004348268A (ja) | データ保管システムへのデータアップロード方法 | |
| US20060218248A1 (en) | Contents distribution system, contents distribution method, and computer-readable storage medium therefor | |
| JP3782966B2 (ja) | 電子情報処理方法、クライアント装置、プログラム、および記録媒体 | |
| US9456091B2 (en) | Devices and methods for performing operations on image data stored in an external storage device | |
| EP2846297A1 (en) | Information processing terminal, transmission system, and recording medium | |
| US20230308607A1 (en) | Recording information creation system, method for creating recording information, and non-transitory computer-executable medium | |
| JP4804558B2 (ja) | 画像処理装置及びその制御方法、プログラム | |
| JP4728706B2 (ja) | 番組制作管理サーバ、番組端末、番組制作管理プログラム、及び番組制作プログラム | |
| JP2001222318A (ja) | 制御システムおよびクライアント端末 | |
| JP3710027B2 (ja) | インターネット利用によるスクリプト転送実行方法および該スクリプト転送実行方法の処理手順を記録した記録媒体 | |
| JP3886868B2 (ja) | マルチメディアデータ処理方法、装置、およびプログラム | |
| JP4434725B2 (ja) | ファイル転送システム、ファイル転送装置、それらの制御方法及びプログラム | |
| JP2002238039A (ja) | 遠隔カンファレンスシステムおよび同サーバ | |
| EP4231632A1 (en) | Display system, display method, and carrier medium | |
| JP7372020B2 (ja) | 動画生成配信処理装置、動画生成配信方法、および動画生成配信プログラム | |
| JP2008033736A (ja) | 端末装置、ログ保存システム、その方法およびプログラム | |
| JP2001344366A (ja) | 作業データ管理方法 | |
| JP2001331513A (ja) | 作業データ管理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040213 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20040213 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20040213 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20050610 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050727 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050922 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20050922 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051122 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060123 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060301 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060313 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 3782966 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090317 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100317 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110317 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110317 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120317 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130317 Year of fee payment: 7 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |