JP4479376B2 - ネットワークカメラ及びネットワークシステム - Google Patents

Description

本発明は、音声通信が行えるネットワークカメラと、これを操作するコンピュータ装置を動作させるプログラム、及びこのコンピュータ装置を使って画像と音声の通信を行うネットワークシステムに関するものである。

最近、ネットワークカメラで画像を撮像し、インターネット等のネットワークを介してコンピュータ装置に送信するネットワークシステムが普及している。しかし、このネットワークシステムでは、コンピュータ装置を操作して画像情報を入手できるが、周囲の音声情報までは入手できない。そこで、スピーカやマイクを搭載して画像のほかに音声通信まで行えるネットワークカメラ（以下、音声対応ネットワークカメラという）が開発された。

図８は従来の音声通信を行うネットワークシステムの説明図である。このネットワークシステムにおいては、画像の送信に関して、音声対応型ネットワークカメラ１のカメラ１０で撮像した画像は画像処理部１２で圧縮処理され、この圧縮処理された画像データが通信制御部１３によってプロトコル処理されてネットワーク３に送出され、コンピュータ装置２へ送られる。コンピュータ装置２では受信した画像データを解凍処理して画面に表示する。図８においては図示はしないが、複数の音声対応型ネットワークカメラ１がネットワーク３に接続されており、コンピュータ装置２は音声対応型ネットワークカメラ１を切り換えて各カメラ１０で撮像した画像情報を入手する。

さらに音声通信に関しては、マイク１７から入力される音声は音声送信処理部１５にてＡＤ変換と圧縮処理されて、音声送信データが通信制御部１３さらにネットワーク３を経由してコンピュータ装置２に送られる。コンピュータ装置２では受信した音声送信データを処理して、スピーカ２８から音声出力する。同様に、コンピュータ装置２のマイク２７から入力された音声は、コンピュータ装置２で処理されて音声受信データとして送信され、ネットワーク３経由で音声対応型ネットワークカメラ１に送られる。音声対応型ネットワークカメラ１では、受信した音声受信データが通信制御部１３を介して音声受信処理部１４に渡され、そこで解凍処理及びＤＡ変換されてスピーカ１８に出力される。

このネットワークシステムにおいては、音声対応型ネットワークカメラ１の利用者が音声を送り、集音した音を聞く場合、コンピュータ装置２のマイク２７から音声を入力し、音声データ送信後、音声対応型ネットワークカメラ１のスピーカ１８から音声を出力する。このとき同時にこれをマイク１７で集音し、コンピュータ装置２に送信してスピーカ２８から出力する。制御部１９は音声対応型ネットワークカメラ１全体のシステムを制御する。また、コンピュータ装置２での音声処理は音声対応型ネットワークカメラ１からダウンロードされたＪＡＶＡ（登録商標）アプレットプログラム等によって処理される。

ところで、複数の音声対応型ネットワークカメラ１から画像情報を取得するとき、音声送信中、音声受信中の表示をディスプレイ上に行うことが提案されている（例えば特許文献１参照）。特許文献１のネットワークシステムは、テレビ会議室システム等のものであり、それぞれビデオカメラとマイク、スピーカを搭載した複数の映像音声通信端末がネットワークに接続されたものである。映像音声通信端末のディスプレイに表示される画面には、ビデオカメラの多地点映像表示ウィンドウが一覧表示される。同時にカメラ操作パネルも表示され、パン（左右）操作及びチルト（上下）操作のための方向ボタン、ズーム操作のズーム・ボタンが表示される。さらに、映像送信中を示すシンボルが表示され、この
シンボルが表示されている間はビデオカメラによる撮影映像がネットワーク３に送出されていることを表示する。同様に、音声送信中であることを示すシンボルが表示され、表示されている間は、マイクによる入力と入力音声のネットワークへの送出が有効になっていることを表示する。音声受信中であることを示すシンボルが表示されている間は、ネットワークからの受信音声のスピーカによる音声出力が有効になっている。
特開平９−２４７６３７号公報

ところで、音声対応型ネットワークカメラ１とコンピュータ装置２との音声送受信を半二重通信で行う場合、音声対応型ネットワークカメラ１の周囲の音をコンピュータ装置２のスピーカ２８から出力中には、コンピュータ装置２のマイク２７を使用することはできない。逆にコンピュータ装置２のマイク２７から入力中のときは音声対応型ネットワークカメラ１の周囲の音をスピーカ２８から出力することはできない。

そして、このようなネットワークシステムにおいて複数の音声対応型ネットワークカメラ１を複数のユーザが共同利用する場合には、複数のユーザの早い者勝ちした1人だけがマイク２７を使え、他のユーザは通信できなくなる。このとき各ユーザにこの情報が伝わらないと、操作の快適さが失われる。

なお、上述した特許文献１では、テレビ会議システム等の映像音声通信端末のディスプレイに音声送信中であることを示すシンボルが表示され、入力と入力音声のネットワークへの送出が有効なことを表示するとともに、音声受信中であることを示すシンボルが表示され、ネットワークからの受信音声の音声出力が有効なことを表示している。しかし、このテレビ会議システム等は、上述した音声送受信を半二重通信で行うものではない。

そこで上記従来の課題に鑑み本発明は、音声通信を快適な操作で簡単に行えるネットワークカメラ及びネットワークシステムを提供することを目的とする。

上記従来の課題を解決するために本発明は、音声データ出力が可能な第１の端末と音声データ出力が可能な第２の端末とネットワークを介して接続されたネットワークカメラであって、前記第１の端末が音声データを出力中は、前記第２の端末に音声データ出力を禁止する旨の表示を行わせ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨の表示を行わせることを主要な特徴とする。

本発明のネットワークカメラ及びネットワークシステムによれば、画面表示用ページのアイコンを見て操作するだけで、音声通信を快適且つ簡単に行うことができる。

上記課題を解決するために本発明の第１の形態は、音声データ出力が可能な第１の端末と音声データ出力が可能な第２の端末とネットワークを介して接続されたネットワークカメラであって、前記第１の端末が音声データを出力中は、前記第２の端末に音声データ出力を禁止する旨の表示を行わせ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨の表示を行わせるネットワークカメラであり、ページ情報に音声出力可能の表示と、音声出力禁止の表示が表示されるため、端末側では現在どのような音声通信状態なのか直ちに判断できる。

本発明の第２の形態は、前記ネットワークカメラは、さらに、前記第１の端末と前記第２の端末との音声データに応じた音声を出力可能な音声出力回路と、前記第１の端末と前記第２の端末とから音声データを受信し、前記第１の端末と前記第２の端末とへそれぞれの端末の表示部に表示させるページ情報を送信する送信制御部と、前記第１の端末が音声データを送信中は、前記第２の端末に音声出力を禁止する旨のページ情報を表示させ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨のページ情報を表示させる制御部と、を備えるものである。

本発明の第３の形態は、前記制御部は、前記第１の端末と前記第２の端末との両方が当該ネットワークカメラに音声データを出力していない間は、前記第１の端末と前記第２の端末との両方に音声データ出力が可能である旨の表示を行わせるものである。

本発明の第４の形態は、前記ネットワークカメラは、さらに、当該ネットワークカメラ周辺の画像を撮像するカメラを備え、前記制御部は前記カメラで撮像した画像を含む音声出力を禁止する旨のページ情報と、前記カメラで撮像した画像を含む音声データ出力が可能である旨のページ情報と、を表示させるものである。

本発明の第５の形態は、前記第１の端末に音声データ出力が可能である旨の第１のボタン表示を含むページ情報を表示させ、前記第１の端末が前記ボタン表示の押下を検知したとき、前記第１の端末に音声データが出力中である旨の第２のボタン表示を含むページ情報を表示させ、第１のボタン表示を前記第２のボタン表示が置き代えるものであり、音声出力可能を示す第１のボタン表示を押すことにより、通信状態が変化するとともに、表示も音声出力中を示す第２のボタン表示に代わるので、きわめて分かり易い。

本発明の第６の形態は、タイマ手段を備え、前記音声出力回路が前記第１の端末からの音声データ出力の終了後、前記タイマ手段が所定の時間を計測してタイムアップすると、前記制御部は前記第２の端末に音声データ出力が可能である旨のページ情報を表示させるものであり、時間がくると自動的に第１のボタン表示に代わるから、操作が簡単になる。

本発明の第７の形態は、前記制御部は、前記第１の端末の音声出力が終了した後に、前記第２の端末から当該ネットワークカメラの状態の通知を要求する信号を受信すると、前記第２の端末へ音声データ出力を禁止する旨の表示に代えて音声データ出力が可能である旨の表示を行わせるものであり、音声データ出力の禁止を示す第３のボタン表示を押すことにより、通信状態が変化し、表示も音声出力可能を示す第１のボタン表示に代わるので、きわめて分かり易い。

本発明の第８の形態は、音声データ出力が可能な第１の端末と音声データ出力が可能な第２の端末とネットワークを介して接続されたネットワークカメラと、前記第１の端末と、前記第２の端末と、で構成されるネットワークシステムであって、前記ネットワークカメラは、前記第１の端末が音声データを出力中は、前記第２の端末に音声データ出力を禁止する旨の表示を行わせ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨の表示を行わせるものであり、ボタン表示を見て操作するだけで、音声通信を快適且つ簡単に行うことができる。

（実施例１）
以下、本発明の実施例１のネットワークカメラとプログラム、及びネットワークシステムについて説明する。図１（ａ）は本発明の実施例１におけるネットワークカメラの構成図、図１（ｂ）は本発明の実施例１におけるネットワークカメラの制御部内の内部ブロック構成図、図２（ａ）は本発明の実施例１におけるコンピュータ装置のブロック構成図、図２（ｂ）は（ａ）のコンピュータ装置に別のプログラムをダウンロードしたブロック構成図、図３は本発明の実施例１におけるコンピュータ装置のトップページ説明図、図４は本発明の実施例１における音声送信表示と音声受信表示の説明図である。

図１において、１は画像を撮像して送信するとともに音声通信できる音声通信装置を搭載した音声対応型ネットワークカメラ（本発明のネットワークカメラ）、２は音声通信が可能なパソコン等のコンピュータ装置（本発明の端末）、３はインターネット等のネットワークである。１０は音声対応型ネットワークカメラ１のカメラ、１１は送受信するデータを圧縮したり解凍するコーディック部、１２はカメラ１０で撮像した画像信号を圧縮処理する画像処理部、１３は画像処理部１２が圧縮した画像データや音声データをプロトコル処理して送信する通信制御部である。なお、このプロトコル処理とは、ＴＣＰ／ＩＰプロトコルやイーサネット（登録商標）などのＩＥＥＥ８０２．０３プロトコルなどの処理を指す。

１４は音声対応型ネットワークカメラ１が受信した音声受信データ（ＰＣＭデータ）をデコードする音声受信処理部、１４ａは音声受信処理部１４からの出力はデジタル信号（ＰＡＭ信号）であるためこれをＤＡ変換しアナログ信号に変換するＤＡ変換部、１５は音声対応型ネットワークカメラ１に入力された音声をコード化する音声送信処理部、１５ａは音声入力調整回路１７ａ（後述）からの出力はアナログ信号であるためこれをＡＤ変換するＡＤ変換部、１６はカメラ１０のパン，チルト，ズームを制御するためのカメラ制御部、１７は音声対応型ネットワークカメラ１の周囲の音声を入力するためのマイク、１７ａは音声入力調整回路、１８は音声を出力するためのスピーカ、１８ａは音声出力調整回路である。

１９は音声対応型ネットワークカメラ１の制御部、２０は記憶部、２０ａは設定値を格納する設定値記憶部、２０ｂはコンピュータ装置２の画面上にアイコン等を表示するシンボルデータを格納したシンボルデータ記憶部、２０ｃはコンピュータ装置２に送信されコンピュータ装置２のＣＰＵで実行されるアクティブｘ，ＪＡＶＡ（登録商標）アプレット等のプログラム（以下、端末側通信処理手段）を格納した送信ファイル部である。制御部１９は中央演算処理装置（ＣＰＵ）とその制御プログラム及びデータを記憶した記憶部２０を備えており、各制御機能は記憶部２０からロードしたプログラムによりソフトウェアで機能実現手段として実行される。以上説明した符号は従来の音声対応型ネットワークカメラ１とコンピュータ装置２で説明した符号と基本的に同一である。

次に、図１（ｂ）に基づいて、コンピュータ装置２の端末側通信処理手段との間の通信
を行い、音声通信のためコンピュータ装置２の画面上に（１）音声送信中表示（本発明の第２のボタン表示）、（２）音声送信可能表示（本発明の第１のボタン表示）、（３）一時的音声送信禁止表示（本発明の第３のボタン表示）、（４）音声送信禁止表示、（１^*）音声受信中表示（本発明の第５のボタン表示）、（２^*）一時的音声受信禁止表示（本発明の第４のボタン表示）、（３^*）音声受信禁止表示を表示させる構成と、ＣＰＵに読み出されて実行されるプログラムについて説明する。なお、以下、音声対応型ネットワークカメラ１へ音声データを送信してスピーカから出力する場合を音声送信（本発明の音声出力）といい、音声対応型ネットワークカメラ１のマイクから入力された受信して音声を出力する場合を音声受信という。この（１）〜（４）に詳細ついては後述する。

図１（ｂ）において、１９ａはコンピュータ装置２から音声通信モードが選択されたとき、音声通話と画像送信を行う通信実行手段（本発明の通信手段）、１９ｂは音声対応型ネットワークカメラ１からコンピュータ装置２に送信するページ情報を生成する表示ページ生成手段である。上述の音声通信モードには、音声送受信（半二重）モード、第１の片方向（ネットワークカメラ→コンピュータ装置）モード、第２の片方向（コンピュータ装置→ネットワークカメラ）モード、音声禁止モードの４種類がある。１９ｃは音声対応型ネットワークカメラ１にアクセスしている複数のコンピュータ装置２の通信状態、例えばどれと通話中で、どれが音声送信禁止に設定されているのか等を示すためのフラグであり、１９ｄは時間経過で通信状態モードを変更する場合の時間を計測するタイマ手段である。タイマ手段１９ｄはコンピュータ装置１の基本クロックを利用して所定時間をカウントする。１９ｅは送信ファイル部２０ｃに格納されたアクティブｘ，ＪＡＶＡ（登録商標）アプレット等のプログラム、例えば後述の端末側通信処理手段２６をダウンロードするためのファイル転送手段である。

通信実行手段１９ａは、上記端末側通信処理手段２６から音声要求されると、フラグ１９ｃを参照して、ページ情報生成手段１９ｂは通信状態に基づいてページ情報を生成する。なお、通信実行手段１９ａ、ページ情報生成手段１９ｂ、ファイル転送手段１９ｅはいずれも上述した制御部１９の機能実現手段であり、通信実行手段１９ａは画像、音声の各データや、ページ情報生成手段１９ｂが生成したページ情報をＩＰパケットに収めてＨＴＴＰで通信制御部１３を介して通信する。

次にコンピュータ装置２の構成を図２（ａ）に基づいて説明する。図２（ａ）において、２１はネットワーク３との間のインターフェースである通信制御部、２２はハードウェアとしてＣＰＵを備え、記憶部２３からプログラムを読み出して機能実現手段として実現される制御演算部、２３はプログラムやデータを格納する記憶部、２４はネットワーク３上のサイトから画面表示用情報（ウェブページ）を取得して閲覧するためのブラウザ手段、２５はＪＡＶＡ（登録商標）アプレット、プラグイン等の音声通信のためのプログラムによって機能実現手段として実行される音声処理手段、２６は声対応型ネットワークカメラ１のファイル転送手段１９ｅによってダウンロードされたアクティブｘ，ＪＡＶＡ（登録商標）アプレット等のプログラムによって機能実現手段として実行される端末側通信処理手段、２７はマイク、２７ａは音声入力回路、２８はスピーカ、２８ａは音声出力回路、２９は表示部である。ブラウザ手段２４も汎用のブラウザプログラムで実現される機能実現手段である。端末側通信処理手段２６はブラウザ手段２４と音声処理手段２５の機能を拡張し、音声通信に関しては音声処理手段２５が送受信の処理を交互に行うために半二重の通信を行う。なお、端末側通信処理手段２６として専用プログラムを搭載することもできる。

続いて、実施例１の音声対応型ネットワークカメラ１とコンピュータ装置２の音声通信時の動作について説明する。コンピュータ装置２のブラウザ手段２４によって音声対応型ネットワークカメラ１の通信実行手段１９ａにアクセスし、音声対応型ネットワークカメ
ラ１に対するトップページを要求する。トップページ（図示せず）には通信を行うのか、システムの設定値の入力を行うのか、を選択する選択ボタンが設けられており、通信を行う選択ボタンを押すと、音声対応型ネットワークカメラ１からＨＴＭＬ等のポータル画面表示用情報が送信される。これに対して設定を行う選択ボタンを押した場合は、音声対応型ネットワークカメラ１から設定入力ページが送信され、これに入力すれば設定が完了する。

そこで、まずポータル画面表示用情報を説明する。図３において、５１は動画像や静止画像等の画像域、５２は音声対応型ネットワークカメラ１のカメラ１０を制御するコントロールバーである。５３は音声対応型ネットワークカメラ１に対する音声送信の現在の通信状態を表示するとともに押下したときこれを変更する音声送信表示ボタン、５４は音声対応型ネットワークカメラ１で行われた音声入力に対する現在の出力状態を示す音声受信表示ボタンである。５５は音声対応型ネットワークカメラ１のスピーカ１８から出力する音量を調節する音量調整バーである。音声対応型ネットワークカメラ１のクライアントは、このポータル画面表示用情報を受信してモニタに表示し、ポータル画面の画像を見ながらコントロールバー５２の方向制御ボタン、ズーム調節バーを操作してカメラ１０のアングル等を切り替え、新しい画像を入手する。音声通信モードにおいては、音声送信表示ボタン５３、音声受信表示ボタン５４、音量調整バー５５を操作する。

ところで実施例１においては、音声送信表示ボタン５３として、図４に示すような（１）音声送信中表示、（２）音声送信可能表示、（３）一時的音声送信禁止表示、（４）音声送信禁止表示（実施例1では無表示）の４種類（実施例1では３種類）の通信状態を表すボタンが設けられ、音声受信表示ボタン５４としては（１^*）音声受信中表示、（２^*）一時的音声受信禁止表示、（３^*）音声受信禁止表示（実施例1では無表示）の３種類（実施例1では２種類）の通信状態を表すボタンが設けられている。これらが表示されているときは、それぞれ音声送信と音声受信の現在の状態を示しており、音声送信表示ボタン５３、音声受信表示ボタン５４を押下することにより、モードの変更が可能になる。

音声送信可能表示を押すと、音声送信中表示になり、音声送信中表示を押すと、音声送信が終了して音声送信可能表示に戻り、一時的音声送信禁止表示を押したとき、音声送信中のユーザがいなければ音声送信中表示に変更される。同様に、一時的音声受信禁止表示を押すと音声受信中表示に変わり、音声受信中表示を押すと一時的音声受信禁止表示に戻る。このように本発明においては、各ボタン表示を押下すると通信状態変化に従って別のボタン表示に変更される。また、一時的音声送信禁止表示はタイマによって所定時間経過すると、自動的に元の通信状態モードに戻すことができる。これらの詳細については後述する。

図３のポータル画面表示用情報に表示されている通信状態はユーザによる設定を反映したもので、音声送信表示ボタン５３は音声送信可能表示、音声受信表示ボタン５４は音声受信中表示を示し（以下、音声送信可能／音声受信中）、音声送受信（半二重）モードである。音声送信表示ボタン５３が音声送信中、音声受信表示ボタン５４が一時的音声受信禁止（以下、音声送信中／一時的音声受信禁止）も設定できるが、他のクライアントに影響が出るので通常（音声送信可能／音声受信中）に設定される。この外、例えば、設定入力ページを使って、初期設定によって音声受信禁止、音声受信禁止（以下、音声受信禁止／音声受信禁止）を選択した場合は、音声禁止モードとなり、音声送信表示ボタン５３、音声受信表示ボタン５４は表示されない。なお、このときは音声禁止であるから、音量調整バー５５の表示も停止される。また、同様に音声送信表示ボタン５３と音声受信表示ボタン５４がそれぞれ（音声送信禁止／音声受信中）、（音声送信可能／音声受信禁止）に設定されたときには、それぞれ第１の片方向モード、第２の片方向モードとなる。そして、音声送信表示ボタン５３、音声受信表示ボタン５４を押すことにより通信状態が変わり
、モード変更が可能になるが、実施例１では初期設定からモード変更になって所定時間経過すると、自動的に元の設定モードに戻すことができる。

ところで、音声対応型ネットワークカメラ１とコンピュータ装置２が１対１（単独ユーザ）で音声送受信（半二重）する場合と、１対複数（複数ユーザ）で音声送受信（半二重）する場合とでは、音声対応型ネットワークカメラ１における処理が異なり、とくに複数のコンピュータ装置２が接続されたときにはこの音声通信が半二重通信であることから、音声パスを獲得したコンピュータ装置２と他のコンピュータ装置２とで、ポータル画面表示用情報が異なったものとなる。

そこで最初に、音声対応型ネットワークカメラ１とコンピュータ装置２が１対１（単独ユーザ）で音声送受信（半二重）する場合について説明する。図５（ａ）に示す初期の通信状態は、図３のＨＴＭＬ等で記述されたポータル画面表示用情報が送信され、（音声送信可能／音声受信中）の通信状態であって画面には音声送信可能表示、音声受信中表示が表示されている。図５（ａ）の状態で、コンピュータ装置２から音声を音声対応型ネットワークカメラ１に送りたい場合は、音声送信可能表示の音声送信表示ボタン５３を押下する。このとき端末側通信処理手段２６は音声対応型ネットワークカメラ１にこの旨を通知し、音声対応型ネットワークカメラ１の通信実行手段１９ａはフラグ１９ｃを初期の通信状態の（音声送信可能／音声受信中）から（音声送信中／一時的音声受信禁止）に変更する。ページ情報生成手段１９ｂがポータル画面表示用情報の音声送信表示ボタン５３を音声送信中表示に変更するようにＨＴＭＬ等で記述したページ情報を生成する。半二重通信であるため、音声受信表示ボタン５４も同時に音声受信中表示から一時的音声受信禁止表示に変更する。この結果、通信実行手段１９ａは図５（ｂ）に示すような（音声送信中／一時的音声受信禁止）が表示されたポータル画面表示用情報をコンピュータ装置２に送信し、モニタに表示する。なお、音声対応型ネットワークカメラ１から音声送信データのパケットは送信されるが、コンピュータ装置２が受信した音声データは、端末側通信処理手段２６によってミュートされ、スピーカ２８からは出力されない。

その後、マイク２７から通話を終えてそのまま無音の状態が続くと、タイマ手段１９ｄが所定の時間をカウントし、タイムアップしたら、通信実行手段１９ａはフラグ１９ｃを（音声送信中／一時的音声受信禁止）の通信状態から（音声送信可能／音声受信中）の通信状態に変更し、この旨をコンピュータ装置２に通知する。これを受けたコンピュータ装置２が新しいポータル画面表示用情報を要求すると、通信実行手段１９ａは更新された（音声送信可能／音声受信中）を示す表示のポータル画面表示用情報をコンピュータ装置２に送信し、ディスプレイに表示する。従って、更に継続して音声送信を行いたい場合は再度音声送信表示ボタン５３を押す必要がある。

ところで、以上説明したポータル画面表示用情報更新のための構成に代えて、図２（ｂ）に示す端末側通信処理手段２６を含んだプログラムの構成によって、ポータル画面表示用情報を更新することもできる。２６ａはＨＴＭＬ等で記述されたページ情報の一部の記述を変更するページ情報更新手段、２６ｂは通信状態を示すためのフラグ、２６ｃは時間経過でモードを変更する場合に時間を計測するタイマ手段である。

このプログラムの構成の場合、音声送信可能表示の音声送信表示ボタン５３が押下されたとき、端末側通信処理手段２６がこれを音声対応型ネットワークカメラ１に通知するが、さらに通信状態を示すフラグ２６ｂを（音声送信中／一時的音声受信禁止）に変更し、且つポータル画面表示用情報の音声送信表示ボタン５３を音声送信可能表示から音声送信中表示に、音声受信表示ボタン５４を音声受信中表示から一時的音声受信禁止表示にそれぞれ変更する。なお、これらの各アイコンのデータは端末側通信処理手段２６のプログラムと一緒にダウンロードしておく。このような処理が行われたポータル画面表示用情報は
直ちにコンピュータ装置２のモニタに表示される。

無音の状態が続いたときのポータル画面表示用情報の更新も、時間経過をコンピュータ装置２側のタイマ手段２６ｃで行い、端末側通信処理手段２６はフラグ２６ｂを（音声送信中／一時的音声受信禁止）から（音声送信可能／音声受信中）に変更し、更新されたポータル画面表示用情報をモニタで表示する。この図２（ｂ）の構成でポータル画面表示用情報の更新を行えば処理が容易で高速処理が可能になる。

続いて、音声対応型ネットワークカメラ１とコンピュータ装置２が、１対複数（複数ユーザ）で音声送受信（半二重）する場合について説明する。図６（ａ）は本発明の実施例１におけるネットワークシステムの複数ユーザの場合の初期通信状態の説明図、図６（ｂ）は（ａ）の初期通信状態の第１のコンピュータ装置の音声表示を押したときの通信状態の説明図である。図６（ａ）に示すコンピュータ装置２Ａのユーザが音声対応型ネットワークカメラのアクセスし、次いでコンピュータ装置２Ｂのユーザがアクセスしたとすると、通信実行手段１９ａはまずフラグ１９ｃを参照し、音声送信中のフラグが立っていないときのみ、アクセスしてきたコンピュータ装置２と音声送受信（半二重）を開始する。すなわち、早い者勝ちでコンピュータ装置２Ａと音声対応型ネットワークカメラ１との音声通信のみが有効になる。従ってコンピュータ装置２Ａは設定に従って音声通信を開始する。図６（ａ）のコンピュータ装置２Ａの設定は（音声送信中／一時的音声受信禁止）の通信状態であり、音声は音声対応型ネットワークカメラ１から出力され、音声対応型ネットワークカメラ１のマイク１７で集音された音声はコンピュータ装置２Ａからの出力が停止される。もし、コンピュータ装置２Ａに（音声送信可能／音声受信中）の設定がなされていた場合は、図５（ａ）に示す状態となり、音声を音声対応型ネットワークカメラ１のスピーカ１８から出力できないが、マイク１７で集音した音声はコンピュータ装置２Ａから出力できることになる。

コンピュータ装置２Ａがアクセスした状態で、コンピュータ装置２Ｂが２番目にアクセスすると、音声対応型ネットワークカメラ１の通信実行手段１９ａはフラグ１９ｃを参照し、コンピュータ装置２Ａのフラグが音声送信中であることを検出して、コンピュータ装置２Ｂのフラグを設定された（音声送信可能／音声受信中）の通信状態から図６（ａ）に示すように（一時的音声送信禁止／音声受信中）の通信状態に変更し、一時的音声送信禁止表示／音声受信中表示を表示したポータル画面表示用情報を送信し、コンピュータ装置２Ｂに表示する。コンピュータ装置２Ｂのユーザが、この一時的音声送信禁止表示を押すと、コンピュータ装置２Ｂの端末側通信処理手段２６は音声対応型ネットワークカメラ１の通信実行手段１９ａに通信が可能か問い合わせ、通信実行手段１９ａがフラグ１９ｃを参照し、コンピュータ装置２Ａのフラグが音声送信中であった場合には、一時的音声送信禁止表示を継続する。

その後この一時的音声送信禁止の状態が所定時間続いたときは、実施例１においては、通信実行手段１９ａがコンピュータ装置２Ｂのフラグを（音声送信可能／音声受信中）に変更し、表示ページ生成手段１９ｂに新しいポータル画面表示用情報を生成させ、コンピュータ装置２Ｂのモニタに図６（ｂ）に示すような音声送信可能表示／音声受信中表示を表示したポータル画面表示用情報を表示させる。このポータル画面表示用情報の音声送信可能表示を押下したとき、音声対応型ネットワークカメラ１からの音声送信が可能になる。なお、コンピュータ装置２Ａの音声通信が終了し一時的音声送信禁止表示がなされたままのときには、コンピュータ装置２Ｂのユーザが一時的音声送信禁止表示を押すことにより、コンピュータ装置２Ｂの端末側通信処理手段２６が音声対応型ネットワークカメラ１の通信実行手段１９ａに問い合わせ、フラグ１９ｃを参照し、コンピュータ装置２Ａのフラグが音声送信中でなくなったことを知り、図６（ｂ）に示す音声送信可能表示／音声受信中表示のポータル画面表示用情報に変更する。

なお、一時的音声送信禁止表示を押された後、コンピュータ装置２Ｂの端末側通信処理手段２６が定期的に音声対応型ネットワークカメラ１の通信実行手段１９ａにネットワークカメラ状態通知要求を行う方法を採用することもできる。このとき通信実行手段１９ａはフラグ１９ｃを参照し、コンピュータ装置２Ａのフラグが音声送信中でなくなった時点に、表示ページ生成手段１９ｂに新しいポータル画面表示用情報を生成させ、このポータル画面表示用情報をコンピュータ装置２Ｂに送信し、モニタに表示させることができる。この場合、音声通信が終了したら自動的に音声送信可能表示／音声受信中表示に切り替わるので、ユーザにとってきわめて使い易くなる。

ところで、実施例１のコンピュータ装置２Ａは、端末側通信処理手段２６が音声対応型ネットワークカメラ１から送られた音声データをコンピュータ装置２Ａ内でミュートさせるので、音声対応型ネットワークカメラ１から送信される音声送信データに影響がなく、コンピュータ装置２Ｂを（音声送信可能／音声受信中）の通信状態にすることにより、マイク１７で集音した音声はコンピュータ装置２Ａから出力することが可能になる。このときプライバシーに関して注意しなければならないのは、コンピュータ装置２Ａのユーザが音声対応型ネットワークカメラ１のスピーカ１８から音声を出力していたとき、同じ音声対応型ネットワークカメラ１にアクセス中のコンピュータ装置２Ｂのユーザはマイク１７を使ってこの音声を聞くことができる点である。なお、コンピュータ装置２Ｂのスピーカ２８からの出力には音声ループが形成されたときに発生するエコーがかかることはない。

以上の説明は設定によって音声送受信（半二重）する場合であったが、音声送信禁止または音声受信禁止に設定された場合は、片方向通信モードとなる。片方向通信は音声対応型ネットワークカメラ１からコンピュータ装置２へ音声を送信する第１の片方向通信モードと、コンピュータ装置２から音声対応型ネットワークカメラ１へ音声を送信する第２の片方向通信モードの２つがある。

第１の片方向通信モードでは、音声送信禁止表示は表示されず、スピーカ２８から出力することを示す音声受信中表示または一時的音声受信禁止表示のいずれかが表示される。一時的音声受信禁止表示がなされた場合は、この音声受信表示ボタン５４を押下すると音声受信中表示に変更される。

また、第２の片方向通信モードの場合、音声受信禁止表示は表示されず、音声送信可能表示を押すと、単独ユーザがアクセスしている場合はそのままマイク２７から入力できる声入力中表示に変更される。通話が終了したときこのユーザが音声受信中表示を押すと、音声送信可能表示に変更され、通話が終了したときそのまま何もしなくても自動的に一定時間経過すると、音声送信可能表示に変更される。

複数ユーザがアクセスしている場合は、一番早くアクセスしたユーザが音声送信可能表示となっている音声送信表示ボタン５３を押すと音声通話が行え、遅れてアクセスした他のユーザは音声送信表示ボタン５３を押しても一時的音声送信禁止表示となって音声通信はできない。最初の通話が終了した後しばらく時間が経過して音声送信可能表示に変更されたとき、この音声送信表示ボタン５３を押すことにより通話することができる。

なお、音声音声禁止モードの場合、音声送信表示ボタン５３、音声受信表示ボタン５４は表示されず、音量調整バー５５の表示も停止される。従って、ユーザが設定を行うだけで、音声対応型ネットワークカメラ１から画像の送受信を行うだけのポータル画面表示用情報に変更される。

続いて、本発明の実施例１のネットワークシステムで音声送信表示が行われるフローに
ついて説明する。音声送信可能を基準の通信状態モードとしている。図７は本発明の実施例１におけるネットワークシステムにおける音声送信表示のフローチャートである。図７において、まず、設定によって音声通信が許可され、音声送信禁止になっていないかがチェックされ（ｓｔｅｐ１）、音声送信禁止に設定されている場合は音声送信表示を行わない（ｓｔｅｐ２）。ｓｔｅｐ１において、音声通信が許可されている場合、フラグを参照することにより、他のクライアント（コンピュータ装置）と通信中であるか否かが判定される（ｓｔｅｐ３）。このとき他のクライアントと通信中であれば一時的音声送信禁止表示を行い（ｓｔｅｐ４）、ｓｔｅｐ３に戻って他のクライアントとの音声通信が終了するまで待機する。他のクライアントと通信中でなければ音声送信可能表示を行う（ｓｔｅｐ５）。

次に、音声送信可能表示が押下されたか判断され（ｓｔｅｐ６）、押下されない場合はｓｔｅｐ３に戻って押下されるまで待機する。ｓｔｅｐ６において、音声送信可能表示が押下された場合、音声送信中表示に変更する（ｓｔｅｐ７）。これとともにタイマをリセットし（ｓｔｅｐ８）、タイマがタイムアップしたら（ｓｔｅｐ９）、ｓｔｅｐ３に戻って繰り返すものである。

以上説明した動作によって、音声通信が許可されている場合は、他のクライアントと通信中でなければ音声送信可能表示となり、音声通信したいときには音声送信可能表示を押して音声受信中表示にして通話し、通話が終了したら時間が経過すると自動的に元に戻ることができ、ポータル画面表示用情報のアイコン表示が分かり易く、操作が容易で、操作性に優れたものとなる。

以上説明したように、実施例１の音声対応型ネットワークカメラとプログラム、及びネットワークシステムは、ポータル画面表示用情報のアイコンを見て操作するだけで、音声通信を快適且つ簡単に行うことができる。

本発明は、音声対応型ネットワークカメラを使って画像送信と音声通信を行うネットワークシステムに適用できる。

（ａ）本発明の実施例１におけるネットワークカメラの構成図、（ｂ）本発明の実施例１におけるネットワークカメラの制御部内の内部ブロック構成図 （ａ）本発明の実施例１におけるコンピュータ装置のブロック構成図、（ｂ）（ａ）のコンピュータ装置に別のプログラムをダウンロードしたブロック構成図 本発明の実施例１におけるコンピュータ装置のトップページ説明図 本発明の実施例１における音声送信表示と音声受信表示の説明図 （ａ）本発明の実施例１におけるネットワークシステムの単独ユーザの場合の初期通信状態の説明図、（ｂ）（ａ）の初期通信状態の音声表示を押したときの通信状態の説明図 （ａ）本発明の実施例１におけるネットワークシステムの複数ユーザの場合の初期通信状態の説明図、（ｂ）（ａ）の初期通信状態の第１のコンピュータ装置の音声表示を押したときの通信状態の説明図 本発明の実施例１におけるネットワークシステムにおける音声送信表示のフローチャート 従来の音声通信を行うネットワークシステムの説明図

符号の説明

１ 音声対応型ネットワークカメラ
２ コンピュータ装置
３ ネットワーク
１０ カメラ
１１ コーディック部
１２ 画像処理部
１３ 通信制御部
１４ 音声受信処理部
１４ａ ＤＡ変換部
１５ 音声送信処理部
１５ａ ＡＤ変換部
１６ カメラ制御部
１７ マイク
１７ａ 音声出力調整回路
１８ スピーカ
１８ａ 音声入力調整回路
１９ 制御部
１９ａ 通信実行手段
１９ｂ 表示ページ生成手段
１９ｃ フラグ
１９ｄ タイマ手段
１９ｅ ファイル転送手段
２０ 記憶部
２０ａ 設定値記憶部
２０ｂ シンボルデータ記憶部
２０ｃ 送信ファイル部
２１ 通信制御部
２２ 制御演算部
２３ 記憶部
２４ ブラウザ手段
２５ 音声処理手段
２６ 端末側通信処理手段
２６ａ ページ情報更新手段
２６ｂ フラグ
２６ｃ タイマ手段
２７ マイク
２７ａ 音声入力回路
２８ スピーカ
２８ａ 音声出力回路
２９ 表示部
５１ 画像域
５２ コントロールバー
５３ 音声送信表示ボタン
５４ 音声受信表示ボタン
５５ 音量調整バー

Claims (8)

1. 音声データ出力が可能な第１の端末と音声データ出力が可能な第２の端末とネットワークを介して接続されたネットワークカメラであって、
   前記第１の端末が音声データを出力中は、前記第２の端末に音声データ出力を禁止する旨の表示を行わせ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨の表示を行わせることを特徴とするネットワークカメラ。
2. 前記ネットワークカメラは、さらに、
   前記第１の端末と前記第２の端末との音声データに応じた音声を出力可能な音声出力回路と、
   前記第１の端末と前記第２の端末とから音声データを受信し、前記第１の端末と前記第２の端末とへそれぞれの端末の表示部に表示させるページ情報を送信する送信制御部と、
   前記第１の端末が音声データを送信中は、前記第２の端末に音声出力を禁止する旨のページ情報を表示させ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨のページ情報を表示させる制御部と、を備えることを特徴とする請求項１記載のネットワークカメラ。
3. 前記制御部は、前記第１の端末と前記第２の端末との両方が当該ネットワークカメラに音声データを出力していない間は、前記第１の端末と前記第２の端末との両方に音声データ出力が可能である旨の表示を行わせることを特徴とする請求項１あるいは２記載のネットワークカメラ。
4. 前記ネットワークカメラは、さらに、
   当該ネットワークカメラ周辺の画像を撮像するカメラを備え、
   前記制御部は前記カメラで撮像した画像を含む音声出力を禁止する旨のページ情報と、前記カメラで撮像した画像を含む音声データ出力が可能である旨のページ情報と、を表示させることを特徴とする請求項２から３いずれか１項記載のネットワークカメラ。
5. 前記第１の端末に音声データ出力が可能である旨の第１のボタン表示を含むページ情報を表示させ、前記第１の端末が前記ボタン表示の押下を検知したとき、前記第１の端末に音声データが出力中である旨の第２のボタン表示を含むページ情報を表示させ、第１のボタン表示を前記第２のボタン表示が置き代えることを特徴とする請求項２から４いずれか１項記載のネットワークカメラ。
6. タイマ手段を備え、
   前記音声出力回路が前記第１の端末からの音声データ出力の終了後、前記タイマ手段が所定の時間を計測してタイムアップすると、前記制御部は前記第２の端末に音声データ出力が可能である旨のページ情報を表示させることを特徴とする請求項２あるいは３記載のネットワークカメラ。
7. 前記制御部は、前記第１の端末の音声出力が終了した後に、前記第２の端末から当該ネットワークカメラの状態の通知を要求する信号を受信すると、前記第２の端末へ音声データ出力を禁止する旨の表示に代えて音声データ出力が可能である旨の表示を行わせることを特徴とする請求項１から４いずれか１項に記載のネットワークカメラ。
8. 音声データ出力が可能な第１の端末と音声データ出力が可能な第２の端末とネットワークを介して接続されたネットワークカメラと、前記第１の端末と、前記第２の端末と、で構成されるネットワークシステムであって、
   前記ネットワークカメラは、
   前記第１の端末が音声データを出力中は、前記第２の端末に音声データ出力を禁止する旨の表示を行わせ、前記第１の端末が音声データを出力していない間は、前記第２の端末に音声データ出力が可能である旨の表示を行わせることを特徴とするネットワークシステム。

Images