JP4209650B2 - 画像表示方法及び画像伝送装置 - Google Patents
画像表示方法及び画像伝送装置 Download PDFInfo
- Publication number
- JP4209650B2 JP4209650B2 JP2002269720A JP2002269720A JP4209650B2 JP 4209650 B2 JP4209650 B2 JP 4209650B2 JP 2002269720 A JP2002269720 A JP 2002269720A JP 2002269720 A JP2002269720 A JP 2002269720A JP 4209650 B2 JP4209650 B2 JP 4209650B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- compressed
- camera
- network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Closed-Circuit Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は複数の動画像圧縮装置と動画像データ表示装置を組合せたシステムの改良に関するものである。
【０００２】
【従来の技術】
近年、画像処理技術、とりわけ画像情報、音声情報の圧縮技術は、めざましい発展を遂げており、容量の小さい伝送路であっても高品質な動画像や音声の伝送が可能となった。 例えば、ネットワークを介して遠隔地の被写体の様子を監視する用途において、データ伝送容量の小さい伝送路であっても、画像データ圧縮装置との組み合わせで、高品質な動画像を送信することが出来る。
【０００３】
また、画像圧縮技術を利用することによって、従来は、１つの動画像伝送しか行えないデータ伝送容量の伝送路に、複数の動画像データを伝送することが可能になった。 例えば、ネットワークに複数の動画像データ圧縮装置を接続して、カメラで撮影した動画像に対し画像圧縮処理を行い、ネットワークに伝送するという構成で、遠隔監視などの用途に用いられている。
【０００４】
本出願人は、特願２００１−２９２６６６「圧縮画像伝送装置」において、以下に説明するような圧縮画像伝送システムを考案している。 このシステムは、ネットワークに伝送された複数の動画像圧縮データを、同じネットワークに接続された受信端末内の動画像データ伸張装置で伸張し、モニタ画面に映し出す。 モニタ画面には複数の参照画像が表示されており、それぞれのカメラで撮影された映像が小さな画面で確認できるようになっている。 その参照画像を操作卓より選択することで、その参照画像に対応する高精細なカメラの映像が画面上に映し出される。
【０００５】
この複数の動画像データ圧縮装置と参照画像を伴う受信端末をネットワークに接続した圧縮画像伝送装置の構成例を図２に示す。 この圧縮画像伝送装置の送信側には、映像データ出力手段(以下、カメラを例にして説明)と、該映像データを圧縮処理するエンコーダを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。 この例では、カメラ１−１、カメラ１−９の２台のカメラがあり、この２つの組み合わせがそれぞれネットワーク１−２５に接続されている。
【０００６】
カメラ１−１から出力された映像信号１−２は、エンコーダ２−１で画像圧縮処理される。 エンコーダ２−１から出力された圧縮データ１−４は、ネットワーク１−２５へ出力される。 またエンコーダ２−１は、映像信号１−２に対し、高圧縮が可能な画像圧縮処理を行い、参照画像データ１−５として出力する。参照画像データ１−５は、圧縮率が高いことが特徴である。
【０００７】
そのため、映像信号１−２の画像サイズより小さい画像データに変換した後に圧縮処理を行う。 又は、フレームレートを映像信号１−２よりも少ない枚数にして圧縮処理を行うことで高圧縮を実現する。 画質も圧縮データ１−４のような高精細画像ではなく劣化した画像になってもかまわず、ある程度の画像の劣化を許容できる場合は、より高圧縮な画像圧縮処理を可能にする。 同様に、カメラ１−９から出力された映像信号１−１０は、エンコーダ２−２で画像圧縮処理され、圧縮データ１−１２として、ネットワーク１−２５に出力される。 またエンコーダ２−２は、映像信号１−１０に対し高圧縮が可能な画像圧縮処理を行い、参照画像データ１−１３として、ネットワーク１−２５へ出力する。 以上が圧縮データ送信側の構成である。
【０００８】
次に受信側は、圧縮データに伸張処理を行うデコーダとモニタの組み合わせを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。この例では、デコーダ１−２７とモニタ１−３１から成る組み合わせが１組接続されている。 この例では、デコーダ１−２７は、ネットワーク１−２５に伝送された２つの圧縮データ１−４，１−１２の内のいずれか一方を、圧縮データ１−２６として取り込み、画像伸張処理を行う。 伸張された画像データは映像信号１−２８として映像信号合成器２−４に出力される。
【０００９】
またデコーダ１−３８は、ネットワーク１−２５に伝送された参照画像データ１−５を、参照画像データ１−３７として取り込み、画像伸張処理を行った後、参照画像１−３９として映像信号合成器２−４へ出力する。 またデコーダ１−４１は、ネットワーク１−２５に伝送された参照画像データ１−１３を、参照画像データ１−４０として取り込み、画像伸張処理を行った後、参照画像１−４２として映像信号合成器２−４へ出力する。 映像信号合成器２−４は、入力された映像信号１−２８、参照画像１−３９、参照画像１−４２を合成し、１枚の画像データである合成映像信号１−３０としてモニタ１−３１へ出力する。
【００１０】
操作卓１−３２は、モニタ１−３１の参照画像を見ながら、どのカメラの映像を選択するか指示する信号を送信側に送るために設置される。 操作卓１−３２からのカメラ選択信号１−３３は、圧縮データ選択器２−３へ出力される。
【００１１】
圧縮データ選択器２−３は、カメラ選択信号１−３３の内容から、操作卓１−３２で、どのカメラ映像を選択したかを判断する。 そして、圧縮データ選択器２−３は、選択したカメラ映像に対応する圧縮データを選択するための圧縮データ選択信号１−３５を、デコーダ１−２７へ出力する。 デコーダ１−２７は、入力された圧縮データ選択信号１−３５の情報に基づき、伸張処理を行う圧縮データを選択する。
【００１２】
次に、図２の複数の動画像データ圧縮装置と参照画像を伴う受信端末をネットワークに接続した圧縮画像伝送装置の動作を説明する。 カメラ１−１から出力された映像信号１−２は、エンコーダ２−１で画像圧縮処理され、圧縮データ１−４としてネットワーク１−２５へ出力される。 同時に、エンコーダ２−１で映像信号１−２に対し、より高圧縮処理が行われ、参照画像データ１−５がネットワーク１−２５へ出力される。 圧縮データ１−４と参照画像データ１−５は同じ映像が基であるが、その圧縮データサイズは大きく異なり、圧縮データ１−４に対する参照画像データ１−５の比は１０分の１から１００分の１である。
【００１３】
同様に、カメラ１−９から出力された映像データ１−１０はエンコーダ２−２で画像圧縮処理され、圧縮データ１−１２と参照画像データ１−１３として出力される。 これにより、ネットワーク１−２５には、圧縮データ１−４，１−１２、参照画像データ１−５，１−１３の４つの画像圧縮データが入力されることになる。ここで、ネットワーク１−２５の伝送容量は有限であるため、４つの圧縮データの合計が、伝送容量を超えないデータ量となるように制御しなければならない。
【００１４】
そこで、圧縮データ１−４と１−１２の圧縮データサイズを、ネットワーク１−２５の伝送容量を３分の１に等分割した際の圧縮データサイズと同じ値に制限する。 そして、圧縮データ１−４と１−１２は、それぞれ伝送容量の３分の１の伝送容量を用いて伝送し、残りの３分の１の伝送容量を用いて参照画像データ１−５と１−１３を伝送する。 前述したように、圧縮データに比べ、参照画像データのサイズは、１０分の１から１００分の１と小さいため、例えば、１００分の１のサイズ比だとすると、１００個の参照画像データを合わせることで１つの圧縮データのサイズと等しくなる。 これは、全ての参照画像データを１つにまとめた場合、１００個の参照画像データを同時に伝送できるということである。 なお、この伝送容量の分割の仕方についての詳しい説明は後述する。 以上が送信側の動作である。
【００１５】
一方、受信側では、ネットワーク１−２５に接続されたデコーダ１−２７で、ネットワーク１−２５上に伝送された圧縮データ１−４か１−１２のいずれかの圧縮データを取り込み、画像伸張処理を行う。 ここで、デコーダ１−２７に、どの圧縮データを取り込むかは、圧縮データ選択信号１−３５によって決まる。デコーダ１−２７は、圧縮データ１−４か１−１２を元の映像信号に戻す伸張処理を行う。 デコーダ１−２７で伸張された映像信号１−２８は、映像信号合成器２−４へ出力する。
【００１６】
デコーダ１−３８は、参照画像データ１−５をネットワーク１−２５を介して参照画像データ１−３７として取り込む。 そして、画像伸張処理を行い、参照画像１−３９として映像信号合成器２−４へ出力する。 同様にデコーダ１−４１は、参照画像データ１−１３をネットワーク１−２５を介して参照画像データ１−４０として取り込む。 そして画像伸張処理を行い、参照画像１−４２として映像信号合成器２−４へ出力する。
【００１７】
映像信号合成器２−４には、映像信号１−１８、参照画像１−３９，１−４２の３つの映像が入力される。 そして、それぞれの映像信号は、モニタ１−３１の画面レイアウトに合わせた位置に表示されるように重ね合わせ処理が行われ、１枚の画像である合成映像信号１−３０として、モニタ１−３１へ出力される。この画面レイアウトに関しても後述する。
【００１８】
モニタ１−３１は、この合成映像信号１−３０を表示する。 これによって、モニタ１−３１の画面上には、全ての参照画像が表示されるため、この映像により全てのカメラが何を撮影しているかを把握することが出来る。 そこで、モニタ１−３１の近くにある操作卓１−３２で、モニタ画面上に表示された複数の参照画像を基に、監視したい１つのカメラ映像を選択する。 この操作卓１−３２で選択した情報は、カメラ選択信号１−３３として、圧縮データ選択器２−３へ出力される。
【００１９】
圧縮データ選択器２−３は、カメラ選択信号１−３３の内容から、操作卓１−３２で、どのカメラ映像を選択したかを判断する。 そして、圧縮データ選択器２−３は、選択したカメラ映像に対応する圧縮データを選択するための圧縮データ選択信号１−３５を、デコーダ１−２７へ出力する。 デコーダ１−２７は、入力された圧縮データ選択信号１−３５の情報に基づき、伸張処理を行う圧縮データを選択する。 この例であれば、カメラ１−１に対応する圧縮データは圧縮データ１−４であり、カメラ１−９は圧縮データ１−１２が対応する。 以上のような動作で、操作卓１−３２を用いて、参照画像を見ながら、複数のカメラの中から、監視したい１つのカメラに対応する圧縮データを選択し、このカメラ映像をモニタ１−３１に表示する。
【００２０】
次に、上記構成において、モニタ１−３１の画面表示例を図３に示し、カメラ映像の選択方法について説明する。 この例では、モニタ１−３１はコンピュータ画面であり、カメラ映像はコンピュータ画面の一部分に重ね合わせ、映し出されている。 この場合、操作卓１−３２は、コンピュータの入力デバイスであり、例えばコンピュータに接続されているキーボードやマウスである。
【００２１】
図３は、モニタ１−３１に表示されたモニタ表示画像３−５の例であり、この画面には、カメラ映像３−１、参照画面３−２，３−３、指示用ポインタ３−４が表示されている。 カメラ映像３−１は、送信側のカメラ映像を画像圧縮し、ネットワーク１−２５へ伝送、受信側のデコーダ１ー２７で伸張処理を行った映像が映し出されたものである。 この例では、送信側のカメラは２台であるので、２種類のいずれかのカメラ映像が映し出される。 参照画面３−２には、カメラ１−１で撮影している映像が縮小された参照画像が表示され、参照画面３−３には、カメラ１−９で撮影している映像が縮小された参照画像が表示される。
【００２２】
カメラ映像の選択方法は、操作卓１−３２を用い、モニタ画面上を自由に動かすことが出来る指示用ポインタ３−４を参照画像の上に移動し、カメラ選択のための操作を行う。 例えば操作卓１−３２にマウスが接続されていれば、マウスを動かすことで、指示用ポインタ３−４をモニタ表示画像３−５の上で動かし、選択したい参照画像の上で静止させ、マウスのボタンを押すことで、選択映像を決定する。 このような操作により、参照画像を基にして現在カメラが撮影している映像を見ながら、接続されているカメラのうちから１台を選択し、モニタ１−３１上にカメラ映像３−１として表示することが出来る。 なお、このモニタ表示画像３−５での、カメラ映像３−１、参照画面３−２、参照画面３−３、指示用ポインタ３−４の表示位置や大きさは、この図と同じでなくてもかまわず、様々なレイアウトが考えられる。
【００２３】
次に、ネットワークの伝送容量の分割方法について、図４を用いて説明する。この例では、複数の動画像データ圧縮装置と受信端末をネットワークに接続した圧縮画像伝送装置において、送信側にカメラが４台接続されていると仮定する。ここでは、ネットワークの伝送容量を越えないように４台のカメラ映像を伝送するため、伝送容量を５分の１に等分割し、１つの圧縮データのための伝送容量とする。 図４に示すように、それぞれのカメラに対応する圧縮データを４−１，４−２，４−３，４−４とすると、カメラは４台であるので、１つの圧縮データに相当する分だけの伝送容量が使われず空いている。 この空いた伝送容量を、送信側から出力される全ての参照画像データ４−５，４−６，４−７，４−８の伝送容量に割り当てる。
【００２４】
この例では、１台のエンコーダは、１つの圧縮データと１つの参照画像データを出力するので、カメラが４台あれば、参照画像データは４つあることになる。また、前述のように、圧縮データに対する参照画像データの比は、１０分の１から１００分の１と小さいので、例えば１０分の１の比率だとしても、４つ全ての参照画像データを合わせても、１つの圧縮データのサイズより小さくなる。
従って、全ての参照画像データを合わせて、空いた伝送容量の部分に割り当てても、全ての合計がネットワークの伝送容量を超えることは無い。
【００２５】
送信側のカメラの台数が増えた場合も同様であり、例えば、送信側に９９台のカメラが接続されている場合、圧縮データに対する参照画像データの比を１００分の１になるようにすれば、参照画像データを全て合わせても、ネットワークの伝送容量を超えることは無い。
【００２６】
以上のように、送信側のエンコーダで、圧縮データと対応する参照画像データを同時に出力し、またネットワークの伝送容量の一部を参照画像データの伝送に割り当てることによって、受信側で参照画像を見ながらカメラを選択することが出来るようになる。
【００２７】
【発明が解決しようとする課題】
しかし、実際の運用では、例えば４台のカメラ映像を同時に伝送できる容量をもつ伝送路に対して、カメラやモニタを５台以上接続しなければならない場合がある。 この様な場合の伝送容量を分割した様子を図５を例に用いて説明する。
【００２８】
この例では、ネットワークには６台のカメラが接続されているとする。 また、４台のカメラ映像を同時に配信できる容量のネットワークには、カメラ１の圧縮データ５−１、カメラ２の圧縮データ５−２、カメラ３の圧縮データ５−３、カメラ４の圧縮データ５−４の４つが伝送されている。 カメラの台数は６台なので、参照画像データは５−５，５−６，５−７，５−８，５−９，５−１０の６つが伝送されている。
【００２９】
この伝送状態において、新たな受信端末よりカメラ３の映像を圧縮したデータを受信したいという要求があったとする。 この場合、圧縮データ５−３がカメラ３の映像なので、受信端末は圧縮データ５−３を受信するようにすれば良い。もし、新たな受信端末が、カメラ５の映像を圧縮したデータを受信したいという要求を出した場合、伝送容量に空きが無いので、新たなカメラ５の圧縮データを伝送することは出来ない。 しかし、受信端末側のユーザは、モニタ上に映し出された参照画像を見てカメラ映像を選択しているだけなので、どのカメラ映像が伝送可能であるかを判断することは出来ない。
【００３０】
即ち、１つのネットワークに割り振られた圧縮データの伝送可能数より多い数のカメラを接続した場合、受信端末側では参照画像を見ただけでは、どのカメラ映像を見ることが出来るのかを判断することが出来ない。 また、受信側で絶えず参照画像を表示するには、１つのエンコーダで、高精細画像と参照画像の２つの画像データに対し、圧縮処理を行いデータを出力しなければならない。 このためにはエンコーダ内に、２つの画像圧縮器か、圧縮処理能力の高い画像圧縮器を必要とする。
【００３１】
本発明はこれらの欠点を除去し、受信側で参照画像を見ながらカメラの映像を切り換える際に、どの映像は伝送可能であるかを判断しながら切り換えることが出来る圧縮画像伝送装置を実現することを目的とする。
【００３２】
【課題を解決するための手段】
本発明は上記目的を達成するため、複数の送信装置からネットワーク上に伝送される複数の圧縮画像データの中から所望の圧縮画像データを該ネットワークに接続された受信端末で選択し、受信する圧縮画像伝送システムにおいて、各送信装置では、それぞれの圧縮画像データに対応するそれぞれの参照画像をネットワーク上に伝送し、各受信端末では、受信した各参照画像をモニタに表示し、当該参照画像の表示状態に基づき受信すべき圧縮画像データを特定するようにしたものである。
【００３３】
また、各送信装置では、何れの受信端末からも選択されていない圧縮画像データについては伝送せず、当該圧縮画像データに対応する参照画像のみ、ネットワークに伝送するようにしたものである。
また、各送信装置では、受信端末から配信要求があった場合、対応する圧縮画像データをネットワークに伝送するようにしたものである。
さらに、各送信装置では、受信端末からの配信要求に応じ、圧縮画像データと当該圧縮画像データに対応する参照画像のいずれか一方を選択して出力するようにしたものである。
【００３４】
また、圧縮画像データと当該圧縮画像データに対応する参照画像を、１つの画像圧縮器で圧縮するようにしたものである。
さらに、受信端末では、ネットワーク上の圧縮画像データ伝送状況を監視し、受信端末のモニタ上で、受信可能な圧縮画像データを特定できるようにしたものである。
また、受信端末のモニタ上で、受信可能な圧縮画像データに対応する参照画像と受信できない圧縮画像データに対応する参照画像とを区別できる画面表示としたものである。
また、受信端末では、モニタ表示された各参照画像の表示状態に基づき、受信すべき圧縮画像データを特定し、対応する送信装置に配信要求を行うようにしたものである。
【００３５】
また、複数の送信装置からネットワークに伝送される複数の圧縮画像データの中から所望の圧縮画像データを該ネットワークに接続された受信装置で選択し、受信する圧縮画像伝送システムにおいて、各送信装置には、少なくともそれぞれの圧縮画像データに対応するそれぞれの参照画像をネットワーク上に伝送する手段を有し、各受信装置には、受信した各参照画像をモニタに表示し、当該参照画像の表示状態に基づき受信すべき圧縮画像データを特定する手段を有するようにしたものである。
また、各送信装置には、受信装置から配信要求があった場合、対応する圧縮画像データをネットワークに伝送する手段を有するようにしたものである。
また、各受信装置に、ネットワーク上の圧縮画像データ伝送状況を監視する手段と、当該伝送状況に基づき各受信装置のモニタ上で受信可能な圧縮画像データを特定する手段を有するようにしたものである。
また、各受信装置のモニタ上で、受信可能な圧縮画像データに対応する参照画像と受信できない圧縮画像データに対応する参照画像とを区別して画面表示する手段を有するようにしたものである。
また、受信装置に、モニタ表示された各参照画像の表示状態に基づき、受信すべき圧縮画像データを特定し、対応する送信装置に配信要求を行う手段を有するようにしたものである。
【００３６】
この様に、受信端末側から配信要求データを送信装置側へ伝送することで、どの受信端末からも選択されていない圧縮データを伝送することを止め、ネットワークの伝送容量に空き容量が発生するようにする。 また、ネットワーク上の圧縮データを監視して、どの送信装置に対応するデータが伝送されているかを検出し、同時に伝送容量に余裕があるかも検出し、この２つの検出結果をモニタ上に表示することで受信端末側では、どの送信装置の映像を見ることが出来るのかを判断することが出来る。
【００３７】
【発明の実施の形態】
以下、本発明に係る、複数の動画像データ圧縮装置と受信端末をネットワークに接続した圧縮画像伝送装置の一実施例の構成を図１に示し、詳細に説明する。この圧縮画像伝送装置の送信側には、映像データを出力するカメラと、該映像データを圧縮処理するエンコーダを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。 この例では、カメラ１−１、カメラ１−９の２台のカメラがあり、この２つの組み合わせがそれぞれネットワーク１−２５に接続されている。
【００３８】
カメラ１−１から出力された映像信号１−２は、エンコーダ１−３で画像圧縮処理される。 エンコーダ１−３から出力された圧縮データ１−４は、ネットワーク１−２５へ出力される。 またエンコーダ１−３は、映像信号１−２に対し、高圧縮が可能な画像圧縮処理を行い、参照画像データ１−５として出力する。
【００３９】
参照画像データ１−５は、圧縮率が高いことが特徴である。 さらに従来と異なり、受信端末から、ネットワーク１−２５を介して配信要求データ１−４３が出力され、エンコーダ１−３に入力される。
【００４０】
同様にカメラ１−９から出力された映像信号１−１０は、エンコーダ１−１１で画像圧縮処理され、圧縮データ１−１２として、ネットワーク１−２５に出力される。 また、エンコーダ１−１１は、映像信号１−１０に対し高圧縮が可能な画像圧縮処理を行い、参照画像データ１−１３として、ネットワーク１−２５へ出力する。 さらに、受信端末から、ネットワーク１−２５を介して配信要求データ１−４４が出力され、エンコーダ１−１１に入力される。 以上が、圧縮データ送信側の構成である。
【００４１】
次に受信側は、圧縮データに伸張処理を行うデコーダとモニタの組み合わせを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。この例では、デコーダ１−２７とモニタ１−３１から成る組み合わせが１組接続されている。 この例では、デコーダ１−２７は、ネットワーク１−２５に伝送された２つの圧縮データ１−４，１−１２の内のいずれか一方を、圧縮データ１−２６として取り込み、画像伸張処理を行う。 伸張された画像データは映像信号１−２８として映像信号合成器１−２９に出力される。
【００４２】
またデコーダ１−３８は、ネットワーク１−２５に伝送された参照画像データ１−５を、参照画像データ１−３７として取り込み、画像伸張処理を行った後、参照画像１−３９として映像信号合成器１−２９へ出力する。 またデコーダ１−４１は、ネットワーク１−２５に伝送された参照画像データ１−１３を、参照画像データ１−４０として取り込み、画像伸張処理を行った後、参照画像１−４２として映像信号合成器１−２９へ出力する。
【００４３】
伝送情報検出器１−４５は、ネットワーク１−２５上の圧縮データを監視し、どのカメラからの圧縮データが伝送されているかを検出し、また伝送容量に空き容量があるか否かを監視している。 この結果を、伝送情報１−４６として情報表示発生器１−４８へ出力する。 また、伝送情報検出器１−４５は、上記伝送データの検出結果とカメラ選択信号１−３３の情報とに基づき、圧縮データ選択器１−３４を制御する選択器制御信号１−４７と後述の配信要求データ１−４６をネットワーク１−２５へ出力する。
【００４４】
情報表示発生器１−４８は、入力された伝送情報１−４６の内容に基づいて、どのカメラの圧縮データが伝送されているか、伝送容量に空きはあるかといった情報を、画像データにした情報表示映像１−４９にして映像信号合成器１−２９に出力する。 映像信号合成器１−２９は、入力された映像信号１−２８、参照画像１−３９、参照画像１−４２、情報表示映像１−４９を合成し、１枚の画像データである合成映像信号１−３０にしてモニタ１−３１へ出力する。
【００４５】
操作卓１−３２は、モニタ１−３１の映像を見ながら、どのカメラ映像を選択するか指示する信号を送信側に送るために設置される。 この操作卓１−３２の構成は従来と同様である。 操作卓１−３２からのカメラ選択信号１−３３は、圧縮データ選択器１−３４と伝送情報検出器１−４５へ出力される。 圧縮データ選択器１−３４は、カメラ選択信号１−３３の内容から、操作卓１−３２で、どのカメラの映像を選択したかを判断する。 また、選択器制御信号１−４７の内容から、選択したカメラからの圧縮データが、伝送容量が足りずにネットワーク上に存在しないと分かった場合、操作卓１−３２からのカメラ選択要求を破棄する。 その結果、選択したカメラに対応する圧縮データを選び出し、圧縮データ選択信号１−３５としてデコーダ１−２７へ出力する。
【００４６】
次に、図１の本発明の複数の動画像データ圧縮装置と参照画像を伴う受信端末をネットワークに接続した圧縮画像伝送装置の動作を説明する。 カメラ１−１から出力された映像信号１−２は、エンコーダ１−３において、入力された配信要求データ１−４３の内容から圧縮データ出力が要求されていると判断した場合、画像圧縮処理され、圧縮データ１−４としてネットワーク１−２５へ出力される。 同時にエンコーダ１−３では、配信要求データ１−４３の内容とは無関係に、映像信号１−２に対し、より高圧縮処理が行われ、参照画像データ１−５がネットワーク１−２５へ出力される。 圧縮データ１−４と参照画像データ１−５は同じ映像が基であるが、圧縮データサイズは大きく異なり、圧縮データ１−４に対する参照画像データ１−５の比は１０分の１から１００分の１である。
【００４７】
同様に、カメラ１−９から出力された映像データ１−１０は、エンコーダ１−１１で画像圧縮処理され、圧縮データ１−１２と参照画像データ１−１３として出力される。 なお、入力された配信要求データ１−４４の内容から圧縮データ出力が要求されていないと判断した場合は、参照画像データ１−１３のみを出力する。 これにより、ネットワーク１−２５には、圧縮データ１−４，１−１２、参照画像データ１−５，１−１３の４つの画像圧縮データが入力されることになる。 ここで、ネットワーク１−２５の伝送容量は有限であるため、４つの圧縮データの合計が伝送容量を超えないデータ量となるように制御しなければならないのは、従来と同様である。 但し、配信要求データ１−４３，１−４４の内容が、圧縮データの出力を要求していない場合、圧縮データ１−４，１−１２の出力が行われず、ネットワーク１−２５の伝送容量に空きが発生する。 以上が送信側の動作である。
【００４８】
一方、受信側では、ネットワーク１−２５に接続されたデコーダ１−２７で、ネットワーク１−２５上に伝送された圧縮データ１−４か１−１２のいずれかの圧縮データを取り込み、画像伸張処理を行う。 ここで、デコーダ１−２７に、どの圧縮データを取り込むかは、圧縮データ選択信号１−３５によって決まる。デコーダ１−２７は、圧縮データ１−４か１−１２を元の映像信号に戻す伸張処理を行う。 デコーダ１−２７で伸張された映像信号１−２８は、映像信号合成器１−２９へ出力する。
【００４９】
デコーダ１−３８は、参照画像データ１−５をネットワーク１−２５を介して参照画像データ１−３７として取り込む。 そして、画像伸張処理を行い、参照画像１−３９として映像信号合成器１−２９へ出力する。 同様にデコーダ１−４１は、参照画像データ１−１３をネットワーク１−２５を介して参照画像データ１−４０として取り込む。 そして画像伸張処理を行い、参照画像１−４２として映像信号合成器１−２９へ出力する。
【００５０】
伝送情報検出器１−４５は、ネットワーク１−２５上の圧縮データを監視し、どのカメラからの圧縮データが伝送されているか、もしくは、伝送容量に空きがあるかという情報を、伝送情報１−４６として情報表示発生器１−４８へ、出力する。 ここで、伝送容量に空きが無く、操作卓１−３２より入力されたカメラ選択信号１−３３の内容が、現在のネットワーク１−２５上に圧縮データが存在しないカメラを選択している場合には、その圧縮データを選択しないように制御する選択器制御信号１−４７を圧縮データ選択器１−３４へ出力する。 また、どの圧縮データを選択したかという情報から該当するカメラを特定し、配信要求データ１−４６’を出力する。 これはネットワーク１−２５を経由して送信側の動画像圧縮装置に入力される。
【００５１】
情報表示発生器１−４８は、伝送情報１−４６の内容から、ネットワーク１−２５上に圧縮データが存在するか、または伝送容量に空きがあるかという情報をモニタ１−３１に表示することが出来る映像データにし、情報表示映像１−４９として映像信号合成器１−２９へ出力する。 この情報の表示方法については後述する。 映像信号合成器１−２９は、映像信号１−１８、参照画像１−３９，１−４２、情報表示映像１−４９の４つの映像が入力される。 それぞれの映像信号は、モニタ１−３１の画面レイアウトに合わせた位置に表示されるよう、重ね合わせ処理が行われ、１枚の画像である合成映像信号１−３０としてモニタ１−３１へ出力される。
【００５２】
モニタ１−３１は、この合成映像信号１−３０をカメラ映像として表示する。モニタ１−３１の画面上には、全ての参照画像が表示されており、この映像により全てのカメラが何を撮影しているかを把握することが出来る。 モニタ１−３１の近くには操作卓１−３２があり、画面に表示されている複数の参照画像に基づき、１つのカメラ映像を選択する。 操作卓１−３２でカメラ映像を選択した情報は、カメラ選択信号１−３３として、圧縮データ選択器１−３４と伝送情報検出器１−４５へ出力される。
【００５３】
圧縮データ選択器１−３４は、入力された圧縮データ選択信号１−３５の情報から伸張処理を行う圧縮データを選択する。 この例であれば、カメラ１−１に対応する圧縮データは圧縮データ１−４であり、カメラ１−９は圧縮データ１−１２が対応する。 以上のような動作で、操作卓１−３２を用いて、参照画像を見ながら、複数のカメラの中から１つのカメラに対応する圧縮データを選択し、選択した対応するカメラ映像をモニタ１−３１に表示する。
【００５４】
次に、ネットワーク１−２５上の圧縮データの状態をどのようにモニタ画面に表示するかについて説明する。 個々のカメラからの圧縮データの状態を表示するため、ここでは参照画像と組み合わせた表示方法を採用した場合を例にとる。
【００５５】
この参照画像と状態表示の表示例を図６に示す。
図６は、モニタ１−３１に表示されたモニタ表示画像６−５の例であり、この画面には、カメラ映像６−１、参照画面６−２，６−３、指示用ポインタ６−４が表示されている。 カメラ映像６−１は、送信側のカメラ映像を画像圧縮しネットワーク１−２５へ伝送、受信側のデコーダ１ー２７で伸張処理を行った映像が映し出されたものである。 この例では、送信側のカメラは２台であるので、２種類のいずれかのカメラ映像が映し出される。 参照画面６−２，６−３には、カメラ１−１，カメラ１−９でそれぞれ撮影している映像が縮小された、それぞれの参照画像６−６が表示される。
【００５６】
カメラ映像の選択方法は、操作卓１−３２を用い、モニタ画面上を自由に動かすことが出来る指示用ポインタ６−４を参照画像の上に移動し、カメラ選択のための操作を行う。 例えば操作卓１−３２にマウスが接続されていれば、マウスを動かすことで、指示用ポインタ６−４をモニタ表示画像６−５の上で動かし、選択したい参照画像の上で静止させ、マウスのボタンを押すことで、選択映像を決定する。
【００５７】
このような操作により、参照画像を基にして現在カメラが撮影している映像を見ながら、接続されているカメラのうちから１台を選択し、モニタ１−３１上にカメラ映像６−１として表示することが出来る。 なお、このモニタ表示画像６−５での、カメラ映像６−１、参照画面６−２，６−３、指示用ポインタ６−４の表示位置や大きさは、この図と同じでなくてもかまわず、様々なレイアウトが考えられる。
【００５８】
ここで、図７を用い、この参照画像の構成を参照画面６−２により更に詳しく説明する。 参照画面６−２の参照画像６−６の上部に、対応するカメラ番号６−７を表示し、参照画像６−６の下にそのカメラ番号のカメラから出力される圧縮データの様子を示す伝送情報表示６−８を表示する。 ここで、選択しようとする参照画像６−６部分を操作卓１−３２の指示用ポインタ６−４により選択すると、モニタ１−３１にカメラ番号６−７に対応するカメラ映像が表示される。
【００５９】
これにより、ネットワーク１−２５上に圧縮データが存在する場合には、その圧縮データを、受信端末に表示する映像データとして使用することが出来る。
この場合、図７（ａ）の様に、伝送情報表示６−８には、「配信中」という文字が表示される。 この表示は、ネットワーク１−２５上に圧縮データが存在する全ての参照画面６−２，６−３，・・・に対して行われる。
【００６０】
またネットワーク１−２５上に圧縮データが存在せず、伝送容量に空きが無い場合は、新たな圧縮データをネットワーク１−２５で伝送することが出来ないため、操作卓１−３２より、そのカメラ番号６−７に対応する参照画像６−６を選択しても、モニタ１−３１にカメラ映像を表示することが出来ない。 従って、このような場合は、参照画像６−６を選択しないよう、図７（ｂ）に示すように伝送情報表示６−８には、「×」が表示される。 この表示は、ネットワーク１−２５上に圧縮データが存在しない全ての参照画面６−２，６−３，・・・に対して行われる。
【００６１】
またネットワーク１−２５上に圧縮データが存在しないが、伝送容量に空きがある場合、新たな圧縮データをネットワーク１−２５で伝送することが出来る。この場合、ネットワーク１−２５上に伝送データが存在しない参照画像６−６の全てに対し、図７（ｃ）のように「配信可」が伝送情報表示６−８として表示される。 例えば、参照画面６−２を操作卓１−３２より選択した場合、その伝送状態表示６−８を図７（ｄ）のように「配信中」に変更し、伝送情報検出器１−４５より、対応する配信要求データ１−４６をカメラ番号６−７に対応するカメラの接続されている動画像圧縮装置へ出力する。 この時、新たな圧縮データの伝送で伝送容量に空きが無くなった場合は、ネットワーク１−２５上に圧縮データが存在しない全ての参照画像６−６に対して、それぞれの伝送情報表示６−８を、図７（ｂ）のように「×」に変更する。
【００６２】
このように参照画像６−６と伝送情報表示６−８を組み合わせることで、受信端末側のユーザは、伝送情報表示６−８が「送信中」もしくは「送信可」の場合はカメラ番号６−７に対応するカメラ映像を選択でき、伝送情報表示６−８が「×」の場合は選択できないと判断することが出来る。 この伝送情報表示６−８は、文字表示である必要はなく、例えば「送信中」を青色、「送信可」を黄色、「×」を赤色にして画面に表示するなど、受信端末側のユーザが状態の区別をつけられれば、色、形、音など、どのような違いで表現してもかまわない。
【００６３】
次に本発明の他の実施例について説明する。多数の受信端末がネットワークに接続されている場合、それぞれの参照画面データは絶えず伝送されているので、全ての受信端末で全てのカメラが出力する画像データを参照映像として見ることが出来る。しかし、ネットワークの伝送容量に空きがある場合、参照映像でなく高精細画像の圧縮データを伝送しても、受信端末で参照映像の代わりに見ることが出来れば、現在のカメラが出力している画像を見るという目的は達せられる。よって、配信要求データにより、高精細画像と参照画像を切り換えて画像圧縮器に入力する。画像圧縮器にも配信要求データを入力し、画像圧縮器への入力の切り換えに合わせ圧縮設定を変えて圧縮する。これにより、画像圧縮器を２つ用いたり、画像圧縮器の圧縮処理能力を高くする必要が無くなり、１つの画像圧縮器で高精細画像と参照画像の伝送に対応できる。
【００６４】
図８は、本発明の他の実施例に基づく、動画像データ圧縮装置をカメラとネットワークに接続した構成を示す図である。 カメラ１−１が出力した映像信号１−２は、エンコーダ３−１に入力される。 エンコーダ３−１は、映像信号１−２に対し画像圧縮処理を行い、圧縮データ３−２としてネットワーク１−２５へ出力する。 ネットワーク１−２５からは、受信側から伝送した配信要求データ１−４３がエンコーダ３−１に入力される。 エンコーダ３−１の動作は、通常は映像信号１−２５に対し高い圧縮率の設定でデータ圧縮処理を行う。 この時の圧縮データ３−２は、受信側で参照映像として表示するための画像圧縮データとして、ネットワーク１−２５へ出力する。
【００６５】
配信要求データ１−４３が入力されると、エンコーダ３−１は映像信号１−２に対し高精細な画像となるような圧縮設定でデータ圧縮処理を行う。 この時の圧縮データ３−２は、受信側で高精細なカメラ映像として表示するための画像圧縮データとして、ネットワーク１−２５へ出力する。 このように、配信要求データ１−４３の入力により、エンコーダ３−１が出力する圧縮データ３−２の内容は、参照画像のような高圧縮処理された画像データと、高精細な画像データの２種類に切り換えられる。
【００６６】
次に、図９を用いて、このエンコーダ３−１の構成について詳細に説明する。図９は、エンコーダ３−１内部の処理構成を示す図である。 エンコーダ３−１に入力した映像信号１−２は、画像変換器２−１と参照画像変換器２−４の両方に入力する。 画像変換器２−１は、受信側で高精網画像として表示するための画像変換処理を行う。 すなわち、高精細画像として表示するために、何も処理を行わない、もしくは映像信号１−２が劣化しない程度、例えば縦横３分の１程度の画像サイズに縮小する。 この変換した画像データを映像信号２−２として出力する。
【００６７】
参照画像変換器２−４は、映像信号１−２を参照画像に変換する。 例えば、画像サイズは、画質よりもデータ量を優先させ、表示している映像が認識できる程度にデータが間引かれる。データの間引き方法は、例えば、画像サイズを小さくする画像フィルタにより、画像の高周波成分を削減するなどの方法が考えられる。この変換した画像データを参照画像２−５として出力する。
【００６８】
画像変換器２−１から出力した映像信号２−２と、参照画像変換器２−４から出力した参照画像２−５は、共に画像選択器３−３に入力される。 画像選択器３−３には、この他に配信要求データ１−４３が接続されている。 画像選択器３−３は、通常は、参照画像２−５を選択画像３−４として画像圧縮器３−５ヘ出力する。 ここで、配信要求データ１−４３が入力されると、映像信号２−２を選択画像３−４として画像圧縮器３−５へ出力する。
【００６９】
画像圧縮器３−５は、入力した選択画像３−４に対し、画像圧縮処理を行う。画像選択器３−３と同様に、画像圧縮器３−５にも配信要求データ１−４３が接続されている。 つまり、画像圧縮器３−５は、通常、高圧縮な設定で選択画像３−４に対し圧縮処理を行い、配信要求データ１−４３が入力されると、高精細な画像となるような圧縮の設定で圧縮処理を行う。 そして、圧縮データ３−２として出力する。
【００７０】
これにより受信側には、１つのカメラからの画像は、高精細画像か参照画像のどちらか一方だけの圧縮データが伝送されることになる。 参照画像を表示するのに、高精細画像の圧縮データが伝送されてきた場合は、参照画像相当の画質、もしくは画像サイズに変換して表示する処理が必要になる場合がある。この処理を行う必要があるかは、受信側で圧縮データの内容と、どのカメラからの画像を選択しているかで、判断する。
【００７１】
以上の動作により、エンコーダ３−１から出力される圧縮データ３−２の内容は、通常は、参照画像２−５を圧縮処理したデータで、配信要求データ１−４３が入力されると、高精細な映像信号２−２を圧縮処理したデータに切り替わる。したがって、圧縮器は、１つの入力映像を圧縮処理する処理能力があれば良く、１つの画像圧縮器で高精細画像と参照画像の両方の圧縮データを出力することが出来る。
【００７２】
【発明の効果】
以上説明した本発明の構成を用いれば、受信側で参照画像を見ながら、カメラ映像を切り換える際に、どの映像は伝送可能であるかを判断しながら切り換える事が出来る圧縮画像伝送装置が実現できる。 また、送信側のエンコーダ内に、２つの画像圧縮器や、圧縮処理能力の高い画像圧縮器を必要としない圧縮画像伝送装置が実現できる。
【図面の簡単な説明】
【図１】本発明の圧縮画像伝送装置の全体構成の一実施例を示すブロック図
【図２】従来の圧縮画像伝送装置の全体構成の一例を示すブロック図
【図３】従来の参照画像を伴うモニタ画面表示を示す模式図
【図４】従来の参照画像を伴うネットワークの伝送容量の分割方法を示す模式図
【図５】カメラを６台接続した場合の伝送容量の分割方法を示す模式図
【図６】本発明のモニタ画面表示を示す模式図
【図７】本発明の参照画像と圧縮データの状態表示を示す模式図
【図８】本発明の他の実施例の圧縮画像装置とネットワークの構成を示すブロック図
【図９】本発明のエンコーダの一実施例の構成を示すブロック図
【符号の説明】
１−１，１−９：カメラ、１−２，１−１０，１−２８：映像信号、１−３，１−１１，３−１：エンコーダ、１−４，１−１２，３−２：圧縮データ、１−５，１−１３，１−３７，１−４０，２−５：参照画像データ、１−２５：ネットワーク、１−２７，１−３８，１−４１：デコーダ、１−２９：映像信号合成器、１−３０：合成映像信号、１−３１：モニタ、１−３２：操作卓、１−３３：カメラ選択信号、１−３４，３−３：圧縮データ選択器、１−３５：圧縮データ選択信号、１−４３，１−４４：配信要求データ、１−４５：伝送情報検出器、１−４６：伝送情報、１−４７：選択器制御信号、１−４８：情報表示発生器、１−４９：情報表示映像、３−５：圧縮圧縮器、６−１：カメラ映像、６−２，６−３：参照画像、６−４：指示用ポインタ、６−５：モニタ表示画像、６−６：参照画像、６−７：カメラ番号、６−８：伝送情報表示。
【発明の属する技術分野】
本発明は複数の動画像圧縮装置と動画像データ表示装置を組合せたシステムの改良に関するものである。
【０００２】
【従来の技術】
近年、画像処理技術、とりわけ画像情報、音声情報の圧縮技術は、めざましい発展を遂げており、容量の小さい伝送路であっても高品質な動画像や音声の伝送が可能となった。 例えば、ネットワークを介して遠隔地の被写体の様子を監視する用途において、データ伝送容量の小さい伝送路であっても、画像データ圧縮装置との組み合わせで、高品質な動画像を送信することが出来る。
【０００３】
また、画像圧縮技術を利用することによって、従来は、１つの動画像伝送しか行えないデータ伝送容量の伝送路に、複数の動画像データを伝送することが可能になった。 例えば、ネットワークに複数の動画像データ圧縮装置を接続して、カメラで撮影した動画像に対し画像圧縮処理を行い、ネットワークに伝送するという構成で、遠隔監視などの用途に用いられている。
【０００４】
本出願人は、特願２００１−２９２６６６「圧縮画像伝送装置」において、以下に説明するような圧縮画像伝送システムを考案している。 このシステムは、ネットワークに伝送された複数の動画像圧縮データを、同じネットワークに接続された受信端末内の動画像データ伸張装置で伸張し、モニタ画面に映し出す。 モニタ画面には複数の参照画像が表示されており、それぞれのカメラで撮影された映像が小さな画面で確認できるようになっている。 その参照画像を操作卓より選択することで、その参照画像に対応する高精細なカメラの映像が画面上に映し出される。
【０００５】
この複数の動画像データ圧縮装置と参照画像を伴う受信端末をネットワークに接続した圧縮画像伝送装置の構成例を図２に示す。 この圧縮画像伝送装置の送信側には、映像データ出力手段(以下、カメラを例にして説明)と、該映像データを圧縮処理するエンコーダを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。 この例では、カメラ１−１、カメラ１−９の２台のカメラがあり、この２つの組み合わせがそれぞれネットワーク１−２５に接続されている。
【０００６】
カメラ１−１から出力された映像信号１−２は、エンコーダ２−１で画像圧縮処理される。 エンコーダ２−１から出力された圧縮データ１−４は、ネットワーク１−２５へ出力される。 またエンコーダ２−１は、映像信号１−２に対し、高圧縮が可能な画像圧縮処理を行い、参照画像データ１−５として出力する。参照画像データ１−５は、圧縮率が高いことが特徴である。
【０００７】
そのため、映像信号１−２の画像サイズより小さい画像データに変換した後に圧縮処理を行う。 又は、フレームレートを映像信号１−２よりも少ない枚数にして圧縮処理を行うことで高圧縮を実現する。 画質も圧縮データ１−４のような高精細画像ではなく劣化した画像になってもかまわず、ある程度の画像の劣化を許容できる場合は、より高圧縮な画像圧縮処理を可能にする。 同様に、カメラ１−９から出力された映像信号１−１０は、エンコーダ２−２で画像圧縮処理され、圧縮データ１−１２として、ネットワーク１−２５に出力される。 またエンコーダ２−２は、映像信号１−１０に対し高圧縮が可能な画像圧縮処理を行い、参照画像データ１−１３として、ネットワーク１−２５へ出力する。 以上が圧縮データ送信側の構成である。
【０００８】
次に受信側は、圧縮データに伸張処理を行うデコーダとモニタの組み合わせを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。この例では、デコーダ１−２７とモニタ１−３１から成る組み合わせが１組接続されている。 この例では、デコーダ１−２７は、ネットワーク１−２５に伝送された２つの圧縮データ１−４，１−１２の内のいずれか一方を、圧縮データ１−２６として取り込み、画像伸張処理を行う。 伸張された画像データは映像信号１−２８として映像信号合成器２−４に出力される。
【０００９】
またデコーダ１−３８は、ネットワーク１−２５に伝送された参照画像データ１−５を、参照画像データ１−３７として取り込み、画像伸張処理を行った後、参照画像１−３９として映像信号合成器２−４へ出力する。 またデコーダ１−４１は、ネットワーク１−２５に伝送された参照画像データ１−１３を、参照画像データ１−４０として取り込み、画像伸張処理を行った後、参照画像１−４２として映像信号合成器２−４へ出力する。 映像信号合成器２−４は、入力された映像信号１−２８、参照画像１−３９、参照画像１−４２を合成し、１枚の画像データである合成映像信号１−３０としてモニタ１−３１へ出力する。
【００１０】
操作卓１−３２は、モニタ１−３１の参照画像を見ながら、どのカメラの映像を選択するか指示する信号を送信側に送るために設置される。 操作卓１−３２からのカメラ選択信号１−３３は、圧縮データ選択器２−３へ出力される。
【００１１】
圧縮データ選択器２−３は、カメラ選択信号１−３３の内容から、操作卓１−３２で、どのカメラ映像を選択したかを判断する。 そして、圧縮データ選択器２−３は、選択したカメラ映像に対応する圧縮データを選択するための圧縮データ選択信号１−３５を、デコーダ１−２７へ出力する。 デコーダ１−２７は、入力された圧縮データ選択信号１−３５の情報に基づき、伸張処理を行う圧縮データを選択する。
【００１２】
次に、図２の複数の動画像データ圧縮装置と参照画像を伴う受信端末をネットワークに接続した圧縮画像伝送装置の動作を説明する。 カメラ１−１から出力された映像信号１−２は、エンコーダ２−１で画像圧縮処理され、圧縮データ１−４としてネットワーク１−２５へ出力される。 同時に、エンコーダ２−１で映像信号１−２に対し、より高圧縮処理が行われ、参照画像データ１−５がネットワーク１−２５へ出力される。 圧縮データ１−４と参照画像データ１−５は同じ映像が基であるが、その圧縮データサイズは大きく異なり、圧縮データ１−４に対する参照画像データ１−５の比は１０分の１から１００分の１である。
【００１３】
同様に、カメラ１−９から出力された映像データ１−１０はエンコーダ２−２で画像圧縮処理され、圧縮データ１−１２と参照画像データ１−１３として出力される。 これにより、ネットワーク１−２５には、圧縮データ１−４，１−１２、参照画像データ１−５，１−１３の４つの画像圧縮データが入力されることになる。ここで、ネットワーク１−２５の伝送容量は有限であるため、４つの圧縮データの合計が、伝送容量を超えないデータ量となるように制御しなければならない。
【００１４】
そこで、圧縮データ１−４と１−１２の圧縮データサイズを、ネットワーク１−２５の伝送容量を３分の１に等分割した際の圧縮データサイズと同じ値に制限する。 そして、圧縮データ１−４と１−１２は、それぞれ伝送容量の３分の１の伝送容量を用いて伝送し、残りの３分の１の伝送容量を用いて参照画像データ１−５と１−１３を伝送する。 前述したように、圧縮データに比べ、参照画像データのサイズは、１０分の１から１００分の１と小さいため、例えば、１００分の１のサイズ比だとすると、１００個の参照画像データを合わせることで１つの圧縮データのサイズと等しくなる。 これは、全ての参照画像データを１つにまとめた場合、１００個の参照画像データを同時に伝送できるということである。 なお、この伝送容量の分割の仕方についての詳しい説明は後述する。 以上が送信側の動作である。
【００１５】
一方、受信側では、ネットワーク１−２５に接続されたデコーダ１−２７で、ネットワーク１−２５上に伝送された圧縮データ１−４か１−１２のいずれかの圧縮データを取り込み、画像伸張処理を行う。 ここで、デコーダ１−２７に、どの圧縮データを取り込むかは、圧縮データ選択信号１−３５によって決まる。デコーダ１−２７は、圧縮データ１−４か１−１２を元の映像信号に戻す伸張処理を行う。 デコーダ１−２７で伸張された映像信号１−２８は、映像信号合成器２−４へ出力する。
【００１６】
デコーダ１−３８は、参照画像データ１−５をネットワーク１−２５を介して参照画像データ１−３７として取り込む。 そして、画像伸張処理を行い、参照画像１−３９として映像信号合成器２−４へ出力する。 同様にデコーダ１−４１は、参照画像データ１−１３をネットワーク１−２５を介して参照画像データ１−４０として取り込む。 そして画像伸張処理を行い、参照画像１−４２として映像信号合成器２−４へ出力する。
【００１７】
映像信号合成器２−４には、映像信号１−１８、参照画像１−３９，１−４２の３つの映像が入力される。 そして、それぞれの映像信号は、モニタ１−３１の画面レイアウトに合わせた位置に表示されるように重ね合わせ処理が行われ、１枚の画像である合成映像信号１−３０として、モニタ１−３１へ出力される。この画面レイアウトに関しても後述する。
【００１８】
モニタ１−３１は、この合成映像信号１−３０を表示する。 これによって、モニタ１−３１の画面上には、全ての参照画像が表示されるため、この映像により全てのカメラが何を撮影しているかを把握することが出来る。 そこで、モニタ１−３１の近くにある操作卓１−３２で、モニタ画面上に表示された複数の参照画像を基に、監視したい１つのカメラ映像を選択する。 この操作卓１−３２で選択した情報は、カメラ選択信号１−３３として、圧縮データ選択器２−３へ出力される。
【００１９】
圧縮データ選択器２−３は、カメラ選択信号１−３３の内容から、操作卓１−３２で、どのカメラ映像を選択したかを判断する。 そして、圧縮データ選択器２−３は、選択したカメラ映像に対応する圧縮データを選択するための圧縮データ選択信号１−３５を、デコーダ１−２７へ出力する。 デコーダ１−２７は、入力された圧縮データ選択信号１−３５の情報に基づき、伸張処理を行う圧縮データを選択する。 この例であれば、カメラ１−１に対応する圧縮データは圧縮データ１−４であり、カメラ１−９は圧縮データ１−１２が対応する。 以上のような動作で、操作卓１−３２を用いて、参照画像を見ながら、複数のカメラの中から、監視したい１つのカメラに対応する圧縮データを選択し、このカメラ映像をモニタ１−３１に表示する。
【００２０】
次に、上記構成において、モニタ１−３１の画面表示例を図３に示し、カメラ映像の選択方法について説明する。 この例では、モニタ１−３１はコンピュータ画面であり、カメラ映像はコンピュータ画面の一部分に重ね合わせ、映し出されている。 この場合、操作卓１−３２は、コンピュータの入力デバイスであり、例えばコンピュータに接続されているキーボードやマウスである。
【００２１】
図３は、モニタ１−３１に表示されたモニタ表示画像３−５の例であり、この画面には、カメラ映像３−１、参照画面３−２，３−３、指示用ポインタ３−４が表示されている。 カメラ映像３−１は、送信側のカメラ映像を画像圧縮し、ネットワーク１−２５へ伝送、受信側のデコーダ１ー２７で伸張処理を行った映像が映し出されたものである。 この例では、送信側のカメラは２台であるので、２種類のいずれかのカメラ映像が映し出される。 参照画面３−２には、カメラ１−１で撮影している映像が縮小された参照画像が表示され、参照画面３−３には、カメラ１−９で撮影している映像が縮小された参照画像が表示される。
【００２２】
カメラ映像の選択方法は、操作卓１−３２を用い、モニタ画面上を自由に動かすことが出来る指示用ポインタ３−４を参照画像の上に移動し、カメラ選択のための操作を行う。 例えば操作卓１−３２にマウスが接続されていれば、マウスを動かすことで、指示用ポインタ３−４をモニタ表示画像３−５の上で動かし、選択したい参照画像の上で静止させ、マウスのボタンを押すことで、選択映像を決定する。 このような操作により、参照画像を基にして現在カメラが撮影している映像を見ながら、接続されているカメラのうちから１台を選択し、モニタ１−３１上にカメラ映像３−１として表示することが出来る。 なお、このモニタ表示画像３−５での、カメラ映像３−１、参照画面３−２、参照画面３−３、指示用ポインタ３−４の表示位置や大きさは、この図と同じでなくてもかまわず、様々なレイアウトが考えられる。
【００２３】
次に、ネットワークの伝送容量の分割方法について、図４を用いて説明する。この例では、複数の動画像データ圧縮装置と受信端末をネットワークに接続した圧縮画像伝送装置において、送信側にカメラが４台接続されていると仮定する。ここでは、ネットワークの伝送容量を越えないように４台のカメラ映像を伝送するため、伝送容量を５分の１に等分割し、１つの圧縮データのための伝送容量とする。 図４に示すように、それぞれのカメラに対応する圧縮データを４−１，４−２，４−３，４−４とすると、カメラは４台であるので、１つの圧縮データに相当する分だけの伝送容量が使われず空いている。 この空いた伝送容量を、送信側から出力される全ての参照画像データ４−５，４−６，４−７，４−８の伝送容量に割り当てる。
【００２４】
この例では、１台のエンコーダは、１つの圧縮データと１つの参照画像データを出力するので、カメラが４台あれば、参照画像データは４つあることになる。また、前述のように、圧縮データに対する参照画像データの比は、１０分の１から１００分の１と小さいので、例えば１０分の１の比率だとしても、４つ全ての参照画像データを合わせても、１つの圧縮データのサイズより小さくなる。
従って、全ての参照画像データを合わせて、空いた伝送容量の部分に割り当てても、全ての合計がネットワークの伝送容量を超えることは無い。
【００２５】
送信側のカメラの台数が増えた場合も同様であり、例えば、送信側に９９台のカメラが接続されている場合、圧縮データに対する参照画像データの比を１００分の１になるようにすれば、参照画像データを全て合わせても、ネットワークの伝送容量を超えることは無い。
【００２６】
以上のように、送信側のエンコーダで、圧縮データと対応する参照画像データを同時に出力し、またネットワークの伝送容量の一部を参照画像データの伝送に割り当てることによって、受信側で参照画像を見ながらカメラを選択することが出来るようになる。
【００２７】
【発明が解決しようとする課題】
しかし、実際の運用では、例えば４台のカメラ映像を同時に伝送できる容量をもつ伝送路に対して、カメラやモニタを５台以上接続しなければならない場合がある。 この様な場合の伝送容量を分割した様子を図５を例に用いて説明する。
【００２８】
この例では、ネットワークには６台のカメラが接続されているとする。 また、４台のカメラ映像を同時に配信できる容量のネットワークには、カメラ１の圧縮データ５−１、カメラ２の圧縮データ５−２、カメラ３の圧縮データ５−３、カメラ４の圧縮データ５−４の４つが伝送されている。 カメラの台数は６台なので、参照画像データは５−５，５−６，５−７，５−８，５−９，５−１０の６つが伝送されている。
【００２９】
この伝送状態において、新たな受信端末よりカメラ３の映像を圧縮したデータを受信したいという要求があったとする。 この場合、圧縮データ５−３がカメラ３の映像なので、受信端末は圧縮データ５−３を受信するようにすれば良い。もし、新たな受信端末が、カメラ５の映像を圧縮したデータを受信したいという要求を出した場合、伝送容量に空きが無いので、新たなカメラ５の圧縮データを伝送することは出来ない。 しかし、受信端末側のユーザは、モニタ上に映し出された参照画像を見てカメラ映像を選択しているだけなので、どのカメラ映像が伝送可能であるかを判断することは出来ない。
【００３０】
即ち、１つのネットワークに割り振られた圧縮データの伝送可能数より多い数のカメラを接続した場合、受信端末側では参照画像を見ただけでは、どのカメラ映像を見ることが出来るのかを判断することが出来ない。 また、受信側で絶えず参照画像を表示するには、１つのエンコーダで、高精細画像と参照画像の２つの画像データに対し、圧縮処理を行いデータを出力しなければならない。 このためにはエンコーダ内に、２つの画像圧縮器か、圧縮処理能力の高い画像圧縮器を必要とする。
【００３１】
本発明はこれらの欠点を除去し、受信側で参照画像を見ながらカメラの映像を切り換える際に、どの映像は伝送可能であるかを判断しながら切り換えることが出来る圧縮画像伝送装置を実現することを目的とする。
【００３２】
【課題を解決するための手段】
本発明は上記目的を達成するため、複数の送信装置からネットワーク上に伝送される複数の圧縮画像データの中から所望の圧縮画像データを該ネットワークに接続された受信端末で選択し、受信する圧縮画像伝送システムにおいて、各送信装置では、それぞれの圧縮画像データに対応するそれぞれの参照画像をネットワーク上に伝送し、各受信端末では、受信した各参照画像をモニタに表示し、当該参照画像の表示状態に基づき受信すべき圧縮画像データを特定するようにしたものである。
【００３３】
また、各送信装置では、何れの受信端末からも選択されていない圧縮画像データについては伝送せず、当該圧縮画像データに対応する参照画像のみ、ネットワークに伝送するようにしたものである。
また、各送信装置では、受信端末から配信要求があった場合、対応する圧縮画像データをネットワークに伝送するようにしたものである。
さらに、各送信装置では、受信端末からの配信要求に応じ、圧縮画像データと当該圧縮画像データに対応する参照画像のいずれか一方を選択して出力するようにしたものである。
【００３４】
また、圧縮画像データと当該圧縮画像データに対応する参照画像を、１つの画像圧縮器で圧縮するようにしたものである。
さらに、受信端末では、ネットワーク上の圧縮画像データ伝送状況を監視し、受信端末のモニタ上で、受信可能な圧縮画像データを特定できるようにしたものである。
また、受信端末のモニタ上で、受信可能な圧縮画像データに対応する参照画像と受信できない圧縮画像データに対応する参照画像とを区別できる画面表示としたものである。
また、受信端末では、モニタ表示された各参照画像の表示状態に基づき、受信すべき圧縮画像データを特定し、対応する送信装置に配信要求を行うようにしたものである。
【００３５】
また、複数の送信装置からネットワークに伝送される複数の圧縮画像データの中から所望の圧縮画像データを該ネットワークに接続された受信装置で選択し、受信する圧縮画像伝送システムにおいて、各送信装置には、少なくともそれぞれの圧縮画像データに対応するそれぞれの参照画像をネットワーク上に伝送する手段を有し、各受信装置には、受信した各参照画像をモニタに表示し、当該参照画像の表示状態に基づき受信すべき圧縮画像データを特定する手段を有するようにしたものである。
また、各送信装置には、受信装置から配信要求があった場合、対応する圧縮画像データをネットワークに伝送する手段を有するようにしたものである。
また、各受信装置に、ネットワーク上の圧縮画像データ伝送状況を監視する手段と、当該伝送状況に基づき各受信装置のモニタ上で受信可能な圧縮画像データを特定する手段を有するようにしたものである。
また、各受信装置のモニタ上で、受信可能な圧縮画像データに対応する参照画像と受信できない圧縮画像データに対応する参照画像とを区別して画面表示する手段を有するようにしたものである。
また、受信装置に、モニタ表示された各参照画像の表示状態に基づき、受信すべき圧縮画像データを特定し、対応する送信装置に配信要求を行う手段を有するようにしたものである。
【００３６】
この様に、受信端末側から配信要求データを送信装置側へ伝送することで、どの受信端末からも選択されていない圧縮データを伝送することを止め、ネットワークの伝送容量に空き容量が発生するようにする。 また、ネットワーク上の圧縮データを監視して、どの送信装置に対応するデータが伝送されているかを検出し、同時に伝送容量に余裕があるかも検出し、この２つの検出結果をモニタ上に表示することで受信端末側では、どの送信装置の映像を見ることが出来るのかを判断することが出来る。
【００３７】
【発明の実施の形態】
以下、本発明に係る、複数の動画像データ圧縮装置と受信端末をネットワークに接続した圧縮画像伝送装置の一実施例の構成を図１に示し、詳細に説明する。この圧縮画像伝送装置の送信側には、映像データを出力するカメラと、該映像データを圧縮処理するエンコーダを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。 この例では、カメラ１−１、カメラ１−９の２台のカメラがあり、この２つの組み合わせがそれぞれネットワーク１−２５に接続されている。
【００３８】
カメラ１−１から出力された映像信号１−２は、エンコーダ１−３で画像圧縮処理される。 エンコーダ１−３から出力された圧縮データ１−４は、ネットワーク１−２５へ出力される。 またエンコーダ１−３は、映像信号１−２に対し、高圧縮が可能な画像圧縮処理を行い、参照画像データ１−５として出力する。
【００３９】
参照画像データ１−５は、圧縮率が高いことが特徴である。 さらに従来と異なり、受信端末から、ネットワーク１−２５を介して配信要求データ１−４３が出力され、エンコーダ１−３に入力される。
【００４０】
同様にカメラ１−９から出力された映像信号１−１０は、エンコーダ１−１１で画像圧縮処理され、圧縮データ１−１２として、ネットワーク１−２５に出力される。 また、エンコーダ１−１１は、映像信号１−１０に対し高圧縮が可能な画像圧縮処理を行い、参照画像データ１−１３として、ネットワーク１−２５へ出力する。 さらに、受信端末から、ネットワーク１−２５を介して配信要求データ１−４４が出力され、エンコーダ１−１１に入力される。 以上が、圧縮データ送信側の構成である。
【００４１】
次に受信側は、圧縮データに伸張処理を行うデコーダとモニタの組み合わせを１つの単位として、この組み合わせが複数台、ネットワークに接続されている。この例では、デコーダ１−２７とモニタ１−３１から成る組み合わせが１組接続されている。 この例では、デコーダ１−２７は、ネットワーク１−２５に伝送された２つの圧縮データ１−４，１−１２の内のいずれか一方を、圧縮データ１−２６として取り込み、画像伸張処理を行う。 伸張された画像データは映像信号１−２８として映像信号合成器１−２９に出力される。
【００４２】
またデコーダ１−３８は、ネットワーク１−２５に伝送された参照画像データ１−５を、参照画像データ１−３７として取り込み、画像伸張処理を行った後、参照画像１−３９として映像信号合成器１−２９へ出力する。 またデコーダ１−４１は、ネットワーク１−２５に伝送された参照画像データ１−１３を、参照画像データ１−４０として取り込み、画像伸張処理を行った後、参照画像１−４２として映像信号合成器１−２９へ出力する。
【００４３】
伝送情報検出器１−４５は、ネットワーク１−２５上の圧縮データを監視し、どのカメラからの圧縮データが伝送されているかを検出し、また伝送容量に空き容量があるか否かを監視している。 この結果を、伝送情報１−４６として情報表示発生器１−４８へ出力する。 また、伝送情報検出器１−４５は、上記伝送データの検出結果とカメラ選択信号１−３３の情報とに基づき、圧縮データ選択器１−３４を制御する選択器制御信号１−４７と後述の配信要求データ１−４６をネットワーク１−２５へ出力する。
【００４４】
情報表示発生器１−４８は、入力された伝送情報１−４６の内容に基づいて、どのカメラの圧縮データが伝送されているか、伝送容量に空きはあるかといった情報を、画像データにした情報表示映像１−４９にして映像信号合成器１−２９に出力する。 映像信号合成器１−２９は、入力された映像信号１−２８、参照画像１−３９、参照画像１−４２、情報表示映像１−４９を合成し、１枚の画像データである合成映像信号１−３０にしてモニタ１−３１へ出力する。
【００４５】
操作卓１−３２は、モニタ１−３１の映像を見ながら、どのカメラ映像を選択するか指示する信号を送信側に送るために設置される。 この操作卓１−３２の構成は従来と同様である。 操作卓１−３２からのカメラ選択信号１−３３は、圧縮データ選択器１−３４と伝送情報検出器１−４５へ出力される。 圧縮データ選択器１−３４は、カメラ選択信号１−３３の内容から、操作卓１−３２で、どのカメラの映像を選択したかを判断する。 また、選択器制御信号１−４７の内容から、選択したカメラからの圧縮データが、伝送容量が足りずにネットワーク上に存在しないと分かった場合、操作卓１−３２からのカメラ選択要求を破棄する。 その結果、選択したカメラに対応する圧縮データを選び出し、圧縮データ選択信号１−３５としてデコーダ１−２７へ出力する。
【００４６】
次に、図１の本発明の複数の動画像データ圧縮装置と参照画像を伴う受信端末をネットワークに接続した圧縮画像伝送装置の動作を説明する。 カメラ１−１から出力された映像信号１−２は、エンコーダ１−３において、入力された配信要求データ１−４３の内容から圧縮データ出力が要求されていると判断した場合、画像圧縮処理され、圧縮データ１−４としてネットワーク１−２５へ出力される。 同時にエンコーダ１−３では、配信要求データ１−４３の内容とは無関係に、映像信号１−２に対し、より高圧縮処理が行われ、参照画像データ１−５がネットワーク１−２５へ出力される。 圧縮データ１−４と参照画像データ１−５は同じ映像が基であるが、圧縮データサイズは大きく異なり、圧縮データ１−４に対する参照画像データ１−５の比は１０分の１から１００分の１である。
【００４７】
同様に、カメラ１−９から出力された映像データ１−１０は、エンコーダ１−１１で画像圧縮処理され、圧縮データ１−１２と参照画像データ１−１３として出力される。 なお、入力された配信要求データ１−４４の内容から圧縮データ出力が要求されていないと判断した場合は、参照画像データ１−１３のみを出力する。 これにより、ネットワーク１−２５には、圧縮データ１−４，１−１２、参照画像データ１−５，１−１３の４つの画像圧縮データが入力されることになる。 ここで、ネットワーク１−２５の伝送容量は有限であるため、４つの圧縮データの合計が伝送容量を超えないデータ量となるように制御しなければならないのは、従来と同様である。 但し、配信要求データ１−４３，１−４４の内容が、圧縮データの出力を要求していない場合、圧縮データ１−４，１−１２の出力が行われず、ネットワーク１−２５の伝送容量に空きが発生する。 以上が送信側の動作である。
【００４８】
一方、受信側では、ネットワーク１−２５に接続されたデコーダ１−２７で、ネットワーク１−２５上に伝送された圧縮データ１−４か１−１２のいずれかの圧縮データを取り込み、画像伸張処理を行う。 ここで、デコーダ１−２７に、どの圧縮データを取り込むかは、圧縮データ選択信号１−３５によって決まる。デコーダ１−２７は、圧縮データ１−４か１−１２を元の映像信号に戻す伸張処理を行う。 デコーダ１−２７で伸張された映像信号１−２８は、映像信号合成器１−２９へ出力する。
【００４９】
デコーダ１−３８は、参照画像データ１−５をネットワーク１−２５を介して参照画像データ１−３７として取り込む。 そして、画像伸張処理を行い、参照画像１−３９として映像信号合成器１−２９へ出力する。 同様にデコーダ１−４１は、参照画像データ１−１３をネットワーク１−２５を介して参照画像データ１−４０として取り込む。 そして画像伸張処理を行い、参照画像１−４２として映像信号合成器１−２９へ出力する。
【００５０】
伝送情報検出器１−４５は、ネットワーク１−２５上の圧縮データを監視し、どのカメラからの圧縮データが伝送されているか、もしくは、伝送容量に空きがあるかという情報を、伝送情報１−４６として情報表示発生器１−４８へ、出力する。 ここで、伝送容量に空きが無く、操作卓１−３２より入力されたカメラ選択信号１−３３の内容が、現在のネットワーク１−２５上に圧縮データが存在しないカメラを選択している場合には、その圧縮データを選択しないように制御する選択器制御信号１−４７を圧縮データ選択器１−３４へ出力する。 また、どの圧縮データを選択したかという情報から該当するカメラを特定し、配信要求データ１−４６’を出力する。 これはネットワーク１−２５を経由して送信側の動画像圧縮装置に入力される。
【００５１】
情報表示発生器１−４８は、伝送情報１−４６の内容から、ネットワーク１−２５上に圧縮データが存在するか、または伝送容量に空きがあるかという情報をモニタ１−３１に表示することが出来る映像データにし、情報表示映像１−４９として映像信号合成器１−２９へ出力する。 この情報の表示方法については後述する。 映像信号合成器１−２９は、映像信号１−１８、参照画像１−３９，１−４２、情報表示映像１−４９の４つの映像が入力される。 それぞれの映像信号は、モニタ１−３１の画面レイアウトに合わせた位置に表示されるよう、重ね合わせ処理が行われ、１枚の画像である合成映像信号１−３０としてモニタ１−３１へ出力される。
【００５２】
モニタ１−３１は、この合成映像信号１−３０をカメラ映像として表示する。モニタ１−３１の画面上には、全ての参照画像が表示されており、この映像により全てのカメラが何を撮影しているかを把握することが出来る。 モニタ１−３１の近くには操作卓１−３２があり、画面に表示されている複数の参照画像に基づき、１つのカメラ映像を選択する。 操作卓１−３２でカメラ映像を選択した情報は、カメラ選択信号１−３３として、圧縮データ選択器１−３４と伝送情報検出器１−４５へ出力される。
【００５３】
圧縮データ選択器１−３４は、入力された圧縮データ選択信号１−３５の情報から伸張処理を行う圧縮データを選択する。 この例であれば、カメラ１−１に対応する圧縮データは圧縮データ１−４であり、カメラ１−９は圧縮データ１−１２が対応する。 以上のような動作で、操作卓１−３２を用いて、参照画像を見ながら、複数のカメラの中から１つのカメラに対応する圧縮データを選択し、選択した対応するカメラ映像をモニタ１−３１に表示する。
【００５４】
次に、ネットワーク１−２５上の圧縮データの状態をどのようにモニタ画面に表示するかについて説明する。 個々のカメラからの圧縮データの状態を表示するため、ここでは参照画像と組み合わせた表示方法を採用した場合を例にとる。
【００５５】
この参照画像と状態表示の表示例を図６に示す。
図６は、モニタ１−３１に表示されたモニタ表示画像６−５の例であり、この画面には、カメラ映像６−１、参照画面６−２，６−３、指示用ポインタ６−４が表示されている。 カメラ映像６−１は、送信側のカメラ映像を画像圧縮しネットワーク１−２５へ伝送、受信側のデコーダ１ー２７で伸張処理を行った映像が映し出されたものである。 この例では、送信側のカメラは２台であるので、２種類のいずれかのカメラ映像が映し出される。 参照画面６−２，６−３には、カメラ１−１，カメラ１−９でそれぞれ撮影している映像が縮小された、それぞれの参照画像６−６が表示される。
【００５６】
カメラ映像の選択方法は、操作卓１−３２を用い、モニタ画面上を自由に動かすことが出来る指示用ポインタ６−４を参照画像の上に移動し、カメラ選択のための操作を行う。 例えば操作卓１−３２にマウスが接続されていれば、マウスを動かすことで、指示用ポインタ６−４をモニタ表示画像６−５の上で動かし、選択したい参照画像の上で静止させ、マウスのボタンを押すことで、選択映像を決定する。
【００５７】
このような操作により、参照画像を基にして現在カメラが撮影している映像を見ながら、接続されているカメラのうちから１台を選択し、モニタ１−３１上にカメラ映像６−１として表示することが出来る。 なお、このモニタ表示画像６−５での、カメラ映像６−１、参照画面６−２，６−３、指示用ポインタ６−４の表示位置や大きさは、この図と同じでなくてもかまわず、様々なレイアウトが考えられる。
【００５８】
ここで、図７を用い、この参照画像の構成を参照画面６−２により更に詳しく説明する。 参照画面６−２の参照画像６−６の上部に、対応するカメラ番号６−７を表示し、参照画像６−６の下にそのカメラ番号のカメラから出力される圧縮データの様子を示す伝送情報表示６−８を表示する。 ここで、選択しようとする参照画像６−６部分を操作卓１−３２の指示用ポインタ６−４により選択すると、モニタ１−３１にカメラ番号６−７に対応するカメラ映像が表示される。
【００５９】
これにより、ネットワーク１−２５上に圧縮データが存在する場合には、その圧縮データを、受信端末に表示する映像データとして使用することが出来る。
この場合、図７（ａ）の様に、伝送情報表示６−８には、「配信中」という文字が表示される。 この表示は、ネットワーク１−２５上に圧縮データが存在する全ての参照画面６−２，６−３，・・・に対して行われる。
【００６０】
またネットワーク１−２５上に圧縮データが存在せず、伝送容量に空きが無い場合は、新たな圧縮データをネットワーク１−２５で伝送することが出来ないため、操作卓１−３２より、そのカメラ番号６−７に対応する参照画像６−６を選択しても、モニタ１−３１にカメラ映像を表示することが出来ない。 従って、このような場合は、参照画像６−６を選択しないよう、図７（ｂ）に示すように伝送情報表示６−８には、「×」が表示される。 この表示は、ネットワーク１−２５上に圧縮データが存在しない全ての参照画面６−２，６−３，・・・に対して行われる。
【００６１】
またネットワーク１−２５上に圧縮データが存在しないが、伝送容量に空きがある場合、新たな圧縮データをネットワーク１−２５で伝送することが出来る。この場合、ネットワーク１−２５上に伝送データが存在しない参照画像６−６の全てに対し、図７（ｃ）のように「配信可」が伝送情報表示６−８として表示される。 例えば、参照画面６−２を操作卓１−３２より選択した場合、その伝送状態表示６−８を図７（ｄ）のように「配信中」に変更し、伝送情報検出器１−４５より、対応する配信要求データ１−４６をカメラ番号６−７に対応するカメラの接続されている動画像圧縮装置へ出力する。 この時、新たな圧縮データの伝送で伝送容量に空きが無くなった場合は、ネットワーク１−２５上に圧縮データが存在しない全ての参照画像６−６に対して、それぞれの伝送情報表示６−８を、図７（ｂ）のように「×」に変更する。
【００６２】
このように参照画像６−６と伝送情報表示６−８を組み合わせることで、受信端末側のユーザは、伝送情報表示６−８が「送信中」もしくは「送信可」の場合はカメラ番号６−７に対応するカメラ映像を選択でき、伝送情報表示６−８が「×」の場合は選択できないと判断することが出来る。 この伝送情報表示６−８は、文字表示である必要はなく、例えば「送信中」を青色、「送信可」を黄色、「×」を赤色にして画面に表示するなど、受信端末側のユーザが状態の区別をつけられれば、色、形、音など、どのような違いで表現してもかまわない。
【００６３】
次に本発明の他の実施例について説明する。多数の受信端末がネットワークに接続されている場合、それぞれの参照画面データは絶えず伝送されているので、全ての受信端末で全てのカメラが出力する画像データを参照映像として見ることが出来る。しかし、ネットワークの伝送容量に空きがある場合、参照映像でなく高精細画像の圧縮データを伝送しても、受信端末で参照映像の代わりに見ることが出来れば、現在のカメラが出力している画像を見るという目的は達せられる。よって、配信要求データにより、高精細画像と参照画像を切り換えて画像圧縮器に入力する。画像圧縮器にも配信要求データを入力し、画像圧縮器への入力の切り換えに合わせ圧縮設定を変えて圧縮する。これにより、画像圧縮器を２つ用いたり、画像圧縮器の圧縮処理能力を高くする必要が無くなり、１つの画像圧縮器で高精細画像と参照画像の伝送に対応できる。
【００６４】
図８は、本発明の他の実施例に基づく、動画像データ圧縮装置をカメラとネットワークに接続した構成を示す図である。 カメラ１−１が出力した映像信号１−２は、エンコーダ３−１に入力される。 エンコーダ３−１は、映像信号１−２に対し画像圧縮処理を行い、圧縮データ３−２としてネットワーク１−２５へ出力する。 ネットワーク１−２５からは、受信側から伝送した配信要求データ１−４３がエンコーダ３−１に入力される。 エンコーダ３−１の動作は、通常は映像信号１−２５に対し高い圧縮率の設定でデータ圧縮処理を行う。 この時の圧縮データ３−２は、受信側で参照映像として表示するための画像圧縮データとして、ネットワーク１−２５へ出力する。
【００６５】
配信要求データ１−４３が入力されると、エンコーダ３−１は映像信号１−２に対し高精細な画像となるような圧縮設定でデータ圧縮処理を行う。 この時の圧縮データ３−２は、受信側で高精細なカメラ映像として表示するための画像圧縮データとして、ネットワーク１−２５へ出力する。 このように、配信要求データ１−４３の入力により、エンコーダ３−１が出力する圧縮データ３−２の内容は、参照画像のような高圧縮処理された画像データと、高精細な画像データの２種類に切り換えられる。
【００６６】
次に、図９を用いて、このエンコーダ３−１の構成について詳細に説明する。図９は、エンコーダ３−１内部の処理構成を示す図である。 エンコーダ３−１に入力した映像信号１−２は、画像変換器２−１と参照画像変換器２−４の両方に入力する。 画像変換器２−１は、受信側で高精網画像として表示するための画像変換処理を行う。 すなわち、高精細画像として表示するために、何も処理を行わない、もしくは映像信号１−２が劣化しない程度、例えば縦横３分の１程度の画像サイズに縮小する。 この変換した画像データを映像信号２−２として出力する。
【００６７】
参照画像変換器２−４は、映像信号１−２を参照画像に変換する。 例えば、画像サイズは、画質よりもデータ量を優先させ、表示している映像が認識できる程度にデータが間引かれる。データの間引き方法は、例えば、画像サイズを小さくする画像フィルタにより、画像の高周波成分を削減するなどの方法が考えられる。この変換した画像データを参照画像２−５として出力する。
【００６８】
画像変換器２−１から出力した映像信号２−２と、参照画像変換器２−４から出力した参照画像２−５は、共に画像選択器３−３に入力される。 画像選択器３−３には、この他に配信要求データ１−４３が接続されている。 画像選択器３−３は、通常は、参照画像２−５を選択画像３−４として画像圧縮器３−５ヘ出力する。 ここで、配信要求データ１−４３が入力されると、映像信号２−２を選択画像３−４として画像圧縮器３−５へ出力する。
【００６９】
画像圧縮器３−５は、入力した選択画像３−４に対し、画像圧縮処理を行う。画像選択器３−３と同様に、画像圧縮器３−５にも配信要求データ１−４３が接続されている。 つまり、画像圧縮器３−５は、通常、高圧縮な設定で選択画像３−４に対し圧縮処理を行い、配信要求データ１−４３が入力されると、高精細な画像となるような圧縮の設定で圧縮処理を行う。 そして、圧縮データ３−２として出力する。
【００７０】
これにより受信側には、１つのカメラからの画像は、高精細画像か参照画像のどちらか一方だけの圧縮データが伝送されることになる。 参照画像を表示するのに、高精細画像の圧縮データが伝送されてきた場合は、参照画像相当の画質、もしくは画像サイズに変換して表示する処理が必要になる場合がある。この処理を行う必要があるかは、受信側で圧縮データの内容と、どのカメラからの画像を選択しているかで、判断する。
【００７１】
以上の動作により、エンコーダ３−１から出力される圧縮データ３−２の内容は、通常は、参照画像２−５を圧縮処理したデータで、配信要求データ１−４３が入力されると、高精細な映像信号２−２を圧縮処理したデータに切り替わる。したがって、圧縮器は、１つの入力映像を圧縮処理する処理能力があれば良く、１つの画像圧縮器で高精細画像と参照画像の両方の圧縮データを出力することが出来る。
【００７２】
【発明の効果】
以上説明した本発明の構成を用いれば、受信側で参照画像を見ながら、カメラ映像を切り換える際に、どの映像は伝送可能であるかを判断しながら切り換える事が出来る圧縮画像伝送装置が実現できる。 また、送信側のエンコーダ内に、２つの画像圧縮器や、圧縮処理能力の高い画像圧縮器を必要としない圧縮画像伝送装置が実現できる。
【図面の簡単な説明】
【図１】本発明の圧縮画像伝送装置の全体構成の一実施例を示すブロック図
【図２】従来の圧縮画像伝送装置の全体構成の一例を示すブロック図
【図３】従来の参照画像を伴うモニタ画面表示を示す模式図
【図４】従来の参照画像を伴うネットワークの伝送容量の分割方法を示す模式図
【図５】カメラを６台接続した場合の伝送容量の分割方法を示す模式図
【図６】本発明のモニタ画面表示を示す模式図
【図７】本発明の参照画像と圧縮データの状態表示を示す模式図
【図８】本発明の他の実施例の圧縮画像装置とネットワークの構成を示すブロック図
【図９】本発明のエンコーダの一実施例の構成を示すブロック図
【符号の説明】
１−１，１−９：カメラ、１−２，１−１０，１−２８：映像信号、１−３，１−１１，３−１：エンコーダ、１−４，１−１２，３−２：圧縮データ、１−５，１−１３，１−３７，１−４０，２−５：参照画像データ、１−２５：ネットワーク、１−２７，１−３８，１−４１：デコーダ、１−２９：映像信号合成器、１−３０：合成映像信号、１−３１：モニタ、１−３２：操作卓、１−３３：カメラ選択信号、１−３４，３−３：圧縮データ選択器、１−３５：圧縮データ選択信号、１−４３，１−４４：配信要求データ、１−４５：伝送情報検出器、１−４６：伝送情報、１−４７：選択器制御信号、１−４８：情報表示発生器、１−４９：情報表示映像、３−５：圧縮圧縮器、６−１：カメラ映像、６−２，６−３：参照画像、６−４：指示用ポインタ、６−５：モニタ表示画像、６−６：参照画像、６−７：カメラ番号、６−８：伝送情報表示。
Claims (1)
- ネットワークを介して複数の画像伝送装置から圧縮画像データと該圧縮画像データと同じ映像データを基とする該圧縮画像データ容量の１０分の１から１００分の１の容量に圧縮された参照画像データとの少なくともいずれか一方を伝送する画像伝送システムにおける画像表示方法であって、伝送容量が足り配信可能な前記圧縮画像データと同じ映像データを基とする前記圧縮データ容量の１０分の１から１００分の１の容量に圧縮された参照画像データと、伝送容量が足りずに配信できない前記圧縮画像データと同じ映像データを基とする前記圧縮データ容量の１０分の１から１００分の１の容量に圧縮された参照画像データとを、ネットワーク上で前記圧縮画像データが伝送されているという伝送情報とネットワーク上に前記圧縮画像データが存在せずかつネットワーク伝送容量に空きがあるという伝送情報とのいずれか1つの伝送情報と前記参照画像データとを組み合わせて表示すること、伝送容量に空きが無いという伝送情報と前記参照画像データとを組み合わせて表示すること、とのいづれか一つの表示することで区別できる表示様態としたことを特徴とする画像表示方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002269720A JP4209650B2 (ja) | 2001-12-28 | 2002-09-17 | 画像表示方法及び画像伝送装置 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001399493 | 2001-12-28 | ||
| JP2001-399493 | 2001-12-28 | ||
| JP2002269720A JP4209650B2 (ja) | 2001-12-28 | 2002-09-17 | 画像表示方法及び画像伝送装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2003259345A JP2003259345A (ja) | 2003-09-12 |
| JP2003259345A5 JP2003259345A5 (ja) | 2005-11-04 |
| JP4209650B2 true JP4209650B2 (ja) | 2009-01-14 |
Family
ID=28677373
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002269720A Expired - Fee Related JP4209650B2 (ja) | 2001-12-28 | 2002-09-17 | 画像表示方法及び画像伝送装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4209650B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007142733A (ja) * | 2005-11-17 | 2007-06-07 | Alpine Electronics Inc | ＤＶＤビデオ再生システム及びＤＶＤ−Ｖｉｄｅｏディスクの再生出力方法 |
| JP7234545B2 (ja) * | 2017-09-27 | 2023-03-08 | 株式会社Ｊｖｃケンウッド | 撮影画像表示装置、撮影画像表示方法、及び撮影画像表示プログラム |
-
2002
- 2002-09-17 JP JP2002269720A patent/JP4209650B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003259345A (ja) | 2003-09-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7113224B2 (en) | Receiving apparatus | |
| US20060168634A1 (en) | Compressed video image transmission method and apparatus for allocating transmission capacity for reference images | |
| JP4516580B2 (ja) | Ｔｖのスクリーン上のｐｉｐ表示装置、及び方法 | |
| US7679683B2 (en) | Image display apparatus and operating method thereof | |
| US20020135677A1 (en) | Image sensing control method and apparatus, image transmission control method, apparatus, and system, and storage means storing program that implements the method | |
| JP2002232801A (ja) | チャンネル情報のオンスクリーン表示機能を有する放送受信装置 | |
| US6707947B1 (en) | Frame switcher and method of switching, digital camera, and monitoring system | |
| US5808659A (en) | Device and method for centralized processing of picture-in-picture images | |
| JPH09261522A (ja) | 可変領域を得うる映像配信方法、ならびにシステム | |
| TW395128B (en) | Program selection system for a digital television receiver | |
| US20040061805A1 (en) | Receiving apparatus, image display system and broadcasting method | |
| KR20030038824A (ko) | 무선 프로젝터를 통한 원격 영상 표시 방법 및 시스템 | |
| JPH0918854A (ja) | 双方向ケーブルテレビシステム、ケーブルテレビ装置及び処理端末装置 | |
| JP4209650B2 (ja) | 画像表示方法及び画像伝送装置 | |
| JP2002077834A (ja) | デジタル放送受信装置 | |
| JP2006339733A (ja) | 画像伝送方法および画像伝送システム | |
| JP2003101992A (ja) | 圧縮画像伝送装置 | |
| US7320136B1 (en) | Apparatus for connecting TV and computer | |
| JPH11327867A (ja) | セットトップボックスを用いたパソコン制御装置 | |
| JP4586198B2 (ja) | デジタル映像表示システム | |
| JP2005507616A (ja) | ビデオ信号を受信する装置およびその装置を制御する方法 | |
| US6754178B1 (en) | Image communication apparatus and image communication method | |
| JP4039926B2 (ja) | テレビジョンカメラ装置 | |
| JP3228464B2 (ja) | ワイドテレビジョン受像機 | |
| US7167210B2 (en) | Signal transmission method and apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050916 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050916 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071206 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071211 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080205 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080610 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080808 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080902 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080925 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081021 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081023 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4209650 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111031 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111031 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121031 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121031 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131031 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |