JP4798594B2 - Image signal processing apparatus and image distribution system - Google Patents
Image signal processing apparatus and image distribution system Download PDFInfo
- Publication number
- JP4798594B2 JP4798594B2 JP2001137185A JP2001137185A JP4798594B2 JP 4798594 B2 JP4798594 B2 JP 4798594B2 JP 2001137185 A JP2001137185 A JP 2001137185A JP 2001137185 A JP2001137185 A JP 2001137185A JP 4798594 B2 JP4798594 B2 JP 4798594B2
- Authority
- JP
- Japan
- Prior art keywords
- image signal
- compressed
- signal
- still image
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【0001】
【発明の属する技術分野】
この発明は、画像の配信に好適な画像信号処理装置、および当該画像信号処理装置を構成要素に含む画像配信システムに関する。
【0002】
【従来の技術】
画像信号を圧縮する形式として、従来より静止画像圧縮形式と動画像圧縮形式とが知られる。静止画像圧縮形式とは、フレーム内圧縮のみを行う圧縮形式を意味し、動画像圧縮形式とは、フレーム間圧縮を含む圧縮形式を意味する。周知のJPEG規格にもとづく圧縮形式は、前者の一例であり、周知のMPEG規格にもとづく圧縮形式は後者の一例である。
【0003】
【発明が解決しようとする課題】
静止画像圧縮形式では画像信号がフレームごとに独立に圧縮されるために、静止画像圧縮形式によって得られる圧縮画像信号、すなわち圧縮静止画像信号は、フレーム間の独立性が高いという利点がある。すなわち圧縮静止画像信号では、各フレームが前後のフレームに依存しないので、ネットワーク等の通信回線の帯域に応じて、フレームを自在に間引くことができるとともに、記録された圧縮静止画像信号の検索も容易に行うことができる。しかしながら、圧縮静止画像信号は動画像圧縮形式によって得られる圧縮画像信号、すなわち圧縮動画像信号に比べて、信号量(すなわちデータサイズ)が大きいという問題点があった。
【0004】
一方、動画像圧縮形式では、時間軸に沿ったフレーム間で画像信号の差分を算出した上で圧縮を行うフレーム間圧縮が採用されるので、圧縮動画像信号として信号量の小さい圧縮画像信号が得られるという利点がある。しかしながら、圧縮動画像信号では、各フレームが前後のフレームに依存するので、フレームを自在に間引くことができず、検索性も悪いという問題点があった。
【0005】
この発明は、従来の技術における上記した問題点を解消するためになされたもので、圧縮静止画像信号の独立性に由来する利点と、圧縮動画像信号の高い圧縮比に由来する利点との双方を生かすことのできる画像信号処理装置を得ることを目的としており、さらにこの画像信号処理装置を要素として備える画像配信システムを提供することを目的とする。
【0006】
【課題を解決するための手段】
本発明のうち第1の態様にかかるものは、画像配信システムであって、画像信号処理装置と、通信回線を媒介して前記画像信号処理装置と通信する端末装置とを備え、前記画像信号処理装置は、画像信号をフレーム間圧縮を含む圧縮形式で圧縮し、圧縮動画像信号として出力する動画像圧縮部と、前記動画像圧縮部による前記画像信号の圧縮と並行して、前記画像信号をフレーム内圧縮のみの圧縮形式で圧縮し、圧縮静止画像信号として出力する静止画像圧縮部と、前記圧縮動画像信号をストアする動画像記録部と、前記圧縮静止画像信号をストアする静止画像記録部と、前記動画像記録部にストアされた前記圧縮動画像信号と前記静止画像記録部にストアされた前記圧縮静止画像信号とのいずれかを選択し、圧縮画像信号として出力する選択部と、前記通信回線へ接続されることにより、前記圧縮画像信号を前記通信回線へ送出するインタフェースとを有し、前記端末装置は、前記圧縮動画像信号の検索が希望されたときは、前記圧縮静止画像信号の選択を指示する信号を第1の要求信号として送信するとともに、検索範囲を指定する検索範囲指定信号を送信し、前記画像信号処理装置は、前記静止画像記録部から前記選択部へ至る前記圧縮静止画像信号の伝達経路に介挿され、前記第1の要求信号に応じて、前記静止画像記録部がストアしている前記圧縮静止画像信号のうち、前記検索範囲指定信号が指定する検索範囲に属する複数フレームの信号を読み出すとともに、それらを一画面内に同時に表示可能な形式の信号へ変換し出力する合成部をさらに有し、前記合成部によって出力された信号は、前記選択部および前記インタフェースを介して前記端末装置へと送出される。
【0007】
本発明のうち第2の態様にかかるものは、第1の態様にかかる画像配信システムにおいて、前記検索範囲指定信号は、第1時刻から第2時刻までの範囲の画像を検索するように指定された信号であり、前記一画面内に同時に表示される前記複数フレームは、前記第1時刻から前記第2時刻を等分割してなる複数の時刻に対応したフレームである。
【0008】
本発明のうち第3の態様にかかるものは、第1または第2の態様にかかる画像配信システムにおいて、ユーザは、前記端末装置において、前記複数フレームを視認して、再生すべき画像の範囲を特定し、画像端末装置は、前記ユーザによって指定された再生すべき画像の範囲に属する圧縮動画像信号の選択を指示する信号を第2の要求信号として前記画像処理装置に送信し、前記画像処理装置の前記選択部は、前記第2の要求信号に応じて再生すべき画像の範囲に属する圧縮動画像信号を選択して、前記圧縮画像信号として出力する。
【0011】
本発明のうち第4の態様にかかるものは、第1ないし第3のいずれかの態様にかかる画像配信システムにおいて、前記静止画像圧縮部が、圧縮の対象である前記画像信号のフレームを間引いて圧縮する。
【0012】
本発明のうち第5の態様にかかるものでは、第1ないし第3のいずれかの態様にかかる画像配信システムにおいて、前記静止画像圧縮部が、圧縮の対象である前記画像信号の画面サイズを縮小化して圧縮する。
【0016】
本発明のうち第6の態様にかかるものでは、第1または第5の態様にかかる画像配信システムにおいて、前記選択部が、前記通信回線の帯域に応じて、前記圧縮動画像信号と前記圧縮静止画像信号とのいずれかを選択する。
【0017】
本発明のうち第7の態様にかかるものは、第6の態様にかかる画像配信システムにおいて、静止画像圧縮部から前記インタフェースへ至る前記圧縮静止画像信号の伝達経路に介挿され、前記圧縮静止画像信号のフレームを間引いて伝達する間引き部を、さらに備える。
【0019】
本発明のうち第8の態様にかかるものでは、第1の態様にかかる画像配信システムにおいて、前記動画像記録部にストアされた前記圧縮動画像信号と前記静止画像記録部にストアされた前記圧縮静止画像信号とが並行して、前記選択部へ伝えられ、前記インタフェースは、前記通信回線を媒介した通信相手である端末装置へ前記圧縮画像信号が正常に送信されない送信不良を検出し、前記選択部は、前記圧縮動画像信号を選択しているときに、前記インタフェースが前記送信不良を検出すると、前記圧縮動画像信号に含まれるフレーム内圧縮画像が送信可能になるまでは、前記圧縮静止画像信号を選択する。
【0021】
本発明のうち第9の態様にかかるものは、画像信号処理装置であって、画像信号をフレーム間圧縮を含む圧縮形式で圧縮し、圧縮動画像信号として出力する動画像圧縮部と、前記動画像圧縮部による前記画像信号の圧縮と並行して、前記画像信号をフレーム内圧縮のみの圧縮形式で圧縮し、圧縮静止画像信号として出力する静止画像圧縮部と、前記圧縮動画像信号をストアする動画像記録部と、前記圧縮静止画像信号をストアする静止画像記録部と、前記動画像記録部にストアされた前記圧縮動画像信号と前記静止画像記録部にストアされた前記圧縮静止画像信号とのいずれかを選択し、圧縮画像信号として出力する選択部と、外部の通信回線へ接続されることにより、前記圧縮画像信号を前記通信回線へ送出するインタフェースとを備え、前記インタフェースは、前記圧縮動画像信号の検索が希望されたときは、前記圧縮静止画像信号の選択を指示する信号を要求信号として前記通信回線を介して受信し、前記選択部は、前記インタフェースが受信した前記要求信号に応じて、前記圧縮動画像信号と前記圧縮静止画像信号とのいずれかを選択し、前記インタフェースは、前記要求信号に応じて、前記通信回線を通じて送られる検索範囲指定信号をさらに受信し、前記画像信号処理装置は、前記静止画像記録部から前記選択部へ至る前記圧縮静止画像信号の伝達経路に介挿され、前記要求信号が前記圧縮静止画像信号を要求するときに、前記静止画像記録部がストアしている前記圧縮静止画像信号のうち、前記検索範囲指定信号が指定する検索範囲に属する複数フレームの信号を読み出すとともに、それらを一画面内に同時に表示可能な形式の信号へ変換し出力する合成部をさらに備える。
【0022】
【発明の実施の形態】
実施の形態1.
(装置の概略)
図1は、この発明の実施の形態1による画像信号処理装置の構成を示すブロック図である。この画像信号処理装置100は、ビデオデコーダ2、圧縮部3、ワークメモリ4、画像記録部5、制御部6、バスライン7、およびインタフェース8を備えている。画像信号処理装置100は、カメラ1、モニタ10、および通信回線9が接続されることにより、使用に供される。画像信号処理装置100は、特に通信回線9が接続されることにより、画像配信装置としての使用が可能である。
【0023】
制御部6は、例えばプログラム(ソフトウェア)にもとづいて動作するCPUで構成され、各要素2〜5,7,8を制御する機能を果たしている。圧縮部は、例えば画像信号の圧縮をハードウェアのみで実行する半導体チップ(LSI)で構成される。画像信号処理装置100に含まれる要素2〜8は、それらのいくつか、あるいは一つ一つが単一の半導体チップ(LSI)で構成されても良く、全体が単一の半導体チップ(システムLSI)で構成されても良い。
【0024】
図2は、図1に示した画像信号処理装置100の構造を、より詳細に表現したブロック図である。カメラ1で撮像することにより得られる画像信号は、ビデオデコーダ2によって、アナログ形式からデジタル形式へ変換される。ビデオデコーダ2が出力するデジタル形式の画像信号は、圧縮部3によって圧縮される。圧縮部3は、静止画像圧縮部31と動画像圧縮部32とを備えており、ビデオデコーダ2が出力する画像信号は、静止画像圧縮部31により静止画像圧縮形式で圧縮され、それと並行して動画像圧縮部32により動画像圧縮形式で圧縮される。
【0025】
ワークメモリ4は、圧縮処理の過程で一時的に画像信号を保持するためのメモリであり、例えば、静止画像圧縮部31がアクセスする静止画像ワークメモリ41と、動画像圧縮部32がアクセスする動画像ワークメモリ42とを備えている。静止画像圧縮部31が出力する圧縮静止画像信号と、動画像圧縮部32が出力する圧縮動画像信号とは、選択部71〜74の各々へ入力される。選択部71〜74の各々は、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択し、圧縮画像信号として出力する。選択部71〜74は、例えば選択信号S1〜S4にそれぞれ応答して選択動作を行う。選択信号S1〜S4に関して、図2の例に限らず、制御部6の内部で生成される形態、モニタ10を操作するオペレータの手操作により入力される形態など、さまざまな形態を採ることが可能である。
【0026】
選択部71〜74は、制御部6がハードウェアのみで構成される場合には、制御部6の一部であり、制御部6がソフトウェアで動作するCPUである場合には、制御部6の一部を等価的に構成しており、図2に描かれる制御部6はその機能を表現したものとなる。
【0027】
選択部71が出力する圧縮画像信号は、画像記録部5へストアされる。選択部72,73が出力する圧縮画像信号は、インタフェース8へ入力される。選択部74が出力する圧縮画像信号は、モニタ10へ伝えられる。インタフェース8は、外部の通信回線9へ接続されることにより、選択部72,73が出力する圧縮画像信号を通信回線9へ送出する。通信回線9は、例えばネットワークである。
通信回線9には端末装置200が接続されることにより、画像信号処理装置100は通信回線9を媒介して端末装置200との通信を行う。
【0028】
このように、画像信号処理装置100はインタフェース8を備えるので、画像配信装置として利用することができる。すなわち、画像信号処理装置100、通信回線9、および端末装置200によって、画像配信システム300を構築することが可能である。モニタ10は、画像を映し出す画面を備えており、画像信号処理装置100を操作するオペレータが、画像信号処理装置100が出力する画像信号をモニタするための装置である。
【0029】
以上のように、画像信号処理装置100では、圧縮動画像信号と圧縮静止画像信号とが並行して得られ、それらのいずれかが選択部71〜74によって選択され、出力されるので、圧縮動画像信号と圧縮静止画像信号とを、それぞれの利点を生かすように、使用の場面に応じて臨機応変に使い分けることができる。また、選択部71〜74は動画像圧縮部32と静止画像圧縮部31とが出力する圧縮画像信号を選択するので、カメラ1から入力される画像信号に同期して、すなわちリアルタイムで、圧縮動画像信号と圧縮静止画像信号とのいずれかを得ることができる。
【0030】
また、選択部72,73にインタフェース8が接続されるので、通信回線9に接続される外部の端末装置200へ、目的および条件に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを臨機応変に配信することができる。さらに、選択部71が出力する圧縮画像信号をストアする記録部5が備わるので、目的および条件に応じて、画像信号の配信だけでなく記録をも行うことができる。
【0031】
(選択部に関する第1の形態)
選択部71〜74に関する形態、言い換えると選択信号S1〜S4を生成する形態として、さまざまな形態を採ることが可能である。以下において、選択部71〜74に関する好ましい形態について説明する。
【0032】
図3の例では、選択部71は、現在入力されつつある画像信号のために画像記録部5に割り当てられたメモリ容量に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択する。図3が示すように、圧縮画像信号を一方でローカルに記録しつつ、他方で配信を行う画像信号処理装置100は、第1の例として、検索性に優れる圧縮静止画像信号を記録するとともに、低ビットレートで配信可能な圧縮動画像信号を配信する。第2の例として、画像記録部5に割り当てられた記憶容量が制限されているときには、画像信号処理装置100は、信号量の小さい圧縮動画像信号を記録するとともに、検索性に優れる圧縮静止画像信号を配信する。第3の例として、画像信号処理装置100は、画像記録部5に割り当てられたメモリ容量に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択して記録するとともに、それとは独立に圧縮動画像信号と圧縮静止画像信号とのいずれかを選択して配信する。配信すべき圧縮動画像信号を選択する選択部72,73は、例えば以下の図4〜図8とともに説明する形態にしたがって動作する。
【0033】
図3の例では、選択部71を制御する選択信号S1は、図2に描かれるように画像記録部5から送られてもよく、制御部6の内部で生成されてもよく、あるいは、モニタ10を操作するオペレータの手操作により入力されてもよい。選択部72,73をそれぞれ制御する選択信号S2,S3は、図2に描かれるようにインタフェース8から送られてもよく、制御部6の内部で生成されてもよく、あるいは、オペレータの手操作により入力されてもよい。選択部74を制御する選択信号S4は、例えばオペレータの手操作により入力される。
【0034】
(選択部に関する第2の形態)
図4の例では、画像信号処理装置100は、通信回線9の帯域に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択して配信する。インタフェース8は、通信回線9の帯域を検出可能であり、選択部72,73は、検出された帯域に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択する。
【0035】
画像信号処理装置100が、通信回線9を通じて複数の端末装置200と通信を行う場合に、例えば一つの端末装置200を媒介する通信回線9aが狭帯域のWANであり、他の一つの端末装置200を媒介する通信回線9bが広帯域のLANである場合には、通信回線9aにはビットレートの低い圧縮動画像信号を送信し、通信回線9bには検索性に優れる圧縮静止画像信号を送信する。このように、通信回線9の伝送能力に応じた適切な形式の圧縮画像信号が配信される。しかも、複数の端末装置200への配信が、相互に干渉することなく、それぞれに最適な形態で行われる。
【0036】
図5が示す画像信号処理装置101のように、静止画像圧縮部31からインタフェース8へ至る圧縮静止画像信号の伝達経路に、圧縮静止画像信号のフレームを間引いて伝達する間引き部62,63を介挿しても良い。それにより、画像配信システム301では、検索性に優れた圧縮静止画像信号を、伝送能力の低い通信回線9aを通じて端末装置200へ配信することが可能となる。例えば、伝送能力の高い通信回線9bには圧縮動画像信号を送信し、伝送能力の低い通信回線9aには、圧縮動画像信号よりもビットレートの低い間引かれた圧縮静止画像信号を送信することが可能となる。
【0037】
(選択部に関する第3の形態)
図6の例では、画像信号処理装置100は、通信回線9に接続される端末装置200からの要求に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択して配信する。すなわち、インタフェース8は、端末装置200から通信回線9を通じて送られる要求信号を受信し、選択部72,73は、インタフェース8が受信した要求信号に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択する。選択部72,73を制御する選択信号S2,S3は、例えば要求信号そのものであってもよく、あるいは要求信号にもとづいてインタフェース8、または制御部6の内部で生成されたものであってもよい。
【0038】
例えば、画像をモニタ22の画面に映し出して顧客の閲覧に供することを目的とした端末装置(ビュワーと称される)200aには、要求に応じて圧縮動画像信号を配信することにより、通信回線9aへの負荷を軽減し、画像を記録することを目的とした顧客のための端末装置(レコーダと称される)200bには、証拠性が高く、検索が容易な圧縮静止画像信号を、要求に応じて配信することができる。また、レコーダとしての端末装置200bに対して、圧縮画像信号を記録する記録部23の記憶容量の大きさに応じて、圧縮動画像信号と圧縮静止画像信号のいずれか適切なものを選択して配信することも可能である。この場合、本体部21とともに端末装置200bに備わる記録部23の記憶容量の大きさを反映した要求信号が、端末装置200bから画像信号処理装置100へ送られる。
【0039】
(選択部に関する第4の形態)
図7の例では、画像信号処理装置100は、圧縮動画像信号を配信しているときに、通信回線9の障害等に起因して、正常な送信が妨げられた場合に、圧縮動画像信号に含まれるフレーム内圧縮画像が送信可能になるまで、圧縮静止画像信号を選択して配信する。図7において、「I」は圧縮画像信号のうち、フレーム内圧縮によって得られたフレーム(「Iピクチャ」と略称する)を表し、「P」はフレーム間圧縮によって得られたフレーム(「Pピクチャ」と略称する)を表している。ここで「Pピクチャ」は、フレーム間圧縮によって得られたフレーム一般を意味しており、MPEGで用いられる「Pピクチャ」および「Bピクチャ」をも広く包含する。圧縮動画像信号は、Pピクチャを主体としつつも、ある割合でIピクチャをも含んでいる。一方、圧縮静止画像信号は、Iピクチャのみで構成される。
【0040】
圧縮動画像信号を配信しているときに、正常な送信が行われないという送信不良が、例えばPピクチャP2について生じた場合に、従来の画像配信システムでは、つぎのIピクチャが送信可能となるまで、圧縮画像信号の送信を中断せざるを得なかった。これは、差分を用いたフレーム間圧縮によって生成されたものであるという、Pピクチャの本質に由来する。画像信号処理装置100は、図8の手順に沿って送信処理を行うことにより、圧縮画像信号を中断することなく送信することを可能にする。
【0041】
端末装置200からの要求に応じて圧縮動画像信号の送信が開始されると、送信不良があった場合にはインタフェース8によって検出される(ステップS1)。送信不良が検出されなければ、圧縮動画像信号が送信される(ステップS2)。端末装置200から送信終了の要求があれば(ステップS3)、送信は終了し、要求がなければ処理はステップS1へ戻る。ステップS1において送信不良が検出されると、つぎに送信すべき圧縮動画像信号がIピクチャであるか否かが判定される(ステップS4)。つぎに送信すべき圧縮動画像信号がIピクチャであれば、処理はステップS2へ移行し、圧縮動画像信号がそのまま継続して送信される。図7において、送信不良がPピクチャP7で生じた場合が、これに相当する。
【0042】
一方、つぎに送信すべき圧縮動画像信号がIピクチャでない場合、すなわち図7において送信不良がPピクチャP7以外で生じた場合には、処理はステップS5へ移行し、圧縮動画像信号に代えて、圧縮静止画像信号が送信される。すなわち、圧縮動画像信号を選択していた選択部72または73が、圧縮静止画像信号へ選択の対象を切り替える。つぎに、端末装置200から送信終了の要求があれば(ステップS6)、送信は終了し、要求がなければ処理はステップS4へ戻る。
【0043】
画像信号処理装置100は以上のように動作する結果、図7に例示するように、PピクチャP2で送信不良が発生した場合には、圧縮動画像信号に含まれるIピクチャが送信可能となるまで、PピクチャP3〜P7に代えて、圧縮静止画像信号のIピクチャI1〜I5が送信される。このため、送信不良が発生しても、端末装置200は、圧縮画像信号を中断することなく受信することが可能となる。さらに、圧縮動画像信号に含まれるつぎのIピクチャをも、圧縮静止画像信号のIピクチャI6へ置き換えて送信しても良い。この場合には、図8のフローチャートのステップS4において、圧縮動画像信号のフレームにすでにIピクチャが出現したか否かを判定すると良い。いずれの場合であっても、少なくともPピクチャP3〜P7に代えて、圧縮静止画像信号のIピクチャI1〜I5が送信されること、すなわち、圧縮動画像信号に含まれるIピクチャが送信可能になるまでは、圧縮静止画像信号が送信されることに変わりがない。
【0044】
選択部72,73の各々は、例えば図8の手順にしたがって個別に動作する。したがって、画像信号処理装置100が通信回線9を通じて複数の端末装置200と通信を行っているときに、一つの端末装置200への送信に不良が発生しても、他の端末装置200には何らの影響を与えることなく、不良が生じた端末装置200へ圧縮画像信号の送信を中断なく行うことが可能である。
【0045】
実施の形態2.
図9は、この発明の実施の形態2による画像信号処理装置の構成を示すブロック図である。この画像信号処理装置102は、圧縮動画像信号の検索に適するように構成されている。そのために画像信号処理装置102は、合成部82〜84を備えるとともに、画像記録部5が静止画像記録部51と動画像記録部52とを備える点において、画像信号処理装置100とは特徴的に異なっている。画像信号処理装置102、通信回線9、および端末装置200は、画像配信システム302を構成する。
【0046】
静止画像記録部51は静止画像圧縮部31が出力する圧縮静止画像信号をストアし、動画像記録部52は動画像圧縮部32が出力する圧縮動画像信号をストアする。合成部82〜84の各々は、静止画像記録部51がストアしている圧縮静止画像信号に属する複数フレームの信号を読み出すとともに、それらを一画面内に同時に表示可能な形式の信号へ変換する。選択部72〜74は、合成部82〜84の出力と動画像記録部52にストアされた圧縮動画像信号とのいずれかを選択し、圧縮画像信号として出力する。
【0047】
図10および図11は、画像信号処理装置102の動作説明図である。図10が示すように、圧縮動画像信号はPピクチャを含んでいる。Pピクチャは時間的に前後関係にある他のフレームに依存するフレームであるので、検索のためにある一枚のフレーム、例えばPピクチャP5を取り出して表示する場合には、表示すべきPピクチャP5だけでなく、PピクチャP5が依存するすべてのフレームを伸張し、再生する必要がある。このため従来においては、装置への負担を増すことなしには、圧縮動画像信号の検索を行うことは困難とされていた。これに対して、画像信号処理装置102では、静止画像記録部51に記録された圧縮静止画像信号を検索に利用することにより、この問題を解消する。
【0048】
好ましくは静止画像圧縮部31は、圧縮の対象である画像信号の画面サイズを縮小化して圧縮する(図10のフレームs7,s0,s1,s2,・・・)。それにより、圧縮静止画像信号を検索に使用する上で支障がなく、しかも、静止画像圧縮部31および静止画像記録部51の負担を軽減することができる。さらに好ましくは、静止画像圧縮部31は、圧縮の対象である画像信号のフレームを間引いて、例えば一定時間間隔で圧縮する(図10のフレームs0,s4,s0,・・・)。それにより、圧縮静止画像信号を検索に使用する上で支障がなく、しかも、静止画像圧縮部31および静止画像記録部51の負担をさらに軽減することができる。
【0049】
インタフェース8は、端末装置200から通信回線9を通じて送られる要求信号を受信し、選択部72,73は、インタフェース8が受信した要求信号に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを選択する。端末装置200のユーザが、画像の再生を希望するときには、端末装置200は要求信号として圧縮動画像信号の選択を指示する信号を送出する。それにより、選択部72または73は、動画像記録部52から読み出された圧縮動画像信号を選択する。その結果、端末装置200には、圧縮動画像信号が配信される。
【0050】
端末装置200のユーザが、検索を希望するときには、端末装置200は要求信号として圧縮静止画像信号の選択を指示する信号を送出する。それと同時に、端末装置200は図11(a)が示すように、ユーザが希望する検索範囲を指定する検索範囲指定信号を送出する。図11の例では、時刻T0〜時刻T16までの範囲の画像を検索するよう、検索範囲が指定されている。合成部82または83は、静止画像記録部51がストアしている圧縮静止画像信号のうち、指定された検索範囲に属する複数フレームの信号を読み出すとともに、それらを一画面内に同時に表示可能な形式の信号へ変換する。例えば、指定された検索範囲を等分割してなる複数の時刻に対応した複数フレームが、合成の対象とされる。
【0051】
選択部72または73は、要求信号にもとづいて、合成部82または83が出力する合成後の圧縮静止画像信号を選択する。その結果、図11(b)が示すように、端末装置200のモニタ22には、複数のフレームが一画面内に同時に表示(いわゆるサムネイル表示)される。図11(b)の例では、合成部82,83は、時刻T0〜時刻T16を等分割してなる16個の時刻に対応したフレームを合成の対象としており、それにより一画面に16フレームがサムネイル表示されている。端末装置200のユーザは、モニタ22に映し出されたサムネイル表示を目視することにより、時刻T0〜時刻T16をさらに狭く設定することが可能である。それにより、新たな検索範囲指定信号が端末装置200から画像信号処理装置102へ送られ、モニタ22には、ユーザが所望するより狭い検索範囲内の16フレームがサムネイル表示される。
【0052】
このような操作を反復して検索範囲を段階的に絞り込むことにより、ユーザは再生すべき画像の範囲を探し当てることができる。再生すべき画像の範囲が定まると、ユーザはその範囲を指定して圧縮動画像信号を送出すべく、画像信号処理装置102へ要求することができる。このとき、端末装置200は要求信号として圧縮動画像信号の選択を指示する信号を送出する。
【0053】
なお、選択部74についても、端末装置200からの指示にもとづいて動作する選択部72,73と同様に、モニタ10から指示にもとづいて同様の動作を行うように構成することが可能である。
【0054】
実施の形態3.
実施の形態1の画像信号処理装置100では、静止画像圧縮部31が出力する圧縮静止画像信号、および動画像圧縮部32が出力する圧縮動画像信号のいずれかが、選択部72,73によって選択されることにより、カメラ1で撮像された画像が圧縮画像信号の形態でリアルタイムで端末装置200へ配信された。これに対して、カメラ1で撮像された画像を、圧縮静止画像信号および圧縮動画像信号の双方の形態で記録しておき、端末装置200からの要求に応じて、記録された圧縮静止画像信号および圧縮動画像信号のいずれかを選択的に配信するように、画像信号処理装置を構成することも可能である。図12に示す画像信号処理装置103は、そのように構成されており、画像記録部5が静止画像記録部51と動画像記録部52とを備える点において、画像信号処理装置100とは特徴的に異なっている。画像信号処理装置103、通信回線9、および端末装置200は、画像配信システム303を構成する。
【0055】
静止画像記録部51は静止画像圧縮部31が出力する圧縮静止画像信号をストアし、動画像記録部52は動画像圧縮部32が出力する圧縮動画像信号をストアする。選択部72〜74は、静止画像記録部51にストアされた圧縮静止画像信号と、動画像記録部52にストアされた圧縮動画像信号とのいずれかを選択し、圧縮画像信号として出力する。選択部72〜74の形態として、実施の形態1で説明した様々な形態を採ることが可能である。配信される画像がリアルタイムの画像ではなく、記録された画像である点のみが、実施の形態1とは相違する。
【0056】
動画像記録部52にストアされた圧縮動画像信号と静止画像記録部51にストアされた圧縮静止画像信号とが並行して、選択部72,73へ伝えられ、選択部72,73は、圧縮動画像信号を選択しているときに、インタフェース8が送信不良を検出すると、圧縮動画像信号に含まれるフレーム内圧縮画像が送信可能になるまでは、圧縮静止画像信号を選択するように、画像信号処理装置103を構成することも可能である。それにより、配信される画像がリアルタイムの画像ではなく、記録された画像である点のみを相違点として、実施の形態2の画像信号処理装置102と同様の動作を実現することも可能となる。
【0057】
また、選択部72〜74が静止画像記録部51と動画像記録部52とに接続されるだけでなく、図12が示すように、静止画像圧縮部31と動画像圧縮部32とにも接続されることにより、リアルタイムの配信と記録された画像の配信との双方を、選択自在に実行する装置を構成することも可能である。さらに、図9に示した画像信号処理装置102において、合成部82〜84をオンオフ自在とすることにより、圧縮静止画像信号として、合成前の圧縮静止画像信号と、合成後の圧縮静止画像信号とを、選択自在に配信する装置を構成することも可能である。
【0059】
【発明の効果】
本発明の第1の態様にかかる画像配信システムでは、圧縮動画像信号と圧縮静止画像信号とが並行して記録部にストアされ、それらを選択して出力する選択部が備わるので、目的および条件に応じて、圧縮動画像信号と圧縮静止画像信号とを臨機応変に使い分けることができる。また、選択部は記録部にストアされた圧縮画像信号を選択するので、過去に得られた圧縮画像信号のうち、目的および条件に応じた部分を、反復自在に使用することができる。
【0060】
また、本発明の第1の態様にかかる画像配信システムでは、通信回線へ接続されるインタフェースが備わるので、通信回線に接続される外部の端末装置へ、目的および条件に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかを臨機応変に配信することができる。
【0061】
また、本発明の第1の態様にかかる画像配信システムでは、通信回線を通じて送られる要求信号に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかが選択されるので、通信回線に接続される外部の端末装置の要求に応じた圧縮画像信号の配信が可能となる。
【0062】
また、本発明の第1の態様にかかる画像配信システムでは、圧縮静止画像信号が要求されるときに、静止画像記録部がストアしている圧縮静止画像信号のうち、検索範囲指定信号が指定する検索範囲に属する複数フレームの信号が、一画面内に同時に表示可能な形式の信号へ変換された上で配信されるので、通信回線に接続される外部の端末装置を操作するユーザは、サムネイル表示を通じて画像の検索を容易に行うことができる。
【0063】
本発明の第4の態様にかかる画像配信システムでは、静止画像圧縮部が画像信号のフレームを間引いて圧縮するので、圧縮静止画像信号を検索に使用する上で支障がなく、しかも、静止画像圧縮部および記録部の負担を軽減することができる。
【0064】
本発明の第5の態様にかかる画像配信システムでは、静止画像圧縮部が画像信号の画面サイズを縮小化して圧縮するので、圧縮静止画像信号を検索に使用する上で支障がなく、しかも、静止画像圧縮部および記録部の負担を軽減することができる。
【0068】
本発明の第6の態様にかかる画像配信システムでは、通信回線の帯域に応じて、圧縮動画像信号と圧縮静止画像信号とのいずれかが選択された上で、通信回線へ送信されるので、通信回線の伝送能力に応じた適切な形式の圧縮画像信号を配信することができる。
【0069】
本発明の第7の態様にかかる画像配信システムでは、静止画像圧縮部からインタフェースへ至る圧縮静止画像信号の伝達経路に間引き部が介挿されているので、圧縮静止画像信号を、伝送能力の低い通信回線を通じて配信することが可能となる。例えば、伝送能力の高い通信回線には圧縮動画像信号を送信し、伝送能力の低い通信回線には、間引かれた圧縮静止画像信号を送信するという選択が可能となる。
【0071】
本発明の第8の態様にかかる画像配信システムでは、圧縮動画像信号と圧縮静止画像信号とが並行して選択部へ伝えられ、選択部が圧縮動画像信号を選択しているときに、送信不良が検出されると、圧縮動画像信号に含まれるフレーム内圧縮画像が送信可能になるまでは、選択部が圧縮静止画像信号を選択する。このため、送信不良が生じても、中断することなく画像信号を送信することができる。
【図面の簡単な説明】
【図1】 実施の形態1による画像信号処理装置の概略ブロック図である。
【図2】 実施の形態1による画像配信システムの詳細ブロック図である。
【図3】 実施の形態1の第1の例による画像配信システムの説明図である。
【図4】 実施の形態1の第2の例による画像配信システムの説明図である。
【図5】 実施の形態1の第2の例による画像配信システムの詳細ブロック図である。
【図6】 実施の形態1の第3の例による画像配信システムの説明図である。
【図7】 実施の形態1の第4の例による画像信号処理装置の動作説明図である。
【図8】 実施の形態1の第4の例による画像配信システムの動作手順を示すフローチャートである。
【図9】 実施の形態2による画像配信システムの詳細ブロック図である。
【図10】 実施の形態2による画像信号処理装置の動作説明図である。
【図11】 実施の形態2による画像配信システムの動作説明図である。
【図12】 実施の形態3による画像配信システムの詳細ブロック図である。
【符号の説明】
5 画像記録部
8 インタフェース
9 通信回線
31 静止画像圧縮部
32 動画像圧縮部
51 静止画像記録部
52 動画像記録部
62,63 間引き部
71 第2選択部
72,73,74 第1選択部
82,83 合成部
100〜103 画像信号処理装置
200 端末装置
300〜303 画像配信システム[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image signal processing device suitable for image distribution, and an image distribution system including the image signal processing device as a component.
[0002]
[Prior art]
Conventionally, a still image compression format and a moving image compression format are known as formats for compressing an image signal. The still image compression format means a compression format that performs only intra-frame compression, and the moving image compression format means a compression format that includes inter-frame compression. A compression format based on the well-known JPEG standard is an example of the former, and a compression format based on the well-known MPEG standard is an example of the latter.
[0003]
[Problems to be solved by the invention]
In the still image compression format, since the image signal is independently compressed for each frame, the compressed image signal obtained by the still image compression format, that is, the compressed still image signal has an advantage that the independence between frames is high. That is, in the compressed still image signal, each frame does not depend on the preceding and following frames, so that the frame can be freely thinned according to the bandwidth of a communication line such as a network and the recorded compressed still image signal can be easily searched. Can be done. However, the compressed still image signal has a problem that the signal amount (that is, the data size) is larger than the compressed image signal obtained by the moving image compression format, that is, the compressed moving image signal.
[0004]
On the other hand, in the moving image compression format, inter-frame compression is employed in which compression is performed after calculating a difference between image signals between frames along the time axis. Therefore, a compressed image signal with a small signal amount is used as a compressed moving image signal. There is an advantage that it can be obtained. However, in the compressed video signal, since each frame depends on the preceding and following frames, there is a problem that the frames cannot be thinned out freely and searchability is poor.
[0005]
The present invention has been made to solve the above-described problems in the prior art, and has both advantages derived from the independence of the compressed still image signal and advantages derived from the high compression ratio of the compressed moving image signal. An object of the present invention is to provide an image signal processing apparatus that can make use of the image signal, and to provide an image distribution system including the image signal processing apparatus as an element.
[0006]
[Means for Solving the Problems]
The first aspect of the present invention is as follows.An image distribution system, comprising: an image signal processing device; and a terminal device that communicates with the image signal processing device via a communication line, wherein the image signal processing device includes a compression format including inter-frame compression. In parallel with the compression of the image signal by the moving image compression unit, the image signal is compressed in a compression format only for intra-frame compression, Still image compression unit for outputting as an image signal, moving image recording unit for storing the compressed moving image signal, still image recording unit for storing the compressed still image signal, and the compression stored in the moving image recording unit A selection unit that selects either a moving image signal or the compressed still image signal stored in the still image recording unit and outputs the selected signal as a compressed image signal; and is connected to the communication line. An interface for sending the compressed image signal to the communication line, and the terminal device, when a search for the compressed video signal is desired, sends a signal for instructing the selection of the compressed still image signal. A search range designation signal for designating a search range is transmitted as a first request signal, and the image signal processing apparatus transmits a compressed still image signal transmission path from the still image recording unit to the selection unit. In response to the first request signal, a plurality of frames of signals belonging to the search range designated by the search range designation signal are read out of the compressed still image signals stored by the still image recording unit in response to the first request signal. And a synthesizing unit that converts the signals into a format that can be displayed simultaneously on one screen and outputs the signals, and the signal output by the synthesizing unit It is sent to said terminal device via the interface.
[0007]
The second aspect of the present invention is as follows.In the image distribution system according to the first aspect, the search range designation signal is a signal designated to search for an image in a range from a first time to a second time, and is displayed simultaneously in the one screen. The plurality of frames are frames corresponding to a plurality of times obtained by equally dividing the second time from the first time.
[0008]
The third aspect of the present invention is as follows.First orAccording to the second aspectIn the image distribution system, the user visually recognizes the plurality of frames in the terminal device and specifies a range of the image to be reproduced, and the image terminal device belongs to the range of the image to be reproduced designated by the user. A signal instructing selection of a compressed moving image signal is transmitted to the image processing apparatus as a second request signal, and the selection unit of the image processing apparatus selects a range of images to be reproduced according to the second request signal Is selected and output as the compressed image signal.
[0011]
Of the present invention4According to the aspect of the1Or the second3According to any aspect ofImage distribution systemThe still image compression unit thins out and compresses the frame of the image signal to be compressed.
[0012]
According to the fifth aspect of the present invention, the first to the first3In the image distribution system according to any one of the above aspects, the still image compression unit reduces and compresses the screen size of the image signal to be compressed.
[0016]
No. 1 of the present invention6According to the aspect of the1Or second5Take the form ofImage distribution systemBeforeSelectionThe selection unit selects either the compressed moving image signal or the compressed still image signal according to the bandwidth of the communication line.
[0017]
No. 1 of the present invention7According to the aspect of the6Take the form ofImage distribution systemAnd a thinning unit that is inserted in a transmission path of the compressed still image signal from the still image compression unit to the interface, and that thins out and transmits the frame of the compressed still image signal.
[0019]
No. 1 of the present invention8According to the aspect of the1Take the form ofImage distribution systemThe compressed moving image signal stored in the moving image recording unit and the compressed still image signal stored in the still image recording unit in parallelSelectionThe interface detects a transmission failure in which the compressed image signal is not normally transmitted to a terminal device that is a communication partner via the communication line,SelectionThe selection unit selects the compressed still image until the intraframe compressed image included in the compressed moving image signal can be transmitted when the interface detects the transmission failure while the compressed moving image signal is selected. Select the image signal.
[0021]
No. 1 of the present invention9According to the aspect ofAn image signal processing apparatus, which compresses an image signal in a compression format including inter-frame compression and outputs the compressed signal as a compressed moving image signal; in parallel with the compression of the image signal by the moving image compression unit A still image compression unit that compresses the image signal in a compression format only for intra-frame compression and outputs the compressed signal as a compressed still image signal, a moving image recording unit that stores the compressed moving image signal, and a store of the compressed still image signal Selecting one of the still image recording unit, the compressed moving image signal stored in the moving image recording unit, and the compressed still image signal stored in the still image recording unit, and outputting as a compressed image signal A selection unit; and an interface that transmits the compressed image signal to the communication line by being connected to an external communication line, and the interface includes the compressed video signal. Is received via the communication line as a request signal, the selection unit according to the request signal received by the interface, The interface selects either the compressed moving image signal or the compressed still image signal, and the interface further receives a search range designation signal sent through the communication line in response to the request signal, and the image signal processing device Is inserted in the transmission path of the compressed still image signal from the still image recording unit to the selection unit, and the still image recording unit stores the request signal when the request signal requests the compressed still image signal. Among the compressed still image signals, a plurality of frames of signals belonging to the search range designated by the search range designation signal are read out and simultaneously read in one screen. Further comprising a combining unit for outputting converted into signals of a format that can be displayed.
[0022]
DETAILED DESCRIPTION OF THE INVENTION
(Outline of the device)
FIG. 1 is a block diagram showing a configuration of an image signal processing apparatus according to
[0023]
The
[0024]
FIG. 2 is a block diagram expressing the structure of the image
[0025]
The
[0026]
The
[0027]
The compressed image signal output from the
When the
[0028]
Thus, since the image
[0029]
As described above, in the image
[0030]
In addition, since the
[0031]
(First form regarding selection unit)
Various forms can be adopted as forms relating to the
[0032]
In the example of FIG. 3, the
[0033]
In the example of FIG. 3, the selection signal S1 for controlling the
[0034]
(2nd form regarding a selection part)
In the example of FIG. 4, the image
[0035]
When the image
[0036]
Like the image
[0037]
(3rd form regarding a selection part)
In the example of FIG. 6, the image
[0038]
For example, a terminal device (referred to as a viewer) 200a intended to display an image on the screen of the
[0039]
(4th form regarding a selection part)
In the example of FIG. 7, the image
[0040]
When a transmission failure in which normal transmission is not performed during distribution of a compressed video signal occurs, for example, for a P picture P2, the conventional I picture distribution system can transmit the next I picture. Until then, transmission of the compressed image signal had to be interrupted. This is derived from the essence of a P picture that is generated by inter-frame compression using a difference. The image
[0041]
When transmission of a compressed video signal is started in response to a request from the
[0042]
On the other hand, if the compressed video signal to be transmitted next is not an I picture, that is, if a transmission failure occurs in a part other than P picture P7 in FIG. 7, the process proceeds to step S5, and instead of the compressed video signal. A compressed still image signal is transmitted. That is, the
[0043]
As a result of the operation of the image
[0044]
Each of the
[0045]
FIG. 9 is a block diagram showing a configuration of an image signal processing apparatus according to
[0046]
The still
[0047]
10 and 11 are explanatory diagrams of the operation of the image
[0048]
Preferably, the still image compression unit 31 reduces the screen size of the image signal to be compressed and compresses it (frames s7, s0, s1, s2,... In FIG. 10). Thereby, there is no trouble in using the compressed still image signal for search, and the burden on the still image compression unit 31 and the still
[0049]
The
[0050]
When the user of the
[0051]
The
[0052]
By repeating such operations and narrowing down the search range step by step, the user can find the range of images to be reproduced. When the range of the image to be reproduced is determined, the user can request the image
[0053]
Note that the
[0054]
In the image
[0055]
The still
[0056]
The compressed moving image signal stored in the moving
[0057]
Further, the
[0059]
【The invention's effect】
First of the present invention1Take the form ofImage distribution systemThe compressed moving image signal and the compressed still image signal are stored in the recording unit in parallel, and a selection unit for selecting and outputting them is provided, so that the compressed moving image signal and the compressed still image are selected according to the purpose and conditions. Signals can be used in a flexible manner. Further, since the selection unit selects the compressed image signal stored in the recording unit, the portion corresponding to the purpose and condition can be used repetitively among the compressed image signals obtained in the past.
[0060]
Also,First of the present invention1Take the form ofImage distribution systemSince it has an interface connected to the communication line, either a compressed video signal or a compressed still image signal can be distributed flexibly according to the purpose and conditions to an external terminal device connected to the communication line. can do.
[0061]
Also,First of the present invention1Take the form ofImage distribution systemThen, since either the compressed moving image signal or the compressed still image signal is selected according to the request signal transmitted through the communication line, the compressed image signal according to the request of the external terminal device connected to the communication line Can be delivered.
[0062]
Also,First of the present invention1Take the form ofImage distribution systemThen, when a compressed still image signal is requested, among the compressed still image signals stored in the still image recording unit, signals of a plurality of frames belonging to the search range designated by the search range designation signal are displayed within one screen. Since the signal is converted into a signal that can be displayed at the same time and distributed, the user who operates the external terminal connected to the communication line can easily search for an image through the thumbnail display.
[0063]
First of the present invention4Take the form ofImage distribution systemThen, since the still image compression unit compresses the image signal by thinning out the frames, there is no problem in using the compressed still image signal for search, and the burden on the still image compression unit and the recording unit can be reduced. .
[0064]
First of the present invention5Take the form ofImage distribution systemSince the still image compression unit compresses the image signal by reducing the screen size, there is no problem in using the compressed still image signal for search, and the burden on the still image compression unit and the recording unit is reduced. Can do.
[0068]
First of the present invention6Take the form ofImage distribution systemIn this case, either a compressed moving image signal or a compressed still image signal is selected according to the bandwidth of the communication line and then transmitted to the communication line. Therefore, an appropriate format according to the transmission capability of the communication line is used. A compressed image signal can be distributed.
[0069]
First of the present invention7Take the form ofImage distribution systemSince the thinning unit is inserted in the transmission path of the compressed still image signal from the still image compression unit to the interface, the compressed still image signal can be distributed through a communication line with low transmission capability. For example, it is possible to select to transmit a compressed moving image signal to a communication line having a high transmission capability and to transmit a thinned compressed still image signal to a communication line having a low transmission capability.
[0071]
First of the present invention8Take the form ofImage distribution systemThen, the compressed moving image signal and the compressed still image signal are transmitted to the selection unit in parallel, and if a transmission failure is detected when the selection unit selects the compressed moving image signal, the compressed moving image signal is converted into the compressed moving image signal. The selection unit selects the compressed still image signal until the contained intra-frame compressed image can be transmitted. For this reason, even if a transmission failure occurs, the image signal can be transmitted without interruption.
[Brief description of the drawings]
FIG. 1 is a schematic block diagram of an image signal processing device according to a first embodiment.
FIG. 2 is a detailed block diagram of the image distribution system according to the first embodiment.
3 is an explanatory diagram of an image distribution system according to a first example of
FIG. 4 is an explanatory diagram of an image distribution system according to a second example of the first embodiment.
FIG. 5 is a detailed block diagram of an image delivery system according to a second example of the first embodiment.
6 is an explanatory diagram of an image distribution system according to a third example of
7 is an operation explanatory diagram of an image signal processing device according to a fourth example of
FIG. 8 is a flowchart showing an operation procedure of the image distribution system according to the fourth example of the first embodiment.
FIG. 9 is a detailed block diagram of an image distribution system according to a second embodiment.
FIG. 10 is an operation explanatory diagram of an image signal processing device according to a second embodiment.
FIG. 11 is an operation explanatory diagram of the image distribution system according to the second embodiment.
FIG. 12 is a detailed block diagram of an image distribution system according to a third embodiment.
[Explanation of symbols]
5 Image recording unit
8 Interface
9 Communication line
31 Still image compression unit
32 Video compression unit
51 Still image recording unit
52 Moving picture recording unit
62, 63 thinning part
71 Second selection unit
72, 73, 74 First selection unit
82,83 synthesis unit
100 to 103 image signal processing apparatus
200 Terminal device
300-303 image distribution system
Claims (9)
通信回線を媒介して前記画像信号処理装置と通信する端末装置と、
を備え、
前記画像信号処理装置は、
画像信号をフレーム間圧縮を含む圧縮形式で圧縮し、圧縮動画像信号として出力する動画像圧縮部と、
前記動画像圧縮部による前記画像信号の圧縮と並行して、前記画像信号をフレーム内圧縮のみの圧縮形式で圧縮し、圧縮静止画像信号として出力する静止画像圧縮部と、
前記圧縮動画像信号をストアする動画像記録部と、
前記圧縮静止画像信号をストアする静止画像記録部と、
前記動画像記録部にストアされた前記圧縮動画像信号と前記静止画像記録部にストアされた前記圧縮静止画像信号とのいずれかを選択し、圧縮画像信号として出力する選択部と、
前記通信回線へ接続されることにより、前記圧縮画像信号を前記通信回線へ送出するインタフェースと、
を有し、
前記端末装置は、前記圧縮動画像信号の検索が希望されたときは、前記圧縮静止画像信号の選択を指示する信号を第1の要求信号として送信するとともに、検索範囲を指定する検索範囲指定信号を送信し、
前記画像信号処理装置は、
前記静止画像記録部から前記選択部へ至る前記圧縮静止画像信号の伝達経路に介挿され、前記第1の要求信号に応じて、前記静止画像記録部がストアしている前記圧縮静止画像信号のうち、前記検索範囲指定信号が指定する検索範囲に属する複数フレームの信号を読み出すとともに、それらを一画面内に同時に表示可能な形式の信号へ変換し出力する合成部をさらに有し、
前記合成部によって出力された信号は、前記選択部および前記インタフェースを介して前記端末装置へと送出される画像配信システム。An image signal processing device;
A terminal device that communicates with the image signal processing device via a communication line;
With
The image signal processing apparatus includes:
A video compression unit that compresses an image signal in a compression format including inter-frame compression and outputs the compressed signal as a compressed video signal;
In parallel with the compression of the image signal by the moving image compression unit, the image signal is compressed in a compression format only for intra-frame compression, and is output as a compressed still image signal;
A moving image recording unit for storing the compressed moving image signal;
A still image recording unit for storing the compressed still image signal;
A selection unit that selects one of the compressed moving image signal stored in the moving image recording unit and the compressed still image signal stored in the still image recording unit, and outputs the selected compressed image signal;
An interface for sending the compressed image signal to the communication line by being connected to the communication line;
Have
When the search for the compressed video signal is desired, the terminal device transmits a signal for instructing selection of the compressed still image signal as a first request signal and a search range specifying signal for specifying a search range Send
The image signal processing apparatus includes:
The compressed still image signal stored in the still image recording unit is inserted in a transmission path of the compressed still image signal from the still image recording unit to the selection unit, and in response to the first request signal. Among them, it further includes a combining unit that reads out signals of a plurality of frames belonging to the search range specified by the search range specifying signal, converts them into signals in a format that can be displayed simultaneously in one screen, and outputs them.
An image distribution system in which a signal output by the combining unit is transmitted to the terminal device via the selection unit and the interface.
前記一画面内に同時に表示される前記複数フレームは、前記第1時刻から前記第2時刻を等分割してなる複数の時刻に対応したフレームである請求項1に記載の画像配信システム。The search range designation signal is a signal designated to search for an image in a range from a first time to a second time,
The image distribution system according to claim 1, wherein the plurality of frames displayed simultaneously in the one screen are frames corresponding to a plurality of times obtained by equally dividing the second time from the first time.
画像端末装置は、前記ユーザによって指定された再生すべき画像の範囲に属する圧縮動画像信号の選択を指示する信号を第2の要求信号として前記画像処理装置に送信し、
前記画像処理装置の前記選択部は、前記第2の要求信号に応じて
再生すべき画像の範囲に属する圧縮動画像信号を選択して、前記圧縮画像信号として出力する請求項1または請求項2に記載の画像配信システム。The user visually recognizes the plurality of frames in the terminal device, specifies a range of an image to be reproduced,
The image terminal device transmits a signal instructing selection of a compressed moving image signal belonging to the range of the image to be reproduced designated by the user to the image processing device as a second request signal,
The selection unit of the image processing apparatus selects a compressed moving image signal belonging to a range of an image to be reproduced according to the second request signal, and outputs the compressed moving image signal as the compressed image signal. The image delivery system described in 1.
前記インタフェースは、前記通信回線を媒介した通信相手である端末装置へ前記圧縮画像信号が正常に送信されない送信不良を検出し、
前記選択部は、前記圧縮動画像信号を選択しているときに、前記インタフェースが前記送信不良を検出すると、前記圧縮動画像信号に含まれるフレーム内圧縮画像が送信可能になるまでは、前記圧縮静止画像信号を選択する、請求項1に記載の画像配信システム。The compressed moving image signal stored in the moving image recording unit and the compressed still image signal stored in the still image recording unit are transmitted to the selection unit in parallel,
The interface detects a transmission failure in which the compressed image signal is not normally transmitted to a terminal device that is a communication partner via the communication line,
If the interface detects the transmission failure while the selection moving image signal is selected, the selection unit performs the compression until an intra-frame compressed image included in the compression moving image signal can be transmitted. The image distribution system according to claim 1, wherein a still image signal is selected.
画像信号をフレーム間圧縮を含む圧縮形式で圧縮し、圧縮動画像信号として出力する動画像圧縮部と、
前記動画像圧縮部による前記画像信号の圧縮と並行して、前記画像信号をフレーム内圧縮のみの圧縮形式で圧縮し、圧縮静止画像信号として出力する静止画像圧縮部と、
前記圧縮動画像信号をストアする動画像記録部と、
前記圧縮静止画像信号をストアする静止画像記録部と、
前記動画像記録部にストアされた前記圧縮動画像信号と前記静止画像記録部にストアされた前記圧縮静止画像信号とのいずれかを選択し、圧縮画像信号として出力する選択部と、
外部の通信回線へ接続されることにより、前記圧縮画像信号を前記通信回線へ送出するインタフェースと、
を備え、
前記インタフェースは、前記圧縮動画像信号の検索が希望されたときは、前記圧縮静止画像信号の選択を指示する信号を要求信号として前記通信回線を介して受信し、
前記選択部は、前記インタフェースが受信した前記要求信号に応じて、前記圧縮動画像信号と前記圧縮静止画像信号とのいずれかを選択し、
前記インタフェースは、前記要求信号に応じて、前記通信回線を通じて送られる検索範囲指定信号をさらに受信し、
前記画像信号処理装置は、
前記静止画像記録部から前記選択部へ至る前記圧縮静止画像信号の伝達経路に介挿され、前記要求信号が前記圧縮静止画像信号を要求するときに、前記静止画像記録部がストアしている前記圧縮静止画像信号のうち、前記検索範囲指定信号が指定する検索範囲に属する複数フレームの信号を読み出すとともに、それらを一画面内に同時に表示可能な形式の信号へ変換し出力する合成部をさらに備える画像信号処理装置。An image signal processing device,
A video compression unit that compresses an image signal in a compression format including inter-frame compression and outputs the compressed signal as a compressed video signal;
In parallel with the compression of the image signal by the moving image compression unit, the image signal is compressed in a compression format only for intra-frame compression, and is output as a compressed still image signal;
A moving image recording unit for storing the compressed moving image signal;
A still image recording unit for storing the compressed still image signal;
A selection unit that selects one of the compressed moving image signal stored in the moving image recording unit and the compressed still image signal stored in the still image recording unit, and outputs the selected compressed image signal;
An interface for sending the compressed image signal to the communication line by being connected to an external communication line;
With
When the search for the compressed moving image signal is desired, the interface receives a signal instructing selection of the compressed still image signal as a request signal via the communication line,
The selection unit selects either the compressed moving image signal or the compressed still image signal according to the request signal received by the interface,
The interface further receives a search range designation signal sent through the communication line in response to the request signal,
The image signal processing apparatus includes:
The still image recording unit stores the compressed still image signal when inserted in a transmission path of the compressed still image signal from the still image recording unit to the selection unit, and the request signal requests the compressed still image signal. A compressed unit is further provided that reads out signals of a plurality of frames belonging to the search range designated by the search range designation signal from the compressed still image signals, and converts them into signals of a format that can be simultaneously displayed on one screen and outputs the combined signal. Image signal processing device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001137185A JP4798594B2 (en) | 2001-05-08 | 2001-05-08 | Image signal processing apparatus and image distribution system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001137185A JP4798594B2 (en) | 2001-05-08 | 2001-05-08 | Image signal processing apparatus and image distribution system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002335505A JP2002335505A (en) | 2002-11-22 |
JP4798594B2 true JP4798594B2 (en) | 2011-10-19 |
Family
ID=18984329
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001137185A Expired - Fee Related JP4798594B2 (en) | 2001-05-08 | 2001-05-08 | Image signal processing apparatus and image distribution system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4798594B2 (en) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6037435B2 (en) * | 2012-09-28 | 2016-12-07 | Kddi株式会社 | Video content distribution device |
JP6034113B2 (en) * | 2012-09-28 | 2016-11-30 | Kddi株式会社 | Video content distribution device |
JP2014086850A (en) * | 2012-10-23 | 2014-05-12 | Kddi Corp | Video content distribution device |
JP6635873B2 (en) * | 2016-05-24 | 2020-01-29 | Line株式会社 | Content distribution method, program, information processing apparatus, and information processing system |
JP6468663B2 (en) * | 2017-03-30 | 2019-02-13 | Kddi株式会社 | Video content distribution device |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09149394A (en) * | 1995-11-27 | 1997-06-06 | Ricoh Co Ltd | Image communication system |
JPH09233467A (en) * | 1996-02-21 | 1997-09-05 | Fujitsu Ltd | Image data communication equipment and communication data amount control method for image data communication system |
JP3529540B2 (en) * | 1996-03-07 | 2004-05-24 | Kddi株式会社 | Video search device |
JP3697820B2 (en) * | 1997-03-07 | 2005-09-21 | コニカミノルタホールディングス株式会社 | Image compression recording device |
JP2000059758A (en) * | 1998-08-05 | 2000-02-25 | Matsushita Electric Ind Co Ltd | Monitoring camera apparatus, monitoring device and remote monitor system using them |
JP3622590B2 (en) * | 1999-10-05 | 2005-02-23 | 日本電気株式会社 | Video data communication system |
-
2001
- 2001-05-08 JP JP2001137185A patent/JP4798594B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2002335505A (en) | 2002-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6456335B1 (en) | Multiple picture composing method and multiple picture composing apparatus | |
KR102324326B1 (en) | Streaming multiple encodings encoded using different encoding parameters | |
US5909250A (en) | Adaptive video compression using variable quantization | |
US7697768B2 (en) | Method and apparatus for encoding an image | |
US20090254958A1 (en) | Video system | |
US6931658B1 (en) | Image on-demand transmitting device and a method thereof | |
CA2160562A1 (en) | Adaptive video decompression | |
JP4798594B2 (en) | Image signal processing apparatus and image distribution system | |
US6738425B2 (en) | Image or video data processing system | |
JP2008109434A (en) | Stream data reproducing system, transmitter for stream data reproducing system, receiver for stream data reproducing system and program for stream data reproducing system | |
US10542213B2 (en) | Imaging apparatus | |
JP4595132B2 (en) | Image distribution method, image display recording method, and program thereof | |
JP2002112257A (en) | Video image compression transmitter and method | |
JP6284172B1 (en) | Screen image transfer method, image restoration method, screen image transfer system, image restoration system, screen image transfer program, image restoration program, image compression method, image compression system, image compression program | |
US6754178B1 (en) | Image communication apparatus and image communication method | |
JP4241708B2 (en) | Video image presentation system, video image transmission device, video image presentation device, video image processing program | |
JPH07327223A (en) | Video monitor system | |
JP4128416B2 (en) | Video recording device | |
JP2005079868A (en) | Image distribution device, image forming device, image storing device, image distribution program, image generation program, image storing program, and image acquisition program | |
JPH09130799A (en) | Image compression processing method and video conference system | |
JPH1042280A (en) | Video monitor device | |
JPH10210441A (en) | Data-receiving device, data-transmitting device and data-receiving and transmitting device | |
JP4045794B2 (en) | Video surveillance system | |
JP2003304525A (en) | Data distribution reproduction system, data distribution reproduction method, program, and storage medium | |
JP2018110404A (en) | Screen image transfer method, image decompression method, screen image transfer system, image decompression system, screen image transfer program, image decompression program, image compression method, image compression system, and image compression program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080423 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080423 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20101208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101214 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110210 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110315 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110615 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20110623 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110712 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110727 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140812 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4798594 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |