JP2004120609A - Moving image transmission system, transmission system for emergency medical care and moving image transmitter - Google Patents

Moving image transmission system, transmission system for emergency medical care and moving image transmitter Download PDF

Info

Publication number
JP2004120609A
JP2004120609A JP2002283913A JP2002283913A JP2004120609A JP 2004120609 A JP2004120609 A JP 2004120609A JP 2002283913 A JP2002283913 A JP 2002283913A JP 2002283913 A JP2002283913 A JP 2002283913A JP 2004120609 A JP2004120609 A JP 2004120609A
Authority
JP
Japan
Prior art keywords
moving image
packet
data
transmission
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002283913A
Other languages
Japanese (ja)
Other versions
JP3944440B2 (en
Inventor
Nobuhiro Tsubone
坪根 宣宏
Daisuke Tsukahara
塚原 大輔
Hitoshi Ozaki
小崎 仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2002283913A priority Critical patent/JP3944440B2/en
Priority to AU2003248319A priority patent/AU2003248319B2/en
Priority to KR20030067003A priority patent/KR100560011B1/en
Publication of JP2004120609A publication Critical patent/JP2004120609A/en
Application granted granted Critical
Publication of JP3944440B2 publication Critical patent/JP3944440B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/148Interfacing a video terminal to a particular transmission medium, e.g. ISDN
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/20Adaptations for transmission via a GHz frequency band, e.g. via satellite

Abstract

<P>PROBLEM TO BE SOLVED: To inexpensively provide a moving image transmission system which transmits a frame image with high definition via a transmission line with narrow transmission band width. <P>SOLUTION: The moving image transmission system is constituted of a moving image transmission terminal 1 which transmits each piece of frame data as one or two or more data packets regarding moving image data consisting of a series of image frames generated at a predetermined frame rate, a moving image transmitter 2 which discards the data packets based on attribute data in the data packets received from the moving image transmission terminal 1 and reduces the number of packets and a moving image reception terminal 3 which receives the data packets from the moving image transmitter 2. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、動画像伝送システム、救急医療用伝送システム及び動画像伝送装置に係り、さらに詳しくは、狭帯域の伝送路を用いて高品質のフレーム画像を伝送するための動画像伝送システムの改良に関する。
【0002】
【従来の技術】
遠隔医療の分野では、人工衛星を介した移動体通信によって、救急搬送中の救急車から遠隔地にいる医師へ患者の様子を伝えるシステムについて検討がなされている(非特許文献1を参照)。救急車内で救急隊員が処置や治療を行う際、病院内にいる医師がデータ通信回線を介して患者の状態を把握することができれば、救急隊員に対し適切な指示を出すことができる。このような遠隔医療を実現するためには、高品質の動画像を伝送することができる高速データ通信回線が必要になる。
【0003】
従来の移動体通信に用いられている通信衛星は、赤道上の静止衛星や低軌道の周回衛星であり、いずれもアンテナ仰角が小さいことから、建物、木立などが通信の障害となるシャドウイングが生じ易く、救急搬送時の通信手段には適していない。このため、準天頂を通過する人工衛星(準天頂衛星)を利用した動画像伝送が提案されている。準天頂衛星は、静止衛星よりも高度が高い長楕円軌道を周回する衛星(いわゆる8の字衛星など)であり、大きなアンテナ仰角を確保することができ、シャドウイングが生じにくいという特徴がある。
【0004】
非特許文献1によれば、救急車1台当たり6Mbpsの帯域幅が必要であり、全国で同時に少なくとも50台の救急車が活動する必要があると報告されている。従って、準天頂衛星(8の字衛星)の場合には6Mbps/台×50台=300Mbpsの回線容量が必要とされている。ところが、300Mbpsの回線容量は準天頂衛星の回線設計にとって過大な負担であり、必要な回線容量をできる限り削減する必要がある。
【0005】
動画像の伝送帯域幅を削減する従来技術としては、MPEG2において動画を構成する各フレーム画像の品質を低減することにより、動画像の情報量を低減する方法がある。一般に、動画像はフレーム周期でサンプリングされた一連の画像フレームにより構成され、各フレームのデータ量を削減することによって、動画像のデータ量を削減することができる。
【0006】
また、他の従来技術としては特許文献1に開示された方法がある。特許文献1に記載された技術は、動画像の符号化方式としてウェーブレット変換を用いるものである。送信端末においてウェーブレット変換することによって、受信端末においてウェーブレット復号する際、復号に必要な信号を全て受信しなくても、所定の信号を受け取った段階で動画像を復号することができる。このため、動画像の伝送帯域幅を削減することができる。
【0007】
これらの技術を適用すれば、動画像送信端末、動画像受信端末間の伝送路の帯域幅に応じて動画像データを伝送することができる。すなわち、動画像送信端末から送信される帯域幅を低減し、動画像の伝送に必要な回線容量を削減することができる。
【0008】
しかしながら、MPEG2や特許文献1による従来の方法では、いずれの場合にも動画像を構成する各フレーム画像の品質が劣化するという問題がある。このため、これらの従来技術はフレーム画像に高い品質が要求される分野には適していない。特に、医療分野に適用され、伝送された動画像によって医師が患者の様子を観察しようとする場合、患者の顔の表情を細かく観察する必要があるが、このような用途では従来技術を用いて帯域幅を低減することはできないという問題があった。
【0009】
ここで、動画像を一連の画像フレームとして伝送する場合、各フレーム画像の品質を劣化させるのではなく、フレームレートを低下させて、動画像のデータ量を削減することも考えられる。つまり、各フレームのデータ量を削減するのではなく、フレーム数を削減する方法である。特に、医療分野に適用する場合、患者の表情などを伝える動画像は一般の動画像に比べ動きは少ないことから、各フレーム画像の品質を劣化させずに、フレーム転送レートを低下させて、必要な伝送帯域幅を削減することが望ましい。
【0010】
ところが、動画像のエンコーダ(符号器)として既に一般市場にも広く普及しているMPEG2の標準規格によれば、フレームレートは常に約30フレーム毎秒にする必要があり、フレームレートを減少させる伝送制御は許されていない。フレームレートを制御することができるエンコーダを採用することも原理的には可能であるが、MPEG2の標準規格に反する特異なエンコーダを動画像送信端末に導入することは、その製造コストの観点から好ましいとは言えない。
【0011】
また、別の案としては、フレームレートの減少制御をMPEG2の標準規格に新たに盛り込むべく標準変更の活動を行うことも想定できるが、既に広く普及しているMPEG2のような標準規格について、標準化機関で標準変更の合意を得ることは容易でないと考えられる。
【0012】
【特許文献1】
特開平7−15609号公報
【非特許文献1】
中島 功、他4名,「長楕円・8の字衛星に向けた救急医療アプリケーション<救急車からの動画像伝送必要回線数と帯域>」,技術研究報告 SANE2000−178 SAT2000−127,社団法人電子情報通信学会,2001年2月,p.17−24
【0013】
【発明が解決しようとする課題】
本発明は、上記の事情に鑑みてなされたものであり、伝送帯域幅の狭い伝送路を介して高品質のフレーム画像を伝送する動画像伝送システムを安価に提供することを目的とする。
【0014】
また、フレームレートが予め定められた動画像を送信する動画像送信端末を用いて、動画像受信端末へ伝送されるフレーム画像の品質を低下させることなく、伝送路の伝送帯域幅を低減することができる動画像伝送システムを提供することを目的とする。また、動画像受信端末から伝送路の帯域幅を制御することができる動画像伝送システムを提供することを目的とする。
【0015】
また、動画像データに関する受信状況報告パケットに基づいて、あるいは、受信状況報告パケットが受信できないことに基づいて、動画像送信端末がフレーム画像の品質を低下させるのを防止する動画像伝送システムを提供することを目的とする。
【0016】
さらに、これらの動画像伝送システムに適用可能な動画像伝送装置、及び、これらの動画像伝送システムを適用した救急医療用伝送システムを提供することを目的とする。
【0017】
【課題を解決するための手段】
本発明による動画像伝送システムは、動画像データを送信する動画像送信端末と、動画像データを受信する動画像受信端末と、動画像送信端末から動画像受信端末への動画像データの伝送を行う動画像伝送装置により構成される。動画像送信端末から送信される動画像データは、予め定められたフレームレートで生成された一連の画像フレームからなり、各フレームデータが1又は2以上のデータパケットとして送信される。動画像伝送装置は、動画像送信端末から受信したデータパケット内の属性データに基づいて、データパケットを廃棄し、パケット数を削減する。動画像受信端末は、パケット数の削減されたデータパケットを動画像伝送装置から受信する。なお、上記フレームには、インターレス動画像におけるフィールドも含まれる。
【0018】
この様な構成により、一定のフレームレートで動画像データを送信する動画像送信端末を用いて動画像データを送信する場合でも、フレーム画像の品質を低下させることなく伝送帯域幅を低減することができる。このため、伝送帯域幅の狭い伝送路を介して動画像受信端末に対し高画質の動画像データを伝送することができる。
【0019】
また、本発明による動画像伝送システムは、動画像受信端末が動画像伝送装置へパケット削減指示を送信し、動画像伝送装置が、動画像受信端末からのパケット削減指示に基づいて、動画像送信端末からのデータパケットを廃棄する。この様な構成により、動画像伝送装置におけるパケットの廃棄を動画像受信端末から制御することができる。
【0020】
また、本発明による動画像伝送システムは、動画像受信端末及び動画像伝送装置を接続する第2の伝送路の負荷状況を検出し、負荷状況通知パケットを動画像伝送装置へ送信する負荷状況検出装置を備え、動画像伝送装置が、負荷状況通知パケットに基づいて、動画像送信端末からのデータパケットを廃棄するように構成される。この様な構成により、第2の伝送路の負荷状況に応じてパケットを廃棄し、動画像データの伝送帯域幅を低減することができる。
【0021】
また、本発明による動画像伝送システムは、動画像受信端末が、パケット欠落数を含む受信状況報告パケットを生成して動画像伝送装置へ送信し、動画像伝送装置が、受信状況報告パケット内のパケット欠落数をデータパケットの廃棄数に基づいて変更し、変更された受信状況報告パケットを動画像送信端末へ送信するように構成される。このような構成により、動画像伝送装置におけるパケットの廃棄に起因して、動画像送信端末から送信されるフレーム画像の品質が低下するのを防止することができる。
【0022】
また、本発明による動画像伝送システムは、動画像受信端末が、所定の期間ごとにパケット欠落数を含む受信状況報告パケットを生成して動画像伝送装置へ送信し、動画像伝送装置は、所定の期間、動画像受信端末からの受信状況報告パケットが到達しない場合に、受信状況報告パケットを生成し、動画像送信端末へ送信するように構成される。この様な構成により、受信状況報告パケットが受信されないことに起因して、動画像送信端末から送信されるフレーム画像の品質が低下するのを防止することができる。
【0023】
また、本発明による救急医療用伝送システムは、車両内に設置された動画像送信端末から医療機関内に設置された動画像受信端末へ通信衛星を介して動画像データを伝送するシステムであり、動画像送信端末が、予め定められたフレームレートで生成された一連の画像フレームからなる動画像データについて、各フレームデータを1又は2以上のデータパケットとして送信する。また、上記車両内には、さらに、動画像送信端末から受信したデータパケット内の属性データに基づいてデータパケットを廃棄し、パケット数を削減する動画像伝送装置と、動画像伝送装置からのデータパケットを通信衛星へ無線送信する衛星回線制御装置とを備えている。
【0024】
この様な構成により、車両に設置された動画像伝送装置によりパケットを廃棄して、パケット数を削減することにより、フレーム画像の品質を低下させることなく、一定のフレームレートで動画像データを送信する動画像送信端末を用いて救急医療用伝送システムを実現することができる。また、衛星通信回線の限られた回線容量を有効利用することができる。
【0025】
また、本発明による動画像伝送装置は、予め定められたフレームレートで生成された動画像データを動画像送信端末から受信し、動画像受信端末へ伝送する装置であり、第1の通信回線インタフェースと、パケット削減制御部と、第2の通信回線インタフェースとを備えている。第1の通信回線インタフェースは、各フレームデータを1又は2以上のデータパケットとして動画像送信端末から受信する。パケット削減制御部は、動画像送信端末から受信したデータパケット内の属性データに基づいてデータパケットを廃棄し、パケット数を削減する。第2の通信回線インタフェースは、パケット数削減後のデータパケットを動画像受信端末へ送信する。
【0026】
また、本発明による動画像伝送装置は、パケット削減制御部が、受信パケット内の属性データに基づいて、画像フレームごと、あるいは、グループ化された画像フレームにデータパケットを廃棄し、フレーム伝送レートを低減する。
【0027】
例えば、独立して復号可能な第1のフレームデータと、他のフレームデータとともに復号される第2のフレームデータからなる動画像データの場合には、他のフレームデータとともに復号される第2のフレームデータを廃棄する。独立して復号可能な第1のフレームデータと、時間軸上で一方向に存在する他のフレームデータとともに復号される第2のフレームデータと、時間軸上で両方向に存在する2以上の他のフレームデータとともに復号される第3フレームデータからなる動画像データの場合には、第3のフレームデータを廃棄する。
【0028】
また、本発明による動画像伝送装置は、パケット削減方法を動画像送信端末に対応づけて記憶する削減制御テーブルを備え、パケット削減制御部が、削減制御テーブルに基づいて、動画像送信端末ごとに指定されたパケット削減方法によりデータパケットを廃棄する。この様な構成により、2以上の動画像送信端末からの動画像データを伝送する場合に、動画像送信端末ごとに指定することができる。
【0029】
【発明の実施の形態】
実施の形態1.
図1は、本発明の実施の形態1による動画像伝送システムの構成及び動作の一例を示した概略図である。MPEG送信端末1及びMPEG受信端末3は通信ネットワークNWを介して接続され、MPEG送信端末1からMPEG受信端末3へパケット化された動画像データが伝送される。
【0030】
通信ネットワークNWは、第1の伝送路41、第2の伝送路42及び動画像伝送装置2からなる。動画像伝送装置2は、第1の伝送路41を介してMPEG送信端末1に接続されるとともに、第2の伝送路42を介してMPEG受信端末3に接続され、MPEG送信端末1からMPEG受信端末3へのデータ伝送を中継している。
【0031】
第2の伝送路42によるMPEG動画像の伝送帯域幅は、第1の伝送路41によるMPEG動画像の伝送帯域幅よりも狭く、動画像伝送装置2では動画像データパケットの間引きが行われる。すなわち、動画像伝送装置2は第2の伝送路42から受信したパケットのうち一部のパケットを廃棄し、廃棄されずに残ったパケットを第2の伝送路42に送出する。
【0032】
パケットの間引きは、受信パケットの属性データに基づいて画像フレームごと(画像フレームの集合体ごとを含む)に行われ、動画像伝送装置2においてフレーム伝送レートが低減される。つまり、MPEG送信端末1からは、高いフレーム伝送レートでMPEG動画像が送信される一方、MPEG受信端末3では、これよりも低いフレーム伝送レートでMPEG動画像が受信できる。
【0033】
図2は、図1の各装置の一構成例を示したブロック図である。MPEG送信端末1は、MPEGエンコーダ10及びパケット送信部11からなり、撮像装置などから入力された動画像データは、MPEGエンコーダ10により符号化され、MPEG−TS(Transport Stream)に変換される。パケット送信部11はこのMPEG−TSをIPパケットにカプセル化し、第1の伝送路41へ送出する。
【0034】
MPEG受信端末3は、パケット受信部30及びMPEGデコーダ(復号器)31からなり、第2の伝送路42から受信したIPパケットはパケット受信部30によりMPEG−TSに展開される。MPEGデコーダ31は、このMPEG−TSを復号化し、映像表示機器などへ動画像データを出力する。
【0035】
図3は、MPEGデータの一例を示した概念図であり、多数のMPEGピクチャーが時間軸(横方向)上に撮像順で並べられている。一般に、動画像は、所定のフレームレート(30フレーム毎秒)でサンプリングされた静止画からなる画像フレームに分割され、一連の画像フレームにより動画像データが形成される。MPEGのフレーム画像はピクチャーと呼ばれ、符号化処理の相違によってIピクチャー(Intra−coded picture)、Pピクチャー(Predictive−coded picture)、Bピクチャー(Bidirectionally predictive−coded picture)の3種類のピクチャータイプがある。
【0036】
Iピクチャーは、フレーム内の符号化処理により、データ量が削減されたピクチャーであり、符号化の対象となる画像フレームのみに基づいて符号化される。通常は、2次元DCT(離散コサイン変換:Discrete Cosine Translation)で得られた係数を量子化した後にエントロピー符号化して生成される。
【0037】
Pピクチャー及びBピクチャーは、画像フレーム間の符号化処理により、データ量が削減されたピクチャーであり、他の画像フレームを利用した動き補償によって符号化される。Pピクチャーの場合は、時間軸上の一方向(過去)の画像フレームのみを利用して前向き予測を行って符号化され、Bピクチャーの場合は、時間軸上の双方向(過去と将来)の画像フレームを利用して前向き及び後向き予測を行って符号化される。
【0038】
また、一連のピクチャーは、ランダムアクセス時にアクセスポイントを提供するピクチャーグループ(GOP:Group Of Picture)に区分されている。各ピクチャーグループは、所定の規則に基づいて並べられたピクチャータイプの異なる複数のピクチャーからなり、ランダムアクセス時にはピクチャーグループ単位でアクセスされる。
【0039】
図4は、MPEG送信端末1からMPEG受信端末3へ伝送されるデータパケットの一構成例を示した図である。図示したデータパケット5は、IPヘッダ50、UDPヘッダ51、RTPヘッダ52及びRTPペイロード53により構成される。また、RTPペイロード53は、MPEGヘッダ54及びMPEGコンテンツ55からなる。
【0040】
このデータパケットは、ネットワーク層、トランスポート層、アプリケーション層の通信プロトコルとして、それぞれIP(Internet Protocol)、UDP(User Datagram Protocol)、RTP(Real−time Transport Protocol)が採用されている。また、MPEGコンテンツ55は、IETF(Internet Engineering Task Force)標準RFC2250(RTP Payload Format for MPEG1/MPEG2 Video)に基づき、MPEGヘッダ54が付加され、MPEGペイロード53としてカプセル化されている。
【0041】
UDP/IPは、伝送路上での伝送パケット欠落や遅延揺らぎを考慮しない簡易な通信プロトコルである。パケット欠落時にも再送処理は行わないことから高速データ伝送が可能であり、リアルタイム性が要求される動画像データの伝送に広く用いられている。IPヘッダ50には、送信元及び送信先のIPアドレスなどが格納されている。また、UDPヘッダ51には、送信元及び送信先のポート番号などが格納されている。
【0042】
RTPヘッダ52には、タイムスタンプやシーケンス番号が格納され、MPEG受信端末3は、RTPヘッダに基づいて伝送路上での遅延時間やパケット欠落を検出することができる。これらの受信状況は、RTCP(RTP Control Protocol)を用いてMPEG受信端末3からMPEG送信端末1へ定期的に送信され、フィードバックされる。
【0043】
また、RTPヘッダ52には、ピクチャーグループ(GOP)の終わりを示す1ビットのマーカーが格納されている。このため、MPEG受信端末3は、RTPヘッダ52を解析することにより、マーカーに基づいて各GOPの最後のパケットか否かを判別することができる。
【0044】
MPEGコンテンツ55は、1又は2以上のMPEG−TS(Transport Stream)パケットにより構成される。MPEG−TSは、MPEGピクチャーから生成される188バイトのパケットデータである。また、MPEGヘッダ54には、MPEGコンテンツ55に含まれるMPEGピクチャーのピクチャータイプが格納されている。このため、MPEG受信端末3は、MPEGヘッダ54を解析することにより、ピクチャータイプを判別することができる。
【0045】
次に、動画像伝送装置2における動作について説明する。動画像伝送装置2は、MPEG送信端末1からIPパケットを受信すると、IPパケットに含まれるMPEG動画像データの属性情報を分析し、当該IPパケットを廃棄するか否かを決定する。廃棄の決定は、ピクチャーグループ(GOP)又はピクチャーごとに決定され、IPパケットごとに廃棄される。この結果、廃棄されずに残ったIPパケットがMPEG受信端末3へ送出される。
【0046】
図5〜図7は、動画像伝送装置2による帯域幅削減方法の一例を示した概念図である。図5には、ピクチャーグループGOPごとにパケットを廃棄する場合の例が示されている。動画像伝送装置2は、受信したIPパケット内のRTPヘッダ52に基づいてピクチャーグループの最後のパケットを判別する。この判別結果に基づいて、ピクチャーグループごとにIPパケットを廃棄し、あるいは中継する。この様にしてN個のピクチャーグループごとにM個のピクチャーグループを廃棄すれば、伝送帯域幅を(N−M)/Nに削減することができる。例えば、ピクチャーグループごとに廃棄及び中継を交互に行えば伝送帯域幅を1/2にすることができる。
【0047】
図6には、動き補償が行われているピクチャーのみを廃棄する場合の例が示されている。動画像伝送装置2は、受信したIPパケット内のMPEGヘッダ54に基づいてMPEGコンテンツ55のピクチャータイプを判別する。この判別結果に基づいて、ピクチャーごとにIPパケットの廃棄又は中継を行う。廃棄されるピクチャーは、動き補償が行われているピクチャー、すなわち、Pピクチャー及びBピクチャーであり、Iピクチャーは中継される。
【0048】
図7には、双方向の動き補償が行われているピクチャーのみを廃棄する場合の例が示されている。図6の場合と同様、動画像伝送装置2は、ピクチャータイプの判別結果に基づいて、ピクチャーごとにIPパケットの廃棄又は中継を行う。このとき、前向き予測及び後ろ向き予測が行われているBピクチャーのみを廃棄し、Iピクチャー及びPピクチャーは中継される。
【0049】
なお、伝送帯域幅の削減方法は、複数の削減方法の中から、コンテンツの種類や、帯域幅、伝送路の状況に応じて任意に選択可能とすることが望ましい。また、これらの帯域幅削減方法を適宜に組み合わせて使用することもできる。例えば、所定のピクチャーグループ内のPパケット及びBパケットのみを廃棄することもできる。さらに、これらの帯域幅削減方法は一例であり、受信パケット内の属性データに基づいてパケットを間引くための他の方法を採用することもできる。
【0050】
本実施の形態による動画像伝送システムでは、MPEG動画像を形成する一連のピクチャーが、MPEG送信端末1から第1の伝送路41を介して動画像伝送装置2へパケット送信され、動画像伝送装置2において受信されたパケットの一部が廃棄される。このとき、受信パケットに含まれる属性データに基づいて、ピクチャーグループやピクチャータイプを判別し、ピクチャーグループ又はピクチャーごとに受信パケットが廃棄される。そして、廃棄されずに残ったパケットのみが、第2の伝送路42を介してMPEG受信端末3へ送信される。
【0051】
すなわち、動画像伝送装置2は、動きの滑らかさよりも各画像フレームの画質を優先させて、動画像データをMPEG受信端末3へ伝送する。このため、第2の伝送路42が十分な帯域幅を有しない場合であっても、フレームごとの画像品質の高い動画像を伝送することができる。
【0052】
特に、第2の伝送路41の帯域幅が第1の伝送路の帯域幅よりも狭い場合に、MPEG送信端末1から高伝送レートで動画像データを送信させる一方、動画像伝送装置2において伝送レートを低下させて、MPEG受信端末3において高画質のピクチャーデータを受信することができる。
【0053】
しかも、上記動画像伝送システムは、特別なMPEG送信端末1を用いる必要がないため、安価に実現することができる。すなわち、MPEG送信端末1において、フレーム伝送レートを低下させて各フレーム画像の品質を向上させるのではなく、広帯域の第1の伝送路41を介してMPEG送信端末1に接続された動画像伝送装置2においてフレーム伝送レートを低減することによって安価にシステムを構築することができる。
【0054】
実施の形態2.
図8は、本発明の実施の形態2による動画像伝送システムの構成及び動作の一例を示した概略図である。動画像伝送装置2Aは、複数の帯域削減方法から任意の帯域削減方法を選択し、選択された削減方法によってMPEG動画像データの伝送帯域幅を削減可能な装置である。MPEG受信端末3は、動画像伝送装置2Aに対し削減方法を指示し、動画像伝送装置2Aは、この指示に基づいて削減方法を選択する。
【0055】
図9は、図8の動画像伝送装置2Aの要部の一例を示したブロック図である。動画像伝送装置2Aは、通信回線インタフェース20及び21と、MPEG帯域削減制御部22とにより構成される。通信回線インタフェース20,21は、通信ネットワークNWへの接続制御を行っている。つまり、通信回線インタフェース20は第1の伝送路41を介してMPEG送信端末1との接続制御を行い、通信回線インタフェース21は第2の伝送路42を介してMPEG受信端末3との接続制御を行っている。
【0056】
MPEG帯域削減制御部22は、パケット削減制御部23及び受信端末要求処理部24により構成される。受信端末要求処理部24は、通信回線インタフェース21を介して、MPEG受信端末3からの削減方法指示パケットを受け取ると、当該パケットに含まれる削減方法の情報を取り出し、パケット削減制御部52へ出力する。
【0057】
その後、パケット削減制御部23によるパケットの削減処理は、MPEG受信端末3により指定された削減方法によって行われる。削減方法指定パケットにより指定される削減方法は、例えば、実施の形態1(図5〜図7)で示された各削減方法であってもよいし、伝送帯域幅の削減率であってもよいし、これらの組み合わせであってもよい。
【0058】
本実施の形態による動画像伝送システムは、MPEG受信端末3から動画像伝送装置2へ削減方法指示パケットを送信し、動画像伝送装置2が、当該パケットに基づいて、MPEG動画像の伝送帯域削減の方法を選択している。このため、送信先であるMPEG受信端末3からフレーム画像の品質を制御することができる。すなわち、必要とされるフレーム画像の品質に応じて、動画像伝送装置2の削減処理を制御することができる。
【0059】
実施の形態3.
図10は、本発明の実施の形態3による動画像伝送システムの構成及び動作の一例を示した概略図である。この動画像伝送システムでは、2つのMPEG送信端末1A及び1Bと、1つのMPEG受信端末3が通信ネットワークNWを介して接続され、MPEG送信端末1A,1BのぞれぞれからMPEG受信端末3へパケット化された動画像データが伝送される。
【0060】
すなわち、動画像伝送装置2Bには、広帯域の第1の伝送路41を介して、OLE_LINK1MPEG送信端末OLE_LINK11A及びMPEG送信端末1Bが接続されるとともに、狭帯域の第2の伝送路42を介してMPEG受信端末3が接続されている。そして、動画像伝送装置2Bが、MPEG送信端末1A及びMPEG送信端末1BからMPEG受信端末3へ送信されるデータパケットの中継を行っている。
【0061】
動画像伝送装置2Bは、MPEG送信端末1A,1Bごとに帯域削減方法を選択可能な装置である。MPEG受信端末3は、動画像伝送装置2Aに対しMPEG送信端末ごとの削減方法(削減率も含む)を指示し、動画像伝送装置2Aはこの指示に基づいて削減方法を選択する。
【0062】
MPEG受信端末3には、ディスプレイ装置6が接続され、MPEG送信端末1A及び1Bから送信された動画像がともに表示される。MPEG受信端末3から各動画像について帯域削減方法を指示することができるので、受信側での必要に応じてそれぞれの画質を制御することができる。図10では、MPEG送信端末1Aからの動画像は帯域削減せずに伝送し表示させる一方、MPEG送信端末1Bからの動画像は帯域幅を1/4に削減して伝送し、低画質で表示させた場合の例が示されている。
【0063】
図11は、図10の動画像伝送システムの他の動作状態の例を示した図である。図10の場合とは逆に、MPEG送信端末1Bからの動画像を高画質で表示させる場合が示されている。MPEG送信端末1Aからの動画像は帯域幅を1/4に削減して伝送し、MPEG送信端末1Bからの動画像は帯域削減せずに伝送するように、MPEG受信端末3から動画像伝送装置2Bに指示すれば、MPEG送信端末1Aからの動画像を低画質で表示し、MPEG送信端末1Bからの動画像を高画質で表示させることができる。
【0064】
図12は、図10及び図11の動画像伝送装置2Bの要部の一例を示したブロック図である。図中のMPEG帯域削減制御部22は、パケット削減制御部23、受信端末要求処理部24及び削減制御テーブル25により構成され、図9の動画像伝送装置2A(実施の形態2)と比較すれば、削減制御テーブル25を有する点で異なる。
【0065】
削減制御テーブル25は、MPEG送信端末1A,1Bごとに帯域削減方法を記憶保持し、受信端末要求処理部24により更新される。パケット削減制御部23は、この削減制御テーブル25に基づいてパケットの送信元であるMPEG送信端末1A,1Bごとに帯域削減方法を選択してMPEGパケットを廃棄する。
【0066】
受信端末要求処理部24は、通信回線インタフェース21を介して、MPEG受信端末3からの削減方法指示パケットを受け取ると、当該パケットに含まれる削減処理対象の送信元(MPEG送信端末1A又は1B)及び削減方法の情報を取り出し、送信元に削減方法を関連づけて削減制御テーブル25に書き込む。
【0067】
本実施の形態による動画像伝送システムは、MPEG受信端末3から送信元及び削減方法の情報を含む削減方法指示パケットを送信し、動画像伝送装置2Bが、送信端末1A,1BごとにMPEG動画像の伝送帯域削減の方法を選択している。このため、送信先であるMPEG受信端末3からフレーム画像の品質を制御することができ、受信側で必要とされるフレーム画像の品質に応じて、動画像伝送装置2Bにおける削減処理を制御し、伝送帯域幅を調整することができる。
【0068】
例えば、MPEG受信端末3において、2以上の動画像を受信している場合に、特定の動画像について高品質のフレーム画像が必要になれば、他の動画像の伝送帯域を削減することにより、トータルの伝送帯域を一定にしたままで、上記特定の動画像の伝送帯域を拡大させることができる。
【0069】
実施の形態4.
図13は、本発明の実施の形態4による動画像伝送システムの構成及び動作の一例を示した概略図である。この動画像伝送システムは、負荷状況監視装置7を有して構成され、動画像伝送装置2Cは、通信ネットワークNWの負荷状況に応じて伝送帯域の削減方法を選択する。
【0070】
負荷状況検出装置7は、通信ネットワークNWの負荷状況、特に狭帯域の伝送路である第2の伝送路42の負荷状況を検出し、検出された負荷状況を動画像伝送装置2Cへ通知する。負荷状況は、通信ネットワークNWのトラフィックを監視することにより検出することができる。また、その他の方法、例えば、通信ネットワークNWに接続されたMPEG送信端末1の数に基づいて負荷状況を判別してもよい。
【0071】
図14は、図13の動画像伝送装置2Cの要部の一構成例を示したブロック図である。図中のMPEG帯域削減制御部22は、パケット削減制御部23、受信端末要求処理部24、削減制御テーブル25及び負荷状況対応処理部26により構成される。図12の動画像伝送装置2B(実施の形態3)と比較すれば、負荷状況対応処理部26を有する点で異なる。
【0072】
負荷状況対応処理部26は、負荷状況検出装置7からの負荷状況通知を受信すると、負荷状況に応じて削減制御テーブル25を更新する。すなわち、通信ネットワークNWの負荷が重くなれば、より多くの送信端末1についてMPEGパケットの削減処理を行い、あるいは、伝送帯域の削減率がより高い削減処理を行うように削減制御テーブル25を更新する。負荷が軽く成った場合には、逆の更新処理を行う。
【0073】
本実施の形態による動画像伝送システムは、負荷状況検出装置7が、通信ネットワークNWの負荷を検出し、動画像伝送装置2Cが、負荷状況検出装置7からの負荷状況通知に基づいて、MPEG動画像の伝送帯域削減の方法を選択している。このため、通信ネットワークNWの負荷状況に応じてフレーム画像の品質を制御することができる。
【0074】
なお、負荷状況検出装置7は、動画像伝送装置2Cの負荷状況対応処理部26に対して負荷状況を通知することができる装置であればよく、通信ネットワークNW外の装置であってもよいし、通信ネットワークNW内の装置であってもよい。また、動画像伝送装置2C内に設けられていてもよい。
【0075】
実施の形態5.
図15は、本発明の実施の形態5による動画像伝送システムの構成及び動作の一例を示した概略図である。動画像伝送装置2Dは、MPEG受信端末3からMPEG送信端末1へ送信される受信状況報告パケットを中継する際、受信状況報告パケットを変更し、MPEG送信端末1から送信されるフレーム画像の品質低下を抑制している。また、通信ネットワークNW内での輻輳の発生を検出し、ネットワーク管理センター8へ通知する。
【0076】
上述した通り、MPEG受信端末3は、正常受信できなかったパケットの数(パケット欠落数)を受信パケット中のRTPヘッダに基づいて求め、パケット欠落数を含む受信状況報告パケット(RTCPパケット)をMPEG送信端末1へ定期的に送信している。
【0077】
パケット欠落数が多い場合、通常は、通信ネットワークNW内部で輻輳が生じていると考えられる。このため、MPEG送信端末1は、受信状況報告パケットに含まれるパケット欠落数が多くなった場合、あるいは、所定の期間、受信状況報告パケットを受信できなかった場合には、その後の送信帯域幅を低減させる。
【0078】
ここで、MPEG送信端末1のフレーム伝送レートは一定であることから、送信帯域幅を低減するには、MPEGエンコーダ10での符号化パラメータを変更して、フレーム画像の品質を低下させる必要がある。つまり、MPEG送信端末1において送信帯域幅を低減すれば、フレーム画像の品質が低下する。
【0079】
このため、動画像伝送装置2Dは、MPEG受信端末3からの受信状況報告パケット内のパケット欠落数を変更してMPEG送信端末1へ送出する。この様にして、動画像伝送装置2Dにおけるパケットの廃棄をMPEG送信端末1に対して隠蔽し、MPEGパケットの受信状況が実際以上に良好であるように見せかけることにより、パケットの廃棄に基づきMPEG送信端末1の送信画質が低下するのを防止している。
【0080】
図16は、図15の動画像伝送装置2Dの要部の一構成例を示したブロック図である。図中のMPEG帯域削減制御部22は、パケット削減制御部23、受信端末要求処理部24、削減制御テーブル25、負荷状況対応処理部26及び受信状況報告パケット制御部27により構成される。図14の動画像伝送装置2C(実施の形態4)と比較すれば、受信状況報告パケット制御部27を有する点で異なる。
【0081】
受信状況報告パケット制御部27は、通信回線インタフェース21を介してMPEG受信端末3から受信状況報告パケットを受け取る。この受信状況報告パケット内のパケット欠落数が読み出され、パケット削減制御部23において廃棄したパケット数だけパケット欠落数が減少するように変更される。すなわち、動画像伝送装置2Dで廃棄されたパケット数だけを除外する。なお、動画像伝送装置2Dにおいて廃棄されたパケット数は、削減制御テーブル25から削減方法を読み出して求めることができる。あるいは、パケット削減制御部23が廃棄したパケット数を保持している場合には、そのパケット数を利用してもよい。
【0082】
パケット欠落数がパケット廃棄数を越えている場合には、通信ネットワークNW内で輻輳が生じていると考えられる。このため、変更後のパケット欠落数が所定値(例えばゼロでもよい)を越えている場合、受信状況報告パケット制御部27は、ネットワーク管理センター8へ輻輳の発生を通知する。この通知を受け取ったネットワーク管理センター8は、例えば、通信ネットワークNWの帯域幅を増大させ、あるいは、各MPEG送信端末1ごとの伝導帯域幅を減少させる。
【0083】
本実施の形態による動画像伝送システムは、動画像伝送装置2Dが、MPEG受信端末3からMPEG送信端末1へ伝送される受信状況報告パケットのパケット欠落数を変更している。このため、動画像伝送装置2Dでのパケット廃棄に起因してMPEG送信端末1から送信される画像フレームの品質が低下するのを防止することができる。
【0084】
実施の形態6.
図17は、本発明の実施の形態6による動画像伝送システムの構成及び動作の一例を示した概略図である。動画像伝送装置2Eは、本来、MPEG受信端末3によって生成される受信状況報告パケットを自ら生成し、MPEG送信端末1へ送出し、MPEG送信端末1から送信されるフレーム画像の品質低下を抑制している。
【0085】
動画像伝送装置2Eの詳細構成は、図16に示された動画像伝送装置2Dと同様である。MPEG受信端末3は定期的に受信状況報告パケット(RTCPパケット)を送信しているが、通信ネットワークNW内部での輻輳や伝送誤りなどに起因して、予め定められた一定時間が経過しても動画像伝送装置2Eに受信状況報告パケットが到着しない場合がある。この場合、MPEG送信端末1は、フレーム画像の品質を低下させることになる。
【0086】
このため、受信状況報告パケット制御部27は、所定時間が経過しても受信状況報告パケットが到着しない場合には、受信状況報告パケットを自ら生成し、通信回線インタフェース20を介してMPEG送信端末1へ送信する。なお、動画像伝送装置2Eは、MPEGパケットの中継時に、受信状況報告パケットの生成に必要な情報、例えばRTPヘッダ内の情報を記憶保持しており、当該情報に基づいて受信状況報告パケットを生成している。
【0087】
本実施の形態による動画像伝送システムは、動画像伝送装置2Eが、受信状況報告パケットを生成し、MPEG送信端末1へ送出している。このため、MPEG受信端末3からMPEG送信端末1へ受信状況報告パケットが正常に送信されなかった場合にも、MPEGパケットの受信状況が実際以上に良好であるように見せかけることができ、MPEG送信端末1からの送信画質が低下するのを防止できる。
【0088】
実施の形態7.
本実施の形態では、上記実施の形態1〜6の動画像伝送システムを救急医療用の動画像伝送システムに適用する場合の例について説明する。
【0089】
図18は、救急医療用の動画像伝送システムの概略構成を示した図である。複数台の救急車61と、複数の病院65とが衛星通信回線及び地上ネットワーク64を介して接続されている。救急車61内にはMPEG送信端末(不図示)が設置され、病院65内にはMPEG受信端末(不図示)が設置されており、救急搬送時には、患者の様子や診断機器による診断結果が動画像データとして救急車61から病院65へ送信される。
【0090】
衛星通信回線及び地上ネットワーク64間の中継は、地上に設置されたフィーダー局63によって行われている。すなわち、移動体としての救急車61は、通信衛星62を介してフィーダー局63と通信している。通信衛星62は、救急車61において大きなアンテナ仰角を確保可能な準天頂衛星であり、概ね日本全国をカバーすることができる。
【0091】
図19は、図18の救急車61についてその要部の一構成例を示した図である。救急車61には、アンテナ71、衛星回線制御装置72、動画像伝送装置73、MPEG送信端末74及びカメラ75が設置されている。
【0092】
MPEG送信端末74は、100Base−TXなどのLANケーブルを介して、動画像伝送装置73に接続され、動画像伝送装置73との間でIPパケットを送受信している。また、動画像伝送装置73は、衛星回線制御装置72に接続され、衛星回線制御装置72は、アンテナ71を介して通信衛星との間でRF信号の送受信を行っている。
【0093】
カメラ75は、MPEG送信端末74に接続され、カメラ75で撮影された患者の様子は動画像データとしてMPEG送信端末74へ出力される。MPEG送信端末74は、この動画像データをMPEG標準規格(例えばMPEG2)により符号化して動画像伝送装置73へ出力する。
【0094】
動画像伝送装置73は、実施の形態1〜6における動画像伝送装置2〜2Eに相当する装置であり、MPEG送信端末74から受信したデータパケットに対し間引き処理を行って衛星回線制御装置72へ出力している。すなわち、帯域削減後の動画像データがアンテナ71から通信衛星62へ送出される。
【0095】
通信衛星62は、広いエリアをカバーすることができるが、同時に稼働している救急車61が増加すれば、各救急車61に割り当てることができる帯域幅は狭くなる。このため、MPEG送信端末74、衛星回線制御装置72間に動画像伝送装置73を介在させている。
【0096】
すなわち、動画像伝送装置73を各救急車61に割り当てられた衛星通信回線の伝送帯域幅よりも帯域幅の広い伝送路を介してMPEG送信端末74に接続し、動画像伝送装置73においてフレーム伝送レートを低下させている。このため、割り当てられた衛星通信回線の帯域幅が狭い場合でも、フレーム画像の品質を低下させることなく、動画像データを伝送することができる。
【0097】
一般に、救急搬送中の患者について遠隔診断を行う際には、色や形状の情報が重要になる場合が多く、動画像を伝送する際は、動きの滑らかさよりも画質を優先して伝送する必要がある。このため、利用可能な衛星通信回線の帯域幅に応じて、動画像伝送装置73がフレーム伝送レートを低下させれば、医師による遠隔診断が可能となる。
【0098】
図20は、図18の救急車61についてその要部の他の構成例を示した図である。動画像伝送装置73には、LANケーブルを介して複数のMPEG送信端末74が接続され、各MPEG送信端末74から動画像伝送装置73へ動画像データが出力され、衛星通信回線を介して病院65のMPEG受信端末へ送信される。
【0099】
ここでは、3台のMPEG送信端末74が接続されている。このうちの1台は超音波診断装置等の診断装置76に接続され、他の2台はカメラ75に接続されている。カメラ75からは、カラー動画像が出力され、診断装置76からは超音波エコー画像(モノクロ動画像)が出力される。医師は、これらの動画像を見ながら診断を行う。
【0100】
利用可能な衛星通信回線の帯域幅が狭い場合、一部の動画像についてフレーム伝送レートを低下させる必要が生ずると考えられる。この様な場合、どの動画像について、どのパケット削減方法を採用するのかを医師が判断し、削減制御指定パケットとしてMPEG受信端末から送信することにより、全体としての帯域幅を抑制することができる。すなわち、各動画像の重要性に応じて、パケット削減の有無又は削減率を異ならせて、割り当てられた帯域幅を有効活用することができ、その判断が受信側にいる医師によって行われる。
【0101】
【発明の効果】
本発明による動画像伝送システムは、動画像送信端末が、各フレームデータを1又は2以上のデータパケットとして送信し、動画像伝送装置が受信パケット内の属性データに基づいて、データパケットを廃棄し、パケット数を削減して動画像受信端末へ送信する。このため、フレーム画像の品質を低下させることなく、あるいは品質の低下を抑制しつつ、伝送帯域幅を低減することができる。また、一定のフレームレートで動画像データを送信する動画像送信端末を用いることができる。従って、伝送帯域幅の狭い伝送路を介して高品質のフレーム画像を伝送する動画像伝送システムを安価に提供することができる。また、この様な動画像伝送システムに適用可能な動画像伝送装置を提供することができる。
【0102】
また、本発明による動画像伝送システムは、動画像受信端末が動画像伝送装置へパケット削減指示を送信し、動画像伝送装置が、動画像受信端末からのパケット削減指示に基づいて、動画像送信端末からのデータパケットを廃棄する。従って、動画像伝送装置におけるパケットの廃棄を動画像受信端末から制御することができる。
【0103】
また、本発明による動画像伝送システムは、負荷状況検出装置が、動画像送信端末及び動画像伝送装置を接続する第2の伝送路の負荷状況を検出し、負荷状況通知パケットを動画像伝送装置へ送信する。動画像伝送装置は、負荷状況通知パケットに基づいて、動画像送信端末からのデータパケットを廃棄する。従って、第2の伝送路の負荷状況に応じてパケットを廃棄し、動画像データの伝送帯域幅を低減することができる。
【0104】
また、本発明による動画像伝送システムは、動画像伝送装置が、動画像受信端末からの受信状況報告パケット内のパケット欠落数をデータパケットの廃棄数に基づいて変更する。従って、動画像伝送装置におけるパケットの廃棄により、動画像送信端末から送信されるフレーム画像の品質が低下するのを防止することができる。
【0105】
また、本発明による動画像伝送システムは、動画像伝送装置が、所定の期間、動画像受信端末からの受信状況報告パケットが到達しない場合に、受信状況報告パケットを生成する。従って、受信状況報告パケットが動画像送信端末に到達しないことにより、動画像送信端末から送信されるフレーム画像の品質が低下するのを防止することができる。
【図面の簡単な説明】
【図1】本発明の実施の形態1による動画像伝送システムの構成及び動作の一例を示した概略図である。
【図2】図1の各装置の一構成例を示したブロック図である。
【図3】MPEGデータの一例を示した概念図であり、多数のMPEGピクチャーが時間軸(横方向)上に撮像順で並べられている。
【図4】MPEG送信端末1からMPEG受信端末3へ伝送されるデータパケットの一構成例を示した図である。
【図5】ピクチャーグループGOPごとにパケットを廃棄する場合の例が示されている。
【図6】動き補償が行われているピクチャーのみを廃棄する場合の例が示されている。
【図7】双方向の動き補償が行われているピクチャーのみを廃棄する場合の例が示されている。
【図8】本発明の実施の形態2による動画像伝送システムの構成及び動作の一例を示した概略図である
【図9】図8の動画像伝送装置2Aの要部の一例を示したブロック図である。
【図10】本発明の実施の形態3による動画像伝送システムの構成及び動作の一例を示した概略図である。
【図11】図10の動画像伝送システムの他の動作状態の例を示した図である。
【図12】図10及び図11の動画像伝送装置2Bの要部の一例を示したブロック図である。
【図13】本発明の実施の形態4による動画像伝送システムの構成及び動作の一例を示した概略図である。
【図14】図13の動画像伝送装置2Cの要部の一構成例を示したブロック図である。
【図15】本発明の実施の形態5による動画像伝送システムの構成及び動作の一例を示した概略図である。
【図16】図15の動画像伝送装置2Dの要部の一構成例を示したブロック図である。
【図17】本発明の実施の形態6による動画像伝送システムの構成及び動作の一例を示した概略図である。
【図18】救急医療用の動画像伝送システムの概略構成を示した図である。
【図19】図18の救急車61についてその要部の一構成例を示した図である。
【図20】図18の救急車61についてその要部の他の構成例を示した図である。
【符号の説明】
1,1A,1B 動画像送信端末、2,2A〜2E 動画像伝送装置、
3 動画像受信端末、5 データパケット、6 ディスプレイ装置、
7 負荷状況検出装置、8 ネットワーク管理センター、
41 第1の伝送路、42 第2の伝送路、
20 第1の通信回線インタフェース、21 第2の通信回線インタフェース、
22 MPEG削減制御部、23 パケット削減制御部、
24 受信端末要求処理部、25 削減制御テーブル、
26 負荷状況対応処理部、27 受信状況報告パケット制御部、
61 救急車、62 通信衛星、63 フィーダー局、
64 地上ネットワーク、65 病院、71 アンテナ、
72 衛星回線制御装置、73 動画像伝送装置、74 動画像送信端末
75 カメラ、76 診断装置、NW 通信ネットワーク
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a video transmission system, an emergency medical transmission system, and a video transmission device, and more particularly, to an improvement of a video transmission system for transmitting high-quality frame images using a narrow-band transmission path. About.
[0002]
[Prior art]
In the field of telemedicine, a system for transmitting the state of a patient from an ambulance during emergency transport to a doctor at a remote location by mobile communication via an artificial satellite has been studied (see Non-Patent Document 1). When a rescue worker performs treatment or treatment in an ambulance, if a doctor in the hospital can grasp the condition of the patient via a data communication line, the rescue worker can give an appropriate instruction. In order to realize such telemedicine, a high-speed data communication line capable of transmitting high-quality moving images is required.
[0003]
The communication satellites used in conventional mobile communications are geostationary satellites on the equator and low-orbiting orbiting satellites.Each of them has a small antenna elevation angle, so shadowing, which causes buildings and trees, etc. to interfere with communication, is difficult. It is easy to occur and is not suitable for communication means during emergency transport. For this reason, moving image transmission using an artificial satellite (quasi-zenith satellite) passing through the quasi-zenith has been proposed. The quasi-zenith satellite is a satellite orbiting a long elliptical orbit (such as a so-called eight-shaped satellite) having a higher altitude than a geostationary satellite, and has a feature that a large antenna elevation angle can be secured and shadowing hardly occurs.
[0004]
According to Non-Patent Document 1, it is reported that a bandwidth of 6 Mbps is required for each ambulance, and at least 50 ambulances need to be active at the same time nationwide. Therefore, in the case of the quasi-zenith satellite (eight-shaped satellite), a line capacity of 6 Mbps / unit × 50 units = 300 Mbps is required. However, the line capacity of 300 Mbps imposes an excessive burden on the line design of the quasi-zenith satellite, and it is necessary to reduce the necessary line capacity as much as possible.
[0005]
As a conventional technique for reducing the transmission bandwidth of a moving image, there is a method of reducing the information amount of a moving image by reducing the quality of each frame image constituting a moving image in MPEG2. Generally, a moving image is composed of a series of image frames sampled at a frame period, and by reducing the data amount of each frame, the data amount of the moving image can be reduced.
[0006]
As another conventional technique, there is a method disclosed in Patent Document 1. The technique described in Patent Literature 1 uses a wavelet transform as a moving image encoding method. By performing wavelet transform at the transmitting terminal, when performing wavelet decoding at the receiving terminal, a moving image can be decoded at the stage when a predetermined signal is received, without receiving all the signals necessary for decoding. For this reason, the transmission bandwidth of a moving image can be reduced.
[0007]
If these techniques are applied, video data can be transmitted according to the bandwidth of the transmission path between the video transmission terminal and the video reception terminal. That is, the bandwidth transmitted from the moving image transmitting terminal can be reduced, and the line capacity required for transmitting the moving image can be reduced.
[0008]
However, the conventional methods according to MPEG2 and Patent Document 1 have a problem that the quality of each frame image constituting a moving image is deteriorated in any case. For this reason, these conventional techniques are not suitable for the field where high quality is required for the frame image. In particular, when applied to the medical field and a doctor wants to observe the state of a patient with a transmitted moving image, it is necessary to closely observe the facial expression of the patient. There was a problem that the bandwidth could not be reduced.
[0009]
Here, when transmitting a moving image as a series of image frames, it is conceivable to reduce the data amount of the moving image by lowering the frame rate instead of deteriorating the quality of each frame image. That is, this is a method of reducing the number of frames instead of reducing the data amount of each frame. In particular, when applied to the medical field, moving images that convey patient facial expressions etc. have less movement than general moving images, so it is necessary to reduce the frame transfer rate without deteriorating the quality of each frame image. It is desirable to reduce the transmission bandwidth.
[0010]
However, according to the MPEG2 standard, which is already widely used in the general market as a moving image encoder, the frame rate must always be about 30 frames per second, and transmission control for reducing the frame rate is required. Is not allowed. Although it is possible in principle to employ an encoder capable of controlling the frame rate, it is preferable from the viewpoint of the manufacturing cost to introduce a unique encoder that is contrary to the MPEG2 standard into the moving picture transmitting terminal. It can not be said.
[0011]
As another plan, it is conceivable to carry out a standard change activity in order to newly incorporate frame rate reduction control into the MPEG2 standard. However, a standard such as MPEG2, which is already widely used, has been standardized. It may not be easy for the institution to agree on a standard change.
[0012]
[Patent Document 1]
JP-A-7-15609
[Non-patent document 1]
Isao Nakajima and 4 others, "Emergency medical application for oval and figure-8 satellites <number and bandwidth of video transmission lines required from ambulance>", Technical Research Report SANE2000-178 SAT2000-127, Electronic Information Association Communication Society, February 2001, p. 17-24
[0013]
[Problems to be solved by the invention]
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a moving image transmission system that transmits a high-quality frame image via a transmission path with a narrow transmission bandwidth at a low cost.
[0014]
Further, using a moving image transmitting terminal that transmits a moving image having a predetermined frame rate, reducing the transmission bandwidth of a transmission path without deteriorating the quality of a frame image transmitted to the moving image receiving terminal. It is an object of the present invention to provide a moving image transmission system that can perform the following. It is another object of the present invention to provide a moving image transmission system capable of controlling the bandwidth of a transmission path from a moving image receiving terminal.
[0015]
Also, the present invention provides a video transmission system that prevents a video transmission terminal from deteriorating the quality of a frame image based on a reception status report packet related to video data or based on a failure to receive a reception status report packet. The purpose is to do.
[0016]
Still another object of the present invention is to provide a moving image transmission device applicable to these moving image transmission systems, and an emergency medical transmission system to which these moving image transmission systems are applied.
[0017]
[Means for Solving the Problems]
A moving image transmission system according to the present invention includes a moving image transmitting terminal that transmits moving image data, a moving image receiving terminal that receives moving image data, and transmission of moving image data from the moving image transmitting terminal to the moving image receiving terminal. It is configured by a moving image transmission device that performs the operation. The moving image data transmitted from the moving image transmitting terminal includes a series of image frames generated at a predetermined frame rate, and each frame data is transmitted as one or two or more data packets. The moving image transmission device discards the data packet based on the attribute data in the data packet received from the moving image transmitting terminal, and reduces the number of packets. The moving image receiving terminal receives, from the moving image transmitting apparatus, a data packet in which the number of packets has been reduced. It should be noted that the frame includes a field in the interlaced moving image.
[0018]
With such a configuration, even when transmitting moving image data using a moving image transmission terminal that transmits moving image data at a fixed frame rate, it is possible to reduce the transmission bandwidth without deteriorating the quality of the frame image. it can. Therefore, high-quality moving image data can be transmitted to a moving image receiving terminal via a transmission path with a narrow transmission bandwidth.
[0019]
Also, in the moving image transmission system according to the present invention, the moving image receiving terminal transmits a packet reduction instruction to the moving image transmission device, and the moving image transmission device transmits the moving image based on the packet reduction instruction from the moving image receiving terminal. Discard the data packet from the terminal. With such a configuration, discarding of a packet in the moving picture transmission apparatus can be controlled from the moving picture receiving terminal.
[0020]
In addition, the moving image transmission system according to the present invention detects a load state of a second transmission path connecting the moving image receiving terminal and the moving image transmission device, and detects a load condition for transmitting a load condition notification packet to the moving image transmission device. An apparatus is provided, wherein the moving image transmitting apparatus is configured to discard a data packet from the moving image transmitting terminal based on the load status notification packet. With such a configuration, packets can be discarded according to the load status of the second transmission path, and the transmission bandwidth of moving image data can be reduced.
[0021]
Also, in the moving image transmission system according to the present invention, the moving image receiving terminal generates a reception status report packet including the number of missing packets and transmits the generated reception status report packet to the video transmission device. The number of dropped packets is changed based on the number of discarded data packets, and the changed reception status report packet is transmitted to the moving picture transmitting terminal. With such a configuration, it is possible to prevent the quality of the frame image transmitted from the moving image transmitting terminal from being deteriorated due to the discarding of the packet in the moving image transmitting apparatus.
[0022]
Also, in the moving image transmission system according to the present invention, the moving image receiving terminal generates a reception status report packet including the number of packet drops every predetermined period and transmits it to the moving image transmission device. If the reception status report packet from the video receiving terminal does not arrive during the period, the reception status report packet is generated and transmitted to the video transmission terminal. With such a configuration, it is possible to prevent the quality of the frame image transmitted from the moving image transmitting terminal from being deteriorated due to the reception status report packet not being received.
[0023]
The emergency medical transmission system according to the present invention is a system for transmitting moving image data from a moving image transmitting terminal installed in a vehicle to a moving image receiving terminal installed in a medical institution via a communication satellite, A moving image transmitting terminal transmits each frame data as one or more data packets for moving image data composed of a series of image frames generated at a predetermined frame rate. Further, in the vehicle, a moving image transmitting apparatus for discarding data packets based on attribute data in the data packets received from the moving image transmitting terminal and reducing the number of packets, and data from the moving image transmitting apparatus. A satellite line controller for wirelessly transmitting packets to communication satellites.
[0024]
With such a configuration, the moving image transmission apparatus installed in the vehicle discards the packets and reduces the number of packets, thereby transmitting the moving image data at a constant frame rate without deteriorating the quality of the frame image. An emergency medical transmission system can be realized by using a moving image transmission terminal. In addition, the limited line capacity of the satellite communication line can be effectively used.
[0025]
Further, a moving image transmission apparatus according to the present invention is an apparatus for receiving moving image data generated at a predetermined frame rate from a moving image transmitting terminal and transmitting the moving image data to the moving image receiving terminal. , A packet reduction control unit, and a second communication line interface. The first communication line interface receives each frame data from the moving image transmitting terminal as one or more data packets. The packet reduction control unit discards the data packet based on the attribute data in the data packet received from the moving image transmitting terminal, and reduces the number of packets. The second communication line interface transmits the data packet after reducing the number of packets to the moving image receiving terminal.
[0026]
Also, in the moving image transmission device according to the present invention, the packet reduction control unit discards the data packet for each image frame or for a grouped image frame based on the attribute data in the received packet, and reduces the frame transmission rate. Reduce.
[0027]
For example, in the case of moving image data including first frame data that can be decoded independently and second frame data that is decoded together with other frame data, the second frame that is decoded together with the other frame data Discard the data. First frame data that can be decoded independently, second frame data that is decoded together with other frame data that exists in one direction on the time axis, and two or more other frame data that exist in both directions on the time axis. In the case of moving image data including the third frame data decoded together with the frame data, the third frame data is discarded.
[0028]
Also, the moving picture transmission apparatus according to the present invention includes a reduction control table that stores the packet reduction method in association with the moving picture transmission terminal, and the packet reduction control unit performs, for each of the moving picture transmission terminals, based on the reduction control table. Discard the data packet by the specified packet reduction method. With such a configuration, when transmitting moving image data from two or more moving image transmitting terminals, designation can be made for each moving image transmitting terminal.
[0029]
BEST MODE FOR CARRYING OUT THE INVENTION
Embodiment 1 FIG.
FIG. 1 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to Embodiment 1 of the present invention. The MPEG transmitting terminal 1 and the MPEG receiving terminal 3 are connected via a communication network NW, and packetized moving image data is transmitted from the MPEG transmitting terminal 1 to the MPEG receiving terminal 3.
[0030]
The communication network NW includes a first transmission path 41, a second transmission path 42, and the moving image transmission device 2. The moving image transmission device 2 is connected to the MPEG transmission terminal 1 via the first transmission line 41, and is connected to the MPEG reception terminal 3 via the second transmission line 42, and receives an MPEG signal from the MPEG transmission terminal 1. It relays data transmission to the terminal 3.
[0031]
The transmission bandwidth of the MPEG moving picture by the second transmission path 42 is narrower than the transmission bandwidth of the MPEG moving picture by the first transmission path 41, and the moving picture transmission apparatus 2 thins out the moving picture data packets. That is, the moving image transmission apparatus 2 discards some of the packets received from the second transmission path 42 and sends out the remaining packets to the second transmission path 42 without being discarded.
[0032]
Packet thinning is performed for each image frame (including for each set of image frames) based on the attribute data of the received packet, and the moving image transmission device 2 reduces the frame transmission rate. That is, the MPEG moving image is transmitted from the MPEG transmitting terminal 1 at a high frame transmission rate, while the MPEG receiving terminal 3 can receive the MPEG moving image at a lower frame transmission rate.
[0033]
FIG. 2 is a block diagram showing one configuration example of each device of FIG. The MPEG transmission terminal 1 includes an MPEG encoder 10 and a packet transmission unit 11, and moving image data input from an imaging device or the like is encoded by the MPEG encoder 10 and converted into an MPEG-TS (Transport Stream). The packet transmitting unit 11 encapsulates the MPEG-TS into an IP packet and sends it out to the first transmission path 41.
[0034]
The MPEG receiving terminal 3 includes a packet receiving unit 30 and an MPEG decoder (decoder) 31. The IP packet received from the second transmission path 42 is expanded by the packet receiving unit 30 into an MPEG-TS. The MPEG decoder 31 decodes the MPEG-TS and outputs moving image data to a video display device or the like.
[0035]
FIG. 3 is a conceptual diagram showing an example of MPEG data, in which a large number of MPEG pictures are arranged in the imaging order on a time axis (horizontal direction). Generally, a moving image is divided into image frames composed of still images sampled at a predetermined frame rate (30 frames per second), and moving image data is formed by a series of image frames. An MPEG frame image is called a picture, and there are three types of I-pictures (Intra-coded pictures), P-pictures (Predictive-coded pictures), and B-pictures (Bidirectionally predictive-coded pictures) depending on the difference in encoding processing. is there.
[0036]
An I picture is a picture whose data amount has been reduced by encoding processing within a frame, and is encoded based on only an image frame to be encoded. Usually, a coefficient obtained by two-dimensional DCT (Discrete Cosine Transformation) is quantized and then entropy-coded to generate the coefficient.
[0037]
The P picture and the B picture are pictures whose data amount has been reduced by encoding processing between image frames, and are encoded by motion compensation using other image frames. In the case of a P picture, encoding is performed by performing forward prediction using only one-way (past) image frames on the time axis, and in the case of a B picture, bidirectional (past and future) pictures on the time axis are used. Encoding is performed by performing forward and backward prediction using an image frame.
[0038]
In addition, a series of pictures is divided into picture groups (GOP: Group Of Pictures) that provide access points at random access. Each picture group is composed of a plurality of pictures of different picture types arranged based on a predetermined rule, and is accessed in units of a picture group at the time of random access.
[0039]
FIG. 4 is a diagram showing a configuration example of a data packet transmitted from the MPEG transmission terminal 1 to the MPEG reception terminal 3. The illustrated data packet 5 includes an IP header 50, a UDP header 51, an RTP header 52, and an RTP payload 53. The RTP payload 53 includes an MPEG header 54 and MPEG content 55.
[0040]
This data packet employs IP (Internet Protocol), UDP (User Datagram Protocol), and RTP (Real-time Transport Protocol) as communication protocols of a network layer, a transport layer, and an application layer, respectively. Further, the MPEG content 55 is encapsulated as an MPEG payload 53 with an MPEG header 54 added based on the IETF (Internet Engineering Task Force) standard RFC2250 (RTP Payload Format for MPEG1 / MPEG2 Video).
[0041]
UDP / IP is a simple communication protocol that does not consider transmission packet loss or delay fluctuation on a transmission path. Since retransmission processing is not performed even when a packet is lost, high-speed data transmission is possible, and it is widely used for transmitting moving image data that requires real-time processing. The IP header 50 stores the source and destination IP addresses and the like. The UDP header 51 stores the source and destination port numbers and the like.
[0042]
A time stamp and a sequence number are stored in the RTP header 52, and the MPEG receiving terminal 3 can detect a delay time and a packet loss on a transmission path based on the RTP header. These reception states are periodically transmitted from the MPEG receiving terminal 3 to the MPEG transmitting terminal 1 using RTCP (RTP Control Protocol), and are fed back.
[0043]
The RTP header 52 stores a 1-bit marker indicating the end of a picture group (GOP). Therefore, by analyzing the RTP header 52, the MPEG receiving terminal 3 can determine whether or not it is the last packet of each GOP based on the marker.
[0044]
The MPEG content 55 is composed of one or more MPEG-TS (Transport Stream) packets. MPEG-TS is 188-byte packet data generated from an MPEG picture. The MPEG header 54 stores a picture type of an MPEG picture included in the MPEG content 55. Therefore, the MPEG receiving terminal 3 can determine the picture type by analyzing the MPEG header 54.
[0045]
Next, the operation of the moving image transmission device 2 will be described. When receiving the IP packet from the MPEG transmission terminal 1, the moving image transmission device 2 analyzes the attribute information of the MPEG moving image data included in the IP packet, and determines whether to discard the IP packet. The discard decision is made for each picture group (GOP) or picture, and discarded for each IP packet. As a result, the remaining IP packets that have not been discarded are sent to the MPEG receiving terminal 3.
[0046]
5 to 7 are conceptual diagrams illustrating an example of a bandwidth reduction method by the moving image transmission device 2. FIG. 5 shows an example in which a packet is discarded for each picture group GOP. The moving picture transmission device 2 determines the last packet of the picture group based on the RTP header 52 in the received IP packet. Based on this determination result, the IP packet is discarded or relayed for each picture group. By discarding M picture groups for every N picture groups in this way, the transmission bandwidth can be reduced to (N−M) / N. For example, if discarding and relaying are alternately performed for each picture group, the transmission bandwidth can be reduced to half.
[0047]
FIG. 6 shows an example in which only pictures for which motion compensation has been performed are discarded. The moving image transmission device 2 determines the picture type of the MPEG content 55 based on the MPEG header 54 in the received IP packet. Based on this determination result, the IP packet is discarded or relayed for each picture. The discarded pictures are pictures on which motion compensation is performed, that is, P pictures and B pictures, and I pictures are relayed.
[0048]
FIG. 7 shows an example in which only pictures for which bidirectional motion compensation is performed are discarded. As in the case of FIG. 6, the moving image transmission apparatus 2 discards or relays the IP packet for each picture based on the result of the picture type determination. At this time, only B pictures for which forward prediction and backward prediction have been performed are discarded, and I pictures and P pictures are relayed.
[0049]
It is desirable that the transmission bandwidth reduction method be arbitrarily selectable from a plurality of reduction methods according to the type of content, the bandwidth, and the status of the transmission path. Also, these bandwidth reduction methods can be used in an appropriate combination. For example, only P packets and B packets in a predetermined picture group can be discarded. Furthermore, these bandwidth reduction methods are examples, and other methods for thinning out packets based on attribute data in a received packet can be adopted.
[0050]
In the moving picture transmission system according to the present embodiment, a series of pictures forming an MPEG moving picture is packet-transmitted from the MPEG transmission terminal 1 to the moving picture transmission apparatus 2 via the first transmission path 41, and the moving picture transmission apparatus Part of the packet received in 2 is discarded. At this time, a picture group and a picture type are determined based on the attribute data included in the received packet, and the received packet is discarded for each picture group or picture. Then, only the remaining packets without being discarded are transmitted to the MPEG receiving terminal 3 via the second transmission path 42.
[0051]
That is, the moving image transmitting apparatus 2 transmits the moving image data to the MPEG receiving terminal 3 by giving priority to the image quality of each image frame over the smoothness of the motion. Therefore, even when the second transmission path 42 does not have a sufficient bandwidth, a moving image with high image quality for each frame can be transmitted.
[0052]
In particular, when the bandwidth of the second transmission path 41 is smaller than the bandwidth of the first transmission path, the moving image data is transmitted from the MPEG transmission terminal 1 at a high transmission rate, while the moving image data is transmitted by the moving image transmission apparatus 2. By reducing the rate, the MPEG receiving terminal 3 can receive high-quality picture data.
[0053]
In addition, the moving image transmission system does not need to use the special MPEG transmission terminal 1, and can be realized at low cost. That is, in the MPEG transmission terminal 1, the moving image transmission device connected to the MPEG transmission terminal 1 via the broadband first transmission path 41 is used instead of reducing the frame transmission rate to improve the quality of each frame image. By reducing the frame transmission rate in 2, the system can be constructed at low cost.
[0054]
Embodiment 2 FIG.
FIG. 8 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to Embodiment 2 of the present invention. The moving image transmission apparatus 2A is an apparatus capable of selecting an arbitrary band reduction method from a plurality of band reduction methods and reducing the transmission bandwidth of the MPEG moving image data by the selected reduction method. The MPEG receiving terminal 3 instructs the moving image transmission device 2A on the reduction method, and the moving image transmission device 2A selects the reduction method based on this instruction.
[0055]
FIG. 9 is a block diagram showing an example of a main part of the moving image transmission device 2A of FIG. The moving image transmission device 2A includes communication line interfaces 20 and 21, and an MPEG band reduction control unit 22. The communication line interfaces 20 and 21 control connection to the communication network NW. That is, the communication line interface 20 controls the connection with the MPEG transmission terminal 1 via the first transmission line 41, and the communication line interface 21 controls the connection with the MPEG reception terminal 3 via the second transmission line 42. Is going.
[0056]
The MPEG band reduction control unit 22 includes a packet reduction control unit 23 and a receiving terminal request processing unit 24. Receiving the reduction method instruction packet from the MPEG receiving terminal 3 via the communication line interface 21, the receiving terminal request processing unit 24 extracts information on the reduction method included in the packet and outputs the information to the packet reduction control unit 52. .
[0057]
After that, the packet reduction processing by the packet reduction control unit 23 is performed by the reduction method specified by the MPEG receiving terminal 3. The reduction method specified by the reduction method specifying packet may be, for example, each of the reduction methods described in the first embodiment (FIGS. 5 to 7) or a reduction rate of the transmission bandwidth. However, a combination of these may be used.
[0058]
The moving image transmission system according to the present embodiment transmits a reduction method instruction packet from the MPEG receiving terminal 3 to the moving image transmission device 2, and the moving image transmission device 2 reduces the transmission band of the MPEG moving image based on the packet. You have chosen a method. Therefore, the quality of the frame image can be controlled from the MPEG receiving terminal 3 that is the transmission destination. That is, the reduction processing of the moving image transmission device 2 can be controlled according to the required quality of the frame image.
[0059]
Embodiment 3 FIG.
FIG. 10 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to Embodiment 3 of the present invention. In this moving image transmission system, two MPEG transmission terminals 1A and 1B and one MPEG reception terminal 3 are connected via a communication network NW, and each of the MPEG transmission terminals 1A and 1B is connected to the MPEG reception terminal 3. Packetized moving image data is transmitted.
[0060]
That is, the OLE_LINK1 MPEG transmission terminal OLE_LINK 11A and the MPEG transmission terminal 1B are connected to the moving image transmission device 2B via the first transmission line 41 of the wide band, and the MPEG is transmitted via the second transmission line 42 of the narrow band. The receiving terminal 3 is connected. Then, the moving image transmission device 2B relays the data packets transmitted from the MPEG transmission terminal 1A and the MPEG transmission terminal 1B to the MPEG reception terminal 3.
[0061]
The moving image transmission device 2B is a device capable of selecting a band reduction method for each of the MPEG transmission terminals 1A and 1B. The MPEG receiving terminal 3 instructs the moving image transmission device 2A on a reduction method (including a reduction rate) for each MPEG transmission terminal, and the moving image transmission device 2A selects a reduction method based on this instruction.
[0062]
A display device 6 is connected to the MPEG receiving terminal 3, and the moving images transmitted from the MPEG transmitting terminals 1A and 1B are displayed together. Since the MPEG receiving terminal 3 can instruct a band reduction method for each moving image, each image quality can be controlled as required on the receiving side. In FIG. 10, the moving image from the MPEG transmitting terminal 1A is transmitted and displayed without reducing the bandwidth, while the moving image from the MPEG transmitting terminal 1B is transmitted with the bandwidth reduced to 1/4 and displayed in low image quality. An example of such a case is shown.
[0063]
FIG. 11 is a diagram showing an example of another operation state of the moving image transmission system of FIG. Contrary to the case of FIG. 10, a case where a moving image from the MPEG transmission terminal 1B is displayed with high image quality is shown. The moving image transmitting apparatus from the MPEG receiving terminal 3 transmits the moving image from the MPEG transmitting terminal 1A so that the bandwidth is reduced to 1 /, and the moving image from the MPEG transmitting terminal 1B is transmitted without reducing the band. If the instruction is given to 2B, the moving image from the MPEG transmitting terminal 1A can be displayed with low image quality, and the moving image from the MPEG transmitting terminal 1B can be displayed with high image quality.
[0064]
FIG. 12 is a block diagram illustrating an example of a main part of the moving image transmission device 2B of FIGS. 10 and 11. The MPEG band reduction control unit 22 in the figure includes a packet reduction control unit 23, a receiving terminal request processing unit 24, and a reduction control table 25, and can be compared with the moving image transmission device 2A (the second embodiment) in FIG. , A reduction control table 25.
[0065]
The reduction control table 25 stores and holds the band reduction method for each of the MPEG transmission terminals 1A and 1B, and is updated by the reception terminal request processing unit 24. The packet reduction control unit 23 selects a band reduction method for each of the MPEG transmission terminals 1A and 1B, which are packet transmission sources, based on the reduction control table 25, and discards the MPEG packets.
[0066]
When receiving the reduction method instruction packet from the MPEG receiving terminal 3 via the communication line interface 21, the receiving terminal request processing unit 24 determines the transmission source (MPEG transmitting terminal 1 </ b> A or 1 </ b> B) to be reduced and included in the packet. The information of the reduction method is extracted, and the reduction method is associated with the transmission source and written in the reduction control table 25.
[0067]
In the moving image transmission system according to the present embodiment, a reduction method instruction packet including information on a transmission source and a reduction method is transmitted from an MPEG receiving terminal 3, and the moving image transmission apparatus 2B transmits an MPEG moving image to each of the transmitting terminals 1A and 1B. The method of reducing the transmission band is selected. For this reason, the quality of the frame image can be controlled from the MPEG receiving terminal 3 that is the transmission destination, and the reduction processing in the moving image transmission device 2B is controlled according to the quality of the frame image required on the receiving side. The transmission bandwidth can be adjusted.
[0068]
For example, when two or more moving images are received by the MPEG receiving terminal 3, if a high-quality frame image is required for a specific moving image, the transmission band of other moving images is reduced. The transmission band of the specific moving image can be expanded while keeping the total transmission band constant.
[0069]
Embodiment 4 FIG.
FIG. 13 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to Embodiment 4 of the present invention. This moving image transmission system includes a load condition monitoring device 7, and the moving image transmission device 2C selects a transmission band reduction method according to the load condition of the communication network NW.
[0070]
The load status detection device 7 detects the load status of the communication network NW, particularly the load status of the second transmission line 42 that is a narrow-band transmission line, and notifies the moving image transmission device 2C of the detected load status. The load situation can be detected by monitoring the traffic of the communication network NW. Further, the load status may be determined based on another method, for example, based on the number of the MPEG transmission terminals 1 connected to the communication network NW.
[0071]
FIG. 14 is a block diagram showing a configuration example of a main part of the moving image transmission device 2C in FIG. The MPEG band reduction control unit 22 in the figure is configured by a packet reduction control unit 23, a receiving terminal request processing unit 24, a reduction control table 25, and a load status handling unit 26. The difference from the moving image transmission apparatus 2B (Embodiment 3) of FIG.
[0072]
When receiving the load status notification from the load status detection device 7, the load status corresponding processing unit 26 updates the reduction control table 25 according to the load status. That is, if the load on the communication network NW becomes heavy, the reduction processing of the MPEG packets is performed for more transmission terminals 1 or the reduction control table 25 is updated so that the reduction rate of the transmission band is higher. . When the load is reduced, the reverse update process is performed.
[0073]
In the moving image transmission system according to the present embodiment, the load condition detecting device 7 detects the load on the communication network NW, and the moving image transmitting device 2C transmits the MPEG moving image based on the load condition notification from the load condition detecting device 7. An image transmission band reduction method is selected. Therefore, the quality of the frame image can be controlled according to the load status of the communication network NW.
[0074]
The load status detection device 7 may be any device that can notify the load status to the load status handling unit 26 of the video transmission device 2C, and may be a device outside the communication network NW. , A device in the communication network NW. Further, it may be provided in the moving image transmission device 2C.
[0075]
Embodiment 5 FIG.
FIG. 15 is a schematic diagram showing an example of the configuration and operation of the moving image transmission system according to Embodiment 5 of the present invention. When relaying the reception status report packet transmitted from the MPEG reception terminal 3 to the MPEG transmission terminal 1, the moving image transmission device 2D changes the reception status report packet to reduce the quality of the frame image transmitted from the MPEG transmission terminal 1. Has been suppressed. Further, it detects the occurrence of congestion in the communication network NW and notifies the network management center 8 of the occurrence.
[0076]
As described above, the MPEG receiving terminal 3 calculates the number of packets that could not be received normally (the number of missing packets) based on the RTP header in the received packets, and converts the reception status report packet (RTCP packet) including the number of missing packets into the MPEG. The data is periodically transmitted to the transmitting terminal 1.
[0077]
When the number of dropped packets is large, it is generally considered that congestion has occurred inside the communication network NW. For this reason, the MPEG transmission terminal 1 increases the subsequent transmission bandwidth when the number of missing packets included in the reception status report packet increases or when the reception status report packet cannot be received for a predetermined period. Reduce.
[0078]
Here, since the frame transmission rate of the MPEG transmission terminal 1 is constant, in order to reduce the transmission bandwidth, it is necessary to change the encoding parameters in the MPEG encoder 10 to lower the quality of the frame image. . That is, if the transmission bandwidth is reduced in the MPEG transmission terminal 1, the quality of the frame image is reduced.
[0079]
Therefore, the moving image transmission apparatus 2D changes the number of missing packets in the reception status report packet from the MPEG receiving terminal 3 and sends the packet to the MPEG transmitting terminal 1. In this manner, the discard of the packet in the moving picture transmission apparatus 2D is concealed from the MPEG transmission terminal 1, and the appearance of the received MPEG packet is made to be better than it actually is. The transmission image quality of the terminal 1 is prevented from deteriorating.
[0080]
FIG. 16 is a block diagram showing a configuration example of a main part of the moving image transmission device 2D of FIG. The MPEG band reduction control unit 22 in the figure is configured by a packet reduction control unit 23, a receiving terminal request processing unit 24, a reduction control table 25, a load status correspondence processing unit 26, and a reception status report packet control unit 27. The difference from the moving image transmission apparatus 2C (Embodiment 4) of FIG.
[0081]
The reception status report packet control unit 27 receives a reception status report packet from the MPEG receiving terminal 3 via the communication line interface 21. The number of missing packets in the reception status report packet is read out, and the packet reduction control unit 23 changes the number of missing packets to be reduced by the number of discarded packets. That is, only the number of packets discarded by the moving image transmission device 2D is excluded. Note that the number of packets discarded in the moving image transmission device 2D can be obtained by reading a reduction method from the reduction control table 25. Alternatively, when the packet reduction control unit 23 holds the number of discarded packets, the number of packets may be used.
[0082]
When the number of dropped packets exceeds the number of discarded packets, it is considered that congestion has occurred in the communication network NW. Therefore, when the number of dropped packets after the change exceeds a predetermined value (for example, may be zero), the reception status report packet control unit 27 notifies the network management center 8 of the occurrence of congestion. The network management center 8 that has received this notification increases, for example, the bandwidth of the communication network NW or decreases the conduction bandwidth of each MPEG transmission terminal 1.
[0083]
In the moving image transmission system according to the present embodiment, the moving image transmission device 2D changes the number of missing packets of the reception status report packet transmitted from the MPEG receiving terminal 3 to the MPEG transmitting terminal 1. For this reason, it is possible to prevent the quality of the image frame transmitted from the MPEG transmission terminal 1 from being deteriorated due to the packet discard in the moving image transmission device 2D.
[0084]
Embodiment 6 FIG.
FIG. 17 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to Embodiment 6 of the present invention. The moving image transmission apparatus 2E originally generates the reception status report packet generated by the MPEG receiving terminal 3 and sends it to the MPEG transmitting terminal 1 to suppress the deterioration of the quality of the frame image transmitted from the MPEG transmitting terminal 1. ing.
[0085]
The detailed configuration of the moving image transmission device 2E is the same as that of the moving image transmission device 2D shown in FIG. Although the MPEG receiving terminal 3 periodically transmits a reception status report packet (RTCP packet), even if a predetermined period of time elapses due to congestion or transmission errors in the communication network NW, In some cases, the reception status report packet does not arrive at the moving image transmission device 2E. In this case, the MPEG transmission terminal 1 degrades the quality of the frame image.
[0086]
Therefore, when the reception status report packet does not arrive even after the predetermined time has elapsed, the reception status report packet control unit 27 generates the reception status report packet by itself and transmits the received packet to the MPEG transmission terminal 1 via the communication line interface 20. Send to Note that the moving image transmission device 2E stores and holds information necessary for generating a reception status report packet, for example, information in an RTP header when relaying an MPEG packet, and generates a reception status report packet based on the information. are doing.
[0087]
In the moving image transmission system according to the present embodiment, the moving image transmission device 2E generates a reception status report packet and sends it to the MPEG transmission terminal 1. Therefore, even when the reception status report packet is not transmitted normally from the MPEG reception terminal 3 to the MPEG transmission terminal 1, it is possible to make it appear that the reception status of the MPEG packet is better than it actually is. 1 can be prevented from deteriorating the transmission image quality.
[0088]
Embodiment 7 FIG.
In the present embodiment, an example will be described in which the moving image transmission system of the first to sixth embodiments is applied to a moving image transmission system for emergency medicine.
[0089]
FIG. 18 is a diagram showing a schematic configuration of a moving image transmission system for emergency medicine. A plurality of ambulances 61 and a plurality of hospitals 65 are connected via a satellite communication line and a ground network 64. An MPEG transmitting terminal (not shown) is installed in the ambulance 61, and an MPEG receiving terminal (not shown) is installed in the hospital 65. At the time of emergency transport, the state of the patient and the diagnosis result by the diagnostic device are displayed as moving images. The data is transmitted from the ambulance 61 to the hospital 65 as data.
[0090]
The relay between the satellite communication line and the ground network 64 is performed by a feeder station 63 installed on the ground. That is, the ambulance 61 serving as a mobile is communicating with the feeder station 63 via the communication satellite 62. The communication satellite 62 is a quasi-zenith satellite capable of securing a large antenna elevation angle in the ambulance 61, and can cover almost the whole of Japan.
[0091]
FIG. 19 is a diagram showing an example of a configuration of a main part of the ambulance 61 of FIG. The ambulance 61 is provided with an antenna 71, a satellite channel control device 72, a moving image transmission device 73, an MPEG transmission terminal 74, and a camera 75.
[0092]
The MPEG transmission terminal 74 is connected to the video transmission device 73 via a LAN cable such as 100Base-TX, and transmits and receives IP packets to and from the video transmission device 73. The moving image transmission device 73 is connected to a satellite channel control device 72, and the satellite channel control device 72 transmits and receives RF signals to and from a communication satellite via an antenna 71.
[0093]
The camera 75 is connected to the MPEG transmission terminal 74, and the state of the patient photographed by the camera 75 is output to the MPEG transmission terminal 74 as moving image data. The MPEG transmission terminal 74 encodes this moving image data according to the MPEG standard (for example, MPEG2) and outputs it to the moving image transmission device 73.
[0094]
The moving image transmission device 73 is a device corresponding to the moving image transmission devices 2 to 2E in the first to sixth embodiments, performs a thinning process on a data packet received from the MPEG transmission terminal 74, and sends the data packet to the satellite line control device 72. Output. That is, the moving image data after the band reduction is transmitted from the antenna 71 to the communication satellite 62.
[0095]
The communication satellite 62 can cover a wide area, but if the number of ambulances 61 operating at the same time increases, the bandwidth that can be allocated to each ambulance 61 decreases. Therefore, a moving image transmission device 73 is interposed between the MPEG transmission terminal 74 and the satellite line control device 72.
[0096]
That is, the video transmission device 73 is connected to the MPEG transmission terminal 74 via a transmission path having a bandwidth wider than the transmission bandwidth of the satellite communication line allocated to each ambulance 61, and the video transmission device 73 transmits the frame transmission rate. Is decreasing. Therefore, even when the bandwidth of the assigned satellite communication line is narrow, moving image data can be transmitted without deteriorating the quality of the frame image.
[0097]
Generally, color and shape information is often important when performing remote diagnosis for patients in emergency transport, and when transmitting moving images, it is necessary to prioritize image quality over smooth motion. There is. For this reason, if the moving image transmission device 73 lowers the frame transmission rate according to the available bandwidth of the satellite communication line, remote diagnosis by a doctor becomes possible.
[0098]
FIG. 20 is a diagram showing another configuration example of the main part of the ambulance 61 of FIG. A plurality of MPEG transmission terminals 74 are connected to the moving image transmitting device 73 via a LAN cable, and moving image data is output from each of the MPEG transmitting terminals 74 to the moving image transmitting device 73, and is transmitted to the hospital 65 via a satellite communication line. To the MPEG receiving terminal.
[0099]
Here, three MPEG transmission terminals 74 are connected. One of them is connected to a diagnostic device 76 such as an ultrasonic diagnostic device, and the other two are connected to a camera 75. The camera 75 outputs a color moving image, and the diagnostic device 76 outputs an ultrasonic echo image (monochrome moving image). The doctor makes a diagnosis while looking at these moving images.
[0100]
If the available bandwidth of the satellite communication line is narrow, it may be necessary to reduce the frame transmission rate for some moving images. In such a case, the doctor can determine which packet reduction method to use for which moving image, and transmit it as a reduction control designation packet from the MPEG receiving terminal, thereby suppressing the overall bandwidth. That is, the allocated bandwidth can be used effectively by making the presence or absence of the packet reduction or the reduction rate different according to the importance of each moving image, and the determination is made by the doctor at the receiving side.
[0101]
【The invention's effect】
In the moving picture transmission system according to the present invention, the moving picture transmitting terminal transmits each frame data as one or more data packets, and the moving picture transmitting apparatus discards the data packet based on the attribute data in the received packet. Then, the number of packets is reduced and transmitted to the video receiving terminal. For this reason, the transmission bandwidth can be reduced without deteriorating the quality of the frame image or while suppressing the deterioration. Also, a moving image transmitting terminal that transmits moving image data at a fixed frame rate can be used. Therefore, it is possible to provide an inexpensive moving image transmission system that transmits a high-quality frame image via a transmission path with a narrow transmission bandwidth. Further, it is possible to provide a moving image transmission device applicable to such a moving image transmission system.
[0102]
Also, in the moving image transmission system according to the present invention, the moving image receiving terminal transmits a packet reduction instruction to the moving image transmission device, and the moving image transmission device transmits the moving image based on the packet reduction instruction from the moving image receiving terminal. Discard the data packet from the terminal. Therefore, discarding of the packet in the moving picture transmission apparatus can be controlled from the moving picture receiving terminal.
[0103]
Also, in the moving image transmission system according to the present invention, the load condition detecting device detects a load condition of a second transmission path connecting the moving image transmitting terminal and the moving image transmitting device, and transmits a load condition notification packet to the moving image transmitting device. Send to The moving image transmission device discards the data packet from the moving image transmitting terminal based on the load status notification packet. Therefore, packets can be discarded according to the load status of the second transmission path, and the transmission bandwidth of moving image data can be reduced.
[0104]
Further, in the moving image transmission system according to the present invention, the moving image transmission device changes the number of missing packets in the reception status report packet from the moving image receiving terminal based on the number of discarded data packets. Therefore, it is possible to prevent the quality of the frame image transmitted from the moving image transmitting terminal from being deteriorated due to the discard of the packet in the moving image transmitting apparatus.
[0105]
Further, in the moving image transmission system according to the present invention, the moving image transmission device generates a reception status report packet when the reception status report packet from the moving image receiving terminal does not arrive for a predetermined period. Therefore, it is possible to prevent the quality of the frame image transmitted from the moving image transmitting terminal from being degraded due to the reception status report packet not reaching the moving image transmitting terminal.
[Brief description of the drawings]
FIG. 1 is a schematic diagram showing an example of a configuration and an operation of a moving image transmission system according to a first embodiment of the present invention.
FIG. 2 is a block diagram illustrating a configuration example of each device in FIG. 1;
FIG. 3 is a conceptual diagram showing an example of MPEG data, in which a large number of MPEG pictures are arranged on a time axis (horizontal direction) in an imaging order.
FIG. 4 is a diagram showing a configuration example of a data packet transmitted from an MPEG transmitting terminal 1 to an MPEG receiving terminal 3.
FIG. 5 shows an example in which a packet is discarded for each picture group GOP.
FIG. 6 shows an example in which only pictures for which motion compensation has been performed are discarded.
FIG. 7 shows an example in which only pictures for which bidirectional motion compensation is performed are discarded.
FIG. 8 is a schematic diagram showing an example of a configuration and operation of a moving image transmission system according to a second embodiment of the present invention.
FIG. 9 is a block diagram illustrating an example of a main part of the moving image transmission device 2A of FIG. 8;
FIG. 10 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to a third embodiment of the present invention.
11 is a diagram illustrating an example of another operation state of the moving image transmission system in FIG. 10;
FIG. 12 is a block diagram showing an example of a main part of the moving image transmission device 2B of FIGS. 10 and 11;
FIG. 13 is a schematic diagram showing an example of the configuration and operation of a moving image transmission system according to a fourth embodiment of the present invention.
FIG. 14 is a block diagram showing one configuration example of a main part of the moving image transmission device 2C of FIG.
FIG. 15 is a schematic diagram showing an example of a configuration and operation of a moving image transmission system according to a fifth embodiment of the present invention.
16 is a block diagram showing a configuration example of a main part of the moving image transmission device 2D of FIG.
FIG. 17 is a schematic diagram showing an example of a configuration and operation of a moving image transmission system according to a sixth embodiment of the present invention.
FIG. 18 is a diagram showing a schematic configuration of a moving image transmission system for emergency medicine.
FIG. 19 is a diagram showing an example of a configuration of a main part of the ambulance 61 in FIG. 18;
20 is a diagram showing another configuration example of the main part of the ambulance 61 of FIG. 18;
[Explanation of symbols]
1, 1A, 1B video transmission terminal, 2, 2A-2E video transmission device,
3 moving image receiving terminal, 5 data packet, 6 display device,
7 load status detection device, 8 network management center,
41 a first transmission path, 42 a second transmission path,
20 first communication line interface, 21 second communication line interface,
22 MPEG reduction control unit, 23 packet reduction control unit,
24 receiving terminal request processing unit, 25 reduction control table,
26 load status response processing unit, 27 reception status report packet control unit,
61 ambulance, 62 communication satellite, 63 feeder station,
64 ground networks, 65 hospitals, 71 antennas,
72 satellite link control device, 73 video transmission device, 74 video transmission terminal
75 camera, 76 diagnostic device, NW communication network

Claims (19)

予め定められたフレームレートで生成された一連の画像フレームからなる動画像データについて、各フレームデータを1又は2以上のデータパケットとして送信する動画像送信端末と、
動画像送信端末から受信したデータパケット内の属性データに基づいてデータパケットを廃棄し、パケット数を削減する動画像伝送装置と、
動画像伝送装置からデータパケットを受信する動画像受信端末を備えたことを特徴とする動画像伝送システム。
A moving image transmitting terminal that transmits each frame data as one or more data packets for moving image data composed of a series of image frames generated at a predetermined frame rate;
A moving image transmitting apparatus that discards a data packet based on attribute data in the data packet received from the moving image transmitting terminal and reduces the number of packets;
A moving image transmission system comprising a moving image receiving terminal that receives a data packet from a moving image transmitting device.
上記動画像受信端末は、動画像伝送装置へパケット削減指示を送信し、
上記動画像伝送装置は、動画像受信端末からのパケット削減指示に基づいて、動画像送信端末からのデータパケットを廃棄することを特徴とする請求項1に記載の動画像伝送システム。
The moving image receiving terminal transmits a packet reduction instruction to the moving image transmission device,
The moving image transmission system according to claim 1, wherein the moving image transmission device discards a data packet from the moving image transmission terminal based on a packet reduction instruction from the moving image reception terminal.
上記動画像伝送装置は、2以上の動画像送信端末からそれぞれ動画像データが送信され、
上記動画像受信端末は、データパケットの削減対象となる動画像データの指定を含むパケット削減指示を動画像伝送装置へ送信することを特徴とする請求項2に記載の動画像伝送システム。
In the moving image transmission device, moving image data is transmitted from two or more moving image transmission terminals,
The moving image transmission system according to claim 2, wherein the moving image receiving terminal transmits a packet reduction instruction including designation of moving image data to be reduced in data packets to the moving image transmission device.
上記動画像送信端末が、第1の伝送路を介して動画像伝送装置に接続され、
上記動画像受信端末が、第1の伝送路よりも帯域幅の狭い第2の伝送路を介して動画像伝送装置に接続されることを特徴とする請求項1に記載の動画像伝送システム。
The moving image transmitting terminal is connected to the moving image transmitting device via a first transmission path,
The moving image transmission system according to claim 1, wherein the moving image receiving terminal is connected to the moving image transmission device via a second transmission line having a narrower bandwidth than the first transmission line.
上記動画像受信端末及び動画像伝送装置を接続する第2の伝送路の負荷状況を検出し、負荷状況通知パケットを動画像伝送装置へ送信する負荷状況検出装置を備え、
上記動画像伝送装置が、負荷状況通知パケットに基づいて、動画像送信端末からのデータパケットを廃棄することを特徴とする請求項1に記載の動画像伝送システム。
A load status detection device that detects a load status of a second transmission path connecting the video reception terminal and the video transmission device, and transmits a load status notification packet to the video transmission device;
The moving image transmission system according to claim 1, wherein the moving image transmission device discards a data packet from a moving image transmission terminal based on a load status notification packet.
上記動画像受信端末は、パケット欠落数を含む受信状況報告パケットを生成して動画像伝送装置へ送信し、
上記動画像伝送装置は、受信状況報告パケット内のパケット欠落数をデータパケットの廃棄数に基づいて変更し、変更された受信状況報告パケットを動画像送信端末へ送信することを特徴とする請求項1に記載の動画像伝送システム。
The moving image receiving terminal generates a reception status report packet including the number of missing packets, transmits the packet to the moving image transmission device,
The moving picture transmission device changes the number of packet drops in the reception status report packet based on the number of discarded data packets, and transmits the changed reception status report packet to the video transmission terminal. 2. The moving image transmission system according to 1.
上記動画像受信端末は、所定の期間ごとにパケット欠落数を含む受信状況報告パケットを生成して動画像伝送装置へ送信し、
上記動画像伝送装置は、所定の期間、動画像受信端末からの受信状況報告パケットが到達しない場合に、受信状況報告パケットを生成し、動画像送信端末へ送信することを特徴とする請求項1に記載の動画像伝送システム。
The moving image receiving terminal generates a reception status report packet including the number of missing packets for each predetermined period and transmits the reception status report packet to the moving image transmission device,
2. The video transmission apparatus according to claim 1, wherein the reception status report packet from the video reception terminal does not arrive for a predetermined period, and the reception status report packet is generated and transmitted to the video transmission terminal. 3. The moving image transmission system according to item 1.
車両内に設置された動画像送信端末から医療機関内に設置された動画像受信端末へ通信衛星を介して動画像データを伝送する救急医療用伝送システムにおいて、
上記動画像送信端末が、予め定められたフレームレートで生成された一連の画像フレームからなる動画像データについて、各フレームデータを1又は2以上のデータパケットとして送信し、
上記車両内には、さらに、動画像送信端末から受信したデータパケット内の属性データに基づいてデータパケットを廃棄し、パケット数を削減する動画像伝送装置と、動画像伝送装置からのデータパケットを通信衛星へ無線送信する衛星回線制御装置とを備えたことを特徴とする救急医療用伝送システム。
In an emergency medical transmission system that transmits moving image data via a communication satellite from a moving image transmitting terminal installed in a vehicle to a moving image receiving terminal installed in a medical institution,
The moving image transmitting terminal transmits each frame data as one or more data packets for moving image data including a series of image frames generated at a predetermined frame rate,
In the vehicle, further, a moving image transmission device that discards the data packet based on the attribute data in the data packet received from the moving image transmission terminal to reduce the number of packets, and a data packet from the moving image transmission device. A transmission system for emergency medical care, comprising: a satellite line controller for wirelessly transmitting to a communication satellite.
上記通信衛星が、楕円軌道を周回する通信衛星であることを特徴とする請求項8に記載の救急医療用伝送システム。9. The emergency medical transmission system according to claim 8, wherein the communication satellite is a communication satellite orbiting in an elliptical orbit. 予め定められたフレームレートで生成された動画像データを動画像送信端末から受信し、動画像受信端末へ伝送する動画像伝送装置において、
各フレームデータを1又は2以上のデータパケットとして動画像送信端末から受信する第1の通信回線インタフェースと、
動画像送信端末から受信したデータパケット内の属性データに基づいてデータパケットを廃棄し、パケット数を削減するパケット削減制御部と、
パケット数削減後のデータパケットを動画像受信端末へ送信する第2の通信回線インタフェースとを備えたことを特徴とする動画像伝送装置。
In a moving image transmitting apparatus that receives moving image data generated at a predetermined frame rate from a moving image transmitting terminal and transmits the moving image data to a moving image receiving terminal,
A first communication line interface for receiving each frame data as one or more data packets from a video transmitting terminal;
A packet reduction control unit that discards the data packet based on the attribute data in the data packet received from the moving image transmission terminal and reduces the number of packets;
A moving image transmitting apparatus comprising: a second communication line interface for transmitting a data packet after reducing the number of packets to a moving image receiving terminal.
上記パケット削減制御部は、受信パケット内の属性データに基づいて、画像フレームごとにデータパケットを廃棄し、フレーム伝送レートを低減することを特徴とする請求項10に記載の動画像伝送装置。The moving picture transmission apparatus according to claim 10, wherein the packet reduction control unit discards the data packet for each image frame based on the attribute data in the received packet to reduce a frame transmission rate. 上記第1の通信回線インタフェースは、独立して復号可能な第1のフレームデータと、他のフレームデータとともに復号される第2のフレームデータとを動画像送信端末から受信し、
上記パケット削減制御部は、受信パケット内の属性データに基づいて、第2のフレームデータごとにデータパケットを廃棄することを特徴とする請求項11に記載の動画像伝送装置。
The first communication line interface receives, from a video transmission terminal, first frame data that can be decoded independently and second frame data that is decoded together with other frame data,
The moving picture transmission apparatus according to claim 11, wherein the packet reduction control unit discards a data packet for each second frame data based on attribute data in a received packet.
上記第1の通信回線インタフェースは、独立して復号可能な第1のフレームデータと、時間軸上で一方向に存在する他のフレームデータとともに復号される第2のフレームデータと、時間軸上で両方向に存在する2以上の他のフレームデータとともに復号される第3のフレームデータとを動画像送信端末から受信し、
上記パケット削減制御部は、受信パケット内の属性データに基づいて、第3のフレームデータごとにデータパケットを廃棄することを特徴とする請求項11に記載の動画像伝送装置。
The first communication line interface includes: first frame data that can be decoded independently; second frame data that is decoded together with other frame data that exists in one direction on the time axis; Receiving from the video transmitting terminal the third frame data to be decoded together with two or more other frame data existing in both directions,
The moving picture transmission apparatus according to claim 11, wherein the packet reduction control unit discards a data packet for each third frame data based on attribute data in a received packet.
上記第1の通信回線インタフェースは、ランダムアクセス時にアクセスポイントを提供するグループ化されたフレームデータを動画像送信端末から受信し、
上記パケット削減制御部は、受信パケット内の属性データに基づいて、グループ化されたフレームデータごとにデータパケットを廃棄することを特徴とする請求項10に記載の動画像伝送装置。
The first communication line interface receives, from a video transmitting terminal, grouped frame data that provides an access point at the time of random access,
The moving picture transmission apparatus according to claim 10, wherein the packet reduction control unit discards a data packet for each grouped frame data based on attribute data in a received packet.
パケット削減方法を動画像送信端末に対応づけて記憶する削減制御テーブルを備え、
上記第1の通信回線インタフェースは、2以上の動画像送信端末からのデータパケットを受信し、
上記パケット削減制御部は、削減制御テーブルに基づいて、動画像送信端末ごとに指定されたパケット削減方法によりデータパケットを廃棄することを特徴とする請求項10に記載の動画像伝送装置。
A reduction control table that stores the packet reduction method in association with the video transmission terminal,
The first communication line interface receives data packets from two or more video transmission terminals,
The moving picture transmission apparatus according to claim 10, wherein the packet reduction control unit discards the data packet by a packet reduction method designated for each moving picture transmission terminal based on the reduction control table.
動画像受信端末から受信したパケット削減指示に基づいて、削減制御テーブルを更新する受信端末要求処理部を備えたことを特徴とする請求項15に記載の動画像伝送装置。The moving picture transmission apparatus according to claim 15, further comprising a receiving terminal request processing unit that updates the reduction control table based on a packet reduction instruction received from the moving picture receiving terminal. 動画像受信端末との伝送路の負荷状況に基づいて、削減制御テーブルを更新する負荷状況対応処理部を備えたことを特徴とする請求項15に記載の動画像伝送装置。16. The moving image transmission apparatus according to claim 15, further comprising a load condition correspondence processing unit that updates the reduction control table based on a load condition of a transmission path with the moving image receiving terminal. 動画像受信端末から受信した受信状況報告パケット内のパケット欠落数をデータパケットの廃棄数に基づいて変更する受信状況報告パケット制御部を備え、
第2の通信回線インタフェース部が、更新された受信状況報告パケットを動画像送信端末へ送信することを特徴とする請求項10に記載の動画像伝送装置。
A reception status report packet control unit that changes the number of missing packets in the reception status report packet received from the video receiving terminal based on the number of discarded data packets,
The moving image transmission device according to claim 10, wherein the second communication line interface unit transmits the updated reception status report packet to the moving image transmitting terminal.
所定の期間、動画像受信端末からの受信状況報告パケットが到達しない場合に、受信状況報告パケットを生成する受信状況報告パケット制御部を備え、
第2の通信回線インタフェース部が、更新された受信状況報告パケットを動画像送信端末へ送信することを特徴とする請求項10に記載の動画像伝送装置。
For a predetermined period, when a reception status report packet from the video receiving terminal does not arrive, a reception status report packet control unit that generates a reception status report packet,
The moving image transmission device according to claim 10, wherein the second communication line interface unit transmits the updated reception status report packet to the moving image transmitting terminal.
JP2002283913A 2002-09-27 2002-09-27 Moving picture transmission system, emergency medical transmission system, and moving picture transmission apparatus Expired - Fee Related JP3944440B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2002283913A JP3944440B2 (en) 2002-09-27 2002-09-27 Moving picture transmission system, emergency medical transmission system, and moving picture transmission apparatus
AU2003248319A AU2003248319B2 (en) 2002-09-27 2003-09-24 Motion picture transmission system, transmission system for emergency medical service and motion picture transmitting device
KR20030067003A KR100560011B1 (en) 2002-09-27 2003-09-26 Moving picture transmission system, transmission system for first aid medical treatment, and moving picture transmission device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002283913A JP3944440B2 (en) 2002-09-27 2002-09-27 Moving picture transmission system, emergency medical transmission system, and moving picture transmission apparatus

Publications (2)

Publication Number Publication Date
JP2004120609A true JP2004120609A (en) 2004-04-15
JP3944440B2 JP3944440B2 (en) 2007-07-11

Family

ID=32277642

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002283913A Expired - Fee Related JP3944440B2 (en) 2002-09-27 2002-09-27 Moving picture transmission system, emergency medical transmission system, and moving picture transmission apparatus

Country Status (3)

Country Link
JP (1) JP3944440B2 (en)
KR (1) KR100560011B1 (en)
AU (1) AU2003248319B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006254044A (en) * 2005-03-10 2006-09-21 Fujitsu Ltd Repeater
WO2008072606A1 (en) * 2006-12-15 2008-06-19 Nec Corporation Remote instrument managing system, remote instrument managing method and remote instrument managing program
JP2011114813A (en) * 2009-11-30 2011-06-09 Mega Chips Corp Data transmission system, and data transmission method of data transmission system
JP2013229911A (en) * 2013-06-20 2013-11-07 Mega Chips Corp Data transmission system
JP2017528024A (en) * 2014-07-04 2017-09-21 サムスン エレクトロニクス カンパニー リミテッド Data transmission / reception apparatus and method in communication system
JP2018042293A (en) * 2012-08-15 2018-03-15 インテュイティブ サージカル オペレーションズ, インコーポレイテッド Methods and systems for video streaming
US11197196B2 (en) 2014-12-04 2021-12-07 Assia Spe, Llc Optimized control system for aggregation of multiple broadband connections over radio interfaces

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3045715B2 (en) * 1998-01-23 2000-05-29 松下電器産業株式会社 Transmission system, transmitting device, recording / reproducing device, and recording device
JP2000350197A (en) * 1999-06-02 2000-12-15 Hitachi Ltd Video transmission method and supervisory system employing the same
WO2002031673A1 (en) * 2000-10-13 2002-04-18 Thin Multimedia, Inc. Method and apparatus for streaming video data

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006254044A (en) * 2005-03-10 2006-09-21 Fujitsu Ltd Repeater
WO2008072606A1 (en) * 2006-12-15 2008-06-19 Nec Corporation Remote instrument managing system, remote instrument managing method and remote instrument managing program
US8117295B2 (en) 2006-12-15 2012-02-14 Nec Corporation Remote apparatus management system, remote apparatus management method and remote apparatus management program
JP2011114813A (en) * 2009-11-30 2011-06-09 Mega Chips Corp Data transmission system, and data transmission method of data transmission system
JP2018042293A (en) * 2012-08-15 2018-03-15 インテュイティブ サージカル オペレーションズ, インコーポレイテッド Methods and systems for video streaming
JP2019208262A (en) * 2012-08-15 2019-12-05 インテュイティブ サージカル オペレーションズ, インコーポレイテッド Methods and systems for video streaming
US10806325B2 (en) 2012-08-15 2020-10-20 Intuitive Surgical Operations, Inc. Methods and systems for optimizing video streaming
US11889975B2 (en) 2012-08-15 2024-02-06 Intuitive Surgical Operations, Inc. Methods and systems for optimizing video streaming
JP2013229911A (en) * 2013-06-20 2013-11-07 Mega Chips Corp Data transmission system
JP2017528024A (en) * 2014-07-04 2017-09-21 サムスン エレクトロニクス カンパニー リミテッド Data transmission / reception apparatus and method in communication system
US10701408B2 (en) 2014-07-04 2020-06-30 Samsung Electronics Co., Ltd. Devices and methods for transmitting/receiving data in communication system
US11197196B2 (en) 2014-12-04 2021-12-07 Assia Spe, Llc Optimized control system for aggregation of multiple broadband connections over radio interfaces

Also Published As

Publication number Publication date
KR20040027460A (en) 2004-04-01
KR100560011B1 (en) 2006-03-15
AU2003248319B2 (en) 2005-08-11
AU2003248319A1 (en) 2004-04-22
JP3944440B2 (en) 2007-07-11

Similar Documents

Publication Publication Date Title
US9197899B2 (en) Dynamic adjustment of image compression for high resolution live medical image sharing
US6130880A (en) Method and apparatus for adaptive prioritization of multiple information types in highly congested communication devices
US8089514B2 (en) Moving image communication device, moving image communication system and semiconductor integrated circuit used for communication of moving image
US7852948B2 (en) Moving picture real-time communications terminal, control method for moving picture real-time communications terminal, and control program for moving picture real-time communications terminal
US9641588B2 (en) Packets recovery system and method
KR20120117907A (en) A method and apparatus for retransmission decision making
US20110249181A1 (en) Transmitting device, receiving device, control method, and communication system
WO2019144818A1 (en) Method for transmitting video frame, detector and user equipment
EP1679895A1 (en) Medium signal transmission method, reception method, transmission/reception method, and device
JP3944440B2 (en) Moving picture transmission system, emergency medical transmission system, and moving picture transmission apparatus
Malindi QoS in telemedicine
JP2015138990A (en) Receiver, transmitter and communication system
WO2012114774A1 (en) Video encoding device and video decoding device
US6683909B1 (en) Macroblock parsing without processing overhead
CN109862400A (en) A kind of flow-medium transmission method, device and its system
JP4702443B2 (en) COMMUNICATION SYSTEM, COMMUNICATION METHOD, COMMUNICATION DEVICE, AND PROGRAM
JP2005333568A (en) Data transmission device, its program and its method, data reception device, its program and its method
JP2005244315A (en) Network quality stabilizing apparatus for video streaming transmission
US9363574B1 (en) Video throttling based on individual client delay
Nguyen et al. Real-time transmission of panoramic images for a telepresence wheelchair
JP5675164B2 (en) Transmission device, transmission method, and program
JP3622590B2 (en) Video data communication system
JP4049378B2 (en) Server in bidirectional image communication system, processing method thereof, and program
WO2010117644A1 (en) Method and apparatus for asynchronous video transmission over a communication network
CN117768669A (en) Data transmission method, device, electronic equipment and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060613

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060810

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061017

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070123

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070302

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070403

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070409

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100413

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110413

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120413

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120413

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130413

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees