JP2000253369A - データ伝送装置 - Google Patents

Abstract

(57)【要約】 【課題】 大きなバッファが必要なく、伝送遅延を
起こすことなく、符号化データを伝送することができる
こと。 【解決手段】 画像信号や音声信号などを送信する場
合、まず、画像信号入力端子を介して入力された画像信
号が画像符号化部１０１の画像ブロック作成部２０１に
入力され、画像符号化されると共に、複数にブロック化
される。次に、ブロック化された画像ストリームは、管
理データ付与部２０２に送られ、画像ブロックが１画面
における先頭であるかどうかのブロック先頭情報と、ブ
ロックが継続するか否かのデータ継続情報とが付与され
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、データ通信、マル
チメディア通信、動画像通信などに使用されるデータ伝
送装置に関し、特にＭＰＥＧ（Moving Picture Experts
Group）−４における通信に使用されるデータ伝送装置
に関する。

【０００２】

【従来の技術】従来から、ディジタル伝送においては、
動画像信号や音響信号などを所定の標準規格の圧縮方式
で圧縮し、圧縮して得られた画像ストリーム、音声スト
リーム、データストリームを多重化し、この多重化スト
リームデータを伝送している。

【０００３】この圧縮方式として、ＭＰＥＧ符号化方式
がある。ＭＰＥＧ符号化方式においては、主に放送への
応用を目的としたＭＰＥＧ−２から主にマルチメディア
への応用を目的としたＭＰＥＧ−４に移行してきてい
る。

【０００４】ＭＰＥＧ−２の符号化方式では、動きの速
い画面で高画質を得ると同時に、静止画像でも高解像度
を得るためのフィールド／フレーム適応符号化方式を採
用している。

【０００５】一方、ＭＰＥＧ−４の符号化方式は、マル
チメディアへの適用を睨んで標準化されている。ＭＰＥ
Ｇ−４の符号化方式においては、符号化伝送すべき３次
元空間情報を、空間内に位置する人や建物などの各オブ
ジェクト毎に、又は１画面を複数の分割してなるブロッ
ク毎に、個別符号化することにより、符号化効率を高め
ると共に、各オブジェクトの加工・編集を可能にするオ
ブジェクト方式を採用している。

【０００６】

【発明が解決しようとする課題】ＭＰＥＧ−２の符号化
方式では、データ伝送の際に画像単位での伝送が義務づ
けられているために、画像符号化するときに、１画面
（１フレーム）単位でメモリにバッファリングを行な
い、その単位で伝送を行なっている。

【０００７】しかしながら、上記のように１画面単位で
バッファリングし、その単位で伝送を行なうと、画面単
位のデータを保存するための比較的大きなバッファが必
要であると共に、１画面がバッファリングされるまでに
時間がかかるので、伝送遅延が生じてしまうという問題
がある。

【０００８】例えば、図１３に示すように、画像符号化
動作状態と伝送路状態のタイミングをみると、１画面デ
ータが完成するまでデータ伝送を開始しないので、伝送
路空き時間が発生してしまい、この伝送路空き時間が伝
送遅延を招くことになる。

【０００９】本発明はかかる点に鑑みてなされたもので
あり、大きなバッファが必要なく、伝送遅延を起こすこ
となく、符号化データを伝送することができるデータ伝
送装置を提供することを目的とする。

【００１０】

【課題を解決するための手段】本発明の骨子は、画像信
号を画像符号化すると共にブロック化することにより画
像ストリームを得て、１画面における前記画像ブロック
の位置を示す管理情報を画像ブロック毎に付与し、前記
管理情報に基づいて前記画像ストリームに誤り検出符号
を付与して、送信側で画像の先頭と終結を画像ブロック
毎に認識させて、伝送遅延なく画像ブロック毎に伝送す
ることを可能とすることである。

【００１１】

【発明の実施の形態】本発明の第１の態様に係るデータ
伝送装置は、画像信号を画像符号化すると共にブロック
化することにより画像ストリームを得る画像ブロック作
成手段と、１画面における前記画像ブロックの位置を示
す管理情報を前記画像ブロック毎に付与する管理情報付
与手段と、前記管理情報に基づいて前記画像ストリーム
に誤り検出符号を付与する誤り検出符号付与手段と、を
具備する構成を採る。

【００１２】この構成によれば、画像信号を画像符号化
すると共にブロック化することにより画像ストリームを
得て、１画面における画像の位置、すなわち画像の先頭
と終結を示す管理情報を画像ブロック毎に付与し、前記
管理情報に基づいて前記画像ストリームに誤り検出符号
を付与するので、送信側では、管理データにより１画面
の画像の先頭と終結を画像ブロック毎に認識することが
できる。このため、１画面分の画像データをバッファリ
ングする必要がなく、大きなバッファが必要ない。ま
た、画像ブロック毎に伝送することが可能となるため、
伝送遅延を起こすことなく、符号化データを伝送するこ
とができる。

【００１３】本発明の第２の態様に係るデータ伝送装置
は、第１の態様において、音声信号を音声符号化処理し
て得られた音声ストリーム及びデータを符号化処理して
得られたデータストリームの少なくとも一つを前記画像
ストリームと多重化する多重化手段を具備する構成を採
る。

【００１４】この構成によれば、複数のメディアの情報
を多重して送受信するマルチメディア通信に適応するこ
とができる。

【００１５】本発明の第３の態様に係るデータ伝送装置
は、第１又は第２の態様において、前記管理情報が、１
画面における先頭であるかどうかを示すブロック先頭情
報と、ブロックが継続するか否かを示すデータ継続情報
とを含む構成を採る。

【００１６】この構成によれば、処理する画像ブロック
が１画面の先頭であるか終結であるかを判断することが
でき、より効率良く画像データ伝送を行なうことができ
る。

【００１７】本発明の第４の態様に係るデータ伝送装置
は、第１から第３のいずれかの態様において、前記管理
情報が、前記画像ストリームの画像種別を示す画像種別
情報を含む構成を採る。

【００１８】この構成によれば、画像種別を示す管理デ
ータにより、重要な画像を消去することがなくなり、受
信側の画像破綻発生を防止るすることができる。さら
に、送信側装置におけるバッファを効率良く使用するこ
とができる。

【００１９】本発明の第５の態様に係るデータ伝送装置
は、画像信号を画像符号化すると共にブロック化し、誤
り検出符号が付与されて得られた画像ストリームを、音
声信号を音声符号化処理して得られた音声ストリーム及
びデータを符号化処理して得られたデータストリームの
少なくとも一つと多重化した多重化ストリームから画像
ストリームを分離する分離手段と、前記誤り検出符号を
用いた誤り検出の結果に基づいて管理情報を画像ストリ
ームに付与する管理情報付与手段と、を具備する構成を
採る。

【００２０】この構成によれば、復号化部は、誤りの有
無を示す管理情報を参照して誤りのあるブロックの復号
は行なわないようにできるので、復号化部における処理
負荷を小さくすることができる。

【００２１】本発明の第６の態様に係る基地局装置は、
第１から第５のいずれかの態様のデータ伝送装置を備え
たことを特徴とする。本発明の第７の態様に係る通信端
末装置は、第１から第５のいずれかの態様のデータ伝送
装置を備えたことを特徴とする。これらの構成によれ
ば、通信システムにおいて、伝送遅延なく通信を行なう
ことができる。

【００２２】本発明の第８の態様に係るデータ伝送方法
は、画像信号を画像符号化すると共にブロック化するこ
とにより画像ストリームを得る画像ブロック作成工程
と、１画面における画像の位置、すなわち画像の先頭と
終結を示す管理情報を前記画像ブロック毎に付与する管
理情報付与工程と、前記管理情報に基づいて前記画像ス
トリームに誤り検出符号を付与する誤り検出符号付与工
程と、を具備する。

【００２３】この方法によれば、画像信号を画像符号化
すると共にブロック化することにより画像ストリームを
得て、１画面における前記画像ブロックの位置を示す管
理情報を画像ブロック毎に付与し、前記管理情報に基づ
いて前記画像ストリームに誤り検出符号を付与するの
で、送信側では、管理データにより１画面の画像の先頭
と終結を画像ブロック毎に認識することができる。この
ため、１画面分の画像データをバッファリングする必要
がなく、大きなバッファが必要ない。また、画像ブロッ
ク毎に伝送することが可能となるため、伝送遅延を起こ
すことなく、符号化データを伝送することができる。

【００２４】本発明の第９の態様に係るデータ伝送方法
は、画像信号を画像符号化すると共にブロック化し、誤
り検出符号が付与されて得られた画像ストリームを、音
声信号を音声符号化処理して得られた音声ストリーム及
びデータを符号化処理して得られたデータストリームの
少なくとも一つと多重化した多重化ストリームから画像
ストリームを分離する分離工程と、前記誤り検出符号を
用いた誤り検出の結果に基づいて管理情報を前記画像ス
トリームに付与する管理情報付与工程と、を具備する。

【００２５】この方法によれば、復号化部は、誤りの有
無を示す管理情報を参照して誤りのあるブロックの復号
は行なわないようにできるので、復号化部における処理
負荷を小さくすることができる。

【００２６】以下、本発明の実施の形態について添付図
面を参照して詳細に説明する。

【００２７】（実施の形態１）図１は、本発明の実施の
形態に係るデータ伝送装置を備えた通信システムを示す
ブロック図である。図１に示す通信システムは、送信側
装置と受信側装置を備えており、通信は無線で行われ
る。なお、伝送路については、無線に限定されず有線で
あっても良い。また、図１においては、送信側装置には
送信部のみを記載し、受信側装置には受信部のみを記載
している。ただし、送信側装置及び受信側装置共に送受
信を行なうことができるので、送信側装置は受信部を有
しており、受信側装置は送信部を有している。

【００２８】送信側装置において、ビデオ素材からの画
像信号は、画像信号入力端子から入力され、画像符号化
部１０１に送られる。画像符号化部１０１では、画像信
号をブロック化すると共に、ブロック化された画像信号
に対して情報量を高能率で圧縮するための演算処理がな
される。具体的には、画像信号に対して、ＤＣＴ（離散
コサイン変換）、量子化、動き補償などの、例えばＭＰ
ＥＧ−４方式の演算処理がなされる。このような画像符
号化処理により、画像ストリームが得られる。なお、ブ
ロック化された画像信号については、１画面のどの位置
のブロックであるかを示す管理データを付与してメモリ
に格納する。

【００２９】オーディオ素材からの音声（音響）信号
は、音声信号入力端子から入力され、音声符号化部１０
２に送られる。音声符号化部１０２では、所定の音声符
号化方式に基づいて音声信号に対して、例えばＭＰＥＧ
−４方式の符号化処理がなされる。このような音声符号
化処理により、音声ストリームが得られる。

【００３０】その他のデータや制御データなどについて
は、所定の符号化器（図示せず）により、例えばＭＰＥ
Ｇ−４方式の符号化される。このような符号化処理によ
りデータストリームが得られる。

【００３１】画像符号化処理された画像ストリーム及び
音声符号化処理された音声ストリームは、セレクタ１０
３に入力される。セレクタ１０３では、再送管理を行な
うか、再送管理を行なわずに誤り検出符号付与を行なう
かを選択する。

【００３２】再送管理が行なわれるようにセレクタ１０
３で選択されると、再送管理部１０４において、画像ス
トリームのブロック毎にシーケンス番号を付与したり、
再送用バッファに画像ストリームを蓄積する。

【００３３】一方、再送管理を行なわずに誤り検出符号
付与が行なわれるようにセレクタ１０３で選択される
と、誤り検出符号付与部１０５において、音声ストリー
ムに又は画像ブロックに、誤りを検出する誤り検出符号
を付与する。

【００３４】これらの画像ストリーム、音声ストリー
ム、及びデータストリームは、多重化部１０６に送ら
れ、多重化処理され、その後この多重化されたストリー
ムは、所定の無線送信処理が施された後に、アンテナ１
０８を介して送信される。なお、送信の際には、ストリ
ームは単一又は複数のパケットで送信される。

【００３５】受信側装置において、アンテナ１０９から
受信された多重化ストリームは、分離部１１０で単一又
は複数のパケットから各ストリーム、すなわち画像スト
リーム、音声ストリーム、及びデータストリームに分離
される。

【００３６】分離された各ストリームは、誤り検出・符
号削除部１１１に送られ、そこで受信単位（画像ストリ
ームについては受信ブロック単位）で誤り検出が行わ
れ、さらに誤り検出符号が削除される。

【００３７】誤り検出・符号削除部１１１で誤りが検出
された場合、例えばシーケンス番号が抜けていたり、ビ
ット誤りが検出された場合には、再送管理部１１２にお
いて、誤りのあった受信単位又は受信ブロック単位につ
いて送信側装置に再送要求を発行し、再送データが受信
側装置に到着したときにストリームを画像復号化部１１
３、音声復号化部１１４、又はデータ復号化部（図示せ
ず）に送る。

【００３８】画像復号化部１１３においては、画像スト
リームを伸張するための演算処理がなされる。具体的に
は、画像ストリームに対して、逆ＤＣＴ（逆離散コサイ
ン変換）、逆量子化、動き補償などの演算処理がなされ
る。このような画像復号化処理により、画像信号が得ら
れる。この画像信号は、画像信号出力端子を介してビデ
オ素材に送られる。

【００３９】音声復号化部１１４においては、音声スト
リームに対して符号化方式に対応する復号化方式で復号
化処理がなされる。このような音声復号化処理により、
音声信号が得られる。この音声信号は、音声信号出力端
子を介してオーディオ素材に送られる。

【００４０】なお、送信側装置及び受信側装置の通信制
御部１０７，１１５は、通信システムにおいて送信側装
置から受信側装置に通信を行なう際に、呼制御や、受信
側装置の能力、リソース状態などの装置設定についての
情報をネゴシエーションする。

【００４１】上記構成を有する通信システムにおけるデ
ータ伝送装置の動作について図２を用いて説明する。

【００４２】図２は、本発明の実施の形態１に係るデー
タ伝送装置の画像符号化部の構成を示すブロック図であ
る。図２に示すように、画像符号化部１０１は、入力さ
れた画像信号を画像符号化すると共に、１画面の画像を
所定数のブロックにブロック化して画像ストリームを得
る画像ブロック作成部２０１と、作成された画像ブロッ
クの画面における位置についての管理データ、例えば画
像ブロックが１画面における先頭であるかどうかのブロ
ック先頭情報や、ブロックが継続するか否かのデータ継
続情報をブロック化された画像ストリームに付与する管
理データ付与部２０２と、管理データが付与された画像
ストリームを格納するメモリ２０３とを有する。

【００４３】画像信号や音声信号などを送信する場合、
まず、画像信号入力端子を介して入力された画像信号が
画像符号化部１０１の画像ブロック作成部２０１に入力
される。画像ブロック作成部２０１では、画像信号に対
してＤＣＴ処理、量子化処理が施されて、画像信号が圧
縮され、画像ストリームとなる。また、画像ブロック作
成部２０１では、画像ストリームが複数にブロック化さ
れる。さらに、画像ブロック作成部２０１では、画像信
号について動き補償などの演算処理を行なう。

【００４４】画像ブロック作成部２０１におけるブロッ
ク化においては、まず、通信制御部１０７，１１５間の
ネゴシエーションで１秒間に何枚の画像を送るかの情報
や伝送レートに関する情報が通信制御部１０７を介して
画像ブロック作成部２０１に送られる。次いで、画像ブ
ロック作成部２０１は、画像枚数や伝送レートの情報に
基づいて、各ブロックのデータ長さが均一になるように
ブロック分けを行なう。

【００４５】次に、ブロック化された画像ストリーム
は、管理データ付与部２０２に送られ、画像ブロックが
１画面における先頭であるかどうかのブロック先頭情報
と、ブロックが継続するか否かのデータ継続情報とが付
与される。このブロック先頭情報とデータ継続情報で管
理データを構成する。画像ブロックが１画面の先頭であ
るかどうか、ブロックが継続するかどうかについては、
１画面の区切りを示す信号により判別することができ
る。

【００４６】このように管理データ付与された画像スト
リームはメモリ２０３に格納される。すなわち、メモリ
２０３には、図３に示すように、ブロックの先頭である
かブロックの途中であるかを示すブロック先頭情報３０
１と、ブロック（データ）が継続するかブロック（デー
タ）が終結するかを示すデータ継続情報３０２とが、画
像ストリーム３０３に付与された状態で格納される。こ
のブロック先頭情報とデータ継続情報は、いずれも１ビ
ットであり、ブロック先頭情報３０１については、ブロ
ック先頭／ブロック途中を表わし、データ継続情報３０
２については、データ継続／データ終結を表わす。な
お、この管理データのビット数には特に制限はなく、ブ
ロック情報やデータ情報の種類に応じて適宜増やしても
良い。

【００４７】このように格納された画像ストリームは、
プロトコルスタックにおける誤り検出、誤り訂正、再送
などを行なう、アダプテーションレイヤにおいて、セレ
クタ１０３で再送管理を行なうかどうかの選択がなされ
た後に、誤り検出符号付与部１０５に送られて、誤り検
出符号が付与される。このとき、誤り検出符号付与部１
０５は、画像ストリームに付与された管理データを参照
して誤り検出符号を付与するかどうかを判断する。具体
的には、画像ストリームに付与された管理データのブロ
ック先頭情報がブロック途中であり、データ継続情報が
データ終結である場合には、画像ストリームに誤り検出
符号を付与する。それ以外の場合（ブロック先頭でデー
タ継続、ブロック途中でデータ継続）には、画像ストリ
ームに誤り検出符号を付与しない。

【００４８】このように誤り検出符号が付与された画像
ストリームは、多重化部１０６に送られる。一方、音声
信号入力端子を介して入力された音声信号は、音声符号
化部１０２に入力され、音声符号化部１０２において所
定の音声符号化方式により符号化されて音声ストリーム
となり、アダプテーションレイヤにおいて、誤り検出符
号付与部１０５で誤り検出符号が付与されて多重化部１
０６に送られる。また、その他のデータについても、符
号化器により所定の符号化が施されてデータストリーム
となり、アダプテーションレイヤにおいて、誤り検出符
号付与部１０５で誤り検出符号が付与されて多重化部１
０６に送られる。

【００４９】これらの画像ストリーム、音声ストリー
ム、及びデータストリームは、マルチプルレイヤ（ＭＵ
Ｘレイヤ）において、多重化される。ＭＵＸレイヤで
は、各ストリームをパケット（画像パケット、音声パケ
ット、データパケット）にして、例えば、図４に示すよ
うなＭＵＸパケットを構成する。すなわち、ＭＵＸパケ
ットには、ヘッダ４０１に続いて音声パケット４０２、
データパケット４０３、画像パケット４０４が含まれ
る。

【００５０】多重化された信号は、アンテナ１０８を介
して受信側装置に伝送される。このとき、画像ストリー
ムについては、送信側では、管理データにより１画面に
おける画像の位置、すなわち画像の先頭と終結を画像ブ
ロック毎に認識することができるので、画像ブロック毎
に送信することができる。したがって、１画面分の画像
データをバッファリングする必要がなく、大きなバッフ
ァが必要なくなる。また、１画面の画像を貯めずに、画
像ブロック毎に伝送することが可能となるため、伝送遅
延を起こすことなく、符号化データを伝送することがで
きる。

【００５１】なお、この場合、図５に示すように、画像
データ５０２にヘッダ５０１と誤り検出符号５０３が付
与された１画像ブロックの信号が、伝送単位と合わない
ときには、信号を複数（ここでは２回）に分割して伝送
することができる。

【００５２】（実施の形態２）画像符号化部１０１のメ
モリ２０３においては、画像ブロックのシーケンス番号
の昇順に格納され、容量が一杯になったときに、先に格
納された画像ブロックから消去される。

【００５３】ＭＰＥＧ方式においては、Ｉ(Intra)フレ
ームであるのかＰ(Predictive)フレームであるのかＢ(B
idirectionally)フレームであるのかにより、画像の重
要度が異なる。したがって、単にシーケンス番号により
メモリに格納された順序で消去すると、重要なＩフレー
ムの画像を消去してしまう恐れがある。これにより、受
信側では、画像破綻を発生してしまうことがある。そこ
で、本実施の形態では、画像ブロックに画像種別情報を
管理データとして付与する場合について説明する。

【００５４】通信システムにおけるデータ伝送装置の構
成は図１に示すものとほぼ同じであるので、画像符号化
部１０１の構成を中心に説明する。図６は、本発明の実
施の形態２に係るデータ伝送装置の画像符号化部の構成
を示すブロック図である。

【００５５】図６は、本発明の実施の形態２に係るデー
タ伝送装置の画像符号化部の構成を示すブロック図であ
る。図６に示すように、画像符号化部１０１は、入力さ
れた画像信号を画像符号化すると共に、１画面の画像を
所定数のブロックにブロック化して画像ストリームを得
る画像ブロック作成部２０１と、作成された画像ブロッ
クの画面における位置について情報や画像種別情報など
の管理データをブロック化された画像ストリームに付与
する管理データ付与部２０２と、管理データが付与され
た画像ストリームを格納するメモリ２０３とを有する。

【００５６】また、画像符号化部１０１は、現画面と前
画面との差分を求める差分演算部６０１と、この差分演
算の結果に基づいて画像種別を判定する画像種別判定部
６０２とを有する。

【００５７】上記構成のデータ伝送装置において画像信
号や音声信号などを送信する場合、画像符号化部１０１
に入力された画像信号は、差分演算部６０１に入力さ
れ、そこで、画像符号化された現画面のデータと前画面
のデータとから前画面に対する現画面の差分を算出す
る。この差分結果は画像種別判定部６０２に送られて、
例えばしきい値判定によりＩフレームであるかＰフレー
ムであるかが判定される。

【００５８】具体的には、差分結果が所定のしきい値を
超えると、動きが大きいとしてＩフレームと判定する。
一方、差分結果が所定のしきい値以下であると、動きが
小さいとしてＰフレームと判定する。この判定結果は、
管理データ付与部６０３に送られる。また、画像ブロッ
ク作成部２０１は、画像枚数や伝送レートの情報に基づ
いて、各ブロックのデータ長さが均一になるようにブロ
ック分けを行なう。

【００５９】次に、ブロック化された画像ストリーム
は、管理データ付与部２０２に送られ、画像ブロックが
１画面における先頭であるかどうかのブロック先頭情報
と、ブロックが継続するか否かのデータ継続情報とが付
与される。また、画像種別情報が画像ストリームに付与
される。この画像種別情報を示す管理データは、Ｉフレ
ームとＰフレームを識別するためには１ビットで良い。
ただし、それ以上のビット数にしてそれ以上の数の画像
種別を行なっても良い。

【００６０】このように管理データ付与された画像スト
リームはメモリ２０３に格納される。すなわち、メモリ
２０３には、図７に示すように、画像種別を示す画像種
別情報７０１と、ブロックの先頭であるかブロックの途
中であるかを示すブロック先頭情報７０２と、ブロック
（データ）が継続するかブロック（データ）が終結する
かを示すデータ継続情報７０３とが、画像ストリーム７
０４に付与された状態で格納される。

【００６１】このように格納された画像ストリームは、
アダプテーションレイヤにおいて、セレクタ１０３で再
送管理を行なうかどうかの選択がなされた後に、誤り検
出符号付与部１０５に送られて、誤り検出符号が付与さ
れる。

【００６２】このように誤り検出符号が付与された画像
ストリームは、多重化部１０６に送られる。また、音声
信号入力端子を介して入力された音声信号は、上述した
ように音声ストリームとなり、アダプテーションレイヤ
において、誤り検出符号付与部１０５で誤り検出符号が
付与されて多重化部１０６に送られる。また、その他の
データについても、上述したようにデータストリームと
なり、アダプテーションレイヤにおいて、誤り検出符号
付与部１０５で誤り検出符号が付与されて多重化部１０
６に送られる。

【００６３】これらの画像ストリーム、音声ストリー
ム、及びデータストリームは、マルチプルレイヤ（ＭＵ
Ｘレイヤ）において、多重化される。ＭＵＸレイヤで
は、各ストリームをパケット（画像パケット、音声パケ
ット、データパケット）にして、例えば、図４に示すよ
うなＭＵＸパケットを構成する。

【００６４】多重化された信号は、アンテナ１０８を介
して受信側装置に伝送される。このとき、画像ストリー
ムについては、送信側では、管理データにより１画面に
おける画像の位置、すなわち画像の先頭と終結を画像ブ
ロック毎に認識することができるので、画像ブロック毎
に送信することができる。また、画像種別を示す管理デ
ータにより、重要な画像を消去することがなくなり、受
信側の画像破綻発生を防止することができる。さらに、
送信側装置におけるバッファを効率良く使用することが
できる。また、受信装置側から再送要求があった場合
に、画像種別を示す管理データを参照して重要度の高い
画像を優先して再送することができる。

【００６５】（実施の形態３）データ伝送装置において
は、送信する画像を蓄積したり、音声を録音することが
考えられる。このような場合に、装置におけるアプリケ
ーションに応じて画像を蓄積したり、音声を録音するこ
とが求められる。そこで、本実施の形態では、画像ブロ
ックにアプリケーション情報を管理データとして付与す
る場合について説明する。

【００６６】通信システムにおけるデータ伝送装置の構
成は図１に示すものとほぼ同じであるので、画像符号化
部１０１の構成を中心に説明する。図８は、本発明の実
施の形態３に係るデータ伝送装置の画像符号化部の構成
を示すブロック図である。

【００６７】図８は、本発明の実施の形態３に係るデー
タ伝送装置の画像符号化部の構成を示すブロック図であ
る。図８に示すように、画像符号化部１０１は、入力さ
れた画像信号を画像符号化すると共に、１画面の画像を
所定数のブロックにブロック化して画像ストリームを得
る画像ブロック作成部２０１と、作成された画像ブロッ
クの画面における位置についての管理データ、例えば画
像ブロックが１画面における先頭であるかどうかのブロ
ック先頭情報、ブロックが継続するか否かのデータ継続
情報、及びアプリケーションにおいて画像をどのように
処理するかを示すアプリケーション情報などをブロック
化された画像ストリームに付与する管理データ付与部８
０２と、管理データが付与された画像ストリームを格納
するメモリ８０３とを有する。

【００６８】また、画像符号化部１０１は、ユーザの操
作によりユーザが求めるアプリケーションを認識するア
プリケーション認識部８０１を有する。

【００６９】上記構成のデータ伝送装置において画像信
号や音声信号などを送信する場合、画像符号化部１０１
に入力された画像信号は、画像ブロック作成部２０１に
送られ、そこで、画像枚数や伝送レートの情報に基づい
て、各ブロックのデータ長さが均一になるようにブロッ
ク分けされる。

【００７０】次に、ブロック化された画像ストリーム
は、管理データ付与部８０２に送られ、画像ブロックが
１画面における先頭であるかどうかのブロック先頭情報
と、ブロックが継続するか否かのデータ継続情報と、ア
プリケーション情報とが付与される。このアプリケーシ
ョン情報を示す管理データは、ユーザの入力にしたがっ
て、画像を送信するか画像を蓄積するかを示すデータで
ある。この場合、画像の送信／蓄積を識別するために
は、１ビットで良いが、それ以上のビット数にしてそれ
以上の数の画像処理を行なうようにしても良い。

【００７１】このように管理データ付与された画像スト
リームはメモリ８０３に格納される。すなわち、メモリ
８０３には、図９に示すように、画像の処理を示すアプ
リケーション情報９０１と、ブロックの先頭であるかブ
ロックの途中であるかを示すブロック先頭情報９０２
と、ブロック（データ）が継続するかブロック（デー
タ）が終結するかを示すデータ継続情報９０３とが、画
像ストリーム９０４に付与された状態で格納される。

【００７２】なお、音声符号化部１０２においても同様
にアプリケーション認識部が設けられており、音声を録
音するか送信するかの管理データが音声ストリームに付
与される。

【００７３】このように格納された画像ストリームは、
アダプテーションレイヤにおいて、セレクタ１０３で再
送管理を行なうかどうかの選択がなされた後に、誤り検
出符号付与部１０５に送られて、誤り検出符号が付与さ
れる。

【００７４】このように誤り検出符号が付与された画像
ストリームは、多重化部１０６に送られる。また、音声
信号入力端子を介して入力された音声信号は、上述した
ように音声ストリームとなり、アダプテーションレイヤ
において、誤り検出符号付与部１０５で誤り検出符号が
付与されて多重化部１０６に送られる。また、その他の
データについても、上述したようにデータストリームと
なり、アダプテーションレイヤにおいて、誤り検出符号
付与部１０５で誤り検出符号が付与されて多重化部１０
６に送られる。

【００７５】これらの画像ストリーム、音声ストリー
ム、及びデータストリームは、マルチプルレイヤ（ＭＵ
Ｘレイヤ）において、多重化される。ＭＵＸレイヤで
は、各ストリームをパケット（画像パケット、音声パケ
ット、データパケット）にして、例えば、図４に示すよ
うなＭＵＸパケットを構成する。

【００７６】多重化された信号は、アンテナ１０８を介
して受信側装置に伝送される。このとき、画像ストリー
ムについては、送信側では、管理データにより１画面に
おける画像の位置、すなわち画像の先頭と終結を画像ブ
ロック毎に認識することができるので、画像ブロック毎
に送信することができる。また、画像の処理、すなわち
画像を送信するか蓄積するかを示す管理データ及び音声
の処理、すなわち音声を録音するか同心するかを示す管
理データにより、種々のアプリケーションに対応するこ
とができる。

【００７７】（実施の形態４）本実施の形態では、受信
側装置において、画像ブロックに誤りのあることを示す
識別子を管理データとして付与する場合について説明す
る。

【００７８】通信システムにおけるデータ伝送装置の構
成は図１に示すものとほぼ同じであるので、受信側装置
の誤り検出・符号削除部１１１の構成を中心に説明す
る。

【００７９】図１０は、本発明の実施の形態４に係るデ
ータ伝送装置の誤り検出・符号削除部の構成を示すブロ
ック図である。図１０に示すように、誤り検出・符号削
除部１１１は、受信された画像ストリームの誤る検出符
号から誤りを検出する誤り検出部１００１と、画像スト
リームから誤り検出符号を削除する誤り符号削除部１０
０２と、誤りがあるかどうかのエラー識別子とをブロッ
ク化された画像ストリームに付与する管理データ付与部
１００３とを有する。

【００８０】上記構成のデータ伝送装置において画像信
号や音声信号などを受信する場合、アンテナ１０９を介
して受信した信号は、分離部１１０に送られ、各ストリ
ームに分離される。分離された画像ストリームや音声ス
トリームは、誤り検出・符号削除部１１１の誤り検出部
１００１に入力され、誤り検出符号を用いて誤り検出を
行なう。なお、誤り検出の方法としては、通常使用され
る方法を採用する。例えば、広く実用に用いられている
巡回符号（ＣＲＣ）を採用する。

【００８１】次いで、誤り検出がなされた画像ストリー
ムや音声ストリームは、誤り符号が削除された後に管理
データ付与部１００３に送られて、誤り検出の結果に基
づいて管理データであるエラー識別子が付与される。こ
の場合、エラー識別子は１ビットで良いが、それ以上の
ビット数にしてそれ以上の数のエラー状況を表わすよう
にしても良い。図１１に示すように、この画像ストリー
ム１１０２には、誤りの有無を示すエラー識別子１１０
１が付与される。なお、音声ストリームについても誤り
の有無を示すエラー識別子が付与される。

【００８２】エラー識別子が付与されたストリームは、
それぞれ画像復号化部１１３及び音声復号化部１１４に
送られ、そこで所定の復号化処理される。このとき、復
号化部１１３，１１４では、エラー識別子を参照して誤
りのあるブロックの復号は行なわない。このように誤り
のあるブロックを復号しないときには、その前に正常に
受信したデータから画像や音声を補間して画像や音声を
作成する。これにより、復号化部１１３，１１４におけ
る処理負荷を小さくすることができる。

【００８３】（実施の形態５）データ伝送装置において
は、受信する画像を蓄積したりすることが考えられる。
このような場合に、装置におけるアプリケーションに応
じて画像を蓄積したりことが求められる。そこで、本実
施の形態では、受信した画像ストリームにアプリケーシ
ョン情報を管理データとして付与する場合について説明
する。

【００８４】通信システムにおけるデータ伝送装置の構
成は図１に示すものとほぼ同じであるので、受信側装置
の再送制御部１１２の構成を中心に説明する。

【００８５】図１２は、本発明の実施の形態５に係るデ
ータ伝送装置の再送制御部の構成を示すブロック図であ
る。図１２に示すように、再送制御部１１２は、ユーザ
の入力に基づくアプリケーションにしたがって、処理す
る画像を選択する画像選択部１２０１と、ユーザの指示
にしたがって画像を静止画表示したり、動画表示した
り、動画を静止画として表示したりする制御を行なう画
像制御部１２０２と、処理対象のが図を格納するメモリ
１２０３と、管理データとして画像の処理内容を示すア
プリケーション情報を画像ストリームに付与する管理デ
ータ付与部１２０４とを有する。

【００８６】上記構成のデータ伝送装置において画像信
号や音声信号などを受信する場合、アンテナ１０９を介
して受信した信号は、分離部１１０に送られ、各ストリ
ームに分離される。分離された画像ストリームは、誤り
検出・符号削除部１１１の誤り検出部１００１に入力さ
れ、誤り検出符号を用いて誤り検出を行なう。なお、誤
り検出の方法としては、通常使用される方法を採用す
る。例えば、広く実用に用いられている巡回符号（ＣＲ
Ｃ）を採用する。

【００８７】次いで、ユーザがアプリケーション、例え
ば動画表示、静止画表示、動画の静止画表示などを操作
した場合、誤り検出がなされた画像ストリームは、画像
選択部１２０１に入力され、そこで処理対象の画像が選
択される。この選択された画像は、ユーザの入力に基づ
くアプリケーションにしたがって静止画表示、動画表
示、動画の静止画表示に制御される。例えば、静止画表
示であれば、メモリ１２０３に格納された画像を表示
し、動画表示や動画の静止画表示であれば、受信された
画像について復号化を行なった後に画像表示する。これ
により、種々のアプリケーションに対応することができ
る。

【００８８】この場合、アプリケーション情報は１ビッ
トで良いが、それ以上のビット数にしてそれ以上の数の
アプリケーションを表わすようにしても良い。図１３に
示すように、この画像ストリーム１３０２には、画像の
処理を示すアプリケーション情報１３０１が付与され
る。

【００８９】なお、上記実施の形態１〜５は、適宜組み
合わせて実施することができる。すなわち、管理データ
については、適宜組み合わせて画像ストリームに付与す
ることが可能である。

【００９０】本発明は、無線通信システムにおける基地
局装置や移動局装置のような通信端末装置に適用するこ
とができる。これにより、通信システムにおいて、伝送
遅延なく通信を行なうことができる。

【００９１】

【発明の効果】以上説明したように本発明のデータ伝送
装置は、画像信号を画像符号化すると共にブロック化す
ることにより画像ストリームを得て、１画面における前
記画像ブロックの位置を示す管理情報を画像ブロック毎
に付与し、前記管理情報に基づいて前記画像ストリーム
に誤り検出符号を付与するので、送信側では、管理デー
タにより１画面における画像の位置、すなわち画像の先
頭と終結を画像ブロック毎に認識することができる。こ
のため、１画面分の画像データをバッファリングする必
要がなく、大きなバッファが必要ない。また、画像ブロ
ック毎に伝送することが可能となるため、伝送遅延を起
こすことなく、符号化データを伝送することができる。

【図面の簡単な説明】

【図１】本発明の実施の形態に係るデータ伝送装置を備
えた通信システムの構成を示すブロック図

【図２】本発明の実施の形態１に係るデータ伝送装置の
画像符号化部の構成を示すブロック図

【図３】上記実施の形態に係るストリーム管理状態を示
す図

【図４】本発明の実施の形態において送信される信号の
パケット構成を示す図

【図５】上記実施の形態に係るデータ伝送装置における
伝送フレームを示す図

【図６】本発明の実施の形態２に係るデータ伝送装置の
画像符号化部の構成を示すブロック図

【図７】上記実施の形態に係るストリーム管理状態を示
す図

【図８】本発明の実施の形態３に係るデータ伝送装置の
画像符号化部の構成を示すブロック図

【図９】上記実施の形態に係るストリーム管理状態を示
す図

【図１０】本発明の実施の形態４に係るデータ伝送装置
の誤り検出・符号削除部の構成を示すブロック図

【図１１】上記実施の形態に係るストリーム管理状態を
示す図

【図１２】本発明の実施の形態５に係るデータ伝送装置
の再送管理部の構成を示すブロック図

【図１３】上記実施の形態に係るストリーム管理状態を
示す図

【図１４】従来のデータ伝送装置における伝送路状態と
画像符号化状態を示すタイミング図

【符号の説明】

１０１ 画像符号化部 １０２ 音声符号化部 １０３ セレクタ １０４，１１２ 再送管理部 １０５ 誤り検出符号付与部 １０６ 多重化部 １０７，１１５ 通信制御部 １１０ 分離部 １１１ 誤り検出・符号削除部 １１３ 画像復号化部 １１４ 音声復号化部 ２０１ 画像ブロック作成部 ２０２，６０３ 管理データ付与部 ６０１ 差分演算部 ６０２ 画像種別判定部 ８０１ アプリケーション認識部 １２０１ 画像選択部 １２０２ 画像制御部

Claims (9)

【特許請求の範囲】
1. 【請求項１】 画像信号を画像符号化すると共にブロッ
   ク化することにより画像ストリームを得る画像ブロック
   作成手段と、１画面における前記画像ブロックの位置を
   示す管理情報を前記画像ブロック毎に付与する管理情報
   付与手段と、前記管理情報に基づいて前記画像ストリー
   ムに誤り検出符号を付与する誤り検出符号付与手段と、
   を具備することを特徴とするデータ伝送装置。
2. 【請求項２】 音声信号を音声符号化処理して得られた
   音声ストリーム及びデータを符号化処理して得られたデ
   ータストリームの少なくとも一つを前記画像ストリーム
   と多重化する多重化手段を具備することを特徴とする請
   求項１記載のデータ伝送装置。
3. 【請求項３】 前記管理情報は、１画面における先頭で
   あるかどうかを示すブロック先頭情報と、ブロックが継
   続するか否かを示すデータ継続情報とを含むことを特徴
   とする請求項１又は請求項２記載のデータ伝送装置。
4. 【請求項４】 前記管理情報は、前記画像ストリームの
   画像種別を示す画像種別情報を含むことを特徴とする請
   求項１から請求項３のいずれかに記載のデータ伝送装
   置。
5. 【請求項５】 画像信号を画像符号化すると共にブロッ
   ク化し、誤り検出符号が付与されて得られた画像ストリ
   ームを、音声信号を音声符号化処理して得られた音声ス
   トリーム及びデータを符号化処理して得られたデータス
   トリームの少なくとも一つと多重化した多重化ストリー
   ムから画像ストリームを分離する分離手段と、前記誤り
   検出符号を用いた誤り検出の結果に基づいて管理情報を
   前記画像ストリームに付与する管理情報付与手段と、を
   具備することを特徴とするデータ伝送装置。
6. 【請求項６】 請求項１から請求項５のいずれかに記載
   のデータ伝送装置を備えたことを特徴とする基地局装
   置。
7. 【請求項７】 請求項１から請求項５のいずれかに記載
   のデータ伝送装置を備えたことを特徴とする通信端末装
   置。
8. 【請求項８】 画像信号を画像符号化すると共にブロッ
   ク化することにより画像ストリームを得る画像ブロック
   作成工程と、１画面における前記画像ブロックの位置を
   示す管理情報を前記画像ブロック毎に付与する管理情報
   付与工程と、前記管理情報に基づいて前記画像ストリー
   ムに誤り検出符号を付与する誤り検出符号付与工程と、
   を具備することを特徴とするデータ伝送方法。
9. 【請求項９】 画像信号を画像符号化すると共にブロッ
   ク化し、誤り検出符号が付与されて得られた画像ストリ
   ームを、音声信号を音声符号化処理して得られた音声ス
   トリーム及びデータを符号化処理して得られたデータス
   トリームの少なくとも一つと多重化した多重化ストリー
   ムから画像ストリームを分離する分離工程と、前記誤り
   検出符号を用いた誤り検出の結果に基づいて管理情報を
   前記画像ストリームに付与する管理情報付与工程と、を
   具備することを特徴とするデータ伝送方法。