JPH09149421A - 画像符号化装置、画像復号化装置及び画像伝送システム - Google Patents
画像符号化装置、画像復号化装置及び画像伝送システムInfo
- Publication number
- JPH09149421A JPH09149421A JP9862996A JP9862996A JPH09149421A JP H09149421 A JPH09149421 A JP H09149421A JP 9862996 A JP9862996 A JP 9862996A JP 9862996 A JP9862996 A JP 9862996A JP H09149421 A JPH09149421 A JP H09149421A
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame
- decoding
- unit
- frame number
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
- H04L1/0014—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the source coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/12—Arrangements for detecting or preventing errors in the information received by using return channel
- H04L1/16—Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
- H04L1/18—Automatic repetition systems, e.g. Van Duuren systems
- H04L1/1809—Selective-repeat protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/162—User input
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/164—Feedback from the receiver or from the transmission channel
- H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
- H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
- H04N21/4385—Multiplex stream processing, e.g. multiplex stream decrypting
- H04N21/43853—Multiplex stream processing, e.g. multiplex stream decrypting involving multiplex stream decryption
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/4425—Monitoring of client processing errors or hardware failure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
- H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6583—Acknowledgement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/12—Arrangements for detecting or preventing errors in the information received by using return channel
- H04L1/16—Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
- H04L1/1607—Details of the supervisory signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
Abstract
(57)【要約】
【課題】 フレーム欠落やコマ落としが発生した場合で
も、後に送られてくるＩフレームを待つことなく、Ｐフ
レームの復号が可能であり、且つ画像品質を向上させ
る。 【解決手段】 最初はフレーム内符号化Ｉフレームａを
送信すると共に、このＩフレームａを参照してフレーム
間符号化を行いＰフレームｂ、ｃ、ｄ、ｅを送信する。
送信側は受信側からＰフレームｅの受信確認が得られる
と、それ以降は参照フレームをフレームｅに切り替えて
符号化してＰフレームｆ、ｇ、ｈを送信し、Ｉフレーム
ｉの受信確認が得られるとＩフレームｉを参照フレーム
に切り替えて、このＩフレームｉを参照してフレーム間
符号化を行ってＰフレームｊ、ｋを送信する。
も、後に送られてくるＩフレームを待つことなく、Ｐフ
レームの復号が可能であり、且つ画像品質を向上させ
る。 【解決手段】 最初はフレーム内符号化Ｉフレームａを
送信すると共に、このＩフレームａを参照してフレーム
間符号化を行いＰフレームｂ、ｃ、ｄ、ｅを送信する。
送信側は受信側からＰフレームｅの受信確認が得られる
と、それ以降は参照フレームをフレームｅに切り替えて
符号化してＰフレームｆ、ｇ、ｈを送信し、Ｉフレーム
ｉの受信確認が得られるとＩフレームｉを参照フレーム
に切り替えて、このＩフレームｉを参照してフレーム間
符号化を行ってＰフレームｊ、ｋを送信する。
Description
【０００１】
【発明の属する技術分野】本発明は画像伝送システム、
画像符号化装置及び画像復号化装置に関し、例えば、画
像伝送におけるフレーム欠落やコマ落としなどによる画
像品質低下に対する改善に適用し得るものである。
画像符号化装置及び画像復号化装置に関し、例えば、画
像伝送におけるフレーム欠落やコマ落としなどによる画
像品質低下に対する改善に適用し得るものである。
【０００２】
【従来の技術】近年、テレビ電話システム、テレビ会議
システム又は、ビデオオンデマンド（ＶＯＤ：Video On
Demand）システムなどといった、ネットワークを伝送
路とする画像信号の伝送システムが普及しつつあり、こ
れに伴い、画像符号化方法の国際標準化作業が進められ
ている。
システム又は、ビデオオンデマンド（ＶＯＤ：Video On
Demand）システムなどといった、ネットワークを伝送
路とする画像信号の伝送システムが普及しつつあり、こ
れに伴い、画像符号化方法の国際標準化作業が進められ
ている。
【０００３】画像符号化方法は、フレーム内符号化とフ
レーム間符号化とを併用するものと、フレーム内符号化
のみを使用するものの２種類に分類することができる。
レーム間符号化とを併用するものと、フレーム内符号化
のみを使用するものの２種類に分類することができる。
【０００４】このうち、フレーム内符号化方式とフレー
ム間符号化方式とを併用するものは、ＩＴＵ−Ｔ勧告
Ｈ.261やＭＰＥＧ（Moving Picture Experts Group）な
どの動画像通信／蓄積用の符号化方式に適用されてい
る。図２は時間順に並べたフレームの例を示すものであ
る。ＩＴＵ−Ｔ勧告Ｈ.261では、図２のように、定期的
にフレーム内符号化（Ｉフレームａ、ｉ）を行うが、そ
の間のＰフレーム（フレーム間符号化フレーム）（ｂ〜
ｈ、ｊ〜）に対する前フレームを参照画像としたフレー
ム間符号化を行うことにより、時間的変化に関わる冗長
度を除いている。以下、フレーム内符号化したフレーム
をＩフレームと呼び、フレーム間符号化したフレームを
Ｐフレームと呼ぶことにする。
ム間符号化方式とを併用するものは、ＩＴＵ−Ｔ勧告
Ｈ.261やＭＰＥＧ（Moving Picture Experts Group）な
どの動画像通信／蓄積用の符号化方式に適用されてい
る。図２は時間順に並べたフレームの例を示すものであ
る。ＩＴＵ−Ｔ勧告Ｈ.261では、図２のように、定期的
にフレーム内符号化（Ｉフレームａ、ｉ）を行うが、そ
の間のＰフレーム（フレーム間符号化フレーム）（ｂ〜
ｈ、ｊ〜）に対する前フレームを参照画像としたフレー
ム間符号化を行うことにより、時間的変化に関わる冗長
度を除いている。以下、フレーム内符号化したフレーム
をＩフレームと呼び、フレーム間符号化したフレームを
Ｐフレームと呼ぶことにする。
【０００５】一方、フレーム内符号化のみを使用するも
のは、ＪＰＥＧ（Joint Photographic Coding Experts
Group ）などの静止画用符号化方式を連続利用し、図３
のように、全フレームに対してフレーム内符号化を行
う。
のは、ＪＰＥＧ（Joint Photographic Coding Experts
Group ）などの静止画用符号化方式を連続利用し、図３
のように、全フレームに対してフレーム内符号化を行
う。
【０００６】
【発明が解決しようとする課題】Ｈ.261は、前フレーム
を参照してフレーム間符号化を行うため、全フレームが
確実に順序良く伝送される必要がある。電話回線やＩＳ
ＤＮ回線のように相手との回線を確立してからデータ伝
送を行う場合には、データが途中で欠落することなく順
次相手に届くので問題はないが、イーサネットなどのＬ
ＡＮやＡＴＭでは回線を確立せず、小さなデータ単位
（パケットやセル）に分割して伝送するため、パケット
が途中で欠落したり、経路の違いから順序が入れ替わっ
たりすることがある。
を参照してフレーム間符号化を行うため、全フレームが
確実に順序良く伝送される必要がある。電話回線やＩＳ
ＤＮ回線のように相手との回線を確立してからデータ伝
送を行う場合には、データが途中で欠落することなく順
次相手に届くので問題はないが、イーサネットなどのＬ
ＡＮやＡＴＭでは回線を確立せず、小さなデータ単位
（パケットやセル）に分割して伝送するため、パケット
が途中で欠落したり、経路の違いから順序が入れ替わっ
たりすることがある。
【０００７】一般的にはこれを解決するために、送信側
でパケットに通し番号を付加して伝送し、受信側で順番
を並べ変えたり、到着確認や、届かなかったパケットの
再送要求を送信側に返送したりするプロトコル（ＴＣ
Ｐ：Transmission Control Protocol 等）を用いてネッ
トワークの信頼性を向上させている。
でパケットに通し番号を付加して伝送し、受信側で順番
を並べ変えたり、到着確認や、届かなかったパケットの
再送要求を送信側に返送したりするプロトコル（ＴＣ
Ｐ：Transmission Control Protocol 等）を用いてネッ
トワークの信頼性を向上させている。
【０００８】しかしながら、ネットワークの動作が不安
定でパケットが頻繁に欠落するような場合には、上記プ
ロトコルを用いて再送処理を行うと遅延が蓄積されるの
で、動画像のリアルタイム伝送には不適切である。特に
新しい画像データが表示可能であるのなら、古いデータ
をわざわざ再送して表示するよりも、コマ落としになっ
ても新しいデータを表示した方が良い場合もある。
定でパケットが頻繁に欠落するような場合には、上記プ
ロトコルを用いて再送処理を行うと遅延が蓄積されるの
で、動画像のリアルタイム伝送には不適切である。特に
新しい画像データが表示可能であるのなら、古いデータ
をわざわざ再送して表示するよりも、コマ落としになっ
ても新しいデータを表示した方が良い場合もある。
【０００９】また、多地点へデータを伝送する際に使用
するブロードキャストやマルチキャストは、１回のパケ
ット送信で複数地点へデータを伝送するための仕組みで
ある。ところが、この仕組みにおいて、１地点へのパケ
ット伝送時に欠落が生じた場合に、上述のプロトコルの
ような再送処理を行うと、他地点のネットワークについ
ては、最初のパケットが正常に到着しているにも関わら
ず、同じパケットを再送しなければならないので、ネッ
トワークの負荷が著しく上昇してしまう。そこで、ブロ
ードキャストやマルチキャストでは再送処理を行わない
プロトコル（ＵＤＰ：User Datagram Protocol等）を使
用するのが普通であり、パケットの欠落が発生する確率
が高くなっている。
するブロードキャストやマルチキャストは、１回のパケ
ット送信で複数地点へデータを伝送するための仕組みで
ある。ところが、この仕組みにおいて、１地点へのパケ
ット伝送時に欠落が生じた場合に、上述のプロトコルの
ような再送処理を行うと、他地点のネットワークについ
ては、最初のパケットが正常に到着しているにも関わら
ず、同じパケットを再送しなければならないので、ネッ
トワークの負荷が著しく上昇してしまう。そこで、ブロ
ードキャストやマルチキャストでは再送処理を行わない
プロトコル（ＵＤＰ：User Datagram Protocol等）を使
用するのが普通であり、パケットの欠落が発生する確率
が高くなっている。
【００１０】また、無線ネットワークを利用する場合に
は、パケット分割して伝送する場合だけでなく、回線を
確立して伝送する場合であってもデータの誤り率や欠落
率が高くなる傾向にある。特に、受信側で誤りを検出し
ても、誤り訂正能力以上の誤りがのっている場合は、他
の部分を正常に処理するためにある区間のデータを廃棄
する方法も採られるため、データ欠落は有線ネットワー
クと比較して大きい。
は、パケット分割して伝送する場合だけでなく、回線を
確立して伝送する場合であってもデータの誤り率や欠落
率が高くなる傾向にある。特に、受信側で誤りを検出し
ても、誤り訂正能力以上の誤りがのっている場合は、他
の部分を正常に処理するためにある区間のデータを廃棄
する方法も採られるため、データ欠落は有線ネットワー
クと比較して大きい。
【００１１】この他、送受信端末間の処理速度は必ずし
も一致しないという問題もある。例えば、受信端末の処
理速度の方が遅い場合、全画像フレームを復号処理して
表示すると、処理待ちのフレームデータが蓄積され、遅
延が大きくなる。そこで、このような場合には、受信側
が適応的にコマ落としをする必要がある。ところが、従
来の手法でフレームをフレーム間符号化すると、前フレ
ームの復号データがない場合には、現フレームを復号で
きず、コマ落しが自由に行えないという問題があった。
も一致しないという問題もある。例えば、受信端末の処
理速度の方が遅い場合、全画像フレームを復号処理して
表示すると、処理待ちのフレームデータが蓄積され、遅
延が大きくなる。そこで、このような場合には、受信側
が適応的にコマ落としをする必要がある。ところが、従
来の手法でフレームをフレーム間符号化すると、前フレ
ームの復号データがない場合には、現フレームを復号で
きず、コマ落しが自由に行えないという問題があった。
【００１２】図４にＨ.261の場合のフレーム欠落の例を
示す。ここで、フレームｅが途中で欠落したり、処理が
間に合わずに復号できなかった場合、次のＩフレームｉ
が到着するまでは、その間のＰフレーム（ｆ、ｇ、ｈ）
は復号できない。
示す。ここで、フレームｅが途中で欠落したり、処理が
間に合わずに復号できなかった場合、次のＩフレームｉ
が到着するまでは、その間のＰフレーム（ｆ、ｇ、ｈ）
は復号できない。
【００１３】そこで、従来はこのようなフレームの欠落
やコマ落しが頻繁に発生するネットワークにおいて全フ
レームを確実に伝送するには、フレーム間符号化を用い
ず、全フレームをフレーム内符号化だけで伝送するＪＰ
ＥＧのような方法を採用していた。例えば、図５に示す
ＪＰＥＧによる符号化方法の場合には、フレームｅが欠
落しても、次のフレームから正常に復号が可能である。
しかしながら、この場合に、フレーム間符号化をしない
ので、時間的な変化の冗長度が除かれず、符号化効率が
悪く伝送データ量が大きいという問題があった。
やコマ落しが頻繁に発生するネットワークにおいて全フ
レームを確実に伝送するには、フレーム間符号化を用い
ず、全フレームをフレーム内符号化だけで伝送するＪＰ
ＥＧのような方法を採用していた。例えば、図５に示す
ＪＰＥＧによる符号化方法の場合には、フレームｅが欠
落しても、次のフレームから正常に復号が可能である。
しかしながら、この場合に、フレーム間符号化をしない
ので、時間的な変化の冗長度が除かれず、符号化効率が
悪く伝送データ量が大きいという問題があった。
【００１４】以上のようなことから、誤りが少ない時の
符号化効率低下は少なく、誤りが発生した場合でも、後
に送られてくるＩフレームを待つことなく、Ｐフレーム
の復号が可能であり、かつ、画質劣化が少ない画像符号
化方法が要望されている。
符号化効率低下は少なく、誤りが発生した場合でも、後
に送られてくるＩフレームを待つことなく、Ｐフレーム
の復号が可能であり、かつ、画質劣化が少ない画像符号
化方法が要望されている。
【００１５】
(1) かかる課題を解決するため、本発明においては、参
照画像を基準に、入力画像を順次予測符号化して出力す
る符号化手段と、当該符号化手段で符号化された符号化
データとそのフレーム番号とを画像復号化装置へ送信す
る送信手段とを有する画像符号化装置において、以下の
ようにしたことを特徴とする。
照画像を基準に、入力画像を順次予測符号化して出力す
る符号化手段と、当該符号化手段で符号化された符号化
データとそのフレーム番号とを画像復号化装置へ送信す
る送信手段とを有する画像符号化装置において、以下の
ようにしたことを特徴とする。
【００１６】すなわち、(i) 画像復号化装置から通知さ
れる復号異常有無信号及びフレーム番号に基づいて、参
照画像の更新を制御する参照画像更新手段を備えたこと
を特徴とする。
れる復号異常有無信号及びフレーム番号に基づいて、参
照画像の更新を制御する参照画像更新手段を備えたこと
を特徴とする。
【００１７】また、本発明においては、予測符号化され
てなる符号化データとそのフレーム番号とを伝送路を介
して受信する受信手段と、当該受信手段によって受信さ
れた符号化データをそのフレーム番号を用いて復号する
復号化手段とを有する画像復号化装置において、以下の
ようにしたことを特徴とする。
てなる符号化データとそのフレーム番号とを伝送路を介
して受信する受信手段と、当該受信手段によって受信さ
れた符号化データをそのフレーム番号を用いて復号する
復号化手段とを有する画像復号化装置において、以下の
ようにしたことを特徴とする。
【００１８】すなわち、(i) 復号化手段における各符号
化データの復号結果を表す復号異常有無信号と共に、当
該符号化データに対応するフレーム番号を画像符号化装
置へ出力する復号異常有無信号送信手段を備えたことを
特徴とする。
化データの復号結果を表す復号異常有無信号と共に、当
該符号化データに対応するフレーム番号を画像符号化装
置へ出力する復号異常有無信号送信手段を備えたことを
特徴とする。
【００１９】これらの構成により、符号化データを送信
する伝送路が、フレーム欠落が少ない伝送品質の高い伝
送路であるか、それともフレーム欠落が多く発生する伝
送品質の低い伝送路であるかを画像符号化装置側で認識
することができ、伝送状態に応じた符号化を実現でき
る。すなわち、フレーム欠落の少ない伝送路では、頻繁
に参照画像を更新することにより画像品質を向上させる
一方、フレーム欠落の多い伝送路では、参照画像の更新
頻度は低下するものの画像復号化装置側で確実に復号す
ることができた画像を参照画像に用いて符号化できるの
で、後に送られてくるＩフレームを待たずにＰフレーム
を復号することができる。
する伝送路が、フレーム欠落が少ない伝送品質の高い伝
送路であるか、それともフレーム欠落が多く発生する伝
送品質の低い伝送路であるかを画像符号化装置側で認識
することができ、伝送状態に応じた符号化を実現でき
る。すなわち、フレーム欠落の少ない伝送路では、頻繁
に参照画像を更新することにより画像品質を向上させる
一方、フレーム欠落の多い伝送路では、参照画像の更新
頻度は低下するものの画像復号化装置側で確実に復号す
ることができた画像を参照画像に用いて符号化できるの
で、後に送られてくるＩフレームを待たずにＰフレーム
を復号することができる。
【００２０】(2) また、かかる課題を解決するため、本
発明においては、参照画像を基準に、入力画像を順次予
測符号化して出力する符号化手段と、当該符号化手段で
符号化された符号化データを画像復号化装置へ送信する
送信手段とを有する画像符号化装置において、符号化手
段を以下のようにしたことを特徴とする。
発明においては、参照画像を基準に、入力画像を順次予
測符号化して出力する符号化手段と、当該符号化手段で
符号化された符号化データを画像復号化装置へ送信する
送信手段とを有する画像符号化装置において、符号化手
段を以下のようにしたことを特徴とする。
【００２１】すなわち、符号化手段は、(i) フレーム内
符号化された入力画像のうち最近のものを参照画像とし
て用いてフレーム間符号化することにより、現時点の入
力画像についての１階層目の符号化データを送信手段に
与える中間データ生成部と、(ii)中間データ生成部から
入力した符号化データを復号し、中間画像を生成する中
間画像生成部と、(iii) 中間画像を、以前にフレーム間
符号化された画像を参照画像に用いて再度フレーム間符
号化し、現時点の入力画像についての２階層目の符号化
データを生成する最終データ生成部とを備えたことを特
徴とする。
符号化された入力画像のうち最近のものを参照画像とし
て用いてフレーム間符号化することにより、現時点の入
力画像についての１階層目の符号化データを送信手段に
与える中間データ生成部と、(ii)中間データ生成部から
入力した符号化データを復号し、中間画像を生成する中
間画像生成部と、(iii) 中間画像を、以前にフレーム間
符号化された画像を参照画像に用いて再度フレーム間符
号化し、現時点の入力画像についての２階層目の符号化
データを生成する最終データ生成部とを備えたことを特
徴とする。
【００２２】また、本発明においては、予測符号化され
てなる符号化データとその階層情報とを伝送路を介して
受信する受信手段と、当該受信手段によって受信された
符号化データを階層情報を用いて復号する復号化手段と
を有する画像復号化装置において、復号手段を以下のよ
うにしたことを特徴とする。
てなる符号化データとその階層情報とを伝送路を介して
受信する受信手段と、当該受信手段によって受信された
符号化データを階層情報を用いて復号する復号化手段と
を有する画像復号化装置において、復号手段を以下のよ
うにしたことを特徴とする。
【００２３】すなわち、復号手段は、(i) 階層情報によ
って１階層目の符号化データと判別された符号化データ
を、先に復号したフレーム内符号化画像のうち最近のも
のを参照して復号し、中間画像を生成する中間画像生成
部と、(ii)階層情報によって２階層目の符号化データと
判別された符号化データを、当該符号化データを符号化
する際に用いた画像を参照画像として用いて復号し、復
号結果を前記中間画像に付加する最終画像生成部とを備
えたことを特徴とする。
って１階層目の符号化データと判別された符号化データ
を、先に復号したフレーム内符号化画像のうち最近のも
のを参照して復号し、中間画像を生成する中間画像生成
部と、(ii)階層情報によって２階層目の符号化データと
判別された符号化データを、当該符号化データを符号化
する際に用いた画像を参照画像として用いて復号し、復
号結果を前記中間画像に付加する最終画像生成部とを備
えたことを特徴とする。
【００２４】これらの構成により、途中のＰフレームに
フレーム欠落が生じても、次のＰフレームについては最
近のＩフレームを参照したフレーム間符号化フレームの
段階までは復号化することができる。これにより、フレ
ーム欠落が発生しても、後に送られてくるＩフレームを
待たずにＰフレームを復号可能にすることができる。
フレーム欠落が生じても、次のＰフレームについては最
近のＩフレームを参照したフレーム間符号化フレームの
段階までは復号化することができる。これにより、フレ
ーム欠落が発生しても、後に送られてくるＩフレームを
待たずにＰフレームを復号可能にすることができる。
【００２５】
【発明の実施の形態】以下、本発明の実施形態を、図面
を参照しながら説明する。
を参照しながら説明する。
【００２６】（Ａ）第１の実施形態 第１の実施形態では、最近のＩフレームを参照して符号
化して中間符号を生成する手段と、中間符号を復号化し
て中間画像を生成する手段と、中間画像を直前Ｐフレー
ムを参照して符号化する手段とを備え、２段階に分けて
符号化するように画像符号化装置を構成する。
化して中間符号を生成する手段と、中間符号を復号化し
て中間画像を生成する手段と、中間画像を直前Ｐフレー
ムを参照して符号化する手段とを備え、２段階に分けて
符号化するように画像符号化装置を構成する。
【００２７】更に、画像復号化装置を、受信した中間符
号を最近のＩフレームを参照して復号化して中間画像を
生成する手段と、第２符号を直前Ｐフレームを参照して
復号化して、この復号結果を中間画像へ加算する手段と
を備えて、２段階に分けて復号化するように構成する。
号を最近のＩフレームを参照して復号化して中間画像を
生成する手段と、第２符号を直前Ｐフレームを参照して
復号化して、この復号結果を中間画像へ加算する手段と
を備えて、２段階に分けて復号化するように構成する。
【００２８】（Ａ−１）動画像符号化装置（送信側）１
００の構成 図６は動画像符号化装置（送信側）１００の機能構成図
である。この図６において、動画像符号化装置（送信
側）１００は、動画像入力部１０１と、intra/inter 判
断部１０２と、Ｉフレームメモリ部１０３と、Ｐフレー
ムメモリ部１０４と、符号化部１０５と、復号化部１０
６と、符号データ送信部１０７とから構成されている。
００の構成 図６は動画像符号化装置（送信側）１００の機能構成図
である。この図６において、動画像符号化装置（送信
側）１００は、動画像入力部１０１と、intra/inter 判
断部１０２と、Ｉフレームメモリ部１０３と、Ｐフレー
ムメモリ部１０４と、符号化部１０５と、復号化部１０
６と、符号データ送信部１０７とから構成されている。
【００２９】動画像入力部１０１は、ビデオカメラ等か
ら入力された動画像データをフレーム毎に符号化部１０
５へ与えるものである。intra/inter 判断部１０２は、
フレーム内符号化を行うか、フレーム間符号化を行うか
を判断するものである。
ら入力された動画像データをフレーム毎に符号化部１０
５へ与えるものである。intra/inter 判断部１０２は、
フレーム内符号化を行うか、フレーム間符号化を行うか
を判断するものである。
【００３０】ここで、intra とはフレーム内符号化であ
り、inter とはフレーム間符号化を表す。通常は定期的
（例えば、３０フレームごと）にフレーム内符号化を行
い、その他の期間はフレーム間符号化を行うが、受信側
（動画像復号化装置２００）からリフレッシュ信号を受
信した場合は、強制的にフレーム内符号化を行う。フレ
ーム内符号化と判断した場合は、符号化部１０５と復号
化部１０６へその旨を通知する。
り、inter とはフレーム間符号化を表す。通常は定期的
（例えば、３０フレームごと）にフレーム内符号化を行
い、その他の期間はフレーム間符号化を行うが、受信側
（動画像復号化装置２００）からリフレッシュ信号を受
信した場合は、強制的にフレーム内符号化を行う。フレ
ーム内符号化と判断した場合は、符号化部１０５と復号
化部１０６へその旨を通知する。
【００３１】Ｉフレームメモリ部１０３は、固定参照す
るＩフレームデータを記憶するメモリ回路である。Ｐフ
レームメモリ部１０４は直前のＰフレームデータを記憶
するメモリ回路である。符号化部１０５は、intra/inte
r 判断部１０２の指示に従って、入力されたフレームデ
ータを符号化するものである。この符号化は、『第１段
階』と『第２段階』の２段階に分けて行われる。
るＩフレームデータを記憶するメモリ回路である。Ｐフ
レームメモリ部１０４は直前のＰフレームデータを記憶
するメモリ回路である。符号化部１０５は、intra/inte
r 判断部１０２の指示に従って、入力されたフレームデ
ータを符号化するものである。この符号化は、『第１段
階』と『第２段階』の２段階に分けて行われる。
【００３２】『第１段階』では、動画像入力部１０１か
らのデータをＩフレームメモリ部１０３を参照してフレ
ーム間符号化を行い、符号化されたデータを符号データ
送信部１０７へ渡すと同時に復号化部１０６へも渡す。
『第２段階』では、復号化部１０６からのデータをＰフ
レームメモリ部１０４を参照してフレーム間符号化を行
い、符号化されたデータを符号データ送信部１０７へ与
える。但し、Ｉフレームの場合は通常通りフレーム内符
号化を行う。また、例外としてＩフレームの直後のＰフ
レームは、第１段階だけのフレーム間符号化を行い、符
号化されたデータを符号データ送信部１０７へ渡す。
らのデータをＩフレームメモリ部１０３を参照してフレ
ーム間符号化を行い、符号化されたデータを符号データ
送信部１０７へ渡すと同時に復号化部１０６へも渡す。
『第２段階』では、復号化部１０６からのデータをＰフ
レームメモリ部１０４を参照してフレーム間符号化を行
い、符号化されたデータを符号データ送信部１０７へ与
える。但し、Ｉフレームの場合は通常通りフレーム内符
号化を行う。また、例外としてＩフレームの直後のＰフ
レームは、第１段階だけのフレーム間符号化を行い、符
号化されたデータを符号データ送信部１０７へ渡す。
【００３３】復号化部１０６は、符号化部１０５で一度
符号化されたデータを復号するものであり、復号データ
を符号化部１０５へ返すと同時に、intra/inter判断部
１０２の指示に従いＩフレームメモリ部１０３、又はＰ
フレームメモリ部１０４へフレーム番号と共に書き込
む。この際にフレーム内符号化の指示の場合だけＩフレ
ームメモリ部１０３へ書き込み、フレーム間符号化の指
示の場合はＰフレームメモリ部１０４へ書き込む。
符号化されたデータを復号するものであり、復号データ
を符号化部１０５へ返すと同時に、intra/inter判断部
１０２の指示に従いＩフレームメモリ部１０３、又はＰ
フレームメモリ部１０４へフレーム番号と共に書き込
む。この際にフレーム内符号化の指示の場合だけＩフレ
ームメモリ部１０３へ書き込み、フレーム間符号化の指
示の場合はＰフレームメモリ部１０４へ書き込む。
【００３４】符号データ送信部１０７は、符号化された
動画像データを受信側の動画像復号化装置２００へ送信
するものである。データにはintra/inter を表すフラグ
や第１段階符号を表すフラグ、第２段階符号を表すフラ
グなどを多重する。また、必要に応じて送信元情報や送
信先情報などを多重して伝送する。ここで、第１段階符
号と第２段階符号とを多重して送信してもよい。
動画像データを受信側の動画像復号化装置２００へ送信
するものである。データにはintra/inter を表すフラグ
や第１段階符号を表すフラグ、第２段階符号を表すフラ
グなどを多重する。また、必要に応じて送信元情報や送
信先情報などを多重して伝送する。ここで、第１段階符
号と第２段階符号とを多重して送信してもよい。
【００３５】（Ａ−２）動画像復号化装置（受信側）２
００の構成 図７は、動画像復号化装置（受信側）２００の機能構成
図である。この図７において、動画像復号化装置（受信
側）２００は、符号データ受信部２０１と、復号化部２
０２と、Ｉフレームメモリ部２０３と、Ｐフレームメモ
リ部２０４と、動画像出力部２０５と、リフレッシュ信
号送信部２０６とから構成されている。
００の構成 図７は、動画像復号化装置（受信側）２００の機能構成
図である。この図７において、動画像復号化装置（受信
側）２００は、符号データ受信部２０１と、復号化部２
０２と、Ｉフレームメモリ部２０３と、Ｐフレームメモ
リ部２０４と、動画像出力部２０５と、リフレッシュ信
号送信部２０６とから構成されている。
【００３６】符号データ受信部２０１は、符号化された
動画像データを送信側の動画像符号化装置１００から受
信するものである。符号データとデータに多重されてin
tra/inter を表すフラグや、第１段階符号を表すフラグ
や、第２段階符号を表すフラグなどを復号化部２０２へ
渡し、必要に応じて多重されている送信元情報などを復
号化部２０２へ渡すものである。
動画像データを送信側の動画像符号化装置１００から受
信するものである。符号データとデータに多重されてin
tra/inter を表すフラグや、第１段階符号を表すフラグ
や、第２段階符号を表すフラグなどを復号化部２０２へ
渡し、必要に応じて多重されている送信元情報などを復
号化部２０２へ渡すものである。
【００３７】復号化部２０２は、入力された符号データ
を復号化して動画像出力部２０５へ与えるものであり、
復号化に際しては『第１段階』と『第２段階』との２段
階に分けて行う。『第１段階』では、符号データ受信部
２０１からの第１段階符号データをＩフレームメモリ部
２０３を参照してフレーム間復号化する。『第２段階』
では、更に第２段階符号データをＰフレームメモリ部２
０４を参照してフレーム間復号化し、第１段階で復号さ
れたデータに加算する。但し、Ｉフレームの場合は通常
通りフレーム内復号化を行う。また、例外としてＩフレ
ームの直後のＰフレームは、第１段階だけのフレーム間
復号化を行う。
を復号化して動画像出力部２０５へ与えるものであり、
復号化に際しては『第１段階』と『第２段階』との２段
階に分けて行う。『第１段階』では、符号データ受信部
２０１からの第１段階符号データをＩフレームメモリ部
２０３を参照してフレーム間復号化する。『第２段階』
では、更に第２段階符号データをＰフレームメモリ部２
０４を参照してフレーム間復号化し、第１段階で復号さ
れたデータに加算する。但し、Ｉフレームの場合は通常
通りフレーム内復号化を行う。また、例外としてＩフレ
ームの直後のＰフレームは、第１段階だけのフレーム間
復号化を行う。
【００３８】Ｉフレームメモリ部２０３は、固定参照す
るＩフレームデータを記憶するメモリ回路である。Ｐフ
レームメモリ部２０４は、直前のＰフレームデータを記
憶するメモリ回路である。
るＩフレームデータを記憶するメモリ回路である。Ｐフ
レームメモリ部２０４は、直前のＰフレームデータを記
憶するメモリ回路である。
【００３９】動画像出力部２０５は、復号化部２０２か
ら受けた復号データをモニタ用表示装置などに出力する
ものである。リフレッシュ信号送信部２０６は、ユーザ
からのリフレッシュ要求信号に従って送信側の動画像符
号化装置１００にリフレッシュ信号を送信するものであ
る。
ら受けた復号データをモニタ用表示装置などに出力する
ものである。リフレッシュ信号送信部２０６は、ユーザ
からのリフレッシュ要求信号に従って送信側の動画像符
号化装置１００にリフレッシュ信号を送信するものであ
る。
【００４０】（Ａ−３）動作説明 本発明は特開平７−９５５７１号公報『画像符号化装
置、画像復号化装置及び多地点間データ伝送方法』で示
したことと同じように、Ｉフレームを固定参照フレーム
として符号化する（図８の説明図）。更に、『直前のＰ
フレームを参照して再度符号化するようにして、２段階
の符号化を行う』ものである。
置、画像復号化装置及び多地点間データ伝送方法』で示
したことと同じように、Ｉフレームを固定参照フレーム
として符号化する（図８の説明図）。更に、『直前のＰ
フレームを参照して再度符号化するようにして、２段階
の符号化を行う』ものである。
【００４１】図９は、本第１の実施形態の画像符号化の
概念を示す説明図である。この図９において、上段Ａ〜
Ｅが入力された原画像を表し、ｃ０、ｄ０、ｅ０が中間
的な第１段階画像を表し、ａ〜ｅが最終画像を表すもの
である。
概念を示す説明図である。この図９において、上段Ａ〜
Ｅが入力された原画像を表し、ｃ０、ｄ０、ｅ０が中間
的な第１段階画像を表し、ａ〜ｅが最終画像を表すもの
である。
【００４２】１フレーム目の原画像Ａは、そのままフレ
ーム内符号化を行い、Ｉフレームａとなる。２フレーム
目の原画像Ｂは、原画像Ａを参照した通常のフレーム間
符号化を行ってＰフレームｂとなる。３フレーム目の画
像Ｃは、原画像Ａを参照したフレーム間符号化を行って
符号化部１０５で第１段階符号を生成する。この第１段
階符号を復号化部１０６で一度復号化した画像がｃ０で
ある。更に、原画像Ｂを参照したフレーム間符号化を行
って最終画像Ｐフレームｃを生成する。このようにして
４フレーム目以降も同様に符号化を行う。
ーム内符号化を行い、Ｉフレームａとなる。２フレーム
目の原画像Ｂは、原画像Ａを参照した通常のフレーム間
符号化を行ってＰフレームｂとなる。３フレーム目の画
像Ｃは、原画像Ａを参照したフレーム間符号化を行って
符号化部１０５で第１段階符号を生成する。この第１段
階符号を復号化部１０６で一度復号化した画像がｃ０で
ある。更に、原画像Ｂを参照したフレーム間符号化を行
って最終画像Ｐフレームｃを生成する。このようにして
４フレーム目以降も同様に符号化を行う。
【００４３】即ち、『Ｉフレーム直後のＰフレーム以外
は全てＩフレームと直前のＰフレームの両方を参照した
フレーム間符号化を行う』。ここで、符号量を抑えるに
は、第１段階符号化で量子化サイズを大きくして大まか
な画像を生成して、第２段階符号化で量子化サイズを小
さくして詳細なデータを生成する。
は全てＩフレームと直前のＰフレームの両方を参照した
フレーム間符号化を行う』。ここで、符号量を抑えるに
は、第１段階符号化で量子化サイズを大きくして大まか
な画像を生成して、第２段階符号化で量子化サイズを小
さくして詳細なデータを生成する。
【００４４】即ち、入力動画像データは、動画像入力部
１０１に与えられると、この動画像データはフレーム毎
に符号化部１０５へ与えられる。リフレッシュ信号がin
tra/inter 判断部１０２に与えられるとフレーム内符号
化を行うか、フレーム間符号化を行うかを判断し、符号
化部１０５と、復号化部１０６とを制御する。フレーム
毎の動画像データは、符号化部１０５でintra/inter 判
断部１０２の指示に従って、入力されたフレームデータ
を符号化して、符号データが符号データ送信部１０７に
与えられる。
１０１に与えられると、この動画像データはフレーム毎
に符号化部１０５へ与えられる。リフレッシュ信号がin
tra/inter 判断部１０２に与えられるとフレーム内符号
化を行うか、フレーム間符号化を行うかを判断し、符号
化部１０５と、復号化部１０６とを制御する。フレーム
毎の動画像データは、符号化部１０５でintra/inter 判
断部１０２の指示に従って、入力されたフレームデータ
を符号化して、符号データが符号データ送信部１０７に
与えられる。
【００４５】この符号化では、第１段階では動画像入力
部１０１からのデータがＩフレームメモリ部１０３を参
照してフレーム間符号化を行い、符号化されたデータが
符号データ送信部１０７へ与えられると同時に復号化部
１０６へも与えられる。第２段階では復号化部１０６か
らのデータがＰフレームメモリ部１０４を参照してフレ
ーム間符号化が行われて、符号化されたデータが符号デ
ータ送信部１０７へ与えられる。符号データは符号デー
タ送信部１０７から送信される。
部１０１からのデータがＩフレームメモリ部１０３を参
照してフレーム間符号化を行い、符号化されたデータが
符号データ送信部１０７へ与えられると同時に復号化部
１０６へも与えられる。第２段階では復号化部１０６か
らのデータがＰフレームメモリ部１０４を参照してフレ
ーム間符号化が行われて、符号化されたデータが符号デ
ータ送信部１０７へ与えられる。符号データは符号デー
タ送信部１０７から送信される。
【００４６】受信側の動画像復号化装置２００では、先
ず第１段階符号を画像Ａを参照して復号して第１段階画
像を生成し、更に、第２段階符号を直前Ｐフレームを参
照して復号して最終画像を生成する。即ち、動画像復号
化装置（受信側）２００では、符号データが符号データ
受信部２０１に与えられると、符号データとデータに多
重されてintra/inter を表すフラグや、第１段階符号を
表すフラグや、第２段階符号を表すフラグなどが、復号
化部２０２へ与えられる。復号化部２０２では、入力さ
れた符号データを復号化が２段階に分けて行われる。第
１段階では符号データ受信部２０１からの第１段階符号
データに対してＩフレームメモリ部２０３を参照してフ
レーム間復号化が行われる。第２段階では更に第２段階
符号データがＰフレームメモリ部２０４を参照してフレ
ーム間復号化され、第１段階で復号されたデータに加算
される。復号化部２０２で復号された復号データは動画
像出力部２０５からモニタ用表示装置などに出力される
ものである。
ず第１段階符号を画像Ａを参照して復号して第１段階画
像を生成し、更に、第２段階符号を直前Ｐフレームを参
照して復号して最終画像を生成する。即ち、動画像復号
化装置（受信側）２００では、符号データが符号データ
受信部２０１に与えられると、符号データとデータに多
重されてintra/inter を表すフラグや、第１段階符号を
表すフラグや、第２段階符号を表すフラグなどが、復号
化部２０２へ与えられる。復号化部２０２では、入力さ
れた符号データを復号化が２段階に分けて行われる。第
１段階では符号データ受信部２０１からの第１段階符号
データに対してＩフレームメモリ部２０３を参照してフ
レーム間復号化が行われる。第２段階では更に第２段階
符号データがＰフレームメモリ部２０４を参照してフレ
ーム間復号化され、第１段階で復号されたデータに加算
される。復号化部２０２で復号された復号データは動画
像出力部２０５からモニタ用表示装置などに出力される
ものである。
【００４７】図１０は、本第１の実施形態において、フ
レーム欠落した場合の説明図である。Ｐフレームｅが欠
落しても、次のＰフレームｆは第１段階画像まで復号す
ることができる。また、その後のＰフレームｇもｆが正
しい画像でないため、第２段階復号を行っても実際には
完璧な正しい最終画像を得ることはできないが、第１段
階復号のままと比較すると画像品質を向上させることが
できる。
レーム欠落した場合の説明図である。Ｐフレームｅが欠
落しても、次のＰフレームｆは第１段階画像まで復号す
ることができる。また、その後のＰフレームｇもｆが正
しい画像でないため、第２段階復号を行っても実際には
完璧な正しい最終画像を得ることはできないが、第１段
階復号のままと比較すると画像品質を向上させることが
できる。
【００４８】本第１の実施形態において安定した伝送路
では全フレームが受信できるので、復号画像の画像品質
はＨ.261のような前フレームだけを参照する場合に近付
くことができる。また、フレーム欠落が多い伝送路では
特開平７−９５５７１号公報の画像符号化装置、画像復
号化装置と同じ程度の画像品質を得ることができる。こ
のように伝送路の状態に合わせてスケーラブルに復号画
像品質を変化させて向上させることができる。
では全フレームが受信できるので、復号画像の画像品質
はＨ.261のような前フレームだけを参照する場合に近付
くことができる。また、フレーム欠落が多い伝送路では
特開平７−９５５７１号公報の画像符号化装置、画像復
号化装置と同じ程度の画像品質を得ることができる。こ
のように伝送路の状態に合わせてスケーラブルに復号画
像品質を変化させて向上させることができる。
【００４９】（Ａ−４）第１の実施形態の効果 以上のように、本発明の第１の実施形態によれば、フレ
ーム欠落の少ない伝送路ではＨ.261などの一般の符号化
方式と復号画像品質が同じ程度となる。
ーム欠落の少ない伝送路ではＨ.261などの一般の符号化
方式と復号画像品質が同じ程度となる。
【００５０】また、フレーム欠落が多い伝送路では、多
くのフレームがＩフレームを参照した復号しかできない
が、受信できた全フレームは復号可能である。更に、伝
送路の状態に合わせて復号画像の画像品質がスケーラブ
ルに変化する符号化方式を実現することができる。
くのフレームがＩフレームを参照した復号しかできない
が、受信できた全フレームは復号可能である。更に、伝
送路の状態に合わせて復号画像の画像品質がスケーラブ
ルに変化する符号化方式を実現することができる。
【００５１】（Ａ−５）第１の実施形態の変形例 (1) 上述の図６で符号化部１０５で一度符号化したデー
タを復号化部１０６で復号したものをフレームメモリ部
１０３、１０４へ記憶するようにしたが、これに限定す
るものではない。例えば、図１１は、第１の実施形態の
変形例の動画像符号化装置１１０の機能構成図である。
この図１１において、動画像符号化装置１１０は、符号
データ送信部１０７と、動画像入力部１１１と、intra/
inter 判断部１１２と、Ｉフレームメモリ１１３と、Ｐ
フレームメモリ部１１４と、符号化部１１５と、復号化
部１１６とから構成されている。
タを復号化部１０６で復号したものをフレームメモリ部
１０３、１０４へ記憶するようにしたが、これに限定す
るものではない。例えば、図１１は、第１の実施形態の
変形例の動画像符号化装置１１０の機能構成図である。
この図１１において、動画像符号化装置１１０は、符号
データ送信部１０７と、動画像入力部１１１と、intra/
inter 判断部１１２と、Ｉフレームメモリ１１３と、Ｐ
フレームメモリ部１１４と、符号化部１１５と、復号化
部１１６とから構成されている。
【００５２】この図１１において、動画像入力部１１１
から直接画像をＩフレームメモリ部１１３と、Ｐフレー
ムメモリ部１１４とへ記憶する構成にしている。このよ
うな構成において、符号化部１１５では原画像をＩフレ
ームメモリ部１１３と、Ｐフレームメモリ部１１４とで
参照することになるので、動き補償などの精度が向上す
るという効果がある。
から直接画像をＩフレームメモリ部１１３と、Ｐフレー
ムメモリ部１１４とへ記憶する構成にしている。このよ
うな構成において、符号化部１１５では原画像をＩフレ
ームメモリ部１１３と、Ｐフレームメモリ部１１４とで
参照することになるので、動き補償などの精度が向上す
るという効果がある。
【００５３】(2) また、上述の図７の受信側の動画像復
号化装置２００のリフレッシュ信号送信部２０６はユー
ザからのリフレッシュ要求信号にだけ反応するように説
明したが、これに限定するものではない。例えば、復号
化部２０２が復号の状態をチェックするようにし、復号
状態が良くない場合は、リフレッシュ信号送信部２０６
へリフレッシュ要求信号を自動的に出すようにしても良
い。この場合、ユーザからの要求がなくても画像品質が
劣化すると自動的にリフレッシュされるので、ユーザの
負担を軽減することができる。
号化装置２００のリフレッシュ信号送信部２０６はユー
ザからのリフレッシュ要求信号にだけ反応するように説
明したが、これに限定するものではない。例えば、復号
化部２０２が復号の状態をチェックするようにし、復号
状態が良くない場合は、リフレッシュ信号送信部２０６
へリフレッシュ要求信号を自動的に出すようにしても良
い。この場合、ユーザからの要求がなくても画像品質が
劣化すると自動的にリフレッシュされるので、ユーザの
負担を軽減することができる。
【００５４】(3) 以上までは、２段階の符号化における
参照フレームをＩフレームと直前のＰフレームに対して
説明したが、これに限定するものではない。例えば、任
意の２つのフレームを参照して符号化を行うようにして
もよい。
参照フレームをＩフレームと直前のＰフレームに対して
説明したが、これに限定するものではない。例えば、任
意の２つのフレームを参照して符号化を行うようにして
もよい。
【００５５】（Ｂ）第２の実施形態 第２の実施形態では、画像符号化装置を、受信側から復
号に成功したフレーム番号を受信する手段と、受信側が
復号に成功したフレームに参照フレームを切り替える手
段と、切り替えられた参照フレームを利用して符号化す
る手段と、復号データと参照フレーム番号とを送信する
手段とを備えて、参照フレームを適宜更新しながら符号
化するように構成する。
号に成功したフレーム番号を受信する手段と、受信側が
復号に成功したフレームに参照フレームを切り替える手
段と、切り替えられた参照フレームを利用して符号化す
る手段と、復号データと参照フレーム番号とを送信する
手段とを備えて、参照フレームを適宜更新しながら符号
化するように構成する。
【００５６】また、第２の実施形態では、画像復号化装
置を、受信した参照フレーム番号に合わせて参照フレー
ムを切り替える手段と、切り替えられた参照フレームを
利用して復号する手段と、復号に成功したフレーム番号
を送信側へ送信する手段とを備えて、参照フレームを適
宜更新しながら復号化するように構成する。
置を、受信した参照フレーム番号に合わせて参照フレー
ムを切り替える手段と、切り替えられた参照フレームを
利用して復号する手段と、復号に成功したフレーム番号
を送信側へ送信する手段とを備えて、参照フレームを適
宜更新しながら復号化するように構成する。
【００５７】更に、上述の画像符号化装置の構成におい
て、多地点間接続している場合には、送信側で全受信端
末が復号に成功したフレームを算出して参照フレームを
切り替えるように構成することも好ましい。
て、多地点間接続している場合には、送信側で全受信端
末が復号に成功したフレームを算出して参照フレームを
切り替えるように構成することも好ましい。
【００５８】更にまた、上述の画像符号化装置と画像復
号化装置との構成において、参照フレームだけを記録す
るフレームメモリと、その他のフレームを記録するフレ
ームメモリとを備えて、参照フレームを更新する際にフ
レームメモリから該当フレームデータをコピーするよう
に構成することも好ましい。
号化装置との構成において、参照フレームだけを記録す
るフレームメモリと、その他のフレームを記録するフレ
ームメモリとを備えて、参照フレームを更新する際にフ
レームメモリから該当フレームデータをコピーするよう
に構成することも好ましい。
【００５９】また、上述の画像符号化装置と画像復号化
装置との構成において、全フレームを記録するフレーム
メモリと、参照フレームを指示して示すポインタとを備
えて、参照フレームを更新する際に、ポインタ位置だけ
を更新するように構成することも好ましい。
装置との構成において、全フレームを記録するフレーム
メモリと、参照フレームを指示して示すポインタとを備
えて、参照フレームを更新する際に、ポインタ位置だけ
を更新するように構成することも好ましい。
【００６０】（Ｂ−１）動画像符号化装置（送信側）３
００の構成 図１２は、第２の実施形態の動画像符号化装置（送信
側）３００の機能構成図である。この図１２において、
動画像符号化装置（送信側）３００は、動画像入力部３
０１と、符号化部３０２と、復号化部３０３と、フレー
ムメモリ部３０４と、参照フレームメモリ部３０５と、
intra/inter 判断部３０６と、符号データ送信部３０７
と、確認信号受信部３０８と、参照フレーム更新部３０
９とから構成されている。
００の構成 図１２は、第２の実施形態の動画像符号化装置（送信
側）３００の機能構成図である。この図１２において、
動画像符号化装置（送信側）３００は、動画像入力部３
０１と、符号化部３０２と、復号化部３０３と、フレー
ムメモリ部３０４と、参照フレームメモリ部３０５と、
intra/inter 判断部３０６と、符号データ送信部３０７
と、確認信号受信部３０８と、参照フレーム更新部３０
９とから構成されている。
【００６１】動画像入力部３０１は、ビデオカメラなど
から入力された動画像データをフレーム毎に符号化部３
０２に与えるものである。符号化部３０２は、入力され
たフレームデータを符号化するものであり、符号データ
を復号化部３０３と符号データ送信部３０７へ与える。
この符号化に際しては、intra/inter 判断部３０６の指
示に従ってフレーム内符号化とフレーム間符号化を切り
替えて行う。ここで、intra とはフレーム内符号化を表
し、inter とはフレーム間フレーム間符号化を表すもの
である。『フレーム間符号化時には参照フレームメモリ
部３０５にあるフレームデータを参照して符号化す
る』。
から入力された動画像データをフレーム毎に符号化部３
０２に与えるものである。符号化部３０２は、入力され
たフレームデータを符号化するものであり、符号データ
を復号化部３０３と符号データ送信部３０７へ与える。
この符号化に際しては、intra/inter 判断部３０６の指
示に従ってフレーム内符号化とフレーム間符号化を切り
替えて行う。ここで、intra とはフレーム内符号化を表
し、inter とはフレーム間フレーム間符号化を表すもの
である。『フレーム間符号化時には参照フレームメモリ
部３０５にあるフレームデータを参照して符号化す
る』。
【００６２】復号化部３０３は、符号データを再度復号
化して、復号したフレームデータをフレームメモリ部３
０４へフレーム番号と共に書き込むものである。フレー
ムメモリ部３０４は、毎フレームデータを記憶するメモ
リ回路であり、参照フレーム更新部３０９によって参照
フレームが更新される毎に古いデータが消去されるもの
である。参照フレームメモリ部３０５は、フレーム間符
号化に使用する参照フレームデータを記憶するメモリ回
路であり、参照フレーム更新部３０９によって更新され
るものである。
化して、復号したフレームデータをフレームメモリ部３
０４へフレーム番号と共に書き込むものである。フレー
ムメモリ部３０４は、毎フレームデータを記憶するメモ
リ回路であり、参照フレーム更新部３０９によって参照
フレームが更新される毎に古いデータが消去されるもの
である。参照フレームメモリ部３０５は、フレーム間符
号化に使用する参照フレームデータを記憶するメモリ回
路であり、参照フレーム更新部３０９によって更新され
るものである。
【００６３】intra/inter判断部３０６は、フレーム内
符号化を行うか、フレーム間符号化を行うかを判断する
ものである。通常は定期的（例えば、３０フレームご
と）にフレーム内符号化を行い、その他の期間はフレー
ム間符号化を行うが、受信側の動画像復号化装置２００
からリフレッシュ信号を受信した場合は、強制的にフレ
ーム内符号化を行うように制御する。フレーム内符号化
と判断した場合は、符号化部３０２と参照フレーム更新
部３０９とへその旨を通知する。
符号化を行うか、フレーム間符号化を行うかを判断する
ものである。通常は定期的（例えば、３０フレームご
と）にフレーム内符号化を行い、その他の期間はフレー
ム間符号化を行うが、受信側の動画像復号化装置２００
からリフレッシュ信号を受信した場合は、強制的にフレ
ーム内符号化を行うように制御する。フレーム内符号化
と判断した場合は、符号化部３０２と参照フレーム更新
部３０９とへその旨を通知する。
【００６４】符号データ送信部３０７は、符号化された
動画像データを受信側の動画像復号装置４００へ送信す
るものである。この送信データには、intra/inter を表
すフラグや、参照フレーム番号などを多重する。また、
必要に応じて送信元情報や送信先情報などを多重して伝
送する。確認信号受信部３０８は、受信側の動画像復号
化装置４００がどのフレームを復号できたかの確認信号
を受信するものであり、確認されたフレーム番号を参照
フレーム更新部３０９へ与える。多地点間通信時には、
各地点から確認信号を受け取って、全地点が受信できた
フレーム番号を算出して参照フレーム更新部３０９へ与
える。
動画像データを受信側の動画像復号装置４００へ送信す
るものである。この送信データには、intra/inter を表
すフラグや、参照フレーム番号などを多重する。また、
必要に応じて送信元情報や送信先情報などを多重して伝
送する。確認信号受信部３０８は、受信側の動画像復号
化装置４００がどのフレームを復号できたかの確認信号
を受信するものであり、確認されたフレーム番号を参照
フレーム更新部３０９へ与える。多地点間通信時には、
各地点から確認信号を受け取って、全地点が受信できた
フレーム番号を算出して参照フレーム更新部３０９へ与
える。
【００６５】参照フレーム更新部３０９は、intra/inte
r 判断部３０６や確認信号受信部３０８からの指示に従
って参照フレームを更新するものである。intra/inter
判断部３０６からフレーム内符号化の指示を受けた場合
は、現フレームのデータをフレームメモリ部３０４から
参照フレームメモリ部３０５へコピーしてフレームメモ
リ部３０４の全フレームデータを消去する。また、確認
信号受信部３０８からフレーム番号を受けた場合は、そ
の番号のフレームデータをフレームメモリ部３０４から
参照フレームメモリ部３０５へコピーしてその番号以前
のフレームデータをフレームメモリ部３０４から消去す
るものである。
r 判断部３０６や確認信号受信部３０８からの指示に従
って参照フレームを更新するものである。intra/inter
判断部３０６からフレーム内符号化の指示を受けた場合
は、現フレームのデータをフレームメモリ部３０４から
参照フレームメモリ部３０５へコピーしてフレームメモ
リ部３０４の全フレームデータを消去する。また、確認
信号受信部３０８からフレーム番号を受けた場合は、そ
の番号のフレームデータをフレームメモリ部３０４から
参照フレームメモリ部３０５へコピーしてその番号以前
のフレームデータをフレームメモリ部３０４から消去す
るものである。
【００６６】（Ｂ−２）動画像復号化装置（受信側）４
００の構成 図１３は、第２の実施の形態の動画像復号化装置（受信
側）４００の機能構成図である。この図１３において、
動画像復号化装置（受信側）４００は、符号データ受信
部４０１と、参照フレーム比較部４０２と、参照フレー
ム更新部４０３と、参照フレームメモリ部４０４と、フ
レームメモリ部４０５と、復号化部４０６と、確認信号
送信部４０７と、動画像出力部４０８と、リフレッシュ
信号送信部４０９とから構成されている。
００の構成 図１３は、第２の実施の形態の動画像復号化装置（受信
側）４００の機能構成図である。この図１３において、
動画像復号化装置（受信側）４００は、符号データ受信
部４０１と、参照フレーム比較部４０２と、参照フレー
ム更新部４０３と、参照フレームメモリ部４０４と、フ
レームメモリ部４０５と、復号化部４０６と、確認信号
送信部４０７と、動画像出力部４０８と、リフレッシュ
信号送信部４０９とから構成されている。
【００６７】符号データ受信部４０１は、符号化された
動画像データを送信側の動画像符号化装置３００から受
信するものであり、符号データとデータに多重されてい
るintra/inter を表すフラグや参照フレーム番号などを
復号化部４０６へ与え、必要に応じて多重されている送
信元情報なども復号化部４０６へ与える。また、参照フ
レーム番号を参照フレーム比較部４０２へ与える。
動画像データを送信側の動画像符号化装置３００から受
信するものであり、符号データとデータに多重されてい
るintra/inter を表すフラグや参照フレーム番号などを
復号化部４０６へ与え、必要に応じて多重されている送
信元情報なども復号化部４０６へ与える。また、参照フ
レーム番号を参照フレーム比較部４０２へ与える。
【００６８】参照フレーム比較部４０２は、受信した参
照フレーム番号と参照フレームメモリ部４０４に記憶さ
れている自端末の参照フレーム番号とを比較して、受信
した参照フレーム番号の方が新しい場合は、参照フレー
ム更新部４０３へ参照フレーム更新要求を通知して、新
しい参照フレーム番号を与える。
照フレーム番号と参照フレームメモリ部４０４に記憶さ
れている自端末の参照フレーム番号とを比較して、受信
した参照フレーム番号の方が新しい場合は、参照フレー
ム更新部４０３へ参照フレーム更新要求を通知して、新
しい参照フレーム番号を与える。
【００６９】参照フレーム更新部４０３は、参照フレー
ム比較部４０２から更新要求を受けると、フレームメモ
リ部４０５から新しい参照フレーム番号のデータを読み
込み、参照フレームメモリ部４０４へフレーム番号と共
に書き込み更新を行う。このときに、フレームメモリ上
の古いフレームデータは消去する。
ム比較部４０２から更新要求を受けると、フレームメモ
リ部４０５から新しい参照フレーム番号のデータを読み
込み、参照フレームメモリ部４０４へフレーム番号と共
に書き込み更新を行う。このときに、フレームメモリ上
の古いフレームデータは消去する。
【００７０】参照フレームメモリ部４０４は、フレーム
間復号に使用する参照フレームデータを記憶するメモリ
回路であり、参照フレーム更新部４０３と復号化部４０
６とによって更新される。フレームメモリ部４０５は、
復号したフレームデータを記憶するメモリ回路であり、
参照フレーム更新部４０３によって参照フレームが更新
される毎に古いデータが消去される。
間復号に使用する参照フレームデータを記憶するメモリ
回路であり、参照フレーム更新部４０３と復号化部４０
６とによって更新される。フレームメモリ部４０５は、
復号したフレームデータを記憶するメモリ回路であり、
参照フレーム更新部４０３によって参照フレームが更新
される毎に古いデータが消去される。
【００７１】復号化部４０６は、入力された符号データ
を復号化するものであり、復号データを動画像出力部４
０８へ与える。この復号に際して、Ｉフレームの場合は
復号データをフレーム番号と共に参照フレームメモリ部
４０４へ書き込んで参照フレームを更新する。また、Ｐ
フレームの場合は、参照フレームメモリ部４０４のデー
タを参照して復号し、復号データをフレーム番号と共に
フレームメモリ部４０５へ書き込む。また、ＣＲＣなど
による誤り検査によって復号に成功したと判断された場
合は、フレーム番号を確認信号送信部４０７へ与える。
を復号化するものであり、復号データを動画像出力部４
０８へ与える。この復号に際して、Ｉフレームの場合は
復号データをフレーム番号と共に参照フレームメモリ部
４０４へ書き込んで参照フレームを更新する。また、Ｐ
フレームの場合は、参照フレームメモリ部４０４のデー
タを参照して復号し、復号データをフレーム番号と共に
フレームメモリ部４０５へ書き込む。また、ＣＲＣなど
による誤り検査によって復号に成功したと判断された場
合は、フレーム番号を確認信号送信部４０７へ与える。
【００７２】確認信号送信部４０７は、どのフレームを
復号できたかの確認信号を送信側の動画像符号化装置３
００へ送信するものであり、復号化部４０６から受けた
復号異常の有無とフレーム番号とを合わせて送信するも
のである。動画像出力部４０８は、復号化部４０６から
復号データをモニタ用の表示装置などに出力するもので
ある。リフレッシュ信号送信部４０９は、ユーザからの
リフレッシュ要求信号に従って送信側の動画像符号化装
置３００へリフレッシュ信号を送信するものである。
復号できたかの確認信号を送信側の動画像符号化装置３
００へ送信するものであり、復号化部４０６から受けた
復号異常の有無とフレーム番号とを合わせて送信するも
のである。動画像出力部４０８は、復号化部４０６から
復号データをモニタ用の表示装置などに出力するもので
ある。リフレッシュ信号送信部４０９は、ユーザからの
リフレッシュ要求信号に従って送信側の動画像符号化装
置３００へリフレッシュ信号を送信するものである。
【００７３】（Ｂ−３）動作説明 第２の実施形態の動画像符号装置、動画像復号化装置に
おいても、特開平７−９５５７１号公報『画像符号化装
置、画像復号化装置及び多地点間データ伝送方法』で示
したことと同じように、Ｉフレームを固定参照フレーム
として符号化する（図８の説明図）。更に、受信側から
受信確認のあったフレームに随時参照フレームを移行し
ながらフレーム間符号化を行うものである。
おいても、特開平７−９５５７１号公報『画像符号化装
置、画像復号化装置及び多地点間データ伝送方法』で示
したことと同じように、Ｉフレームを固定参照フレーム
として符号化する（図８の説明図）。更に、受信側から
受信確認のあったフレームに随時参照フレームを移行し
ながらフレーム間符号化を行うものである。
【００７４】図１は、本第２の実施の形態の画像符号化
の概念を説明する図である。この図１は受信確認後に次
フレームの符号化を始めた場合を示すものである。この
図１において、最初はＩフレームを参照して符号化を行
うが、受信側からＰフレームｅの受信確認が得られる
と、それ以降は参照フレームをフレームｅに切り替えて
符号化／復号化する。
の概念を説明する図である。この図１は受信確認後に次
フレームの符号化を始めた場合を示すものである。この
図１において、最初はＩフレームを参照して符号化を行
うが、受信側からＰフレームｅの受信確認が得られる
と、それ以降は参照フレームをフレームｅに切り替えて
符号化／復号化する。
【００７５】ここで、受信確認を待ってから符号化を行
うと遅延発生の原因にもなり、また、毎フレーム、確認
信号を送ってくるとは限らない。そこで、実際には受信
確認が届いたときは既に送信側では次のフレームを符号
化し始めている場合が多く、その場合は参照フレームが
切り替わるのは、図１４（受信確認前に次フレームの符
号化を始めた場合）のようにその次のフレームからとな
る。多地点間接続している場合は、全受信端末からの確
認信号を合わせて、全端末が受信できているフレームを
参照フレームとして更新する。
うと遅延発生の原因にもなり、また、毎フレーム、確認
信号を送ってくるとは限らない。そこで、実際には受信
確認が届いたときは既に送信側では次のフレームを符号
化し始めている場合が多く、その場合は参照フレームが
切り替わるのは、図１４（受信確認前に次フレームの符
号化を始めた場合）のようにその次のフレームからとな
る。多地点間接続している場合は、全受信端末からの確
認信号を合わせて、全端末が受信できているフレームを
参照フレームとして更新する。
【００７６】即ち、動画像符号化装置（送信側）３００
において、入力動画像データは動画像入力部３０１から
フレーム毎に符号化部３０２に与えられる。符号化部３
０２では、入力されたフレームデータが符号化され、符
号データは復号化部３０３と符号データ送信部３０７と
に与えられる。符号化に際しては、intra/inter 判断部
３０６からの指示に従ってフレーム内符号化とフレーム
間符号化とが切り替えられて行われる。
において、入力動画像データは動画像入力部３０１から
フレーム毎に符号化部３０２に与えられる。符号化部３
０２では、入力されたフレームデータが符号化され、符
号データは復号化部３０３と符号データ送信部３０７と
に与えられる。符号化に際しては、intra/inter 判断部
３０６からの指示に従ってフレーム内符号化とフレーム
間符号化とが切り替えられて行われる。
【００７７】復号化部３０３では、符号データが再度復
号化されて、復号されたフレームデータはフレームメモ
リ部３０４へフレーム番号と共に書き込まれる。フレー
ムメモリ部３０４で、毎フレームデータを記憶され、参
照フレーム更新部３０９によって参照フレームが更新さ
れる毎に古いデータが消去される。参照フレームメモリ
部３０５で、フレーム間符号化に使用する参照フレーム
データが記憶され、参照フレーム更新部３０９によって
更新される。
号化されて、復号されたフレームデータはフレームメモ
リ部３０４へフレーム番号と共に書き込まれる。フレー
ムメモリ部３０４で、毎フレームデータを記憶され、参
照フレーム更新部３０９によって参照フレームが更新さ
れる毎に古いデータが消去される。参照フレームメモリ
部３０５で、フレーム間符号化に使用する参照フレーム
データが記憶され、参照フレーム更新部３０９によって
更新される。
【００７８】intra/inter 判断部３０６で、リフレッシ
ュ信号の受信によってフレーム内符号化を行うか、フレ
ーム間符号化を行うかが判断される。リフレッシュ信号
が受信された場合は、強制的にフレーム内符号化を行う
ように制御される。フレーム内符号化と判断した場合
は、符号化部３０２と参照フレーム更新部３０９とへそ
の旨が通知される。符号データ送信部３０７では、符号
化された動画像データが受信側の動画像復号装置４００
へ送信される。
ュ信号の受信によってフレーム内符号化を行うか、フレ
ーム間符号化を行うかが判断される。リフレッシュ信号
が受信された場合は、強制的にフレーム内符号化を行う
ように制御される。フレーム内符号化と判断した場合
は、符号化部３０２と参照フレーム更新部３０９とへそ
の旨が通知される。符号データ送信部３０７では、符号
化された動画像データが受信側の動画像復号装置４００
へ送信される。
【００７９】確認信号受信部３０８では、受信側の動画
像復号化装置４００がどのフレームを復号できたかの確
認信号が受信され、確認されたフレーム番号が参照フレ
ーム更新部３０９へ与えられる。多地点間通信時には、
各地点から確認信号を受け取って、全地点が受信できた
フレーム番号が算出されて参照フレーム更新部３０９へ
与えられる。参照フレーム更新部３０９では、intra/in
ter 判断部３０６や確認信号受信部３０８からの指示に
従って参照フレームが更新される。intra/inter 判断部
３０６からフレーム内符号化の指示を受けた場合は、現
フレームのデータをフレームメモリ部３０４から参照フ
レームメモリ部３０５へコピーしてフレームメモリ部３
０４の全フレームデータが消去される。また、確認信号
受信部３０８からフレーム番号を与えられた場合は、そ
の番号のフレームデータがフレームメモリ部３０４から
参照フレームメモリ部３０５へコピーされて、その番号
以前のフレームデータがフレームメモリ部３０４から消
去されるのである。
像復号化装置４００がどのフレームを復号できたかの確
認信号が受信され、確認されたフレーム番号が参照フレ
ーム更新部３０９へ与えられる。多地点間通信時には、
各地点から確認信号を受け取って、全地点が受信できた
フレーム番号が算出されて参照フレーム更新部３０９へ
与えられる。参照フレーム更新部３０９では、intra/in
ter 判断部３０６や確認信号受信部３０８からの指示に
従って参照フレームが更新される。intra/inter 判断部
３０６からフレーム内符号化の指示を受けた場合は、現
フレームのデータをフレームメモリ部３０４から参照フ
レームメモリ部３０５へコピーしてフレームメモリ部３
０４の全フレームデータが消去される。また、確認信号
受信部３０８からフレーム番号を与えられた場合は、そ
の番号のフレームデータがフレームメモリ部３０４から
参照フレームメモリ部３０５へコピーされて、その番号
以前のフレームデータがフレームメモリ部３０４から消
去されるのである。
【００８０】動画像復号化装置（受信側）４００の符号
データ受信部４０１では、符号化された動画像データを
送信側の動画像符号化装置３００から受信され、符号デ
ータとデータに多重されているintra/inter を表すフラ
グや参照フレーム番号などが復号化部４０６へ与えら
れ、必要に応じて多重されている送信元情報なども復号
化部４０６へ与えられる。参照フレーム比較部４０２で
は、受信された参照フレーム番号と参照フレームメモリ
部４０４に記憶されている自端末の参照フレーム番号と
が比較されて、受信された参照フレーム番号の方が新し
い場合は、参照フレーム更新部４０３へ参照フレーム更
新要求が通知されて、新しい参照フレーム番号が与えら
れる。
データ受信部４０１では、符号化された動画像データを
送信側の動画像符号化装置３００から受信され、符号デ
ータとデータに多重されているintra/inter を表すフラ
グや参照フレーム番号などが復号化部４０６へ与えら
れ、必要に応じて多重されている送信元情報なども復号
化部４０６へ与えられる。参照フレーム比較部４０２で
は、受信された参照フレーム番号と参照フレームメモリ
部４０４に記憶されている自端末の参照フレーム番号と
が比較されて、受信された参照フレーム番号の方が新し
い場合は、参照フレーム更新部４０３へ参照フレーム更
新要求が通知されて、新しい参照フレーム番号が与えら
れる。
【００８１】参照フレーム更新部４０３では、参照フレ
ーム比較部４０２から更新要求が与えられると、フレー
ムメモリ部４０５から新しい参照フレーム番号のデータ
が読み込まれ、参照フレームメモリ部４０４へフレーム
番号と共に書き込み更新が行われる。このときに、フレ
ームメモリ上の古いフレームデータは消去される。
ーム比較部４０２から更新要求が与えられると、フレー
ムメモリ部４０５から新しい参照フレーム番号のデータ
が読み込まれ、参照フレームメモリ部４０４へフレーム
番号と共に書き込み更新が行われる。このときに、フレ
ームメモリ上の古いフレームデータは消去される。
【００８２】参照フレームメモリ部４０４で、フレーム
間復号に使用する参照フレームデータが記憶され、参照
フレーム更新部４０３と復号化部４０６とによって更新
される。フレームメモリ部４０５では、復号されたフレ
ームデータが記憶され、参照フレーム更新部４０３によ
って参照フレームが更新される毎に古いデータが消去さ
れる。
間復号に使用する参照フレームデータが記憶され、参照
フレーム更新部４０３と復号化部４０６とによって更新
される。フレームメモリ部４０５では、復号されたフレ
ームデータが記憶され、参照フレーム更新部４０３によ
って参照フレームが更新される毎に古いデータが消去さ
れる。
【００８３】復号化部４０６では、入力された符号デー
タが復号化され、復号データが動画像出力部４０８へ与
えられる。この復号に際して、Ｉフレームの場合は復号
データがフレーム番号と共に参照フレームメモリ部４０
４へ書き込まれ参照フレームが更新される。また、Ｐフ
レームの場合は、参照フレームメモリ部４０４のデータ
が参照され復号されて、復号データがフレーム番号と共
にフレームメモリ部４０５へ書き込まれる。また、復号
に成功した場合には、フレーム番号が確認信号送信部４
０７に与えられる。
タが復号化され、復号データが動画像出力部４０８へ与
えられる。この復号に際して、Ｉフレームの場合は復号
データがフレーム番号と共に参照フレームメモリ部４０
４へ書き込まれ参照フレームが更新される。また、Ｐフ
レームの場合は、参照フレームメモリ部４０４のデータ
が参照され復号されて、復号データがフレーム番号と共
にフレームメモリ部４０５へ書き込まれる。また、復号
に成功した場合には、フレーム番号が確認信号送信部４
０７に与えられる。
【００８４】確認信号送信部４０７では、どのフレーム
が復号できたかの確認信号が送信側の動画像符号化装置
３００へ送信され、復号化部４０６から受けたフレーム
番号も合わせて送信される。動画像出力部４０８で、復
号化部４０６からの復号データがモニタ用の表示装置な
どに出力される。リフレッシュ信号送信部４０９では、
ユーザからのリフレッシュ要求信号に従って送信側の動
画像符号化装置３００へリフレッシュ信号が送信され
る。
が復号できたかの確認信号が送信側の動画像符号化装置
３００へ送信され、復号化部４０６から受けたフレーム
番号も合わせて送信される。動画像出力部４０８で、復
号化部４０６からの復号データがモニタ用の表示装置な
どに出力される。リフレッシュ信号送信部４０９では、
ユーザからのリフレッシュ要求信号に従って送信側の動
画像符号化装置３００へリフレッシュ信号が送信され
る。
【００８５】図１５はフレーム欠落の場合の説明図であ
る。この図１５において、欠落フレームに対しては受信
確認を送らないので、参照フレームとなることはない。
従って、常に受信したフレームは復号・表示可能とな
る。
る。この図１５において、欠落フレームに対しては受信
確認を送らないので、参照フレームとなることはない。
従って、常に受信したフレームは復号・表示可能とな
る。
【００８６】また、本第２の実施の形態の構成では、参
照フレームを次々と更新していくので、参照フレームと
現フレームとの時間差が小さくなり、符号化効率も向上
するのである。特に安定した伝送路では全フレームを受
信できる可能性が高いので、参照フレームがほぼ毎回切
り替わるため、符号化効率はＩＴＵ−Ｔ勧告Ｈ．２６１
のように前フレームを参照する場合と同じようになる。
照フレームを次々と更新していくので、参照フレームと
現フレームとの時間差が小さくなり、符号化効率も向上
するのである。特に安定した伝送路では全フレームを受
信できる可能性が高いので、参照フレームがほぼ毎回切
り替わるため、符号化効率はＩＴＵ−Ｔ勧告Ｈ．２６１
のように前フレームを参照する場合と同じようになる。
【００８７】また、フレーム欠落が多く、参照フレーム
が殆ど更新されることのない伝送路では、特開平７−９
５５７１号公報の『画像符号化装置、画像復号化装置及
び多地点間データ伝送方法』と同じ程度の符号化効率を
得ることができるようになる。このように、伝送路の状
態に合わせてスケーラブルに符号化効率を変化させる符
号化方式を実現することができる。
が殆ど更新されることのない伝送路では、特開平７−９
５５７１号公報の『画像符号化装置、画像復号化装置及
び多地点間データ伝送方法』と同じ程度の符号化効率を
得ることができるようになる。このように、伝送路の状
態に合わせてスケーラブルに符号化効率を変化させる符
号化方式を実現することができる。
【００８８】（Ｂ−４）第２の実施形態の効果 以上の本発明の第２の実施の形態によれば、参照フレー
ムを次々と更新するため符号化効率を向上させることが
できる。また、欠落フレームが参照フレームになること
がないため、受信できた全フレームを復号することがで
きる。更に、フレーム欠落の少ない伝送路では、殆ど毎
回参照フレームを更新するので、ＩＴＵ−Ｔ勧告Ｈ.261
などの一般の符号化方式に比べ符号化効率を同じ程度に
することができる。
ムを次々と更新するため符号化効率を向上させることが
できる。また、欠落フレームが参照フレームになること
がないため、受信できた全フレームを復号することがで
きる。更に、フレーム欠落の少ない伝送路では、殆ど毎
回参照フレームを更新するので、ＩＴＵ−Ｔ勧告Ｈ.261
などの一般の符号化方式に比べ符号化効率を同じ程度に
することができる。
【００８９】更にまた、フレーム欠落の多い伝送路で
は、参照フレームが殆ど固定されるが、受信できた全フ
レームは復号可能となる。また、伝送路の状態に合わせ
て符号化効率もスケーラブルな符号化方式を実現するこ
とができる。また、特開平７−９５５７１号公報の『画
像符号化装置、画像復号化装置及び多地点間データ伝送
方法』と同じようにＩフレームに特別なプロトコルを用
いる必要がないという効果がある。
は、参照フレームが殆ど固定されるが、受信できた全フ
レームは復号可能となる。また、伝送路の状態に合わせ
て符号化効率もスケーラブルな符号化方式を実現するこ
とができる。また、特開平７−９５５７１号公報の『画
像符号化装置、画像復号化装置及び多地点間データ伝送
方法』と同じようにＩフレームに特別なプロトコルを用
いる必要がないという効果がある。
【００９０】（Ｂ−５）第２の実施形態の変形例 (1) 尚、以上の第２の実施形態の図１２の動画像符号化
装置３００において、符号化部３０２で一度符号化した
データを復号化部３０３で復号したものをフレームメモ
リ部３０４へ記憶するようにしたが、このような構成に
限定するものではない。
装置３００において、符号化部３０２で一度符号化した
データを復号化部３０３で復号したものをフレームメモ
リ部３０４へ記憶するようにしたが、このような構成に
限定するものではない。
【００９１】例えば、図１６が上述の第２の実施の形態
の変形例の動画像符号化装置５００の機能構成図であ
る。この図１６において、動画像符号化装置５００は、
動画像入力部５１１と、符号化部５１２と、フレームメ
モリ部５１３と、参照フレームメモリ部３０５と、intr
a/inter判断部３０６と、符号データ送信部３０７と、
確認信号受信部３０８と、参照フレーム更新部３０９と
から構成されている。この図１６において、動画像入力
部５１１から直接原画像をフレームメモリ部５１３へ記
憶するようにしても上述と同じように好ましい。この場
合に復号処理を省略することができると共に、符号化部
５１２では原画像を参照することによって動き補償など
の精度を向上させることができる。
の変形例の動画像符号化装置５００の機能構成図であ
る。この図１６において、動画像符号化装置５００は、
動画像入力部５１１と、符号化部５１２と、フレームメ
モリ部５１３と、参照フレームメモリ部３０５と、intr
a/inter判断部３０６と、符号データ送信部３０７と、
確認信号受信部３０８と、参照フレーム更新部３０９と
から構成されている。この図１６において、動画像入力
部５１１から直接原画像をフレームメモリ部５１３へ記
憶するようにしても上述と同じように好ましい。この場
合に復号処理を省略することができると共に、符号化部
５１２では原画像を参照することによって動き補償など
の精度を向上させることができる。
【００９２】(2) また、フレーム内符号化時には参照フ
レーム更新部３０９がフレームメモリ部１０４からフレ
ームデータを参照フレームメモリ部３０５へコピーする
ように説明したが、これに限定するものではない。例え
ば、intra/inter 判断部３０６からのフレーム内符号化
要求信号を復号化部３０３へ与えるようにするとと共
に、フレーム内符号化時には復号化部３０３から直接参
照フレームメモリ部３０５へフレームデータを書き込む
ように構成しても好ましい。この場合に、コピーする処
理を省略することができるので構成を簡略化することが
できる。
レーム更新部３０９がフレームメモリ部１０４からフレ
ームデータを参照フレームメモリ部３０５へコピーする
ように説明したが、これに限定するものではない。例え
ば、intra/inter 判断部３０６からのフレーム内符号化
要求信号を復号化部３０３へ与えるようにするとと共
に、フレーム内符号化時には復号化部３０３から直接参
照フレームメモリ部３０５へフレームデータを書き込む
ように構成しても好ましい。この場合に、コピーする処
理を省略することができるので構成を簡略化することが
できる。
【００９３】(3) 更に、上述の図１２の動画像符号化装
置、図１３の動画像復号化装置では、参照フレームメモ
リ部３０５と、フレームメモリ部３０４とを別々に分け
て構成していたが、このような構成に限定するものでは
ない。一つのメモリ上にフレームデータを書き込み、参
照フレームはメモリ位置を示すポインタなどで表すよう
にしても好ましい。この場合に、参照フレーム更新時に
フレームメモリ部から参照フレームメモリ部へデータを
コピーする必要がなく、ポインタを移動させるだけで実
現することができるので、回路構成を簡単にすることが
できるという効果もある。
置、図１３の動画像復号化装置では、参照フレームメモ
リ部３０５と、フレームメモリ部３０４とを別々に分け
て構成していたが、このような構成に限定するものでは
ない。一つのメモリ上にフレームデータを書き込み、参
照フレームはメモリ位置を示すポインタなどで表すよう
にしても好ましい。この場合に、参照フレーム更新時に
フレームメモリ部から参照フレームメモリ部へデータを
コピーする必要がなく、ポインタを移動させるだけで実
現することができるので、回路構成を簡単にすることが
できるという効果もある。
【００９４】(4) 更にまた、参照フレーム更新時にフレ
ームメモリ部から古いデータを消去するように説明した
が、これに限定するものではない。一定サイズのフレー
ムメモリを用意しておき、フレームデータを順に書き込
むように構成し、メモリが一杯になったら古いデータに
上書きして新しいデータを書き込むように構成しても好
ましい。この場合に、かなり古いフレームは参照フレー
ムとして選定できなくなるが、データを消去する処理が
不要になり、処理時間の短縮を図ることができるという
効果がある。
ームメモリ部から古いデータを消去するように説明した
が、これに限定するものではない。一定サイズのフレー
ムメモリを用意しておき、フレームデータを順に書き込
むように構成し、メモリが一杯になったら古いデータに
上書きして新しいデータを書き込むように構成しても好
ましい。この場合に、かなり古いフレームは参照フレー
ムとして選定できなくなるが、データを消去する処理が
不要になり、処理時間の短縮を図ることができるという
効果がある。
【００９５】(5) また、上述の図１３の動画像復号化装
置４００において、リフレッシュ信号送信部４０９はユ
ーザからのリフレッシュ要求信号にだけ反応するように
説明したが、これに限定するものではない。例えば、復
号化部４０６が復号の状態をチェックするように構成
し、復号状態が良くない場合は、リフレッシュ信号送信
部４０９へリフレッシュ要求信号を自動的に出すように
構成しても好ましい。この場合に、ユーザからの要求が
なくても画像品質が劣化すると自動的にリフレッシュさ
れるので、ユーザの負担を軽減することができるという
効果がある。
置４００において、リフレッシュ信号送信部４０９はユ
ーザからのリフレッシュ要求信号にだけ反応するように
説明したが、これに限定するものではない。例えば、復
号化部４０６が復号の状態をチェックするように構成
し、復号状態が良くない場合は、リフレッシュ信号送信
部４０９へリフレッシュ要求信号を自動的に出すように
構成しても好ましい。この場合に、ユーザからの要求が
なくても画像品質が劣化すると自動的にリフレッシュさ
れるので、ユーザの負担を軽減することができるという
効果がある。
【００９６】(6) 更に、以上までの説明においては、フ
レームを受信したことを確認する例を示したが、これに
限定するものではない。例えば、逆にフレームが受信で
きなかったときに信号を送るように構成しても好まし
い。この場合に、通常は確認信号は伝送されないので、
送信側では確認を待たずに次々と符号化を行うことがで
きる。ここで、画像フレームの不受信信号を受けたとき
は、参照フレームを不受信フレームの一つ前に戻して符
号化する。これによって、受信側では受信できなかった
フレームから数フレームは復号不可能であるが、直ぐに
受信できているフレームを参照したデータに切り替へる
ことができるので復号可能となるという効果がある。
レームを受信したことを確認する例を示したが、これに
限定するものではない。例えば、逆にフレームが受信で
きなかったときに信号を送るように構成しても好まし
い。この場合に、通常は確認信号は伝送されないので、
送信側では確認を待たずに次々と符号化を行うことがで
きる。ここで、画像フレームの不受信信号を受けたとき
は、参照フレームを不受信フレームの一つ前に戻して符
号化する。これによって、受信側では受信できなかった
フレームから数フレームは復号不可能であるが、直ぐに
受信できているフレームを参照したデータに切り替へる
ことができるので復号可能となるという効果がある。
【００９７】(7) これまでの説明では、フレーム欠落を
例にとり、フレーム毎に参照画像を更新する例を示した
がこれに限定されるものではない。例えば、フレームを
複数のブロックに分割し、ブロック毎に符号化を行うシ
ステムにおいて、それぞれのブロックで伝送誤りを検出
して、参照画像をブロック毎に更新するようにしても良
い。ブロックを小さくするほど、伝送誤りの確率が減少
するので、参照画像の更新の割合が向上し、符号化効率
が向上する。
例にとり、フレーム毎に参照画像を更新する例を示した
がこれに限定されるものではない。例えば、フレームを
複数のブロックに分割し、ブロック毎に符号化を行うシ
ステムにおいて、それぞれのブロックで伝送誤りを検出
して、参照画像をブロック毎に更新するようにしても良
い。ブロックを小さくするほど、伝送誤りの確率が減少
するので、参照画像の更新の割合が向上し、符号化効率
が向上する。
【００９８】（Ｃ）第３の実施形態 以下、第２の実施形態で説明した参照フレーム更新部３
０９の形態例を、第３の実施形態として説明する。従っ
て、画像符号化装置のその他の構成については第２の実
施形態の構成と同様であり、同様に動作する。
０９の形態例を、第３の実施形態として説明する。従っ
て、画像符号化装置のその他の構成については第２の実
施形態の構成と同様であり、同様に動作する。
【００９９】（Ｃ−１）参照フレーム更新部３０９Ａの
構成 図１７は、動画像復号化装置４００から与えられる確認
信号が復号異常無し(ACK) 信号である場合に参照フレー
ム更新部３０９が採り得る構成を示すものであり、ここ
では、参照フレーム更新部３０９Ａとして説明する。各
部は以下の通りである。
構成 図１７は、動画像復号化装置４００から与えられる確認
信号が復号異常無し(ACK) 信号である場合に参照フレー
ム更新部３０９が採り得る構成を示すものであり、ここ
では、参照フレーム更新部３０９Ａとして説明する。各
部は以下の通りである。
【０１００】フレーム番号設定部３１０は、確認信号受
信部３０８から知らされた復号異常の無いフレーム番号
を、コピーすべきフレーム番号として設定する手段であ
り、設定したフレーム番号をデータコピー部３１１へ渡
すよう動作する。
信部３０８から知らされた復号異常の無いフレーム番号
を、コピーすべきフレーム番号として設定する手段であ
り、設定したフレーム番号をデータコピー部３１１へ渡
すよう動作する。
【０１０１】データコピー部３１１は、フレーム番号設
定部３１０から転送されたフレーム番号のフレームデー
タをフレームメモリ部３０４から参照フレームメモリ部
３０５へコピーする手段である。
定部３１０から転送されたフレーム番号のフレームデー
タをフレームメモリ部３０４から参照フレームメモリ部
３０５へコピーする手段である。
【０１０２】（Ｃ−２）動作説明 この参照フレーム更新部３０９Ａは、受信側の動画像復
号化装置４００から送られて来る復号異常無し(ACK) 信
号を元に参照フレームの更新／非更新を切り替える。こ
の参照フレーム更新部３０９Ａを、動画像符号化装置３
００に適用した場合における符号化動作例を示したのが
図１８である。
号化装置４００から送られて来る復号異常無し(ACK) 信
号を元に参照フレームの更新／非更新を切り替える。こ
の参照フレーム更新部３０９Ａを、動画像符号化装置３
００に適用した場合における符号化動作例を示したのが
図１８である。
【０１０３】まず、フレームａ、ｂ、ｃについては、受
信側の動画像復号化装置４００において正常な復号動作
が行われており、その事実が復号異常無し(ACK) 信号と
して動画像復号化装置４００から動画像符号化装置３０
０に通知される。
信側の動画像復号化装置４００において正常な復号動作
が行われており、その事実が復号異常無し(ACK) 信号と
して動画像復号化装置４００から動画像符号化装置３０
０に通知される。
【０１０４】このとき、動画像符号化装置３００は、か
かる通知のあった時点で参照フレームの切り替えを行
い、更新された参照フレームに基づいて、次に伝送する
フレームの符号化処理を継続する。
かる通知のあった時点で参照フレームの切り替えを行
い、更新された参照フレームに基づいて、次に伝送する
フレームの符号化処理を継続する。
【０１０５】ここで、フレームｄの伝送中に誤りが発生
したとする。すると、復号異常無し（ACK ）信号の動画
像符号化装置３００に対する通知が途切れることにな
る。この場合、フレームｄを参照フレームに使えないの
で、既に受信側で正常に復号できたことが確認されてい
るフレームｃをそのまま参照フレームに用い、次のフレ
ームｅを符号化する。
したとする。すると、復号異常無し（ACK ）信号の動画
像符号化装置３００に対する通知が途切れることにな
る。この場合、フレームｄを参照フレームに使えないの
で、既に受信側で正常に復号できたことが確認されてい
るフレームｃをそのまま参照フレームに用い、次のフレ
ームｅを符号化する。
【０１０６】このように送信側では、常に正しく復号さ
れたことが確認されたフレームのみを参照フレームとし
て用いて伝送フレームを符号化するので、受信側におい
ても後に送られてくるＩフレームを待たずに、Ｐフレー
ムの復号動作が可能になる。かくして、フレーム欠落発
生時にも符号化効率をほとんど下げずに済ませることが
できる。
れたことが確認されたフレームのみを参照フレームとし
て用いて伝送フレームを符号化するので、受信側におい
ても後に送られてくるＩフレームを待たずに、Ｐフレー
ムの復号動作が可能になる。かくして、フレーム欠落発
生時にも符号化効率をほとんど下げずに済ませることが
できる。
【０１０７】以上は、動画像符号化装置３００から動画
像復号装置４００にフレームを伝送する伝送路上に誤り
が発生した場合における動作例を説明したものである
が、この逆の場合についても、同じく符号化効率の低下
を起こさずに済む効果が得られる。
像復号装置４００にフレームを伝送する伝送路上に誤り
が発生した場合における動作例を説明したものである
が、この逆の場合についても、同じく符号化効率の低下
を起こさずに済む効果が得られる。
【０１０８】すなわち、復号異常無し（ACK ）信号を伝
送する伝送路に誤りが生じた場合、図１９に示すよう
に、受信側では正しく受信されているにも拘わらず、フ
レームｄの復号異常無し（ACK ）信号が動画像符号化装
置３００に到着しないことがあり得る。この場合、動画
像符号化装置３００は、受信側にて正常な復号ができな
かったものと見なして、参照フレームの更新を中止し、
フレームｅの符号化に用いたフレームｃを再度、参照フ
レームとしてフレームｆの符号化が行われることにな
る。
送する伝送路に誤りが生じた場合、図１９に示すよう
に、受信側では正しく受信されているにも拘わらず、フ
レームｄの復号異常無し（ACK ）信号が動画像符号化装
置３００に到着しないことがあり得る。この場合、動画
像符号化装置３００は、受信側にて正常な復号ができな
かったものと見なして、参照フレームの更新を中止し、
フレームｅの符号化に用いたフレームｃを再度、参照フ
レームとしてフレームｆの符号化が行われることにな
る。
【０１０９】このように、動画像符号化装置３００は、
本来予定されていたフレームを参照フレームとして用い
て符号化動作を実現することはできないが、受信側に確
実に届いているフレームを参照フレームとして符号化さ
れたフレームを伝送することができるので、伝送路上の
誤り発生の有無に拘わらず、正常な復号動作を保証する
ことができる。
本来予定されていたフレームを参照フレームとして用い
て符号化動作を実現することはできないが、受信側に確
実に届いているフレームを参照フレームとして符号化さ
れたフレームを伝送することができるので、伝送路上の
誤り発生の有無に拘わらず、正常な復号動作を保証する
ことができる。
【０１１０】（Ｃ−３）第３の実施形態の効果 以上のように、第３の実施形態によれば、第２の実施形
態の場合と同様の効果が得られ、さらに、復号異常無し
（ACK ）信号の伝送路上に誤りの発生が見込まれるよう
なシステムにおいても、受信側である動画像復号装置４
００での復号動作に破綻を来さずに、高い画質を維持で
きる動画像符号化装置及び伝送システムを実現すること
ができる。
態の場合と同様の効果が得られ、さらに、復号異常無し
（ACK ）信号の伝送路上に誤りの発生が見込まれるよう
なシステムにおいても、受信側である動画像復号装置４
００での復号動作に破綻を来さずに、高い画質を維持で
きる動画像符号化装置及び伝送システムを実現すること
ができる。
【０１１１】（Ｄ）第４の実施形態 第３の実施形態と同じく、第２の実施形態にて説明した
参照フレーム更新部３０９の一形態を、第４の実施形態
として説明する。従って、動画像符号化装置のその他の
構成については、第２の実施形態の構成と同様であり、
同様に動作する。
参照フレーム更新部３０９の一形態を、第４の実施形態
として説明する。従って、動画像符号化装置のその他の
構成については、第２の実施形態の構成と同様であり、
同様に動作する。
【０１１２】（Ｄ−１）参照フレーム更新部３０９Ｂの
構成 図２０は、動画像復号化装置４００から与えられる確認
信号が復号異常有り(NACK)信号である場合に、参照フレ
ーム更新部３０９が採り得る構成を示すものであり、こ
こでは、参照フレーム更新部３０９Ｂとして説明する。
各部は以下の通りである。
構成 図２０は、動画像復号化装置４００から与えられる確認
信号が復号異常有り(NACK)信号である場合に、参照フレ
ーム更新部３０９が採り得る構成を示すものであり、こ
こでは、参照フレーム更新部３０９Ｂとして説明する。
各部は以下の通りである。
【０１１３】フレーム番号設定部３１０Ａは、確認信号
受信部３０８から得られた復号異常有りの誤りフレーム
番号を最新受信番号検出部３１２に渡す手段であり、最
新受信番号検出部３１２から返された最新受信番号を参
照フレームとしてコピーすべきフレーム番号として設定
し、これをデータコピー部３１１Ａに渡すよう動作す
る。なお、ここでは、復号異常有りの誤りフレーム番号
だけを受信するものとしたが、このフレーム番号設定部
３１０Ａによって、受信側が希望する参照フレーム番号
も同時に受けるようにしても良い。その場合、その希望
フレーム番号をそのままデータコピー部３１１Ａに渡し
ても良い。
受信部３０８から得られた復号異常有りの誤りフレーム
番号を最新受信番号検出部３１２に渡す手段であり、最
新受信番号検出部３１２から返された最新受信番号を参
照フレームとしてコピーすべきフレーム番号として設定
し、これをデータコピー部３１１Ａに渡すよう動作す
る。なお、ここでは、復号異常有りの誤りフレーム番号
だけを受信するものとしたが、このフレーム番号設定部
３１０Ａによって、受信側が希望する参照フレーム番号
も同時に受けるようにしても良い。その場合、その希望
フレーム番号をそのままデータコピー部３１１Ａに渡し
ても良い。
【０１１４】最新受信番号検出部３１２は、フレームメ
モリ部３０４に記録してあるフレーム番号を管理し、フ
レーム番号設定部３１０Ａから受けた誤りフレーム番号
より古い番号のうち、最も新しいフレーム番号を最新受
信番号として検出する手段であり、最新受信番号をフレ
ーム番号設定部３１０Ａへ返すよう動作する。
モリ部３０４に記録してあるフレーム番号を管理し、フ
レーム番号設定部３１０Ａから受けた誤りフレーム番号
より古い番号のうち、最も新しいフレーム番号を最新受
信番号として検出する手段であり、最新受信番号をフレ
ーム番号設定部３１０Ａへ返すよう動作する。
【０１１５】データコピー部３１１Ａは、通常、符号化
部３０２の処理タイミングに合わせてフレームデータを
フレームメモリ部３０４から参照フレームメモリ部３０
５へコピーする手段である。なお、データコピー部３１
１Ａは、フレーム番号設定部３１０Ａから最新受信番号
を受けた場合は、そのフレームデータをフレームメモリ
部３０４から参照フレームメモリ部３０５へコピーする
よう動作する。
部３０２の処理タイミングに合わせてフレームデータを
フレームメモリ部３０４から参照フレームメモリ部３０
５へコピーする手段である。なお、データコピー部３１
１Ａは、フレーム番号設定部３１０Ａから最新受信番号
を受けた場合は、そのフレームデータをフレームメモリ
部３０４から参照フレームメモリ部３０５へコピーする
よう動作する。
【０１１６】（Ｄ−２）動作説明 この参照フレーム更新部３０９Ｂは、受信側の動画像復
号化装置４００から送られて来る復号異常有り(NACK)信
号を元に参照フレームの更新／非更新を切り替える。こ
の参照フレーム更新部３０９Ｂを、動画像符号化装置３
００に適用した場合における符号化動作例を示したのが
図２１である。
号化装置４００から送られて来る復号異常有り(NACK)信
号を元に参照フレームの更新／非更新を切り替える。こ
の参照フレーム更新部３０９Ｂを、動画像符号化装置３
００に適用した場合における符号化動作例を示したのが
図２１である。
【０１１７】参照フレーム更新部３０９Ｂは、復号異常
有り（NACK）信号による通知がないとき、受信側に伝送
されたフレームが正常に復号されていると見なして、参
照フレームを毎回切替え、新たなフレームを順次符号化
する。例えば、フレームａ、ｂ、ｃについては、受信側
から復号異常有り（NACK）信号による異常発生の通知が
ないので、更新された参照フレームについて次フレーム
を符号化する。
有り（NACK）信号による通知がないとき、受信側に伝送
されたフレームが正常に復号されていると見なして、参
照フレームを毎回切替え、新たなフレームを順次符号化
する。例えば、フレームａ、ｂ、ｃについては、受信側
から復号異常有り（NACK）信号による異常発生の通知が
ないので、更新された参照フレームについて次フレーム
を符号化する。
【０１１８】さて、この伝送過程で、フレームｄに伝送
誤りがあると、受信側から復号異常有り（NACK）信号の
通知がなされる。このとき、参照フレーム更新部３０９
Ｂは、復号異常有り（NACK）信号の通知が受信された時
点（フレームｆの符号化前）において、正常受信が確認
されている最も新しいフレーム（ここでは、フレーム
ｃ）まで更新フレームを引き戻し、次の伝送対象である
フレームｆの符号化に移る。なお、フレームｄ及びｅに
ついては、今後参照フレームに用いることができないた
め、この時点で、フレームメモリ部３０４から消去して
も良い。
誤りがあると、受信側から復号異常有り（NACK）信号の
通知がなされる。このとき、参照フレーム更新部３０９
Ｂは、復号異常有り（NACK）信号の通知が受信された時
点（フレームｆの符号化前）において、正常受信が確認
されている最も新しいフレーム（ここでは、フレーム
ｃ）まで更新フレームを引き戻し、次の伝送対象である
フレームｆの符号化に移る。なお、フレームｄ及びｅに
ついては、今後参照フレームに用いることができないた
め、この時点で、フレームメモリ部３０４から消去して
も良い。
【０１１９】さて、このように参照フレームが以前の状
態に引き戻されると、伝送誤りの発生から復号異常有り
（NACK）信号による通知があるまでに符号化が完了した
フレームｅについては、正常な復号を期待し得ない。し
かし、その後符号化対象となるフレームｆ以降はＩフレ
ームを待たなくとも正常に復号化可能であり、伝送誤り
発生時の符号化効率をほとんど下げずに済ませることが
可能となる。
態に引き戻されると、伝送誤りの発生から復号異常有り
（NACK）信号による通知があるまでに符号化が完了した
フレームｅについては、正常な復号を期待し得ない。し
かし、その後符号化対象となるフレームｆ以降はＩフレ
ームを待たなくとも正常に復号化可能であり、伝送誤り
発生時の符号化効率をほとんど下げずに済ませることが
可能となる。
【０１２０】（Ｄ−３）第４の実施形態の効果 以上のように、第４の実施形態によれば、伝送誤りがな
い場合には、参照フレームが毎回更新されるので符号化
効率の低下のおそれがない。
い場合には、参照フレームが毎回更新されるので符号化
効率の低下のおそれがない。
【０１２１】また、伝送誤りが発生した場合、既に符号
化が完了しているフレームについては、その正常な復号
を保証し得ないが、それ以降に符号化されるフレームに
ついては、Ｉフレームを待つまでもなく正常に復号化で
き、符号化効率が低下するおそれがないという効果が得
られる。
化が完了しているフレームについては、その正常な復号
を保証し得ないが、それ以降に符号化されるフレームに
ついては、Ｉフレームを待つまでもなく正常に復号化で
き、符号化効率が低下するおそれがないという効果が得
られる。
【０１２２】（Ｅ）第５の実施形態 この第５の実施形態も、第４の実施形態の場合と同様、
復号異常有り(NACK)信号を元に参照フレームを更新する
参照フレーム更新部３０９の構成例を説明するものであ
る。従って、動画像符号化装置のその他の構成について
は、第４の実施形態の構成と同様であり、同様に動作す
る。
復号異常有り(NACK)信号を元に参照フレームを更新する
参照フレーム更新部３０９の構成例を説明するものであ
る。従って、動画像符号化装置のその他の構成について
は、第４の実施形態の構成と同様であり、同様に動作す
る。
【０１２３】（Ｅ−１）参照フレーム更新部３０９Ｃの
構成 図２２は、参照フレーム更新部３０９が採り得る構成を
示すものであり、ここでは、参照フレーム更新部３０９
Ｃとして説明する。各部は以下の通りである。
構成 図２２は、参照フレーム更新部３０９が採り得る構成を
示すものであり、ここでは、参照フレーム更新部３０９
Ｃとして説明する。各部は以下の通りである。
【０１２４】フレーム番号設定部３１０Ｂは、確認信号
受信部３０８から受けた復号異常有りの誤りフレーム番
号を最新受信番号検出部３１７に渡すと共に、最新受信
番号検出部３１２Ａから最新受信番号を受けるよう動作
する。
受信部３０８から受けた復号異常有りの誤りフレーム番
号を最新受信番号検出部３１７に渡すと共に、最新受信
番号検出部３１２Ａから最新受信番号を受けるよう動作
する。
【０１２５】次に、フレーム番号設定部３１０Ｂは、候
補番号消去部３１３へ誤りフレーム番号を渡すと同時
に、最新受信番号検出部３１２Ａから受けた最新受信番
号をコピーすべきフレーム番号として設定し、データコ
ピー部３１１Ｂへ渡すよう動作する。
補番号消去部３１３へ誤りフレーム番号を渡すと同時
に、最新受信番号検出部３１２Ａから受けた最新受信番
号をコピーすべきフレーム番号として設定し、データコ
ピー部３１１Ｂへ渡すよう動作する。
【０１２６】また、フレーム番号設定部３１０Ｂは、最
新受信番号検出部３１２Ａから「候補番号無し」という
情報を受けた場合、復号異常有り（NACK）信号を受信し
なかったものとして無視し、処理を中断するよう動作す
る。
新受信番号検出部３１２Ａから「候補番号無し」という
情報を受けた場合、復号異常有り（NACK）信号を受信し
なかったものとして無視し、処理を中断するよう動作す
る。
【０１２７】なお、ここでは、復号異常有りの誤りフレ
ーム番号だけを受信するものとしたが、このフレーム番
号設定部３１０Ｂによって、受信側が希望する参照フレ
ーム番号も同時に受けるようにしても良い。その場合、
希望参照フレーム番号も最新受信番号検出部３１２Ａへ
渡す。特に、復号異常有り（NACK）信号が伝送される伝
送路上に伝送誤りが発生し得るシステムでは、必ず希望
参照フレーム番号を添付する。
ーム番号だけを受信するものとしたが、このフレーム番
号設定部３１０Ｂによって、受信側が希望する参照フレ
ーム番号も同時に受けるようにしても良い。その場合、
希望参照フレーム番号も最新受信番号検出部３１２Ａへ
渡す。特に、復号異常有り（NACK）信号が伝送される伝
送路上に伝送誤りが発生し得るシステムでは、必ず希望
参照フレーム番号を添付する。
【０１２８】最新受信番号検出部３１２Ａは、参照フレ
ーム候補番号記録部３１４に記録されている候補番号リ
ストを検索し、フレーム番号設定部３１０Ｂから受けた
誤りフレーム番号が記録されているかどうかチェックす
る。
ーム候補番号記録部３１４に記録されている候補番号リ
ストを検索し、フレーム番号設定部３１０Ｂから受けた
誤りフレーム番号が記録されているかどうかチェックす
る。
【０１２９】ここで、フレーム番号設定部３１０Ｂが受
けた誤りフレーム番号が参照フレーム候補番号記録部３
１４に記録されている場合には、当該誤りフレーム番号
より古いフレームのうち、最も新しいフレーム番号を最
新受信番号としてフレーム番号設定部３１０Ｂへ返すよ
う動作する。ただし、希望参照フレーム番号を同時に受
けている場合には、この最新受信番号検出部３１２Ａ
は、希望参照フレーム番号をそのまま最新受信番号とし
てフレーム番号設定部３１０Ｂへ返す。
けた誤りフレーム番号が参照フレーム候補番号記録部３
１４に記録されている場合には、当該誤りフレーム番号
より古いフレームのうち、最も新しいフレーム番号を最
新受信番号としてフレーム番号設定部３１０Ｂへ返すよ
う動作する。ただし、希望参照フレーム番号を同時に受
けている場合には、この最新受信番号検出部３１２Ａ
は、希望参照フレーム番号をそのまま最新受信番号とし
てフレーム番号設定部３１０Ｂへ返す。
【０１３０】なお、フレーム番号設定部３１０Ｂが受け
た誤りフレーム番号が参照フレーム候補番号記録部３１
４に記録されていない場合には、最新受信番号検出部３
１２Ａは、「候補番号無し」という情報をフレーム番号
設定部３１０Ｂへ返すよう動作する。
た誤りフレーム番号が参照フレーム候補番号記録部３１
４に記録されていない場合には、最新受信番号検出部３
１２Ａは、「候補番号無し」という情報をフレーム番号
設定部３１０Ｂへ返すよう動作する。
【０１３１】候補番号消去部３１３は、フレーム番号設
定部３１０Ｂから受けた誤りフレーム番号と、それより
新しい全てのフレーム番号とを参照フレーム候補番号記
録部３１４から消去する手段である。ただし、希望参照
フレーム番号を同時に受けている場合は、希望参照フレ
ーム番号より新しい全てのフレーム番号を参照フレーム
候補番号記録部３１４から消去する。これにより、参照
フレーム候補番号記録部３１４に、復号異常の無いフレ
ーム番号だけを残すことができる。なお、このとき同時
に、対応する番号のフレームデータを、フレームメモリ
部３０４から消去しても良い。
定部３１０Ｂから受けた誤りフレーム番号と、それより
新しい全てのフレーム番号とを参照フレーム候補番号記
録部３１４から消去する手段である。ただし、希望参照
フレーム番号を同時に受けている場合は、希望参照フレ
ーム番号より新しい全てのフレーム番号を参照フレーム
候補番号記録部３１４から消去する。これにより、参照
フレーム候補番号記録部３１４に、復号異常の無いフレ
ーム番号だけを残すことができる。なお、このとき同時
に、対応する番号のフレームデータを、フレームメモリ
部３０４から消去しても良い。
【０１３２】参照フレーム候補番号記録部３１４は、フ
レームメモリ部３０４に記録されているフレーム番号を
管理し、参照フレームに用いて良い候補のフレーム番号
リストを記録する手段である。従って、参照フレーム候
補番号記録部３１４は、符号化部３０２で符号化された
フレームがフレームメモリ部３０４に記録される度に、
そのフレーム番号を候補リストへ追加する。なお、参照
フレーム候補番号記録部３１４では、候補フレーム番号
のリストを用意するように説明したが、直接フレームメ
モリ部３０４にヘッダ情報として追加記入し、その情報
を管理するようにしても良い。
レームメモリ部３０４に記録されているフレーム番号を
管理し、参照フレームに用いて良い候補のフレーム番号
リストを記録する手段である。従って、参照フレーム候
補番号記録部３１４は、符号化部３０２で符号化された
フレームがフレームメモリ部３０４に記録される度に、
そのフレーム番号を候補リストへ追加する。なお、参照
フレーム候補番号記録部３１４では、候補フレーム番号
のリストを用意するように説明したが、直接フレームメ
モリ部３０４にヘッダ情報として追加記入し、その情報
を管理するようにしても良い。
【０１３３】データコピー部３１１Ｂは、通常、符号化
部３０２の処理タイミングに合わせてフレームデータを
フレームメモリ部３０４から参照フレームメモリ部３０
５へコピーする手段である。なお、データコピー部３１
１Ｂは、フレーム番号設定部３１０Ｂから最新受信番号
を受けた場合には、そのフレームデータをフレームメモ
リ部３０４から参照フレームメモリ部３０５へコピーす
るよう動作する。
部３０２の処理タイミングに合わせてフレームデータを
フレームメモリ部３０４から参照フレームメモリ部３０
５へコピーする手段である。なお、データコピー部３１
１Ｂは、フレーム番号設定部３１０Ｂから最新受信番号
を受けた場合には、そのフレームデータをフレームメモ
リ部３０４から参照フレームメモリ部３０５へコピーす
るよう動作する。
【０１３４】なお、以上の説明では、復号異常有り(NAC
K)信号のみが受信側より伝送されて来るものとして説明
したが、復号異常有り(NACK)信号と共に、復号異常無し
(ACK) 信号も受信側より伝送されて来る場合には、復号
異常無し(ACK) 信号を受けた時に得られたフレーム番号
を最新受信番号として管理すれば良い。
K)信号のみが受信側より伝送されて来るものとして説明
したが、復号異常有り(NACK)信号と共に、復号異常無し
(ACK) 信号も受信側より伝送されて来る場合には、復号
異常無し(ACK) 信号を受けた時に得られたフレーム番号
を最新受信番号として管理すれば良い。
【０１３５】（Ｅ−２）動作説明 この参照フレーム更新部３０９Ｃは、受信側の動画像復
号化装置４００から送られて来る復号異常有り(NACK)信
号を元に参照フレームの更新／非更新を切り替える。こ
の参照フレーム更新部３０９Ｃを、動画像符号化装置３
００に適用した場合における符号化動作例を示したのが
図２３である。
号化装置４００から送られて来る復号異常有り(NACK)信
号を元に参照フレームの更新／非更新を切り替える。こ
の参照フレーム更新部３０９Ｃを、動画像符号化装置３
００に適用した場合における符号化動作例を示したのが
図２３である。
【０１３６】この参照フレーム更新部３０９Ｃは、受信
側から復号異常有り(NACK)信号による通知がない場合に
は、全て正常な受信がなされたと見なして、参照フレー
ムを毎回更新するよう動作する。
側から復号異常有り(NACK)信号による通知がない場合に
は、全て正常な受信がなされたと見なして、参照フレー
ムを毎回更新するよう動作する。
【０１３７】例えば、図２３に示すフレームａ、ｂ、ｃ
では、受信側から復号異常有り(NACK)信号による通知が
ないので、参照フレーム更新部３０９Ｃは、参照フレー
ムを毎回切り替え、次のフレームを符号化する。すなわ
ち、フレームｄはフレームｃを参照フレームとして符号
化され、フレームｅはフレームｄを参照フレームとして
符号化される。
では、受信側から復号異常有り(NACK)信号による通知が
ないので、参照フレーム更新部３０９Ｃは、参照フレー
ムを毎回切り替え、次のフレームを符号化する。すなわ
ち、フレームｄはフレームｃを参照フレームとして符号
化され、フレームｅはフレームｄを参照フレームとして
符号化される。
【０１３８】ここで、フレームｄに伝送誤りが発生した
とすると、受信側より送信側に復号異常有り(NACK)信号
による通知がなされる。
とすると、受信側より送信側に復号異常有り(NACK)信号
による通知がなされる。
【０１３９】このとき、参照フレーム更新部３０９Ｃ
は、通知のあった時点（ここでは、フレームｆの符号化
前）において正常に受信されていることが確認されてい
るフレームｃまで参照フレームを戻すよう指示を出し、
次のフレームｆを符号化する。同時に、参照フレーム候
補番号リストからフレームｄとｅを消去し、フレームｆ
を追加する。
は、通知のあった時点（ここでは、フレームｆの符号化
前）において正常に受信されていることが確認されてい
るフレームｃまで参照フレームを戻すよう指示を出し、
次のフレームｆを符号化する。同時に、参照フレーム候
補番号リストからフレームｄとｅを消去し、フレームｆ
を追加する。
【０１４０】伝送誤りが発生してから復号異常有り(NAC
K)信号の通知があるまでの間に伝送されたフレームｅに
ついては、既に符号化処理が終了してしまっているので
正常に復号できないが、その後に伝送されうフレームｆ
以降はＩフレームを待つことなく正常に復号可能であ
り、伝送誤り発生時の符号化効率をほとんど下げずに済
ませることができる。
K)信号の通知があるまでの間に伝送されたフレームｅに
ついては、既に符号化処理が終了してしまっているので
正常に復号できないが、その後に伝送されうフレームｆ
以降はＩフレームを待つことなく正常に復号可能であ
り、伝送誤り発生時の符号化効率をほとんど下げずに済
ませることができる。
【０１４１】なお、フレームｅについては、伝送誤りは
なく受信側に届いているが、伝送誤りのあったフレーム
ｄを参照して復号しなければならないので、受信側での
正常な復号はできない。そこで、この場合にも、受信側
は伝送誤りの時と同様に送信側に対して復号異常有り(N
ACK)信号が返される。この点が第４の実施形態と大きく
異なり、後述するように復号異常有り（NACK）信号の伝
送誤りが発生した場合でも、効率の良い符号化が可能と
なる。
なく受信側に届いているが、伝送誤りのあったフレーム
ｄを参照して復号しなければならないので、受信側での
正常な復号はできない。そこで、この場合にも、受信側
は伝送誤りの時と同様に送信側に対して復号異常有り(N
ACK)信号が返される。この点が第４の実施形態と大きく
異なり、後述するように復号異常有り（NACK）信号の伝
送誤りが発生した場合でも、効率の良い符号化が可能と
なる。
【０１４２】このとき、送信側は、フレームｅについて
復号異常有り(NACK)信号を受け取ると、フレームｅが参
照フレーム候補番号記録リストに存在するか否かチェッ
クする。フレームｅは、上述のフレームｄの誤り処理の
時に既にリストから消去されているので、参照フレーム
更新部３０９Ｃは、この復号異常有り(NACK)信号を無視
し、通常通り直前のフレームｆを参照フレームとして符
号化する。
復号異常有り(NACK)信号を受け取ると、フレームｅが参
照フレーム候補番号記録リストに存在するか否かチェッ
クする。フレームｅは、上述のフレームｄの誤り処理の
時に既にリストから消去されているので、参照フレーム
更新部３０９Ｃは、この復号異常有り(NACK)信号を無視
し、通常通り直前のフレームｆを参照フレームとして符
号化する。
【０１４３】次に、復号異常有り(NACK)信号の伝送され
る伝送路上に誤りが発生した場合の符号化動作を説明す
る。図２４はこの動作例の説明に供するものである。
る伝送路上に誤りが発生した場合の符号化動作を説明す
る。図２４はこの動作例の説明に供するものである。
【０１４４】図２４に示したように、伝送路の状態によ
っては、受信側から伝送路側に伝送されるフレームｄの
復号異常有り(NACK)信号に誤りが生じる可能性がないと
は言えない場合がある。このようなシステムでは、受信
側が希望参照フレーム番号を復号異常有り(NACK)信号に
付加することを必須とする。
っては、受信側から伝送路側に伝送されるフレームｄの
復号異常有り(NACK)信号に誤りが生じる可能性がないと
は言えない場合がある。このようなシステムでは、受信
側が希望参照フレーム番号を復号異常有り(NACK)信号に
付加することを必須とする。
【０１４５】この場合、参照フレーム更新部３０９Ｃ
は、フレームｆの符号化時点ではフレームｄの誤りに気
づかず、通常通り、フレームｅを参照してフレームｆを
符号化するよう処理を進めてしまう。すなわち、フレー
ムｄの復号処理に異常が生じているにも拘わらず、フレ
ームｆまで通常通りの符号化処理が進行してしまう。
は、フレームｆの符号化時点ではフレームｄの誤りに気
づかず、通常通り、フレームｅを参照してフレームｆを
符号化するよう処理を進めてしまう。すなわち、フレー
ムｄの復号処理に異常が生じているにも拘わらず、フレ
ームｆまで通常通りの符号化処理が進行してしまう。
【０１４６】なお、受信側では、次のフレームｅについ
ても正常に復号できないので、続けて復号異常有り(NAC
K)信号が送信側に送出され、この復号異常有り(NACK)信
号が届いた時点で、希望参照フレーム番号に従って参照
フレームをフレームｃに戻す処理がなされる。この結
果、フレームｇについてはフレームｃを参照フレームと
する符号化処理がなされる。なお、参照フレーム更新部
３０９Ｃは、これと同時に、参照フレーム候補番号リス
トからフレームｄ、ｅ、ｆを消去し、新たにフレームｇ
を追加する。
ても正常に復号できないので、続けて復号異常有り(NAC
K)信号が送信側に送出され、この復号異常有り(NACK)信
号が届いた時点で、希望参照フレーム番号に従って参照
フレームをフレームｃに戻す処理がなされる。この結
果、フレームｇについてはフレームｃを参照フレームと
する符号化処理がなされる。なお、参照フレーム更新部
３０９Ｃは、これと同時に、参照フレーム候補番号リス
トからフレームｄ、ｅ、ｆを消去し、新たにフレームｇ
を追加する。
【０１４７】この後、送信側にはフレームｆについての
復号異常有り(NACK)信号が通知されることになるが、こ
の時点では、既に参照フレーム候補番号リストから当該
フレームｆが消去されているのでこの復号異常有り(NAC
K)信号は無視され、通常通り参照フレームの更新処理に
戻ることになる。
復号異常有り(NACK)信号が通知されることになるが、こ
の時点では、既に参照フレーム候補番号リストから当該
フレームｆが消去されているのでこの復号異常有り(NAC
K)信号は無視され、通常通り参照フレームの更新処理に
戻ることになる。
【０１４８】このように、前フレームの伝送異常により
正常復号不可能な場合にも復号異常有り（NACK）信号を
返すこととし、参照フレーム候補番号リストをチェック
する機能と、希望参照フレーム番号を復号異常有り(NAC
K)信号に付加して伝送する機能の両方を備えることによ
り、復号異常有り(NACK)信号に伝送誤りが生じても、大
幅な画質劣化を防ぐことができる。
正常復号不可能な場合にも復号異常有り（NACK）信号を
返すこととし、参照フレーム候補番号リストをチェック
する機能と、希望参照フレーム番号を復号異常有り(NAC
K)信号に付加して伝送する機能の両方を備えることによ
り、復号異常有り(NACK)信号に伝送誤りが生じても、大
幅な画質劣化を防ぐことができる。
【０１４９】なお、参照フレーム候補番号リストをチェ
ックする機能が必要であることを補足説明しておく。仮
に、このチェック機能がないと、復号異常有り(NACK)信
号に誤りがない場合に図２５のような事態、すなわち、
フレームｅの復号異常有り(NACK)信号に対しても希望参
照フレーム番号に従って参照フレームをフレームｃへ戻
してしまうので、符号化効率が低下してしまう。
ックする機能が必要であることを補足説明しておく。仮
に、このチェック機能がないと、復号異常有り(NACK)信
号に誤りがない場合に図２５のような事態、すなわち、
フレームｅの復号異常有り(NACK)信号に対しても希望参
照フレーム番号に従って参照フレームをフレームｃへ戻
してしまうので、符号化効率が低下してしまう。
【０１５０】（Ｅ−３）第５の実施形態の効果 以上のように、第５の実施形態によれば、確認信号とし
て復号異常有り(NACK)信号を受信側から送信側に送出す
ることにし、復号異常有り(NACK)信号が受信されない場
合には、参照フレームを毎回更新するようにしたので、
符号化効率が低下しなくて済む符号化を実現することが
できる。
て復号異常有り(NACK)信号を受信側から送信側に送出す
ることにし、復号異常有り(NACK)信号が受信されない場
合には、参照フレームを毎回更新するようにしたので、
符号化効率が低下しなくて済む符号化を実現することが
できる。
【０１５１】また、伝送誤りが復号異常有り(NACK)信号
によって通知された場合には、希望参照フレーム番号で
指定されたフレームまで参照フレームを戻して復号動作
を継続するようにしたことにより、伝送路上で誤りが生
じた場合にも、復号異常有り(NACK)信号自身の伝送に誤
りが生じた場合にも、その後に符号化されるフレームに
ついてＩフレームを待つことなく、正常な復号動作を継
続することができる符号化効率の低下がほとんどない符
号化を実現できる。
によって通知された場合には、希望参照フレーム番号で
指定されたフレームまで参照フレームを戻して復号動作
を継続するようにしたことにより、伝送路上で誤りが生
じた場合にも、復号異常有り(NACK)信号自身の伝送に誤
りが生じた場合にも、その後に符号化されるフレームに
ついてＩフレームを待つことなく、正常な復号動作を継
続することができる符号化効率の低下がほとんどない符
号化を実現できる。
【０１５２】さらに、参照フレーム候補番号リストをチ
ェックする機能を設けたことにより、必要以上に過去の
時点のフレームまで参照フレームが遡る事態を避けるこ
とができ、符号化効率の低下がほとんど見られない符号
化を実現できる。
ェックする機能を設けたことにより、必要以上に過去の
時点のフレームまで参照フレームが遡る事態を避けるこ
とができ、符号化効率の低下がほとんど見られない符号
化を実現できる。
【０１５３】（Ｆ）第６の実施形態 ここでは、確認信号として、復号異常無し(ACK) 信号と
復号異常有り(NACK)信号との両方を用い、これらを伝送
路の状態に応じて適応的に切り替える伝送システムにつ
いて説明する。
復号異常有り(NACK)信号との両方を用い、これらを伝送
路の状態に応じて適応的に切り替える伝送システムにつ
いて説明する。
【０１５４】この伝送システムを構成する動画像符号化
装置（送信側）は、受信側から通知される確認信号とし
ての復号異常有無信号に従って参照フレーム画像を更新
する手段と、確認信号を利用して伝送路の状態を判定す
る手段と、判定した伝送路の状態により参照フレーム画
像の更新方法を切替える手段の３つを備える点を特徴と
する。
装置（送信側）は、受信側から通知される確認信号とし
ての復号異常有無信号に従って参照フレーム画像を更新
する手段と、確認信号を利用して伝送路の状態を判定す
る手段と、判定した伝送路の状態により参照フレーム画
像の更新方法を切替える手段の３つを備える点を特徴と
する。
【０１５５】また、この伝送システムを構成する動画像
復号化装置（受信側）は、送信側からの符号データを復
号し復号異常の有無を判定して、復号異常有無信号を送
信側へ通知する手段を備える点を特徴とする。
復号化装置（受信側）は、送信側からの符号データを復
号し復号異常の有無を判定して、復号異常有無信号を送
信側へ通知する手段を備える点を特徴とする。
【０１５６】そして、伝送路の状態が良いと判定された
場合には、毎フレームごと参照フレーム画像を更新し、
伝送異常がある時だけ受信確認したフレームに参照フレ
ーム画像を戻する。一方、伝送路の状態が悪いと判定さ
れた場合には、受信の確認がなされた時に、参照フレー
ム画像を随時更新する。
場合には、毎フレームごと参照フレーム画像を更新し、
伝送異常がある時だけ受信確認したフレームに参照フレ
ーム画像を戻する。一方、伝送路の状態が悪いと判定さ
れた場合には、受信の確認がなされた時に、参照フレー
ム画像を随時更新する。
【０１５７】次に、かかる特徴を有する動画像符号化装
置と動画像復号化装置の構成を説明する。
置と動画像復号化装置の構成を説明する。
【０１５８】（Ｆ−１）動画像符号化装置（送信側）６
００の構成 図２６に、第６の実施形態に係る動画像符号化装置（送
信側）６００の構成例を示す。なお、図２６において
は、第２の実施形態に係る動画像符号化装置３００の構
成を示した図１２との同一、対応部分に、同一、対応符
号を付して示している。図２６に示すように、多くの構
成は第２の実施形態と同様であるため、異なる部分、す
なわち、確認信号受信部３０８Ａ、参照フレーム更新部
３０９Ｄ、伝送状態判定部３１５、更新方法切替部３１
６についてのみ説明する。
００の構成 図２６に、第６の実施形態に係る動画像符号化装置（送
信側）６００の構成例を示す。なお、図２６において
は、第２の実施形態に係る動画像符号化装置３００の構
成を示した図１２との同一、対応部分に、同一、対応符
号を付して示している。図２６に示すように、多くの構
成は第２の実施形態と同様であるため、異なる部分、す
なわち、確認信号受信部３０８Ａ、参照フレーム更新部
３０９Ｄ、伝送状態判定部３１５、更新方法切替部３１
６についてのみ説明する。
【０１５９】確認信号受信部３０８Ａは、受信側の動画
像復号化装置７００がどのフレーム（又は、ブロック）
を復号できたかという確認信号を受信する手段であり、
復号異常の有無とそのフレーム番号（又は、ブロック番
号）とを参照フレーム更新部３０９Ｄ及び伝送状態判定
部３１５にそれぞれ渡す。
像復号化装置７００がどのフレーム（又は、ブロック）
を復号できたかという確認信号を受信する手段であり、
復号異常の有無とそのフレーム番号（又は、ブロック番
号）とを参照フレーム更新部３０９Ｄ及び伝送状態判定
部３１５にそれぞれ渡す。
【０１６０】ここで、確認信号受信部３０８Ａは、復号
異常有無信号が一定時間以上経過しても到着しない場合
に、そのフレーム（又は、ブロック）を復号異常有りと
判定する。
異常有無信号が一定時間以上経過しても到着しない場合
に、そのフレーム（又は、ブロック）を復号異常有りと
判定する。
【０１６１】なお、多地点間通信時の場合、確認信号受
信部３０８Ａは、各地点から確認信号を受信し、全地点
において受信できたフレーム番号（又は、ブロック番
号）を算出して参照フレーム更新部３０９Ｄへ渡す。こ
の時、伝送状態判定部３１５に対しても、全地点におい
て受信できたフレーム番号（又は、ブロック番号）を算
出して渡しても良いが、各地点からの結果を別々に渡す
方法を採用することもできる。
信部３０８Ａは、各地点から確認信号を受信し、全地点
において受信できたフレーム番号（又は、ブロック番
号）を算出して参照フレーム更新部３０９Ｄへ渡す。こ
の時、伝送状態判定部３１５に対しても、全地点におい
て受信できたフレーム番号（又は、ブロック番号）を算
出して渡しても良いが、各地点からの結果を別々に渡す
方法を採用することもできる。
【０１６２】参照フレーム更新部３０９Ｄは、intra/in
ter 判断部３０６や確認信号受信部３０８Ａ、更新方法
切替部３１６からの指示に従い、参照フレームを更新す
る手段である。
ter 判断部３０６や確認信号受信部３０８Ａ、更新方法
切替部３１６からの指示に従い、参照フレームを更新す
る手段である。
【０１６３】本実施形態の場合、この参照フレーム更新
方法には２つの方法がある。一つは、復号異常の無かっ
たフレーム（又は、ブロック）を随時参照フレーム画像
として更新する方法であり、もう一つは、通常は毎フレ
ームを参照フレーム画像として用い、復号異常が有る時
に、参照フレームを復号異常の無い古いフレーム（又
は、ブロック）に戻す方法である。以下、前者の更新方
法を復号異常無し(ACK)モード、後者の更新方法を復号
異常有り(NACK)モードと呼ぶ。
方法には２つの方法がある。一つは、復号異常の無かっ
たフレーム（又は、ブロック）を随時参照フレーム画像
として更新する方法であり、もう一つは、通常は毎フレ
ームを参照フレーム画像として用い、復号異常が有る時
に、参照フレームを復号異常の無い古いフレーム（又
は、ブロック）に戻す方法である。以下、前者の更新方
法を復号異常無し(ACK)モード、後者の更新方法を復号
異常有り(NACK)モードと呼ぶ。
【０１６４】この参照フレーム更新部３０９Ｄは、更新
方法切替部３１６からの指示により、 ACKモードとNACK
モードとを切替える。
方法切替部３１６からの指示により、 ACKモードとNACK
モードとを切替える。
【０１６５】例えば、 ACKモード時、確認信号受信部３
０８Ａから「復号異常無し」を受けると、参照フレーム
更新部３０９Ｄは、そのフレームデータ（又は、ブロッ
クデータ）をフレームメモリ部３０４から参照フレーム
メモリ部３０５へコピーする。このとき、その番号以前
のデータをフレームメモリ部３０４から消去しても良
い。なお、「復号異常有り」を受けたときは、何も行な
わない。
０８Ａから「復号異常無し」を受けると、参照フレーム
更新部３０９Ｄは、そのフレームデータ（又は、ブロッ
クデータ）をフレームメモリ部３０４から参照フレーム
メモリ部３０５へコピーする。このとき、その番号以前
のデータをフレームメモリ部３０４から消去しても良
い。なお、「復号異常有り」を受けたときは、何も行な
わない。
【０１６６】一方、NACKモード時、参照フレーム更新部
３０９Ｄは、通常、符号化部３０２の符号化タイミング
と同期して、毎フレームデータ（又は、ブロックデー
タ）をフレームメモリ部３０４から参照フレームメモリ
部３０５へコピーする。ここで、確認信号受信部３０８
Ａから「復号異常無し」を受けた場合には、それまでに
到着した古いフレーム（又は、ブロック）のうち、復号
異常無しの確認が取れている最新のフレーム番号（又
は、ブロック番号）を記録している最新受信番号を更新
する。この時、フレームメモリ部３０４から最新受信番
号より古いデータを消去しても良い。なお、「復号異常
有り」を受けたときは、参照フレームを戻すために最新
受信番号のフレームデータ（又は、ブロックデータ）を
フレームメモリ部３０４から参照フレームメモリ部３０
５へコピーする。
３０９Ｄは、通常、符号化部３０２の符号化タイミング
と同期して、毎フレームデータ（又は、ブロックデー
タ）をフレームメモリ部３０４から参照フレームメモリ
部３０５へコピーする。ここで、確認信号受信部３０８
Ａから「復号異常無し」を受けた場合には、それまでに
到着した古いフレーム（又は、ブロック）のうち、復号
異常無しの確認が取れている最新のフレーム番号（又
は、ブロック番号）を記録している最新受信番号を更新
する。この時、フレームメモリ部３０４から最新受信番
号より古いデータを消去しても良い。なお、「復号異常
有り」を受けたときは、参照フレームを戻すために最新
受信番号のフレームデータ（又は、ブロックデータ）を
フレームメモリ部３０４から参照フレームメモリ部３０
５へコピーする。
【０１６７】因みに、intra/inter 判断部３０６からフ
レーム内符号化の指示を受けた場合、参照フレーム更新
部３０９Ｄは、現フレームのデータをフレームメモリ部
３０４から参照フレームメモリ部３０５へコピーし、フ
レームメモリ部３０４の全フレームデータを消去する。
レーム内符号化の指示を受けた場合、参照フレーム更新
部３０９Ｄは、現フレームのデータをフレームメモリ部
３０４から参照フレームメモリ部３０５へコピーし、フ
レームメモリ部３０４の全フレームデータを消去する。
【０１６８】伝送状態判定部３１５は、確認信号受信部
３０８Ａから受けた復号異常の有無通知をもとに、現在
の伝送状態を判定する手段であり、判定結果を更新方法
切替部３１６へ渡す。ここで、伝送状態には「良」と
「悪」との２段階がある。例えば最近のＮフレーム（又
は、Ｎブロック）のうちＭフレーム（又は、Ｍブロッ
ク）以上に伝送異常があると「悪」と判定し、それ未満
の時は「良」とする（Ｎ≧Ｍ）。
３０８Ａから受けた復号異常の有無通知をもとに、現在
の伝送状態を判定する手段であり、判定結果を更新方法
切替部３１６へ渡す。ここで、伝送状態には「良」と
「悪」との２段階がある。例えば最近のＮフレーム（又
は、Ｎブロック）のうちＭフレーム（又は、Ｍブロッ
ク）以上に伝送異常があると「悪」と判定し、それ未満
の時は「良」とする（Ｎ≧Ｍ）。
【０１６９】また、Ｌフレーム（又は、Ｌブロック）以
上連続で伝送異常があると「悪」と判定する。判定基準
は同時に複数存在しても良く、その場合は全ての基準で
「良」の時だけ「良」と判定し、どれか１つの基準でも
「悪」の場合は「悪」と判定する。また、全ての基準で
「悪」の場合のみ「悪」と判定するようにしても良い。
上連続で伝送異常があると「悪」と判定する。判定基準
は同時に複数存在しても良く、その場合は全ての基準で
「良」の時だけ「良」と判定し、どれか１つの基準でも
「悪」の場合は「悪」と判定する。また、全ての基準で
「悪」の場合のみ「悪」と判定するようにしても良い。
【０１７０】更新方法切替部３１６は、伝送状態判定部
３１５で判定された伝送状態に合わせて、参照フレーム
更新部３０９Ｄで実行する更新方法のモード切替を行な
う手段である。例えば、判定結果が「良」である場合に
は、NACKモードに切替え、判定結果が「悪」である場合
には、 ACKモードに切替える。
３１５で判定された伝送状態に合わせて、参照フレーム
更新部３０９Ｄで実行する更新方法のモード切替を行な
う手段である。例えば、判定結果が「良」である場合に
は、NACKモードに切替え、判定結果が「悪」である場合
には、 ACKモードに切替える。
【０１７１】（Ｆ−２）動画像復号化装置（受信側）７
００の構成 続いて、図２７に、第６の実施形態に係る動画像復号化
装置（受信側）７００の構成例を示す。なお、図２７に
おいては、第２の実施形態に係る動画像復号化装置４０
０の構成を示した図１３との同一、対応部分に、同一、
対応符号を付して示している。基本的に本実施形態に係
る動画像復号化装置７００の構成は、第２の実施形態と
同じである。但し、一部機能や動作が異なる部分もある
ので、この点についてのみ説明する。
００の構成 続いて、図２７に、第６の実施形態に係る動画像復号化
装置（受信側）７００の構成例を示す。なお、図２７に
おいては、第２の実施形態に係る動画像復号化装置４０
０の構成を示した図１３との同一、対応部分に、同一、
対応符号を付して示している。基本的に本実施形態に係
る動画像復号化装置７００の構成は、第２の実施形態と
同じである。但し、一部機能や動作が異なる部分もある
ので、この点についてのみ説明する。
【０１７２】参照フレーム比較部４０２Ａは、フレーム
ごと（又は、ブロックごと）に受信した参照フレーム番
号と参照フレームメモリ部４０４に記憶されている自端
末の参照フレーム番号とを比較する手段であり、参照フ
レーム番号が異なる場合、参照フレーム更新部４０３へ
参照フレーム更新要求を通知し、新しい参照フレーム番
号を渡す。なお、この点について、第２の実施形態で
は、 ACKモードを例にして参照フレームが新しくなって
いる場合のみ更新するように説明しているが、NACKモー
ドでは古いフレームに更新することもあり得る点が異な
っている。
ごと（又は、ブロックごと）に受信した参照フレーム番
号と参照フレームメモリ部４０４に記憶されている自端
末の参照フレーム番号とを比較する手段であり、参照フ
レーム番号が異なる場合、参照フレーム更新部４０３へ
参照フレーム更新要求を通知し、新しい参照フレーム番
号を渡す。なお、この点について、第２の実施形態で
は、 ACKモードを例にして参照フレームが新しくなって
いる場合のみ更新するように説明しているが、NACKモー
ドでは古いフレームに更新することもあり得る点が異な
っている。
【０１７３】復号化部４０６Ａは、入力された符号デー
タを復号化する手段であり、復号データを動画像出力部
４０８へ送る。ここで、復号化部４０６Ａは、復号画像
がＩフレームである場合、復号データをフレーム番号と
ともに参照フレームメモリ部４０４へ書き込み、参照フ
レーム画像を更新する。また、復号化部４０６Ａは、復
号画像がＰフレームである場合、参照フレームメモリ部
４０５のデータを参照して復号し、復号データをフレー
ム番号とともにフレームメモリ部４０５へ書き込む。
タを復号化する手段であり、復号データを動画像出力部
４０８へ送る。ここで、復号化部４０６Ａは、復号画像
がＩフレームである場合、復号データをフレーム番号と
ともに参照フレームメモリ部４０４へ書き込み、参照フ
レーム画像を更新する。また、復号化部４０６Ａは、復
号画像がＰフレームである場合、参照フレームメモリ部
４０５のデータを参照して復号し、復号データをフレー
ム番号とともにフレームメモリ部４０５へ書き込む。
【０１７４】なお、復号化部４０６Ａは、ＣＲＣなどに
よる誤り検査によって復号異常の有無を判定し、判定結
果をフレーム番号とともに確認信号送信部４０７へ渡
す。但し、画像データを全て復号してから復号異常の有
無を判定しても良い。
よる誤り検査によって復号異常の有無を判定し、判定結
果をフレーム番号とともに確認信号送信部４０７へ渡
す。但し、画像データを全て復号してから復号異常の有
無を判定しても良い。
【０１７５】（Ｆ−３）動作説明 次に、本実施形態に係る伝送システムによる動画像の伝
送処理を説明する。この実施形態に係る伝送システム
は、前述したように、受信側から得られる確認信号によ
って伝送状態を判定し、伝送状態に応じた参照フレーム
の更新方法を適宜選択しながらフレーム間符号化処理を
行っている。
送処理を説明する。この実施形態に係る伝送システム
は、前述したように、受信側から得られる確認信号によ
って伝送状態を判定し、伝送状態に応じた参照フレーム
の更新方法を適宜選択しながらフレーム間符号化処理を
行っている。
【０１７６】なお、受信側の動作については、モードに
依存しない。すなわち、受信側は、常に復号異常の有無
を送信側へ返すだけで良く、第２の実施形態にて説明し
たのと同様、符号データに多重された参照フレーム番号
をもとに参照フレームを更新して復号動作を繰り返して
いる。
依存しない。すなわち、受信側は、常に復号異常の有無
を送信側へ返すだけで良く、第２の実施形態にて説明し
たのと同様、符号データに多重された参照フレーム番号
をもとに参照フレームを更新して復号動作を繰り返して
いる。
【０１７７】従って、以下、送信側の動作を説明する。
送信側は、 ACK信号とNACK信号により伝送路の状態を判
定し、更新モードを切替えている。ここで、 ACK信号も
NACK信号も到着しない場合には、確認信号に誤りが発生
したと判断し、NACK信号が到着した時と同様の処理を行
なう。
送信側は、 ACK信号とNACK信号により伝送路の状態を判
定し、更新モードを切替えている。ここで、 ACK信号も
NACK信号も到着しない場合には、確認信号に誤りが発生
したと判断し、NACK信号が到着した時と同様の処理を行
なう。
【０１７８】まず、通常時、送信側は、NACKモードで参
照フレーム画像を更新し、更新された参照フレーム画像
に基づいてフレーム画像の符号化を行っている。
照フレーム画像を更新し、更新された参照フレーム画像
に基づいてフレーム画像の符号化を行っている。
【０１７９】ここで、伝送状態判定部３１５は、伝送状
態を常に監視しており、いくつかの判定基準により伝送
状態が「悪」であることが判定されると、参照フレーム
更新方法をNACKモードから ACKモードに切替え、伝送状
態が劣悪な場合に適した符号化モードに移行する。図２
８の例では、伝送異常が１回でも判定された段階で、伝
送状態が「悪」であると判定されている。
態を常に監視しており、いくつかの判定基準により伝送
状態が「悪」であることが判定されると、参照フレーム
更新方法をNACKモードから ACKモードに切替え、伝送状
態が劣悪な場合に適した符号化モードに移行する。図２
８の例では、伝送異常が１回でも判定された段階で、伝
送状態が「悪」であると判定されている。
【０１８０】すなわち、フレームｄについての伝送異常
を通知する復号異常有り(NACK)信号がフレームｆを符号
化する前に到着した段階で、伝送状態が「悪」であると
判定され、フレームｆを符号化するのに用いる参照フレ
ームがフレームｃに戻されている。なお、フレームｅに
ついては、既に符号化が終了し、伝送された後なので受
信側での復号は不可能である。
を通知する復号異常有り(NACK)信号がフレームｆを符号
化する前に到着した段階で、伝送状態が「悪」であると
判定され、フレームｆを符号化するのに用いる参照フレ
ームがフレームｃに戻されている。なお、フレームｅに
ついては、既に符号化が終了し、伝送された後なので受
信側での復号は不可能である。
【０１８１】このようにして、送信側の動作モードが A
CKモードに移ると、送信側は、受信側よりフレームｆに
ついて送られてくる復号異常無し(ACK) 信号を受信し、
異常の認められなかったフレームｆを参照フレームとし
てフレームｈを符号化する。
CKモードに移ると、送信側は、受信側よりフレームｆに
ついて送られてくる復号異常無し(ACK) 信号を受信し、
異常の認められなかったフレームｆを参照フレームとし
てフレームｈを符号化する。
【０１８２】続く、フレームｉの符号化前にもフレーム
ｇについての復号異常無し(ACK) 信号が受信されるの
で、送信側は参照フレームをフレームｇに変更し、フレ
ームｉを符号化する。
ｇについての復号異常無し(ACK) 信号が受信されるの
で、送信側は参照フレームをフレームｇに変更し、フレ
ームｉを符号化する。
【０１８３】ところが、図２８の場合、次のフレームｊ
の符号化前にフレームｈについての復号異常有り(NACK)
信号が受信されるので、送信側は参照フレームの更新を
行わず、フレームｇをそのまま参照フレームとしてフレ
ームｊを符号化する。
の符号化前にフレームｈについての復号異常有り(NACK)
信号が受信されるので、送信側は参照フレームの更新を
行わず、フレームｇをそのまま参照フレームとしてフレ
ームｊを符号化する。
【０１８４】なお、次のフレームｋの符号化前には、フ
レームｉについての復号異常無し(ACK) 信号が受信され
るので、送信側は参照フレームをフレームｉに変更し、
フレームｋを符号化する。
レームｉについての復号異常無し(ACK) 信号が受信され
るので、送信側は参照フレームをフレームｉに変更し、
フレームｋを符号化する。
【０１８５】以下、同様の動作が繰り返され、伝送状態
判定部３１５による伝送状態の判定が「良」と判定され
た時点で、再び、NACKモードに戻る。図２８では、伝送
異常無しが４フレーム連続した時点で伝送状態が「良」
と判定されている。
判定部３１５による伝送状態の判定が「良」と判定され
た時点で、再び、NACKモードに戻る。図２８では、伝送
異常無しが４フレーム連続した時点で伝送状態が「良」
と判定されている。
【０１８６】このように、伝送異常の無い通常時には、
NACKモードにより参照フレーム画像を毎フレーム更新す
るので、往復伝送遅延が大きい場合でも符号化効率の低
下を心配しなくて良い。また、NACKモードを採用すると
伝送異常発生後に復号不可能なフレームが現れるが、伝
送異常が少ない時には、これによる画質劣化はあまり目
立たず、逆に伝送異常の無い区間での画質が主観的に有
効となるため、NACKモードでの画質の劣化は少ない。
NACKモードにより参照フレーム画像を毎フレーム更新す
るので、往復伝送遅延が大きい場合でも符号化効率の低
下を心配しなくて良い。また、NACKモードを採用すると
伝送異常発生後に復号不可能なフレームが現れるが、伝
送異常が少ない時には、これによる画質劣化はあまり目
立たず、逆に伝送異常の無い区間での画質が主観的に有
効となるため、NACKモードでの画質の劣化は少ない。
【０１８７】一方、伝送異常の多い時は、 ACKモードを
採用することにより、復号不可能なフレームもなく、極
端な画質劣化はない。特に、誤りが連続する時には、従
来の符号化はもちろん、NACKモードと比較しても1〜5dB
程度良い結果が得られる。
採用することにより、復号不可能なフレームもなく、極
端な画質劣化はない。特に、誤りが連続する時には、従
来の符号化はもちろん、NACKモードと比較しても1〜5dB
程度良い結果が得られる。
【０１８８】（Ｆ−４）第６の実施形態の効果 以上のように、第６の実施形態によれば、前述の他の実
施形態の場合と同様、受信できたフレームを参照して符
号化を行なうため、次のＩフレームを待たずに復号処理
を行うことができ、符号化効率も良い。
施形態の場合と同様、受信できたフレームを参照して符
号化を行なうため、次のＩフレームを待たずに復号処理
を行うことができ、符号化効率も良い。
【０１８９】また、伝送状態によって、参照フレームの
更新方法を適応的に切替えるようにしたので、最適な符
号化効率を実現することができた。
更新方法を適応的に切替えるようにしたので、最適な符
号化効率を実現することができた。
【０１９０】さらに、伝送異常が無い通常時には、参照
フレーム画像を毎フレームごと更新できるので、往復伝
送遅延が大きい場合でも符号化効率を低下させなくて良
い。
フレーム画像を毎フレームごと更新できるので、往復伝
送遅延が大きい場合でも符号化効率を低下させなくて良
い。
【０１９１】また、伝送異常が少ない時には、定常時の
符号化効率の良いNACKモードを採用するので、画質劣化
が少なくて済む。
符号化効率の良いNACKモードを採用するので、画質劣化
が少なくて済む。
【０１９２】さらに、伝送異常の多い時には、誤り発生
時の画質劣化の少ないACKモードを採用するので、画質
劣化が少ないだけでなく、正常に復号できないフレーム
がないので、急激な劣化もなく画質を安定させることが
できる。
時の画質劣化の少ないACKモードを採用するので、画質
劣化が少ないだけでなく、正常に復号できないフレーム
がないので、急激な劣化もなく画質を安定させることが
できる。
【０１９３】また、送信側で行なうモード切替のための
伝送状況判定には、復号異常有無信号を流用するので、
伝送状況判定のために新しく伝送する情報を追加する必
要がなくて済む。
伝送状況判定には、復号異常有無信号を流用するので、
伝送状況判定のために新しく伝送する情報を追加する必
要がなくて済む。
【０１９４】さらに、受信側の動作は参照フレームの更
新モードに依存しないので、切替えは送信側のみで行え
ば良く、受信側へ通知する必要がない。従って、受信側
の構成を変更する必要がないだけでなく、モード切替に
よる余分な伝送負荷の増加を抑えることができる。特
に、モード切替が発生する時は、伝送路の状態が変化す
る時であり、送受信間で確実に情報を交換するには誤り
訂正符号を付加したり、再送処理を行なうなどかなりの
誤り保護を行なう必要がある。従って、モード切替えの
情報を伝送する必要のないことは、極めて有効である。
新モードに依存しないので、切替えは送信側のみで行え
ば良く、受信側へ通知する必要がない。従って、受信側
の構成を変更する必要がないだけでなく、モード切替に
よる余分な伝送負荷の増加を抑えることができる。特
に、モード切替が発生する時は、伝送路の状態が変化す
る時であり、送受信間で確実に情報を交換するには誤り
訂正符号を付加したり、再送処理を行なうなどかなりの
誤り保護を行なう必要がある。従って、モード切替えの
情報を伝送する必要のないことは、極めて有効である。
【０１９５】（Ｆ−５）第６の実施形態の変形例 (1) なお、上述の実施形態においては、伝送状態を
「良」と「悪」との２段階とし、更新方法を２モードで
実現する例について説明をしたが、これに限定するもの
ではない。例えば、変更方法として３モード以上設定し
ても良い。この場合、例えば、「極悪」段階を追加し、
連続してほとんどのデータに異常がある場合には、量子
化を荒くした符号化を行ない、符号量を削減することに
より誤りの発生する確率を低くするようにしても良い。
「良」と「悪」との２段階とし、更新方法を２モードで
実現する例について説明をしたが、これに限定するもの
ではない。例えば、変更方法として３モード以上設定し
ても良い。この場合、例えば、「極悪」段階を追加し、
連続してほとんどのデータに異常がある場合には、量子
化を荒くした符号化を行ない、符号量を削減することに
より誤りの発生する確率を低くするようにしても良い。
【０１９６】(2) また、上述の実施形態においては、確
認信号としてACK 信号とNACK信号とを常に通知する場合
について説明したが、これに限定するものではない。例
えば、伝送異常のない場合には、ACK 信号だけを通知す
るようにしても良い。その場合、一定時間待ってもACK
信号が到着しない時は、NACK信号が到着したものとみな
して処理を行なう。
認信号としてACK 信号とNACK信号とを常に通知する場合
について説明したが、これに限定するものではない。例
えば、伝送異常のない場合には、ACK 信号だけを通知す
るようにしても良い。その場合、一定時間待ってもACK
信号が到着しない時は、NACK信号が到着したものとみな
して処理を行なう。
【０１９７】(3) さらに、上述の実施形態においては、
モード切替えは送信側だけで行ない、受信側へは通知し
ない構成を説明したが、これに限定するものではない。
受信側へ通知する構成にしても良く、これにより受信側
がフレームメモリ部の消去等を最適に行なうようにして
も良い。例えば、ACK モードの時は、参照フレームに選
定されたフレーム（又は、ブロック）より古いデータは
消去することができる。
モード切替えは送信側だけで行ない、受信側へは通知し
ない構成を説明したが、これに限定するものではない。
受信側へ通知する構成にしても良く、これにより受信側
がフレームメモリ部の消去等を最適に行なうようにして
も良い。例えば、ACK モードの時は、参照フレームに選
定されたフレーム（又は、ブロック）より古いデータは
消去することができる。
【０１９８】(4) また、上述の実施形態においては、モ
ード切替えは送信側だけで行う場合について述べたが、
モード切替えを受信側で行なうようにしても良い。確認
信号ではフレームやブロック単位の誤り率しか検出でき
ないが、受信側ではＣＲＣにより伝送路のビット単位の
誤り率が検出できるので、きめの細かい対応が可能とな
る。また、受信側では検出した誤り率をもとに、モード
指定まで行なっても良く、また、検出した誤り率を送信
側へ送り、それをもとに送信側でモード切替を行なって
も良い。
ード切替えは送信側だけで行う場合について述べたが、
モード切替えを受信側で行なうようにしても良い。確認
信号ではフレームやブロック単位の誤り率しか検出でき
ないが、受信側ではＣＲＣにより伝送路のビット単位の
誤り率が検出できるので、きめの細かい対応が可能とな
る。また、受信側では検出した誤り率をもとに、モード
指定まで行なっても良く、また、検出した誤り率を送信
側へ送り、それをもとに送信側でモード切替を行なって
も良い。
【０１９９】(5) さらに、上述の実施形態においては、
フレーム内符号化時には参照フレーム更新部３０９Ｄが
フレームメモリ部３０４からフレームデータを参照フレ
ームメモリ部３０５へコピーするように説明したが、こ
れに限定するものではない。例えば、intra/inter 判断
部３０６からのフレーム内符号化要求信号を復号化部３
０３へ渡すようにし、フレーム内符号化時には復号化部
３０３から直接参照フレームメモリ部３０５へフレーム
データを書き込むようにしても良い。この場合、コピー
する処理を省略できる。
フレーム内符号化時には参照フレーム更新部３０９Ｄが
フレームメモリ部３０４からフレームデータを参照フレ
ームメモリ部３０５へコピーするように説明したが、こ
れに限定するものではない。例えば、intra/inter 判断
部３０６からのフレーム内符号化要求信号を復号化部３
０３へ渡すようにし、フレーム内符号化時には復号化部
３０３から直接参照フレームメモリ部３０５へフレーム
データを書き込むようにしても良い。この場合、コピー
する処理を省略できる。
【０２００】(6) また、上述の実施形態においては、参
照フレームメモリ部３０５とフレームメモリ部３０４と
を別々に分けて説明したが、これに限定するものではな
い。１つのメモリ上にフレームデータを書き込み、参照
フレームはメモリ位置を示すポインタなどで表すように
しても良い。この場合、参照フレーム更新時にフレーム
メモリから参照フレームメモリへデータをコピーするす
る必要がなく、ポインタを移動させるだけで良い。
照フレームメモリ部３０５とフレームメモリ部３０４と
を別々に分けて説明したが、これに限定するものではな
い。１つのメモリ上にフレームデータを書き込み、参照
フレームはメモリ位置を示すポインタなどで表すように
しても良い。この場合、参照フレーム更新時にフレーム
メモリから参照フレームメモリへデータをコピーするす
る必要がなく、ポインタを移動させるだけで良い。
【０２０１】(7) さらに、上述の実施形態においては、
Ｌフレーム以上連続して異常が検出された場合又はＬブ
ロック以上連続して異常が検出された場合に、伝送路の
状態が悪いと判定したが、連続する数フレームのうち同
じ位置のブロックについて復号異常が連続した場合に伝
送路の状態が悪いと判定しても良い。
Ｌフレーム以上連続して異常が検出された場合又はＬブ
ロック以上連続して異常が検出された場合に、伝送路の
状態が悪いと判定したが、連続する数フレームのうち同
じ位置のブロックについて復号異常が連続した場合に伝
送路の状態が悪いと判定しても良い。
【０２０２】(8) また、伝送状態判定部３１５について
は、複数の判定基準を用意しておき、これら複数の判定
基準のうちいずれか一つの基準について伝送状態が悪い
と判断されたとされたときに、伝送路の状態が悪いと判
断させるようにしても良い。
は、複数の判定基準を用意しておき、これら複数の判定
基準のうちいずれか一つの基準について伝送状態が悪い
と判断されたとされたときに、伝送路の状態が悪いと判
断させるようにしても良い。
【０２０３】（Ｇ）第７の実施形態 この第７の実施形態で説明する伝送システムは、第６の
実施形態において説明したモードの切替を送信側端末を
使用する使用者の指示により強制的に切り替えることが
できるようにし、使用者の好みを反映できるようにする
機能を付加したものである。
実施形態において説明したモードの切替を送信側端末を
使用する使用者の指示により強制的に切り替えることが
できるようにし、使用者の好みを反映できるようにする
機能を付加したものである。
【０２０４】従って、本実施形態において第６の実施形
態の構成に追加された部分は、送信側において、使用者
からの伝送状態判定基準の変更要求を受け、判定基準を
変更する手段と、使用者からの更新方法変更要求を受
け、強制的に更新モードを切替える手段との２つであ
る。以下、動画像符号化装置（送信側）の構成を説明す
る。なお、動画像復号化装置（受信側）の構成について
は、第６の実施形態と同じであるため説明は省略する。
態の構成に追加された部分は、送信側において、使用者
からの伝送状態判定基準の変更要求を受け、判定基準を
変更する手段と、使用者からの更新方法変更要求を受
け、強制的に更新モードを切替える手段との２つであ
る。以下、動画像符号化装置（送信側）の構成を説明す
る。なお、動画像復号化装置（受信側）の構成について
は、第６の実施形態と同じであるため説明は省略する。
【０２０５】（Ｇ−１）動画像符号化装置（送信側）８
００の構成 図２９は、図２６との同一、対応部分に同一、対応符号
を付して示す動画像符号化装置８００の構成例である。
ここでは、第６の実施形態の構成と異なる部分について
のみ説明する。
００の構成 図２９は、図２６との同一、対応部分に同一、対応符号
を付して示す動画像符号化装置８００の構成例である。
ここでは、第６の実施形態の構成と異なる部分について
のみ説明する。
【０２０６】伝送状態判定部３１５Ａは、第６の実施形
態で説明した伝送状態判定部３１５と同等の機能を有す
るのに加え、判定基準変更部３１７から指示がある場合
に、判定基準を変更し、以降は新しい判定基準に基づき
伝送状態を判定する手段である。
態で説明した伝送状態判定部３１５と同等の機能を有す
るのに加え、判定基準変更部３１７から指示がある場合
に、判定基準を変更し、以降は新しい判定基準に基づき
伝送状態を判定する手段である。
【０２０７】更新方法切替部３１６Ａは、第６の実施形
態で説明した更新方法切替部３１６と同等の機能を有す
るのに加え、更新方法変更部３１８から指示がある場合
に、伝送路状態に関係なく指示された更新モードを固定
する手段である。なお、リセット指示があった場合、更
新方法切替部３１６Ａは、伝送路状態に従って、更新モ
ードを切替える処理に戻るようになっている。
態で説明した更新方法切替部３１６と同等の機能を有す
るのに加え、更新方法変更部３１８から指示がある場合
に、伝送路状態に関係なく指示された更新モードを固定
する手段である。なお、リセット指示があった場合、更
新方法切替部３１６Ａは、伝送路状態に従って、更新モ
ードを切替える処理に戻るようになっている。
【０２０８】判定基準変更部３１７は、使用者からの判
定基準変更要求を受け付け、要求に従って新しい判定基
準を決定し、伝送状態判定部３１５Ａへ渡す手段であ
る。
定基準変更要求を受け付け、要求に従って新しい判定基
準を決定し、伝送状態判定部３１５Ａへ渡す手段であ
る。
【０２０９】更新方法変更部３１８は、使用者からの更
新方法変更要求を入力し、要求に従って更新方法を決定
し、更新方法切替部３１６Ａへ渡す手段である。
新方法変更要求を入力し、要求に従って更新方法を決定
し、更新方法切替部３１６Ａへ渡す手段である。
【０２１０】（Ｇ−２）動作説明 次に、本実施形態に係る伝送システムによる動画像の伝
送処理を説明する。この実施形態に係る伝送システムに
ついても、基本的な符号化処理の内容は前述した第６の
実施形態と同様であるので、ここでは、本実施形態に特
有な動作について説明する。
送処理を説明する。この実施形態に係る伝送システムに
ついても、基本的な符号化処理の内容は前述した第６の
実施形態と同様であるので、ここでは、本実施形態に特
有な動作について説明する。
【０２１１】動画像符号化装置８００を使用する使用者
は、次の２通りの方法で更新モードを変更操作すること
ができる。
は、次の２通りの方法で更新モードを変更操作すること
ができる。
【０２１２】１つは、伝送路状態を判定する時の判定基
準の変更操作である。例えば、１０ブロックのうち３ブ
ロックが復号異常有りの場合に「悪」と判定していたの
を、２０ブロックのうち７ブロックなどと変更できる。
これにより、更新モードの切替タイミングを使用者の好
みや経験に応じて変更することが可能になる。
準の変更操作である。例えば、１０ブロックのうち３ブ
ロックが復号異常有りの場合に「悪」と判定していたの
を、２０ブロックのうち７ブロックなどと変更できる。
これにより、更新モードの切替タイミングを使用者の好
みや経験に応じて変更することが可能になる。
【０２１３】もう１つは、直接更新モードを変更する操
作である。これにより、現在の伝送状態の如何に拘わら
ず、更新方法を強制的かつ直接的に指定することが可能
になる。
作である。これにより、現在の伝送状態の如何に拘わら
ず、更新方法を強制的かつ直接的に指定することが可能
になる。
【０２１４】（Ｇ−３）第７の実施形態の効果 以上のように、第７の実施形態によれば、第６の実施形
態で説明したのと同様の効果が得られるのに加え、伝送
路の判定基準を使用者の意志に応じて変更できるので、
送信端末使用者の僅かな好みの違いを反映した符号化方
法を実現することができる。また、伝送路の特性の違い
にも容易に適合することができる。
態で説明したのと同様の効果が得られるのに加え、伝送
路の判定基準を使用者の意志に応じて変更できるので、
送信端末使用者の僅かな好みの違いを反映した符号化方
法を実現することができる。また、伝送路の特性の違い
にも容易に適合することができる。
【０２１５】また、更新方法を直接指定できるので、送
信端末使用者の好みを反映でき、各更新モードによる符
号化効率の差異等の評価も容易に行うことができるよう
になる。
信端末使用者の好みを反映でき、各更新モードによる符
号化効率の差異等の評価も容易に行うことができるよう
になる。
【０２１６】（Ｈ）第８の実施形態 この第８の実施形態で説明する伝送システムは、第６の
実施形態において説明したモードの切替を受信側端末を
使用する使用者の指示により強制的に切り替えることが
できるようにし、使用者の好みを反映できるようにする
機能を付加したものである。すなわち、第７の実施形態
とは、使用者の位置が異なる点を除いて同じものであ
る。
実施形態において説明したモードの切替を受信側端末を
使用する使用者の指示により強制的に切り替えることが
できるようにし、使用者の好みを反映できるようにする
機能を付加したものである。すなわち、第７の実施形態
とは、使用者の位置が異なる点を除いて同じものであ
る。
【０２１７】このため、本実施形態の受信側において
は、第６の実施形態の構成に対して、使用者からの伝送
状態判定基準の変更要求を受けて送信側へ判定基準変更
信号を送信する手段と、使用者からの更新方法変更要求
を受けて送信側へ更新方法変更信号を送信する手段とを
付加した点を特徴とする。
は、第６の実施形態の構成に対して、使用者からの伝送
状態判定基準の変更要求を受けて送信側へ判定基準変更
信号を送信する手段と、使用者からの更新方法変更要求
を受けて送信側へ更新方法変更信号を送信する手段とを
付加した点を特徴とする。
【０２１８】また、送信側においては、第６の実施形態
の構成に対して、受信側からの判定基準変更信号を受け
て判定基準を変更する手段と、受信側からの更新方法変
更信号を受けて強制的に更新モードを切替える手段とを
付加した点を特徴とする。
の構成に対して、受信側からの判定基準変更信号を受け
て判定基準を変更する手段と、受信側からの更新方法変
更信号を受けて強制的に更新モードを切替える手段とを
付加した点を特徴とする。
【０２１９】以下、更新方法切替に受信側使用者の好み
を反映させることができる本実施形態の伝送システムを
構成する各部の構成について説明する。
を反映させることができる本実施形態の伝送システムを
構成する各部の構成について説明する。
【０２２０】（Ｈ−１）動画像符号化装置（送信側）９
００の構成 図３０は、図２６との同一、対応部分に同一、対応符号
を付して示す動画像符号化装置９００の構成例である。
ここでは、第６の実施形態の構成と異なる部分について
のみ説明する。
００の構成 図３０は、図２６との同一、対応部分に同一、対応符号
を付して示す動画像符号化装置９００の構成例である。
ここでは、第６の実施形態の構成と異なる部分について
のみ説明する。
【０２２１】伝送状態判定部３１５Ａは、第６の実施形
態で説明した伝送状態判定部３１５と同等の機能を有す
るのに加え、判定基準変更部３１７Ａから指示がある場
合に、判定基準を変更し、以降は新しい判定基準に基づ
き伝送状態を判定する手段である。
態で説明した伝送状態判定部３１５と同等の機能を有す
るのに加え、判定基準変更部３１７Ａから指示がある場
合に、判定基準を変更し、以降は新しい判定基準に基づ
き伝送状態を判定する手段である。
【０２２２】更新方法切替部３１６Ａは、第６の実施形
態で説明した更新方法切替部３１６と同等の機能を有す
るのに加え、更新方法変更部３１８Ａから指示がある場
合に、伝送路状態に関係なく指示された更新モードを固
定する手段である。なお、リセット指示があった場合、
更新方法切替部３１６Ａは、伝送路状態に従って、更新
モードを切替える処理に戻るようになっている。
態で説明した更新方法切替部３１６と同等の機能を有す
るのに加え、更新方法変更部３１８Ａから指示がある場
合に、伝送路状態に関係なく指示された更新モードを固
定する手段である。なお、リセット指示があった場合、
更新方法切替部３１６Ａは、伝送路状態に従って、更新
モードを切替える処理に戻るようになっている。
【０２２３】判定基準変更部３１７Ａは、受信側の動画
像復号化装置１０００を使用する使用者からの判定基準
変更要求を伝送路を介して受信し、要求に従って新しい
判定基準を決定し、伝送状態判定部３１５Ａへ渡す手段
である。
像復号化装置１０００を使用する使用者からの判定基準
変更要求を伝送路を介して受信し、要求に従って新しい
判定基準を決定し、伝送状態判定部３１５Ａへ渡す手段
である。
【０２２４】更新方法変更部３１８Ａも、同じく、受信
側の動画像復号化装置１０００を使用する使用者からの
更新方法変更要求を伝送路を介して受信し、要求に従っ
て更新方法を決定し、更新方法切替部３１６Ａへ渡す手
段である。
側の動画像復号化装置１０００を使用する使用者からの
更新方法変更要求を伝送路を介して受信し、要求に従っ
て更新方法を決定し、更新方法切替部３１６Ａへ渡す手
段である。
【０２２５】（Ｈ−２）動画像復号化装置（受信側）１
０００の構成 図３１は、図２７との同一、対応部分に同一、対応符号
を付して示す動画像復号化装置１０００の構成例であ
る。ここでは、第６の実施形態の構成と異なる部分につ
いてのみ説明する。
０００の構成 図３１は、図２７との同一、対応部分に同一、対応符号
を付して示す動画像復号化装置１０００の構成例であ
る。ここでは、第６の実施形態の構成と異なる部分につ
いてのみ説明する。
【０２２６】判定基準変更信号送信部４１０は、受信端
末を使用する使用者からの判定基準変更要求を入力し、
要求に従い判定基準変更信号を送信側の動画像符号化装
置９００へ伝送路を介して送信する手段である。
末を使用する使用者からの判定基準変更要求を入力し、
要求に従い判定基準変更信号を送信側の動画像符号化装
置９００へ伝送路を介して送信する手段である。
【０２２７】また、更新方法変更信号送信部４１１は、
同じく、受信端末を使用する使用者からの更新方法変更
要求を入力し、要求に従い更新方法変更信号を送信側の
動画像符号化装置９００へ送信する手段である。
同じく、受信端末を使用する使用者からの更新方法変更
要求を入力し、要求に従い更新方法変更信号を送信側の
動画像符号化装置９００へ送信する手段である。
【０２２８】（Ｈ−３）動作説明 次に、本実施形態に係る伝送システムによる動画像の伝
送処理を説明する。この実施形態に係る伝送システムに
ついても、基本的な符号化処理の内容は前述した第６の
実施形態と同様であるので、ここでは、本実施形態に特
有な動作について説明する。
送処理を説明する。この実施形態に係る伝送システムに
ついても、基本的な符号化処理の内容は前述した第６の
実施形態と同様であるので、ここでは、本実施形態に特
有な動作について説明する。
【０２２９】受信端末である動画像復号化装置１０００
を使用する使用者は、次の２通りの方法で更新モードを
変更操作することができる。
を使用する使用者は、次の２通りの方法で更新モードを
変更操作することができる。
【０２３０】１つは、伝送路状態を判定する時の判定基
準の変更操作であり、１つは、直接変更モードを変更す
る操作である。
準の変更操作であり、１つは、直接変更モードを変更す
る操作である。
【０２３１】いずれにしても、図示されていない操作入
力装置より動画像復号化装置１０００に入力された操作
内容は、判定基準変更信号送信部４１０及び更新方法変
更信号送信部４１１より伝送路を介して送信側へ伝送さ
れ、送信側の判定基準及び更新モードが変更されること
になる。
力装置より動画像復号化装置１０００に入力された操作
内容は、判定基準変更信号送信部４１０及び更新方法変
更信号送信部４１１より伝送路を介して送信側へ伝送さ
れ、送信側の判定基準及び更新モードが変更されること
になる。
【０２３２】（Ｈ−４）第８の実施形態の効果 以上のように、第８の実施形態によれば、第６の実施形
態で説明したのと同様の効果が得られるのに加え、伝送
路の判定基準を使用者の意志に応じて変更できるので、
受信端末使用者の僅かな好みの違いを反映した符号化方
法を実現することができる。また、伝送路の特性の違い
にも容易に適合することができる。特にこの場合は、使
用者が受信端末において、実際に伝送された画像データ
を見ながら操作できるので、よりきめの細かい操作が可
能となる。
態で説明したのと同様の効果が得られるのに加え、伝送
路の判定基準を使用者の意志に応じて変更できるので、
受信端末使用者の僅かな好みの違いを反映した符号化方
法を実現することができる。また、伝送路の特性の違い
にも容易に適合することができる。特にこの場合は、使
用者が受信端末において、実際に伝送された画像データ
を見ながら操作できるので、よりきめの細かい操作が可
能となる。
【０２３３】また、更新方法を直接指定できるので、送
信端末使用者の好みを反映でき、各更新モードによる符
号化効率の差異等の評価も容易に行うことができるよう
になる。
信端末使用者の好みを反映でき、各更新モードによる符
号化効率の差異等の評価も容易に行うことができるよう
になる。
【０２３４】（Ｈ−５）第８の実施形態の変形例 (1) なお、上述の第８の実施形態では、第６の実施形態
をもとに説明したが、第７の実施形態と組み合わせてた
構成とすることも可能である。このように、２つの実施
形態を組み合わせて構成すれば、それぞれの効果を合わ
せて得ることができる。
をもとに説明したが、第７の実施形態と組み合わせてた
構成とすることも可能である。このように、２つの実施
形態を組み合わせて構成すれば、それぞれの効果を合わ
せて得ることができる。
【０２３５】（Ｉ）他の利用形態 (1) 上述の各実施形態において説明した動画像符号化装
置及び動画像復号化装置のそれぞれは、ハードウェアに
よって実現してもソフトウェアによって実現しても良
い。
置及び動画像復号化装置のそれぞれは、ハードウェアに
よって実現してもソフトウェアによって実現しても良
い。
【０２３６】(2) また、上述の各実施形態においては、
被伝送データを動画像データとして説明したが、被伝送
データは、音声データであっても、２値データであって
も良い。
被伝送データを動画像データとして説明したが、被伝送
データは、音声データであっても、２値データであって
も良い。
【０２３７】
【発明の効果】以上のように、本発明によれば、画像復
号化装置から画像符号化装置に対して、復号異常有無信
号とフレーム番号とを送信させることにし、一方、画像
符号化装置側では、当該復号異常有無信号及びフレーム
番号に基づいて、参照画像の更新を制御させるようにし
たことにより、符号化データを送信する伝送路が、フレ
ーム欠落が少ない伝送品質の高い伝送路である場合には
高画質を維持でき、フレーム欠落が多く発生する伝送品
質の低い伝送路である場合には後に送られてくるＩフレ
ームを待たずにＰフレームを復号できるようになる。
号化装置から画像符号化装置に対して、復号異常有無信
号とフレーム番号とを送信させることにし、一方、画像
符号化装置側では、当該復号異常有無信号及びフレーム
番号に基づいて、参照画像の更新を制御させるようにし
たことにより、符号化データを送信する伝送路が、フレ
ーム欠落が少ない伝送品質の高い伝送路である場合には
高画質を維持でき、フレーム欠落が多く発生する伝送品
質の低い伝送路である場合には後に送られてくるＩフレ
ームを待たずにＰフレームを復号できるようになる。
【０２３８】また、以上のように、本発明によれば、画
像符号化装置における符号化の際、フレーム内符号化さ
れた入力画像のうち最近のものを参照画像として用いて
フレーム間符号化した現点の入力画像を第１階層目の符
号化データとして送信すると共に、当該第１階層目の符
号化データを復号して得た中間画像を、以前にフレーム
間符号化された画像を参照画像に用いて再度フレーム間
符号化した現時点の入力画像を第２階層目の符号化デー
タとして送信するようにする。そして、画像復号化装置
における復号化の際、階層情報によって第１階層目の符
号化データであると判別された符号化データについて
は、以前に受信したフレーム内符号化画像のうち最近の
ものを参照して復号することにより中間画像を得、さら
に第２階層目の符号化データであると判別された符号化
データについては、以前この符号化データを符号化する
際に使用した画像を参照画像として用いて復号し、復号
結果を中間画像に付加してより画質の高い最終的な画像
を得るようにする。このように符号化処理及び復号化処
理のそれぞれを２段階処理としたことにより、途中のＰ
フレームについてフレーム欠落が生じても、次のＰフレ
ームについては最近のＩフレームを参照した復号処理に
より中間画像の段階までは復号化することができる。こ
れにより、フレーム欠落が発生しても、後に送られてく
るＩフレームを待たずにＰフレームを復号可能にするこ
とができるようになる。
像符号化装置における符号化の際、フレーム内符号化さ
れた入力画像のうち最近のものを参照画像として用いて
フレーム間符号化した現点の入力画像を第１階層目の符
号化データとして送信すると共に、当該第１階層目の符
号化データを復号して得た中間画像を、以前にフレーム
間符号化された画像を参照画像に用いて再度フレーム間
符号化した現時点の入力画像を第２階層目の符号化デー
タとして送信するようにする。そして、画像復号化装置
における復号化の際、階層情報によって第１階層目の符
号化データであると判別された符号化データについて
は、以前に受信したフレーム内符号化画像のうち最近の
ものを参照して復号することにより中間画像を得、さら
に第２階層目の符号化データであると判別された符号化
データについては、以前この符号化データを符号化する
際に使用した画像を参照画像として用いて復号し、復号
結果を中間画像に付加してより画質の高い最終的な画像
を得るようにする。このように符号化処理及び復号化処
理のそれぞれを２段階処理としたことにより、途中のＰ
フレームについてフレーム欠落が生じても、次のＰフレ
ームについては最近のＩフレームを参照した復号処理に
より中間画像の段階までは復号化することができる。こ
れにより、フレーム欠落が発生しても、後に送られてく
るＩフレームを待たずにＰフレームを復号可能にするこ
とができるようになる。
【図１】第２の実施形態に係る動画像符号化装置が受信
を確認した後に次フレームの符号化を始めた場合におけ
る画像符号化の一例を示す説明図である。
を確認した後に次フレームの符号化を始めた場合におけ
る画像符号化の一例を示す説明図である。
【図２】従来例であるＨ.261符号化による画像符号化の
概念図である。
概念図である。
【図３】従来例であるＪＰＥＧ符号化による画像符号化
の概念図である。
の概念図である。
【図４】従来例であるＨ.261符号化においてフレーム欠
落が生じた場合の説明図である。
落が生じた場合の説明図である。
【図５】従来例であるＪＰＥＧ符号化においてフレーム
欠落が生じた場合の説明図である。
欠落が生じた場合の説明図である。
【図６】第１の実施形態に係る動画像符号化装置の構成
例を示すブロック図である。
例を示すブロック図である。
【図７】第１の実施形態に係る動画像復号化装置の構成
例を示すブロック図である。
例を示すブロック図である。
【図８】第１の実施形態に係る動画像符号化装置が前提
とする画像の符号化原理を示す説明図である。
とする画像の符号化原理を示す説明図である。
【図９】第１の実施形態に係る動画像符号化装置による
画像の符号化原理を示す概念図である。
画像の符号化原理を示す概念図である。
【図１０】第１の実施形態においてフレーム欠落が生じ
た場合の動作説明図である。
た場合の動作説明図である。
【図１１】第１の実施形態に係る動画像符号化装置の変
形例を示すブロック図である。
形例を示すブロック図である。
【図１２】第２の実施形態に係る動画像符号化装置の構
成例を示すブロック図である。
成例を示すブロック図である。
【図１３】第２の実施形態に係る動画像復号化装置を構
成例示すブロック図である。
成例示すブロック図である。
【図１４】第２の実施形態に係る動画像符号化装置が受
信を確認する前に次フレームの符号化を始めた場合にお
ける画像符号化の一例を示す説明図である。
信を確認する前に次フレームの符号化を始めた場合にお
ける画像符号化の一例を示す説明図である。
【図１５】第２の実施形態においてフレーム欠落が生じ
た場合の動作説明図である。
た場合の動作説明図である。
【図１６】第２の実施形態に係る動画像符号化装置の変
形例を示すブロック図である。
形例を示すブロック図である。
【図１７】第３の実施形態に係る動画像符号化装置の参
照フレーム更新部を示すブロック図である。
照フレーム更新部を示すブロック図である。
【図１８】確認信号としてACK 信号を使用する場合の画
像符号化例を示す説明図である。
像符号化例を示す説明図である。
【図１９】確認信号であるACK 信号の伝送に誤りがある
場合の画像符号化例を示す説明図である。
場合の画像符号化例を示す説明図である。
【図２０】第４の実施形態に係る動画像符号化装置の参
照フレーム更新部を示すブロック図である。
照フレーム更新部を示すブロック図である。
【図２１】確認信号としてNACK信号を使用する場合の画
像符号化例を示す説明図である。
像符号化例を示す説明図である。
【図２２】第５の実施形態に係る動画像符号化装置の参
照フレーム更新部を示す説明図である。
照フレーム更新部を示す説明図である。
【図２３】確認信号としてNACK信号を使用する場合の画
像符号化例を示す説明図である。
像符号化例を示す説明図である。
【図２４】確認信号であるNACK信号の伝送に誤りがある
場合の画像符号化例を示す説明図である。
場合の画像符号化例を示す説明図である。
【図２５】参照フレーム候補番号リストをチェックする
機能がない場合に生じ得る不都合の説明に供する説明図
である。
機能がない場合に生じ得る不都合の説明に供する説明図
である。
【図２６】第６の実施形態に係る動画像符号化装置の構
成例を示すブロック図である。
成例を示すブロック図である。
【図２７】第６の実施形態に係る動画像復号化装置の構
成例を示すブロック図である。
成例を示すブロック図である。
【図２８】更新モードの切替え機能を利用した参照フレ
ーム更新動作例を示す説明図である。
ーム更新動作例を示す説明図である。
【図２９】第７の実施形態に係る画像符号化装置の構成
例を示すブロック図である。
例を示すブロック図である。
【図３０】第８の実施形態に係る画像符号化装置の構成
例を示すブロック図である。
例を示すブロック図である。
【図３１】第８の実施形態に係る画像復号化装置の構成
例を示すブロック図である。
例を示すブロック図である。
１００、１１０、３００、５００、６００、８００、９
００……動画像符号化装置（送信側）、１０３、１１３
……Ｉフレームメモリ部、１０４、１１４……Ｐフレー
ムメモリ部、１０５、１１５、３０２……符号化部、１
０７、３０７……符号データ送信部、３０８……確認信
号受信部、３０９、３０９Ａ、３０９Ｂ、３０９Ｄ……
参照フレーム更新部、３１０、３１０Ａ、３１０Ｂ……
フレーム番号設定部、３１１、３１１Ａ、３１１Ｂ……
データコピー部、３１２、３１２Ａ……最新受信番号検
出部、３１３……候補番号消去部、３１４……参照フレ
ーム候補番号記録部、３１５、３１５Ａ……伝送状態判
定部、３１６、３１６Ａ……更新方法切替部、３１７、
３１７Ａ……判定基準変更部、３１８、３１８Ａ……判
定方法変更部、２００、４００、７００、１０００……
動画像復号化装置（受信側）、２０２、４０６……復号
化部、２０３……Ｉフレームメモリ部、２０４……Ｐフ
レームメモリ部、２０５、４０８……動画像出力部、２
０６、４０９……リフレッシュ信号送信部、４０７……
確認信号送信部、４１０……判定基準変更信号送信部、
４１１……変更方法変更信号送信部。
００……動画像符号化装置（送信側）、１０３、１１３
……Ｉフレームメモリ部、１０４、１１４……Ｐフレー
ムメモリ部、１０５、１１５、３０２……符号化部、１
０７、３０７……符号データ送信部、３０８……確認信
号受信部、３０９、３０９Ａ、３０９Ｂ、３０９Ｄ……
参照フレーム更新部、３１０、３１０Ａ、３１０Ｂ……
フレーム番号設定部、３１１、３１１Ａ、３１１Ｂ……
データコピー部、３１２、３１２Ａ……最新受信番号検
出部、３１３……候補番号消去部、３１４……参照フレ
ーム候補番号記録部、３１５、３１５Ａ……伝送状態判
定部、３１６、３１６Ａ……更新方法切替部、３１７、
３１７Ａ……判定基準変更部、３１８、３１８Ａ……判
定方法変更部、２００、４００、７００、１０００……
動画像復号化装置（受信側）、２０２、４０６……復号
化部、２０３……Ｉフレームメモリ部、２０４……Ｐフ
レームメモリ部、２０５、４０８……動画像出力部、２
０６、４０９……リフレッシュ信号送信部、４０７……
確認信号送信部、４１０……判定基準変更信号送信部、
４１１……変更方法変更信号送信部。
Claims (29)
- 【請求項１】 参照画像を基準に、入力画像を順次予測
符号化して出力する符号化手段と、当該符号化手段で符
号化された符号化データとそのフレーム番号とを画像復
号化装置へ送信する送信手段とを有する画像符号化装置
において、 前記画像復号化装置から通知される復号異常有無信号及
びフレーム番号に基づいて、前記参照画像の更新を制御
する参照画像更新手段を備えたことを特徴とする画像符
号化装置。 - 【請求項２】 前記参照画像更新手段は、前記入力画像
をフレームからブロックに分割し、当該ブロックごとに
前記参照画像の更新を制御することを特徴とする請求項
１に記載の画像符号化装置。 - 【請求項３】 伝送路を介して接続された複数の画像復
号化装置より、前記復号異常有無信号及びフレーム番号
がそれぞれ受信された場合には、これら複数の画像復号
化装置において最も共通に復号することができた画像
を、次の参照画像に選定することを特徴とする請求項１
又は請求項２に記載の画像符号化装置。 - 【請求項４】 前記参照画像更新手段は、前記復号異常
有無信号が復号異常無しを表すとき、当該復号異常の無
いことが確認されたフレーム番号の画像を、次の参照画
像に選定することを特徴とする請求項１、請求項２又は
請求項３に記載の画像符号化装置。 - 【請求項５】 前記参照画像更新手段は、前記復号異常
有無信号が復号異常有りを表すとき、当該復号異常が確
認されたフレーム番号より過去の時点において送信され
た画像の中の１つを、次の参照画像に選定することを特
徴とする請求項１、請求項２又は請求項３に記載の画像
符号化装置。 - 【請求項６】 前記参照画像更新手段は、正常に復号す
ることができた画像のフレーム番号を希望フレーム番号
として受信した場合に、その希望フレーム番号に対応す
る画像を、次の参照画像に選定することを特徴とする請
求項５に記載の画像符号化装置。 - 【請求項７】 前記参照画像更新手段は、前記符号化手
段による符号化が終了した入力画像のフレーム番号を、
前記参照画像の候補として記憶するフレーム番号記憶部
と、 前記復号異常有無信号が復号異常有りを表すとき、当該
復号異常が確認されたフレーム番号と、これより新しい
時点において符号化された入力画像のフレーム番号を前
記フレーム番号記憶部から消去する消去部とを備え、フ
レーム番号記憶部に記憶されているフレーム番号の画像
を参照画像に選択することを特徴とする請求項５に記載
の画像符号化装置。 - 【請求項８】 前記参照画像更新手段は、前記画像復号
化装置が正常に復号することができた画像のフレーム番
号を希望フレーム番号として受信した場合、前記フレー
ム番号記憶部に記憶されているフレーム番号のうち前記
希望フレーム番号に対応する画像を参照画像に選択する
ことを特徴とする請求項７に記載の画像符号化装置。 - 【請求項９】 前記参照画像更新手段は、前記フレーム
番号記憶部に、前記希望フレーム番号より新しいフレー
ム番号がある場合、当該新しい方のフレーム番号に対応
する画像を参照画像に選択することを特徴とする請求項
８に記載の画像符号化装置。 - 【請求項１０】 前記復号異常有無信号及びフレーム番
号に基づいて、伝送路の状態を判定する伝送路状態判定
手段と、 前記伝送路状態判定手段の判定結果に基づいて、前記参
照画像更新手段による参照画像の更新方法を切り替え制
御する更新方法切替手段とを備えたことを特徴とする請
求項１、請求項４又は請求項５に記載の画像符号化装
置。 - 【請求項１１】 前記伝送路状態判定手段は、最近受信
された複数の復号異常有無信号のうち一定個数以上の復
号異常有りが検出された場合、伝送路の状態が悪いと判
定することを特徴とする請求項１０に記載の画像符号化
装置。 - 【請求項１２】 前記伝送路状態判定手段は、復号異常
有りの復号異常有無信号が一定個数以上連続して検出さ
れた場合、伝送路の状態が悪いと判定することを特徴と
する請求項１０に記載の画像符号化装置。 - 【請求項１３】 前記伝送路状態判定手段は、連続する
数フレームの画像のうち同じ位置のブロックに復号異常
有りの復号異常有無信号が一定個数以上連続した場合、
伝送路の状態が悪いと判定することを特徴とする請求項
１０に記載の画像符号化装置。 - 【請求項１４】 前記伝送路状態判定手段は、伝送路の
状態を判定するのに使用する複数個の判定基準を有する
場合、いづれか一つの基準について伝送路の状態が悪い
と判定されたとき、伝送路の状態が悪いと判定すること
を特徴とする請求項１０に記載の画像符号化装置。 - 【請求項１５】 前記更新方法切替手段は、前記伝送路
状態判定手段において伝送路の状態が良いと判断された
場合、前記復号異常有無信号が復号異常無しであるとき
に限り次の参照画像を選定する変更方法から、前記復号
異常有無信号が復号異常有りであるときに限り次の参照
画像を選定する変更方法に、変更方法を切り替えること
を特徴とする請求項１０に記載の画像符号化装置。 - 【請求項１６】 前記更新方法切替手段は、前記伝送路
状態判定手段において伝送路の状態が悪いと判断された
場合、前記復号異常有無信号が復号異常有りであるとき
に限り次の参照画像を選定する変更方法から、前記復号
異常有無信号が復号異常無しであるときに限り次の参照
画像を選定する変更方法に、変更方法を切り替えること
を特徴とする請求項１０に記載の画像符号化装置。 - 【請求項１７】 使用者から直接入力され又は受信側の
使用者から伝送路を介して入力された更新方法の切替要
求に基づいて、前記更新方法切替手段が決定する更新方
法を強制的に切り替える更新方法変更手段を備えたこと
を特徴とする請求項１０に記載の画像符号化装置。 - 【請求項１８】 使用者から直接入力され又は受信側の
使用者から伝送路を介して入力された判断基準の切替要
求に基づいて、前記伝送路状態判定手段の判断基準を強
制的に切り替える判断基準変更手段を備えたことを特徴
とする請求項１０に記載の画像符号化装置。 - 【請求項１９】 予測符号化されてなる符号化データと
そのフレーム番号とを伝送路を介して受信する受信手段
と、当該受信手段によって受信された符号化データをそ
のフレーム番号を用いて復号する復号化手段とを有する
画像復号化装置において、 前記復号化手段における各符号化データの復号結果を表
す復号異常有無信号と共に、当該符号化データに対応す
るフレーム番号を画像符号化装置へ出力する復号異常有
無信号送信手段を備えたことを特徴とする画像復号化装
置。 - 【請求項２０】 前記復号異常有無信号送信手段は、以
後受信される符号化データを正常に復号する上で必要な
フレーム番号を特定する希望参照フレーム番号を復号異
常有無信号に付加して画像符号化装置に送信することを
特徴とする請求項１９に記載の画像復号化装置。 - 【請求項２１】 前記復号異常有無信号及びフレーム番
号に基づいて、伝送路の状態を判定する伝送路状態判定
手段と、前記伝送路状態判定手段の判定結果に基づい
て、前記参照画像更新手段による参照画像の更新方法を
切り替え制御する更新方法切替手段とを有する前記画像
符号化装置に対し、前記伝送路状態判定手段の判定基準
の強制的な切り替えを指示する切替要求信号を、使用者
からの指示に基づき、伝送路を介して前記伝送路状態判
定手段へ送信する判定基準変更信号送信手段を備えたこ
とを特徴とする請求項１９に記載の画像復号化装置。 - 【請求項２２】 前記復号異常有無信号及びフレーム番
号に基づいて、伝送路の状態を判定する伝送路状態判定
手段と、前記伝送路状態判定手段の判定結果に基づい
て、前記参照画像更新手段による参照画像の更新方法を
切り替え制御する更新方法切替手段とを有する前記画像
符号化装置に対し、前記更新方法切替手段の変更方法の
強制的な切り替えを指示する切替要求を、使用者からの
指示に基づき、伝送路を介して前記更新方法切替手段へ
送信する更新方法変更信号送信手段を備えたことを特徴
とする請求項１９に記載の画像復号化装置。 - 【請求項２３】 請求項１〜請求項９のいずれかに記載
の画像符号化装置と、 請求項１９又は請求項２０に記載の画像復号化装置とを
備えたことを特徴とする画像伝送システム。 - 【請求項２４】 請求項１０〜請求項１８のいずれかに
記載の画像符号化装置と、 請求項２１又は請求項２２に記載の画像復号化装置とを
備えたことを特徴とする画像伝送システム。 - 【請求項２５】 参照画像を基準に、入力画像を順次予
測符号化して出力する符号化手段と、当該符号化手段で
符号化された符号化データを画像復号化装置へ送信する
送信手段とを有する画像符号化装置において、 前記符号化手段は、 フレーム内符号化された入力画像のうち最近のものを参
照画像として用いてフレーム間符号化することにより、
現時点の入力画像についての１階層目の符号化データを
前記送信手段に与える中間データ生成部と、 前記中間データ生成部から入力した符号化データを復号
し、中間画像を生成する中間画像生成部と、 前記中間画像を、以前にフレーム間符号化された画像を
参照画像に用いて再度フレーム間符号化し、現時点の入
力画像についての２階層目の符号化データを生成する最
終データ生成部とを備えたことを特徴とする画像符号化
装置。 - 【請求項２６】 前記符号化手段は、前記フレーム内符
号化された入力画像のうち最近のものの直後の入力画像
については、前記中間データ生成部によって変換された
１階層目の符号化データだけを生成し出力することを特
徴とする請求項２５に記載の画像符号化装置。 - 【請求項２７】 前記中間データ生成部における符号化
処理の段階では量子化サイズを大きくし、前記最終デー
タ生成部における符号化処理の段階では量子化サイズを
小さくすることを特徴とする請求項２５に記載の画像符
号化装置。 - 【請求項２８】 予測符号化されてなる符号化データと
その階層情報とを伝送路を介して受信する受信手段と、
当該受信手段によって受信された符号化データを前記階
層情報を用いて復号する復号化手段とを有する画像復号
化装置において、 前記復号手段は、前記階層情報によって１階層目の符号
化データと判別された符号化データを、先に復号したフ
レーム内符号化画像のうち最新のものを参照して復号
し、中間画像を生成する中間画像生成部と、 前記階層情報によって２階層目の符号化データと判別さ
れた符号化データを、当該符号化データを符号化する際
に用いた画像を参照画像として用いて復号し、復号結果
を前記中間画像に付加する最終画像生成部とを備えたこ
とを特徴とする画像復号化装置。 - 【請求項２９】 請求項２５、請求項２６又は請求項２
７に記載の画像符号化装置と、 請求項２８に記載の画像復号化装置とを備えたことを特
徴とする画像伝送システム。
Priority Applications (8)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9862996A JP3068002B2 (ja) | 1995-09-18 | 1996-04-19 | 画像符号化装置、画像復号化装置及び画像伝送システム |
| EP19960113836 EP0763944B1 (en) | 1995-09-18 | 1996-08-29 | Video coder, decoder and transmission method |
| DE1996625145 DE69625145T2 (de) | 1995-09-18 | 1996-08-29 | Videobildcodierer, -decodierer, und -übertragungsverfahren |
| US08/710,405 US6169821B1 (en) | 1995-09-18 | 1996-09-17 | Picture coder, picture decoder, and picture transmission system |
| KR1019970006316A KR100374245B1 (ko) | 1996-04-19 | 1997-02-27 | 화상부호화장치,화상복호화장치및화상전송시스템 |
| CNB971034788A CN1143544C (zh) | 1996-04-19 | 1997-03-17 | 图像编码器,图像解码器及图象发送系统 |
| HK98104226A HK1004975A1 (en) | 1996-04-19 | 1998-05-15 | Picture coder, picture decoder, and picture transmission system. |
| US09/659,065 US6487316B1 (en) | 1995-09-18 | 2000-09-11 | Picture decoder for a picture transmission system |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP23865095 | 1995-09-18 | ||
| JP7-238650 | 1995-09-18 | ||
| JP9862996A JP3068002B2 (ja) | 1995-09-18 | 1996-04-19 | 画像符号化装置、画像復号化装置及び画像伝送システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09149421A true JPH09149421A (ja) | 1997-06-06 |
| JP3068002B2 JP3068002B2 (ja) | 2000-07-24 |
Family
ID=26439757
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9862996A Expired - Lifetime JP3068002B2 (ja) | 1995-09-18 | 1996-04-19 | 画像符号化装置、画像復号化装置及び画像伝送システム |
Country Status (4)
| Country | Link |
|---|---|
| US (2) | US6169821B1 (ja) |
| EP (1) | EP0763944B1 (ja) |
| JP (1) | JP3068002B2 (ja) |
| DE (1) | DE69625145T2 (ja) |
Cited By (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1169325A (ja) * | 1997-08-11 | 1999-03-09 | Ando Electric Co Ltd | 動画通信管理装置 |
| JP2000115784A (ja) * | 1998-10-08 | 2000-04-21 | Oki Electric Ind Co Ltd | 画像符号化装置、画像復号化装置及び画像伝送システム |
| JP2001245305A (ja) * | 2000-01-27 | 2001-09-07 | Samsung Electronics Co Ltd | ディジタル映像データ通信システムにおけるエラー伝播抑制のための送受信データの処理方法及びこのための記録媒体 |
| KR20030001625A (ko) * | 2001-06-25 | 2003-01-08 | (주)아이디스 | 동영상 압축시 예측 프레임 생성 및 재생 방법 |
| US6621868B1 (en) | 1998-03-02 | 2003-09-16 | Nippon Telegraph And Telephone Corporation | Video communication system and video communication method |
| US6637001B1 (en) | 2000-08-30 | 2003-10-21 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for image/voice transmission |
| JP2004501391A (ja) * | 2000-04-24 | 2004-01-15 | クゥアルコム・インコーポレイテッド | 可変レート音声符号器におけるフレーム消去補償方法 |
| JP2004502359A (ja) * | 2000-06-30 | 2004-01-22 | ノキア コーポレイション | ビデオ誤り回復方法 |
| WO2005088976A1 (en) * | 2004-03-12 | 2005-09-22 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| JP2006191599A (ja) * | 2004-12-30 | 2006-07-20 | Microsoft Corp | パケットロスのリカバリを改善するためのフレームキャッシングの使用 |
| JP2008022532A (ja) * | 2006-06-16 | 2008-01-31 | Casio Comput Co Ltd | 動画符号化装置および動画符号化方法と、動画復号化装置および動画復号化方法と、動画記録装置 |
| JP2008504767A (ja) * | 2004-07-01 | 2008-02-14 | オーワイ ゲームクラスター リミテッド | 予測および非予測データフレームを伝送するための方法および装置 |
| JP2008527811A (ja) * | 2005-01-10 | 2008-07-24 | 株式会社エヌ・ティ・ティ・ドコモ | 一連のフレームを予測的にコード化する装置 |
| JP2009518956A (ja) * | 2005-12-07 | 2009-05-07 | マイクロソフト コーポレーション | メディアエンコーダおよびデコーダの間のフィードバックおよびフレーム同期 |
| JP2009272684A (ja) * | 2008-04-30 | 2009-11-19 | Saxa Inc | 映像通信装置 |
| US7712119B1 (en) | 2000-07-10 | 2010-05-04 | Hitachi, Ltd. | Multimedia communication terminal |
| US7822282B2 (en) | 2004-03-12 | 2010-10-26 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| JP2011061287A (ja) * | 2009-09-07 | 2011-03-24 | Brother Industries Ltd | 通信制御装置、通信制御方法、および通信制御プログラム |
| WO2012086146A1 (ja) * | 2010-12-22 | 2012-06-28 | パナソニック株式会社 | 無線伝送端末及び無線伝送方法、それに用いる符号化装置及び符号化方法、並びにコンピュータ・プログラム |
| JP2012138780A (ja) * | 2010-12-27 | 2012-07-19 | Forum8 Co Ltd | データ配信システム、データ配信装置、データ符号化装置、及びデータ符号化方法 |
| JP2012156652A (ja) * | 2011-01-24 | 2012-08-16 | Panasonic Corp | 動画伝送システム |
| WO2012114774A1 (ja) * | 2011-02-25 | 2012-08-30 | パナソニック株式会社 | 動画像符号化装置および動画像復号装置 |
| JP2013211908A (ja) * | 2003-05-12 | 2013-10-10 | Google Inc | ビデオ圧縮方法 |
| JP2015512219A (ja) * | 2012-02-29 | 2015-04-23 | マイクロソフト コーポレーション | 同期予測ビデオフレームの動的な挿入 |
| JP2015515768A (ja) * | 2012-02-24 | 2015-05-28 | ヴィド スケール インコーポレイテッド | パケットロス検出を使用するビデオコーディング |
| US9232219B2 (en) | 1999-03-12 | 2016-01-05 | Microsoft Technology Licensing, Llc | Media coding for loss recovery with remotely predicted data units |
| JP2016086288A (ja) * | 2014-10-24 | 2016-05-19 | 株式会社メガチップス | 画像処理装置 |
| US10327009B2 (en) | 2014-10-24 | 2019-06-18 | Megachips Corporation | Image processor |
Families Citing this family (87)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3068002B2 (ja) * | 1995-09-18 | 2000-07-24 | 沖電気工業株式会社 | 画像符号化装置、画像復号化装置及び画像伝送システム |
| JPH1079949A (ja) * | 1996-09-04 | 1998-03-24 | Oki Electric Ind Co Ltd | 画像符号化装置、画像復号化装置及び画像伝送システム |
| CN1217852A (zh) * | 1997-02-13 | 1999-05-26 | 三菱电机株式会社 | 动态图象预测方式 |
| JP3373130B2 (ja) * | 1997-03-24 | 2003-02-04 | 沖電気工業株式会社 | 画像復号化装置 |
| US6282240B1 (en) | 1997-09-03 | 2001-08-28 | Oki Electric Industry Co., Ltd. | Picture coder, picture decoder, and transmission system |
| DE69736926T2 (de) * | 1997-09-12 | 2007-05-24 | Oki Electric Industry Co., Ltd. | Videokodierer, -dekodierer und Übertragungssystem |
| JP3860323B2 (ja) * | 1997-10-27 | 2006-12-20 | 三菱電機株式会社 | 画像復号化装置、画像復号化方法 |
| US7046734B2 (en) * | 1998-04-02 | 2006-05-16 | Intel Corporation | Method and apparatus for performing real-time data encoding |
| US7263127B1 (en) | 1998-04-02 | 2007-08-28 | Intel Corporation | Method and apparatus for simplifying frame-based motion estimation |
| US6904174B1 (en) * | 1998-12-11 | 2005-06-07 | Intel Corporation | Simplified predictive video encoder |
| US6314369B1 (en) * | 1998-07-02 | 2001-11-06 | Kabushikikaisha Equos Research | Communications navigation system, and navigation base apparatus and navigation apparatus both used in the navigation system |
| JP3483806B2 (ja) * | 1999-07-28 | 2004-01-06 | 松下電器産業株式会社 | 動画像信号の符号化装置及び符号化方法 |
| US6658618B1 (en) * | 1999-09-02 | 2003-12-02 | Polycom, Inc. | Error recovery method for video compression coding using multiple reference buffers and a message channel |
| US6882637B1 (en) * | 1999-10-14 | 2005-04-19 | Nokia Networks Oy | Method and system for transmitting and receiving packets |
| JP3840020B2 (ja) * | 1999-12-14 | 2006-11-01 | 株式会社東芝 | 動画像符号化装置 |
| JP3589343B2 (ja) * | 2000-01-25 | 2004-11-17 | 株式会社エヌ・ティ・ティ・ドコモ | フレーム伝送方法及びフレーム伝送装置 |
| US7539130B2 (en) | 2000-03-28 | 2009-05-26 | Nokia Corporation | Method and system for transmitting and receiving packets |
| GB2362532B (en) * | 2000-05-15 | 2004-05-05 | Nokia Mobile Phones Ltd | Video coding |
| GB2362531A (en) * | 2000-05-15 | 2001-11-21 | Nokia Mobile Phones Ltd | Indicating the temporal order of reference frames in a video sequence |
| GB0021891D0 (en) * | 2000-09-06 | 2000-10-25 | Wave Ltd M | Adaptive video delivery |
| JP2002165804A (ja) * | 2000-09-22 | 2002-06-11 | Mitaka Koki Co Ltd | 医療用スタンド装置 |
| US7103096B2 (en) * | 2000-10-12 | 2006-09-05 | 3Com Corporation | Performance evaluation of multicarrier channels with forward error correction and automatic retransmission request |
| JPWO2002032083A1 (ja) | 2000-10-13 | 2004-02-26 | ソニー株式会社 | データ通信品質制御システム、送信システム及び受信機 |
| KR100903457B1 (ko) | 2000-11-29 | 2009-06-18 | 브리티쉬 텔리커뮤니케이션즈 파블릭 리미티드 캄퍼니 | 실시간 데이터 송수신 방법 및 장치 |
| GB0031537D0 (en) * | 2000-12-22 | 2001-02-07 | Pa Consulting Services | Feedback control from decoder |
| GB0031539D0 (en) * | 2000-12-22 | 2001-02-07 | Pa Consulting Services | Feedback control to encoder |
| JP2004516776A (ja) * | 2000-12-22 | 2004-06-03 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | リターントラフィックに基づくインターネット支払いプロセス |
| US7103669B2 (en) * | 2001-02-16 | 2006-09-05 | Hewlett-Packard Development Company, L.P. | Video communication method and system employing multiple state encoding and path diversity |
| EP1371225B1 (en) * | 2001-03-12 | 2014-08-13 | Polycom, Inc. | Video encoding and transporting method for concealing the effects of packet loss in multi-channel packet switched networks |
| EP1725038A3 (en) * | 2001-03-12 | 2009-08-26 | Polycom, Inc. | A low-delay video encoding method for concealing the effects of packet loss in multi-channel packet switched networks |
| AU2002314902A1 (en) | 2001-06-02 | 2002-12-16 | Polycom, Inc. | System and method for point to point integration of personal computers with videoconferencing systems |
| US6865374B2 (en) | 2001-09-18 | 2005-03-08 | Koninklijke Philips Electronics N.V. | Video recovery system and method |
| US20030081685A1 (en) * | 2001-10-31 | 2003-05-01 | Montgomery Dennis L. | Method and apparatus for determining patterns within adjacent blocks of data |
| EP1359722A1 (en) * | 2002-03-27 | 2003-11-05 | BRITISH TELECOMMUNICATIONS public limited company | Data streaming system and method |
| ES2355083T3 (es) * | 2002-03-27 | 2011-03-22 | British Telecommunications Public Limited Company | Codificación y transmisión de vídeo. |
| AU2003276786A1 (en) | 2002-11-04 | 2004-06-07 | Tandberg Telecom As | Inter-network and inter-protocol video conference privacy method, apparatus and computer program product |
| GB0306296D0 (en) | 2003-03-19 | 2003-04-23 | British Telecomm | Data transmission |
| FI115589B (fi) * | 2003-10-14 | 2005-05-31 | Nokia Corp | Redundanttien kuvien koodaaminen ja dekoodaaminen |
| US8116370B2 (en) | 2003-10-20 | 2012-02-14 | Logitech Europe S.A. | Methods and apparatus for encoding and decoding video data |
| US7634146B2 (en) | 2003-10-20 | 2009-12-15 | Logitech Europe S.A. | Methods and apparatus for encoding and decoding video data |
| US7826526B2 (en) | 2003-10-20 | 2010-11-02 | Logitech Europe S.A. | Methods and apparatus for encoding and decoding video data |
| JPWO2005071967A1 (ja) * | 2004-01-23 | 2008-04-24 | 日本電気株式会社 | 動画像通信装置、動画像通信システム及び動画像通信方法 |
| TWI261195B (en) * | 2004-02-25 | 2006-09-01 | Via Tech Inc | Optical drive control chip capable of transmitting command messages in advance and transmission method thereof |
| US7543064B2 (en) * | 2004-09-30 | 2009-06-02 | Logitech Europe S.A. | Multiplayer peer-to-peer connection across firewalls and network address translators using a single local port on the local host |
| KR100669634B1 (ko) * | 2004-12-06 | 2007-01-15 | 엘지전자 주식회사 | 동영상 압축 및 복원 방법 |
| WO2006075070A1 (fr) * | 2005-01-07 | 2006-07-20 | France Telecom | Procede et dispositif de codage video |
| FR2880745A1 (fr) * | 2005-01-07 | 2006-07-14 | France Telecom | Procede et dispositif de codage video |
| US20060179392A1 (en) * | 2005-02-08 | 2006-08-10 | Takaaki Ota | Handshakeless retransmission protocol |
| US7738468B2 (en) | 2005-03-22 | 2010-06-15 | Logitech Europe S.A. | Method and apparatus for packet traversal of a network address translation device |
| US8102878B2 (en) * | 2005-09-29 | 2012-01-24 | Qualcomm Incorporated | Video packet shaping for video telephony |
| US8842555B2 (en) * | 2005-10-21 | 2014-09-23 | Qualcomm Incorporated | Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems |
| US8406309B2 (en) * | 2005-10-21 | 2013-03-26 | Qualcomm Incorporated | Video rate adaptation to reverse link conditions |
| US8548048B2 (en) * | 2005-10-27 | 2013-10-01 | Qualcomm Incorporated | Video source rate control for video telephony |
| US8514711B2 (en) * | 2005-10-21 | 2013-08-20 | Qualcomm Incorporated | Reverse link lower layer assisted video error control |
| US8295343B2 (en) | 2005-11-18 | 2012-10-23 | Apple Inc. | Video bit rate control method |
| US8031777B2 (en) * | 2005-11-18 | 2011-10-04 | Apple Inc. | Multipass video encoding and rate control using subsampling of frames |
| US8780997B2 (en) * | 2005-11-18 | 2014-07-15 | Apple Inc. | Regulation of decode-side processing based on perceptual masking |
| US20070116117A1 (en) * | 2005-11-18 | 2007-05-24 | Apple Computer, Inc. | Controlling buffer states in video compression coding to enable editing and distributed encoding |
| US8233535B2 (en) | 2005-11-18 | 2012-07-31 | Apple Inc. | Region-based processing of predicted pixels |
| CN104125464A (zh) * | 2005-12-08 | 2014-10-29 | 维德约股份有限公司 | 用于视频通信系统中的差错弹性和随机接入的系统和方法 |
| KR101335214B1 (ko) | 2006-03-15 | 2013-11-29 | 브리티쉬 텔리커뮤니케이션즈 파블릭 리미티드 캄퍼니 | 비디오 신호 전송 방법 및 비디오 코더 |
| FR2911234B1 (fr) * | 2007-01-05 | 2009-02-20 | Thales Sa | Procede d'envoi de paquets de donnees d'un serveur vers un client, le client utilisant simultanement a un debit constant d les donnees qu'il recoit |
| US8537197B2 (en) * | 2007-01-10 | 2013-09-17 | Qualcomm Incorporated | Content- and link-dependent coding adaptation for multimedia telephony |
| US8494049B2 (en) * | 2007-04-09 | 2013-07-23 | Cisco Technology, Inc. | Long term reference frame management with error video feedback for compressed video communication |
| US20090089852A1 (en) * | 2007-10-01 | 2009-04-02 | At&T Knowledge Ventures, Lp | Automated Multimedia Channel Error Reporting from Viewer Premises |
| US8797850B2 (en) * | 2008-01-10 | 2014-08-05 | Qualcomm Incorporated | System and method to adapt to network congestion |
| US8629893B2 (en) | 2008-04-02 | 2014-01-14 | Cisco Technology, Inc. | Video switching without instantaneous decoder refresh-frames |
| JP2010004142A (ja) * | 2008-06-18 | 2010-01-07 | Hitachi Kokusai Electric Inc | 動画像符号化装置、復号化装置、符号化方法及び復号化方法 |
| US8270307B2 (en) | 2008-09-05 | 2012-09-18 | Cisco Technology, Inc. | Network-adaptive preemptive repair in real-time video |
| CN101360243A (zh) * | 2008-09-24 | 2009-02-04 | 腾讯科技（深圳）有限公司 | 基于反馈参考帧的视频通信系统及方法 |
| US20100125768A1 (en) * | 2008-11-17 | 2010-05-20 | Cisco Technology, Inc. | Error resilience in video communication by retransmission of packets of designated reference frames |
| US9049447B2 (en) * | 2010-12-30 | 2015-06-02 | Pelco, Inc. | Video coding |
| US9171075B2 (en) | 2010-12-30 | 2015-10-27 | Pelco, Inc. | Searching recorded video |
| US9584832B2 (en) * | 2011-12-16 | 2017-02-28 | Apple Inc. | High quality seamless playback for video decoder clients |
| KR101858695B1 (ko) * | 2012-04-09 | 2018-05-16 | 엘지전자 주식회사 | 데이터 관리 방법 |
| JP5938645B2 (ja) * | 2012-11-07 | 2016-06-22 | パナソニックＩｐマネジメント株式会社 | 映像送信端末、映像送信方法、映像送信プログラム、及び映像伝送システム |
| EP3550838B1 (en) * | 2013-03-25 | 2020-10-28 | BlackBerry Limited | Resilient signal encoding |
| US9774869B2 (en) * | 2013-03-25 | 2017-09-26 | Blackberry Limited | Resilient signal encoding |
| US20150326884A1 (en) * | 2014-05-12 | 2015-11-12 | Silicon Image, Inc. | Error Detection and Mitigation in Video Channels |
| US10595025B2 (en) | 2015-09-08 | 2020-03-17 | Microsoft Technology Licensing, Llc | Video coding |
| US10313685B2 (en) | 2015-09-08 | 2019-06-04 | Microsoft Technology Licensing, Llc | Video coding |
| KR20190022514A (ko) * | 2016-07-05 | 2019-03-06 | 비셰어 테크놀로지 리미티드 | 비디오 스트리밍을 위한 방법 및 시스템 |
| US10567756B2 (en) * | 2018-05-31 | 2020-02-18 | Agora Lab, Inc. | Slice level reference picture reconstruction |
| US10567757B2 (en) | 2018-05-31 | 2020-02-18 | Agora Lab, Inc. | Dynamic reference picture reconstruction |
| US20220035549A1 (en) * | 2020-07-28 | 2022-02-03 | International Business Machines Corporation | Trace data protection |
| WO2022205064A1 (zh) * | 2021-03-31 | 2022-10-06 | 华为技术有限公司 | 视频编码器、视频解码器及相应方法 |
| US20230224476A1 (en) * | 2021-04-09 | 2023-07-13 | Google Llc | Advanced video coding using a key-frame library |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4448200A (en) * | 1978-03-27 | 1984-05-15 | University Of Southern California | System and method for dynamic background subtraction |
| US4422171A (en) * | 1980-12-29 | 1983-12-20 | Allied Corporation, Law Department | Method and system for data communication |
| US4670851A (en) * | 1984-01-09 | 1987-06-02 | Mitsubishi Denki Kabushiki Kaisha | Vector quantizer |
| US4751742A (en) * | 1985-05-07 | 1988-06-14 | Avelex | Priority coding of transform coefficients |
| JPS62193383A (ja) * | 1986-02-20 | 1987-08-25 | Kokusai Denshin Denwa Co Ltd <Kdd> | 動画像信号伝送方式 |
| US4774587A (en) * | 1987-06-02 | 1988-09-27 | Eastman Kodak Company | Still video transceiver processor |
| US5426513A (en) * | 1989-06-16 | 1995-06-20 | Harris Corporation | Prioritized image transmission system and method |
| US5317397A (en) * | 1991-05-31 | 1994-05-31 | Kabushiki Kaisha Toshiba | Predictive coding using spatial-temporal filtering and plural motion vectors |
| JP2700843B2 (ja) * | 1991-12-10 | 1998-01-21 | 三菱電機株式会社 | 多重通信制御装置 |
| US5457808A (en) * | 1992-02-04 | 1995-10-10 | Nec Corporation | Point-to-multipoint communication network capable of retransmitting a multicast signal |
| JPH05219056A (ja) * | 1992-02-04 | 1993-08-27 | Nec Corp | 同報通信方式 |
| US6101313A (en) * | 1992-06-29 | 2000-08-08 | Sony Corporation | High efficiency encoding and decoding of picture signals and recording medium containing same |
| US5377051A (en) * | 1993-01-13 | 1994-12-27 | Hitachi America, Ltd. | Digital video recorder compatible receiver with trick play image enhancement |
| JPH06237451A (ja) * | 1993-02-10 | 1994-08-23 | Hitachi Ltd | 動画通信方式および端末装置 |
| KR100238133B1 (ko) * | 1993-05-31 | 2000-01-15 | 윤종용 | 영상전화기의 화상 복구 장치 및 방법 |
| JPH0795584A (ja) * | 1993-07-30 | 1995-04-07 | Matsushita Electric Ind Co Ltd | 画像符号化装置 |
| JPH0795571A (ja) * | 1993-09-27 | 1995-04-07 | Oki Electric Ind Co Ltd | 画像符号化装置、画像復号化装置及び多地点間データ伝送方法 |
| JP3068002B2 (ja) * | 1995-09-18 | 2000-07-24 | 沖電気工業株式会社 | 画像符号化装置、画像復号化装置及び画像伝送システム |
| JP3130464B2 (ja) * | 1996-02-02 | 2001-01-31 | ローム株式会社 | データ復号装置 |
-
1996
- 1996-04-19 JP JP9862996A patent/JP3068002B2/ja not_active Expired - Lifetime
- 1996-08-29 DE DE1996625145 patent/DE69625145T2/de not_active Expired - Lifetime
- 1996-08-29 EP EP19960113836 patent/EP0763944B1/en not_active Expired - Lifetime
- 1996-09-17 US US08/710,405 patent/US6169821B1/en not_active Expired - Lifetime
-
2000
- 2000-09-11 US US09/659,065 patent/US6487316B1/en not_active Expired - Lifetime
Cited By (44)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1169325A (ja) * | 1997-08-11 | 1999-03-09 | Ando Electric Co Ltd | 動画通信管理装置 |
| US6621868B1 (en) | 1998-03-02 | 2003-09-16 | Nippon Telegraph And Telephone Corporation | Video communication system and video communication method |
| JP2000115784A (ja) * | 1998-10-08 | 2000-04-21 | Oki Electric Ind Co Ltd | 画像符号化装置、画像復号化装置及び画像伝送システム |
| US9232219B2 (en) | 1999-03-12 | 2016-01-05 | Microsoft Technology Licensing, Llc | Media coding for loss recovery with remotely predicted data units |
| US9918085B2 (en) | 1999-03-12 | 2018-03-13 | Microsoft Technology Licensing, Llc | Media coding for loss recovery with remotely predicted data units |
| US6859498B1 (en) | 2000-01-27 | 2005-02-22 | Samsung Electronics Co., Ltd. | Transmitting/received data processing method for inhibiting error propagation in digital image data communications system and recording medium therefor |
| JP2001245305A (ja) * | 2000-01-27 | 2001-09-07 | Samsung Electronics Co Ltd | ディジタル映像データ通信システムにおけるエラー伝播抑制のための送受信データの処理方法及びこのための記録媒体 |
| JP2004501391A (ja) * | 2000-04-24 | 2004-01-15 | クゥアルコム・インコーポレイテッド | 可変レート音声符号器におけるフレーム消去補償方法 |
| JP4870313B2 (ja) * | 2000-04-24 | 2012-02-08 | クゥアルコム・インコーポレイテッド | 可変レート音声符号器におけるフレーム消去補償方法 |
| JP2004502359A (ja) * | 2000-06-30 | 2004-01-22 | ノキア コーポレイション | ビデオ誤り回復方法 |
| US8355437B2 (en) | 2000-06-30 | 2013-01-15 | Roac Nd Investments L.L.C. | Video error resilience |
| US7712119B1 (en) | 2000-07-10 | 2010-05-04 | Hitachi, Ltd. | Multimedia communication terminal |
| US6637001B1 (en) | 2000-08-30 | 2003-10-21 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for image/voice transmission |
| KR20030001625A (ko) * | 2001-06-25 | 2003-01-08 | (주)아이디스 | 동영상 압축시 예측 프레임 생성 및 재생 방법 |
| US8942290B2 (en) | 2003-05-12 | 2015-01-27 | Google Inc. | Dynamic coefficient reordering |
| US10616576B2 (en) | 2003-05-12 | 2020-04-07 | Google Llc | Error recovery using alternate reference frame |
| US8824553B2 (en) | 2003-05-12 | 2014-09-02 | Google Inc. | Video compression method |
| JP2013211908A (ja) * | 2003-05-12 | 2013-10-10 | Google Inc | ビデオ圧縮方法 |
| US7822282B2 (en) | 2004-03-12 | 2010-10-26 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| WO2005088976A1 (en) * | 2004-03-12 | 2005-09-22 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| US7957604B2 (en) | 2004-03-12 | 2011-06-07 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, and computer-readable storage medium |
| JP2008504767A (ja) * | 2004-07-01 | 2008-02-14 | オーワイ ゲームクラスター リミテッド | 予測および非予測データフレームを伝送するための方法および装置 |
| JP4688873B2 (ja) * | 2004-07-01 | 2011-05-25 | オーワイ ゲームクラスター リミテッド | 予測および非予測データフレームを伝送するための方法および装置 |
| JP2006191599A (ja) * | 2004-12-30 | 2006-07-20 | Microsoft Corp | パケットロスのリカバリを改善するためのフレームキャッシングの使用 |
| US9866871B2 (en) | 2004-12-30 | 2018-01-09 | Microsoft Technology Licensing, Llc | Use of frame caching to improve packet loss recovery |
| US10341688B2 (en) | 2004-12-30 | 2019-07-02 | Microsoft Technology Licensing, Llc | Use of frame caching to improve packet loss recovery |
| US9313501B2 (en) | 2004-12-30 | 2016-04-12 | Microsoft Technology Licensing, Llc | Use of frame caching to improve packet loss recovery |
| JP2012090329A (ja) * | 2004-12-30 | 2012-05-10 | Microsoft Corp | パケットロスのリカバリを改善するためのフレームキャッシングの使用 |
| JP2012253831A (ja) * | 2004-12-30 | 2012-12-20 | Microsoft Corp | パケットロスのリカバリを改善するためのフレームキャッシングの使用 |
| JP2008527811A (ja) * | 2005-01-10 | 2008-07-24 | 株式会社エヌ・ティ・ティ・ドコモ | 一連のフレームを予測的にコード化する装置 |
| JP4659838B2 (ja) * | 2005-01-10 | 2011-03-30 | 株式会社エヌ・ティ・ティ・ドコモ | 一連のフレームを予測的にコード化する装置 |
| JP2009518956A (ja) * | 2005-12-07 | 2009-05-07 | マイクロソフト コーポレーション | メディアエンコーダおよびデコーダの間のフィードバックおよびフレーム同期 |
| JP2008022532A (ja) * | 2006-06-16 | 2008-01-31 | Casio Comput Co Ltd | 動画符号化装置および動画符号化方法と、動画復号化装置および動画復号化方法と、動画記録装置 |
| JP2009272684A (ja) * | 2008-04-30 | 2009-11-19 | Saxa Inc | 映像通信装置 |
| JP2011061287A (ja) * | 2009-09-07 | 2011-03-24 | Brother Industries Ltd | 通信制御装置、通信制御方法、および通信制御プログラム |
| JP2012134860A (ja) * | 2010-12-22 | 2012-07-12 | Panasonic Corp | 無線伝送端末及び無線伝送方法、それに用いる符号化装置及び符号化方法、並びにコンピュータ・プログラム |
| WO2012086146A1 (ja) * | 2010-12-22 | 2012-06-28 | パナソニック株式会社 | 無線伝送端末及び無線伝送方法、それに用いる符号化装置及び符号化方法、並びにコンピュータ・プログラム |
| JP2012138780A (ja) * | 2010-12-27 | 2012-07-19 | Forum8 Co Ltd | データ配信システム、データ配信装置、データ符号化装置、及びデータ符号化方法 |
| JP2012156652A (ja) * | 2011-01-24 | 2012-08-16 | Panasonic Corp | 動画伝送システム |
| WO2012114774A1 (ja) * | 2011-02-25 | 2012-08-30 | パナソニック株式会社 | 動画像符号化装置および動画像復号装置 |
| JP2015515768A (ja) * | 2012-02-24 | 2015-05-28 | ヴィド スケール インコーポレイテッド | パケットロス検出を使用するビデオコーディング |
| JP2015512219A (ja) * | 2012-02-29 | 2015-04-23 | マイクロソフト コーポレーション | 同期予測ビデオフレームの動的な挿入 |
| US10327009B2 (en) | 2014-10-24 | 2019-06-18 | Megachips Corporation | Image processor |
| JP2016086288A (ja) * | 2014-10-24 | 2016-05-19 | 株式会社メガチップス | 画像処理装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US6487316B1 (en) | 2002-11-26 |
| DE69625145T2 (de) | 2003-09-11 |
| EP0763944B1 (en) | 2002-12-04 |
| US6169821B1 (en) | 2001-01-02 |
| EP0763944A2 (en) | 1997-03-19 |
| DE69625145D1 (de) | 2003-01-16 |
| JP3068002B2 (ja) | 2000-07-24 |
| EP0763944A3 (en) | 1999-03-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3068002B2 (ja) | 画像符号化装置、画像復号化装置及び画像伝送システム | |
| JPH10191356A (ja) | 画像符号化装置 | |
| KR100378337B1 (ko) | 화상복호화장치 | |
| US6282240B1 (en) | Picture coder, picture decoder, and transmission system | |
| US7116714B2 (en) | Video coding | |
| JP5769740B2 (ja) | ビデオ通信システムでのエラー回復力およびランダムアクセスのためのシステムおよび方法 | |
| JPH1079949A (ja) | 画像符号化装置、画像復号化装置及び画像伝送システム | |
| US20040255331A1 (en) | Server apparatus and terminal apparatus used in video transmission system | |
| KR100374245B1 (ko) | 화상부호화장치,화상복호화장치및화상전송시스템 | |
| US8340180B2 (en) | Camera coupled reference frame | |
| JP5197238B2 (ja) | 映像送信装置、その制御方法、および制御方法を実行するプログラム | |
| JP3323057B2 (ja) | 符号化装置、復号化装置及び伝送システム | |
| EP0902593B1 (en) | Video coder, decoder and transmission system | |
| JPH1118086A (ja) | 画像通信方法および装置 | |
| JP3521066B2 (ja) | ビデオオンデマンドシステム及びそのためのカット切替後フレーム間符号化ピクチャ削除方法 | |
| KR100670220B1 (ko) | 부호화장치,복호화장치및전송시스템 | |
| JPH09200745A (ja) | フレーム間圧縮符号化された情報の伝送方法およびそれを実現するための装置 | |
| JPH0191584A (ja) | 動画伝送方法および装置 | |
| JP2007166479A (ja) | 動画像表示装置および動画像表示方法 | |
| JPH07184189A (ja) | 映像情報蓄積制御装置 | |
| JP2001128161A (ja) | 動画像符号化復号化装置・方法、その記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080519 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090519 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100519 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100519 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110519 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120519 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130519 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140519 Year of fee payment: 14 |
|
| EXPY | Cancellation because of completion of term |