JP5218784B2 - 画質評価システム、それに用いる装置、方法およびプログラム - Google Patents

画質評価システム、それに用いる装置、方法およびプログラム Download PDF

Info

Publication number
JP5218784B2
JP5218784B2 JP2009545400A JP2009545400A JP5218784B2 JP 5218784 B2 JP5218784 B2 JP 5218784B2 JP 2009545400 A JP2009545400 A JP 2009545400A JP 2009545400 A JP2009545400 A JP 2009545400A JP 5218784 B2 JP5218784 B2 JP 5218784B2
Authority
JP
Japan
Prior art keywords
image
transmission
bits
data
bit string
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009545400A
Other languages
English (en)
Other versions
JPWO2009075245A1 (ja
Inventor
徹 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2009545400A priority Critical patent/JP5218784B2/ja
Publication of JPWO2009075245A1 publication Critical patent/JPWO2009075245A1/ja
Application granted granted Critical
Publication of JP5218784B2 publication Critical patent/JP5218784B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425—Monitoring of client processing errors or hardware failure

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、画像の画質を評価する画質評価システム、それに用いる画像送出装置、画像受信装置、画質評価方法および画質評価用プログラムに関する。
映像の画質を客観的に評価する方法は、大きく３種類に分類される。第１の評価方法は、原画像と劣化画像を直接比較して画質を評価する方法である。第２の評価方法は、劣化画像のみから画質を評価する方法である。第３の評価方法は、原画像の特徴量のみを伝送し、この特徴量と劣化画像から画質を評価する方法である。
第１の評価方法は、非特許文献１に記載されているように、具体的な方法がＩＴＵ−Ｔによって勧告化されているが、伝送画像の画質を評価しようとした場合、評価を行う受信装置側に原画像（伝送される前の画像）が必要となる。しかしながら、原画像をそのままの画質で受信装置側に伝送することは、伝送路の通信帯域の上限により不可能である。従って、受信端末側で第１の評価方法を用いて伝送画像の画質を評価することはできない。
また、第２の評価方法は、受信装置側で単独で画質評価を行えるため理想的ではあるが、伝送画像の画質を評価しようとした場合には、画像本来の特徴と画質劣化によって生じた特徴との切り分けが難しく実現が困難である。
一方、第３の評価方法は、原画像の特徴量を受信装置側に伝送し、この特徴量を基に伝送画像の画質を推定するので、現画像そのものを伝送する必要がない。従って、適切な特徴量を伝送することができれば、低ビットレートでかつ高精度な画質評価が期待できる。
例えば、特許文献１には、第３の評価方法を用いて伝送画像の画質を評価する伝送画質監視装置が記載されている。特許文献１に記載されている伝送画質監視装置では、入力画像を任意のサイズのブロックに分割し、ブロック内の映像を直交変換し、直交変換の任意の周波数成分値を取り出し特徴量として伝送する。なお、特許文献１では、＋１と−１とがランダムに発生する系列（ＰＮ系列）を乗算し白色化した上で直交変換し、任意の周波数成分を抽出して特徴量として伝送する方法が開示されている。受信装置側では、原画像と伝送画像との間でこの周波数成分の誤差を算出し、画像全体の誤差を推定することにより画質を評価している。
特開２００３−９１８６号公報 ITU-T Recommendation, "J.144 Objective perceptual video quality measurement techniques for digital cable television in the Presence of a full reference", ITU-T Recommendation, 2004
問題点は、限られた伝送路帯域で伝送画像の画質を評価しようとした場合に、受信装置側に伝送できる原画像１フレームあたりの情報量が限られることによって、画質劣化の推定精度が低下することにある。
例えば、特許文献１に記載されている伝送画質監視装置では、抽出した周波数成分１つごとにその周波数成分情報を符号化して伝送する。このため、限られた伝送路帯域の場合には、画像１フレームあたりに抽出できる情報量（ここでは、周波数成分の数）が限られ、画質劣化の推定精度が低下してしまう。なお、特許文献１には、直交変換後に任意の周波数成分値を取り出す際に振幅値のみを取り出す旨の記載がある。しかし、これは、周波数成分情報として実数部と虚数部とを取り出すのに比べて伝送量を削減できるというだけであって、例えば、実数で表現される画素情報を任意に取り出し特徴量として伝送する方法と比べて受信装置側で認識できる原画像の情報量が多くなるとは言い切れない。
そこで、本発明の目的は、一定の伝送路帯域の制限下においても、高精度に伝送画像の画質を評価することができるようにする。
本発明による画質評価システムは、画像の画質を評価する画質評価システムであって、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値と、第２の画像において前記ビット列の抽出対象になったデータに相当するデータの値とに基づいて、前記第１の画像と前記第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価する画質評価手段とを備えたことを特徴とする。
また、本発明による画像送出装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えたことを特徴とする。
また、本発明による画像送出装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、伝送画像の特徴量として受信した、前記伝送画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、原画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする。
また、本発明による画像送出装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えたことを特徴とする。
また、本発明による画像送出装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えたことを特徴とする。
また、本発明による画像送出装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする。
また、本発明による画像受信装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする。
また、本発明による画像受信装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する特徴量送信手段とを備えたことを特徴とする。
また、本発明による画像受信装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、伝送する前の符号化画像を復号することにより得られる復号画像の特徴量として受信した、前記復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする。
また、本発明による画像受信装置は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、原画像を符号化する過程で得られる局所復号画像の特徴量として受信した、前記局所復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする。
また、本発明による画像評価方法は、画像の画質を評価する画質評価方法であって、第１の画像の画像フレーム画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、抽出されたビット列で表現される値と、第２の画像において前記ビット列の抽出対象になったデータに相当するデータの値とに基づいて、前記第１の画像と前記第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価することを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送画像の特徴量として受信した、前記伝送画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、原画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送する前の符号化画像を復号することにより得られる復号画像の特徴量として受信した、前記復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させることを特徴とする。
また、本発明による画質評価用プログラムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像を符号化する過程で得られる局所復号画像の特徴量として受信した、前記局所復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて前記ビット列の抽出対象となったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させることを特徴とする。
本発明によれば、１フレームあたりに抽出するデータの数を減らさずに画質劣化の推定結果への影響が少ない情報だけを減らすことができるので、一定の伝送路帯域の制限下においても、高精度に伝送画像の画質を評価することができる。
本発明による画質評価システムの概略構成を示したブロック図である。 ビット抽出手段１によるビット抽出の例を示す説明図である。 本発明による画質評価システムの他の構成例を示したブロック図である。 第１の実施形態による画質評価システムの構成例を示すブロック図である。 第１の実施形態における画像送出装置２１の動作例を示すフローチャートである。 第１の実施形態におけるエンドユーザ端末２３の動作例を示すフローチャートである。 画質評価システムの他の構成例を示すブロック図である。 第５の実施形態による画質評価システムの構成例を示すブロック図である。 第６の実施形態による画質評価システムの構成例を示すブロック図である。 第７の実施形態における画像送出システムの構成例を示すブロック図である。 第７の実施形態におけるエンドユーザ端末システムの構成例を示すブロック図である。 ビット抽出手段１によるビット抽出の例を示す説明図である。
符号の説明
１ ビット抽出手段
２ 画質評価手段
３ データ推定手段
２１ 画像送出装置
２１１ 画像符号化装置
２１２ 画素間引き装置
２１３ ビット抽出装置
２１４ 抽出画素情報符号化装置
２１５ 画像復号装置
２２ 伝送路
２３ エンドユーザ端末
２３１ 画像復号化装置
２３２ 抽出画素情報復号化装置
２３３ 原画像画素情報推定装置
２３４ 画質推定装置
３１ 画像送出装置
３１１ 画像符号化装置
３１２ 画素間引き装置
３１３ 抽出画素情報復号化装置
３１４ 伝送画像画素情報推定装置
３１５ 画質推定装置
３２ 伝送路
３３ エンドユーザ端末
３３１ 画像復号化装置
３３２ ビット抽出装置
３３３ 抽出画素情報符号化装置
３３４ 画質推定装置
４０ 画像送出システム
４０１ プログラム制御プロセッサ
４０２ 入力データバッファ
４０３ 出力データバッファ
４０４ プログラムメモリ
４１４ メインプログラム
４１４１ 画像符号化処理モジュール
４１４２ 画素間引き処理モジュール
４１４３ ビット抽出処理モジュール
４１４４ 抽出画素情報符号化処理モジュール
５０ エンドユーザ端末システム
５０１ プログラム制御プロセッサ
５０２ 入力データバッファ
５０３ 出力データバッファ
５０４ プログラムメモリ
５１４ メインプログラム
５１４１ 画像復号化処理モジュール
５１４２ 抽出画素情報復号化処理モジュール
５１４３ 原画像画素情報推定処理モジュール
５１４４ 画質推定処理モジュール
以下、本発明の実施形態を図面を参照して説明する。図１は、本発明による画質評価システムの概略構成を示したブロック図である。図１に示すように、本発明による画質評価システムは、ビット抽出手段１と、画質評価手段２とを備える。
ビット抽出手段１は、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する。ここで、第１の画像の画像フレームを表現する所定のデータとは、例えば、第１の画像の画像フレームにおける所定の画素位置の画素情報であってもよい。このような場合には、ビット抽出手段１は、第１の画像の画像フレームから所定の画素の輝度、色差、ＲＧＢ値による色などの画素情報に対して、１画素あたりのビット数よりも少ないビット数の予め指定されたビットを抽出すればよい。なお、Ｒ，Ｇ，Ｂの値のいずれか、またはそれらを組み合わせた情報に対してビット抽出することも可能である。ビット抽出の対象となるデータは、画素情報に限らず、標本化（サンプリング）され量子化されたデジタル画像において、所定のビット数で表現される標本であれば、どのような情報であってもよい。例えば、画素情報を直交変換して得られる周波数成分の情報（周波数情報）であってもよい。また、例えば、画像フレームを所定サイズのブロックに分割したブロックごとの画素情報の平均値や、各画素情報と前記平均値の差分絶対値の平均値や、画像フレームを所定サイズのブロックに分割したブロックごとの画素情報の分散であってもよい。このように、所定サイズのブロックごとに算出した値を用いることにより、伝送する原画像の情報量を削減することが可能となる。以下、ビット列の抽出対象となった画像フレームを表現するデータのことを標本データという。
ビット抽出手段１は、例えば、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムにおいて、原画像を符号化して前記符号化画像を送信する画像送出装置に実装されることにより、原画像や、その原画像の伝送する前の符号化画像や、その符号化画像を復号して得られる復号画像や、原画像を符号化する過程で得られる局所復号画像の画像フレームを対象にビット抽出を行ってもよい。また、例えば、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に実装されることにより、伝送画像の画像フレームを対象にビット抽出を行ってもよい。
ビット抽出手段１は、例えば、上位の所定数ビットや下位の所定数ビット、またはその両方を除いた、連続する所定のビットを抽出するようにしてもよい。図２は、ビット抽出手段１によるビット抽出の例を示す説明図である。図２に示すように、ビット抽出手段１は、標本データのビット数がＮビットであるとき、第１の画像の画像フレームにおける所定の標本データから、Ｎ＞ＭとなるＭビット分だけを抽出する。抽出するＭビットのビット位置は、例えば、最上位ビットからＭビット、最下位ビットからＭビット、または中央Ｍビットなどの形で抽出する。例えば、８ビットで表現される画素情報であれば、そのうち上位１ビットと下位２ビットを除いた中央５ビットを抽出することが考えられる。抽出するビットは、画質評価に用いるさいに重要となるビットを抽出することが好ましい。例えば、重要となるビットが下位ビットに有る場合は、図１２に示すように下位ビットのみを抽出し、上位ビットを伝送しないようにする。図１２は、１データあたり８ビットで表現されていて、下位ビットに重要な情報をもつような標本データにおいて、上位４ビットを伝送しない場合の例である。
画質評価手段２は、ビット抽出手段１によって抽出されたビット列で表現される値と、第２の画像において該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、第１の画像と第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価する。画質評価手段２は、例えば、第１の画像の画像フレームから抽出されたビット列に対し、同一の方法を用いて第２の画像から抽出したビット列を用いて差分を求め、その差分から、第１の画像と第２の画像の差を推定してもよい。例えば、１フレーム分の抽出ビット列の差分から求めた平均二乗誤差値を、フレーム全体における画質劣化値と推定してもよい。
なお、画質評価手段２は、例えば、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムにおいて、ビット抽出手段１を備える画像送出装置から符号化画像を受信して復号することにより伝送画像を得る画像受信装置に実装される。このような場合には、画像送出装置から比較画像（原画像等）の特徴量を示す情報として受信したビット列で表現される値を用いて比較画像と伝送画像の差を推定して、伝送画像の画質を評価すればよい。
なお、画像受信装置がビット抽出手段１を備える場合には、画質評価手段２は、画質送出装置側に実装される。このような場合には、画像受信装置から伝送画像の特徴量を示す情報として受信したビット列で表現される値を用いて原画像と伝送画像の差を推定して、伝送画像の画質を評価すればよい。
画素情報など多くの標本データにおいて、その下位ビットで表現される情報は、人間の視覚には検知できない程度の細微な情報であるため、下位ビットを除くことによる画質推定結果への影響は小さい。一方、上位ビットで表現される情報は、原画像と評価対象画像（伝送画像）との間にはある程度の相関があるため、両者の間で同一の値となる可能性が高い。このため、標本データの上位ビットを除いても、画質推定結果への影響は小さい。このことは、標本データが輝度、色差、ＲＧＢ値のいずれかである場合だけでなく、画素情報を直交変換して得られる周波数成分の情報（周波数情報）である場合、画像フレームを所定サイズのブロックに分割したブロックごとの画素情報の平均値である場合、各画素情報と前記平均値の差分絶対値の平均値である場合、画像フレームを所定サイズのブロックに分割したブロックごとの画素情報の分散である場合などでも同様である。
伝送エラーに起因する画質劣化が生じた場合には、原画像と評価対象画像との相関が低くなる場合があるが、一般に伝送エラーが生じた場合には、画質劣化が生じた領域に対し、劣化が目立たなくなるような処理（エラーコンシールメンと処理）が行われるため、上位ビットの相関性は保たれる可能性が高い。従って、伝送エラーが生じた場合においても、上位ビットを除くことによる画質推定結果への影響は小さいといえる。このような標本データに対するビット抽出を、１フレームにおいて複数行うことによって、高精度な画質推定が可能となる。
なお、図３に示すように、さらにデータ推定手段３を加えて、第１の画像の抽出ビット列から本来のビット数表現での標本データを推定させて、標本データ（Ｎビット）間の差分から第１の画像と第２の画像の差を推定することも可能である。図３は、本発明による画質評価システムの他の構成例を示すブロック図である。図３に示すように、本発明による画質評価システムは、さらにデータ推定手段３を備える。
データ推定手段３は、抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを補完することにより、当該ビット列の抽出対象になった第１の画像における所定の標本データの値を推定する。データ推定手段３は、例えば、抽出されなかったビットを予め定めておいた値（例えば、ゼロ）で補完して、第１の画像の標本データの値を推定してもよい。また、例えば、抽出されなかったビットを、第２の画像において当該ビット列の抽出対象になった標本データに相当する標本データの値で補完して、第１の画像の標本データの値を推定してもよい。
また、データ推定手段３は、抽出されなかったビットのうち上位ビットについて、推定結果とされる第１の画像の標本データの値と、第２の画像において該標本データに相当する標本データの値との差が最も小さくなる値で補完するようにしてもよい。なお、この推定方法の実施例は、第２の実施形態として具体的に説明する。
また、データ推定手段３は、抽出されなかったビットのうち下位ビットについて、当該下位ビットで表現可能な値の平均値で補完するようにしてもよい。なお、この推定方法の実施例は、第３の実施形態として具体的に説明する。
なお、データ推定手段３は、これらの方法を組み合わせて、第１の画像の標本データの値を推定してもよい。
また、本画質評価システムでは、画質評価手段２は、データ推定手段３により推定された第１の画像の標本データの値（Ｎビット）と、第２の画像の対応する標本データの値（Ｎビット）の差分から、第１の画像と第２の画像の差を推定すればよい。
また、画質評価手段２は、計算した標本データ間の差分から、さらに、ビット列を得る際に抽出されなかった下位のビットにより生じうる推定結果とされる標本データの値と実際の標本データの値との誤差の平均値を減算した値から、第１の画像と第２の画像の差を推定してもよい。なお、この推定方法の実施例は、第３の実施形態として具体的に説明する。
以下、より具体的な構成例について説明する。
実施形態１．
図４は、第１の実施形態による画質評価システムの構成例を示すブロック図である。図４に示す画質評価システムは、画像送出装置２１とエンドユーザ端末２３とを備える。また、画像送出装置２１とエンドユーザ端末２３とは伝送路２２を介して接続されている。なお、図４に示す画質評価システムは、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、エンドユーザ端末２３側（すなわち、画像受信装置側）で伝送画像の画質を評価する画質評価システムの例である。
画像送出装置２１は、画像符号化装置２１１と、画素間引き装置２１２と、ビット抽出装置２１３と、抽出画素情報符号化装置２１４とを備える。画像送出装置２１は、例えば、動画や静止画を配信するサーバ装置である。なお、図示していないが、画像送出装置２１は、伝送路２２を介して各種情報を送受信するための通信制御装置を備えているものとする。
また、エンドユーザ端末２３は、画像復号化装置２３１と、抽出画素情報復号化装置２３２と、原画像画素情報推定装置２３３と、画質推定装置２３４とを備える。エンドユーザ端末３は、画像送出装置２１から原画像の符号化画像を受信して復号することにより伝送画像を得る情報処理装置であって、例えば、ネットワーク通信機能を有する携帯端末機やパーソナルコンピュータである。なお、図示していないが、エンドユーザ端末２３は、伝送路２２を介して各種情報を送受信するための通信制御装置を備えているものとする。
画像送出装置２１の画像符号化装置２１１は、入力された画像（原画像）を符号化する。なお、画像符号化装置２１１によって符号化された符号化画像は、画像送出装置２１が備える通信制御装置（図示せず。）によって、伝送路２２を介してエンドユーザ端末２３に伝送される。
画素間引き装置２１２は、原画像のフレーム（画像フレーム）に対して画素の間引きを行う。なお、画素間引き装置２１２が画素を間引いた後に残った画素の画素情報が、標本データとしてのビット抽出対象に指定されたことになる。
ビット抽出装置２１３は、画像符号化装置２１１による間引き後に残った原画像の各画素の画素情報（Ｎビット）に対して、予め指定されたビットを抽出する。なお、ビット抽出装置２１３は、図１で示したビット抽出手段１の機能を実現している装置である。
抽出画素情報符号化装置２１４は、ビット抽出装置２１３が抽出したビット列からなる原画像の抽出画素情報（Ｍビット）を１フレーム分まとめ、原画像の特徴量として符号化する。なお、抽出画素情報符号化装置２１４によって符号化された原画像の特徴量（１フレーム分の抽出画素情報（Ｍビット））は、画像送出装置２１が備える通信制御装置（図示せず。）によって、伝送路２２を介してエンドユーザ端末２３に伝送される。
画像符号化装置２１１，画素間引き装置２１２，ビット抽出装置２１３，抽出画素情報符号化装置２１４は、具体的には、画像送出装置２１が備えるＣＰＵ等、プログラムに従って動作する情報処理装置によって実現される。なお、画像符号化装置２１１は、エンコーダ装置等のハードウェア装置によって実現してもよい。
また、エンドユーザ端末２３の画像復号化装置２３１は、通信制御装置を介して画像送出装置２１から受信した符号化画像（原画像を符号化して得られる符号化画像）を復号する。以下、画像復号化装置２３１が復号して得られる復号画像のことを受信画像と表現する場合がある。なお、受信画像とは、評価対象画像となる伝送画像のことである。
抽出画素情報復号化装置２３２は、通信制御装置を介して画像送出装置２１から受信した原画像の符号化特徴量情報（すなわち、符号化された１フレーム分の抽出画素情報（Ｍビット））を復号する。
原画像画素情報推定装置２３３は、抽出画素情報復号化装置２３２による復号によって得られた原画像の各抽出画素情報（Ｍビット）から、本来のビット数表現である画素情報の値を推定する。本実施形態では、原画像の抽出画素情報（Ｍビット）に対して、除かれたビットのうち下位ビットについてはゼロで補完し、上位ビットについては受信画像における同一画素位置の画素情報（Ｎビット）の値で補完するものとする。原画像画素情報推定装置２３３は、図３で示した特徴量推定手段３の機能を実現している装置である。
画質推定装置２３４は、原画像画素情報推定装置２３３によって原画像の各抽出画素情報（Ｍビット）に基づき推定された原画像の画素情報（Ｎビット）と、受信画像の画像情報とから、原画像に対する伝送画像の画質を推定する。本実施形態では、推定された各原画像の画素情報（Ｎビット）の値と、受信画像における同一画素位置の画素情報（Ｎビット）の値の差分から、原画像と受信画像の差を推定することにより、伝送画像の画質を評価する。なお、画質推定装置２３４は、図３で示した画質評価手段２の機能を実現している装置である。なお、原画像画素情報推定装置２３３が省略される場合には、復号して得られた原画像の各抽出画素情報（Ｍビット）の値と、受信画像から同一の方法によって抽出した抽出画素情報（Ｍビット）の値の差分から、原画像と受信画像の差を推定することも可能である。
画像復号化装置２３１，抽出画素情報復号化装置２３２，原画像画素情報推定装置２３３，画質推定装置２３４は、具体的には、エンドユーザ端末２３が備えるＣＰＵ等、プログラムに従って動作する情報処理装置によって実現される。なお、画像復号化装置２３１は、デコーダ装置等のハードウェア装置によって実現してもよい。
次に、図５および図６のフローチャートを参照して本実施形態の動作を説明する。図５は、画像送出装置２１の動作例を示すフローチャートである。また、図６は、エンドユーザ端末２３の動作例を示すフローチャートである。ここでは、画像送出装置２１が、エンドユーザ端末２３からの要求に従って、要求された画像の符号化画像をエンドユーザ端末２３に伝送路２２を介して伝送する場合を例にして説明する。なお、伝送対象となる原画像は、必要に応じて画像送出装置１に入力するようにしてもよいし、予め画像送出装置２１が備える記憶装置に記憶しておいてもよい。
まず、画像送出装置２１に原画像が入力されると（ステップＡ１０１）、画像符号化装置２１１は、入力された原画像を符号化する（ステップＡ１０２）。画像符号化装置２１１は、例えば、画像を表現するための画像情報を、予め決められた符号化方式（例えば、ＭＰＥＧ−２やＨ．２６４（ＭＰＥＧ−４ ＡＶＣ）等）に従い、所定の変換式で変換したり、所定の演算式で計算することによって、圧縮された画像情報を生成する。より具体的には、フレームの分離や差分データの取得、量子化、多重化等の処理を行う場合もある。原画像が符号化されると、画像送出装置２１は、原画像を符号化して得られた符号化画像を伝送路２２を介してエンドユーザ端末２３に伝送する（ステップＡ１０３）。画像送出装置２１（より具体的には、画像送出装置２１が備える通信制御装置（図示せず。））は、画像符号化装置２１１による原画像の符号化によって得た符号化画像の画像情報をエンドユーザ端末２３に伝送する。
画像送出装置２１では、この符号化画像の伝送処理と並行して、伝送する画像（符号化画像）の原画像の特徴量も伝送する。まず、画素間引き装置２１２は、入力された原画像の画像フレームに対して画素の間引き処理を行う（ステップＡ１０４）。画素間引き装置２１２は、例えば、水平方向、垂直方向ともに１６画素ごとに画素を間引くなどあらかじめ指定された方法で画素を間引けばよい。また、画像フレームの中央部分では８画素ごと、周辺部分では１６画素のように、フレームの場所によって間引く間隔を変更するようにしてもよい。このように間引く間隔を変えることで、特徴量のデータ量を制御することができる。なお、間引く間隔は、特徴量を伝送するために必要なビット数と伝送路２２の伝送帯域とに基づいて定まる１画像フレームあたりに抽出できる画素情報の数を元に定めればよい。もちろん、伝送帯域に余裕がある場合は、間引きをおこなわなくてもよい。なお、画素間引き装置２１２での間引き方は、エンドユーザ端末２３側でもあらかじめ明らかになっているものとする。
次に、ビット抽出装置２１３は、間引き後に残った各画素の輝度値などの画素情報（Ｎビット）から、Ｎ＞ＭとなるＭビットを抽出する（ステップＡ１０５）。ビット抽出装置２１３は、例えば、原画像の画像情報から、間引きによってビット抽出対象に指定された画素の輝度値などの画素情報（Ｎビット）を抽出し、その画素情報に対してさらに予め指定されたビットを抽出することによって、Ｍビット列で表現される抽出画素情報を生成すればよい。なお、Ｎビット中のどのＭビットを抽出するかは、エンドユーザ端末２３側でもあらかじめ明らかになっているものとする。
１フレーム中のすべての間引き後の画素についてビット抽出が完了すると、抽出画素情報符号化装置２１４は、原画像の１フレーム分の抽出画素情報（Ｍビット）を、原画像の特徴量として符号化する（ステップＡ１０６）。なお、特徴量の符号化は、可逆符号化方法を用いるものとする。抽出画素情報符号化装置２１４は、例えば、予め決められた可逆符号化方式（例えば、算術符号化や二値画像符号化の国際標準であるＪＢＩＧ符号化等）に従い、所定の変換式で変換したり、所定の演算式で計算することによって、圧縮された原画像の特徴量情報を生成する。具体的には、抽出画素情報として生成された各ビット列を、抽出対象となった画素位置を元に定めた所定の順序でつなげたビット列（抽出画素数×Ｍビット）からなるデータを算術符号化方式により符号化したり、二値画像の画像データとみなしてＪＢＩＧ符号化方式により符号化したりすればよい。なお、１フレーム分の特徴量としてのデータ量は、既に画素の間引きとビット抽出によって削減されていることから、データ圧縮せずに各抽出画素情報の値をそのまま符号とみなして送信してもよい。
画像送出装置２１（具体的には、通信制御装置）は、原画像の特徴量として１フレーム分の抽出画素情報（Ｍビット）が符号化されると、符号化によって得られる符号化特徴量情報を、伝送路２２を介してエンドユーザ端末２３に伝送する（ステップＡ１０７）。なお、特徴量の送信は、符号化画像の伝送処理と同期させる。なお、必ずしも画像情報と一緒に送信する必要はなく、画像情報を送信する前や後に、どの符号化画像のどのフレームに対応する特徴量かがわかるように送信されればよい。例えば、全フレーム分を纏めて送信したり、一定時間分のフレーム（例えば、１秒分のフレームとして３０フレーム）をまとめて、一定時間（１秒）ごとに送信するようにしてもよい。
画像送出装置２１は、１画像フレームに対して上記処理が完了すると、原画像の末尾フレームまで処理が完了したか否かを判定し（ステップＡ１０８）、処理が完了していなければステップＡ１０１に戻り、次の画像フレームに対して一連の処理を繰り返す。末尾フレームまでの処理が完了していれば、処理を終了する。
次に、エンドユーザ端末２３の動作について説明する。エンドユーザ端末２３は、画像送出装置２１から符号化画像の画像情報と、符号化された原画像の特徴量情報（１フレーム分の抽出画素情報（Ｍビット））とを受信する。図６に示すように、エンドユーザ端末２３の画像復号化装置２３１は、符号化画像の画像情報を受信すると（ステップＢ１０１）、符号化画像を復号する（ステップＢ１０２）。画像復号化装置２３１は、具体的には、符号化画像の画像情報を、符号化に用いられた符号化方式に対応した復号化方式（例えば、ＭＰＥＧ−２に対応した復号化方式，Ｈ．２６４（ＭＰＥＧ−４ ＡＶＣ）に対応した復号化方式）に従い、所定の変換式で変換したり、所定の演算式で計算することによって、符号化される前の画像情報に復元する。すなわち、符号化前に表現されていた原画像と同じ画像を表現するための画像情報を生成する。なお、多くの符号化方式では、符号化によって圧縮された情報が完全には復元できず、画質が劣化した劣化画像に復号される。この復号によって得られる受信画像は、エンドユーザ端末２３に接続された表示装置などに出力される（ステップＢ１０３）。
エンドユーザ端末２３では、この符号化画像の復号処理と並行して、符号化された原画像の特徴量情報の復号処理も行う。エンドユーザ端末２３の抽出画素情報復号化装置２３２は、符号化された原画像の特徴量情報を受信すると（ステップＢ１０４）、それを復号して、原画像の１フレーム分の抽出画素情報（Ｍビット）を得る（ステップＢ１０５）。抽出画素情報復号化装置２３２は、例えば、画像送出装置２１の抽出画素情報符号化装置２１４が行った符号化方式に対応する復号化方式に従い、所定の変換式で変換したり、所定の演算式で計算することによって、符号化される前に示されていた特徴量と同じ特徴量を示す情報を生成する。なお、抽出画素情報符号化装置２１４が可逆符号化方式（例えば、ＪＢＩＧ符号化方式）を用いて符号化を行った場合には、適応算術復号等の演算を行うことによって、符号化前の内容と完全に一致する情報を得ることができる。
次に、原画像画素情報推定装置２３３は、復号して得られた原画像の各抽出画素情報（Ｍビット）について、本来のビット数表現であるＮビット列での画素情報を推定する（ステップＢ１０６）。原画像画素情報推定装置２３３は、例えば、原画像の抽出画素情報（Ｍビット）として伝送されないビット（画素情報からビット抽出する際に除かれたビット）のうち下位ビットをゼロで補完し、上位ビットを受信画像における同一画素位置の画素情報の値で補完することにより、原画像の画素情報（Ｎビット）を推定する。
伝送された全ての抽出画素情報について原画像の画素情報が推定されると、画質推定装置２３４は、推定された原画像の画素情報と受信画像の画像情報とから、原画像に対する受信画像の画質を推定する（ステップＢ１０７）。画質推定装置２３４は、例えば、推定された原画像の画素情報全てについて、該画素情報の値と、受信画像の対応する画素情報（同一画素位置の画素情報）の値の差分を求め、この値を二乗した値の平均値を画像全体の誤差とみなし、画質を推定してもよい。そして、求めた画像全体の誤差を画質劣化の度合いを示す画質評価値として表示装置などに出力する（ステップＢ１０８）。
なお、エンドユーザ端末２３は、１画像フレームに対して上記処理が完了すると、受信データがまだ存在するか否かを判定し（ステップＢ１０９）、存在すればステップＢ１０１およびステップＢ１０４に戻り、次の画像フレームに対して一連の処理を繰り返す。存在しなければ、処理を終了する。
以上のように、本実施の形態によれば、原画像といった比較画像の画像フレームを表現するデータをビット数の少ないビット列で抽出し、それを画質評価に用いることによって、１フレームあたりに抽出するデータの数を減らさずに画質劣化の推定結果への影響が少ない情報だけを減らすことができるので、一定の伝送路帯域の制限下においても、高精度に伝送画像の画質を評価することができる。
なお、上記実施形態では、エンドユーザ端末２３が、画像送出装置２１から送信される原画像の特徴量を元に伝送画像との差を求めて伝送画像の画質を評価する画質評価システムを説明したが、例えば、図７に示すような構成にすることで、画像送出装置側で、伝送画像の画質を評価することも可能である。
図７は、画質評価システムの他の構成例を示すブロック図である。図７に示す画質評価システムは、画像送出装置３１が、抽出画素情報復号化装置３１２と、伝送画像画素情報推定装置３１３と、画質推定装置３１４とを備え、エンドユーザ端末３３が、画素間引き装置３３２と、ビット抽出装置３３３と、抽出画素情報符号化装置３３４とを備える。なお、個々の装置の動作は、処理対象とする画像が代わるだけで、基本的には上記で説明した動作と同様である。
具体的には、エンドユーザ端末３３の画素間引き装置２３２，ビット抽出装置３３３，抽出画素情報符号化装置３３４は、図４に示す画素間引き装置２１２，ビット抽出装置２１３，抽出画素情報符号化装置２１４と同様の動作を受信画像の画像フレームに対して行う。すなわち、画素間引き装置２３２は、受信画像の画像フレームに対して画素の間引きを行う。ビット抽出装置３３３は、画素間引き装置２３２による間引き後に残った受信画像の各画素の画素情報（Ｎビット）に対して、予め指定されたビットを抽出する。抽出画素情報符号化装置３３４は、ビット抽出装置３３３が抽出したビット列からなる原画像の抽出画素情報（Ｍビット）を１フレーム分まとめ、受信画像の特徴量として符号化する。なお、符号化された受信画像の特徴量は、通信制御装置を介して画像送出装置３１に送信される。
一方、画像送出装置３１の抽出画素情報復号化装置３１２，伝送画像画素情報推定装置３１３，画質推定装置３１４は、図４に示す抽出画素情報復号化装置２３２，原画像画素情報推定装置２３３，画質推定装置２３４と同様の動作を原画像の画像フレームに対して行う。すなわち、抽出画素情報復号化装置３１２は、通信制御装置（図示せず。）を介してエンドユーザ端末３３から受信した伝送画像（エンドユーザ端末３３における受信画像）の符号化特徴量情報（すなわち、符号化された１フレーム分の抽出画素情報（Ｍビット））を復号する。伝送画像画素情報推定装置３１３は、抽出画素情報復号化装置３１２による復号によって得られた伝送画像の各抽出画素情報（Ｍビット）から、本来のビット数表現である画素情報の値を推定する。画質推定装置３１４は、原伝送画像画素情報推定装置３１３によって伝送画像の各抽出画素情報（Ｍビット）に基づき推定された伝送画像の画素情報（Ｎビット）と、原画像の画像情報とから、原画像に対する伝送画像の画質を推定する。
実施形態２．
次に、本発明の第２の実施形態について説明する。本実施形態では、抽出しなかった上位ビットを補完する際に、下位ビットからの桁上がりを考慮する。なお、本実施形態の構成は、第１の実施形態と同様でよい。以下、図４に示す画像評価装置システムに適用させた場合を例に説明する。
例えば、１画素あたり８ビットで表現される画素情報に対して上位２ビットを除いた下位６ビットを抽出した抽出画素情報が伝送されるとする。本来の画素情報の値が０ｘ３Ｆ（２進数で”００１１ １１１１”）であれば、そのうちの下位６ビット”１１ １１１１”が伝送されることになる。一方、受信画像では、この抽出画素情報に対応する画素の画素情報の値が０ｘ４０（２進数で”０１００ ００００”）であったとする。この場合、本来の抽出画素情報（８ビット）での差分は１であるが、エンドユーザ端末２３の原画像画素情報推定装置２３３が、抽出されなかった上位２ビットを受信画像の対応する画素情報の値で補完すると、推定される原画像の画素情報（８ビット）の値は０ｘ４Ｆ（２進数で”０１１１ １１１１”）となり、実際の差分と大きく異なってしまう。
そこで、本実施形態では、抽出されない上位ビットがとりうる値の組み合わせの中から、受信画像の対応する画素情報との差分が最も小さくなるものを、その上位ビットの値とみなすようにする。上記例では、上位２ビットが取りうる値の組み合わせ”００”，”０１”，”１０”，”１１”の中から、最も推定結果とされる画素情報と受信画像の対応する画素情報との差分が小さい組み合わせ”００”が選ばれる。結果、上位２ビットとしてその値を付加したビット列”００１１ １１１１”で表現される値０ｘ３Ｆが、原画像の画素情報に推定される。なお、抽出されないビットに下位ビットが含まれる場合には、下位ビットを所定の方法で補完した上で、対応する画素情報との差分が最も小さくなるものを選べばよい。
以上のように、本実施形態によれば、除いた上位ビットへの桁上がりが生じるような場合であっても、高精度な画質評価を維持できる。
実施形態３．
次に、本発明の第３の実施形態について説明する。本実施形態では、抽出しなかった下位ビットにより生じる誤差を考慮する。なお、本実施形態の構成は、第１の実施形態と同様でよい。以下、図４に示す画像評価装置システムに適用させた場合を例に説明する。
例えば、１画素あたり８ビットで表現される画素情報に対して下位２ビットを除いた上位６ビットを抽出した抽出画素情報が伝送されるとする。ここで、エンドユーザ端末２３の原画像画素情報推定装置２３３が、抽出されなかった下位２ビットを”００”で補完すると、実際の原画像の画素情報（８ビット）との誤差は、原画像の画素情報（８ビット）の下位２ビットが”００”であれば０である。しかし、”０１”であれば誤差は１となり、”１０”であれば誤差は２となり、”１１”であれば誤差は３となる。
原画像の画素情報（８ビット）の下位２ビットの発生確率に偏りが無いとすると、誤差の平均値は（０＋１＋２＋３）÷４＝１．５となる。画質推定装置２３４は、推定結果を用いて算出した差分からこの誤差の平均値を減算した値を元に、画質評価を行う。
以上のように、本実施形態によれば、画素情報を推定する際に生じる誤差を平均化することによって、より安定して高精度な画質評価を行うことができる。
実施形態４．
次に、本発明の第４の実施形態について説明する。本実施形態では、抽出しなかった下位ビットの補正をおこなう。なお、本実施形態の構成は、第１の実施形態と同様でよい。以下、図４に示す画像評価装置システムに適用させた場合を例に説明する。
例えば、１画素あたり８ビットで表現される画素情報に対して下位２ビットを除いた上位６ビットを抽出した抽出画素情報が伝送されるとする。ここで、エンドユーザ端末２３の原画像画素情報推定装置２３３が、抽出されなかった下位２ビットを”００”で補完すると、実際の原画像の画素情報（８ビット）との間に最大で３の誤差が生じることになる。
本実施形態では、この誤差を抑制するために、抽出されない下位ビットを、そのビット列で表現可能な値の平均値で補完する。上記例では、下位２ビットで表現できる値の平均値は（０＋１＋２＋３）÷４＝１．５であるので、この平均値１．５を整数化した”０１（２進数）”で下位ビットを補完する。なお、”１０（２進数）”でもよい。
これにより、実際の原画像の画素情報（８ビット）との誤差は、原画像の画素情報（８ビット）の下位２ビットが”００”であれば１となり、”０１”であれば０となり、”１０”であれば１となり、”１１”であれば２となる。原画像の画素情報（８ビット）の下位２ビットの発生確率に偏りが無いとすると、誤差の平均値は（１＋０＋１＋２）÷４＝１となり、下位ビットを伝送しないことによる誤差を抑制できる。結果、高精度な画質評
価を維持できる。
なお、上述した第２，第３，第４の実施形態は、それぞれ独立した動作であるので、任意に組み合わせて動作させることができる。
実施形態５．
次に、本発明の第５の実施形態について説明する。図８は、第５の実施形態による画質評価システムの構成例を示すブロック図である。図８に示すように、本実施形態による画質評価システムは、図４に示す第１の実施形態と比べて、画像送出装置２１が、画像復号化装置２１５を備える点で異なる。
画像復号化装置２１５は、伝送される前の伝送画像の画像情報を得るために、画像符号化装置２１１が原画像を符号化して得られる符号化画像を復号する。本実施形態では、画素間引き装置２１２，ビット抽出装置２１３，抽出画素情報符号化装置２１４は、画像復号化装置２１５による復号によって得られる復号画像の画像フレームを対象に、所定の処理を行う。
すなわち、画素間引き装置２１２は、画像復号化装置２１５による復号によって得られる復号画像の画像フレームに対して画素の間引きを行う。ビット抽出装置２１３は、間引き後に残った復号画像の各画素の画素情報（Ｎビット）に対して、予め指定されたビットを抽出する。抽出画素情報符号化装置２１４は、ビット抽出装置２１３が抽出したビット列からなる復号画像の抽出画素情報（Ｍビット）を１フレーム分まとめ、復号画像の特徴量として符号化する。なお、符号化された復号画像の特徴量は、通信制御装置を介してエンドユーザ端末２３に送信される。
このような構成とすることで、伝送路２２での伝送エラーに起因する画質劣化のみを、エンドユーザ端末２３にて推定させることができる。
実施形態６．
次に、本発明の第６の実施形態について説明する。図９は、第６の実施形態による画質評価システムの構成例を示すブロック図である。図９に示すように、本実施形態による画質評価システムは、図２に示す第１の実施形態と比べて、画素間引き装置２１２に入力される画像が、画像符号化装置２１１から出力される局所復号画像となっている点で異なる。
本実施形態において、画像符号化装置２１１は、原画像を符号化する際に、フレーム間予測符号化のため、一部のフレームの復号処理を行う。画素間引き装置２１２，ビット抽出装置２１３，抽出画素情報符号化装置２１４は、画像符号化装置２１１による符号化処理の過程で生成される局所復号画像の画像フレームを対象に、所定の処理を行う。
すなわち、画素間引き装置２１２は、画像符号化装置２１１による符号化のための復号処理によって得られる局所復号画像の画像フレームに対して画素の間引きを行う。ビット抽出装置２１３は、間引き後に残った局所復号画像の各画素の画素情報（Ｎビット）に対して、予め指定されたビットを抽出する。抽出画素情報符号化装置２１４は、ビット抽出装置２１３が抽出したビット列からなる局所復号画像の抽出画素情報（Ｍビット）を１フレーム分まとめ、局所復号画像の特徴量として符号化する。なお、符号化された局所復号画像の特徴量は、通信制御装置を介してエンドユーザ端末２３に送信される。
このように、符号化処理の過程で生成される局所復号画像を利用することによっても、伝送路２２での伝送エラーに起因する画質劣化のみを、エンドユーザ端末２３にて推定させることができる。
実施形態７．
次に、本発明の第７の実施形態について説明する。本実施の形態では、上述した第１の実施の形態における各装置を、コンピュータシステムにより実行する。図１０は、本実施の形態における画像送出システムの構成例を示すブロック図である。また、図１１は、本実施形態におけるエンドユーザ端末システムの構成例を示すブロック図である。なお、画像送出システム４０は、図４に示す第１の実施の形態における画像送出装置２１に相当する。また、エンドユーザ端末システム５０は、図４に示す第１の実施の形態におけるエンドユーザ端末２３に相当する。
図１０に示す画像送出装置システムには、プログラム制御プロセッサ４０１が装備されている。そして、プログラム制御プロセッサ４０１には、入力データバッファ４０２と出力データバッファ４０３の他に、第１の実施の形態における画像送出装置２１と同様の動作を実現するための処理をプログラム制御プロセッサ４０１に実行させるためのプログラムを格納したプログラムメモリ４０４が接続されている。
入力データバッファ４０２は、プログラム制御プロセッサ４０１に入力する各種データを記憶するためのバッファである。出力データバッファ４０３は、プログラム制御プロセッサ４０１が出力する各種データを記憶し、また必要に応じてプログラム制御プロセッサ４０１に入力するためのバッファである。
プログラムメモリ４０４に格納されるプログラムモジュールは、メインプログラム４１４の他に、画像符号化処理モジュール４１４１、画素間引き処理モジュール４１４２、ビット抽出処理モジュール４１４３、抽出画素情報符号化処理モジュール４１４４を含む。メインプログラム４１４は、上記処理モジュール４１４１〜４１４４を取りまとめて実行するための主プログラムである。また、画像符号化処理モジュール４１４１、画素間引き処理モジュール４１４２、ビット抽出処理モジュール４１４３、抽出画素情報符号化処理モジュール４１４４は、それぞれ第１の実施形態における画像符号化装置２１１と、画素間引き装置２１２と、ビット抽出装置２１３と、抽出画素情報符号化装置２１４とを機能的に実現するための処理モジュールである。なお、プログラム制御プロセッサ４０１が、メインプログラム４１４に従って各処理モジュール４１４１〜４１４４を呼び出すことによって、第１の実施の形態における画像送出装置２１と同様の処理を実行させる。
また、図１１に示すエンドユーザ端末システム５０には、プログラム制御プロセッサ５０１が装備されている。そして、プログラム制御プロセッサ５０１には、入力データバッファ５０２と出力データバッファ５０３の他に、画像を受信する側において第１の実施の形態による画質評価に必要な処理を実行するためのプログラムを格納したプログラムメモリ５０４が接続されている。
入力データバッファ５０２は、プログラム制御プロセッサ５０１に入力する各種データを記憶するためのバッファである。出力データバッファ５０３は、プログラム制御プロセッサ５０１が出力する各種データを記憶し、また必要に応じてプログラム制御プロセッサ５０１に入力するためのバッファである。
プログラムメモリ５０４に格納されるプログラムモジュールは、メインプログラム５１４の他に、画像復号化処理モジュール５１４１、抽出画素情報復号化処理モジュール５１４２、原画像画素情報推定処理モジュール５１４３、画質推定処理モジュール５１４４を含む。メインプログラム５１４は、上記処理モジュール５１４１〜５１４４を取りまとめて実行するための主プログラムである。また、画像復号化処理モジュール５１４１、抽出画素情報復号化処理モジュール５１４２、原画像画素情報推定処理モジュール５１４３、画質推定処理モジュール５１４４は、それぞれ第１の実施の形態における画像復号化装置２３１、抽出画素情報復号化装置２３２、原画像画素情報推定装置２３３、画質推定装置２３４を機能的に実現するための処理モジュールである。なお、プログラム制御プロセッサ５０１が、メインプログラム５１４に従って各処理モジュール５１４１〜５１４４を呼び出すことによって、第１の実施の形態におけるエンドユーザ端末２３と同様の処理を実行させる。
本実施の形態では、画像送出装置システム４０およびエンドユーザ端末システム５０のプログラム制御プロセッサ４０１，５０１が、それぞれメインプログラム４１４，５１４に従い、各種処理モジュールを実行することで、第１の実施の形態と同様の画質評価動作を実現させる。
なお、プログラムメモリ４０４，５０４が、それぞれ第２，第３，第４，第５または第６の実施形態による画像送出装置２１，エンドユーザ端末２３に対応したプログラムを格納することによって、各実施形態と同様の画質評価動作を行わせることも可能である。すなわち、各実施形態と同様のシステムを、コンピュータシステム上で実現することが可能である。
次に、具体的な実施例を用いて本発明による画質評価システムの動作を説明する。本実施例は、第２の実施形態と第４の実施形態を組み合わせた実施形態における実施例であって、ＳＤＴＶサイズ（水平７２０画素、垂直４８０画素、1秒あたり２９．９７フレーム）の動画像を原画像とする伝送画像の画質を、１画像フレームあたり１３５０画素分の輝度情報（８ビット）を用いて推定する。
まず、画像送出装置２１にＳＤＴＶサイズ（水平７２０画素、垂直４８０画素、1秒あたり２９．９７フレーム）の動画像の画像データが入力されると、画像符号化装置２１１は、その動画像をＭＰＥＧ−２符号化方式で符号化する。
次に、画素間引き装置２１２は、入力された動画像の１画像フレームに対して、水平１６画素ごとおよび垂直１６画素ごとに画素を間引く。
次に、ビット抽出装置２１３は、間引かれた後に残った１３５０画素の輝度情報に対して、上位２ビットと下位２ビットとを除いた中央４ビットを抽出して、４ビット列からなる抽出輝度情報を生成する。
次に、抽出画素情報符号化装置２１４は、この１３５０画素分の抽出輝度情報をまとめて、原画像の特徴量として、符号化する。ここでは、ＪＢＩＧ方式による可逆圧縮により符号化するものとする。
そして、画像符号化装置２１１によって符号化された画像（符号化画像）と、抽出画素情報符号化装置２１４によって符号化された原画像の特徴量とが、伝送路２２を介してエンドユーザ端末２３に伝送される。
エンドユーザ端末２３は、画像送出装置２１から、符号化画像と符号化された原画像の特徴量とを受信する。エンドユーザ端末２３の画像復号化装置２３１は、受信した符号化画像の情報をＭＰＥＧ−２方式に対応する復号方式で復号し、受信画像の画像フレームに復元する。この受信画像の画像フレームは、原画像画素情報推定装置２３３および画質推定装置２３４に送られる。
一方で、抽出画素情報復号化装置２３２は、受信した符号化された原画像の特徴量をＪＢＩＧ方式に対応する復号方式で復号し、原画像の１フレーム分の抽出輝度情報（４ビット）に復元する。
次に、原画像画素情報推定装置２３３は、復元された各抽出輝度情報（４ビット）に対して、伝送されなかった下位２ビットを、その下位２ビットで表現可能な値の平均値である”００”で補完する。また、伝送されなかった上位２ビットは、その上位２ビットがとりうる値の組み合わせのうち、その抽出輝度情報が抽出された画素と同一画素位置の受信画像の輝度情報（８ビット）との差分が最も小さくなる値で補完する。このように上位ビットと下位ビットとを補完して得られる８ビットデータによって表現される値を、原画像の輝度情報（８ビット）と推定する。
このような推定処理を１フレームにつき１３５０画素分行い、その結果として１３５０画素分の原画像の輝度情報群が画質推定装置２３４に送られる。
画質推定装置２３４は、１３５０画素分の原画像の輝度情報（推定輝度情報）に対して、当該輝度情報と受信画像において対応する輝度情報の値の差分の二乗を計算する。そして、１３５０画素分の値（差分の二乗）を加算し、１３５０で除算することで、このフレームの平均二乗誤差の推定値を算出する。
なお、本発明は、原画像の画像フレームから抽出される所定の周波数情報を用いて画質を評価するシステムについても適用可能である。例えば、１画素あたり８ビットで表現される輝度値を持つ原画像を水平８画素×垂直８画素から構成されるブロックに分割し、各ブロックに対して離散コサイン変換を施し、変換結果である８×８個の変換係数から所定の係数（例えば、水平方向４番目、垂直方向４番目の係数など）を抽出したものを元に、画質を評価する場合、抽出される各係数から、例えば中央の連続するビット（例えば、１６ビットで表現されている場合には上位４ビットと下位４ビットを除いた中央の８ビット）を抽出したものを、原画像の特徴量として伝送すればよい。伝送された側では、受信画像に対して同様の周波数情報抽出処理を行うことで抽出した係数を元に、原画像の特徴量として伝送される各抽出周波数情報（中央の８ビット列で表現される係数）から本来のビット数表現での係数を推定し、推定した係数の値と受信画像から同一の方法によって抽出した係数の値との差分の大小により、画質を推定すればよい。
以上の如く、本発明の第１の態様は、画像の画質を評価する画質評価システムであって、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値と、第２の画像において該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、前記第１の画像と前記第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価する画質評価手段とを備えたことを特徴とする画質評価システムである。
本発明の第２の態様は、上記態様において、前記ビット抽出手段が、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットを抽出する。
本発明の第３の態様は、上記態様において、前記ビット抽出手段が、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットを除いたビットを抽出する。
本発明の第４の態様は、上記態様において、前記ビット抽出手段が、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出する。
本発明の第５の態様は、上記態様において、画像フレームを表現する所定のデータが、画像フレームを所定サイズのブロックに分割したブロックごとの画素情報の平均値である。
本発明の第６の態様は、上記態様において、画像フレームを表現する所定のデータが、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の平均値と、各画素情報と前記平均値の差分絶対値の平均値である。
本発明の第７の態様は、上記態様において、画像フレームを表現する所定のデータが、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の分散である。
本発明の第８の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、画像送出装置は、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを含み、画像受信装置は、前記原画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む。
本発明の第９の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、画像受信装置は、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する特徴量送信手段とを含み、画像送出装置は、前記伝送画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む。
本発明の第１０の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、画像送出装置は、符号化画像を伝送させずに復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを含み、画像受信装置は、前記復号画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む。
本発明の第１１の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、画像送出装置は、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを含み、画像受信装置は、前記局所復号画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む。
本発明の第１２の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えたことを特徴とする画像送出装置である。
本発明の第１３の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、伝送画像の特徴量として受信した、前記伝送画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする画像送出装置である。
本発明の第１４の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えたことを特徴とする画像送出装置である。
本発明の第１５の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、原画像を符号化して前記符号化画像を送信する画像送出装置において、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えたことを特徴とする画像送出装置である。
本発明の第１６の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする画像受信装置である。
本発明の第１７の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、前記ビット抽出手段によって抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する特徴量送信手段とを備えたことを特徴とする画像受信装置である。
本発明の第１８の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、伝送する前の符号化画像を復号することにより得られる復号画像の特徴量として受信した、前記復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする画像受信装置である。
本発明の第１９の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、原画像を符号化する過程で得られる局所復号画像の特徴量として受信した、前記局所復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えたことを特徴とする画像受信装置である。
本発明の第２０の態様は、画像の画質を評価する画質評価方法であって、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、抽出されたビット列で表現される値と、第２の画像において該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、前記第１の画像と前記第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価することを特徴とする画質評価方法である。
本発明の第２１の態様は、上記態様において、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットを抽出する。
本発明の第２２の態様は、上記態様において、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットを除いたビットを抽出する。
本発明の第２３の態様は、上記態様において、第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出する。
本発明の第２４の態様は、上記態様において、画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の平均値を用いる。
本発明の第２５の態様は、上記態様において、画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の平均値と、各画素情報と前記平均値の差分絶対値の平均値を用いる。
本発明の第２６の態様は、上記態様において、画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の分散を用いる。
本発明の第２７の態様は、上記態様において、画像フレームを表現する所定のデータとして、画素情報を直交変換して得られる周波数成分の集合における所定位置の周波数成分の情報を用いる。
本発明の第２８の態様は、上記態様において、画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、ブロック内画素の画素情報を直交変換して得られる周波数成分の集合における所定位置の周波数成分の情報を用いる。
本発明の第２９の態様は、上記態様において、画像フレームを表現する所定のデータとして、所定の画素位置の画素情報を用いる。
本発明の第３０の態様は、上記態様において、画像フレームを表現する所定のデータとして、フレーム内の画素を一定の間隔で間引き、残った画素の画素情報を用いる。
本発明の第３１の態様は、上記態様において、画像フレームを表現する所定のデータとして、フレーム内の画素をフレーム内の場所によって決定される間隔で間引き、残った画素の画素情報を用いる。
本発明の第３２の態様は、上記態様において、間引きの間隔を変えることにより、送信する特徴量のデータ量を制御する。
本発明の第３３の態様は、上記態様において、画素情報が、該当する画素の輝度の情報、色差の情報、またはＲＧＢ値のいずれかもしくはそれらを組み合わせた情報である。
本発明の第３４の態様は、上記態様において、抽出されたビット列に対して、当該ビット列を得る際に抽出されなかった上位のビットを、第２の画像において当該ビット列の抽出対象になったデータに相当するデータの値との差が最も小さくなる値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する。
本発明の第３５の態様は、上記態様において、抽出されたビット列に対して、当該ビット列を得る際に抽出されなかった下位のビットを、当該下位のビットで表現可能な値の平均値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する。
本発明の第３６の態様は、上記態様において、推定された第１の画像の画像フレームを表現する所定のデータの値と、第２の画像において前記推定されたデータに相当するデータの値の差分に対して、ビット列を得る際に抽出されなかった下位のビットにより生じうる、推定結果とされるデータの値と実際のデータの値との誤差の平均値を減算した値から、前記第１の画像と前記第２の画像の差を推定する。
本発明の第３７の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、符号化画像を送信する画像送出装置が、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、前記画像送出装置が、抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信し、符号化画像を受信して復号することにより伝送画像を得る前記画像受信装置が、前記原画像の特徴量として受信した前記抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する。
本発明の第３８の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置が、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、前記画像受信装置が、抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信し、前記画像送出装置が、前記伝送画像の特徴量として受信した前記抽出されたビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する。
本発明の第３９の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、符号化画像を送信する画像送出装置が、伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、前記画像送出装置が、抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信し、符号化画像を受信して復号することにより伝送画像を得る前記画像受信装置が、前記復号画像の特徴量として受信した前記抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する。
本発明の第４０の態様は、上記態様において、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、符号化画像を送信する画像送出装置が、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、前記画像送出装置が、抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信し、符号化画像を受信して復号することにより伝送画像を得る前記画像受信装置が、前記局所復号画像の特徴量として受信した前記抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する。
本発明の第４１の態様は、上記態様において、抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定し、推定された第１の画像の画像フレームを表現する所定のデータの値と、第２の画像の画像フレームにおいて前記推定されたデータに相当するデータの値の差分から、前記第１の画像と前記第２の画像の差を推定する。
本発明の第４２の態様は、上記態様において、抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを予め定めておいた値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する。
本発明の第４３の態様は、上記態様において、抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを、第２の画像において当該ビット列の抽出対象になったデータに相当するデータの値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する。
本発明の第４４の態様は、上記態様において、抽出されたビット列で表現される値を、第１の画像の特徴量とし、可逆符号化して送信する。
本発明の第４５の態様は、上記態様において、可逆符号化の方法が、算術符号化である。
本発明の第４６の態様は、上記態様において、可逆符号化の方法が、二値画像符号化方法であるＪＢＩＧ符号化である。
本発明の第４７の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理を実行させるための画質評価用プログラムである。
本発明の第４５の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送画像の特徴量として受信した、前記伝送画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させるための画質評価用プログラムである。
本発明の第４９の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理を実行させるための画質評価用プログラムである。
本発明の第５０の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理を実行させるための画質評価用プログラムである。
本発明の第５１の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させるための画質評価用プログラムである。
本発明の第５２の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する処理を実行させるための画質評価用プログラムである。
本発明の第５３の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、伝送する前の符号化画像を復号することにより得られる復号画像の特徴量として受信した、前記復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させるための画質評価用プログラムである。
本発明の第５４の態様は、原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、コンピュータに、原画像を符号化する過程で得られる局所復号画像の特徴量として受信した、前記局所復号画像の画像フレームを表現する所定のデータに対して所定のビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理を実行させるための画質評価用プログラムである。
以上好ましい実施の形態、実施例及び態様をあげて本発明を説明したが、本発明は必ずしも上記実施の形態及び態様に限定されるものではなく、その技術的思想の範囲内において様々に変形し実施することが出来る。
本出願は、２００７年１２月１２日に出願された日本出願特願２００７−３２１０６５号、及び、２００８年４月３０日に出願された日本出願特願２００８−１１８３５０号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
本発明は、限られた情報量で２つの画像の差分を評価するような画質評価システムであれば、好適に適用可能である。

Claims (44)

  1. 画像の画質を評価する画質評価システムであって、
    第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値と、第２の画像において該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、前記第１の画像と前記第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価する画質評価手段とを備えた
    ことを特徴とする画質評価システム。
  2. 画像フレームを表現する所定のデータは、画像フレームを所定サイズのブロックに分割したブロックごとの画素情報の平均値である
    請求項１に記載の画質評価システム。
  3. 画像フレームを表現する所定のデータは、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の平均値と、各画素情報と前記平均値の差分絶対値の平均値である
    請求項１に記載の画質評価システム。
  4. 画像フレームを表現する所定のデータは、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の分散である
    請求項１に記載の画質評価システム。
  5. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、
    原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、
    画像送出装置は、
    原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを含み、
    画像受信装置は、
    前記原画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む
    請求項１に記載の画質評価システム。
  6. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、
    原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、
    画像受信装置は、
    伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する特徴量送信手段とを含み、
    画像送出装置は、
    前記伝送画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む
    請求項１に記載の画質評価システム。
  7. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、
    原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、
    画像送出装置は、
    符号化画像を伝送させずに復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを含み、
    画像受信装置は、
    前記復号画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む
    請求項１に記載の画質評価システム。
  8. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価する画質評価システムであって、
    原画像を符号化して前記符号化画像を送信する画像送出装置と、前記画像送出装置から前記符号化画像を受信して復号することにより伝送画像を得る画像受信装置とを備え、
    画像送出装置は、
    原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを含み、
    画像受信装置は、
    前記局所復号画像の特徴量として受信した前記ビット列抽出手段によって抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を含む
    請求項１に記載の画質評価システム。
  9. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、
    原画像を符号化して前記符号化画像を送信する画像送出装置において、
    原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えた
    ことを特徴とする画像送出装置。
  10. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、
    原画像を符号化して前記符号化画像を送信する画像送出装置において、
    伝送画像の特徴量として受信した、前記伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出することにより得られるビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えた
    ことを特徴とする画像送出装置。
  11. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、
    原画像を符号化して前記符号化画像を送信する画像送出装置において、
    伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えた
    ことを特徴とする画像送出装置。
  12. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像送出装置であって、
    原画像を符号化して前記符号化画像を送信する画像送出装置において、
    原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する特徴量送信手段とを備えた
    ことを特徴とする画像送出装置。
  13. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、
    符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、
    原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する画質評価手段を備えた
    ことを特徴とする画像受信装置。
  14. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画像受信装置であって、
    符号化画像を受信して復号することにより伝送画像を得る画像受信装置において、
    伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、
    該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出するビット抽出手段と、
    前記ビット抽出手段によって抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する特徴量送信手段とを備えた
    ことを特徴とする画像受信装置。
  15. 画像の画質を評価する画質評価方法であって、
    第１の画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出し、
    抽出されたビット列で表現される値と、第２の画像において該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、前記第１の画像と前記第２の画像の差を推定することにより、前記第１の画像または第２の画像の画質を評価する
    ことを特徴とする画質評価方法。
  16. 画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の平均値を用いる
    請求項１５に記載の画質評価方法。
  17. 画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の平均値と、各画素情報と前記平均値の差分絶対値の平均値を用いる
    請求項１５に記載の画質評価方法。
  18. 画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、画素情報の分散を用いる
    請求項１５に記載の画質評価方法。
  19. 画像フレームを表現する所定のデータとして、画素情報を直交変換して得られる周波数成分の集合における所定位置の周波数成分の情報を用いる
    請求項１５に記載の画質評価方法。
  20. 画像フレームを表現する所定のデータとして、画像フレームを所定サイズのブロックに分割したブロックごとの、ブロック内画素の画素情報を直交変換して得られる周波数成分の集合における所定位置の周波数成分の情報を用いる
    請求項１５に記載の画質評価方法。
  21. 画像フレームを表現する所定のデータとして、所定の画素位置の画素情報を用いる
    請求項１５に記載の画質評価方法。
  22. 画像フレームを表現する所定のデータとして、フレーム内の画素を一定の間隔で間引き、残った画素の画素情報を用いる
    請求項２１に記載の画質評価方法。
  23. 画像フレームを表現する所定のデータとして、フレーム内の画素をフレーム内の場所によって決定される間隔で間引き、残った画素の画素情報を用いる
    請求項２１に記載の画質評価方法。
  24. 間引きの間隔を変えることにより、送信する特徴量のデータ量を制御する
    請求項２２または請求項２３に記載の画質評価方法。
  25. 画素情報が、該当する画素の輝度の情報、色差の情報、またはＲＧＢ値のいずれかもしくはそれらを組み合わせた情報である
    請求項１６から請求項２３のうちのいずれか１項に記載の画質評価方法。
  26. 抽出されたビット列に対して、当該ビット列を得る際に抽出されなかった上位のビットを、第２の画像において当該ビット列の抽出対象になったデータに相当するデータの値との差が最も小さくなる値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する
    請求項１５に記載の画質評価方法。
  27. 抽出されたビット列に対して、当該ビット列を得る際に抽出されなかった下位のビットを、当該下位のビットで表現可能な値の平均値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する
    請求項１５に記載の画質評価方法。
  28. 推定された第１の画像の画像フレームを表現する所定のデータの値と、第２の画像において前記推定されたデータに相当するデータの値の差分に対して、ビット列を得る際に抽出されなかった下位のビットにより生じうる、推定結果とされるデータの値と実際のデータの値との誤差の平均値を減算した値から、前記第１の画像と前記第２の画像の差を推定する
    請求項１５に記載の画質評価方法。
  29. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、
    符号化画像を送信する画像送出装置が、原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、
    前記画像送出装置が、抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信し、
    符号化画像を受信して復号することにより伝送画像を得る前記画像受信装置が、前記原画像の特徴量として受信した前記抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する
    請求項１５に記載の画質評価方法。
  30. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、
    符号化画像を受信して復号することにより伝送画像を得る画像受信装置が、伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、
    前記画像受信装置が、抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信し、
    前記画像送出装置が、前記伝送画像の特徴量として受信した前記抽出されたビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する
    請求項１５に記載の画質評価方法。
  31. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、
    符号化画像を送信する画像送出装置が、伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、
    前記画像送出装置が、抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信し、
    符号化画像を受信して復号することにより伝送画像を得る前記画像受信装置が、前記復号画像の特徴量として受信した前記抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する
    請求項１５に記載の画質評価方法。
  32. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価方法であって、
    符号化画像を送信する画像送出装置が、原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出し、
    前記画像送出装置が、抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信し、
    符号化画像を受信して復号することにより伝送画像を得る前記画像受信装置が、前記局所復号画像の特徴量として受信した前記抽出されたビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象になったデータに相当するデータの値とに基づいて、局所復号画像と伝送画像の差を推定することにより、伝送画像の画質を評価する
    請求項１５に記載の画質評価方法。
  33. 抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定し、
    推定された第１の画像の画像フレームを表現する所定のデータの値と、第２の画像の画像フレームにおいて前記推定されたデータに相当するデータの値の差分から、前記第１の画像と前記第２の画像の差を推定する
    請求項１５、請求項２９から請求項３２のうちのいずれか１項に記載の画質評価方法。
  34. 抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを予め定めておいた値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する
    請求項３３に記載の画質評価方法。
  35. 抽出されたビット列に対して、当該ビット列を得る際に抽出されなかったビットを、第２の画像において当該ビット列の抽出対象になったデータに相当するデータの値で補完することにより、当該ビット列の抽出対象になった第１の画像の画像フレームを表現する所定のデータの値を推定する
    請求項３３に記載の画質評価方法。
  36. 抽出されたビット列で表現される値を、第１の画像の特徴量とし、可逆符号化して送信する
    請求項２９から請求項３２のうちのいずれか１項に記載の画質評価方法。
  37. 可逆符号化の方法が、算術符号化である
    請求項３６に記載の画質評価方法。
  38. 可逆符号化の方法が、二値画像符号化方法であるＪＢＩＧ符号化である
    請求項３６に記載の画質評価方法。
  39. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、
    コンピュータに、
    原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出する処理、および
    抽出されたビット列で表現される値を、前記原画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理
    を実行させるための画質評価用プログラム。
  40. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、
    コンピュータに、
    伝送画像の特徴量として受信した、前記伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出することにより得られるビット列で表現される値と、原画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理
    を実行させるための画質評価用プログラム。
  41. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、
    コンピュータに、
    伝送する前の符号化画像を復号して得られる復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および
    抽出されたビット列で表現される値を、前記復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理
    を実行させるための画質評価用プログラム。
  42. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、原画像を符号化して前記符号化画像を送信する画像送出装置に適用される画質評価用プログラムにおいて、
    コンピュータに、
    原画像を符号化する過程で得られる局所復号画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の所定のビットを抽出する処理、および
    抽出されたビット列で表現される値を、前記局所復号画像の特徴量として、前記符号化画像の送信先である画像受信装置に送信する処理
    を実行させるための画質評価用プログラム。
  43. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、
    コンピュータに、
    原画像の特徴量として受信した、前記原画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出することにより得られるビット列で表現される値と、伝送画像の画像フレームにおいて該ビット列の抽出対象となったデータに相当するデータの値とに基づいて、原画像と伝送画像の差を推定することにより、伝送画像の画質を評価する処理
    を実行させるための画質評価用プログラム。
  44. 原画像を符号化した符号化画像を伝送した先で復号して得られる伝送画像の画質を評価するための画質評価用プログラムであって、符号化画像を受信して復号することにより伝送画像を得る画像受信装置に適用される画質評価用プログラムにおいて、
    コンピュータに、
    伝送画像の画像フレームを表現する所定のデータに対して、１データにつき該データを表現するために必要なビット数よりも少ないビット数の連続する所定のビットであって、
    該データの上位所定数のビットと下位所定数のビットとを除いたビットを抽出する処理、
    および
    抽出されたビット列で表現される値を、前記伝送画像の特徴量として、前記符号化画像の送信元である画像送出装置に送信する処理
    を実行させるための画質評価用プログラム。
JP2009545400A 2007-12-12 2008-12-08 画質評価システム、それに用いる装置、方法およびプログラム Expired - Fee Related JP5218784B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009545400A JP5218784B2 (ja) 2007-12-12 2008-12-08 画質評価システム、それに用いる装置、方法およびプログラム

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2007321065 2007-12-12
JP2007321065 2007-12-12
JP2008118350 2008-04-30
JP2008118350 2008-04-30
JP2009545400A JP5218784B2 (ja) 2007-12-12 2008-12-08 画質評価システム、それに用いる装置、方法およびプログラム
PCT/JP2008/072241 WO2009075245A1 (ja) 2007-12-12 2008-12-08 画質評価システム、それに用いる装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2009075245A1 JPWO2009075245A1 (ja) 2011-04-28
JP5218784B2 true JP5218784B2 (ja) 2013-06-26

Family

ID=40755486

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009545400A Expired - Fee Related JP5218784B2 (ja) 2007-12-12 2008-12-08 画質評価システム、それに用いる装置、方法およびプログラム

Country Status (3)

Country Link
US (1) US8786711B2 (ja)
JP (1) JP5218784B2 (ja)
WO (1) WO2009075245A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011019127A (ja) * 2009-07-09 2011-01-27 Nec Corp 画質評価装置、画質評価方法及びそのプログラム
US20120195364A1 (en) * 2011-01-31 2012-08-02 Apple Inc. Dynamic mode search order control for a video encoder
JP5800553B2 (ja) * 2011-04-07 2015-10-28 キヤノン株式会社 分配装置、映像分配方法、及びプログラム
CN102209257B (zh) * 2011-06-17 2013-11-20 宁波大学 一种立体图像质量客观评价方法
CN102333233B (zh) * 2011-09-23 2013-11-06 宁波大学 一种基于视觉感知的立体图像质量客观评价方法
JP6360281B2 (ja) * 2013-01-07 2018-07-18 日本放送協会 同期情報生成装置およびそのプログラム、同期データ再生装置およびそのプログラム
JP5998982B2 (ja) * 2013-02-25 2016-09-28 株式会社Ｊｖｃケンウッド 映像信号処理装置及び方法
US20170249521A1 (en) * 2014-05-15 2017-08-31 Arris Enterprises, Inc. Automatic video comparison of the output of a video decoder
US11064204B2 (en) * 2014-05-15 2021-07-13 Arris Enterprises Llc Automatic video comparison of the output of a video decoder
JP2019162371A (ja) * 2018-03-20 2019-09-26 ソニー・オリンパスメディカルソリューションズ株式会社 医療用撮像装置及び内視鏡装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003134535A (ja) * 2001-10-30 2003-05-09 Nec Eng Ltd 画質劣化検知システム
JP2003319420A (ja) * 2002-04-19 2003-11-07 Nippon Telegr & Teleph Corp <Ntt> 映像コンテンツ配信方法、装置、および映像コンテンツ配信プログラム
JP2005064679A (ja) * 2003-08-08 2005-03-10 Kddi Corp 画像特徴量抽出方式および画質評価方式
JP2005252453A (ja) * 2004-03-02 2005-09-15 Kddi Corp 伝送画質監視装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3857534B2 (ja) * 2001-03-21 2006-12-13 株式会社リコー 画像圧縮処理装置
JP3835683B2 (ja) 2001-04-16 2006-10-18 Ｋｄｄｉ株式会社 伝送画質監視装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003134535A (ja) * 2001-10-30 2003-05-09 Nec Eng Ltd 画質劣化検知システム
JP2003319420A (ja) * 2002-04-19 2003-11-07 Nippon Telegr & Teleph Corp <Ntt> 映像コンテンツ配信方法、装置、および映像コンテンツ配信プログラム
JP2005064679A (ja) * 2003-08-08 2005-03-10 Kddi Corp 画像特徴量抽出方式および画質評価方式
JP2005252453A (ja) * 2004-03-02 2005-09-15 Kddi Corp 伝送画質監視装置

Also Published As

Publication number Publication date
WO2009075245A1 (ja) 2009-06-18
US20100259625A1 (en) 2010-10-14
JPWO2009075245A1 (ja) 2011-04-28
US8786711B2 (en) 2014-07-22

Similar Documents

Publication Publication Date Title
JP5218784B2 (ja) 画質評価システム、それに用いる装置、方法およびプログラム
US9781449B2 (en) Rate distortion optimization in image and video encoding
JPWO2012042646A1 (ja) 動画像符号化装置、動画像符号化方法、動画像符号化用コンピュータプログラム、動画像復号装置及び動画像復号方法ならびに動画像復号用コンピュータプログラム
WO2008047865A1 (fr) Procédé, système et programme d&#39;évaluation de qualité d&#39;image
JP2011124846A (ja) 画像符号化装置
JP2011077699A (ja) 動画像符号化装置及びプログラム、並びに、動画像配信システム
JP6457248B2 (ja) 画像復号装置、画像符号化装置および画像復号方法
JP3955909B2 (ja) 画像信号処理装置及びその方法
JP2007116731A (ja) 画像信号処理方法
CN109413445B (zh) 一种视频传输方法及装置
JP2005333610A (ja) 符号化回路
JP2765268B2 (ja) 高能率符号化方法と高能率符号の復号方法
KR101642965B1 (ko) 비트 심도 감소를 이용한 깊이 영상 처리 장치 및 방법
JP2014143655A (ja) 画像符号化装置及び画像復号化装置並びにプログラム
KR100906473B1 (ko) 개선된 움직임 벡터 부호화 및 복호화 방법과 그 장치
Nebot et al. Generalized PCM coding of images
JP6069929B2 (ja) 画像選択方法、画像選択装置、符号化装置、画像選択システム、画像選択プログラム、符号化プログラム、及び画像符号化選択プログラム
JP4241517B2 (ja) 画像符号化装置及び画像復号装置
US10003826B2 (en) Method of reducing noise of video signal
JP6635312B2 (ja) 画像処理装置および方法
JP6055268B2 (ja) 色変換装置、色復元装置およびそれらのプログラム
JP4133788B2 (ja) 符号化誤差推定方法および符号化誤差推定装置
Ulacha et al. Predictor blending technique for lossless and near-lossless image coding
JP3948442B2 (ja) 動き補償復号化装置
EP2958329B1 (en) Method for encoding and decoding an image block based on dynamic range extension, encoder and decoder

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110901

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120803

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130219

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160315

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5218784

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees