JP2019092183A - Image output device and output method - Google Patents
Image output device and output method Download PDFInfo
- Publication number
- JP2019092183A JP2019092183A JP2019009326A JP2019009326A JP2019092183A JP 2019092183 A JP2019092183 A JP 2019092183A JP 2019009326 A JP2019009326 A JP 2019009326A JP 2019009326 A JP2019009326 A JP 2019009326A JP 2019092183 A JP2019092183 A JP 2019092183A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- unit
- compression
- code information
- compressed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 87
- 238000007906 compression Methods 0.000 claims abstract description 629
- 230000006835 compression Effects 0.000 claims abstract description 588
- 238000012545 processing Methods 0.000 claims abstract description 140
- 230000005540 biological transmission Effects 0.000 abstract description 223
- 238000012546 transfer Methods 0.000 abstract description 32
- 238000012937 correction Methods 0.000 description 56
- 230000006837 decompression Effects 0.000 description 46
- 238000010586 diagram Methods 0.000 description 26
- 230000001965 increasing effect Effects 0.000 description 24
- 238000006243 chemical reaction Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 8
- 238000000605 extraction Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 5
- 238000004904 shortening Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000013144 data compression Methods 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 125000004122 cyclic group Chemical group 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000013139 quantization Methods 0.000 description 3
- 101100328957 Caenorhabditis elegans clk-1 gene Proteins 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- BSYNRYMUTXBXSQ-UHFFFAOYSA-N Aspirin Chemical compound CC(=O)OC1=CC=CC=C1C(O)=O BSYNRYMUTXBXSQ-UHFFFAOYSA-N 0.000 description 1
- -1 CLK_3 / 4 Proteins 0.000 description 1
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Abstract
Description
技術分野は、映像情報の送受信に関する。 The technical field relates to transmission and reception of video information.
近年、デジタル画像処理で扱う画素数は、一般ユーザ向けディスプレイの４ｋ2ｋ（３
８４０×２１６０画素）化、放送のＨＤ（High Definition：１９２０×１０８０画素）
化、デジタルビデオカメラのイメージセンサやディスプレイの高画素化に伴い、年々増加
している。
In recent years, the number of pixels handled in digital image processing is 4k2k (three
840 × 2160 pixels), broadcast HD (High Definition: 1920 × 1080 pixels)
Has been increasing year by year with the increasing number of pixels of image sensors and displays of digital video cameras.
これらの画像データを機器間で伝送する方式について、ＨＤＭＩ(High-Definition Mul
timedia Interface（HDMI Licensing, LLCの登録商標）)規格やＶＥＳＡ(Video Electron
ics Standards Association)により策定されたDisplayPort（VESAの登録商標または商標
）規格などがある。
Regarding the method of transmitting these image data between devices, HDMI (High-Definition Mul)
timedia Interface (registered trademark of HDMI Licensing, LLC) standard or VESA (Video Electron)
These include DisplayPort (registered trademark or trademark of VESA) standard developed by ics Standards Association.
前記のＨＤＭＩのデータ伝送方式において、特許文献１には、「非圧縮映像信号または
この非圧縮映像信号に対して受信装置が対応可能な圧縮方式で圧縮処理を施して得られた
圧縮映像信号を選択的に送信するものであり、伝送路の伝送ビットレート内で、所望のビ
ットレートの映像信号を良好に送信できる」（特許文献１［００４８］参照）こと、また
圧縮方式について、「データ圧縮部１２１-1〜１２１-nは、それぞれ、コーデック１１７
から出力された非圧縮の映像信号を所定の圧縮比をもって圧縮処理し、圧縮された映像信
号を出力する。データ圧縮部１２１-1〜１２１-nは、映像信号圧縮部を構成している。デ
ータ圧縮部１２１-1〜１２１-nは、それぞれ、互いに異なる圧縮方式でデータ圧縮処理を
行う。例えば、圧縮方式としては、「ＲＬＥ（Run Length Encoding）」、「Ｗａｖｅｌ
ｅｔ」、「ＳＢＭ（Super Bit Mapping（ソニーの登録商標））」、「ＬＬＶＣ（Low Lat
ency Video Codec）」、「ＺＩＰ」等が考えられる」（特許文献１［００７７］参照）こ
とが記載されている。
In the above-mentioned HDMI data transmission method,
And compresses the non-compressed video signal output from the video signal with a predetermined compression ratio, and outputs the compressed video signal. The data compression units 121-1 to 121-n constitute a video signal compression unit. The data compression units 121-1 to 121-n respectively perform data compression processing using different compression methods. For example, as a compression method, “RLE (Run Length Encoding)”, “Wavel
et "," SBM (Super Bit Mapping (Sony registered trademark)) "," LLVC (Low Lat)
It is described that "ency Video Codec)", "ZIP", etc. can be considered "(see Patent Document 1 [0077]).
また、ＨＤＭＩにおいて、画像データは、ＴＭＤＳ（Transition Minimized Different
ial Signaling（Silicon Image, Inc.の登録商標）)方式のデータ伝送フォーマットが採
用されており、その一例として特許文献２が示されている。
Also, in HDMI, image data is TMDS (Transition Minimized Different)
A data transmission format of the ial Signaling (registered trademark of Silicon Image, Inc.) system is adopted, and
しかし、いずれの先行技術文献にも、より大きなサイズの画像（「映像」とも言う。以
下同じ。）データをより忠実に保ちながら伝送することについては考慮が無い。
However, in any prior art documents, there is no consideration about transmission while keeping image (also referred to as “video”) data of a larger size more faithfully.
上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。 In order to solve the above problems, for example, the configuration described in the claims is adopted.
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、画像デ
ータを伝送する画像伝送装置であって、画像データを圧縮する圧縮処理部と、圧縮処理部
で圧縮した圧縮画像データを出力する出力部とを有し、出力部は、圧縮画像データを第一
の期間と当該第一の期間とは異なる第二の期間とに分けて出力することを特徴とする。
The present application includes a plurality of means for solving the above problems, and an example thereof is an image transmission apparatus for transmitting image data, which is compressed by a compression processing unit for compressing image data, and a compression processing unit. And an output unit that outputs the compressed image data, and the output unit divides and outputs the compressed image data into a first period and a second period different from the first period.
また、他の一例を挙げるならば、画像データを伝送する画像伝送装置であって、複数の
成分からなる画像データを圧縮処理する圧縮処理部と、圧縮画像データを出力するデータ
転送部と、を備え、データ転送部は、画像データの各成分に基づいて、画像データの出力
方法を変更する。
Another example is an image transmission apparatus for transmitting image data, which comprises: a compression processing unit for compressing image data composed of a plurality of components; and a data transfer unit for outputting compressed image data. The data transfer unit changes the output method of the image data based on each component of the image data.
また、他の一例を挙げるならば、画像データを伝送する画像伝送装置であって、画像デ
ータを圧縮処理して、圧縮画像データと、圧縮処理に関する圧縮符号情報とを生成する圧
縮処理部と、圧縮画像データと圧縮符号情報とを出力するデータ転送部と、を備え、圧縮
符号情報の冗長性が圧縮画像データよりも高いことを特徴とする。
Another example is an image transmission apparatus for transmitting image data, which compresses the image data to generate compressed image data and compression code information related to the compression process, and And a data transfer unit for outputting compressed image data and compressed code information, wherein the redundancy of the compressed code information is higher than that of compressed image data.
また、他の一例を挙げるならば、画像データを伝送する画像伝送装置であって、画像デ
ータを圧縮する圧縮処理部と、圧縮処理部で圧縮した圧縮画像データを出力する出力部と
を有し、出力部は、圧縮画像データを第一の期間と当該第一の期間とは異なる第二の期間
とに分けて出力し、圧縮処理部は、伝送路の伝送エラー率に基づいて、画像データの圧縮
処理を変更することを特徴とする。
Another example is an image transmission apparatus for transmitting image data, comprising a compression processing unit for compressing image data, and an output unit for outputting compressed image data compressed by the compression processing unit. The output unit divides the compressed image data into a first period and a second period different from the first period, and the compression processing unit outputs the image data based on the transmission error rate of the transmission path. Changing the compression process of
上記手段によれば、より大きなサイズの画像データを、より忠実に保ちながら伝送する
ことが可能となる。
According to the above-described means, it is possible to transmit image data of a larger size while maintaining more faithfulness.
従来、遅延時間を最小にする画像データ伝送方式として非圧縮画像データ伝送方式があ
るが、大きなサイズの画像データを送るには高速な伝送路を必要とする課題があった。そ
の解決の為に、画像データを圧縮して伝送する方式が提案されているが、伝送路上でエラ
ーが発生すると、複数画素で構成される圧縮ブロック単位で、表示画像が乱れてしまう課
題があった。また、高いエラー耐性が確保されているブランキング期間で伝送できるデー
タ量は、有効画素期間で伝送できるデータ量よりも少ないという課題があった。
Conventionally, there is an uncompressed image data transmission method as an image data transmission method for minimizing delay time, but there is a problem that a high-speed transmission path is required to send large-size image data. Although a method for compressing and transmitting image data has been proposed to solve this problem, when an error occurs on the transmission path, there is a problem that the display image is disturbed in units of compressed blocks composed of a plurality of pixels. The Also, there is a problem that the amount of data that can be transmitted in the blanking period in which high error resistance is secured is smaller than the amount of data that can be transmitted in the effective pixel period.
本実施例では、画像データを圧縮して伝送する伝送方式において、圧縮ブロック単位毎
に圧縮して、圧縮符号情報を生成し、圧縮符号情報の内、重要性の高い圧縮符号情報（以
下、主圧縮符号情報と呼ぶ）をエラー耐性の高いブランキング期間で伝送することで、こ
の課題解決を図った。なお、その他の圧縮符号情報（以下、副圧縮符号情報と呼ぶ）は、
圧縮画像データと同様、有効期間で伝送する。以下、この実施例を、図面を用いて説明す
る。
In this embodiment, in a transmission method for compressing image data and transmitting it, compression code information is generated by compressing each compression block unit, and compression code information having high importance among compression code information This problem was solved by transmitting compressed code information) in a blanking period with high error resistance. Other compression code information (hereinafter referred to as sub compression code information) is
Similar to compressed image data, it is transmitted in the effective period. Hereinafter, this embodiment will be described using the drawings.
以下、本実施例による画像伝送装置および画像受信装置の実施形態について説明する。 Hereinafter, embodiments of the image transmission apparatus and the image receiving apparatus according to the present embodiment will be described.
図１は、本実施例の画像伝送システムを示すブロック図であり、画像送信装置１００と
画像受信装置２００をケーブル３００で接続した構成である。
FIG. 1 is a block diagram showing an image transmission system according to the present embodiment, in which an
画像送信装置１００は、画像データを伝送する画像送信装置であり、デジタル放送を受
信し視聴できるようにデコードした画像データや、記録媒体に記録された画像データ、カ
メラなどで撮影した画像データをＨＤＭＩケーブルなどにより、他の機器に出力する機器
である。画像送信装置１００の一例として、レコーダ、レコーダ機能を内蔵したデジタル
ＴＶ、レコーダ機能を内蔵したパソコン、カメラ機能やレコーダ機能を搭載した携帯電話
、カムコーダなどがある。
The
画像受信装置２００は、ＨＤＭＩケーブル等を使用して、画像データを入力しモニタに
画像を出力する表示機器である。画像受信装置２００の一例として、デジタルＴＶや、デ
ィスプレイ、プロジェクタ、携帯電話、サイネージ機器などがある。
The
ケーブル３００は、画像送信装置１００と画像受信装置２００の機器間で画像データ等
のデータ通信を行うデータ伝送路である。ケーブル３００の一例として、ＨＤＭＩ規格や
、DisplayPort規格に対応した有線ケーブルもしくは、無線方式のデータ通信を行うデー
タ伝送路などがある。
The
まず、画像送信装置１００の構成について説明する。
入力部１０１、１０２、１０３は、画像データを画像送信装置１００に入力するための
入力部である。入力部１０１に入力され、チューナ受信処理部１０５で処理される画像デ
ータの一例としては、放送局または放送用衛星などの中継局からの電波として入力される
デジタル放送がある。入力部１０１には、この放送局または放送用衛星などの中継局から
の電波が入力される。
First, the configuration of the
The
入力部１０２に入力され、ネットワーク受信処理部１０６で処理される画像データの一
例としては、インターネットのブロードバンド接続を利用して、ネットワーク経由で配信
されてくるデジタル放送や、情報コンテンツなどがある。
Examples of the image data input to the
入力部１０３に入力され、記録メディア制御部１０７で処理される画像データの一例と
しては、入力部１０３に接続された外部の記録メディアに記録されているコンテンツがあ
る。また、記録メディア制御部１０７で処理される映像データの一例としては、画像送信
装置１００内に内蔵された記録メディア１０８に記録されているコンテンツもある。入力
部１０３に接続された外部の記録メディア、もしくは画像送信装置１００内に内蔵された
記録メディア１０８の一例としては、光ディスク、磁気ディスク、半導体メモリなどがあ
る。
As an example of image data input to the
チューナ受信処理部１０５は、入力された電波をビットストリームに変換する受信処理
部であり、ここでＲＦ帯域（Radio Frequency）の電波はＩＦ帯域 (Intermediate Freque
ncy) に周波数変換され、受信チャネルに依存しない一定の帯域の信号として、復調され
たビットストリームに伝送のために施された変調操作を復調する。
The tuner
and demodulates the modulation operation applied for transmission to the demodulated bit stream as a constant-band signal which is frequency-converted to ncy) and is independent of the receive channel.
ビットストリームの一例としては、ＭＰＥＧ２トランスポートストリーム(以降ＭＰＥ
Ｇ２−ＴＳとする)や、ＭＰＥＧ２−ＴＳに準じたフォーマットのビットストリーム等が
ある。以降のビットストリームは、ＭＰＥＧ２−ＴＳを代表として説明を行う。
An example of a bitstream is an MPEG2 transport stream (hereinafter MPE)
G2-TS), a bit stream in a format according to MPEG2-TS, and the like. The subsequent bit streams will be described using MPEG2-TS as a representative.
前記チューナ受信処理部１０５は、さらに伝送途中で発生した符合の誤りを検出し訂正
し、誤り訂正されたＭＰＥＧ２−ＴＳにつきスクランブルの解除を行った後、視聴もしく
は記録を行うプログラムが多重化されている１トランスポンダ周波数を選択し、この選択
した１トランスポンダ内のビットストリームを１プログラムのオーディオとビデオのパケ
ットに分離化する。
The tuner
前記チューナ受信処理部１０５からのＭＰＥＧ２−ＴＳは、データバス１８１を介して
ストリーム制御部１１１に供給される。ストリーム制御部１１１は、前記チューナ受信処
理部１０５においてパケットを受信した時の間隔を保時する為に、受信したパケット内か
ら時刻管理情報であるＰＴＳ（Presentation Time Stamp）と、ＭＰＥＧシステムの基準
復号器内部のＳＴＣ（System Time Clock）を検出し、検出結果により補正したタイミン
グでタイムスタンプを付加する。
The MPEG2-TS from the tuner
前記タイムスタンプを付加したパケットをデコーダ部１１２もしくは、記録メディア制
御部１０７のどちらか一方、または双方に供給する。デコーダ部１１２へのデータパス１
９４は画像データを視聴する時の処理に用いられ、記録メディア制御部１０７へのデータ
パス１９３は、画像データを記録メディアに記録する時に用いられる。
The packet to which the time stamp is added is supplied to one or both of the
Reference numeral 94 is used for processing when viewing image data, and the data path 193 to the recording
前記ストリーム制御部１１１のデータバス１９２は、入力部１０２からネットワーク受
信処理部１０６経由で入力されるＭＰＥＧ２−ＴＳが入力される。前記データパス１９２
は、ネットワーク経由で配信されてくるデジタル放送もしくはデジタルコンテンツを取得
する入力部である。
The
Is an input unit for acquiring digital broadcast or digital content distributed via a network.
さらに入力部１０３に接続された外部の記録メディア、もしくは画像送信装置１００内
に内蔵された記録メディア１０８に記録されているデジタル放送もしくはデジタルコンテ
ンツは、記録メディア制御部１０７によりＭＰＥＧ２−ＴＳとして読み出され、データバ
ス１９３を介して前記ストリーム制御部１１１へ入力される。前記ストリーム制御部１１
１は、これらの入力のうち少なくとも1つ以上を選択し、デコーダ部１１２に出力する。
Furthermore, the digital broadcast or digital content recorded on the external recording medium connected to the
1 selects at least one or more of these inputs and outputs the same to the
デコーダ部１１２は、前記ストリーム制御部１１１から入力されたＭＰＥＧ２−ＴＳを
デコードし、生成した画像データを表示処理部１１３に出力する。表示処理部１１３は、
入力された画像データに対して、例えばＯＳＤ（On Screen Display）の重畳処理や、回
転、拡大もしくは縮小処理、フレームレート変換処理を施した後、圧縮処理部１１４に出
力する。
The
The input image data is subjected to, for example, OSD (On Screen Display) superimposition processing, rotation, enlargement or reduction processing, and frame rate conversion processing, and then output to the
圧縮処理部１１４は、表示処理部１１３からの画像データに圧縮処理を施し、データ転
送部１１５に出力する。
The
データ転送部１１５は、圧縮処理部１１４で圧縮された画像データ（以後、圧縮画像デ
ータと呼ぶ）を伝送に適した形式の信号に変換して出力部１１６から出力を行う。画像デ
ータの伝送に関して、ケーブル伝送に適した形式の信号の一例がＨＤＭＩ規格に記載され
ている。ＨＤＭＩにおいて、画像データは、ＴＭＤＳ方式のデータ伝送フォーマットが採
用されている。
The
入力部１０４は、画像送信装置１００の動作を制御するための信号を入力するための入
力部である。入力部１０４の一例として、リモコンから送信される信号の受信部や、装置
本体に備え付けられたボタンなどがある。入力部１０４からの制御信号は、ユーザＩＦ１
０９に供給される。前記ユーザＩＦ１０９は、入力部１０４からの信号を制御部１１０に
出力する。制御部１１０は、入力部１０４の信号に従い、画像送信装置１００全体を制御
する。制御部１１０の一例としては、マイクロプロセッサなどがある。画像送信装置１０
０からの画像データは、ケーブル３００を介して画像受信装置２００に供給する。
The input unit 104 is an input unit for inputting a signal for controlling the operation of the
Supplied on 09. The user IF 109 outputs a signal from the input unit 104 to the
Image data from 0 is supplied to the
次に画像受信装置２００の構成について説明する。
入力部２０１は、ケーブル伝送に適した形式の信号が入力される。前記入力部２０１に
入力された信号は、データ受信処理部２０５に供給される。
Next, the configuration of the
The
データ受信処理部２０５は、ケーブル伝送に適した形式の信号から所定のデジタルデー
タに変換する処理を施し、伸張処理部２０６に変換したデジタルデータを出力する。
The data
伸張処理部２０６は、前記画像送信装置１００内の圧縮処理部１１４で施した圧縮処理
を伸張し、画像データを生成し、表示処理部２０７に出力する。
The
表示処理部２０７は、入力された画像データに対して表示処理を施す。表示処理の一例
としては、ＯＳＤ重畳処理、表示部２０８の解像度に変換するための拡大もしくは縮小処
理、回転処理、フレームレート変換処理などがある。表示処理部２０７の出力は表示部２
０８に出力する。
The
Output to 08.
表示部２０８は、入力された画像データを表示方式にあわせた信号に変換し画面に表示
する。表示部２０８の一例として、液晶ディスプレイや、プラズマディスプレイや、有機
ＥＬ（Electro-Luminescence）ディスプレイ、プロジェクタ投影ディスプレイなどの表示
部がある。
The
入力部２０２は、画像受信装置２００の動作を制御するための信号を入力するための入
力部である。入力部２０２の一例として、リモコンから送信される信号の受信部や、装置
本体に備え付けられたボタンなどがある。入力部２０２からの制御信号は、ユーザＩＦ２
０３に供給される。前記ユーザＩＦ２０３は、入力部２０２からの信号を制御部２０４に
出力する。制御部２０４は、入力部２０２の信号に従い、画像受信装置２００全体を制御
する制御部である。
The
Supplied on 03. The user IF 203 outputs a signal from the
図２は、1フレーム期間の画像データが伝送される有効領域と画像データが伝送されな
いブランキング期間を示す図である。
FIG. 2 is a diagram showing an effective area in which image data of one frame period is transmitted and a blanking period in which image data is not transmitted.
４００で示す領域が垂直期間を示し、垂直期間４００は、垂直ブランキング期間４０１
と垂直有効期間４０２から構成される。ＶＳＹＮＣ信号は、垂直ブランキング期間４０１
の先頭から規定されたライン数の間を１とし、その他の垂直ブランキング期間と垂直有効
期間４０２の間は０とした１ｂｉｔの信号である。規定されたライン数の一例としては、
４ラインなどがある。
An area indicated by 400 indicates a vertical period, and the
And a vertical
A signal of 1 bit is defined as 1 between the number of lines defined from the top of the and the other vertical blanking period and the vertical
There are 4 lines and so on.
４０３で示す領域が水平期間を示し、水平期間４０３は、水平ブランキング期間４０４
と水平有効期間４０５から構成される。ＨＳＹＮＣ信号は、水平ブランキング期間４０４
の先頭から規定された画素数の間を１とし、その他の水平ブランキング期間と水平有効期
間４０５の間は０とした１ｂｉｔの信号である。規定された画素数の一例としては、４０
画素がある。
An area indicated by 403 indicates a horizontal period, and the
And a horizontal
A signal of 1 bit is defined as 1 between the number of pixels specified from the top of the frame and 1 between other horizontal blanking periods and the horizontal
There is a pixel.
有効期間４０６は、垂直有効期間４０２と水平有効期間４０５の期間に囲まれた領域を
示し、この期間に画像データが割り当てられる。また、ブランキング期間４０７は、垂直
ブランキング期間４０１と水平ブランキング期間４０４の期間に囲まれた領域である。
The
本実施例においては、上記構成において、有効期間４０６に圧縮画像データと副圧縮符
号情報を送信し、ブランキング期間４０７に主圧縮符号情報を送信する。
In this embodiment, in the above configuration, the compressed image data and the sub compression code information are transmitted in the
ブランキング期間４０７は、音声データやその他の付属データをパケット化したデータ
を伝送している。
The
この音声データ等のパケットをブランキング期間４０７で信頼性のあるパケットを送る
方法は、例えば特表２００５−５１４８７３号公報に開示されている。
A method of sending a packet with reliability such as voice data in the
この構成で、ブランキング期間のパケットのデータに対しては誤り訂正符号が入ってい
るため、伝送路で発生したエラーに対して補正ができエラー耐性が強くなる。また、ブラ
ンキング期間のパケットのデータ伝送用のデータは、物理的に異なる２つのチャンネルに
伝送する構成とし、一定時間ごとに伝送するチャンネルを切り替えているため、片側のチ
ャンネルでバースト的に発生したエラーに対して、他方のチャンネルが影響されないため
、データエラーの補正を行うことができる。エラーの訂正率は、水平有効期間が１０−９
に対して、水平ブランキング期間は１０−１４の改善効果がある。
In this configuration, since an error correction code is contained in packet data in the blanking period, errors occurring in the transmission path can be corrected, and error resistance is enhanced. In addition, data for packet data transmission during the blanking period is configured to be transmitted to two physically different channels, and since the channels to be transmitted are switched at fixed time intervals, burst occurred in one channel. Since the other channel is not affected by the error, it is possible to correct the data error. The error correction rate has a horizontal validity period of 10 -9.
On the other hand, the horizontal blanking period has an improvement effect of 10.sup.-14 .
この例では、有効期間４０６では１クロック当り２４ｂｉｔの画像データを伝送し、ブ
ランキング期間４０７では３ｂｙｔｅのヘッダと２８ｂｙｔｅのデータで構成される１パ
ケットを３２クロック期間で伝送している。
In this example, 24 bits of image data are transmitted per clock in the
例えば、水平３８４０有効画素、垂直２１６０有効ライン、ＹＣｂＣｒ輝度色差信号の
各１２ｂｉｔを４４４フォーマット、フレーム周波数６０Ｈｚで伝送する場合、８９１Ｍ
Ｈｚと非常に高いクロック周波数が必要となる。高クロック周波数は送受信部のコストが
かかるだけでなく、画像を安定に送ることができるケーブル長も短くなり使い勝手が悪く
なる。
For example, when transmitting each 12 bits of horizontal 3840 effective pixels, vertical 2160 effective lines, and YCbCr luminance color difference signals at 444 format and frame frequency of 60 Hz, 891 M
It requires a very high clock frequency of Hz. The high clock frequency not only increases the cost of the transmission / reception unit, but also shortens the cable length capable of stably transmitting an image, resulting in poor usability.
本実施例によれば、２／３の圧縮で５９４ＭＨｚ、１／３の圧縮で２９７ＭＨｚと、実
用的なクロック周波数に近づけることができる。また、ＹＣｂＣｒ輝度色差信号の各８ｂ
ｉｔの４４４フォーマットや、各１２ｂｉｔの４２２フォーマットにおいては、１／２の
圧縮で２９７ＭＨｚの実用的なクロック周波数にすることができる。
According to this embodiment, the clock frequency can be made close to a practical clock frequency, that is, 594 MHz with 2/3 compression and 297 MHz with 1/3 compression. Also, each 8b of YCbCr luminance color difference signal
In the 444 format of it and each 12-bit 422 format, 1/2 compression can be made a practical clock frequency of 297 MHz.
水平３８４０有効画素、垂直２１６０有効ラインにおいて、例えば、水平ブランキング
期間は水平５６０ブランキング画素、垂直ブランキング期間は垂直９０ブランキングライ
ンになる。以下、水平３８４０有効画素、垂直２１６０有効ライン、ＹＣｂＣｒ輝度色差
信号の各１２ｂｉｔを４４４フォーマット、フレーム周波数６０Ｈｚの映像信号を１／３
に圧縮する場合を例にとって説明する。
For example, the horizontal blanking period is horizontal 560 blanking pixels, and the vertical blanking period is vertical 90 blanking lines in the horizontal 3840 pixels and the vertical 2160 effective lines. Below, the horizontal 384 effective pixels, vertical 2160 effective lines, YCbCr luminance /
The case of compression to the image will be described as an example.
圧縮後のクロック周波数は２９７ＭＨｚで、水平１９４０有効画素、垂直２１６０有効
ライン、水平２８０ブランキング画素、垂直９０ブランキングラインという条件で伝送す
ると、受信側で２倍の周波数である原クロック５９４ＭＨｚを安定に再生しやすい。水平
有効画素期間では、１画素当りＹＣｂＣｒ輝度色差信号の各１２ｂｉｔ計３６ｂｉｔを１
／３の１２ｂｉｔに圧縮すれば、圧縮後の１画素当り２４ｂｉｔ伝送できるので原画素の
２画素分の伝送が可能となり、圧縮後のクロック周波数は原クロックの半分となる。
The clock frequency after compression is 297 MHz, and transmission is performed under the condition of horizontal 1940 effective pixels, vertical 2160 effective lines, horizontal 280 blanking pixels, vertical 90 blanking lines, and the original clock 594 MHz which is twice the frequency on the reception side is stabilized. Easy to play. In the horizontal effective pixel period, each 12 bits of YCbCr luminance color difference signal per
If it is compressed to 12 bits of / 3, 24 bits can be transmitted per pixel after compression, so transmission of two pixels of the original pixel becomes possible, and the clock frequency after compression becomes half of the original clock.
３２クロック当り１パケットが伝送できるので、圧縮後の水平２８０ブランキング画素
では最大８パケットの伝送が可能となる。一方、音声データは１パケット当り２４ｂｉｔ
×８ｃｈの伝送ができる。画像データの水平周波数は１３５ｋＨｚ（＝６０Ｈｚ×（２１
６０＋９０））なので、１９２ｋＨｚサンプルの２４ｂｉｔリニアＰＣＭ音声を８ｃｈ伝
送する場合は１水平ブランキング期間中に最大２パケット必要である。残りの６パケット
、１６８ｂｙｔｅ(=２８ｂｙｔｅ×６パケット）以内で圧縮符号方式情報を記述できるこ
とが望ましい。
Since one packet can be transmitted per 32 clocks, transmission of up to eight packets is possible with horizontal 280 blanking pixels after compression. On the other hand, voice data is 24 bits per packet
It can transmit x 8 channels. The horizontal frequency of the image data is 135 kHz (= 60 Hz × (21
(60 + 90)), therefore, in the case of transmitting 24 channels of 24-bit linear PCM voice of 192 kHz samples, a maximum of 2 packets are required during one horizontal blanking period. It is desirable to be able to describe compression coding method information within the remaining 6 packets, 168 bytes (= 28 bytes × 6 packets).
一方、前述した３２画素を単位ブロックとして圧縮する場合、水平３８４０有効画素な
ので１２０ブロック分のＹＣｂＣｒ輝度色差信号の各圧縮符号方式情報、計３６０個分の
記述スペースが必要である。主圧縮符号情報を例えば３ｂｉｔで表現すると、１３５ｂｙ
ｔｅ分の記述スペースとなり、５パケットで伝送できるので、１９２ｋＨｚ、８ｃｈの大
容量音声データ伝送と両立できる。
On the other hand, when 32 pixels described above are compressed as a unit block, since horizontal 3840 pixels are effective pixels, compression coding method information of YCbCr luminance color difference signals for 120 blocks, a total of 360 descriptive spaces are required. If the main compression coding information is expressed by 3 bits, for example, 135 by
This is a description space for te and can be transmitted in 5 packets, so it is compatible with large-capacity audio data transmission of 192 kHz and 8 ch.
図３と図４は、圧縮処理部１１４に入力される画像データの一例を示す図である。水平
方向にｎ画素、垂直方向にｍラインの輝度信号を示す。色差信号は、４４４フォーマット
の場合、輝度信号と同じフォーマットとなる。画素数ｎ及びライン数ｍの一例としては、
ｎ＝１９２０、ｍ＝１０８０のいわゆるフルＨＤ画像やｎ＝３８４０、ｍ＝２１６０のい
わゆる４ｋ２ｋ画像などがある。
FIGS. 3 and 4 are diagrams showing an example of image data input to the
There are so-called full HD images of n = 1920 and m = 1080 and so-called 4k2k images of n = 3840 and m = 2160.
ここで、圧縮処理部１１４で圧縮する画像データの単位ブロック（以下、圧縮ブロック
と呼ぶ）を、水平方向ｌ画素と垂直方向ｋ画素とする。図３において、５０１および５０
２はｌ＝３２、ｋ＝１の例を示し、同じライン内で連続した３２画素のデータで構成する
。この画像データの単位で、圧縮処理部１１４は圧縮を行う。
Here, a unit block of image data to be compressed by the compression processing unit 114 (hereinafter referred to as a compressed block) is assumed to be l pixel in the horizontal direction and k pixels in the vertical direction. In FIG. 3, 501 and 50
2 shows an example of l = 32 and k = 1, and consists of continuous 32 pixel data in the same line. The
図４において、５０３および５０４は、ｌ＝１６、ｋ＝２の例を示し、上下２ライン間
で連続する１６画素のデータで構成する。この画像データの単位で、圧縮処理部１１４は
圧縮を行う。圧縮処理として、水平圧縮部と垂直圧縮部を有し、垂直方向ｋ画素数（ライ
ン数）が異なるｋ１とｋ２（ｋ１＜ｋ２）の画像データ単位ブロックを用意し、水平圧縮
部がｋ１の画像データ単位ブロックを、垂直圧縮部１３４がｋ２の画像データ単位ブロッ
クを圧縮しても良い。
In FIG. 4, 503 and 504 show an example of l = 16 and k = 2, and are configured by data of 16 pixels continuous between upper and lower two lines. The
圧縮する画像データの単位の一例として、３２画素を例にとって説明したが、６４画素
や１２８画素などの単位としてもよい。
As an example of a unit of image data to be compressed, 32 pixels have been described as an example, but a unit such as 64 pixels or 128 pixels may be used.
入力された色差信号が４２２フォーマットの場合は、色差信号のＣｂ成分とＣｒ成分が
１画素ごとに入れ子のデータとなる。例えば４ｋ２ｋ画像においてＣｂ成分とＣｒ成分を
合わせてｎ＝３８４０、ｍ＝２１６０の画像データとして扱ってもよい。一般にＣｂ成分
同士、Ｃｒ成分同士の相関が高いので、Ｃｂ成分とＣｒ成分を分けて、ｎ＝１９２０、ｍ
＝２１６０として扱うことにより、同一成分のみで圧縮する画像データの単位ブロックと
することによって、圧縮効率を高めることができる。
When the input color difference signal has the 422 format, the Cb component and the Cr component of the color difference signal are nested data for each pixel. For example, the Cb component and the Cr component in a 4k2k image may be combined and handled as image data of n = 3840 and m = 2160. Generally, since the correlation between Cb components and Cr components is high, the Cb component and the Cr component are divided and n = 1920, m
By treating as 2160, the compression efficiency can be improved by setting it as a unit block of image data to be compressed with only the same component.
入力された色差信号が４２０フォーマットの場合は、色差信号のＣｂ成分とＣｒ成分が
Ｙ信号４画素に対して１画素分のデータとなる。例えば４ｋ２ｋ画像においてＣｂ成分と
Ｃｒ成分を合わせてｎ＝１９２０、ｍ＝２１６０の画像データとして扱ってもよい。一般
にＣｂ成分同士、Ｃｒ成分同士の相関が高いので、Ｃｂ成分とＣｒ成分を分けて、ｎ＝１
９２０、ｍ＝１０８０として扱うことにより、同一成分のみで圧縮する画像データの単位
とすることによって、圧縮効率を高めることができる。
When the input color difference signal is in the 420 format, the Cb component and the Cr component of the color difference signal become data for one pixel with respect to four pixels of the Y signal. For example, the Cb component and the Cr component in a 4k2k image may be combined and handled as image data of n = 1920 and m = 2160. In general, since the correlation between Cb components and Cr components is high, the Cb component and the Cr component are divided and n = 1
By treating as 920 and m = 1080, the compression efficiency can be enhanced by using the same component as a unit of image data to be compressed.
圧縮符号情報は、主圧縮符号情報と副圧縮符号情報で構成される。主圧縮符号情報と副
圧縮符号情報を元に、圧縮画像データから元の画像データへ伸張処理を行うことができる
。
The compression code information is composed of main compression code information and sub compression code information. Based on the main compression coding information and the sub compression coding information, the expansion processing can be performed from the compressed image data to the original image data.
主圧縮符号情報だけで、簡易な伸張処理または、一部伸張処理を行うことができる。 Simple decompression processing or partial decompression processing can be performed only with the main compression coding information.
主圧縮符号情報は、副圧縮符号情報に比べて、よりエラー耐性の高い伝送路で伝送する
。本実施例では、有効期間４０６に圧縮画像データと副圧縮符号情報を伝送し、ブランキ
ング期間４０７に主圧縮符号情報を伝送する。主圧縮符号情報のブランキング期間４０７
での伝送例として、ライン単位で共通の主圧縮符号情報を垂直ブランキング期間４０１で
伝送し、同一ライン中の圧縮ブロックに対する主圧縮符号情報を水平ブランキング期間４
０４で伝送する方法がある。
The main compression code information is transmitted through a transmission path having higher error resistance than the sub compression code information. In this embodiment, compressed image data and sub compression code information are transmitted in the
As an example of transmission in this case, common main compression code information is transmitted in the
There is a method to transmit at 04.
上記の構成をとることで、伝送エラー率の高い伝送路において、副圧縮符号情報にエラ
ーが発生した場合でも、主圧縮符号情報にエラーが発生する確率は大幅に低下する。この
ため、伝送エラー率の高い伝送路上で、副圧縮符号情報にエラーが発生した場合、主圧縮
符号情報を用いて簡易伸張した画像データまたは一部伸張した画像データをエラー補正に
用いることで、表示の乱れを抑制することができる。また、主圧縮符号情報に、圧縮ブロ
ックサイズを含めることで、副圧縮符号情報にエラーが発生した場合、表示の乱れを圧縮
ブロック内に抑えることができる。
By adopting the above configuration, even if an error occurs in the sub compression code information in a transmission path with a high transmission error rate, the probability of the error occurring in the main compression code information is significantly reduced. Therefore, when an error occurs in the sub compression code information on the transmission path with a high transmission error rate, the image data simply expanded using the main compression code information or partially expanded image data is used for error correction. It is possible to suppress display disorder. Also, by including the compression block size in the main compression coding information, when an error occurs in the sub compression coding information, it is possible to suppress display disturbance within the compression block.
また、圧縮符号情報は、主圧縮符号情報または副圧縮符号情報のみで構成しても良い。 Further, the compression code information may be constituted only by the main compression code information or the sub compression code information.
圧縮符号情報および圧縮画像データの構成例を図５に示す。 An example of the configuration of compressed code information and compressed image data is shown in FIG.
本例では、圧縮ブロック６００の単位が、サブ圧縮ブロック６１０、６２０で構成され
、各サブ圧縮ブロック６１０、６２０が、画素６１１、６１２、６１３、６１４および、
画素６２１、６２２、６２３、６２４で構成されている。
In this example, the unit of
It is composed of pixels 621, 622, 623, 624.
圧縮後の圧縮ブロックの構成の一例を６３０に示す。圧縮ブロック６３０は、圧縮符号
情報６３１と圧縮画像データ６３２で構成される。圧縮画像データ６３２は、画素データ
６１１、６１２、６１３、６１４、６２１、６２２、６２３、６２４を圧縮することで生
成される圧縮画像データである。圧縮符号情報６３１は、圧縮処理で生成される情報であ
る。本構成において、圧縮符号情報を有効期間４０６で伝送した場合、伝送エラー率の高
い場合には圧縮符号情報に対してもエラーが発生する確率が高くなり、結果、圧縮ブロッ
ク単位で表示の乱れが発生し易くなるという課題がある。また、圧縮符号情報をブランキ
ング期間４０７で伝送した場合、有効期間４０６に比べて伝送可能なデータ量が大幅に少
なくなるため、圧縮符号情報量の削減が課題となる。
An example of the configuration of the compressed block after compression is shown at 630. The compression block 630 includes compression code information 631 and
圧縮後の圧縮ブロックの構成の別の一例を６４０に示す。本例では、圧縮符号情報を主
圧縮符号情報６４１と、副圧縮符号情報６４２、６４４の２種類で構成する。圧縮ブロッ
ク６４０は、主圧縮符号情報６４１と、副圧縮符号情報６４２および６４４と、圧縮画像
データ６４３および６４５で構成される。圧縮画像データ６４３は、サブ圧縮ブロック６
１０に属する画像データ６１１、６１２、６１３、６１４を圧縮することで生成される圧
縮画像データである。副圧縮符号情報６４２は、画素データ６１１、６１２、６１３、６
１４に対する圧縮処理で生成される情報である。圧縮画像データ６４５は、サブ圧縮ブロ
ック６２０に属する画像データ６２１、６２２、６２３、６２４を圧縮することで生成さ
れる圧縮画像データである。副圧縮符号情報６４４は、画素データ６２１、６２２、６２
３、６２４に対する圧縮処理で生成される情報である。
Another example of the configuration of the compressed block after compression is shown at 640. In this example, the compression code information is composed of two types of main compression code information 641 and sub
10 is compressed image data generated by compressing the
14 is information generated by the compression processing for. The
It is the information generated by the compression processing for 3, 624.
圧縮後の圧縮ブロックの構成の別の一例を６５０に示す。本例では、圧縮符号情報を主
圧縮符号情報６５１と、副圧縮符号情報６５２の２種類で構成する。圧縮ブロック６５０
は、主圧縮符号情報６５１と、副圧縮符号情報６５２と、圧縮画像データ６５３で構成さ
れる。圧縮画像データ６５３は、圧縮ブロック６００に含まれる画像データ６１１、６１
２、６１３、６１４、６２１、６２２、６２３、６２４を圧縮することで生成される圧縮
画像データである。主圧縮符号情報６５１および副圧縮符号情報６５２は、圧縮ブロック
６００に対する圧縮処理で生成される情報である。
Another example of the configuration of the compressed block after compression is shown at 650. In this example, the compression code information is composed of two types of main
Is composed of main
2, 613, 614, 621, 622, 623, 624, which is compressed image data generated by compression. The main
圧縮後の圧縮ブロックの構成の別の一例を６６０に示す。本例と、圧縮後の圧縮ブロッ
ク６５０との差異は、副圧縮符号情報６６２が、圧縮後の圧縮ブロック６５０における副
圧縮符号情報６５２に対してさらに圧縮をかけた情報であるという点である。ここでは図
示していないが、主圧縮符号情報６５１に対して更に圧縮をかけることで、伝送データ量
の削減を図っても良い。
Another example of the configuration of the compressed block after compression is shown at 660. The difference between this example and the compressed block 650 after compression is that the secondary compression code information 662 is information obtained by further compressing the secondary
前記圧縮後の圧縮ブロック６４０、６５０、６６０の構成をとった場合、主圧縮符号情
報を、副圧縮符号情報よりエラー耐性の高い伝送路で伝送することで、エラー耐性の高い
伝送路に伝送するデータ量を抑えつつ、表示画像（復元画像）に対する伝送エラーの影響
を抑えることが可能となる。
When the
図６は、図５に示す圧縮後の圧縮ブロック６４０、６５０、６６０に対する伝送タイミ
ングの説明図である。７００および７０２は有効期間４０６であり、７０１は水平ブラン
キング期間４０４である。７１０、７１１、７１２は有効期間７００で伝送される圧縮前
の１ライン分の画像データである。本例では、３個の圧縮ブロック７１０、７１１、７１
２に対して、圧縮処理を行う。
７３０は、圧縮ブロック７１０、７１１、７１２に対する圧縮処理で生成される主圧縮符
号情報である。７３１，７３２，７３３は、圧縮ブロック７１０、７１１、７１２に対す
る圧縮処理で生成される圧縮ブロックである。圧縮ブロックは、圧縮画像データと、圧縮
処理で生成される副圧縮符号情報で構成される。圧縮後の圧縮ブロック７３１の構成の一
例として、７４０、７５０、７６０を示す。これらは、それぞれ図５に示すサブ圧縮ブロ
ック６４０、６５０、６６０に対応する。
FIG. 6 is an explanatory diagram of transmission timings for the compression blocks 640, 650 and 660 after compression shown in FIG. 700 and 702 are
Perform compression processing on 2).
730 is main compression code information generated by the compression process for the compression blocks 710, 711, and 712.
主圧縮符号情報７３０は、有効期間７００、７０２よりもエラー耐性の高い水平ブラン
キング期間７０１で伝送する。また、画像データ７１０に対する圧縮処理で生成される圧
縮画像データと副圧縮符号情報で構成される圧縮後の圧縮ブロック７３１、７３２、７３
３は、水平ブランキング期間７０１の次の有効期間７０２で伝送する。なお、主圧縮符号
情報の一部または全てを垂直ブランキング期間４０１で伝送しても良い。
The main
3 transmit in the next
主圧縮符号情報と副圧縮符号情報の一例を、図２８を用いて説明する。 An example of the main compression code information and the sub compression code information will be described with reference to FIG.
圧縮ブロック９２０の単位が水平３２画素であり、サブ圧縮ブロック９２１、９２２、
９２３、９２４の単位が８画素である圧縮処理を行う場合を考える。先頭のサブ圧縮ブロ
ック９２１に対する圧縮符号情報９２６を主圧縮符号情報とし、それ以外の３個のサブ圧
縮ブロックに対する圧縮符号情報９２７、９２８、９２９を副圧縮符号情報とする。
The unit of the
A case is considered where the compression processing is performed in which the unit of 923 and 924 is 8 pixels. The compression code information 926 for the leading
主圧縮符号情報は、先頭のサブ圧縮ブロック９２１に対する圧縮符号情報９２６と、サ
ブ圧縮ブロック９２１の伸張処理に用いるその他の圧縮符号情報（例えば、各サブ圧縮ブ
ロックに共通の共通圧縮符号情報９２５など）で構成される。
The main compression code information includes compression code information 926 for the
副圧縮符号情報は、２番目以降のサブ圧縮ブロック９２２、９２３、９２４に対する圧
縮符号情報９２７、９２８、９２９で構成される。
The sub compression code information is composed of
本例の構成をとることで、伝送エラー率の高い伝送路上で、副圧縮符号情報にエラーが
発生した場合、主圧縮符号情報を用いて伸張した、先頭のサブ圧縮ブロックに属する画像
データをエラー補正に用いることで、表示の乱れを抑制することができる。エラー補正の
一例として、主圧縮符号情報により伸張した各圧縮ブロックの先頭のサブ圧縮ブロックに
属する画像データから、エラーが発生したサブ圧縮ブロックに属する補完画像を生成して
表示する方法がある。
By adopting the configuration of this example, when an error occurs in the sub compression code information on a transmission path with a high transmission error rate, the image data belonging to the first sub compression block decompressed using the main compression code information is an error Disturbance of display can be suppressed by using for correction. As an example of error correction, there is a method of generating and displaying a complementary image belonging to a sub-compressed block in which an error has occurred, from image data belonging to the first sub-compressed block of each compressed block decompressed by the main compression code information.
伝送路の一例として、副圧縮符号情報（図２８（ｃ））と圧縮部出力（図２８（ｄ））
を有効期間４０６で伝送し、主圧縮符号情報を、よりエラー耐性の高い水平ブランキング
期間４０４で伝送する方法がある。
As an example of the transmission path, the secondary compression code information (FIG. 28 (c)) and the compression unit output (FIG. 28 (d))
Of the main compression code information in a more error tolerant
主圧縮符号情報と副圧縮符号情報の別の一例を、図２７を用いて説明する。 Another example of the main compression code information and the sub compression code information will be described with reference to FIG.
圧縮ブロック９００の単位が水平３２画素であり、サブ圧縮ブロック９０１、９０２、
９０３、９０４の単位が８画素である圧縮処理を行う場合を考える。
The unit of the
A case is considered where the compression processing is performed in which the unit of 903 and 904 is 8 pixels.
第一の圧縮部（圧縮部Ａ１３３）では、サブ圧縮ブロック９０１、９０２、９０３、９
０４に対してサブ圧縮ブロック単位で第一の圧縮処理を行い、サブ圧縮ブロック単位の副
圧縮符号情報（第一圧縮符号情報９０５、９０６、９０７、９０８）と圧縮画像データ（
第一圧縮画像データ９０９、９１０、９１１、９１２）を生成する。第二の圧縮部（圧縮
部Ｂ１３４）では、入力された４個のサブ圧縮ブロック単位の圧縮画像データ（第一圧縮
画像データ９０９、９１０、９１１、９１２）に対して、更に第二の圧縮処理を行い、１
個の主圧縮符号情報（第二圧縮符号情報９１４）と圧縮画像データ（第二圧縮画像データ
９１４）と圧縮画像データ（第二の圧縮画像データ９１５）を生成する。主圧縮符号情報
を、副圧縮符号情報（第一圧縮符号情報９０５、９０６、９０７、９０８）や圧縮画像デ
ータ（第二の圧縮画像データ９１５）の伝送路よりもエラー耐性の高い伝送路で伝送する
ことで、伝送エラー率が高い伝送路においても、サブ圧縮ブロック単位までの伸張処理を
行うことができ、エラーの影響範囲をサブ圧縮ブロック範囲内に抑えることが可能となる
。
In the first compression unit (compression unit A133), the sub compression blocks 901, 902, 903, 9
The first compression processing is performed on the sub compression block unit 04, and the sub compression code information (first
First
The main compression code information (second compression code information 914), the compressed image data (second compressed image data 914), and the compressed image data (second compressed image data 915) are generated. Transmission of main compression code information via a transmission line that is more resistant to errors than transmission lines of secondary compression code information (first
第二圧縮符号情報９１４に加えて、第一圧縮符号情報９０５、９０６、９０７、９０８
で共通な圧縮符号情報９１３を主圧縮符号情報として伝送することで、更にエラー耐性を
高めることができる。
In addition to the second compression code information 914, first
By transmitting the common
圧縮符号情報の別の一例として、例えば圧縮ブロック単位が水平３２画素であり、サブ
圧縮ブロック単位が８画素であり、サブ圧縮ブロック単位ごとにサイズ情報が付加される
圧縮処理を行う場合を考える。サブ圧縮ブロック単位ごとのサイズ情報の総和、すなわち
圧縮ブロック単位のサイズ情報を主圧縮符号情報に含め、サブ圧縮ブロック単位ごとにサ
イズ情報を副圧縮符号情報に含める。主圧縮符号情報を、よりエラー耐性の高い伝送路で
伝送することで、伝送エラー率が高い伝送路において、副圧縮符号情報でエラーが発生し
た場合、主画像符号情報を元に圧縮ブロック単位のサイズを生成し、そのサイズ分、伸張
処理を飛ばすことで、次の圧縮ブロックへのエラーの影響を防ぐことができる。
As another example of compression code information, for example, it is assumed that a compression block unit is 32 pixels horizontally, a sub compression block unit is 8 pixels, and compression processing is performed in which size information is added to each sub compression block unit. The sum of the size information for each sub compression block unit, that is, the size information for each compression block unit is included in the main compression code information, and the size information is included in the sub compression code information for each sub compression block unit. By transmitting the main compression code information through a transmission path with higher error resistance, if an error occurs in the sub compression code information in a transmission path with a high transmission error rate, compression block unit based on the main image code information By generating the size and skipping the decompression processing for that size, it is possible to prevent the influence of an error on the next compressed block.
エラー耐性の高い伝送路において、伝送可能なデータ量に余裕がある場合には、各サブ
圧縮ブロックに対するサイズ情報を全て、主圧縮符号情報として伝送しても良い。この場
合、副圧縮符号情報でエラーが発生した場合、主画像符号情報を元にエラーが発生したサ
ブ圧縮ブロックのサイズを生成し、そのサイズ分、伸張処理を行わないことで、他のサブ
圧縮ブロックへのエラーの影響を防ぐことができる。
In the transmission line with high error resistance, when there is a margin in the transmittable data amount, all the size information for each sub-compression block may be transmitted as main compression coding information. In this case, when an error occurs in the sub compression code information, the size of the sub compression block in which the error occurs is generated based on the main image code information, and the decompression process is not performed for that size It is possible to prevent the influence of errors on blocks.
図７は、圧縮処理部１１４の構成の一例を示すブロック図である。
入力部１３０は、圧縮処理部１１４へ画像データを入力するための入力部である。
FIG. 7 is a block diagram showing an example of the configuration of the
The
入力された画像データは、圧縮部Ａ１３３、圧縮部Ｂ１３４、圧縮部Ｃ１３５に供給さ
れる。
圧縮部Ａ１３３、圧縮部Ｂ１３４、圧縮部Ｃ１３５は、入力された画像データに対して、
それぞれ異なる圧縮処理を行い、圧縮符号情報と圧縮画像データを生成する。なお、制御
信号１３１により指定された圧縮部以外は、圧縮処理を行わないまたは動作クロック自体
を止めることで、消費電力を削減することも可能である。
The input image data is supplied to the
The compression unit A133, the compression unit B134, and the compression unit C135 operate on the input image data,
Different compression processing is performed to generate compression code information and compressed image data. It is also possible to reduce power consumption by not performing compression processing or stopping the operation clock itself except for the compression unit specified by the
圧縮部Ａ１３３、圧縮部Ｂ１３４、圧縮部Ｃ１３５は、圧縮ブロックを構成する複数の
画像データに対して、圧縮を行う圧縮回路により構成される。圧縮方式の一例としては、
水平方向にＷａｖｅｌｅｔ変換を演算し、その演算結果に対して、符号化した圧縮方式等
で構成する。圧縮方式として、アダマール変換や、ランレングス符号化、ハフマン符号化
、差分符号化などを適用してもよい。
The compression unit A133, the compression unit B134, and the compression unit C135 are each configured by a compression circuit that compresses a plurality of image data constituting a compression block. An example of the compression method is
The Wavelet transform is calculated in the horizontal direction, and the calculation result is configured by a coded compression method or the like. As a compression method, Hadamard transform, run length coding, Huffman coding, differential coding, or the like may be applied.
また、別の圧縮方式の一例として、垂直方向の複数の画像データに対して、圧縮を行う
圧縮回路により構成される。圧縮方式の一例としては、垂直方向に２ライン分、水平方向
に１６画素分の画像データを圧縮する画像データの単位ブロックとして、まず垂直方向に
対し差分をとり、次に水平方向に差分をとる。その結果に対して符号化する圧縮方式等で
構成する。
Further, as an example of another compression method, the compression circuit is configured to perform compression on a plurality of image data in the vertical direction. As an example of the compression method, as a unit block of image data for compressing image data of two lines in the vertical direction and 16 pixels in the horizontal direction, first, differences are taken in the vertical direction and then in the horizontal direction . It comprises by the compression system etc. which encode with respect to the result.
また、別の圧縮方式の一例として、４４４フォーマットや４２２フォーマットの色差信
号が入力された際に、４２２フォーマットや４２０フォーマットに間引く回路により構成
される。４４４フォーマットや４２２フォーマットが入力された場合、後述する図８で示
す圧縮処理部１１４の構成において、所定の圧縮率を超えた場合には、４２２フォーマッ
トや４２０フォーマットへ間引き処理を行っても良い。
In addition, as an example of another compression method, when color difference signals in the 444 format or 422 format are input, the circuit is thinned out to the 422 format or 420 format. When the 444 format or 422 format is input, thinning processing may be performed to the 422 format or 420 format when the predetermined compression ratio is exceeded in the configuration of the
ここで、圧縮率とは、圧縮前のデータ量と圧縮後のデータ量の比である。例えば、圧縮
前のデータ量が１００、圧縮後のデータ量が３０の場合、圧縮率は３０％となる。したが
って、高い圧縮率ほど圧縮後のデータ量が多くなり、画質劣化が少ない。
Here, the compression ratio is the ratio of the amount of data before compression to the amount of data after compression. For example, if the amount of data before compression is 100 and the amount of data after compression is 30, then the compression ratio is 30%. Therefore, the higher the compression rate, the larger the amount of data after compression, and the less the image quality deterioration.
図１０は、圧縮部Ａ１３３の構成の一例を示すブロック図である。 FIG. 10 is a block diagram showing an example of the configuration of the compression unit A133.
入力部１５０は、圧縮部Ａ１３３へ画像データを入力するための入力部である。
The
入力部１５１は、圧縮部Ａ１３３を制御するための制御信号を入力するための入力部で
ある。
The input unit 151 is an input unit for inputting a control signal for controlling the
第一の圧縮部１５３は、入力された画像データに対して圧縮処理を行い、圧縮符号情報
と圧縮画像データを生成するブロックである。第一の圧縮部１５３で生成された圧縮符号
情報は、圧縮符号情報生成部１５５に供給される。また、第一の圧縮部１５３で生成され
た圧縮画像データは選択部１５６に供給される。
The
圧縮符号情報生成部１５５は、入力された圧縮符号情報から、主圧縮符号情報と副圧縮
符号情報を生成するブロックである。圧縮符号情報生成部１５５は、生成した主圧縮符号
情報と副圧縮符号情報を一時的に記憶するメモリを有してもよい。
The compression code
選択部１５６は、第一の圧縮部１５３から供給された圧縮画像データと、圧縮符号情報
生成部１５５から供給された主圧縮符号情報および副圧縮符号情報を選択して出力するブ
ロックである。
The
図１１は、圧縮部Ａ１３３の構成の別の一例を示すブロック図である。 FIG. 11 is a block diagram showing another example of the configuration of the compression unit A133.
入力部１６０は、圧縮部Ａ１３３へ画像データを入力するための入力部である。
The input unit 160 is an input unit for inputting image data to the
入力部１６１は、圧縮部Ａ１３３を制御するための制御信号を入力するための入力部で
ある。
The
第一の圧縮部１６３は、入力された画像データに対して第一の圧縮処理を行い、副圧縮
符号情報と圧縮画像データを生成するブロックである。第一の圧縮部１６３で生成された
副圧縮符号情報は、選択部１６６に供給される。また、第一の圧縮部１６３で生成された
圧縮画像データは、第二の圧縮部１６４に供給される。
The
第二の圧縮部１６４は、入力された圧縮画像データに対して第二の圧縮処理を行い、主
圧縮符号情報と圧縮画像データを生成するブロックである。第二の圧縮部１６４で生成さ
れた主圧縮符号情報および圧縮画像データは、選択部１６６に供給される。
The
選択部１６６は、第一の圧縮部１６３から供給された副圧縮符号情報と、第二の圧縮部
１６４から供給された主圧縮符号情報および圧縮画像データを選択して出力するブロック
である。
The
本例の構成により、図２７で示す２段階の圧縮処理を行うことが可能となる。また、本
例では、２つの圧縮部を例にとり説明したが、３段階以上の圧縮部を設けてもよい。
With the configuration of this example, it is possible to perform the two-stage compression process shown in FIG. Further, in the present embodiment, two compression units are described as an example, but three or more stages of compression units may be provided.
以上でその動作を説明してきた圧縮部Ａ１３３、圧縮部Ｂ１３４、圧縮部Ｃ１３５の出
力が、選択部１３６に供給される。
The outputs of the
本例では、３つの圧縮部１３３、１３４、１３５を有する圧縮処理部を用いて説明した
が、圧縮部が１個または２個だけ有してもよいし、４個以上の圧縮部を有してもよい。
In this example, although the compression processing unit having three
選択部１３６は、圧縮部Ａ１３３、圧縮部Ｂ１３４、圧縮部Ｃ１３５の内、所定の圧縮
率を満たしかつ画質指数の高いものを選択し、エラー訂正符号生成部１３７に供給する。
画質指数とは、例えば、圧縮画像データを復元した画像データと圧縮前の画像データの差
異が小さいほど良い値を示す指数がある。圧縮ロスが発生せず、可逆符号化ができた場合
が最高値である。画質指数の計算を簡略化するため、圧縮方式別に画質指数の値を用意し
ておいてもよい。４４４フォーマットのまま圧縮して圧縮ロスが発生する場合よりも、４
２２フォーマットへ間引き後に可逆符号化できた場合を高い画質指数に定義してもよい。
圧縮によって逆にデータ量が増加してしまう場合は、４２２フォーマットや４２０フォー
マットに間引いて圧縮や、量子化ｂｉｔ数を減らすことによって所定の圧縮率を達成させ
るが、その間引きや量子ｂｉｔ数減に応じた画質指数を設定する。
The
The image quality index is, for example, an index that indicates a better value as the difference between image data obtained by restoring compressed image data and image data before compression is smaller. The compression loss does not occur, and the case where lossless coding can be performed is the maximum value. In order to simplify the calculation of the image quality index, the value of the image quality index may be prepared for each compression method. Compress in the 444 format, and 4
A case where lossless encoding can be performed after decimation to the 22 format may be defined as a high image quality index.
Conversely, if the amount of data increases due to compression, compression and decimation in the 422 format and 420 format are performed to achieve a predetermined compression ratio by reducing the number of quantization bits. Set the image quality index accordingly.
また、入力部１３１から入力される制御信号によって、圧縮部Ａ１３３、圧縮部Ｂ１３
４、圧縮部Ｃ１３５の何れか１つの動作を有効にして、その他２つは動作を停止しても良
い。この場合、選択部１３６には、入力部１３１から、動作が有効である圧縮部を示す制
御情報を入力する。選択部１３６は、該制御情報を元に、動作が有効である圧縮部の出力
信号をエラー訂正符号生成部１３７に出力する。
In addition, according to the control signal input from the
4 and any one operation of the
エラー訂正符号生成部１３７は、圧縮部Ａ１３３、圧縮部Ｂ１３４、圧縮部Ｃ１３５で
圧縮された画像データ（圧縮画像データ）の単位ごとにエラー訂正符号を演算し、圧縮画
像データに付加して、メモリ制御部１３９に出力する。エラー訂正の方式の一つとして、
ＣＲＣ（Cyclic Redundancy Check）方式やパリティチェック方式などがある。
The error correction
There are a CRC (Cyclic Redundancy Check) method and a parity check method.
データ伝送容量に応じて、エラー訂正符号を付加するか否かを判別しても良い。ケーブ
ルのデータ伝送容量が限られている場合、エラー訂正符号を付与すると画素又は階調をよ
り多く間引くことになり、画面全体の画質劣化につながるためである。伝送容量に余裕が
あれば圧縮画像データにエラー訂正符号を付加して、エラー耐性を向上させてもよい。圧
縮画像データへのエラー訂正付加有無のメタデータを合せて伝送することによって、受信
側でエラー訂正処理をするかどうかを判別させてもよい。また、適用する圧縮方式によっ
てエラー訂正処理を変えてエラー耐性レベルを変えてもよいし、どのエラー訂正符号を付
与したかを示す情報をメタデータとして加えてもよい。また、エラー訂正処理を行わず、
入力データをそのまま出力してもよい。
Whether to add an error correction code may be determined according to the data transmission capacity. When the data transmission capacity of the cable is limited, the addition of the error correction code leads to thinning out more pixels or gradations, which leads to the image quality deterioration of the entire screen. If the transmission capacity has a margin, an error correction code may be added to the compressed image data to improve the error resistance. Whether the error correction process is to be performed may be determined on the receiving side by collectively transmitting the error correction addition / non-existence metadata to the compressed image data. Also, the error correction level may be changed depending on the compression method to be applied to change the error resilience level, or information indicating which error correction code has been added may be added as metadata. Also, without performing error correction processing,
The input data may be output as it is.
メモリ制御部１３９は、エラー符号生成部１３７から供給される圧縮画像データと主圧
縮符号情報と副圧縮符号情報を一時的にメモリ部１４０に蓄積する。また、副圧縮符号情
報と圧縮画像データを、メモリ部１４０から読み出して、有効期間４０６に出力する。ま
た、主圧縮符号情報をメモリ部１４０から読み出して、圧縮画像データを出力する有効期
間４０６の直前の水平ブランキング期間４０４に出力する。また、別の方式としては、１
ライン分のエラー訂正符号付の圧縮画像データ、主圧縮符号情報および副圧縮符号情報の
いずれも、１ライン分の有効期間４０６内に伝送して伝送量の増大を図ってもよい。また
、エラー訂正符号を主圧縮符号情報に含めて、水平ブランキング期間４０４に出力するこ
とで、エラー訂正の信頼性を向上させてもよい。
The
The amount of transmission may be increased by transmitting all of the compressed image data with error correction code for the line, the main compression code information and the sub compression code information within the
出力部１３２は、前記メモリ制御部１３９からの圧縮画像データと、主圧縮符号情報と
、副圧縮符号情報が出力される。図示していないが、図７の各ブロックは、図１の制御部
１１０の制御信号に従ってその動作を制御される。
The
図１２は、エラー訂正符号生成部１３６の構成の一例を示すブロック図である。入力部
１７０には圧縮画像データが入力される。圧縮画像データは、保持部１７５とエラー訂正
符号演算部１７３に入力される。エラー訂正符号演算部１７３は、入力された圧縮画像デ
ータに対して、生成多項式で巡回演算をする。
FIG. 12 is a block diagram showing an example of the configuration of the error correction
生成多項式の一例としては、
（数１）Ｇ（Ｘ）＝Ｘ１６＋Ｘ１２＋Ｘ５＋１
がある。この生成多項式は、入力された圧縮画像データ中の各ビットにつき排他的論理和
をとり巡回演算する。演算の単位は圧縮画像データの単位とする。
An example of a generator polynomial is
(Equation 1) G (X) = X 16 + X 12 + X 5 +1
There is. The generator polynomial performs an exclusive OR operation on each bit in the input compressed image data and performs a cyclic operation. The unit of operation is the unit of compressed image data.
入力部１７１は、圧縮画像データが入力されている期間を示す信号が入力され、タイミ
ング生成部１７４に供給される。タイミング生成部１７４は、圧縮画像データの有効期間
をカウントし圧縮する画像データの単位ブロック分の演算が処理されたことを示す信号を
エラー訂正演算結果出力タイミング信号として、データ保持部１７５に出力する。さらに
、タイミング生成回路１７４は、圧縮画像データの入力期間を示すタイミング信号や、圧
縮画像データとエラー訂正符号演算結果を出力するタイミング信号なども合せてデータ保
持部１７５に出力する。
The
データ保持部１７５は、タイミング生成部１７４の示すタイミングに従って、エラー訂
正符号演算部１７３の演算結果と圧縮画像データを例えばメモリやフリップフロップ、遅
延素子等によって一時的に記憶し、それらを順次、出力部１３２へ出力する。
The
図１３は、データ転送部１１５の構成の一例を示すブロック図である。入力部１８０は
、圧縮画像データをシリアライザ部１８４に出力する。また入力部１８１は、画像データ
のクロックが入力され、ＰＬＬ１８６と出力部１８２に出力する。
FIG. 13 is a block diagram showing an example of the configuration of the
画像データのクロックには、非圧縮画像データの標準的なタイミングフォーマットで使
われる画素クロックに同期したクロックを用いる。例えば、非圧縮画像データの画素クロ
ックを２分周したクロックを用いてもよい。この場合、該非圧縮画像データが１２ｂｉｔ
ｓの量子化画像データである場合は、クロックで１／２、量子化ｂｉｔ数で８／１２とな
るので、前記した所定の圧縮率は１／３以下を設定する必要がある。クロックは２分周以
外に、３／４逓倍や２／３逓倍としてもよい。非圧縮画像データの画素クロックに同期し
たクロックを圧縮画像データの伝送に使うことにより、受信側で非圧縮画像データを復元
する場合に、伝送クロックの２倍や４／３倍、３／２倍などの逓倍したクロックを画素ク
ロックとして使うことにより。復元データのジッタを最小化できる利点がある。
As a clock of image data, a clock synchronized with a pixel clock used in a standard timing format of uncompressed image data is used. For example, a clock obtained by dividing the pixel clock of uncompressed image data by two may be used. In this case, the uncompressed image data is 12 bits
In the case of the quantized image data of s, the predetermined compression ratio needs to be set to 1/3 or less because it is 1/2 by the clock and 8/12 by the number of quantization bits. The clock may be 3/4 multiplication or 2/3 multiplication instead of 2 division. When decompressed image data is restored on the receiving side by using a clock synchronized with the pixel clock of uncompressed image data for transmission of compressed image data, twice, 4/3 times, 3/2 times the transmission clock Etc. by using the multiplied clock as the pixel clock. There is an advantage that the jitter of the recovered data can be minimized.
ＰＬＬ１８６は、入力されたクロックに対して逓倍化もしくは分周したクロックを生成
する。逓倍化の一例としては、入力されたクロックの周波数に対して、５倍や１０倍など
がある。ＰＬＬ１８６で生成するクロックは、1種類のクロックとしてもよいし、２種類
のクロックとしてもよい。1種類のクロックの例としては、入力されたクロックの１０逓
倍がある。また２種類のクロックの例としては、データ伝送量を優先した第１のクロック
速度と、エラーの発生頻度を下げることを優先した第1のクロック速度より遅い速度の第
２のクロック速度のクロックがある。速度の一例としては前記第1のクロック速度を入力
クロックの１０逓倍、第２のクロック速度を入力クロックの５逓倍などがある。
The
ＰＬＬ１８６で生成した逓倍したクロックをシリアライザ部１８４に出力する。
The multiplied clock generated by the
シリアライザ１８４は、入力されたＹＣｂＣｒ輝度色差信号の圧縮画像データを、１０
逓倍したクロックで１ｂｉｔずつシリアル化し、レベル変換部１８５に出力する。入力部
１８１に入力された１クロックに対して、入力部１８０に入力されるデータが８ｂｉｔあ
る場合、該８ｂｉｔデータを１０ｂｉｔにマッピングしてシリアル化したビットストリー
ムのＤＣ成分を抑圧するＴＭＤＳ伝送方法などを用いてもよい。出力部１７６に接続され
るケーブルが３本ある場合は、各ケーブル毎に上記シリアル処理を行うことによって、入
力クロック当り２４ｂｉｔの圧縮画像データを送ることができる。
The
It serializes one bit at a time by the multiplied clock and outputs it to the
レベル変換部１８５は、ケーブル伝送に適した形式の信号を出力部１８２経由で出力す
る。
The
図８は、圧縮処理部１１４の構成の別の一例を示すブロック図である。
FIG. 8 is a block diagram showing another example of the configuration of the
メモリ制御部１４２は、エラー符号生成部１３７から供給される圧縮画像データと主圧
縮符号情報と副圧縮符号情報を一時的にメモリ部１４０に蓄積する。また、副圧縮符号情
報と圧縮画像データを、メモリ部１４０から読み出して、有効期間４０６に出力する。ま
た、主圧縮符号情報をメモリ部１４０から読み出して、圧縮画像データを出力する有効期
間４０６の直前の水平ブランキング期間４０４に出力する。さらに、圧縮画像データを、
メモリ部１４０から読み出して、選択部１４１へ供給することができる。
The
Data can be read from the
選択部１４１は、入力部１３０から入力される画像データと、メモリ制御部１４２から
供給される圧縮画像データ１４３のいずれかを選択して、圧縮部Ａ１３３、圧縮部Ｂ１３
４、圧縮部Ｃ１３５に供給するブロックである。また、入力部１３０から入力される画像
データを所定の圧縮部へ出力すると共に、圧縮画像データ１４３を別の圧縮部へ出力して
もよい。本例の構成により、図２７で示す２段階の圧縮処理を行うことが可能となる。ま
た、さら３段階以上の圧縮処理を行なってもよい。
The selection unit 141 selects one of the image data input from the
4 is a block to be supplied to the compression unit C135. The image data input from the
図９は、圧縮処理部１１４の構成の別の一例を示すブロック図である。
FIG. 9 is a block diagram showing another example of the configuration of the
選択部１３８は、エラー符号生成部１３７から供給される主圧縮符号情報と副圧縮符号
情報をメモリ制御部１４５に出力し、エラー符号生成部１３７から供給される圧縮画像デ
ータを選択部１４４に出力する。
The
メモリ制御部１４５は、選択部１３８から供給される主圧縮符号情報と副圧縮符号情報
を一時的にメモリ部１４０に蓄積する。また、副圧縮符号情報を、メモリ部１４０から読
み出して、選択部１４４を介して後述する有効期間４０６に出力する。また、主圧縮符号
情報をメモリ部１４０から読み出して、選択部１４４を介して、副圧縮符号情報を出力す
る有効期間４０６の直前の水平ブランキング期間４０４に出力する。
The
選択部１４４は、選択部１３８から供給される圧縮画像データと、メモリ制御部１４５
から供給される主圧縮符号情報と副圧縮符号情報を選択して、出力部１３２に出力するブ
ロックである。
The
The main compression code information and the sub compression code information supplied from the block are selected and output to the
本例において、選択部１３８が、副圧縮符号情報を、圧縮画像データと共に、メモリ制
御部１４５を介さず、直接選択部１４４に出力してもよい。この場合、メモリ制御部１４
５は主圧縮符号情報に対するメモリ書き込みおよび読み出し処理を行う。本例の構成をと
ることで、送信機１００側のメモリ部１４０が有するメモリ量を少なく抑えることができ
る。
In this example, the
5 performs memory write and read processing for the main compression code information. By adopting the configuration of this example, the memory amount of the
図１４〜図１７に主圧縮符号情報の一部を伝送するパケットの一例を示す。 FIGS. 14 to 17 show an example of a packet for transmitting part of the main compression coding information.
図１４と図１６がパケットのヘッダの一例であり、最初のヘッダブロックＨＢ０に本発
明の圧縮符号化伝送方式に関する情報であることを示す共通のヘッダタイプ０Ｂｈを記述
する。ＨＢ１の各ｂｉｔとＨＢ２のＢｉｔ４〜７は将来拡張用として０としている。ＨＢ
２のＢｉｔ０〜３に示すＥｃｏ＿Ｐａｃｋｅｔ＃がフレーム内での識別を示している。図
１５と図１７がヘッダに続けて伝送される２８ｂｙｔｅのデータの一例である。
FIGS. 14 and 16 show an example of the header of a packet, and a common header type 0Bh is described in the first header block HB0 to indicate that the information is related to the compression coding transmission method of the present invention. Each bit of HB1 and
Eco_Packet # shown in 2
図１４のヘッダにおいて、Ｅｃｏ＿Ｐａｃｋｅｔ＃は０ｈを割り当て、図１４のヘッダ
と図１５のデータから構成されるパケットが各フレーム内の共通情報（主圧縮符号情報）
であることを示す。このパケットは垂直ブランキング期間中に配置され、各画像フレーム
に少なくとも１回送信される。以下、図１５のデータの内容を説明する。
In the header of FIG. 14, Eco_Packet # is assigned 0h, and a packet composed of the header of FIG. 14 and the data of FIG. 15 is common information (main compression code information) in each frame
To indicate that This packet is placed during the vertical blanking period and is transmitted at least once for each image frame. The contents of the data in FIG. 15 will be described below.
Ｃｏｌｏｒ＿Ｓａｍｐｌeは、カラーサンプル情報を示し、例えば０がＹＣｂＣｒ輝度
色差信号で４４４フォーマット（以後、ＹＣｂＣｒ４４４と呼ぶ）、１がＹＣｂＣｒ輝度
色差信号で４２２フォーマット（以後、ＹＣｂＣｒ４２２と呼ぶ）、２がＹＣｂＣｒ輝度
色差信号で４２０フォーマット（以後、ＹＣｂＣｒ４２０と呼ぶ）、３がＲＧＢ信号で４
４４フォーマット（以後、ＲＧＢ４４４と呼ぶ）を示し、４〜７は将来拡張用である。４
２２フォーマットや４２０フォーマットではさらにＣｂＣｒのサンプル位置情報を示すＢ
ｉｔを追加で割り当ててもよい。
Color_Sample indicates color sample information. For example, 0 is YCbCr luminance color difference signal 444 format (hereinafter referred to as YCbCr444), 1 is YCbCr luminance color difference signal 422 format (hereinafter referred to as YCbCr422), 2 is YCbCr luminance color difference signal 420 format (hereinafter referred to as YCbCr420), 3 is an RGB signal and 4
44 format (hereinafter referred to as RGB 444), and 4 to 7 are for extension in the future. 4
B indicates CbCr sample position information in 22 format or 420 format
You may assign it additionally.
Ｅｃｏ＿Ｍｅｍは、後述する図１６および図１７で示す主圧縮符号情報の一部を伝送す
るパケットを、圧縮画像データを伝送する有効期間４０６の直前の水平ブランキング期間
に伝送する場合には０とし、圧縮画像データを伝送する有効期間４０６の直後の水平ブラ
ンキング期間に伝送する場合には１としている。
Eco_Mem is set to 0 when transmitting a packet transmitting part of the main compression coding information shown in FIG. 16 and FIG. 17 described later in the horizontal blanking period immediately before the
ＣＤはＣｏｌｏｒ Ｄｅｐｔｈであり、例えば４ｈは各ＹＣｂＣｒ成分８ｂｉｔの計２
４ｂｉｔ Ｃｏｌｏｒ、５ｈは各ＹＣｂＣｒ成分１０ｂｉｔの計３０ｂｉｔ Ｃｏｌｏｒ、
６ｈは各ＹＣｂＣｒ成分１２ｂｉｔの計３６ｂｉｔ Ｃｏｌｏｒ、７ｈは各ＹＣｂＣｒ成
分１６ｂｉｔの計４８ｂｉｔ Ｃｏｌｏｒを示し、その他は将来拡張用である。この定義
はＨＤＭＩが既定するＤｅｅｐ Ｃｏｌｏｒ Ｍｏｄｅの定義に準じている。
CD is the color depth, for example, 4h is a total of 2 bits of each
4bit Color, 5h is a total of 30bit Color of 10bit each YCbCr component,
Reference numeral 6h denotes a total 36-bit Color of 12 bits of each YCbCr component, 7h denotes a total 48-bit Color of 16 bits of each YCbCr component, and the others are for future expansion. This definition conforms to the definition of Deep Color Mode defined by HDMI.
Ｅｃｏ＿ＦＬＭは、フレーム内の全ブロックの圧縮符号方式が同一である場合に１とし
、ブロック毎に設定する場合を０としている。１の場合は、後述するＥｃｏ−ＣＤ０とＥ
ｃｏ−ＣＤ１、Ｅｃｏ−ＣＤ２にそれぞれＹ、Ｃｂ、Ｃｒの圧縮符号方式を記述する。
Eco_FLM is set to 1 when the compression coding method of all blocks in a frame is the same, and 0 is set when setting is performed for each block. In the case of 1, Eco-CD0 and E described later
The compression coding system of Y, Cb, and Cr is described in co-CD1 and Eco-CD2, respectively.
ＣＫ＿ＮとＣＫ＿Ｍは、その比（ＣＫ＿Ｎ／ＣＭ＿Ｍ）が、非圧縮画像データの画素ク
ロックと、圧縮後のデータを伝送する通信路のクロック例えばＴＭＤＳクロックとの周波
数比を示す。例えばＣＭ＿Ｎ＝１でＣＫ＿Ｍ＝２であれば、４ｋ２ｋの場合の非圧縮画像
データの画素クロック５９４ＭＨｚに対して伝送系のＴＭＤＳクロックは１／２の２９７
ＭＨｚとなる。
CK_N and CK_M, the ratio (CK_N / CM_M) indicates the frequency ratio of the pixel clock of the uncompressed image data and the clock of the communication path for transmitting the data after compression, for example, the TMDS clock. For example, if CM_N = 1 and CK_M = 2, the TMDS clock of the transmission system is 1/2 of the pixel clock 594 MHz of uncompressed image data in the case of 4k2k.
It will be MHz.
Ｅｃｏ＿Ｂｌｏｃｋは圧縮ブロックを構成する画素数を示している。 Eco_Block indicates the number of pixels constituting the compression block.
Ｅｃｏ＿ＣＤ０〜Ｅｃｏ＿ＣＤ３は、各画像データ単位ブロックに適用する圧縮符号化
情報の候補を４種類示すものである。図１８に一例を示すように、圧縮する画像データ単
位の圧縮符号情報Ｅｃｏ＿Ｃｏｄｅから４種類を選択する。
Eco_CD0 to Eco_CD3 indicate four types of compression coding information candidates to be applied to each image data unit block. As an example is shown in FIG. 18, four types are selected from compression code information Eco_Code of image data units to be compressed.
図１６のヘッダと図１７のデータからなるパケットは、各水平ブランキング期間に１個
以上伝送される。図１６のヘッダ中のＥｃｏ＿Ｐａｃｋｅｔ＃は、各ラインに伝送される
本パケットのシリアル番号を示すものであり、１から始まり順次１ずつ増やしていく。
One or more packets each including the header of FIG. 16 and the data of FIG. 17 are transmitted in each horizontal blanking period. “Eco_Packet #” in the header of FIG. 16 indicates the serial number of the present packet transmitted to each line, and starts from 1 and sequentially increases by one.
Ｅｃｏ＿ｌeｎｇｔｈ＿０〜Ｅｃｏ＿ｌeｎｇｔｈ＿３９は、有効期間４０６を伝送する
圧縮ブロックのサイズ情報を示している。サイズ情報の一例としては、圧縮ブロックのビ
ットサイズ、バイトサイズがある。また、圧縮ブロックのビットサイズ、バイトサイズの
元となる情報でも良い。例えば、圧縮ブロックサイズＳ＿Ｂｌｏｃｋが３２ｂｉｔから６
４ｂｉｔまでの２飛びの値をとる場合、以下の式で圧縮ブロックのビットサイズを定義す
る方法がある。
（数２）Ｓ＿Ｂｌｏｃｋ＝３２＋（２×Ｅｃｏ＿ｌeｎｇｔｈ＿＃）（＃は０〜３９）
上記例では、Ｅｃｏ＿ｌeｎｇｔｈ＿＃は４ｂｉｔとなる。
Eco_length_0 to Eco_length_39 indicate size information of the compressed block that transmits the
In the case of taking 2 skip values up to 4 bits, there is a method of defining the bit size of the compressed block by the following equation.
(Equation 2) S_Block = 32 + (2 × Eco_length_ #) (# is 0 to 39)
In the above example, Eco_length_ # is 4 bits.
Ｅｃｏ＿ｌeｎｇｔｈ＿＃は、Ｙ、Ｃｂ、Ｃｒ毎に規定しても良いし、ＹとＣｂとＣｒ
の圧縮ブロックサイズを足し合わせた値で規定しても良い。後者の場合、Ｅｃｏ＿ｌeｎ
ｇｔｈ＿＃の伝送量を１／３に削減することができる。
Eco_length_ # may be defined for each of Y, Cb and Cr, Y, Cb and Cr
It may be defined by the value which added the compression block size of. In the latter case, Eco_len
The transmission amount of gth_ # can be reduced to 1/3.
圧縮ブロック単位に規定される圧縮符号情報は、副圧縮符号情報として、圧縮画像デー
タと共に、有効期間４０６中に伝送する。副圧縮符号情報の種類としては、Ｅｃｏ＿Ｅｒ
ｒｏｒ＿０〜３９やＣｏｄｅ＿０〜Ｃｏｄｅ＿３９がある。
The compression code information defined in units of compression blocks is transmitted as sub-compression code information in the
There are ror_0-39 and Code_0-Code_39.
Ｅｃｏ＿Ｅｒｒｏｒ０〜Ｅｃｏ＿Ｅｒｒｏｒ３９は、エラー符号化方式を示している。
エラー符号化方式は、エラー訂正符号生成部１３７において、有効期間４０６に伝送する
データに対して演算するエラー訂正符号化の方式である。エラー訂正符号化方式の一つと
して、ＣＲＣ（Cyclic Redundancy Check）方式やパリティチェック方式などがある。
Eco_Error0 to Eco_Error39 indicate an error coding method.
The error coding scheme is an error correction coding scheme in which the error correction
Ｃｏｄｅ＿０〜Ｃｏｄｅ＿３９は、図１５のＥｃｏ＿ＣＤ０〜Ｅｃｏ＿ＣＤ３で記述し
た４種類の圧縮符号化情報から選択した番号を、各画像データ単位ブロックにおいて、各
Ｙ、Ｃｂ、Ｃｒ成分を順番に記述する。例えば、最初の画像データ単位ブロックのＹ成分
の圧縮符号情報を示すＣｏｄｅ＿０が１であれば、Ｅｃｏ＿ＣＤ１を指す。Ｅｃｏ＿ＣＤ
１が１０を示していれば、図１８から原画像のデータの４４４フォーマットＹ成分を差分
符号化方式で圧縮したデータであることを示している。
In Code_0 to Code_39, Y, Cb, and Cr components are sequentially described in each image data unit block, with numbers selected from the four types of compression encoding information described in Eco_CD0 to Eco_CD3 in FIG. For example, if Code_0 indicating the compression code information of the Y component of the first image data unit block is 1, it indicates Eco_CD1. Eco_CD
If 1 indicates 10, it is shown in FIG. 18 that the 444 format Y component of the data of the original image is data compressed by the differential encoding method.
図４に示した垂直２ラインを画像データ単位ブロックとする場合は、１ライン目のＣｏ
ｄｅ＿０が画像データ単位ブロック５０３の圧縮符号情報を、２ライン目のＣｏｄｅ＿０
が画像データ単位ブロック５０４の圧縮符号情報を示す。
When two vertical lines shown in FIG. 4 are used as image data unit blocks, the Co of the first line is
De_0 is the compression code information of the image
Indicates compression code information of the image
図１５のＣｏｌｏｒ＿Ｓａｍｐｌeが４４４フォーマットを示している場合は、Ｃｏｄ
ｅ＿１は、第１画像データ単位ブロックのＣｂの圧縮符号情報、Ｃｏｄｅ＿２は第１画像
データ単位のＣｒの圧縮符号情報、Ｃｏｄｅ＿３は第２画像データ単位ブロックのＹの圧
縮符号情報を示す。Ｃｏｌｏｒ＿Ｓａｍｐｌeが４２０フォーマットを示している場合は
、Ｃｏｄｅ＿１は、第２画像データ単位ブロックのＹの圧縮符号情報、Ｃｏｄｅ＿２は第
１と第２画像データ単位のＣｂ（偶数ラインではＣｒ）の圧縮符号情報、Ｃｏｄｅ＿３は
第３画像データ単位ブロックのＹの圧縮符号情報を示す。Ｃｏｌｏｒ＿Ｓａｍｐｌｅが４
２２フォーマットを示している場合は、Ｃｏｄｅ＿１は、第１と第２画像データ単位ブロ
ックのＣｂの圧縮符号情報、Ｃｏｄｅ＿２は第第２画像データ単位のＹの圧縮符号情報、
Ｃｏｄｅ＿３は第１と第２画像データ単位ブロックのＣｂの圧縮符号情報を示す。
If Color_Sample in Figure 15 indicates 444 format, then Cod
e_1 indicates Cb compression code information of the first image data unit block, Code_2 indicates Cr compression code information of the first image data unit, and Code_3 indicates Y compression code information of the second image data unit block. When Color_Sample indicates the 420 format, Code_1 is Y compression code information of the second image data unit block, Code_2 is Cb compression code information of the first and second image data units (Cr for even lines), Code_3 indicates Y compression code information of the third image data unit block. Color_Sample is 4
When the 22 format is indicated, Code_1 is compression code information of Cb of the first and second image data unit blocks, Code_2 is compression code information of Y of the second image data unit,
Code_3 indicates Cb compression code information of the first and second image data unit blocks.
また、Ｃｏｄｅ＿０が０であれば、Ｅｃｏ＿ＣＤ０を指し、Ｅｃｏ＿ＣＤ０が６を示し
ていれば図１８から、原画像のデータの４４４フォーマット各Ｙ、Ｃｂ、Ｃｒ成分１２ｂ
ｉｔデータを４２０フォーマット８ビットに間引いていることを示している。この場合は
、Ｙ成分のＣｏｄｅ＿０のみでＣｂとＣｒの伝送形態が決まる為、Ｃｂ成分を示すＣｏｄ
ｅ＿１やＣｒ成分を示すＣｏｄｅ＿２の情報は不要であり、０を記述しておくよい。
Further, if Code_0 is 0, it indicates Eco_CD0, and if Eco_CD0 indicates 6, from FIG. 18, Y, Cb, Cr component 12b of the 444 format of the data of the original image
It indicates that it data is thinned to 420
Information of Code_1 indicating e_1 and Cr component is unnecessary, and 0 may be described.
さて、図１に図示していないが、画像受信装置２００には画像受信装置２００の性能を
示すＥＤＩＤ（Enhanced Extended Display Identification Data）を格納したＲＯＭが
搭載されている。このＲＯＭの中に画像受信装置２００が圧縮伸張に対応しているか否か
を判別する情報を付加してもよい。これにより、画像伝送装置１００は、画像受信装置２
００のＥＤＩＤを格納したＲＯＭから、圧縮伸張に対応しているか否かを判別する情報を
読出し、対応している装置であれば、圧縮した画像データを伝送し、非対応の装置であれ
ば、圧縮せず従来のサイズで画像を送信することにより、圧縮処理に非対応の画像受信装
置とも互換性を保つことができる。また、有効期間４０６に圧縮符号情報を伝送するため
のエラー訂正符号化方式に対応しているか否かを判別する情報を読出し、対応している装
置であれば、エラー訂正符号化処理を行い、圧縮符号情報として伝送し、非対応の装置で
あれば、エラー訂正符号化処理を行わずに送信することにより、圧縮処理に非対応の画像
受信装置とも互換性を保つことができる。また、非対応の装置の場合、ブランキング期間
４０７におけるパケットのエラー訂正機能を用いて伝送エラーに対する耐性を高めても良
い。また、画像受信装置が圧縮に非対応であり、従来の画像サイズであることや、エラー
訂正符号化に非対応の旨を表示部２０８に表示することにより、ユーザに通知することが
きる。
Although not shown in FIG. 1, the
Information for determining whether or not compression / decompression is supported is read from the ROM storing the EDID of 00, and if it is a compatible device, compressed image data is transmitted, and if it is a non-compliant device, By transmitting the image in the conventional size without compression, it is possible to maintain compatibility with an image receiving apparatus that does not support compression processing. Further, information for determining whether or not the error correction coding method for transmitting compression code information is valid in the
このＥＤＩＤの記述例を図１９に示す。図１９は、ＨＤＭＩ−ＶＳＤＢと称される領域
へ拡張した例を示している。
An example of description of this EDID is shown in FIG. FIG. 19 shows an example of extension to the area called HDMI-VSDB.
６Ｂｙｔｅ目のＢｉｔ２に本実施例の圧縮符号化伝送方式への対応可否を示すＥｃｏ＿
ｔｒａｎｓｆｅｒフラグを設ける。本領域は予約領域として扱われてきたので、非対応の
レガシー機器では０と記載されており、対応機器のみ１と記載することによって後方互換
性を維持できる。このＥｃｏ＿ｔｒａｎｓｆｅｒフラグが１の場合、Ｂｙｔｅ９とＢｙｔ
ｅ１０の記述が有効となる。
Eco_indicates whether or not the compression encoded transmission method of this embodiment can be supported at
Set the transfer flag. Since this area has been treated as a reserved area, it is described as 0 for non-compliant legacy devices, and backward compatibility can be maintained by describing only the compliant devices. If this Eco_transfer flag is 1,
The description of e10 is valid.
Ｂｌｏｃｋ＿６４とＢｌｏｃｋ＿１２８は、圧縮する画像データ単位ブロックの大きさ
がそれぞれ６４画素、１２８画素に対応することを示すフラグである。画像データ単位ブ
ロックの大きさ３２画素は本圧縮画像データ伝送対応における必須モードと定義して、Ｅ
ＤＩＤ記述スペース節約のため、あえて表記していない。
Block_64 and Block_128 are flags indicating that the size of the image data unit block to be compressed corresponds to 64 pixels and 128 pixels, respectively. The
DID Description Not shown to save space.
Ｅｃｏ−Ｃｏｄｅ１〜４は、それぞれ、図１８に一例を示した圧縮符号化方式、Ｗａｖ
ｅｌｅｔ変換、ランレングス符号化、ハフマン符号化、差分符号化に対応していることを
示すフラグである。
Each of
It is a flag indicating that it corresponds to elet transform, run length coding, Huffman coding, and differential coding.
ＣＬＫ＿１、ＣＬＫ＿３／４、ＣＬＫ＿１／２は、それぞれ非圧縮画像データクロック
に対する、ＴＭＤＳ伝送クロックの周波数が１倍、３／４倍、１／２倍となるモードに対
応していることを示すフラグである。
CLK_1, CLK_3 / 4, and CLK_1 / 2 are flags indicating that the frequency of the TMDS transmission clock is 1 times, 3/4 times, and 1/2 times that of the uncompressed image data clock, respectively. is there.
Ｅｃｏ＿Ｅｒｒｏｒ＿１〜４は、それぞれに規定されたエラー符号化方式に対応してい
る場合には１を、非対応の場合には０となるフラグである。
Eco_Error_1 to 4 are flags that are 1 when they correspond to the error coding method defined in each of them, and 0 when they are not.
Ｅｃｏ＿Ｍｅｍは、主圧縮符号情報が、圧縮画像データを伝送する有効期間４０６の直
前の水平ブランキング期間に伝送する場合に対応している場合には１とし、圧縮画像デー
タを伝送する有効期間４０６の直後の水平ブランキング期間に伝送する場合には２として
いる。３は共に対応している場合を示し、０はどちらにも対応していない場合を示す。
Eco_Mem is set to 1 when the main compression code information corresponds to the case of transmitting the compressed image data in the horizontal blanking period immediately before the
また、画像伝送装置１００を携帯機器として使用する場合に、バッテリー駆動の装置と
なるため、画像伝送装置１００の消費電力が連続使用時間に影響する。この場合、画像デ
ータを圧縮して伝送しデータ伝送量を下げ、消費電力を低減できる。この効果は、画像伝
送装置１００の動作モードとして、例えば「省電力モード」などの機能を付加し、外部か
ら電源が供給されている場合は、非圧縮の画像データで伝送し、バッテリーで駆動されて
いる場合は、画像データを圧縮して伝送することにより、連続使用時間を長く設定するこ
とができる。
In addition, when the
図２０は、データ受信処理部２０５の構成の一例を示すブロック図である。入力部２２
０は、画像送信装置１００のレベル変換部１７５にて変換された信号をレベル変換部２２
に出力する。
FIG. 20 is a block diagram showing an example of the configuration of the data
0 is the
Output to
レベル変換部２２４は、画像送信装置１００でレベル変換された信号をデジタル信号に
変換しデシリアライザ部２２５に出力する。レベル変換の一例としては、差動信号のシン
グルエンド信号への変換がある。入力部２２１は、画像送信装置１００から出力されたク
ロックを入力しＰＬＬ２２６に出力する。ＰＬＬ２２６は、入力されたクロックの１０倍
のクロックを生成し、デシリアライザ部２２５に出力する。またＰＬＬ２２６は、画像受
信装置２００内で使用する画素クロックを出力部２２２から出力する。原画像の非圧縮画
像データの画素クロックを画像表示装置２００内で用いる場合は、入力クロックを図１３
のパケットデータに基づき、ＰＬＬ２２６が（ＣＫ＿Ｍ／ＣＫ＿Ｎ）倍に逓倍したクロッ
クを出力部２２３から出力する。
The
The PLL 226 outputs a clock multiplied by (CK_M / CK_N) times from the
デシリアライザ部２２５は、シリアル化されたデータをＰＬＬ２２６からのクロックで
パラレル化し、出力部２２２から出力する。デシリアライザ部２２５は、１０倍のクロッ
クのデータをパラレル化して所定の例えばＴＭＤＳ復号により８ｂｉｔパラレルデータと
して出力部２２２から出力する。
The
図２１は、伸張処理部２０６の構成の一例を示すブロック図である。また、図２６は、
図４に示す圧縮ブロックに対する伸張処理部２０６の処理概念を示すタイミング説明図で
ある。
入力部２３０は、伸張処理部２０６のデータ入力部である。入力部２３０に入力される
データには、画像データの同期信号を示すＨＳＹＮＣ（図２６（ａ））およびＶＳＹＮＣ
と、有効期間４０６に圧縮画像データおよび副圧縮符号情報８１２と８１４、水平ブラン
キング期間４０４に主圧縮符号情報８１１と８１３がある。入力部２３１には復元後の非
圧縮画像データの画素クロックや、圧縮画像データクロック等が入力される。
FIG. 21 is a block diagram showing an example of the configuration of the
FIG. 5 is an explanatory timing chart showing a processing concept of the
The
There are compressed image data and
ＨＳＹＮＣ、ＶＳＹＮＣ、圧縮画像データクロックと復元後の非圧縮画像データの画素
クロックは、タイミング生成部２３６に供給される。タイミング生成部２３６は、入力さ
れたＨＳＹＮＣ、ＶＳＹＮＣによりカウンタを制御し、垂直ブランキング期間４０１、垂
直有効期間４０２、水平ブランキング期間４０４、水平有効期間４０５、有効期間４０６
などのタイミングを始め、伸張処理部内の各ブロックの制御に必要なタイミングを生成し
出力する。
The HSYNC, VSYNC, compressed image data clock and pixel clock of uncompressed image data after restoration are supplied to the
And the like, and generates and outputs timings necessary for controlling each block in the decompression processing unit.
圧縮符号情報抽出部２３３は、水平ブランキング期間に送られてくる各画像データ単位
ブロックの圧縮符号情報を抽出して圧縮符号情報記憶部２３４に記憶させる。
The compression code
その記憶期間を図２６（ｃ）に示す。主圧縮符号情報８１１は、続く圧縮画像データ８
１２に対応したデータであるので、同情報を２ライン目の主圧縮符号情報８１３が来るま
での記憶期間８１５で十分である。しかし、例えば２ラインの画像データを垂直圧縮させ
ている場合は、垂直伸張用圧縮符号情報８１６だけは２ライン目の圧縮画像データを伸張
させる期間まで保持させる必要がある。
The storage period is shown in FIG. The main compression code information 811 is the following
Since the data corresponds to T.12, the storage period 815 until the main
水平有効期間内に送られてくる圧縮画像データはエラー訂正部２３５で伝送系のエラー
訂正処理を行う。エラー訂正部２３５は、圧縮画像データ単位ごとに、エラー訂正符号生
成部１３７と同じエラー訂正符号を演算する。前記演算結果と圧縮符合情報抽出部２３３
から入力されるエラー訂正符号とを比較し、比較結果が異なっている場合は、エラー訂正
処理を行う。エラー訂正処理の一例としては、ＣＲＣ演算がある。また、エラー検出のみ
を行い以降の処理でエラーを補間してもよい。
An
Are compared with the error correction code input from S. If the comparison result is different, error correction processing is performed. An example of the error correction process is a CRC operation. Also, error detection may be performed alone to interpolate errors in the subsequent processing.
入力された圧縮画像データは、伸張部A２３７、伸張部B２３８、伸張部C２３９に供給
される。伸張部A２３７、伸張部B２３８、伸張部C２３９は、圧縮符号情報記憶部２３４
の情報を基に、入力された圧縮画像データに対して、それぞれ異なる伸張処理を行い、伸
張された画像データを生成し、選択部２６１へ出力する。
The input compressed image data is supplied to the
On the basis of the above information, the input compressed image data is subjected to different expansion processing to generate expanded image data, which is output to the
図２６（ｄ）（ｅ）は、図４に示す圧縮ブロックに対して、伸張部Ａ２３７で水平伸張
処理、伸張部Ｂ２３８で垂直伸張処理を行った場合の各伸張部の出力データを示す。水平
伸張画像データ８１８および８１９は伸張部Ａ２３７の出力データ、垂直伸張画像データ
８２０および８２１は伸張部Ｂ２３７の出力データを示す。
FIGS. 26 (d) and 26 (e) show output data of each decompression unit when horizontal decompression processing is performed by the
選択部２６１は、圧縮符号情報記憶部２３４の情報に基づき、入力部２３０へ入力され
る画像データと、伸張部A２３７の出力と、伸張部B２３８の出力と、伸張部C２３９の出
力とを適宜選択して、復元画像データ８２４として、出力部２３２へ出力する（図２６（
ｆ））。
The
f)).
図２５は、図３に示す圧縮ブロックに対して、伸張部Ａ２３７で水平伸張処理を行った
場合の伸張処理部２０６の処理概念を示すタイミング説明図である。
FIG. 25 is an explanatory timing diagram showing a processing concept of the
入力部２３０は、伸張処理部２０６のデータ入力部である。入力部２３０に入力される
データには、画像データの同期信号を示すＨＳＹＮＣ（図２６（ａ））およびＶＳＹＮＣ
と、有効期間４０６に圧縮画像データおよび副圧縮符号情報８０２と８０４、水平ブラン
キング期間４０４に主圧縮符号情報８０１と８０３がある。入力部２３１には復元後の非
圧縮画像データの画素クロックや、圧縮画像データクロック等が入力される。
The
There are compressed image data and
圧縮符号情報抽出部２３３は、水平ブランキング期間に送られてくる各画像データ単位
ブロックの圧縮符号情報を抽出して圧縮符号情報記憶部２３４に記憶させる。
The compression code
その記憶期間を図２５（ｃ）に示す。主圧縮符号情報８０１は、続く圧縮画像データ８
０２に対応したデータであるので、同情報を２ライン目の主圧縮符号情報８０３が来るま
での記憶期間８０５で十分である。
The storage period is shown in FIG. The main compression code information 801 is the following
Since the data corresponds to 02, the storage period 805 until the main compression code information 803 of the second line comes is sufficient for the same information.
入力された圧縮画像データは、伸張部A２３７にて水平伸張処理されて、伸張された画
像データである水平伸張画像データ８０６および８０７を生成し、選択部２６１へ出力す
る（図２５（ｄ））。
The input compressed image data is horizontally expanded at the
選択部２６１は、圧縮符号情報記憶部２３４の情報に基づき、入力部２３０へ入力され
る画像データと、伸張部A２３７の出力と、伸張部B２３８の出力と、伸張部C２３９の出
力とを適宜選択して、復元画像データ８０８および８０９として、出力部２３２へ出力す
る（図２５（ｆ））。
The
図２２は、伸張処理部２０６の構成の一例を示すブロック図である。本例は、副圧縮符
号情報を、水平ブランキング期間４０４ではなく、有効期間４０６内の圧縮画像データと
一緒に伝送する方式を採用した場合の伸張処理部の一例である。
FIG. 22 is a block diagram showing an example of the configuration of the
有効期間４０６内に送るべきデータが圧縮画像データだけでなく圧縮符号情報も一緒に
送る場合、圧縮方式によっては、圧縮画像データの圧縮率を下げざるを得なければならな
い場合があり、この場合、復元時の画像の画質劣化が大きくなる懸念がある。その対策と
して、水平ブランキング期間を、音声データ伝送パケット２個分を送れる程度まで縮小し
、水平有効期間を広げる。４ｋ２ｋ画像データを非圧縮画像の画素クロック５９４ＭＨｚ
の半分の２９７ＭＨｚクロックで伝送する場合、実施例１では、水平有効期間１９２０、
水平ブランキング期間２８０であった。音声パケット２個分の伝送期間と前後のガードバ
ンドを含めて水平ブランキング期間は９６程度あればよいので、残り１８４で水平有効期
間を増やせる。水平有効期間１９２０を約９．５％程度拡大できる効果がある。
When data to be sent within the
In the first embodiment, the horizontal
It was a horizontal blanking period 280. Since the horizontal blanking period may be about 96 including the transmission period for two voice packets and the guard band before and after, the horizontal effective period can be increased by the remaining 184. The horizontal
本例の場合、水平同期信号の位置や幅などが所定の非圧縮画像データの標準タイミング
からずれる為、受信側で非圧縮画像データ再生時に、画像データに付与されているＳＶＤ
（Short Video Descriptor）メタデータを参考にして、標準タイミングフォーマットとな
るようタイミングを復元するとよい。
In the case of this example, since the position, width, etc. of the horizontal synchronization signal are deviated from the standard timing of the predetermined uncompressed image data, the SVD given to the image data at the time of reproduction of the uncompressed image data on the receiving side.
(Short Video Descriptor) Referring to the metadata, timing may be restored so as to be a standard timing format.
図２２では、図２１と同様な機能を持つブロックには同じ番号を付している。その差異
は、エラー訂正回路２５５の出力部に第２の映像符号情報抽出部２５０が加わっている点
である。
図２１の例では、圧縮符号情報抽出部２３３は垂直ブランキング期間内の圧縮符号情報
（図１４と図１５のパケット）と、水平ブランキング期間内の圧縮符号情報（図１６と図
１７のパケット）を抽出していた。本例では、圧縮符号情報抽出部２３３は垂直ブランキ
ング期間または水平ブランキング期間に伝送される主圧縮符号情報のみ抽出し、圧縮符号
情報記憶部２３４で記憶する。
In FIG. 22, blocks having the same functions as in FIG. 21 are assigned the same reference numerals. The difference is that the second video code
In the example of FIG. 21, the compression code
本例では、圧縮符号情報がブランキング期間内でエラー訂正処理が施されているパケッ
トで送る代わりに、他の圧縮画像データと同様なエラー訂正処理を加えている。このため
、第２の圧縮符号情報抽出部２５０から出力されるエラー訂正部２５５のエラー訂正処理
後の主圧縮符号情報と、圧縮符号情報記憶部２３４から出力される副圧縮符号情報を、伸
張部A２３７、伸張部B２３８、伸張部C２３９、選択部２５１へ出力している。
In this example, instead of sending compressed code information in a packet subjected to error correction processing within a blanking period, error correction processing similar to that of other compressed image data is added. Therefore, the main compression code information after the error correction processing of the error correction unit 255 output from the second compression code
本例では、圧縮画像データと圧縮符号情報がタイミング的に近接しているので、１水平
周期に渡る圧縮符号情報記憶は、フレーム内共通の圧縮符号情報を除いて不要となるので
、回路規模を削減できる効果がある。
In this example, since the compressed image data and the compression code information are close in timing, the compression code information storage over one horizontal period becomes unnecessary except for the compression code information common in the frame, so the circuit scale There is an effect that can be reduced.
図２３は、伸張処理部２０６の構成の別の一例を示すブロック図である。
FIG. 23 is a block diagram showing another example of the configuration of the
図２３では、図２１と同様な機能を持つブロックには同じ番号を付している。その差異
は、各伸張部の前段に、選択部２６０が加わっている点である。
In FIG. 23, blocks having the same functions as those in FIG. 21 are assigned the same reference numerals. The difference is that the
選択部２６１は、圧縮符号情報記憶部２３４の情報に基づき、入力部２３０へ入力され
る画像データと、伸張部A２３７の出力と、伸張部B２３８の出力と、伸張部C２３９の出
力とを適宜選択して、出力部２３２へ出力する。選択部２６１は、さらに、伸張部A２３
７の出力と、伸張部B２３８の出力と、伸張部C２３９の出力のいずれかを選択して、選択
部２６０に出力することができる。本構成の方式を採用することで、入力部２３０に入力
される圧縮画像データに対して、２方式以上の伸張処理を行うことができる。
The
It is possible to select one of the output of 7, the output of the
また、図示していないが、伸張部A２３７の出力と、伸張部B２３８の出力と、伸張部C
２３９の出力のいずれかを選択して、圧縮符号情報記憶部２３４に出力してもよい。この
構成をとることで、例えば、図５の圧縮された副圧縮符号情報６６０の伸張処理を行うこ
とができる。
Although not illustrated, the output of the
One of the 239 outputs may be selected and output to the compression code
図２４は、伸張処理部２０６の構成の別の一例を示すブロック図である。図２４では、
図２２と同様な機能を持つブロックには同じ番号を付している。その差異は、入力部２３
０の後段に記憶部２７０が加わっている点である。
FIG. 24 is a block diagram showing another example of the configuration of the
Blocks having the same functions as those in FIG. 22 are assigned the same reference numerals. The difference is the
The point is that the
選択部２７１は、図２２で示した選択部２５１の機能に加えて、選択したデータを記憶
部２７０に出力する機能を有する。記憶部２７０は、入力部２３０から入力される主圧縮
符号情報、副圧縮符号情報、圧縮画像データ、および選択部２７１から供給される伸張デ
ータを一時的に記憶し、後段のブロックへ供給するブロックである。このような構成とす
ることで、入力部２３０に入力されるデータに対して、複数段の伸張処理が可能となる。
１段の伸張処理のみの場合には、選択部２７１から記憶部２７０へのデータ供給はなくて
もよい。
In the case of only one stage of expansion processing, data may not be supplied from the
この構成をとることで、例えば、図８や図１１で示す方法で圧縮された圧縮画像データ
に対する伸張処理を行うことが可能となる。
With this configuration, for example, it is possible to perform decompression processing on compressed image data compressed by the method shown in FIG. 8 and FIG.
以下、実施例１に記載の画像伝送装置および画像受信装置の別の実施形態について説明
する。
Hereinafter, another embodiment of the image transmission device and the image reception device described in the first embodiment will be described.
図２９はシリアライザ１８４の入力および出力波形の一例を示す図である。シリアライ
ザ１８４は、入力されたＹＣｂＣｒ輝度色差信号の画像データ（以後、ＹＣｂＣｒ画像デ
ータと呼ぶ）、またはＲＧＢ信号の画像データ（以後、ＲＧＢ画像データと呼ぶ）に対す
る圧縮画像データを、１０逓倍したクロックで１ｂｉｔのデータ３本に各々シリアル化し
、レベル変換部１７５に出力する。
FIG. 29 is a diagram showing an example of input and output waveforms of the
シリアル化の例としては、８ｂｉｔのＹＣｂＣｒ輝度色差信号またはＲＧＢ信号の画像
データを１０逓倍のクロックで先頭からＭＳＢもしくはＬＳＢの順で出力する。
As an example of serialization, image data of an 8-bit YCbCr luminance color difference signal or RGB signal is output in the order of MSB or LSB from the top with a clock of 10 multiplication.
レベル変換部１８５は、標準化されたデータ転送フォーマットに変換した信号を出力部
１８２経由で出力する。標準化されたデータ転送フォーマットの一例としては、ＴＭＤＳ
方式の差動レベルの信号形式などがある。この形式において画像のブランキング期間では
、画像データを送信する必要がないため、シリアライザ１８４でシリアル化するデータを
１０逓倍のクロック中の４ｂｉｔ分のみ使用し、残りの６ｂｉｔを使用しないことにより
、伝送エラーに対して強度を増し、画像データ以外のデータを転送することができる。ま
た、２種類のクロックを使用することにより、ＰＬＬ１８６で生成するクロックについて
画像データを送信するクロックの１／２以下に落とすことにより、同じ効果を得ることが
できる。
The
There is a signal format of the differential level of the system. Since it is not necessary to transmit image data in the blanking period of the image in this format, the data to be serialized by the
図３０は、シリアライザ１８４のデータ構成の一例を示す図である。シリアライザ１８
４の出力は３系統あり、そのうちの１系統は同期信号（HSYNC,VSYNC）、パケットヘッダ
と固定ｂｉｔで構成される。残りの２系統を使用してデータを転送する構成となる。パケ
ットのサイズは、転送クロックで３２サイクル分とする。
FIG. 30 is a diagram showing an example of the data configuration of the
There are three outputs of 4 and one of them is composed of a synchronization signal (HSYNC, VSYNC), a packet header and a fixed bit. The remaining two systems are used to transfer data. The size of the packet is 32 cycles by the transfer clock.
図３１は、水平ブランキング期間に重畳した音声データのパケット構成の一例を示す図
である。音声パケットは、シリアライザにデータ転送する２系統の同一ｂｉｔを使用して
７Ｂｙｔｅのデータを生成し、前記データに対してパリティチェックなどの誤り訂正符号
を付けてサブパケットを構成する。前記サブパケットを４系統とパケットヘッダ４Ｂｙｔ
ｅのフォーマットで水平ブランキング期間のパケットを構成する。
FIG. 31 is a diagram showing an example of a packet configuration of audio data superimposed in the horizontal blanking period. For voice packets, 7 bytes of data are generated using the same bit of two systems for data transfer to the serializer, and an error correction code such as parity check is added to the data to form a subpacket. 4 sub-packets and 4 header packet headers
Construct a horizontal blanking interval packet in e format.
この構成で、サブパケットのデータに対しては誤り訂正符号が入っているため、伝送路
で発生したエラーに対して補正ができエラー耐性が強くなる。また、サブパケットのデー
タ転送用のデータは、物理的に異なる２つのチャンネルにより千鳥に構成しているため、
片側のチャンネルでバースト的に発生したエラーに対して、他方のチャンネルが影響され
ないため、データエラーの補正を行うことができる。エラーの訂正率は、水平有効期間が
１０−９に対して、水平ブランキング期間は１０−１４の改善効果がある。
In this configuration, since an error correction code is contained in the data of the subpacket, an error occurring in the transmission path can be corrected, and the error resistance is enhanced. Also, since data for subpacket data transfer is configured in a staggered manner by two physically different channels,
Data errors can be corrected because the other channel is not affected for errors that occur bursty in one channel. The error correction rate has an improvement effect of 10 -14 for the horizontal blanking period as compared to 10 -9 for the horizontal effective period.
圧縮画像のエラー訂正符号を上記エラー耐性の高いパケットとして伝送すると良い。伝
送できるパケット数の例を、水平期間の画素数が２２００、水平有効期間の画素数が１９
２０であった場合について説明する。なお、画像形式は、ＹＣｂＣｒ４２２を例に説明す
る。
It is preferable to transmit the error correction code of the compressed image as the above-mentioned error resistant packet. As an example of the number of packets that can be transmitted, the number of pixels in the horizontal period is 2200, and the number of pixels in the horizontal effective period is 19
The case of 20 will be described. The image format will be described taking YCbCr 422 as an example.
圧縮する画像のサイズを６４画素（輝度３２画素、色差３２画素）とすると、１ライン
当たり６０個のエラー訂正符号（２Ｂｙｔｅ）のサイズは１２０Ｂｙｔｅ必要となる。
Assuming that the size of the image to be compressed is 64 pixels (
１パケット当たり２８Ｂｙｔｅ転送できる容量があるため、５パケットあれば転送でき
るサイズとなる。水平ブランキング期間は２８０画素あるため、８パケットは重畳可能で
ある。この構成により音声パケットに１９２ｋＨｚ、８ｃｈ、ＬＰＣＭ音声伝送として最
大２パケット与えたとしても、前述のエラー訂正符号最大５パケットを水平期間に送信す
ることが可能となる。
Since there is a capacity capable of transferring 28 bytes per packet, the size can be transferred with 5 packets. Since the horizontal blanking period is 280 pixels, eight packets can be superimposed. This configuration makes it possible to transmit the above-mentioned maximum 5 packets of error correction code in the horizontal period even if the audio packet is provided with 192 kHz, 8 ch, and up to 2 packets as LPCM audio transmission.
データ転送部１１５に入力されたＲＧＢ画像データに対する圧縮画像データを、圧縮ブ
ロック単位で、それぞれ決められたＴＭＤＳチャンネルに出力する場合、圧縮ブロック間
で、圧縮画像データの非伝送期間が発生する。ライン単位で考えた場合、非圧縮時と比較
して、水平有効期間を大幅に削減することができないという課題がある。
When compressed image data for RGB image data input to the
図３２は、データ転送部１１５に入力されたＲＧＢ画像データに対する圧縮画像データ
を、ＴＭＤＳチャンネル０、ＴＭＤＳチャンネル１、ＴＭＤＳチャンネル２に出力する場
合の各チャネルにおける出力波形の一例である。
FIG. 32 is an example of an output waveform in each channel when compressed image data for RGB image data input to the
本実施例では、ＲＧＢ画像データに対して、Ｒ、Ｇ、Ｂ各成分毎に圧縮処理を行い、そ
れぞれＲ圧縮画像データ、Ｇ圧縮画像データ、Ｂ圧縮画像データが生成される場合につい
て説明する。図中のＣＲ０とＣＲ１はそれぞれサブ圧縮ブロックにおける圧縮画像データ
であり、圧縮ブロックは、ＣＲ０とＣＲ１で構成される。ＣＲ２は次の圧縮ブロックの先
頭サブブロックである。ＣＧ０，ＣＧ１，ＣＧ２，ＣＢ０，ＣＢ１，ＣＢ２についても前
記ＣＲ０、ＣＲ１、ＣＲ２と同様である。
In this embodiment, compression processing is performed on each of R, G, and B components for RGB image data, and R compressed image data, G compressed image data, and B compressed image data are generated, respectively. CR0 and CR1 in the figure are compressed image data in the sub compression block, respectively, and the compression block is composed of CR0 and CR1. CR2 is the first subblock of the next compressed block. The CG0, CG1, CG2, CB0, CB1, and CB2 are also similar to the CR0, CR1, and CR2.
本実施例では、ＴＭＤＳチャンネル０に、Ｒ圧縮画像データをビット単位で詰めて伝送
を行うことにより、サブ圧縮ブロック、圧縮ブロック間における、圧縮画像データの非伝
送期間を削減することが可能となる。
In this embodiment, it is possible to reduce the non-transmission period of compressed image data between the sub-compression block and the compression block by stuffing the R-compressed image data in bit units into the
図３５は、データ転送部１１５に入力されたＲＧＢ画像データに対する圧縮画像データ
を、ＴＭＤＳチャンネル０、ＴＭＤＳチャンネル１、ＴＭＤＳチャンネル２に出力する場
合の各チャネルにおける出力波形の別の一例である。
FIG. 35 is another example of an output waveform in each channel when compressed image data for RGB image data input to the
本実施例では、サブ圧縮ブロック１３００，１３０１，１３０２，１３０５，１３０６
，１３０９，１３１０が、８ｂｉｔで割り切れない場合には、終端にスタッフィングデー
タ１３０３、１３０４、１３０７、１３０８、１３１１を付加することで、サブ圧縮ブロ
ック先頭ｂｉｔが常にチャネルの先頭ｂｉｔに位置するようにしている。これにより、画
像受信装置側でのサブ圧縮ブロックの受信回路を簡略化することが可能となる。本例では
、サブ圧縮ブロック単位でスタッフィングデータを付加したが、図３６に示すように、圧
縮ブロック単位で行っても良い。
In this embodiment, the sub compression blocks 1300, 1301, 1302, 1305, 1306
, 1309, 1310 can not be divided by 8 bits, stuffing
図３２および図３５で説明した実施例では、データ転送部１１５に入力されたＲＧＢ画
像データに対する圧縮画像データを、それぞれ決められたＴＭＤＳチャンネルに出力する
ため、伝送される圧縮画像データが占める伝送帯域は、圧縮後のデータ量が最も多いＴＭ
ＤＳチャンネルに制限され、有効期間が長くなるという課題がある。
In the embodiment described with reference to FIGS. 32 and 35, since the compressed image data for the RGB image data input to the
There is a problem that it is limited to the DS channel and the effective period becomes long.
図３３は、データ転送部１１５に入力されたＲＧＢ画像データに対する圧縮画像データ
の各成分であるＲ圧縮画像データ、Ｇ圧縮画像データ、Ｂ圧縮画像データを、ＴＭＤＳチ
ャンネル０、ＴＭＤＳチャンネル１、ＴＭＤＳチャンネル２に出力する場合の各チャネル
における出力波形の別の一例である。
FIG. 33
本実施例では、サブ圧縮ブロック単位で、Ｒ圧縮画像データ、Ｇ圧縮画像データ、Ｂ圧
縮画像データの順に、ＴＭＤＳチャンネル０、ＴＭＤＳチャンネル１、ＴＭＤＳチャンネ
ル２に順次、インタリーブして出力する。ここでは、Ｒ圧縮画像データＣＲ０が１８ｂｉ
ｔ、Ｇ圧縮画像データＣＧ０が３７ｂｉｔ、Ｂ圧縮画像データＣＢ０が８ｂｉｔ、Ｒ圧縮
画像データＣＲ１が２０ｂｉｔ、Ｇ圧縮画像データＣＧ１が１８ｂｉｔ、Ｂ圧縮画像デー
タＣＢ１が１４ｂｉｔの場合を例にとっている
上記出力方式とすることで、データ転送部１１５に入力されたＲＧＢ画像データに対す
る圧縮画像データを、３つのＴＭＤＳチャンネルに平均的に伝送することができるため、
圧縮画像データを伝送するための有効期間を短くすることができる。本例では、サブ圧縮
ブロック単位でＲＧＢ順に出力したが、図３４に示すように、圧縮ブロック単位で行って
も良い。
In this embodiment, the R compressed image data, the G compressed image data, and the B compressed image data are sequentially interleaved and output to the
This example is based on the case where t, G compressed image data CG0 is 37 bits, B compressed image data CB0 is 8 bits, R compressed image data CR1 is 20 bits, G compressed image data CG1 is 18 bits, and B compressed image data CB1 is 14 bits. Since compressed image data for RGB image data input to the
The effective period for transmitting compressed image data can be shortened. In this example, RGB are output in the order of RGB in units of sub compression blocks, but may be performed in units of compression blocks as shown in FIG.
図３７は、データ転送部１１５に入力されたＹＣｂＣｒ４４４の画像データに対する圧
縮画像データを、ＴＭＤＳチャンネル０、ＴＭＤＳチャンネル１、ＴＭＤＳチャンネル２
に出力する場合の各チャネルにおける出力波形の別の一例である。ＹＣｂＣｒ４４４の画
像データの各成分に対するデータ量の比率は、Ｙ画像データ、Ｃｂ画像データ、Ｃｒ画像
データで同一である。なお、ＹＣｂＣｒ４２２の画像データの各成分に対するデータ量の
比率は、Ｙ画像データが２に対して、Ｃｂ画像データ、Ｃｒ画像データがそれぞれ１とな
る。
FIG. 37 shows the
Is another example of the output waveform in each channel when outputting to. The ratio of the data amount to each component of the image data of YCbCr 444 is the same for Y image data, Cb image data, and Cr image data. The ratio of the data amount to each component of the image data of YCbCr 422 is 2 for Y image data and 1 for Cb image data and Cr image data.
１５００は、圧縮処理部１１４に入力される画像データである。１５０１、１５０２、
１５０３は、それぞれＹ画像データ、Ｃｂ画像データ、Ｃｒ画像データに対する圧縮処理
により生成される圧縮画像データの各成分であるＹ圧縮画像データ（輝度圧縮画像データ
）、Ｃｂ圧縮画像データ（Ｃｂ色差圧縮画像データ）、Ｃｒ圧縮画像データ（Ｃｒ色差圧
縮画像データ）である。
Reference numeral 1503 denotes Y-compressed image data (brightness-compressed image data) and Cb-compressed image data (Cb-compressed chrominance image data) which are components of compressed image data generated by compression processing on Y image data, Cb image data, and Cr image data, respectively. Data), Cr compressed image data (Cr color difference compressed image data).
色差（ＣｂおよびＣｒ）成分に比べて、輝度（Ｙ）成分に対する感度が高いという人間
の視覚特性から、Ｙ成分に対する圧縮率を、Ｃｂ成分およびＣｒ成分に対する圧縮率より
も高くして、Ｙ成分の圧縮画像データ（以後、Ｙ圧縮画像データと呼ぶ）のデータ量に比
べて、Ｃｂ成分の圧縮画像データ（以後、Ｃｂ圧縮画像データと呼ぶ）のデータ量および
Ｃｒ成分の圧縮画像データ（以後、Ｃｒ圧縮画像データと呼ぶ）のデータ量を、より削減
することが可能である。
From the human visual characteristics that the sensitivity to the luminance (Y) component is higher than the color difference (Cb and Cr) components, the compression ratio to the Y component is made higher than the compression ratio to the Cb and Cr components, The data amount of compressed image data of Cb component (hereinafter referred to as Cb compressed image data) and the compressed image data of Cr component (hereinafter referred to as “compressed image data (hereinafter referred to as Y compressed image data) It is possible to further reduce the data amount of Cr compressed image data).
本実施例では、画像データの各成分に対する伝送優先度が高い画像データに対して高い
圧縮率で圧縮処理を行う一例を示している。
In this embodiment, an example in which compression processing is performed at high compression rate on image data having high transmission priority for each component of the image data is shown.
具体的には、Ｙ圧縮画像データの伝送優先度を、Ｃｂ圧縮画像データおよびＣｒ圧縮画
像データの伝送優先度よりも高くし、データ伝送部１１５からの出力ビット幅として、Ｙ
圧縮画像データに１２ｂｉｔ、Ｃｂ圧縮画像データに６ｂｉｔ、Ｃｒ圧縮画像データに６
ｂｉｔを割り当てる。
Specifically, the transmission priority of Y-compressed image data is set higher than the transmission priority of Cb-compressed image data and Cr-compressed image data, and the output bit width from
12 bits for compressed image data, 6 bits for Cb compressed image data, 6 for Cr compressed image data
Allocate a bit.
Ｙ圧縮画像データ１５０１、Ｃｂ圧縮画像データ１５０２、Ｃｒ圧縮画像データ１５０
３を、それぞれＴＭＤＳチャンネル０（８ｂｉｔ／サイクル）、ＴＭＤＳチャンネル１（
８ｂｉｔ／サイクル）、ＴＭＤＳチャンネル２（８ｂｉｔ／サイクル）に出力する場合、
伝送される圧縮画像データが占める伝送帯域は、圧縮後のデータ量が最も多いＴＭＤＳチ
ャンネル０に制限されてしまい、有効期間が長くなる。
Y compressed
3 for TMDS channel 0 (8 bits / cycle) and TMDS channel 1 (
When outputting to TMDS channel 2 (8 bits / cycle),
The transmission band occupied by the compressed image data to be transmitted is limited to the
１５０５、１５０６、１５０７、１５０８、１５１１は、Ｃｂ圧縮画像データ（６ｂｉ
ｔ／サイクル）およびＣｒ圧縮画像データ（６ｂｉｔ／サイクル）に比べて、Ｙ圧縮画像
データにより多くのチャンネル（１２ｂｉｔ／サイクル）を割り当てた場合の出力データ
の一例である。上記出力方式とすることで、圧縮画像データを伝送するための有効期間を
短くすることができる。
1505, 1506, 1507, 1508 and 1511 are Cb compressed image data (6 bi
This is an example of output data when more channels (12 bits / cycle) are assigned to Y-compressed image data than t / cycle) and Cr-compressed image data (6 bits / cycle). By setting it as the said output system, the effective period for transmitting compressed image data can be shortened.
なお、出力ビット幅の割当は、制御部１１０からデータ伝送部１１５に対して指示され
る。または、制御部から指示される画像フォーマット（例えば、ＹＣｂＣｒ４４４など）
に応じて、あらかじめ決められた配分比率で、データ伝送部１１５が割り振っても良い。
配分比率については、制御部１１５から設定可能としても良い。
The assignment of the output bit width is instructed from the
According to the above, the
The distribution ratio may be set from the
本実施例では、画像データがＹＣｂＣｒ４４４の場合を例に説明したが、ＲＧＢ信号な
どその他の画像信号においても、それぞれの圧縮画像データに伝送優先度をつけて出力伝
送路（例えば、ＴＭＤＳチャネル０、１、２）への出力ビット幅を割り当てても良い。例
えば、画像データがＲＧＢ信号の場合、Ｇ成分に対する伝送優先度を、Ｒ成分およびＢ成
分に対する伝送優先度よりも高くする方法がある。具体的には、Ｇ成分に対する出力ビッ
ト幅として１２ｂｉｔを割当て、Ｒ成分およびＢ成分に対する出力ビット幅として、それ
ぞれ６ｂｉｔを割り当てる方法がある。
In the present embodiment, the case where the image data is YCbCr 444 has been described as an example, but even in the case of other image signals such as RGB signals, transmission priority is given to each compressed image data to output transmission paths (for example,
また、画像データがＹＣｂＣｒ４４４の場合における伝送優先度の別の一例として、４
：２：２成分に、残りの色差成分よりも高い伝送優先度を割り当てる方法がある。具体的
には、４：２：２に対する出力ビット幅として２０ｂｉｔを割当て、残りのＣｂ成分とＣ
ｒ成分に４ｂｉｔを割り当てる方法がある。
Also, as another example of the transmission priority when the image data is YCbCr444, 4
2: 2: There is a method of assigning a transmission priority higher than the remaining color difference components to the two components. Specifically, 20 bits are allocated as an output bit width for 4: 2: 2, and the remaining Cb components and C
There is a method of assigning 4 bits to the r component.
図３８は、データ転送部１１５に入力されたＹ圧縮画像データ１６０１、Ｃｂ圧縮画像
データ１６０２、Ｃｒ圧縮画像データ１６０３を、ＴＭＤＳチャンネル０、ＴＭＤＳチャ
ンネル１、ＴＭＤＳチャンネル２に出力する場合の各チャネルにおける出力波形の別の一
例である。なお、１６００は、圧縮処理部１１４に入力される画像データである
本実施例では、ＴＭＤＳチャンネル０のｂｉｔ４、ｂｉｔ５、ｂｉｔ６、ｂｉｔ７およ
び、ＴＭＤＳチャンネル１のｂｉｔ０、ｂｉｔ１、ｂｉｔ６、ｂｉｔ７が、その他のｂｉ
ｔに比べて伝送エラー率が低い場合を考える。
FIG. 38 shows the respective channels when outputting Y compressed image data 1601, Cb compressed
Consider the case where the transmission error rate is lower than t.
１６０４、１６０５、１６０６、１６０７、１６０８、１６０９は、ＴＭＤＳチャネル
の伝送エラー率の低いｂｉｔに、Ｙ圧縮画像データを割り当てた場合の出力データの一例
である。上記出力方式とすることで、Ｙ圧縮画像データに対するエラー発生率を低くする
ことが可能となる。
1604, 1605, 1606, 1607, 1608, and 1609 are examples of output data when Y-compressed image data is assigned to the bit with a low transmission error rate of the TMDS channel. By using the above-described output method, it is possible to reduce the error occurrence rate for Y-compressed image data.
なお、本実施例では、Ｃｂ圧縮画像データを１６０２、１６０５、１６０７に割り当て
ており、Ｃｒ圧縮画像データを１６０３、１６０９に割り当てている。
In the present embodiment, Cb compressed image data is allocated to 1602, 1605, and 1607, and Cr compressed image data is allocated to 1603 and 1609.
なお、伝送エラー率の情報は、制御部１１０からデータ伝送部１１５に供給される。ま
たは、伝送エラー率を元に、制御部でＹ圧縮画像データ、Ｃｂ圧縮画像データ、Ｃｒ圧縮
画像データのＴＭＤＳチャンネルへのｂｉｔ割り振りを指定しても良い。本実施例では、
ＹＣｂＣｒ輝度色差信号を例に説明したが、ＲＧＢ信号などその他の画像形式においても
、それぞれの圧縮画像データに優先度をつけてＴＭＤＳチャンネルへのｂｉｔ割当をして
も良い。
The information on the transmission error rate is supplied from the
Although the YCbCr luminance color difference signal has been described as an example, in the case of other image formats such as RGB signals, priority may be given to each compressed image data to assign bits to the TMDS channel.
また、各成分の前記伝送優先度は、各成分毎の圧縮率としても良い。この場合、高い圧
縮率の成分に対しては、割り当てる出力ビット幅を大きくし、低い圧縮率の成分に対して
は、割り当てる出力ビット幅を小さくする。一例として、ＹＣｂＣｒ４４４の各成分（Ｙ
、Ｃｂ、Ｃｒ）に対する圧縮率を、８０％、４０％、４０％とした場合、伝送優先度を、
それぞれ２、１、１とする方法、または各成分（Ｙ、Ｃｂ、Ｃｒ）の出力ビット幅を、そ
れぞれ１２ｂｉｔ、６ｂｉｔ、６ｂｉｔとする方法がある。
Further, the transmission priority of each component may be a compression rate for each component. In this case, the output bit width to be allocated is increased for components of high compression rate, and the output bit width to be allocated is decreased for components of low compression rate. As an example, each component of YCbCr 444 (Y
, Cb, Cr), assuming that the compression ratio is 80%, 40%, 40%, the transmission priority is
There are methods of
以下、実施例１に記載の画像伝送装置および画像受信装置の別の実施形態について説明
する。
Hereinafter, another embodiment of the image transmission device and the image reception device described in the first embodiment will be described.
本実施例では、主圧縮符号情報を、図３０で示した水平ブランキング期間４０６におけ
るパケット領域で伝送する。パケット領域であるがパケット構造をとらず、各チャネル４
ビットデータを伝送するものとする。また、副圧縮符号情報１７４０を、有効期間で伝送
する。
In this embodiment, the main compression code information is transmitted in the packet area in the
It shall transmit bit data. Also, the secondary
図３９は、主圧縮符号情報１７００を水平ブランキング期間４０６で伝送する際の、デ
ータ転送部１１５の出力データ構成の一例を示す図である。
本構成とすることで、有効期間での伝送に比べて主圧縮符号情報１７００を伝送する際
のエラー耐性を強化することができる。しかし、伝送エラー率が高い伝送路上を伝送する
場合、更なるエラー耐性の強化が課題となる。
FIG. 39 is a diagram showing an example of an output data configuration of the
With this configuration, it is possible to enhance the error resistance when transmitting the main
図４０は、主圧縮符号情報１７００と同一の主圧縮符号情報１７１０を、水平ブランキ
ング期間に、同一伝送路で伝送する場合の一例である。本実施例では、主圧縮符号情報１
７００の直後に主圧縮符号情報１７１０を出力する。なお、主圧縮符号情報１７１０は、
主圧縮符号情報１７００の直後でなくても良い。上記構成とすることで、主圧縮符号情報
の冗長性を高め、伝送エラー率が高い伝送路上でも、主圧縮符号情報に高い伝送エラー耐
性を持たせることが可能となる。なお、本実施例での冗長度とは、追加で伝送する主圧縮
符号情報の数である。本実施例での冗長度は１とする。
FIG. 40 shows an example of the case where the same main
Main
It does not have to be immediately after the main
図４１は、主圧縮符号情報１７００と同一の主圧縮符号情報１７２０を、水平ブランキ
ング期間に、異なる伝送路で伝送する場合の一例である。本実施例では、主圧縮符号情報
１７２０を、主圧縮符号情報１７００と別のチャネルで伝送することで、伝送エラー率の
チャネルばらつきによる伝送エラー耐性の低下を抑止している。
FIG. 41 is an example of the case where the same main compression code information 1720 as the main
例えば、チャネル０の伝送エラー率が、チャネル１の伝送エラー率よりも高い場合、図
４０に示すようにチャネル０に冗長な主圧縮符号情報を割り当てた場合、エラー耐性は低
下するが、図４１に示すように複数チャネルで同一の主圧縮符号情報を伝送することで、
主圧縮符号情報に対するエラー発生率を平均化することができる。本実施例では、チャネ
ルごとに２つの主圧縮符号情報を割り当てているが、ｂｉｔ毎に割り当てても良い。例え
ば、チャネル０のｂｉｔ０、ｂｉｔ１と、チャネル１のｂｉｔ０、ｂｉｔ１に主圧縮符号
情報１７００を割当て、チャネル０のｂｉｔ２、ｂｉｔ３と、チャネル１のｂｉｔ２、ｂ
ｉｔ３に主圧縮符号情報１７００を割当てる方法がある。また、伝送エラー率の情報に応
じて、ビット割り振りを変更しても良い。
For example, when the transmission error rate of
It is possible to average the error occurrence rate for the main compression code information. In the present embodiment, two pieces of main compression code information are assigned to each channel, but they may be assigned to each bit. For example, the main
There is a method of assigning the main
図４２は、図４０および図４１の実施例に比べて、冗長度を２に増加した場合の一例を
示す図である。主圧縮符号情報１７００と、主圧縮符号情報１７００と同一の主圧縮符号
情報１７３０および主圧縮符号情報１７３１を出力する。
FIG. 42 is a diagram showing an example where the degree of redundancy is increased to 2 as compared with the embodiments of FIG. 40 and FIG. The main
伝送エラー率に応じて、主圧縮符号情報の冗長度を増やして伝送路のエラーに対する耐
性を高めても良い。
Depending on the transmission error rate, the redundancy of the main compression coding information may be increased to improve the resistance to transmission line errors.
図４３は、図４０および図４１の実施例に比べて、冗長度を２に増加した場合の一例で
ある。主圧縮符号情報１７００と、主圧縮符号情報１７００と同一の主圧縮符号情報１７
３０および主圧縮符号情報１７３１を出力する。
FIG. 43 shows an example of the case where the degree of redundancy is increased to 2 as compared with the embodiments of FIG. 40 and FIG. Main
30 and main
伝送エラー率に応じて、主圧縮符号情報の冗長度を増やしても良い。 The redundancy of the main compression coding information may be increased according to the transmission error rate.
以上、主圧縮符号情報を水平ブランキング期間で伝送する場合の冗長な主圧縮符号情報
の伝送について説明したが、副圧縮符号画像を有効期間で伝送する場合に、副圧縮符号情
報と同一の冗長な副圧縮符号情報を、有効期間で伝送することで、副圧縮符号情報のエラ
ー耐性を高めても良い。
The transmission of the redundant main compression code information in the case of transmitting the main compression code information in the horizontal blanking period has been described above. However, in the case of transmitting the sub compression code image in the effective period, the same redundancy as the sub compression code information The error resistance of the sub-compression code information may be enhanced by transmitting the sub-compression code information in the effective period.
図４３は、副圧縮符号情報を、有効期間で伝送する際に、副圧縮符号情報の冗長度を２
とした場合の、データ転送部１１５の出力データ構成の一例を示す図である。
FIG. 43 shows that when transmitting the secondary compression code information in the effective period, the redundancy of the secondary compression code information is 2
Is a diagram illustrating an example of an output data configuration of the
本構成とすることで、副圧縮符号情報１７４０を伝送する際のエラー耐性を強化するこ
とができる。
With this configuration, it is possible to enhance error resistance when transmitting the secondary
伝送エラー率に応じて、主圧縮符号情報の冗長度を増やしても良い。 The redundancy of the main compression coding information may be increased according to the transmission error rate.
実施例３では、伝送エラー率に応じて、主圧縮符号情報または副圧縮符号情報の冗長度
を大きくしたが、追加する冗長な圧縮符号情報を伝送する伝送路の伝送量は限られている
という課題がある。
In the third embodiment, the redundancy of the main compression code information or the sub compression code information is increased according to the transmission error rate, but the transmission amount of the transmission path for transmitting the redundant compression code information to be added is limited. There is a problem.
そこで、実施例４では、伝送エラー率に応じて、圧縮率または圧縮方式と、水平ブラン
キング期間を延長または短縮することで、冗長な圧縮符号情報を伝送する伝送路の伝送量
を増加することの可能な方式を採用する。
Therefore, in the fourth embodiment, the transmission rate of the transmission path for transmitting redundant compression code information is increased by extending or shortening the compression rate or the compression method and the horizontal blanking period according to the transmission error rate. Adopt the possible methods of
圧縮率、圧縮方式、水平ブランキング期間の延長／短縮指示、圧縮符号情報の冗長度に
関する情報は、制御部１１０から圧縮処理部１１４およびデータ転送部１１５に供給され
る。
Information on the compression rate, the compression method, the horizontal blanking period extension / shortening instruction, and the redundancy of the compression code information is supplied from the
圧縮率、圧縮方式、水平ブランキング期間の延長／短縮指示、圧縮符号情報の冗長度へ
の画像受信装置側の対応状況については、ＥＩＤＩやＣＥＣ通信などにより、画像受信装
置から画像送信装置に伝える方法がある。
The image reception device is notified from the image reception device to the image transmission device by EIDI or CEC communication about the compression rate, compression method, horizontal blanking period extension / shortening instruction, and the correspondence state of the image reception device to redundancy of compression code information. There is a way.
伝送エラー率に対する、圧縮率、圧縮方式、水平ブランキング期間の延長／短縮指示、
圧縮符号情報の冗長度の決定については、制御部１１０が行っても良いし、圧縮処理部１
１４、データ転送部１１５が個別に行っても良い。
Compression ratio, compression method, horizontal blanking period extension / shortening instruction for transmission error rate,
The
14, the
図４４は、伝送エラー率を３つの範囲に分け、それぞれの範囲における圧縮率と水平ブ
ランキング期間と冗長度の一例を示す図である。伝送エラー率ＥＲがＥＲａを超える場合
（伝送エラー率が高い場合）、圧縮率を４０％として、生成される圧縮画像データ量を少
なくし、かつ水平ブランキング期間を短縮して、有効期間を延長する。これにより、有効
期間で伝送する副圧縮符号情報の伝送可能量を増加することができる。本実施例では、副
圧縮符号情報の冗長度を２として、副圧縮符号情報と同一内容の冗長な副圧縮符号情報を
２個、有効期間で伝送することで、副圧縮符号情報の伝送エラーに対する耐性を高めてい
る。
FIG. 44 is a diagram showing an example of the compression error rate, the horizontal blanking period, and the redundancy in each range by dividing the transmission error rate into three ranges. When the transmission error rate ER exceeds ERa (when the transmission error rate is high), the compression rate is 40% to reduce the amount of compressed image data generated and shorten the horizontal blanking period to extend the effective period Do. As a result, the transmittable amount of the secondary compression code information to be transmitted in the effective period can be increased. In this embodiment, transmission error of the sub-compression code information is transmitted by transmitting redundant sub-compression code information having the same content as the sub-compression code information with two, with the redundancy of the sub-compression code information being 2 in the effective period. It has increased resistance.
伝送エラー率ＥＲがＥＲｂ以下の場合（伝送エラー率が低い場合）、圧縮率を８０％と
して、生成される圧縮画像データ量を多くして、高画質な映像の伝送を可能とする。また
、冗長な圧縮符号情報を挿入しないことで、データの非伝送期間を多くしている。なお、
非伝送期間は、有効期間４０６内で圧縮画像データも副圧縮符号情報も伝送されない期間
と、ブランキング期間期間４０７内でパケットも主圧縮符号情報も伝送されない期間の合
計である。この非伝送期間に対して、クロック停止やより低いクロック周波数での動作を
行うことで、省電力化を可能とする。
When the transmission error rate ER is equal to or less than ERb (when the transmission error rate is low), the compression rate is set to 80%, and the amount of generated compressed image data is increased to enable transmission of high quality images. Also, by not inserting redundant compression code information, the non-transmission period of data is increased. Note that
The non-transmission period is a total of a period in which neither compressed image data nor sub-compression code information is transmitted in the
伝送エラー率ＥＲがＥＲｂよりも大きく、ＥＲａ以下の場合（伝送エラー率が通常の場
合）、圧縮率を６０％として、副圧縮符号情報の冗長度を１とすることで、伝送エラー耐
性を上げると共に、高画質化を図っている。
When the transmission error rate ER is larger than ERb and less than ERa (when the transmission error rate is normal), the compression rate is set to 60% and the redundancy of the secondary compression code information is set to 1 to improve transmission error resistance. At the same time, we are trying to improve the image quality.
図４５は、伝送エラー率を３つの範囲に分け、それぞれの範囲における圧縮率と水平ブ
ランキング期間と冗長度の別の一例を示す図である。伝送エラー率ＥＲがＥＲａを超える
場合（伝送エラー率が高い場合）、圧縮率を４０％として、生成される圧縮画像データ量
を少なくし、かつ水平ブランキング期間を延長して、水平ブランキング期間を延長する。
これにより、水平ブランキング期間で伝送する主圧縮符号情報の伝送可能量を増加するこ
とができる。本実施例では、副圧縮符号情報の冗長度を１として、副圧縮符号情報と同一
内容の冗長な副圧縮符号情報を１個、有効期間で伝送すると共に、主圧縮符号情報の冗長
度を１として、主圧縮符号情報と同一内容の冗長な主圧縮符号情報を１個、水平ブランキ
ング期間で伝送することで、副圧縮符号情報および主圧縮符号情報の伝送エラーに対する
耐性を高めている。
FIG. 45 is a diagram showing the transmission error rate divided into three ranges, and showing another example of the compression rate, the horizontal blanking period, and the redundancy in each range. When the transmission error rate ER exceeds ERa (when the transmission error rate is high), the compression rate is 40%, the amount of compressed image data generated is reduced, and the horizontal blanking period is extended, and the horizontal blanking period is To extend
Thereby, the transmittable amount of the main compression coding information to be transmitted in the horizontal blanking period can be increased. In this embodiment, assuming that the redundancy of the secondary compression code information is 1, one redundant secondary compression code information having the same content as the secondary compression code information is transmitted in the effective period, and the redundancy of the primary compression code information is 1 By transmitting one redundant main compression code information having the same content as the main compression code information in the horizontal blanking period, the resistance to transmission errors of the sub compression code information and the main compression code information is enhanced.
図４４および図４５で説明した圧縮率のほか、圧縮方式を変更しても良い。図４６は、
伝送エラー率を３つの範囲に分け、それぞれの範囲における圧縮方式と水平ブランキング
期間と冗長度の一例を示す図である。伝送エラー率ＥＲによって、圧縮方式を方式Ａ、方
式Ｂ、方式Ｃを切り替える。伝送エラー率ＥＲがＥＲaよりも大きい場合、主圧縮符号情
報が少なく、冗長度を上げることができる圧縮方式とすることで、伝送エラーに対する耐
性を高めることができる。また、高い圧縮率（例えば図４５における圧縮率４０％）が期
待できる圧縮方式を適用することで、副圧縮符号情報または主圧縮符号情報の伝送可能量
を増加させることが可能となる。
In addition to the compression rates described in FIGS. 44 and 45, the compression method may be changed. Figure 46 shows
It is a figure which divides a transmission error rate into three ranges, and shows an example of the compression system in each range, a horizontal blanking period, and redundancy. The compression method is switched between method A, method B, and method C according to the transmission error rate ER. When the transmission error rate ER is larger than ERa, the resistance to transmission errors can be enhanced by adopting a compression method that has less main compression coding information and can increase the degree of redundancy. Also, by applying a compression method that can expect a high compression rate (for example, a compression rate of 40% in FIG. 45), it is possible to increase the transmittable amount of the sub compression code information or the main compression code information.
図４４および図４５では、圧縮率を例にとって説明し、図４６では圧縮方式を例にとっ
て説明したが、伝送エラー率によって、圧縮率と圧縮方式の双方を切り替えても良い。
In FIG. 44 and FIG. 45, the compression rate has been described as an example, and in FIG. 46 the compression method has been described as an example, but both the compression rate and the compression method may be switched depending on the transmission error rate.
本実施例では、伝送エラーに対する耐性を高めるために、冗長な主圧縮符号情報または
冗長な副圧縮符号情報を出力する例で説明したが、伝送エラー率に応じて、エラー符号化
方式を切り替えても良い。また、伝送エラー率が高い場合には、図４５で示すように圧縮
後の圧縮画像データ量を少なくすると共に、水平ブランキング期間を延長し、副圧縮符号
情報の一部を水平ブランキング期間で伝送することで、伝送エラーに対する耐性を高めて
も良い。
In the present embodiment, an example is described in which redundant main compression code information or redundant sub-compression code information is output in order to improve the resistance to transmission errors, but the error coding method is switched according to the transmission error rate. Also good. When the transmission error rate is high, as shown in FIG. 45, the amount of compressed image data after compression is reduced, the horizontal blanking period is extended, and part of the sub compression code information is the horizontal blanking period. Transmission may improve the resistance to transmission errors.
本実施例では、伝送エラー率が所定の値よりも高い場合、低い圧縮率で圧縮処理を行っ
て圧縮画像データを減らす方法、または低い圧縮率に適した圧縮方式を用いて圧縮処理を
行って圧縮画像データを減らす方法、または水平ブランキング期間を延長することで主圧
縮符号情報に対する伝送路の伝送可能量を増加する方法、または有効期間４０６を延長す
ることで副圧縮符号情報に対する伝送路の伝送可能量を増加する方法について説明したが
、音声データを減らして水平ブランキング期間で伝送する音声パケット数を減らす方法を
用いても良い。音声データを減らす方法の一例として、非圧縮音声形式から圧縮形式音声
に変える方法や、音声チャネル数を６チャネルから２チャネルに削減する方法などがある
。
In this embodiment, when the transmission error rate is higher than a predetermined value, the compression process is performed at a low compression rate to reduce the compressed image data, or the compression process is performed using a compression method suitable for the low compression rate. A method of reducing compressed image data, or a method of increasing the transmittable amount of the transmission path for the main compression code information by extending the horizontal blanking period, or a transmission path for the sub compression code information by extending the
実施例４では、伝送エラー率に応じて、圧縮率、水平ブランキング期間および冗長度を
大きくしたが、画像データのコンテンツの種類によらず、伝送エラー率に対する、画質と
エラー耐性が決められるという課題がある。本実施例では、コンテンツの種類に応じて、
縮率、水平ブランキング期間および冗長度を変更することでコンテンツの種類に適した画
質と伝送エラー耐性を持たせることが可能となる。なお、本実施例では、伝送エラー率に
ついては述べていないが、本実施例に、さらに伝送エラー率に応じた切り替えを行っても
良い。
In the fourth embodiment, the compression rate, the horizontal blanking period, and the redundancy are increased according to the transmission error rate, but the image quality and the error resistance with respect to the transmission error rate can be determined regardless of the type of image data content. There is a problem. In this embodiment, depending on the type of content,
By changing the contraction rate, the horizontal blanking period, and the redundancy, it is possible to provide image quality and transmission error tolerance suitable for the type of content. Although the transmission error rate is not described in the present embodiment, switching according to the transmission error rate may be performed in the present embodiment.
図４７は、コンテンツの種類に応じて、圧縮率と水平ブランキング期間と冗長度を切り
替える方式の一例を示す図である。本実施例では、コンテンツが映画の場合、高画質かつ
エラー耐性を高くするために、圧縮率を８０％、水平ブランキング期間を延長、主圧縮符
号情報の冗長度を２、副圧縮符号情報の冗長度を１としている。一方、コンテンツが囲碁
／将棋の場合には、静止している部分が多いという特性から、圧縮率を４０％としつつ、
水平ブランキング期間を短縮、主圧縮符号情報の冗長度を１、副圧縮符号情報の冗長度を
１とすることで、伝送エラーに対する耐性を高めている。
FIG. 47 is a diagram illustrating an example of a method of switching the compression rate, the horizontal blanking period, and the redundancy according to the type of content. In this embodiment, when the content is a movie, the compression ratio is 80%, the horizontal blanking period is extended, the redundancy of the main compression code information is 2, and the sub compression code information is The redundancy is one. On the other hand, when the content is Go / Shogi, the compression ratio is set to 40% because of the characteristic that there are many stationary parts.
The tolerance to transmission errors is enhanced by shortening the horizontal blanking period, setting the redundancy of the main compression coding information to 1 and the redundancy of the sub compression coding information to 1.
また、コンテンツがスポーツの場合には、動き部分が多く、圧縮し難い画像であるが、
エラーに対する視覚的感度が低いと考え、圧縮率を８０％としつつ、水平ブランキング期
間を短縮、主圧縮符号情報および副圧縮符号情報の冗長度を共に０、すなわち冗長な圧縮
符号情報を挿入しないことで、高画質化を図りつつ、データの非伝送期間を増加している
。
Also, if the content is sports, there are many moving parts and it is an image that is difficult to compress,
Considering that the visual sensitivity to errors is low, the compression ratio is 80%, the horizontal blanking period is shortened, and the redundancy of the main compression code information and the secondary compression code information is both 0, ie, no redundant compression code information is inserted Therefore, while improving the image quality, the non-transmission period of data is increased.
実施例４では、所定の伝送エラー率よりも低い場合には、高い圧縮率で、圧縮画像デー
タの量を増やして、高画質化を図った。本実施例では、図４８を用いて、所定の伝送エラ
ー率よりも低い場合における高音質化の方法の一例について説明する。
In the fourth embodiment, when the transmission error rate is lower than the predetermined transmission error rate, the amount of compressed image data is increased at a high compression rate to achieve high image quality. In the present embodiment, an example of the method for enhancing the sound quality in the case where the transmission error rate is lower than a predetermined transmission error rate will be described with reference to FIG.
１８００および１８０２は、圧縮画像データまたは副圧縮符号情報を伝送する有効期間
４０６であり、１８０１は、主圧縮符号情報または音声パケットを音声パケットを伝送す
るブランキング期間４０７である。１８１０は、圧縮前の画像データである。１８２０、
１８２１、１８２２は、主圧縮符号情報１８２０と音声パケット１８２１をブランキング
期間１８０１で伝送し、副圧縮符号情報または圧縮画像データ１８２２を有効期間１８０
２で伝送した場合の一例である。この場合、ブランキング期間１８０１内で伝送可能な音
声パケット数は、主圧縮符号情報１８２０の伝送量によって制限される。
1800 and 1802 are
1821, 1822 transmit the main
It is an example at the time of transmitting by 2. In this case, the number of voice packets that can be transmitted within the
ここで、所定の伝送エラー率よりも低い場合には、主圧縮符号情報１８３０も有効期間
１８０２で伝送しても良い。この場合、ブランキング期間に、より多くの音声パケットを
割り当ることで、高音質化が可能となる。
Here, if the transmission error rate is lower than a predetermined transmission error rate, the main compression coding information 1830 may also be transmitted in the
ブランキング期間は、有効期間に比べて、エラー耐性が高いが、伝送可能なデータ量は
、所定の伝送エラー率よりも低い場合には、１／３以下である。
The blanking period is higher in error tolerance than the effective period, but the amount of data that can be transmitted is 1/3 or less if it is lower than a predetermined transmission error rate.
図４９に高音質化を実現する方式の別の一例を示す。１９１０、１９１１、１９１２は
、有効期間を延長しない場合に、主圧縮符号情報１９１０、音声パケット１９１１、副圧
縮符号情報および圧縮画像データ１９１２を伝送する一例である。この例では、有効期間
中に、主圧縮符号情報１９１０を伝送可能な空きはない。
FIG. 49 shows another example of a system for realizing high sound quality. 1910, 1911 and 1912 are an example of transmitting the main
そこで、所定の伝送エラー率よりも低い場合、有効期間を延長し、この延長した有効期
間１９０２で主圧縮符号情報１９２１を伝送する方式とする。なお、延長後の有効期間１
９０２内であれば、主圧縮符号情報１９２１、副圧縮符号情報および圧縮画像データ１９
２２の配置はどこであってもかまわない。この方式の場合、有効期間１９０２における伝
送可能なデータ量は、ブランキング期間における伝送可能なデータ量の３倍以上であるた
め、有効期間の延長量は、ブランキング期間における主圧縮符号情報の伝送期間の１／３
以下となる。従って、１９２０で示すように、音声パケットを伝送できるブランキング期
間を長くすることができる。音声データ量を増やすことで、高音質化を図ることができる
。高音質化の一例としては、チャネル数の増加、より高い音声サンプリング周波数による
音声信号生成、より大きな量子化ビットによる音声信号生成、高域や低域に対する帯域制
限の緩和などがある。
Therefore, if the transmission error rate is lower than a predetermined transmission error rate, the effective period is extended, and the main
In the case of 902, main
The arrangement of 22 may be any place. In the case of this method, since the transmittable data amount in the valid period 1902 is three or more times the transmittable data amount in the blanking period, the extension amount of the valid period is the transmission of the main compression code information in the blanking period. 1/3 of the period
It becomes below. Therefore, as indicated by 1920, the blanking period in which voice packets can be transmitted can be extended. Higher sound quality can be achieved by increasing the amount of audio data. As an example of the high sound quality, there are an increase in the number of channels, an audio signal generation with a higher audio sampling frequency, an audio signal generation with larger quantization bits, and a relaxation of band limitation for high and low frequencies.
以上で説明した本実施例によれば、画像伝送装置が伝送する画像データを圧縮して伝送
することにより、現在規定している伝送路に、現在規定されている画像サイズより大きな
サイズの画像データを伝送することが可能になり、さらに、画像データの伝送領域よりも
エラー耐性を高めた領域に、圧縮符号情報の一部である主圧縮符号情報を伝送することに
よって、エラー耐性が高い圧縮画像伝送を行うことができる。
According to the embodiment described above, by compressing and transmitting the image data to be transmitted by the image transmission apparatus, the image data having a size larger than the image size currently specified on the currently specified transmission path Can be transmitted, and further, by transmitting the main compression code information which is a part of the compression code information to an area in which the error resistance is higher than the transmission area of the image data, the compressed image having high error resistance It can be transmitted.
また、現在規定されている画像サイズの画像データを伝送する場合においては、所定時
間当たりのデータ伝送量、もしくはデータ伝送クロックを下げることができるため、エラ
ーの発生頻度を下げることができ、且つ、伝送路でのエラーに対して信頼性の高いシステ
ムを構築することができる。
In addition, when transmitting image data of a currently defined image size, the amount of data transmission per predetermined time or the data transmission clock can be lowered, so that the frequency of occurrence of errors can be lowered, and It is possible to build a highly reliable system against errors in the transmission path.
また、伝送路でエラーが発生して完全なエラー訂正ができない場合においても、エラー
による画質劣化が目立たないエラー処理を行うシステムを実現することができる。
In addition, even when an error occurs in the transmission path and complete error correction can not be performed, it is possible to realize a system that performs error processing in which the image quality deterioration due to the error is not noticeable.
１００ 画像伝送装置
１０１ 入力部
１０２ 入力部
１０３ 入力部
１０４ 入力部
１０５ チューナ受信処理部
１０６ ネットワーク受信処理部
１０７ 記録メディア制御部
１０８ 記録メディア
１０９ ユーザＩＦ部
１１０ 制御部
１１１ ストリーム制御部
１１２ デコーダ部
１１３ 表示処理部
１１４ 圧縮処理部
１１５ データ転送部
１１６ 出力部
１９１ データバス
１９２ データバス
１９３ データバス
２００ 画像受信装置
２０１ 入力部
２０２ 入力部
２０３ ユーザＩＦ部
２０４ 制御部
２０５ データ受信処理部
２０６ 伸張処理部
２０７ 表示処理部
２０８ 表示部
３００ ケーブル
100
Claims (4)
圧縮画像データの出力先である画像受信装置から、前記単位ブロックの圧縮画像データを伸張可能な水平サイズ候補情報を受信する受信部と、
前記単位ブロックの水平サイズ候補情報に基づいて選んだ前記単位ブロックの水平サイズに基づいて画像データを圧縮して、圧縮画像データを生成する圧縮処理部と、
前記圧縮処理部で生成した圧縮画像データと、前記単位ブロックの水平サイズ情報と、を出力可能な出力部と、を備え、
前記出力部は、ブランキング期間に前記単位ブロックの水平サイズ情報を、該ブランキング期間とは異なる有効期間に圧縮画像データを出力する
ことを特徴とする画像出力装置。 An image output apparatus which divides a two-dimensional image composed of an effective horizontal pixel number and an effective vertical line number into unit blocks smaller than the two-dimensional image and outputs compressed image data compressed for each unit block,
A receiving unit that receives horizontal size candidate information that can expand the compressed image data of the unit block from the image receiving apparatus that is the output destination of the compressed image data;
A compression processing unit that compresses image data based on the horizontal size of the unit block selected based on the horizontal size candidate information of the unit block to generate compressed image data;
An output unit capable of outputting the compressed image data generated by the compression processing unit and the horizontal size information of the unit block;
The image output apparatus, wherein the output unit outputs horizontal size information of the unit block in a blanking period, and compressed image data in a valid period different from the blanking period.
前記圧縮処理部は、圧縮画像データに関するＣＲＣ符号を生成し、
前記出力部は、ブランキング期間にＣＲＣ符号を出力する
ことを特徴とする画像出力装置。 The image output apparatus according to claim 1,
The compression processing unit generates a CRC code related to compressed image data,
The image output device, wherein the output unit outputs a CRC code during a blanking period.
前記受信部は、さらに、前記単位ブロックの圧縮画像データを伸張可能な垂直サイズ候補情報を受信し、
前記圧縮処理部は、前記単位ブロックの垂直サイズ候補情報に基づいて選んだ前記単位ブロックの垂直サイズに基づいて圧縮画像データを生成し、
前記出力部は、ブランキング期間に前記単位ブロックの垂直サイズ情報を出力する
ことを特徴とする画像出力装置。 The image output apparatus according to claim 1,
The receiving unit further receives vertical size candidate information capable of decompressing the compressed image data of the unit block,
The compression processing unit generates compressed image data based on the vertical size of the unit block selected based on the vertical size candidate information of the unit block.
The image output apparatus, wherein the output unit outputs vertical size information of the unit block in a blanking period.
画像データを圧縮して、圧縮画像データとＣＲＣ符号とを生成する圧縮処理ステップと、
生成した圧縮画像データとＣＲＣ符号と、前記単位ブロックのサイズ情報とを出力可能な出力ステップと、を有し、
前記出力ステップにおいては、ブランキング期間にＣＲＣ符号と前記単位ブロックのサイズ情報とを出力する状態と、該ブランキング期間とは異なる有効期間に圧縮画像データを出力する状態とがあり、
さらに圧縮画像データの出力先である画像受信装置から、前記単位ブロックのサイズ候補情報を入手して、前記単位ブロックのサイズを選ぶ選定ステップを有する
ことを特徴とする出力方法。 An output method in an image output apparatus which divides a two-dimensional image composed of an effective horizontal pixel number and an effective vertical line number into unit blocks smaller than the two-dimensional image and outputs compressed image data compressed for each unit block There,
A compression processing step of compressing image data to generate compressed image data and a CRC code;
And an output step capable of outputting the generated compressed image data, a CRC code, and size information of the unit block,
In the output step, there is a state in which a CRC code and size information of the unit block are output in a blanking period, and a state in which compressed image data is output in a valid period different from the blanking period;
And a selection step of obtaining size candidate information of the unit block from an image receiving apparatus which is an output destination of compressed image data, and selecting the size of the unit block.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019009326A JP6609074B2 (en) | 2019-01-23 | 2019-01-23 | Image output apparatus and output method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019009326A JP6609074B2 (en) | 2019-01-23 | 2019-01-23 | Image output apparatus and output method |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017163343A Division JP6472845B2 (en) | 2017-08-28 | 2017-08-28 | Image receiving device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019092183A true JP2019092183A (en) | 2019-06-13 |
| JP6609074B2 JP6609074B2 (en) | 2019-11-20 |
Family
ID=66836765
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019009326A Active JP6609074B2 (en) | 2019-01-23 | 2019-01-23 | Image output apparatus and output method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6609074B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021260935A1 (en) * | 2020-06-26 | 2021-12-30 | 日本電信電話株式会社 | Video distribution system, video distribution method, transmission device, and transmission program |
-
2019
- 2019-01-23 JP JP2019009326A patent/JP6609074B2/en active Active
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021260935A1 (en) * | 2020-06-26 | 2021-12-30 | 日本電信電話株式会社 | Video distribution system, video distribution method, transmission device, and transmission program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6609074B2 (en) | 2019-11-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11109076B2 (en) | Image transmission device, image transmission method, image reception device, and image reception method | |
| US8238332B2 (en) | Signal transmitting and receiving devices, systems, and method for multiplexing parallel data in a horizontal auxiliary data space | |
| US20120044985A1 (en) | Transmission device and method of determining transmission date format | |
| JP4008688B2 (en) | Signal transmitting apparatus and signal receiving apparatus | |
| WO2013018248A1 (en) | Image transmission device, image transmission method, image receiving device, and image receiving method | |
| WO2012147791A1 (en) | Image receiving device and image receiving method | |
| JP6609074B2 (en) | Image output apparatus and output method | |
| JP2005102161A (en) | Transmission system | |
| JP5739262B2 (en) | Image transmission device, image transmission method, image reception device, and image reception method | |
| JP4483457B2 (en) | Transmission system | |
| JP6472845B2 (en) | Image receiving device | |
| JP2013115456A (en) | Image transmission apparatus and image transmission method | |
| JP6200971B2 (en) | Image transmission apparatus and transmission method | |
| JP5041969B2 (en) | Video transmission method, system and program | |
| JP2013115455A (en) | Image transmission apparatus and image transmission method | |
| WO2012147786A1 (en) | Image transmission device and image transmission method | |
| JP5318992B2 (en) | Video transmission program | |
| JP2013115453A (en) | Image transmission apparatus, image transmission method, image reception apparatus, and image reception method | |
| JP2013115452A (en) | Transmitting/receiving method for video data, video transmitting device, and video receiving device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190123 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191001 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190927 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191024 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6609074 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |