JPH04502996A - 単一センサカラー画像化システムのための圧縮方法及び装置 - Google Patents

単一センサカラー画像化システムのための圧縮方法及び装置

Info

Publication number
JPH04502996A
JPH04502996A JP2511308A JP51130890A JPH04502996A JP H04502996 A JPH04502996 A JP H04502996A JP 2511308 A JP2511308 A JP 2511308A JP 51130890 A JP51130890 A JP 51130890A JP H04502996 A JPH04502996 A JP H04502996A
Authority
JP
Japan
Prior art keywords
color
green
image
red
blue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2511308A
Other languages
English (en)
Inventor
ツァイ ユーシェン ティモシー
パルルスキ ケネス エイ
ラバニ マジッド
Original Assignee
イーストマン コダック カンパニー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by イーストマン コダック カンパニー filed Critical イーストマン コダック カンパニー
Publication of JPH04502996A publication Critical patent/JPH04502996A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4015Demosaicing, e.g. colour filter array [CFA], Bayer pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4007Interpolation-based scaling, e.g. bilinear interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/04Colour television systems using pulse code modulation
    • H04N11/042Codec means
    • H04N11/044Codec means involving transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Abstract

(57)【要約】本公報は電子出願前の出願データであるため要約のデータは記録されません。

Description

【発明の詳細な説明】 単一センサカラー画像化システムのための圧縮方法及び装置技術分野 本発明は、単一チップカラー画像センサからの画像データに対し、その格納また は伝送に先立って、視覚損失のないデータ圧縮処理を容易に行うための方法及び 装置に関する。
先行技術の説明 電子カメラでは、カラー画像を生成するために、カラービームスプリッタ及び各 々が赤、緑、青色に対応した3個の画像センサが用いられる。しかし、カメラの 小型化及びコスト低廉化の面から、カラーフィルタパターンに重畳された単一セ ンサを用いてカラー画像を生成することも可能である。この方法ではセンサ出力 信号は適切に処理され、3個のカラー信号がデマルチブレックス及び補間を受け る。
カラーフィルタパターンとしては種々のものが可能である。’Co1or Fl lters and Processing Alternatives fo r 0ne−Chip Cameras’ (K、 A、 Parulski著 IEEE Transactlons on Electronic Devi ces、 Volume ED−32,NuTnber 8.August 1 985、Pages 1381−1389)というタイトルの文献には、いくつ かのオブシッンが記載されている。
単一チップのカラーセンサは、ビデオカメラやカムコーダ等と同様、電子スチー ルカメラにも使用することができる。高品質で低ノイズのカラー画像を保存する ため、電子カメラではアナログ保存よりもデジタル保存またはデジタル記録を採 用することが好ましい。米国特許第4,131,919 (発明の名称: 「電 子スチールカメラ」; 出願人:Gareth A、Lloyd及び5teve n J、5asson; 本発明の譲受人であるイーストマン コダック カン パニーへ譲渡)には、デジタル磁気テープによる記録を行う電子スチールカメラ について記載されている。デジタル記録は、また固体(ソリッドステート)メモ リカードを用いることによっても行える。これら全ての場合において、デジタル データ圧縮を採用して画像表示に要求されるデータ量を減縮できたならば、記録 可能なデジタル画像数を増加させ、また画像毎の所要記録時間を減少させること が出来る。
従来におけるカラーカメラからの画像用データ圧縮方法では、直接デジタル化さ れたセンサ出力信号の代わりに、デマルチブレックス及び補間された3色データ が使用されている。こうしたアプローチの一例が、米国特許第4.797.72 9(発明の名称: 「エラー許容型画像圧縮アルゴリズムのためのシステム」  ;出願人:Y、 T、 T+sai ; この特許もまたイーストマン コダッ ク カンパニーへ譲渡されている)に開示されている。
色補間処理では、デジタル化センサ出力からのデータの単一「面」を3個取り出 し、それぞれが赤、緑及び青の各色情報に対応した3面とする。各色面は、セン サと同じピクセル数を有する。画像圧縮はこれら3つの面上で直接行うことがで きるが、効率を一層高めるにはRGBデータから派出したYIQ色空間で行われ る。圧縮処理後、総データ量は「原」デジタル化センサ出力データよりも大幅に 低減しているはずであり、そうでなければ圧縮の目的が果たされていないことに なる。逆圧縮によって対応色空間内のカラー画像が再構成され、このカラー画像 はその後更に処理され、表示され、或は印刷に供され得る。
色補間自体によっては原画像の情報エントロピーは増大しない。その代わりに重 複データ量が増大し、この結果、従来の圧縮方法ではデジタル化センサ出力信号 を直接圧縮した場合よりも効率が落ちる。実行コスト、システムの複雑さ、所要 演算時間を考慮すれば、デマルチブレックスされ補間されたデータを圧縮すると いうアプローチは賢明ではなかろう。
さて今、センサ出力データの直接圧縮を如何にして効率よく行うかということを 考えてみる。CFA (カラーフィルタアレイ)ではセンサ出力データに対して カラーバターニングが行われるので、データの相関分布に多くの断絶部が生じて しまい、圧縮効率が低下する。センサ出力データを単一の輝度画像記録として扱 うことにより、均一に飽和した色が極めてごちゃごちゃした画像として現れる。
この画像は、伸張するときに画質の視覚的ロスを抑制するための所要ビットレー トが大きい。更に、カラーフィルタアレイを介してまばらにサンプルされたカラ ー画像データは、エラーに対して極めて過敏である。データ中にエラーが一つあ っただけで、エラーの位置、カラーフィルタアレイのパターン、そして色捕間に より、複雑なエラーパターンが生じてしまう。従って、カラーセンサ出力へ直接 加えるデータ圧縮処理は、効果に乏しい。
従って、センサ出力データをもっと有効に活用し、且つシステムを実行する際の 複雑さを最小限に抑制できる新しいワンチップカラー画像圧縮方法が望ましい。
発明の要約 本発明は、カラーフィルタアレイ(CFA)を使用する形態の単一チップCCD 撮像器から得られたカラー画像を圧縮するための方法、及びリアルタイムシステ ムアーキテクチャ−を提供することにある。本発明方法の第1ステツプは、デジ タル化カラーセンサ出力を3個のレコード、即ちその内の−が輝度(緑)でセル に対応した空間位置における赤または青ビクセル値及び補間輝度(緑)信号値の 関数である。第3のステップは、輝度(緑)レコードを線形空間計ff1(距離 )から「明度」空間知覚性均−計ff1(L*)に変換することである。第4の ステップは、輝度(緑)及び2個のカラー比レコード(R/G、B/G)を圧縮 して、平均ビット比を低減させることである。圧縮された画像データは、その後 記録或いは伝送される。再生段階において、または受信ステーションにおいて、 逆圧縮が行われる。伸張された赤、緑及び青の各レコードは補間され、これによ りデジタル画像データの3個の完全カラー面が得られる。
この方法は、従来方法に比して少ない時間で少ないストレージを用いて少ないデ ータ量を処理するという点が有利であり、より効率の良い圧縮が可能となる。
以上述べたことから、本発明の主目的は、まずデータを複数のレコードに再編成 してデータ流れの中に存在する不連続性を低減させることにより、カラーセンサ 出力データ上の画像圧縮を行うことにある点が理解される。
本発明の他の目的は、カラー画像データを、圧縮前に、センサ出力データを再編 成及び処理してクロミナンス(ある色と同輝度の参照色との差異)情報上の圧縮 が色比信号上で行われ、また輝度上の圧縮が明度空間計量において行われるよう な方法で処理することにある。
本発明の更に他の目的として、輝度レコードを補間することによりワンチップカ ラーセンサからの画像を圧縮するための方法を提供することにある。これによっ てカラーデータを色比の輝度形式へ変換され、この結果圧縮により生じたエラー が後段の補間処理によって増幅されてしまうことがなくなる。
本発明に係るこれら及び他の目的は、以下の詳細な説明及び図面と関連付けるこ とでより明確となろう。尚、各図において付された同等の符号は同等の要素を示 しており、これら各図面は本開示内容の一部を構成している。
図面の簡単な説明 第1図は、本発明を採用した電子カメラの概略ブロック図である。
第2図は、第1図における電子カメラからの画像を視認するために用いられる再 生装置の概略ブロック図である。
第3図は、第1図における電子カメラに用いられる型式のカラーフィルタパター ンが形成されたカラー画像ピクセルのマトリックスを示す図である。
第4図は、カラー画像を圧縮するための−の従来方法を示した先行技術のフロー チャート図である。
第5図は、カラーフィルタ補間方法を示したフローチャートである。
第6図は、本発明に係るカメラ処理及び圧縮部の好適な実施例を示すフローチャ ート図である。
第7因は、本発明に係る好適なプレイバック伸張及び処理方法部のフローチャー ト図である。
第8図は、本発明に係る好適な圧縮部のフローチャート図である。
第9図は、本発明に係る好適な伸張部のフローチャート図である。
本発明に係る好適な実施例の説明 第1図は、デジタル電子カメラのブロック図を示す。情景の画像(図示していな い)は、カメラレンズ10により画像センサ20上に集束する。画像センサ20 は、2次元アレイ状に配置された多数の個別センサ素子2OAまたはピクセルか ら成り、二のアレイによつてフォトサイト(第3図参照)が形成されている。
フォトサイトは、カラーフィルタ18の規則正しいアレイによって覆われている 。
センサ2OAは、適切に着色された入射照明に応答し、センサ素子上への照明入 射強度に対応するアナログ電子信号を発生する。本発明では種々の型式及び次元 性のイメージセンサを使用可能であるが、本実施例では、水平コラム及び垂直ロ ーがそれぞれ1280個及び1024個のピクセルを持つ電荷結合素子(CCD )センサを採用して説明する。
レンズ孔部12及びシャッタ14はレンズ10とイメージセンサ20との間に介 挿されており、これによって種々の情景光レベルに対して適切なセンサ照明レベ ルが発生する。イメージセンサ20前段には、色結合を抑制するために複屈折曇 りフィルタが配置されている。イメージセンサ20からのアナログ出力信号はア ナログ信号処理器30により処理される。アナログ信号処理器30は、例えばプ リアンプ及び相関ダブルサンプル回路を含む。このうち相関ダブルサンプル回路 としては、低ノイズビデオ信号を発生する当業界で周知の回路を使用している。
アナログ信号処理器30の出力は、A/D変換器32によりアナログ形式からデ ジタル形式に変換される。A/D変換器32は、各サンプルに対し、8ビツトデ 一タ信号を発生する。
デジタル化されたカラー画像信号は、ブロック40において処理及び圧縮を受け る。このデジタル処理及び圧縮部40からの圧縮されたデジタル画像データID は、デジタル記録部50内に記録され、その出力を格納画像データSIDとして 使用することになる。デジタルレコーダには、当業界で周知である種々のデジタ ル記録技術、例えばデジタル磁気テープ、デジタル磁気ディスク、光学ディスク または固体メモリカードなどを使用できる。タイミング/制御回路60は種々の カメラ構成要素を制御し、これによってカメラ露光ボタン(不図示)の押下に応 答して画像を捕捉及び保存する作用を果たす。
第2図には、第1図の電子カメラ内に記録されている画像の表示またはプリント に使用される装置の模式的ブロック図を示す。デジタル再生部70は、第1図の デジタル記録部50内に記録されている格納デジタル画像データSIDを再生す るか或いはデジタル/圧縮部40から直接画像データIDを再生させる。デジタ ル画像伸張/処理部75は、画像伸張及び信号処理を実行して完全解像度のRG Bデータを生成する。ビデオ表示処理部80は特定のビデオ表示部90で必要と なる特定の信号処理、例えばラインレート変換、ビデオカメラ補正及びNTSC 符号化などを行う。ハードコピープリント処理部82は、特定のハードコピープ リンタ92で必要となる特定の信号処理を行う。
第3図に、第1図の装置中に組み込まれ、イメージセンサ20及び個別センサ素 子2OAが重畳されるカラーフィルタパターン18を示す。3G(緑)CFA( カラーフィルタアレイ)は、G(緑)、R(赤)、及びB(青)の各ビクセルか ら成り1280X1024の大きさを持つピクセルパターンである。そのうち、 4/3はGピクセルであり、1/8がRビクセル、そして1/8がBビクセルを それぞれ占める。第3図に示したCFAパターン及び第1図に示した曇りフィル タパターンは、米国特許第4,663,661 (発明者J、Weldy et al; 発明の名称 「曇りフィルタを備えた単一センサカラービデオカメラ」 )の記載内容に従って設計されている。尚、この米国特許もまた、イーストマン コダックカンパニーへ譲渡されている。R及びBビクセルに対してGピクセルの 割合が多いのは、画像の輝度分解能を向上させるためである。
Gビクセルは、米国特許第208,302号(発明の名称 「立ち上がり時間ア ーティファクト低減用水平ストライブカラーフィルタを用いたカラー撮像装置」 ; 1988年6月17日出願; 発明者 Kenneth A、Paruls ki)の記載に従って、立ち上がり時間アーティファクトを低減するために水平 ストライブ状に配置されている。この米国特許も、イーストマン コダック カ ンパニーへ譲渡されている。
第4図において、前記第1図のデジタル処理及び圧縮部40の従来のブロック図 は、従来技術の圧縮方法で実行される。ブロック9は第1図のA/Dコンバータ 32からのCFA画像データを表している。この画像データは、各i像毎に10 24x1280または約1.3メガバイトのデータから成る。A 3GCFA補 間ブロック11はRGB各々に対して全1024x1280の画像データ面、ま たは3.9メガバイトのデータを形成する。3個の面Y%I及びQは、交互にブ ロック13のRGB画像データをブロック15へ供給することによって形成する ことができる。形成された各YIQ面は1024X1280個のビクセルから成 り、これはブロック13のKGB画像面と同じ大きさである。画像圧縮は、ブロ ック17中のブロック13またはブロック15の何れかからの3個の面に対して 直接行われる。適切な圧縮形式を採用したシステムは、米国特許m4.797. 729号(発明の名称 エラー許容画像圧縮アルゴリズムを備えたシステム;発 明者 Y、T、Tsal)に示されている。
圧縮後、データ総量は大幅に減少する。圧縮されたデータは、第1図のデジタル 記録部50内に格納される(または、交互に伝送することもできる)。再生時( または受信時)、第2図のブロック75に示される画像伸張処理が行われる。
逆伸張処理によってカラー画像は再構成され、このカラー画像はその後次段の処 理、ビデオ表示、または印刷の何れかに供される。この結果、必要とされるバッ ファ格納スペースが増大し、処理時間も延長される。これら2点の不都合は、シ ステムがリアルタイム装置中で実行される時に特に重大となる。
主要な問題は、如何にして処理データ量が増大しないように「原」センサデータ に対して圧縮を施すかということである。CFAはカラーパターンを画像データ へ導入するので、隣接ピクセル鎖中での相関はそれらが表している色によって変 化する。もし、画像圧縮アルゴリズムが「原」センサデータを輝度データとして 扱うならば、それは高ビットレートと共に、カラー補間に従った視覚的損失のな い品質を要求する極めて[B U S Ylな画像となる。従って、「原」画像 センサデータが色によって区別されない限り、CFA画像圧縮は効果を奏しない 。更に、非補間画像中に一つでもエラーが存在したならば、これが最終補間画像 中の複数のビクセルに対して大規模なエラーを引き起こす。このように、従来の カラー捕間画像に対しては良好に遂行可能な圧縮アルゴリズムでも、単一チップ カラーセンサからの非補間画像データに対して直接適用された場合には、その本 来の性能を発揮できなかった。
主題の圧縮方法に用いられるデータ再編成を完全に評価するため、第4図の3G  CFA補間ブロック11のフローチャートを第5図に示す。輝度エツジにおけ る色エツジアーティファクト(色結合)は、赤及び青信号を直線補間する代わり に色信号(赤及び青)−輝度信号(緑)比を補間することによって、最小化され る。
欠落した緑ピクセルは、ブロック21内において次式により補間される:CFA : GI GMiss = Missing Green PixelGに こで、GMiss −0,218(G1+06)−0,563(G2+G5)+ 0.844 (G3+G4) フィルタ係数は、補間縁ピクセルの効果的PSF (点ひろがり関数)が実際の 緑ビクセルのPSFに等しくなるように選択される。実行を簡略化するため、こ れらのフィルタ係数を互いに近似の値とし得る。
線形一対数変換はブロック22内で行われ、赤チャンネル水平色補間は、次式に よってブロック24により実行される:CFA: RI Rmiss R2 ここで、Rmi ss−欠落水平赤ビクセルlog (Rmiss)−log  (GRmiss)+0、5* ((logRl−1ogG1) +(1ogR2 −1ogG2)) 赤チャンネル垂直色褪間式は、ブロック26内で次式にて処理される:CFA:  RI Rmissl m1ss2 m1ss3 ここで、 log Rmisgl−1og (GRmisal) 十0.75  log (R1/Gl)+ 0.25 log (R2/G2) 1oHRmiss2−1og(GRmiss2) 十0.51og (R1/G l)+ 0.51og (R2/G2) log Rmiss3=1og(GRmiss3) 十0.25 log (R 1/Gl)→−0,75l og (R2/G2)である。
GRmisslが欠落赤ビクセルにおける実際の緑ピクセル値であり、G1及青 チヤンネル処理も、赤チャンネルの場合と同じ方法ステップを採用し、これが描 かれており、このブロック40には本発明に掛かるカメラ処理及び圧縮部の好適 な実施例が組み込まれている。ブロック41への入力は、第1I!i!Iにおけ るA/D変換器32からのCFA画像データ9である。画像ビクセルパターンを 表す画像データは、3個の色面42.44及び46に分離される。面42は12 8゜X768X8ビツトの緑アレイであり、面44は640X256X8ビツト の赤アレイであり、面46は640X256X8ビツトの青アレイである(「8 」はピクセル毎のビット数である)。
ブロック41からの各ビクセル面はブロック48へ向い、ここで欠落縁ビクセル が補間される。加えて、1 ogR/Gmi s s及びlogB/Gm1ss 値が演算される。これは、対数変換を行うための索引テーブル及び周知の方程式 1゜(1/3)−16の関係を用いて、L スペースまたは他の均一強度スペー スに変換される。ここで、Ynは基準白用のYの値である。索引テーブルは、ブ ロック40のデジタル処理部におけるソフトウェア内で実行される。
ブロック52は、面42.44及び46に対応する3個の処理面54.56及び 58を表している。適用可能(順応性)不連続コサイン変換アルゴリズム等を用 いた圧縮作用61は、ブロック52からの3個の処理後位置で行われる。信号は 、圧縮された後、ブロック62に示すように格納(または伝送)される。
再生時または伝送された圧縮画像受信時、圧縮信号は第7図に示される各ステッ プにて処理される。第7図は、第2図のブロック75により実行される機能を表 す。伸張処理はブロック68にて実行される。欠落した緑、赤及び青の各ピクセ ルはブロック71内で補間される。ブロック71は、ブロック72に示す3個の 面各々に対するカラー画像データを構成する。ブロック72からの3個の面は、 画像を表すために約3.9メガバイトのデータを使用する。
要約すると、欠落縁ビクセルはまずIOgB/Gm1ss及びlogR/Gm1 ssを演算できるように補間され、原非補間緑ビクセルはノイズ感応性が均一に 分布するよっにL スペースに変換される。色褪間はlogR/G及びlogB /Gを使用するので、クロミナンス情報の圧縮は、再生後の補間に色アーティフ ァクトが導入されないよう、この色相比で行われることが好ましい。L スペー スへの変換は、256X8−2にビット索引テーブルを用いて行うことができる 。1 ogR/Gmi s sまたは1ogB/Gm1ssは、256X8にビ ット索引テーブル及び−の減算処理(1ogA/B=logA 1ogB)を用 いることで実行できる。圧縮作用は、3個の別個のファイルに対して働く。即ち 、非補間緑ビクセル、及び2個の小規模な1 o gR/Gm i s s及び IogB/Gm1ssの各ファイルである。再生処理に際しては、まず伸張が行 われる。次いで緑ピクセルがL スペースから線形スペースへと変換され、補間 され、そして欠落赤及び青ピクセル補間作用が実行されるようにlogスペース に変換される。
第8図に、圧縮機能61のためのハードウェア構成を示す。
圧縮器61°は、ブロックフォーマツタ116において第6図のブロック52か らの3個のデジタル画像入力レコードNJを受取り、画像をブロックI (x。
対応ブロックT(iSj)が発生する。2−D DCTは周知の処理(例えば米 例えば、係数のブロックの対角ml(斜め)に沿ったジグザグ走査を用いて行わ れるために量子化係数部126(?)へ伝送される。この代わりに、可変量子化 を採用することも可能である。変換係数T (k)は、次式のように、規格化要 素N(k)で各変換係数を割り算することにより規格化される。
TN (k)−T (k)/N (k)二こで、TN (k)は規格化された変 換係数値である。規格化要素N (k)は、入力表示パラメータとして受信する 規格化アレイ発生器33により与えられる。
これは、ブロック中に画像詳細が存在している状態での量子化ノイズの可視性に 基づく。規格化された係数TN (k)は、ブロック126で量子化され、量子 化係数TN (k)が生成される。ブロック126からの量子化係数は、luf fman及びrun−1engthコード化部128において最小重複(冗長) コード化図を用いてコード化され、コード値CM (k)が生成される。現在に おいて好適なコード化図は、一連のゼロマグニチュード係数のためのrun−1 ength=+−ド化を持つHu f fmanコードである。Hu f fm an及びrun−Iengthコード化は当該技術分野において周知であるので 、このコード化処理に関する詳細はここでは省く。コード化係数は、第1図の電 子カメラにおけるデジタル記録ブロック50に伝送され、記録される。
第9図において、逆圧縮器68°は、第8図の圧縮器61°により行われた圧縮 作用を逆転し、デジタル画像データを再生する。コード値CV (k)は、解読 係数ブロック130の入力に伝送され、ここで規格化係数TN (k)が生成さ れる。規格化係数TN (k)は、非規格化値N−1(k)により分割すること で非規格化される。非規格化値N−1(k)は、非規格化係数T (k)を生成 するために送信器内で使用される規格化アレイN (k)の逆(数)である。こ の他、変換係数は、それに規格化係数N (k)を乗算することによっても非規 格化される。
逆規格化アレイ発生器34は、信号N−1(k)を発生する。
再構成係数値T (k)の1次元ストリングはブロック136内で2次元信号ブ ロックT(i、j)に再フォ−マツトされ、係数ブロックはブロックDCT−1 138内で画像値1 (x、y)に逆変換される。最後に、画像値ブロックはブ ロック140内でデジタル画像Iに再フォ−マツトされる。
以上、本発明の好適な実施例について説明したが、これに限らず本発明の本質的 精神を逸脱することなく種々の変更、改良が可能である。従って、以下の特許請 求の範囲の項に、本発明の真の範囲に属するこれらすべての変更及び改良を記し た。
FIG、 3 FIG、 7 FIG、 5 国際調査報告 14111^−−”−Tl(”〒IiH: 0nlQAh61国際調査報告

Claims (1)

  1. 【特許請求の範囲】 1.以下の各要素を含むことを特徴とするカラーピクセルパターンを圧縮するた めのカラー画像圧縮装置: 前記カラーピクセルパターンを、赤(R)、緑(G)、及び青(B)の各ピクセ ルから成る3個の色面に形成する形成手段;該形成手段に接続され、緑ピクセル の色面から欠落した緑ピクセルを補間するための補間手段; 前記補間手段からの補間された緑ピクセルを用いてLogR/G及びLogB/ Gを演算する処理手段; 前記形成手段からの非補間緑ピクセルを強度均一スペースへ変換する変換手段; 及び 前記変換手段及び前記処理手段からの信号を圧縮して圧縮カラー画像を生成する 圧縮手段。 2.請求項1に記載のカラー画像圧縮システムにおいて、前記変換手段はL*ス ペース変換器であることを特徴とする。 3.請求項1に記載のカラー画像圧縮システムにおいて、前記処理手段は、減算 器に接続されたLogB及びLogGピクセル値の索引テーブルを含み、Log R/G及びLogB/Gの値は、R及びGのLog値からGのLog値を減算す ることにより算出されることを特徴とする。 4.請求項1に記載のカラー画像圧縮システムにおいて、前記圧縮手段は、不連 続コサイン変換型アルゴリズムを使用していることを特徴とする。 5.電子カメラを含むカラー撮像装置であって、該電子カメラは以下の各要素を 含心ことを特徴とする: 各々が画像データのピクセルを表すと共に検知された入射光強度を表すアナログ 出力信号を発生する、画像検知素子の個別アレイを有する画像検知手段;入射光 ビームを少なくとも3種類の異なる色に分離させるカラーフィルタパターン手段 ; センサアナログ出力信号をデジタル信号に変換する手段;デジタル信号により表 されるピクセルの色に従って、デジタル信号を複数のレコードに分離形成する手 段; 分離カラーレコードを処理及び圧縮する手段;圧縮されたカラーレコードをデジ タル記録または伝送する手段;以下の各要素を含む再生手段; 記録されまたは伝送されたデジタルデータを復活させる手段;圧縮されたカラー レコードを伸張する手段;前記画像検知手段から欠落した色ピクセルを補間する 手段;及び補間されたカラー画像を画像表示または画像印刷を行う装置へ伝送す る手段。 6.請求項5に記載のカラー撮像装置において、前記処理及び圧縮手段は、不連 続コサイン変換型アルゴリズムを使用することを特徴とする。 7.請求項5に記載のカラー撮像装置において、前記カラーフィルタパターン手 段は、赤、緑及び青ピクセル画像分節を形成する赤、緑及び青分節を含むことを 特徴とする。 8.請求項7に記載のカラー撮像装置において、更に、緑ピクセル画像分節を輝 度画像として受け取ると共に、輝度画像を圧縮前に感覚的に均一なスペースへ変 換する手段を含むことを特徴とする。 9.請求項7に記載のカラー撮像装置において、更に、圧縮前に前記赤及び青ピ クセル画像分節をR/Gmiss及びB/Gmiss比の形式に変換する手段を 含むことを特徴とする。 10.請求項9に記載のカラー撮像装置において、前記R/Gmiss及びB/ Gmis8比変換手段は、R及びBの1og値からGのIog値を減算すること により該比を求めることを特徴とする。 11.請求項9に記載のカラー撮像装置において、前記カラーフィルタパターン 手段は、水平線状に配列された3/4輝度ピクセルを含むことを特徴とする。 12.以下の各要素を含むことを特徴とするカラー撮像手段;出力信号を発生す るカラー画像センサ;センサ出力信号をデジタル化する手段;デジタル化センサ 出力信号を、色に従って少なくとも3個のレコードに分離する手段; データ圧縮前に、前記各レコード中の少なくとも2個を前処理する手段;各レコ ードを独立して圧縮するデータ圧縮手段;及び圧縮されたレコードを格納または 伝送する手段。 13.請求項12に記載のカラー撮像装置において、前記一のレコードが高度サ ンプル輝度であり、残りのレコードは分散サンプルされた色であることを特徴と する。 14.請求項13に記載のカラー撮像装置において、分散サンプルされたカラー 信号は、カラーピクセルと補間された輝度ピクセルとの比であることを特徴とす る。 15.以下の各ステップを含むことを特徴とするカラー画像圧縮方法:a.多カ ラー画像を少なくとも3個の単一色レコードに分離させるステップ;b.赤及び 緑ピクセル位置に対応する各空間位置における輝度信号値を補間するステップ; c.少なくとも一のレコードをスペース感覚的均一計量に変換するステップ;d .残りの2個のレコードを、赤及び青ピクセルに対応する空間位置における補間 された輝度信号の関数である2個の色比に変換するステップ;e.変換されたレ コード及び前記2個の色比を個々に圧縮するステップ;f.圧縮されたレコード 及び前記2個の色比を伝送するステップ;g.圧縮されたレコード及び前記2個 の色比を受け取るステップ;h.受け取られた圧縮レコード及び前記2個の色比 を補間して画像データの3個の色面を形成するステップ; i.画像データの前記3個の色面を組合せ表示して多色画像を形成するステッブ ; 16.請求項15に記載のカラー画像圧縮方法において、前記多色画像は、緑、 赤、及び青のレコードに分離されることを特徴とする。 17.請求項16に記載のカラー画像圧縮方法において、前記緑レコードは、ス ペース感覚性均一計量に変換されることを特徴とする。 18.請求項17に記載のカラー画像圧縮方法において、前記2個の色比はLo gR/Bmiss及びLogB/Gmi88であることを特徴とする。 19.請求項15に記載のカラー画像圧縮方法において、前記伝送ステップを除 去し、前記圧縮レコードを格納するステップがこれに代わることを特徴とする。 20.以下の各ステップを含むことを特徴とするカラー画像圧縮方法:a.多色 面像を、赤、緑及び青の各面のピクセル値に変換するステップ;b.前記緑面の ピクセル値の輝度組を形成するステップ;c.各々の対応する赤及び青ピクセル 値における欠落緑ピクセル値を補間するステップ; d.空間位置における各赤ピクセル値に対する赤色比を対応する補間された欠落 緑ピクセル値の関数として形成するステップ;e.空間位置における各青ピクセ ル値に対する青色比を対応する補間された欠落緑ピクセル値の関数として形成す るステップ;f.前記輝度値組及び前記形成された赤及び青色比を圧縮するステ ップ;g.前記圧縮輝度値及び前記形成された赤及び青色比を今後使用する時の ために格納しておくステップ; 21.請求項20に記載のカラー画像圧縮方法において、更に、以下の各ステッ ブを含むことを特徴とする: 圧縮された輝度値及び形成された赤及び青色比を伸張するステップ;前記伸張さ れた輝度値及び前記形成された赤及び青色比から、欠落した赤、緑及び青ピクセ ル値を補間して、赤、緑及び青面のピクセル値を形成するステップ;及び 結合された赤、緑及び青面のピクセル値を表示して前記多色画像を再構成するス テップ。 22.以下の各ステップを含むことを特徴とするカラー画像圧縮方法:a.多色 画像を、各々が多色画像の空間位置に対応する緑、赤及び青のピクセル値の面に 変換するステップ; b.赤及び青ピクセルに対応する各空間位置における欠落緑ピクセル値を補間す るステップ; c.各赤ピクセル値とその対応欠落緑ピクセル値との色比を形成するステップ; d.各青ピクセル値とその対応欠落緑ピクセル値との色比を形成するステップ; e.非補間緑ピクセル値を明度スペース計量に変換するステップ;f.前記形成 された明度スペース計量及び前記形成された色比を圧縮するステッブ; g.前記圧縮された形成明度スペース計量及び前記形成色比を今後の使用のため に格納しておくステップ。 23.請求項22に記載のカラー画像圧縮方法において、前記明度スペース計量 は、L*スペースであることを特徴とする。 24.請求項22に記載のカラー画像圧縮方法において、前記ステップgは除去 され、これに代えて以下の各ステップが付加されることを特徴とする:h.前記 圧縮された形成明度スペース計量及び前記形成色比を伝送するステッブ; i.前記圧縮された形成明度スペース計量及び前記形成色比を受け取るステッブ ; j.前記圧縮された形成明度スペース計量及び前記色比を伸張するステップ;k .前記伸張された明度スペース計量及び前記色比から、赤、緑及び青ピクセル値 の面を形成するステップ; 1.前記赤、緑及び青のピクセル値を結合して赤、緑及び青のピクセル値の面を 形成するステップ;及び m.前記形成された面を再構成多色画像として表示するステップ。 25.請求項22に記載のカラー画像圧縮方法において、前記色比は、LogR /Gmiss値及びLogB/Gmiss値として形成されることを特徴とする 。
JP2511308A 1989-07-24 1990-07-24 単一センサカラー画像化システムのための圧縮方法及び装置 Pending JPH04502996A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US07/384,353 US5053861A (en) 1989-07-24 1989-07-24 Compression method and apparatus for single-sensor color imaging systems
US384,353 1989-07-24

Publications (1)

Publication Number Publication Date
JPH04502996A true JPH04502996A (ja) 1992-05-28

Family

ID=23516996

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2511308A Pending JPH04502996A (ja) 1989-07-24 1990-07-24 単一センサカラー画像化システムのための圧縮方法及び装置

Country Status (4)

Country Link
US (1) US5053861A (ja)
EP (1) EP0436012A1 (ja)
JP (1) JPH04502996A (ja)
WO (1) WO1991001613A1 (ja)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5309183A (en) * 1989-09-28 1994-05-03 Canon Kabushiki Kaisha Image pickup apparatus having difference encoding and non-linear processing of image signals
JP2942903B2 (ja) * 1990-11-05 1999-08-30 キヤノン株式会社 ディジタル・カメラ信号処理装置
EP0485149B1 (en) * 1990-11-07 1997-07-30 Canon Kabushiki Kaisha Recording apparatus
US5172227A (en) * 1990-12-10 1992-12-15 Eastman Kodak Company Image compression with color interpolation for a single sensor image system
JPH04284087A (ja) * 1991-03-13 1992-10-08 Canon Inc 電子スチルカメラ
US5260808A (en) * 1991-04-23 1993-11-09 Canon Kabushiki Kaisha Image processing apparatus
JPH04323960A (ja) * 1991-04-23 1992-11-13 Canon Inc 画像符号化装置
JPH04323963A (ja) * 1991-04-23 1992-11-13 Canon Inc 画像処理方法及び装置
FR2676608B1 (fr) * 1991-05-17 1993-09-03 France Telecom Procede de codage d'images en couleurs a fort taux de compression sans filtrage, procede de decodage, codeur, decodeur et application correspondants.
US5442718A (en) * 1992-09-07 1995-08-15 Sony Corporation Apparatus and method for storing and reproducing digital image data yielding high resolution and high quality video image data
US5452002A (en) * 1993-07-27 1995-09-19 Mu; Guo-Guang Color data image encoding method and apparatus with spectral zonal filter
US5398066A (en) * 1993-07-27 1995-03-14 Sri International Method and apparatus for compression and decompression of digital color images
US5412427A (en) * 1993-10-29 1995-05-02 Eastman Kodak Company Electronic camera utilizing image compression feedback for improved color processing
DE69512824T2 (de) * 1994-04-22 2000-01-27 Victor Company Of Japan Kompressions- und Dekompressionsverfahren für mehrdimensionale mehrwertige Farbbilder
US5974174A (en) * 1996-09-26 1999-10-26 Victor Company Of Japan, Ltd. Picture-information processing apparatus
US6360022B1 (en) 1997-04-04 2002-03-19 Sarnoff Corporation Method and apparatus for assessing the visibility of differences between two signal sequences
JPH11122626A (ja) 1997-10-17 1999-04-30 Nikon Corp 画像処理方法及び装置並びに画像処理プログラムを記録した記録媒体
US6130960A (en) * 1997-11-03 2000-10-10 Intel Corporation Block-matching algorithm for color interpolation
US6750876B1 (en) 1997-11-16 2004-06-15 Ess Technology, Inc. Programmable display controller
US6580456B1 (en) 1997-11-16 2003-06-17 Pictos Technologies, Inc. Programmable timing generator
US6597394B1 (en) 1997-11-16 2003-07-22 Pictos Technologies, Inc. Programmable image transform processor for digital image processing
JPH11168745A (ja) * 1997-12-03 1999-06-22 Minolta Co Ltd デジタルカメラ
US6366318B1 (en) * 1998-03-27 2002-04-02 Eastman Kodak Company CFA correction for CFA images captured at partial resolution
US6236433B1 (en) * 1998-09-29 2001-05-22 Intel Corporation Scaling algorithm for efficient color representation/recovery in video
US6211897B1 (en) * 1998-11-05 2001-04-03 Eastman Kodak Company Printing system and method for improving print quality of laser thermal printers
EP1157354B1 (en) * 1999-02-25 2009-12-23 Sarnoff Corporation Method and apparatus for assessing the visibility of differences between two signal sequences
US8212893B2 (en) 1999-06-08 2012-07-03 Verisign, Inc. Digital camera device and methodology for distributed processing and wireless transmission of digital images
US7372485B1 (en) * 1999-06-08 2008-05-13 Lightsurf Technologies, Inc. Digital camera device and methodology for distributed processing and wireless transmission of digital images
US6650795B1 (en) 1999-08-10 2003-11-18 Hewlett-Packard Development Company, L.P. Color image capturing system with antialiazing
US6809765B1 (en) * 1999-10-05 2004-10-26 Sony Corporation Demosaicing for digital imaging device using perceptually uniform color space
US6765611B1 (en) 2000-11-21 2004-07-20 Eastman Kodak Company Method for compressing an image from a sparsely sampled extended dynamic range image sensing device
US7694224B2 (en) * 2001-05-31 2010-04-06 International Business Machines Corporation Location predicative restoration of compressed images stored on a hard disk drive with soft and hard errors
US7724281B2 (en) * 2002-02-04 2010-05-25 Syniverse Icx Corporation Device facilitating efficient transfer of digital content from media capture device
WO2004004361A1 (ja) * 2002-06-28 2004-01-08 Nokia Corporation 情報端末
KR100580369B1 (ko) 2004-06-01 2006-05-15 학교법인연세대학교 컬러 영상 부호화/복호화 방법 및 장치
US20070198725A1 (en) * 2004-10-06 2007-08-23 Morris Robert P System and method for utilizing contact information, presence information and device activity
EP1750457A1 (en) * 2005-08-02 2007-02-07 Thomson Licensing Method and circuit arrangement for processing a video signal, and respective camera
CN104702926B (zh) * 2007-04-11 2017-05-17 Red.Com 公司 摄像机
US8237830B2 (en) 2007-04-11 2012-08-07 Red.Com, Inc. Video camera
FI20095175A (fi) * 2009-02-23 2010-08-24 Anygraaf Oy Menetelmä rasterimuotoisen kuvan segmentoinnin hyödyntämiseksi kuvan pakkaamisessa
JP6105950B2 (ja) * 2012-02-27 2017-03-29 キヤノン株式会社 画像処理装置およびその方法
JP6259188B2 (ja) * 2013-01-31 2018-01-10 キヤノン株式会社 画像処理装置およびその方法
JP2016508700A (ja) 2013-02-14 2016-03-22 レッド.コム,インコーポレイテッド ビデオカメラ
WO2019010233A1 (en) 2017-07-05 2019-01-10 Red. Com, Llc PROCESSING VIDEO IMAGE DATA IN ELECTRONIC DEVICES

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5970091A (ja) * 1982-10-13 1984-04-20 Nippon Kogaku Kk <Nikon> 電子スチルカメラ
EP0192736B1 (en) * 1984-09-10 1990-05-23 EASTMAN KODAK COMPANY (a New Jersey corporation) Signal processing method and apparatus for sampled color image signal
DE3505368A1 (de) * 1985-02-14 1986-08-14 Heinrich-Hertz-Institut für Nachrichtentechnik Berlin GmbH, 1000 Berlin Farbsignal-kodierung
US4663661A (en) * 1985-05-23 1987-05-05 Eastman Kodak Company Single sensor color video camera with blurring filter
US4774562A (en) * 1987-06-02 1988-09-27 Eastman Kodak Company Image transmission system with preview mode
US4843573A (en) * 1987-10-26 1989-06-27 Tektronix, Inc. Display-based color system
US4954879A (en) * 1988-12-20 1990-09-04 The Boeing Company Apparatus and method for compressing a video signal

Also Published As

Publication number Publication date
WO1991001613A1 (en) 1991-02-07
EP0436012A1 (en) 1991-07-10
US5053861A (en) 1991-10-01

Similar Documents

Publication Publication Date Title
JPH04502996A (ja) 単一センサカラー画像化システムのための圧縮方法及び装置
US5065229A (en) Compression method and apparatus for single-sensor color imaging systems
US20200195851A1 (en) Compression and decoding of single sensor color image data
US5412427A (en) Electronic camera utilizing image compression feedback for improved color processing
US5172227A (en) Image compression with color interpolation for a single sensor image system
EP1657909B1 (en) System and method for encoding mosaiced colour image data employing a reversible color transform
CN104702926B (zh) 摄像机
US6101284A (en) Methods and systems for optimizing image data compression involving wavelet transform
Malvar et al. Progressive-to-lossless compression of color-filter-array images using macropixel spectral-spatial transformation
US6819801B2 (en) System and method for processing demosaiced images to reduce color aliasing artifacts
WO2022141515A1 (zh) 视频的编解码方法与装置
WO1999013429A1 (en) A method for directly compressing a color image and tailoring the compression based on the color filter array, optics, and sensor characteristics
WO2011010431A1 (ja) 画像処理装置、画像処理方法および撮像装置
JPH1169377A (ja) 画像情報符号化装置及びそれを応用した装置
JP2005005925A (ja) 画像圧縮装置及び画像処理システム
JP3809227B2 (ja) 記録再生装置
JP2908796B2 (ja) 画像信号の直交変換符号化装置
JPH0937202A (ja) デジタルカメラ
JP2938875B2 (ja) 画像信号の圧縮記録装置および伸長再生装置
RU2295839C2 (ru) Способ сжатия цифровых изображений и устройство для его реализации
JP2824255B2 (ja) 画像信号の直交変換符号化装置
JPH1075463A (ja) 画像圧縮装置および画像伸張装置
JP2020072390A (ja) 画像符号化装置、及びこれらの制御方法、並びにプログラム
JPH01154696A (ja) カラー画像信号の直交変換符号化装置
JPH04170886A (ja) 撮像装置及び記録再生方式