JPH089410A - 撮像装置 - Google Patents
撮像装置Info
- Publication number
- JPH089410A JPH089410A JP6134341A JP13434194A JPH089410A JP H089410 A JPH089410 A JP H089410A JP 6134341 A JP6134341 A JP 6134341A JP 13434194 A JP13434194 A JP 13434194A JP H089410 A JPH089410 A JP H089410A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- image pickup
- color
- output
- matrix
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000011159 matrix material Substances 0.000 claims abstract description 63
- 238000012545 processing Methods 0.000 claims abstract description 35
- 238000000926 separation method Methods 0.000 claims description 13
- 101100115215 Caenorhabditis elegans cul-2 gene Proteins 0.000 abstract description 7
- 239000003086 colorant Substances 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 9
- 238000000034 method Methods 0.000 description 4
- 238000007781 pre-processing Methods 0.000 description 4
- 239000002131 composite material Substances 0.000 description 3
- 238000009499 grossing Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 230000000875 corresponding effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Landscapes
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
(57)【要約】
【目的】 色信号を得るマトリクス演算手段を有したビ
デオカメラ等の撮像装置において、正確な色信号が得ら
れるようにし、色再現性を向上させる。 【構成】 ＣＣＤ３からの撮像信号をディジタル化して
ディジタル信号処理回路１１に入力し、輝度成分信号と
色差成分信号を得る。またそれらの信号をマトリクス演
算手段１２に入力し、色分離処理を行って三原色の色信
号を生成する。その際、マトリクス演算手段１２からの
二つの色差信号を積分器７０により積分し、その積分出
力に基づいてマトリクス演算手段１２におけるマトリク
ス係数を可変させる。
デオカメラ等の撮像装置において、正確な色信号が得ら
れるようにし、色再現性を向上させる。 【構成】 ＣＣＤ３からの撮像信号をディジタル化して
ディジタル信号処理回路１１に入力し、輝度成分信号と
色差成分信号を得る。またそれらの信号をマトリクス演
算手段１２に入力し、色分離処理を行って三原色の色信
号を生成する。その際、マトリクス演算手段１２からの
二つの色差信号を積分器７０により積分し、その積分出
力に基づいてマトリクス演算手段１２におけるマトリク
ス係数を可変させる。
Description
【０００１】
【産業上の利用分野】本発明は、色信号を得るマトリク
ス演算手段を有したビデオカメラ等の撮像装置に関する
ものである。
ス演算手段を有したビデオカメラ等の撮像装置に関する
ものである。
【０００２】
【従来の技術】従来より、光学レンズ系と撮像部間の撮
像素子上に異なる色光を透過させる色フィルタを２次元
幾何学状に順次配し、被写体像を光学レンズ系により上
記撮像素子上に結像させてカラー映像信号を得るように
したビデオカメラ等が知られている。
像素子上に異なる色光を透過させる色フィルタを２次元
幾何学状に順次配し、被写体像を光学レンズ系により上
記撮像素子上に結像させてカラー映像信号を得るように
したビデオカメラ等が知られている。
【０００３】また、上記色フィルタの配列としては、補
色と原色（マゼンタＭｇ，グリーンＧ，シアンＣｙ，イ
エローＹｅ）をモザイク上に配列したものが知られてい
る。
色と原色（マゼンタＭｇ，グリーンＧ，シアンＣｙ，イ
エローＹｅ）をモザイク上に配列したものが知られてい
る。
【０００４】このような補色モザイクのカラーフィルタ
が前面に配された撮像素子を有するビデオカメラ等の撮
像装置においては、撮像素子を以下のように制御するこ
とによって、上述の各色フィルタから得られる所定の撮
像（画素）出力を加算処理して読み出させている。
が前面に配された撮像素子を有するビデオカメラ等の撮
像装置においては、撮像素子を以下のように制御するこ
とによって、上述の各色フィルタから得られる所定の撮
像（画素）出力を加算処理して読み出させている。
【０００５】すなわち、偶数フィールドにおいては、垂
直方向に隣接したｎ列とｎ＋１列、及びｎ＋２列とｎ＋
３列の画素出力を各行ごとに各々加算して読み出し、奇
数フィールドにおいては、偶数フィールドとは一列ずら
してｎ＋１列とｎ＋２列、及びｎ＋３列とｎ＋４列の画
素出力を各行ごとに各々加算して読み出す。
直方向に隣接したｎ列とｎ＋１列、及びｎ＋２列とｎ＋
３列の画素出力を各行ごとに各々加算して読み出し、奇
数フィールドにおいては、偶数フィールドとは一列ずら
してｎ＋１列とｎ＋２列、及びｎ＋３列とｎ＋４列の画
素出力を各行ごとに各々加算して読み出す。
【０００６】これによって、偶数フィールドの ｎ列 ｍ行では ＷＢ＝Ｍｇ＋Ｃｙ＝Ｒ＋Ｇ＋２Ｂが得られ、 ｎ列ｍ＋１行では ＧＲ＝Ｇ＋Ｙｅ＝２Ｇ＋Ｒ、 ｎ＋１列 ｍ行では ＧＢ＝Ｇ＋Ｃｙ＝２Ｇ＋Ｂ、 ｎ＋１列ｍ＋１行では ＷＲ＝Ｍｇ＋Ｙｅ＝２Ｒ＋Ｇ＋Ｂが得られる。
【０００７】一方、奇数フィールドの ｎ列 ｍ行では ＧＢ＝Ｇ＋Ｃｙ＝２Ｇ＋Ｂ、 ｎ列ｍ＋１行では ＷＲ＝Ｍｇ＋Ｙｅ＝２Ｒ＋Ｇ＋Ｂ、 ｎ＋１列 ｍ行では ＷＢ＝Ｃｙ＋Ｍｇ＝Ｒ＋Ｇ＋２Ｂ、 ｎ＋１列ｍ＋１行では ＧＲ＝Ｇ＋Ｙｅ＝２Ｇ＋Ｒが得られる。
【０００８】更に、上記撮像素子より後段に設けられた
信号処理回路により、上述の４種類の撮像素子の出力信
号を加減算することによって以下の輝度成分信号及び色
差成分信号を得る。
信号処理回路により、上述の４種類の撮像素子の出力信
号を加減算することによって以下の輝度成分信号及び色
差成分信号を得る。
【０００９】 輝度成分信号 ｙ＝ＷＢ＋ＧＲまたはＷＲ＋ＧＢ 色差成分信号ｃｒ＝ＷＲ−ＧＢ，ｃｂ＝ＷＢ−ＧＲ また従来の撮像装置においては、上記撮像信号からテレ
ビジョン信号を生成する場合、上述の処理で得られた輝
度成分信号及び色差成分信号をテレビジョン信号を生成
する過程で輝度信号及び色差信号として利用している。
ビジョン信号を生成する場合、上述の処理で得られた輝
度成分信号及び色差成分信号をテレビジョン信号を生成
する過程で輝度信号及び色差信号として利用している。
【００１０】
【発明が解決しようとする課題】しかしながら、上記の
ような従来の撮像装置にあっては、テレビジョン信号規
格で定められている信号組成とは異なった色差成分信号
を色差信号として利用しているため、正確な色信号が得
られず、色再現性が劣化するという問題点があった。
ような従来の撮像装置にあっては、テレビジョン信号規
格で定められている信号組成とは異なった色差成分信号
を色差信号として利用しているため、正確な色信号が得
られず、色再現性が劣化するという問題点があった。
【００１１】本発明は、上記のような問題点に着目して
なされたもので、正確な色信号を得ることができ、色再
現性が良好な撮像装置を提供することを目的としてい
る。
なされたもので、正確な色信号を得ることができ、色再
現性が良好な撮像装置を提供することを目的としてい
る。
【００１２】
【課題を解決するための手段】本発明の撮像装置は、次
のように構成したものである。
のように構成したものである。
【００１３】（１）被写体からの撮像光を光電変換する
撮像手段と、この撮像手段の出力から輝度成分信号と色
差成分信号を生成する信号処理手段と、生成された輝度
成分信号と色差成分信号から色信号を生成するためのマ
トリクス演算手段とを備え、前記マトリクス演算手段に
おけるマトリクス係数を、複数の異なる撮影条件で撮影
した時の前記撮像手段の出力に基づいて設定するように
した。
撮像手段と、この撮像手段の出力から輝度成分信号と色
差成分信号を生成する信号処理手段と、生成された輝度
成分信号と色差成分信号から色信号を生成するためのマ
トリクス演算手段とを備え、前記マトリクス演算手段に
おけるマトリクス係数を、複数の異なる撮影条件で撮影
した時の前記撮像手段の出力に基づいて設定するように
した。
【００１４】（２）被写体からの撮像光を光電変換する
撮像手段と、この撮像手段の出力から輝度成分信号と色
差成分信号を生成する信号処理手段と、生成された輝度
成分信号と色差成分信号から色信号を生成するためのマ
トリクス演算手段と、被写体の撮像信号から得られた二
つの色差信号を積分する積分手段と、この積分手段の出
力に基づいて前記マトリクス演算手段におけるマトリク
ス係数を可変させる制御手段とを備えた。
撮像手段と、この撮像手段の出力から輝度成分信号と色
差成分信号を生成する信号処理手段と、生成された輝度
成分信号と色差成分信号から色信号を生成するためのマ
トリクス演算手段と、被写体の撮像信号から得られた二
つの色差信号を積分する積分手段と、この積分手段の出
力に基づいて前記マトリクス演算手段におけるマトリク
ス係数を可変させる制御手段とを備えた。
【００１５】（３）被写体からの撮像光を光電変換する
撮像手段と、この撮像手段の出力から輝度成分信号と色
差成分信号を生成する信号処理手段と、生成された輝度
成分信号と色差成分信号から色信号を生成するためのマ
トリクス演算手段と、被写体の原色信号が存在する領域
を検出する検出手段と、検出された原色信号の存在する
領域及びのその領域に該当する前記マトリクス演算手段
の色分離出力に基づいて該マトリクス演算手段における
マトリクス係数を可変させる制御手段とを備えた。
撮像手段と、この撮像手段の出力から輝度成分信号と色
差成分信号を生成する信号処理手段と、生成された輝度
成分信号と色差成分信号から色信号を生成するためのマ
トリクス演算手段と、被写体の原色信号が存在する領域
を検出する検出手段と、検出された原色信号の存在する
領域及びのその領域に該当する前記マトリクス演算手段
の色分離出力に基づいて該マトリクス演算手段における
マトリクス係数を可変させる制御手段とを備えた。
【００１６】
【作用】本発明の撮像装置においては、色分離処理を行
うマトリクス演算手段におけるマトリクス係数が被写体
に応じて可変され、正確な色信号が得られ、色再現性が
良好となる。
うマトリクス演算手段におけるマトリクス係数が被写体
に応じて可変され、正確な色信号が得られ、色再現性が
良好となる。
【００１７】
【実施例】図１は本発明の一実施例の構成を示すブロッ
ク図であり、ビデオカメラに適用した場合の電気的回路
構成を示している。本実施例は、前述のようにして得ら
れた輝度成分信号及び色差成分信号を所定の色分離マト
リクス係数を用いてマトリクス演算を行うことにより色
信号を生成し、この色信号に基づいて色差信号を形成す
るものである。
ク図であり、ビデオカメラに適用した場合の電気的回路
構成を示している。本実施例は、前述のようにして得ら
れた輝度成分信号及び色差成分信号を所定の色分離マト
リクス係数を用いてマトリクス演算を行うことにより色
信号を生成し、この色信号に基づいて色差信号を形成す
るものである。
【００１８】被写体からの撮像光は、レンズ１及びアイ
リス２等から構成される光学系を通過して、前述のフィ
ルタを配した撮像手段であるＣＣＤ３等の撮像素子の受
光面に結像し、ここで電気信号に光電変換される。ま
た、上記レンズ１，アイリス２，ＣＣＤ３は、各々レン
ズ駆動手段４，絞り駆動手段５，ＣＣＤ駆動回路６によ
ってそれぞれ駆動されるようになっている。
リス２等から構成される光学系を通過して、前述のフィ
ルタを配した撮像手段であるＣＣＤ３等の撮像素子の受
光面に結像し、ここで電気信号に光電変換される。ま
た、上記レンズ１，アイリス２，ＣＣＤ３は、各々レン
ズ駆動手段４，絞り駆動手段５，ＣＣＤ駆動回路６によ
ってそれぞれ駆動されるようになっている。
【００１９】上記ＣＣＤ３から出力された撮像信号は、
相関２重サンプル回路（ＣＤＳ）７でノイズを抑圧さ
れ、ＡＧＣ回路８にて振幅を調整された後、クランプ回
路９でクランプされ、Ａ／Ｄ変換器１０によってディジ
タル信号に変換されてディジタル信号処理回路（信号処
理手段）１１に供給される。このディジタル信号処理回
路１１は、上記の操作により得られたディジタル信号に
基づいて各原色信号Ｒ，Ｇ，Ｂ及び輝度信号Ｙを生成す
る。
相関２重サンプル回路（ＣＤＳ）７でノイズを抑圧さ
れ、ＡＧＣ回路８にて振幅を調整された後、クランプ回
路９でクランプされ、Ａ／Ｄ変換器１０によってディジ
タル信号に変換されてディジタル信号処理回路（信号処
理手段）１１に供給される。このディジタル信号処理回
路１１は、上記の操作により得られたディジタル信号に
基づいて各原色信号Ｒ，Ｇ，Ｂ及び輝度信号Ｙを生成す
る。
【００２０】上記生成された各原色信号は、マトリクス
演算手段１２に供給され、ここで色差信号Ｒ−Ｙ（＝．
７Ｒ−．５９Ｇ−．１１Ｇ），Ｂ−Ｙ（＝−．３Ｒ−．
５９Ｇ＋．８９Ｂ）が得られる。この色差信号は、エン
コーダ１３に供給され、所定の放送規格の搬送色信号に
変調された後、Ｄ／Ａ変換器１４によりアナログ信号に
変換され、搬送色信号出力端子１５より出力される。
演算手段１２に供給され、ここで色差信号Ｒ−Ｙ（＝．
７Ｒ−．５９Ｇ−．１１Ｇ），Ｂ−Ｙ（＝−．３Ｒ−．
５９Ｇ＋．８９Ｂ）が得られる。この色差信号は、エン
コーダ１３に供給され、所定の放送規格の搬送色信号に
変調された後、Ｄ／Ａ変換器１４によりアナログ信号に
変換され、搬送色信号出力端子１５より出力される。
【００２１】また、上記ディジタル信号処理回路１１か
ら出力された輝度信号は、加算器１６によって複合同期
信号を付加された後、Ｄ／Ａ変換器１７によりアナログ
信号に変換され、輝度信号出力端子１８から出力され
る。
ら出力された輝度信号は、加算器１６によって複合同期
信号を付加された後、Ｄ／Ａ変換器１７によりアナログ
信号に変換され、輝度信号出力端子１８から出力され
る。
【００２２】ここで、上述の各回路、手段等はマイクロ
コンピュータ等を用いた制御回路（制御手段）１９，タ
イミング制御信号発生回路２０，クロック発生手段２
１，２２から出力される各種信号により制御、駆動され
るようになっている。
コンピュータ等を用いた制御回路（制御手段）１９，タ
イミング制御信号発生回路２０，クロック発生手段２
１，２２から出力される各種信号により制御、駆動され
るようになっている。
【００２３】すなわち、制御回路１９は不図示の内蔵プ
ログラム及び上記ディジタル信号処理回路１１から得ら
れた輝度成分信号及び色差成分信号に基づいて、マトリ
クス係数信号を信号処理回路１１に、利得制御信号ＡＧ
Ｃ回路８に、レンズ駆動信号をレンズ駆動手段４に、ア
イリス駆動信号をアイリス２の絞り駆動手段５にそれぞ
れ発生、供給する。
ログラム及び上記ディジタル信号処理回路１１から得ら
れた輝度成分信号及び色差成分信号に基づいて、マトリ
クス係数信号を信号処理回路１１に、利得制御信号ＡＧ
Ｃ回路８に、レンズ駆動信号をレンズ駆動手段４に、ア
イリス駆動信号をアイリス２の絞り駆動手段５にそれぞ
れ発生、供給する。
【００２４】またタイミング制御信号発生回路２０は、
ＣＣＤ撮像信号を読み出すための垂直・水平同期タイミ
ングを表すＶＤ，ＨＤをＣＣＤ駆動回路６に、ＶＤを積
分器７０に、ＣＣＤ３から読み出されてＣＤＳ処理を施
された信号をクランプするためのクランプ信号ｃｌａｍ
ｐをクランプ回路９に、ＣＣＤ３から読み出された信号
のフィールド・ライン・画素を識別するための信号ｐｉ
ｘ−ｉｄを信号処理回路１１に、複合同期信号を付加す
るタイミングを表す信号Ｃｓｙｎｃを輝度信号へ複合同
期信号を付加するための加算器１６に、ブランクタイミ
ング信号ＢＬＫ、カラーバーストタイミング信号ＢＦ、
ＰＡＬ方式の搬送色信号を生成する時のためのライン極
性信号ＡＬＴ、及び変調方式を指定するための信号Ｎ／
Ｐをエンコーダ１３にそれぞれ供給する。
ＣＣＤ撮像信号を読み出すための垂直・水平同期タイミ
ングを表すＶＤ，ＨＤをＣＣＤ駆動回路６に、ＶＤを積
分器７０に、ＣＣＤ３から読み出されてＣＤＳ処理を施
された信号をクランプするためのクランプ信号ｃｌａｍ
ｐをクランプ回路９に、ＣＣＤ３から読み出された信号
のフィールド・ライン・画素を識別するための信号ｐｉ
ｘ−ｉｄを信号処理回路１１に、複合同期信号を付加す
るタイミングを表す信号Ｃｓｙｎｃを輝度信号へ複合同
期信号を付加するための加算器１６に、ブランクタイミ
ング信号ＢＬＫ、カラーバーストタイミング信号ＢＦ、
ＰＡＬ方式の搬送色信号を生成する時のためのライン極
性信号ＡＬＴ、及び変調方式を指定するための信号Ｎ／
Ｐをエンコーダ１３にそれぞれ供給する。
【００２５】またクロック発生手段２１から出力される
クロックＭＣＬＫは、ＣＣＤ駆動回路６、ＣＤＳ回路
７、Ａ／Ｄ変換器１０、信号処理回路１１、Ｄ／Ａ変換
器１４，１７、制御回路１９、タイミング制御信号発生
回路２０、及び積分器７０に供給される。クロック発生
器２２から出力されるクロックＳＣは、エンコーダ１３
及びＤ／Ａ変換器１４に供給され、ＰＡＬ方式の変調が
選択された場合にＭＣＬＫの代わりに用いられる。
クロックＭＣＬＫは、ＣＣＤ駆動回路６、ＣＤＳ回路
７、Ａ／Ｄ変換器１０、信号処理回路１１、Ｄ／Ａ変換
器１４，１７、制御回路１９、タイミング制御信号発生
回路２０、及び積分器７０に供給される。クロック発生
器２２から出力されるクロックＳＣは、エンコーダ１３
及びＤ／Ａ変換器１４に供給され、ＰＡＬ方式の変調が
選択された場合にＭＣＬＫの代わりに用いられる。
【００２６】次に、ディジタル処理回路１１の動作につ
いて説明する。このディジタル信号処理回路１１は、図
２に示すように、遅延部３０と前処理部４０とマトリク
ス演算部５０、及び後処理部６０とから概略構成され、
遅延部３０にて所定の画素の撮像信号を抽出した後、前
処理部４０にてそれら撮像信号からカメラ輝度信号ｃｙ
とカメラ色差信号ｃｒｙ，ｃｂｙを生成し、その信号ｃ
ｙ，ｃｒｙ，ｃｂｙに基づいてマトリクス演算部５０は
ＲＧＢ信号を生成するようになっている。
いて説明する。このディジタル信号処理回路１１は、図
２に示すように、遅延部３０と前処理部４０とマトリク
ス演算部５０、及び後処理部６０とから概略構成され、
遅延部３０にて所定の画素の撮像信号を抽出した後、前
処理部４０にてそれら撮像信号からカメラ輝度信号ｃｙ
とカメラ色差信号ｃｒｙ，ｃｂｙを生成し、その信号ｃ
ｙ，ｃｒｙ，ｃｂｙに基づいてマトリクス演算部５０は
ＲＧＢ信号を生成するようになっている。
【００２７】以下、図２を用いて詳細を説明する。
【００２８】上記遅延部３０は、１画素遅延手段３１，
３２，３３，３４，３５，３６と、（１水平ライン−２
画素）遅延手段３７，３８から構成されており、各遅延
手段３１，３２，３７，３３，３４，３８，３５，３６
が直列に接続されている。したがって、各々の遅延手段
からの出力は、遅延手段３３の出力を中心とした３＊３
の正方格子上の各点に相当する信号となり、遅延手段３
３の出力に対し、撮像画面上 遅延手段３１の入力は１垂直画素右で且つ １水平ライン下、 遅延手段３１の出力は同一垂直ライン上で且つ １水平ライン下、 遅延手段３２の出力は１垂直画素左で且つ １水平ライン下、 遅延手段３７の出力は１垂直画素右で且つ 同一ライン上、 遅延手段３４の出力は１垂直画素左で且つ 同一ライン上、 遅延手段３８の出力は１垂直画素右で且つ １水平ライン上、 遅延手段３５の出力は同一垂直ライン上且つ １水平ライン上、 遅延手段３６の出力は垂直１画素左で且つ １水平ライン上、 そして、（遅延手段３１の入力、遅延手段３２の出力、
遅延手段３８の出力、遅延手段３６の出力）、（遅延手
段３１の出力、遅延手段３５の出力）、（遅延手段３７
の出力、遅延手段３４の出力）、（遅延手段３３の出
力）の各出力グループには、前述のＣＣＤ３の４種の出
力信号ＷＢ，ＷＲ，ＧＲ，ＧＢのいずれかが必ず全種類
出力されている。また、上記各画素出力は、上記前処理
部４０に供給され、ここでカメラ輝度成分信号ｃｙ及び
カメラ色差成分信号ｃｒｙ，ｃｂｙが生成される。
３２，３３，３４，３５，３６と、（１水平ライン−２
画素）遅延手段３７，３８から構成されており、各遅延
手段３１，３２，３７，３３，３４，３８，３５，３６
が直列に接続されている。したがって、各々の遅延手段
からの出力は、遅延手段３３の出力を中心とした３＊３
の正方格子上の各点に相当する信号となり、遅延手段３
３の出力に対し、撮像画面上 遅延手段３１の入力は１垂直画素右で且つ １水平ライン下、 遅延手段３１の出力は同一垂直ライン上で且つ １水平ライン下、 遅延手段３２の出力は１垂直画素左で且つ １水平ライン下、 遅延手段３７の出力は１垂直画素右で且つ 同一ライン上、 遅延手段３４の出力は１垂直画素左で且つ 同一ライン上、 遅延手段３８の出力は１垂直画素右で且つ １水平ライン上、 遅延手段３５の出力は同一垂直ライン上且つ １水平ライン上、 遅延手段３６の出力は垂直１画素左で且つ １水平ライン上、 そして、（遅延手段３１の入力、遅延手段３２の出力、
遅延手段３８の出力、遅延手段３６の出力）、（遅延手
段３１の出力、遅延手段３５の出力）、（遅延手段３７
の出力、遅延手段３４の出力）、（遅延手段３３の出
力）の各出力グループには、前述のＣＣＤ３の４種の出
力信号ＷＢ，ＷＲ，ＧＲ，ＧＢのいずれかが必ず全種類
出力されている。また、上記各画素出力は、上記前処理
部４０に供給され、ここでカメラ輝度成分信号ｃｙ及び
カメラ色差成分信号ｃｒｙ，ｃｂｙが生成される。
【００２９】すなわち、この前処理部４０は、加算平均
回路４１，４２，４３、切換え回路４４、平滑化回路４
５、及び減算器４６，４７より構成されており、平滑化
回路４５には遅延手段３７，３３，３４の出力が供給さ
れ、カメラ輝度成分信号ｃｙが生成される。
回路４１，４２，４３、切換え回路４４、平滑化回路４
５、及び減算器４６，４７より構成されており、平滑化
回路４５には遅延手段３７，３３，３４の出力が供給さ
れ、カメラ輝度成分信号ｃｙが生成される。
【００３０】また上記加算平均回路４１，４２，４３に
は、（遅延手段３１の入力、遅延手段３２の出力、遅延
手段３８の出力、遅延手段３６の出力）、（遅延手段３
１の出力、遅延手段３５の出力）、（遅延手段３７の出
力、遅延手段３４の出力）の各出力グループが供給さ
れ、その出力は遅延手段３３の出力とともに切換え回路
４４に供給されている。この切換え回路４４には、フィ
ールド・ライン・画素順次シーケンスを表す信号ｐｉｘ
−ｉｄが供給され、これにより切換え回路４４の出力端
子には常時ＷＢ，ＷＲ，ＧＲ，ＧＢが出力されてい
る、。
は、（遅延手段３１の入力、遅延手段３２の出力、遅延
手段３８の出力、遅延手段３６の出力）、（遅延手段３
１の出力、遅延手段３５の出力）、（遅延手段３７の出
力、遅延手段３４の出力）の各出力グループが供給さ
れ、その出力は遅延手段３３の出力とともに切換え回路
４４に供給されている。この切換え回路４４には、フィ
ールド・ライン・画素順次シーケンスを表す信号ｐｉｘ
−ｉｄが供給され、これにより切換え回路４４の出力端
子には常時ＷＢ，ＷＲ，ＧＲ，ＧＢが出力されてい
る、。
【００３１】上記切換え回路４４の出力から得られたＷ
Ｂ，ＷＲ，ＧＲ，ＧＢの信号は減算器４６，４７に供給
され、ＷＲ−ＧＢ，ＷＢ−ＧＲの演算が行われ、カメラ
色差成分信号ｃｒｙ，ｃｂｙが出力される。この減算器
４６，４７から出力されたカメラ色差成分信号ｃｒｙ，
ｃｂｙ及び平滑化回路４５から出力されたカメラ輝度成
分信号ｃｙはマトリクス演算部５０に供給され、所定の
色分離マトリクス演算が行われる。
Ｂ，ＷＲ，ＧＲ，ＧＢの信号は減算器４６，４７に供給
され、ＷＲ−ＧＢ，ＷＢ−ＧＲの演算が行われ、カメラ
色差成分信号ｃｒｙ，ｃｂｙが出力される。この減算器
４６，４７から出力されたカメラ色差成分信号ｃｒｙ，
ｃｂｙ及び平滑化回路４５から出力されたカメラ輝度成
分信号ｃｙはマトリクス演算部５０に供給され、所定の
色分離マトリクス演算が行われる。
【００３２】マトリクス演算部５０は、複数の乗算器５
１〜５９、加算器５ａ，５ｂ，５ｃから構成されてお
り、各乗算器のマトリクス係数は制御回路１９から供給
されるマトリクス係数信号ｍａｔ−ｃｏｅｆに基づいて
設定され、上記の各信号ｃｙ，ｃｒｙ，ｃｂｙにマトリ
クス演算を施して原色信号Ｒ，Ｇ，Ｂを生成する。この
原色信号は、γ・ニー処理回路６０，６１，６２からな
る後処理部６０にて処理され、出力端子６４，６５，６
６からそれぞれ出力される。
１〜５９、加算器５ａ，５ｂ，５ｃから構成されてお
り、各乗算器のマトリクス係数は制御回路１９から供給
されるマトリクス係数信号ｍａｔ−ｃｏｅｆに基づいて
設定され、上記の各信号ｃｙ，ｃｒｙ，ｃｂｙにマトリ
クス演算を施して原色信号Ｒ，Ｇ，Ｂを生成する。この
原色信号は、γ・ニー処理回路６０，６１，６２からな
る後処理部６０にて処理され、出力端子６４，６５，６
６からそれぞれ出力される。
【００３３】また、上記カメラ輝度成分信号ｃｙより広
帯域の輝度信号Ｙが生成されるが、これは、上記遅延部
３０の遅延手段３３の出力ｃｃが輝度信号抽出用のフィ
ルタ８０を介してγ・ニー処理回路８１に供給されるこ
とにより生成される。そして、この輝度信号Ｙは出力端
子８２より出力される。
帯域の輝度信号Ｙが生成されるが、これは、上記遅延部
３０の遅延手段３３の出力ｃｃが輝度信号抽出用のフィ
ルタ８０を介してγ・ニー処理回路８１に供給されるこ
とにより生成される。そして、この輝度信号Ｙは出力端
子８２より出力される。
【００３４】次に、上記マトリクス演算部５０で使用さ
れるマトリクス係数の生成方法について述べる。
れるマトリクス係数の生成方法について述べる。
【００３５】上記それぞれ色分離した後のＲＧＢ出力が （Ｘ，０，０），（０，Ｙ，０），（０，０，Ｚ） のようになるようにしたい被写体像を撮像し、その結
果、ＣＣＤ３からＷＢ，ＷＲ，ＧＲ，ＧＢの４信号の値
としてそれぞれ次の信号 sigx＝(WBx,WRx,GRx,GBx),sigy＝(WBy,WRy,GRy,GBy),sigz＝(WBz,WRz,GRz,GBz) が得られた時、色分離マトリクスＡ＝［βi αij］（i=
0,1,2 、j=0,1,2)は以下のように定められる。
果、ＣＣＤ３からＷＢ，ＷＲ，ＧＲ，ＧＢの４信号の値
としてそれぞれ次の信号 sigx＝(WBx,WRx,GRx,GBx),sigy＝(WBy,WRy,GRy,GBy),sigz＝(WBz,WRz,GRz,GBz) が得られた時、色分離マトリクスＡ＝［βi αij］（i=
0,1,2 、j=0,1,2)は以下のように定められる。
【００３６】
【数１】
【００３７】ここで、 (k0,k1,k2)=(X,0,0) (i=0) (0,Y,0) (i=1) (0,0,Z) (i=2) ｘ０＝ＷＢｘ＋ＧＲｘ または ＷＲｘ＋ＧＢｘ ｙ０＝ＷＢｙ＋ＧＲｙ または ＷＲｙ＋ＧＢｙ ｚ０＝ＷＢｚ＋ＧＲｚ または ＷＲｚ＋ＧＢｚ ｘ１＝ＷＲｘ−ＧＢｘ ｙ１＝ＷＲｙ−ＧＢｙ ｚ１＝ＷＲｚ−ＧＢｚ ｘ２＝ＷＢｘ−ＧＲｘ ｙ２＝ＷＢｙ−ＧＲｙ ｚ２＝ＷＢｚ−ＧＲｚ である。
【００３８】そして制御回路１９は、上述の手法で算出
されたマトリクス係数をマトリクス演算部５０に設定
し、色分離処理を実行する。
されたマトリクス係数をマトリクス演算部５０に設定
し、色分離処理を実行する。
【００３９】また本実施例における前記制御回路１９
は、上述のようにして得られたマトリクス係数α０，α
１を異なる色温度ｋ０，ｋ１において求め、内部の記憶
手段に保持しておき、撮影時の環境により次の式からマ
トリクス係数を設定し、信号処理部１１に設定する。
は、上述のようにして得られたマトリクス係数α０，α
１を異なる色温度ｋ０，ｋ１において求め、内部の記憶
手段に保持しておき、撮影時の環境により次の式からマ
トリクス係数を設定し、信号処理部１１に設定する。
【００４０】αｉｊ＝ｋα０ｉｊ＋（１−ｋ）α１ｉｊ 次に、上式におけるマトリクス混合係数ｋの決定方法に
ついて述べる。
ついて述べる。
【００４１】図１のマトリクス演算手段１２から出力さ
れた色差信号ｒｙ，ｂｙは、積分器７０に入力されてお
り、その演算出力ｗｂｖａｌは制御回路１９へ供給され
ている。図３に積分器７０の構成例を示す。
れた色差信号ｒｙ，ｂｙは、積分器７０に入力されてお
り、その演算出力ｗｂｖａｌは制御回路１９へ供給され
ている。図３に積分器７０の構成例を示す。
【００４２】上記積分器７０への色差信号は、まず加算
器７１に入力される。この加算器７１の出力端子は加算
器７２の一方の入力端子に接続されており、加算器７２
の出力は、ＭＣＬＫをクロックとし、ＶＤをリセット信
号とするラッチ回路７３に供給されている。またラッチ
回路７３の出力は、ＶＤをクロックとするラッチ回路７
４に供給されている。これによって、ラッチ回路７４か
らは１フィールド区間の色差信号の積分値が制御回路１
９に供給される。そして制御回路１９は、その積分器７
０の出力に応じてマトリクス係数ｋを可変させる。
器７１に入力される。この加算器７１の出力端子は加算
器７２の一方の入力端子に接続されており、加算器７２
の出力は、ＭＣＬＫをクロックとし、ＶＤをリセット信
号とするラッチ回路７３に供給されている。またラッチ
回路７３の出力は、ＶＤをクロックとするラッチ回路７
４に供給されている。これによって、ラッチ回路７４か
らは１フィールド区間の色差信号の積分値が制御回路１
９に供給される。そして制御回路１９は、その積分器７
０の出力に応じてマトリクス係数ｋを可変させる。
【００４３】このように、本実施例においては、撮像出
力を色分離マトリクスに基づいて各原色信号に色分離
し、この原色信号に基づいて本来の色差信号を得るよう
に構成し、更に、上記色分離マトリクスは、各色の被写
体を予め撮影して最適な色信号を得られるように設定さ
れたものであるため、極めて正確な色信号を得ることが
でき、良好な色再現性を実現することができる。
力を色分離マトリクスに基づいて各原色信号に色分離
し、この原色信号に基づいて本来の色差信号を得るよう
に構成し、更に、上記色分離マトリクスは、各色の被写
体を予め撮影して最適な色信号を得られるように設定さ
れたものであるため、極めて正確な色信号を得ることが
でき、良好な色再現性を実現することができる。
【００４４】また、本実施例においては、撮影条件に応
じて上記色分離マトリクス係数を適宜補正することによ
って、色温度の影響を受けることなく正確な色信号を得
ることができ、これによっても良好な色再現性を実現す
ることができる。
じて上記色分離マトリクス係数を適宜補正することによ
って、色温度の影響を受けることなく正確な色信号を得
ることができ、これによっても良好な色再現性を実現す
ることができる。
【００４５】図４は本発明の他の実施例の構成を示すブ
ロック図であり、また図５はそのディジタル信号処理回
路１１の具体的構成を示す図である。これらの図におい
て、図１，図２と同一符号は同一構成部分を示してい
る。
ロック図であり、また図５はそのディジタル信号処理回
路１１の具体的構成を示す図である。これらの図におい
て、図１，図２と同一符号は同一構成部分を示してい
る。
【００４６】前述の実施例では色差信号を積分する積分
器７０を設け、この積分器７０の出力に基づいてマトリ
クス演算手段１２におけるマトリクス係数を制御回路１
９により可変させるようにしたが、本実施例では、被写
体の原色信号が存在する領域を検出する原色信号検出器
（検出手段）９０を設け、検出された原色信号の存在す
る領域及びその領域に該当するマトリクス演算手段１２
の色分離出力に基づいて該マトリクス演算手段１２にお
けるマトリクス係数を可変させるようにしている。
器７０を設け、この積分器７０の出力に基づいてマトリ
クス演算手段１２におけるマトリクス係数を制御回路１
９により可変させるようにしたが、本実施例では、被写
体の原色信号が存在する領域を検出する原色信号検出器
（検出手段）９０を設け、検出された原色信号の存在す
る領域及びその領域に該当するマトリクス演算手段１２
の色分離出力に基づいて該マトリクス演算手段１２にお
けるマトリクス係数を可変させるようにしている。
【００４７】すなわち、制御回路１９内には予めＲ，
Ｇ，Ｂの３原色で他の色成分の混入がないように色分離
したい映像のＷＢ，ＷＲ，ＧＲ，ＧＢ信号の比の許容値
が記憶されており、信号ＰＲＭＣＬＲＳとして信号処理
回路１１に入力されている。この信号ＰＲＭＣＬＲＳ
は、該信号処理回路１１内の原色信号検出器９０に入力
され、検出器９０には他に切換え回路４４より出力され
たＷＢ，ＷＲ，ＧＲ，ＧＢ信号が入力されている。図６
にこの原色信号検出器９０の具体的構成を示す。
Ｇ，Ｂの３原色で他の色成分の混入がないように色分離
したい映像のＷＢ，ＷＲ，ＧＲ，ＧＢ信号の比の許容値
が記憶されており、信号ＰＲＭＣＬＲＳとして信号処理
回路１１に入力されている。この信号ＰＲＭＣＬＲＳ
は、該信号処理回路１１内の原色信号検出器９０に入力
され、検出器９０には他に切換え回路４４より出力され
たＷＢ，ＷＲ，ＧＲ，ＧＢ信号が入力されている。図６
にこの原色信号検出器９０の具体的構成を示す。
【００４８】前述のＣＣＤ出力の４種類の信号は、その
うち１つの信号で除されることにより正規化され、信号
比の信号として除算器から出力される。図６の例では、
ＷＢ信号が除数として、他の３種類の信号が比除数とし
て除算器９０，９１，９２に入力されており、これによ
ってＣＣＤ出力のＷＢ：ＷＲ：ＧＲ：ＧＢ＝１：Ｘ：
Ｙ：Ｚの比が算出される。この除算器で算出された信号
レベル比は、レンジ内検出器９３，９４，９５，９６，
９７，９８，９９，１００，１０１に１入力として供給
されている。
うち１つの信号で除されることにより正規化され、信号
比の信号として除算器から出力される。図６の例では、
ＷＢ信号が除数として、他の３種類の信号が比除数とし
て除算器９０，９１，９２に入力されており、これによ
ってＣＣＤ出力のＷＢ：ＷＲ：ＧＲ：ＧＢ＝１：Ｘ：
Ｙ：Ｚの比が算出される。この除算器で算出された信号
レベル比は、レンジ内検出器９３，９４，９５，９６，
９７，９８，９９，１００，１０１に１入力として供給
されている。
【００４９】上記レンジ内検出器は、入力された信号レ
ベル比があるレンジ内の値か否かを検出する機能を有し
ており、そのレンジとして上、下限となる値の入力端子
を有している。この上、下限値の入力端子には、上記制
御回路１９に予め記憶された原色信号に色分離する時の
ＣＣＤ出力信号の比が供給されている。また、レンジ内
検出器９３，９４，９５の出力がアンドゲート１０２
に、検出器９６，９７，９８の出力がアンドゲート１０
３に、供給器９９，１００，１０１の出力がアンドゲー
ト１０４にそれぞれ入力され、これらのアンドゲート１
０２，１０３，１０４の出力が上記制御回路１９に供給
されている。そして、制御回路１９は、上記アンドゲー
ト出力が原色信号を検出した時の信号処理回路１１の
Ｒ，Ｇ，Ｂ出力をＲ，Ｇ，Ｂ原色信号の他の成分が小さ
くなるようにマトリクス係数ｋを可変させる。
ベル比があるレンジ内の値か否かを検出する機能を有し
ており、そのレンジとして上、下限となる値の入力端子
を有している。この上、下限値の入力端子には、上記制
御回路１９に予め記憶された原色信号に色分離する時の
ＣＣＤ出力信号の比が供給されている。また、レンジ内
検出器９３，９４，９５の出力がアンドゲート１０２
に、検出器９６，９７，９８の出力がアンドゲート１０
３に、供給器９９，１００，１０１の出力がアンドゲー
ト１０４にそれぞれ入力され、これらのアンドゲート１
０２，１０３，１０４の出力が上記制御回路１９に供給
されている。そして、制御回路１９は、上記アンドゲー
ト出力が原色信号を検出した時の信号処理回路１１の
Ｒ，Ｇ，Ｂ出力をＲ，Ｇ，Ｂ原色信号の他の成分が小さ
くなるようにマトリクス係数ｋを可変させる。
【００５０】このような構成としても、前述の実施例と
同等の作用効果が得られ、正確な色信号を得ることがで
き、被写体の原色部分の彩度が向上し、良好な色再現性
を実現させることができる。
同等の作用効果が得られ、正確な色信号を得ることがで
き、被写体の原色部分の彩度が向上し、良好な色再現性
を実現させることができる。
【００５１】
【発明の効果】以上説明したように、本発明によれば、
色分離処理を行うマトリクス演算手段におけるマトリク
ス係数を被写体に応じて可変するようにしたので、正確
な色信号を得ることができ、良好な色再現性が得られる
という効果がある。
色分離処理を行うマトリクス演算手段におけるマトリク
ス係数を被写体に応じて可変するようにしたので、正確
な色信号を得ることができ、良好な色再現性が得られる
という効果がある。
【図１】 本発明の一実施例の構成を示すブロック図
【図２】 図１のディジタル信号処理回路の具体的構成
を示すブロック図
を示すブロック図
【図３】 図１の積分器の具体的構成を示すブロック図
【図４】 本発明の他の実施例の構成を示すブロック図
【図５】 図４のディジタル信号処理回路の具体的構成
を示すブロック図
を示すブロック図
【図６】 図５の原色信号検出器の具体的構成を示すブ
ロック図
ロック図
３ ＣＣＤ（撮像手段） １１ ディジタル信号処理回路（信号処理手段） １２ マトリクス演算手段 １９ 制御回路（制御手段） ７０ 積分器（積分手段） ７１ 原色信号検出器（検出手段）
Claims (3)
- 【請求項１】 被写体からの撮像光を光電変換する撮像
手段と、この撮像手段の出力から輝度成分信号と色差成
分信号を生成する信号処理手段と、生成された輝度成分
信号と色差成分信号から色信号を生成するためのマトリ
クス演算手段とを備え、前記マトリクス演算手段におけ
るマトリクス係数を、複数の異なる撮影条件で撮影した
時の前記撮像手段の出力に基づいて設定することを特徴
とする撮像装置。 - 【請求項２】 被写体からの撮像光を光電変換する撮像
手段と、この撮像手段の出力から輝度成分信号と色差成
分信号を生成する信号処理手段と、生成された輝度成分
信号と色差成分信号から色信号を生成するためのマトリ
クス演算手段と、被写体の撮像信号から得られた二つの
色差信号を積分する積分手段と、この積分手段の出力に
基づいて前記マトリクス演算手段におけるマトリクス係
数を可変させる制御手段とを備えたことを特徴とする撮
像装置。 - 【請求項３】 被写体からの撮像光を光電変換する撮像
手段と、この撮像手段の出力から輝度成分信号と色差成
分信号を生成する信号処理手段と、生成された輝度成分
信号と色差成分信号から色信号を生成するためのマトリ
クス演算手段と、被写体の原色信号が存在する領域を検
出する検出手段と、検出された原色信号の存在する領域
及びのその領域に該当する前記マトリクス演算手段の色
分離出力に基づいて該マトリクス演算手段におけるマト
リクス係数を可変させる制御手段とを備えたことを特徴
とする撮像装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13434194A JP3658012B2 (ja) | 1994-06-16 | 1994-06-16 | 撮像装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13434194A JP3658012B2 (ja) | 1994-06-16 | 1994-06-16 | 撮像装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH089410A true JPH089410A (ja) | 1996-01-12 |
| JP3658012B2 JP3658012B2 (ja) | 2005-06-08 |
Family
ID=15126092
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13434194A Expired - Fee Related JP3658012B2 (ja) | 1994-06-16 | 1994-06-16 | 撮像装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3658012B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7239744B2 (en) | 2001-10-18 | 2007-07-03 | Seiko Epson Corporation | Color conversion method, color conversion apparatus, color conversion matrix generation method and color conversion matrix generation program |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090197948A1 (en) | 2006-05-23 | 2009-08-06 | Shiseido Co., Ltd. | Skin External Preparation |
-
1994
- 1994-06-16 JP JP13434194A patent/JP3658012B2/ja not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7239744B2 (en) | 2001-10-18 | 2007-07-03 | Seiko Epson Corporation | Color conversion method, color conversion apparatus, color conversion matrix generation method and color conversion matrix generation program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3658012B2 (ja) | 2005-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3242515B2 (ja) | 撮像装置 | |
| US5077810A (en) | Distributed digital signal processing system using standard resolution processors for a high resolution sensor | |
| JPH0823543A (ja) | 撮像装置 | |
| KR930002120B1 (ko) | 촬상장치의 디지탈신호 처리장치 | |
| JPH04170882A (ja) | ディジタル・カメラ信号処理装置 | |
| JPH0884348A (ja) | 撮像装置 | |
| US6690418B1 (en) | Image sensing apparatus image signal controller and method | |
| JP3658012B2 (ja) | 撮像装置 | |
| JP3576600B2 (ja) | カラー撮像装置 | |
| JP2557620B2 (ja) | 撮像装置 | |
| US5517240A (en) | Image pickup apparatus including matrix computing process which uses coefficients from image pick-up output of solid state imager to generate primary color components | |
| JP3525445B2 (ja) | ディジタル信号処理カメラ | |
| JPH11177997A (ja) | 相関値算出回路およびその算出方法 | |
| JP2698404B2 (ja) | 輝度信号処理装置 | |
| JP2751248B2 (ja) | 固体撮像装置の信号処理回路 | |
| JPH06141337A (ja) | ディジタル信号処理カメラ | |
| JPH06125565A (ja) | 固体撮像装置 | |
| JP3422027B2 (ja) | カラーカメラ及びその信号処理回路における輝度バランス回路 | |
| JP4214558B2 (ja) | 撮像装置 | |
| JP4137654B2 (ja) | 輪郭信号生成装置および方法 | |
| JP3147056B2 (ja) | 撮像装置 | |
| JPH07203464A (ja) | 撮像装置 | |
| JPS59201595A (ja) | 撮像機 | |
| JPS60149286A (ja) | カラ−固体撮像装置 | |
| JPS6342478B2 (ja) |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041005 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041203 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050308 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050311 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080318 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090318 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100318 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100318 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110318 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120318 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130318 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140318 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |