JPH0564070A - 撮像装置および方法ならびに画像処理装置および方法 - Google Patents
撮像装置および方法ならびに画像処理装置および方法Info
- Publication number
- JPH0564070A JPH0564070A JP3244089A JP24408991A JPH0564070A JP H0564070 A JPH0564070 A JP H0564070A JP 3244089 A JP3244089 A JP 3244089A JP 24408991 A JP24408991 A JP 24408991A JP H0564070 A JPH0564070 A JP H0564070A
- Authority
- JP
- Japan
- Prior art keywords
- image
- brightness
- image signal
- signal representing
- exposure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
(57)【要約】
【目的】 明るい領域と暗い領域との輝度差の大小にか
かわらず適切な画像信号が得られるようにする。 【構成】 被写体は５対１の異なる露光量でＣＣＤ14お
よび15によってそれぞれ撮像される。ＣＣＤ15から出力
される映像信号の輝度ピーク値が白レベルの40％以上の
とき（すなわち，明るい領域の輝度が暗い領域の輝度の
２倍以上のとき）画像のはめ込み合成が選択され，40％
未満のときニー（Knee）処理が選択される。はめ込み合
成処理では，ＣＣＤ14から得られる映像信号によって表
わされる画像の相対的に明るい領域の映像信号がＣＣＤ
15から得られる映像信号によって表わされる画像の対応
する領域の映像信号によって置換される（マルチプレク
サ28）。ニー処理では，ＣＣＤ14の出力映像信号の高輝
度領域が輝度レベル圧縮される（白レベル圧縮プリニー
回路18）。
かわらず適切な画像信号が得られるようにする。 【構成】 被写体は５対１の異なる露光量でＣＣＤ14お
よび15によってそれぞれ撮像される。ＣＣＤ15から出力
される映像信号の輝度ピーク値が白レベルの40％以上の
とき（すなわち，明るい領域の輝度が暗い領域の輝度の
２倍以上のとき）画像のはめ込み合成が選択され，40％
未満のときニー（Knee）処理が選択される。はめ込み合
成処理では，ＣＣＤ14から得られる映像信号によって表
わされる画像の相対的に明るい領域の映像信号がＣＣＤ
15から得られる映像信号によって表わされる画像の対応
する領域の映像信号によって置換される（マルチプレク
サ28）。ニー処理では，ＣＣＤ14の出力映像信号の高輝
度領域が輝度レベル圧縮される（白レベル圧縮プリニー
回路18）。
Description
【発明の詳細な説明】
【０００１】
【技術分野】この発明は，ビデオ・カメラ（ムービ・ビ
デオ・カメラ，スチル・ビデオ・カメラ等を含む）によ
って代表される撮像装置および撮像方法，ならびにビデ
オ・カメラ，表示装置，ビデオ・プリンタ等に内蔵され
るまたは独立して設置される画像処理装置および画像処
理方法に関する。
デオ・カメラ，スチル・ビデオ・カメラ等を含む）によ
って代表される撮像装置および撮像方法，ならびにビデ
オ・カメラ，表示装置，ビデオ・プリンタ等に内蔵され
るまたは独立して設置される画像処理装置および画像処
理方法に関する。
【０００２】
【背景技術】ビデオ・カメラは，撮像した被写体像を表
わす映像信号を発生するＣＣＤ等の固体電子撮像素子を
内蔵している。固体電子撮像素子のダイナミック・レン
ジは比較的狭いので，視野内に含まれる明るい部分と暗
い部分との輝度差が大きいときには撮影が困難である。
わす映像信号を発生するＣＣＤ等の固体電子撮像素子を
内蔵している。固体電子撮像素子のダイナミック・レン
ジは比較的狭いので，視野内に含まれる明るい部分と暗
い部分との輝度差が大きいときには撮影が困難である。
【０００３】たとえば，背景が非常に明るく中央の主要
被写体が暗い場合，逆光の場合，窓のある室内での撮影
において窓を通して外の風景が映る場合等である。この
ようなシーンの撮影において，主要被写体（人物である
場合が多い）が適正に露光されるように露光調整をする
と，明るい背景部分に関しては入射光量が固体電子撮像
素子のダイナミック・レンジを超え素子が飽和してしま
うので，明るい背景は撮影されずその部分の画像は単に
白くなる（白とび）。
被写体が暗い場合，逆光の場合，窓のある室内での撮影
において窓を通して外の風景が映る場合等である。この
ようなシーンの撮影において，主要被写体（人物である
場合が多い）が適正に露光されるように露光調整をする
と，明るい背景部分に関しては入射光量が固体電子撮像
素子のダイナミック・レンジを超え素子が飽和してしま
うので，明るい背景は撮影されずその部分の画像は単に
白くなる（白とび）。
【０００４】そこで一般にはストロボ発光して主要被写
体の輝度を高める工夫がなされる（日中シンクロストロ
ボ撮影）。しかしながら，日中シンクロストロボ撮影の
ためにはストロボ装置が必要であり，カメラが大型化す
るし，その操作も煩わしい。また，暗い部分が遠方にあ
る場合，および近距離の場所から遠方まで広がっている
ような場合には日中シンクロストロボ撮影は必ずしも効
果的とはいえない。
体の輝度を高める工夫がなされる（日中シンクロストロ
ボ撮影）。しかしながら，日中シンクロストロボ撮影の
ためにはストロボ装置が必要であり，カメラが大型化す
るし，その操作も煩わしい。また，暗い部分が遠方にあ
る場合，および近距離の場所から遠方まで広がっている
ような場合には日中シンクロストロボ撮影は必ずしも効
果的とはいえない。
【０００５】そこで発明者は，必ずしもストロボ発光し
なくても，明るい領域と暗い領域との輝度差の大きい被
写体について適切な画像信号が得られるようにする技術
を開発し，本願と同日に特許出願した（発明の名称「ビ
デオ・カメラ，それを用いた撮影方法およびその動作方
法，ならびに画像処理装置および方法」；整理番号９１
１６７；出願人 富士写真フイルム株式会社および富士
フイルムマイクロデバイス株式会社）（以下「はめ込み
合成特許出願」という）。
なくても，明るい領域と暗い領域との輝度差の大きい被
写体について適切な画像信号が得られるようにする技術
を開発し，本願と同日に特許出願した（発明の名称「ビ
デオ・カメラ，それを用いた撮影方法およびその動作方
法，ならびに画像処理装置および方法」；整理番号９１
１６７；出願人 富士写真フイルム株式会社および富士
フイルムマイクロデバイス株式会社）（以下「はめ込み
合成特許出願」という）。
【０００６】このはめ込み合成特許出願の発明の基本思
想は，２つの異なる露光量で被写体を撮像することによ
り，露光量の異なる２つの画像をそれぞれ表わす画像信
号を得，露光量の多い画像を表わす画像信号において，
その画像における輝度が相対的に高い領域を表わす画像
信号を，露光量の少ない画像における対応する領域を表
わす画像信号で置換することにより合成された画像信号
を作成するものである。
想は，２つの異なる露光量で被写体を撮像することによ
り，露光量の異なる２つの画像をそれぞれ表わす画像信
号を得，露光量の多い画像を表わす画像信号において，
その画像における輝度が相対的に高い領域を表わす画像
信号を，露光量の少ない画像における対応する領域を表
わす画像信号で置換することにより合成された画像信号
を作成するものである。
【０００７】このはめ込み合成特許出願の発明による
と，２つの異なる露光量で撮影された２つの画像信号の
適切に露光された部分のみを抽出してこれらを合成して
いるので，合成された画像信号により表わされる画像に
は，２つの部分の輝度差が非常に大きい被写体の画像で
あっても白とびや黒くずれがなくなり，人間が目で見た
シーンをよく再現した非常にすぐれた画像が得られる。
と，２つの異なる露光量で撮影された２つの画像信号の
適切に露光された部分のみを抽出してこれらを合成して
いるので，合成された画像信号により表わされる画像に
は，２つの部分の輝度差が非常に大きい被写体の画像で
あっても白とびや黒くずれがなくなり，人間が目で見た
シーンをよく再現した非常にすぐれた画像が得られる。
【０００８】上述したはめ込み合成特許出願の発明は，
画像の暗い領域と明るい領域との輝度差が非常に大きい
場合（たとえば，平均の輝度比が１対５〜10程度の場
合）にはきわめてすぐれた効果を発揮する。しかしなが
ら，画像に暗い領域と明るい領域とが存在するがそれら
の輝度差がそれほど大きくない場合（たとえば，平均の
輝度比が１対1.5 〜2.0 程度の場合）には，はめ込み合
成を行うと，再生された画像の階調がかえって不自然に
なるおそれがある。
画像の暗い領域と明るい領域との輝度差が非常に大きい
場合（たとえば，平均の輝度比が１対５〜10程度の場
合）にはきわめてすぐれた効果を発揮する。しかしなが
ら，画像に暗い領域と明るい領域とが存在するがそれら
の輝度差がそれほど大きくない場合（たとえば，平均の
輝度比が１対1.5 〜2.0 程度の場合）には，はめ込み合
成を行うと，再生された画像の階調がかえって不自然に
なるおそれがある。
【０００９】
【発明の概要】この発明は，上記はめ込み合成特許出願
の発明を補うものであって，画像の暗い領域と明るい領
域との輝度差が大きい場合，および必ずしも大きくはな
いが輝度差があることが明らかな場合のいずれに対して
も適切に対処しうるようにすることを目的とする。
の発明を補うものであって，画像の暗い領域と明るい領
域との輝度差が大きい場合，および必ずしも大きくはな
いが輝度差があることが明らかな場合のいずれに対して
も適切に対処しうるようにすることを目的とする。
【００１０】この目的を達成するためにこの発明は撮像
装置および方法を提供している。
装置および方法を提供している。
【００１１】この発明による撮像装置は，２つの異なる
露光量で被写体を撮像し，露光量の異なる２つの画像を
それぞれ表わす画像信号を出力する撮像手段，上記画像
信号の少なくともいずれか一方に基づいて，画像におけ
る輝度が相対的に低い領域の平均的な輝度またはその最
大輝度と，輝度が相対的に高い領域の平均的な輝度また
はその最大輝度とを比較し，それらの差または比が所定
値以上のときに画像合成指令を，所定値未満のときにニ
ー処理指令をそれぞれ発生する判定手段，上記画像合成
指令が与えられたときに，露光量の多い画像を表わす画
像信号において，その画像における輝度が相対的に高い
領域を表わす画像信号を，露光量の少ない画像における
対応する領域を表わす画像信号で置換する，または露光
量の少ない画像を表わす画像信号において，その画像に
おける輝度が相対的に低い領域を表わす画像信号を，露
光量の多い画像における対応する領域を表わす画像信号
で置換することにより，合成された画像信号を作成する
画像合成手段，および上記ニー処理指令が与えられたと
きに，露光量の多い画像を表わす画像信号に対して，高
輝度範囲において輝度レベルを圧縮するニー処理を施す
ニー処理手段を備えている。
露光量で被写体を撮像し，露光量の異なる２つの画像を
それぞれ表わす画像信号を出力する撮像手段，上記画像
信号の少なくともいずれか一方に基づいて，画像におけ
る輝度が相対的に低い領域の平均的な輝度またはその最
大輝度と，輝度が相対的に高い領域の平均的な輝度また
はその最大輝度とを比較し，それらの差または比が所定
値以上のときに画像合成指令を，所定値未満のときにニ
ー処理指令をそれぞれ発生する判定手段，上記画像合成
指令が与えられたときに，露光量の多い画像を表わす画
像信号において，その画像における輝度が相対的に高い
領域を表わす画像信号を，露光量の少ない画像における
対応する領域を表わす画像信号で置換する，または露光
量の少ない画像を表わす画像信号において，その画像に
おける輝度が相対的に低い領域を表わす画像信号を，露
光量の多い画像における対応する領域を表わす画像信号
で置換することにより，合成された画像信号を作成する
画像合成手段，および上記ニー処理指令が与えられたと
きに，露光量の多い画像を表わす画像信号に対して，高
輝度範囲において輝度レベルを圧縮するニー処理を施す
ニー処理手段を備えている。
【００１２】この発明の一実施態様においては，上記撮
像手段が，入射光をあらかじめ定められた露光量の比に
応じて分割するビーム・スプリッタ手段，およびこのビ
ーム・スプリッタ手段によって分割された２つの入射光
をそれぞれ受光し，画像信号を出力する２つの固体電子
撮像素子を含むように構成される。
像手段が，入射光をあらかじめ定められた露光量の比に
応じて分割するビーム・スプリッタ手段，およびこのビ
ーム・スプリッタ手段によって分割された２つの入射光
をそれぞれ受光し，画像信号を出力する２つの固体電子
撮像素子を含むように構成される。
【００１３】この発明の他の実施態様においては，撮像
装置にはさらに，視野内において輝度が相対的に低い領
域に対して適正な露光量と，輝度が相対的に高い領域に
対して適正な露光量とをそれぞれ決定する手段が設けら
れる。上記撮像手段は決定された２種類の露光量でそれ
ぞれ被写体を２回撮影するように構成される。
装置にはさらに，視野内において輝度が相対的に低い領
域に対して適正な露光量と，輝度が相対的に高い領域に
対して適正な露光量とをそれぞれ決定する手段が設けら
れる。上記撮像手段は決定された２種類の露光量でそれ
ぞれ被写体を２回撮影するように構成される。
【００１４】ここで画像信号という用語は，ディジタル
画像データおよびアナログ映像信号の両方を含むものと
して使用されている。
画像データおよびアナログ映像信号の両方を含むものと
して使用されている。
【００１５】この発明による撮像方法は，２つの異なる
露光量で被写体を撮像し，露光量の異なる２つの画像を
それぞれ表わす画像信号を発生し，上記画像信号の少な
くともいずれか一方に基づいて，画像における輝度が相
対的に低い領域の平均的な輝度またはその最大輝度と，
輝度が相対的に高い領域の平均的な輝度またはその最大
輝度とを比較し，それらの差または比が所定値以上のと
きに画像合成指令を，所定値未満のときにニー（Knee）
処理指令をそれぞれ発生し，上記画像合成指令を発生し
たときには，露光量の多い画像を表わす画像信号におい
て，その画像における輝度が相対的に高い領域を表わす
画像信号を，露光量の少ない画像における対応する領域
を表わす画像信号で置換する，または露光量の少ない画
像を表わす画像信号において，その画像における輝度が
相対的に低い領域を表わす画像信号を，露光量の多い画
像における対応する領域を表わす画像信号で置換するこ
とにより，合成された画像信号を作成し，上記ニー処理
指令を発生したときには，露光量の多い画像を表わす画
像信号に対して，高輝度範囲において輝度レベルを圧縮
するニー処理を施すものである。
露光量で被写体を撮像し，露光量の異なる２つの画像を
それぞれ表わす画像信号を発生し，上記画像信号の少な
くともいずれか一方に基づいて，画像における輝度が相
対的に低い領域の平均的な輝度またはその最大輝度と，
輝度が相対的に高い領域の平均的な輝度またはその最大
輝度とを比較し，それらの差または比が所定値以上のと
きに画像合成指令を，所定値未満のときにニー（Knee）
処理指令をそれぞれ発生し，上記画像合成指令を発生し
たときには，露光量の多い画像を表わす画像信号におい
て，その画像における輝度が相対的に高い領域を表わす
画像信号を，露光量の少ない画像における対応する領域
を表わす画像信号で置換する，または露光量の少ない画
像を表わす画像信号において，その画像における輝度が
相対的に低い領域を表わす画像信号を，露光量の多い画
像における対応する領域を表わす画像信号で置換するこ
とにより，合成された画像信号を作成し，上記ニー処理
指令を発生したときには，露光量の多い画像を表わす画
像信号に対して，高輝度範囲において輝度レベルを圧縮
するニー処理を施すものである。
【００１６】この発明はまた，上記の目的を達成するた
めに，画像処理装置および方法を提供している。この画
像処理装置は，ビデオ・カメラ，表示装置，ビデオ・プ
リンタ等に内蔵されるか，または独立の装置として実現
されよう。
めに，画像処理装置および方法を提供している。この画
像処理装置は，ビデオ・カメラ，表示装置，ビデオ・プ
リンタ等に内蔵されるか，または独立の装置として実現
されよう。
【００１７】この発明による画像処理装置は，２つの異
なる露光量で撮像された被写体像をそれぞれ表わす露光
量の異なる２つの画像信号を入力する手段，露光量の多
い画像を表わす画像信号において，その画像における輝
度が相対的に高い領域を表わす画像信号を，露光量の少
ない画像における対応する領域を表わす画像信号で置換
する，または露光量の少ない画像を表わす画像信号にお
いて，その画像における輝度が相対的に低い領域を表わ
す画像信号を，露光量の多い画像における対応する領域
を表わす画像信号で置換することにより，合成された画
像信号を作成する画像合成手段，露光量の多い画像を表
わす画像信号に対して，高輝度範囲において輝度レベル
を圧縮するニー処理を施すニー処理手段，および上記画
像信号の少なくともいずれか一方に基づいて，画像にお
ける輝度が相対的に低い領域の平均的な輝度またはその
最大輝度と，輝度が相対的に高い領域の平均的な輝度ま
たはその最大輝度とを比較し，それらの差または比が所
定値以上のときには上記画像合成手段を起動し，所定値
未満のときには上記ニー処理手段を起動する制御手段を
備えている。
なる露光量で撮像された被写体像をそれぞれ表わす露光
量の異なる２つの画像信号を入力する手段，露光量の多
い画像を表わす画像信号において，その画像における輝
度が相対的に高い領域を表わす画像信号を，露光量の少
ない画像における対応する領域を表わす画像信号で置換
する，または露光量の少ない画像を表わす画像信号にお
いて，その画像における輝度が相対的に低い領域を表わ
す画像信号を，露光量の多い画像における対応する領域
を表わす画像信号で置換することにより，合成された画
像信号を作成する画像合成手段，露光量の多い画像を表
わす画像信号に対して，高輝度範囲において輝度レベル
を圧縮するニー処理を施すニー処理手段，および上記画
像信号の少なくともいずれか一方に基づいて，画像にお
ける輝度が相対的に低い領域の平均的な輝度またはその
最大輝度と，輝度が相対的に高い領域の平均的な輝度ま
たはその最大輝度とを比較し，それらの差または比が所
定値以上のときには上記画像合成手段を起動し，所定値
未満のときには上記ニー処理手段を起動する制御手段を
備えている。
【００１８】この発明による画像処理方法は，２つの異
なる露光量で撮像された被写体像をそれぞれ表わす露光
量の異なる２つの画像信号が与えられたときに，上記画
像信号の少なくともいずれか一方に基づいて，画像にお
ける輝度が相対的に低い領域の平均的な輝度またはその
最大輝度と，輝度が相対的に高い領域の平均的な輝度ま
たはその最大輝度とを比較し，それらの差または比が所
定値以上かどうかを判定し，上記差または比が上記所定
値以上のときには，露光量の多い画像を表わす画像信号
において，その画像における輝度が相対的に高い領域を
表わす画像信号を，露光量の少ない画像における対応す
る領域を表わす画像信号で置換する，または露光量の少
ない画像を表わす画像信号において，その画像における
輝度が相対的に低い領域を表わす画像信号を，露光量の
多い画像における対応する領域を表わす画像信号で置換
することにより，合成された画像信号を作成し，上記差
または比が上記所定値未満のときには，露光量の多い画
像を表わす画像信号に対して，高輝度範囲において輝度
レベルを圧縮するニー処理を施すものである。
なる露光量で撮像された被写体像をそれぞれ表わす露光
量の異なる２つの画像信号が与えられたときに，上記画
像信号の少なくともいずれか一方に基づいて，画像にお
ける輝度が相対的に低い領域の平均的な輝度またはその
最大輝度と，輝度が相対的に高い領域の平均的な輝度ま
たはその最大輝度とを比較し，それらの差または比が所
定値以上かどうかを判定し，上記差または比が上記所定
値以上のときには，露光量の多い画像を表わす画像信号
において，その画像における輝度が相対的に高い領域を
表わす画像信号を，露光量の少ない画像における対応す
る領域を表わす画像信号で置換する，または露光量の少
ない画像を表わす画像信号において，その画像における
輝度が相対的に低い領域を表わす画像信号を，露光量の
多い画像における対応する領域を表わす画像信号で置換
することにより，合成された画像信号を作成し，上記差
または比が上記所定値未満のときには，露光量の多い画
像を表わす画像信号に対して，高輝度範囲において輝度
レベルを圧縮するニー処理を施すものである。
【００１９】この発明によると，画像における暗い領域
と明るい領域との輝度差が非常に大きいときには，２つ
の異なる露光量で撮影された２つの画像信号の適切に露
光された部分のみが抽出され，これらのはめ込み合成に
より新たな画像信号が作成される。他方，暗い領域と明
るい領域との輝度差がそれほど大きくなく，上記のはめ
込み合成が必ずしも適切でないと判断されたときには，
露光量の多い画像信号のみが用いられ，この画像信号に
おいて高輝度部分のみがレベル圧縮される（ニー処
理）。このニー処理により，明るい領域の輝度が相対的
に低下し暗い領域の輝度に近づくので，再現された画像
の画質が向上する。
と明るい領域との輝度差が非常に大きいときには，２つ
の異なる露光量で撮影された２つの画像信号の適切に露
光された部分のみが抽出され，これらのはめ込み合成に
より新たな画像信号が作成される。他方，暗い領域と明
るい領域との輝度差がそれほど大きくなく，上記のはめ
込み合成が必ずしも適切でないと判断されたときには，
露光量の多い画像信号のみが用いられ，この画像信号に
おいて高輝度部分のみがレベル圧縮される（ニー処
理）。このニー処理により，明るい領域の輝度が相対的
に低下し暗い領域の輝度に近づくので，再現された画像
の画質が向上する。
【００２０】以上のようにしてこの発明によると，輝度
差の大小にかかわりなく常にすぐれた画質の画像を表わ
す画像信号を得ることができる。
差の大小にかかわりなく常にすぐれた画質の画像を表わ
す画像信号を得ることができる。
【００２１】
【実施例の説明】図１から図４を参照して，まず画像は
め込み処理の基本的な考え方について説明する。
め込み処理の基本的な考え方について説明する。
【００２２】図１は窓のある部屋内で撮影を行うときの
カメラの視野内に収まるシーンの一例を示している。
カメラの視野内に収まるシーンの一例を示している。
【００２３】室内ＲＭの像ＳＬ（符号ＳＬはこの像の部
分または領域を表わす場合にも用いる）は比較的暗い。
窓ＷＮを通して外の風景が見え，この風景の像ＳＨ（こ
の符号ＳＨはこの像の部分または領域を表わす場合にも
用いる）は比較的明るい。一般的に言うと，窓ＷＮを通
して見える像ＳＨの平均輝度は，室内ＲＭの像ＳＬの平
均輝度の約５〜10倍である。撮像管やＣＣＤ等のイメー
ジ・センサのダイナミック・レンジは，相対的に明るい
部分の平均輝度が相対的に暗い部分の平均輝度の２〜３
倍程度のシーンにしか対応できない。すなわち，輝度差
が２〜３倍以上あると，暗い部分を適正露光したときに
は明るい部分についてはセンサが飽和し（再生したとき
に白とびが生じる），明るい部分を適正露光したときに
は暗い部分についての像は殆ど映らずかつ映像信号にお
けるノイズ成分の比率がきわめて高くなる。
分または領域を表わす場合にも用いる）は比較的暗い。
窓ＷＮを通して外の風景が見え，この風景の像ＳＨ（こ
の符号ＳＨはこの像の部分または領域を表わす場合にも
用いる）は比較的明るい。一般的に言うと，窓ＷＮを通
して見える像ＳＨの平均輝度は，室内ＲＭの像ＳＬの平
均輝度の約５〜10倍である。撮像管やＣＣＤ等のイメー
ジ・センサのダイナミック・レンジは，相対的に明るい
部分の平均輝度が相対的に暗い部分の平均輝度の２〜３
倍程度のシーンにしか対応できない。すなわち，輝度差
が２〜３倍以上あると，暗い部分を適正露光したときに
は明るい部分についてはセンサが飽和し（再生したとき
に白とびが生じる），明るい部分を適正露光したときに
は暗い部分についての像は殆ど映らずかつ映像信号にお
けるノイズ成分の比率がきわめて高くなる。
【００２４】図２はイメージ・センサの光電変換特性と
輝度についてのヒストグラムを示している。
輝度についてのヒストグラムを示している。
【００２５】実線ＳＬ１は相対的に暗い像ＳＬが適正に
露光されたときのイメージ・センサの光電変換特性を示
し，実線ＳＬ２は光電変換特性ＳＬ１の下で撮像された
相対的に暗い像ＳＬの輝度の度数分布を示している。
露光されたときのイメージ・センサの光電変換特性を示
し，実線ＳＬ２は光電変換特性ＳＬ１の下で撮像された
相対的に暗い像ＳＬの輝度の度数分布を示している。
【００２６】これに対して破線ＳＨ１は相対的に明るい
像ＳＨが適正に露光されたときのイメージ・センサの光
電変換特性を示し，破線ＳＨ２は光電変換特性ＳＨ１の
下で撮像された相対的に明るい像ＳＨの輝度の度数分布
を示している。
像ＳＨが適正に露光されたときのイメージ・センサの光
電変換特性を示し，破線ＳＨ２は光電変換特性ＳＨ１の
下で撮像された相対的に明るい像ＳＨの輝度の度数分布
を示している。
【００２７】この図から明らかなように，相対的に明る
い像ＳＨは光電変換特性ＳＬ１の飽和領域に完全に含ま
れてしまい，また光電変換特性ＳＨ１の下では相対的に
暗い像ＳＬを表わす出力信号のレベルは非常に低いとこ
ろに集中する。
い像ＳＨは光電変換特性ＳＬ１の飽和領域に完全に含ま
れてしまい，また光電変換特性ＳＨ１の下では相対的に
暗い像ＳＬを表わす出力信号のレベルは非常に低いとこ
ろに集中する。
【００２８】図３(A) は室内ＲＭの明るさに対して適正
な露光量（露光量は相対的に多い）で撮影された画像を
示している。室内ＲＭの像ＳＬａは適正に露光されてい
るので良好な画像となっている。これに対して窓ＷＮを
通して現われる風景の像ＳＨａは白くとんでいる。
な露光量（露光量は相対的に多い）で撮影された画像を
示している。室内ＲＭの像ＳＬａは適正に露光されてい
るので良好な画像となっている。これに対して窓ＷＮを
通して現われる風景の像ＳＨａは白くとんでいる。
【００２９】図３(B) は窓ＷＮの像ＳＨｂに対して適正
な露光量（露光量は相対的に少ない）で撮影された画像
を示している。窓ＷＮを通して見える風景の像ＳＨｂは
良好であるが，室内ＲＭの像ＳＬｂはかなり暗くなって
いる。
な露光量（露光量は相対的に少ない）で撮影された画像
を示している。窓ＷＮを通して見える風景の像ＳＨｂは
良好であるが，室内ＲＭの像ＳＬｂはかなり暗くなって
いる。
【００３０】露光量が相対的に多い画像において飽和し
ている領域の像（必ずしも飽和している必要はなく，他
の部分よりも相対的に明るい領域であればよい）が，露
光量が相対的に少ない画像における対応する領域の像で
置換されることにより画像のはめ込みが行われる。すな
わち，図３(A) において窓ＷＮの像ＳＨａが，図３(B)
に示す窓ＷＮの像ＳＨｂで置きかえられる。これによ
り，図１に示すように，室内ＲＭ，窓ＷＮがともに良好
な画像となり，人間が目で見たシーンに近い画像が得ら
れる。このようにしてはめ込み合成された画像のヒスト
グラムが図４に示されている。２つの輝度分布ＳＬ２と
ＳＨ２はかなり近づいている。
ている領域の像（必ずしも飽和している必要はなく，他
の部分よりも相対的に明るい領域であればよい）が，露
光量が相対的に少ない画像における対応する領域の像で
置換されることにより画像のはめ込みが行われる。すな
わち，図３(A) において窓ＷＮの像ＳＨａが，図３(B)
に示す窓ＷＮの像ＳＨｂで置きかえられる。これによ
り，図１に示すように，室内ＲＭ，窓ＷＮがともに良好
な画像となり，人間が目で見たシーンに近い画像が得ら
れる。このようにしてはめ込み合成された画像のヒスト
グラムが図４に示されている。２つの輝度分布ＳＬ２と
ＳＨ２はかなり近づいている。
【００３１】露光量が相対的に少ない画像において相対
的に暗い領域の像を，露光量が相対的に多い画像におけ
る対応する領域の像で置換するようにしてもよい。たと
えば，図３(B) において室内ＲＭの像ＳＬｂを，図３
(A) に示す室内ＲＭの像ＳＬａで置きかえる。
的に暗い領域の像を，露光量が相対的に多い画像におけ
る対応する領域の像で置換するようにしてもよい。たと
えば，図３(B) において室内ＲＭの像ＳＬｂを，図３
(A) に示す室内ＲＭの像ＳＬａで置きかえる。
【００３２】次にニー（Knee）処理の基本的な考え方に
ついて図５から図８を参照して説明する。
ついて図５から図８を参照して説明する。
【００３３】図５は主要被写体である人物が白い服（た
とえば白いカッター・シャツ）を着ている画像を示して
いる。白い服の部分が符号ＷＨで示されている。背景は
青い空または林であり，背景よりも白い服ＷＨの方が輝
度が高い。
とえば白いカッター・シャツ）を着ている画像を示して
いる。白い服の部分が符号ＷＨで示されている。背景は
青い空または林であり，背景よりも白い服ＷＨの方が輝
度が高い。
【００３４】図５に示す画像の輝度についてのヒストグ
ラムが図６に示されている。ハッチングで示す部分が主
に白い服ＷＨの輝度分布である。このハッチングの部分
の多くは映像信号の白レベルを超えている。
ラムが図６に示されている。ハッチングで示す部分が主
に白い服ＷＨの輝度分布である。このハッチングの部分
の多くは映像信号の白レベルを超えている。
【００３５】このような画像については上述したはめ込
み合成の手法は必ずしも妥当ではない。はめ込み合成は
図２に示すように相対的に暗い領域ＳＬの輝度分布と相
対的に明るい領域ＳＨの輝度分布とが完全に分離してい
る場合に効果的である。図６に示すヒストグラムでは相
対的に暗い領域の輝度分布と相対的に明るい領域ＷＨの
輝度分布とが連続しているので，これらの領域を分離す
るのが困難である。また，たとえ両領域の分離が可能で
はめ込み合成をしたとしても，はめ込み合成後において
は，相対的に明るい領域ＷＨの多くの部分の輝度が相対
的に暗い領域の最大輝度よりも低下するので，再現され
た画像の階調が不自然となる。
み合成の手法は必ずしも妥当ではない。はめ込み合成は
図２に示すように相対的に暗い領域ＳＬの輝度分布と相
対的に明るい領域ＳＨの輝度分布とが完全に分離してい
る場合に効果的である。図６に示すヒストグラムでは相
対的に暗い領域の輝度分布と相対的に明るい領域ＷＨの
輝度分布とが連続しているので，これらの領域を分離す
るのが困難である。また，たとえ両領域の分離が可能で
はめ込み合成をしたとしても，はめ込み合成後において
は，相対的に明るい領域ＷＨの多くの部分の輝度が相対
的に暗い領域の最大輝度よりも低下するので，再現され
た画像の階調が不自然となる。
【００３６】図６に示すような輝度分布をもつ画像の画
像信号に対してはニー処理が施される。ニー処理は画像
信号の高輝度領域の輝度レベルを圧縮するものである。
ニー処理は図８に示す特性をもつ回路またはテーブル
（ルック・アップ・テーブル＝ＬＵＴ）を用いて実行さ
れる。入力画像信号のレベルが白レベル（100％）まで
はそれに等しいレベルの出力画像信号が得られるが，入
力信号のレベルが 100％レベルを超えると，入力画像信
号の変化率に対する出力画像信号の変化率が小さくな
る。
像信号に対してはニー処理が施される。ニー処理は画像
信号の高輝度領域の輝度レベルを圧縮するものである。
ニー処理は図８に示す特性をもつ回路またはテーブル
（ルック・アップ・テーブル＝ＬＵＴ）を用いて実行さ
れる。入力画像信号のレベルが白レベル（100％）まで
はそれに等しいレベルの出力画像信号が得られるが，入
力信号のレベルが 100％レベルを超えると，入力画像信
号の変化率に対する出力画像信号の変化率が小さくな
る。
【００３７】このようにしてニー処理が施されたのちの
画像の輝度分布が図７に示されている。相対的に明るい
領域ＷＨの輝度分布はハッチングで示すようにかなりレ
ベル圧縮されている。
画像の輝度分布が図７に示されている。相対的に明るい
領域ＷＨの輝度分布はハッチングで示すようにかなりレ
ベル圧縮されている。
【００３８】図９はリアル・タイムでアナログ映像信号
上で画像のはめ込み合成処理およびニー処理を行う実施
例を示している。この実施例の回路はスチル・ビデオ・
カメラのみならず，ムービ・ビデオ・カメラにも適用す
ることができるが，ここではムービ・ビデオ・カメラの
動作を前提として説明する。
上で画像のはめ込み合成処理およびニー処理を行う実施
例を示している。この実施例の回路はスチル・ビデオ・
カメラのみならず，ムービ・ビデオ・カメラにも適用す
ることができるが，ここではムービ・ビデオ・カメラの
動作を前提として説明する。
【００３９】撮像光学系は，撮像レンズ11，絞り12，ビ
ーム・スプリッタ13および２つのＣＣＤ14，15を含んで
いる。被写体を表わす光像はレンズ11および絞り12を経
て，ビーム・スプリッタ13で分割され，２つのＣＣＤ14
および15上に結像する。上述したように，図１に示すよ
うな窓のある室内での撮影等においては，相対的に暗い
領域ＳＬの平均輝度と相対的に明るい領域ＳＨの平均輝
度との比は１対５〜10程度である。この実施例ではビー
ム・スプリッタ13の光の分割比は５対１に設定されてい
る。入射光の光量の５／６の光量の光がビーム・スプリ
ッタ13を通ってＣＣＤ14に入射する。入射光の光量の１
／６の光量の光がビーム・スプリッタ13で反射してＣＣ
Ｄ15に入射する。
ーム・スプリッタ13および２つのＣＣＤ14，15を含んで
いる。被写体を表わす光像はレンズ11および絞り12を経
て，ビーム・スプリッタ13で分割され，２つのＣＣＤ14
および15上に結像する。上述したように，図１に示すよ
うな窓のある室内での撮影等においては，相対的に暗い
領域ＳＬの平均輝度と相対的に明るい領域ＳＨの平均輝
度との比は１対５〜10程度である。この実施例ではビー
ム・スプリッタ13の光の分割比は５対１に設定されてい
る。入射光の光量の５／６の光量の光がビーム・スプリ
ッタ13を通ってＣＣＤ14に入射する。入射光の光量の１
／６の光量の光がビーム・スプリッタ13で反射してＣＣ
Ｄ15に入射する。
【００４０】ＣＣＤ14から出力される映像信号は前置増
幅器16で増幅されたのち白レベル圧縮プリニー（Pre-Kn
ee）回路18に与えられるとともに，露光制御回路20に入
力する。ＣＣＤ15から出力される映像信号は前置増幅器
17で増幅されたのち自動ゲイン制御増幅回路（以下ＡＧ
Ｃという）19に与えられるとともに露光制御回路20に入
力する。露光制御回路20はこれらの入力映像信号をＡ／
Ｄ変換器によってディジタル画像データに変換して取込
む。露光制御回路20はＣＰＵを含み，これらの入力画像
データに基づいて，絞り12の制御（露光制御），ＡＧＣ
19のゲインの調整，白レベル圧縮プリニー回路18の動作
のオン／オフ制御，および後述するパルス幅検出回路24
の動作のオン／オフ制御を行う。
幅器16で増幅されたのち白レベル圧縮プリニー（Pre-Kn
ee）回路18に与えられるとともに，露光制御回路20に入
力する。ＣＣＤ15から出力される映像信号は前置増幅器
17で増幅されたのち自動ゲイン制御増幅回路（以下ＡＧ
Ｃという）19に与えられるとともに露光制御回路20に入
力する。露光制御回路20はこれらの入力映像信号をＡ／
Ｄ変換器によってディジタル画像データに変換して取込
む。露光制御回路20はＣＰＵを含み，これらの入力画像
データに基づいて，絞り12の制御（露光制御），ＡＧＣ
19のゲインの調整，白レベル圧縮プリニー回路18の動作
のオン／オフ制御，および後述するパルス幅検出回路24
の動作のオン／オフ制御を行う。
【００４１】この実施例では被写体像の連続的な撮影が
行われており，たとえば１／60秒（または１／30秒）ご
とにＣＣＤ14および15から１フィールド（または１フレ
ーム）分の映像信号が出力されている。
行われており，たとえば１／60秒（または１／30秒）ご
とにＣＣＤ14および15から１フィールド（または１フレ
ーム）分の映像信号が出力されている。
【００４２】露光量の制御には露光量が多いＣＣＤ14の
出力映像信号が使用される。露光制御回路20は増幅器16
から与えられる映像信号の平均輝度に基づいて，被写体
像の相対的に暗い領域（図１に示す領域ＳＬ，または図
５に示す領域ＷＨ以外の部分）が適正に露光されるよう
に絞り12を調整する。被写体像の相対的に明るい領域
（ＳＨやＷＨ）に関しては映像信号が飽和（ＣＣＤ上で
の飽和または前置増幅器のもつクリップ特性による飽
和）しているので，映像信号の平均輝度に対して大きな
影響を与えない。したがって，被写体像の平均輝度に基
づいて露光調整を行うと，結果的に相対的に暗い領域が
適正に露光されるようになる。シャッタ速度（露光時
間）は固定であり，たとえば１／60秒（または１／30
秒）に保持される。すなわち，メカニカルなシャッタは
設けられていず，ＣＣＤ14，15の不要電荷のクリアと信
号電荷の読出しにより露光時間が規定される。
出力映像信号が使用される。露光制御回路20は増幅器16
から与えられる映像信号の平均輝度に基づいて，被写体
像の相対的に暗い領域（図１に示す領域ＳＬ，または図
５に示す領域ＷＨ以外の部分）が適正に露光されるよう
に絞り12を調整する。被写体像の相対的に明るい領域
（ＳＨやＷＨ）に関しては映像信号が飽和（ＣＣＤ上で
の飽和または前置増幅器のもつクリップ特性による飽
和）しているので，映像信号の平均輝度に対して大きな
影響を与えない。したがって，被写体像の平均輝度に基
づいて露光調整を行うと，結果的に相対的に暗い領域が
適正に露光されるようになる。シャッタ速度（露光時
間）は固定であり，たとえば１／60秒（または１／30
秒）に保持される。すなわち，メカニカルなシャッタは
設けられていず，ＣＣＤ14，15の不要電荷のクリアと信
号電荷の読出しにより露光時間が規定される。
【００４３】はめ込み合成を行うかニー処理を行うかの
判断は露光制御回路20において次のようにして行われ
る。
判断は露光制御回路20において次のようにして行われ
る。
【００４４】上述のように，絞り12は画像の相対的に暗
い領域がＣＣＤ14上において適正に露光されるように設
定されている。換言すると，画像の相対的に暗い領域に
おける最も輝度の高い部分を表わす映像信号がほぼ白レ
ベル（ 100％）となる。
い領域がＣＣＤ14上において適正に露光されるように設
定されている。換言すると，画像の相対的に暗い領域に
おける最も輝度の高い部分を表わす映像信号がほぼ白レ
ベル（ 100％）となる。
【００４５】一方，上述のようにＣＣＤ15に入射する光
量はＣＣＤ14に入射する光量の１／５である。また，Ｃ
ＣＤは一般に映像信号の白レベル（ 100％）の約２倍の
ダイナミック・レンジをもつように使用される。
量はＣＣＤ14に入射する光量の１／５である。また，Ｃ
ＣＤは一般に映像信号の白レベル（ 100％）の約２倍の
ダイナミック・レンジをもつように使用される。
【００４６】したがって，ＣＣＤ15から与えられる映像
信号のピーク輝度が白レベルの40％以上であれば，ＣＣ
Ｄ14から出力される映像信号の一部（相対的に明るい領
域を表わす部分）は飽和していると考えられる。映像信
号が飽和しているときにははめ込み合成処理が好まし
い。
信号のピーク輝度が白レベルの40％以上であれば，ＣＣ
Ｄ14から出力される映像信号の一部（相対的に明るい領
域を表わす部分）は飽和していると考えられる。映像信
号が飽和しているときにははめ込み合成処理が好まし
い。
【００４７】露光制御回路20はＣＣＤ15から出力され前
置増幅器17を通して入力する映像信号（画像データ）の
１フィールド（または１フレーム）間におけるピーク輝
度を検出し，このピーク輝度が白レベルの40％以上であ
ればはめ込み合成が必要であると判定する。ピーク輝度
が白レベルの40％未満の場合にはニー処理と決定され
る。
置増幅器17を通して入力する映像信号（画像データ）の
１フィールド（または１フレーム）間におけるピーク輝
度を検出し，このピーク輝度が白レベルの40％以上であ
ればはめ込み合成が必要であると判定する。ピーク輝度
が白レベルの40％未満の場合にはニー処理と決定され
る。
【００４８】ピーク輝度と平均輝度がほぼ比例している
と考えれば上記の判定基準は次のように言いなおすこと
もできる。すなわち，画像の相対的に明るい領域の平均
輝度が相対的に暗い領域の平均輝度の２倍以上であると
きにははめ込み合成を行い，２倍未満のときにはニー処
理を行う。
と考えれば上記の判定基準は次のように言いなおすこと
もできる。すなわち，画像の相対的に明るい領域の平均
輝度が相対的に暗い領域の平均輝度の２倍以上であると
きにははめ込み合成を行い，２倍未満のときにはニー処
理を行う。
【００４９】測光領域内が複数の小領域に分割され，各
小領域ごとにその小領域の平均輝度を表わす信号が得ら
れる分割測光用の測光センサを用い，この測光センサか
らの信号に基づいて上記の判断を行うこともできる。
小領域ごとにその小領域の平均輝度を表わす信号が得ら
れる分割測光用の測光センサを用い，この測光センサか
らの信号に基づいて上記の判断を行うこともできる。
【００５０】すなわち，各小領域についての測光輝度デ
ータ（平均輝度）を適当なスレシホールド値と比較し，
その比較結果に応じて被写体像の相対的に暗い部分に関
する測光輝度データと明るい部分に関する測光輝度デー
タとに分類する。相対的に明るい部分に関する測光輝度
データの平均値と，相対的に暗い部分に関する測光輝度
データの平均値との比が２以上であればはめ込み合成，
２未満であればニー処理と判定する。
ータ（平均輝度）を適当なスレシホールド値と比較し，
その比較結果に応じて被写体像の相対的に暗い部分に関
する測光輝度データと明るい部分に関する測光輝度デー
タとに分類する。相対的に明るい部分に関する測光輝度
データの平均値と，相対的に暗い部分に関する測光輝度
データの平均値との比が２以上であればはめ込み合成，
２未満であればニー処理と判定する。
【００５１】一般的には，被写体像の相対的に暗い部分
および相対的に明るい部分が測光センサの測光小領域に
丁度対応するとは限らないが，暗い部分と明るい部分と
の間には顕著な輝度差があるから，適当なシレスホール
ド値を用いることにより，相対的に暗い部分にほぼ対応
する測光小領域の測光輝度データと，相対的に明るい部
分にほぼ対応する測光小領域の測光輝度データとを区分
けすることが可能である。また，測光センサのダイナミ
ック・レンジは非常に広いので，出力信号が飽和するこ
とはなく，相対的に暗い領域および相対的に明るい領域
の輝度を正確に測定できる。
および相対的に明るい部分が測光センサの測光小領域に
丁度対応するとは限らないが，暗い部分と明るい部分と
の間には顕著な輝度差があるから，適当なシレスホール
ド値を用いることにより，相対的に暗い部分にほぼ対応
する測光小領域の測光輝度データと，相対的に明るい部
分にほぼ対応する測光小領域の測光輝度データとを区分
けすることが可能である。また，測光センサのダイナミ
ック・レンジは非常に広いので，出力信号が飽和するこ
とはなく，相対的に暗い領域および相対的に明るい領域
の輝度を正確に測定できる。
【００５２】はめ込み合成と判断されたときには白レベ
ル圧縮プリニー回路18の動作はオフとされる。すなわ
ち，この回路18はオフとされたときには 100％以上の入
力については図８に破線で示す特性を示し，入力信号を
そのまま出力する。また，パルス幅検出回路24の動作が
オンとされ，後に示すパルス幅検出動作を行う。
ル圧縮プリニー回路18の動作はオフとされる。すなわ
ち，この回路18はオフとされたときには 100％以上の入
力については図８に破線で示す特性を示し，入力信号を
そのまま出力する。また，パルス幅検出回路24の動作が
オンとされ，後に示すパルス幅検出動作を行う。
【００５３】はめ込み合成の動作について次に説明す
る。はめ込み合成では，ＣＣＤ14および15の両方の出力
映像信号が用いられる。
る。はめ込み合成では，ＣＣＤ14および15の両方の出力
映像信号が用いられる。
【００５４】上述したようにＣＣＤ14に結像する被写体
像の相対的に暗い領域ＳＬ（図１参照）が適正に露光さ
れるように露光量が調整されており，かつビーム・スプ
リッタ13の分割比が５対１に設定されているから，ＣＣ
Ｄ15に結像する相対的に明るい領域ＳＨについてもほぼ
適正な露光量となっていることが期待できる。相対的に
暗い領域ＳＬの画像と明るい領域ＳＨの画像とを合成し
たときにこれらの画像が適切にマッチングするように
（たとえば，相対的に明るい領域ＳＨの画像が，合成後
の画像において，相対的に暗い領域ＳＬの画像よりも暗
くなってしまうような事態の発生を防止するために），
ＡＧＣ19が設けられている。露光制御回路20は増幅器17
から与えられる前フィールド（または前フレーム）の映
像信号のピーク・レベルを検出し，このピーク・レベル
が次のフィールド（またはフレーム）の映像信号におい
ても一定に保持されるようにＡＧＣ19のゲインを調整す
る。このようにして，１フィールド（または１フレー
ム）ごとに（１／60秒ごとに，または１／30秒ごとに）
ＡＧＣ19のゲイン調整が行われ，相対的に明るい領域Ｓ
Ｈの画像の最も明るい部分の明るさが常にほぼ一定に保
持される。
像の相対的に暗い領域ＳＬ（図１参照）が適正に露光さ
れるように露光量が調整されており，かつビーム・スプ
リッタ13の分割比が５対１に設定されているから，ＣＣ
Ｄ15に結像する相対的に明るい領域ＳＨについてもほぼ
適正な露光量となっていることが期待できる。相対的に
暗い領域ＳＬの画像と明るい領域ＳＨの画像とを合成し
たときにこれらの画像が適切にマッチングするように
（たとえば，相対的に明るい領域ＳＨの画像が，合成後
の画像において，相対的に暗い領域ＳＬの画像よりも暗
くなってしまうような事態の発生を防止するために），
ＡＧＣ19が設けられている。露光制御回路20は増幅器17
から与えられる前フィールド（または前フレーム）の映
像信号のピーク・レベルを検出し，このピーク・レベル
が次のフィールド（またはフレーム）の映像信号におい
ても一定に保持されるようにＡＧＣ19のゲインを調整す
る。このようにして，１フィールド（または１フレー
ム）ごとに（１／60秒ごとに，または１／30秒ごとに）
ＡＧＣ19のゲイン調整が行われ，相対的に明るい領域Ｓ
Ｈの画像の最も明るい部分の明るさが常にほぼ一定に保
持される。
【００５５】露光量の多い映像信号である増幅器16の出
力はまたＬＰＦ（ロウ・パス・フィルタ）22を通して，
その低周波成分のみが比較器23に与えられる。比較器23
には映像信号の飽和レベルよりも少し低いレベルをもつ
スレシホールド電圧ＶTHが設定されている。比較器23は
入力映像信号のレベルがスレシホールド電圧ＶTHを超え
ている場合に出力を発生する。比較器23の出力はパルス
幅検出回路24に入力する。このパルス幅検出回路24は，
単安定マルチバイブレータ等を含み，比較器23の出力信
号のパルス幅が基準幅Ｗを超えている場合にその出力信
号を基準幅Ｗに相当する時間遅延させた上で出力する。
パルス幅検出回路24の出力信号はマルチプレクサ28にそ
の制御信号として与えられる。
力はまたＬＰＦ（ロウ・パス・フィルタ）22を通して，
その低周波成分のみが比較器23に与えられる。比較器23
には映像信号の飽和レベルよりも少し低いレベルをもつ
スレシホールド電圧ＶTHが設定されている。比較器23は
入力映像信号のレベルがスレシホールド電圧ＶTHを超え
ている場合に出力を発生する。比較器23の出力はパルス
幅検出回路24に入力する。このパルス幅検出回路24は，
単安定マルチバイブレータ等を含み，比較器23の出力信
号のパルス幅が基準幅Ｗを超えている場合にその出力信
号を基準幅Ｗに相当する時間遅延させた上で出力する。
パルス幅検出回路24の出力信号はマルチプレクサ28にそ
の制御信号として与えられる。
【００５６】遅延回路26および27には上記の基準幅Ｗに
相当する時間（またはこの時間にＬＰＦ22の動作に起因
する遅延時間を加えた時間）に等しい遅延時間が設定さ
れている。増幅器16の出力映像信号はそのままプリニー
回路18を通って遅延回路26に与えられ，ＡＧＣ19の出力
映像信号は遅延回路27に与えられ，これらの遅延回路26
および27でその遅延時間だけ遅らされてそれぞれマルチ
プレクサ28に入力する。
相当する時間（またはこの時間にＬＰＦ22の動作に起因
する遅延時間を加えた時間）に等しい遅延時間が設定さ
れている。増幅器16の出力映像信号はそのままプリニー
回路18を通って遅延回路26に与えられ，ＡＧＣ19の出力
映像信号は遅延回路27に与えられ，これらの遅延回路26
および27でその遅延時間だけ遅らされてそれぞれマルチ
プレクサ28に入力する。
【００５７】マルチプレクサ28は通常は遅延回路26の出
力映像信号を選択して出力し，パルス幅検出回路24から
出力信号が与えられているときには遅延回路27の出力映
像信号を選択して出力する。これにより，上述した原理
に基づく画像のはめ込み合成が行われる。マルチプレク
サ28の出力映像信号は映像信号処理回路29においてγ補
正などが加えられる。
力映像信号を選択して出力し，パルス幅検出回路24から
出力信号が与えられているときには遅延回路27の出力映
像信号を選択して出力する。これにより，上述した原理
に基づく画像のはめ込み合成が行われる。マルチプレク
サ28の出力映像信号は映像信号処理回路29においてγ補
正などが加えられる。
【００５８】ＬＰＦ22およびパルス幅検出回路24は，相
対的に暗い領域ＳＬに存在する小さな輝点（スレシホー
ルド電圧ＶTHよりも高いレベルをもつ）が相対的に明る
い領域であると判定されるのを防止するためのものであ
る。このような小さな輝点についてもはめ込み合成が行
われると画質が悪化する。
対的に暗い領域ＳＬに存在する小さな輝点（スレシホー
ルド電圧ＶTHよりも高いレベルをもつ）が相対的に明る
い領域であると判定されるのを防止するためのものであ
る。このような小さな輝点についてもはめ込み合成が行
われると画質が悪化する。
【００５９】次にニー処理について説明する。露光制御
回路20はニー処理が必要であると判定したときには白レ
ベル圧縮プリニー回路18の動作をオンし，パルス幅検出
回路24をオフとする。パルス幅検出回路24はオフとされ
ると，どのような入力信号が与えられようと出力信号を
発生しない。したがって，マルチプレクサ28は遅延回路
26の出力映像信号のみを選択して出力する。
回路20はニー処理が必要であると判定したときには白レ
ベル圧縮プリニー回路18の動作をオンし，パルス幅検出
回路24をオフとする。パルス幅検出回路24はオフとされ
ると，どのような入力信号が与えられようと出力信号を
発生しない。したがって，マルチプレクサ28は遅延回路
26の出力映像信号のみを選択して出力する。
【００６０】白レベル圧縮プリニー回路18は図８に実線
で示す特性をもち，入力映像信号の高輝度領域をレベル
圧縮する。プリニー回路の機能は最も簡単には，たとえ
ばそれぞれ異なるバイアスが加えられかつ並列に接続さ
れたダイオードを入力電圧の増大にしたがい順次オンさ
せ，入力の増大に対する出力の増大の比率を順次小さく
することにより実現することができる。映像信号の輝度
レベルのみを圧縮すればよいから，カラー映像信号の場
合にはその輝度信号のみをこの回路18に与えればよい。
で示す特性をもち，入力映像信号の高輝度領域をレベル
圧縮する。プリニー回路の機能は最も簡単には，たとえ
ばそれぞれ異なるバイアスが加えられかつ並列に接続さ
れたダイオードを入力電圧の増大にしたがい順次オンさ
せ，入力の増大に対する出力の増大の比率を順次小さく
することにより実現することができる。映像信号の輝度
レベルのみを圧縮すればよいから，カラー映像信号の場
合にはその輝度信号のみをこの回路18に与えればよい。
【００６１】プリニー回路18で輝度レベル圧縮された映
像信号は遅延回路26を経て（遅延回路26を迂回させるよ
うにしてもよい），マルチプレクサ28を通り，処理回路
29でγ補正されたのち出力される。このようにニー処理
が選択されたときにはＣＣＤ14の出力映像信号のみが用
いられる。
像信号は遅延回路26を経て（遅延回路26を迂回させるよ
うにしてもよい），マルチプレクサ28を通り，処理回路
29でγ補正されたのち出力される。このようにニー処理
が選択されたときにはＣＣＤ14の出力映像信号のみが用
いられる。
【００６２】白レベル圧縮プリニー回路18とパルス幅検
出回路24のオン／オフ制御は適当なヒステリシスをもた
せて行うようにすることが好ましい。これにより，画像
のはめ込み合成処理とニー処理とが頻繁に切換えられる
のが防止される。
出回路24のオン／オフ制御は適当なヒステリシスをもた
せて行うようにすることが好ましい。これにより，画像
のはめ込み合成処理とニー処理とが頻繁に切換えられる
のが防止される。
【００６３】上記実施例ではメカニカルなシャッタは設
けられていないがメカニカルなシャッタを設けて露光制
御を行うこともできる。またＣＣＤのもつ電子シャッタ
機能を利用して露光制御をしてもよい。
けられていないがメカニカルなシャッタを設けて露光制
御を行うこともできる。またＣＣＤのもつ電子シャッタ
機能を利用して露光制御をしてもよい。
【００６４】上記実施例では２個のＣＣＤが設けられて
いるが，１個のＣＣＤのみをもつ撮像装置においては露
光量を異ならせて２回露光することにより２つの露光量
の異なる映像信号を得ることができる。すなわち，まず
画像の相対的に暗い領域が適正に露光される第１の露光
量（絞り値，シャッタ速度）と，相対的に明るい領域が
適正に露光される第２の露光量が決定される。第１の露
光量で第１回目の撮影を行い，続いて第２の露光量で第
２回目の撮影を行う。
いるが，１個のＣＣＤのみをもつ撮像装置においては露
光量を異ならせて２回露光することにより２つの露光量
の異なる映像信号を得ることができる。すなわち，まず
画像の相対的に暗い領域が適正に露光される第１の露光
量（絞り値，シャッタ速度）と，相対的に明るい領域が
適正に露光される第２の露光量が決定される。第１の露
光量で第１回目の撮影を行い，続いて第２の露光量で第
２回目の撮影を行う。
【００６５】図９に示す回路はアナログ処理回路である
が，この発明はディジタル処理回路によっても実現可能
である。たとえば，上記の第１回目の撮影により得られ
た映像信号が第１のディジタル画像データに変換されて
第１のメモリに記憶される。第２回目の撮影により得ら
れる映像信号が第２のディジタル画像データに変換され
て第２のメモリに記憶される。第１のメモリの画像デー
タをロウ・パス・フィルタリングしたのち所定のスレシ
ホールド・レベル・データと比較することにより，相対
的に明るい領域を検出する。検出した相対的に明るい領
域については第２のメモリの画像データを，その他の領
域（相対的に暗い領域）については第１のメモリの画像
データをそれぞれ読出して合成することによりはめ込み
合成された画像データが得られる。ニー処理は，図８に
示すような特性をもつルック・アップ・テーブルを利用
して簡単に行うことができる。
が，この発明はディジタル処理回路によっても実現可能
である。たとえば，上記の第１回目の撮影により得られ
た映像信号が第１のディジタル画像データに変換されて
第１のメモリに記憶される。第２回目の撮影により得ら
れる映像信号が第２のディジタル画像データに変換され
て第２のメモリに記憶される。第１のメモリの画像デー
タをロウ・パス・フィルタリングしたのち所定のスレシ
ホールド・レベル・データと比較することにより，相対
的に明るい領域を検出する。検出した相対的に明るい領
域については第２のメモリの画像データを，その他の領
域（相対的に暗い領域）については第１のメモリの画像
データをそれぞれ読出して合成することによりはめ込み
合成された画像データが得られる。ニー処理は，図８に
示すような特性をもつルック・アップ・テーブルを利用
して簡単に行うことができる。
【００６６】はめ込み合成処理かニー処理かの判定は，
第１のメモリにおける相対的に暗い領域の画像データの
平均輝度，第２のメモリにおける相対的に明るい領域の
画像データの平均輝度，および第１回目の撮影と第２回
目の撮影とにおける露光量の比を用いて，上述した考え
方にしたがって行うことができる。
第１のメモリにおける相対的に暗い領域の画像データの
平均輝度，第２のメモリにおける相対的に明るい領域の
画像データの平均輝度，および第１回目の撮影と第２回
目の撮影とにおける露光量の比を用いて，上述した考え
方にしたがって行うことができる。
【００６７】その他，はめ込み合成処理に関する種々の
変形例があるが，それは上記のはめ込み合成特許出願の
明細書に詳細に述べられている。
変形例があるが，それは上記のはめ込み合成特許出願の
明細書に詳細に述べられている。
【図１】カメラの視野内のシーンの例を示す。
【図２】イメージ・センサの光電変換特性と輝度につい
てのヒストグラムを示すグラフである。
てのヒストグラムを示すグラフである。
【図３】(A) は相対的に多い露光量で撮影された画像を
示し，(B)は少ない露光量で撮影された画像を示す。
示し，(B)は少ない露光量で撮影された画像を示す。
【図４】はめ込み合成された画像の輝度ヒストグラムを
示すグラフである。
示すグラフである。
【図５】カメラの視野内の他のシーンの例を示す。
【図６】図５に示すシーンの輝度ヒストグラムを示すグ
ラフである。
ラフである。
【図７】ニー処理された画像の輝度ヒストグラムを示す
グラフである。
グラフである。
【図８】ニー特性を示すグラフである。
【図９】この発明の実施例を示し，ビデオ・カメラの構
成を示すブロック図である。
成を示すブロック図である。
ＳＬ 相対的に暗い領域 ＳＨ，ＷＨ 相対的に明るい領域 11 撮像レンズ 12 絞り 13 ビーム・スプリッタ 14，15 ＣＣＤ 18 白レベル圧縮プリニー回路 19 ＡＧＣ 20 露光制御回路 22 ＬＰＦ 23 比較器 24 パルス幅検出回路 28 マルチプレクサ
Claims (6)
- 【請求項１】 ２つの異なる露光量で被写体を撮像し，
露光量の異なる２つの画像をそれぞれ表わす画像信号を
出力する撮像手段， 上記画像信号の少なくともいずれか一方に基づいて，画
像における輝度が相対的に低い領域の平均的な輝度また
はその最大輝度と，輝度が相対的に高い領域の平均的な
輝度またはその最大輝度とを比較し，それらの差または
比が所定値以上のときに画像合成指令を，所定値未満の
ときにニー処理指令をそれぞれ発生する判定手段， 上記画像合成指令が与えられたときに，露光量の多い画
像を表わす画像信号において，その画像における輝度が
相対的に高い領域を表わす画像信号を，露光量の少ない
画像における対応する領域を表わす画像信号で置換す
る，または露光量の少ない画像を表わす画像信号におい
て，その画像における輝度が相対的に低い領域を表わす
画像信号を，露光量の多い画像における対応する領域を
表わす画像信号で置換することにより，合成された画像
信号を作成する画像合成手段，および上記ニー処理指令
が与えられたときに，露光量の多い画像を表わす画像信
号に対して，高輝度範囲において輝度レベルを圧縮する
ニー処理を施すニー処理手段， を備えた撮像装置。 - 【請求項２】 上記撮像手段が， 入射光をあらかじめ定められた露光量の比に応じて分割
するビーム・スプリッタ手段，およびこのビーム・スプ
リッタ手段によって分割された２つの入射光をそれぞれ
受光し，画像信号を出力する２つの固体電子撮像素子， を含む請求項１に記載の撮像装置。 - 【請求項３】 視野内において輝度が相対的に低い領域
に対して適正な露光量と，輝度が相対的に高い領域に対
して適正な露光量とをそれぞれ決定する手段を備え， 上記撮像手段は決定された２種類の露光量でそれぞれ被
写体を２回撮影するものである， 請求項１に記載の撮像装置。 - 【請求項４】 ２つの異なる露光量で被写体を撮像し，
露光量の異なる２つの画像をそれぞれ表わす画像信号を
発生し， 上記画像信号の少なくともいずれか一方に基づいて，画
像における輝度が相対的に低い領域の平均的な輝度また
はその最大輝度と，輝度が相対的に高い領域の平均的な
輝度またはその最大輝度とを比較し，それらの差または
比が所定値以上のときに画像合成指令を，所定値未満の
ときにニー処理指令をそれぞれ発生し， 上記画像合成指令を発生したときには，露光量の多い画
像を表わす画像信号において，その画像における輝度が
相対的に高い領域を表わす画像信号を，露光量の少ない
画像における対応する領域を表わす画像信号で置換す
る，または露光量の少ない画像を表わす画像信号におい
て，その画像における輝度が相対的に低い領域を表わす
画像信号を，露光量の多い画像における対応する領域を
表わす画像信号で置換することにより，合成された画像
信号を作成し， 上記ニー処理指令を発生したときには，露光量の多い画
像を表わす画像信号に対して，高輝度範囲において輝度
レベルを圧縮するニー処理を施す， 撮像方法。 - 【請求項５】 ２つの異なる露光量で撮像された被写体
像をそれぞれ表わす露光量の異なる２つの画像信号を入
力する手段， 露光量の多い画像を表わす画像信号において，その画像
における輝度が相対的に高い領域を表わす画像信号を，
露光量の少ない画像における対応する領域を表わす画像
信号で置換する，または露光量の少ない画像を表わす画
像信号において，その画像における輝度が相対的に低い
領域を表わす画像信号を，露光量の多い画像における対
応する領域を表わす画像信号で置換することにより，合
成された画像信号を作成する画像合成手段， 露光量の多い画像を表わす画像信号に対して，高輝度範
囲において輝度レベルを圧縮するニー処理を施すニー処
理手段，および上記画像信号の少なくともいずれか一方
に基づいて，画像における輝度が相対的に低い領域の平
均的な輝度またはその最大輝度と，輝度が相対的に高い
領域の平均的な輝度またはその最大輝度とを比較し，そ
れらの差または比が所定値以上のときには上記画像合成
手段を起動し，所定値未満のときには上記ニー処理手段
を起動する制御手段， を備えた画像処理装置。 - 【請求項６】 ２つの異なる露光量で撮像された被写体
像をそれぞれ表わす露光量の異なる２つの画像信号が与
えられたときに， 上記画像信号の少なくともいずれか一方に基づいて，画
像における輝度が相対的に低い領域の平均的な輝度また
はその最大輝度と，輝度が相対的に高い領域の平均的な
輝度またはその最大輝度とを比較し，それらの差または
比が所定値以上かどうかを判定し， 上記差または比が上記所定値以上のときには，露光量の
多い画像を表わす画像信号において，その画像における
輝度が相対的に高い領域を表わす画像信号を，露光量の
少ない画像における対応する領域を表わす画像信号で置
換する，または露光量の少ない画像を表わす画像信号に
おいて，その画像における輝度が相対的に低い領域を表
わす画像信号を，露光量の多い画像における対応する領
域を表わす画像信号で置換することにより，合成された
画像信号を作成し， 上記差または比が上記所定値未満のときには，露光量の
多い画像を表わす画像信号に対して，高輝度範囲におい
て輝度レベルを圧縮するニー処理を施す， 画像処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3244089A JP2777847B2 (ja) | 1991-08-30 | 1991-08-30 | 撮像装置および方法ならびに画像処理装置および方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3244089A JP2777847B2 (ja) | 1991-08-30 | 1991-08-30 | 撮像装置および方法ならびに画像処理装置および方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0564070A true JPH0564070A (ja) | 1993-03-12 |
| JP2777847B2 JP2777847B2 (ja) | 1998-07-23 |
Family
ID=17113579
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP3244089A Expired - Fee Related JP2777847B2 (ja) | 1991-08-30 | 1991-08-30 | 撮像装置および方法ならびに画像処理装置および方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2777847B2 (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5396288A (en) * | 1992-08-21 | 1995-03-07 | Fuji Photo Film Co., Ltd. | Image processing apparatus and method, and video camera |
| US5589880A (en) * | 1994-01-25 | 1996-12-31 | Hitachi Denshi Kabushiki Kaisha | Television camera using two image pickup devices with different sensitivity |
| US6654062B1 (en) | 1997-11-13 | 2003-11-25 | Casio Computer Co., Ltd. | Electronic camera |
| US8619368B2 (en) | 2008-03-28 | 2013-12-31 | Contrast Optical Design & Engineering, Inc. | Whole beam image splitting system |
| US9948829B2 (en) | 2016-02-12 | 2018-04-17 | Contrast, Inc. | Color matching across multiple sensors in an optical system |
| US10264196B2 (en) | 2016-02-12 | 2019-04-16 | Contrast, Inc. | Systems and methods for HDR video capture with a mobile device |
| US10554901B2 (en) | 2016-08-09 | 2020-02-04 | Contrast Inc. | Real-time HDR video for vehicle control |
| US10951888B2 (en) | 2018-06-04 | 2021-03-16 | Contrast, Inc. | Compressed high dynamic range video |
| US11265530B2 (en) | 2017-07-10 | 2022-03-01 | Contrast, Inc. | Stereoscopic camera |
-
1991
- 1991-08-30 JP JP3244089A patent/JP2777847B2/ja not_active Expired - Fee Related
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5396288A (en) * | 1992-08-21 | 1995-03-07 | Fuji Photo Film Co., Ltd. | Image processing apparatus and method, and video camera |
| US5589880A (en) * | 1994-01-25 | 1996-12-31 | Hitachi Denshi Kabushiki Kaisha | Television camera using two image pickup devices with different sensitivity |
| US6654062B1 (en) | 1997-11-13 | 2003-11-25 | Casio Computer Co., Ltd. | Electronic camera |
| US8619368B2 (en) | 2008-03-28 | 2013-12-31 | Contrast Optical Design & Engineering, Inc. | Whole beam image splitting system |
| US10264196B2 (en) | 2016-02-12 | 2019-04-16 | Contrast, Inc. | Systems and methods for HDR video capture with a mobile device |
| US10200569B2 (en) | 2016-02-12 | 2019-02-05 | Contrast, Inc. | Color matching across multiple sensors in an optical system |
| US10257394B2 (en) | 2016-02-12 | 2019-04-09 | Contrast, Inc. | Combined HDR/LDR video streaming |
| US10257393B2 (en) | 2016-02-12 | 2019-04-09 | Contrast, Inc. | Devices and methods for high dynamic range video |
| US11463605B2 (en) | 2016-02-12 | 2022-10-04 | Contrast, Inc. | Devices and methods for high dynamic range video |
| US10536612B2 (en) | 2016-02-12 | 2020-01-14 | Contrast, Inc. | Color matching across multiple sensors in an optical system |
| US9948829B2 (en) | 2016-02-12 | 2018-04-17 | Contrast, Inc. | Color matching across multiple sensors in an optical system |
| US10742847B2 (en) | 2016-02-12 | 2020-08-11 | Contrast, Inc. | Devices and methods for high dynamic range video |
| US10805505B2 (en) | 2016-02-12 | 2020-10-13 | Contrast, Inc. | Combined HDR/LDR video streaming |
| US10819925B2 (en) | 2016-02-12 | 2020-10-27 | Contrast, Inc. | Devices and methods for high dynamic range imaging with co-planar sensors |
| US11785170B2 (en) | 2016-02-12 | 2023-10-10 | Contrast, Inc. | Combined HDR/LDR video streaming |
| US11637974B2 (en) | 2016-02-12 | 2023-04-25 | Contrast, Inc. | Systems and methods for HDR video capture with a mobile device |
| US11368604B2 (en) | 2016-02-12 | 2022-06-21 | Contrast, Inc. | Combined HDR/LDR video streaming |
| US10554901B2 (en) | 2016-08-09 | 2020-02-04 | Contrast Inc. | Real-time HDR video for vehicle control |
| US11910099B2 (en) | 2016-08-09 | 2024-02-20 | Contrast, Inc. | Real-time HDR video for vehicle control |
| US11265530B2 (en) | 2017-07-10 | 2022-03-01 | Contrast, Inc. | Stereoscopic camera |
| US10951888B2 (en) | 2018-06-04 | 2021-03-16 | Contrast, Inc. | Compressed high dynamic range video |
| US11985316B2 (en) | 2018-06-04 | 2024-05-14 | Contrast, Inc. | Compressed high dynamic range video |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2777847B2 (ja) | 1998-07-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3082971B2 (ja) | ビデオ・カメラ，それを用いた撮影方法およびその動作方法，ならびに画像処理装置および方法 | |
| JP4424402B2 (ja) | 撮像装置、撮像制御方法、撮像制御プログラム | |
| JP4306750B2 (ja) | 撮像装置、撮像方法、露光制御方法、プログラム | |
| KR101419947B1 (ko) | 촬상 장치, 측광 방법, 휘도 산출 방법, 및 저장 매체 | |
| JP5141733B2 (ja) | 撮像装置、撮像方法、及びプログラム | |
| JP3467047B2 (ja) | 画像処理装置および方法ならびにビデオ・カメラ | |
| JP3339876B2 (ja) | 撮像装置 | |
| JP3993043B2 (ja) | デジタルスチルカメラ | |
| JPH08340542A (ja) | 電子スチルカメラ | |
| US7486884B2 (en) | Imaging device and imaging method | |
| JP2001242504A (ja) | カメラ装置 | |
| JP3071891B2 (ja) | 固体電子撮像装置 | |
| JP4893569B2 (ja) | 撮像装置、撮像制御方法及び撮像制御プログラム | |
| JP2777847B2 (ja) | 撮像装置および方法ならびに画像処理装置および方法 | |
| KR101417816B1 (ko) | 디지털 이미지 촬영 장치, 상기 장치의 노출 제어 방법,디지털 이미지 촬영 방법 및 상기 디지털 이미지 촬영방법을 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는매체 | |
| JP2009213032A (ja) | ワイド・ダイナミック・レンジ画像生成処理装置 | |
| JP2003069821A (ja) | 撮像システム | |
| JPH05122599A (ja) | ビデオカメラ用露出制御装置 | |
| KR20100112788A (ko) | 손떨림 방지 기능과 플래쉬 기능의 제어 방법, 이를 이용한 촬영 방법 및 디지털 카메라 모듈 | |
| JPH06189186A (ja) | ビデオ・カメラにおける逆光判定方法および装置ならびに逆光補正方法および装置 | |
| JP3274692B2 (ja) | 画像入力装置の露光制御回路 | |
| JP2001203933A (ja) | 撮像装置 | |
| JP4366915B2 (ja) | ホワイトバランス調整装置 | |
| JP2005109579A (ja) | 固体撮像素子を用いた撮像装置 | |
| JP4187518B2 (ja) | カメラ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080508 Year of fee payment: 10 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090508 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090508 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100508 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110508 Year of fee payment: 13 |
|
| LAPS | Cancellation because of no payment of annual fees |