JP2006154654A - 測距装置を有するカメラ - Google Patents
測距装置を有するカメラ Download PDFInfo
- Publication number
- JP2006154654A JP2006154654A JP2004348798A JP2004348798A JP2006154654A JP 2006154654 A JP2006154654 A JP 2006154654A JP 2004348798 A JP2004348798 A JP 2004348798A JP 2004348798 A JP2004348798 A JP 2004348798A JP 2006154654 A JP2006154654 A JP 2006154654A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- sensor
- column
- camera
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
Abstract
【課題】各画素列から画素出力を合成する場合に、常に適正な相関演算結果を得ることで測距精度を向上する。
【解決手段】AFセンサを構成するセンサ列を複数のセンサ画素を配列した3本の画素列で構成する。そして、1本目と2本目の画素列の検出に類似性があり、同一デフォーカス量のときには各画素列の信号を合成して相関演算し像ずれ量を算出する。また、2本目と3本目の画素列の検出に類似性があり、同一デフォーカス量のときには各画素列の信号を合成して相関演算し像ずれ量を算出する。このときの各画素列信号の合成は、2つの画素列間で最大相関が成り立つ相関値を求め、この相関値からシフト量を求め、このシフト量に従って一方の画素列信号をシフトしてから各画素列信号を1画素ずつ交互に取り出して合成する。そして、合成した画素出力に基づいて測距を行う。
【選択図】図8
【解決手段】AFセンサを構成するセンサ列を複数のセンサ画素を配列した3本の画素列で構成する。そして、1本目と2本目の画素列の検出に類似性があり、同一デフォーカス量のときには各画素列の信号を合成して相関演算し像ずれ量を算出する。また、2本目と3本目の画素列の検出に類似性があり、同一デフォーカス量のときには各画素列の信号を合成して相関演算し像ずれ量を算出する。このときの各画素列信号の合成は、2つの画素列間で最大相関が成り立つ相関値を求め、この相関値からシフト量を求め、このシフト量に従って一方の画素列信号をシフトしてから各画素列信号を1画素ずつ交互に取り出して合成する。そして、合成した画素出力に基づいて測距を行う。
【選択図】図8
Description
本発明は、撮影画面内の複数の測距点における被写体の焦点状態又は被写体までの距離を検出する測距装置を有するカメラに関する。
例えば、デジタルカメラにおいては、撮像素子の高画素化が進んでおり、これに対応した測距精度の向上が要求されている。特に、これまでは解像度が低かったため撮像素子にて撮影した画像のほぼ全体を使用して写真印刷を行っていたが、今後は高画素化により解像度が向上するため、撮像素子にて撮影した画像のほぼ全体を使用して写真印刷を行うのみでなく、撮影した画像のほんの一部を拡大した写真印刷も可能になる。このため、より一層の測距精度の向上が要求されている。
測距精度を向上させるには、例えば、フォトダイオード等のセンサ画素を配列したラインセンサの各センサ画素の画素ピッチを小さくすればよいことが知られている。画素ピッチを1/2にすることで測距精度は√2倍向上する。しかし、画素ピッチを小さくするためにセンサ画素の面積を小さくするとセンサノイズが大きくなるためセンサノイズを小さくする対策が必要になる。一方、センサ画素の面積を小さくすること無く画素ピッチを小さくする方法としてセンサの千鳥配置が知られている。例えば、複数のセンサ画素をライン上に配列した画素列を2本使用し、この2本の画素列を、平行に、かつ、各センサ画素が互いに1/2画素ピッチずれるように配置して1つのラインセンサを構成したものが知られている(例えば、特許文献1参照)。
特開平6−18779号公報
このようにセンサの千鳥配置によって見かけ上の画素ピッチを小さくしたものにおいて、さらに千鳥配置した各画素列から画素出力を1画素ずつ順次交互に取り出して合成し相関演算することで、測距精度を√2倍向上することができる。しかし、各画素列から画素出力を合成する場合、被写体像の傾きや位置によっては基準画素列と参照画素列の出力波形が異なる場合がり、このため適正な相関演算結果が得られず合成の効果が得られないという問題があった。
本発明は、このような問題を解決するためになされたもので、各画素列から画素出力を合成する場合に、常に適正な相関演算結果が得られ、測距精度を向上できる測距装置を有するカメラを提供することを目的とする。
本発明は、このような問題を解決するためになされたもので、各画素列から画素出力を合成する場合に、常に適正な相関演算結果が得られ、測距精度を向上できる測距装置を有するカメラを提供することを目的とする。
上記の目的を達成するために、本発明の一態様による測距装置を有するカメラは、撮影画面内の複数の測距点における被写体の焦点状態又は被写体までの距離を検出する測距装置を有するカメラにおいて、被写体像を形成する撮影光学系と、複数のセンサ画素を配列してなる画素列を複数ライン有するセンサ列と、このセンサ列の各画素列の画素出力を隣接する画素列間で相対的に所定画素分シフトさせる画素シフト手段と、この画素シフト手段にてシフトした後の各画素列の画素出力を合成する合成手段と、この合成手段にて合成した画素出力に基づいて被写体の焦点状態又は被写体までの距離を算出する演算手段とを具備する。
この一態様によれば、複数のセンサ画素からなる画素列を複数ライン、隣接する画素列を互いにずらして千鳥配置し、撮影画面内の測距点における被写体の輝度値を検出するセンサ列に対して、このセンサ列の各画素列の画素出力を隣接する画素列間で相対的に所定画素分シフトさせ、シフトした後の各画素列の画素出力を合成する。これにより、適正な相関演算結果が得られ、測距精度を高めることができる。
また、他の態様による測距装置を有するカメラは、さらに、センサ列の画素列間で画素出力に類似性があるか否かを判定する類似性判定手段を設け、画素シフト手段は、類似性判定手段が類似性を判定したときに画素列間で最大相関が得られる画素数分、画素をシフトさせる。これにより、より適正な相関演算結果が得られ、測距精度を高めることができる。
また、他の態様による測距装置を有するカメラは、センサ列を少なくとも左右又は上下に1対配置し、この1対のセンサ列の一方のセンサ列の画素列を基準画素列、他方のセンサ列の画素列を参照画素列とし、合成手段は、基準画素列と参照画素列とで同一のシフト量が得られない場合には合成を禁止する。これにより、合成時には常に適正な相関演算結果が得られ、合成時の測距精度を確実に高めることができる。
本発明によれば、撮影画面内の複数の測距点における被写体の焦点状態又は被写体までの距離を検出するものにおいて、各画素列から画素出力を合成する場合に、常に適正な相関演算結果が得られ、測距精度を向上できる測距装置を有するカメラを提供できる。
以下、本発明の一実施の形態を、図面を参照して説明する。
図1は、撮影画面内の複数の測距点における被写体の焦点状態又は被写体までの距離を検出する測距装置を有するカメラにおける、測距装置について示した図で、レンズ交換式の一眼レフレックスカメラを想定して図示したものである。このカメラは、交換レンズ11とカメラボディ12とから構成されている。
図1は、撮影画面内の複数の測距点における被写体の焦点状態又は被写体までの距離を検出する測距装置を有するカメラにおける、測距装置について示した図で、レンズ交換式の一眼レフレックスカメラを想定して図示したものである。このカメラは、交換レンズ11とカメラボディ12とから構成されている。
前記交換レンズ11は、カメラボディ12の前面に設けられた図示しないカメラマウントを介してカメラボディ12に着脱自在に取り付けられている。この交換レンズ11の内部には、フォーカスレンズ111と、レンズ駆動部112と、レンズCPU113とが設けられている。
前記フォーカスレンズ111は、撮影光学系に含まれる焦点調節用のレンズであり、レンズ駆動部112内のモータによってその光軸方向(図1の矢印で示す方向)に駆動される。なお、実際の撮影光学系は複数のレンズから構成されているが、図1ではフォーカスレンズ111のみを図示している。前記レンズ駆動部112は、モータとモータドライバとから構成されている。前記レンズCPU113は、レンズ駆動部112の制御などを行う制御回路である。このレンズCPU113は、通信コネクタ114を介して前記カメラボディ12内のAF演算ASIC121と通信可能に構成されている。前記レンズCPU113からAF演算ASIC121には、レンズCPU113に予め記憶されている、フォーカスレンズの製造ばらつき情報やフォーカスレンズの収差情報などのレンズデータが送信される。
前記カメラボディ12は、以下のように構成されている。
交換レンズ11内のフォーカスレンズ111を介してカメラボディ12内に入射した被写体(図示せず)からの光束は、メインミラー122で反射されて、フォーカシングスクリーン123、ペンタプリズム124を介して接眼レンズ125に至る。これにより、被写体の状態を観察することができる。
交換レンズ11内のフォーカスレンズ111を介してカメラボディ12内に入射した被写体(図示せず)からの光束は、メインミラー122で反射されて、フォーカシングスクリーン123、ペンタプリズム124を介して接眼レンズ125に至る。これにより、被写体の状態を観察することができる。
前記メインミラー122の中央部はハーフミラーになっており、このメインミラー122がダウン位置(図示位置)にあるときには、ハーフミラー部を一部の光束が透過して、メインミラー122に設置されたサブミラー126で反射される。なお、メインミラー122がアップ位置にある時には、サブミラー126は折り畳まれるようになっている。また、メインミラー122の後方には、撮影光学系を通過した被写体像を光電変換するための撮像素子127が配置されている。即ち、前記メインミラー122がアップ位置にある場合には、フォーカスレンズ111を通った光束が、撮像素子127に結像して光電変換される。
また、前記サブミラー126で反射された光束は、自動焦点検出を行うためのAF光学系(コンデンサレンズ128、全反射ミラー129、セパレータレンズ130などから構成される。)に導かれ、このAF光学系を通過して、焦点検出用センサ装置としてのAFセンサ131に導かれる。そして、このAFセンサ131に光束が入射した後、この入射光束が電気信号に変換される。前記AFセンサ131からの電気信号(センサ出力)は前記AF演算ASIC121に入力される。
前記AF演算ASIC121では、入力されたセンサ出力に基づいて後で説明するAF演算が行われる。このAF演算結果がシステムコントローラ132に入力され、このシステムコントローラ132によりレンズCPU113が制御され、このレンズCPU113によりレンズ駆動部112を介してフォーカスレンズ111が合焦駆動される。
次に、AF光学系及びAFセンサ131について更に詳しく説明する。
図2の(a)は、図1のカメラで用いられるAF光学系の2次結像系を模式的に示した図である。AF光学系は、コンデンサレンズ128と、全反射ミラー129と、セパレータレンズ130とから構成されている。なお、図2の(a)における破線は1次結像面を示し、一点鎖線はAF光学系の光路を示している。
図2の(a)は、図1のカメラで用いられるAF光学系の2次結像系を模式的に示した図である。AF光学系は、コンデンサレンズ128と、全反射ミラー129と、セパレータレンズ130とから構成されている。なお、図2の(a)における破線は1次結像面を示し、一点鎖線はAF光学系の光路を示している。
前記セパレータレンズ130の後方には前記AFセンサ131が配置されている。前記AFセンサ131は、横線検出センサ列131a、131bと縦線検出センサ列131c、131dによって構成されている。
図2の(b)はフォーカスレンズ111からAFセンサ131に至る光束の様子を図示したものである。図2の(b)では全反射ミラー129を省略している。また、光束については撮影画面の横方向に関する焦点状態を検出するための横線検出光束のみを図示し、横線検出光束と直交する縦線検出光束については省略している。なお、以下の説明は横線検出光束を対象としているが、縦線検出光束の場合も同様である。
図2の(b)はフォーカスレンズ111からAFセンサ131に至る光束の様子を図示したものである。図2の(b)では全反射ミラー129を省略している。また、光束については撮影画面の横方向に関する焦点状態を検出するための横線検出光束のみを図示し、横線検出光束と直交する縦線検出光束については省略している。なお、以下の説明は横線検出光束を対象としているが、縦線検出光束の場合も同様である。
図2の(b)において、フォーカスレンズ111の異なる射出瞳111a、111bを通過した1対の横線検出光束は、前記サブミラー126で反射された後、コンデンサレンズ128に入射してそれぞれ集光される。そして、集光された1対の横線検出光束が全反射ミラー129において反射された後、図示しない視野絞りを介してセパレータレンズ130a、130bに入射する。さらに、セパレータレンズ130a、130bにそれぞれ入射した横線検出光束が、前記横線検出センサ列131a,131bの特定領域に結像する。
前記AFセンサ131は、例えば、図3に示す15個の測距点Xにおける焦点状態を検出するもので、図4のようなセンサアレイ配置になっている。即ち、横線検出センサ列131a、131bは、それぞれ5本のセンサ列から構成されている。各センサ列は互いに平行にかつ等間隔で配置されている。また、縦線検出センサ列131c、131dは、それぞれ3本のセンサ列から構成されている。各センサ列は互いに平行にかつ等間隔で配置されている。
前記AFセンサ131を構成する各センサ列は、図6に示すように、複数ラインの画素列、例えば、3ラインの画素列141,142,143によって構成されている。そして、各画素列141,142,143は、等間隔の画素ピッチで複数のセンサ画素SPを配列した構成になっている。前記各画素列141,142,143は、互いに1/2画素ピッチずらして配置している。即ち、画素列141に対して画素列142を図中右側に1/2画素ピッチずらし、画素列142に対して画素列143を図中左側に1/2画素ピッチずらした、いわゆる千鳥配置になっている。そして、横線検出センサ列131a、131b及び縦線検出センサ列131c、131dは、各センサ列を測距点に対応させてそれぞれN1、N2、N3、N4、N5の5つに領域分割している。なお、1つのセンサ画素SPのサイズは、例えば10μm×50μm、となっている。
次に、前記AFセンサ131の回路構成について述べる。この回路は、横線検出光束に対しては横線検出センサ列131a、131bの一方を基準部、他方を参照部として機能させる。また、縦線検出光束に対しては縦線検出センサ列131c、131dの一方を基準部、他方を参照部として機能させる。なお、ここでは検出センサ列のうちの1本のセンサ列についての回路構成について説明する。
基準部のセンサ列も参照部のセンサ列も3本の画素列141,142,143によって構成されるのは前述した通りであるが、具体的には、図5に示すように、各画素列141,142,143を、センサ画素SPを構成するフォトダイオードを配列したフォトダイオード列151と、各フォトダイオードが検知した受光出力を画素信号として蓄積する蓄積列152と、画素信号を転送する転送路153と、前記蓄積列152から画素信号を転送路153に出力する転送スイッチ列154によって構成している。
そして、画素列141と画素列142は互いにフォトダイオード列151を対向させ、外側に転送路153を配置し、画素列142と画素列143との間にモニタ用のフォトダイオード列155を配置し、そのフォトダイオード列155に画素列143のフォトダイオード列151を対向して配置し、この画素列143の転送路153を外側に配置している。
前記各画素列141,142,143の転送路153に出力される画素信号をFDA(Floating Diffusion Amplifier)156によって順次取出し、増幅回路157によって増幅した後、出力選択回路158に出力している。また、前記モニタ用のフォトダイオード列155が検知した受光出力をモニタ出力として前記出力選択回路158及び積分時間制御回路159に出力している。前記積分時間制御回路159は、モニタ出力を取り込み、その出力が一定値以上になったときセンサ回路内において自動的に積分を終了させる制御や、モニタ出力が一定値以上にならなくても最大積分時間に達したとき自動的に積分を終了させる制御を行う。なお、一定値や最大積分時間は調整可能になっている。
前記出力選択回路158は、各画素列141,142,143からの画素信号を出力させるか、モニタ出力を出力させるか選択制御する。なお、出力選択回路158は、温度センサ160の検知温度によって出力電圧を温度補償するようになっている。
このような回路構成を持つAFセンサ131の出力に基づいて測距点Xの焦点状態を検出することができる。このときの焦点状態の検出手法としては、例えば相関演算を用いた手法がある。この相関演算を用いた手法について説明する。
このような回路構成を持つAFセンサ131の出力に基づいて測距点Xの焦点状態を検出することができる。このときの焦点状態の検出手法としては、例えば相関演算を用いた手法がある。この相関演算を用いた手法について説明する。
相関演算を行うのに先立って、まず、前記AF演算ASIC121は、AFセンサ131から入力された各測距点Xのセンサデータ(画素信号を処理したデータ)を図示しないRAMに記憶させる。次に、各センサ列131a,131b,131c,131dの各画素列141,142,143を構成するフォトダイオードの出力の不均一性を補正するための補正データを用いてRAMに記憶したセンサデータを補正する。ここでの補正データは、例えば均一輝度面を観察したときのセンサデータのばらつきを補正するようなデータを用いればよい。
センサデータの補正が終了した後、相関演算を行う。ここでの相関演算は、対をなすセンサ列間、例えば、横線検出センサ列131aと横線検出センサ列131bの各対をなすセンサ列間や縦線検出センサ列131cと縦線検出センサ列131dの各対をなすセンサ列間に入射した2像の間隔、すなわち、像ずれ量を算出する演算である。
この相関演算においては、対をなすセンサ列間でセンサデータの比較を行い、この比較の結果、相関値が最も小さくなるような像ずれ量を算出する。そして、算出した像ずれ量に基づいて被写体距離やフォーカスレンズ111を駆動する際のデフォーカス量を算出する。
例えば、3本の画素列141,142,143からなるセンサ列において、このセンサ列が被写体の同一部位の光束を取得している場合には、隣り合う2本の画素列を合成して1組のラインセンサと考える。すなわち、画素列141と画素列142を1組のラインセンサと考え、画素列142と画素列143をもう1組のラインセンサと考える。
例えば、3本の画素列141,142,143からなるセンサ列において、このセンサ列が被写体の同一部位の光束を取得している場合には、隣り合う2本の画素列を合成して1組のラインセンサと考える。すなわち、画素列141と画素列142を1組のラインセンサと考え、画素列142と画素列143をもう1組のラインセンサと考える。
そして、各画素列141,142,143のセンサ画素SPに対して図7に示すように画素番号1〜15…を付したときに、1組のラインセンサについては、画素1→画素2→画素4→画素5→画素7→画素8→画素10…の順に画素を並べ替えて相関演算を行い、2像間隔、即ち、像ずれ量を算出する。また、もう1組のラインセンサについては、画素2→画素3→画素5→画素6→画素8→画素9→画素11…の順に画素を並べ替えて相関演算を行い、2像間隔、即ち、像ずれ量を算出する。そして、算出した複数の像ずれ量を信頼性で加重加算平均する。
また、センサ列が被写体の同一部位の光束を取得していない場合には、最至近を示す1つの画素列を選択して像ずれ量を算出する。
また、センサ列が被写体の同一部位の光束を取得していない場合には、最至近を示す1つの画素列を選択して像ずれ量を算出する。
このような演算処理を行うことで、センサ列が被写体の同一部位の光束を取得している場合には、2つの画素列の合成によって精度を√2倍高めることができ、また、算出した複数の像ずれ量の平均を取ることで精度をさらに√2倍高めることができ、総合的には精度を2倍に高めることができる。
各画素列141,142,143からなるセンサ列における相関演算処理をフローチャートで示すと、図8に示すようになる。この相関演算処理は演算手段を構成するAF演算ASIC121によって行われる。画素列番号をk、類似性なし又は被写体距離が異なることを判定したときインクリメントされるカウンタをNGとすると、先ず、ステップS1にて、画素列番号k=1にし、ステップS2にて、カウンタNG=0にする。
そして、ステップS3にて、kラインと(k+1)ラインで類似性を有するかを判定する(類似性判定手段)。ここではkラインは画素列141に相当し、(k+1)ラインは画素列142に相当する。ステップS3にて類似性があると判定した時には、さらに、ステップS4にて、kラインで像ずれ量に基づいて算出したデフォーカス量と(k+1)ラインで像ずれ量に基づいて算出したデフォーカス量が同一であるかを判定する。すなわち、kラインと(k+1)ラインは被写体の同一部位を検出しているか否かを判定する。そして、デフォーカス量が同一であることを判定したときには、kラインと(k+1)ラインは被写体の同一部位の光束を取得していると判定し、ステップS5にて、kラインと(k+1)ラインの信号を合成する(合成手段)。そして、相関演算し合成像ずれ量を算出する(演算手段)。
また、ステップS3にて、kラインと(k+1)ラインで類似性がないと判定するか、ステップS3にて類似性ありと判定してもステップS4にてkラインと(k+1)ラインのデフォーカス量が同一でないと判定したときには、kラインと(k+1)ラインは被写体の同一部位の光束を取得していないと判定し、ステップS6にて、カウンタNGを+1インクリメントする。そして、ステップS7にて、kラインの画素信号と(k+1)ラインの画素信号を個々に相関演算し像ずれ量を算出する(演算手段)。
像ずれ量の算出を終了すると、ステップS8にてkの値に1を加算し、ステップS9にてk=3になったかを判定する。ここではk=2でk=3になっていないので、ステップS3に戻って同様の処理を行う。今度は、kラインは画素列142に相当し、(k+1)ラインは画素列143に相当する。そして、同様に処理を行い、ステップS5又はS7にて像ずれ量の算出が終了し、ステップS8にてkの値に1を加算する。今度はk=3になるので、ステップS9にてk=3を判定し、ステップS10の判定に移行する。
ステップS10にて、カウンタNG=0か否かを判定する。そして、NG=0であれば、ステップS11にて、算出した複数の像ずれ量を信頼性で加重加算平均して一連の処理を終了する。相関演算の結果として算出された像ずれ量の信頼性が低い場合には、誤ったデフォーカス量が算出されるおそれがあるので、デフォーカス量の算出を行うのに先立ってセンサデータの信頼性を判定することが好ましく、ステップS11の処理は信頼性判定にて信頼性が高いと判定した結果に基づいて行われる。そして、加重加算平均に基づいて算出した最終ずれ量により撮影光学系の合焦動作を行うことになる。
また、ステップS10にて、NG=0でないことを判定すると、ステップS12にて、最至近を示す画素列の像ずれ量を採用する。すなわち、NG=0でないということは、画素列間で類似性がないと判定されたか、同一デフォーカス量でないと判定された場合であり、このような場合には最至近を示す画素列の画素出力を採用して一連の処理を終了する。そして、最至近を示す画素列の画素出力に基づいて算出した像ずれ量により撮影光学系の合焦動作を行うことになる。
図8の相関演算処理におけるステップS3での類似性の判定はkライン画素列と(k+1)ライン画素列との2ライン同士にて相関演算を行い、ラインセンサが同一被写体を検出しているか判定することで行う。すなわち、図9に示すように、kライン画素列と(k+1)ライン画素列が図中斜線で示すように被写体検出を行っているとすると、kライン画素列からの出力信号s1と(k+1)ライン画素列からの信号出力s2との間の相関値Fを、
F=Σ|DL(i)−DR(i)|
の式で、シフト量を−4〜+4として計算し、最大相関が成り立つ相関値Fを求める。そして、最大相関が得られる画素数分、画素をシフトさせるようなシフト量を求める。
F=Σ|DL(i)−DR(i)|
の式で、シフト量を−4〜+4として計算し、最大相関が成り立つ相関値Fを求める。そして、最大相関が得られる画素数分、画素をシフトさせるようなシフト量を求める。
また、ステップS4での同一デフォーカス量の判定は、隣接した画素列を合成しない状態での像ずれ量を算出し、同一の像ずれ量になっているかで判定する。具体的には、
max(像ずれ量−平均像ずれ量)<閾値
であれば、同一像ずれ量になっていると判定する。
max(像ずれ量−平均像ずれ量)<閾値
であれば、同一像ずれ量になっていると判定する。
また、ステップS5におけるkライン画素列と(k+1)ライン画素列の信号合成は、見かけ上画素ピッチが1/2になるように信号の合成処理を行う。すなわち、図10の(a)に示すように、kライン画素列と(k+1)ライン画素列が図中斜線で示すように被写体検出を行っているとすると、kライン画素列からの出力信号s1と(k+1)ライン画素列からの信号出力s2が図に示すようになり、それを合成すると、合成信号s3が得られる。この合成信号s3の波形は被写体の一定の傾き量を反映しない波形になっている。この波形を使用すると基準画素列と参照画素列とで波形が異なる場合が生じ、適正な相関演算結果が得られなくなる。
そこで、kライン画素列の信号出力を、例えば1画素分図中左へシフトする(画素シフト手段)。これにより、kライン画素列による被写体検出が図10の(b)に示すように変化し、このときのkライン画素列からの出力信号s1(シフト)は図に示すようになり、この信号出力s1(シフト)と(k+1)ライン画素列の信号出力s2を合成することで被写体の一定の傾き量を反映した階段状の合成信号s3(シフト)の波形が得られる。この波形を使用すると基準画素列と参照画素列とで波形が異なる場合が生じることなく、適正な相関演算結果が得られ、合成の効果が得られる。
前記ステップS11における最終像ずれ量の算出は、ステップS5にて、kラインの画素列と(k+1)ラインの画素列の画素信号の合成処理を行っているので、算出する最終像ずれ量R(合成)は、画素列141の画素信号と画素列142の画素信号の合成によって求めた合成像ずれ量をP12、画素列142の画素信号と画素列143の画素信号の合成によって求めた合成像ずれ量をP23、画素列141の画素信号と画素列142の画素信号との信頼性をQ12、画素列142の画素信号と画素列143の画素信号との信頼性をQ23とすると、
R(合成)={(P12×Q12)+(P23×Q23)}/(Q12+Q23)
によって求める。
R(合成)={(P12×Q12)+(P23×Q23)}/(Q12+Q23)
によって求める。
なお、ステップS11では、kライン画素列と(k+1)ライン画素列の画素信号の合成処理を行った信号に基づく最終像ずれ量の算出を行ったが、kライン画素列と(k+1)ライン画素列の画素信号を合成せずに最終像ずれ量を算出してもよい。この場合の最終像ずれ量R(非合成)は、画素列141の画素信号によって求めた像ずれ量をP1、画素列142の画素信号によって求めた像ずれ量をP2、画素列143の画素信号によって求めた像ずれ量をP3、画素列141の信頼性をQ1、画素列142の信頼性をQ2、画素列143の信頼性をQ3とすると、
R(非合成)={(P1×Q1)+(P2×Q2)+(P3×Q3)}/(Q1+Q2+Q3)
によって求める。
R(非合成)={(P1×Q1)+(P2×Q2)+(P3×Q3)}/(Q1+Q2+Q3)
によって求める。
また、場合によっては、最終像ずれ量を、信頼性を加味しないで算出してもよい。この場合には算出された複数の像ずれ量の平均値によって求める。
すなわち、合成処理を伴う最終像ずれ量R(合成)は、
R(合成)=(P12+P23)/2
によって求め、また、合成処理を伴わない最終像ずれ量R(非合成)は、
R(非合成)=(P1+P2+P3)/3
によって求める。
なお、信頼性を加味するか否かは、例えばシステムコントローラ132において設定すればよい。
すなわち、合成処理を伴う最終像ずれ量R(合成)は、
R(合成)=(P12+P23)/2
によって求め、また、合成処理を伴わない最終像ずれ量R(非合成)は、
R(非合成)=(P1+P2+P3)/3
によって求める。
なお、信頼性を加味するか否かは、例えばシステムコントローラ132において設定すればよい。
信頼性の判定は信頼性判定手段を設け、この信頼性判定手段が各画素列141,142,143の画素出力に基づく相関演算結果から測距データの信頼性を判定する。例えば、一例として、像ずれ量を得たときの最大相関値を信頼性として用いた場合について述べる。
信頼性判定における閾値は、センサ列が同一の被写体を受光し、かつ、被写体との距離が同一のときには、信頼性判定の閾値をそれ以外の場合よりも小さくする。これは各画素列が被写体を受光して得た画素出力に類似性があり、かつ同一の被写体距離を検出しているときには信頼性の判定を容易にすることであり、合成/平均化したブロックの像ずれ量を採用しやすくすることになる。なお、被写体との距離はデフォーカス量として見ることができる。
なお、信頼性判定の閾値を小さくする条件としては、類似性と同一の被写体距離の両方を満足したときのみでなく、何れか一方を満足したときに行うようにしてもよい。
なお、信頼性判定の閾値を小さくする条件としては、類似性と同一の被写体距離の両方を満足したときのみでなく、何れか一方を満足したときに行うようにしてもよい。
最大相関を示したときの相関量をFmin(k)とすると、相関量Fmin(k)は、
Fmin(k)=Σ|DL(i)−DR(i)|
で表される。なお、kは画素列番号である。
センサ列が同一の被写体を受光し、かつ、被写体との距離が同一のときは、(Fmin(1,2)<閾値1)で、かつ、(Fmin(2,3)<閾値1)のとき、信頼性ありと判定する。なお、Fmin(k,k’)は、合成時の最大相関量を示している。
それ以外は、(Fmin(1)<閾値2)で、かつ、(Fmin(2)<閾値2)で、かつ、(Fmin(3)<閾値2)のとき、信頼性ありと判定する。なお、閾値1と閾値2との関係は、閾値1<閾値2である。
Fmin(k)=Σ|DL(i)−DR(i)|
で表される。なお、kは画素列番号である。
センサ列が同一の被写体を受光し、かつ、被写体との距離が同一のときは、(Fmin(1,2)<閾値1)で、かつ、(Fmin(2,3)<閾値1)のとき、信頼性ありと判定する。なお、Fmin(k,k’)は、合成時の最大相関量を示している。
それ以外は、(Fmin(1)<閾値2)で、かつ、(Fmin(2)<閾値2)で、かつ、(Fmin(3)<閾値2)のとき、信頼性ありと判定する。なお、閾値1と閾値2との関係は、閾値1<閾値2である。
信頼性が判定された後、カメラの測距点選択モードに応じて測距点の選択が行われる。測距点選択モードがシングルポイントモードの場合には、撮影者によって指定された測距点を使用する。また、測距点選択モードがマルチモードの場合には、全測距点の中で信頼性の高いセンサデータを出力する測距点を抽出し、その中で更に、最至近の測距点を選択する。その後、カメラの設定状況によって第1処理又は第2処理を選択的に行う。
第1処理は、1点にて測距する場合で、最至近として選択された測距点の像ずれ量を使用して行う。また、第2処理は、複数測距点にて測距する場合で、最至近として選択された測距点の像ずれ量とほぼ同一な像ずれ量を持つ測距点が複数存在する場合は、それらの測距点の像を同一被写体と見なし、同一像ずれ量を持つ複数測距点の像ずれ量の平均値を使用して行う。
そして、測距点における像ずれ量に基づいてデフォーカス量の算出が行われる。すなわち、像ずれ量から、光学的に算出されたデフォーカス係数によりデフォーカス量を算出する。そして、算出したデフォーカス量に対し、温度補正、製造時のボディばらつきの補正、製造時のフォーカスレンズのばらつきの補正などを行って最終的なデフォーカス量を決定する。
デフォーカス量が算出された後は、算出されたデフォーカス量がレンズCPU113に送信される。この送信されたデフォーカス量に基づいてレンズCPU113がレンズ駆動部112を制御することにより、フォーカスレンズ111の合焦駆動が行われる。
デフォーカス量が算出された後は、算出されたデフォーカス量がレンズCPU113に送信される。この送信されたデフォーカス量に基づいてレンズCPU113がレンズ駆動部112を制御することにより、フォーカスレンズ111の合焦駆動が行われる。
また、選択された測距点はファインダ内にスーパーインポーズによって表示される。測距点選択モードがシングルポイントモードの場合には選択された測距点のみがファインダ内にスーパーインポーズされる。また、測距点選択モードがマルチモードの場合には、像ずれ量の平均値算出に使用した全ての測距点がファインダ内にスーパーインポーズされる。
図11はこの実施の形態に係る測距装置を搭載したカメラの全体的な電気回路の構成を示すブロック図である。このブロック図では交換レンズ11とカメラボディ12とを区別せずに図示している。
カメラの所定位置にはフォーカスレンズ111を含むズームレンズ系161が配設されている。このズームレンズ系161は、上記フォーカスレンズ111を含む撮影光学系を1つのレンズによって代表して図示したものである。このズームレンズ系161は前記レンズ駆動部112によって駆動される。レンズ駆動部112は前記レンズCPU113によって制御される。
カメラの所定位置にはフォーカスレンズ111を含むズームレンズ系161が配設されている。このズームレンズ系161は、上記フォーカスレンズ111を含む撮影光学系を1つのレンズによって代表して図示したものである。このズームレンズ系161は前記レンズ駆動部112によって駆動される。レンズ駆動部112は前記レンズCPU113によって制御される。
ズームレンズ系161の入射光の光路上には前記撮像素子127が配置されている。この撮像素子127は、撮像回路162、A/D変換回路163を介してバスライン164に接続されている。前記バスライン164には、前記システムコントローラ132とAF演算ASIC121が接続されている。そして、前記AF演算ASIC121にはAFセンサ131が接続されている。
前記バスライン164には、また、各種の制御プログラムや各種データ処理用の情報等を記憶した記憶手段としてのROM165、データの一時記憶用のRAM166、ドライブコントローラ167、外部I/F部168及びビデオエンコーダ169が接続されている。そして、前記ドライブコントローラ167にメディアドライブ170を介してディスク状又はカード状の記録媒体171が接続され、前記外部I/F部168に外部入出力端子172が接続され、前記ビデオエンコーダ169にビデオ出力端子173が接続されるとともにLCDドライバ174を介してLCD表示部175が接続されている。
前記システムコントローラ132は、各部の制御処理や画像処理などカメラ全体の制御を司るものであり、レンズCPU113と通信可能に構成されている。また、前記システムコントローラ132には、操作部ドライバ176を介してモード設定などのカメラに対して各指示の入力を行う操作部の操作状態を検出するためのダイヤル部177やスイッチ部178が接続されるとともに、各部に電源を供給する電源部179が接続されている。前記電源部179には、外部からの電源供給を受けるための外部電源入力端子180が接続されている。
前記システムコントローラ132には、さらに、閃光発光を行うためのストロボ発光部181及び当該カメラの姿勢が縦位置であるか横位置であるかを検出するための姿勢検出センサ182が接続されている。
前記システムコントローラ132には、さらに、閃光発光を行うためのストロボ発光部181及び当該カメラの姿勢が縦位置であるか横位置であるかを検出するための姿勢検出センサ182が接続されている。
このような構成において、AFセンサ131からのセンサ出力がAF演算ASIC121に入力されると、AF演算ASIC121において前述したようなAF演算が行われてデフォーカス量が算出され、この算出されたデフォーカス量に基づいてレンズCPU113を介してレンズ駆動部112が制御されて、ズームレンズ系161内のフォーカスレンズのフォーカス駆動が行われる。
また、被写体の像がズームレンズ系161を介して撮像素子127に結像すると、この被写体像が光電変換された撮像信号として撮像素子127から出力される。この撮像信号が、後段の撮像回路162において処理され、更に、A/D変換回路163においてデジタルの画像データに変換される。このデジタル画像データが、バスライン164を介してシステムコントローラ132に入力される。
システムコントローラ132では、入力された画像データのJPEG圧縮伸張処理等の各種信号処理等が行われる。システムコントローラ132による信号処理の際やAF演算ASIC121におけるAF演算の際には、各種データの一時的記憶用としてRAM166が用いられる。
また、画像データ等の記録用のディスク状又はカード状の記録媒体171がメディアドライブ170に装着されると、当該記録媒体171に画像データが記録され、或いは画像データが読み込まれることになる。このとき、ドライブコントローラ167により、メディアドライブ170の動作が制御される。記録媒体171から画像データが読み込まれた場合には、読み込まれた画像データがバスライン164を介してシステムコントローラ132に送られ、前述した撮像信号による画像データの場合と同様の信号処理がなされる。
また、パソコン等の周辺機器は、外部入出力端子(例えばUSB端子)172及び外部I/F部168を介してバスライン164に接続される。そして、周辺機器が保持する画像データ等は、外部入出力端子172及び外部I/F部168を介して取り込まれ、ドライブコントローラ167の制御の下、メディアドライブ170が駆動され、記録媒体171に記録されるようになっている。
更に、ビデオエンコーダ169では、A/D変換回路163でA/D変換された画像信号、又は記録媒体171から読み出されシステムコントローラ132でJPEG伸長処理された画像信号がエンコードされ、LCD表示部175において所定の表示がなされる。このとき、LCDドライバ174によりLCD表示部175が駆動される。更に、このカメラでは、ビデオ出力端子173を介して映像信号の外部出力も可能となっている。
このように、この実施の形態における測距装置は、横線検出センサ列131a、131b及び縦線検出センサ列131c、131dからなるAFセンサ131を使用し、横線検出センサ列131a、131b及び縦線検出センサ列131c、131dを構成する各センサ列はそれぞれ3本の画素列141,142,143によって構成されている。
そして、例えば、画素列141と画素列142との画素出力に類似性があることを判定し、さらに、画素列141と画素列142との画素出力が同一の被写体距離を示す、すなわち、同一のデフォーカス量を示していることを判定すると、画素列141と画素列142を1組のラインセンサと見なして、各画素列141,142における各センサ画素SPの画素信号を1画素ずつ交互に取り出して相関演算を行って合成の像ずれ量を算出する。このとき、各画素列141,142からの画素信号間において最大相関が成り立つ相関値Fを求め、最大相関が得られる画素数分、例えば画素列141の画素をシフトさせて合成を行う。
また、画素列142と画素列143との画素出力に類似性があることを判定し、さらに、画素列142と画素列143との画素出力が同一の被写体距離を示す、すなわち、同一のデフォーカス量を示していることを判定すると、画素列142と画素列143を1組のラインセンサと見なして、各画素列142,143における各センサ画素SPの画素信号を1画素ずつ交互に取り出して相関演算を行って合成の像ずれ量を算出する。このときも各画素列142,143からの画素信号間において最大相関が成り立つ相関値Fを求め、最大相関が得られる画素数分、例えば画素列142の画素をシフトさせて合成を行う。
このような合成を行うことで常に適正な相関演算結果が得られる。そして、算出した2つの合成像ずれ量から最終の像ずれ量R(合成)を、信頼性Qを加味して、R(合成)={(P12×Q12)+(P23×Q23)}/(Q12+Q23)の演算によって求める。
こうして算出した最終の像ずれ量に基づいてデフォーカス量を算出してフォーカスレンズ111の合焦駆動を行う。これにより、被写体の焦点状態又は被写体までの距離を正確に検出できて測距精度を向上でき、合焦性能を向上できる。
こうして算出した最終の像ずれ量に基づいてデフォーカス量を算出してフォーカスレンズ111の合焦駆動を行う。これにより、被写体の焦点状態又は被写体までの距離を正確に検出できて測距精度を向上でき、合焦性能を向上できる。
また、画素列141と画素列142との画素出力に類似性がないと判定した場合や、類似性ありと判定しても画素列141と画素列142との画素出力が同一のデフォーカス量を示していない判定したときには、画素列141と画素列142の画素信号を合成せずに個々に取り出して相関演算を行って像ずれ量を算出する。これは、画素列142と画素列143との画素出力に類似性がないと判定した場合や、類似性ありと判定しても画素列142と画素列143との画素出力が同一のデフォーカス量を示していない判定したときにおいても同様である。そして、この場合の最終の像ずれ量は最至近を示す画素列の像ずれ量を使用することになる。
また、ステップS11においては、複数の像ずれ量を信頼性で加重加算平均して最終の像ずれ量を算出したが、信頼性を加味せずに、最終の像ずれ量R(合成)を、R(合成)=(P12+P23)/2の単なる平均化演算によって求めてもよく、このようにしても各画素列の被写体検出状態に応じて適切な演算処理を行って被写体の焦点状態又は被写体までの距離を正確に検出でき、合焦性能を向上できる。
なお、図8の相関演算処理では、ステップS3にて画素列間で類似性があることを判定し、ステップS4にて画素列間のデフォーカス量が同一であることを判定したときに、ステップS5にてkラインと(k+1)ラインの信号を合成する処理を行ったが、ステップS3による類似性の判定前に、相関値F=Σ|DL(i)−DR(i)|、の式から最大相関が成り立つ相関値Fを求めることで基準画素列と参照画素列の最大相関が得られるシフト量を求め、基準画素列と参照画素列とで同一のシフト量が得られない場合にはステップSの合成処理を行わずに、ステップS7の画素列毎の演算処理を行うようにしてもよい。
このようにすれば、基準画素列と参照画素列とで適正な相関演算結果が得られない場合に合成を行わないので、合成時には常に適正な相関演算結果が得られることになり、合成時の測距精度を高めることができる。
このようにすれば、基準画素列と参照画素列とで適正な相関演算結果が得られない場合に合成を行わないので、合成時には常に適正な相関演算結果が得られることになり、合成時の測距精度を高めることができる。
なお、前述した実施の形態は、3本の画素列を互いに1/2画素ピッチずらして千鳥配置したセンサ列を使用したものについて述べたが、4本の画素列を互いに1/2画素ピッチずらして千鳥配置したセンサ列を使用したものであってもよい。この場合に隣接した1対の画素列を1組のラインセンサと見なすことで合計3本のラインセンサの組を構成できる。
また、3本の画素列を互いに1/3画素ピッチずらして千鳥配置したセンサ列や4本の画素列を互いに1/4画素ピッチずらして千鳥配置したセンサ列等を使用してもよい。
なお、センサ列を構成する画素列の数は5本以上であってもよいのは勿論である。
なお、その他についても、本発明は前述した実施の形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。
さらに、前述した実施の形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、前述した実施の形態に示される全構成要件からいくつかの構成要件が削除されても本発明の課題を解決することができ、本発明の作用効果が得られるものである。
なお、センサ列を構成する画素列の数は5本以上であってもよいのは勿論である。
なお、その他についても、本発明は前述した実施の形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。
さらに、前述した実施の形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、前述した実施の形態に示される全構成要件からいくつかの構成要件が削除されても本発明の課題を解決することができ、本発明の作用効果が得られるものである。
11…交換レンズ、111…フォーカスレンズ、112…レンズ駆動部、121…AF演算ASIC、122…メインミラー、126…サブミラー、127…撮像素子、131…AFセンサ、131a,131b…横線検出センサ列、131c,131d…縦線検出センサ列、132…システムコントローラ、141,142,143…画素列。
Claims (5)
- 撮影画面内の複数の測距点における被写体の焦点状態又は被写体までの距離を検出する測距装置を有するカメラにおいて、
被写体像を形成する撮影光学系と、
複数のセンサ画素を配列してなる画素列を複数ライン有するセンサ列と、
このセンサ列の各画素列の画素出力を隣接する画素列間で相対的に所定画素分シフトさせる画素シフト手段と、
この画素シフト手段にてシフトした後の各画素列の画素出力を合成する合成手段と、
この合成手段にて合成した画素出力に基づいて被写体の焦点状態又は被写体までの距離を算出する演算手段と、
を具備することを特徴とする測距装置を有するカメラ。 - 前記合成手段は、各画素列の画素出力を1画素ずつ順次交互に取り出して合成することを特徴とする請求項1に記載の測距装置を有するカメラ。
- さらに、前記センサ列の画素列間で画素出力に類似性があるか否かを判定する類似性判定手段を設け、
前記画素シフト手段は、前記類似性判定手段が類似性を判定したときに画素列間で最大相関が得られる画素数分、画素をシフトさせることを特徴とする請求項1又は2に記載の測距装置を有するカメラ。 - 前記センサ列を少なくとも左右又は上下に1対配置し、この1対のセンサ列の一方のセンサ列の画素列を基準画素列、他方のセンサ列の画素列を参照画素列とし、
前記合成手段は、前記基準画素列と前記参照画素列とで同一のシフト量が得られない場合には合成を禁止することを特徴とする請求項1乃至3のいずれか1に記載の測距装置を有するカメラ。 - 前記センサ列は、隣接する画素列を互いに1/2画素ピッチずらして千鳥配置したことを特徴とする請求項1乃至4のいずれか1記載の測距装置を有するカメラ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004348798A JP2006154654A (ja) | 2004-12-01 | 2004-12-01 | 測距装置を有するカメラ |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004348798A JP2006154654A (ja) | 2004-12-01 | 2004-12-01 | 測距装置を有するカメラ |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006154654A true JP2006154654A (ja) | 2006-06-15 |
Family
ID=36633010
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004348798A Withdrawn JP2006154654A (ja) | 2004-12-01 | 2004-12-01 | 測距装置を有するカメラ |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006154654A (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008079007A (ja) * | 2006-09-21 | 2008-04-03 | Mitsubishi Electric Corp | 画像処理装置 |
WO2009141988A1 (en) * | 2008-05-19 | 2009-11-26 | Canon Kabushikikaisha | Image pickup system and lens apparatus |
CN102025914A (zh) * | 2009-09-10 | 2011-04-20 | 佳能株式会社 | 摄像设备及其测距方法 |
-
2004
- 2004-12-01 JP JP2004348798A patent/JP2006154654A/ja not_active Withdrawn
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008079007A (ja) * | 2006-09-21 | 2008-04-03 | Mitsubishi Electric Corp | 画像処理装置 |
JP4541335B2 (ja) * | 2006-09-21 | 2010-09-08 | 三菱電機株式会社 | 画像処理装置 |
WO2009141988A1 (en) * | 2008-05-19 | 2009-11-26 | Canon Kabushikikaisha | Image pickup system and lens apparatus |
CN102027412A (zh) * | 2008-05-19 | 2011-04-20 | 佳能株式会社 | 图像拾取系统和透镜装置 |
JP2011523079A (ja) * | 2008-05-19 | 2011-08-04 | キヤノン株式会社 | 撮影システム及びレンズ装置 |
CN102027412B (zh) * | 2008-05-19 | 2013-09-04 | 佳能株式会社 | 图像拾取系统和透镜装置 |
CN103424959A (zh) * | 2008-05-19 | 2013-12-04 | 佳能株式会社 | 图像拾取系统和透镜装置 |
US9335610B2 (en) | 2008-05-19 | 2016-05-10 | Canon Kabushiki Kaisha | Image pickup system and lens apparatus |
CN103424959B (zh) * | 2008-05-19 | 2016-12-28 | 佳能株式会社 | 图像拾取系统和透镜装置 |
CN102025914A (zh) * | 2009-09-10 | 2011-04-20 | 佳能株式会社 | 摄像设备及其测距方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5212396B2 (ja) | 焦点検出装置 | |
KR101310105B1 (ko) | 초점 검출장치 | |
JP5157400B2 (ja) | 撮像装置 | |
US8098984B2 (en) | Focus detecting apparatus and an imaging apparatus | |
US8878966B2 (en) | Image pickup apparatus having focus detecting function | |
JP4826507B2 (ja) | 焦点検出装置および撮像装置 | |
JP5000413B2 (ja) | 撮像システム及び画像信号処理プログラム | |
JP2007189312A (ja) | 撮像装置、撮像方法およびカメラ | |
JP2007317951A (ja) | 光検出素子および撮像装置 | |
JP2009159226A (ja) | 撮像素子、焦点検出装置、焦点調節装置および撮像装置 | |
JP2006139256A (ja) | 焦点検出装置を有するカメラ | |
JP2011039499A (ja) | 自動焦点検出装置 | |
JP4838175B2 (ja) | 焦点検出装置 | |
JP5013291B2 (ja) | 焦点検出装置 | |
JP2009075407A (ja) | 撮像装置 | |
US8139144B2 (en) | Focus detection device, focus detection method and imaging apparatus | |
JP2006071741A (ja) | 焦点検出装置 | |
JP4642547B2 (ja) | 焦点検出装置 | |
JP2006133515A (ja) | 焦点検出装置を有するカメラ | |
JP2006178076A (ja) | カメラの焦点検出装置 | |
JP2009128438A (ja) | カメラの焦点検出装置 | |
JP2006154654A (ja) | 測距装置を有するカメラ | |
JP4509576B2 (ja) | 焦点検出装置 | |
JP5407314B2 (ja) | 焦点検出装置および撮像装置 | |
JP2010091848A (ja) | 焦点検出装置および撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20080205 |