JP5332661B2 - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP5332661B2 JP5332661B2 JP2009020842A JP2009020842A JP5332661B2 JP 5332661 B2 JP5332661 B2 JP 5332661B2 JP 2009020842 A JP2009020842 A JP 2009020842A JP 2009020842 A JP2009020842 A JP 2009020842A JP 5332661 B2 JP5332661 B2 JP 5332661B2
- Authority
- JP
- Japan
- Prior art keywords
- vibration
- optical member
- imaging apparatus
- vibration mode
- foreign matter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、撮像素子に写り込むゴミを振動により除去する機能を備えた撮像装置に関するものである。 The present invention relates to an imaging apparatus having a function of removing dust reflected on an imaging element by vibration.
従来、レンズ交換式のデジタル一眼レフカメラでは、レンズを交換した際に侵入する塵埃やカメラ内の駆動部品から発生する磨耗粉(以下、異物という)が、撮像素子の前面に配置された光学部材の表面に付着し、撮像素子で撮影した画像に写り込んでしまうという問題が生じていた。 Conventionally, in an interchangeable lens digital single-lens reflex camera, dust that intrudes when the lens is replaced and abrasion powder (hereinafter referred to as foreign matter) generated from driving parts in the camera are arranged on the front surface of the image sensor. There is a problem that the image sticks to the surface of the image and appears in the image taken by the image sensor.
そこで、撮像素子に写り込む異物を撮像素子の前方に配置した光学部材を振動させることにより除去するようにした技術が提案されている(例えば、特許文献1参照)。 Therefore, a technique has been proposed in which foreign matters appearing on the image sensor are removed by vibrating an optical member arranged in front of the image sensor (see, for example, Patent Document 1).
光学部材を圧電素子により振動させる従来技術では、共振周波数の異なる振動モードを複数組み合わせて光学部材を振動させる方式が主流となっている。しかしながら、従来は異物の付着している位置にかかわらず、共振周波数の異なる振動モードによる振動を一定時間、一定回数繰り返すようにしていたため、異物を効率良く除去することが難しいものとなっていた。 In the prior art in which an optical member is vibrated by a piezoelectric element, a method of vibrating the optical member by combining a plurality of vibration modes having different resonance frequencies is the mainstream. However, conventionally, it has been difficult to efficiently remove foreign matter because vibrations in vibration modes having different resonance frequencies are repeated a certain number of times regardless of the position where the foreign matter is attached.
本発明の課題は、光学部材の表面に付着した異物を効率良く除去することができる撮像装置を提供することにある。 The subject of this invention is providing the imaging device which can remove the foreign material adhering to the surface of an optical member efficiently.
本発明は、以下のような解決手段により前記課題を解決する。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。
請求項1に記載の発明は、被写体像を光電変換面で光電変換する撮像素子(4)と、前記撮像素子の前記光電変換面側に設けられた光学部材(5)と、前記光学部材を振動させる振動素子(6)と、表示手段(12)と、前記表示手段に前記光学部材上の位置を指定するための位置指定画面を表示させる表示制御手段(10)と、ユーザによる操作入力を受け付ける操作入力手段(11)と、前記表示手段に表示された前記位置指定画面に対してユーザが前記操作入力手段を介して指定した目標位置を取得する目標位置取得手段(10)と、振動形状の異なる複数の各振動モードで前記光学部材が振動するように前記振動素子を駆動する振動素子駆動手段(9)と、前記目標位置取得手段により取得された目標位置と振動形状の山部とが一致する前記振動モードを選択するとともに、複数の前記各振動モードで前記光学部材が振動するように前記振動素子駆動手段を制御する振動制御手段(10)と、を備え、前記振動制御手段は、前記目標位置取得手段により取得された目標位置と振動形状の山部とが一致する前記振動モードの振動条件を変更し、前記目標位置と振動形状の山部とが一致しない前記振動モードの振動条件を変更しないこと、を特徴とする撮像装置である。
請求項2に記載の発明は、請求項1に記載の撮像装置であって、前記振動制御手段(10)は、前記目標位置取得手段(10)により取得された目標位置と振動形状の山部とが一致する振動モードの振動条件がない場合、いずれの前記振動モードの振動条件も変更しないこと、を特徴とする。
請求項3に記載の発明は、請求項1又は2に記載の撮像装置であって、前記表示制御手段(10)は、前記光学部材(5)の表面に付着した異物を示す画像を前記表示手段(12)の位置指定画面として表示させることを特徴とする。
請求項4に記載の発明は、請求項3に記載の撮像装置であって、前記表示制御手段(10)は、前記撮像素子(4)により撮像された白画面の画像データに基づく画像を前記表示手段(12)の位置指定画面として表示させることを特徴とする。
請求項5に記載の発明は、請求項3又は4に記載の撮像装置であって、前記光学部材(5)に付着している異物の位置を特定する異物特定手段(10)を備え、前記表示制御手段(10)は、前記異物特定手段により特定された異物の存在する小領域を前記表示手段(12)の位置指定画面に表示させることを特徴とする。
請求項6に記載の発明は、請求項5に記載の撮像装置であって、前記表示制御手段(10)は、特定された前記異物に応じて前記小領域を異なる色で表示させることを特徴とする。
請求項7に記載の発明は、請求項1〜6のいずれか1項に記載の撮像装置であって、前記振動制御手段(10)は、選択された振動モードの駆動条件として、当該振動モードの共振周波数による駆動時間、駆動回数及び駆動電圧のうち少なくとも一つを変更することを特徴とする。
なお、符号を付して説明した構成は、適宜改良してもよく、また、少なくとも一部を他の構成物に代替してもよい。
The present invention solves the above problems by the following means. In addition, in order to make an understanding easy, although the code | symbol corresponding to embodiment of this invention is attached | subjected and demonstrated, it is not limited to this.
According to the first aspect of the present invention, there is provided an imaging element (4) for photoelectrically converting a subject image on a photoelectric conversion surface, an optical member (5) provided on the photoelectric conversion surface side of the imaging element, and the optical member. A vibrating element (6) for vibrating, a display means (12), a display control means (10) for displaying a position designation screen for designating a position on the optical member on the display means, and an operation input by a user an operation input means for receiving (11), the target position acquisition means (10) for the user to obtain the target position specified through said operation input means to said position designation screen displayed on the display unit, vibration shape different vibration element drive means a plurality of the optical member in each vibration mode you drive the vibrating element to vibrate and (9), and the target position acquired by the target position acquisition means and the crest of the vibration shapes of Matches With selecting the oscillation mode that includes a vibration control means for said optical member plurality of said each vibration mode for controlling the vibration element driving means to oscillate (10), wherein the vibration control means, said The vibration condition of the vibration mode in which the target position acquired by the target position acquisition means and the peak portion of the vibration shape match is changed, and the vibration condition of the vibration mode in which the target position and the peak portion of the vibration shape do not match is changed. do not change, an imaging apparatus according to feature a.
Invention of
The invention according to claim 3, an imaging apparatus according to
Invention of
Invention of
A sixth aspect of the present invention is the imaging apparatus according to the fifth aspect , wherein the display control means (10) displays the small area in a different color according to the specified foreign matter. And
A seventh aspect of the present invention is the imaging apparatus according to any one of the first to sixth aspects, wherein the vibration control means (10) uses the vibration mode as a drive condition of the selected vibration mode. It is characterized in that at least one of the driving time, the number of times of driving, and the driving voltage at the resonance frequency is changed .
Na us, the configuration described by a reference numeral may be suitably modified, may also be replaced at least in part on the other constituents.
本発明によれば、光学部材の表面に付着した異物を効率良く除去することができる撮像装置を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the imaging device which can remove efficiently the foreign material adhering to the surface of an optical member can be provided.
以下、図面を参照して、本発明に係わる撮像装置の実施形態について説明する。ここでは、本発明をデジタルカメラに適用した場合の実施形態について説明する。図1は、本実施形態に係わるカメラ1の構成を示すブロック図である。以下、各部について説明する。
Embodiments of an imaging apparatus according to the present invention will be described below with reference to the drawings. Here, an embodiment when the present invention is applied to a digital camera will be described. FIG. 1 is a block diagram showing the configuration of the
撮影レンズ2は、入射した被写体光を屈折させて撮像部3側に出射する光学系であり、図示しない絞りユニットにより被写体光の光量が調節される。
The photographing
撮像部3は、撮影レンズ2から出射された被写体光を撮像する回路であり、被写体光を露光して電気的な画像信号に変換し、画像処理部7へ出力する。この撮像部3は、撮像素子4と、光学部材5と、振動ユニット6とを備えている。
The imaging unit 3 is a circuit that images subject light emitted from the photographing
撮像素子4は、被写体像を光電変換面で光電変換する部分であり、平面状に規則的に配置された光電変換素子等により構成されている。光学部材5は、撮像素子4の前面に設けられ、撮像素子4の光電変換面上に被写体像を結像させるものであり、被写体光の分光特性やフィルタリング特性を備えている。この光学部材5は、積層された複数枚の水晶板やフィルタなどで構成されている。
The
振動ユニット6は、電圧の印加により振動して光学部材5を振動させる振動発生手段である。図2は、振動ユニット6の構成を示す斜視図である。本実施形態の振動ユニット6は、光学部材5の前面側の左右両端部に、この光学部材5を振動させる振動素子として一対の圧電素子61、62が設置されている。各圧電素子は板状に形成されており、光学部材5における有効撮影領域外の左右両端部にそれぞれ接着により貼り付けられている。
The
また、圧電素子61、62の端部には、フレキシブルプリント基板63、64が接続されている。これらフレキシブルプリント基板63、64は圧電素子駆動回路9(図1)と電気的に接続されており、この圧電素子駆動回路9から振動モードに応じた共振周波数の交流電圧が印加される。
In addition, flexible printed
圧電素子61、62に特定の周波数(光学部材5の共振周波数)の交流電圧が印加されると、圧電素子61、62の振動とともに光学部材5が共振して光学部材5の振動が発生する。この振動により光学部材5の表面に付着した異物が除去される。
When an AC voltage having a specific frequency (resonance frequency of the optical member 5) is applied to the
次に、振動ユニット6における振動モードと振動形状について説明する。図3は、光学部材5が共振したときの振動形状を示す説明図である。図3では、各振動モードにおいて、光学部材5を異なる共振周波数で共振させたときの振動形状を模式的に示している。各振動形状では、振幅運動の一方の形状を実線で示し、他方の形状を二点鎖線で示している。すなわち、圧電素子61、62に印加する交流電圧のサイクルに従って、対称な2つの振幅形状が周期的に発生することになる。
Next, the vibration mode and vibration shape in the
圧電素子61、62に印加する共振周波数が高くなるにつれて振動形状の振幅周期も短くなり、振動形状の腹部の数も多くなる。また、共振周波数が低くなるにつれて振動形状の振幅周期も長くなり、振動形状の腹部の数も少なくなる。ここでは、腹部の数が少ない順に振動モードA、振動モードB、振動モードCが設定されている。なお、本実施形態では、説明を簡単にするため3つの振動モードを例とするが、振動モードの数はさらに多くてもよい。また、振動形状の「腹部」とは、振動形状の山(頂点付近)の区間をいい、「節部」とは、隣り合う腹部と腹部との間の区間をいう。
As the resonance frequency applied to the
光学部材5の表面に付着した異物を除去する場合、通常は振動モードA、振動モードB、振動モードCの順に異なる共振周波数による振動を発生させている。これによれば、光学部材5の有効撮影領域(横幅方向)では、振動モードA〜Cのいずれかの振動形状の山部による振幅が発生することになるため、光学部材5の有効撮影領域を含むほぼ全体を満遍なく振動させることができる。
When removing the foreign matter adhering to the surface of the
また、各振動モードでは、振動ユニット6の駆動電圧、駆動時間(振動時間)、及びその回数が基準の駆動回数として設定されている。例えば、振動モードAでは、所定の駆動電圧により5秒間×3回が基準の駆動回数として設定されているとすると、異物除去処理が実行されるごとに、振動モードAでは、5秒間×3回の駆動が行われる。振動モードB、振動モードCについても、それぞれ所定の駆動電圧、駆動時間及び駆動回数が設定されている。
In each vibration mode, the drive voltage, drive time (vibration time), and number of times of the
本実施形態のカメラ1では、上述した複数の振動モードを組み合わせて異物除去処理を行う通常の駆動方式に加えて、ユーザにより指定された異物の位置に応じて選択した振動モードにより異物除去処理を行う本実施形態の駆動方式を実行している。ここで、振動モードの振動条件としては、先に説明した振動ユニット6の駆動時間、駆動回数、駆動電圧などである。本実施形態では、駆動回数が通常よりも多くなるように変更する例について説明する。ただし、変更する振動条件は、駆動時間、駆動回数、駆動電圧のうちの少なくとも一つであればよく、また複数の振動条件を組み合わせてもよい。
In the
画像処理部7は、撮像部3から出力された画像信号に対し、ノイズ除去、A/D変換、色補正処理、サイズ変更、符号化などの、アナログ及びデジタルの画像処理を行い、最終的な画像データを作成する。この画像データはDRAM15に一時的に記憶される。
The image processing unit 7 performs analog and digital image processing such as noise removal, A / D conversion, color correction processing, size change, and encoding on the image signal output from the imaging unit 3, and finally Create image data. This image data is temporarily stored in the
表示パネル8は、カメラ1の上面に配置された白黒の液晶ディスプレイパネルであり、撮影モード、絞り値、シャッタスピードなどの撮影情報などが表示される。
The
圧電素子駆動回路9は、上述した振動ユニット6に対して、各振動モードに応じた周波数の電圧を印加する。すなわち、圧電素子駆動回路9は、振動形状の異なる複数の各振動モードに応じて圧電素子を振動させる振動素子駆動手段として機能する。
The piezoelectric
制御部10は、カメラ1全体の動作を制御する回路であり、マイクロプロセッサにより構成されている。制御部10では、焦点調節のためのレンズ駆動量を演算し、撮影レンズ2の一部を光軸方向に移動させる不図示のレンズ内モータ又はボディ内モータを駆動して、焦点調節を行う。また、被写体光の輝度や、撮影レンズ2の種類、開放F値、焦点距離などのレンズ情報のほか、ユーザにより設定された撮影モード、図示しない感度設定部から入力された感度情報などに基づいて適正な露出値を演算する。そして、その露出値に応じた絞り値とシャッタスピード値を選択し、不図示の絞りユニットやシャッタユニットを駆動して露出制御を行う。
The
また、制御部10は、ユーザ操作により本実施形態の駆動方式による異物除去処理が選択されたときに、後述する液晶モニタ12に光学部材5と相対的に等しい大きさの位置指定画面を表示させる表示制御手段としての処理を実行する。本実施形態では、位置指定画面として、撮像素子4により撮像された白画面の画像データに基づく画像を液晶モニタ12に表示させている。
The
また、制御部10は、光学部材5に付着している異物の位置を特定する異物位置手段としての処理を実行する。本実施形態では、前記白画面の画像データに基づいて光学部材5に付着している異物の位置を特定するようにしている。ただし、異物の位置を特定する手法は本実施形態の例に限らず、どのような手法によるものであってもよい。
In addition, the
また、制御部10は、液晶モニタ12に表示された位置指定画面に対してユーザが指定した目標位置を取得する目標位置取得手段としての処理を実行する。ここで、目標位置とは、液晶モニタ12の位置指定画面に対してユーザが除去したい異物を指定したときの位置を示している。本実施形態では、後述するように、白画面を複数の小領域に分割して表示し、その複数の小領域の中からユーザにより指定された小領域の座標を位置情報として取得するようにしている。ここで、小領域内には異物の形状がそのまま表示される。ただし、目標位置の取得は本実施形態の例に限らず、どのような手法によるものであってもよい。
In addition, the
なお、制御部10の表示制御手段としての処理においては、異物の存在する小領域を位置指定画面に表示させるようにしてもよい。ここでは、異物の形状が小領域内に表示されることはなく、異物の存在する範囲が小領域として表示される。また、制御部10の表示制御手段としての処理においては、異物の大きさなどに応じて小領域を異なる色で表示させるようにしてもよい。上記のような小領域は、例えば白画面又は無地画面上に表示される。
In the processing as the display control means of the
さらに、制御部10は、目標位置取得手段の処理において取得した目標位置と振動形状の山部とが一致する振動モードを選択し、その振動モードの振動条件を変更する振動制御手段としての処理を実行する。ここで、選択される振動モードは1つであってもよいし、2以上あってもよい。また、駆動条件の変更は、本実施形態においては振動ユニット6の駆動回数が通常よりも多くなるようにしている。ただし、異物が振動形状の山部と一致する振動モードの振動条件のみを変更し、異物が振動形状の山部と一致しない振動モードの振動条件を変更しないようにしている。
Furthermore, the
操作部材11は、ユーザによる操作入力を受け付ける操作入力手段であり、ダイアル、ボタン、レバー、スイッチなどで構成されている。ここで、カメラ1の外観とともに操作部材11の具体例について説明する。図4は、本実施形態のカメラ1を背面側から見たときの斜視図である。本実施形態のカメラ1は、カメラボディ20と、撮影レンズ2及び不図示の絞りユニットが収納されたレンズ鏡筒30とを備えており、カメラボディ20にレンズ鏡筒30が着脱自在に装着されるレンズ交換式のデジタルカメラとして構成されている。カメラボディ20の上面には、撮影モードなどを選択可能なモードダイアル21、ポップアップ式の閃光装置(ストロボ)22、表示パネル8、レリーズボタン23が配置されている。また、カメラ1を背面から見たときに、右側にはユーザが撮影時にカメラ1を保持する際に使用するグリップ24が設けられている。
The
一方、カメラ1の背面であって、グリップ24の近傍には、メインダイアル25が配置されている。また、カメラ1の前面側であって、グリップ24の近傍には、サブダイアル26が配置されている。これらのダイアルは、主に露出モードの設定や、絞り値、シャッタスピード、露出補正値などを入力するためのダイアルであるが、図示しない他のボタンとの組み合わせで各種機能の設定が可能となる。
On the other hand, a
さらに、カメラ1の背面には液晶モニタ12が配置されている。この液晶モニタ12は、カラーの液晶ディスプレイパネルにより構成され、本実施形態における表示手段として機能する。この液晶モニタ12には、表示パネル8と同じ撮影モード、絞り値、シャッタスピードなどの撮影情報が表示されるほか、メニュー画面、モード設定画面や、撮像された画像(再生画像)やライブビュー画像を含む動画、異物除去処理における白画面などが表示される。ユーザは液晶モニタ12に表示されたメニュー画面から、通常又は本実施形態の異物除去処理を選択することができる。
Furthermore, a liquid crystal monitor 12 is disposed on the back of the
また、液晶モニタ12の上部には、ユーザが接眼状態で被写体像を観察するファインダ29が配置されている。また、右側にはセレクタダイアル27が配置されている。セレクタダイアル27は、上下左右の4方向と中央に図示しない電気接点を持つダイアル形のスイッチである。ユーザが上下左右に刻印されている矢印マーク28aを指で押すと、その矢印マーク28aの方向が選択方向として入力される。また、中央に配置されたOKボタン28bが押下されると、その時点での選択内容で決定したことが入力される。このセレクタダイアル27は、主に液晶モニタ12や表示パネル8などに表示された撮影条件などの変更操作や、メニュー項目、撮影済み画像の変更操作などに用いられる。本実施形態では、後述するように、セレクタダイアル27の操作により異物除去処理モードにおいて、ユーザが液晶モニタ12に表示された白画面上で異物の位置を指定することができる。
In addition, a
再び図1に戻って説明する。EEPROM13は、カメラ1の電源がオフしても記憶した情報を保持する不揮発性メモリであり、ユーザ設定やカスタム設定などの入力情報のほか、白画面の画像データなどが記憶される。また、EEPROM13には、各振動モードにおける駆動時間、駆動回数、及び駆動電圧が記憶される。後述の実施形態においては、駆動回数として、基準の駆動回数NAO、NBO、NC0のほか、実際の駆動回数NA、NB、NCなどが記憶される。ROM14は、カメラ1の動作や制御に必要なプログラムのほか、このプログラムの実行に必要な初期値や設定値などが記憶される。RAM15は、カメラ1の電源がオフしたときに記憶した情報が消去される揮発性メモリであり、上述した画像データのほか、画像処理部7や制御部10などが処理を行う際に必要なデータが一時的に記憶される。
Returning again to FIG. The
メモリカードI/F(インターフェース)部16は、DRAM15に記憶されている画像データをメモリカード17に記録し、またメモリカード17に記録されている画像データを読み出す機能を備えた書き込み/読み出し装置である。このメモリカードI/F部16の図示しないメモリカードスロットには、メモリカード17が着脱自在に装着される。
The memory card I / F (interface)
次に、白画面の画像データに基づく異物の位置の特定、ユーザによる異物の位置の指定、及びユーザにより指定された異物の位置と振動形状の山部とが一致する振動モードの選択についての具体例について説明する。 Next, specifics regarding the specification of the position of the foreign object based on the image data of the white screen, the specification of the position of the foreign object by the user, and the selection of the vibration mode in which the position of the foreign object specified by the user and the peak of the vibration shape match An example will be described.
図5(a)〜(d)は、撮像された白画面と光学部材5上に付着した異物の位置との関係を示す説明図である。本実施形態の異物除去処理モードでは、光学部材5に付着している異物を検出するために、白画面の画像データを取得する必要がある。このような白画面の画像データは、撮影レンズ2の先端から10cmほど離れた位置に、明るく均一な白色被写体を固定し、これを画面いっぱいに撮影することにより取得される。本実施形態の異物除去処理モードを実施する場合、ユーザは上記のような手法により、あらかじめ白画面の画像データを取得することになる。
FIGS. 5A to 5D are explanatory diagrams illustrating the relationship between the captured white screen and the position of the foreign matter attached on the
図5(a)は、撮像された白画面の一例を示している(破線は分割された小領域を示す)。光学部材5に異物が付着している場合は、例えば、図示のように有効撮影領域100の中に異物101が写り込むことになる。制御部10は、白画面の画像データをパターン認識等の手法により解析し、異物が存在すると推定される場合は、白画面の画像データを液晶モニタ12に表示させる。なお、異物が存在する小領域を表示する場合は、異物が有効撮影領域100のどの小領域に存在するかを特定し、その小領域の位置情報をDRAM15に記憶しておく。
FIG. 5A shows an example of a captured white screen (broken lines indicate divided small areas). When a foreign object is attached to the
図6(a)、(b)は、液晶モニタ12に表示される白画面を示す説明図であり、それぞれ異物の位置を指定する方式を示している。図6(a)に示すモニタ画面120には、図5(a)の小領域に対応する格子状の線が表示されており、その中に異物101が表示されている。また、モニタ画面120には、ユーザが異物101の位置を指定するためのカーソル121が表示されている。ユーザは、モニタ画面120に表示された白画面を見ながら、除去したい異物101の位置を指定する。具体的には、カメラ1背面のセレクタダイアル27(図4)の上下左右に描かれている所定の矢印マーク28aを押すことにより、カーソル121を所望の方向に動かして、異物101の位置にカーソル121の矢印先端を合わせる。そして、セレクタダイアル27の中央にあるOKボタン28bを押すことにより、異物101の位置を指定することができる。ここで指定された位置を含む小領域の位置情報は、制御部10によりDRAM15に記憶される。
FIGS. 6A and 6B are explanatory diagrams showing a white screen displayed on the
また、図6(b)に示すモニタ画面120についても、図5(a)の小領域に対応する格子状の線が表示されており、その中に異物101が表示されている。この実施形態では、カーソルの代わりに一つの小領域122がグレー表示されている。ユーザは、モニタ画面120に表示された白画面を見ながら、除去したい異物101の存在する小領域を指定する。具体的には、カメラ1背面のセレクタダイアル27(図4)の上下左右に描かれている所定の矢印マーク28aを押すことにより、グレー表示された小領域122を所望の方向に動かして、異物101の存在する小領域に合わせる。そして、セレクタダイアル27の中央にあるOKボタン28bを押すことにより、異物101の存在する小領域を指定することができる。このとき指定された小領域の位置情報は、制御部10によりDRAM15に記憶される。
Also, on the
なお、図6(a)、(b)のように、白画面上に異物101の形状そのものを表示せずに、異物101が存在する小領域を表示するようにしてもよい。その場合に、異物101が存在する小領域を他の小領域と異なる色に表示するようにしてもよい。更に、その場合には、異物101の大きさや種類に応じて小領域の色や濃淡を変えて表示するようにしてもよい。例えば、異物の大きさを「大」、「中」、「小」の3段階に分類した場合は、「大」を赤、「中」を黄色、「小」を緑というように表示する。或いは、「大」を黒、「中」を中間グレー、「小」を薄いグレーというように、白黒の濃淡(階調)により表示するというものである。なお、異物101の大きさや種類は、上述したパターン認識等の手法により特定することができる。
Note that, as shown in FIGS. 6A and 6B, a small area where the
更には、上記のような小領域を表示した画面を、異物101そのものを表示している白画面と切り替え可能に表示するようにしてもよい。また、格子状の線は必ずしも表示する必要はなく、カーソル121やグレーの小領域122のみを表示するようにしてもよい。
Furthermore, the screen displaying the small area as described above may be displayed in a switchable manner with a white screen displaying the
上記のようにユーザが液晶モニタ12に表示された白画面を見ながら異物の位置を指定すると、制御部10は、指定された異物101の位置情報に基づいて、この異物101の位置と振動形状の山部とが一致する振動モードを選択する。図5(b)〜(d)は、図3に示した振動モードA〜Cの山部を斜線、節部を白色で示している。すなわち、図5(b)は振動モードAの山部、図5(c)は振動モードBの山部、図5(d)は振動モードCの山部をそれぞれ示している。ユーザにより指定された、図5(a)に示す異物101の位置に対して、この異物101が振動形状の山部に存在する振動モードは、振動モードBと振動モードCとになる。このため、制御部10は、振動モードBと振動モードCを、振動条件を変更とする振動モードとしてDRAM15に記憶する。
When the user designates the position of the foreign object while looking at the white screen displayed on the liquid crystal monitor 12 as described above, the
次に、本実施形態における異物除去処理の手順を図7に示すフローチャートを参照しながら説明する。この実施形態では、異物の位置と振動形状の山部とが一致する振動モードの駆動回数を変更するようにしている。なお図7において、NA0、NB0、NC0は基準の駆動回数であり、所定の回数が初期値として設定されている。また、NA、NB、NCは実際の駆動回数である。駆動回数NA、NB、NCに変更がなければ、NA=NA0、NB=NB0、NC=NC0となる。この異物除去処理のルーチンは、ROM14に記憶された異物除去処理プログラムを起動することにより実行される。
Next, the procedure of the foreign substance removal process in the present embodiment will be described with reference to the flowchart shown in FIG. In this embodiment, the number of times of driving in the vibration mode in which the position of the foreign matter matches the peak portion of the vibration shape is changed. In FIG. 7, NA0, NB0, and NC0 are reference drive times, and a predetermined number is set as an initial value. NA, NB, and NC are the actual driving times. If the number of driving times NA, NB, and NC is not changed, NA = NA0, NB = NB0, and NC = NC0. This foreign matter removal processing routine is executed by activating a foreign matter removal processing program stored in the
まず、制御部10は、EEPROM13に記憶している駆動回数NA、NB、NCを初期値にリセットする(ステップS101)。続いて、白画面の画像データがEEPROM13に記憶されているかどうかを判定する(ステップS102)。このステップS102の判定がNOであれば、ステップS113へ進み、YESであれば、白画面の画像データを解析して、異物が存在するかどうかを判定する(ステップS103)。このステップS103の判定がNOであれば、ステップS112へ進み、YESであれば、白画面の画像データを液晶モニタ12に表示させる(ステップS104)。そして、ユーザにより異物の位置が指定されると、その小領域の位置情報を取得する(ステップS105)。
First, the
次に、制御部10は、ユーザにより指定された異物の位置と振動形状の山部とが一致する振動モードを選択する(ステップS106)。先に説明した図5の例では、振動モードBと振動モードCが選択されているため、ここでは振動モードB及びCでは駆動回数が変更されることになる。
Next, the
次に、制御部10は、選択されたのが振動モードAかどうかを判定する(ステップS107)。このステップS107の判定がNOであれば、ステップS109へ進み、YESであれば、駆動回数NA=NA0+1とする(ステップS108)。続いて、選択されたのが振動モードBかどうかを判定する(ステップS109)。このステップS109の判定がNOであれば、ステップS111へ進み、YESであれば、駆動回数NB=NB0+1とする(ステップS110)。続いて、選択されたのが振動モードCかどうかを判定する(ステップS111)。このステップS111の判定がNOであれば、ステップS113へ進み、YESであれば、駆動回数NC=NC0+1とする(ステップS112)。
Next, the
なお、上記ステップS107、ステップS109、ステップS111の判定がいずれもNOであれば、駆動回数NA、NB、NCは、基準の駆動回数NA0、NB0、NC0のままとなる。すなわち、異物が存在している場合であっても、その異物の位置と振動形状の山部とが一致する振動モードがない場合は、基準の駆動回数NA0、NB0、NC0により各振動モードが実行されることになる。また、ステップS103の判定がNOの場合も、基準の駆動回数NA0、NB0、NC0により各振動モードが実行される。 If the determinations in steps S107, S109, and S111 are all NO, the drive counts NA, NB, and NC remain the reference drive counts NA0, NB0, and NC0. That is, even if a foreign object exists, if there is no vibration mode in which the position of the foreign object matches the peak portion of the vibration shape, each vibration mode is executed by the reference driving times NA0, NB0, and NC0. Will be. Even when the determination in step S103 is NO, each vibration mode is executed based on the reference driving times NA0, NB0, and NC0.
本実施形態の例では、振動モードBと振動モードCが選択されているため、振動モードAの駆動回数は初期値NA0となるが、振動モードBと振動モードCの駆動回数はそれぞれ初期値よりも1回多い回数が設定されることになる。すなわち、制御部10は、EEPROM13に記憶している駆動回数NA、NB、NCのうち、NB、NCの駆動回数を変更することになる。
In the example of the present embodiment, since vibration mode B and vibration mode C are selected, the number of times that vibration mode A is driven is the initial value NA0, but the number of times that vibration mode B and vibration mode C are driven is greater than the initial value. The number of times that is one more is set. That is, the
次に、制御部10は、EEPROM13に記憶している白画面の画像データを削除する(ステップS113)。そして、圧電素子駆動回路9を制御して、EEPROM13に記憶している駆動回数NA、NB、NCに基づいて、各振動モードを実行する(ステップS114)。
Next, the
本実施形態によれば、以下の効果を奏する。
(1)ユーザにより指定された異物の位置と振動形状の山部とが一致する振動モードを選択し、この選択した振動モードに応じて光学部材5を振動させるようにしたので、光学部材5において異物の付着している部分は振動形状の山部により確実に振動することになる。したがって、光学部材5の表面に付着した異物を効率良く除去することができる。
(2)光学部材5の表面に付着した異物を示す画像を位置指定画面として表示するようにしたので、ユーザは異物の位置を視覚的に確認することができる。
(3)白画面の画像データを位置指定画面として表示するようにしたので、異物は白画面を背景に黒く映し出されることになる。したがって、ユーザは画面上に表示された異物を容易に見つけることができる。また、異物の位置を特定し、その異物の存在する小領域を位置指定画面に表示させることにより、ユーザは画面上に表示された異物の位置を容易に見つけることができ、またその位置を速やかに指定することができる。
(4)特定された異物に応じて小領域を異なる色で表示させることにより、ユーザは異物の大きさを視覚的に簡単且つ速やかに判断することができる。これにより、例えば、急いで撮影する必要がある場合には、大きな異物のみを指定するようにすることで、シャッターチャンスを逃すことなしに、大きな異物が目立たない画像を撮影することができる。
(5)選択された振動モードの駆動条件を変更するようにしたので、例えば振動モードの共振周波数による駆動回数を多くするようにした場合は、光学部材5において異物の付着している位置を通常よりも多く振動させることができる。したがって、光学部材5の表面に付着した異物をより効率良く除去することができる。この場合、特定された異物に応じて小領域を異なる色で表示させた場合には、色に応じて選択された振動モードの駆動条件を変更するようにしてもよい。すなわち、小領域の色に応じて、駆動条件となる駆動回数や駆動電圧などの値が異なるように制御するというものである。
(6)白画面の画像データを解析して異物が存在しない場合は、基準の駆動回数NA0、NB0、NC0により各振動モードが実行されるので、異物として認識されない微細な塵埃等についても除去することができる。同様に、異物が存在している場合でも、その異物の位置と振動形状の山部とが一致する振動モードがない場合は、基準の駆動回数NA0、NB0、NC0により各振動モードが実行されるので、通常の駆動回数による異物除去の効果を期待することができる。
(7)基準の駆動回数NA0、NB0、NC0をゼロと設定した場合は、異物の位置と振動形状の山部とが一致する振動モードのみが実行されることになるので、異物除去処理に要する時間を短縮することができる。
(変形形態)
According to this embodiment, the following effects can be obtained.
(1) Since the vibration mode in which the position of the foreign matter designated by the user matches the peak portion of the vibration shape is selected and the
(2) Since the image indicating the foreign matter adhered to the surface of the
(3) Since the image data of the white screen is displayed as the position designation screen, the foreign matter is projected black with the white screen as the background. Therefore, the user can easily find the foreign matter displayed on the screen. In addition, by specifying the position of the foreign object and displaying the small area where the foreign object exists on the position designation screen, the user can easily find the position of the foreign object displayed on the screen, and the position can be quickly found. Can be specified.
(4) By displaying small areas in different colors according to the specified foreign object, the user can visually and easily determine the size of the foreign object. Thereby, for example, when it is necessary to shoot quickly, it is possible to capture an image in which a large foreign object is not conspicuous without missing a photo opportunity by designating only a large foreign object.
(5) Since the driving condition of the selected vibration mode is changed, for example, when the number of times of driving by the resonance frequency of the vibration mode is increased, the position where the foreign material is attached to the
(6) When the image data of the white screen is analyzed and no foreign matter is present, each vibration mode is executed by the reference driving times NA0, NB0, and NC0, so fine dust that is not recognized as foreign matter is also removed. be able to. Similarly, even when a foreign object is present, if there is no vibration mode in which the position of the foreign object matches the peak portion of the vibration shape, each vibration mode is executed according to the reference driving times NA0, NB0, and NC0. Therefore, it is possible to expect the effect of removing foreign matter by the normal number of times of driving.
(7) When the reference number of driving times NA0, NB0, and NC0 is set to zero, only the vibration mode in which the position of the foreign matter matches the peak portion of the vibration shape is executed. Time can be shortened.
(Deformation)
以上説明した実施形態に限定されることなく、本発明は以下に示すような種々の変形や変更が可能であり、それらも本発明の範囲内である。
(1)本実施形態では、モニタ画面120に異物の位置や小領域を示した白画面を表示するようにしているが、ユーザがモニタ画面120を参照することなしに異物の位置を特定できる場合(例えば、プリント出力やパソコンの画面上で異物の位置が特定できた場合等)は、異物の表示されていない白画面又は無地の画面を表示するようにしてもよい。この場合も、ユーザは図6(a)、(b)に示した入力方式により異物の位置を指定することができる。
(2)本実施形態では、異物の位置を指定する操作入力手段として、上下左右に選択方向を入力するセレクタダイアル27を用いた例について示したが、押された方向が全方位で選択方向となるセレクタダイアルを用いてもよい。また、液晶モニタ12の表面にタッチパネル(接触型センサ)を配置し、液晶モニタ12に表示されている白画面に対してユーザが指やペン型部材を接触させることにより異物の位置を指定するようにしてもよい。
(3)異物除去処理が終了した後、異物の存在した小領域の位置情報をEEPROM13などに記憶しておき、連続して或いは次回の異物除去処理で同一領域が指定された場合は、駆動条件となる駆動回数や駆動電圧などの値が更に大きくなるように制御してもよい。これによれば、同じ領域で除去されない異物に対して、より集中的に振動を与えることができる。この場合、駆動回数や駆動電圧などの値に上限を設けておき、その上限値を越えても同じ領域に除去されない異物が存在する場合は、ユーザに対し光学部材5をブロアなどで掃除することや、サービスセンターでクリーニングすることを促すメッセージを液晶モニタ12に表示させるようにしてもよい。
(4)特定された異物が画面上のどの位置に存在するかによって駆動条件を変えるようにしてもよい。例えば、横位置の画面では下半分に床や地面などが写り、上半分に主要被写体が写ることが多いと考えられるため、異物が画面の上半分の領域に存在する場合は、駆動回数や駆動電圧などの値を下半分よりも大きくするというものである。このような制御を行うことにより、目立ちやすい位置に存在する異物をより効率良く除去することができる。また、姿勢センサを備えた機種において、カメラが横位置か縦位置かに応じて上記制御を切り替えるようにしてもよい。
(5)画面上の特定領域を拡大表示する機能を備えた機種では、異物の存在する領域を拡大表示するようにしてもよい。この場合は、異物の存在する領域を拡大表示した状態で、例えば図4に示すセレクタダイアル27のOKボタン28bを押すことにより、ユーザは異物の存在する小領域を指定することができる。これによれば、ユーザはその異物を除去するか否かを異物の大きさや形状などを見ながら判断することができる。
(6)上記実施形態では、異物の位置と振動形状の山部とが一致する振動モードの駆動回数を基準の駆動回数よりも1回多くする例について示したが、この例に限定されず、さらに多くの回数に変更するようにしてもよい。また、振動モードに応じて増やす回数が異なるようにしてもよい。
(7)上記実施形態では、白画面の画像データを解析して異物が存在しない場合に、基準の駆動回数により各振動モードを実行するようにしているが、異物が存在していなければ、白画面の画像データを削除した後、各振動モードを実行することなく処理を終了するようにしてもよい。
(8)上記実施形態では、ROM14に記憶された異物除去処理プログラムを起動することにより異物除去処理が実行される例について示したが、制御部10により実行される異物除去処理プログラムの一部又は全部に相当するプログラムが記録された記憶媒体を用意し、必要に応じてその記録媒体をカメラ1へ装着して内部に記録されているプログラムを読み込むようにしてもよい。
また、上記実施形態及び変形形態は適宜に組み合わせて用いることができるが、各実施形態の構成は図示と説明により明らかであるため、詳細な説明を省略する。さらに、本発明は以上説明した実施形態によって限定されることはない。
Without being limited to the embodiment described above, the present invention can be variously modified and changed as described below, and these are also within the scope of the present invention.
(1) In this embodiment, a white screen showing the position and small area of a foreign object is displayed on the
(2) In the present embodiment, an example in which the
(3) After the foreign matter removal processing is completed, the position information of the small region where the foreign matter is present is stored in the
(4) The driving condition may be changed depending on where the specified foreign substance exists on the screen. For example, on the screen in the horizontal position, it is thought that the floor and ground are often shown in the lower half and the main subject is often shown in the upper half. The value such as is made larger than the lower half. By performing such control, foreign substances present at conspicuous positions can be more efficiently removed. Further, in a model equipped with an attitude sensor, the above control may be switched depending on whether the camera is in a horizontal position or a vertical position.
(5) In a model having a function of enlarging and displaying a specific area on the screen, an area where a foreign object exists may be enlarged and displayed. In this case, the user can designate a small area where a foreign object exists by pressing an
(6) In the above-described embodiment, the example in which the number of times of driving in the vibration mode in which the position of the foreign substance coincides with the peak portion of the vibration shape is increased by one time than the reference number of times of driving is not limited to this example. It may be changed to a larger number of times. Further, the number of times of increase may be different depending on the vibration mode.
(7) In the above embodiment, when the image data of the white screen is analyzed and no foreign matter is present, each vibration mode is executed according to the standard number of driving times. After deleting the image data on the screen, the process may be terminated without executing each vibration mode.
(8) In the above embodiment, the example in which the foreign matter removal process is executed by starting the foreign matter removal process program stored in the
Moreover, although the said embodiment and modification can be used in combination suitably, since the structure of each embodiment is clear by illustration and description, detailed description is abbreviate | omitted. Furthermore, the present invention is not limited by the embodiment described above.
5:光学部材、6:振動ユニット、9:圧電素子駆動回路、10:制御部、12:液晶モニタ、13:EEPROM、14:ROM、15:DRAM、27:セレクタダイアル、61,62:圧電素子 5: optical member, 6: vibration unit, 9: piezoelectric element drive circuit, 10: control unit, 12: liquid crystal monitor, 13: EEPROM, 14: ROM, 15: DRAM, 27: selector dial, 61, 62: piezoelectric element
Claims (7)
前記撮像素子の前記光電変換面側に設けられた光学部材と、
前記光学部材を振動させる振動素子と、
表示手段と、
前記表示手段に前記光学部材上の位置を指定するための位置指定画面を表示させる表示制御手段と、
ユーザによる操作入力を受け付ける操作入力手段と、
前記表示手段に表示された前記位置指定画面に対してユーザが前記操作入力手段を介して指定した目標位置を取得する目標位置取得手段と、
振動形状の異なる複数の各振動モードで前記光学部材が振動するように前記振動素子を駆動する振動素子駆動手段と、
前記目標位置取得手段により取得された目標位置と振動形状の山部とが一致する前記振動モードを選択するとともに、複数の前記各振動モードで前記光学部材が振動するように前記振動素子駆動手段を制御する振動制御手段と、を備え、
前記振動制御手段は、前記目標位置取得手段により取得された目標位置と振動形状の山部とが一致する前記振動モードの振動条件を変更し、前記目標位置と振動形状の山部とが一致しない前記振動モードの振動条件を変更しないこと、
を特徴とする撮像装置。 An image sensor that photoelectrically converts a subject image on a photoelectric conversion surface;
An optical member provided on the photoelectric conversion surface side of the imaging element;
A vibrating element that vibrates the optical member;
Display means;
Display control means for displaying a position designation screen for designating a position on the optical member on the display means;
An operation input means for receiving an operation input by a user;
And the target position acquisition means for acquiring a target position designated by the user through the operation input means to said position designation screen displayed on the display means,
A vibration element driving means you drive the vibrating element so that the optical member is vibrated different in respective vibration modes of the vibrating shape,
With selecting the vibration mode and the crest matches vibration shape as to target position acquired by the target position acquisition means, the vibrating element driving means so that the optical member plurality of said each vibration mode vibrates comprising a vibration control means for controlling for, the,
The vibration control unit changes the vibration condition of the vibration mode in which the target position acquired by the target position acquisition unit and the peak portion of the vibration shape match, and the target position does not match the peak portion of the vibration shape. Do not change the vibration conditions of the vibration mode,
Imaging device according to feature a.
前記振動制御手段は、前記目標位置取得手段により取得された目標位置と振動形状の山部とが一致する振動モードの振動条件がない場合、いずれの前記振動モードの振動条件も変更しないこと、
を特徴とする撮像装置。 The imaging apparatus according to claim 1,
The vibration control means does not change any vibration condition of the vibration mode when there is no vibration condition of the vibration mode in which the target position acquired by the target position acquisition means and the peak portion of the vibration shape coincide with each other.
An imaging apparatus characterized by the above.
前記表示制御手段は、
前記光学部材の表面に付着した異物を示す画像を前記表示手段の位置指定画面として表示させること、
を特徴とする撮像装置。 The imaging apparatus according to claim 1 or 2 ,
The display control means includes
Displaying an image showing the foreign matter adhering to the surface of the optical member as a position designation screen of the display means;
An imaging apparatus characterized by the above.
前記表示制御手段は、
前記撮像素子により撮像された白画面の画像データに基づく画像を前記表示手段の位置指定画面として表示させること、
を特徴とする撮像装置。 The imaging apparatus according to claim 3 ,
The display control means includes
Displaying an image based on image data of a white screen imaged by the imaging element as a position designation screen of the display means;
An imaging apparatus characterized by the above.
前記光学部材に付着している異物の位置を特定する異物特定手段を備え、
前記表示制御手段は、
前記異物特定手段により特定された異物の存在する小領域を前記表示手段の位置指定画面に表示させること、
を特徴とする撮像装置。 The imaging apparatus according to claim 3 or 4 ,
A foreign matter specifying means for specifying the position of the foreign matter attached to the optical member;
The display control means includes
Displaying a small area in which the foreign matter specified by the foreign matter specifying means exists on the position specifying screen of the display means;
An imaging apparatus characterized by the above.
前記表示制御手段は、
特定された前記異物に応じて前記小領域を異なる色で表示させること、
を特徴とする撮像装置。 The imaging apparatus according to claim 5 ,
The display control means includes
Displaying the small area in a different color according to the identified foreign matter,
An imaging apparatus characterized by the above.
前記振動制御手段は、
選択された振動モードの駆動条件として、当該振動モードの共振周波数による駆動時間、駆動回数及び駆動電圧のうち少なくとも一つを変更すること、
を特徴とする撮像装置。 The imaging apparatus according to any one of claims 1 to 6 ,
The vibration control means includes
Changing at least one of the driving time, the number of times of driving, and the driving voltage according to the resonance frequency of the vibration mode as the driving condition of the selected vibration mode;
An imaging apparatus characterized by the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009020842A JP5332661B2 (en) | 2009-01-30 | 2009-01-30 | Imaging device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009020842A JP5332661B2 (en) | 2009-01-30 | 2009-01-30 | Imaging device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010178221A JP2010178221A (en) | 2010-08-12 |
JP5332661B2 true JP5332661B2 (en) | 2013-11-06 |
Family
ID=42708692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009020842A Expired - Fee Related JP5332661B2 (en) | 2009-01-30 | 2009-01-30 | Imaging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5332661B2 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5948781B2 (en) * | 2011-10-05 | 2016-07-06 | アイシン精機株式会社 | Camera with water drop removal function |
WO2013057894A1 (en) | 2011-10-17 | 2013-04-25 | パナソニック株式会社 | Electronic device |
JP2015122558A (en) * | 2013-12-20 | 2015-07-02 | リコーイメージング株式会社 | Imaging apparatus and excitation method of optical element |
JP6807343B2 (en) | 2018-04-16 | 2021-01-06 | 株式会社デンソーテン | Deposit removal system and deposit removal method |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006295844A (en) * | 2005-04-14 | 2006-10-26 | Olympus Imaging Corp | Optical apparatus with dust protection function |
JP4764265B2 (en) * | 2006-06-20 | 2011-08-31 | キヤノン株式会社 | Imaging device |
-
2009
- 2009-01-30 JP JP2009020842A patent/JP5332661B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010178221A (en) | 2010-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4477968B2 (en) | Digital camera | |
US7991241B2 (en) | Image processing apparatus, control method therefor, and program | |
CN103731604B (en) | Follow-up mechanism and method for tracing | |
TW200819894A (en) | Auto-focus apparatus, image capture apparatus, and auto-focus method | |
CN103621056A (en) | Imaging device | |
JP5332661B2 (en) | Imaging device | |
JP5012673B2 (en) | Display device | |
JP5136355B2 (en) | Imaging apparatus and foreign matter removal program thereof | |
JP5849474B2 (en) | Imaging device | |
JP4565549B2 (en) | Imaging apparatus and focus control method thereof | |
KR101119971B1 (en) | Image pick up apparatus | |
JP2011078055A (en) | Electronic camera | |
JP4948248B2 (en) | Imaging apparatus and control method thereof | |
JP2007060520A (en) | Imaging apparatus | |
JP5884579B2 (en) | Imaging apparatus and display processing method | |
JP2010074480A (en) | Image pickup device and camera | |
JP5391843B2 (en) | Imaging apparatus and foreign matter removal program thereof | |
JP2009246468A (en) | Photographing device and control method of photographing device | |
JP2006191203A (en) | Dust removing apparatus, and imaging apparatus | |
JP5272757B2 (en) | Imaging apparatus and foreign matter removal program thereof | |
JP2000209468A (en) | Electronic camera with evaluation display function and storage medium recording its program | |
CN104364710A (en) | Imaging device | |
JP6221251B2 (en) | Imaging apparatus, imaging apparatus control method, and imaging apparatus control program | |
JP4930169B2 (en) | Electronic camera | |
JP2009206582A (en) | Digital camera |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120907 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130315 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130702 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130715 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5332661 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |