JP2007006325A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2007006325A JP2007006325A JP2005186402A JP2005186402A JP2007006325A JP 2007006325 A JP2007006325 A JP 2007006325A JP 2005186402 A JP2005186402 A JP 2005186402A JP 2005186402 A JP2005186402 A JP 2005186402A JP 2007006325 A JP2007006325 A JP 2007006325A
- Authority
- JP
- Japan
- Prior art keywords
- subject
- imaging
- image
- timing
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 100
- 238000012545 processing Methods 0.000 claims abstract description 77
- 238000004458 analytical method Methods 0.000 claims abstract description 41
- 230000008859 change Effects 0.000 claims abstract description 7
- 238000000034 method Methods 0.000 claims description 38
- 238000000605 extraction Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 22
- 238000004364 calculation method Methods 0.000 claims description 9
- 238000001514 detection method Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 11
- 230000004044 response Effects 0.000 description 10
- 239000000203 mixture Substances 0.000 description 7
- 239000000284 extract Substances 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 241000283080 Proboscidea <mammal> Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000000386 athletic effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
Images
Abstract
【解決手段】撮像手段に捉えられた被写体の像について、少なくともその位置の変化を観測する観測手段と、観測手段によって得られた観測結果に基づいて、被写体の動きを解析する解析手段と、解析手段による解析結果に基づいて、被写体を所望の撮影条件で撮影可能となる撮影タイミングを予測する予測手段と、予測手段によって予測された撮影タイミングで撮像手段に捉えられた被写体の像の撮影処理を実行する撮影制御手段とを備える。
【選択図】 図1
Description
また一方、特許文献1には、撮像素子に捉えられた被写体の像に基づいて、被写体の顔の向きを認識し、被写体の顔の向きが特定の方向(例えば、カメラに対して正面)を向いたときに被写体の撮影を行う技術が開示されている。
しかしながら、従来のオートフォーカス技術では、レリーズボタンを押すタイミングは、結局は撮影者に任されている。したがって、レリーズボタンの半押し操作によってフォーカス動作を起動することにより、被写体にピントが合った状態が維持されているとはいっても、被写体が画面のどこにどの程度の大きさで捉えられた状態で撮影されるか、つまり、満足のできる構図で撮影できるか否かは、やはり、撮影者の技量にかかっている。
したがって、運動会で走っている子供や動物、レース中の車のような幅広い被写体を、良好な構図でしかも適切にピントを合わせて撮影するためには、依然として高度な撮影技術が必要とされるという事実には変わりはなかった。つまり、初心者がこれらの被写体を撮影することは、オートフォーカス技術などの適用の有無にかかわらず、非常に困難であった。
本発明にかかわる第1の撮像装置の原理は、以下の通りである。
観測手段は、撮像手段に捉えられた被写体の像について、少なくともその位置の変化を観測する。解析手段は、観測手段によって得られた観測結果に基づいて、被写体の動きを解析する。予測手段は、解析手段による解析結果に基づいて、被写体を所望の撮影条件で撮影可能となる撮影タイミングを予測する。撮影制御手段は、予測手段によって予測された撮影タイミングで撮像手段に捉えられた被写体の像の撮影処理を実行する。
観測手段によって被写体の像に関する位置の変化が観測され、この観測結果に基づいて、解析手段による被写体の動きの解析が行われる。この解析結果は、撮像範囲内において、被写体の像がどのように移動しているかを示すので、予測手段は、これに基づいて、被写体の像の位置に関する所望の撮影条件が満たされる最適な撮影タイミングを予測して、撮影制御手段の処理に供することができる。
本発明にかかわる第2の撮像装置の原理は、以下の通りである。
上述した第1の撮像装置に備えられた撮影制御手段において、精度推定手段は、解析手段によって得られた解析結果に基づいて、予測手段で得られる撮影タイミングに関する予測精度を推定する。タイミング設定手段は、精度推定手段によって得られた予測精度に基づいて、撮影タイミングを含む所定の時間において少なくとも1回の撮影タイミング候補を設定して、撮影処理の実行に供する。
解析手段によって得られた解析結果によって示される被写体の移動速度の大きさに基づいて、精度推定手段により、撮影タイミングの予測精度が推定され、タイミング設定手段により、この予測精度に対応する時間内で複数の撮影タイミング候補が設定される。つまり、予測精度が低いときは、比較的長い時間範囲内に設定された複数の撮影タイミング候補において、撮影制御手段により、複数回の撮影処理が実行される。
本発明にかかわる第3の撮像装置の原理は、以下の通りである。
上述した第2の撮像装置において、抽出手段は、タイミング設定手段によって設定された少なくとも1回の撮影タイミング候補において撮影された画像データと所望の撮影条件にかかわる判定条件とに基づいて、少なくとも一つの画像データを抽出する。
例えば、所望の撮影条件に対応して被写体の位置にかかわる判定条件を予め決定しておき、上述したようにして少なくとも1回の撮影タイミングにおいて撮影された画像データの中から、抽出手段により、この判定条件を満たす被写体の像を含む画像データを抽出する。これにより、撮影タイミングに関する予測精度にかかわらず、撮影条件を満たす画像データを自動的に選択し、利用者に提示することができる。
本発明にかかわる第4の撮像装置の原理は、以下の通りである。
上述した第1の撮像装置に備えられた予測手段において、条件保持手段は、互いに異なる複数の撮影条件に対応して、少なくとも撮像手段に捉えられた被写体の像の画面内での位置に関する判定条件を保持する。移動時間算出手段は、所望の条件に対応して条件保持手段に保持された判定条件と解析手段によって得られた解析結果とに基づいて、被写体の像の位置が判定条件を満たすまでの移動時間を算出し、撮影タイミングを示す情報として出力する。
例えば、撮影目的などに応じて用意したさまざまな撮影条件に対応して条件保持手段に適切な判定条件を保持しておき、被写体の像が、この判定条件で示される位置に到達するまでに要する移動時間を移動時間算出手段によって算出する。このようにして得られた移動時間に基づいて、撮影制御手段により、移動時間が経過した時点を撮影タイミングとして撮影制御処理が行われる。
本発明にかかわる第5の撮像装置の原理は、以下の通りである。
上述した第1の撮像装置に備えられた観測手段において、検出手段は、撮影条件によって被写体が人物であることが示されている場合に、撮像手段に捉えられた少なくとも一つの被写体の像から最大の面積を持つ像を主要な被写体の像として検出する。顔抽出手段は、検出手段によって検出された主要な被写体の像について、被写体の顔を表す画像データを所定の時間間隔で抽出する。向き判別手段は、顔抽出手段によって抽出された画像データを解析して、被写体の顔の向きを判別し、判別結果を観測結果の一部として出力する。解析手段において、特徴抽出手段は、観測手段によって得られる観測結果に含まれる被写体の顔の向きに関する判別結果に基づいて、被写体の顔の向きに関する動きの特徴を抽出し、解析結果の一部として出力する。予測手段において、回転時間算出手段は、特徴抽出手段によって抽出された動きの特徴に基づいて、撮影条件にかかわる判定条件が満たされるまでの回転時間を算出し、撮影タイミングを示す情報の一部として出力する。
被写体が人物である場合には、観測手段に備えられた検出手段および顔抽出手段により、主要な被写体の顔を表す画像データが抽出され、解析手段に備えられた特徴抽出手段による処理に供される。この特徴抽出手段により、被写体の顔の向きに関する動きの特徴が抽出され、予測手段に備えられた回転時間算出手段の処理に供され、例えば、被写体の顔の向きが撮像装置に対して所定の角度となるまでに要する時間が算出される。
(第1の実施形態)
図1に、本発明にかかわる撮像装置の第1の実施形態を示す。
図1に示した撮像処理部210において、光学系211によってCCDなどの撮像素子212上に被写体の像が形成され、この撮像素子212の出力信号を信号処理部213によって処理することにより、光学系211の視野に捉えられた被写体の像を表す画像データが例えば所定の時間間隔で生成され、メモリ214に一時的に保持される。また、図1に示した自動焦点制御部215は、撮影制御部220からの指示に応じて、このメモリ214に保持された画像データあるいは測距部(図示せず)による被写体までの距離に関する測定結果に基づいて光学系211を操作し、被写体にピントが合った状態を維持する。
このようにして得られた像面速度に基づいて、予測処理部218は、被写体の像面位置が標準的なシーンの撮影において最適な位置に到達する時刻を推定し(図2(e)参照)、この時刻を撮影タイミングとして出力して撮影制御部220の処理に供する。
図3に、撮像装置の動作を表す流れ図を示す。
利用者により、レリーズボタン(図示せず)が半押しされると(図3のステップ301)、自動露光動作および自動焦点動作が実行され(図3のステップ302)、次いで、図1に示した観測処理部216、動き解析部217および予測処理部218により、上述したようにして、最適な撮影タイミングToを予測する処理が行われ(ステップ303)、予測された撮影タイミングToが撮影制御部220の記録制御部223に渡される。
図4に示した記録制御部223において、精度算出部231は、予測処理部218から上述した撮影タイミングToを受け取るとともに、動き解析部217から像面速度Vsとともに像面速度Vsの算出に用いられた検出時刻T1を受け取り、これらの値を用いて、撮影タイミングToの予測精度Aoを求める(図3のステップ304)。
なお、式(1)の分母に像面加速度αに関する項を追加することも可能である。
このようにして得られた予測精度Aoは、図4に示した判定処理部232において、予め決定された閾値Atと比較される(図3のステップ305)。
予測精度Aoが閾値Atよりも小さいとされた場合に(ステップ305の否定判定)、判定処理部232は、予測された撮影タイミングToにおける撮影では必ずしも最適な撮影条件を満たす画像が得られないと判断し、複数の候補画像を撮影する処理を開始する。
これに応じて、タイミング制御部233は、タイマ234の機能を利用して、撮影タイミングToを中心として候補数Nと撮影間隔Trの積に相当する長さの期間にN個の撮影タイミング候補T1〜Tnを設定する。そして、これらの撮影タイミング候補T1〜Tnで示される時刻が到来するごとに、タイミング制御部233により、撮影処理の実行を指示する撮影指示が撮像処理部210を宛先として送出され、これに応じて、撮像処理部210による撮影処理が行われる(図3のステップ309)。
このようにして、予測精度が低い場合に、複数の撮影タイミング候補において、それぞれ候補画像を取得することにより、たとえば、高速で走行する車両や目の前を走り抜ける動物のように、極端に動きの激しい被写体についても、確実に最適な瞬間を捉えた画像を得て、記録媒体222に記録することができる。
一方、予測精度Aoが閾値Atよりも大きいとされた場合に(ステップ305の肯定判定)、判定処理部232は、予測された撮影タイミングToにおける撮影で確実に最適な撮影条件を満たす画像が得られると判断する。この場合に、判定処理部232からの指示に応じて、タイミング制御部233により、撮影タイミングToにおいて、単一の撮影指示が撮像処理部210に送出され、撮像処理部210による撮影処理が、この撮影タイミングToにおいて自動的に実行される(ステップ306)。この撮影処理によってメモリ214に書き込まれた画像データは、読出処理部235によって読み出され、そのまま選択処理部236を介して書込処理部221に渡されて、記録媒体222に記録され(ステップ308)、自動レリーズ機能を利用した撮影処理が終了する。
また、上述したステップ305において予測精度Aoが閾値Atよりも低いとされた場合であって、予測された撮影タイミングToまでの猶予時間に余裕がある場合に、観測処理部216、動き解析部217および予測処理部218による撮影タイミングの予測処理を再度実行させることも可能である。
(第2の実施形態)
図5に、本発明にかかわる撮像装置の第2の実施形態を示す。
このとき、抽出処理部237は、背景以外のピントが合っている全ての像をまず抽出し、これらの象の中から、最も面積の大きい像を主要な被写体の像として選択することにより、主要な被写体の像を抽出することができる。
例えば、図6(a)〜(d)に示すような画像データが得られた場合に、抽出処理部237により、まず、これらの画像データにおいて白抜きで示した被写体の像の部分およびこの部分が画面において占める位置にかかわる情報が像面位置検出部238にそれぞれ渡される。これらの情報に基づいて、像面位置検出部238により、例えば被写体の像の重心位置を求める処理を行うことにより、図6(e)に符号Pa〜Pdを付して示すように、各画像データに対応する時刻における被写体の像面位置を求めることができる。
なお、この場合に、上述した観測処理部216における被写体の顔の向きに関する観測精度を含めて撮影タイミングの予測精度を評価することにより、被写体の顔を表す画像データの抽出精度や向き判別処理に関する判別精度に応じて、適切な数の候補画像を取得して、最適な画像データの選択処理に供することができる。
ところで、上述した観測処理部216、動き解析部217、予測処理部218および記録制御部223によって果たされる各機能は、これらの機能に必要な処理を計算機によって実行させるプログラムを撮像装置に搭載されるマイクロプロセッサに実行させることで実現することができる。したがって、上述した自動レリーズ機能は、新規に製品化される撮像装置のみに限らず、マイクロプロセッサのファームウェアを更新するなどの保守作業によって上述した各部の機能に関するプログラムを追加することにより、既に利用者の手元に渡っている撮像装置に適用することも可能である。
このような特徴は、一般的な利用者にとってはシャッタチャンスがつかみにくいというディジタルカメラの弱点を一挙に解消することができるので、幅広い層に大きく利用者の裾野を広げたディジタルカメラ分野において、極めて有用な特徴である。
Claims (6)
- 撮像手段に捉えられた被写体の像について、少なくともその位置の変化を観測する観測手段と、
前記観測手段によって得られた観測結果に基づいて、前記被写体の動きを解析する解析手段と、
前記解析手段による解析結果に基づいて、前記被写体を所望の撮影条件で撮影可能となる撮影タイミングを予測する予測手段と、
前記予測手段によって予測された撮影タイミングで前記撮像手段に捉えられた前記被写体の像の撮影処理を実行する撮影制御手段と
を備えたことを特徴とする撮像装置。 - 請求項1に記載の撮像装置において、
前記撮影制御手段は、
前記解析手段によって得られた解析結果に基づいて、前記予測手段で得られる撮影タイミングに関する予測精度を推定する精度推定手段と、
前記精度推定手段によって得られた予測精度に基づいて、前記撮影タイミングを含む所定の時間において少なくとも1回の撮影タイミング候補を設定して、撮影処理の実行に供するタイミング設定手段とを備えた
ことを特徴とする撮像装置。 - 請求項2に記載の撮像装置において、
前記タイミング設定手段によって設定された少なくとも1回の撮影タイミング候補において撮影された画像データと前記所望の撮影条件にかかわる判定条件とに基づいて、少なくとも一つの画像データを抽出する抽出手段を備えた
ことを特徴とする撮像装置。 - 請求項1に記載の撮像装置において、
前記予測手段は、
互いに異なる複数の撮影条件に対応して、少なくとも前記撮像手段に捉えられた被写体の像の画面内での位置に関する判定条件を保持する条件保持手段と、
前記所望の条件に対応して前記条件保持手段に保持された判定条件と前記解析手段によって得られた解析結果とに基づいて、前記被写体の像の位置が判定条件を満たすまでの移動時間を算出し、撮影タイミングを示す情報として出力する移動時間算出手段とを備えた
ことを特徴とする撮像装置。 - 請求項1に記載の撮像装置において、
前記観測手段は、
前記撮影条件によって被写体が人物であることが示されている場合に、前記撮像手段に捉えられた少なくとも一つの被写体の像から最大の面積を持つ像を主要な被写体の像として検出する検出手段と、
前記検出手段によって検出された主要な被写体の像について、被写体の顔を表す画像データを所定の時間間隔で抽出する顔抽出手段と、
前記顔抽出手段によって抽出された画像データを解析して、前記被写体の顔の向きを判別し、判別結果を観測結果の一部として出力する向き判別手段とを備え、
前記解析手段は、
前記観測手段によって得られる観測結果に含まれる前記被写体の顔の向きに関する判別結果に基づいて、前記被写体の顔の向きに関する動きの特徴を抽出し、解析結果の一部として出力する特徴抽出手段を備え、
前記予測手段は、
前記特徴抽出手段によって抽出された動きの特徴に基づいて、前記撮影条件にかかわる判定条件が満たされるまでの回転時間を算出し、撮影タイミングを示す情報の一部として出力する回転時間算出手段を備えた
ことを特徴とする撮像装置。 - 撮像手段に捉えられた被写体の像の位置および大きさの変化に基づいて、前記被写体の動きを観測する観測手順と、
前記観測手順によって得られた観測結果に基づいて、前記被写体の動きを解析する解析手順と、
前記解析手順による解析結果に基づいて、前記被写体を所望の撮影条件で撮影可能となる撮影タイミングを予測する予測手順と、
前記予測手順によって予測された撮影タイミングで前記撮像手段に捉えられた前記被写体の像の撮影処理を実行する撮影制御手順と
を計算機に実行させることを特徴とする撮像プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005186402A JP4635742B2 (ja) | 2005-06-27 | 2005-06-27 | 撮像装置および撮像プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005186402A JP4635742B2 (ja) | 2005-06-27 | 2005-06-27 | 撮像装置および撮像プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007006325A true JP2007006325A (ja) | 2007-01-11 |
JP4635742B2 JP4635742B2 (ja) | 2011-02-23 |
Family
ID=37691468
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005186402A Active JP4635742B2 (ja) | 2005-06-27 | 2005-06-27 | 撮像装置および撮像プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4635742B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009100300A (ja) * | 2007-10-17 | 2009-05-07 | Sony Corp | 構図判定装置、構図判定方法、プログラム |
JP2010250155A (ja) * | 2009-04-17 | 2010-11-04 | Nikon Corp | 電子カメラ |
JP2010278624A (ja) * | 2009-05-27 | 2010-12-09 | Sony Corp | 撮影装置および方法、並びにプログラム |
JP2014103598A (ja) * | 2012-11-21 | 2014-06-05 | Canon Inc | 情報表示装置、その制御方法、撮影装置、およびプログラム |
CN104519263A (zh) * | 2013-09-27 | 2015-04-15 | 联想(北京)有限公司 | 一种图像获取的方法及电子设备 |
KR20170008608A (ko) * | 2015-07-14 | 2017-01-24 | 삼성전자주식회사 | 영상 촬영 장치 및 그 동작 방법 |
JP2018036891A (ja) * | 2016-08-31 | 2018-03-08 | オムロン株式会社 | 画像取得装置、顔照合システム、遊技者管理システム、画像取得方法、及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001051338A (ja) * | 1999-08-12 | 2001-02-23 | Canon Inc | カメラ |
JP2002335436A (ja) * | 2001-05-08 | 2002-11-22 | Fuji Photo Film Co Ltd | カメラ |
JP2005176274A (ja) * | 2003-12-15 | 2005-06-30 | Canon Inc | 撮像装置及び撮像制御方法 |
-
2005
- 2005-06-27 JP JP2005186402A patent/JP4635742B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001051338A (ja) * | 1999-08-12 | 2001-02-23 | Canon Inc | カメラ |
JP2002335436A (ja) * | 2001-05-08 | 2002-11-22 | Fuji Photo Film Co Ltd | カメラ |
JP2005176274A (ja) * | 2003-12-15 | 2005-06-30 | Canon Inc | 撮像装置及び撮像制御方法 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009100300A (ja) * | 2007-10-17 | 2009-05-07 | Sony Corp | 構図判定装置、構図判定方法、プログラム |
US8275171B2 (en) | 2007-10-17 | 2012-09-25 | Sony Corporation | Composition determining apparatus, composition determining method, and program |
JP2010250155A (ja) * | 2009-04-17 | 2010-11-04 | Nikon Corp | 電子カメラ |
JP2010278624A (ja) * | 2009-05-27 | 2010-12-09 | Sony Corp | 撮影装置および方法、並びにプログラム |
JP2014103598A (ja) * | 2012-11-21 | 2014-06-05 | Canon Inc | 情報表示装置、その制御方法、撮影装置、およびプログラム |
CN104519263A (zh) * | 2013-09-27 | 2015-04-15 | 联想(北京)有限公司 | 一种图像获取的方法及电子设备 |
KR20170008608A (ko) * | 2015-07-14 | 2017-01-24 | 삼성전자주식회사 | 영상 촬영 장치 및 그 동작 방법 |
KR102403065B1 (ko) * | 2015-07-14 | 2022-05-27 | 삼성전자주식회사 | 영상 촬영 장치 및 그 동작 방법 |
JP2018036891A (ja) * | 2016-08-31 | 2018-03-08 | オムロン株式会社 | 画像取得装置、顔照合システム、遊技者管理システム、画像取得方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4635742B2 (ja) | 2011-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100911695B1 (ko) | 촬상 장치 및 촬상 방법 | |
JP4182117B2 (ja) | 撮像装置及びその制御方法及びプログラム及び記憶媒体 | |
JP4581924B2 (ja) | 画像再生装置、および画像再生プログラム | |
JP4702418B2 (ja) | 撮影装置、画像領域の存否判定方法及びプログラム | |
TWI353465B (ja) | ||
JP4196714B2 (ja) | デジタルカメラ | |
JP4586709B2 (ja) | 撮像装置 | |
JP4635742B2 (ja) | 撮像装置および撮像プログラム | |
JP4732299B2 (ja) | 特定被写体像の検出方法およびデジタルカメラ | |
JP2008054295A (ja) | 撮影装置および方法並びにプログラム | |
JP2009141475A (ja) | カメラ | |
JP4894162B2 (ja) | カメラ | |
JP2009290255A (ja) | 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム | |
JP5448868B2 (ja) | 撮像装置および撮像装置の制御方法 | |
JP6210106B2 (ja) | 撮影装置、画像評価方法及びプログラム | |
JP5293769B2 (ja) | 撮像装置及びそのプログラム | |
JP2017192114A5 (ja) | ||
JP5383207B2 (ja) | 情報処理装置、制御方法、コンピュータプログラム、および記憶媒体 | |
JP5446660B2 (ja) | 画像認識装置、および、撮像装置 | |
JP2017016592A (ja) | 主被写体検出装置、主被写体検出方法及びプログラム | |
JP2010093451A (ja) | 撮像装置および撮像装置用プログラム | |
JP2005176274A (ja) | 撮像装置及び撮像制御方法 | |
JP2021105850A (ja) | 画像処理装置及び方法、及び撮像装置 | |
JP2008160280A (ja) | 撮像装置および自動撮像方法 | |
JP2016012846A (ja) | 撮像装置、その制御方法、および制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080627 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100712 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100720 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100921 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101026 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101108 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131203 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4635742 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131203 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |