JP5765590B2 - 撮像装置、表示方法及びプログラム - Google Patents
撮像装置、表示方法及びプログラム Download PDFInfo
- Publication number
- JP5765590B2 JP5765590B2 JP2013053538A JP2013053538A JP5765590B2 JP 5765590 B2 JP5765590 B2 JP 5765590B2 JP 2013053538 A JP2013053538 A JP 2013053538A JP 2013053538 A JP2013053538 A JP 2013053538A JP 5765590 B2 JP5765590 B2 JP 5765590B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- shooting
- review
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/634—Warning indications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Television Signal Processing For Recording (AREA)
Description
また、レビュー表示機能を備えた撮像装置において、ユーザの操作によって撮像された撮像画像をライブビュー画像を表示したままで表示画面の一部に表示する機能を備えたものが知られている。以下、ライブビュー画像を表示したままで表示画面の一部に表示される撮像画像を「ミニ撮影レビュー画像」と呼ぶ。
ライブビュー画像を表示したままでミニ撮影レビュー画像を表示することで、レビュー画像が表示画面全体に表示される場合のように、ライブビュー表示が途切れることがなくなる。そのため、ユーザは、速やかに撮影できる状態を継続しながら、撮影結果を確認することが可能となる。
なお、ライブビュー画像を表示したままで表示画面の一部にミニ撮影レビュー画像を表示する撮像装置に関する技術は、例えば、特許文献1に記載されている。
このように、従来の技術では、撮影時におけるライブビュー画像表示中におけるミニ撮影レビュー画像の表示機能が、ユーザによる撮影結果の判別に十分に適したものではなかった。
図1は、本発明の一実施形態に係る撮像装置1のハードウェアの構成を示すブロック図である。
撮像装置1は、例えばデジタルカメラとして構成される。
さらに、CPU11は、シャッタボタンの押下等によるユーザの撮影記録の指示に従って撮像された撮像画像のデータに基づいて、ライブビュー画像に重ねてミニ撮影レビュー画像(第1のレビュー画像)を表示する処理や、ライブビュー画像と切り替えて表示するレビュー画像(第2のレビュー画像)を表示する処理を実行する。
ここで、レビュー画像とは、ユーザによって撮影記録が指示された撮像画像のデータから生成される撮影結果を表す画像であり、ライブビュー画像と同様に出力部18のディスプレイにおける表示領域全体に表示される。また、ミニ撮影レビュー画像とは、レビュー画像と同様に、ユーザによって撮影記録が指示された撮像画像のデータから生成される撮影結果を表す画像であるが、出力部18のディスプレイにおける表示領域の一部に、レビュー画像よりも小サイズで表示される画像である。本実施形態において、ミニ撮影レビュー画像は、ライブビュー画像に重ねて、ライブビュー画像と同時に表示される。
RAM13には、CPU11が各種の処理を実行する上において必要なデータ等も適宜記憶される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
光電変換素子は、例えばCMOS(Complementary Metal Oxide Semiconductor)型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換(撮像)して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてAFEに順次供給する。
このような撮像部16の出力信号によって表されるデータは、撮像画像のデータとして、CPU11やRAM13等に適宜供給される。
出力部18は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
記憶部19は、ハードディスク或いはDRAM(Dynamic Random Access Memory)等で構成され、各種画像のデータを記憶する。
通信部20は、インターネットを含むネットワークを介して他の装置(図示せず)との間で行う通信を制御する。
撮影結果評価処理とは、撮影を行うための撮影モードにおいて、ユーザの指示によって撮像された撮像画像のデータについて撮影の成否を判別し、その判別結果に応じた表示形態でミニ撮影レビュー画像あるいはレビュー画像を表示するまでの一連の処理をいう。
撮影結果評価部44は、撮影結果評価処理を実行し、画像取得部42から入力された撮像画像のデータ(撮影記録が指示された撮像画像のデータ)に基づいて、撮影に成功したか失敗したかを判別する。なお、本実施形態では、撮影結果評価部44は、撮像画像に手ブレ、被写体ブレ、人物である被写体が目をつぶっている状態(以下、「目つぶり」と呼ぶ)、焦点ずれ、露出時間の不適合(例えば、露光オーバーあるいは露光アンダー)の少なくとも1つ(以下、これらをまとめて「撮影失敗要因」と呼ぶ。)が発生している場合に、その撮像画像を「撮影に失敗した」と判別する。即ち、本実施形態において、撮影結果評価部44は、撮影の成否に加え、撮影失敗要因の内容を特定している。
一方、撮影結果評価部44は、いずれの撮影失敗要因も発生していない場合に、その撮像画像を「撮影に成功した」と判別する。
図3(A)は、手ブレの場合の表示形態を説明するための図である。
撮影結果評価部44は、例えば撮像画像のデータにおける動きベクトル等によって手ブレを検出する。そして、手ブレが検出された場合、レビュー画像生成部45は、図3(A)に示すように、例えばROM12等に記憶された予め設定されている表示条件を参照して、ミニ撮影レビュー画像の外枠を手ブレを表す色によって表示する。
なお、手ブレの場合、撮像画像全体がブレるため、レビュー画像において撮影失敗要因の発生箇所は特定されない。
そして、焦点ずれが検出された場合、レビュー画像生成部45は、図3(D)に示すように、予め設定されている表示条件を参照して、ミニ撮影レビュー画像の外枠を焦点ずれを表す色によって表示する。また、焦点ずれの場合、焦点ずれとなっている主要被写体を特定できるため、本実施形態では、レビュー画像において撮影失敗要因(焦点ずれ)の発生箇所(主要被写体を囲む矩形等)が外枠と同一の色で表示される。
そして、主要被写体の露光オーバーあるいは露光アンダーが検出された場合、レビュー画像生成部45は、図3(E)に示すように、予め設定されている表示条件を参照して、ミニ撮影レビュー画像の外枠を露光量の不適合を表す色によって表示する。また、露光量の不適合の場合、露光量が不適合となっている主要被写体を特定できるため、本実施形態では、レビュー画像において撮影失敗要因(露光量の不適合)の発生箇所(主要被写体を囲む矩形等)が外枠と同一の色で表示される。
図4(A)、図4(B)は、出力部18のディスプレイにミニ撮影レビュー画像及びライブビュー画像が表示された状態を示す図である。
図4(A)は、撮影に成功した場合のライブビュー画像81及びミニ撮影レビュー画像82を示している。ライブビュー画像81は出力部18のディスプレイの略全面に表示され、ミニ撮影レビュー画像82はディスプレイの一部(ここでは右下の小領域)にライブビュー画像81よりも小さいサイズでライブビュー画像81に重ねて表示されている。なお、撮影に成功した場合、ミニ撮影レビュー画像82の外枠が、撮影に成功したことを示す色で表示される。
また、図4(B)の(a)において、ライブビュー画像83内の右下にミニ撮影レビュー画像84が重ねて表示されている状態で、撮影から所定時間(例えば3秒)の間、入力部17の所定のボタン(例えば十字キーの上を表す「△」ボタン)の操作が受け付けられる。そして、ユーザが所定のボタンを操作すると、レビュー画像生成部45は、ライブビュー画像83に代えて、ミニ撮影レビュー画像84を拡大して、ディスプレイの全面にレビュー画像85として表示させる。このとき、レビュー画像生成部45は、レビュー画像85において目つぶりの発生箇所を目つぶりを表す色の矩形によって特定している。
これにより、ミニ撮影レビュー画像84によって撮影に失敗していることが識別して表示されると共に、レビュー画像85によってより大きい画像において撮影失敗要因の発生箇所が表示される。そのため、ユーザは、撮影に失敗していることに加え、撮影失敗要因及びその発生箇所を容易に識別することができる。
そして、ユーザがミニ撮影レビュー画像86a〜86dのいずれかを選択し、入力部17の所定のボタン(例えば十字キーの上を表す「△」ボタン)を操作すると、レビュー画像生成部45は、図4(B)の(b)に示すように、ライブビュー画像83に代えて、選択されたミニ撮影レビュー画像を拡大して、ディスプレイの全面にレビュー画像85として表示させる。
図5は、図2の機能的構成を有する図1の撮像装置が実行する撮影結果評価処理の流れを説明するフローチャートである。
撮影結果評価処理は、ユーザにより入力部17に対する撮影を指示する操作がなされたことを契機として開始され、次のような一連の処理が実行される。
撮影を指示する操作がなされた場合、ステップS11においてYESであると判定されて、処理はステップS14に進む。
これに対し、撮影を指示する操作がなされていない場合、ステップS11においてNOであると判定されて、処理はステップS12に進む。
撮像装置1に対して撮影を指示する操作以外の操作がなされていない場合、ステップS12においてNOと判定されて、処理はステップS11に戻る。
これに対し、撮像装置1に対して撮影を指示する操作以外の操作(例えば、ズーム操作、マニュアル設定等)がなされた場合、ステップS12においてYESと判定されて、処理はステップS13に進む。
ステップS13において、撮像制御部41は、操作に応じた処理を実行し、処理はステップS11に戻る。
ステップS15において、撮影結果評価部44は、撮影記録が指示された画像のデータについて、撮影に成功しているか否かを判定する。
撮影記録が指示された画像のデータについて、撮影に成功している場合、ステップS15においてYESと判定されて、処理はステップS16に進む。
これに対し、撮影記録が指示された画像のデータについて、撮影に失敗している場合、ステップS15においてNOと判定されて、処理はステップS17に進む。
ステップS17において、レビュー画像生成部45は、撮影結果評価部44によって判別された撮影失敗要因に応じてミニ撮影レビュー画像の外枠の色を特定する。
ステップS18において、レビュー画像生成部45は、ミニ撮影レビュー画像の表示モードの設定が、ミニ撮影レビュー画像を1つ表示するモードとなっているか(表示モードフラグ=0)、複数表示するモードとなっているか(表示モードフラグ=1)を判定する。
なお、表示モードフラグは、入力部17をユーザが操作することによって設定されるフラグであり、出力部18のディスプレイにミニ撮影レビュー画像を複数表示させるか否を識別するためのフラグである。表示モードフラグは、「0」である場合にディスプレイには1つのミニ撮影レビュー画像が表示されることを示し、「1」である場合にディスプレイには複数のミニ撮影レビュー画像が表示されることを示す。
ステップS18において、ミニ撮影レビュー画像の表示モードの設定が、ミニ撮影レビュー画像を1つ表示するモードとなっている場合(表示モードフラグ=0の場合)、処理はステップS19に進む。
これに対し、ミニ撮影レビュー画像の表示モードの設定が、ミニ撮影レビュー画像を複数表示するモードとなっている場合(表示モードフラグ=1の場合)、処理はステップS26に進む。
このとき、ミニ撮影レビュー画像は、ライブビュー画像に重ねて表示される(図4(B)の(a)参照)。
ミニ撮影レビュー画像を表示した状態で、撮影から所定時間が経過した場合、ステップS20においてYESと判定されて、処理はステップS21に進む。
これに対し、ミニ撮影レビュー画像を表示した状態で、撮影から所定時間が経過していない場合、ステップS20においてNOと判定されて、処理はステップS22に進む。
ステップS21において、レビュー画像生成部45は、ミニ撮影レビュー画像の表示を解除し、ライブビュー画像のみが表示された状態となる。
その後、処理はステップS11に戻る。
所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されていない場合、ステップS22においてNOと判定されて、処理はステップS20に戻る。
これに対し、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されている場合、ステップS22においてYESと判定されて、処理はステップS23に進む。
ステップS24において、レビュー画像生成部45は、撮影失敗要因の発生箇所を特定したレビュー画像を全画面に表示する。
ステップS25において、レビュー画像生成部45は、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されてか否かを判定する。
所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されていない場合、ステップS25においてNOと判定されて、処理はステップS25に戻る。
これに対し、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されている場合、ステップS25においてYESと判定されて、処理はステップS21に進む。
ステップS27において、レビュー画像生成部45は、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されてか否かを判定する。
所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されていない場合、ステップS27においてNOと判定されて、処理はステップS28に進む。
これに対し、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されている場合、ステップS27においてYESと判定されて、処理はステップS23に進む。
ステップS28において、レビュー画像生成部45は、ミニ撮影レビュー画像を選択する操作(例えば十字キーの左右を表すボタンの操作)がされたか否かを判定する。
ミニ撮影レビュー画像を選択する操作(例えば十字キーの左右を表すボタンの操作)がされていない場合、ステップS28においてNOと判定されて、処理はステップS11に戻る。
これに対し、ミニ撮影レビュー画像を選択する操作(例えば十字キーの左右を表すボタンの操作)がされた場合、ステップS28においてYESと判定されて、処理はステップS29に進む。
ステップS29において、レビュー画像生成部45は、ステップS28の操作によって選択されたミニ撮影レビュー画像を表示する。
その後、処理はステップS27に戻る。
撮像部16は、被写体の画像を撮像する。
ライブビュー画像生成部43は、撮像部16から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示させる。
レビュー画像生成部45は、撮影記録が指示された場合に、撮像部16から出力された記録用の撮像画像を、ライブビュー画像を表示した状態で表示画面の一部に第1のレビュー画像として表示させる。
撮影結果評価部44は、撮影記録の指示に対応して撮像部16から出力された記録用の撮像画像に基づいて、撮影結果を評価する。
レビュー画像生成部45は、撮影結果評価部44による評価結果に応じて、第1のレビュー画像の表示形態を異ならせる表示制御を行う。
そのため、ユーザは、撮影の評価結果に応じて、新たな撮影を行うか、あるいは、撮影をやり直すかを適切に判別することができる。
したがって、ライブビュー画像表示中におけるミニ撮影レビュー画像の表示機能をユーザによる撮影結果の判別により適したものとすることができる。
これにより、ユーザは、撮影の成否に応じて、新たな撮影を行うか、あるいは、撮影をやり直すかを適切に判別することが可能となる。
これにより、ライブビュー画像よりもサイズが小さい第1のレビュー画像において、第1のレビュー画像の枠の色あるいは第1のレビュー画像の色によって、撮影結果が表示される。
したがって、ライブビュー画像よりもサイズが小さい第1のレビュー画像であっても、ユーザがわかりやすい表示形態で、撮影結果を表示することができる。
これにより、第1のレビュー画像によって撮影結果を表示することの他、より大きいサイズの第2レビュー画像によって、ユーザにとってよりわかりやすい表示形態で撮影結果を表示することができる。
これにより、ユーザは、第1のレビュー画像によって、撮影の評価結果を速やかに識別することができると共に、所定の操作を行うことで、第2のレビュー画像によって、撮影の評価結果の具体的な内容を容易に識別することができる。
これにより、撮影済みの複数の撮像画像(例えば連写によって撮影された撮像画像等)について、撮影の評価結果をユーザが識別しやすい形態で表示することができる。
レビュー画像生成部45は、撮影結果評価部44によって特定された撮影失敗の要因に応じて、複数の要因ごとに予め決められた複数の表示形態の中から第1のレビュー画像の表示形態を選択する。
これにより、ユーザは、第1のレビュー画像の表示形態によって、撮影失敗の要因を識別することができる。
これにより、撮影に成功した場合には、ライブビュー画像の表示を継続して直ちに撮影記録ができる状態を維持し、撮影に失敗した場合には、撮影失敗の要因の発生箇所を表示することができる。
したがって、ユーザは、撮影の成否に応じて、新たな撮影を行うか、あるいは、撮影をやり直すかを適切に判別することができる。
次に、本発明の第2実施形態について説明する。
本実施形態における撮像装置1は、撮影に失敗した場合のミニ撮影レビュー画像及びレビュー画像の表示形態が、第1実施形態と異なっている。
したがって、異なる部分であるレビュー画像生成部45の機能的構成及び撮影結果評価処理について主として説明する。
図6は、撮影時における表示形態の具体例を示す図である。
図6(A)、図6(B)は、出力部18のディスプレイにミニ撮影レビュー画像及びライブビュー画像が表示された状態を示す図である。
図6(A)は、撮影に成功した場合のライブビュー画像91及びミニ撮影レビュー画像92を示している。ライブビュー画像91は出力部18のディスプレイの略全面に表示され、ミニ撮影レビュー画像92はディスプレイの一部(ここでは右下の小領域)にライブビュー画像91よりも小さいサイズでライブビュー画像91に重ねて表示されている。なお、撮像に成功した場合、本実施形態においても、第1実施形態と同様に、ミニ撮影レビュー画像92の外枠が、撮影に成功したことを示す色で表示される。
図6(B)の(a)に示すよう、レビュー画像生成部45は、ライブビュー画像93よりも小さいサイズで表示されているミニ撮影レビュー画像94において、目つぶりの発生箇所を目つぶりを表す色の矩形によって特定している。
なお、このとき、ミニ撮影レビュー画像94の外枠が目つぶりを表す色で表示される。
図7は、第2実施形態の撮影結果評価処理の流れを説明するフローチャートである。
図7に示す撮影結果評価処理のうち、ステップS41〜S47の処理は、図5に示す第1実施形態の撮影結果評価処理におけるステップS11〜S17の処理と同様である。
撮影を指示する操作がなされた場合、ステップS41においてYESであると判定されて、処理はステップS44に進む。
これに対し、撮影を指示する操作がなされていない場合、ステップS41においてNOであると判定されて、処理はステップS42に進む。
撮像装置1に対して撮影を指示する操作以外の操作がなされていない場合、ステップS42においてNOと判定されて、処理はステップS41に戻る。
これに対し、撮像装置1に対して撮影を指示する操作以外の操作(例えば、ズーム操作、マニュアル設定等)がなされた場合、ステップS42においてYESと判定されて、処理はステップS43に進む。
ステップS43において、撮像制御部41は、操作に応じた処理を実行し、処理はステップS41に戻る。
ステップS44において、撮像制御部41は、撮影記録が指示された画像のデータとして、撮像画像のデータをRAM13等に記憶させる。
ステップS45において、撮影結果評価部44は、撮影記録が指示された画像のデータについて、撮影に成功しているか否かを判定する。
撮影記録が指示された画像のデータについて、撮影に成功している場合、ステップS45においてYESと判定されて、処理はステップS46に進む。
これに対し、撮影記録が指示された画像のデータについて、撮影に失敗している場合、ステップS45においてNOと判定されて、処理はステップS47に進む。
ステップS47において、レビュー画像生成部45は、撮影結果評価部44によって判別された撮影失敗要因に応じてレビュー画像の外枠の色を特定する。
ステップS49において、レビュー画像生成部45は、外枠を撮影失敗要因に応じた色とし、撮影失敗要因の発生箇所を特定したミニ撮影レビュー画像を全画面に表示する。
ミニ撮影レビュー画像を表示した状態で、撮影から所定時間が経過した場合、ステップS50においてYESと判定されて、処理はステップS41に戻る。
これに対し、ミニ撮影レビュー画像を表示した状態で、撮影から所定時間が経過していない場合、ステップS50においてNOと判定されて、処理はステップS51に進む。
所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されていない場合、ステップS51においてNOと判定されて、処理はステップS50に戻る。
これに対し、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されている場合、ステップS51においてYESと判定されて、処理はステップS52に進む。
ステップS53において、レビュー画像生成部45は、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されてか否かを判定する。
所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されていない場合、ステップS53においてNOと判定されて、処理はステップS53に戻る。
これに対し、所定のボタン(例えば十字キーの上を表す「△」ボタン)が操作されている場合、ステップS53においてYESと判定されて、処理はステップS41に戻る。
これにより、ユーザは、第1のレビュー画像の表示形態によって、撮影に失敗していることに加え、撮影失敗の要因の発生箇所を容易に識別することができる。
次に、本発明の第3実施形態について説明する。
本実施形態では、ミニ撮影レビュー画像の表示制御と、レビュー画像の表示制御とを切り替え可能としている。
図8は、撮影時における表示形態の具体例を示す図である。
本実施形態では、ミニ撮影レビュー画像をライブビュー画像よりも小さいサイズでライブビュー画像91に重ねて表示させる表示モード(以下、「ミニ撮影レビュー表示モード」と呼ぶ。)と、レビュー画像のみをディスプレイの全面に表示させる表示モード(以下、「全画面レビュー表示モード」と呼ぶ。)とを切り替えるものである。
図8(C)及び図8(D)は、撮影に失敗した場合の表示形態の例を示している。即ち、図8(C)は、ミニ撮影レビュー表示モードにおいて、ライブビュー画像104に、外枠の色を撮影失敗要因を識別する色とされたミニ撮影レビュー画像105が重ねて表示された状態を示している。また、図8(D)は、全画面レビュー表示モードにおいて、撮影失敗要因の発生箇所が識別されたレビュー画像106が全画面に表示された状態を示している。
本実施形態においては、図8(A)に示したミニ撮影レビュー画像102では、外枠が撮影の成功を示す色で表示されている。また、図8(C)に示したミニ撮影レビュー画像105では、外枠が撮像の目つぶりによる失敗を示す色で表示されている。図8(D)に示したレビュー画像106では、外枠をいずれかの外枠色で表示する制御は行われておらず、撮影失敗要因(目つぶり)の発生箇所が示されている。
これにより、ミニ撮影レビュー画像によって撮影の失敗を表示する場合に、ユーザは、ディスプレイのサイズ等に応じて、撮影の失敗を表す表示形態を任意に選択することができる。このため、撮影時に、ライブビュー画像の表示を継続しながら、撮影失敗要因及び撮影失敗箇所をユーザが識別しやすい表示形態とすることができる。
これにより、撮影時に、第1のレビュー画像を表示させるか、第2のレビュー画像を表示させるかを任意に選択することができる。
したがって、ユーザの好みに応じて撮影失敗要因及び失敗箇所をユーザが識別しやすい表示形態とすることができる。
これにより、第1のレビュー画像によって撮影の失敗を表示する場合に、ユーザは、ディスプレイのサイズ等に応じて、撮影の失敗を表す表示形態を任意に選択することができる。
したがって、撮影時に、ライブビュー画像の表示を継続しながら、撮影失敗要因及び撮影失敗箇所をユーザが識別しやすい表示形態とすることができる。
例えば、上述の実施形態において、撮影に失敗したことをミニ撮影レビュー画像あるいはレビュー画像の外枠の色で識別して表示するものとして説明したが、ミニ撮影レビュー画像あるいはレビュー画像自体の色を補正して表示(例えばセピア色に補正して表示する等)することにより、撮影に失敗したことを表してもよい。また、ミニ撮影レビュー画像あるいはレビュー画像の色を撮影失敗要因に応じて異なる色とする(例えば撮影失敗要因に応じた色の比率で補正を加えた色とする等)ことで、撮影に失敗したことに加え、撮影失敗の要因も識別して表示することができる。
また、上述の実施形態において、撮影の成否により撮影結果の評価を行っているが、一般に失敗と捉えられる撮影結果であっても、あえて手振れで、或いは被写体としての枝の揺れで動的な効果を狙ったりするような、必ずしも失敗とはいえない場合にも撮影の効果を確認できるという効果も期待できる。
例えば、本発明は、画像解析機能、情報報知機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。
換言すると、図2の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が撮像装置1に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図2の例に限定されない。
また、1つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
[付記1]
被写体の画像を撮像する撮像手段と、
前記撮像手段から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示させるライブビュー画像表示手段と、
撮影記録が指示された場合に、前記撮像手段から出力された記録用の撮像画像を、前記ライブビュー画像を表示した状態で前記表示画面の一部に第1のレビュー画像として表示させるレビュー画像表示手段と、
前記撮影記録の指示に対応して前記撮像手段から出力された前記記録用の撮像画像に基づいて、撮影結果を評価する撮影結果評価手段と、
前記撮影結果評価手段による評価結果に応じて、前記第1のレビュー画像の表示形態を異ならせる表示制御を行う表示制御手段と、
を備えることを特徴とする撮像装置。
[付記2]
前記撮影結果評価手段は、撮影に成功したか否かを判別することを特徴とする付記1に記載の撮像装置。
[付記3]
前記表示制御手段は、前記第1のレビュー画像の枠を前記評価結果に応じた色とする表示形態又は前記第1のレビュー画像の色を前記評価結果に応じた色とする表示形態の少なくともいずれかとすることを特徴とする付記1又は2に記載の撮像装置。
[付記4]
前記撮影結果評価手段によって前記撮影に失敗したと判別された場合、前記表示制御手段は、前記第1のレビュー画像において撮影の失敗要因となった箇所を識別可能に表示することを特徴とする付記2に記載の撮像装置。
[付記5]
前記レビュー画像表示手段は、前記ライブビュー画像に代えて、前記記録用の撮像画像を前記第1のレビュー画像よりも大きいサイズの第2のレビュー画像を前記表示画面に表示することを特徴とする付記1から3のいずれか1つに記載の撮像装置。
[付記6]
前記表示制御手段は、前記第1のレビュー画像の表示中に、所定の操作が行われることに対応して、前記第1のレビュー画像から前記第2のレビュー画像に切り替えて表示することを特徴とする付記5に記載の撮像装置。
[付記7]
前記レビュー画像生成手段は、複数回の撮影に応じて複数の前記第1のレビュー画像を前記表示画面に表示し、
前記表示制御手段は、前記複数の前記第1のレビュー画像それぞれについて、前記撮影結果評価手段による評価結果に応じて、表示形態を異ならせることを特徴とする付記1から6のいずれか1つに記載の撮像装置。
[付記8]
前記撮影結果評価手段は、前記撮影に失敗したと判別した場合、撮影失敗の要因を複数の要因の中から特定し、
前記表示制御手段は、前記撮影結果評価手段によって特定された前記撮影失敗の要因に応じて、前記複数の要因ごとに予め決められた複数の表示形態の中から前記第1のレビュー画像の表示形態を選択することを特徴とする付記2に記載の撮像装置。
[付記9]
前記レビュー画像生成手段は、撮影時に撮影結果を表す画像として、前記第1のレビュー画像を表示する設定と、前記第2のレビュー画像を表示する設定とを切り替え操作に応じて切り替え、
前記表示制御手段は、前記撮影結果評価手段による評価結果に応じて、前記切り替え操作に応じた表示の設定に基づいて、前記第1のレビュー画像又は前記第2のレビュー画像の表示形態を選択することを特徴とする付記5に記載の撮像装置。
[付記10]
前記表示制御手段は、前記結果評価手段によって前記撮影に失敗したと評価され、前記撮影結果評価手段による評価結果に応じて前記第1のレビュー画像の表示形態を異ならせる場合に、前記第1のレビュー画像の枠を前記評価結果に応じた色とする表示形態と前記第1のレビュー画像において撮影の失敗要因となった箇所を識別可能に表示する表示形態とを切り替え操作に応じて切り替えることを特徴とする付記9に記載の撮像装置。
[付記11]
前記表示制御手段は、前記撮影結果評価手段によって前記撮影に成功したと評価された場合に、撮影結果を表す画像として、前記第1のレビュー画像を前記表示画面に表示し、前記撮影結果評価手段によって前記撮影に失敗したと評価された場合に、撮影結果を表す画像として、前記撮影の失敗要因となった箇所を識別可能に表示した、前記第1のレビュー画像よりも大きいサイズの第2のレビュー画像を前記表示画面に表示することを特徴とする付記2に記載の撮像装置。
[付記12]
被写体の画像を撮像する撮像手段から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示するライブビュー画像表示ステップと、
撮影記録が指示された場合に、前記撮像手段から出力された記録用の撮像画像を、前記ライブビュー画像を表示した状態で前記表示画面の一部に第1のレビュー画像として表示するレビュー画像表示ステップと、
前記撮影記録の指示に対応して前記撮像手段から出力された前記記録用の撮像画像に基づいて、撮影結果を評価する撮影結果評価ステップと、
前記撮影結果評価ステップにおける評価結果に応じて、前記第1のレビュー画像の表示形態を異ならせる表示制御を行う表示制御ステップと、を含むことを特徴とする表示方法。
[付記13]
コンピュータに、
被写体の画像を撮像する撮像手段から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示させるライブビュー画像表示機能と、
撮影記録が指示された場合に、前記撮像手段から出力された記録用の撮像画像を、前記ライブビュー画像を表示した状態で前記表示画面の一部に第1のレビュー画像として表示させるレビュー画像表示機能と、
前記撮影記録の指示に対応して前記撮像手段から出力された前記記録用の撮像画像に基づいて、撮影結果を評価する撮影結果評価機能と、
前記撮影結果評価機能による評価結果に応じて、前記第1のレビュー画像の表示形態を異ならせる表示制御を行う表示制御機能とを実現させることを特徴とするプログラム。
Claims (13)
- 被写体の画像を撮像する撮像手段と、
前記撮像手段から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示させるライブビュー画像表示手段と、
撮影記録が指示された場合に、前記撮像手段から出力された記録用の撮像画像を、前記ライブビュー画像を表示した状態で前記表示画面の一部に所定の表示形態で継続して第1のレビュー画像として表示させるレビュー画像表示手段と、
前記撮影記録の指示に対応して前記撮像手段から出力された前記記録用の撮像画像に基づいて、撮影結果を評価する撮影結果評価手段と、
前記撮影結果評価手段による評価結果に応じて、前記ライブビュー画像の視認と並行して、継続して表示させる前記第1のレビュー画像の表示形態を、表示サイズを維持しながら異ならせる表示制御を行う表示制御手段と、
を備えることを特徴とする撮像装置。 - 前記撮影結果評価手段は、撮影に成功したか否かを判別することを特徴とする請求項1に記載の撮像装置。
- 前記表示制御手段は、前記第1のレビュー画像の枠を前記評価結果に応じた色とする表示形態又は前記第1のレビュー画像の色を前記評価結果に応じた色とする表示形態の少なくともいずれかとすることを特徴とする請求項1又は2に記載の撮像装置。
- 前記撮影結果評価手段によって前記撮影に失敗したと判別された場合、前記表示制御手段は、前記第1のレビュー画像において撮影の失敗要因となった箇所を識別可能に表示することを特徴とする請求項2に記載の撮像装置。
- 前記レビュー画像表示手段は、前記ライブビュー画像に代えて、前記記録用の撮像画像を前記第1のレビュー画像よりも大きいサイズの第2のレビュー画像として前記表示画面に表示することを特徴とする請求項1から3のいずれか1項に記載の撮像装置。
- 前記表示制御手段は、前記第1のレビュー画像の表示中に、所定の操作が行われることに対応して、前記第1のレビュー画像から前記第2のレビュー画像に切り替えて表示することを特徴とする請求項5に記載の撮像装置。
- 前記レビュー画像表示手段は、複数回の撮影に応じて複数の前記第1のレビュー画像を前記表示画面に表示し、
前記表示制御手段は、前記複数の前記第1のレビュー画像それぞれについて、前記撮影結果評価手段による評価結果に応じて、表示形態を異ならせることを特徴とする請求項1から6のいずれか1項に記載の撮像装置。 - 前記撮影結果評価手段は、前記撮影に失敗したと判別した場合、撮影失敗の要因を複数の要因の中から特定し、
前記表示制御手段は、前記撮影結果評価手段によって特定された前記撮影失敗の要因に応じて、前記複数の要因ごとに予め決められた複数の表示形態の中から前記第1のレビュー画像の表示形態を選択することを特徴とする請求項2に記載の撮像装置。 - 前記レビュー画像表示手段は、撮影時に撮影結果を表す画像として、前記第1のレビュー画像を表示する設定と、前記第2のレビュー画像を表示する設定とを切り替え操作に応じて切り替え、
前記表示制御手段は、前記撮影結果評価手段による評価結果に応じて、前記切り替え操作に応じた表示の設定に基づいて、前記第1のレビュー画像又は前記第2のレビュー画像の表示形態を選択することを特徴とする請求項5に記載の撮像装置。 - 前記表示制御手段は、前記撮影結果評価手段によって前記撮影に失敗したと判別され、前記撮影結果評価手段による評価結果に応じて前記第1のレビュー画像の表示形態を異ならせる場合に、前記第1のレビュー画像の枠を前記評価結果に応じた色とする表示形態と前記第1のレビュー画像において撮影の失敗要因となった箇所を識別可能に表示する表示形態とを切り替え操作に応じて切り替えることを特徴とする請求項2に記載の撮像装置。
- 前記表示制御手段は、前記撮影結果評価手段によって前記撮影に成功したと判別された場合に、撮影結果を表す画像として、前記第1のレビュー画像を前記表示画面に表示し、前記撮影結果評価手段によって前記撮影に失敗したと判別された場合に、撮影結果を表す画像として、前記撮影の失敗要因となった箇所を識別可能に表示した、前記第1のレビュー画像よりも大きいサイズの第2のレビュー画像を前記表示画面に表示することを特徴とする請求項2に記載の撮像装置。
- 被写体の画像を撮像する撮像手段から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示するライブビュー画像表示ステップと、
撮影記録が指示された場合に、前記撮像手段から出力された記録用の撮像画像を、前記ライブビュー画像を表示した状態で前記表示画面の一部に所定の表示形態で継続して第1のレビュー画像として表示するレビュー画像表示ステップと、
前記撮影記録の指示に対応して前記撮像手段から出力された前記記録用の撮像画像に基づいて、撮影結果を評価する撮影結果評価ステップと、
前記撮影結果評価ステップにおける評価結果に応じて、前記ライブビュー画像の視認と並行して、継続して表示させる前記第1のレビュー画像の表示形態を、表示サイズを維持しながら異ならせる表示制御を行う表示制御ステップと、を含むことを特徴とする表示方法。 - コンピュータに、
被写体の画像を撮像する撮像手段から順次出力される撮像画像をライブビュー画像として、表示画面に順次表示させるライブビュー画像表示機能と、
撮影記録が指示された場合に、前記撮像手段から出力された記録用の撮像画像を、前記ライブビュー画像を表示した状態で前記表示画面の一部に所定の表示形態で継続して第1のレビュー画像として表示させるレビュー画像表示機能と、
前記撮影記録の指示に対応して前記撮像手段から出力された前記記録用の撮像画像に基づいて、撮影結果を評価する撮影結果評価機能と、
前記撮影結果評価機能による評価結果に応じて、前記ライブビュー画像の視認と並行して、継続して表示させる前記第1のレビュー画像の表示形態を、表示サイズを維持しながら異ならせる表示制御を行う表示制御機能と、を実現させることを特徴とするプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013053538A JP5765590B2 (ja) | 2013-03-15 | 2013-03-15 | 撮像装置、表示方法及びプログラム |
US14/191,124 US9253406B2 (en) | 2013-03-15 | 2014-02-26 | Image capture apparatus that can display review image, image capture method, and storage medium |
KR1020140028822A KR20140113413A (ko) | 2013-03-15 | 2014-03-12 | 촬상 장치, 촬상 방법 및 기억 매체 |
CN201410096293.8A CN104052908B (zh) | 2013-03-15 | 2014-03-14 | 摄像装置、以及显示方法 |
KR1020150145962A KR101587903B1 (ko) | 2013-03-15 | 2015-10-20 | 촬상 장치, 촬상 방법 및 기억 매체 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013053538A JP5765590B2 (ja) | 2013-03-15 | 2013-03-15 | 撮像装置、表示方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014179874A JP2014179874A (ja) | 2014-09-25 |
JP5765590B2 true JP5765590B2 (ja) | 2015-08-19 |
Family
ID=51505243
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013053538A Expired - Fee Related JP5765590B2 (ja) | 2013-03-15 | 2013-03-15 | 撮像装置、表示方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US9253406B2 (ja) |
JP (1) | JP5765590B2 (ja) |
KR (2) | KR20140113413A (ja) |
CN (1) | CN104052908B (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6308106B2 (ja) * | 2014-11-14 | 2018-04-11 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN105072327B (zh) * | 2015-07-15 | 2018-05-25 | 广东欧珀移动通信有限公司 | 一种防闭眼的人像拍摄处理的方法和装置 |
JP6341184B2 (ja) * | 2015-11-18 | 2018-06-13 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN105915791B (zh) * | 2016-05-03 | 2019-02-05 | Oppo广东移动通信有限公司 | 电子装置控制方法及装置、电子装置 |
JP6973298B2 (ja) * | 2018-05-31 | 2021-11-24 | トヨタ自動車株式会社 | 物体監視装置 |
JP7475846B2 (ja) | 2018-12-28 | 2024-04-30 | キヤノン株式会社 | 情報処理装置、撮像装置、情報処理方法および撮像装置の制御方法 |
JP7389558B2 (ja) * | 2019-03-08 | 2023-11-30 | キヤノン株式会社 | 情報処理装置およびその制御方法ならびにプログラム |
JP7296750B2 (ja) * | 2019-03-14 | 2023-06-23 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4503741B2 (ja) | 1999-10-14 | 2010-07-14 | オリンパス株式会社 | 電子カメラ装置 |
JP2006050541A (ja) | 2004-06-29 | 2006-02-16 | Konica Minolta Holdings Inc | 撮像装置 |
JP2006237803A (ja) | 2005-02-23 | 2006-09-07 | Konica Minolta Photo Imaging Inc | 撮像システム、写真撮影スタジオ、撮像システムの制御方法 |
JP4457929B2 (ja) * | 2005-03-16 | 2010-04-28 | カシオ計算機株式会社 | 撮影装置 |
JP2007184683A (ja) * | 2006-01-04 | 2007-07-19 | Eastman Kodak Co | 画像データ処理装置及び方法 |
US20080055453A1 (en) * | 2006-09-05 | 2008-03-06 | Battles Amy E | Displaying a live view and captured images in a digital camera |
JP2008092299A (ja) | 2006-10-02 | 2008-04-17 | Nikon System:Kk | 電子カメラ |
JP5136245B2 (ja) * | 2008-07-04 | 2013-02-06 | カシオ計算機株式会社 | 画像合成装置、画像合成プログラム及び画像合成方法 |
JP5210084B2 (ja) * | 2008-08-07 | 2013-06-12 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム |
CN101729775A (zh) * | 2008-10-24 | 2010-06-09 | 华晶科技股份有限公司 | 数字相机及其利用子母画面预视有兴趣影像的方法 |
JP5489636B2 (ja) * | 2009-10-19 | 2014-05-14 | キヤノン株式会社 | 画像表示装置、画像表示方法及びプログラム |
JP2011151614A (ja) * | 2010-01-21 | 2011-08-04 | Nikon Corp | 電子カメラ |
JP2012015827A (ja) * | 2010-07-01 | 2012-01-19 | Nec Casio Mobile Communications Ltd | 端末装置及びプログラム |
KR101755598B1 (ko) * | 2010-10-27 | 2017-07-07 | 삼성전자주식회사 | 디지털 촬영 장치 및 이의 제어 방법 |
KR101796481B1 (ko) * | 2011-11-28 | 2017-12-04 | 삼성전자주식회사 | 저전력 셔터랙 제거 방법, 카메라 모듈 및 이를 구비하는 모바일 기기 |
-
2013
- 2013-03-15 JP JP2013053538A patent/JP5765590B2/ja not_active Expired - Fee Related
-
2014
- 2014-02-26 US US14/191,124 patent/US9253406B2/en not_active Expired - Fee Related
- 2014-03-12 KR KR1020140028822A patent/KR20140113413A/ko not_active IP Right Cessation
- 2014-03-14 CN CN201410096293.8A patent/CN104052908B/zh not_active Expired - Fee Related
-
2015
- 2015-10-20 KR KR1020150145962A patent/KR101587903B1/ko active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
KR20150124426A (ko) | 2015-11-05 |
JP2014179874A (ja) | 2014-09-25 |
KR20140113413A (ko) | 2014-09-24 |
KR101587903B1 (ko) | 2016-01-22 |
CN104052908A (zh) | 2014-09-17 |
US20140267836A1 (en) | 2014-09-18 |
CN104052908B (zh) | 2017-04-12 |
US9253406B2 (en) | 2016-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5765590B2 (ja) | 撮像装置、表示方法及びプログラム | |
JP4542011B2 (ja) | カメラ及び手ぶれ補正方法及び手ぶれ補正プログラム | |
JP4434151B2 (ja) | 撮像装置 | |
WO2006082967A1 (ja) | 撮像装置 | |
JP2009207119A (ja) | 撮像装置及びプログラム | |
WO2015107927A1 (ja) | 画像処理装置および方法、並びにプログラム | |
JP5906427B2 (ja) | 撮像装置、画像処理装置 | |
JP6261205B2 (ja) | 画像処理装置 | |
JP5959217B2 (ja) | 撮像装置及び画質調整方法、画質調整プログラム | |
JP2006019874A (ja) | 手ぶれ・ピンボケレベル報知方法および撮像装置 | |
JP2009171428A (ja) | デジタルカメラ装置および電子ズームの制御方法およびプログラム | |
JP4792929B2 (ja) | デジタルカメラ | |
US20140333793A1 (en) | Photographing equipment, photographing assisting method, display apparatus and display method | |
JP2011049988A (ja) | 画像処理装置およびカメラ | |
JP6476064B2 (ja) | 撮像装置、及び撮像制御方法 | |
US10362206B2 (en) | Image capturing apparatus having a function which assists a panning shot with specific framing | |
JP4983672B2 (ja) | 撮像装置及びそのプログラム | |
JP6519280B2 (ja) | 撮影装置、撮影設定方法及びプログラム | |
JP5761387B2 (ja) | 撮像装置及びプログラム | |
JP4968389B2 (ja) | 撮影装置及びプログラム | |
JP2018098764A (ja) | 撮像装置および画像合成方法 | |
JP6732572B2 (ja) | 撮像装置及び撮像方法 | |
JP2010016671A (ja) | カメラ、および情報処理装置 | |
JP2008022080A (ja) | 撮像装置及び制御方法 | |
JP2017069673A (ja) | 撮像装置、撮像方法および撮像プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140812 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141007 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141118 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141224 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20150120 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150326 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20150407 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150521 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150603 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5765590 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |