JP2012065173A - Imaging apparatus - Google Patents
Imaging apparatus Download PDFInfo
- Publication number
- JP2012065173A JP2012065173A JP2010208168A JP2010208168A JP2012065173A JP 2012065173 A JP2012065173 A JP 2012065173A JP 2010208168 A JP2010208168 A JP 2010208168A JP 2010208168 A JP2010208168 A JP 2010208168A JP 2012065173 A JP2012065173 A JP 2012065173A
- Authority
- JP
- Japan
- Prior art keywords
- image
- zoom
- range
- unit
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Details Of Cameras Including Film Mechanisms (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
Abstract
Description
本発明は、撮影機器に関し、特に、ズーミングにより被写体を見失ったときの対応機能を有する撮影機器に関する。 The present invention relates to an imaging device, and more particularly, to an imaging device having a function to cope with losing sight of a subject due to zooming.
従来より、デジタルカメラ等の撮影機器には、撮影画像を確認するためのLCD等の表示デバイスを有しているものがある。撮影者であるユーザは、その表示デバイスに表示される画像を見て、撮影画像を確認することができる。 2. Description of the Related Art Conventionally, some photographing devices such as digital cameras have a display device such as an LCD for confirming a photographed image. A user who is a photographer can check a captured image by viewing an image displayed on the display device.
また、例えば特許第4340358号明細書に開示されているように、撮影画像のフォーカス状態の確認等をするために、表示デバイス上に撮影画像の一部を拡大表示する機能を有する撮影機器もある。そして、特許第4340358号公報には、画像の一部を拡大表示する場合に、元の画像のうちのどの部分が拡大表示されているのかを示すための副画像を表示する技術が開示されている。 In addition, as disclosed in, for example, Japanese Patent No. 4340358, there is a photographing apparatus having a function of enlarging and displaying a part of a photographed image on a display device in order to confirm a focus state of the photographed image. . Japanese Patent No. 4340358 discloses a technique for displaying a sub-image for indicating which part of the original image is enlarged when a part of the image is enlarged and displayed. Yes.
ユーザは、撮影機器のズーム機能を利用して、遠くの被写体を大きく拡大して撮影することもできるが、ズーミングをすると画角が狭くなるため、被写体がその画角内に入らなくなる場合がある。その場合、ユーザは、見失った被写体がその狭くなった画角内に入るように、表示デバイスに表示される画像を見ながら、撮影機器のレンズの向きを変えるという操作をしなければならない。 Although the user can use the zoom function of the photographing device to shoot a subject far away, the angle of view becomes narrower when zooming, so the subject may not fall within that angle of view. . In that case, the user must perform an operation of changing the direction of the lens of the photographing device while viewing the image displayed on the display device so that the subject that has been lost is within the narrow angle of view.
しかし、ズーム倍率が高い場合、見失った被写体が画角内に入るように、ユーザが、表示デバイスを見ながら撮影機器のレンズの向きを変えて、見失った被写体を捉えるように操作することは煩雑であり、容易ではない。撮影機器に、このような被写体を見失ったときの対応機能を有するものはなかった。
また、上述した特許第4340358号公報に開示されている技術には、このような被写体を見失ったときの対応機能は提案されていない。
However, when the zoom magnification is high, it is complicated for the user to change the direction of the lens of the photographing device while looking at the display device so that the lost object falls within the angle of view, and to operate to capture the lost object. It is not easy. None of the photographic devices have a function to cope with such a loss of sight of the subject.
Further, the technology disclosed in the above-mentioned Japanese Patent No. 4340358 has not proposed a function for dealing with such a case where the subject is lost.
その特許第4340358号公報に開示されている技術を利用して、ズーミングにより撮影される範囲を副画像に表示するようにすることも考えられるが、その技術を利用すると、ズーミングして得られる撮影画像は、電子変倍処理により生成される画像であるため、撮影画像の画質が低下してしまうという問題がある。 It is conceivable to use the technique disclosed in Japanese Patent No. 4340358 to display the range imaged by zooming on the sub-image. However, if this technique is used, imaging obtained by zooming can be considered. Since the image is an image generated by electronic scaling processing, there is a problem that the image quality of the captured image is deteriorated.
そこで、本発明は、以上の問題に鑑みてなされたものであり、ユーザが被写体を見失ったときあるいは表示エリアに対応する部分から被写体像が外れたとき(以下、「見失ったとき」等という)の対応機能を有し、かつ撮影画像の画質の劣化を防止しつつ被写体の撮影ができる撮影機器を提供することを目的とする。 Therefore, the present invention has been made in view of the above problems, and when the user loses sight of the subject or when the subject image deviates from a portion corresponding to the display area (hereinafter referred to as “when lost”). It is an object of the present invention to provide a photographing apparatus that has a function to cope with the above and that can photograph a subject while preventing deterioration of image quality of a photographed image.
本発明の一態様によれば、ズーム可能なレンズを通った光を撮像素子において受光して被写体を撮影する撮影装置であって、前記レンズに対するズーム操作に応じて、所定のズーム域内では電子ズームを行い、前記所定のズーム域を超えると光学ズームを行うようにズーム制御を行うズーム制御部と、前記被写体の見失いが検出されると、前記撮像素子の撮像範囲中のズーム範囲外の画像を表示部の表示画面上に表示するように、前記表示画面の表示を制御する表示制御部と、を有する撮影機器を提供することができる。 According to one aspect of the present invention, there is provided an imaging device that takes light through a zoomable lens with an imaging device and images a subject, and electronic zoom is performed within a predetermined zoom range according to a zoom operation on the lens. A zoom control unit that performs zoom control so as to perform optical zoom when the predetermined zoom range is exceeded, and when the loss of the subject is detected, an image outside the zoom range in the imaging range of the imaging element is detected. It is possible to provide a photographing apparatus including a display control unit that controls display of the display screen so as to display on the display screen of the display unit.
本発明によれば、ユーザが被写体を見失ったときの対応機能を有し、かつ撮影画像の画質の劣化を防止しつつ被写体の撮影ができる撮影機器を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, it can provide the imaging device which has a function which responds when a user loses sight of a subject, and can image | photograph a subject, preventing the deterioration of the image quality of a picked-up image.
以下、図面を参照して本発明の実施の形態を説明する。
(第1の実施の形態)
(構成)
本実施の形態の撮影機器は、レンズ交換可能な本体部2を含む、一眼式のデジタルカメラである。図1は、本実施の形態に係るデジタルカメラの構成を示すブロック図である。本体部2に装着されるレンズ3は、後述するようにズームレンズである。よって、本実施の形態に係るデジタルカメラは、ズーム可能なレンズを通った光を撮像素子において受光して被写体を撮影する撮影装置である。
Embodiments of the present invention will be described below with reference to the drawings.
(First embodiment)
(Constitution)
The photographing apparatus according to the present embodiment is a single-lens digital camera including a main body 2 that can exchange lenses. FIG. 1 is a block diagram showing a configuration of a digital camera according to the present embodiment. The
なお、以下の説明では、撮影機器は、一眼式のデジタルカメラであるとして説明するが、撮影機器は、いわゆるレンズ交換のできないカメラであってよく、例えば、レンズ一体型のカメラ、所謂コンパクトカメラ、等であってもよい。第2の実施の形態においても同様である。 In the following description, the photographing device is described as a single-lens digital camera. However, the photographing device may be a so-called non-lens exchangeable camera, for example, a lens-integrated camera, a so-called compact camera, Etc. The same applies to the second embodiment.
図1に示すように、デジタルカメラ1は、いわゆるボディである本体部2と、交換レンズであるレンズ3とを有する。
まず、本体部2は、信号処理及び制御部11と、通信部12,13と、撮像部14と、モーション判定部15と、記録部16と、GPS部17と、表示部18と、方位判定部19と、操作判定部20と、時計部21とを含んで構成されている。これらの各部は、本体部2内の回路基板上に搭載されている。
As shown in FIG. 1, the
First, the main body 2 includes a signal processing and control unit 11,
信号処理及び制御部11は、中央処理装置(以下、CPUとい)を含み、撮像部14からの画像信号に対して、所定の信号処理、例えば、色信号生成処理、マトリックス変換処理、その他各種のデジタル処理を行う。信号処理及び制御部11は、画像信号及び音声信号の記録に際して、符号化処理を施して圧縮した画像情報及び音声情報を出力することもできるようになっている。また、信号処理及び制御部11は、記録部16からの画像情報及び音声情報を復号化して、画像信号及び音声信号を得ることができるようになっている。画像信号は、動画像信号も含む。
The signal processing and control unit 11 includes a central processing unit (hereinafter referred to as a CPU), and performs predetermined signal processing, such as color signal generation processing, matrix conversion processing, and other various types of processing on the image signal from the
信号処理及び制御部11のCPUが、デジタルカメラ1の全体の動作の制御を行うと共に、後述する被写体の見失い時の対応処理を実行する。CPUが実行するソフトウエアプログラムは、図示しないROMに記憶されている。
また、信号処理及び制御部11は、範囲制御部11aと、表示制御部11bとを含む。範囲制御部11a及び表示制御部11bは、CPUにより実行されるソフトウエアプログラムでもよいし、ハードウエア回路でもよい。
The CPU of the signal processing and control unit 11 controls the overall operation of the
The signal processing and control unit 11 includes a
範囲制御部11aは、電子ズームと光学ズームのそれぞれの動作範囲を制御する。電子ズームと光学ズームのそれぞれの動作範囲については、後述する。
表示制御部11bは、表示部18に表示する画像の表示内容及び表示形態を制御する処理部である。表示制御部11bは、後述するような、切り出し処理、拡大及び縮小処理、合成処理等を行う。
通信部12は、レンズ3の通信部32(後述)との各種データ通信を行う回路である。
The
The
The
通信部13は、外部機器と接続するための回路、及び無線通信機能を有してインターネット等の通信回線を介するデータ通信を行うための回路を含む。例えば、デジタルカメラ1は、インターネット上の各種サーバから各種情報を取得することができるので、GPS部17で取得した位置情報及び/又は方位判定部19で取得した方位情報を利用した各種データ処理サービスのサービス結果を得ることができる。
The
撮像部14は、CCDやCMOSセンサ等の撮像素子により構成されている。レンズ3からの被写体の光学像は、撮像部14を構成する撮像素子の撮像面に結像するようになっている。この撮像部14は、信号処理及び制御部11によって駆動制御される。信号処理及び制御部11は、撮像部14に撮像素子の駆動信号を出力すると共に、撮像素子が光学像を光電変換して得た画像信号を取り込む。
The
モーション判定部15は、加速度センサ等を含み、デジタルカメラ1すなわち本体部2の動きを判定する。
記録部16は、信号処理及び制御部11からの画像情報及び音声情報を図示しない記録媒体に記録する回路である。なお、記録部16は、例えばカードインターフェースを採用することができ、記録部16は、メモリカード等に画像情報及び音声情報等を記録可能である。また、記録部16は、記録媒体に記録された画像情報及び音声情報を読み出して信号処理及び制御部11に供給することができる。
The
The
GPS部17は、GPSシステムからの信号を受信して、カメラ1の位置情報を取得する回路である。
表示部18は、液晶表示器(LCD)等の表示デバイスにより構成され、撮影画像を表示するだけでなく、後述する被写体の見失い時に被写体の方向をユーザが判るようにアシストするためのアシスト画像を表示するユニットである。さらに、表示部18は、記録部16からの再生画像が信号処理及び制御部11から供給されて、これらの画像表示を行うことができる。また、表示部18は信号処理及び制御部11により制御されて、デジタルカメラ1の操作を行うためのメニュー表示等を表示することもできるようになっている。
The
The
方位判定部19は、地磁気センサ等を含み、デジタルカメラ1のレンズ3の向いている方向である方位を判定するためのセンサを含む。
操作判定部20は、本体部2に設けられた各種スイッチ、タッチパネル等への操作信号を入力して、ユーザの種々の操作内容を判定する回路である。操作判定部18は、ユーザによる各種釦操作に応じた操作内容を示す操作信号を発生させて、信号処理及び制御部11に出力するようになっている。信号処理及び制御部11は、操作信号に基づいて、各部を制御する。
The
The
時計部21は、信号処理及び制御部11が用いる時間情報を発生する。時間情報は、例えば、撮影画像の整理用に用いられる。
次にレンズ3について説明する。レンズ3は、ズームレンズ部31と、通信部32と、駆動部33と、操作部34とを含んで構成されている。
The
Next, the
ズームレンズ部31は、ズームレンズ光学系を有しており、かつ駆動部33に駆動されることにより被写体の像を合焦させるオートフォーカス機能を備えている。
通信部32は、本体部2の通信部12との通信を行う回路である。レンズ3が本体部2に装着されると、それぞれに設けられた複数の切片あるいは複数のピンが接触して、通信部12と13間で信号の送受信が可能となる。通信部32は、レンズ3に関する情報を本体部2へ送信することができる。
The
The
レンズ3は、交換レンズであるので、種々のレンズが、本体部2には装着可能である。装着可能な複数のレンズは、ズーム倍率、焦点距離、明るさ(F値)等の情報が互いに異なっている。
Since the
駆動部33は、通信部32を介して受信した制御データに基づき、ズームレンズ部31の絞り、焦点、画角(あるいはズーム位置)等を制御するために、ズームレンズ部31を駆動する回路である。ズームレンズ部31のズーム位置、合焦状態、および絞りは、図示しない検出部によって検出され、その検出されたズームレンズ部31のズーム位置等は通信部34を介して本体部2へ送信される。
The
操作部34は、レンズ3のズームリングあるいはズームスイッチからなるズーム操作部であり、操作部34を操作することによって、ユーザは、レンズ3のズーム位置を変更することができる。
なお、レンズ3が操作部を有しないで、本体部2の操作部への操作に応じて出力される制御信号に基づいて、ズーム位置が制御されるデジタルカメラもある。その場合は、レンズ3の操作部は、本体部2に設けられて、上述した操作判定部20に入力されたズーム位置情報が、レンズ3へ伝達される。
The
There is also a digital camera in which the zoom position is controlled based on a control signal output in response to an operation to the operation unit of the main body unit 2 without the
従って、デジタルカメラ1は、主に信号処理及び制御部11、記録部16及び表示部18により、撮像部14からの撮像信号に基づく動画像及び静止画についての表示及び記録に関する処理が可能である。即ち、信号処理及び制御部11は、撮像部14からの撮像信号に所定の信号処理を施して動画像の映像信号を生成すると共に、この映像信号を表示部18に出力して表示する。また、信号処理及び制御部11は、生成した映像信号を圧縮して記録部16に与える。記録部16は、信号処理及び制御部11からの映像信号を図示しない記録媒体に記録すると共に、記録媒体に記録されている映像信号を読み出して信号処理及び制御部11に出力することができる。信号処理及び制御部11は記録部16からの映像信号を復号化して、本体表示部19に与えて表示させることができる。
(被写体の見失いの例)
次に、被写体を見失う場合について説明する。図2と図3は、ユーザPが、カメラであるデジタルカメラ1を把持しながら、被写体の一例として、遠くに飛んでいる鳥Bを撮影する場合を説明するための図である。図2は、ユーザPがレンズ3をズーミングしていない状態を説明するための図である。
Therefore, the
(Example of missing a subject)
Next, a case where the subject is lost is described. 2 and 3 are diagrams for explaining a case where the user P captures a bird B flying far away as an example of a subject while holding the
図2に示すように、ユーザPがデジタルカメラ1を手に持って鳥Bを撮影しようとするとき、ユーザPは表示部18の表示画面18aを見ながら、デジタルカメラ1のレンズ3の向きを調整する。レンズ3は、まだズーミングされておらず、望遠状態にはない。
図2では、点線の枠が、撮像部14により撮像されている撮像範囲IPAを示す。実線の枠で示した表示部18の表示画面18a上には、鳥画像BIが画面全体に対して小さく表示されている。
As shown in FIG. 2, when the user P is holding the
In FIG. 2, the dotted frame indicates the imaging range IPA that is captured by the
図3は、ユーザPがレンズ3をズーミングして鳥Bを撮影する場合を説明するための図である。図3に示すように、ユーザPは、レンズ3の光軸を鳥Bに向けてズーミングして、表示画面18a上に鳥画像BIが拡大表示された状態で撮影釦を押すことにより、鳥Bを撮影したい、とする。図3において、点線の枠が、ユーザPがズーミングしているズーム範囲ZAを示す。
FIG. 3 is a diagram for explaining a case where the user P zooms the
しかし、ユーザPには、鳥Bを狭い画角内の略中心に位置させて、実線の枠で示した表示画面18a上に鳥画像BIが表示されるように、デジタルカメラ1の向きを調整することは容易でない。例えば、ユーザPは、図3において、点線で示す枠NZAの範囲を撮影するような方向に、デジタルカメラ1を向けてしまう場合がある。
However, for the user P, the orientation of the
鳥Bがレンズ3の狭い画角内に入らない場合、鳥画像BIが表示画面18a内から消失するため、ユーザは、所望のフレーミングができず、ユーザは、再び鳥Bを見ながら、デジタルカメラ1のレンズ3の向きを調整しようとする、あるいは表示画面18aを頼りにして、表示画面18aを見ながら鳥画像BIが表示されるまで、デジタルカメラ1のレンズ3の向きを種々変えるかもしれない。
If the bird B does not fall within the narrow angle of view of the
そこで、本実施の形態のデジタルカメラ1は、このようなユーザPが被写体を見失ったときに、撮像部14により撮像されている、ズーム範囲ZAよりも広い撮像範囲IPA内の画像を、アシスト画像として表示部18に表示させて、被写体が存在する方向を、ユーザPが認識できるようになっている。すなわち、デジタルカメラ1は、ユーザが被写体を見失った場合には、ズーム画像から、撮像範囲IPA内の画像に切り替えて、表示部18に表示し、ユーザが被写体を見失わなくなると、ズーム画像を表示部18に表示するように表示切り替えを行う。
Therefore, the
さらに、ズーム範囲ZAに対応する撮像部14の撮像素子上の画素領域は、実際に撮影画像として記録される画像が所定の画質以上を有するように制限される。すなわち、デジタルカメラ1において、所定の広角から所定の画質が維持できる所定のズーム域までは優先的に電子ズームによりズーミングを行い、その所定のズーム域を超えると、光学ズームによりズーミングを行うようにしている。
Furthermore, the pixel area on the image sensor of the
すなわち、デジタルカメラ1は、ズーム操作がされると、所定の画質が維持できる所定のズーム位置までは電子ズームを優先させ、その所定のズーム位置を超えると光学ズームを行い、かつ、ズーミングが行われている場合にユーザPが被写体を見失ったときは、ズーム範囲ZAよりも広い撮像範囲IPAの画像を表示部18に表示するようにした。
That is, when the zoom operation is performed, the
図4は、ズーミングして被写体を見失った場合における表示部18の表示画面18aの表示画像の変化を説明するための図である。
ズーミングが行われると、撮像部14が撮像している撮像範囲IPA内において、ユーザがズーミングをしているズーム範囲ZAの画像が、表示画面18a上に表示される。しかし、ユーザが被写体を見失って、デジタルカメラ1を上下左右の方向に動かしたり、撮像部14の所定の中央部の色が変化したり、急速な広角側へのズーム操作が行われたり、等の所定の動きを検出あるいは所定の操作が行われたことを検出すると、ズーム範囲ZAよりも広い範囲(撮像部14で撮像している撮像範囲IPA)が、所定の時間(例えば2秒)の間、表示画面18a上に表示される。
FIG. 4 is a diagram for explaining a change in the display image on the
When zooming is performed, an image of the zoom range ZA in which the user is zooming is displayed on the
ユーザのズーム操作により表示画面18a上には、ズーム範囲ZAが表示されているが、デジタルカメラ1の向きが被写体の位置から外れると、図4においてC1で示すように、表示画面18a上には、被写体の画像(鳥画像BI)は、表示されない。
しかし、デジタルカメラ1は、ユーザが被写体を見失ったことを検出すると、図4においてC2で示すようなアシスト画像を、表示画面18a上に表示するように、ズーム範囲ZAの画像表示から、撮像範囲IPAの画像表示に切り替わる。
Although the zoom range ZA is displayed on the
However, when the
切り替わった画像は、ズーム範囲ZAよりも広い撮像範囲IPAの画像なので、鳥画像BIが含まれている場合がある。図4の場合、鳥画像BIが撮像範囲IPA内に含まれているので、ユーザは、鳥画像BIを見て、デジタルカメラ1の方向(言い換えるとレンズ3の方向)を、矢印Aで示す鳥画像BIの方向に変えることができる。さらに、その撮像範囲IPAには、ズーム範囲ZAを示す枠ZFも重畳して表示される。 Since the switched image is an image in the imaging range IPA wider than the zoom range ZA, the bird image BI may be included. In the case of FIG. 4, since the bird image BI is included in the imaging range IPA, the user looks at the bird image BI and the direction of the digital camera 1 (in other words, the direction of the lens 3) indicates the bird indicated by the arrow A. The direction of the image BI can be changed. Further, a frame ZF indicating the zoom range ZA is also superimposed and displayed on the imaging range IPA.
よって、ユーザは、ズーミングをして被写体を見失ったときに、アシスト画像により、被写体の存在する方向を認識でき、かつ所定の画質以上で、被写体の撮影をすることができる。
なお、ユーザが被写体を見失ったときに、表示される撮像範囲IPAの画像中に、ズーム範囲ZAを示す枠ZFを表示しないようにしてもよい。
Therefore, when the user loses sight of the subject after zooming, the user can recognize the direction in which the subject exists with the assist image and can shoot the subject with a predetermined image quality or higher.
When the user loses sight of the subject, the frame ZF indicating the zoom range ZA may not be displayed in the displayed image of the imaging range IPA.
図5は、ズーム操作における電子ズームと光学ズームの動作範囲を示す模式的な図である。図5において、横軸は、ズーム操作量を示し、縦軸は、レンズ3のズーム位置を示す。レンズ3の最大画角時(最大広角時)を0として、ユーザが操作部34を操作して、レンズ3のズーミングを行っていくと、最大広角状態(0)からズーム操作量Z1までのズーム域ZM1内では、電子ズームのみが働く。すなわち、ズーム操作量Z1におけるレンズ3の所定のズーム位置ZP1までは、電子ズームが優先して動作する。
FIG. 5 is a schematic diagram illustrating an operation range of the electronic zoom and the optical zoom in the zoom operation. In FIG. 5, the horizontal axis indicates the zoom operation amount, and the vertical axis indicates the zoom position of the
ズーム操作量Z1に対応する所定のズーム位置ZP1は、撮像部14の撮像素子の性能に基づき予め決定される。ズーム位置ZP1までの電子ズームされた画像は、所定の画質以上となるように、ズーム操作量Z1すなわちズーム位置ZP1は、決定される。図5において、実線は、電子ズームの動作を示す。
The predetermined zoom position ZP1 corresponding to the zoom operation amount Z1 is determined in advance based on the performance of the image sensor of the
CPUは、レンズ3の焦点距離情報を通信部12,32を介して受信し、かつ撮像部14の撮像素子における所定の画質を維持できる領域情報とから、図5に示すズーム位置ZP1とズーム操作量Z1を決定する。ズーム操作量Z1は、電子ズームによる限界操作量であり、ズーム位置ZP1は、電子ズームによる限界ズーム位置である。
The CPU receives the focal length information of the
例えば、撮像素子の撮像領域の1/4までは電子ズーム機能を利用して撮影しても、撮影して得られた画像は、所定の画質以上を有しているとすれば、所定のズーム位置ZP1は、撮像素子の撮像領域の1/4に対応する位置として設定される。 For example, even when shooting up to ¼ of the imaging area of the imaging device using the electronic zoom function, if the image obtained by shooting has a predetermined image quality or higher, a predetermined zoom The position ZP1 is set as a position corresponding to ¼ of the imaging area of the imaging device.
よって、ユーザが広角側から望遠側にズーミングすると、最大広角状態(0)からズーム操作量Z1までのズーム域ZM1内では、ズーミングは、電子ズームにより行われる。すなわち、撮像部14により撮像されている撮像範囲IPA内から電子ズーミングされた画像が切り出されて、表示部18の表示画面18a上に表示される。
Therefore, when the user zooms from the wide-angle side to the telephoto side, zooming is performed by electronic zoom in the zoom range ZM1 from the maximum wide-angle state (0) to the zoom operation amount Z1. That is, an electronically zoomed image is cut out from the imaging range IPA captured by the
ズーム操作量がZ1を超えると、電子ズームのズーム位置ZP1は固定され、レンズ3内のレンズの動きによる光学ズームが開始される。ズーム操作量Z1の位置では、光学ズームによるズーミングは、行われておらず、ズーム操作量がZ1を超えると、ズーム操作量に応じて、ズーム位置が増加する。
When the zoom operation amount exceeds Z1, the zoom position ZP1 of the electronic zoom is fixed, and the optical zoom by the movement of the lens in the
図5において、一点鎖線で示す線が光学ズームの動作を示す。すなわち、ズーム操作量がズーム域ZM1を超えたズーム域ZM2では、電子ズーミングは、ズーム位置ZP1で固定され、ズーム操作がさらに行われても動作しないように制限される。一方、ズーム域ZM2では、ズーム操作量に応じて、光学ズームが行われることによってズーム位置が増加するように変化する。ズーム域ZM2では、ズーム位置は、図5において点線で示すように、電子ズームと光学ズームを合わせた位置となる。 In FIG. 5, a line indicated by a one-dot chain line indicates an optical zoom operation. That is, in the zoom range ZM2 in which the zoom operation amount exceeds the zoom range ZM1, electronic zooming is fixed at the zoom position ZP1, and is restricted so as not to operate even if the zoom operation is further performed. On the other hand, in the zoom range ZM2, the zoom position changes in accordance with the zoom operation amount by performing optical zoom. In the zoom range ZM2, the zoom position is a position obtained by combining the electronic zoom and the optical zoom, as indicated by a dotted line in FIG.
表示部18に表示される画像が、ズーム範囲ZAの画像から、撮像範囲IPAの画像に変化するということは、表示部に表示される画像のズーム位置が、図5において、あるズーム位置に対応する点P1の位置から、電子ズームのズーム分だけ下がった点P2の位置へ変化するということに対応する。
図5に示すズーム域に対応した電子ズームと光学ズームの動作範囲の制御は、信号処理及び制御部11の範囲制御部11aにより行われる。
The fact that the image displayed on the
Control of the operation range of the electronic zoom and the optical zoom corresponding to the zoom range shown in FIG. 5 is performed by the signal processing and
次に、表示部18の表示画面18aに表示される表示画像について説明する。
図6は、撮像部14の撮像素子の撮像範囲とズーム範囲を説明するための図である。なお、表示画面18aへの画像表示は、信号処理及び制御部11の表示制御部11bが行う。図6では、撮像範囲IPAの中央部の面積が1/4程度の部分が、所定の画質が維持できる撮影範囲限界範囲あるいは撮影範囲限界領域として示されている。
Next, a display image displayed on the
FIG. 6 is a diagram for explaining the imaging range and zoom range of the imaging device of the
電子ズームが開始されると、撮像部14が撮像している撮像範囲IPAに対して、ズーム範囲ZAの画像が切り出されて、表示画面18a上に表示される。すなわち、図6において斜線で示す周囲画像範囲PAは表示画面18a上に表示されない。撮影釦が操作すなわち押されれば、ズーム範囲ZAの画像が、記録部16の記録媒体に記録される。そして、通常は、ズーム範囲ZAの周囲の周囲画像範囲PAの画像は、表示画面18aには表示されない。
When the electronic zoom is started, an image of the zoom range ZA is cut out and displayed on the
電子ズームは、撮像範囲IPAから撮影範囲限界範囲までは行われるが、撮影範囲限界範囲内までは、行われない。
しかし、後述するように、ユーザPが被写体である鳥を見失ったことが検出されると、表示画面18aには、アシスト画像として、撮像範囲IPAの画像(すなわちズーム範囲ZAの画像と周囲画像範囲PAの画像)が表示される。言い換えると、周囲画像範囲PAは、見失い時の表示専用部分である。
The electronic zoom is performed from the imaging range IPA to the imaging range limit range, but not within the imaging range limit range.
However, as will be described later, when it is detected that the user P has lost sight of the bird that is the subject, an image of the imaging range IPA (that is, an image of the zoom range ZA and the surrounding image range is displayed on the
なお、周囲画像範囲PAの画像(以下、周囲画像という)PAPを縮小して、表示画面18a上に表示するようにしてもよい。
図7は、表示部18の表示画面18aに表示されたアシスト画像の例を示す図である。図7に示すように、撮像範囲IPAの画像の内、周囲画像範囲PAの周囲画像PAPは圧縮して縮小表示され、その内側にズーム範囲ZAのズーム画像ZAPが拡大表示される。
Note that an image (hereinafter referred to as a surrounding image) PAP in the surrounding image range PA may be reduced and displayed on the
FIG. 7 is a diagram illustrating an example of the assist image displayed on the
図7は、例として、2倍ズームされている状態で周囲画像PAPも含む画像が表示されている状態を示す。表示画面18aの横方向の半分を1としたときに、周囲画像PAPの横方向の長さは、1/4であることが示されている。すなわち、周囲画像PAPを縮小し、ズーム画像ZAPを拡大し、かつ、その2つの画像を、表示画面18aに収まるように、すなわち表示画面18aのサイズと略一致するように、それぞれの比率を変更して合成して、アシスト画像が生成される。
FIG. 7 shows a state where an image including the surrounding image PAP is displayed in a state where the zoom is performed twice as an example. It is shown that when the half of the
周囲画像PAPは、縮小されても、図7に示すように鳥画像BIが表示画面18a上に表示されるので、ユーザPは、レンズ3の光軸を向ける方向を知ることができる。また、ズーム画像ZAPも、図6におけるズーム範囲ZAの周囲画像範囲PAに対する比率よりも、大きな比率で表示画面18a上に表示されるので、ユーザは、撮影画像を認識し易い。
(処理)
次に、デジタルカメラ1の撮影時の処理を説明する。図8は、デジタルカメラ1の撮影時の処理の流れの例を示すフローチャートである。図8の処理は、信号処理及び制御部11のCPUが実行する。図8の処理プログラムは、信号処理及び制御部11内のROM(図示せず)に記憶されている。また、図8は、限界ズーム位置ZP1が、レンズ3の倍率として設定されている例であり、倍率が2倍までは電子ズームが動作する場合である。
Even if the surrounding image PAP is reduced, the bird image BI is displayed on the
(processing)
Next, processing at the time of shooting with the
デジタルカメラ1の電源がオンにされているときに、CPUは、ユーザにより撮影モードが設定されているか否かを判定する(S1)。撮影モードでないとき(S1:NO)は、その他のモードの処理、例えば再生モードの処理、が実行される。
When the
撮影モードであるとき(S1:YES)、CPUは、レンズ3の焦点距離などの各種データを取得し(S2)、アシストモードであるか否かを判定する(S3)。このアシストモードは、ズーミング時に、上述した被写体を見失ったときにアシスト画面の表示を行うモードであり、デジタルカメラ1がユーザによって、アシストモードに設定されているか否かが判定される。アシストモードの設定は、デジタルカメラ1の本体部2に対する所定の操作により行われる。本体部2の操作部と操作判定部20が、所定のモードとしてのアシストモードを設定するモード設定部を構成する。
When in the shooting mode (S1: YES), the CPU acquires various data such as the focal length of the lens 3 (S2), and determines whether or not it is in the assist mode (S3). This assist mode is a mode for displaying an assist screen when losing sight of the above-mentioned subject during zooming, and it is determined whether or not the
デジタルカメラ1がアシストモードに設定されていない場合、CPUは、ズーム操作がされたか否かを判定する(S4)。ズーム操作がされたときは(S4:YES)、CPUは、光学ズーム制御操作を実行し(S5)、全域表示を行う(S6)。全域表示は、撮像部14の撮像素子で撮像して得られた撮像範囲IPAの全域の画像を表示部18の表示画面18a上に表示することである。ズーム操作がされていないときは(S4:NO)、CPUは、全域表示を行う(S6)。
When the
次に、撮影釦が押されたか否かが判定され(S7)、撮影釦が押されたとき(S7:YES)、CPUは、撮像範囲の画像を記憶し(S8)、処理は、S1へ戻る。また、撮影釦が押されないとき(S7:NO)、処理は、S1へ戻る。 Next, it is determined whether or not the shooting button has been pressed (S7). When the shooting button has been pressed (S7: YES), the CPU stores an image in the imaging range (S8), and the process goes to S1. Return. When the shooting button is not pressed (S7: NO), the process returns to S1.
デジタルカメラ1がアシストモードに設定されている場合(S3:YES)、CPUは、ズーム操作がされたか否かを判定する(S9)。ズーム操作では、CPUは、撮像部14の撮像素子における所定の画質を維持できる領域から決定されたズーム域ZM1とZM2のそれぞれに応じて、電子ズームと光学ズームの動作を制御する。
When the
ズーム操作がされると(S9:YES)、CPUは、ズーム操作により、レンズ3の倍率が2倍までであるか否かを判定し(S10)、倍率が2倍までであれば、ズーム操作量に応じた電子ズームを行う(S11)。レンズ3の倍率が2倍まであるか否かの判定は、図5において、ズーム操作量が、ズーム域ZM1の範囲内であるか否かの判定に対応する。
When the zoom operation is performed (S9: YES), the CPU determines whether or not the magnification of the
倍率が2倍を超えると、CPUは、電子ズームを固定し(S12)、ズーム操作量に応じた光学ズーム制御操作を実行する(S13)。倍率が2倍を超えた場合は、図5において、ズーム操作量が、ズーム域ZM2の範囲内である場合に対応する。S9〜S13の処理は、範囲制御部11aにより実行される。よって、S9〜S13の処理は、レンズ3に対するズーム操作に応じて、所定のズーム域内では電子ズームを行い、所定のズーム域を超えると光学ズームを行うようにズーム制御を行うズーム制御部を構成する。
When the magnification exceeds 2, the CPU fixes the electronic zoom (S12) and executes an optical zoom control operation corresponding to the zoom operation amount (S13). The case where the magnification exceeds 2 times corresponds to the case where the zoom operation amount is within the zoom range ZM2 in FIG. The processes of S9 to S13 are executed by the
S11及びS13の処理の後、CPUは、ユーザが被写体を見失ったか否かを判定する(S14)。この判定方法は、後述する。
見失わなければ(S14:NO)、CPUは、選択域画像を表示、すなわちズーム範囲ZAの画像を表示する(S15)。しかし、見失ったとき(S14:YES)、CPUは、全域表示、すなわち撮像範囲IPAの画像を、所定の期間、ここでは2秒間、表示する(S16)。そして、S15及びS16の後、処理は、S7に移行する。S14〜S16の処理は、表示制御部11bにより実行される。よって、S14〜S16の処理は、被写体の見失いが検出されると、撮像素子の撮像範囲中のズーム範囲外の画像を表示部18の表示画面18a上に表示するように、表示画面18aの表示を制御する表示制御部を構成する。
After the processes of S11 and S13, the CPU determines whether or not the user has lost sight of the subject (S14). This determination method will be described later.
If not lost (S14: NO), the CPU displays the selected area image, that is, displays the image in the zoom range ZA (S15). However, when it is lost (S14: YES), the CPU displays the entire area display, that is, the image of the imaging range IPA for a predetermined period, here 2 seconds (S16). Then, after S15 and S16, the process proceeds to S7. The processes of S14 to S16 are executed by the
なお、上述した例では、装着される全ての交換レンズに対して、倍率が2倍までは電子ズームのみが動作するが、装着されたレンズに応じて、電子ズームのみが動作する倍率を変更するようにしてもよい。例えば、比較的広角なズームレンズと比較的望遠のズームレンズとにおいて、電子ズームが動作する範囲を異なるようにしてもよい。例えば、広角なズームレンズの場合は、被写体を見失う確率は低いので、倍率が2倍までは電子ズームが動作するようにし、望遠のズームレンズの場合は、被写体を見失う確率は比較的高くなるので、倍率が3倍までは電子ズームが動作するようにしてもよい。
その場合は、S10で判定される倍率が、比較的広角なズームレンズと比較的望遠のズームレンズでは異なり、かつ、比較的広角なズームレンズと比較的望遠のズームレンズとにおいて、保証される画質のレベルが異なる。
In the above-described example, only the electronic zoom operates for all the interchangeable lenses to be mounted up to a magnification of 2. However, the magnification at which only the electronic zoom operates is changed according to the mounted lens. You may do it. For example, the range in which the electronic zoom operates may be different between a relatively wide-angle zoom lens and a relatively telephoto zoom lens. For example, in the case of a wide-angle zoom lens, the probability of losing sight of the subject is low, so the electronic zoom is operated up to a magnification of 2 times, and in the case of a telephoto zoom lens, the probability of losing the subject is relatively high. The electronic zoom may be operated up to a magnification of 3 times.
In that case, the magnification determined in S10 is different between a relatively wide-angle zoom lens and a relatively telephoto zoom lens, and the image quality guaranteed by the relatively wide-angle zoom lens and the relatively telephoto zoom lens is guaranteed. Different levels.
図9は、図8のS14の見失い判定の処理の流れの例を示すフローチャートである。まず、CPUは、モーション判定部15の加速度センサの出力に基づいて、上下方向あるいは左右方向に所定値以上の動きがあったか否か、すなわち上下左右方向のモーションがあったか否かを判定する(S21)。S21は、撮影機器の動きを判定するモーション判定部を構成する。
FIG. 9 is a flowchart showing an example of the flow of the loss determination process in S14 of FIG. First, based on the output of the acceleration sensor of the
上下左右方向のモーションがなかった場合(S21:NO)、撮像部14の撮像素子により得られた画像の中の中央部の色彩に変化があったか否かが判定される(S22)。S22は、撮像素子の撮像範囲IPAの画像の中心部の色彩の変化を検出する色彩変化検出部を構成する。 When there is no up / down / left / right motion (S21: NO), it is determined whether or not there has been a change in the color of the central portion in the image obtained by the image sensor of the imaging unit 14 (S22). S22 constitutes a color change detection unit that detects a color change at the center of the image in the imaging range IPA of the image sensor.
そして、中央部の色彩に変化がなかった場合(S22:NO)、操作部34に対するユーザによるワイド側へのズーム操作が、所定量以上の急速なズーム操作であるか否かが判定される(S23)。
ユーザによるワイド側へのズーム操作が急速なズーム操作でない場合(S23:NO)、CPUは、ユーザが被写体を見失ったとは判定しない(S24)。しかし、S21、S22、S23のいずれかでYESであったときは、CPUは、ユーザが被写体を見失ったと判定する(S25)。
If there is no change in the color at the center (S22: NO), it is determined whether or not the zoom operation to the wide side by the user on the
When the zoom operation to the wide side by the user is not a rapid zoom operation (S23: NO), the CPU does not determine that the user has lost sight of the subject (S24). However, if the answer is YES in any of S21, S22, and S23, the CPU determines that the user has lost sight of the subject (S25).
ここで、S16の全域表示における周囲画像範囲PAの周囲画像PAPの縮小方法の例について説明する。図10は、周囲画像範囲PAの周囲画像PAPの縮小方法の例を説明するための図である。図10に示すS16の処理は、表示制御部11bにより実行される。
Here, an example of a method for reducing the surrounding image PAP in the surrounding image range PA in the entire area display in S16 will be described. FIG. 10 is a diagram for explaining an example of a method for reducing the surrounding image PAP in the surrounding image range PA. The process of S16 shown in FIG. 10 is executed by the
まず、CPUは、図10のD1は、撮像素子の撮像範囲IPAにおけるズーム範囲ZAと、その周囲の周囲画像範囲PAを示す。周囲画像範囲PAは、8つの領域R1〜R8に分割される。図10の例は、ズーム範囲ZAは、撮像範囲IPAの1/4とする。 First, the CPU D1 in FIG. 10 indicates the zoom range ZA in the imaging range IPA of the imaging device and the surrounding image range PA around it. The surrounding image range PA is divided into eight regions R1 to R8. In the example of FIG. 10, the zoom range ZA is set to ¼ of the imaging range IPA.
図10のD2に示すように、4隅の分割領域(R1,R3,R6,R8で示す領域)は、縦方向と横方向のそれぞれにおいて、1/2に縮小される。また、上下の分割領域(R2,R7で示す領域)は、上下方向には1/2に縮小し、左右方向には、D1におけるR1とR2を合わせた横方向の長さL1を、ズーム範囲ZAの横方向の長さL2で割った数値(ここの例では、1.5)で拡大する。さらに、左右の分割領域(R4,R5で示す領域)は、上下方向には、1.5倍に拡大し、左右方向には、1/2に縮小する。
D3は、以上のようにして周辺画像PAPが縮小表示された状態を示す。D3では、ズーム範囲ZAはそのままの大きさであるので、ズーム画像ZAPを、D4に示すように、拡大する。
As indicated by D2 in FIG. 10, the four corner divided regions (regions indicated by R1, R3, R6, and R8) are reduced to ½ in each of the vertical direction and the horizontal direction. Also, the upper and lower divided areas (areas indicated by R2 and R7) are reduced in half in the vertical direction, and in the horizontal direction, the horizontal length L1 of R1 and R2 in D1 is set to the zoom range. It is enlarged by a numerical value (1.5 in this example) divided by the lateral length L2 of ZA. Further, the left and right divided regions (regions indicated by R4 and R5) are enlarged 1.5 times in the vertical direction and reduced to ½ in the horizontal direction.
D3 shows a state in which the peripheral image PAP is reduced and displayed as described above. In D3, since the zoom range ZA is the same size, the zoom image ZAP is enlarged as shown in D4.
その結果、表示画面18a上には、D4に示すようなアシスト画像が表示されるので、ユーザPは、周辺画像PAP内の被写体の画像を確認することができる。
As a result, since an assist image as shown in D4 is displayed on the
なお、周辺画像範囲PAの周辺画像PAPの縮小方法は、以上図10で説明した方法に限られない。例えば、上述した図10の場合は、上限左右方向において、所定の倍率で単純に縮小及び拡大しているが、周辺画像PAPの周辺にいくほど、変形比率を変えるようにしてもよい。例えば、周辺部までの距離に応じて、縮小あるいは拡大の比率を変更する等である。 Note that the method of reducing the peripheral image PAP in the peripheral image range PA is not limited to the method described above with reference to FIG. For example, in the case of FIG. 10 described above, the upper and left sides are simply reduced and enlarged at a predetermined magnification, but the deformation ratio may be changed toward the periphery of the peripheral image PAP. For example, the reduction or enlargement ratio is changed according to the distance to the peripheral portion.
上述したように、本実施の形態に係る撮影装置は、ユーザが被写体を見失ったときにズーム範囲外を確認可能とする見失い対応機能を有し、かつ本実施の形態に係る撮影装置によれば、撮影画像の画質の劣化を防止しつつ、言い換えれば所定の画質を維持しつつ、被写体の撮影ができる。
(第2の実施の形態)
次に、本発明の第2の実施の形態について説明する。
(構成)
第2の実施の形態に係る撮影装置は、被写体として「月」を撮影する月撮影モードを有する。第2の実施の形態に係る撮影装置の構成は、第1の実施の形態で説明した撮影装置の構成と略同じであるので、以下、第2の実施の形態に係る撮影装置において、第1の実施の形態の撮影装置と異なる構成を、主として説明する。
被写体としての「月」は、濃淡のコントラストが高いのは、輪郭部だけであるので、月画像の輪郭部以外の部分は、コントラストを抑えてノイズ除去処理が可能となる。すなわち、撮像素子からの撮像画像からの切り出し部分を小さく(すなわち大きくズーミング)しても、比較的綺麗な画像が得られるので、被写体としての「月」は、電子ズームを有効利用する本実施の形態に相応しい被写体ということができる。
As described above, the imaging device according to the present embodiment has a function of losing sight that allows the user to check the outside of the zoom range when the user loses sight of the subject, and according to the imaging device according to the present embodiment. In addition, it is possible to shoot a subject while preventing deterioration of the image quality of the captured image, in other words, maintaining a predetermined image quality.
(Second Embodiment)
Next, a second embodiment of the present invention will be described.
(Constitution)
The photographing apparatus according to the second embodiment has a moon photographing mode for photographing “moon” as a subject. Since the configuration of the imaging apparatus according to the second embodiment is substantially the same as the configuration of the imaging apparatus described in the first embodiment, hereinafter, in the imaging apparatus according to the second embodiment, A configuration different from the imaging apparatus of the embodiment will be mainly described.
Since the “moon” as the subject has only a high contrast between the outline and the outline, only the outline part of the moon image can be subjected to noise reduction processing while suppressing the contrast. That is, a relatively beautiful image can be obtained even if the cut-out portion from the captured image from the image sensor is small (ie, greatly zoomed). Therefore, the “moon” as a subject can be effectively used with the electronic zoom. It can be said that the subject is suitable for the form.
よって、上述したズーム範囲ZAを小さくして、「月」を見失ったときにだけ表示されるアシスト画像における周囲画像PAPの部分が比較的広くなるので、ユーザは「月」の位置を把握できる確率は高くなる。
図11は、ユーザPがレンズ3をズーミングしていない状態を説明するための図である。
Therefore, since the portion of the surrounding image PAP in the assist image displayed only when the above-described zoom range ZA is reduced and the “moon” is lost, the probability that the user can grasp the position of the “moon” is relatively large. Becomes higher.
FIG. 11 is a diagram for explaining a state in which the user P is not zooming the
図11に示すように、ユーザPがデジタルカメラ1を手に持って月Mを撮影しようとするとき、ユーザPは表示部18の表示画面18aを見ながら、デジタルカメラ1のレンズ3の向きを調整する。レンズ3は、まだズーミングされておらず、望遠状態にはない。
図11では、点線の枠が、撮像部14により撮像されている撮像範囲IPAを示す。実線の枠で示した表示画面18a上には、月画像MIが画面全体に対して小さく表示されている。
As shown in FIG. 11, when the user P is holding the
In FIG. 11, the dotted frame indicates the imaging range IPA that is captured by the
図12は、ユーザPがレンズ3をズーミングして月Mを撮影する場合を説明するための図である。図12に示すように、ユーザPは、レンズ3の光軸を月Mに向けてズーミングして、表示画面18a上に月画像MIが拡大表示された状態で撮影釦を押すことにより、月Mを撮影したい、とする。図12において、点線の枠が、ユーザPがズーミングしているズーム範囲ZAを示す。
FIG. 12 is a diagram for explaining a case where the user P zooms in on the
しかし、第1の実施の形態で説明したように、ユーザPにとっては、月Mを狭い画角内の略中心に位置させて、実線の枠で示した表示画面18a上に月画像MIが表示されるように、デジタルカメラ1の向きを調整することは容易でない。
However, as described in the first embodiment, for the user P, the moon image MI is displayed on the
ここで、月の大きさと撮像素子の撮像面の大きさについて説明する。図13と図14は、撮像素子の撮像面上に形成される月の像の大きさを説明するための図である。
図13に示すように、月は約30分角(すなわち約0.5度)を有するので(図13では、その半分の15分角が示されている)、月の像M’が、撮像素子の撮像面14aの撮像範囲IPAにおいて1/3の面積を占めるようにするためには、次の式(1)と(2)から、35mmフィルム(縦24mm)換算で、900mmの焦点距離Ftを有するレンズが必要となることが判る。
Here, the size of the moon and the size of the imaging surface of the imaging device will be described. 13 and 14 are diagrams for explaining the size of the image of the moon formed on the imaging surface of the imaging device.
As shown in FIG. 13, since the moon has about 30 arc minutes (that is, about 0.5 degree) (in FIG. 13, half of the 15 arc minutes is shown), the moon image M ′ is captured. In order to occupy an area of 1/3 in the imaging range IPA of the
Ft・tan(1/4度)=4mm ・・・式(1)
Ft=4mm/(tan(1/4度))=900mm ・・・式(2)
一般に900mm相当のレンズは大型であるので、小型の持ち運び易いカメラには、300mm程度の光学ズームしか搭載あるいは装着できない。
Ft.tan (1/4 degree) = 4 mm (1)
Ft = 4 mm / (tan (1/4 degree)) = 900 mm (2)
In general, since a lens equivalent to 900 mm is large, only a 300 mm optical zoom can be mounted or attached to a small camera that is easy to carry.
しかし、2000万画素を有する撮像素子であれば、撮像範囲IPAの撮像面14aの撮像画面の1/9を切り取る3倍のズーミングを行っても、そのズーミングした画像で200万画素の画質が確保できるので、その画像は、ハイビジョンテレビでの表示も可能な画質を有することになる。
However, in the case of an image sensor having 20 million pixels, even if zooming is performed three times that cuts 1/9 of the imaging screen of the
図14は、300mmのレンズにおいて、1度の手ブレが発生した場合を説明するための図である。図14に示すように、手でカメラを構えたときに、光軸Cに対して1度相当の手ブレが発生するが、300mmのレンズの画角が有れば、ユーザPは、900mmの画角では月Mを見失うことがあっても、上述した撮像範囲IPAの画像をアシスト画像として表示すれば、月画像MIがアシスト画像中に含まれるので、ユーザPが月Mを見失うことはない。 FIG. 14 is a diagram for explaining a case where a single camera shake occurs in a 300 mm lens. As shown in FIG. 14, when the camera is held by hand, a camera shake equivalent to 1 degree occurs with respect to the optical axis C. However, if the angle of view of the lens is 300 mm, the user P is 900 mm. Even if the angle of view may cause the moon M to be lost, if the image in the imaging range IPA described above is displayed as an assist image, the moon image MI will be included in the assist image, so the user P will not lose sight of the moon M. .
図15は、アシスト画像に表示される画像を説明するための図である。図14に示すように900mmのズーミング状態で月を見失った場合、点線で示す領域Eの範囲のアシスト画像が表示画面18a上に表示されるが、アシスト画像は、ズーム範囲ZA外に月画像MIを含む。
FIG. 15 is a diagram for explaining an image displayed on the assist image. As shown in FIG. 14, when the moon is lost in the zooming state of 900 mm, an assist image in the area E indicated by the dotted line is displayed on the
図16は、本実施の形態に係るデジタルカメラに対する操作を説明するための図である。ユーザがデジタルカメラ1の操作部20Aに対して所定の操作を、例えば月撮影モード設定釦を押す等の操作を、行うことによって、デジタルカメラ1は月撮影モードに設定される。本体部2の操作部20Aと操作判定部20が、所定のモードとして、「月」を被写体として撮影する月撮影モードを、設定するモード設定部を構成する。
(処理)
次に、デジタルカメラ1の月撮影モード時の処理を説明する。図17は、デジタルカメラ1の月撮影モード時の処理の流れの例を示すフローチャートである。図17の処理は、信号処理及び制御部11のCPUが実行する。図17の処理プログラムは、信号処理及び制御部11内のROM(図示せず)に記憶されている。
なお、図17において、図8と同様の処理については、同じ符号を付し、説明は簡単にして一部省略する。また、ここでは、上述したハイビジョン画像(HD)相当までを電子ズームの限界位置として、ズーム操作量あるいはズーム位置が設定されている場合を説明する。すなわち、図5において、ズーム位置ZP1は、ハイビジョン画像(HD)相当のズーム位置に設定される。
FIG. 16 is a diagram for explaining operations on the digital camera according to the present embodiment. When the user performs a predetermined operation on the
(processing)
Next, processing in the month photographing mode of the
In FIG. 17, the same processes as those in FIG. 8 are denoted by the same reference numerals, and description thereof is simplified and partly omitted. Here, a case will be described in which the zoom operation amount or the zoom position is set with the electronic zoom limit position corresponding to the above-described high-definition image (HD). That is, in FIG. 5, the zoom position ZP1 is set to a zoom position corresponding to a high-definition image (HD).
デジタルカメラ1の電源がオンにされているときに、CPUは、ユーザにより撮影モードが設定されているか否かを判定する(S1)。撮影モードでないとき(S1:NO)は、その他のモードの処理、例えば再生モードの処理、が実行される。
When the
撮影モードであるとき(S1:YES)、CPUは、レンズ3の各種データを取得し(S2)、月撮影モードであるか否かを判定する(S31)。この月撮影モードは、図16で説明したように、デジタルカメラ1がユーザによって月撮影モードに設定されているか否かにより判定される。
When in the shooting mode (S1: YES), the CPU acquires various data of the lens 3 (S2) and determines whether or not the mode is the moon shooting mode (S31). As described with reference to FIG. 16, the moon photographing mode is determined based on whether or not the
デジタルカメラ1が月撮影モードに設定されていない場合、CPUは、上述したS4からS8の処理を実行する。
デジタルカメラ1が月撮影モードに設定されている場合(S31:YES)、CPUは、ズームアップ操作がされたか否かを判定する(S32)。ズームアップ操作がされたときは(S32:YES)、CPUは、ズーミングが撮像部14の撮像素子の中央部のハイビジョン画像(HD)相当部の範囲内で行われているか否かを判定する(S33)。
When the
When the
CPUは、ズーム操作により、ハイビジョン画像(HD)相当部の範囲内でズーミングが行われているときは(S33:YES)、ズーム操作量に応じた電子ズームを行う(S11)。ズーム操作により、ハイビジョン画像(HD)相当部の範囲を超えてズーミングが行われたときは(S33:NO)、CPUは、電子ズームを固定し(S12)、ズーム操作量に応じた光学ズーム制御操作を実行する(S13)。ズーム操作量が、ハイビジョン画像(HD)限界の位置ZP1を超える場合は、ズーム操作量が、ズーム域ZM2の範囲内である場合に対応する。 When zooming is performed within the range corresponding to the high-definition image (HD) by the zoom operation (S33: YES), the CPU performs electronic zoom according to the zoom operation amount (S11). When zooming is performed beyond the range of the high-definition image (HD) equivalent (S33: NO), the CPU fixes the electronic zoom (S12) and controls the optical zoom according to the amount of zoom operation. The operation is executed (S13). The case where the zoom operation amount exceeds the high-definition image (HD) limit position ZP1 corresponds to the case where the zoom operation amount is within the zoom range ZM2.
S32〜S13の処理は、範囲制御部11aにより実行される。よって、S32〜S13の処理は、レンズ3に対するズーム操作に応じて、所定のズーム域内では電子ズームを行い、所定のズーム域を超えると光学ズームを行うようにズーム制御を行うズーム制御部を構成する。
The processing of S32 to S13 is executed by the
S11及びS13の処理の後、CPUは、ユーザが被写体を見失ったか否かを判定する(S14)。この判定方法は、上述した図9に示した処理と同様である。「月」はコンラストが高いので、図9におけるS22の処理(中央部の色彩の変化の有無の検出処理)が、特に有効に機能する。 After the processes of S11 and S13, the CPU determines whether or not the user has lost sight of the subject (S14). This determination method is the same as the processing shown in FIG. Since “Month” has a high contrast, the process of S22 in FIG. 9 (the process of detecting whether there is a change in the color of the central portion) functions particularly effectively.
見失わなければ(S14:NO)、CPUは、選択域画像を表示、すなわちズーム範囲ZAの画像を表示する(S15)。しかし、見失ったときは(S14:YES)、CPUは、表示画面18aに表示される画像を、ズーム範囲ZAから、「月」がはみ出さない範囲の領域Eを拡大して、表示画面18a上に表示する(S24)。よって、S14〜S34の処理は、被写体の見失いが検出されると、撮像素子の撮像範囲中のズーム範囲外の画像を表示部18の表示画面18a上に表示するように、表示画面18aの表示を制御する表示制御部を構成する。
If not lost (S14: NO), the CPU displays the selected area image, that is, displays the image in the zoom range ZA (S15). However, when it is lost (S14: YES), the CPU enlarges the area E in the range where “month” does not protrude from the zoom range ZA on the
「月」を見失った場合に、撮像範囲IPAの全域表示を行ってもよいが、本実施の形態では、「月」がはみ出さない範囲の領域Eが切り出され、その切り出した領域Eの画像が拡大されて、アシスト画像として表示される。よって、切り出した領域Eの画像は、「月」の画像を全部含む。なお、切り出した領域Eの画像は、「月」の画像を全部含なくてもよく、一部(例えば半分)を含むものでもよい。 When the “moon” is lost, the entire imaging range IPA may be displayed. However, in this embodiment, an area E in a range where the “moon” does not protrude is cut out, and an image of the cut-out area E is displayed. Is enlarged and displayed as an assist image. Therefore, the cut out image of the region E includes all the images of “month”. Note that the image of the cut-out area E may not include the entire “month” image, or may include a part (for example, half).
図15において点線で示すように、月画像MIがはみ出さない範囲Eの画像が、切り出されて表示画面18aの大きさまで拡大されて、表示画面18aに表示される。S24の処理は、信号処理及び制御部11内の表示制御部11bにより実行される。
As shown by a dotted line in FIG. 15, an image in a range E where the month image MI does not protrude is cut out and enlarged to the size of the
撮像範囲IPA中において「月」がはみ出さない範囲までの領域Eは、「月」は、背景とのコントラストが高いので、画像処理によって、撮像範囲IPAの中心から月画像MIがはみ出さない範囲を切り出すことができる。 Area E up to the range where the “moon” does not protrude in the imaging range IPA is the range where the moon image MI does not protrude from the center of the imaging range IPA due to image processing because the “moon” has a high contrast with the background. Can be cut out.
すなわち、「月」を見失っている間は、月画像MIがはみ出さない範囲Eの画像が大きさを連続的に変えながら表示されるので、ユーザは、「月」の位置を表示画面18aの真ん中に移動させるように、デジタルカメラ1Aの向きをスムーズに調整することができる。
That is, while losing sight of the “moon”, the image of the range E in which the moon image MI does not protrude is displayed while continuously changing the size, so that the user can change the position of the “moon” on the
以上のように、本実施の形態に係る撮影機器によれば、「月」をズームして撮影する場合に、ユーザが「月」を見失ったときにズーム範囲外を確認可能とする見失い対応機能を有し、かつ本実施の形態に係る撮影装置によれば、月画像の画質の劣化を防止しつつ、言い換えれば所定の画質を維持しつつ、被写体の撮影ができる。 As described above, according to the imaging device according to the present embodiment, when zooming in on the “moon”, when the user loses sight of the “moon”, the user can check out of the zoom range. According to the photographing apparatus according to the present embodiment, the subject can be photographed while preventing the deterioration of the image quality of the moon image, in other words, maintaining the predetermined image quality.
以上のように、上述した2つの実施の形態に係る撮影機器によれば、ユーザが被写体を見失ったときの対応機能を有し、かつ撮影画像の画質の劣化を防止しつつ被写体の撮影ができる撮影機器を提供することができる。
特に、上述した2つの実施の形態に係る撮影機器によれば、ユーザは、被写体の方向、言い換えるとデジタルカメラを向ける方向を、直感的に認識させることができる。
As described above, according to the imaging apparatus according to the above-described two embodiments, the user can take a picture while having a function to cope with the case where the user loses sight of the subject, and preventing deterioration of the image quality of the shot image. A photographing device can be provided.
In particular, according to the photographing apparatus according to the two embodiments described above, the user can intuitively recognize the direction of the subject, in other words, the direction in which the digital camera is directed.
本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。 The present invention is not limited to the above-described embodiments, and various changes and modifications can be made without departing from the scope of the present invention.
1 デジタルカメラ、2 本体部、3 レンズ、11 信号処理及び制御部、11a 範囲制御部、11b 表示制御部、12、13、32 通信部、14 撮像部、15 モーション判定部、16 記録部、17 GPS部、18 表示部、19 方位判定部、20 操作判定部、21 時計部、31 ズームレンズ部、33 駆動部、34 操作部
DESCRIPTION OF
Claims (8)
前記レンズに対するズーム操作に応じて、所定のズーム域内では電子ズームを行い、前記所定のズーム域を超えると光学ズームを行うようにズーム制御を行うズーム制御部と、
前記被写体の見失いが検出されると、前記撮像素子の撮像範囲中のズーム範囲外の画像を表示部の表示画面上に表示するように、前記表示画面の表示を制御する表示制御部と、
を有することを特徴とする撮影機器。 An imaging device that takes light through a zoomable lens at an image sensor and captures a subject,
A zoom control unit that performs electronic zoom within a predetermined zoom range in response to a zoom operation on the lens, and performs zoom control so as to perform optical zoom when the predetermined zoom range is exceeded;
A display control unit that controls display of the display screen so as to display an image outside the zoom range in the imaging range of the imaging device on the display screen of the display unit when a loss of the subject is detected;
An imaging device characterized by comprising:
前記ズーム制御部と前記表示制御部は、前記モード設定部において前記所定のモードが設定された場合に、動作することを特徴とする請求項1に記載の撮影機器。 A mode setting unit for setting a predetermined mode;
The photographing apparatus according to claim 1, wherein the zoom control unit and the display control unit operate when the predetermined mode is set in the mode setting unit.
前記表示制御部は、前記被写体の見失いが検出されると、前記撮像素子の前記撮像範囲の画像から、前記「月」の画像が含まれる範囲を切り出した画像を、前記表示画面上に表示することを特徴とする請求項2に記載の撮影機器。 The predetermined mode is a mode in which the subject is a “moon”,
When the loss of the subject is detected, the display control unit displays, on the display screen, an image obtained by cutting out a range including the “moon” image from the image of the imaging range of the imaging element. The photographing apparatus according to claim 2, wherein
前記被写体の見失いの検出は、前記モーション判定部による前記動きの判定に基づいて行われることを特徴とする請求項1から4のいずれか1つに記載の撮影機器。 A motion determination unit for determining the movement of the photographing device;
5. The photographing apparatus according to claim 1, wherein the detection of the loss of sight of the subject is performed based on the determination of the movement by the motion determination unit.
前記被写体の見失いの検出は、前記色彩変化検出部による前記中心部の前記色彩の変化に基づいて行われることを特徴とする請求項1から4のいずれか1つに記載の撮影機器。 A color change detection unit for detecting a color change at the center of the image of the imaging range of the image sensor;
5. The photographing apparatus according to claim 1, wherein the loss of the subject is detected based on a change in the color of the central portion by the color change detection unit.
前記被写体の見失いの検出は、前記ズーム操作部に対する操作に基づいて行われることを特徴とする請求項1から4のいずれか1つに記載の撮影機器。 A zoom operation unit for performing the zoom operation;
5. The photographing apparatus according to claim 1, wherein the detection of the loss of sight of the subject is performed based on an operation on the zoom operation unit.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010208168A JP5706654B2 (en) | 2010-09-16 | 2010-09-16 | Imaging device, image display method and program |
CN201610438401.4A CN106027895B (en) | 2010-09-16 | 2011-09-15 | Photographic equipment and its control method |
CN201110273097.XA CN102404506B (en) | 2010-09-16 | 2011-09-15 | Photographic equipment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010208168A JP5706654B2 (en) | 2010-09-16 | 2010-09-16 | Imaging device, image display method and program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015038714A Division JP5992561B2 (en) | 2015-02-27 | 2015-02-27 | Photographing equipment and photographing method |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2012065173A true JP2012065173A (en) | 2012-03-29 |
JP2012065173A5 JP2012065173A5 (en) | 2013-10-17 |
JP5706654B2 JP5706654B2 (en) | 2015-04-22 |
Family
ID=45886246
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010208168A Expired - Fee Related JP5706654B2 (en) | 2010-09-16 | 2010-09-16 | Imaging device, image display method and program |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP5706654B2 (en) |
CN (2) | CN106027895B (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014137535A (en) * | 2013-01-18 | 2014-07-28 | Olympus Imaging Corp | Imaging apparatus |
CN104902166A (en) * | 2014-03-05 | 2015-09-09 | 精工爱普生株式会社 | Imaging apparatus and method for controlling imaging apparatus |
JP2016092467A (en) * | 2014-10-30 | 2016-05-23 | キヤノンマーケティングジャパン株式会社 | Imaging device, control method and program therefor |
JP2018037859A (en) * | 2016-08-31 | 2018-03-08 | キヤノン株式会社 | Image processing system and control method |
WO2018070114A1 (en) * | 2016-10-14 | 2018-04-19 | シャープ株式会社 | Imaging device, control method for imaging device, and program |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5931619B2 (en) * | 2012-07-17 | 2016-06-08 | オリンパス株式会社 | Imaging device |
JP6429454B2 (en) * | 2013-11-28 | 2018-11-28 | キヤノン株式会社 | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND IMAGING DEVICE CONTROL PROGRAM |
JP6574645B2 (en) | 2015-08-28 | 2019-09-11 | キヤノン株式会社 | Control device for controlling imaging apparatus, control method for imaging apparatus, and program |
JP6493702B2 (en) | 2017-06-29 | 2019-04-03 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | Control method, imaging apparatus, imaging system, moving object, control method, and program |
CN111586282B (en) * | 2019-02-18 | 2021-08-10 | 北京小米移动软件有限公司 | Shooting method, shooting device, terminal and readable storage medium |
CN111726513A (en) | 2019-03-19 | 2020-09-29 | 杭州海康威视数字技术股份有限公司 | Zooming method and device of imaging equipment and imaging equipment |
CN110807411B (en) * | 2019-10-30 | 2022-07-26 | 维沃移动通信有限公司 | Moon identification method and electronic equipment |
JP6896963B1 (en) * | 2020-01-15 | 2021-06-30 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | Control devices, imaging devices, moving objects, control methods, and programs |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0933793A (en) * | 1995-07-24 | 1997-02-07 | Canon Inc | Image pickup device |
JP2007028283A (en) * | 2005-07-19 | 2007-02-01 | Matsushita Electric Ind Co Ltd | Image sensing device |
JP2008136024A (en) * | 2006-11-29 | 2008-06-12 | Fujifilm Corp | Photographing device, photographing system, and photographing method |
JP2009089172A (en) * | 2007-10-01 | 2009-04-23 | Sony Computer Entertainment Inc | Image display device |
JP2010028158A (en) * | 2008-07-15 | 2010-02-04 | Canon Inc | Imaging apparatus |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3593271B2 (en) * | 1998-12-15 | 2004-11-24 | シャープ株式会社 | Electronic camera device |
JP4352980B2 (en) * | 2004-04-23 | 2009-10-28 | オムロン株式会社 | Enlarged display device and enlarged image control device |
JP2006014221A (en) * | 2004-06-29 | 2006-01-12 | Sony Corp | Imaging apparatus and imaging method |
JP2007074057A (en) * | 2005-09-05 | 2007-03-22 | Matsushita Electric Ind Co Ltd | Imaging apparatus |
JP5036612B2 (en) * | 2008-03-28 | 2012-09-26 | 三洋電機株式会社 | Imaging device |
-
2010
- 2010-09-16 JP JP2010208168A patent/JP5706654B2/en not_active Expired - Fee Related
-
2011
- 2011-09-15 CN CN201610438401.4A patent/CN106027895B/en not_active Expired - Fee Related
- 2011-09-15 CN CN201110273097.XA patent/CN102404506B/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0933793A (en) * | 1995-07-24 | 1997-02-07 | Canon Inc | Image pickup device |
JP2007028283A (en) * | 2005-07-19 | 2007-02-01 | Matsushita Electric Ind Co Ltd | Image sensing device |
JP2008136024A (en) * | 2006-11-29 | 2008-06-12 | Fujifilm Corp | Photographing device, photographing system, and photographing method |
JP2009089172A (en) * | 2007-10-01 | 2009-04-23 | Sony Computer Entertainment Inc | Image display device |
JP2010028158A (en) * | 2008-07-15 | 2010-02-04 | Canon Inc | Imaging apparatus |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014137535A (en) * | 2013-01-18 | 2014-07-28 | Olympus Imaging Corp | Imaging apparatus |
CN104902166A (en) * | 2014-03-05 | 2015-09-09 | 精工爱普生株式会社 | Imaging apparatus and method for controlling imaging apparatus |
CN104902166B (en) * | 2014-03-05 | 2018-03-13 | 精工爱普生株式会社 | The control method of filming apparatus and filming apparatus |
JP2016092467A (en) * | 2014-10-30 | 2016-05-23 | キヤノンマーケティングジャパン株式会社 | Imaging device, control method and program therefor |
JP2018037859A (en) * | 2016-08-31 | 2018-03-08 | キヤノン株式会社 | Image processing system and control method |
WO2018070114A1 (en) * | 2016-10-14 | 2018-04-19 | シャープ株式会社 | Imaging device, control method for imaging device, and program |
Also Published As
Publication number | Publication date |
---|---|
CN106027895B (en) | 2019-04-23 |
CN102404506B (en) | 2016-07-06 |
CN106027895A (en) | 2016-10-12 |
JP5706654B2 (en) | 2015-04-22 |
CN102404506A (en) | 2012-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5706654B2 (en) | Imaging device, image display method and program | |
JP2012222495A (en) | Image processor, image processing method, and program | |
JP6389342B2 (en) | Imaging apparatus and control method thereof | |
JP2009225027A (en) | Imaging apparatus, imaging control method, and program | |
JP2011171832A (en) | Image pickup apparatus | |
JP4977569B2 (en) | Imaging control apparatus, imaging control method, imaging control program, and imaging apparatus | |
JP2006174128A (en) | Imaging apparatus and imaging system | |
JP2013080996A (en) | Imaging device and method of controlling the same | |
WO2017086300A1 (en) | Imaging device and control method therefor, and operation program | |
JP4269344B2 (en) | Electronic camera | |
JP2007336257A (en) | Imaging device having focus-assisting function | |
JP5992561B2 (en) | Photographing equipment and photographing method | |
JP2012053303A (en) | Stereoscopic camera device and electronic information device | |
JP6663282B2 (en) | Imaging device, imaging system, imaging method, and program | |
JP6257715B2 (en) | Display device and method of operating display device | |
JP5637491B2 (en) | Imaging apparatus, imaging method, and program | |
JP2010093579A (en) | Imaging apparatus, method and program for controlling the same | |
JP2007264250A (en) | Photographing device and program | |
JP2005026786A (en) | Image photographing apparatus | |
JP2006217474A (en) | Lens device, digital camera, and optical device | |
JP2010197524A (en) | Image capturing apparatus | |
JP5143816B2 (en) | Imaging device | |
JP2013109079A (en) | Compound-eye imaging device, focusing method of the same and electronic information device | |
JP2010204303A (en) | Imaging apparatus | |
KR101825147B1 (en) | Photographing method for optical stabilizer of the digital image |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130904 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130904 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140415 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140430 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140624 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5706654 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |