JP2017143504A - Imaging device - Google Patents

Imaging device Download PDF

Info

Publication number
JP2017143504A
JP2017143504A JP2016208621A JP2016208621A JP2017143504A JP 2017143504 A JP2017143504 A JP 2017143504A JP 2016208621 A JP2016208621 A JP 2016208621A JP 2016208621 A JP2016208621 A JP 2016208621A JP 2017143504 A JP2017143504 A JP 2017143504A
Authority
JP
Japan
Prior art keywords
signal
focus
distance information
unit
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016208621A
Other languages
Japanese (ja)
Other versions
JP6748847B2 (en
JP2017143504A5 (en
Inventor
山口 淳史
Junji Yamaguchi
淳史 山口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to US15/417,377 priority Critical patent/US9762790B2/en
Publication of JP2017143504A publication Critical patent/JP2017143504A/en
Publication of JP2017143504A5 publication Critical patent/JP2017143504A5/ja
Application granted granted Critical
Publication of JP6748847B2 publication Critical patent/JP6748847B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Studio Devices (AREA)
  • Focusing (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an imaging device for generating a focus assist signal with high accuracy that facilitates the focusing operation during a manual focus operation.SOLUTION: An imaging device includes a distance information calculation unit 5, a high frequency signal extraction unit 1, a focus assist signal generation unit 2, and a signal composing unit 3. The distance information calculation unit 5 calculates distance information of a video signal, and generates a focus range signal from current focus information and the distance information. The high frequency signal extraction unit 1 extracts a high frequency signal of the video signal. The focus assist signal generating unit 2 generates a focus assist signal representing an in-focus area by using the high frequency signal and the focus range signal. The signal composing unit 3 combines the focus assist signal with the video signal to generate a video signal with a focus assist signal.SELECTED DRAWING: Figure 2

Description

本開示は、マニュアルフォーカス操作時に、ユーザがピントを合わせやすくするためのフォーカスアシスト機能を備えた撮像装置に関する。   The present disclosure relates to an imaging apparatus having a focus assist function for facilitating a user to focus during a manual focus operation.

昨今、4Kなどの映像の高解像度化、撮像素子の大判化などに伴い、レンズの被写界深度が浅くなってきている。これにより、以前にも増してマニュアルフォーカス操作による合焦操作が難しくなってきている。   In recent years, the depth of field of a lens has become shallow as the resolution of 4K video and the like increases and the size of an image sensor increases. Thereby, focusing operation by manual focus operation is becoming more difficult than before.

特許文献1は、マニュアルフォーカス操作時に、エッジ検出レベルに応じて、当該エッジの色を波長の長さの順に対応させる撮像装置を開示する。これにより、ピントの合い具合(合焦度合い)に応じて色が変化する。したがって、ユーザが合焦度合いを視覚的に判別できる。   Japanese Patent Application Laid-Open No. 2004-228561 discloses an imaging apparatus that associates the color of the edge in order of the wavelength length according to the edge detection level at the time of manual focus operation. As a result, the color changes according to the degree of focus (degree of focus). Therefore, the user can visually determine the degree of focus.

特開2013−211757号公報JP2013-21757A

特許文献1に記載された撮像装置では、エッジ検出レベルが大きいことを合焦の目安とし、このエッジ検出レベルを視覚的に判別しやすくするために、エッジ検出レベルに応じて、当該エッジの色を波長の長さの順に変化させている。しかし、エッジ検出レベルを合焦の目安にすると、絵柄の影響を大きく受けてしまうため、正確なフォーカスアシスト信号を得ることができない場合がある。すなわち、少しボケたエッジの出やすい絵柄と合焦しているエッジの出にくい絵柄とでは、エッジ検出レベルが逆転してしまう場合があるため、エッジ検出レベルだけで合焦度合いを判別するのが非常に難しい。   In the imaging apparatus described in Patent Document 1, a large edge detection level is used as a guideline for focusing, and in order to easily distinguish the edge detection level visually, the color of the edge is determined according to the edge detection level. Are changed in the order of the wavelength length. However, if the edge detection level is used as a guideline for focusing, the influence of the pattern is greatly affected, so that an accurate focus assist signal may not be obtained. In other words, the edge detection level may be reversed between a slightly blurred edge-prone pattern and a focused edge-prone pattern, so the degree of focus can be determined only by the edge detection level. very difficult.

本開示は、このような問題を解決するためになされたものである。本開示は、エッジ検出レベルと距離情報とを用いることで、正確なフォーカスアシスト信号を得ることができる撮像装置を提供する。   The present disclosure has been made to solve such a problem. The present disclosure provides an imaging apparatus that can obtain an accurate focus assist signal by using an edge detection level and distance information.

本開示における撮像装置は、距離情報算出部と、高周波信号抽出部と、フォーカスアシスト信号生成部と、信号合成部とを備える。距離情報算出部は、映像信号の距離情報を算出し、現在のフォーカス情報と距離情報とから合焦範囲信号を生成する。高周波信号抽出部は、映像信号の高周波信号を抽出する。フォーカスアシスト信号生成部は、高周波信号と合焦範囲信号を用いて、合焦領域を表すフォーカスアシスト信号を生成する。信号合成部は、フォーカスアシスト信号を映像信号に合成してフォーカスアシスト信号付映像信号を生成する。   The imaging device according to the present disclosure includes a distance information calculation unit, a high-frequency signal extraction unit, a focus assist signal generation unit, and a signal synthesis unit. The distance information calculation unit calculates distance information of the video signal and generates a focusing range signal from the current focus information and distance information. The high frequency signal extraction unit extracts a high frequency signal of the video signal. The focus assist signal generation unit generates a focus assist signal representing the focus area using the high frequency signal and the focus range signal. The signal combining unit combines the focus assist signal with the video signal to generate a video signal with a focus assist signal.

本開示における撮像装置は、精度の良いフォーカスアシスト信号を得るのに有効である。   The imaging apparatus according to the present disclosure is effective for obtaining a focus assist signal with high accuracy.

本開示の実施の形態1における撮像装置の構成を示すブロック図1 is a block diagram illustrating a configuration of an imaging apparatus according to Embodiment 1 of the present disclosure. 本開示の実施の形態1における撮像装置のコントローラで実行される、画像処理を示すブロック図The block diagram which shows the image processing performed with the controller of the imaging device in Embodiment 1 of this indication 本開示の実施の形態1における撮像装置の距離情報算出部の動作を説明するための模式図Schematic diagram for explaining the operation of the distance information calculation unit of the imaging apparatus according to the first embodiment of the present disclosure. 本開示の実施の形態1における撮像装置において、インフォーカスのみを強調したフォーカスアシスト信号を生成する過程を説明するための模式図Schematic diagram for describing a process of generating a focus assist signal in which only in-focus is emphasized in the imaging apparatus according to Embodiment 1 of the present disclosure. 本開示の実施の形態1における撮像装置において、フォーカスアシスト信号付映像信号を生成する過程を説明するための模式図Schematic diagram for explaining a process of generating a video signal with a focus assist signal in the imaging apparatus according to Embodiment 1 of the present disclosure. 本開示の実施の形態2における撮像装置の画像処理に関連する構成を示すブロック図2 is a block diagram illustrating a configuration related to image processing of an imaging device according to Embodiment 2 of the present disclosure 本開示の実施の形態2における撮像装置において、代表点のみ算出する場合の距離情報算出部の動作を説明するための模式図Schematic diagram for explaining the operation of the distance information calculation unit in the case of calculating only representative points in the imaging apparatus according to Embodiment 2 of the present disclosure. 本開示の実施の形態2における撮像装置において、代表点のみを算出する場合の補間部の動作を説明するための模式図FIG. 6 is a schematic diagram for explaining the operation of the interpolation unit in the case of calculating only representative points in the imaging apparatus according to Embodiment 2 of the present disclosure. 本開示の実施の形態3における撮像装置の画像処理に関連する構成を示すブロック図FIG. 6 is a block diagram illustrating a configuration related to image processing of an imaging apparatus according to Embodiment 3 of the present disclosure. 本開示の実施の形態3における撮像装置において、エッジ近傍領域を判定する動作を説明するための模式図Schematic diagram for explaining an operation of determining an edge vicinity region in the imaging apparatus according to Embodiment 3 of the present disclosure. 本開示の実施の形態3における撮像装置において、エッジ近傍領域のみ距離情報を算出する動作を説明するための模式図FIG. 7 is a schematic diagram for explaining an operation of calculating distance information only in the edge vicinity region in the imaging apparatus according to Embodiment 3 of the present disclosure. 本開示の実施の形態3における撮像装置において、エッジ近傍以外の領域の合焦範囲信号を補間する動作を説明するための模式図FIG. 7 is a schematic diagram for explaining an operation of interpolating a focusing range signal in a region other than the vicinity of an edge in the imaging apparatus according to the third embodiment of the present disclosure.

以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。   Hereinafter, embodiments will be described in detail with reference to the drawings as appropriate. However, more detailed description than necessary may be omitted. For example, detailed descriptions of already well-known matters and repeated descriptions for substantially the same configuration may be omitted. This is to avoid the following description from becoming unnecessarily redundant and to facilitate understanding by those skilled in the art.

なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために、提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。   The accompanying drawings and the following description are provided to enable those skilled in the art to fully understand the present disclosure, and are not intended to limit the subject matter described in the claims.

(実施の形態1)
以下、図1〜図5を用いて、実施の形態1を説明する。
(Embodiment 1)
The first embodiment will be described below with reference to FIGS.

[1−1.構成]
図1は、本開示の実施の形態1における撮像装置の構成を示すブロック図である。
[1-1. Constitution]
FIG. 1 is a block diagram illustrating a configuration of an imaging apparatus according to Embodiment 1 of the present disclosure.

図1は、本開示の実施の形態1における撮像装置100の構成を示すブロック図である。撮像装置100は、レンズ鏡筒102と、カメラ本体101を備える。レンズ鏡筒102は、図示しない、フォーカスレンズとズームレンズを含む光学系、絞り等を備える。カメラ本体101は、イメージセンサ103と、コントローラ104と、表示部105とを備える。   FIG. 1 is a block diagram illustrating a configuration of the imaging device 100 according to the first embodiment of the present disclosure. The imaging apparatus 100 includes a lens barrel 102 and a camera body 101. The lens barrel 102 includes an optical system (not shown) including a focus lens and a zoom lens, a diaphragm, and the like. The camera body 101 includes an image sensor 103, a controller 104, and a display unit 105.

なお、本実施の形態では、撮像装置100は、レンズ鏡筒102とカメラ本体101とが一体の構成について説明するが、レンズ鏡筒102が交換レンズで構成され、交換レンズとカメラ本体とが分離可能な交換レンズ方式の撮像装置であってもよい。   In the present embodiment, the imaging apparatus 100 will be described with a configuration in which the lens barrel 102 and the camera body 101 are integrated. However, the lens barrel 102 is configured by an interchangeable lens, and the interchangeable lens and the camera body are separated. A possible interchangeable lens imaging device may be used.

イメージセンサ103は、レンズ鏡筒102を介して入射される被写体像を撮像して映像信号を生成する。イメージセンサ103は、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ又はCCD(Charge Coupled Devices)イメージセンサなどである。生成された映像信号は、コントローラ104で各種の画像処理が施される。ここで言う各種の画像処理とは、例えば、ガンマ補正処理、ホワイトバランス補正処理、キズ補正処理、YC(輝度・色差)変換処理、電子ズーム処理、及びJPEG(Joint Photographic Experts Group)圧縮処理等であるが、これらに限定されるものではない。コントローラ104は、上述の画像処理に加えて、撮像装置100全体を制御する。コントローラ104は、ハードワイヤードな電子回路で構成してもよいし、プログラムを用いたマイクロコンピュータなどで構成してもよい。表示部105は、カメラ本体101の背面に配置される。表示部105は、コントローラ104で処理された表示用の映像信号が示す画像を表示する。表示部105は、動画像も静止画も選択的に表示可能である。表示部105は、画像の他、撮像装置100全体の設定条件等を表示可能である。表示部105は、液晶モニタ又は有機EL(electro−luminescence)モニタなどである。   The image sensor 103 captures a subject image incident through the lens barrel 102 and generates a video signal. The image sensor 103 is a CMOS (Complementary Metal Oxide Semiconductor) image sensor or a CCD (Charge Coupled Devices) image sensor. The generated video signal is subjected to various image processing by the controller 104. Examples of the various types of image processing include gamma correction processing, white balance correction processing, scratch correction processing, YC (luminance / color difference) conversion processing, electronic zoom processing, and JPEG (Joint Photographic Experts Group) compression processing. However, it is not limited to these. The controller 104 controls the entire imaging apparatus 100 in addition to the image processing described above. The controller 104 may be configured with a hard-wired electronic circuit or a microcomputer using a program. The display unit 105 is disposed on the back surface of the camera body 101. The display unit 105 displays an image indicated by the display video signal processed by the controller 104. The display unit 105 can selectively display both moving images and still images. The display unit 105 can display setting conditions and the like of the entire imaging apparatus 100 in addition to images. The display unit 105 is a liquid crystal monitor or an organic EL (electro-luminescence) monitor.

図2は、本開示の実施の形態1における撮像装置100のコントローラ104で実行される、画像処理を示すブロック図である。撮像装置100は、高周波信号抽出部1と、フォーカスアシスト信号生成部2と、信号合成部3と、メモリ回路部4と、距離情報算出部5とを備える。   FIG. 2 is a block diagram illustrating image processing executed by the controller 104 of the imaging device 100 according to Embodiment 1 of the present disclosure. The imaging apparatus 100 includes a high-frequency signal extraction unit 1, a focus assist signal generation unit 2, a signal synthesis unit 3, a memory circuit unit 4, and a distance information calculation unit 5.

図2に示す構成ブロックへの入力は、レンズ鏡筒102の図示しない操作部をユーザが操作することにより入力される、異なるフォーカス位置での映像信号と、フォーカス操作に関するフォーカス情報である。   The inputs to the configuration block shown in FIG. 2 are video signals at different focus positions and focus information related to the focus operation, which are input by the user operating an operation unit (not shown) of the lens barrel 102.

高周波信号抽出部1は、映像信号の高周波信号を抽出する。   The high frequency signal extraction unit 1 extracts a high frequency signal of the video signal.

距離情報算出部5は、DFD(Depth From Defocus)技術を用いて、映像信号の領域ごとの距離情報を算出する。DFD技術とは、異なるフォーカス位置での2枚以上の映像信号と、それぞれの映像信号に対するフォーカス情報と、レンズのぼけ情報とを用いて、映像信号のぼけ方の違いに基づき、映像信号の領域ごとの距離情報を算出する技術である。   The distance information calculation unit 5 calculates distance information for each area of the video signal using a DFD (Depth From Defocus) technique. The DFD technology uses two or more video signals at different focus positions, focus information for each video signal, and lens blur information, and based on the difference in the blur method of the video signal, This is a technique for calculating distance information for each.

メモリ回路部4は、距離情報算出部5で距離情報を算出するのに必要な、異なるフォーカス位置での2枚以上の映像信号およびフォーカス情報を保存する。   The memory circuit unit 4 stores two or more video signals and focus information at different focus positions necessary for the distance information calculation unit 5 to calculate the distance information.

フォーカスアシスト信号生成部2は、高周波信号抽出部1で生成された高周波信号と、距離情報算出部5で生成された合焦範囲信号とを用いて、合焦領域のみを強調したフォーカスアシスト信号を生成する。   The focus assist signal generation unit 2 uses the high frequency signal generated by the high frequency signal extraction unit 1 and the focus range signal generated by the distance information calculation unit 5 to generate a focus assist signal that emphasizes only the focus area. Generate.

信号合成部3は、フォーカスアシスト信号生成部2で生成されたインフォーカスのみを強調したフォーカスアシスト信号を元の映像信号に合成する。   The signal synthesizer 3 synthesizes the focus assist signal in which only the in-focus generated by the focus assist signal generator 2 is emphasized with the original video signal.

信号合成部3で生成された映像信号は、表示部105に表示される。   The video signal generated by the signal synthesis unit 3 is displayed on the display unit 105.

[1−2.動作]
以上のように構成された撮像装置100について、その動作を説明する。撮像装置100は、映像信号の合焦している映像領域が判別しやすいように、合焦領域の映像信号のみを強調するフォーカスアシスト信号を合成したフォーカスアシスト信号付映像信号を出力する。例えば、映像信号の合焦している領域のみに赤色のエッジが合成され、合焦している映像領域が一目でわかるような映像信号を出力する。以下、それぞれの動作について詳細に説明する。
[1-2. Operation]
The operation of the imaging apparatus 100 configured as described above will be described. The imaging apparatus 100 outputs a video signal with a focus assist signal obtained by synthesizing a focus assist signal that emphasizes only the video signal in the focused area so that the focused video area of the video signal can be easily identified. For example, a red edge is synthesized only in the focused area of the video signal, and a video signal is output so that the focused video area can be seen at a glance. Hereinafter, each operation will be described in detail.

距離の違うところに置かれた2つの人形を撮影している場合について説明する。撮影者が表示部105の画面を見た時の画面右側の四角の胴体を持つ人形は撮像装置100から遠い距離に置かれている。撮影者が表示部105の画面を見た時の画面左側の楕円の胴体を持つ人形は撮像装置100から近い距離に置かれている。撮像装置100から遠いところに置かれている人形から、撮像装置100から近いところに置かれている人形に、フォーカスを移動させた場合を考える。図3において、ピントが合っている人形を黒線で、ピントがぼけている人形を太い灰色の線で表す。フォーカス位置が遠い映像では、画面右側の人形にピントがあっており、画面左側の人形は、ぼけている。フォーカス位置が近い映像では、画面右側の人形はぼけており、画面左側の人形にはピントが合っている。現在は、フォーカス位置が近い映像である。   A case where two dolls placed at different distances are photographed will be described. A doll having a square torso on the right side of the screen when the photographer views the screen of the display unit 105 is placed at a distance from the imaging device 100. A doll having an elliptical torso on the left side of the screen when the photographer views the screen of the display unit 105 is placed at a short distance from the imaging device 100. Consider a case where the focus is moved from a doll placed far from the imaging device 100 to a doll placed closer to the imaging device 100. In FIG. 3, a focused doll is indicated by a black line, and a focused doll is indicated by a thick gray line. In an image with a far focus position, the doll on the right side of the screen is in focus, and the doll on the left side of the screen is blurred. In the image with close focus, the doll on the right side of the screen is blurred and the doll on the left side of the screen is in focus. Currently, the image is close to the focus position.

この際のフォーカスアシスト信号付映像信号の生成の過程を図3〜図5を用いて説明する。   The process of generating a video signal with a focus assist signal at this time will be described with reference to FIGS.

図3は、本開示の実施の形態1における撮像装置100の距離情報算出部5の動作を説明するための模式図である。   FIG. 3 is a schematic diagram for explaining the operation of the distance information calculation unit 5 of the imaging apparatus 100 according to Embodiment 1 of the present disclosure.

DFDの演算には、異なるフォーカス位置での2枚以上の映像信号と、それぞれの映像信号に対するフォーカス情報と、レンズのボケ情報とが必要である。フォーカス位置が遠いところから、近いところに移動させた際の映像信号は、常にメモリ回路部4に入力され、適宜保存されている。メモリ回路部4に保存された以前のフォーカス位置が遠い映像と現在のフォーカス位置が近い映像との2枚の映像、および、あらかじめ保存されているレンズのボケ情報からDFD演算を行うと、距離情報が算出される。図3の距離情報において、画面左側の楕円の胴体を持つ人形の存在する領域が撮像装置100から近い距離の領域、画面右側の四角の胴体を持つ人形の存在する領域が撮像装置100から遠い距離の領域を表している。現在のフォーカス情報と距離情報から、現在の映像に対して合焦している領域を判別することができる。合焦している領域は、図3において合焦範囲信号が図3の右のブロックにおいて黒色で示された領域である。このようにして、距離情報算出部5は合焦範囲信号を出力する。   The calculation of DFD requires two or more video signals at different focus positions, focus information for each video signal, and lens blur information. The video signal when the focus position is moved from a far place to a close place is always input to the memory circuit unit 4 and appropriately stored. When the DFD calculation is performed from the two images of the image with the far focus position stored in the memory circuit unit 4 and the image with the close current focus position and the lens blur information stored in advance, the distance information is obtained. Is calculated. In the distance information of FIG. 3, a region where a doll having an elliptical body on the left side of the screen is close to the imaging device 100, and a region where a doll having a square body on the right side of the screen is far from the imaging device 100. Represents the area. From the current focus information and distance information, it is possible to determine a region focused on the current video. The focused area is an area where the focus range signal is shown in black in the right block of FIG. 3 in FIG. In this way, the distance information calculation unit 5 outputs a focus range signal.

図4は、本開示の実施の形態1における撮像装置100において、インフォーカスのみを強調したフォーカスアシスト信号を生成する過程を説明するための模式図である。図4を用いて、インフォーカスのみを強調したフォーカスアシスト信号の生成動作を説明する。   FIG. 4 is a schematic diagram for explaining a process of generating a focus assist signal in which only in-focus is emphasized in the imaging apparatus 100 according to Embodiment 1 of the present disclosure. A focus assist signal generation operation in which only in-focus is emphasized will be described with reference to FIG.

高周波信号抽出部1は、ハイパスフィルタ処理をし、映像信号の高周波信号を抽出する。   The high-frequency signal extraction unit 1 performs high-pass filter processing and extracts a high-frequency signal of the video signal.

現在の映像信号は、フォーカス位置が近い映像であるので、画面左側の人形にピントが合っており、画面右側の人形はピントがぼけている。ピントが合うに従い、映像の高周波信号が多くなるため、この映像にハイパスフィルタ処理をすると、図4の高周波信号(エッジ信号)に示すように、画面左側の人形のエッジ部分を抽出したような信号を得る。しかしながら、この高周波信号は絵柄の影響も同時に大きく受けるため、コントラストが強い絵柄の場合はピントが多少ぼけていたとしても、図4のエッジ信号に示すように、画面右側の人形のエッジ部分を抽出したような信号も検出されてしまう。   Since the current video signal is an image with a close focus position, the doll on the left side of the screen is in focus and the doll on the right side of the screen is out of focus. As the focus is adjusted, the high-frequency signal of the video increases, so when high-pass filter processing is performed on this video, a signal such as the edge portion of the doll on the left side of the screen is extracted as shown in the high-frequency signal (edge signal) of FIG. Get. However, because this high-frequency signal is also greatly affected by the pattern, the edge part of the doll on the right side of the screen is extracted as shown in the edge signal in FIG. 4 even if the pattern with strong contrast is slightly out of focus. Such a signal is also detected.

フォーカスアシスト信号生成部2は、エッジ信号に対して、距離情報算出部5からの合焦範囲信号を用いて、合焦範囲のみのエッジ信号を抽出して、インフォーカスのみを強調したフォーカスアシスト信号(FA信号)を生成する。図4では、強調する方法として、合焦領域の高周波信号部分を2重線で表示した信号を生成している。   The focus assist signal generation unit 2 uses the focus range signal from the distance information calculation unit 5 to extract the edge signal of only the focus range, and emphasizes only the in-focus. (FA signal) is generated. In FIG. 4, as a method for emphasizing, a signal in which a high-frequency signal portion in a focused area is displayed with a double line is generated.

なお、強調する方法は、2重線に限らず、赤色や青色に色変換してもよいし、合焦範囲信号を用いて抽出した高周波信号を用いれば、どのような強調の方法であってもよい。   Note that the emphasis method is not limited to the double line, and may be converted into red or blue, and any emphasis method may be used if a high-frequency signal extracted using the focus range signal is used. Also good.

図5は、本開示の実施の形態1における撮像装置100において、フォーカスアシスト信号付映像信号を生成する過程を説明する模式図である。   FIG. 5 is a schematic diagram illustrating a process of generating a video signal with a focus assist signal in the imaging apparatus 100 according to Embodiment 1 of the present disclosure.

上記で図4を用いて説明したように、インフォーカスのみを強調したフォーカスアシスト信号が生成されているため、元の映像信号に合成することでフォーカスアシスト信号付映像信号を生成する。   As described above with reference to FIG. 4, since the focus assist signal in which only the in-focus is emphasized is generated, the video signal with the focus assist signal is generated by synthesizing with the original video signal.

なお、合成の方法は、加算でも置換でもその他の方法でもよい。   The synthesis method may be addition, replacement, or other methods.

[1−3.効果等]
以上のように、本実施の形態において、撮像装置100は、距離情報算出部5と、高周波信号抽出部1と、フォーカスアシスト信号生成部2と、信号合成部3と、を備える。距離情報算出部5は、映像信号の距離情報を算出し、現在のフォーカス情報と距離情報とから合焦範囲信号を生成する。高周波信号抽出部1は、映像信号の高周波信号を抽出する。フォーカスアシスト信号生成部2は、高周波信号と合焦範囲信号とを用いて、合焦領域を表すフォーカスアシスト信号を生成する。信号合成部3は、フォーカスアシスト信号を映像信号に合成してフォーカスアシスト信号付映像信号を生成する。
[1-3. Effect]
As described above, in the present embodiment, the imaging apparatus 100 includes the distance information calculation unit 5, the high frequency signal extraction unit 1, the focus assist signal generation unit 2, and the signal synthesis unit 3. The distance information calculation unit 5 calculates distance information of the video signal and generates a focusing range signal from the current focus information and distance information. The high frequency signal extraction unit 1 extracts a high frequency signal of the video signal. The focus assist signal generation unit 2 generates a focus assist signal representing the focus area using the high frequency signal and the focus range signal. The signal combining unit 3 combines the focus assist signal with the video signal to generate a video signal with a focus assist signal.

これにより、合焦している領域のみ強調されたフォーカスアシスト信号を合成できる。このため、正確な合焦動作が可能になる。   Thereby, it is possible to synthesize a focus assist signal in which only an in-focus area is emphasized. For this reason, an accurate focusing operation becomes possible.

また、本実施の形態において、撮像装置100は、映像信号の高周波信号を元にフォーカスアシスト信号を生成する。   In the present embodiment, the imaging apparatus 100 generates a focus assist signal based on the high-frequency signal of the video signal.

これにより、生成されるフォーカスアシスト信号付映像信号は高精細な映像信号となる。このため、違和感のない合焦動作が可能になる。   Thereby, the generated video signal with a focus assist signal becomes a high-definition video signal. For this reason, a focusing operation without a sense of incongruity becomes possible.

(実施の形態2)
実施の形態2は、映像領域をブロック状に分割し、代表点のみ選択的に距離情報を算出し、代表点のみの距離情報から補間して映像全体に適応する合焦範囲信号を生成する点が、実施の形態1と異なる。以下、実施の形態1と異なる部分を中心に、図6〜図8を用いて、実施の形態2を説明する。
(Embodiment 2)
Embodiment 2 divides a video area into blocks, calculates distance information selectively only at representative points, and generates a focusing range signal adapted to the entire video by interpolation from distance information only at representative points. However, this is different from the first embodiment. Hereinafter, the second embodiment will be described with reference to FIGS. 6 to 8 focusing on the differences from the first embodiment.

[2−1.構成]
図6は、本開示の実施の形態2における撮像装置100の画像処理に関連する構成を示すブロック図である。図6において、図2と同じ構成については同じ符号を用いる。
[2-1. Constitution]
FIG. 6 is a block diagram illustrating a configuration related to image processing of the imaging apparatus 100 according to the second embodiment of the present disclosure. In FIG. 6, the same reference numerals are used for the same components as those in FIG.

実施の形態2における撮像装置100は、位置選択信号生成部6と、補間部7をさらに備える。   The imaging apparatus 100 according to Embodiment 2 further includes a position selection signal generation unit 6 and an interpolation unit 7.

位置選択信号生成部6は、映像領域をブロック状に分割し、代表点のみ選択的に演算するように距離算出オン/オフ(ON/OFF)信号を生成する。   The position selection signal generation unit 6 divides the video area into blocks, and generates a distance calculation on / off (ON / OFF) signal so that only representative points are selectively calculated.

補間部7は、映像領域を分割したブロック全体に代表点の演算結果を適用するように補間する。   The interpolation unit 7 performs interpolation so that the calculation result of the representative point is applied to the entire block obtained by dividing the video area.

[2−2.動作]
以上のように構成された撮像装置100について、その動作を以下に説明する。
[2-2. Operation]
The operation of the imaging apparatus 100 configured as described above will be described below.

図7は、本開示の実施の形態2における撮像装置100において、代表点のみ算出する場合の距離情報算出部5の動作を説明するための模式図である。   FIG. 7 is a schematic diagram for explaining the operation of the distance information calculation unit 5 when only the representative point is calculated in the imaging device 100 according to the second embodiment of the present disclosure.

実施の形態1と同様に、撮像装置100からの距離の違うところに置かれた2つの人形を撮影している場合について説明する。画面右側の四角の胴体を持つ人形は撮像装置100から遠い距離に置かれており、画面左側の楕円の胴体を持つ人形は撮像装置100から近い距離に置かれている。遠いところの人形から近いところの人形にフォーカスを移動させた場合を考える。   As in the first embodiment, a case where two dolls placed at different distances from the imaging device 100 are photographed will be described. A doll having a square torso on the right side of the screen is placed at a distance from the imaging device 100, and a doll having an elliptical body on the left side of the screen is placed at a distance from the imaging device 100. Consider a case where the focus is moved from a distant doll to a close doll.

この場合の映像信号全体の合焦範囲信号の生成の過程を、図7及び図8を用いて説明する。   The process of generating a focusing range signal for the entire video signal in this case will be described with reference to FIGS.

図7においては、映像領域を2x2画素のブロックに分割し、左上の画素をブロックの代表点としている。すなわち、2x2画素のブロックにおいて、左上の画素に対する距離情報のみを算出する。さらに、実施の形態1と同様に、現在のフォーカス情報を用いて現在の映像に対して合焦している領域を判別し、2x2のブロックで左上のみの合焦範囲信号を出力する。   In FIG. 7, the video area is divided into 2 × 2 pixel blocks, and the upper left pixel is used as a representative point of the block. That is, in the 2 × 2 pixel block, only distance information for the upper left pixel is calculated. Further, as in the first embodiment, the current focus information is used to determine a region focused on the current video, and a focus range signal for only the upper left is output in a 2 × 2 block.

図8は、本開示の実施の形態2における撮像装置において、代表点のみを算出する場合の補間部7の動作を説明するための模式図である。   FIG. 8 is a schematic diagram for explaining the operation of the interpolation unit 7 when only the representative points are calculated in the imaging apparatus according to the second embodiment of the present disclosure.

代表点の合焦範囲信号から、ブロックの残りの画素領域の合焦範囲信号を補間処理にて生成する。図8においては、代表点の合焦範囲信号をそのままブロックの残りの画素領域の合焦範囲信号として出力する。   From the focus range signal of the representative point, a focus range signal of the remaining pixel area of the block is generated by interpolation processing. In FIG. 8, the focus range signal of the representative point is output as it is as the focus range signal of the remaining pixel area of the block.

映像信号全体の合焦範囲信号は、インフォーカス領域を判別するために、実施の形態1と同様に使用される。   The focus range signal of the entire video signal is used in the same manner as in the first embodiment in order to determine the in-focus area.

なお、ブロックに分割する領域は、2x2画素の領域でなくてもよく、4x4画素でも、8x4画素でもよい。   Note that the region divided into blocks may not be a 2 × 2 pixel region, and may be a 4 × 4 pixel or an 8 × 4 pixel.

なお、ブロックに分割した領域の代表点は、左上の画素でなくてもよい。   The representative point of the area divided into blocks may not be the upper left pixel.

なお、補間の方法は、どのような補間でもよく、例えば周辺の代表点の合焦範囲信号から線形補間処理にて算出してもよい。   Note that any interpolation method may be used. For example, the interpolation method may be calculated by linear interpolation processing from the in-focus range signals of the representative points in the vicinity.

なお、補間処理する順番についても、代表点のみの距離情報を補間処理して映像信号全体の距離情報を算出した後に、現在のフォーカス情報に基づき合焦範囲信号を算出してもよい。   As for the order of interpolation processing, the focus range signal may be calculated based on the current focus information after the distance information of only the representative point is interpolated to calculate the distance information of the entire video signal.

高周波信号抽出部1とフォーカスアシスト信号生成部2と信号合成部3とについては、実施の形態1と同様の動作であるため、説明は省略する。   Since the high-frequency signal extraction unit 1, the focus assist signal generation unit 2, and the signal synthesis unit 3 are the same operations as those in the first embodiment, description thereof is omitted.

[2−3.効果等]
以上のように、本実施の形態において、撮像装置100は、位置選択信号生成部6と補間部7とをさらに備えてもよい。位置選択信号生成部6は、映像領域をブロック状に分割し、分割されたブロック状の領域の代表点を演算するように距離算出オン/オフ信号を生成する。補間部7は、位置選択信号生成部が出力する信号に従い、全領域の合焦範囲信号を得る。
[2-3. Effect]
As described above, in the present embodiment, the imaging apparatus 100 may further include the position selection signal generation unit 6 and the interpolation unit 7. The position selection signal generation unit 6 divides the video area into blocks and generates a distance calculation on / off signal so as to calculate the representative points of the divided block areas. The interpolation unit 7 obtains a focusing range signal for the entire region in accordance with the signal output from the position selection signal generation unit.

これにより、距離情報を算出する演算量を少なくすることができる。そのため、回路の消費電力、回路規模、もしくはその両方を少なくすることができる。   Thereby, the calculation amount which calculates distance information can be decreased. Therefore, power consumption of the circuit, circuit scale, or both can be reduced.

また、演算量が少なくなると、演算終了が早くなり、撮像装置100の映像遅延を少なくすることができる。   Further, when the calculation amount is reduced, the calculation is completed earlier, and the video delay of the imaging apparatus 100 can be reduced.

(実施の形態3)
実施の形態3では、映像領域からエッジ近傍領域を判定し、エッジ近傍領域のみ選択的に距離情報を算出する。エッジ近傍領域ではないと判定された領域では、強制的に非合焦範囲とした合焦範囲信号を用いてフォーカスアシスト信号付映像信号を生成する。これらの点が実施の形態1および実施の形態2と異なる。以下、実施の形態1および実施の形態2と異なる部分を中心に、図9〜図12を用いて、実施の形態3を説明する。
(Embodiment 3)
In Embodiment 3, the edge vicinity region is determined from the video region, and the distance information is selectively calculated only in the edge vicinity region. In a region determined not to be an edge vicinity region, a video signal with a focus assist signal is generated using a focus range signal that is forcibly set as a non-focus range. These points are different from the first and second embodiments. Hereinafter, the third embodiment will be described with reference to FIGS. 9 to 12 with a focus on differences from the first and second embodiments.

[3−1.構成]
図9は、本開示の実施の形態3における撮像装置100の画像処理に関連する構成を示すブロック図である。図9において、図2および図6と同じ構成については同じ符号を用いる。
[3-1. Constitution]
FIG. 9 is a block diagram illustrating a configuration related to image processing of the imaging apparatus 100 according to Embodiment 3 of the present disclosure. 9, the same reference numerals are used for the same configurations as those in FIGS. 2 and 6.

本実施の形態3における撮像装置100は、図2に示す実施の形態1の構成に加えて、エッジ近傍領域判定部8とエッジ近傍領域外補間部9とをさらに備える。   The imaging apparatus 100 according to the third embodiment further includes an edge vicinity region determination unit 8 and an edge vicinity region outside interpolation unit 9 in addition to the configuration of the first embodiment shown in FIG.

エッジ近傍領域判定部8は、映像領域のエッジ近傍領域を判定し、エッジ近傍領域のみ選択的に距離情報を算出するようにエッジ近傍領域情報を生成する。エッジ近傍領域の決め方は、画素の縦又は横のラインの輝度レベルの変化量が所定レベル以上の画素をエッジ近傍領域としてもよい。   The edge vicinity area determination unit 8 determines an edge vicinity area of the video area, and generates edge vicinity area information so as to selectively calculate distance information only in the edge vicinity area. As a method of determining the edge vicinity region, a pixel whose amount of change in luminance level of a vertical or horizontal line of the pixel is a predetermined level or more may be set as the edge vicinity region.

エッジ近傍領域外補間部9は、エッジ近傍でない領域の合焦範囲信号を強制的に非合焦とする。   The edge vicinity region outside interpolation unit 9 forcibly defocuses the focus range signal in the region not near the edge.

[3−2.動作]
以上のように構成された撮像装置100について、その動作を説明する。
[3-2. Operation]
The operation of the imaging apparatus 100 configured as described above will be described.

実施の形態1と同様に、距離の違うところに置かれた2つの人形を撮影している場合について説明する。画面右側の四角の胴体を持つ人形は撮像装置100から遠い距離に置かれており、画面左側の楕円の胴体を持つ人形は撮像装置100から近い距離に置かれている。遠いところの人形から近いところの人形にフォーカスを移動させる場合を考える。   Similar to the first embodiment, a case where two dolls placed at different distances are photographed will be described. A doll having a square torso on the right side of the screen is placed at a distance from the imaging device 100, and a doll having an elliptical body on the left side of the screen is placed at a distance from the imaging device 100. Consider the case where the focus is moved from a distant doll to a close doll.

この場合の映像信号全体の合焦範囲信号の生成の過程を図10〜図12を用いて説明する。   The process of generating the focusing range signal for the entire video signal in this case will be described with reference to FIGS.

図10は、本開示の実施の形態3における撮像装置において、エッジ近傍領域を判定する動作を説明するための模式図である。   FIG. 10 is a schematic diagram for explaining an operation of determining an edge vicinity region in the imaging apparatus according to Embodiment 3 of the present disclosure.

エッジ近傍領域判定部8は、映像信号にハイパスフィルタ処理をし、エッジ信号を抽出する。ハイパスフィルタ処理は、映像信号の変化量を検出するため、映像のエッジ部分で、信号レベルが変化し、エッジ以外の平坦な領域では信号レベルがほぼ一定になる。平坦な領域で信号レベルが完全に一定にならない理由は、わずかなノイズ又は色むらなどが存在するからである。エッジ近傍領域判定部8は、映像信号に含まれるノイズ成分も考慮し、エッジ信号のレベル判定をおこなうことでエッジ近傍領域かどうかを判定する。   The edge vicinity region determination unit 8 performs high-pass filter processing on the video signal and extracts an edge signal. Since the high-pass filter process detects the amount of change in the video signal, the signal level changes at the edge portion of the video, and the signal level becomes substantially constant in a flat region other than the edge. The reason why the signal level is not completely constant in the flat region is that there is slight noise or uneven color. The edge vicinity region determination unit 8 also considers a noise component included in the video signal, and determines whether the region is an edge vicinity region by performing level determination of the edge signal.

なお、エッジ近傍領域を判定する方法は、上記に限るものではない。例えば、判定結果の安定化を図るために収縮処理、膨張処理、またはノイズ除去処理などを追加してもよい。さらに、上記方法で得られたエッジから所定画素以内、例えば、10画素以内の範囲をエッジ近傍領域としてもよい。   Note that the method for determining the edge vicinity region is not limited to the above. For example, a contraction process, an expansion process, or a noise removal process may be added to stabilize the determination result. Furthermore, a range within a predetermined pixel, for example, within 10 pixels, from the edge obtained by the above method may be set as the edge vicinity region.

図11は、本開示の実施の形態3における撮像装置において、エッジ近傍領域のみ距離情報を算出する動作を説明するための模式図である。   FIG. 11 is a schematic diagram for explaining an operation of calculating distance information only in the edge vicinity region in the imaging apparatus according to Embodiment 3 of the present disclosure.

エッジ近傍領域情報に基づき、エッジ近傍領域のみ距離情報を算出する。従って、図11に示すエッジ近傍領域のみの距離情報では、エッジ近傍領域以外(灰色の部分)が距離情報を算出していない領域となり、画面左側の楕円の胴体を持つ人形のエッジ近傍部分が撮像装置100から近い距離の領域、画面右側の四角の胴体を持つ人形のエッジ近傍部分が撮像装置100から遠い距離の領域となる。このエッジ近傍領域のみの距離情報と現在のフォーカス情報とから合焦範囲を判定する。その結果、エッジ近傍領域のみの合焦範囲信号を得る。映像全体は、黒色の合焦領域と、白色の非合焦領域と、灰色の未演算領域とに判別される。   Based on the edge vicinity area information, distance information is calculated only for the edge vicinity area. Accordingly, in the distance information of only the edge vicinity area shown in FIG. 11, the area other than the edge vicinity area (gray part) is the area where the distance information is not calculated, and the edge vicinity part of the doll having the ellipse body on the left side of the screen is imaged. A region near the device 100 and a portion near the edge of the doll having a square torso on the right side of the screen are regions far from the imaging device 100. The focus range is determined from the distance information of only the edge vicinity region and the current focus information. As a result, an in-focus range signal only in the edge vicinity region is obtained. The entire image is discriminated into a black focused area, a white non-focused area, and a gray uncalculated area.

図12は、本開示の実施の形態3における撮像装置において、エッジ近傍領域外の合焦範囲信号を補間する動作を説明するための模式図である。灰色で示される未演算領域、すなわちエッジ近傍領域外の領域の合焦範囲信号を強制的に非合焦領域として出力することで、表示部105の画面に映される映像全体の合焦範囲信号を得る。   FIG. 12 is a schematic diagram for explaining an operation of interpolating a focusing range signal outside the edge vicinity region in the imaging apparatus according to Embodiment 3 of the present disclosure. The focus range signal of the entire image displayed on the screen of the display unit 105 is output by forcibly outputting the focus range signal of the uncalculated area shown in gray, that is, the area outside the edge vicinity area, as the non-focus area. Get.

映像信号全体の合焦範囲信号は、インフォーカス領域を判別するために実施の形態1と同様に使用される。   The focus range signal of the entire video signal is used in the same manner as in the first embodiment to determine the in-focus area.

なお、エッジ近傍領域外の合焦範囲信号を補間する順番については、エッジ近傍領域の距離情報を算出した直後でもよい。   Note that the order of interpolation of the focus range signal outside the edge vicinity region may be immediately after the distance information of the edge vicinity region is calculated.

高周波信号抽出部1とフォーカスアシスト信号生成部2と信号合成部3とについては、実施の形態1と同様の動作を行うため、説明は省略する。   Since the high-frequency signal extraction unit 1, the focus assist signal generation unit 2, and the signal synthesis unit 3 perform the same operations as those in the first embodiment, description thereof is omitted.

[3−3.効果等]
以上のように、本実施の形態において、撮像装置100は、エッジ近傍領域判定部8とエッジ近傍領域外補間部9とをさらに備えてもよい。エッジ近傍領域判定部8は、映像信号のエッジ近傍領域を判定する。エッジ近傍領域外補間部9は、エッジ近傍領域判定部が判定したエッジ近傍領域のみ距離情報を算出し、エッジ近傍領域外を非合焦範囲として補間する。
[3-3. Effect]
As described above, in the present embodiment, the imaging apparatus 100 may further include the edge vicinity region determination unit 8 and the edge vicinity region outside interpolation unit 9. The edge vicinity area determination unit 8 determines an edge vicinity area of the video signal. The edge vicinity region outside interpolation unit 9 calculates distance information only for the edge vicinity region determined by the edge vicinity region determination unit, and interpolates the outside of the edge vicinity region as a non-focused range.

これにより、距離情報を算出する演算量を少なくすることができる。そのため、回路の消費電力、回路規模、もしくはその両方を少なくすることができる。   Thereby, the calculation amount which calculates distance information can be decreased. Therefore, power consumption of the circuit, circuit scale, or both can be reduced.

演算量が少なくなると、演算終了が早くなり、撮像装置100の映像遅延を少なくすることができる。   When the amount of calculation decreases, the calculation ends earlier, and the video delay of the imaging apparatus 100 can be reduced.

また、合焦範囲信号がブロック状になることを防止でき、高精細な合焦範囲信号を得ることができる。そのため、違和感のない合焦動作が可能になる。   Further, it is possible to prevent the focus range signal from being in a block shape, and it is possible to obtain a high-definition focus range signal. Therefore, it is possible to perform a focusing operation without a sense of incongruity.

(他の実施の形態)
以上のように、本開示における技術の例示として、実施の形態1〜3を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施の形態にも適用できる。また、上記実施の形態1〜3で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
(Other embodiments)
As described above, Embodiments 1 to 3 have been described as examples of the technology in the present disclosure. However, the technology in the present disclosure is not limited to this, and can also be applied to embodiments that have been changed, replaced, added, omitted, and the like. Moreover, it is also possible to combine each component demonstrated in the said Embodiment 1-3 and it can also be set as new embodiment.

以下に、他の実施の形態を例示する。   Other embodiments will be illustrated below.

実施の形態1〜3では、高周波信号抽出部の一例としてハイパスフィルタ処理を用いた。高周波信号抽出部は、ハイパスフィルタに限らず、映像信号の高周波成分を抽出するものであればよい。したがって、高周波信号抽出部は、ハイパスフィルタのみに限定されない。ハイパスフィルタ処理に加えてノイズ除去処理や、収縮、膨張処理などを追加してもよい。   In the first to third embodiments, high-pass filter processing is used as an example of the high-frequency signal extraction unit. The high-frequency signal extraction unit is not limited to a high-pass filter, and may be any unit that extracts a high-frequency component of a video signal. Therefore, the high-frequency signal extraction unit is not limited to a high-pass filter. In addition to high-pass filter processing, noise removal processing, contraction, expansion processing, and the like may be added.

なお、実施の形態1〜3では、距離情報算出部の一例として、DFD(Depth From Defocus)技術を用いた。しかし、距離情報算出部は、映像信号の距離情報を算出するものであればよい。したがって、距離情報算出部は、DFD技術を用いた処理のみに限定されない。例えば、いわゆる位相差検出方法を用いてもよい。すなわち、レンズを通った光束を分割して投影し、異なる経路(例えば、レンズ右側と左側)を通った光を別々に受光して生成した2つの映像の位置関係によって合焦範囲信号を得る。また、位相差検出方法を実現する手段として、撮像素子に位相差検出用のフォトダイオードを埋め込んだ構成の撮像素子を用いてもよい。   In the first to third embodiments, a DFD (Depth From Defocus) technique is used as an example of the distance information calculation unit. However, the distance information calculation unit only needs to calculate the distance information of the video signal. Therefore, the distance information calculation unit is not limited to only processing using the DFD technique. For example, a so-called phase difference detection method may be used. That is, the light flux that has passed through the lens is divided and projected, and the in-focus range signal is obtained by the positional relationship between the two images generated by separately receiving the light that has passed through different paths (for example, the right side and the left side of the lens). Further, as a means for realizing the phase difference detection method, an image sensor having a configuration in which a photodiode for phase difference detection is embedded in the image sensor may be used.

なお、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。   The above-described embodiments are for illustrating the technique in the present disclosure, and various modifications, replacements, additions, omissions, and the like can be made within the scope of the claims and their equivalents.

本開示は、マニュアルフォーカス操作を行う撮像装置に適用可能である。具体的には、デジタルカメラ、ムービー、業務用ビデオカメラ、カメラ機能付き携帯電話、スマートフォンなどに、本開示は適用可能である。   The present disclosure is applicable to an imaging apparatus that performs a manual focus operation. Specifically, the present disclosure can be applied to digital cameras, movies, commercial video cameras, mobile phones with camera functions, smartphones, and the like.

1 高周波信号抽出部
2 フォーカスアシスト信号生成部
3 信号合成部
4 メモリ回路部
5 距離情報算出部
6 位置選択信号生成部
7 補間部
8 エッジ近傍領域判定部
9 エッジ近傍領域外補間部
100 撮像装置
101 カメラ本体
102 レンズ鏡筒
103 イメージセンサ
104 コントローラ
105 表示部
DESCRIPTION OF SYMBOLS 1 High frequency signal extraction part 2 Focus assist signal generation part 3 Signal composition part 4 Memory circuit part 5 Distance information calculation part 6 Position selection signal generation part 7 Interpolation part 8 Edge vicinity area determination part 9 Edge vicinity area outside interpolation part 100 Imaging device 101 Camera body 102 Lens barrel 103 Image sensor 104 Controller 105 Display unit

Claims (4)

映像信号の距離情報を算出し、現在のフォーカス情報と前記距離情報とから合焦範囲信号を生成する距離情報算出部と、
前記映像信号の高周波信号を抽出する高周波信号抽出部と、
前記高周波信号と前記合焦範囲信号を用いて、合焦領域を表すフォーカスアシスト信号を生成するフォーカスアシスト信号生成部と、
前記フォーカスアシスト信号を前記映像信号に合成してフォーカスアシスト信号付映像信号を生成する信号合成部と、
を備えた撮像装置。
A distance information calculation unit that calculates distance information of the video signal and generates a focusing range signal from the current focus information and the distance information;
A high frequency signal extraction unit for extracting a high frequency signal of the video signal;
A focus assist signal generating unit that generates a focus assist signal representing an in-focus area using the high-frequency signal and the in-focus range signal;
A signal combining unit that combines the focus assist signal with the video signal to generate a video signal with a focus assist signal;
An imaging apparatus comprising:
前記距離情報算出部は、異なるフォーカス位置で撮像した前記映像信号と、現在のフォーカス位置の情報から、前記距離情報を算出する
請求項1に記載の撮像装置。
The imaging apparatus according to claim 1, wherein the distance information calculation unit calculates the distance information from the video signal captured at different focus positions and information on a current focus position.
映像領域をブロック状に分割し、前記分割されたブロック状の領域の代表点を演算するように距離算出オン/オフ信号を生成する位置選択信号生成部と、
前記位置選択信号生成部が出力する信号に従い、前記距離情報を補間して全領域の合焦範囲信号を得る補間部と、
をさらに備えた請求項1に記載の撮像装置。
A position selection signal generator that divides a video area into blocks and generates a distance calculation on / off signal so as to calculate a representative point of the divided block area;
In accordance with a signal output by the position selection signal generation unit, an interpolation unit that interpolates the distance information to obtain a focusing range signal of the entire region;
The imaging apparatus according to claim 1, further comprising:
前記映像信号のエッジ近傍領域を判定するエッジ近傍領域判定部と、
前記エッジ近傍領域判定部が判定した前記エッジ近傍領域のみ前記距離情報を算出し、前記エッジ近傍領域外を非合焦範囲として補間するエッジ近傍領域外補間部と、
をさらに備えた請求項1に記載の撮像装置。
An edge vicinity area determination unit that determines an edge vicinity area of the video signal;
Only the edge vicinity area determined by the edge vicinity area determination unit calculates the distance information, and interpolates outside the edge vicinity area as an out-of-focus area,
The imaging apparatus according to claim 1, further comprising:
JP2016208621A 2016-02-09 2016-10-25 Imaging device Expired - Fee Related JP6748847B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/417,377 US9762790B2 (en) 2016-02-09 2017-01-27 Image pickup apparatus using edge detection and distance for focus assist

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016022306 2016-02-09
JP2016022306 2016-02-09

Publications (3)

Publication Number Publication Date
JP2017143504A true JP2017143504A (en) 2017-08-17
JP2017143504A5 JP2017143504A5 (en) 2019-10-24
JP6748847B2 JP6748847B2 (en) 2020-09-02

Family

ID=59628747

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016208621A Expired - Fee Related JP6748847B2 (en) 2016-02-09 2016-10-25 Imaging device

Country Status (1)

Country Link
JP (1) JP6748847B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019191429A (en) * 2018-04-26 2019-10-31 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd Control device, imaging device, control method and program
JP2021005063A (en) * 2019-06-27 2021-01-14 パナソニックIpマネジメント株式会社 Imaging apparatus
US11924549B2 (en) 2019-06-27 2024-03-05 Panasonic Intellectual Property Management Co., Ltd. Imaging apparatus

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010093422A (en) * 2008-10-06 2010-04-22 Canon Inc Imaging apparatus
JP2014178643A (en) * 2013-03-15 2014-09-25 Olympus Imaging Corp Display device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010093422A (en) * 2008-10-06 2010-04-22 Canon Inc Imaging apparatus
JP2014178643A (en) * 2013-03-15 2014-09-25 Olympus Imaging Corp Display device

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019191429A (en) * 2018-04-26 2019-10-31 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd Control device, imaging device, control method and program
JP2021005063A (en) * 2019-06-27 2021-01-14 パナソニックIpマネジメント株式会社 Imaging apparatus
JP7289055B2 (en) 2019-06-27 2023-06-09 パナソニックIpマネジメント株式会社 Imaging device
US11924549B2 (en) 2019-06-27 2024-03-05 Panasonic Intellectual Property Management Co., Ltd. Imaging apparatus

Also Published As

Publication number Publication date
JP6748847B2 (en) 2020-09-02

Similar Documents

Publication Publication Date Title
JP5544047B2 (en) Image processing apparatus, method and program, stereoscopic imaging apparatus, portable electronic device, printer, and stereoscopic image reproducing apparatus
CN108462830B (en) Image pickup apparatus and control method of image pickup apparatus
KR20090093817A (en) Imaging apparatus provided with panning mode for taking panned image
KR20100039430A (en) Image processor, image processing method, digital camera, and imaging apparatus
JP2011029905A (en) Imaging device, method and program
TWI451184B (en) Focus adjusting method and image capture device thereof
JP6748847B2 (en) Imaging device
US10979620B2 (en) Image processing apparatus for providing information for focus adjustment, control method of the same, and storage medium
US9762790B2 (en) Image pickup apparatus using edge detection and distance for focus assist
JP2013165488A (en) Image processing apparatus, image capturing apparatus, and program
JP2017143504A5 (en)
JP2015088832A (en) Image processing device, imaging device and image processing method
JP2011066827A (en) Image processing apparatus, image processing method and program
JP2018006995A (en) Imaging apparatus, display apparatus, and image processing program
JP2014165710A (en) Image display device
JP2017143354A (en) Image processing apparatus and image processing method
JP2020005084A (en) Image processing apparatus, image processing method, and program
JP6961423B2 (en) Image processing equipment, imaging equipment, control methods for image processing equipment, programs and recording media
JP2011082726A (en) Image reproducing apparatus, and imaging apparatus
JP7458769B2 (en) Image processing device, imaging device, image processing method, program and recording medium
JP2015186198A (en) imaging device
JP2020160773A (en) Image processing device, imaging device, image processing method, and program
JP7409604B2 (en) Image processing device, imaging device, image processing method, program and recording medium
JP2014236244A (en) Image processing system, image processing program, and digital camera
JP2019129472A (en) Imaging apparatus

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20190118

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190912

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190912

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200619

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200623

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200706

R151 Written notification of patent or utility model registration

Ref document number: 6748847

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees