JP2019061028A - Imaging apparatus - Google Patents

Imaging apparatus Download PDF

Info

Publication number
JP2019061028A
JP2019061028A JP2017184969A JP2017184969A JP2019061028A JP 2019061028 A JP2019061028 A JP 2019061028A JP 2017184969 A JP2017184969 A JP 2017184969A JP 2017184969 A JP2017184969 A JP 2017184969A JP 2019061028 A JP2019061028 A JP 2019061028A
Authority
JP
Japan
Prior art keywords
unit
image data
focus area
focus
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017184969A
Other languages
Japanese (ja)
Other versions
JP6943115B2 (en
Inventor
征輝 上杉
Masateru Uesugi
征輝 上杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2017184969A priority Critical patent/JP6943115B2/en
Publication of JP2019061028A publication Critical patent/JP2019061028A/en
Application granted granted Critical
Publication of JP6943115B2 publication Critical patent/JP6943115B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To provide an imaging apparatus with which it is possible to improve the accuracy of focus control.SOLUTION: An imaging apparatus 100 comprises an imaging element 111, an image data reduction unit 122, video signal processing units 135 and 136, an automatic setting unit 151, a threshold determination unit 153, an image data cutout unit 123, and an autofocus control unit 160. The threshold determination unit 153 determines whether or not a focus area FA101 is larger than a threshold and, when determined as being larger than the threshold, generates a setting area signal YS106 on the basis of reduced image data RD105. The image data cutout unit 123 cuts out the focus area FA101 from raw image data RD100 and generates focus area data RD106 when it is determined that the focus area FA101 is not larger than the threshold. The autofocus control unit 160 executes autofocus control on the basis of the setting area signal YS106 or YS107.SELECTED DRAWING: Figure 1

Description

本発明は、フォーカス機能を有する撮像装置に関する。   The present invention relates to an imaging device having a focusing function.

撮像装置は、撮像素子により撮像された画像からフォーカス領域を設定し、フォーカス領域における画像に基づいてレンズを駆動させ、フォーカス制御を実行する。特許文献1には、フォーカス機能を有する撮像装置の一例が記載されている。   The imaging device sets a focus area from the image captured by the imaging device, drives the lens based on the image in the focus area, and executes focus control. Patent Document 1 describes an example of an imaging device having a focusing function.

国際公開2012/164896号International Publication 2012/164896

一般的に、撮像装置は撮像素子から出力された原画像データを縮小リサイズ処理し、縮小画像データを生成する。撮像装置は、縮小画像データに基づいてフォーカス領域を設定する。   In general, the imaging apparatus performs reduction and resizing processing on original image data output from an imaging element to generate reduced image data. The imaging device sets a focus area based on the reduced image data.

縮小画像データは原画像データよりも画像の解像度が低く、フォーカス領域が所定の範囲よりも小さい範囲に設定されると、フォーカス領域の画像の解像度はさらに悪化するため、フォーカス制御を高精度に実行することが難しくなる。また、撮像装置を顕微鏡撮影に用いる場合では被写界深度が浅いため、画像の解像度が低いとフォーカス制御を高精度に実行することが難しくなる。   Since the reduced image data has a lower image resolution than the original image data, and the focus area is set to a smaller range than the predetermined range, the resolution of the image in the focus area is further deteriorated, so focus control is performed with high accuracy. It will be difficult to do. In addition, when the imaging apparatus is used for microscopic imaging, the depth of field is shallow, so it is difficult to perform focus control with high accuracy when the resolution of the image is low.

本発明は、フォーカス制御の精度を向上させることができる撮像装置を提供することを目的とする。   An object of the present invention is to provide an imaging device capable of improving the accuracy of focus control.

本発明は、被写体を撮像して、原画像データを生成する撮像素子と、前記原画像データを縮小リサイズ処理し、縮小画像データを生成する画像データ縮小部と、前記縮小画像データに基づいて縮小画像信号を生成する第1の映像信号処理部と、前記縮小画像信号に基づいてフォーカス領域を自動的に設定する自動設定部と、前記フォーカス領域がしきい値よりも大きいか否かを判定し、前記フォーカス領域がしきい値よりも大きいと判定された場合に、前記原画像データに基づいて第1の設定領域信号を生成するしきい値判定部と、前記フォーカス領域がしきい値よりも大きくないと判定された場合に、前記原画像データから前記フォーカス領域を切り出し、フォーカス領域データを生成する画像データ切り出し部と、前記フォーカス領域データに基づいて第2の設定領域信号を生成する第2の映像信号処理部と、前記第1または第2の設定領域信号に基づいてフォーカス制御を実行するオートフォーカス制御部とを備えることを特徴とする撮像装置を提供する。   The present invention images an object and generates an original image data, an image data reduction unit that reduces and resizes the original image data, and generates reduced image data, and reduces the reduced image data. A first video signal processing unit for generating an image signal, an automatic setting unit for automatically setting a focus area based on the reduced image signal, and it is determined whether the focus area is larger than a threshold value. A threshold determination unit that generates a first setting area signal based on the original image data when it is determined that the focus area is larger than a threshold, and the focus area is higher than the threshold An image data cutout unit configured to cut out the focus area from the original image data and to generate focus area data when it is determined that the size is not large; A second video signal processing unit that generates a second setting area signal based on the data and an autofocus control unit that performs focus control based on the first or second setting area signal. To provide an imaging device.

本発明の撮像装置によれば、フォーカス制御の精度を向上させることができる。   According to the imaging device of the present invention, the accuracy of focus control can be improved.

第1実施形態の撮像装置を示すブロック図である。It is a block diagram showing an imaging device of a 1st embodiment. 原画像データと記録用画像データとの関係を示す図である。It is a figure which shows the relationship between original image data and the image data for recording. 原画像データと縮小画像データとの関係を示す図である。It is a figure which shows the relationship between original image data and shrinking | reduction image data. 第1実施形態の撮像装置におけるフォーカス制御方法の一例を示すフローチャートである。It is a flowchart which shows an example of the focus control method in the imaging device of 1st Embodiment. 第2実施形態の撮像装置を示すブロック図である。It is a block diagram showing an imaging device of a 2nd embodiment. 記録用画像データとフォーカス領域との関係を示す図である。It is a figure which shows the relationship between the image data for recording, and a focus area | region. 第2実施形態の撮像装置におけるフォーカス制御方法の一例を示すフローチャートである。It is a flowchart which shows an example of the focus control method in the imaging device of 2nd Embodiment. 第3実施形態の撮像装置を示すブロック図である。It is a block diagram showing an imaging device of a 3rd embodiment. 第4実施形態の撮像装置を示すブロック図である。It is a block diagram showing an imaging device of a 4th embodiment. 第4実施形態の撮像装置におけるフォーカス制御方法の一例を示すフローチャートである。It is a flowchart which shows an example of the focus control method in the imaging device of 4th Embodiment. 第5実施形態の撮像装置を示すブロック図である。It is a block diagram showing an imaging device of a 5th embodiment. 第5実施形態の撮像装置におけるフォーカス制御方法の一例を示すフローチャートである。It is a flowchart which shows an example of the focus control method in the imaging device of 5th Embodiment. 第6実施形態の撮像装置を示すブロック図である。It is a block diagram which shows the imaging device of 6th Embodiment. 第6実施形態の撮像装置におけるフォーカス制御方法の一例を示すフローチャートである。It is a flowchart which shows an example of the focus control method in the imaging device of 6th Embodiment. 第7実施形態の撮像装置を示すブロック図である。It is a block diagram showing an imaging device of a 7th embodiment. 第7実施形態の撮像装置におけるフォーカス制御方法の一例を示すフローチャートである。It is a flowchart which shows an example of the focus control method in the imaging device of 7th Embodiment.

[第1実施形態]
図1〜図3を用いて、第1実施形態の撮像装置を説明する。図1に示すように、撮像装置100は、カメラヘッド110と、画像データ処理部120と、映像信号処理部131〜136と、記録部141〜144と、フォーカス領域設定部150と、オートフォーカス制御部160とを備える。記録部141〜144は例えば半導体メモリである。
First Embodiment
The imaging device of the first embodiment will be described with reference to FIGS. 1 to 3. As shown in FIG. 1, the imaging apparatus 100 includes a camera head 110, an image data processing unit 120, video signal processing units 131 to 136, recording units 141 to 144, a focus area setting unit 150, and autofocus control. And a unit 160. The recording units 141 to 144 are, for example, semiconductor memories.

カメラヘッド110は、撮像素子111と、レンズ112と、レンズ駆動部113とを有する。画像データ処理部120は、画像データ分割部121と、画像データ縮小部122と、画像データ切り出し部123とを有する。フォーカス領域設定部150は、自動設定部151と、手動設定部152と、しきい値判定部153とを有する。   The camera head 110 includes an imaging element 111, a lens 112, and a lens driving unit 113. The image data processing unit 120 includes an image data division unit 121, an image data reduction unit 122, and an image data cutout unit 123. The focus area setting unit 150 includes an automatic setting unit 151, a manual setting unit 152, and a threshold value determination unit 153.

撮像素子111は被写体を撮像して、例えば水平方向が約8000ピクセルであり、垂直方向が約4000ピクセルである8K画像を動画または静止画で生成することができる。レンズ駆動部113がレンズ112を駆動することにより、撮像素子111はフォーカス調整された画像を生成することができる。   The imaging device 111 can capture an object, and can generate an 8K image, for example, about 8000 pixels in the horizontal direction and about 4000 pixels in the vertical direction as a moving image or a still image. When the lens driving unit 113 drives the lens 112, the imaging element 111 can generate an image subjected to focus adjustment.

撮像素子111は被写体を撮像し、8KのRAWデータを原画像データRD100として生成する。撮像素子111は原画像データRD100を、画像データ分割部121、画像データ縮小部122、及び、画像データ切り出し部123へ出力する。   The imaging element 111 captures an object, and generates 8K RAW data as original image data RD100. The imaging element 111 outputs the original image data RD100 to the image data division unit 121, the image data reduction unit 122, and the image data cutout unit 123.

画像データ分割部121は、図2に示すように、8Kの原画像データRD100を非縮小で分割し、水平方向が約4000ピクセルであり、垂直方向が約2000ピクセルである4KのRAWデータを記録用画像データRD101〜RD104として生成する。   As shown in FIG. 2, the image data division unit 121 divides the 8K original image data RD 100 without reduction and records 4K RAW data whose horizontal direction is about 4000 pixels and whose vertical direction is about 2000 pixels. Image data RD101 to RD104 are generated.

画像データ分割部121は、記録用画像データRD101〜RD104を映像信号処理部131〜134へ出力する。映像信号処理部131〜134は、記録用画像データRD101〜RD104をYUV信号に変換して記録用画像信号YS101〜YS104を生成し、記録部141〜144に記録させる。   The image data division unit 121 outputs the recording image data RD101 to RD104 to the video signal processing units 131 to 134. The video signal processing units 131 to 134 convert the recording image data RD101 to RD104 into YUV signals to generate recording image signals YS101 to YS104, and cause the recording units 141 to 144 to record.

画像データ縮小部122は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD100を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD105として生成する。図3におけるR,G,Bは、赤色画素、緑色画素、及び、青色画素を示している。縮小画像データRD105は、原画像データRD100が縮小リサイズ処理されたフレーム全体の画像データである。なお、図3は原画像データRD100及び縮小画像データRD105のフレームの一部を対応させて示している。   For example, as shown in FIG. 3, the image data reduction unit 122 reduces and resizes the 8K original image data RD100 arranged in Bayer, and generates reduced 4K RAW data of the Bayer arrangement as reduced image data RD105. R, G, and B in FIG. 3 indicate red pixels, green pixels, and blue pixels. The reduced image data RD105 is image data of the entire frame in which the original image data RD100 is reduced and resized. FIG. 3 shows a part of the frames of the original image data RD100 and the reduced image data RD105 in association with each other.

画像データ縮小部122は、縮小画像データRD105を映像信号処理部135へ出力する。映像信号処理部135は、縮小画像データRD105をYUV信号に変換して縮小画像信号YS105を生成し、自動設定部151へ出力する。なお、映像信号処理部135を第1実施形態における第1の映像信号処理部とする。   The image data reduction unit 122 outputs the reduced image data RD 105 to the video signal processing unit 135. The video signal processing unit 135 converts the reduced image data RD 105 into a YUV signal to generate a reduced image signal YS 105, and outputs the reduced image signal YS 105 to the automatic setting unit 151. The video signal processing unit 135 is referred to as a first video signal processing unit in the first embodiment.

自動設定部151は、縮小画像信号YS105に対して顔認識等の画像パターン認識処理を実行し、フォーカス領域FA101を自動的に設定する。即ち、フォーカス領域FA101は縮小画像データRD105に基づいて設定される。ユーザは、手動設定部152を操作してフォーカス領域FA102を設定することができる。ユーザが手動設定部152を操作した場合には、フォーカス領域FA101の代わりにフォーカス領域FA102が設定される。しきい値判定部153は、フォーカス領域FA101またはFA102がしきい値よりも大きいか否かを判定する。しきい値はフォーカス領域FA101またはFA102の面積、または、縦及び横の長さ等を規定するものである。   The automatic setting unit 151 executes image pattern recognition processing such as face recognition on the reduced image signal YS 105, and automatically sets the focus area FA101. That is, the focus area FA101 is set based on the reduced image data RD105. The user can operate the manual setting unit 152 to set the focus area FA102. When the user operates the manual setting unit 152, the focus area FA102 is set instead of the focus area FA101. The threshold determination unit 153 determines whether the focus area FA101 or FA102 is larger than the threshold. The threshold defines the area of the focus area FA101 or FA102, or the length and width, and the like.

フォーカス領域FA101またはFA102がしきい値よりも大きいと判定された場合、しきい値判定部153は、フォーカス領域FA101またはFA102の位置及び範囲を含むフォーカス領域データを、YUV信号である設定領域信号YS106として生成し、オートフォーカス制御部160へ出力する。即ち、設定領域信号YS106は縮小画像データRD105に基づいて生成される。なお、設定領域信号YS106を第1実施形態における第1の設定領域信号とする。   When it is determined that the focus area FA101 or FA102 is larger than the threshold value, the threshold value determination unit 153 sets the focus area data including the position and the range of the focus area FA101 or FA102 as the setting area signal YS106 that is a YUV signal. , And output to the autofocus control unit 160. That is, the setting area signal YS106 is generated based on the reduced image data RD105. The set area signal YS106 is taken as a first set area signal in the first embodiment.

フォーカス領域FA101またはFA102がしきい値よりも大きくないと判定された場合、しきい値判定部153は、設定領域信号YS106を画像データ切り出し部123へ出力する。画像データ切り出し部123は、設定領域信号YS106に基づいて、原画像データRD100からフォーカス領域FA101またはFA102を切り出し、非縮小のRAWデータをフォーカス領域データRD106として生成する。   When it is determined that the focus area FA101 or FA102 is not larger than the threshold value, the threshold value determination unit 153 outputs the setting area signal YS106 to the image data clipping unit 123. The image data cutout unit 123 cuts out the focus area FA101 or FA102 from the original image data RD100 based on the set area signal YS106, and generates non-reduced RAW data as the focus area data RD106.

画像データ切り出し部123は、フォーカス領域データRD106を映像信号処理部136へ出力する。映像信号処理部136は、フォーカス領域データRD106をYUV信号に変換して設定領域信号YS107を生成し、オートフォーカス制御部160へ出力する。即ち、設定領域信号YS107は原画像データRD100に基づいて生成される。なお、映像信号処理部136を第1実施形態における第2の映像信号処理部とし、設定領域信号YS107を第1実施形態における第2の設定領域信号とする。   The image data cutout unit 123 outputs the focus area data RD106 to the video signal processing unit 136. The video signal processing unit 136 converts the focus area data RD 106 into a YUV signal to generate a set area signal YS 107, and outputs the set area signal YS 107 to the autofocus control unit 160. That is, the setting area signal YS107 is generated based on the original image data RD100. The video signal processing unit 136 is a second video signal processing unit in the first embodiment, and the setting area signal YS 107 is a second setting area signal in the first embodiment.

オートフォーカス制御部160は、設定領域信号YS106またはYS107に基づいて制御信号CS101を生成し、レンズ駆動部113へ出力する。レンズ駆動部113は制御信号CS101に基づいてレンズ112を駆動し、フォーカス制御を実行する。   The autofocus control unit 160 generates a control signal CS101 based on the setting area signal YS106 or YS107, and outputs the control signal CS101 to the lens drive unit 113. The lens drive unit 113 drives the lens 112 based on the control signal CS101 to execute focus control.

従って、オートフォーカス制御部160は、フォーカス領域FA101またはFA102がしきい値よりも大きいと判定された場合には、縮小画像データRD105に基づいてフォーカス制御を実行する。また、オートフォーカス制御部160は、フォーカス領域FA101またはFA102がしきい値よりも大きくないと判定された場合には、非縮小のフォーカス領域データRD106に基づいてフォーカス制御を実行する。   Therefore, when it is determined that the focus area FA101 or FA102 is larger than the threshold value, the autofocus control unit 160 performs focus control based on the reduced image data RD105. When it is determined that the focus area FA101 or FA102 is not larger than the threshold value, the autofocus control unit 160 performs focus control based on the non-reduced focus area data RD106.

図4に示すフローチャートを用いて、撮像装置100におけるフォーカス制御方法の一例を説明する。撮像素子111は、ステップS101にて、被写体を撮像し、原画像データRD100を生成する。画像データ縮小部122は、ステップS102にて、原画像データRD100を縮小リサイズ処理し、縮小画像データRD105を生成する。映像信号処理部135は、ステップS103にて、縮小画像データRD105をYUV信号に変換し、縮小画像信号YS105を生成する。   An example of a focus control method in the imaging device 100 will be described using the flowchart shown in FIG. In step S101, the image pickup element 111 picks up an object and generates original image data RD100. In step S102, the image data reduction unit 122 reduces and resizes the original image data RD100 to generate reduced image data RD105. In step S103, the video signal processing unit 135 converts the reduced image data RD105 into a YUV signal, and generates a reduced image signal YS105.

自動設定部151は、ステップS104にて、縮小画像信号YS105に基づいてフォーカス領域FA101を設定する。ユーザは、ステップS105にて、手動設定部152を操作してフォーカス領域FA102を設定してもよい。しきい値判定部153は、ステップS106にて、フォーカス領域FA101またはFA102がしきい値よりも大きいか否かを判定する。   In step S104, the automatic setting unit 151 sets the focus area FA101 based on the reduced image signal YS105. The user may set the focus area FA 102 by operating the manual setting unit 152 in step S105. In step S106, the threshold determination unit 153 determines whether the focus area FA101 or FA102 is larger than the threshold.

フォーカス領域FA101またはFA102がしきい値よりも大きい(YES)と判定された場合、しきい値判定部153は、ステップS107にて、フォーカス領域FA101またはFA102の位置及び範囲を含むフォーカス領域データを設定領域信号YS106として生成し、オートフォーカス制御部160へ出力する。   If it is determined that the focus area FA101 or FA102 is larger than the threshold (YES), the threshold value determination unit 153 sets focus area data including the position and range of the focus area FA101 or FA102 in step S107. A region signal YS106 is generated and output to the autofocus control unit 160.

フォーカス領域FA101またはFA102がしきい値よりも大きくない(NO)と判定された場合、しきい値判定部153は、ステップS108にて、設定領域信号YS106を画像データ切り出し部123へ出力する。画像データ切り出し部123は、ステップS109にて、設定領域信号YS106に基づいて、原画像データRD100からフォーカス領域FA101またはFA102を切り出し、非縮小のフォーカス領域データRD106を生成する。   If it is determined that the focus area FA101 or FA102 is not larger than the threshold value (NO), the threshold value determination unit 153 outputs the setting area signal YS106 to the image data clipping unit 123 in step S108. In step S109, the image data cutout unit 123 cuts out the focus area FA101 or FA102 from the original image data RD100 based on the set area signal YS106, and generates non-reduced focus area data RD106.

映像信号処理部136は、ステップS110にて、フォーカス領域データRD106をYUV信号に変換して設定領域信号YS107を生成し、オートフォーカス制御部160へ出力する。オートフォーカス制御部160は、ステップS111にて、設定領域信号YS106またはYS107に基づいて制御信号CS101を生成する。レンズ駆動部113は、ステップS112にて、制御信号CS101に基づいてレンズ112を駆動し、フォーカス制御を実行する。   In step S 110, the video signal processing unit 136 converts the focus area data RD 106 into a YUV signal to generate a set area signal YS 107, and outputs the set area signal YS 107 to the autofocus control unit 160. In step S111, the autofocus control unit 160 generates a control signal CS101 based on the setting area signal YS106 or YS107. In step S112, the lens driving unit 113 drives the lens 112 based on the control signal CS101, and executes focus control.

第1実施形態の撮像装置100は、フォーカス領域FA101またはFA102がしきい値よりも大きいと判定された場合には、縮小リサイズ処理された縮小画像データRD105に基づいてフォーカス制御を実行する。第1実施形態の撮像装置100は、フォーカス領域FA101またはFA102がしきい値よりも大きくないと判定された場合には、原画像データRD100からフォーカス領域FA101またはFA102を切り出して生成された非縮小のフォーカス領域データRD106に基づいてフォーカス制御を実行する。   When it is determined that the focus area FA101 or FA102 is larger than the threshold value, the imaging device 100 according to the first embodiment executes focus control based on the reduced image data RD105 subjected to the reduction resizing process. When it is determined that the focus area FA101 or FA102 is not larger than the threshold value, the imaging device 100 according to the first embodiment is not reduced and generated by cutting out the focus area FA101 or FA102 from the original image data RD100. Focus control is performed based on the focus area data RD106.

従って、第1実施形態の撮像装置100によれば、フォーカス領域FA101またはFA102がしきい値よりも大きくない場合には、縮小画像データRD105よりも高い解像度を有する非縮小のフォーカス領域データRD106に基づいてフォーカス制御が実行されるため、フォーカス制御の精度を向上させることができる。   Therefore, according to the imaging device 100 of the first embodiment, when the focus area FA101 or FA102 is not larger than the threshold value, based on the non-reduced focus area data RD106 having a higher resolution than the reduced image data RD105. Since focus control is performed, the accuracy of focus control can be improved.

[第2実施形態]
図5及び図6を用いて、第2実施形態の撮像装置を説明する。撮像装置200は、カメラヘッド210と、画像データ処理部220と、映像信号処理部231〜235と、記録部241〜244と、フォーカス領域設定部250と、オートフォーカス制御部260と、読み出し制御部270とを備える。記録部241〜244は例えば半導体メモリである。
Second Embodiment
An imaging apparatus according to the second embodiment will be described with reference to FIGS. 5 and 6. The imaging apparatus 200 includes a camera head 210, an image data processing unit 220, video signal processing units 231 to 235, recording units 241 to 244, a focus area setting unit 250, an autofocus control unit 260, and a read control unit. And 270. The recording units 241 to 244 are, for example, semiconductor memories.

カメラヘッド210は、撮像素子211と、レンズ212と、レンズ駆動部213とを有する。画像データ処理部220は、画像データ分割部221と、画像データ縮小部222とを有する。フォーカス領域設定部250は、自動設定部251と、手動設定部252と、しきい値判定部253とを有する。   The camera head 210 includes an imaging element 211, a lens 212, and a lens driving unit 213. The image data processing unit 220 includes an image data division unit 221 and an image data reduction unit 222. The focus area setting unit 250 includes an automatic setting unit 251, a manual setting unit 252, and a threshold value determination unit 253.

撮像素子211は被写体を撮像して、8K画像を動画または静止画で生成することができる。レンズ駆動部213がレンズ212を駆動することにより、撮像素子211はフォーカス調整された画像を生成することができる。撮像素子211は被写体を撮像し、8KのRAWデータを原画像データRD200として生成する。撮像素子211は原画像データRD200を、画像データ分割部221、及び、画像データ縮小部222へ出力する。   The imaging device 211 can capture an object and generate an 8K image as a moving image or a still image. The lens driving unit 213 drives the lens 212, whereby the imaging element 211 can generate an image that has been subjected to focus adjustment. The imaging element 211 captures an object and generates 8K RAW data as original image data RD200. The imaging element 211 outputs the original image data RD 200 to the image data dividing unit 221 and the image data reducing unit 222.

画像データ分割部221は、図2に示すように、8Kの原画像データRD200を非縮小で分割し、4KのRAWデータを記録用画像データRD201〜RD204として生成する。画像データ分割部221は、記録用画像データRD201〜RD204を映像信号処理部231〜234へ出力する。   As shown in FIG. 2, the image data division unit 221 divides the 8K original image data RD 200 without reduction, and generates 4K RAW data as recording image data RD 201 to RD 204. The image data division unit 221 outputs the recording image data RD201 to RD204 to the video signal processing units 231 to 234.

映像信号処理部231〜234は、記録用画像データRD201〜RD204をYUV信号に変換して記録用画像信号YS201〜YS204を生成し、記録部241〜244に記録させる。なお、映像信号処理部231〜234を第2実施形態における第1の映像信号処理部とする。   The video signal processing units 231 to 234 convert the recording image data RD201 to RD204 into YUV signals to generate recording image signals YS201 to YS204, and cause the recording units 241 to 244 to record. The video signal processing units 231 to 234 are referred to as the first video signal processing unit in the second embodiment.

画像データ縮小部222は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD200を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD205として生成する。縮小画像データRD205は、原画像データRD200が縮小リサイズ処理されたフレーム全体の画像データである。なお、図3は原画像データRD200及び縮小画像データRD205のフレームの一部を対応させて示している。   For example, as shown in FIG. 3, the image data reduction unit 222 reduces and resizes the 8K original image data RD200 arranged in Bayer, and generates reduced 4K RAW data of the Bayer arrangement as reduced image data RD205. The reduced image data RD 205 is image data of the entire frame in which the original image data RD 200 is reduced and resized. Note that FIG. 3 shows a part of the frames of the original image data RD 200 and the reduced image data RD 205 in association with each other.

画像データ縮小部222は、縮小画像データRD205を映像信号処理部235へ出力する。映像信号処理部235は、縮小画像データRD205をYUV信号に変換して縮小画像信号YS205を生成し、自動設定部251へ出力する。なお、映像信号処理部235を第2実施形態における第2の映像信号処理部とする。   The image data reduction unit 222 outputs the reduced image data RD 205 to the video signal processing unit 235. The video signal processing unit 235 converts the reduced image data RD 205 into a YUV signal to generate a reduced image signal YS 205, and outputs the reduced image signal YS 205 to the automatic setting unit 251. The video signal processing unit 235 is referred to as a second video signal processing unit in the second embodiment.

自動設定部251は、縮小画像信号YS205に対して顔認識等の画像パターン認識処理を実行し、フォーカス領域FA201を自動的に設定する。ユーザは、手動設定部252を操作してフォーカス領域FA202を設定することができる。ユーザが手動設定部252を操作した場合には、フォーカス領域FA201の代わりにフォーカス領域FA202が設定される。しきい値判定部253は、フォーカス領域FA201またはFA202がしきい値よりも大きいか否かを判定する。しきい値はフォーカス領域FA201またはFA202の面積、または、縦及び横の長さ等を規定するものである。   The automatic setting unit 251 performs image pattern recognition processing such as face recognition on the reduced image signal YS 205, and automatically sets the focus area FA201. The user can set the focus area FA 202 by operating the manual setting unit 252. When the user operates the manual setting unit 252, the focus area FA202 is set instead of the focus area FA201. The threshold determination unit 253 determines whether the focus area FA201 or FA202 is larger than the threshold. The threshold defines the area of the focus area FA 201 or FA 202, or the length and width of the focus area FA 201 or FA 202.

フォーカス領域FA201またはFA202がしきい値よりも大きいと判定された場合、しきい値判定部253は、フォーカス領域FA201またはFA202の位置及び範囲を含むフォーカス領域データを、YUV信号である設定領域信号YS206として生成し、オートフォーカス制御部260へ出力する。即ち、設定領域信号YS206は縮小画像データRD205に基づいて生成される。なお、設定領域信号YS206を第2実施形態における第1の設定領域信号とする。   When it is determined that the focus area FA201 or FA202 is larger than the threshold value, the threshold value determination unit 253 sets the focus area data including the position and the range of the focus area FA201 or FA202 as the setting area signal YS206 which is a YUV signal. , And output to the autofocus control unit 260. That is, the setting area signal YS206 is generated based on the reduced image data RD205. The set area signal YS 206 is taken as a first set area signal in the second embodiment.

フォーカス領域FA201またはFA202がしきい値よりも大きくないと判定された場合、しきい値判定部253は、設定領域信号YS206を読み出し制御部270へ出力する。読み出し制御部270は、設定領域信号YS206に基づいて、映像信号処理部231〜234のうちのいずれかに指示して、フォーカス領域FA201またはFA202を含む画像に対応する記録用画像信号を、記録部241〜244のうちのいずれかから読み出させる。   If it is determined that the focus area FA201 or FA202 is not larger than the threshold value, the threshold value determination unit 253 outputs the setting area signal YS206 to the read control unit 270. The read control unit 270 instructs one of the video signal processing units 231 to 234 based on the setting area signal YS206 to record an image signal for recording corresponding to an image including the focus area FA201 or FA202. Read out from any of 241 to 244.

例えば、図6に示すように、フォーカス領域FA201またはFA202が記録用画像データRD202及びRD204に含まれる場合、読み出し制御部270は、映像信号処理部232及び234に指示して、記録部242及び244から記録用画像信号YS202及びYS204を読み出させる。   For example, as shown in FIG. 6, when the focus area FA201 or FA202 is included in the recording image data RD202 and RD204, the read control unit 270 instructs the video signal processing units 232 and 234 to record the recording units 242 and 244. From this, the recording image signals YS 202 and YS 204 are read out.

映像信号処理部232及び234は、記録用画像データRD202及びRD204からフォーカス領域FA201またはFA202を切り出し、YUV信号であるフォーカス領域対応信号YS212及びYS214を生成する。即ち、フォーカス領域対応信号YS212及びYS214は、非縮小の記録用画像データRD202及びRD204から生成される。   The video signal processing units 232 and 234 cut out the focus area FA 201 or FA 202 from the recording image data RD 202 and RD 204 and generate focus area correspondence signals YS 212 and YS 214 which are YUV signals. That is, the focus area correspondence signals YS 212 and YS 214 are generated from the non-reduced recording image data RD 202 and RD 204.

読み出し制御部270は、フォーカス領域FA201またはFA202に対応するように、フォーカス領域対応信号YS212及びYS214を統合させて設定領域信号YS207を生成し、オートフォーカス制御部260へ出力する。即ち、設定領域信号YS207は非縮小の記録用画像データRD201〜RD204に基づいて生成される。なお、設定領域信号YS207を第2実施形態における第2の設定領域信号とする。   The read control unit 270 integrates the focus area correspondence signals YS 212 and YS 214 so as to correspond to the focus area FA 201 or FA 202, generates a setting area signal YS 207, and outputs the setting area signal YS 207 to the autofocus control unit 260. That is, the setting area signal YS207 is generated based on the non-reduced recording image data RD201 to RD204. The set area signal YS207 is taken as a second set area signal in the second embodiment.

オートフォーカス制御部260は、設定領域信号YS206またはYS207に基づいて制御信号CS201を生成し、レンズ駆動部213へ出力する。レンズ駆動部213は制御信号CS201に基づいてレンズ212を駆動し、フォーカス制御を実行する。   The autofocus control unit 260 generates a control signal CS201 based on the setting area signal YS206 or YS207, and outputs the control signal CS201 to the lens drive unit 213. The lens driving unit 213 drives the lens 212 based on the control signal CS201 to execute focus control.

図7に示すフローチャートを用いて、撮像装置200におけるフォーカス制御方法の一例を説明する。撮像素子211は、ステップS201にて、被写体を撮像し、原画像データRD200を生成する。画像データ分割部221は、ステップS202にて、原画像データRD200を非縮小で分割し、記録用画像データRD201〜RD204を生成する。   An example of the focus control method in the imaging device 200 will be described using the flowchart shown in FIG. 7. In step S201, the imaging element 211 captures an object and generates original image data RD200. In step S202, the image data division unit 221 divides the original image data RD200 without reduction and generates recording image data RD201 to RD204.

映像信号処理部231〜234は、ステップS203にて、記録用画像データRD201〜RD204をYUV信号に変換して記録用画像信号YS201〜YS204を生成し、記録部241〜244に記録させる。   In step S203, the video signal processing units 231 to 234 convert the recording image data RD201 to RD204 into YUV signals to generate recording image signals YS201 to YS204, and cause the recording units 241 to 244 to record.

画像データ縮小部222は、ステップS204にて、原画像データRD200を縮小リサイズ処理し、縮小画像データRD205を生成する。映像信号処理部235は、ステップS205にて、縮小画像データRD205をYUV信号に変換し、縮小画像信号YS205を生成する。   In step S204, the image data reduction unit 222 reduces and resizes the original image data RD200 to generate reduced image data RD205. In step S205, the video signal processing unit 235 converts the reduced image data RD 205 into a YUV signal, and generates a reduced image signal YS 205.

自動設定部251は、ステップS206にて、縮小画像信号YS205に基づいてフォーカス領域FA201を設定する。ユーザは、ステップS207にて、手動設定部252を操作してフォーカス領域FA202を設定してもよい。しきい値判定部253は、ステップS208にて、フォーカス領域FA201またはFA202がしきい値よりも大きいか否かを判定する。   In step S206, the automatic setting unit 251 sets the focus area FA201 based on the reduced image signal YS205. The user may set the focus area FA 202 by operating the manual setting unit 252 in step S207. The threshold determination unit 253 determines in step S208 whether the focus area FA201 or FA202 is larger than the threshold.

フォーカス領域FA201またはFA202がしきい値よりも大きい(YES)と判定された場合、しきい値判定部253は、ステップS209にて、フォーカス領域FA201またはFA202の位置及び範囲を含むフォーカス領域データを、設定領域信号YS206として生成し、オートフォーカス制御部260へ出力する。   When it is determined that the focus area FA201 or FA202 is larger than the threshold (YES), the threshold determination unit 253 determines the focus area data including the position and the range of the focus area FA201 or FA202 in step S209. The setting area signal YS 206 is generated and output to the autofocus control unit 260.

フォーカス領域FA201またはFA202がしきい値よりも大きくない(NO)と判定された場合、しきい値判定部253は、ステップS210にて、設定領域信号YS206を読み出し制御部270へ出力する。読み出し制御部270は、ステップS211にて、設定領域信号YS206に基づいて、映像信号処理部231〜234のうちのいずれかに指示して、フォーカス領域FA201またはFA202を含む画像に対応する記録用画像信号を、記録部241〜244のうちのいずれかから読み出させる。   If it is determined that the focus area FA201 or FA202 is not larger than the threshold value (NO), the threshold value determination unit 253 outputs the setting area signal YS206 to the read control unit 270 in step S210. In step S211, the read control unit 270 instructs one of the video signal processing units 231 to 234 based on the set area signal YS206 to record an image for recording corresponding to the image including the focus area FA201 or FA202. A signal is read from one of the recording units 241 to 244.

例えば、フォーカス領域FA201またはFA202が記録用画像データRD202及びRD204に含まれる場合、読み出し制御部270は、映像信号処理部232及び234に指示して、記録部242及び244から記録用画像信号YS202及びYS204を読み出させる。   For example, when the focus area FA201 or FA202 is included in the recording image data RD202 and RD204, the read control unit 270 instructs the video signal processing units 232 and 234 to output the recording image signal YS202 from the recording units 242 and 244. The YS 204 is read.

映像信号処理部232及び234は、ステップS212にて、記録用画像データRD202及びRD204からフォーカス領域FA201またはFA202を切り出し、フォーカス領域対応信号YS212及びYS214を生成する。読み出し制御部270は、ステップS213にて、フォーカス領域FA201またはFA202に対応するように、フォーカス領域対応信号YS212及びYS214を統合させて設定領域信号YS207を生成し、オートフォーカス制御部260へ出力する。   In step S212, the video signal processing units 232 and 234 cut out the focus area FA201 or FA202 from the recording image data RD202 and RD204, and generate focus area correspondence signals YS212 and YS214. In step S 213, the read control unit 270 integrates the focus area correspondence signals YS 212 and YS 214 so as to correspond to the focus area FA 201 or FA 202, generates a setting area signal YS 207, and outputs the generated setting area signal YS 207 to the autofocus control unit 260.

オートフォーカス制御部260は、ステップS214にて、設定領域信号YS206またはYS207に基づいて制御信号CS201を生成する。レンズ駆動部213は、ステップS215にて、制御信号CS201に基づいてレンズ212を駆動し、フォーカス制御を実行する。   In step S214, the autofocus control unit 260 generates a control signal CS201 based on the setting area signal YS206 or YS207. In step S215, the lens drive unit 213 drives the lens 212 based on the control signal CS201, and executes focus control.

第2実施形態の撮像装置200は、フォーカス領域FA201またはFA202がしきい値よりも大きいと判定された場合には、縮小リサイズ処理された縮小画像データRD205に基づいてフォーカス制御を実行する。第2実施形態の撮像装置200は、フォーカス領域FA201またはFA202がしきい値よりも大きくないと判定された場合には、非縮小の記録用画像データRD202及びRD204からフォーカス領域FA201またはFA202を切り出して生成された設定領域信号YS207に基づいてフォーカス制御を実行する。   When it is determined that the focus area FA201 or FA202 is larger than the threshold value, the imaging device 200 according to the second embodiment executes focus control based on the reduced image data RD205 subjected to the reduction resizing process. When it is determined that the focus area FA201 or FA202 is not larger than the threshold value, the imaging device 200 according to the second embodiment cuts out the focus area FA201 or FA202 from the non-reduced recording image data RD202 and RD204. Focus control is performed based on the generated setting area signal YS207.

従って、第2実施形態の撮像装置200によれば、フォーカス領域FA201またはFA202がしきい値よりも大きくない場合には、縮小画像データRD205よりも高い解像度を有する非縮小の記録用画像データに基づいてフォーカス制御が実行されるため、フォーカス制御の精度を向上させることができる。   Therefore, according to the imaging device 200 of the second embodiment, when the focus area FA201 or FA202 is not larger than the threshold value, based on the non-reduced recording image data having a higher resolution than the reduced image data RD205. Since focus control is performed, the accuracy of focus control can be improved.

[第3実施形態]
図8を用いて、第3実施形態の撮像装置を説明する。撮像装置300は、カメラヘッド310と、画像データ処理部320と、映像信号処理部331〜335と、記録部341〜344と、AEホワイトバランス制御部350と、オートフォーカス制御部360と、輝度信号処理部370とを備える。記録部341〜344は例えば半導体メモリである。
Third Embodiment
An imaging apparatus according to the third embodiment will be described with reference to FIG. The imaging device 300 includes a camera head 310, an image data processing unit 320, video signal processing units 331 to 335, recording units 341 to 344, an AE white balance control unit 350, an autofocus control unit 360, and a luminance signal. And a processing unit 370. The recording units 341 to 344 are, for example, semiconductor memories.

カメラヘッド310は、撮像素子311と、レンズ312と、レンズ駆動部313とを有する。画像データ処理部320は、画像データ分割部321と、画像データ縮小部322と、Gデータ縮小部323とを有する。   The camera head 310 includes an imaging element 311, a lens 312, and a lens driving unit 313. The image data processing unit 320 includes an image data division unit 321, an image data reduction unit 322, and a G data reduction unit 323.

撮像素子311は被写体を撮像して、8K画像を動画または静止画で生成することができる。レンズ駆動部313がレンズ312を駆動することにより、撮像素子311はフォーカス調整された画像を生成することができる。撮像素子311は被写体を撮像し、8KのRAWデータを原画像データRD300として生成する。撮像素子311は原画像データRD300を、画像データ分割部321、画像データ縮小部322、及び、Gデータ縮小部323へ出力する。   The imaging element 311 can capture an object and generate an 8K image as a moving image or a still image. The lens driving unit 313 drives the lens 312, whereby the imaging device 311 can generate an image that has been subjected to focus adjustment. The imaging element 311 captures an object, and generates 8K RAW data as original image data RD300. The imaging element 311 outputs the original image data RD 300 to the image data division unit 321, the image data reduction unit 322, and the G data reduction unit 323.

画像データ分割部321は、図2に示すように、8Kの原画像データRD300を非縮小で分割し、4KのRAWデータを記録用画像データRD301〜RD304として生成する。画像データ分割部321は、記録用画像データRD301〜RD304を映像信号処理部331〜334へ出力する。映像信号処理部331〜334は、記録用画像データRD301〜RD304をYUV信号に変換して記録用画像信号YS301〜YS304を生成し、記録部341〜344に記録させる。   As shown in FIG. 2, the image data division unit 321 divides the 8K original image data RD300 without reduction and generates 4K RAW data as recording image data RD301 to RD304. The image data division unit 321 outputs the recording image data RD301 to RD304 to the video signal processing units 331 to 334. The video signal processing units 331 to 334 convert the recording image data RD301 to RD304 into YUV signals to generate recording image signals YS301 to YS304, and cause the recording units 341 to 344 to record.

画像データ縮小部322は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD300を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD305として生成する。なお、図3は原画像データRD300及び縮小画像データRD305のフレームの一部を対応させて示している。   For example, as shown in FIG. 3, the image data reduction unit 322 reduces and resizes the 8K original image data RD300 arranged in a Bayer array, and generates reduced 4K RAW data of the Bayer array as a reduced image data RD305. FIG. 3 shows a part of the frames of the original image data RD300 and the reduced image data RD305 in association with each other.

画像データ縮小部322は、縮小画像データRD305を映像信号処理部335へ出力する。映像信号処理部335は、縮小画像データRD305をYUV信号に変換して縮小画像信号YS305を生成し、AEホワイトバランス制御部350へ出力する。   The image data reduction unit 322 outputs the reduced image data RD 305 to the video signal processing unit 335. The video signal processing unit 335 converts the reduced image data RD 305 into a YUV signal to generate a reduced image signal YS 305, and outputs the reduced image signal YS 305 to the AE white balance control unit 350.

AEホワイトバランス制御部350は、縮小画像信号YS305に基づいて、AE(自動露出補正)及びホワイトバランス制御を実行する。Gデータ縮小部323は、8Kの原画像データRD300からGデータを切り出し、例えば4Kの非縮小のRAWデータをG画像データRD306として生成する。Gデータは緑色成分の画素データであり、G画像データRD306は緑色成分の画像データである。G画像データRD306は縮小画像データRD305と同じ4Kであるが、非縮小の緑色成分のみであるから、ベイヤ配列の縮小画像データRD305よりも解像度が高く、フォーカス制御に好適な画像データとなっている。   The AE white balance control unit 350 executes AE (automatic exposure correction) and white balance control based on the reduced image signal YS305. The G data reduction unit 323 cuts out G data from 8K original image data RD300, and generates, for example, 4K non-reduced RAW data as G image data RD306. G data is pixel data of a green component, and G image data RD 306 is image data of a green component. The G image data RD306 is 4K, which is the same as the reduced image data RD305, but has only a non-reduced green component, so it has higher resolution than the reduced image data RD305 in the Bayer array, and is suitable for focus control. .

Gデータ縮小部323は、G画像データRD306を輝度信号処理部370へ出力する。輝度信号処理部370は、G画像データRD306を輝度データのみを含むYUV信号に変換して輝度信号YS306を生成し、オートフォーカス制御部360へ出力する。   The G data reduction unit 323 outputs the G image data RD 306 to the luminance signal processing unit 370. The luminance signal processing unit 370 converts the G image data RD 306 into a YUV signal containing only luminance data to generate a luminance signal YS 306, and outputs the luminance signal YS 306 to the autofocus control unit 360.

オートフォーカス制御部360は、輝度信号YS306に基づいて制御信号CS301を生成し、レンズ駆動部313へ出力する。レンズ駆動部313は制御信号CS301に基づいてレンズ312を駆動し、フォーカス制御を実行する。   The autofocus control unit 360 generates a control signal CS301 based on the luminance signal YS306, and outputs the control signal CS301 to the lens drive unit 313. The lens driving unit 313 drives the lens 312 based on the control signal CS301 to execute focus control.

第3実施形態の撮像装置300は、原画像データRD300からGデータを切り出して非縮小のG画像データRD306を生成し、G画像データRD306に基づいてフォーカス制御を実行する。従って、第3実施形態の撮像装置300によれば、非縮小のG画像データRD306に基づいてフォーカス制御が実行されるため、フォーカス制御の精度を向上させることができる。   The imaging device 300 according to the third embodiment cuts out G data from the original image data RD300 to generate non-reduced G image data RD306, and executes focus control based on the G image data RD306. Therefore, according to the imaging device 300 of the third embodiment, focus control is performed based on the non-reduced G image data RD 306, so that the accuracy of focus control can be improved.

[第4実施形態]
図9を用いて、第4実施形態の撮像装置を説明する。撮像装置400は、カメラヘッド410と、画像データ処理部420と、映像信号処理部431〜434と、記録部441〜444と、フォーカス領域設定部450と、オートフォーカス制御部460と、縮小信号処理部470と、表示部480とを備える。記録部441〜444は例えば半導体メモリである。
Fourth Embodiment
An imaging device according to the fourth embodiment will be described with reference to FIG. The imaging apparatus 400 includes a camera head 410, an image data processing unit 420, video signal processing units 431 to 434, recording units 441 to 444, a focus area setting unit 450, an autofocus control unit 460, and reduction signal processing. A unit 470 and a display unit 480 are provided. The recording units 441 to 444 are, for example, semiconductor memories.

カメラヘッド410は、撮像素子411と、レンズ412と、レンズ駆動部413とを有する。画像データ処理部420は、画像データ分割部421と、画像データ縮小部422とを有する。フォーカス領域設定部450は、自動設定部451と、手動設定部452と、設定領域記憶部453と、設定領域読み出し部454とを有する。縮小信号処理部470は、画像データ切り出し部471と、映像信号処理部472及び473とを有する。   The camera head 410 includes an imaging element 411, a lens 412, and a lens driving unit 413. The image data processing unit 420 includes an image data division unit 421 and an image data reduction unit 422. The focus area setting unit 450 includes an automatic setting unit 451, a manual setting unit 452, a setting area storage unit 453, and a setting area reading unit 454. The reduction signal processing unit 470 includes an image data cutout unit 471 and video signal processing units 472 and 473.

撮像素子411は被写体を撮像して、8K画像を動画または静止画で生成することができる。レンズ駆動部413がレンズ412を駆動することにより、撮像素子411はフォーカス調整された画像を生成することができる。撮像素子411は被写体を撮像し、8KのRAWデータを原画像データRD400として生成する。撮像素子411は原画像データRD400を、画像データ分割部421、及び、画像データ縮小部422へ出力する。   The imaging device 411 can capture an object and generate an 8K image as a moving image or a still image. The lens driving unit 413 drives the lens 412, whereby the imaging device 411 can generate an image that has been subjected to focus adjustment. The imaging device 411 captures an object, and generates 8K RAW data as original image data RD400. The imaging element 411 outputs the original image data RD400 to the image data division unit 421 and the image data reduction unit 422.

画像データ分割部421は、図2に示すように、8Kの原画像データRD400を非縮小で分割し、4KのRAWデータを記録用画像データRD401〜RD404として生成する。画像データ分割部421は、記録用画像データRD401〜RD404を映像信号処理部431〜434へ出力する。映像信号処理部431〜434は、記録用画像データRD401〜RD404をYUV信号に変換して記録用画像信号YS401〜YS404を生成し、記録部441〜444に記録させる。   As shown in FIG. 2, the image data division unit 421 divides the 8K original image data RD 400 without reduction and generates 4K RAW data as recording image data RD 401 to RD 404. The image data division unit 421 outputs the recording image data RD401 to RD404 to the video signal processing units 431 to 434. The video signal processing units 431 to 434 convert the recording image data RD401 to RD404 into YUV signals to generate recording image signals YS401 to YS404, and cause the recording units 441 to 444 to record.

画像データ縮小部422は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD400を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD405として生成する。なお、図3は原画像データRD400及び縮小画像データRD405のフレームの一部を対応させて示している。   For example, as shown in FIG. 3, the image data reduction unit 422 reduces and resizes the 8K original image data RD400 in Bayer arrangement, and generates 4K RAW data of the reduced Bayer arrangement as reduced image data RD405. FIG. 3 shows a part of the frames of the original image data RD400 and the reduced image data RD405 in association with each other.

画像データ縮小部422は、縮小画像データRD405を映像信号処理部472、及び、画像データ切り出し部471へ出力する。映像信号処理部472は、縮小画像データRD405をYUV信号に変換して縮小画像信号YS405を生成し、自動設定部451、及び、表示部480へ出力する。なお、映像信号処理部472を第4実施形態における第1の映像信号処理部とする。   The image data reduction unit 422 outputs the reduced image data RD 405 to the video signal processing unit 472 and the image data cutout unit 471. The video signal processing unit 472 converts the reduced image data RD 405 into a YUV signal to generate a reduced image signal YS 405, and outputs the reduced image signal YS 405 to the automatic setting unit 451 and the display unit 480. The video signal processing unit 472 is referred to as a first video signal processing unit in the fourth embodiment.

自動設定部451は、縮小画像信号YS405に対して顔認識等の画像パターン認識処理を実行してフォーカス領域FA401を自動的に設定し、設定領域記憶部453に記憶させる。ユーザは、手動設定部452を操作してフォーカス領域FA402を設定し、設定領域記憶部453に記憶させることができる。ユーザが手動設定部452を操作した場合には、フォーカス領域FA401の代わりにフォーカス領域FA402が設定される。   The automatic setting unit 451 executes image pattern recognition processing such as face recognition on the reduced image signal YS 405 to automatically set the focus area FA 401 and causes the setting area storage unit 453 to store the focus area FA 401. The user can operate the manual setting unit 452 to set the focus area FA 402 and store the focus area FA 402 in the setting area storage unit 453. When the user operates the manual setting unit 452, the focus area FA402 is set instead of the focus area FA401.

設定領域読み出し部454は、設定領域記憶部453に記憶されているフォーカス領域FA402の位置及び範囲を含むフォーカス領域データを生成し、YUV信号である設定領域信号YS406としてオートフォーカス制御部460へ出力する。設定領域読み出し部454は、設定領域記憶部453に記憶されているフォーカス領域FA401の位置及び範囲を含むフォーカス領域データを、YUV信号であるフォーカス領域対応信号YS407として生成し、画像データ切り出し部471へ出力する。   The setting area readout unit 454 generates focus area data including the position and range of the focus area FA 402 stored in the setting area storage unit 453, and outputs the focus area data to the autofocus control unit 460 as a setting area signal YS406 that is a YUV signal. . The setting area reading unit 454 generates focus area data including the position and range of the focus area FA 401 stored in the setting area storage unit 453 as a focus area corresponding signal YS 407 which is a YUV signal, and sends it to the image data cutout unit 471. Output.

画像データ切り出し部471は、フォーカス領域対応信号YS407に基づいて、縮小画像データRD405からフォーカス領域FA401を切り出し、RAWデータであるフォーカス領域データRD406を生成する。画像データ切り出し部471は、フォーカス領域データRD406を映像信号処理部473へ出力する。   The image data cutout unit 471 cuts out the focus area FA401 from the reduced image data RD405 based on the focus area correspondence signal YS407, and generates focus area data RD406 that is RAW data. The image data cutout unit 471 outputs the focus area data RD406 to the video signal processing unit 473.

映像信号処理部473は、フォーカス領域データRD406をハイパスフィルタ処理してフォーカス領域データRD406から高周波成分を抽出し、YUV信号である設定領域信号YS408を生成する。映像信号処理部473は、設定領域信号YS408をオートフォーカス制御部460、及び、表示部480へ出力する。なお、映像信号処理部473を第4実施形態における第2の映像信号処理部とする。   The video signal processing unit 473 performs high-pass filter processing on the focus area data RD406 to extract a high frequency component from the focus area data RD406, and generates a set area signal YS408 that is a YUV signal. The video signal processing unit 473 outputs the setting area signal YS 408 to the autofocus control unit 460 and the display unit 480. The video signal processing unit 473 is referred to as a second video signal processing unit in the fourth embodiment.

オートフォーカス制御部460は、設定領域信号YS406またはYS408に基づいて制御信号CS401を生成し、レンズ駆動部413へ出力する。レンズ駆動部413は、制御信号CS401に基づいてレンズ412を駆動し、フォーカス制御を実行する。   The autofocus control unit 460 generates a control signal CS 401 based on the setting area signal YS 406 or YS 408, and outputs the control signal CS 401 to the lens drive unit 413. The lens driving unit 413 drives the lens 412 based on the control signal CS401 to execute focus control.

表示部480は画像合成部を含む。表示部480は、縮小画像信号YS405に基づいて、縮小画像データRD405に対応するフレーム全体の画像を表示し、設定領域信号YS408に基づいて、フォーカス領域データRD406に対応するフォーカス領域FA401の画像をフレーム全体の画像に合成して表示する。   The display unit 480 includes an image combining unit. Display unit 480 displays an image of the entire frame corresponding to reduced image data RD 405 based on reduced image signal YS 405, and based on set area signal YS 408, displays an image of focus area FA 401 corresponding to focus area data RD 406 Synthesize and display the entire image.

なお、表示部480の画像合成部に替えて、表示部480の前段に画像合成部を配置する構成としてもよい。この場合、画像合成部は、フォーカス領域データRD406に対応するフォーカス領域FA401の画像を、縮小画像データRD405に対応するフレーム全体の画像に合成して合成画像信号を生成し、表示部480へ出力する。表示部480は、合成画像信号に基づいて、フレーム全体の画像にフォーカス領域FA401の画像が合成された画像を表示する。   Note that, instead of the image combining unit of the display unit 480, an image combining unit may be disposed in the front stage of the display unit 480. In this case, the image combining unit combines the image of the focus area FA 401 corresponding to the focus region data RD 406 with the image of the entire frame corresponding to the reduced image data RD 405 to generate a combined image signal, and outputs it to the display unit 480. . The display unit 480 displays an image in which the image of the focus area FA 401 is combined with the image of the entire frame based on the combined image signal.

フォーカス領域FA401の画像はハイパスフィルタ処理されているため、表示部480はフォーカス領域FA401における被写体の輪郭の色または濃淡を、高調波成分に応じて変更させることにより強調表示させることができる。これにより、ユーザは、表示部480を見ながら手動で高精度にフォーカスを調整することができる。   Since the image of the focus area FA401 is subjected to high-pass filter processing, the display unit 480 can highlight the color or density of the outline of the subject in the focus area FA401 according to the harmonic component. Thus, the user can manually adjust the focus with high precision while looking at the display unit 480.

図10に示すフローチャートを用いて、撮像装置400におけるフォーカス制御方法の一例を説明する。撮像素子411は、ステップS401にて、被写体を撮像し、原画像データRD400を生成する。画像データ縮小部422は、ステップS402にて、原画像データRD400を縮小リサイズ処理し、縮小画像データRD405を生成する。映像信号処理部472は、ステップS403にて、縮小画像データRD405を信号処理して縮小画像信号YS405を生成し、自動設定部451、及び、表示部480へ出力する。   An example of the focus control method in the imaging device 400 will be described using the flowchart shown in FIG. In step S401, the imaging device 411 captures an object and generates original image data RD400. In step S402, the image data reduction unit 422 reduces and resizes the original image data RD400 to generate reduced image data RD405. In step S 403, the video signal processing unit 472 performs signal processing on the reduced image data RD 405 to generate a reduced image signal YS 405, and outputs the reduced image signal YS 405 to the automatic setting unit 451 and the display unit 480.

自動設定部451は、ステップS404にて、縮小画像信号YS405に基づいてフォーカス領域FA401を設定し、設定領域記憶部453に記憶させる。設定領域読み出し部454は、ステップS405にて、設定領域記憶部453に記憶されているフォーカス領域FA401の位置及び範囲を含むフォーカス領域データを、フォーカス領域対応信号YS407として生成し、画像データ切り出し部471へ出力する。   In step S 404, the automatic setting unit 451 sets the focus area FA 401 based on the reduced image signal YS 405 and causes the setting area storage unit 453 to store the focus area FA 401. In step S405, the setting area reading unit 454 generates focus area data including the position and the range of the focus area FA 401 stored in the setting area storage unit 453 as the focus area correspondence signal YS407, and the image data cutout unit 471. Output to

画像データ切り出し部471は、ステップS406にて、フォーカス領域対応信号YS407に基づいて、縮小画像データRD405からフォーカス領域FA401を切り出し、フォーカス領域データRD406を生成する。映像信号処理部473は、ステップS407にて、フォーカス領域データRD406をハイパスフィルタ処理し、フォーカス領域データRD406の高周波成分を抽出して設定領域信号YS408を生成し、オートフォーカス制御部460、及び、表示部480へ出力する。   In step S406, the image data cutout unit 471 cuts out the focus area FA401 from the reduced image data RD405 based on the focus area correspondence signal YS407, and generates focus area data RD406. In step S407, the video signal processing unit 473 performs high-pass filter processing of the focus area data RD406, extracts a high frequency component of the focus area data RD406, and generates a set area signal YS408. The autofocus control unit 460 and display Output to the part 480.

ユーザは、ステップS408にて、手動設定部452を操作してフォーカス領域FA402を設定してもよい。設定領域読み出し部454は、ステップS409にて、設定領域記憶部453に記憶されているフォーカス領域FA402の位置及び範囲を含むフォーカス領域データを、設定領域信号YS406として生成し、オートフォーカス制御部460へ出力する。   The user may set the focus area FA 402 by operating the manual setting unit 452 in step S408. In step S 409, the setting area reading unit 454 generates focus area data including the position and the range of the focus area FA 402 stored in the setting area storage unit 453 as the setting area signal YS 406, and sends it to the autofocus control unit 460. Output.

オートフォーカス制御部460は、ステップS410にて、設定領域信号YS406またはYS408に基づいて制御信号CS401を生成する。レンズ駆動部413は、ステップS411にて、制御信号CS401に基づいてレンズ412を駆動し、フォーカス制御を実行する。   In step S410, the autofocus control unit 460 generates a control signal CS401 based on the setting area signal YS406 or YS408. In step S411, the lens driving unit 413 drives the lens 412 based on the control signal CS401, and executes focus control.

表示部480は、ステップS407の後のステップS421にて、縮小画像信号YS405に基づいて、縮小画像データRD405に対応するフレーム全体の画像を表示し、設定領域信号YS408に基づいて、フォーカス領域データRD406に対応するフォーカス領域FA401の画像をフレーム全体の画像に合成して表示する。ユーザは、ステップS422にて、表示部480を見ながら手動でフォーカス調整を実行してもよい。   In step S421 after step S407, the display unit 480 displays an image of the entire frame corresponding to the reduced image data RD405 based on the reduced image signal YS405, and based on the set area signal YS408, the focus area data RD406. The image of the focus area FA 401 corresponding to is combined with the image of the entire frame and displayed. The user may perform focus adjustment manually while looking at the display unit 480 in step S422.

第4実施形態の撮像装置400は、ハイパスフィルタ処理によりフォーカス領域FA401における高周波成分が抽出されて生成された設定領域信号YS408に基づいてフォーカス制御を実行する。また、撮像装置400は、表示部480に、高周波成分が抽出されたフォーカス領域FA401の画像をフレーム全体の画像に合成して表示させる。   The imaging device 400 according to the fourth embodiment executes focus control based on the set area signal YS 408 generated by extracting a high frequency component in the focus area FA 401 by high-pass filter processing. In addition, the imaging device 400 causes the display unit 480 to combine and display the image of the focus area FA 401 from which the high-frequency component is extracted with the image of the entire frame.

これにより、撮像装置400は、フォーカス領域FA401における被写体の輪郭の色または濃淡を変更させて強調表示させることができる。そのため、ユーザは表示部480を見ながら手動で高精度にフォーカスを調整することができる。従って、第4実施形態の撮像装置400によれば、フォーカス制御の精度を向上させることができる。   As a result, the imaging device 400 can change and highlight the color or shade of the outline of the subject in the focus area FA401. Therefore, the user can manually adjust the focus with high precision while looking at the display unit 480. Therefore, according to the imaging device 400 of the fourth embodiment, the accuracy of focus control can be improved.

[第5実施形態]
図11を用いて、第5実施形態の撮像装置を説明する。撮像装置500は、カメラヘッド510と、画像データ処理部520と、映像信号処理部531〜534と、記録部541〜544と、フォーカス領域設定部550と、オートフォーカス制御部560と、縮小信号処理部570と、表示部580とを備える。記録部541〜544は例えば半導体メモリである。
Fifth Embodiment
An imaging device according to the fifth embodiment will be described with reference to FIG. The imaging device 500 includes a camera head 510, an image data processing unit 520, video signal processing units 531 to 534, recording units 541 to 544, a focus area setting unit 550, an autofocus control unit 560, and reduction signal processing. A unit 570 and a display unit 580 are provided. The recording units 541 to 544 are, for example, semiconductor memories.

カメラヘッド510は、撮像素子511と、レンズ512と、レンズ駆動部513とを有する。画像データ処理部520は、画像データ分割部521と、画像データ縮小部522とを有する。フォーカス領域設定部550は、自動設定部551と、手動設定部552と、設定領域記憶部553と、設定領域読み出し部554とを有する。縮小信号処理部570は、画像データ切り出し部571と、映像信号処理部572及び573と、ハイパス画像データ縮小部574とを有する。   The camera head 510 includes an imaging element 511, a lens 512, and a lens driving unit 513. The image data processing unit 520 includes an image data division unit 521 and an image data reduction unit 522. The focus area setting unit 550 includes an automatic setting unit 551, a manual setting unit 552, a setting area storage unit 553, and a setting area reading unit 554. The reduction signal processing unit 570 includes an image data cutout unit 571, video signal processing units 572 and 573, and a high pass image data reduction unit 574.

撮像素子511は被写体を撮像して、8K画像を動画または静止画で生成することができる。レンズ駆動部513がレンズ512を駆動することにより、撮像素子511はフォーカス調整された画像を生成することができる。撮像素子511は被写体を撮像し、8KのRAWデータを原画像データRD500として生成する。撮像素子511は原画像データRD500を、画像データ分割部521、画像データ縮小部522、及び、画像データ切り出し部571へ出力する。   The imaging element 511 can capture an object and generate an 8K image as a moving image or a still image. The lens driving unit 513 drives the lens 512, whereby the imaging device 511 can generate an image that has been subjected to focus adjustment. The imaging element 511 captures an object, and generates 8K RAW data as original image data RD500. The imaging element 511 outputs the original image data RD 500 to the image data division unit 521, the image data reduction unit 522, and the image data cutout unit 571.

画像データ分割部521は、図2に示すように、8Kの原画像データRD500を非縮小で分割し、4KのRAWデータを記録用画像データRD501〜RD504として生成する。画像データ分割部521は、記録用画像データRD501〜RD504を映像信号処理部531〜534へ出力する。映像信号処理部531〜534は、記録用画像データRD501〜RD504をYUV信号に変換して記録用画像信号YS501〜YS504を生成し、記録部541〜544に記録させる。   As shown in FIG. 2, the image data division unit 521 divides the 8K original image data RD 500 without reduction, and generates 4K RAW data as recording image data RD 501 to RD 504. The image data division unit 521 outputs the recording image data RD501 to RD504 to the video signal processing units 531 to 534. The video signal processing units 531 to 534 convert the recording image data RD501 to RD504 into YUV signals to generate recording image signals YS501 to YS504, and cause the recording units 541 to 544 to record them.

画像データ縮小部522は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD500を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD505として生成する。なお、図3は原画像データRD500及び縮小画像データRD505のフレームの一部を対応させて示している。   For example, as shown in FIG. 3, the image data reduction unit 522 reduces and resizes the 8K original image data RD500 arranged in a Bayer array, and generates reduced 4K RAW data of the Bayer array as a reduced image data RD505. FIG. 3 shows a part of the frames of the original image data RD 500 and the reduced image data RD 505 in correspondence with each other.

画像データ縮小部522は、縮小画像データRD505を映像信号処理部572へ出力する。映像信号処理部572は、縮小画像データRD505をYUV信号に変換して縮小画像信号YS505を生成し、自動設定部551、及び、表示部580へ出力する。なお、映像信号処理部572を第5実施形態における第1の映像信号処理部とする。   The image data reduction unit 522 outputs the reduced image data RD 505 to the video signal processing unit 572. The video signal processing unit 572 converts the reduced image data RD 505 into a YUV signal to generate a reduced image signal YS 505, and outputs the reduced image signal YS 505 to the automatic setting unit 551 and the display unit 580. The video signal processing unit 572 is referred to as a first video signal processing unit in the fifth embodiment.

自動設定部551は、縮小画像信号YS505に対して顔認識等の画像パターン認識処理を実行してフォーカス領域FA501を自動的に設定し、設定領域記憶部553に記憶させる。ユーザは、手動設定部552を操作してフォーカス領域FA502を設定し、設定領域記憶部553に記憶させることができる。ユーザが手動設定部552を操作した場合には、フォーカス領域FA501の代わりにフォーカス領域FA502が設定される。   The automatic setting unit 551 executes an image pattern recognition process such as face recognition on the reduced image signal YS 505 to automatically set the focus area FA 501 and causes the setting area storage unit 553 to store the focus area FA 501. The user can operate the manual setting unit 552 to set the focus area FA 502 and store the focus area FA 502 in the setting area storage unit 553. When the user operates the manual setting unit 552, the focus area FA 502 is set instead of the focus area FA 501.

設定領域読み出し部554は、設定領域記憶部553に記憶されているフォーカス領域FA502の位置及び範囲を含むフォーカス領域データを、YUV信号である設定領域信号YS506として生成し、オートフォーカス制御部560へ出力する。設定領域読み出し部554は、設定領域記憶部553に記憶されているフォーカス領域FA501の位置及び範囲を含むフォーカス領域データを生成し、フォーカス領域対応信号YS507として画像データ切り出し部571へ出力する。   The setting area reading unit 554 generates focus area data including the position and range of the focus area FA 502 stored in the setting area storage unit 553 as a setting area signal YS 506 which is a YUV signal, and outputs it to the autofocus control unit 560. Do. The setting area reading unit 554 generates focus area data including the position and range of the focus area FA 501 stored in the setting area storage unit 553, and outputs the focus area data to the image data clipping unit 571 as a focus area correspondence signal YS 507.

画像データ切り出し部571は、フォーカス領域対応信号YS507に基づいて、原画像データRD500からフォーカス領域FA501を切り出し、フォーカス領域データRD506を生成する。画像データ切り出し部571は、フォーカス領域データRD506を映像信号処理部573へ出力する。   The image data cutout unit 571 cuts out the focus area FA501 from the original image data RD500 based on the focus area correspondence signal YS507, and generates the focus area data RD506. The image data cutout unit 571 outputs the focus area data RD 506 to the video signal processing unit 573.

映像信号処理部573は、フォーカス領域データRD506をハイパスフィルタ処理してフォーカス領域データRD506から高周波成分を抽出し、YUV信号である設定領域信号YS508を生成する。映像信号処理部573は、設定領域信号YS508をハイパス画像データ縮小部574、及び、オートフォーカス制御部560へ出力する。なお、映像信号処理部573を第5実施形態における第2の映像信号処理部とする。   The video signal processing unit 573 high-pass filters the focus area data RD 506 to extract a high frequency component from the focus area data RD 506, and generates a set area signal YS 508 that is a YUV signal. The video signal processing unit 573 outputs the setting area signal YS 508 to the high pass image data reduction unit 574 and the autofocus control unit 560. The video signal processing unit 573 is referred to as a second video signal processing unit in the fifth embodiment.

ハイパス画像データ縮小部574は、設定領域信号YS508に基づいて、高周波成分が抽出されたフォーカス領域データRD506を縮小リサイズ処理してYUV信号を表示画像信号YS509として生成し、表示部580へ出力する。オートフォーカス制御部560は、設定領域信号YS506またはYS508に基づいて制御信号CS501を生成し、レンズ駆動部513へ出力する。レンズ駆動部513は、制御信号CS501に基づいてレンズ512を駆動し、フォーカス制御を実行する。   The high-pass image data reduction unit 574 reduces and resizes the focus area data RD 506 from which the high frequency component is extracted based on the setting area signal YS 508 to generate a YUV signal as a display image signal YS 509 and outputs it to the display unit 580. The autofocus control unit 560 generates a control signal CS 501 based on the setting area signal YS 506 or YS 508 and outputs the control signal CS 501 to the lens drive unit 513. The lens drive unit 513 drives the lens 512 based on the control signal CS501 to execute focus control.

表示部580は画像合成部を含む。表示部580は、縮小画像信号YS505に基づいて、縮小画像データRD505に対応するフレーム全体の画像を表示し、表示画像信号YS509に基づいて、フォーカス領域データRD506に対応するフォーカス領域FA501の画像をフレーム全体の画像に合成して表示する。   The display unit 580 includes an image combining unit. Display unit 580 displays an image of the entire frame corresponding to reduced image data RD 505 based on reduced image signal YS 505, and based on display image signal YS 509, the image of focus area FA 501 corresponding to focus area data RD 506 is framed. Synthesize and display the entire image.

なお、表示部580の画像合成部に替えて、表示部580の前段に画像合成部を配置する構成としてもよい。この場合、画像合成部は、フォーカス領域データRD506に対応するフォーカス領域FA501の画像を、縮小画像データRD505に対応するフレーム全体の画像に合成して合成画像信号を生成し、表示部580へ出力する。表示部580は、合成画像信号に基づいて、フレーム全体の画像にフォーカス領域FA501の画像が合成された画像を表示する。   Note that, instead of the image combining unit of the display unit 580, an image combining unit may be disposed upstream of the display unit 580. In this case, the image combining unit combines the image of the focus area FA 501 corresponding to the focus region data RD 506 with the image of the entire frame corresponding to the reduced image data RD 505 to generate a combined image signal and outputs it to the display unit 580 . The display unit 580 displays an image in which the image of the focus area FA 501 is combined with the image of the entire frame based on the combined image signal.

フォーカス領域FA501の画像はハイパスフィルタ処理されているため、表示部580はフォーカス領域FA501における被写体の輪郭の色または濃淡を、高調波成分に応じて変更させることにより強調表示させることができる。これにより、ユーザは、表示部580を見ながら、手動で高精度にフォーカスを調整することができる。   Since the image of the focus area FA501 is subjected to high-pass filter processing, the display unit 580 can highlight the color or density of the outline of the subject in the focus area FA501 according to the harmonic component. Thus, the user can manually adjust the focus with high precision while looking at the display unit 580.

図12に示すフローチャートを用いて、撮像装置500におけるフォーカス制御方法の一例を説明する。撮像素子511は、ステップS501にて、被写体を撮像し、原画像データRD500を生成する。画像データ縮小部522は、ステップS502にて、原画像データRD500を縮小リサイズ処理し、縮小画像データRD505を生成する。映像信号処理部572は、ステップS503にて、縮小画像データRD505を信号処理し、縮小画像信号YS505を生成する。   An example of the focus control method in the imaging device 500 will be described using the flowchart shown in FIG. In step S501, the imaging element 511 captures an object and generates original image data RD500. In step S502, the image data reduction unit 522 reduces and resizes the original image data RD500 to generate reduced image data RD505. In step S503, the video signal processing unit 572 performs signal processing on the reduced image data RD505 to generate a reduced image signal YS505.

自動設定部551は、ステップS504にて、縮小画像信号YS505に基づいてフォーカス領域FA501を設定し、設定領域記憶部553に記憶させる。設定領域読み出し部554は、ステップS505にて、設定領域記憶部553に記憶されているフォーカス領域FA501の位置及び範囲を含むフォーカス領域データを、フォーカス領域対応信号YS507として生成し、画像データ切り出し部571へ出力する。   In step S 504, the automatic setting unit 551 sets the focus area FA 501 based on the reduced image signal YS 505 and causes the setting area storage unit 553 to store the focus area FA 501. In step S505, the setting area reading unit 554 generates focus area data including the position and the range of the focus area FA 501 stored in the setting area storage unit 553 as a focus area correspondence signal YS507, and the image data cutout unit 571. Output to

画像データ切り出し部571は、ステップS506にて、フォーカス領域対応信号YS507に基づいて、原画像データRD500からフォーカス領域FA501を切り出し、フォーカス領域データRD506を生成する。   In step S506, the image data cutout unit 571 cuts out the focus area FA501 from the original image data RD500 based on the focus area correspondence signal YS507, and generates the focus area data RD506.

映像信号処理部573は、ステップS507にて、フォーカス領域データRD506をハイパスフィルタ処理し、フォーカス領域データRD506の高周波成分を抽出して設定領域信号YS508を生成する。映像信号処理部573は、設定領域信号YS508をハイパス画像データ縮小部574、及び、オートフォーカス制御部560へ出力する。   In step S507, the video signal processing unit 573 high-pass-filters the focus area data RD 506, extracts high frequency components of the focus area data RD 506, and generates a set area signal YS 508. The video signal processing unit 573 outputs the setting area signal YS 508 to the high pass image data reduction unit 574 and the autofocus control unit 560.

ユーザは、ステップS508にて、手動設定部552を操作してフォーカス領域FA502を設定してもよい。設定領域読み出し部554は、ステップS509にて、設定領域記憶部553に記憶されているフォーカス領域FA502の位置及び範囲を含むフォーカス領域データを、設定領域信号YS506として生成し、オートフォーカス制御部560へ出力する。   The user may set the focus area FA 502 by operating the manual setting unit 552 in step S508. In step S 509, the setting area reading unit 554 generates focus area data including the position and the range of the focus area FA 502 stored in the setting area storage unit 553 as the setting area signal YS 506, and sends it to the autofocus control unit 560. Output.

オートフォーカス制御部560は、ステップS510にて、設定領域信号YS506またはYS508に基づいて制御信号CS501を生成する。レンズ駆動部513は、ステップS511にて、制御信号CS501に基づいてレンズ512を駆動し、フォーカス制御を実行する。   In step S510, the autofocus control unit 560 generates a control signal CS501 based on the setting area signal YS506 or YS508. In step S511, the lens driving unit 513 drives the lens 512 based on the control signal CS501, and executes focus control.

ハイパス画像データ縮小部574は、ステップS507の後のステップS521にて、高周波成分が抽出されたフォーカス領域データRD506を縮小リサイズ処理して表示画像信号YS509を生成し、表示部580へ出力する。表示部580は、ステップS522にて、縮小画像信号YS505に基づいて、縮小画像データRD505に対応するフレーム全体の画像を表示させ、表示画像信号YS509に基づいて、縮小画像データRD505に対応するフォーカス領域FA501の画像をフレーム全体の画像に合成して表示させる。ユーザは、ステップS523にて、表示部580を見ながら手動でフォーカス調整を実行してもよい。   The high-pass image data reduction unit 574 reduces and resizes the focus area data RD 506 from which the high-frequency component is extracted in step S 521 after step S 507, generates a display image signal YS 509, and outputs it to the display unit 580. In step S522, display unit 580 displays an image of the entire frame corresponding to reduced image data RD505 based on reduced image signal YS505, and a focus area corresponding to reduced image data RD505 based on display image signal YS509. The image of FA 501 is combined with the image of the entire frame and displayed. The user may manually execute the focus adjustment while looking at the display unit 580 in step S523.

第5実施形態の撮像装置500は、ハイパスフィルタ処理によりフォーカス領域FA501における高周波成分が抽出されて生成された設定領域信号YS508に基づいてフォーカス制御を実行する。また、第5実施形態の撮像装置500は、表示部580に高周波成分が抽出されたフォーカス領域FA51を全画面画像に合成して表示させる。これにより、ユーザは表示部580を見ながら、手動で高精度にフォーカスを調整することができる。従って、第5実施形態の撮像装置500によれば、フォーカス制御の精度を向上させることができる。   The imaging device 500 according to the fifth embodiment executes focus control based on the set area signal YS 508 generated by extracting the high frequency component in the focus area FA 501 by high-pass filter processing. Further, the imaging device 500 according to the fifth embodiment causes the display unit 580 to combine and display the focus area FA51 in which the high frequency component is extracted on the entire screen image. Thus, the user can manually adjust the focus with high precision while looking at the display unit 580. Therefore, according to the imaging device 500 of the fifth embodiment, the accuracy of focus control can be improved.

[第6実施形態]
図13を用いて、第6実施形態の撮像装置を説明する。撮像装置600は、カメラヘッド610と、画像データ処理部620と、映像信号処理部631〜634と、記録部641〜644と、フォーカス領域設定部650と、オートフォーカス制御部660と、縮小信号処理部670と、表示部680とを備える。記録部641〜644は例えば半導体メモリである。
Sixth Embodiment
An imaging device according to the sixth embodiment will be described with reference to FIG. The imaging device 600 includes a camera head 610, an image data processing unit 620, video signal processing units 631-634, recording units 641-644, a focus area setting unit 650, an autofocus control unit 660, and reduction signal processing. A unit 670 and a display unit 680 are provided. The recording units 641 to 644 are, for example, semiconductor memories.

カメラヘッド610は、撮像素子611と、レンズ612と、レンズ駆動部613とを有する。画像データ処理部620は、画像データ分割部621と、画像データ縮小部622とを有する。フォーカス領域設定部650は、自動設定部651と、手動設定部652と、設定領域記憶部653と、設定領域読み出し部654とを有する。縮小信号処理部670は、画像データ切り出し部671と、映像信号処理部672及び673と、画像重畳部674とを有する。   The camera head 610 includes an imaging element 611, a lens 612, and a lens driving unit 613. The image data processing unit 620 includes an image data division unit 621 and an image data reduction unit 622. The focus area setting unit 650 includes an automatic setting unit 651, a manual setting unit 652, a setting area storage unit 653, and a setting area reading unit 654. The reduction signal processing unit 670 includes an image data cutout unit 671, video signal processing units 672 and 673, and an image superposition unit 674.

撮像素子611は被写体を撮像して、8K画像を動画または静止画で生成することができる。レンズ駆動部613がレンズ612を駆動することにより、撮像素子611はフォーカス調整された画像を生成することができる。撮像素子611は被写体を撮像し、8KのRAWデータを原画像データRD600として生成する。撮像素子611は原画像データRD600を、画像データ分割部621、画像データ縮小部622、及び、画像データ切り出し部671へ出力する。   The imaging element 611 can capture an object and generate an 8K image as a moving image or a still image. The lens driving unit 613 drives the lens 612, whereby the imaging element 611 can generate an image that has been subjected to focus adjustment. The imaging element 611 captures an object, and generates 8K RAW data as original image data RD600. The imaging element 611 outputs the original image data RD 600 to the image data division unit 621, the image data reduction unit 622, and the image data cutout unit 671.

画像データ分割部621は、図2に示すように、8Kの原画像データRD600を非縮小で分割し、4KのRAWデータを記録用画像データRD601〜RD604として生成する。画像データ分割部621は、記録用画像データRD601〜RD604を映像信号処理部631〜634へ出力する。映像信号処理部631〜634は、記録用画像データRD601〜RD604をYUV信号に変換して記録用画像信号YS601〜YS604を生成し、記録部641〜644に記録させる。   As shown in FIG. 2, the image data division unit 621 divides the 8K original image data RD600 without reduction and generates 4K RAW data as recording image data RD601 to RD604. The image data division unit 621 outputs the recording image data RD601 to RD604 to the video signal processing units 631 to 634. The video signal processing units 631 to 634 convert the recording image data RD601 to RD604 into YUV signals to generate recording image signals YS601 to YS604, and make the recording units 641 to 644 record them.

画像データ縮小部622は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD600を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD605として生成する。なお、図3は原画像データRD600及び縮小画像データRD605のフレームの一部を対応させて示している。   For example, as shown in FIG. 3, the image data reduction unit 622 reduces and resizes the 8K original image data RD600 arranged in a Bayer array, and generates reduced 4K RAW data of the Bayer array as a reduced image data RD605. FIG. 3 shows a part of the frames of the original image data RD600 and the reduced image data RD605 in association with each other.

画像データ縮小部622は、縮小画像データRD605を映像信号処理部672へ出力する。映像信号処理部672は、縮小画像データRD605をYUV信号に変換して縮小画像信号YS605を生成し、自動設定部651、及び、画像重畳部674へ出力する。なお、映像信号処理部672を第6実施形態における第1の映像信号処理部とする。   The image data reduction unit 622 outputs the reduced image data RD 605 to the video signal processing unit 672. The video signal processing unit 672 converts the reduced image data RD 605 into a YUV signal to generate a reduced image signal YS 605, and outputs the reduced image signal YS 605 to the automatic setting unit 651 and the image overlapping unit 674. The video signal processing unit 672 is referred to as a first video signal processing unit in the sixth embodiment.

自動設定部651は、縮小画像信号YS605に対して顔認識等の画像パターン認識処理を実行してフォーカス領域FA601を自動的に設定し、設定領域記憶部653に記憶させる。ユーザは、手動設定部652を操作してフォーカス領域FA602を設定し、設定領域記憶部653に記憶させることができる。ユーザが手動設定部652を操作した場合には、フォーカス領域FA601の代わりにフォーカス領域FA602が設定される。   The automatic setting unit 651 executes image pattern recognition processing such as face recognition on the reduced image signal YS 605 to automatically set the focus area FA 601 and causes the setting area storage unit 653 to store the focus area FA 601. The user can operate the manual setting unit 652 to set the focus area FA 602 and store the focus area FA 602 in the setting area storage unit 653. When the user operates the manual setting unit 652, the focus area FA 602 is set instead of the focus area FA 601.

設定領域読み出し部654は、設定領域記憶部653に記憶されているフォーカス領域FA602の位置及び範囲を含むフォーカス領域データを、YUV信号である設定領域信号YS606として生成し、オートフォーカス制御部660へ出力する。設定領域読み出し部654は、設定領域記憶部653に記憶されているフォーカス領域FA601の位置及び範囲を含むフォーカス領域データを、フォーカス領域対応信号YS607として生成し、画像データ切り出し部671へ出力する。   The setting area reading unit 654 generates focus area data including the position and range of the focus area FA 602 stored in the setting area storage unit 653 as a setting area signal YS 606 that is a YUV signal, and outputs it to the autofocus control unit 660. Do. The setting area readout unit 654 generates focus area data including the position and range of the focus area FA 601 stored in the setting area storage unit 653 as a focus area correspondence signal YS 607, and outputs the focus area data to the image data cutout unit 671.

画像データ切り出し部671は、フォーカス領域対応信号YS607に基づいて、原画像データRD600からフォーカス領域FA601を切り出し、フォーカス領域FA601を示すフォーカス領域データRD606を生成する。画像データ切り出し部671は、フォーカス領域データRD606を映像信号処理部673へ出力する。   The image data cutout unit 671 cuts out the focus area FA601 from the original image data RD600 based on the focus area correspondence signal YS607, and generates focus area data RD606 indicating the focus area FA601. The image data cutout unit 671 outputs the focus area data RD 606 to the video signal processing unit 673.

映像信号処理部673は、フォーカス領域データRD606をYUV信号に変換して設定領域信号YS608を生成し、画像重畳部674、及び、オートフォーカス制御部660へ出力する。なお、映像信号処理部673を第6実施形態における第2の映像信号処理部とする。   The video signal processing unit 673 converts the focus area data RD 606 into a YUV signal to generate a set area signal YS 608, and outputs the set area signal YS 608 to the image superimposing unit 674 and the autofocus control unit 660. The video signal processing unit 673 is referred to as a second video signal processing unit in the sixth embodiment.

画像重畳部674は、縮小画像データRD605に対応するフレーム全体の画像に、フォーカス領域データRD606に対応するフォーカス領域FA601の画像を重畳させてYUV信号である表示画像信号YS609を生成し、表示部680へ出力する。   The image superimposing unit 674 superimposes the image of the focus area FA 601 corresponding to the focus area data RD 606 on the image of the entire frame corresponding to the reduced image data RD 605 to generate a display image signal YS 609 which is a YUV signal. Output to

オートフォーカス制御部660は、設定領域信号YS606またはYS608に基づいて制御信号CS601を生成し、レンズ駆動部613へ出力する。レンズ駆動部613は、制御信号CS601に基づいてレンズ612を駆動し、フォーカス制御を実行する。   The autofocus control unit 660 generates a control signal CS601 based on the setting area signal YS606 or YS608, and outputs the control signal CS601 to the lens drive unit 613. The lens driving unit 613 drives the lens 612 based on the control signal CS601 to execute focus control.

表示部680は、縮小画像データRD605に対応するフレーム全体の画像に、フォーカス領域データRD606に対応するフォーカス領域FA601の画像が重畳された画像を表示する。表示部680は、フレーム全体の画像におけるフォーカス領域FA601の重心と、重畳されるフォーカス領域FA601の重心とが一致するように、フォーカス領域FA601の画像をフレーム全体の画像に重畳して表示させることが好ましい。   The display unit 680 displays an image in which the image of the focus area FA 601 corresponding to the focus area data RD 606 is superimposed on the image of the entire frame corresponding to the reduced image data RD 605. The display unit 680 may superimpose the image of the focus area FA601 on the image of the entire frame so that the center of gravity of the focus area FA601 in the image of the entire frame coincides with the center of gravity of the focus area FA601 to be superimposed. preferable.

表示部680には、縮小リサイズ処理されたフレーム全体の画像に非縮小のフォーカス領域FA601の画像が重畳されるため、フォーカス領域FA601はフレーム全体の画像上にフレーム全体の画像よりも高い解像度で表示される。そのため、ユーザは、表示部680を見ながら、手動で高精度にフォーカスを調整することができる。   The display area 680 superimposes the image of the non-scaled focus area FA601 on the image of the whole frame subjected to the reduction and resizing processing, so the focus area FA601 is displayed on the image of the whole frame at a higher resolution than the image of the whole frame. Be done. Therefore, the user can manually adjust the focus with high precision while looking at the display portion 680.

図14に示すフローチャートを用いて、撮像装置600におけるフォーカス制御方法の一例を説明する。撮像素子611は、ステップS601にて、被写体を撮像し、原画像データRD600を生成する。画像データ縮小部622は、ステップS602にて、原画像データRD600を縮小リサイズ処理し、縮小画像データRD605を生成する。映像信号処理部672は、ステップS603にて、縮小画像データRD605を信号処理して縮小画像信号YS605を生成し、自動設定部651、及び、画像重畳部674へ出力する。   An example of the focus control method in the imaging device 600 will be described using the flowchart shown in FIG. In step S601, the image pickup device 611 picks up an object to generate original image data RD600. In step S602, the image data reduction unit 622 reduces and resizes the original image data RD600 to generate reduced image data RD605. In step S 603, the video signal processing unit 672 performs signal processing on the reduced image data RD 605 to generate a reduced image signal YS 605, and outputs the reduced image signal YS 605 to the automatic setting unit 651 and the image overlapping unit 674.

自動設定部651は、ステップS604にて、縮小画像信号YS605に基づいてフォーカス領域FA601を設定し、設定領域記憶部653に記憶させる。設定領域読み出し部654は、ステップS605にて、設定領域記憶部653に記憶されているフォーカス領域FA601の位置及び範囲を含むフォーカス領域データを、フォーカス領域対応信号YS607として生成し、画像データ切り出し部671へ出力する。   In step S 604, the automatic setting unit 651 sets the focus area FA 601 based on the reduced image signal YS 605 and causes the setting area storage unit 653 to store the focus area FA 601. In step S 605, the setting area reading unit 654 generates focus area data including the position and the range of the focus area FA 601 stored in the setting area storage unit 653 as a focus area correspondence signal YS 607. Output to

画像データ切り出し部671は、ステップS606にて、フォーカス領域対応信号YS607に基づいて、原画像データRD600からフォーカス領域FA601を切り出し、フォーカス領域データRD606を生成する。映像信号処理部673は、ステップS607にて、フォーカス領域データRD606を信号処理して設定領域信号YS608を生成し、画像重畳部674、及び、オートフォーカス制御部660へ出力する。   In step S606, the image data cutout unit 671 cuts out the focus area FA601 from the original image data RD600 based on the focus area correspondence signal YS607, and generates focus area data RD606. In step S 607, the video signal processing unit 673 performs signal processing on the focus area data RD 606 to generate a set area signal YS 608, and outputs the set area signal YS 608 to the image superimposing unit 674 and the autofocus control unit 660.

ユーザは、ステップS608にて、手動設定部652を操作してフォーカス領域FA602を設定してもよい。設定領域読み出し部654は、ステップS609にて、設定領域記憶部653に記憶されているフォーカス領域FA602の位置及び範囲を含むフォーカス領域データを、設定領域信号YS606として生成し、オートフォーカス制御部660へ出力する。   The user may set the focus area FA 602 by operating the manual setting unit 652 in step S608. In step S 609, the setting area reading unit 654 generates focus area data including the position and the range of the focus area FA 602 stored in the setting area storage unit 653 as the setting area signal YS 606, and sends it to the autofocus control unit 660. Output.

オートフォーカス制御部660は、ステップS610にて、設定領域信号YS606またはYS608に基づいて制御信号CS601を生成する。レンズ駆動部613は、ステップS611にて、制御信号CS601に基づいてレンズ612を駆動させ、フォーカス制御を実行する。   In step S610, the autofocus control unit 660 generates a control signal CS601 based on the setting area signal YS606 or YS608. In step S611, the lens driving unit 613 drives the lens 612 based on the control signal CS601 to execute focus control.

画像重畳部674は、ステップS607の後のステップS621にて、縮小画像データRD605に対応するフレーム全体の画像に、フォーカス領域データRD606に対応するフォーカス領域FA601の画像を重畳させて表示画像信号YS609を生成し、表示部680へ出力する。   The image superimposing unit 674 superimposes the image of the focus area FA601 corresponding to the focus area data RD 606 on the image of the entire frame corresponding to the reduced image data RD 605 in step S 621 after step S 607 and outputs the display image signal YS 609. It is generated and output to the display unit 680.

表示部680は、ステップS622にて、表示画像信号YS609に基づいて、縮小画像データRD605に対応するフレーム全体の画像に、フォーカス領域データRD606に対応するフォーカス領域FA601の画像が重畳された画像を表示する。ユーザは、ステップS623にて、表示部680を見ながら、手動でフォーカス調整を実行してもよい。   At step S 622, display unit 680 displays an image in which the image of focus area FA 601 corresponding to focus area data RD 606 is superimposed on the image of the entire frame corresponding to reduced image data RD 605 based on display image signal YS 609. Do. The user may manually execute the focus adjustment while looking at the display unit 680 in step S623.

第6実施形態の撮像装置600は、原画像データRD600からフォーカス領域FA601が切り出された非縮小のフォーカス領域データRD606に基づいてフォーカス制御を実行する。また、第6実施形態の撮像装置600は、表示部680に、フレーム全体の画像に非縮小のフォーカス領域FA601の画像を重畳して表示させる。これにより、ユーザは、表示部680を見ながら、手動で高精度にフォーカスを調整することができる。従って、第6実施形態の撮像装置600によれば、フォーカス制御の精度を向上させることができる。   The imaging device 600 according to the sixth embodiment executes focus control based on the non-reduced focus area data RD 606 obtained by cutting out the focus area FA 601 from the original image data RD 600. Further, the imaging device 600 according to the sixth embodiment causes the display unit 680 to superimpose the image of the non-reduced focus area FA601 on the image of the entire frame and display the superimposed image. Thus, the user can manually adjust the focus with high precision while looking at the display unit 680. Therefore, according to the imaging device 600 of the sixth embodiment, the accuracy of focus control can be improved.

[第7実施形態]
図15を用いて、第7実施形態の撮像装置を説明する。撮像装置700は、カメラヘッド710と、画像データ処理部720と、映像信号処理部731〜735と、記録部741〜744と、フォーカス領域設定部750と、オートフォーカス制御部760と、位相データ処理部770と、表示部780と、切り替え操作部790と、マニュアルフォーカス操作部791とを備える。記録部741〜744は例えば半導体メモリである。
Seventh Embodiment
An imaging device according to a seventh embodiment will be described with reference to FIG. The imaging apparatus 700 includes a camera head 710, an image data processing unit 720, video signal processing units 731 to 735, recording units 741 to 744, a focus area setting unit 750, an autofocus control unit 760, and phase data processing. A unit 770, a display unit 780, a switching operation unit 790, and a manual focus operation unit 791. The recording units 741 to 744 are, for example, semiconductor memories.

カメラヘッド710は、撮像素子711と、レンズ712と、レンズ駆動部713とを有する。画像データ処理部720は、画像データ分割部721と、画像データ縮小部722とを有する。フォーカス領域設定部750は、自動設定部751と、手動設定部752と、設定領域記憶部753と、設定領域読み出し部754とを有する。位相データ処理部770は、位相データ縮小部771と、位相データ切り出し部772と、位相データ画像変換部773とを有する。   The camera head 710 includes an imaging element 711, a lens 712, and a lens driving unit 713. The image data processing unit 720 includes an image data division unit 721 and an image data reduction unit 722. The focus area setting unit 750 includes an automatic setting unit 751, a manual setting unit 752, a setting area storage unit 753, and a setting area reading unit 754. The phase data processing unit 770 includes a phase data reduction unit 771, a phase data extraction unit 772, and a phase data image conversion unit 773.

撮像素子711は被写体を撮像して、8K画像を動画または静止画で生成することができる。レンズ駆動部713がレンズ712を駆動することにより、撮像素子711はフォーカス調整された画像を生成することができる。撮像素子711は、画素ごとに2つのフォトダイオードを有する。撮像素子711は被写体を撮像し、画素ごとに2つのフォトダイオードにより生成された受光信号を加算し、8KのRAWデータを原画像データRD700として生成する。   The imaging element 711 can capture an object and generate an 8K image as a moving image or a still image. The lens driving unit 713 drives the lens 712, whereby the imaging device 711 can generate an image that has been subjected to focus adjustment. The imaging device 711 has two photodiodes for each pixel. The imaging device 711 captures an image of an object, adds light reception signals generated by two photodiodes for each pixel, and generates 8K RAW data as original image data RD700.

撮像素子711は原画像データRD700を、画像データ分割部721、及び、画像データ縮小部722へ出力する。撮像素子711は、画素ごとに2つのフォトダイオードによりそれぞれ生成された受光信号を、加算せずに8Kの位相データPD700として位相データ縮小部771、及び、位相データ切り出し部772へ出力する。   The imaging element 711 outputs the original image data RD 700 to the image data division unit 721 and the image data reduction unit 722. The imaging element 711 outputs the light reception signals respectively generated by the two photodiodes for each pixel to the phase data reduction unit 771 and the phase data extraction unit 772 as the 8K phase data PD 700 without addition.

画像データ分割部721は、図2に示すように、8Kの原画像データRD700を非縮小で分割し、4KのRAWデータを記録用画像データRD701〜RD704として生成する。画像データ分割部721は、記録用画像データRD701〜RD704を映像信号処理部731〜734へ出力する。映像信号処理部731〜734は、記録用画像データRD701〜RD704をYUV信号に変換して記録用画像信号YS701〜YS704を生成し、記録部741〜744に記録させる。   As shown in FIG. 2, the image data division unit 721 divides the 8K original image data RD 700 without reduction, and generates 4K RAW data as recording image data RD 701 to RD 704. The image data division unit 721 outputs the recording image data RD701 to RD704 to the video signal processing units 731 to 734. The video signal processing units 731 to 734 convert the recording image data RD 701 to RD 704 into YUV signals to generate recording image signals YS 701 to YS 704 and cause the recording units 741 to 744 to record them.

画像データ縮小部722は、図3に示すように、例えばベイヤ配列された8Kの原画像データRD700を縮小リサイズ処理し、縮小されたベイヤ配列の4KのRAWデータを縮小画像データRD705として生成する。なお、図3は原画像データRD700及び縮小画像データRD705のフレームの一部を対応させて示している。   As shown in FIG. 3, the image data reduction unit 722 reduces and resizes, for example, the 8K original image data RD 700 in Bayer arrangement, and generates 4K RAW data of the reduced Bayer arrangement as reduced image data RD 705. Note that FIG. 3 shows a part of the frames of the original image data RD 700 and the reduced image data RD 705 in correspondence with each other.

画像データ縮小部722は、縮小画像データRD705を映像信号処理部735へ出力する。映像信号処理部735は、縮小画像データRD705をYUV信号に変換して縮小画像信号YS705を生成し、自動設定部751、及び、表示部780へ出力する。   The image data reduction unit 722 outputs the reduced image data RD 705 to the video signal processing unit 735. The video signal processing unit 735 converts the reduced image data RD 705 into a YUV signal to generate a reduced image signal YS 705, and outputs the reduced image signal YS 705 to the automatic setting unit 751 and the display unit 780.

自動設定部751は、縮小画像信号YS705に対して顔認識等の画像パターン認識処理を実行してフォーカス領域FA701を自動的に設定し、設定領域記憶部753に記憶させる。ユーザは、手動設定部752を操作してフォーカス領域FA702を設定し、設定領域記憶部753に記憶させることができる。ユーザが手動設定部752を操作した場合には、フォーカス領域FA701の代わりにフォーカス領域FA702が設定される。   The automatic setting unit 751 executes image pattern recognition processing such as face recognition on the reduced image signal YS 705 to automatically set the focus area FA 701 and stores the focus area FA 701 in the setting area storage unit 753. The user can operate the manual setting unit 752 to set the focus area FA 702 and store the focus area FA 702 in the setting area storage unit 753. When the user operates the manual setting unit 752, the focus area FA 702 is set instead of the focus area FA 701.

設定領域読み出し部754は、設定領域記憶部753に記憶されているフォーカス領域FA701またはFA702の位置及び範囲を含むフォーカス領域データを、YUV信号であるフォーカス領域対応信号YS706として生成し、位相データ切り出し部772へ出力する。   The setting area reading unit 754 generates focus area data including the position and range of the focus area FA 701 or FA 702 stored in the setting area storage unit 753 as a focus area corresponding signal YS 706 which is a YUV signal, and the phase data cutout unit Output to 772.

位相データ切り出し部772は、フォーカス領域対応信号YS706に基づいて、位相データPD700からフォーカス領域FA701またはFA702を切り出し、画素ごとに2つのフォトダイオードの受光信号を位相差法より処理し、非縮小のフォーカス領域位相データPD701を生成する。位相データ切り出し部772は、フォーカス領域位相データPD701をオートフォーカス制御部760へ出力する。   The phase data cutout unit 772 cuts out the focus area FA 701 or FA 702 from the phase data PD 700 based on the focus area corresponding signal YS 706, processes the light reception signals of two photodiodes for each pixel according to the phase difference method, and performs non-reduction focusing. Region phase data PD 701 is generated. The phase data cutout unit 772 outputs the focus area phase data PD 701 to the autofocus control unit 760.

位相データ縮小部771は、8Kの位相データPD700に基づいて、画素ごとに2つのフォトダイオードの受光信号を別々に縮小リサイズ処理し、例えば4Kの縮小位相データPD702を生成する。縮小リサイズ処理法として、画素ブロック内の画素値を加算する加算法、または、Gデータのみを切り出す間引き法を用いることができる。   The phase data reduction unit 771 separately reduces and resizes the light reception signals of the two photodiodes for each pixel based on the 8K phase data PD700, and generates, for example, 4K reduced phase data PD702. As a reduction resizing method, an addition method of adding pixel values in a pixel block or a thinning method of cutting out only G data can be used.

位相データ縮小部771は、縮小位相データPD702を位相データ画像変換部773へ出力する。位相データ画像変換部773は、縮小位相データPD702を位相表示画像信号PS700に変換し、表示部780へ出力する。   The phase data reduction unit 771 outputs the reduced phase data PD 702 to the phase data image conversion unit 773. The phase data image conversion unit 773 converts the reduced phase data PD 702 into a phase display image signal PS 700 and outputs the signal to the display unit 780.

表示部780は画像合成部を含む。表示部780は、縮小画像信号YS705に基づいて、縮小画像データRD705に対応するフレーム全体の画像を表示し、位相表示画像信号PS700に基づいて、縮小位相データPD702に対応する位相表示画像をフレーム全体の画像に合成して表示する。   The display unit 780 includes an image combining unit. The display unit 780 displays an image of the entire frame corresponding to the reduced image data RD 705 based on the reduced image signal YS 705, and the phase display image corresponding to the reduced phase data PD 702 based on the phase display image signal PS 700 Synthesize and display on the image of.

なお、表示部780の画像合成部に替えて、表示部780の前段に画像合成部を配置する構成としてもよい。この場合、画像合成部は、縮小位相データPD702に対応する位相表示画像を、縮小画像データRD705に対応するフレーム全体の画像に合成して合成画像信号を生成し、表示部780へ出力する。表示部780は、合成画像信号に基づいて、フレーム全体の画像に位相表示画像が合成された画像を表示する。   Note that, instead of the image combining unit of the display unit 780, the image combining unit may be disposed in the front stage of the display unit 780. In this case, the image combining unit combines the phase display image corresponding to the reduced phase data PD 702 with the image of the entire frame corresponding to the reduced image data RD 705 to generate a combined image signal and outputs it to the display unit 780. The display unit 780 displays an image in which the phase display image is combined with the image of the entire frame based on the combined image signal.

ユーザは、切り替え操作部790を操作して、フォーカス制御を自動で実行するか手動で実行するかを選択することができる。自動でのフォーカス制御が選択された場合、オートフォーカス制御部760は、フォーカス領域位相データPD701に基づいて制御信号CS701を生成し、レンズ駆動部713へ出力する。   The user can operate the switching operation unit 790 to select whether to execute focus control automatically or manually. When automatic focus control is selected, the auto-focus control unit 760 generates a control signal CS 701 based on the focus area phase data PD 701 and outputs the control signal CS 701 to the lens drive unit 713.

レンズ駆動部713は、制御信号CS701に基づいてレンズ712を駆動し、フォーカス制御を実行する。手動でのフォーカス制御が選択された場合、ユーザは、マニュアルフォーカス操作部791を操作し、レンズ駆動部713にレンズ712を駆動させ、フォーカス制御を実行する。   The lens drive unit 713 drives the lens 712 based on the control signal CS 701 to execute focus control. When manual focus control is selected, the user operates the manual focus operation unit 791 to drive the lens 712 by the lens drive unit 713 to execute focus control.

表示部780は画像合成部を含む。表示部780は、縮小画像データRD705に対応するフレーム全体の画像に、縮小位相データPD702に対応する位相表示画像を合成して表示する。そのため、表示部780は、位相表示画像に基づいて、被写体の輪郭の色または濃淡を変更させて強調表示させることができる。これにより、ユーザは、表示部780を見ながら、手動で高精度にフォーカスを調整することができる。   The display unit 780 includes an image combining unit. The display unit 780 combines the phase display image corresponding to the reduced phase data PD 702 with the image of the entire frame corresponding to the reduced image data RD 705 and displays it. Therefore, based on the phase display image, the display unit 780 can change and highlight the color or shade of the outline of the subject. Thus, the user can manually adjust the focus with high precision while looking at the display unit 780.

なお、表示部780の画像合成部に替えて、表示部780の前段に画像合成部を配置する構成としてもよい。この場合、画像合成部は、縮小位相データPD702に対応する位相表示画像を、縮小画像データRD705に対応するフレーム全体の画像に合成して合成画像信号を生成し、表示部780へ出力する。表示部780は、合成画像信号に基づいて、フレーム全体の画像に位相表示画像が合成された画像を表示する。   Note that, instead of the image combining unit of the display unit 780, the image combining unit may be disposed in the front stage of the display unit 780. In this case, the image combining unit combines the phase display image corresponding to the reduced phase data PD 702 with the image of the entire frame corresponding to the reduced image data RD 705 to generate a combined image signal and outputs it to the display unit 780. The display unit 780 displays an image in which the phase display image is combined with the image of the entire frame based on the combined image signal.

図16に示すフローチャートを用いて、撮像装置700におけるフォーカス制御方法の一例を説明する。ユーザは、切り替え操作部790を操作して、フォーカス制御を自動で実行するか手動で実行するかを選択することができる。   An example of the focus control method in the imaging device 700 will be described using the flowchart shown in FIG. The user can operate the switching operation unit 790 to select whether to execute focus control automatically or manually.

自動でのフォーカス制御が選択された場合を説明する。撮像素子711は、ステップS701にて、被写体を撮像し、原画像データRD700、及び、位相データPD700を生成する。画像データ縮小部722は、ステップS702にて、原画像データRD700を縮小リサイズ処理し、縮小画像データRD705を生成する。映像信号処理部735は、ステップS703にて、縮小画像データRD705を信号処理して縮小画像信号YS705を生成し、自動設定部751、及び、表示部780へ出力する。   The case where automatic focus control is selected will be described. In step S701, the imaging element 711 captures an object and generates original image data RD700 and phase data PD700. In step S702, the image data reduction unit 722 reduces and resizes the original image data RD700 to generate reduced image data RD705. In step S 703, the video signal processing unit 735 performs signal processing on the reduced image data RD 705 to generate a reduced image signal YS 705, and outputs the reduced image signal YS 705 to the automatic setting unit 751 and the display unit 780.

自動設定部751は、ステップS704にて、縮小画像信号YS705に基づいてフォーカス領域FA701を設定し、設定領域記憶部753に記憶させる。ユーザは、ステップS705にて、手動設定部752を操作してフォーカス領域FA702を設定し、設定領域記憶部753に記憶させてもよい。   In step S704, the automatic setting unit 751 sets the focus area FA 701 based on the reduced image signal YS 705, and stores the focus area FA 701 in the setting area storage unit 753. In step S 705, the user may operate the manual setting unit 752 to set the focus area FA 702 and store the focus area FA 702 in the setting area storage unit 753.

設定領域読み出し部754は、ステップS706にて、設定領域記憶部753に記憶されているフォーカス領域FA701またはFA702の位置及び範囲を含むフォーカス領域データを、フォーカス領域対応信号YS706として生成し、位相データ切り出し部772へ出力する。位相データ切り出し部772は、ステップS707にて、フォーカス領域対応信号YS706に基づいて、位相データPD700からフォーカス領域FA701またはFA702を切り出し、非縮小のフォーカス領域位相データPD701を生成してオートフォーカス制御部760へ出力する。   In step S706, the setting area reading unit 754 generates focus area data including the position and range of the focus area FA 701 or FA 702 stored in the setting area storage unit 753 as the focus area corresponding signal YS 706, and extracts phase data. Output to the part 772. At step S 707, phase data cutout unit 772 cuts out focus region FA 701 or FA 702 from phase data PD 700 based on focus region corresponding signal YS 706, generates non-reduced focus region phase data PD 701, and performs autofocus control unit 760. Output to

オートフォーカス制御部760は、ステップS708にて、フォーカス領域位相データPD701に基づいて制御信号CS701を生成する。レンズ駆動部713は、ステップS709にて、制御信号CS701に基づいてレンズ712を駆動し、フォーカス制御を実行する。   In step S 708, the autofocus control unit 760 generates a control signal CS 701 based on the focus area phase data PD 701. In step S709, the lens drive unit 713 drives the lens 712 based on the control signal CS701, and executes focus control.

手動でのフォーカス制御が選択された場合を説明する。撮像装置700は、ステップS701〜ステップS703の処理を実行する。位相データ縮小部771は、ステップS721にて、位相データPD700に基づいて、縮小位相データPD702を生成する。位相データ画像変換部773は、ステップS722にて、縮小位相データPD702を位相表示画像信号PS700に変換し、表示部780へ出力する。   The case where manual focus control is selected will be described. The imaging device 700 executes the processing of step S701 to step S703. At step S 721, the phase data reduction unit 771 generates reduced phase data PD 702 based on the phase data PD 700. At step S 722, phase data image conversion unit 773 converts reduced phase data PD 702 into phase display image signal PS 700, and outputs it to display unit 780.

表示部780は、ステップS723にて、縮小画像データRD705に対応するフレーム全体の画像に、縮小位相データPD702に対応する位相表示画像を合成して表示する。ユーザは、ステップS724にて、表示部780を見ながら手動でフォーカス調整を実行してもよい。   In step S723, the display unit 780 combines the phase display image corresponding to the reduced phase data PD 702 with the image of the entire frame corresponding to the reduced image data RD 705 and displays it. In step S 724, the user may manually execute focus adjustment while looking at the display unit 780.

第7実施形態の撮像装置700は、位相データPD700からフォーカス領域FA701または702が切り出された非縮小のフォーカス領域位相データPD701に基づいてフォーカス制御を実行する。また、第7実施形態の撮像装置700は、表示部780に、縮小画像データRD705に対応するフレーム全体の画像に、縮小位相データPD702に対応する位相表示画像を合成して表示する。これにより、ユーザは、表示部780を見ながら、手動で高精度にフォーカスを調整することができる。従って、第7実施形態の撮像装置700によれば、フォーカス制御の精度を向上させることができる。   The imaging device 700 according to the seventh embodiment executes focus control based on the non-reduced focus area phase data PD 701 obtained by cutting out the focus area FA 701 or 702 from the phase data PD 700. The imaging device 700 of the seventh embodiment combines the phase display image corresponding to the reduced phase data PD 702 with the image of the entire frame corresponding to the reduced image data RD 705 on the display unit 780 and displays the image. Thus, the user can manually adjust the focus with high precision while looking at the display unit 780. Therefore, according to the imaging device 700 of the seventh embodiment, the accuracy of focus control can be improved.

本発明は、上述した第1〜第7実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。   The present invention is not limited to the above-described first to seventh embodiments, and various modifications can be made without departing from the scope of the present invention.

第1〜第7実施形態では、原画像データを4つの記録用画像データに分割し、4つの記録部に記録しているが、原画像データを分割せずに1つの記録部に記録してもよい。   In the first to seventh embodiments, the original image data is divided into four recording image data and recorded in the four recording units, but the original image data is recorded in one recording unit without being divided. It is also good.

100 撮像装置
111 撮像素子
122 画像データ縮小部
123 画像データ切り出し部
135,136 映像信号処理部
151 自動設定部
153 しきい値判定部
160 オートフォーカス制御部
RD100 原画像データ
RD105 縮小画像データ
RD106 フォーカス領域データ
YS105 縮小画像信号
YS106,YS107 設定領域信号
FA101,FA102 フォーカス領域
Reference Signs List 100 image pickup apparatus 111 image pickup element 122 image data reduction unit 123 image data cutout unit 135, 136 video signal processing unit 151 automatic setting unit 153 threshold determination unit 160 auto focus control unit RD100 original image data RD105 reduced image data RD106 focus area data YS105 Reduced image signal YS106, YS107 Set area signal FA101, FA102 Focus area

Claims (1)

被写体を撮像して、原画像データを生成する撮像素子と、
前記原画像データを縮小リサイズ処理し、縮小画像データを生成する画像データ縮小部と、
前記縮小画像データに基づいて縮小画像信号を生成する第1の映像信号処理部と、
前記縮小画像信号に基づいてフォーカス領域を自動的に設定する自動設定部と、
前記フォーカス領域がしきい値よりも大きいか否かを判定し、前記フォーカス領域がしきい値よりも大きいと判定された場合に、前記縮小画像データに基づいて第1の設定領域信号を生成するしきい値判定部と、
前記フォーカス領域がしきい値よりも大きくないと判定された場合に、前記原画像データから前記フォーカス領域を切り出し、フォーカス領域データを生成する画像データ切り出し部と、
前記フォーカス領域データに基づいて第2の設定領域信号を生成する第2の映像信号処理部と、
前記第1または第2の設定領域信号に基づいてフォーカス制御を実行するオートフォーカス制御部と、
を備えることを特徴とする撮像装置。
An imaging element that captures an object and generates original image data;
An image data reduction unit that reduces and resizes the original image data to generate reduced image data;
A first video signal processing unit that generates a reduced image signal based on the reduced image data;
An automatic setting unit that automatically sets a focus area based on the reduced image signal;
It is determined whether the focus area is larger than a threshold, and when it is determined that the focus area is larger than a threshold, a first setting area signal is generated based on the reduced image data. A threshold determination unit;
An image data cutout unit that cuts out the focus area from the original image data and generates focus area data, when it is determined that the focus area is not larger than a threshold value;
A second video signal processing unit that generates a second set area signal based on the focus area data;
An autofocus control unit that executes focus control based on the first or second setting area signal;
An imaging apparatus comprising:
JP2017184969A 2017-09-26 2017-09-26 Imaging device Active JP6943115B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017184969A JP6943115B2 (en) 2017-09-26 2017-09-26 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017184969A JP6943115B2 (en) 2017-09-26 2017-09-26 Imaging device

Publications (2)

Publication Number Publication Date
JP2019061028A true JP2019061028A (en) 2019-04-18
JP6943115B2 JP6943115B2 (en) 2021-09-29

Family

ID=66177310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017184969A Active JP6943115B2 (en) 2017-09-26 2017-09-26 Imaging device

Country Status (1)

Country Link
JP (1) JP6943115B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003348422A (en) * 2002-05-23 2003-12-05 Canon Inc Imaging apparatus, imaging method, program and storage medium
JP2008199477A (en) * 2007-02-15 2008-08-28 Matsushita Electric Ind Co Ltd Imaging apparatus
JP2009267893A (en) * 2008-04-28 2009-11-12 Sony Corp Imaging apparatus
JP2014215551A (en) * 2013-04-26 2014-11-17 キヤノン株式会社 Image-capturing device and control method therefor
JP2015143815A (en) * 2013-12-27 2015-08-06 キヤノン株式会社 Imaging device, control method of the same, program thereof and recording medium thereof
JP2016015017A (en) * 2014-07-02 2016-01-28 ソニー株式会社 Imaging system, light projector and image processing method, beam light control method and program

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003348422A (en) * 2002-05-23 2003-12-05 Canon Inc Imaging apparatus, imaging method, program and storage medium
JP2008199477A (en) * 2007-02-15 2008-08-28 Matsushita Electric Ind Co Ltd Imaging apparatus
JP2009267893A (en) * 2008-04-28 2009-11-12 Sony Corp Imaging apparatus
JP2014215551A (en) * 2013-04-26 2014-11-17 キヤノン株式会社 Image-capturing device and control method therefor
JP2015143815A (en) * 2013-12-27 2015-08-06 キヤノン株式会社 Imaging device, control method of the same, program thereof and recording medium thereof
JP2016015017A (en) * 2014-07-02 2016-01-28 ソニー株式会社 Imaging system, light projector and image processing method, beam light control method and program

Also Published As

Publication number Publication date
JP6943115B2 (en) 2021-09-29

Similar Documents

Publication Publication Date Title
CN106576143B (en) Image capturing apparatus and image capturing method
JP5390707B2 (en) Stereoscopic panorama image synthesis apparatus, imaging apparatus, stereo panorama image synthesis method, recording medium, and computer program
JP5127787B2 (en) Compound eye photographing apparatus and control method thereof
JP2014120844A (en) Image processing apparatus and imaging apparatus
US20100225785A1 (en) Image processor and recording medium
US20090027487A1 (en) Image display apparatus and image display method
JP2008116844A (en) Imaging apparatus
KR20160044945A (en) Image photographing appratus
JP2018037857A (en) Image processing system, image processing method and program
JP2017143354A (en) Image processing apparatus and image processing method
JP6116436B2 (en) Image processing apparatus and image processing method
US11032463B2 (en) Image capture apparatus and control method thereof
JP2019061028A (en) Imaging apparatus
JP2019062360A (en) Imaging device
JP2019062362A (en) Imaging device
JP2019061023A (en) Imaging apparatus
JP2019061022A (en) Imaging apparatus
JP2019062363A (en) Imaging apparatus
JP2015041865A (en) Image processing apparatus and image processing method
JP6226536B2 (en) Imaging apparatus and control method thereof
JP7134601B2 (en) Image processing device, image processing method, imaging device, and imaging device control method
JP5163333B2 (en) CAMERA DEVICE, IMAGE DISPLAY METHOD, AND IMAGE DISPLAY PROGRAM
JP2006293196A (en) Focus detector
JP2019208214A (en) Image processing apparatus, image processing method, program, and imaging apparatus
JP6585890B2 (en) Image processing apparatus, image processing method and program, and imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200529

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210707

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210810

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210823

R150 Certificate of patent or registration of utility model

Ref document number: 6943115

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150