JP2010122366A - Auto focus system - Google Patents

Auto focus system Download PDF

Info

Publication number
JP2010122366A
JP2010122366A JP2008294516A JP2008294516A JP2010122366A JP 2010122366 A JP2010122366 A JP 2010122366A JP 2008294516 A JP2008294516 A JP 2008294516A JP 2008294516 A JP2008294516 A JP 2008294516A JP 2010122366 A JP2010122366 A JP 2010122366A
Authority
JP
Japan
Prior art keywords
frame
image
display
face
menu
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008294516A
Other languages
Japanese (ja)
Inventor
由次郎 ▲高▼野
Yoshijiro Takano
Yushi Matsuura
有志 松浦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujinon Corp
Original Assignee
Fujinon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujinon Corp filed Critical Fujinon Corp
Priority to JP2008294516A priority Critical patent/JP2010122366A/en
Publication of JP2010122366A publication Critical patent/JP2010122366A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Focusing (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an auto focus system for preventing a menu image superimposed and displayed on a photographed video image from disturbing photographing work by allowing an operator to manually turn off the menu image or automatically turing off the menu image, when it is determined that the menu image is unnecessary, when it is constituted so that an operation (instruction) on the control of an AF frame is performed by using a display means (display) with a touch panel on which the photographed video image and the AF frame are displayed. <P>SOLUTION: In the screen 40a of a liquid crystal display with a touch panel on which operation on the AF frame can be performed, the menu image comprising various buttons 300 to 312 for instructing the control mode of the AF frame, the start and stop of automatic tracking, etc. is superimposed and displayed on the photographed video image. On the other hand, on the screen 40a, a menu display on and off button 314 is displayed, and when the button 314 is tap-operated, the menu image can be turned on and off. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、オートフォーカスシステムに係り、特に、オートフォーカス(AF)によりピントを合わせる被写体の範囲を示すAF枠(AFエリア)に関する操作をタッチパネル付きディスプレイ等で行えるようにしたオートフォーカスシステムに関する。   The present invention relates to an autofocus system, and more particularly to an autofocus system in which an operation related to an AF frame (AF area) indicating a range of a subject to be focused by autofocus (AF) can be performed on a display with a touch panel or the like.

従来、カメラのフォーカスを自動的に合わせるオートフォーカス(AF)システムにおいては、どこにフォーカスを合わせるかをカメラに対して指示しなければならない。このとき、一般のカメラなどでは、フォーカスを合わせる位置は撮影範囲のセンターに固定されていて、例えば撮影範囲の中央にいる人物等にフォーカスが合うようになっている。   Conventionally, in an autofocus (AF) system that automatically adjusts the focus of a camera, the camera must be instructed where to focus. At this time, in a general camera or the like, the position to be focused is fixed at the center of the shooting range, and for example, the person in the center of the shooting range is focused.

しかし、動いている被写体を撮影する場合などにおいては、このようにフォーカスを合わせる位置が固定されていては都合が悪い。そこで、例えば、テレビカメラなどで、スポーツのように被写体の動きの激しいシーンを撮影する場合において、被写体にピントを合わせる目的でオートフォーカスエリア(AFエリア)を被写体に自動追尾させるAF枠自動追尾システムが知られている(例えば、特許文献1等参照)。尚、本明細書では、AFエリアの範囲の輪郭を示すAF枠をAFエリアと同様にピントを合わせる被写体の範囲を意味する用語として主に使用するものとする。   However, when shooting a moving subject, it is inconvenient if the focus position is fixed in this way. Therefore, for example, when shooting a scene where the movement of a subject is intense, such as sports, using a TV camera or the like, an AF frame automatic tracking system that automatically tracks an autofocus area (AF area) for the purpose of focusing on the subject. Is known (see, for example, Patent Document 1). In this specification, an AF frame indicating the outline of the range of the AF area is mainly used as a term meaning the range of the subject to be focused in the same manner as the AF area.

また、撮像された画像中から人物の顔を表す画像を検出し、その被写体となった顔に対して自動的にピントを合わせたり、あるいは上記検出された画像中の顔を表す領域が拡大されるように自動的にズーム倍率を変更させるデジタルカメラが知られている(例えば、特許文献2等参照)。
特開2006−267221号公報 特開2004−320286号公報
Also, an image representing a person's face is detected from the captured image, and the face that is the subject is automatically focused, or the area representing the face in the detected image is enlarged. There is known a digital camera that automatically changes the zoom magnification (see, for example, Patent Document 2).
JP 2006-267221 A JP 2004-320286 A

ところで、AF枠に関する操作は、カメラで撮影されている現在の撮影映像と共に現在設定されているAF枠の範囲を表示するタッチパネル付きディスプレイでのタッチ操作によって行えるようにすると、特に重要なAF枠の位置の指定を、ピントを合わせたい被写体(AF枠自動追尾での追尾対象の被写体)が表示されている画面上の位置をタップ操作(シングルタップ)することによって行うことができるため、直感的な指定が可能であり便利である。   By the way, if an operation related to the AF frame can be performed by a touch operation on a display with a touch panel that displays the range of the currently set AF frame together with the current captured image captured by the camera, a particularly important AF frame is displayed. The position can be specified by tapping (single tapping) the position on the screen where the subject to be focused (the subject to be tracked in AF frame automatic tracking) is displayed. It can be specified and is convenient.

また、AF枠の各種制御に関する指示操作をこのようなタッチパネル付きディスプレイの撮影映像に重畳させて表示したメニュー画面(メニュー画像)で行えるようにすると便利である。   In addition, it is convenient that instruction operations relating to various controls of the AF frame can be performed on a menu screen (menu image) displayed superimposed on a captured image of such a touch panel display.

しかしながら、メニュー画面が常に表示されていると撮影映像が見にくくなるため撮影作業の妨げとなる可能性がある。   However, if the menu screen is always displayed, it is difficult to see the captured video, which may hinder the shooting operation.

本発明は、このような事情に鑑みてなされたもので、撮影映像やAF枠を表示したタッチパネル付きの表示手段(ディスプレイ)を使用してAF枠の制御に関する操作(指示)を行えるようにした場合に、撮影映像に重畳表示するメニュー画像が撮影作業の妨げとならないようにしたオートフォーカスシステムを提供することを目的とする。   The present invention has been made in view of such circumstances, and has made it possible to perform operations (instructions) related to AF frame control using display means (display) with a touch panel that displays captured images and AF frames. In this case, an object of the present invention is to provide an autofocus system in which a menu image superimposed on a photographed video does not interfere with the photographing work.

前記目的を達成するために、請求項1に係るオートフォーカスシステムは、光学系により結像された被写体像を撮像する撮像手段と、前記撮像手段により撮像された撮影画像のうち、所定のAF枠の範囲の被写体にピントが合うように前記光学系のフォーカス調整を行うオートフォーカス手段と、AF枠に関する制御を行うAF枠制御手段と、を備えたオートフォーカスシステムにおいて、画像表示画面に前記撮像手段により撮像された撮影画像を表示すると共に、該撮影画像に重畳させて現在設定されているAF枠の範囲を表示する表示手段と、前記表示手段の画像表示画面に対する操作者のタッチ操作を検出するタッチ操作検出手段と、前記表示手段の画像表示画面に対するタッチ操作によりAF枠の制御に関する指示を行うためのメニュー画像を前記撮影画像に重畳させて前記表示手段の画像表示画面に表示させるメニュー表示手段と、を備え、前記表示手段の画像表示画面に前記メニュー表示手段によるメニュー画像の表示をマニュアル操作でオン/オフするためのメニュー表示オン/オフ手段、及び/又は、メニュー画像の表示が不要と判断される所定の条件を満たすと自動的に前記メニュー表示手段によるメニュー画像の表示をオフするメニュー表示オフ手段を備えたことを特徴としている。   In order to achieve the object, an autofocus system according to a first aspect of the present invention includes an imaging unit that captures a subject image formed by an optical system, and a predetermined AF frame among captured images captured by the imaging unit. In an autofocus system comprising: an autofocus unit that adjusts the focus of the optical system so that a subject in the range is in focus; and an AF frame control unit that performs control related to an AF frame, the imaging unit is provided on an image display screen. A display unit that displays the captured image captured by the display unit, displays the range of the AF frame that is currently set by being superimposed on the captured image, and detects an operator's touch operation on the image display screen of the display unit Touch operation detecting means and a menu for giving an instruction related to control of the AF frame by a touch operation on the image display screen of the display means. A menu display unit that superimposes an image on the photographed image and displays the image on the image display screen of the display unit, and on the image display screen of the display unit, the display of the menu image by the menu display unit is manually turned on. Menu display on / off means for turning off / off, and / or menu display off for automatically turning off the menu image display by the menu display means when a predetermined condition is judged that display of the menu image is unnecessary. It is characterized by having means.

請求項2に係るオートフォーカスシステムは、請求項1に係る発明において、前記メニュー表示オン/オフ手段は、前記表示手段の画像表示画面にメニュー表示オン/オフボタンを表示させ、メニュー表示オン/オフボタンがタップ操作されたことが前記タッチ操作検出手段により検出されると、前記メニュー画像の表示のオン/オフを切り替えることを特徴としている。   According to a second aspect of the present invention, in the invention according to the first aspect, the menu display on / off means displays a menu display on / off button on the image display screen of the display means, and the menu display on / off is displayed. When the touch operation detecting means detects that the button is tapped, the display of the menu image is switched on / off.

請求項3に係るオートフォーカスシステムは、請求項1又は2に係る発明において、前記メニュー表示オフ手段は、前記表示手段の画像表示画面に前記メニュー画像が表示された状態で、前記タッチ操作検出手段により検出されるタッチ操作が一定時間行われていないことを前記所定の条件とすることを特徴としている。   An autofocus system according to a third aspect is the invention according to the first or second aspect, wherein the menu display off means is the touch operation detecting means in a state where the menu image is displayed on the image display screen of the display means. It is characterized in that the predetermined condition is that the touch operation detected by the above is not performed for a certain period of time.

本発明によれば、撮影映像やAF枠を表示したタッチパネル付きの表示手段(ディスプレイ)を使用してAF枠の制御に関する操作(指示)を行えるようにした場合に、撮影映像に重畳表示されるメニュー画像を、操作者がマニュアル操作でオフすることができ、又は、不要と判断される場合には自動でオフするため、メニュー画像が撮影作業の妨げとならないようにすることができる。   According to the present invention, when an operation (instruction) related to control of the AF frame can be performed using a display means (display) with a touch panel that displays the captured image and the AF frame, the superimposed image is displayed on the captured image. The menu image can be turned off manually by the operator, or automatically turned off when it is determined that the menu image is unnecessary, so that the menu image can be prevented from hindering the shooting operation.

以下、添付図面を参照して、本発明に係るオートフォーカスシステムについて詳細に説明する。   Hereinafter, an autofocus system according to the present invention will be described in detail with reference to the accompanying drawings.

図1は、本発明が適用されるテレビカメラシステムの一実施の形態を示した外観図である。同図に示すようにテレビカメラ10は、主に放送用又は業務用に使用されるテレビカメラであり、レンズ装置12とカメラ本体14とで構成され、ペデスタルドリー16上に設置された雲台18に支持されている。   FIG. 1 is an external view showing an embodiment of a television camera system to which the present invention is applied. As shown in the figure, a television camera 10 is a television camera mainly used for broadcasting or business use. The television camera 10 includes a lens device 12 and a camera body 14 and is mounted on a pedestal stand 16. It is supported by.

雲台18には、左右2本のパン棒22、24が延設されており、右側のパン棒22のグリップ部22Aには、フォーカスデマンド(フォーカスコントローラ)26がマウンティングクランプ38によって設置され、左側のパン棒24のグリップ部にはズームデマンド(ズームコントローラ)28が設置されている。   The pan head 18 is extended with two left and right bread bars 22 and 24, and a focus demand (focus controller) 26 is installed on the grip part 22 </ b> A of the right bread bar 22 with a mounting clamp 38, and the left side A zoom demand (zoom controller) 28 is installed in the grip portion of the pan bar 24.

フォーカスデマンド26には、回動可能なフォーカスノブ30が設けられており、マニュアルフォーカス(MF)によりフォーカス制御を行う際に、このフォーカスノブ30を回動操作すると、その回動位置に応じたフォーカス位置を目標位置としてフォーカス(フォーカスレンズ)の移動を指令するフォーカス制御信号がフォーカスデマンド26からレンズ装置12に与えられる。これにより、レンズ装置12のフォーカスレンズがフォーカス制御信号によって指令された目標位置に移動する。   The focus demand 26 is provided with a rotatable focus knob 30. When focus control is performed by manual focus (MF), when the focus knob 30 is rotated, a focus corresponding to the rotation position is obtained. A focus control signal for instructing movement of the focus (focus lens) with the position as the target position is given from the focus demand 26 to the lens device 12. As a result, the focus lens of the lens device 12 moves to the target position commanded by the focus control signal.

ズームデマンド28には、回動可能なサムリング34が設けられており、そのサムリング34を左右方向に回動操作すると、回動位置に応じたズーム速度を目標速度としてズーム(ズームレンズ)の移動を指令するズーム制御信号がズームデマンド28からレンズ装置12に与えられる。これにより、レンズ装置12のズームレンズがズーム制御信号によって指令された目標速度で移動する。   The zoom demand 28 is provided with a rotatable thumb ring 34. When the thumb ring 34 is rotated in the left-right direction, the zoom (zoom lens) is moved with a zoom speed corresponding to the rotation position as a target speed. A zoom control signal to be commanded is given from the zoom demand 28 to the lens device 12. As a result, the zoom lens of the lens device 12 moves at the target speed commanded by the zoom control signal.

また、図では省略するが、フォーカスデマンド26には、オートフォーカス(AF)に関する各種操作部材が設けられると共に、AFによりピントを合わせる対象の被写体範囲(AFの対象範囲)を示すAF枠の制御(位置等の変更)を行うためのAF枠制御装置(AF枠自動追尾装置)が組み込まれ、そのAF枠制御装置の各種操作部材もフォーカスデマンド26に設けられている。   Although not shown in the figure, the focus demand 26 is provided with various operation members related to autofocus (AF), and control of an AF frame indicating a subject range (AF target range) to be focused by AF ( An AF frame control device (AF frame automatic tracking device) for performing a change in position and the like is incorporated, and various operation members of the AF frame control device are also provided in the focus demand 26.

更に、AF枠制御装置の構成要素として同図のようにタッチパネル付き液晶ディスプレイ(LCD)40が設置具によりフォーカスデマンド26の本体上部に設置され、図示しないケーブルでフォーカスデマンド26に接続されている。   Further, as shown in the figure, a liquid crystal display (LCD) 40 with a touch panel is installed on the upper part of the focus demand 26 as a constituent element of the AF frame control device, and is connected to the focus demand 26 by a cable (not shown).

尚、以下において、単にLCD40と記した場合にはこのタッチパネル付き液晶ディスプレイ40を示す。また、LCD40は、フォーカスデマンド26の本体上部以外の任意の位置に設置することが可能である。例えば、ビューファインダ36の横に設置してもよい。   In the following description, the LCD 40 is simply referred to as the LCD 40 with a touch panel. The LCD 40 can be installed at any position other than the upper part of the main body of the focus demand 26. For example, it may be installed beside the viewfinder 36.

カメラ本体14の上には、表示装置であるビューファインダ36が設置されている。このビューファインダ36には、本テレビカメラ10で撮影されている被写体の映像が表示されるため、カメラマンはその映像を見ながらフォーカスデマンド26やズームデマンド28を操作することによって所望の構図で被写体を撮影することができるようになっている。尚、以下において、撮影映像又は撮影画像と称した場合には、テレビカメラ10で現在撮影されている映像又は画像を示すものとする。   A viewfinder 36 that is a display device is installed on the camera body 14. Since the viewfinder 36 displays an image of the subject photographed by the television camera 10, the cameraman operates the focus demand 26 and the zoom demand 28 while viewing the image, thereby selecting the subject with a desired composition. You can shoot. In the following description, the term “captured video” or “captured image” refers to a video or image currently captured by the television camera 10.

また、ビューファインダ36に表示される撮影映像には、現在AF枠が設定されている位置、大きさ、形状(縦横比)を示すAF枠の画像が重畳されて表示されるようになっており、AFによりフォーカス制御を行う場合には撮影映像内のどの範囲の被写体にピントが合わせられるかを知ることができるようになっている。尚、MFとAFのフォーカス制御は、フォーカスデマンド26に設けられたモードスイッチ等で切り替えられるようになっている。   In addition, an image of the AF frame indicating the position, size, and shape (aspect ratio) where the AF frame is currently set is superimposed on the captured image displayed on the viewfinder 36. When focus control is performed by AF, it is possible to know which range of subjects in the captured image can be focused. The focus control of MF and AF can be switched by a mode switch or the like provided in the focus demand 26.

図2は、上記テレビカメラシステムに適用されるAF枠自動追尾システムの全体構成を示したブロック図である。   FIG. 2 is a block diagram showing the overall configuration of an AF frame automatic tracking system applied to the television camera system.

同図のAF枠自動追尾システム1には、図1に示したテレビカメラ10のレンズ装置12及びカメラ本体14とビューファインダ36が示されている。また、図1のフォーカスデマンド26の構成要素として、フォーカス操作部50と、フォーカスデマンド26に組み込まれたAF枠制御装置(AF枠自動追尾装置)を構成する画像処理ユニット58及びAF枠操作部60が示されている。   In the AF frame automatic tracking system 1 shown in FIG. 1, the lens device 12, the camera body 14, and the viewfinder 36 of the television camera 10 shown in FIG. 1 are shown. Further, as components of the focus demand 26 in FIG. 1, a focus operation unit 50, an image processing unit 58 and an AF frame operation unit 60 constituting an AF frame control device (AF frame automatic tracking device) incorporated in the focus demand 26. It is shown.

テレビカメラ10は、ハイビジョンテレビ[HD(High Definition)TV]方式に対応したHDカメラからなるカメラ本体14と、カメラ本体14のレンズマウントに装着される撮影レンズ(光学系)を備えたレンズ装置12とから構成される。   The television camera 10 includes a camera body 14 composed of an HD camera compatible with a high-definition television [HD (High Definition) TV] system, and a lens device 12 having a photographing lens (optical system) attached to a lens mount of the camera body 14. It consists of.

カメラ本体14には、撮像素子(例えばCCD)や所要の信号処理回路等が搭載されており、レンズ装置12の撮影レンズにより結像された像は、撮像素子により光電変換された後、信号処理回路によって所要の信号処理が施されてHDTV方式の映像信号(HDTV信号)として、カメラ本体14の映像信号出力端子等から外部に出力される。   The camera body 14 is equipped with an image sensor (for example, a CCD), a required signal processing circuit, and the like. The image formed by the photographing lens of the lens device 12 is photoelectrically converted by the image sensor and then subjected to signal processing. Necessary signal processing is performed by the circuit and output as an HDTV video signal (HDTV signal) from the video signal output terminal of the camera body 14 to the outside.

また、図1のようにカメラ本体14の上部等に設置されるビューファインダ36には、テレビカメラ10の撮影映像が表示されるようになっている。ビューファインダ36には、撮影映像以外の各種情報が表示されるようになっており、例えば、現在の設定されているAF枠の範囲(位置、大きさ、形状)を示す画像が撮影映像に重畳されて表示されるようになっている。   In addition, as shown in FIG. 1, a video captured by the television camera 10 is displayed on the viewfinder 36 installed on the upper part of the camera body 14 or the like. Various information other than the captured video is displayed on the viewfinder 36. For example, an image indicating the currently set AF frame range (position, size, shape) is superimposed on the captured video. Has been displayed.

レンズ装置12は、カメラ本体14のレンズマウントに装着される撮影レンズ(ズームレンズ)64を備えており、その撮影レンズ64により、被写体56がカメラ本体14の撮像素子の撮像面に結像されるようになっている。撮影レンズ64には、図示を省略するが、その構成要素としてフォーカスレンズ群、ズームレンズ群、絞りなどの撮影条件を調整するための可動部が設けられており、それらの可動部は、モータ(サーボ機構)によって電動駆動されるようになっている。例えば、フォーカスレンズ群やズームレンズ群は光軸方向に移動し、フォーカスレンズ群が移動することによってフォーカス(被写体距離)調整が行われ、またズームレンズ群が移動することによって焦点距離(ズーム倍率)調整が行われる。   The lens device 12 includes a photographic lens (zoom lens) 64 attached to a lens mount of the camera body 14, and the subject 56 forms an image on the imaging surface of the image sensor of the camera body 14 by the photographic lens 64. It is like that. Although not shown, the photographing lens 64 is provided with movable parts for adjusting photographing conditions such as a focus lens group, a zoom lens group, and a diaphragm as its constituent elements. Servo mechanism) is electrically driven. For example, the focus lens group and the zoom lens group move in the optical axis direction, the focus (subject distance) adjustment is performed by moving the focus lens group, and the focal length (zoom magnification) is adjusted by moving the zoom lens group. Adjustments are made.

尚、AFに関するシステムにおいては、少なくともフォーカスレンズ群が電動で駆動できればよく、その他の可動部は手動でのみ駆動可能であってもよい。   In the AF-related system, it is sufficient that at least the focus lens group can be driven electrically, and other movable parts may be driven only manually.

また、レンズ装置12には、AFユニット66及び図示しないレンズCPU等が搭載されている。レンズCPUはレンズ装置12全体を統括制御するものである。また、AFユニット66は、AFによるフォーカス制御(自動ピント調整)を行うために必要な情報を取得するための処理部であり、図示を省略するが、AF処理部、AF用撮像回路等から構成されている。   The lens device 12 includes an AF unit 66 and a lens CPU (not shown). The lens CPU controls the entire lens device 12. The AF unit 66 is a processing unit for acquiring information necessary for performing AF focus control (automatic focus adjustment), and is configured from an AF processing unit, an AF imaging circuit, and the like, although not shown. Has been.

AF用撮像回路はAF処理用の映像信号を取得するためにレンズ装置12に配置されており、CCD等の撮像素子(AF用撮像素子という)やAF用撮像素子の出力信号を所定形式の映像信号として出力する処理回路等を備えている。尚、AF用撮像回路から出力される映像信号は輝度信号である。   The AF imaging circuit is disposed in the lens device 12 to acquire an AF processing video signal, and an output signal from an imaging device such as a CCD (referred to as an AF imaging device) or an AF imaging device is output in a predetermined format. A processing circuit for outputting as a signal is provided. The video signal output from the AF imaging circuit is a luminance signal.

AF用撮像素子の撮像面には、撮影レンズ64の光路上に配置されたハーフミラー等によってカメラ本体14の撮像素子に入射する被写体光から分岐された被写体光が結像するようになっている。AF用撮像素子の撮像エリアに対する撮影範囲及び被写体距離(ピントが合う被写体の距離)は、カメラ本体14の撮像素子の撮像エリアに対する撮影範囲及び被写体距離に一致するように構成されており、AF用撮像素子により取り込まれる被写体画像は、カメラ本体14の撮像素子により取り込まれる被写体画像と一致している。なお、両者の撮影範囲に関しては完全に一致している必要はなく、例えば、AF用撮像素子の撮影範囲の方がカメラ本体14の撮像素子の撮影範囲を包含する大きな範囲であってもよい。   On the imaging surface of the AF imaging device, subject light branched from subject light incident on the imaging device of the camera body 14 is imaged by a half mirror or the like disposed on the optical path of the photographing lens 64. . The shooting range and subject distance (distance of the subject in focus) with respect to the imaging area of the AF imaging element are configured to match the shooting range and subject distance with respect to the imaging area of the imaging element of the camera body 14. The subject image captured by the image sensor coincides with the subject image captured by the image sensor of the camera body 14. It should be noted that the shooting ranges of the two do not need to be completely the same. For example, the shooting range of the AF imaging element may be a larger range including the shooting range of the imaging element of the camera body 14.

AF処理部は、AF用撮像回路から映像信号を取得し、その映像信号に基づいてAFの対象範囲とするAFエリア(AF枠)の範囲内における被写体画像のコントラストの高低を示す焦点評価値を算出する。例えば、AF用撮像素子から得られた映像信号から高域周波数成分の信号をハイパスフィルタによって抽出した後、その高域周波数成分の信号のうち後述のようにして設定されるAFエリアに対応する範囲の信号を1画面(1フレーム)分ずつ積算する。このようにして1画面分ごとに得られる積算値はAFエリア内の被写体画像のコントラストの高低を示し、その積算値が焦点評価値としてレンズCPUに与えられる。   The AF processing unit acquires a video signal from the AF imaging circuit, and based on the video signal, calculates a focus evaluation value indicating the level of contrast of the subject image within an AF area (AF frame) that is an AF target range. calculate. For example, a high frequency component signal is extracted from a video signal obtained from an AF image sensor by a high-pass filter, and then a range corresponding to an AF area set as described later in the high frequency component signal. Are integrated for each screen (one frame). The integrated value obtained for each screen in this manner indicates the level of contrast of the subject image in the AF area, and the integrated value is given to the lens CPU as a focus evaluation value.

レンズCPUは、AFエリアの範囲(輪郭)を示すAF枠の情報(AF枠情報)を、後述するように画像処理ユニット58から取得し、そのAF枠情報により指定されたAF枠内の範囲をAFエリアとしてAF処理部に指定する。そして、そのAFエリア内の画像(映像信号)により求められる焦点評価値をAF処理部から取得する。   The lens CPU acquires AF frame information (AF frame information) indicating the range (contour) of the AF area from the image processing unit 58 as described later, and the range within the AF frame specified by the AF frame information is obtained. The AF area is designated as the AF area. Then, the focus evaluation value obtained from the image (video signal) in the AF area is acquired from the AF processing unit.

このようにしてAF用撮像回路から1画面分の映像信号が取得されるごとに(AF処理部で焦点評価値が求められるごとに)AF処理部から焦点評価値を取得すると共に、取得した焦点評価値が最大(極大)、即ち、AF枠内の被写体画像のコントラストが最大となるようにフォーカスレンズ群を制御する。例えば、焦点評価値に基づくフォーカスレンズ群の制御方式として山登り方式が一般的に知られており、フォーカスレンズ群を焦点評価値が増加する方向に移動させて行き、焦点評価値が減少し始める点を検出すると、その位置にフォーカスレンズ群を設定する。これにより、AF枠内の被写体に自動でピントが合わせられる。   In this way, every time a video signal for one screen is acquired from the AF imaging circuit (each time the focus evaluation value is obtained by the AF processing unit), the focus evaluation value is acquired from the AF processing unit, and the acquired focus is obtained. The focus lens group is controlled so that the evaluation value is maximum (maximum), that is, the contrast of the subject image in the AF frame is maximum. For example, a hill-climbing method is generally known as a control method for a focus lens group based on a focus evaluation value, and the focus evaluation value starts to decrease by moving the focus lens group in a direction in which the focus evaluation value increases. Is detected, the focus lens group is set at that position. Thereby, the subject in the AF frame is automatically focused.

尚、上述のAF処理部は、焦点評価値を算出するために、レンズ装置12に搭載されたAF用撮像素子から映像信号を取得しているが、カメラ本体14の撮像素子より撮影された映像の映像信号をカメラ本体14から取得するような構成としてもよい。また、AF枠内の被写体に自動でピントを合わせるためのAF手段はどのようなものであってもよい。   Note that the above-described AF processing unit obtains a video signal from the AF image sensor mounted on the lens device 12 in order to calculate the focus evaluation value, but the video imaged by the image sensor of the camera body 14 The video signal may be obtained from the camera body 14. Also, any AF means for automatically focusing on the subject within the AF frame may be used.

ここで、AFエリア200は、図3に示すようにカメラ本体14における撮像素子の撮像エリア202に対して四角形状の領域として設定され、その輪郭を示す枠204がAF枠を示し、撮像素子のAFエリア200(AF枠204内)の範囲で撮影される被写体がAFによりピントを合わせる対象となる。   Here, as shown in FIG. 3, the AF area 200 is set as a rectangular area with respect to the imaging area 202 of the imaging device in the camera body 14, and a frame 204 indicating the outline indicates an AF frame, A subject photographed in the range of the AF area 200 (within the AF frame 204) is an object to be focused by AF.

尚、本明細書では、撮像エリア202に対するAF枠204(AFエリア200)の範囲は、AF枠204の位置、大きさ、及び、形状(縦横比)の3つの要素によって決まるものとし、“AF枠の範囲を変更する”という趣旨の記載は、AF枠の位置、大きさ、及び、形状の3つの要素のうち、少なくとも1つの要素を変更することを意味するものとする。   In this specification, the range of the AF frame 204 (AF area 200) with respect to the imaging area 202 is determined by three factors including the position, size, and shape (aspect ratio) of the AF frame 204. The description of “changing the frame range” means changing at least one of the three elements of the position, size, and shape of the AF frame.

また、レンズ装置12は、ケーブルを介して、又は、直接的にカメラ本体14と接続され、レンズ装置12とカメラ本体14の各々に設けられたシリアル通信インターフェース(SCI)12a、14aを通じて各種情報のやり取りが行えるようになっている。これによりAFユニット66において現在設定されているAF枠の情報もカメラ本体14に送信され、カメラ本体14内での処理によってビューファインダ36に表示される撮影映像に現在設定されているAF枠の位置、大きさ、形状に対応したAF枠の画像が重畳表示されるようになっている。   The lens device 12 is connected to the camera body 14 via a cable or directly, and various kinds of information are transmitted through serial communication interfaces (SCI) 12a and 14a provided in the lens device 12 and the camera body 14, respectively. You can communicate. As a result, information on the AF frame currently set in the AF unit 66 is also transmitted to the camera body 14, and the position of the AF frame currently set in the captured image displayed on the viewfinder 36 by processing in the camera body 14. The image of the AF frame corresponding to the size and shape is superimposed and displayed.

フォーカス操作部50は、フォーカスデマンド26の構成要素であると共に、一般的なフォーカスデマンドが備えている構成要素を示している。フォーカス操作部50の構成要素として、図1に示したフォーカスノブ30、AFモードとMFモードの切替えやAFモードの種類(連続モードやモーメンタリモード)の切替えを行うためのモードスイッチ(図示せず)、AFの開始を指示するAF開始スイッチ(図示せず)等、AFの制御内容やMFの制御に関する操作部材を備えると共に、それらの操作部材の設定状態を検出し、検出した設定状態に基づいて制御信号を送出する処理回路等を備えている。   The focus operation unit 50 is a constituent element of the focus demand 26 and also shows constituent elements of a general focus demand. As the components of the focus operation unit 50, the focus knob 30 shown in FIG. 1, a mode switch (not shown) for switching between the AF mode and the MF mode and switching the AF mode type (continuous mode or momentary mode). And an operation member related to AF control contents and MF control, such as an AF start switch (not shown) for instructing the start of AF, and detecting the setting state of these operation members, and based on the detected setting state A processing circuit for sending control signals is provided.

フォーカスデマンド26にはレンズ装置12とケーブルで接続するためのインターフェース(I/F)52が設けられており、フォーカス操作部50はそのI/F52及びケーブルを介してレンズ装置12に接続され、SCI12aを通じてレンズCPUとの間のシリアル通信により各種信号のやり取りが行えるようになっている。   The focus demand 26 is provided with an interface (I / F) 52 for connecting to the lens device 12 with a cable. The focus operation unit 50 is connected to the lens device 12 via the I / F 52 and the cable, and the SCI 12a. Various signals can be exchanged through serial communication with the lens CPU.

これにより、フォーカス操作部50から送出された各種制御信号がレンズCPUに与えられ、その制御信号に従った処理がレンズCPUで実行されるようになっている。例えば、AFによるフォーカス制御(AFモード)の指示が与えられた場合には、上記のようにAFユニット66から得られる焦点評価値に基づいてAFによるフォーカス制御が行われ、MFによるフォーカス制御(MFモード)の指示が与えられた場合には、フォーカスノブ30の操作に基づいてフォーカス操作部50から与えられるフォーカス位置指令信号に従ってMFによるフォーカス制御が行われるようになっている。   Accordingly, various control signals sent from the focus operation unit 50 are given to the lens CPU, and processing according to the control signals is executed by the lens CPU. For example, when an instruction for focus control (AF mode) by AF is given, focus control by AF is performed based on the focus evaluation value obtained from the AF unit 66 as described above, and focus control by MF (MF When an instruction of (mode) is given, focus control by MF is performed according to a focus position command signal given from the focus operation unit 50 based on the operation of the focus knob 30.

画像処理ユニット58は、フォーカスデマンド26にAF枠制御装置の構成要素として組み込まれた処理部であり、レンズ装置12のAFユニット66において設定されるAF枠の範囲(位置、大きさ、形状(縦横比))を後述のマニュアル操作又はAF枠自動追尾の処理により指定するための処理部である。   The image processing unit 58 is a processing unit incorporated in the focus demand 26 as a component of the AF frame control device, and the range (position, size, shape (vertical and horizontal) of the AF frame set in the AF unit 66 of the lens device 12. A ratio)) is designated by a manual operation or AF frame automatic tracking process described later.

画像処理ユニット58は、SCI70を備えており、そのSCI70は、上記I/F52を介してレンズ装置12に接続され、SCI12aを通じてレンズCPUとの間で各種信号のやり取りが行えるようになっている。これにより、AF枠の範囲を指定するAF枠情報が画像処理ユニット58からレンズ装置12のレンズCPUに与えられ、そのAF枠情報に基づいてAFユニット66におけるAF枠の範囲が設定される。   The image processing unit 58 includes an SCI 70. The SCI 70 is connected to the lens device 12 via the I / F 52, and can exchange various signals with the lens CPU via the SCI 12a. Thereby, AF frame information for designating the range of the AF frame is given from the image processing unit 58 to the lens CPU of the lens device 12, and the range of the AF frame in the AF unit 66 is set based on the AF frame information.

また、フォーカスデマンド26には画像処理ユニット58に映像信号を取り込むための映像入力コネクタが設けられており、その映像入力コネクタにカメラ本体14の映像出力コネクタがダウンコンバータ68を介してケーブルで接続される。これによって、カメラ本体14の映像出力コネクタから出力されたHDTV信号が、ダウンコンバータ68によって、標準テレビ[NTSC(National Television System Committee)]方式の映像信号(SDTV信号)に変換(ダウンコンバート)されて、画像処理ユニット58に入力されるようになっている。   The focus demand 26 is provided with a video input connector for taking a video signal into the image processing unit 58, and the video output connector of the camera body 14 is connected to the video input connector via a down converter 68 with a cable. The As a result, the HDTV signal output from the video output connector of the camera body 14 is converted (down-converted) into a standard television [NTSC (National Television System Committee)] video signal (SDTV signal) by the down converter 68. Are input to the image processing unit 58.

詳細は後述するが画像処理ユニット58は、AF枠自動追尾処理を実行する際に、カメラ本体14から入力された映像信号から1コマ分の撮撮画像を順次取り込み、撮影画像の中から所定の追尾対象の被写体を検出する処理を行う。そして、AFによりその被写体にピントが合わせられるようにAF枠の範囲を決定し、決定したAF枠の範囲をレンズ装置12のレンズCPUに送信する。   Although details will be described later, when executing the AF frame automatic tracking process, the image processing unit 58 sequentially captures one frame of the captured image from the video signal input from the camera body 14, and selects a predetermined image from the captured image. A process for detecting the subject to be tracked is performed. Then, the AF frame range is determined so that the subject can be focused by AF, and the determined AF frame range is transmitted to the lens CPU of the lens device 12.

尚、画像処理ユニット58の構成及び処理内容については後述する。   The configuration and processing contents of the image processing unit 58 will be described later.

AF枠操作部60は、AF枠制御装置としてフォーカスデマンド26に画像処理ユニット58と共に一体的に設けられ、又は、その一部又は全てが、フォーカスデマンド26とは別体の装置、即ち、画像処理ユニット58とは別体の装置に設けられてケーブル等で接続されている。本実施の形態では、図1のようにタッチパネル付きLCD40がフォーカスデマンド26(画像処理ユニット58)とは別体で設けられ、他の構成要素はフォーカスデマンド26に画像処理ユニット58と共に設けられている。   The AF frame operation unit 60 is integrally provided with the image processing unit 58 in the focus demand 26 as an AF frame control device, or a part or all of the AF frame operation unit 60 is a separate device from the focus demand 26, that is, image processing. The unit 58 is provided in a separate device and connected by a cable or the like. In the present embodiment, as shown in FIG. 1, the LCD 40 with a touch panel is provided separately from the focus demand 26 (image processing unit 58), and the other components are provided together with the image processing unit 58 on the focus demand 26. .

AF枠操作部60は、主にAF枠の制御に関する操作を行うための操作部であり、AF枠の範囲を操作者がマニュアル操作で指示入力するための操作部材や、AF枠を所望の被写体に自動で追尾させるAF枠自動追尾に関する操作を行うための操作部材を備えている。   The AF frame operation unit 60 is an operation unit for mainly performing operations related to control of the AF frame, and an operation member for an operator to manually input an AF frame range or an AF frame to a desired subject. There is provided an operation member for performing an operation related to AF frame automatic tracking to be automatically tracked.

図4のフォーカスデマンド26の外観図にも併せて示すように、AF枠操作部60の操作部材として、AF枠の位置をユーザの手動操作により上下左右に移動させるための位置操作部材100(例えば、ジョイスティックやトラックボール)、AF枠の大きさを手動操作により変更するためのサイズ操作部材102(例えば、ツマミ)、AF枠の形状を手動操作により変更するための形状操作部材104(例えば、ツマミ)、AF枠自動追尾の開始を指示する追尾開始スイッチ108、AF枠自動追尾の停止を指示する追尾停止スイッチ110が設けられており、これらの操作部材100、102、104、108、110の設定状態が、画像処理ユニット58(後述のメインボード70のCPU78)により読み取られるようになっている。   As shown in the external view of the focus demand 26 in FIG. 4, as the operation member of the AF frame operation unit 60, a position operation member 100 (for example, for moving the position of the AF frame up and down and left and right manually by the user) , A joystick or a trackball), a size operation member 102 (for example, a knob) for manually changing the size of the AF frame, and a shape operation member 104 (for example, a knob) for changing the shape of the AF frame by manual operation. ), A tracking start switch 108 for instructing start of AF frame automatic tracking, and a tracking stop switch 110 for instructing stop of AF frame automatic tracking are provided. Setting of these operation members 100, 102, 104, 108, 110 is provided. The state is read by the image processing unit 58 (CPU 78 of the main board 70 described later).

また、AF枠操作部60のLCD40は、AF枠自動追尾に関するモード等の設定をタッチ操作(タップ操作)で入力できるようにしたもので、画像処理ユニット58のCPU78によりLCD40に表示される画像が設定内容に応じて適宜切り換えられるようになっている。LCD40の表示及び操作については後述する。   Further, the LCD 40 of the AF frame operation unit 60 is configured such that settings such as a mode related to AF frame automatic tracking can be input by a touch operation (tap operation), and an image displayed on the LCD 40 by the CPU 78 of the image processing unit 58 is displayed. It can be switched appropriately according to the setting contents. The display and operation of the LCD 40 will be described later.

尚、本実施の形態では、画像処理ユニット58やAF枠操作部60を備えたAF枠制御装置がフォーカスデマンド26に組み込まれた態様を示したが、AF枠制御装置はフォーカスデマンド26とは別体の装置として構成してもよい。また、この場合に、AF枠操作部60は、その一部又は全てを画像処理ユニット58と一体の装置に設けられてもよいし、別体の装置に設けてもよい。   In the present embodiment, the AF frame control device including the image processing unit 58 and the AF frame operation unit 60 is incorporated in the focus demand 26. However, the AF frame control device is different from the focus demand 26. It may be configured as a body device. In this case, a part or all of the AF frame operation unit 60 may be provided in an apparatus integrated with the image processing unit 58, or may be provided in a separate apparatus.

次に画像処理ユニット58の構成及び処理内容について説明する。   Next, the configuration and processing contents of the image processing unit 58 will be described.

画像処理ユニット58は、主としてメインボード70、パターンマッチング処理演算ボード72、顔認識処理演算ボード74から構成されている。メインボード70、パターンマッチング処理演算ボード72、顔認識処理演算ボード74の各々にはCPU78、90、92が搭載されており、各ボード毎に個別の演算処理が行われると共に、各CPU78、90、92は、バスや制御線で接続され、相互にデータのやり取りや、演算処理の同期等が図られるようになっている。   The image processing unit 58 mainly includes a main board 70, a pattern matching processing calculation board 72, and a face recognition processing calculation board 74. Each of the main board 70, the pattern matching processing calculation board 72, and the face recognition processing calculation board 74 is equipped with CPUs 78, 90, and 92. Individual calculation processing is performed for each board, and each of the CPUs 78, 90, Reference numerals 92 are connected by a bus or a control line so that data can be exchanged or arithmetic processing can be synchronized with each other.

画像処理ユニット58における処理は、メインボード70において統括的に行われるようになっている。そのメインボード70には、演算処理を行う上記CPU78の他に、SCI70a、デコーダ(A/D変換器)76、スーパーインポーザ82、RAM80等が搭載されている。   The processing in the image processing unit 58 is performed on the main board 70 in an integrated manner. In addition to the CPU 78 that performs arithmetic processing, the main board 70 is equipped with an SCI 70a, a decoder (A / D converter) 76, a superimposer 82, a RAM 80, and the like.

SCI70aは、上述のようにレンズ装置12のSCI12aとの間でシリアル通信を行うためのインターフェース回路であり、上記AF枠情報等をレンズ装置12に送信する。   The SCI 70 a is an interface circuit for performing serial communication with the SCI 12 a of the lens device 12 as described above, and transmits the AF frame information and the like to the lens device 12.

デコーダ76は、上記ダウンコンバータ68から画像処理ユニット58に入力されるテレビカメラ10の撮影映像の映像信号(SDTV信号)を、画像処理ユニット58においてデジタル処理可能なデータに変換するための回路であり、アナログのSDTV信号をデジタルデータの映像信号に変換するA/D変換処理等を行っている。   The decoder 76 is a circuit for converting a video signal (SDTV signal) of a video image taken by the television camera 10 input from the down converter 68 to the image processing unit 58 into data that can be digitally processed by the image processing unit 58. A / D conversion processing for converting an analog SDTV signal into a video signal of digital data is performed.

スーパーインポーザ82は、上記のデコーダ76により得られた撮影映像の映像信号と、CPU78により生成される画像信号とを合成し、その合成した映像信号をLCD40に出力・表示する回路である。これにより、カメラ本体14に設置されているビューファインダ36と同様にテレビカメラ10の撮影映像がLCD40に表示されると共に、その撮影映像に重ねて、現在設定されているAF枠の範囲を示すAF枠の画像や、タッチパネルでの入力操作を行えるようにしたメニュー画面(メニュー画像)等がLCD40に表示される。尚、撮影映像に重畳させることなくCPU78で生成された画像のみを表示させることも当然可能である。   The superimposer 82 is a circuit that synthesizes the video signal of the captured video obtained by the decoder 76 and the image signal generated by the CPU 78 and outputs and displays the synthesized video signal on the LCD 40. As a result, the image captured by the television camera 10 is displayed on the LCD 40 in the same manner as the viewfinder 36 installed in the camera body 14, and the AF indicating the currently set AF frame range is superimposed on the image captured. An image of the frame, a menu screen (menu image) that allows input operations on the touch panel, and the like are displayed on the LCD 40. Of course, it is also possible to display only the image generated by the CPU 78 without being superimposed on the captured video.

RAM80は、CPU78の演算処理において使用するデータを一時的に格納するメモリである。   The RAM 80 is a memory that temporarily stores data used in the arithmetic processing of the CPU 78.

一方、パターンマッチング処理演算ボード72や顔認識処理演算ボード74は、パターンマッチングと顔検出・認識処理を個別に行うための演算ボードであり、各々、演算処理を行うCPU90、92の他に画像データを一時的に格納するVRAM94、96等を備えている。   On the other hand, the pattern matching processing calculation board 72 and the face recognition processing calculation board 74 are calculation boards for individually performing pattern matching and face detection / recognition processing. In addition to the CPUs 90 and 92 that perform calculation processing, image data VRAM 94, 96, etc. are temporarily stored.

また、画像処理ユニット58には、SD(Secure Digital)カードやUSBメモリなどの外部メモリとしてデータカード114を装填するスロット115が設けられており、顔認識により特定の人物の顔を検出する際に、その特定の人物の顔を示す認証データを予めデータカード114に保存しておき、そのデータカード114をスロット75に装填することで、顔認識に必要な認証データをデータカード114からCPU78が読み込めるようになっている。   Further, the image processing unit 58 is provided with a slot 115 into which a data card 114 is loaded as an external memory such as an SD (Secure Digital) card or a USB memory, and when detecting a face of a specific person by face recognition. Authentication data indicating the face of the specific person is stored in the data card 114 in advance, and the data card 114 is loaded into the slot 75, whereby the CPU 78 can read the authentication data necessary for face recognition from the data card 114. It is like that.

続いて、上記のごとく構成された画像処理ユニット58によるAF枠の制御についてLCD40の表示及び操作に関する処理と共に説明する。   Subsequently, control of the AF frame by the image processing unit 58 configured as described above will be described together with processing relating to display and operation of the LCD 40.

まず、LCD40の表示及び操作に関して説明すると、図5に示すようにLCD40の画面40aには、テレビカメラ10の撮影映像に重畳して各種ボタン300〜314からなるメニュー画面(メニュー画像)と、現在設定されているAF枠の範囲を示すAF枠の画像204(単にAF枠204という)が表示される。メニュー画面の各種ボタン300〜314やAF枠204のように撮影映像に重畳される画像は、図2に示した画像処理ユニット58におけるメインボード70のCPU78により生成され、それらの画像が、スーパーインポーザ82においてデコーダ76から得られるテレビカメラ10の撮影映像に重畳されてLCD40に表示されるようになっている。尚、LCD40の表示(表示内容)に関する制御はCPU78により行われるものである。   First, the display and operation of the LCD 40 will be described. As shown in FIG. 5, on the screen 40a of the LCD 40, a menu screen (menu image) composed of various buttons 300 to 314 superimposed on the video image taken by the TV camera 10, and the current An AF frame image 204 (simply referred to as the AF frame 204) indicating the set AF frame range is displayed. The images to be superimposed on the captured image, such as the various buttons 300 to 314 on the menu screen and the AF frame 204, are generated by the CPU 78 of the main board 70 in the image processing unit 58 shown in FIG. The poser 82 is displayed on the LCD 40 so as to be superimposed on the video image taken by the television camera 10 obtained from the decoder 76. Note that the CPU 78 controls the display (display contents) on the LCD 40.

一方、LCD40はタッチパネルを備えており、LCD40の画面40aに対して指先等が触れるタッチ操作が行われると、触れた位置(座標)を示す位置情報がCPU78に与えられるようになっている。これにより、LCD40の画面40aに対して行われたタッチ操作の位置や操作の種類(タップ操作、ダブルタップ操作等)がCPU78により検出されるようになっている。そして、その操作に従った処理がCPU78により実行されるようになっている。   On the other hand, the LCD 40 is provided with a touch panel, and when a touch operation with which a fingertip or the like touches the screen 40a of the LCD 40 is performed, position information indicating the touched position (coordinates) is given to the CPU 78. As a result, the position of the touch operation performed on the screen 40a of the LCD 40 and the type of operation (tap operation, double tap operation, etc.) are detected by the CPU 78. Then, processing according to the operation is executed by the CPU 78.

LCD40の画面40aにおける基本的な操作として、各ボタン300〜314に予め割り当てられた指示を入力する操作や、AF枠204の範囲を指定する操作があり、前者の操作は、各ボタン300〜314の位置を指先等でタップ操作するものである。後者のAF枠204の範囲を指定する操作は、例えば、撮影映像が表示されたLCD40の画面40a上において、AF枠204を移動させたい位置をタップ操作すれば、その位置が中心となるようにAF枠204を移動させることができる。また、AF枠204の頂点や辺を指先等でタッチしてそのままスライドするドラッグ操作によってドラッグ操作した位置までタッチした頂点や辺の位置を移動させてAF枠204の大きさや形状を変更することができる。   As basic operations on the screen 40a of the LCD 40, there are an operation of inputting an instruction assigned in advance to each button 300 to 314 and an operation of designating the range of the AF frame 204. The former operation is performed by using the buttons 300 to 314. Is tapped with a fingertip or the like. The latter operation of designating the range of the AF frame 204 is performed, for example, by tapping the position where the AF frame 204 is to be moved on the screen 40a of the LCD 40 on which the captured image is displayed, so that the position becomes the center. The AF frame 204 can be moved. Also, the size and shape of the AF frame 204 can be changed by moving the position of the touched vertex or side to the position where the drag operation is performed by a drag operation of touching and sliding the vertex or side of the AF frame 204 with a fingertip or the like. it can.

LCD40の画面40aに表示されるメニュー画面(メニュー画像)について説明すると、図5において、”固定”と表示された固定モード選択ボタン300、”物体追尾”と表示された物体追尾モード選択ボタン302、”顔検出”と表示された顔検出追尾モード選択ボタン304、”顔認識”と表示された顔認識追尾モード選択ボタン306は、AF枠の制御モードを選択するボタンであり、これらのボタン300〜306のいずれかをタップ操作することで、固定モード、物体追尾モード、顔検出追尾モード、顔認識追尾モードのうちから所望のモードを選択することできるようになっている。尚、各モードの内容については後述する。   The menu screen (menu image) displayed on the screen 40a of the LCD 40 will be described. In FIG. 5, a fixed mode selection button 300 displayed as “Fixed”, an object tracking mode selection button 302 displayed as “Object tracking”, A face detection tracking mode selection button 304 displayed as “face detection” and a face recognition tracking mode selection button 306 displayed as “face recognition” are buttons for selecting a control mode of the AF frame. By tapping any one of 306, a desired mode can be selected from the fixed mode, the object tracking mode, the face detection tracking mode, and the face recognition tracking mode. The contents of each mode will be described later.

”セット”と表示されたセットボタン308と、”リセット”と表示されたリセットボタン310は、AF枠自動追尾の開始と停止を指示するボタンであり、これらのボタン308、310は、AF枠自動追尾の開始又は停止の指示を操作者が行う制御モード(物体追尾モード、顔検出モード)が選択された場合にのみ表示される。尚、これらのセットボタン308とリセットボタン310は、AF枠操作部60の追尾開始スイッチ108と追尾停止スイッチ110(図1及び図4参照)と同様に作用するボタンである。   A set button 308 displayed as “set” and a reset button 310 displayed as “reset” are buttons for instructing start and stop of AF frame auto-tracking. Displayed only when the control mode (object tracking mode, face detection mode) in which the operator gives an instruction to start or stop tracking is selected. The set button 308 and the reset button 310 are buttons that operate in the same manner as the tracking start switch 108 and the tracking stop switch 110 (see FIGS. 1 and 4) of the AF frame operation unit 60.

また、AF枠自動追尾の開始は、画面40aの所望の位置をダブルタップ操作(2回連続して同一位置をタップする操作)すると、その位置を中心とする位置にAF枠が設定されると共に、AF自動追尾が開始されるようになっている。即ち、ダブルタップ操作の1回目のタップ操作がAF枠をタップ操作した位置に移動させる指示操作となり、続く2回目のタップ操作がAF自動追尾の開始を指示する操作となる。これにより、セットボタン308をタップ操作してAF枠自動追尾の開始を指示する操作を省略することができ、迅速にそのAF枠の位置の設定及びAF枠自動追尾の開始を指示することができるようになっている。尚、AF枠自動追尾の開始をダブルタップ操作のみによって行えるようにし、上記セットボタン308の表示を行わないようにしてもよい。   In addition, the AF frame automatic tracking is started by double-tapping the desired position on the screen 40a (operation for tapping the same position twice in succession) and setting the AF frame at a position centered on that position. AF automatic tracking is started. That is, the first tap operation of the double tap operation is an instruction operation for moving the AF frame to the position where the AF operation is performed, and the subsequent second tap operation is an operation for instructing the start of AF automatic tracking. As a result, the operation of tapping the set button 308 to instruct the start of AF frame automatic tracking can be omitted, and the setting of the position of the AF frame and the start of AF frame automatic tracking can be instructed quickly. It is like that. The AF frame automatic tracking may be started only by a double tap operation, and the set button 308 may not be displayed.

”小”、”中”、”大”と表示されたAF枠サイズ選択ボタン312(小ボタン312a、中ボタン312b、大ボタン312c)は、四角形で形状(縦横比)が一定のAF枠204の大きさを、予め決められた3つの異なる大きさの中から選択するためのボタンであり、小ボタン312a、中ボタン312b、大ボタン312cのいずれかをタップ操作することにより、AF枠204の大きさを瞬時に変更することができるようになっている。小ボタン312aをタップ操作したときが一番小さいサイズのAF枠となり、大ボタン312cをタップ操作したときが一番大きいサイズのAF枠となる。   The AF frame size selection buttons 312 (small button 312a, middle button 312b, and large button 312c) displayed as “small”, “medium”, and “large” are quadrangular and the shape (aspect ratio) of the AF frame 204 is constant. This is a button for selecting the size from among three different sizes determined in advance. By tapping any one of the small button 312a, the middle button 312b, and the large button 312c, the size of the AF frame 204 is increased. It can be changed instantly. When the small button 312a is tapped, the smallest AF frame is obtained. When the large button 312c is tapped, the largest AF frame is obtained.

ここで、本実施の形態ではAF枠204の大きさを3通りの大きさから選択できるようにしたが、2通り又は4通り以上の大きさを予め決めておき、各々の大きさに対応するAF枠サイズ選択ボタンを表示して、各AF枠サイズ選択ボタンのタップ操作で各大きさのAF枠204を選択できるようにしてもよい。また、AF枠の大きさだけでなく形状も異なるAF枠を選択できるようにしてもよい。   Here, in the present embodiment, the size of the AF frame 204 can be selected from three sizes. However, two or four or more sizes are determined in advance and correspond to each size. An AF frame size selection button may be displayed so that each size of the AF frame 204 can be selected by tapping the AF frame size selection button. Further, not only the size of the AF frame but also an AF frame having a different shape may be selected.

また、大きさや形状の異なる複数種のAF枠から所望の種類のAF枠を選択するための選択手段の態様は本実施の形態のように各種類に対応した選択ボタンを設けたものに限らない。例えば、予め決められた複数種のAF枠の各々について順番(1番〜N番)を割り当てておき、その順番に従ってAF枠の種類を順次切り替えるボタンを設けてもよい。即ち、LCD40の画面40aにAF枠の種類を切り替えるための1つの切替ボタンを表示し、その切替ボタンをタップ操作する毎に1ずつ加算した順番(現在設定されているAF枠の順番に対して1加算した順番)のAF枠に変更し、最大の順番(N番)のAF枠となった場合には次に1番のAF枠に変更する(トグル式に変更)ようにしてもよい。また、アップボタンとダウンボタンの2つのボタンを表示し、アップボタンをタップ操作する毎に1ずつ加算した順番のAF枠に変更し、ダウンボタンをタップ操作する毎に1ずつ減算した順番のAF枠に変更するようにしてもよい。   In addition, the mode of the selection means for selecting a desired type of AF frame from a plurality of types of AF frames of different sizes and shapes is not limited to that provided with a selection button corresponding to each type as in the present embodiment. . For example, a button (number 1 to number N) may be assigned to each of a plurality of predetermined AF frames, and a button for sequentially switching the AF frame type according to the order may be provided. That is, one switching button for switching the type of the AF frame is displayed on the screen 40a of the LCD 40, and an order of adding one each time the switching button is tapped (with respect to the order of the currently set AF frame). The AF frame may be changed to the first AF frame, and when the AF frame becomes the largest (Nth) AF frame, the first AF frame may be changed (toggle type). In addition, two buttons, an up button and a down button, are displayed, and each time the up button is tapped, the AF frame is changed to an incremented order of one, and each time the down button is tapped, one is decremented by one. You may make it change into a frame.

更に、選択可能なAF枠の種類として大きさ(対角距離)が一定量ずつ異なるAF枠、形状(縦横比)が一定量ずつ異なるAF枠というような決め方も可能であり、上記のような切替ボタンや、アップボタンとダウンボタンがタップ操作される毎に、AF枠の大きさ又は形状を一定量ずつ変更することも可能である。このとき、AF枠の大きさを変更するためのボタンと、AF枠の形状を変更するボタンを別々に設けておけば、AF枠の大きさとAF枠の形状の両方を変更することも可能である。   Further, it is possible to determine the types of AF frames that can be selected such as an AF frame having a different size (diagonal distance) by a certain amount and an AF frame having a different shape (aspect ratio) by a certain amount. It is possible to change the size or shape of the AF frame by a certain amount each time the switching button or the up button and the down button are tapped. At this time, if a button for changing the size of the AF frame and a button for changing the shape of the AF frame are provided separately, it is possible to change both the size of the AF frame and the shape of the AF frame. is there.

尚、AF枠の種類を選択するための選択手段は、上記のようにAF枠の種類を選択するための上記のようなボタンをLCD40の画面40aに表示する態様に限らず、又は、この態様と併せて、図2のAF枠操作部60の構成要素として、図4で示したフォーカスデマンド26の本体26a等にメカ的なボタン(スイッチ)を設け、そのボタンによってAF枠の種類を変更できるようにしてもよい。   The selection means for selecting the type of the AF frame is not limited to the mode in which the above-described button for selecting the type of the AF frame is displayed on the screen 40a of the LCD 40 as described above, or this mode. In addition, a mechanical button (switch) is provided on the main body 26a of the focus demand 26 shown in FIG. 4 as a component of the AF frame operation unit 60 in FIG. 2, and the type of the AF frame can be changed by the button. You may do it.

また、上記のようにAF枠204の頂点や辺をドラッグ操作してAF枠204を任意の大きさや形状に変更する操作は、AF枠サイズ選択ボタン312の操作のように予め決められた大きさや形状に変更する操作と共に有効に行えるようにしてもよいし、いずれか一方の操作のみを有効とし、LCD40の画面40aに表示された所定のボタンをタップ操作すること等によっていずれの操作を有効にするかを選択できるようにしてもよい。   In addition, as described above, an operation of dragging the vertex or side of the AF frame 204 to change the AF frame 204 to an arbitrary size or shape is performed in a predetermined size, such as the operation of the AF frame size selection button 312. It may be possible to make it effective together with the operation to change the shape, or only one of the operations is made effective, and any operation is made effective by tapping a predetermined button displayed on the screen 40a of the LCD 40. You may be able to select whether to do.

図5において ”表示オフ”と表示されたメニュー表示オン/オフボタン314は、このボタン314以外のメニュー画面(メニュー画像)の表示をオフするためのボタンであり、メニュー表示オン/オフボタン314をタップ操作すると、図6のようにメニュー画面のボタン300〜312の表示がオフされる。このとき、メニュー表示オン/オフボタン314には”表示オン”と表示され、再度、メニュー表示オン/オフボタン314をタップ操作すると、図5のようにメニュー画面が撮影映像に重畳されて表示される。これによれば、撮影映像に重畳されたメニュー画面の表示が不必要な状況において操作者がメニュー画面の表示をオフすることができ、メニュー画面が撮影作業を妨げとなることを防止することができる。   In FIG. 5, the menu display on / off button 314 displayed as “display off” is a button for turning off the display of the menu screen (menu image) other than the button 314, and the menu display on / off button 314 is displayed. When the tap operation is performed, the display of the buttons 300 to 312 on the menu screen is turned off as shown in FIG. At this time, “display on” is displayed on the menu display on / off button 314, and when the menu display on / off button 314 is tapped again, the menu screen is superimposed on the captured video as shown in FIG. The According to this, in a situation where the display of the menu screen superimposed on the captured video is unnecessary, the operator can turn off the display of the menu screen, and the menu screen can be prevented from obstructing the shooting operation. it can.

また、メニュー画面の表示は上記のように操作者が不要と判断する場合に限らず、自動で不要と判断できる場合がある。例えば、画面40aのタッチ操作(又はメニュー画面のボタン300〜314に対するタッチ操作)が最後に行われた時から一定時間が経過した場合、即ち、画面40aのタッチ操作が一定時間以上行われていない場合には、メニュー画面の表示は不要であると判断することができる。   In addition, the display of the menu screen is not limited to the case where the operator determines that the menu screen is unnecessary as described above, and there are cases where it can be automatically determined that the menu screen is unnecessary. For example, when a certain period of time has elapsed since the last touch operation on the screen 40a (or the touch operation on the buttons 300 to 314 on the menu screen), that is, the touch operation on the screen 40a has not been performed for a certain time or more. In this case, it can be determined that the display of the menu screen is unnecessary.

そこで、メインボード70のCPU78において、画面40aのタッチ操作(又はメニュー画面のボタン300〜314に対するタッチ操作)が最後に行われた時から一定時間が経過したか否か(画面40aのタッチ操作が一定時間行われていないか否か)を判断し、一定時間が経過した場合には自動でメニュー画面の表示をオフするタイマー機能を設けてもよい。このときのメニュー画面の表示をオフする時間はユーザが任意の値に設定できるようにしてもよい。   Therefore, in the CPU 78 of the main board 70, whether or not a fixed time has passed since the last touch operation on the screen 40a (or the touch operation on the buttons 300 to 314 on the menu screen) is performed (the touch operation on the screen 40a is performed). A timer function that automatically turns off the display of the menu screen when the predetermined time has elapsed may be provided. The time for turning off the display of the menu screen at this time may be set to an arbitrary value by the user.

また、操作者がレンズ装置12のズーミング操作(図1に示したズームデマンド28の操作)を行っている場合や詳細を後述するAF枠自動追尾の動作が開始した後もメニュー画面の表示は不要であると判断することができる。   Further, it is not necessary to display the menu screen even when the operator performs the zooming operation of the lens device 12 (the operation of the zoom demand 28 shown in FIG. 1) or after the AF frame automatic tracking operation described later in detail is started. Can be determined.

そこで、メインボード70のCPU78において、レンズ装置12からズーミング操作が行われているか否かの情報を取得し、ズーミングの操作が行われていることが検出された場合、又は、AF枠自動追尾の処理が開始した場合には、メニュー画面の表示をオフする機能を設けてもよい。AF枠自動追尾の処理はCPU78が統括的に行っているため、AF枠自動追尾の処理が開始されたことは自己の処理情報に基づいて判断することができる。   Therefore, the CPU 78 of the main board 70 acquires information on whether or not the zooming operation is being performed from the lens device 12, and when it is detected that the zooming operation is being performed, or the AF frame automatic tracking is performed. When the process is started, a function of turning off the display of the menu screen may be provided. Since the AF frame auto-tracking process is centrally performed by the CPU 78, it can be determined based on its own processing information that the AF frame auto-tracking process has been started.

また、これらの自動表示オフ機能によって、メニュー画面の表示がオフされている場合には、例えば、画面40aの任意の位置をタッチ操作するとメニュー画面が表示されるようにすればよい。これらの自動表示オフ機能と同時に上記のようにメニュー表示オン/オフボタン314によるメニュー画面の表示のオン/オフを行えるようにした機能を採用している場合には、そのメニュー表示オン/オフボタン314をタップ操作することによってメニュー画面の表示を行うようにすればよい。   Further, when the menu screen display is turned off by these automatic display off functions, for example, the menu screen may be displayed by touching an arbitrary position on the screen 40a. In the case of adopting a function that can turn on / off the menu screen by the menu display on / off button 314 as described above simultaneously with the automatic display off function, the menu display on / off button The menu screen may be displayed by tapping 314.

一方、上記のような機能よりメニュー画面の表示がオフされている場合において、メニュー画面の表示が必要であると自動で判断できる場合がある。例えば、AF枠自動追尾を行っている際に、何からの理由でその追尾が不能となる場合がある。その場合には、再度、メニュー画面での操作が必要となるため、メニュー画面を表示させる必要がある。このとき、上記のように操作者がメニュー画面を表示させるための操作を行うのは手間と時間を要する。   On the other hand, when the display of the menu screen is turned off by the function as described above, it may be automatically determined that the display of the menu screen is necessary. For example, when AF frame automatic tracking is being performed, tracking may be impossible for any reason. In that case, since the operation on the menu screen is necessary again, it is necessary to display the menu screen. At this time, it takes time and effort for the operator to perform an operation for displaying the menu screen as described above.

そこで、メインボード70のCPU78は、LCD40の画面40aにおいてメニュー画面の表示を消した状態となっている場合に、AF枠自動追尾が不能となったときには、自動的にメニュー画面を表示させる自動表示オン機能を設けてもよい。上記のようにAF枠自動追尾の処理はCPU78が統括的に行っているため、AF枠自動追尾が不能となったことは自己の処理情報に基づき判断することができる。   Therefore, the CPU 78 of the main board 70 automatically displays the menu screen automatically when the AF frame automatic tracking is disabled when the menu screen display is turned off on the screen 40a of the LCD 40. An on function may be provided. As described above, since the AF frame automatic tracking process is centrally performed by the CPU 78, it is possible to determine that the AF frame automatic tracking is disabled based on its own processing information.

続いて、図5の画面40aにおいて示した固定モード選択ボタン300、物体追尾モード選択ボタン302、顔検出追尾モード選択ボタン304、顔認識追尾モード選択ボタン306によって選択可能となっているAF枠の各制御モードについて説明する。本実施の形態では、AF枠の制御モードとして固定モード、物体追尾モード、顔検出追尾モード、顔認識追尾モードの4つのモードが上記選択ボタン300〜306のいずれかをタップ操作することにより選択できるようになっている。   Subsequently, each AF frame that can be selected by the fixed mode selection button 300, the object tracking mode selection button 302, the face detection tracking mode selection button 304, and the face recognition tracking mode selection button 306 shown in the screen 40a of FIG. The control mode will be described. In the present embodiment, four modes of the AF frame control mode, the fixed mode, the object tracking mode, the face detection tracking mode, and the face recognition tracking mode, can be selected by tapping any of the selection buttons 300 to 306. It is like that.

固定モードは、AF枠の範囲(位置、大きさ、形状)を操作者がマニュアル操作で指定し、その指定した位置にAF枠を固定するモード(マニュアルモード)である。この固定モードは、カメラをほとんど動かさないニュース番組などでの撮影に有益なモードである。   The fixed mode is a mode (manual mode) in which the operator manually designates the range (position, size, shape) of the AF frame, and fixes the AF frame at the designated position. This fixed mode is a mode that is useful for shooting news programs that hardly move the camera.

図5のLCD40の画面40aにおいて固定モード選択ボタン300をタップ操作すると固定モードが選択され、画像処理ユニット58のメインボード70に搭載されたCPU78は、固定モードの処理を実行する。   When the fixed mode selection button 300 is tapped on the screen 40a of the LCD 40 in FIG. 5, the fixed mode is selected, and the CPU 78 mounted on the main board 70 of the image processing unit 58 executes the processing of the fixed mode.

即ち、CPU78は、上記のようにLCD40の画面40aに対するAF枠の範囲を変更する操作や、AF枠操作部60に設けられたAF枠204をマニュアル操作で変更するための操作部材(位置操作部材100、サイズ操作部材102、形状操作部材104)の操作に基づいてAF枠の範囲を決定する。CPU78は、AF枠の範囲を決定すると、そのAF枠の範囲を示すAF枠情報をSCI70aを通じてレンズ装置12のレンズCPUに送信する。   That is, the CPU 78 operates to change the AF frame range for the screen 40a of the LCD 40 as described above, or an operation member (position operation member) for manually changing the AF frame 204 provided in the AF frame operation unit 60. 100, the range of the AF frame is determined based on the operation of the size operation member 102 and the shape operation member 104). When determining the range of the AF frame, the CPU 78 transmits AF frame information indicating the range of the AF frame to the lens CPU of the lens device 12 through the SCI 70a.

物体追尾モードは、AF枠自動追尾の1つのモードであり、任意の種類の物体をAF枠で追尾させるモードである。この物体追尾モードは、人物の顔以外を追尾する競馬中継、カ−レース中継などでの撮影に有益なモードである。   The object tracking mode is one mode of AF frame automatic tracking, and is a mode for tracking an arbitrary type of object with the AF frame. This object tracking mode is a mode useful for photographing at a horse race relay, a car race relay, etc. for tracking other than a person's face.

図5のLCD40の画面40aにおいて物体追尾モード選択ボタン302をタップ操作すると物体追尾モードが選択され、画像処理ユニット58のメインボード70に搭載されたCPU78は、物体追尾モードの処理を開始する。   When the object tracking mode selection button 302 is tapped on the screen 40a of the LCD 40 in FIG. 5, the object tracking mode is selected, and the CPU 78 mounted on the main board 70 of the image processing unit 58 starts processing in the object tracking mode.

図7は、物体追尾モードの処理手順を示したフローチャートであり、以下、物体追尾モードの処理をこのフローチャートに従って説明する。尚、物体追尾モードが選択された場合にLCD40の画面40aには、図5に示したものと同様のメニュー画面が表示される。   FIG. 7 is a flowchart showing the processing procedure of the object tracking mode. Hereinafter, the processing of the object tracking mode will be described with reference to this flowchart. When the object tracking mode is selected, a menu screen similar to that shown in FIG. 5 is displayed on the screen 40a of the LCD 40.

メインボード70のCPU78は、AF枠自動追尾の開始を指示する操作がAF枠操作部60から与えられるまで、固定モードと同様にAF枠をマニュアル操作に従って変更し、追尾対象を設定するための処理(AF枠の初期設定処理)を行う。即ち、操作者は、追尾対象(AFの対象)とする被写体画像が含まれるようにAF枠の範囲を指定し、これに従ってCPU78はAF枠の範囲を設定する(ステップS10)。尚、図5では、人物の顔にAF枠204が設定されているが、この物体追尾モードでは人物の顔以外の物体を追尾対象とすることができる。   The CPU 78 of the main board 70 changes the AF frame according to the manual operation and sets the tracking target in the same manner as in the fixed mode until an operation for instructing the start of the AF frame automatic tracking is given from the AF frame operation unit 60. (AF frame initial setting processing) is performed. That is, the operator designates the AF frame range so as to include the subject image to be tracked (AF target), and the CPU 78 sets the AF frame range accordingly (step S10). In FIG. 5, the AF frame 204 is set on the person's face, but in this object tracking mode, an object other than the person's face can be set as the tracking target.

続いて操作者が、AF枠自動追尾の開始を指示する操作を行うと、CPU78(及びパターンマッチング処理演算ボード72のCPU90)はパターンマッチングによるAF枠自動追尾の処理(ステップS14〜S26)を開始すると共に、AF枠自動追尾の処理で決定されるAF枠の範囲をレンズ装置12のレンズCPUに指定する処理(AF枠情報の送信)を開始する(ステップS12)。   Subsequently, when the operator performs an operation to instruct the start of AF frame automatic tracking, the CPU 78 (and the CPU 90 of the pattern matching processing calculation board 72) starts the AF frame automatic tracking processing (steps S14 to S26) by pattern matching. At the same time, a process of specifying the AF frame range determined by the AF frame automatic tracking process to the lens CPU of the lens apparatus 12 (transmission of AF frame information) is started (step S12).

尚、AF枠自動追尾の開始の指示は、図5に示したLCD40の画面40a上において、セットボタン308をタップ操作するか、又は、任意の位置(AF枠を設定する位置)をダブルタップ操作することによって行われる。また、AF枠操作部60おいてメカ的なスイッチとして設けられた追尾開始スイッチ108を押下操作した場合にもAF枠自動追尾の開始の指示が行われる。LCD40の画面40a上において、ダブルタップ操作することによってAF枠自動追尾の開始を指示する場合には、ステップS10におけるAF枠の位置の設定も同時に行うことができる。ただし、任意の位置でのダブルタップ操作を単にAF枠自動追尾の開始を指示する操作とする態様も可能であり、その場合にはAF枠の位置の設定とは無関係のものとなる。   The instruction to start AF frame automatic tracking is performed by tapping the set button 308 on the screen 40a of the LCD 40 shown in FIG. 5 or by double tapping any position (position where the AF frame is set). Is done by doing. The AF frame automatic tracking start instruction is also given when the tracking start switch 108 provided as a mechanical switch in the AF frame operation unit 60 is pressed. When the start of the AF frame automatic tracking is instructed by performing a double tap operation on the screen 40a of the LCD 40, the position of the AF frame in step S10 can be set at the same time. However, a mode in which a double tap operation at an arbitrary position is simply an operation for instructing the start of AF frame automatic tracking is possible, and in this case, the setting is irrelevant to the setting of the position of the AF frame.

また、AF枠自動追尾の開始する際にAFによるフォーカス制御が行われていない場合(AFモードとなっていない場合)には、AF枠自動追尾の開始と連動してAFの開始も指示される。   If focus control by AF is not performed at the start of AF frame automatic tracking (when AF mode is not set), the start of AF is also instructed in conjunction with the start of AF frame automatic tracking. .

AF枠自動追尾の処理を開始すると、CPU78からの指示によりパターンマッチング処理演算ボード72のCPU90は、デコーダ76から1コマ分の撮影画像の画像データを取り込む(ステップS14)。続いて、現在設定されているAF枠の範囲をCPU78から取得し、取り込んだ撮影画像のうちAF枠の範囲内の画像を基準パターンの画像として設定(記憶)する(ステップS16)。そして、以下のステップS18〜S26の処理を繰り返し実行する。   When the AF frame automatic tracking process is started, the CPU 90 of the pattern matching processing calculation board 72 takes in image data of one frame of captured image from the decoder 76 in accordance with an instruction from the CPU 78 (step S14). Subsequently, the currently set AF frame range is acquired from the CPU 78, and an image within the AF frame range among the captured images is set (stored) as a reference pattern image (step S16). Then, the following steps S18 to S26 are repeatedly executed.

まず、CPU90は、デコーダ76から1コマ分の撮影画像の画像データを取り込み(ステップS18)、パターンマッチング処理を行って、撮影画像の中から基準パターンの画像に一致する画像範囲を検出する(ステップS20)。そして、その検出した画像範囲をメインボードのCPU78に通知する。   First, the CPU 90 fetches image data of a captured image for one frame from the decoder 76 (step S18), performs pattern matching processing, and detects an image range that matches the image of the reference pattern from the captured images (step S18). S20). Then, the detected image range is notified to the CPU 78 of the main board.

CPU78は、基準パターンの画像が移動したか否か、即ち、基準パターンを検出した画像範囲が、現在設定されているAF枠の範囲と相違しているか否かを判定する(ステップS22)。尚、撮影画像内での基準パターンの画像の大きさが変化した場合もこの判定処理でYESと判定される。   The CPU 78 determines whether or not the image of the reference pattern has moved, that is, whether or not the image range in which the reference pattern is detected is different from the currently set AF frame range (step S22). It should be noted that the determination processing also determines YES when the size of the image of the reference pattern in the captured image changes.

ステップS22においてYESと判定した場合には、ステップS20において検出した画像範囲を新たなAF枠の範囲として設定(更新)し、そのAF枠の範囲を示すAF枠情報をレンズ装置12のレンズCPUに送信する(ステップS24)。   If YES is determined in step S22, the image range detected in step S20 is set (updated) as a new AF frame range, and AF frame information indicating the AF frame range is set in the lens CPU of the lens device 12. Transmit (step S24).

また、パターンマッチング処理演算ボード72のCPU90は、ステップS22において検出した画像範囲の画像を新たな基準パターンの画像として更新する(ステップS26)。   Further, the CPU 90 of the pattern matching processing calculation board 72 updates the image in the image range detected in step S22 as a new reference pattern image (step S26).

ステップS22においてNOと判定した場合には、ステップS24におけるAF枠の更新は行わず、ステップS26における基準パターンの更新のみが行われる。   If NO is determined in step S22, the AF frame is not updated in step S24, and only the reference pattern is updated in step S26.

ステップS26の処理が終了すると、ステップS18の処理に戻る。   When the process of step S26 ends, the process returns to step S18.

尚、操作者によりAF枠自動追尾の停止を指示する操作、例えば、LDC40の画面40aに表示されたリセットボタン310のタップ操作が行われると、AF枠自動追尾の処理を停止し、ステップS10に戻る。また、このとき、AFによるフォーカス制御も停止させるようにしてもよい。   If the operator instructs to stop the AF frame automatic tracking, for example, if the tap operation of the reset button 310 displayed on the screen 40a of the LDC 40 is performed, the AF frame automatic tracking process is stopped, and the process goes to step S10. Return. At this time, focus control by AF may be stopped.

顔検出追尾モードは、AF枠の自動追尾を行う1つのモードであり、任意の人物の顔をAF枠で追尾させるモードである。この顔検出追尾モードは、人物の顔を検出して追尾する歌謡番組などでの撮影に有益なモードである。   The face detection tracking mode is one mode for automatically tracking the AF frame, and is a mode for tracking the face of an arbitrary person using the AF frame. This face detection tracking mode is a mode useful for shooting in a song program or the like that detects and tracks a person's face.

図5のLCD40の画面40aにおいて顔検出追尾モード選択ボタン304をタップ操作すると顔検出追尾モードが選択され、画像処理ユニット58のメインボード70に搭載されたCPU78は、顔検出追尾モードの処理を開始する。また、この顔検出追尾モードが選択された場合、AF枠の範囲が人物の顔に合わせて自動的に設定されるため、LCD40の画面40aでは、図8に示すように図5のAF枠サイズ選択ボタン312が非表示となる。   When the face detection tracking mode selection button 304 is tapped on the screen 40a of the LCD 40 in FIG. 5, the face detection tracking mode is selected, and the CPU 78 mounted on the main board 70 of the image processing unit 58 starts processing in the face detection tracking mode. To do. Further, when this face detection / tracking mode is selected, the AF frame range is automatically set in accordance with the face of the person. Therefore, on the screen 40a of the LCD 40, as shown in FIG. 8, the AF frame size shown in FIG. The selection button 312 is not displayed.

図9は、顔検出追尾モードの処理手順を示したフローチャートであり、以下、顔検出追尾モードの処理をこのフローチャートに従って説明する。   FIG. 9 is a flowchart showing the processing procedure in the face detection tracking mode. Hereinafter, the processing in the face detection tracking mode will be described with reference to this flowchart.

メインボード70のCPU78は、顔検出追尾モードが選択されると、まず、追尾対象の顔を設定するための処理(AF枠の初期設定処理)を行う。即ち、CPU78は、顔認識処理演算ボード74のCPU92に対して顔検出処理の開始を指示する。これにより、まず、顔認識処理演算ボード74のCPU92は、デコーダ76から1コマ分の撮影画像の画像データを取り込む(ステップS30)。続いて、その撮影画像の中に含まれる任意の人物の顔(顔画像)を検出する周知の顔検出処理を行う(ステップS32)。そして、検出した顔画像の範囲をメインボード70のCPU78に通知する。尚、撮影画像内に複数の人物の顔画像が含まれる場合にはそれらの複数の顔画像の範囲を検出し、CPU78に通知する。   When the face detection tracking mode is selected, the CPU 78 of the main board 70 first performs processing for setting a tracking target face (AF frame initial setting processing). That is, the CPU 78 instructs the CPU 92 of the face recognition processing calculation board 74 to start face detection processing. Thereby, first, the CPU 92 of the face recognition processing calculation board 74 takes in the image data of the photographed image for one frame from the decoder 76 (step S30). Subsequently, a known face detection process for detecting a face (face image) of an arbitrary person included in the captured image is performed (step S32). Then, the CPU 78 of the main board 70 is notified of the detected face image range. When a plurality of human face images are included in the captured image, the range of the plurality of face images is detected and notified to the CPU 78.

CPU78は、図8に示すように、検出された顔画像の範囲を顔枠204a、204b、204cとしてLCD40の画面40aに表示させる。そして、操作者が、それらの顔枠204a、204b、204cにより示された人物の顔のうち、追尾対象(AFの対象)とする顔をタップ操作によって選択(指定)すると、CPU78はその選択された顔を追尾対象とし、その追尾対象とした顔の顔枠をAF枠として設定する(ステップS34)。   As shown in FIG. 8, the CPU 78 displays the detected face image range on the screen 40a of the LCD 40 as face frames 204a, 204b, 204c. When the operator selects (specifies) a face to be tracked (AF target) among the faces of the person indicated by the face frames 204a, 204b, and 204c by the tap operation, the CPU 78 selects the face. The face to be tracked is set as the tracking target, and the face frame of the face as the tracking target is set as the AF frame (step S34).

尚、AF枠が設定される前の顔枠とAF枠とは異なる色で表示するようにし、例えば、顔枠を緑色、AF枠を赤色で表示するようにしてもよい。また、CPU78は操作者が選択した顔枠をAF枠として設定した場合には、LCD40の画面40aでの顔枠の表示をオフする。更に、顔枠が1つの場合には操作者が追尾対象を選択する操作を行うことなく自動的にその顔枠をAF枠として設定するようにしてもよい。   The face frame before the AF frame is set and the AF frame may be displayed in different colors. For example, the face frame may be displayed in green and the AF frame may be displayed in red. Further, when the face frame selected by the operator is set as the AF frame, the CPU 78 turns off the display of the face frame on the screen 40a of the LCD 40. Furthermore, when there is one face frame, the face frame may be automatically set as an AF frame without the operator performing an operation of selecting a tracking target.

以上の追尾対象の顔を設定する処理(AF枠の初期設定処理)によりAF枠を設定した後、操作者が、AF枠自動追尾の開始を指示する操作を行うと、CPU78(及び顔認識処理演算ボード74のCPU92)は顔検出処理によるAF枠自動追尾の処理(ステップS38〜S46)を開始すると共に、このAF枠自動追尾の処理で決定されるAF枠の範囲をレンズ装置12のレンズCPUに指定する処理(AF枠情報の送信)を開始する(ステップS36)。   After the AF frame is set by the above process of setting the face to be tracked (AF frame initial setting process), when the operator performs an operation to instruct the start of AF frame automatic tracking, the CPU 78 (and the face recognition process). The CPU 92 of the calculation board 74 starts the AF frame automatic tracking process (steps S38 to S46) by the face detection process, and sets the AF frame range determined by the AF frame automatic tracking process to the lens CPU of the lens device 12. To start (transmission of AF frame information) is started (step S36).

ここで、AF枠自動追尾の開始の指示は、物体追尾モードの場合と同様にセットボタン308のタップ操作や、AF枠の位置のダブルタップ操作等によって行うことができる。また、ステップS34において、追尾対象の顔とする顔枠を選択する際に(AF枠を設定する際に)、選択する顔枠をタップ操作する代わりにダブルタップ操作することによって、その顔枠をAF枠として設定すると同時にAF枠自動追尾の開始を指示することができる。ただし、任意の位置でのダブルタップ操作を単にAF枠自動追尾の開始を指示する操作とする態様も可能であり、その場合にはAF枠の設定とは無関係に任意の位置でダブルタップ操作を行ってAF枠自動追尾の開始を指示するものとなる。また、ステップS34においてAF枠を設定した際に、自動的にAF枠自動追尾の処理を開始するようにしてもよい。尚、物体追尾モードと同様にAF枠自動追尾の開始する際にAFによるフォーカス制御が行われていない場合(AFモードとなっていない場合)には、AF枠自動追尾の開始と連動してAFの開始も指示される。   Here, an instruction to start AF frame automatic tracking can be performed by a tap operation of the set button 308, a double tap operation of the position of the AF frame, or the like, as in the object tracking mode. In step S34, when selecting a face frame as a face to be tracked (when setting an AF frame), the face frame is selected by performing a double tap operation instead of a tap operation on the face frame to be selected. Simultaneously with setting as an AF frame, it is possible to instruct the start of AF frame automatic tracking. However, a mode is also possible in which the double tap operation at an arbitrary position is simply an operation for instructing the start of AF frame automatic tracking. In this case, the double tap operation is performed at an arbitrary position regardless of the setting of the AF frame. This is to instruct the start of AF frame automatic tracking. Further, when the AF frame is set in step S34, the AF frame automatic tracking process may be automatically started. As in the object tracking mode, when focus control by AF is not performed when AF frame automatic tracking is started (when AF mode is not set), AF is performed in conjunction with the start of AF frame automatic tracking. The start of is also instructed.

AF枠自動追尾の処理を開始すると、顔認識処理演算ボード74のCPU92は、ステップS30及びステップS32の処理と同様にCPU78からの顔検出処理の実行の指示によりデコーダ76から1コマ分の撮影画像の画像データを取り込み(ステップS38)、その撮影画像の中に含まれる任意の人物の顔を検出する顔検出処理を行う(ステップS40)。そして、検出した顔画像の範囲をメインボード70のCPU78に通知する。   When the AF frame automatic tracking process is started, the CPU 92 of the face recognition processing calculation board 74 captures one frame from the decoder 76 in accordance with an instruction to execute the face detection process from the CPU 78 in the same manner as the processes in steps S30 and S32. Is detected (step S38), and face detection processing for detecting the face of an arbitrary person included in the captured image is performed (step S40). Then, the CPU 78 of the main board 70 is notified of the detected face image range.

CPU78は、検出された顔画像の範囲のうち、現在設定されているAF枠の範囲に最も近接したものを追尾対象の顔画像の範囲として検出する(ステップS42)。尚、ステップS40において、顔を検出する範囲を撮影画像全体の範囲ではなく、現在設定されているAF枠の位置の周辺部分に制限してもよい。   The CPU 78 detects the face image range closest to the currently set AF frame range as the tracking target face image range among the detected face image ranges (step S42). In step S40, the face detection range may be limited to the peripheral portion of the currently set AF frame position instead of the entire captured image range.

続いてCPU78は、追尾対象の顔が移動したか否か、即ち、検出した顔画像の範囲が、現在設定されているAF枠の範囲と相違しているか否かを判定する(ステップS44)。尚、顔画像の大きさが変化した場合もこの判定処理でYESと判定される。   Subsequently, the CPU 78 determines whether or not the tracking target face has moved, that is, whether or not the detected face image range is different from the currently set AF frame range (step S44). In addition, when the size of the face image is changed, it is determined YES in this determination process.

ステップS44においてYESと判定した場合には、ステップS42において検出した顔画像の範囲を新たなAF枠の範囲として設定(更新)、そのAF枠の範囲を示すAF枠情報をレンズ装置12のレンズCPUに送信する(ステップS46)。そして、ステップS38の処理に戻る。ステップS44においてNOと判定した場合には、ステップS46におけるAF枠の更新は行わず、ステップS38の処理に戻る。   If YES is determined in step S44, the face image range detected in step S42 is set (updated) as a new AF frame range, and AF frame information indicating the AF frame range is set to the lens CPU of the lens device 12. (Step S46). Then, the process returns to step S38. If NO is determined in step S44, the AF frame is not updated in step S46, and the process returns to step S38.

尚、操作者によりAF枠自動追尾の停止を指示する操作、例えば、LDC40の画面40aに表示されたリセットボタン310のタップ操作が行われると、AF枠自動追尾の処理を停止し、ステップS30に戻る。また、このとき、AFによるフォーカス制御も停止させるようにしてもよい。AF枠自動追尾の処理を本フローチャートの処理が終了する。   If the operator instructs to stop the AF frame automatic tracking, for example, the tap operation of the reset button 310 displayed on the screen 40a of the LDC 40 is performed, the AF frame automatic tracking process is stopped, and the process goes to step S30. Return. At this time, focus control by AF may be stopped. The process of this flowchart ends the AF frame automatic tracking process.

また、ステップS40の顔検出処理において撮影画像の中に顔画像が全く検出されなかった場合や、ステップS42の追尾対象の顔画像の検出において、現在設定されているAF枠の範囲に対して最も近接した顔画像の範囲が、明らかに現在のAF枠の範囲との連続性がない場合(離れ過ぎる場合等)には追尾不能として上記と同様にAF枠自動追尾の処理を停止してステップS30に戻る。   Further, when no face image is detected in the photographed image in the face detection process in step S40, or in the detection of the tracking target face image in step S42, the most current AF frame range is set. If the close face image range is clearly not continuous with the current AF frame range (when it is too far away, etc.), tracking is impossible and the AF frame automatic tracking process is stopped in the same manner as described above, and step S30 is performed. Return to.

顔認識追尾モードは、AF枠の自動追尾を行う1つのモードであり、事前に認証データとして登録した人物の顔をAF枠で追尾させるモードである。この顔認識追尾モードは、撮影する人物が事前に決まっている歌謡番組やスポーツ中継などでの撮影に有益なモードである。   The face recognition tracking mode is one mode for automatically tracking the AF frame, and is a mode for tracking the face of a person registered in advance as authentication data using the AF frame. This face recognition tracking mode is a mode useful for shooting in a song program or a sports broadcast in which a person to be shot is determined in advance.

図5のLCD40の画面40aにおいて顔認識追尾モード選択ボタン306をタップ操作すると顔認識追尾モードが選択され、画像処理ユニット58のメインボード70に搭載されたCPU78は、顔認識追尾モードの処理を開始する。また、顔認識追尾モードが選択された場合、AF枠の範囲が人物の顔に合わせて自動的に設定されるため、LCD40の画面40aでは、図10に示すように図5のAF枠サイズ選択ボタン312が非表示となり、これに代わって、後述のように顔認識に関連する登録顔画像表示部316(316a〜316c)や選択ボタン318a、318b、編集ボタン320が表示される。また、AF枠自動追尾の開始は、後述のように認証データとして登録した顔を検出すると自動的に行われるための図5のセットボタン308も非表示となる。   When the face recognition tracking mode selection button 306 is tapped on the screen 40a of the LCD 40 in FIG. 5, the face recognition tracking mode is selected, and the CPU 78 mounted on the main board 70 of the image processing unit 58 starts processing in the face recognition tracking mode. To do. Further, when the face recognition tracking mode is selected, the AF frame range is automatically set in accordance with the face of the person, so the screen 40a of the LCD 40 displays the AF frame size selection of FIG. 5 as shown in FIG. The button 312 is not displayed, and instead, a registered face image display unit 316 (316a to 316c), selection buttons 318a and 318b, and an edit button 320 related to face recognition are displayed as described later. Also, the AF frame automatic tracking is automatically hidden when a face registered as authentication data is detected as described later, and the set button 308 in FIG. 5 is also hidden.

図11は、顔認識追尾モードの処理手順を示したフローチャートであり、以下、顔認識追尾モードの処理をこのフローチャートに従って説明する。   FIG. 11 is a flowchart showing a processing procedure in the face recognition tracking mode. Hereinafter, the processing in the face recognition tracking mode will be described with reference to this flowchart.

メインボード70のCPU78は、顔認識追尾モードが選択されると、まず、追尾対象の顔を設定するための処理(AF枠の初期設定処理)を行う。即ち、図2に示したスロット115に装填されたデータカード114には、追尾対象の候補となる1又は複数の人物の顔の認証データが登録されており、CPU78は、その認証データをデータカード114から読み込む。そして、顔認識処理演算ボード74のCPU92に対して顔認識処理の開始を指示する。ここで認証データは、例えば、一人について、日の当たり方の違う顔や正面や左あるいは右向きの顔などの異なる顔画像、両目の距離、目と鼻の距離やこれらの比率などの複数のデータから構成されている。   When the face recognition tracking mode is selected, the CPU 78 of the main board 70 first performs processing for setting a tracking target face (AF frame initial setting processing). That is, the authentication data of the face of one or more persons who are candidates for tracking is registered in the data card 114 loaded in the slot 115 shown in FIG. 2, and the CPU 78 stores the authentication data in the data card. Read from 114. Then, it instructs the CPU 92 of the face recognition processing calculation board 74 to start face recognition processing. Here, the authentication data is, for example, a plurality of data such as a different face image such as a face with different sunlight, a front face, a face facing left or right, a distance between both eyes, a distance between eyes and nose, and a ratio thereof. It is composed of

顔認識処理の開始が指示されると、顔認識処理演算ボード74のCPU92は、デコーダ76から1コマ分の撮影画像の画像データを取り込み(ステップS50)、その撮影画像の中に含まれる任意の顔(顔画像)を顔検出追尾モードと同様の顔検出処理により検出する。続いて、メインボード70のCPU78から認証データを取得し、顔検出処理により検出した顔画像が認証データとして事前に登録されている特定人物の顔画像であるか否かをその認証データを用いて判断する顔認識処理を実行する(ステップS52)。尚、この顔認識追尾モードにおいて行われる顔検出処理は顔認識処理の一部であるものとし、後述のステップS62の顔認識処理においても顔検出処理によって任意の顔画像を検出した後、認証データの顔との照合が行われる。   When the start of the face recognition processing is instructed, the CPU 92 of the face recognition processing calculation board 74 takes in the image data of the photographed image for one frame from the decoder 76 (step S50), and any arbitrary image included in the photographed image. A face (face image) is detected by face detection processing similar to the face detection tracking mode. Subsequently, authentication data is acquired from the CPU 78 of the main board 70, and whether or not the face image detected by the face detection process is a face image of a specific person registered in advance as authentication data is used. The face recognition process to be determined is executed (step S52). Note that the face detection process performed in the face recognition tracking mode is a part of the face recognition process, and in the face recognition process in step S62 described later, after detecting an arbitrary face image by the face detection process, the authentication data The face is matched.

顔認識処理が終了すると、CPU92はその結果をメインボード70のCPU78に通知する。これにより、CPU78は、認証データとして登録されている特定人物の顔が検出された場合のその顔画像の範囲と、認証データとして登録されていない人物の顔が検出された場合のその顔画像の範囲とを取得する。   When the face recognition process ends, the CPU 92 notifies the CPU 78 of the main board 70 of the result. Thereby, the CPU 78 detects the range of the face image when a face of a specific person registered as authentication data is detected, and the face image when a face of a person not registered as authentication data is detected. Get range and.

次にCPU78は、図10に示すように、LCD40の画面40a上において人物の顔が検出された顔画像の範囲に顔枠204a、204b、204cを表示する。ステップS52の顔認識処理により認証データとして登録されている人物の顔が検出された場合にはその顔枠に人物の名前も表示する。更に、上述のように認証データとして登録されている人物の顔画像を登録顔画像表示部316(316a〜316c)に表示する。   Next, as shown in FIG. 10, the CPU 78 displays face frames 204 a, 204 b, and 204 c in the range of face images in which a human face is detected on the screen 40 a of the LCD 40. When the face of a person registered as authentication data is detected by the face recognition process in step S52, the name of the person is also displayed in the face frame. Further, the face image of the person registered as the authentication data as described above is displayed on the registered face image display unit 316 (316a to 316c).

ここで、認証データとして登録されている顔の数に応じて登録顔画像表示部316に表示する顔画像の数も変更される。   Here, the number of face images displayed on the registered face image display unit 316 is also changed according to the number of faces registered as authentication data.

操作者は、登録顔画像表示部316に表示されている顔画像の中から、追尾対象とする顔画像を、選択ボタン318a又は318bをタップ操作して選択する。上側の選択ボタン318aをタップ操作する毎に、選択される顔画像が、現在選択されている顔画像の1つ上側の顔画像に変更され、下側の選択ボタン318bをタップ操作する毎に、選択される顔画像が、現在選択されている顔画像の1つ下側の顔画像に変更される。尚、登録顔画像表示部316において現在選択されている顔画像は他の顔画像より拡大表示される(316b参照)。   The operator selects a face image to be tracked from the face images displayed on the registered face image display unit 316 by tapping the selection button 318a or 318b. Each time the upper selection button 318a is tapped, the selected face image is changed to a face image one level higher than the currently selected face image, and every time the lower selection button 318b is tapped, The selected face image is changed to a face image one level lower than the currently selected face image. Note that the face image currently selected in the registered face image display unit 316 is displayed in an enlarged manner than the other face images (see 316b).

このようにして認証データとして登録されている顔の中から操作者が追尾対象とする顔を選択すると、CPU78はその選択された顔を追尾対象の顔として設定する(ステップS54)。   When the operator selects a face to be tracked from the faces registered as authentication data in this way, the CPU 78 sets the selected face as the face to be tracked (step S54).

尚、編集ボタン320をタップ操作すると、登録顔画像表示部316において表示する顔画像の順序を編集することができるようになっている。これによって、例えば、認証データとして登録した複数人物の顔を予め決められた順序で追尾対象として設定する場合に、その順序に従って登録顔画像表示部316において表示する顔画像の順序を設定しておけば、選択ボタン318a又は318bを1回ずつタップ操作することに予め決められた順序で追尾対象の顔を切り替えることができるようになっている。   When the edit button 320 is tapped, the order of face images displayed on the registered face image display unit 316 can be edited. Thus, for example, when the faces of a plurality of persons registered as authentication data are set as tracking targets in a predetermined order, the order of the face images displayed on the registered face image display unit 316 can be set according to the order. For example, the face to be tracked can be switched in a predetermined order by tapping the selection button 318a or 318b once.

以上のようにして追尾対象の顔を設定すると、続いて、CPU78は、その追尾対象の顔がステップS52において検出されているか否かを判定する(ステップS56)。NOと判定した場合にはステップS50の処理に戻り、上述の処理を繰り返す。即ち、追尾対処の顔がステップS52の顔認識処理によって撮影画像内で検出されるまで、ステップS50〜ステップS56の処理を繰り返す。   When the tracking target face is set as described above, the CPU 78 subsequently determines whether or not the tracking target face is detected in step S52 (step S56). When it determines with NO, it returns to the process of step S50 and repeats the above-mentioned process. That is, the processes in steps S50 to S56 are repeated until a face to be tracked is detected in the captured image by the face recognition process in step S52.

一方、ステップS56においてYESと判定した場合には、即ち、撮影画像内に追尾対象の顔が検出された場合にはその顔画像の範囲をAF枠の範囲として設定する(AF枠の初期設定処理)。そして、CPU78(及び顔認識処理演算ボード74のCPU92)は顔認識処理によるAF枠自動追尾の処理(ステップS60〜S66)を開始すると共に、このAF枠自動追尾の処理で決定されるAF枠の範囲をレンズ装置12のレンズCPUに指定する処理(AF枠情報の送信)を開始する(ステップS58)。   On the other hand, if YES is determined in step S56, that is, if a tracking target face is detected in the captured image, the face image range is set as the AF frame range (AF frame initial setting process). ). Then, the CPU 78 (and the CPU 92 of the face recognition processing calculation board 74) starts the AF frame automatic tracking processing (steps S60 to S66) by the face recognition processing, and the AF frame determined by this AF frame automatic tracking processing. Processing for designating the range to the lens CPU of the lens device 12 (transmission of AF frame information) is started (step S58).

尚、物体追尾モードや顔検出追尾モードと同様にAF枠自動追尾の開始する際にAFによるフォーカス制御が行われていない場合(AFモードとなっていない場合)には、AF枠自動追尾の開始と連動してAFの開始も指示される。   As in the object tracking mode and face detection tracking mode, when AF control is not performed when AF frame automatic tracking is started (when AF mode is not set), AF frame automatic tracking starts. In response to this, the start of AF is also instructed.

AF枠自動追尾の処理を開始すると、顔認識処理演算ボード74のCPU92は、CPU78からの顔認識処理の実行の指示によりデコーダ76から1コマ分の撮影画像の画像データを取り込む(ステップS60)。また、ステップS54で選択された追尾対象の顔の認証データをCPU78から取得する。そして、ステップS52と同様の顔認識処理によって、追尾対象の顔の認証データを用いて撮影画像の中から追尾対象の顔を検出し、その顔画像の範囲をCPU78に通知する(ステップS62)。   When the AF frame automatic tracking process is started, the CPU 92 of the face recognition processing calculation board 74 takes in image data of one frame of the captured image from the decoder 76 in accordance with an instruction to execute the face recognition process from the CPU 78 (step S60). Also, the authentication data of the tracking target face selected in step S54 is acquired from the CPU 78. Then, by the face recognition process similar to step S52, the tracking target face is detected from the captured image using the tracking target face authentication data, and the range of the face image is notified to the CPU 78 (step S62).

続いてCPU78は、追尾対象の顔が移動したか否か、即ち、検出した顔画像の範囲が、現在設定されているAF枠の範囲と相違しているか否かを判定する(ステップS64)。尚、顔画像の大きさが変化した場合もこの判定処理でYESと判定される。   Subsequently, the CPU 78 determines whether or not the tracking target face has moved, that is, whether or not the detected face image range is different from the currently set AF frame range (step S64). In addition, when the size of the face image is changed, it is determined YES in this determination process.

ステップS64においてYESと判定した場合には、ステップS62において検出した顔画像の範囲を新たなAF枠の範囲として設定(更新)し、そのAF枠の範囲を示すAF枠情報をレンズ装置12のレンズCPUに送信する(ステップS66)。そして、ステップS60の処理に戻る。ステップS64においてNOと判定した場合には、ステップS66におけるAF枠の更新は行わず、ステップS60の処理に戻る。   If YES is determined in step S64, the face image range detected in step S62 is set (updated) as a new AF frame range, and AF frame information indicating the AF frame range is set in the lens of the lens device 12. It transmits to CPU (step S66). Then, the process returns to step S60. If NO is determined in step S64, the AF frame is not updated in step S66, and the process returns to step S60.

尚、操作者によりAF枠自動追尾の停止を指示する操作、例えば、LDC40の画面40aに表示されたリセットボタン310のタップ操作が行われると、AF枠自動追尾の処理を停止し、ステップS50に戻る。このとき、追尾対処の顔はいずれにも設定されていない状態とする。また、AF枠自動追尾の停止と共に、AFによるフォーカス制御も停止させるようにしてもよい。   If the operator instructs to stop the AF frame automatic tracking, for example, if the tap operation of the reset button 310 displayed on the screen 40a of the LDC 40 is performed, the AF frame automatic tracking process is stopped, and the process goes to step S50. Return. At this time, it is assumed that no tracking face is set. Further, the focus control by AF may be stopped together with the stop of the AF frame automatic tracking.

また、AF枠自動追尾の処理中に、操作者が追尾対象の顔として上記選択ボタン318a、318bによって現在と異なる顔に変更した場合には、変更された新たな顔を追尾対象の顔として設定すると共に、AF枠自動追尾の処理を停止してステップS50に戻る。   In addition, if the operator changes the face to be tracked to a face different from the current face by using the selection buttons 318a and 318b during the AF frame automatic tracking process, the changed new face is set as the face to be tracked. At the same time, the AF frame automatic tracking process is stopped and the process returns to step S50.

更に、追尾対象の顔として設定されている人物が撮影範囲外に移動した場合のように、ステップS62の顔認識処理において撮影画像の中に追尾対象の顔が検出されなくなった場合には、追尾不能と判断してAF枠自動追尾の処理を自動で停止し、ステップS50に戻る。   Further, when the face set as the tracking target face moves out of the shooting range and the face to be tracked is not detected in the captured image in the face recognition processing in step S62, the tracking is performed. The AF frame automatic tracking process is automatically stopped after determining that it is impossible, and the process returns to step S50.

以上、上記実施の形態では、AF枠自動追尾の制御モードとして物体追尾モード、顔検出追尾モード、顔認識追尾モードの3つのモードの中から所望のモードを選択できるようにしたが、いずれか2つのモードのみを選択できるようにしてもよい。   As described above, in the above-described embodiment, a desired mode can be selected from the three modes of the object tracking mode, the face detection tracking mode, and the face recognition tracking mode as the AF frame automatic tracking control mode. Only one mode may be selected.

図1は、本発明が適用されるテレビカメラシステムの一実施の形態を示した外観図である。FIG. 1 is an external view showing an embodiment of a television camera system to which the present invention is applied. 図2は、図1のテレビカメラシステムに適用されるAF枠自動追尾システムの全体構成を示したブロック図である。FIG. 2 is a block diagram showing an overall configuration of an AF frame automatic tracking system applied to the television camera system of FIG. 図3は、AF枠(AFエリア)の説明図である。FIG. 3 is an explanatory diagram of an AF frame (AF area). 図4は、フォーカスデマンドの外観図である。FIG. 4 is an external view of the focus demand. 図5は、タッチパネル付き液晶ディスプレイに表示される画面の一例を示した図である。FIG. 5 is a diagram illustrating an example of a screen displayed on a liquid crystal display with a touch panel. 図6は、タッチパネル付き液晶ディスプレイに表示されるメニュー画面の表示をオフした場合を示した図である。FIG. 6 is a diagram showing a case where the menu screen displayed on the liquid crystal display with a touch panel is turned off. 図7は、物体追尾モードの処理手順を示したフローチャートである。FIG. 7 is a flowchart showing a processing procedure in the object tracking mode. 図8は、顔検出追尾モードにおいてタッチパネル付き液晶ディスプレイに表示される画面の一例を示した図である。FIG. 8 is a diagram illustrating an example of a screen displayed on the liquid crystal display with a touch panel in the face detection tracking mode. 図9は、顔検出追尾モードの処理手順を示したフローチャートである。FIG. 9 is a flowchart showing a processing procedure in the face detection tracking mode. 図10は、顔認識モードにおいてタッチパネル付き液晶ディスプレイに表示される画面の一例を示した図である。FIG. 10 is a diagram showing an example of a screen displayed on the liquid crystal display with a touch panel in the face recognition mode. 図11は、顔認識モードの処理手順を示したフローチャートである。FIG. 11 is a flowchart showing a processing procedure in the face recognition mode.

符号の説明Explanation of symbols

1…AF枠自動追尾システム、10…テレビカメラ、12…レンズ装置、14…カメラ本体、26…フォーカスデマンド、36…ビューファインダ、40…タッチパネル付き液晶ディスプレイ(LCD)、50…フォーカス操作部、58…画像処理ユニット、60…AF枠操作部、66…AFユニット、68…ダウンコンバータ、70…メインボード、72…パターンマッチング処理演算ボード、74…顔認識処理演算ボード、76…デコーダ、78、90、92…CPU、82…スーパーインポーザ、114…データカード、115…スロット、200…AFエリア、204…AF枠、300…固定モード選択ボタン、302…物体追尾モード選択ボタン、304…顔検出追尾モード選択ボタン、306…顔認識追尾モード選択ボタン、308…セットボタン、310…リセットボタン、312…AF枠サイズ選択ボタン、312a…小ボタン、312b…中ボタン、312c…大ボタン、314…メニュー表示オン/オフボタン、316…登録顔画像表示部、318a、318b…選択ボタン、320…編集ボタン   DESCRIPTION OF SYMBOLS 1 ... AF frame automatic tracking system, 10 ... Television camera, 12 ... Lens apparatus, 14 ... Camera body, 26 ... Focus demand, 36 ... Viewfinder, 40 ... Liquid crystal display (LCD) with a touch panel, 50 ... Focus operation part, 58 ... Image processing unit, 60 ... AF frame operation unit, 66 ... AF unit, 68 ... Down converter, 70 ... Main board, 72 ... Pattern matching processing calculation board, 74 ... Face recognition processing calculation board, 76 ... Decoder, 78, 90 , 92 ... CPU, 82 ... Superimposer, 114 ... Data card, 115 ... Slot, 200 ... AF area, 204 ... AF frame, 300 ... Fixed mode selection button, 302 ... Object tracking mode selection button, 304 ... Face detection tracking Mode selection button, 306 .. Face recognition tracking mode selection button, 3 8 ... Set button, 310 ... Reset button, 312 ... AF frame size selection button, 312a ... Small button, 312b ... Middle button, 312c ... Large button, 314 ... Menu display on / off button, 316 ... Registered face image display section, 318a, 318b ... select button, 320 ... edit button

Claims (3)

光学系により結像された被写体像を撮像する撮像手段と、前記撮像手段により撮像された撮影画像のうち、所定のAF枠の範囲の被写体にピントが合うように前記光学系のフォーカス調整を行うオートフォーカス手段と、AF枠に関する制御を行うAF枠制御手段と、を備えたオートフォーカスシステムにおいて、
画像表示画面に前記撮像手段により撮像された撮影画像を表示すると共に、該撮影画像に重畳させて現在設定されているAF枠の範囲を表示する表示手段と、
前記表示手段の画像表示画面に対する操作者のタッチ操作を検出するタッチ操作検出手段と、
前記表示手段の画像表示画面に対するタッチ操作によりAF枠の制御に関する指示を行うためのメニュー画像を前記撮影画像に重畳させて前記表示手段の画像表示画面に表示させるメニュー表示手段と、
を備え、
前記表示手段の画像表示画面に前記メニュー表示手段によるメニュー画像の表示をマニュアル操作でオン/オフするためのメニュー表示オン/オフ手段、及び/又は、メニュー画像の表示が不要と判断される所定の条件を満たすと自動的に前記メニュー表示手段によるメニュー画像の表示をオフするメニュー表示オフ手段を備えたことを特徴とするオートフォーカスシステム。
An imaging unit that captures a subject image formed by the optical system, and a focus adjustment of the optical system is performed so that a subject within a predetermined AF frame is in focus among the captured images captured by the imaging unit. In an autofocus system comprising autofocus means and AF frame control means for controlling the AF frame,
Display means for displaying a captured image captured by the imaging means on an image display screen, and displaying a currently set AF frame range superimposed on the captured image;
Touch operation detecting means for detecting an operator's touch operation on the image display screen of the display means;
Menu display means for superimposing a menu image for performing an instruction on AF frame control by a touch operation on the image display screen of the display means on the image display screen of the display means so as to be superimposed on the captured image;
With
Menu display on / off means for manually turning on / off the display of the menu image by the menu display means on the image display screen of the display means, and / or a predetermined determination that the display of the menu image is unnecessary An autofocus system comprising a menu display off means for automatically turning off the menu image display by the menu display means when a condition is satisfied.
前記メニュー表示オン/オフ手段は、前記表示手段の画像表示画面にメニュー表示オン/オフボタンを表示させ、メニュー表示オン/オフボタンがタップ操作されたことが前記タッチ操作検出手段により検出されると、前記メニュー画像の表示のオン/オフを切り替えることを特徴とする請求項1のオートフォーカスシステム。   The menu display on / off means displays a menu display on / off button on the image display screen of the display means, and when the touch operation detecting means detects that the menu display on / off button has been tapped. 2. The autofocus system according to claim 1, wherein display of the menu image is switched on / off. 前記メニュー表示オフ手段は、前記表示手段の画像表示画面に前記メニュー画像が表示された状態で、前記タッチ操作検出手段により検出されるタッチ操作が一定時間行われていないことを前記所定の条件とすることを特徴とする請求項1又は2のオートフォーカスシステム。   The menu display off means has the predetermined condition that the touch operation detected by the touch operation detection means is not performed for a predetermined time in a state where the menu image is displayed on the image display screen of the display means. The autofocus system according to claim 1 or 2, characterized in that:
JP2008294516A 2008-11-18 2008-11-18 Auto focus system Pending JP2010122366A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008294516A JP2010122366A (en) 2008-11-18 2008-11-18 Auto focus system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008294516A JP2010122366A (en) 2008-11-18 2008-11-18 Auto focus system

Publications (1)

Publication Number Publication Date
JP2010122366A true JP2010122366A (en) 2010-06-03

Family

ID=42323778

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008294516A Pending JP2010122366A (en) 2008-11-18 2008-11-18 Auto focus system

Country Status (1)

Country Link
JP (1) JP2010122366A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101817650B1 (en) * 2010-09-08 2018-01-11 삼성전자주식회사 Focusing Appratus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101817650B1 (en) * 2010-09-08 2018-01-11 삼성전자주식회사 Focusing Appratus

Similar Documents

Publication Publication Date Title
JP5473551B2 (en) Auto focus system
JP2010124120A (en) Autofocus system
JP2011027847A (en) Af frame automatic tracking system
JP2005215040A (en) Autofocus system
WO2012099175A1 (en) Auto focus system
JP2010096962A (en) Auto focus system with af frame auto-tracking function
JP5455361B2 (en) Auto focus system
EP2187623A1 (en) Autofocus system
JP5384172B2 (en) Auto focus system
JP2006058431A (en) Autofocusing system
JP5081133B2 (en) Auto focus system
JP2010085530A (en) Autofocus system
JP5328616B2 (en) AF frame automatic tracking system
JP2011022203A (en) Af frame automatic follow-up system and method for automatically following up af frame
JP2010230871A (en) Auto focus system
JP5276538B2 (en) AF frame automatic tracking system
JP2010164637A (en) Af frame automatic tracking system
WO2012099174A1 (en) Autofocus system
JP2018037807A (en) Imaging apparatus, control method, program, and storage medium
JP2010224499A (en) Autofocus system
JP2010122366A (en) Auto focus system
JP2011022499A (en) Autofocus system
JP2010122367A (en) Autofocus system
JP2010122365A (en) Af frame automatic tracking system
JP2010096963A (en) Auto focus system with af frame auto-tracking function

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20100618