JP5434096B2 - Digital camera - Google Patents

Digital camera Download PDF

Info

Publication number
JP5434096B2
JP5434096B2 JP2009015859A JP2009015859A JP5434096B2 JP 5434096 B2 JP5434096 B2 JP 5434096B2 JP 2009015859 A JP2009015859 A JP 2009015859A JP 2009015859 A JP2009015859 A JP 2009015859A JP 5434096 B2 JP5434096 B2 JP 5434096B2
Authority
JP
Japan
Prior art keywords
facial expression
subject
image
expression level
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009015859A
Other languages
Japanese (ja)
Other versions
JP2010177812A (en
Inventor
正永 中村
卓也 相原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2009015859A priority Critical patent/JP5434096B2/en
Publication of JP2010177812A publication Critical patent/JP2010177812A/en
Application granted granted Critical
Publication of JP5434096B2 publication Critical patent/JP5434096B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Description

本発明は、撮影された画像中の人物の顔表情を検出してその画像を表示するデジタルカメラおよび画像処理装置に関する。   The present invention relates to a digital camera and an image processing apparatus that detect a facial expression of a person in a captured image and display the image.

例えば、結婚披露宴などにおいて、デジタルカメラで多数の出席者を多数枚撮影して、後日、出席者にその撮影画像又はプリント写真を配布することが広く行われている。このような結婚披露宴の場合には、多数の撮影画像やプリント写真の中から新郎新婦やその両親の笑顔や泣き顔などが写っている画像又は写真を選んで配布すると、特に喜ばれるであろう。
このような画像又は写真の配布は、一般に画像が記録された記録媒体から画像をモニタに再生して、笑い顔や泣き顔などを視認して選択する。その後に、その選択した画像をそのまま、又はプリントして配布する。 For example, at a wedding reception, a large number of attendees are photographed with a digital camera, and the photographed images or printed photographs are distributed to attendees at a later date. In the case of such a wedding reception, it will be particularly pleased to select and distribute images or photos that show the smiles and crying faces of the bride and groom and their parents from among a large number of photographed images and printed photos.
Distribution of such an image or photograph is generally performed by reproducing an image from a recording medium on which the image is recorded on a monitor and visually selecting a laughing face or a crying face. Thereafter, the selected image is distributed as it is or printed.

しかしながら、多数の画像が記録された記録媒体から画像を読み出しそれをモニタに再生して笑顔や泣き顔などの特定の顔表情の画像を選択する作業は、極めて手間の掛かる面倒な作業である。
特に、複数の人物が種々の顔表情で写っている画像の中から、笑顔や泣き顔などの特定の顔表情を見つけ出すのは極めて面倒で根気を必要とする作業である。 However, the operation of reading out an image from a recording medium on which a large number of images are recorded and reproducing the image on a monitor to select an image of a specific facial expression such as a smile or a crying face is an extremely troublesome operation.
In particular, finding a specific facial expression such as a smiling face or a crying face from an image in which a plurality of persons are photographed with various facial expressions is an extremely troublesome and time-consuming operation.

請求項１の発明によるデジタルカメラは、被写体を撮影して被写体画像を生成する撮像手段と、前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、前記記録媒体から前記被写体画像を読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、を備え、前記顔表情検出手段は、前記被写体人物の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の顔表情レベルを評価し、前記表示制御手段は、前記顔表情検出手段により評価された前記顔表情レベルに基づいて前記所定の倍率を変更することを特徴とする。
請求項２の発明によるデジタルカメラは、被写体を撮影して被写体画像を生成する撮像手段と、前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、前記記録媒体から前記被写体画像を読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、を備え、前記被写体画像は複数の被写体人物の画像を含み、前記顔表情検出手段は、前記被写体人物の各々の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の各々の顔表情レベルを評価し、前記表示制御手段は、前記顔表情レベルが最も高く評価された前記被写体人物の顔画像を前記表示手段に拡大表示させることを特徴とする。
請求項３の発明によるデジタルカメラは、被写体を撮影して被写体画像を生成する撮像手段と、前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、前記記録媒体から前記被写体画像を読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、セレクタ部材と、を備え、前記被写体画像は複数の被写体人物の画像を含み、前記顔表情検出手段は、前記被写体人物の各々の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の各々の顔表情レベルを評価し、前記表示制御手段は、前記顔表情検出手段によって評価された顔表情レベルに基づいて決定される順序に従い、前記複数の被写体人物画像を前記表示手段に順次拡大表示させ、前記セレクタ部材は、前記複数の被写体人物画像の順次拡大表示を被写体人物毎に切り換えることを特徴とする。
請求項４の発明によるデジタルカメラは、被写体を撮影して被写体画像を生成する撮像手段と、前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、前記記録媒体から前記被写体画像を読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、所定の顔表情レベルを設定する優先度設定手段と、を備え、前記被写体画像は複数の被写体人物の画像を含み、前記顔表情検出手段は、前記被写体人物の各々の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の各々の顔表情レベルを評価し、前記表示制御手段は、前記優先度設定手段により設定された所定の顔表情レベルに該当する顔表情レベルの前記被写体人物について前記拡大表示を優先的に行うことを特徴とする。
請求項５の発明によるデジタルカメラは、被写体を撮影して被写体画像を生成する撮像手段と、前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、前記記録媒体から前記被写体画像を読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させる表示制御手段と、前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、を備え、前記顔表情検出手段は、前記被写体人物の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の顔表情レベルを評価し、前記表示制御手段は、前記顔表情検出手段により評価された前記顔表情レベルに基づいて前記所定の倍率を変更することを特徴とする。 According to a first aspect of the present invention, there is provided a digital camera that captures an image of a subject and generates a subject image, a recording unit that records the subject image captured by the imaging unit on a recording medium, and the subject image from the recording medium. , A facial expression detecting means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression, and the facial expression detecting means is a predetermined face When the facial expression is detected, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the display means is arranged so that the face area of the subject person is positioned at the center of the display screen during the enlarged display. display control means for controlling, facial expression level data storing means for storing a plurality of facial expression level indicating the degree of the facial expression stepwise as facial expression level data The facial expression detection means compares the facial image of the subject person with the facial expression level data of the facial expression level data storage means, evaluates the facial expression level of the subject person, and the display control means The predetermined magnification is changed based on the facial expression level evaluated by the facial expression detection means .
According to a second aspect of the present invention, there is provided a digital camera that captures an image of a subject and generates a subject image, a recording unit that records the subject image captured by the imaging unit on a recording medium, and the subject image from the recording medium. , A facial expression detecting means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression, and the facial expression detecting means is a predetermined face When the facial expression is detected, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the display means is arranged so that the face area of the subject person is positioned at the center of the display screen during the enlarged display. Display control means for controlling, and facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data The subject image includes images of a plurality of subject persons, and the facial expression detection means compares each facial image of the subject person with facial expression level data in the facial expression level data storage means, and The facial expression level of each of the subject persons is evaluated, and the display control means enlarges and displays the face image of the subject person evaluated with the highest facial expression level on the display means.
According to a third aspect of the present invention, there is provided a digital camera that captures an image of a subject and generates a subject image, a recording unit that records the subject image captured by the imaging unit on a recording medium, and the subject image from the recording medium. , A facial expression detecting means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression, and the facial expression detecting means is a predetermined face When the facial expression is detected, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the display means is arranged so that the face area of the subject person is positioned at the center of the display screen during the enlarged display. Display control means for controlling, and facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data And a selector member, wherein the subject image includes images of a plurality of subject persons, and the facial expression detection means uses each facial image of the subject person as facial expression level data in the facial expression level data storage means. In comparison, the facial expression level of each of the subject persons is evaluated, and the display control unit determines the plurality of subject person images according to an order determined based on the facial expression level evaluated by the facial expression detection unit. The display unit sequentially enlarges and displays, and the selector member switches the enlarged display of the plurality of subject person images sequentially for each subject person.
According to a fourth aspect of the present invention, there is provided a digital camera that captures an image of a subject to generate a subject image, a recording unit that records the subject image captured by the imaging unit on a recording medium, and the subject image from the recording medium. , A facial expression detecting means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression, and the facial expression detecting means is a predetermined face When the facial expression is detected, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the display means is arranged so that the face area of the subject person is positioned at the center of the display screen during the enlarged display. Display control means for controlling, and facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data Priority setting means for setting a predetermined facial expression level, wherein the subject image includes images of a plurality of subject persons, and the facial expression detection means assigns each facial image of the subject person to the facial expression. Compared with the facial expression level data in the level data storage means, the facial expression level of each of the subject persons is evaluated, and the display control means is a face corresponding to the predetermined facial expression level set by the priority setting means. The enlarged display is preferentially performed on the subject person at the expression level.
According to a fifth aspect of the present invention, there is provided a digital camera that captures an image of a subject and generates a subject image, a recording unit that records the subject image captured by the imaging unit on a recording medium, and the subject image from the recording medium. , A facial expression detecting means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression, and the facial expression detecting means is a predetermined face Display control means for enlarging and displaying the subject image on a display means at a predetermined magnification when a facial expression is detected, and a face for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data Facial expression level data storage means, wherein the facial expression detection means converts the facial image of the subject person into the facial expression level data of the facial expression level data storage means. And the display control means changes the predetermined magnification based on the facial expression level evaluated by the facial expression detection means. .

本発明のデジタルカメラによれば、記録媒体に記録された被写体画像を読み出し、その読み出した被写体画像から顔表情検出手段によって所定の顔表情を検出し、その被写体画像を拡大表示するので、極めて簡単に所望の顔表情の画像を得ることができると共に、その顔表情を簡単に視認することできる。   According to the digital camera of the present invention, the subject image recorded on the recording medium is read out, a predetermined facial expression is detected from the read subject image by the facial expression detection means, and the subject image is enlarged and displayed. In addition, an image of a desired facial expression can be obtained, and the facial expression can be easily visually recognized.

本発明の第１の実施の形態に係るデジタルカメラの構成を示すブロック図である。It is a block diagram which shows the structure of the digital camera which concerns on the 1st Embodiment of this invention. 第１の実施の形態によるデジタルカメラの液晶ディスプレイに表示されたオリジナルの被写体画像を模式的に示す図である。It is a figure which shows typically the original photographic subject image displayed on the liquid crystal display of the digital camera by 1st Embodiment. 第１の実施の形態によるデジタルカメラの液晶ディスプレイに表示された拡大画像を模式的に示す図である。It is a figure which shows typically the enlarged image displayed on the liquid crystal display of the digital camera by 1st Embodiment. 第１の実施の形態によるデジタルカメラの液晶ディスプレイに表示されたトリミング画像を模式的に示す図である。It is a figure which shows typically the trimming image displayed on the liquid crystal display of the digital camera by 1st Embodiment. 第２の実施の形態に係るデジタルカメラの構成を示すブロック図である。It is a block diagram which shows the structure of the digital camera which concerns on 2nd Embodiment.

以下、本発明の実施の形態によるデジタルカメラについて、図面を参照しながら説明する。
−第１の実施の形態−
図１は、本発明の第１の実施の形態によるデジタルカメラの構成を示すブロック図である。 Hereinafter, a digital camera according to an embodiment of the present invention will be described with reference to the drawings.
-First embodiment-
FIG. 1 is a block diagram showing a configuration of a digital camera according to the first embodiment of the present invention.

図１に示されるように、デジタルカメラは、撮影レンズ１１、絞り１２、撮像素子１３、バッファメモリ１４、画像処理部１５、画像記録部１６および制御部２０を備える。また、デジタルカメラは、顔検出部２１、顔データ記憶部２２、顔表情検出部２３、顔表情データ記憶部２４、顔表情設定部２５および顔表情レベルデータ記憶部２６を備える。さらに、デジタルカメラは、表示制御部２７、液晶ディスプレイ２８、画像読出し部３０およびトリミング部４０を備える。   As shown in FIG. 1, the digital camera includes a photographic lens 11, an aperture 12, an image sensor 13, a buffer memory 14, an image processing unit 15, an image recording unit 16, and a control unit 20. The digital camera also includes a face detection unit 21, a face data storage unit 22, a facial expression detection unit 23, a facial expression data storage unit 24, a facial expression setting unit 25, and a facial expression level data storage unit 26. Further, the digital camera includes a display control unit 27, a liquid crystal display 28, an image reading unit 30, and a trimming unit 40.

撮影レンズ１１は、ズームレンズやフォーカスレンズを含む複数のレンズで構成され、被写体像を撮像素子１３上に結像する。図１では簡単のため、撮影レンズ１１は１枚のレンズで示されている。撮像素子１３は、撮影レンズ１１からの被写体光Ｌ１を光電変換することにより画像信号を生成する。   The photographing lens 11 includes a plurality of lenses including a zoom lens and a focus lens, and forms a subject image on the image sensor 13. In FIG. 1, for the sake of simplicity, the taking lens 11 is shown as a single lens. The imaging element 13 generates an image signal by photoelectrically converting the subject light L1 from the photographing lens 11.

撮像素子１３から出力される画像信号は、バッファメモリ１４を介して画像処理部１５に送られ、ここで所定の種々の画像処理が施される。撮影開始前の段階では、撮像素子１３からの画像信号は、バッファメモリ１４、画像処理部１５および制御部２０を介して液晶ディスプレイ２８に送られ、スルー画像として表示される。撮影段階では、撮像素子１３からの画像信号は、バッファメモリ１４、画像処理部１５を介して送られて画像記録部１６にて記録される。
画像記録部１６は、画像情報とその画像に関する属性情報とを関連付けてメモリ１６ａに記録する。 The image signal output from the image pickup device 13 is sent to the image processing unit 15 via the buffer memory 14, where predetermined various image processing is performed. At the stage before the start of shooting, the image signal from the image sensor 13 is sent to the liquid crystal display 28 via the buffer memory 14, the image processing unit 15, and the control unit 20, and displayed as a through image. At the photographing stage, the image signal from the image sensor 13 is sent via the buffer memory 14 and the image processing unit 15 and recorded by the image recording unit 16.
The image recording unit 16 records the image information and attribute information related to the image in association with each other in the memory 16a.

顔検出部２１は、被写体画像を顔データ記憶部２２に予め記憶されている顔データと比較することにより、被写体画像中の被写体人物の顔を検出する。被写体人物が複数人いる場合は、全員の顔を個別に検出する。検出された顔領域の画像は、顔検出部２１から制御部２０へ送られる。顔データ記憶部２２は、例えば、眉、眼、鼻、唇の形状に関する特徴点のデータを記憶している。   The face detection unit 21 detects the face of the subject person in the subject image by comparing the subject image with the face data stored in advance in the face data storage unit 22. When there are a plurality of subject persons, all faces are detected individually. The detected face area image is sent from the face detection unit 21 to the control unit 20. The face data storage unit 22 stores, for example, feature point data relating to the shape of eyebrows, eyes, nose, and lips.

顔検出には、例えば、特開２００１−１６５７３号公報に開示されている検出手法を用いることができる。この検出手法は、入力画像中から特徴点を抽出して被写体の顔領域、顔の大きさ等を検出するものである。特徴点としては、眉、眼、鼻、唇の各端点、および顔の輪郭点、例えば頭頂点や顎の下端点が挙げられる。   For the face detection, for example, a detection method disclosed in Japanese Patent Laid-Open No. 2001-16573 can be used. In this detection method, feature points are extracted from an input image to detect the face area, face size, etc. of the subject. The feature points include end points of eyebrows, eyes, nose, lips, and face contour points, such as the head vertex and the lower end point of the chin.

他の顔検出としては、例えば、特開２００５−１５７６７９号公報に開示されている検出手法を用いることができる。この検出手法は、先ず、入力画像中の２画素間の輝度差を特徴量として学習しておき、その特徴量に基づいて入力画像中の所定領域に顔が存在するか否かを示す推定値を算出し、推定値が１以上のときにその所定領域に顔が存在すると判別するものである。   As other face detection, for example, a detection method disclosed in JP-A-2005-157679 can be used. In this detection method, first, a luminance difference between two pixels in an input image is learned as a feature amount, and an estimated value indicating whether or not a face exists in a predetermined region in the input image based on the feature amount. And when the estimated value is 1 or more, it is determined that a face exists in the predetermined area.

顔表情検出部２３は、顔検出部２１により検出された顔領域の画像を制御部２０を介して入力し、その顔領域の画像の顔表情を顔表情データ記憶部２４に予め記憶されている所定の顔表情データと比較することにより、顔領域の画像中の被写体人物の顔表情が所定の顔表情データに対応することを検出する。この顔表情検出は、一定の時間間隔毎に行われる。   The facial expression detection unit 23 inputs an image of the face area detected by the face detection unit 21 via the control unit 20, and the facial expression of the image of the facial area is stored in advance in the facial expression data storage unit 24. By comparing with the predetermined facial expression data, it is detected that the facial expression of the subject person in the face area image corresponds to the predetermined facial expression data. This facial expression detection is performed at regular time intervals.

顔表情には、笑顔、泣き顔、怒り顔、驚き顔、寝顔などの様々な種類があり、顔表情データ記憶部２４は、これらの複数の顔表情データを記憶している。
顔表情設定部２５は、被写体人物の複数の顔表情を外部から設定する操作部であり、以下の説明では、顔表情として笑顔を設定したものとして説明する。 There are various types of facial expressions such as a smiling face, a crying face, an angry face, a surprised face, and a sleeping face, and the facial expression data storage unit 24 stores the plurality of facial expression data.
The facial expression setting unit 25 is an operation unit that sets a plurality of facial expressions of the subject person from the outside. In the following description, it is assumed that a smile is set as the facial expression.

顔表情検出部２３が顔領域の画像の顔表情を検出する場合には、特開２００８−４２３１９号公報に開示されている検出手法を用いることができる。この検出手法は、例えば笑顔であることを検出するには、検出された画像の顔が笑顔と通常時の顔という２つの顔表情のいずれに近いかに基づいて表情の種類を判断するものである。
顔表情検出部２３は、被写体画像中の被写体人物の顔表情が笑顔であることを検出すると、検出信号を制御部２０に対して出力する。 When the facial expression detection unit 23 detects a facial expression of an image in the face area, a detection method disclosed in Japanese Patent Application Laid-Open No. 2008-42319 can be used. In this detection method, for example, in order to detect a smile, the type of facial expression is determined based on whether the face of the detected image is close to the two facial expressions of a smile and a normal face. .
When the facial expression detection unit 23 detects that the facial expression of the subject person in the subject image is a smile, it outputs a detection signal to the control unit 20.

顔表情検出部２３は更に、顔検出部２０により検出された顔領域の画像の顔表情を顔表情レベルデータ記憶部２６に予め記憶されている所定の顔表情レベルデータと比較することにより、顔領域の画像中の被写体人物の顔表情が所定の顔表情レベルに対応することを検出する。   The facial expression detection unit 23 further compares the facial expression of the image of the face area detected by the face detection unit 20 with predetermined facial expression level data stored in advance in the facial expression level data storage unit 26, thereby It is detected that the facial expression of the subject person in the image of the region corresponds to a predetermined facial expression level.

顔表情レベルデータ記憶部２６は、顔表情の度合い（顔表情レベル）、例えば、笑顔の度合い（笑顔レベル）が大笑いと中笑いと微笑であるときの各笑顔の特徴を表す笑顔レベルデータを笑顔レベル毎に記憶している。   The facial expression level data storage unit 26 smiles smile level data representing the characteristics of each smile when the degree of facial expression (facial expression level), for example, the degree of smile (smile level) is big laugh, medium laugh, or smile. Remembered for each level.

笑顔の度合いを判定する手法には、例えば、特開２００４−４６５９１号公報に開示されている手法を用いることができる。この判定手法は、入力された部分画像の笑顔について笑顔の度合いの評価を行い、笑顔評価値を算出する。笑顔評価の際は、予め記憶されている笑顔データを参照して眉、瞳孔、唇の各要素の形状の評価ポイントを算出し、各評価ポイントを係数により重み付けした上で合算した値を笑顔評価値としている。   As a method for determining the degree of smile, for example, a method disclosed in Japanese Patent Application Laid-Open No. 2004-46591 can be used. This determination method evaluates the degree of smile for the smile of the input partial image, and calculates a smile evaluation value. When evaluating smiles, calculate the evaluation points for the shape of each element of the eyebrows, pupils, and lips by referring to the smile data stored in advance. Value.

表示制御部２７は、液晶ディスプレイ２８による表示を制御する。すなわち、表示制御部２７は、液晶ディスプレイ２８がスルー画像の表示、バッファメモリ１４に一時的に記録されている被写体画像の表示、画像記録部１６のメモリ１６ａに保存された被写体画像の再生表示を行なう時の表示態様を制御する。表示態様とは、例えば、画像の表示倍率を変更したり、所定の部分画像が画面の中央に位置するように移動させることである。また、表示制御部２７は、液晶ディスプレイ２８に被写体画像のみを表示させたり、属性情報を付加した被写体画像を表示させる。   The display control unit 27 controls display on the liquid crystal display 28. That is, the display control unit 27 displays the through image on the liquid crystal display 28, displays the subject image temporarily recorded in the buffer memory 14, and reproduces and displays the subject image stored in the memory 16a of the image recording unit 16. The display mode when performing is controlled. The display mode is, for example, changing the display magnification of the image or moving the predetermined partial image so as to be positioned at the center of the screen. Further, the display control unit 27 displays only the subject image on the liquid crystal display 28 or displays the subject image to which the attribute information is added.

液晶ディスプレイ２８は、スルー画像の表示やバッファメモリ１４に一時的に記録されている被写体画像、メモリ１６ａに保存された被写体画像の表示を行い、また、表示制御部２７の指令により、被写体画像に関連する属性情報の表示を行う。   The liquid crystal display 28 displays a through image, displays a subject image temporarily recorded in the buffer memory 14 and a subject image stored in the memory 16a, and displays the subject image according to a command from the display control unit 27. Display related attribute information.

画像読出し部３０は、画像記録部１６のメモリ１６ａに保存されている被写体画像の読み出しを行う操作部である。   The image reading unit 30 is an operation unit that reads a subject image stored in the memory 16 a of the image recording unit 16.

トリミング部４０は、液晶ディスプレイ２８が、メモリ１６ａに保存された被写体画像中の笑顔が検出されたり笑顔レベルが評価された人物の画像を中央位置に拡大表示した後に、その人物の部分画像をトリミングする。トリミングされた画像は、液晶ディスプレイ２８に表示される。   The trimming unit 40 trims the partial image of the person after the liquid crystal display 28 enlarges and displays the image of the person whose smile level is detected or the smile level is evaluated in the subject image stored in the memory 16a. To do. The trimmed image is displayed on the liquid crystal display 28.

以上のように構成されたデジタルカメラの動作について図１〜４を参照しながら説明する。図２〜４は、それぞれ液晶ディスプレイ２８の画面を模式的に示す図である。図２は、オリジナルの被写体画像、図３は、画面の中央位置に拡大表示された人物画像、図４は、図３の人物画像をトリミングして得られた顔画像を示す。   The operation of the digital camera configured as described above will be described with reference to FIGS. 2 to 4 are diagrams schematically showing screens of the liquid crystal display 28, respectively. 2 shows an original subject image, FIG. 3 shows a person image enlarged and displayed at the center position of the screen, and FIG. 4 shows a face image obtained by trimming the person image of FIG.

以下の説明では、画像記録部１６の被写体画像から被写体人物の笑顔を検出する場合を例にとって説明する。
先ず、顔表情設定部２５によって複数の顔表情の中から笑顔を選択してそれを設定する。画像読出し部３０は、画像記録部１６のメモリ１６ａに保存されている被写体画像を読み出す。この被写体画像は、撮影レンズ１１、絞り１２および撮像素子１３によって撮影されたものでもよいし、他のカメラで撮影されたものでもよい。例えば、ＷｉＦｉなどの無線通信ネットワークにより、他のカメラから画像データとして受信してメモリ１６ａに記録したものでもよい。 In the following description, a case where the smile of the subject person is detected from the subject image of the image recording unit 16 will be described as an example.
First, the facial expression setting unit 25 selects a smile from a plurality of facial expressions and sets it. The image reading unit 30 reads the subject image stored in the memory 16 a of the image recording unit 16. This subject image may be taken by the taking lens 11, the diaphragm 12, and the image sensor 13, or may be taken by another camera. For example, it may be received as image data from another camera via a wireless communication network such as WiFi and recorded in the memory 16a.

図２に示されるように、読み出された被写体画像には、人物画像１０１と非人物画像１１０が含まれている。
顔検出部２１は、読み出された被写体画像を顔データ記憶部２２の顔データと比較することにより、被写体画像中の人物画像１０１の顔部分１０１ａを検出する。 As shown in FIG. 2, the read subject image includes a human image 101 and a non-human image 110.
The face detection unit 21 detects the face portion 101 a of the person image 101 in the subject image by comparing the read subject image with the face data in the face data storage unit 22.

顔表情検出部２３は、顔検出部２１により検出された人物画像１０１の顔画像１０１ａを顔表情データ記憶部３２の笑顔データと比較し、被写体人物の笑顔を検出する。顔表情検出部２３は、この笑顔を検出した時に検出信号を出力する。顔表情検出部２３は、更に人物画像１０１の顔画像１０１ａを顔表情レベルデータ記憶部２６の笑顔レベルデータと比較し、被写体人物の笑顔レベルを評価する。この笑顔レベルは、例えば大笑い、中笑い、微笑の３段階である。顔表情検出部２３は、笑顔レベルに応じた評価信号を制御部２０へ出力する。   The facial expression detection unit 23 compares the facial image 101a of the person image 101 detected by the face detection unit 21 with smile data in the facial expression data storage unit 32, and detects the smile of the subject person. The facial expression detection unit 23 outputs a detection signal when this smile is detected. The facial expression detection unit 23 further compares the facial image 101a of the person image 101 with the smile level data of the facial expression level data storage unit 26, and evaluates the smile level of the subject person. This smile level has, for example, three levels of big laugh, medium laugh, and smile. The facial expression detection unit 23 outputs an evaluation signal corresponding to the smile level to the control unit 20.

表示制御部２７は、顔表情検出部２３からの検出信号および評価信号を入力して、図３に示されるように、人物画像１０１を液晶ディスプレイ２８の画面の中央位置に拡大表示する。この拡大表示の倍率は、顔表情検出部２３の評価信号によって決定され、例えば、大笑いの場合は４倍、中笑いの場合は３倍、微笑の場合は２倍となる。   The display control unit 27 receives the detection signal and the evaluation signal from the facial expression detection unit 23 and enlarges and displays the person image 101 at the center position of the screen of the liquid crystal display 28 as shown in FIG. The magnification of this enlarged display is determined by the evaluation signal from the facial expression detection unit 23, and is, for example, 4 times for a big smile, 3 times for a medium smile, and 2 times for a smile.

続いて、トリミング部４０は、図３に示されるように、液晶ディスプレイ２８の画面の中央位置で拡大表示された人物画像１０１について顔領域１０１ａのみをトリミングする。図４に示されるように、トリミングされた顔画像１０２は、液晶ディスプレイ２８の画面上に表示される。   Subsequently, as shown in FIG. 3, the trimming unit 40 trims only the face area 101 a of the person image 101 enlarged and displayed at the center position of the screen of the liquid crystal display 28. As shown in FIG. 4, the trimmed face image 102 is displayed on the screen of the liquid crystal display 28.

トリミング画像１０２はメモリ１６ａに保存される。
保存の方法には２通りあり、トリミング画像をオリジナルの被写体画像と同じフォルダに保存してもよいし、トリミング部４０が最初にトリミングするときに、メモリ１６ａに新しいトリミング用フォルダを自動作成してそのトリミング用フォルダに保存してもよい。なお、トリミング画像にトリミングした旨の属性情報を付加した上でメモリ１６ａに保存しておけば、その属性情報に基づいて画像検索をすることができる。 The trimmed image 102 is stored in the memory 16a.
There are two saving methods, the trimming image may be saved in the same folder as the original subject image, or when the trimming unit 40 first trims, a new trimming folder is automatically created in the memory 16a. It may be stored in the trimming folder. If attribute information indicating that trimming has been performed is added to the trimmed image and stored in the memory 16a, an image search can be performed based on the attribute information.

なお、画像読出し部３０は、その一回の操作毎に、メモリ１６ａから一つの被写体画像を読み出すように構成することもできるし、その代わりに、一回の操作によってメモリ１６ａに記録されたすべての被写体画像を順次読み出すように設定することも出来る。この後者の場合には、記録媒体に記録された全ての画像の中から所定の顔表情の画像を自動的に検索し、拡大表示し、更にトリミング画像を保存することができる。   Note that the image reading unit 30 can be configured to read one subject image from the memory 16a for each operation, or instead, all the data recorded in the memory 16a by one operation. It can also be set to sequentially read out the subject images. In the latter case, an image having a predetermined facial expression can be automatically retrieved from all the images recorded on the recording medium, enlarged and displayed, and a trimmed image can be stored.

第１の実施の形態のデジタルカメラは以下の作用効果を奏する。
（１）メモリ１６ａから被写体画像を読み出し、その読み出した被写体画像から顔表情検出部２３によって所定の顔表情の画像を検出し、その被写体画像を拡大表示するので、極めて簡単に所望の顔表情の画像を選択することができると共に、その顔表情を容易に視認して確認することができる。
（２）被写体画像中の人物がたとえ画面の片隅に位置していたとしても、その拡大表示は、表示画面の中央部において行われるので、その視認を容易に行うことができる。
（３）顔表情検出部２３によって検出された所定の顔表情の顔画像は、トリミングされて、メモリに別途記録されるので、後日にトリミング顔画像とそれの原画像とを再利用することができる。 The digital camera according to the first embodiment has the following operational effects.
(1) A subject image is read out from the memory 16a, and an image of a predetermined facial expression is detected from the read subject image by the facial expression detection unit 23, and the subject image is enlarged and displayed. An image can be selected and the facial expression can be easily visually confirmed.
(2) Even if a person in the subject image is located at one corner of the screen, the enlarged display is performed at the center of the display screen, so that it can be easily recognized.
(3) Since the facial image of the predetermined facial expression detected by the facial expression detection unit 23 is trimmed and separately recorded in the memory, the trimmed facial image and its original image can be reused at a later date. it can.

−第２の実施の形態−
次に、本発明の第２の実施の形態のデジタルカメラを説明する。
この第２の実施の形態によるデジタルカメラは、第１の実施の形態によるデジタルカメラの構成に加えて、新たな構成を付加したものである。これらの新たな追加構成は、主に、被写体画像に複数の人物が写っている場合にそれらの複数の人物についてどの人物を優先して拡大表示するかを定めるために使用されるものである。 -Second Embodiment-
Next, a digital camera according to a second embodiment of the present invention will be described.
The digital camera according to the second embodiment is obtained by adding a new configuration to the configuration of the digital camera according to the first embodiment. These new additional configurations are mainly used to determine which person is preferentially enlarged and displayed for a plurality of persons when the subject image includes a plurality of persons.

図５は、本発明の第２の実施の形態によるデジタルカメラの構成を示すブロック図である。
顔登録モード設定部３１は、デジタルカメラへの人物登録を実行するモードをＯＮ／ＯＦＦ設定する操作部であり、ＯＮ設定して登録したい人物の顔を撮像素子１３によって撮像し、撮像した顔画像の特徴を顔登録データとして顔登録データ記憶部３２に記録する。この顔登録データ記憶部３２は、登録人物の顔画像の顔情報、例えば眉や眼や鼻や唇などの特徴点に関する特徴量データを顔登録データとして記憶する。 FIG. 5 is a block diagram showing the configuration of a digital camera according to the second embodiment of the present invention.
The face registration mode setting unit 31 is an operation unit for setting ON / OFF of a mode for performing person registration in the digital camera. The face image of a person desired to be registered by being set to ON is picked up by the image pickup device 13 and picked up. Are registered in the face registration data storage unit 32 as face registration data. The face registration data storage unit 32 stores face information of a registered person's face image, for example, feature data regarding feature points such as eyebrows, eyes, nose, and lips, as face registration data.

顔認識部３３は、顔検出部２１によって検出された被写体人物の顔領域の画像を顔登録データ記憶部３２に記録されている顔登録データと照合し、その画像が登録済みの顔であることを認識した時に、認識信号を出力する。   The face recognition unit 33 collates the image of the face area of the subject person detected by the face detection unit 21 with the face registration data recorded in the face registration data storage unit 32, and the image is a registered face. When it is recognized, a recognition signal is output.

優先度設定部４１は、メモリ１６ａから読み出した被写体画像中に所定の顔表情の人物が複数人写っていた場合に、その複数の人物の中から拡大表示を優先的に行う人物を設定する操作部である。
具体的には、優先度設定部４１は、登録人物優先モードと、笑顔レベルなどの顔表情レベル優先モードとを有する。 The priority setting unit 41 is an operation for setting a person who preferentially performs enlarged display from among a plurality of persons having a predetermined facial expression in the subject image read from the memory 16a. Part.
Specifically, the priority setting unit 41 has a registered person priority mode and a facial expression level priority mode such as a smile level.

登録人物優先モードは、被写体画像中に登録人物とその他の人物（即ち非登録人物）とが存在した時に、その登録人物が所定の顔表情であった場合にその登録人物を非登録人物に優先して拡大表示し、トリミング処理する。その後に、所定の顔表情の非登録人物を拡大表示し、トリミング処理を行うものである。
顔表情レベル優先モードは、被写体画像中の複数の人物が所定の顔表情である場合に、その顔表情レベルが高い順に人物画像を拡大表示し、トリミング処理を行うものである。顔表情レベルに優先度を設けることにより、優先順位の高い顔表情レベルの人物画像を他の人物画像よりも先に拡大表示させることができる。 In the registered person priority mode, when a registered person and another person (that is, a non-registered person) exist in the subject image, if the registered person has a predetermined facial expression, the registered person is given priority over the non-registered person. The image is enlarged and trimmed. Thereafter, a non-registered person having a predetermined facial expression is enlarged and trimmed.
In the facial expression level priority mode, when a plurality of persons in a subject image have a predetermined facial expression, the person images are enlarged and displayed in descending order of the facial expression level, and trimming processing is performed. By providing a priority to the facial expression level, it is possible to enlarge and display a human facial image level with a higher priority prior to other human images.

セレクタ釦４２は、登録人物優先モードと顔表情レベル優先モードの設定時に、上記の拡大表示を優先順位に従って順次切換える為の操作部材である。   The selector button 42 is an operation member for sequentially switching the enlarged display according to the priority order when the registered person priority mode and the facial expression level priority mode are set.

以上のように構成されたデジタルカメラの動作について説明する。
＜登録人物優先モード＞
はじめに、優先度設定部４１によって登録人物優先モードを設定した場合の作用を説明する。顔登録モード設定部３１は、事前に所望の被写体人物について顔登録データを顔登録データ記憶部３２に記録している。
顔表情設定部２５が顔表情として笑顔を設定し、優先度設定部４１が外部操作によって登録人物優先モードを設定する。 The operation of the digital camera configured as described above will be described.
<Registered person priority mode>
First, an operation when the registered person priority mode is set by the priority setting unit 41 will be described. The face registration mode setting unit 31 records face registration data for a desired subject person in the face registration data storage unit 32 in advance.
The facial expression setting unit 25 sets smile as the facial expression, and the priority setting unit 41 sets the registered person priority mode by an external operation.

画像読出し部３０がメモリ１６ａから、複数の人物が写っている被写体画像を読み出す。ここで、この読み出された被写体画像が、顔登録データ記録部３２に登録済みの登録人物とその他の人物（非登録人物）とを含み、かつ登録人物も非登録人物も笑顔であるとする。   The image reading unit 30 reads a subject image in which a plurality of persons are shown from the memory 16a. Here, it is assumed that the read subject image includes a registered person registered in the face registration data recording unit 32 and another person (non-registered person), and both the registered person and the non-registered person are smiling. .

顔検出部２１は、この被写体画像中の被写体人物の各々の顔を検出し、顔認識部３３はこの検出された各顔画像が顔登録データ記憶部３２の顔登録データにそれぞれ対応するか否かを検出し、対応した顔画像が存在すると、その顔画像に対して認識信号を出力する。こうして、被写体画像中の登録済みの人物画像が顔認識部３３によって認識されて、その人物画像に対して認識信号が発せられる。   The face detection unit 21 detects each face of the subject person in the subject image, and the face recognition unit 33 determines whether each detected face image corresponds to the face registration data in the face registration data storage unit 32. If a corresponding face image exists, a recognition signal is output for the face image. In this way, the registered person image in the subject image is recognized by the face recognition unit 33, and a recognition signal is issued for the person image.

顔表情検出部２３は、顔検出部２１が検出した登録人物と非登録人物の各顔画像を顔表情データ記憶部２４に記憶された笑顔データと比較し、それぞれについて笑顔画像を検出すると、各顔画像に対して検出信号を出力する。   The facial expression detection unit 23 compares the facial images of the registered person and the non-registered person detected by the face detection unit 21 with smile data stored in the facial expression data storage unit 24, and detects a smile image for each. A detection signal is output for the face image.

表示制御部２７は、顔認識部３３からの登録人物を表す認識信号と顔表情検出部２３からの笑顔を表す検出信号とに基づき、被写体画像中の登録人物を優先して液晶ディスプレイ２８の表示画面の中央に拡大表示する。
この登録人物の拡大表示の後に、トリミング部４０がその登録人物の顔をトリミングし、このトリミングされた画像がメモリ１６ａに保存される。この後に、セレクタ釦４２が操作されると、顔表情検出部２３が検出した非登録人物（登録人物以外の人物）について表示画面の中央に拡大表示が行われ、その後にその顔画像に対してトリミングが行われ、そのトリミングされた画像がメモリ１６ａに保存される。 The display control unit 27 gives priority to the registered person in the subject image on the display of the liquid crystal display 28 based on the recognition signal representing the registered person from the face recognition unit 33 and the detection signal representing the smile from the facial expression detection unit 23. Zoom in on the center of the screen.
After the enlarged display of the registered person, the trimming unit 40 trims the face of the registered person, and the trimmed image is stored in the memory 16a. Thereafter, when the selector button 42 is operated, an enlarged display is performed at the center of the display screen for the non-registered person (person other than the registered person) detected by the facial expression detection unit 23, and then the face image is displayed. Trimming is performed, and the trimmed image is stored in the memory 16a.

こうして、読出された被写体画像に笑顔の登録人物と笑顔の非登録人物とが写っている場合には、登録人物が優先的に拡大表示され、そのトリミングされた顔画像がメモリ１６ａに保存され、その後に、非登録人物が拡大表示され、そのトリミングされた顔画像がメモリ１６ａに保存される。   In this way, when the read subject image includes a smiling registered person and a smiling non-registered person, the registered person is preferentially enlarged and the trimmed face image is stored in the memory 16a. Thereafter, the unregistered person is enlarged and displayed, and the trimmed face image is stored in the memory 16a.

＜顔表情レベル優先モード＞
次に、優先度設定部４１によって顔表情レベル優先モードを設定した場合の作用を説明する。画像読出し部３０がメモリ１６ａから、複数の人物が写っている被写体画像を読み出すと、上述と同様に顔検出部２１がその全員の人物の顔を検出する。顔表情検出部２３は、顔検出部２１によって検出された全人物について笑顔検出を行い、笑顔検出すると検出信号を出力すると共に、更に、笑顔検出した人物の各々について顔表情レベルデータ記憶部２６の顔表情レベルデータに基づき笑顔レベルを評価し、その笑顔レベルを表す評価信号を出力する。 <Facial expression level priority mode>
Next, an operation when the facial expression level priority mode is set by the priority setting unit 41 will be described. When the image reading unit 30 reads a subject image in which a plurality of persons are shown from the memory 16a, the face detection unit 21 detects the faces of all the persons as described above. The facial expression detection unit 23 performs smile detection on all persons detected by the face detection unit 21 and outputs a detection signal when a smile is detected. Further, the facial expression level data storage unit 26 stores each detected human smile. The smile level is evaluated based on the facial expression level data, and an evaluation signal representing the smile level is output.

表示制御部２７は、この評価信号に基づき、最初に笑顔レベルが最も高い人物画像を優先的に液晶ディスプレイ２８の表示画面中央に拡大表示する。第１の実施の形態と同様に、この拡大表示の倍率は、顔表情検出部２３が評価した評価信号に基づいて決定される。その後に、セレクタ釦４２の順次操作に応じて、笑顔レベルが２番目、３番目などの人物が次々に表示画面中央に拡大表示される。勿論、各画像は拡大表示された後に、トリミングされ、メモリ１６ａにそれぞれ記録される。   Based on this evaluation signal, the display control unit 27 preferentially enlarges and displays the person image with the highest smile level at the center of the display screen of the liquid crystal display 28 first. Similar to the first embodiment, the magnification of this enlarged display is determined based on the evaluation signal evaluated by the facial expression detection unit 23. Thereafter, in response to the sequential operation of the selector button 42, the persons with the smile level of the second, third, etc. are successively displayed in the center of the display screen. Of course, each image is enlarged and then trimmed and recorded in the memory 16a.

なお、優先度設定部４１は、優先順位を、顔表情レベルが高い順ではなく、例えば、微笑、中笑い、大笑いの順に設定することもできる。顔表情レベルに優先度を設けることにより、ユーザーの好みの笑顔レベルの人物を優先的に表示させることができる。   Note that the priority setting unit 41 can set priorities in the order of smile, middle laugh, and big laugh, for example, in the order of higher facial expression levels. By giving priority to the facial expression level, it is possible to preferentially display a person with a smile level desired by the user.

このような複数の被写体人物に対する順次の拡大表示・トリミング・保存は、セレクタ釦４２の順次の操作毎に実行される代わりに、最初のセレクタ釦４２の操作の後に、自動的に所定の時間間隔で行うことも出来る。   Such sequential enlargement display, trimming, and storage for a plurality of subject persons are automatically performed at predetermined time intervals after the first operation of the selector button 42, instead of being performed for each sequential operation of the selector button 42. Can also be done.

第２の実施の形態のデジタルカメラは以下の作用効果を奏する。
（１）顔表情検出部２３によって、被写体画像の複数の人物各々に対して所定の顔表情を検出することができるので、所望の顔表情の画像を迅速かつ簡便に得ることができる。
（２）更に、優先度設定部４１によって、所望の顔表情の人物画像を優先的に表示することができる。 The digital camera according to the second embodiment has the following operational effects.
(1) Since the facial expression detection unit 23 can detect a predetermined facial expression for each of a plurality of persons in the subject image, an image of a desired facial expression can be obtained quickly and easily.
(2) Furthermore, the priority setting unit 41 can preferentially display a human image having a desired facial expression.

第１及び第２の実施の形態では、記録媒体からの被写体画像の読み出しや顔表情検出や拡大表示やトリミングなどは、デジタルカメラが実行するものであった。しかしながら、このような処理は、全て、デジタルカメラ以外の画像処理装置、例えばパソコンなどでも実行することが出来る。従って、本発明は、デジタルカメラに限らず、その他の画像処理装置にも適用することができる。
本発明は、その特徴を損なわない限り、以上説明した実施の形態に何ら限定されない。 In the first and second embodiments, reading of a subject image from a recording medium, detection of facial expression, enlargement display, trimming, and the like are performed by a digital camera. However, all such processes can be executed by an image processing apparatus other than a digital camera, such as a personal computer. Therefore, the present invention can be applied not only to a digital camera but also to other image processing apparatuses.
The present invention is not limited to the embodiments described above as long as the characteristics are not impaired.

１６：画像記録部 ２０：制御部
２１：顔検出部 ２２：顔データ記憶部
２３：顔表情検出部 ２４：顔表情データ記憶部
２５：顔表情設定部 ２６：顔表情レベルデータ記憶部
２７：表示制御部 ２８：液晶ディスプレイ
３０：画像読出し部 ３１：顔登録モード設定部
３２：顔登録データ記憶部 ３３：顔認識部
４０：トリミング部 ４１：優先度設定部
４２：セレクタ釦 16: Image recording unit 20: Control unit 21: Face detection unit 22: Face data storage unit 23: Face expression detection unit 24: Face expression data storage unit 25: Face expression setting unit 26: Face expression level data storage unit 27: Display Control unit 28: Liquid crystal display 30: Image reading unit 31: Face registration mode setting unit 32: Face registration data storage unit 33: Face recognition unit 40: Trimming unit 41: Priority setting unit 42: Selector button

Claims (8)

被写体を撮影して被写体画像を生成する撮像手段と、
前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、
前記記録媒体から前記被写体画像を読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、
前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、を備え、
前記顔表情検出手段は、前記被写体人物の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の顔表情レベルを評価し、
前記表示制御手段は、前記顔表情検出手段により評価された前記顔表情レベルに基づいて前記所定の倍率を変更することを特徴とするデジタルカメラ。 Imaging means for photographing a subject and generating a subject image;
Recording means for recording a subject image captured by the imaging means on a recording medium;
Reading means for reading the subject image from the recording medium;
Facial expression detection means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression;
When the facial expression detection means detects a predetermined facial expression, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the face area of the subject person is displayed Display control means for controlling the display means to be located in
Facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data;
The facial expression detection means compares the facial image of the subject person with the facial expression level data of the facial expression level data storage means, evaluates the facial expression level of the subject person,
The digital camera according to claim 1, wherein the display control unit changes the predetermined magnification based on the facial expression level evaluated by the facial expression detection unit . 被写体を撮影して被写体画像を生成する撮像手段と、
前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、
前記記録媒体から前記被写体画像を読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、
前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、を備え、
前記被写体画像は複数の被写体人物の画像を含み、
前記顔表情検出手段は、前記被写体人物の各々の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の各々の顔表情レベルを評価し、
前記表示制御手段は、前記顔表情レベルが最も高く評価された前記被写体人物の顔画像を前記表示手段に拡大表示させることを特徴とするデジタルカメラ。 Imaging means for photographing a subject and generating a subject image;
Recording means for recording a subject image captured by the imaging means on a recording medium;
Reading means for reading the subject image from the recording medium;
Facial expression detection means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression;
When the facial expression detection means detects a predetermined facial expression, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the face area of the subject person is displayed at the center of the display screen during the enlarged display. Display control means for controlling the display means to be located in
Facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data;
The subject image includes a plurality of subject person images,
The facial expression detection means compares each facial image of the subject person with the facial expression level data of the facial expression level data storage means, evaluates the facial expression level of each of the subject persons,
The digital camera characterized in that the display control means enlarges and displays on the display means a face image of the subject person who is evaluated with the highest facial expression level . 被写体を撮影して被写体画像を生成する撮像手段と、
前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、
前記記録媒体から前記被写体画像を読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、
前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、
セレクタ部材と、を備え、
前記被写体画像は複数の被写体人物の画像を含み、
前記顔表情検出手段は、前記被写体人物の各々の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の各々の顔表情レベルを評価し、
前記表示制御手段は、前記顔表情検出手段によって評価された顔表情レベルに基づいて決定される順序に従い、前記複数の被写体人物画像を前記表示手段に順次拡大表示させ、
前記セレクタ部材は、前記複数の被写体人物画像の順次拡大表示を被写体人物毎に切り換えることを特徴とするデジタルカメラ。 Imaging means for photographing a subject and generating a subject image;
Recording means for recording a subject image captured by the imaging means on a recording medium;
Reading means for reading the subject image from the recording medium;
Facial expression detection means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression;
When the facial expression detection means detects a predetermined facial expression, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the face area of the subject person is displayed at the center of the display screen during the enlarged display. Display control means for controlling the display means to be located in
Facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data;
A selector member,
The subject image includes a plurality of subject person images,
The facial expression detection means compares each facial image of the subject person with the facial expression level data of the facial expression level data storage means, evaluates the facial expression level of each of the subject persons,
The display control means sequentially enlarges and displays the plurality of subject person images on the display means according to the order determined based on the facial expression level evaluated by the facial expression detection means,
The digital camera according to claim 1, wherein the selector member switches sequentially enlarged display of the plurality of subject person images for each subject person . 被写体を撮影して被写体画像を生成する撮像手段と、
前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、
前記記録媒体から前記被写体画像を読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させると共に、前記拡大表示の際に、前記被写体人物の顔領域が表示画面の中央に位置するように前記表示手段を制御する表示制御手段と、
前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、
所定の顔表情レベルを設定する優先度設定手段と、を備え、
前記被写体画像は複数の被写体人物の画像を含み、
前記顔表情検出手段は、前記被写体人物の各々の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の各々の顔表情レベルを評価し、
前記表示制御手段は、前記優先度設定手段により設定された所定の顔表情レベルに該当する顔表情レベルの前記被写体人物について前記拡大表示を優先的に行うことを特徴とするデジタルカメラ。 Imaging means for photographing a subject and generating a subject image;
Recording means for recording a subject image captured by the imaging means on a recording medium;
Reading means for reading the subject image from the recording medium;
Facial expression detection means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression;
When the facial expression detection means detects a predetermined facial expression, the subject image is enlarged and displayed on the display means at a predetermined magnification, and the face area of the subject person is displayed at the center of the display screen during the enlarged display. Display control means for controlling the display means to be located in
Facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data;
Priority setting means for setting a predetermined facial expression level,
The subject image includes a plurality of subject person images,
The facial expression detection means compares each facial image of the subject person with the facial expression level data of the facial expression level data storage means, evaluates the facial expression level of each of the subject persons,
The digital camera according to claim 1, wherein the display control unit preferentially performs the enlarged display on the subject person having a facial expression level corresponding to a predetermined facial expression level set by the priority setting unit . 被写体を撮影して被写体画像を生成する撮像手段と、
前記撮像手段によって撮像された被写体画像を記録媒体に記録する記録手段と、
前記記録媒体から前記被写体画像を読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段が所定の顔表情を検出したときに、前記被写体画像を所定の倍率で表示手段に拡大表示させる表示制御手段と、
前記顔表情の度合いを段階的に表す複数の顔表情レベルを顔表情レベルデータとして記憶する顔表情レベルデータ記憶手段と、を備え、
前記顔表情検出手段は、前記被写体人物の顔画像を前記顔表情レベルデータ記憶手段の顔表情レベルデータと比較し、前記被写体人物の顔表情レベルを評価し、
前記表示制御手段は、前記顔表情検出手段により評価された前記顔表情レベルに基づいて前記所定の倍率を変更することを特徴とするデジタルカメラ。 Imaging means for photographing a subject and generating a subject image;
Recording means for recording a subject image captured by the imaging means on a recording medium;
Reading means for reading the subject image from the recording medium;
Facial expression detection means for detecting that the face image of the subject person in the subject image read by the reading means is a predetermined facial expression;
Display control means for enlarging and displaying the subject image at a predetermined magnification when the facial expression detection means detects a predetermined facial expression;
Facial expression level data storage means for storing a plurality of facial expression levels representing the degree of facial expression in stages as facial expression level data;
The facial expression detection means compares the facial image of the subject person with the facial expression level data of the facial expression level data storage means, evaluates the facial expression level of the subject person,
The digital camera according to claim 1, wherein the display control unit changes the predetermined magnification based on the facial expression level evaluated by the facial expression detection unit . 請求項２〜４のいずれか１項に記載のデジタルカメラにおいて、
前記撮像手段によって撮像された人物の顔画像に関係する顔情報を顔登録データとして記憶する顔登録データ記憶手段と、
前記読出し手段によって読み出された前記被写体画像中の被写体人物の顔画像が前記顔登録データ記憶手段に記憶された前記顔登録データに対応することを認識する顔認識手段と、を更に備え、
前記被写体画像は、前記顔登録データ記憶手段に前記顔情報が記憶された人物の画像とその他の人物の画像とを含み、
前記顔表情検出手段は、前記被写体画像中の被写体人物の各々の顔画像が所定の顔表情であることを検出し、
前記表示制御手段は、前記顔認識手段で認識された前記被写体人物について前記拡大表示を優先的に行うことを特徴とするデジタルカメラ。 The digital camera according to any one of claims 2 to 4 ,
Face registration data storage means for storing face information related to the face image of the person imaged by the imaging means as face registration data;
Face recognition means for recognizing that the face image of the subject person in the subject image read by the reading means corresponds to the face registration data stored in the face registration data storage means,
The subject image includes an image of a person whose face information is stored in the face registration data storage means and an image of another person,
The facial expression detection means detects that each facial image of the subject person in the subject image is a predetermined facial expression;
The digital camera characterized in that the display control means preferentially performs the enlarged display on the subject person recognized by the face recognition means . 請求項１〜６のいずれか１項に記載のデジタルカメラにおいて、
前記表示手段による前記拡大表示の後に、前記被写体人物の顔画像をトリミングするトリミング手段を更に備えることを特徴とするデジタルカメラ。 The digital camera according to any one of claims 1 to 6 ,
A digital camera further comprising trimming means for trimming the face image of the subject person after the enlarged display by the display means. 請求項７に記載のデジタルカメラにおいて、
前記記録手段は、前記トリミング手段によりトリミングされた画像を前記記録媒体に保存することを特徴とするデジタルカメラ。
The digital camera according to claim 7 , wherein
The digital camera according to claim 1, wherein the recording unit stores the image trimmed by the trimming unit in the recording medium.
JP2009015859A 2009-01-27 2009-01-27 Digital camera Expired - Fee Related JP5434096B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009015859A JP5434096B2 (en) 2009-01-27 2009-01-27 Digital camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009015859A JP5434096B2 (en) 2009-01-27 2009-01-27 Digital camera

Publications (2)

Publication Number Publication Date
JP2010177812A JP2010177812A (en) 2010-08-12
JP5434096B2 true JP5434096B2 (en) 2014-03-05

Family

ID=42708361

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009015859A Expired - Fee Related JP5434096B2 (en) 2009-01-27 2009-01-27 Digital camera

Country Status (1)

Country Link
JP (1) JP5434096B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5293711B2 (en) * 2010-09-27 2013-09-18 ブラザー工業株式会社 Print control program and print control apparatus

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003209683A (en) * 2001-09-27 2003-07-25 Fuji Photo Film Co Ltd Image processing equipment and image processing method
JP2004046591A (en) * 2002-07-12 2004-02-12 Konica Minolta Holdings Inc Picture evaluation device
JP4489608B2 (en) * 2004-03-31 2010-06-23 富士フイルム株式会社 DIGITAL STILL CAMERA, IMAGE REPRODUCTION DEVICE, FACE IMAGE DISPLAY DEVICE, AND CONTROL METHOD THEREOF
JP2006261711A (en) * 2005-03-15 2006-09-28 Seiko Epson Corp Image generating apparatus
JP4702015B2 (en) * 2005-12-01 2011-06-15 カシオ計算機株式会社 Image display apparatus and program
JP4431547B2 (en) * 2006-04-14 2010-03-17 富士フイルム株式会社 Image display control device, control method therefor, and control program therefor
JP4730667B2 (en) * 2006-07-25 2011-07-20 富士フイルム株式会社 Automatic regeneration method and apparatus
JP4891123B2 (en) * 2007-03-13 2012-03-07 オリンパスイメージング株式会社 Image display device, image display method, and program
JP4794584B2 (en) * 2007-03-30 2011-10-19 カシオ計算機株式会社 Imaging device, image display device, and program thereof
JP2008294724A (en) * 2007-05-24 2008-12-04 Panasonic Corp Image receiver

Also Published As

Publication number Publication date
JP2010177812A (en) 2010-08-12

Similar Documents

Publication Publication Date Title
JP4640456B2 (en) Image recording apparatus, image recording method, image processing apparatus, image processing method, and program
JP4789825B2 (en) Imaging apparatus and control method thereof
US7995106B2 (en) Imaging apparatus with human extraction and voice analysis and control method thereof
JP4489608B2 (en) DIGITAL STILL CAMERA, IMAGE REPRODUCTION DEVICE, FACE IMAGE DISPLAY DEVICE, AND CONTROL METHOD THEREOF
JP4902562B2 (en) Imaging apparatus, image processing apparatus, control method, and program
KR101539043B1 (en) Image photography apparatus and method for proposing composition based person
CN101854484B (en) Image selection device and method for selecting image
JP5195120B2 (en) Digital camera
JP2005318554A (en) Imaging device, control method thereof, program, and storage medium
JP2005086516A (en) Imaging device, printer, image processor and program
JP2008262447A (en) Image processor, photographing system, blinking state detection method, blinking state detection program and storage medium recording same program
JP2013074461A (en) Image processor, image processing method and program
JP2007324965A (en) Digital camera, photography control method, and image output system
JP5966778B2 (en) Imaging apparatus, imaging method, and program
JP5304294B2 (en) Electronic still camera
JP4895205B2 (en) Image processing apparatus and program thereof
JP2010068190A (en) Digital camera, image processing apparatus and digital camera system
JP5157704B2 (en) Electronic still camera
JP5272797B2 (en) Digital camera
JP2010198110A (en) Image processor and electronic still camera
JP5434096B2 (en) Digital camera
JP5157761B2 (en) Electronic still camera
JP2010226485A (en) Image processing apparatus and digital camera
JP5200959B2 (en) Digital camera
JP5918998B2 (en) Image processing apparatus, imaging apparatus, control method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120619

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130405

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131112

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131125

R150 Certificate of patent or registration of utility model

Ref document number: 5434096

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees