JP5304294B2 - Electronic still camera - Google Patents

Electronic still camera Download PDF

Info

Publication number
JP5304294B2
JP5304294B2 JP2009028775A JP2009028775A JP5304294B2 JP 5304294 B2 JP5304294 B2 JP 5304294B2 JP 2009028775 A JP2009028775 A JP 2009028775A JP 2009028775 A JP2009028775 A JP 2009028775A JP 5304294 B2 JP5304294 B2 JP 5304294B2
Authority
JP
Japan
Prior art keywords
facial expression
image data
subject
subject image
ranking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009028775A
Other languages
Japanese (ja)
Other versions
JP2010187109A (en
Inventor
洋介 河野
裕之 秋谷
正永 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2009028775A priority Critical patent/JP5304294B2/en
Publication of JP2010187109A publication Critical patent/JP2010187109A/en
Application granted granted Critical
Publication of JP5304294B2 publication Critical patent/JP5304294B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To easily recognize an image with high evaluation out of a plurality of smile subject images. <P>SOLUTION: Attribute data including a smile level of a subject, which is evaluated by a face expression level evaluation section 25, and name of the subject which is input by an identification data input section 35, are related to subject image data and recorded in a memory 16a. A ranking determination section 28 determines the ranks of a plurality of subject image data read out from the memory 16a based on smile levels. The thumbnail images of the plurality of subject image data to which ranks and names are respectively added are displayed on a display 42 as a list. <P>COPYRIGHT: (C)2010,JPO&amp;INPIT

Description

本発明は、被写体画像中の人物の顔表情レベルを評価する機能を有する電子スチルカメラに関する。   The present invention relates to an electronic still camera having a function of evaluating a facial expression level of a person in a subject image.

従来、撮影された画像中の人物の顔表情を評価し、その評価に基づいて複数の撮影画像を顔表情の良い順に並べて表示する機能を有する画像評価装置が知られている(例えば、特許文献1参照)。   2. Description of the Related Art Conventionally, there has been known an image evaluation apparatus having a function of evaluating a facial expression of a person in a photographed image and displaying a plurality of photographed images arranged in order of good facial expression based on the evaluation (for example, Patent Documents). 1).

特開2004−46591号公報JP 2004-46591 A

しかしながら、引用文献1の装置においては、撮影画像毎に顔表情の評価値が与えられ、これらの撮影画像が顔表情の良い順に並べて表示されるが、複数の画像を2次元的に配列する通常の表示の場合、画像同士を比べていずれの画像が評価値が高いのかが分かり難いという問題がある。   However, in the apparatus of the cited document 1, evaluation values of facial expressions are given for each captured image, and these captured images are displayed side by side in the order of good facial expression. Usually, a plurality of images are arranged two-dimensionally. In the case of display, there is a problem that it is difficult to know which image has a higher evaluation value by comparing the images.

(1)請求項1の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記選択手段によって選択された前記サムネイル画像を拡大表示すると共に前記顔表情レベルに応じて拡大表示時間を変更することを特徴とする。
(2)請求項2の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示し、当該サムネイル画像の各々に、前記ランキングと前記個人識別情報と数値化またはグラフ化された顔表情レベルとを付記表示する表示手段と、前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、前記選択手段により、前記一覧表示された複数の前記サムネイル画像に付記表示された前記顔表情レベルから任意の顔表情レベルが選択されると、前記表示手段は、前記選択手段によって選択された前記顔表情レベルと等しい顔表情レベルを有する被写体画像データのサムネイル画像を一覧表示することを特徴とする。
(3)請求項7の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、前記ランキング決定手段によってランキング一位と決定された被写体画像データの被写体人物を優先者と選定する第1の優先者選定手段と、を備え、前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第1の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする。
(4)請求項8の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、前記ランキング決定手段によってランキング最下位と決定された被写体画像データの被写体人物を優先者と選定する第2の優先者選定手段と、を備え、前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第2の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする。
(1) An electronic still camera according to the first aspect of the present invention is an imaging means for outputting subject image data, and a facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression. Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means, input means for inputting personal identification information representing the subject person, and subject image data as the personal identification information Storing means associated with the facial expression level, reading means for reading a plurality of the subject image data from the storage means, and the facial expression associated with the subject image data read by the reading means Ranking determining means for determining a ranking of the plurality of read subject image data based on a level; and the reading Comprising a plurality of said display means for displaying a list of thumbnail images of the object image data, and selection means for selecting an arbitrary thumbnail image from a plurality of thumbnail images said listed, wherein the display means, the list The ranking and the personal identification information are additionally displayed on each of the displayed thumbnail images, the thumbnail image selected by the selection unit is enlarged and displayed, and the enlarged display time is changed according to the facial expression level. It is characterized by that.
(2) An electronic still camera according to a second aspect of the present invention is an imaging means for outputting subject image data, and a facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression. Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means, input means for inputting personal identification information representing the subject person, and subject image data as the personal identification information Storing means associated with the facial expression level, reading means for reading a plurality of the subject image data from the storage means, and the facial expression associated with the subject image data read by the reading means Ranking determining means for determining a ranking of the plurality of read subject image data based on a level; and the reading Display means for displaying a list of thumbnail images of the plurality of subject image data, and additionally displaying the ranking, the personal identification information, and a numerical or graphed facial expression level on each of the thumbnail images; Selecting means for selecting an arbitrary thumbnail image from the plurality of thumbnail images displayed in a list, and optionally selecting from the facial expression levels additionally displayed on the plurality of thumbnail images displayed in the list by the selecting device. When the facial expression level is selected, the display means displays a list of thumbnail images of subject image data having a facial expression level equal to the facial expression level selected by the selection means.
(3) An electronic still camera according to a seventh aspect of the invention is an imaging means for outputting subject image data, and a facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression. Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means, input means for inputting personal identification information representing the subject person, and subject image data as the personal identification information Storing means associated with the facial expression level, reading means for reading a plurality of the subject image data from the storage means, and the facial expression associated with the subject image data read by the reading means Ranking determining means for determining a ranking of the plurality of read subject image data based on a level; and the reading Display means for displaying a list of thumbnail images of the plurality of subject image data, automatic photographing means for automatically photographing according to the detection output of the facial expression detecting means, and ranking ranking being determined as the first ranking by the ranking determining means First priority selection means for selecting a subject person in the subject image data as a priority, and the display means includes the ranking, the personal identification information, and the like for each of the thumbnail images displayed in the list. The facial expression detection means includes a plurality of subject persons in the subject image data, and a priority selected by the first priority selection means exists in the plurality of subject persons. In this case, it is detected that the facial expression of the priority person is a predetermined facial expression in preference to the other subject person in the subject image data, and the automatic photographing means Characterized by automatically shooting in response to the detection output of the facial expression detector.
(4) An electronic still camera according to an eighth aspect of the invention is an imaging means for outputting subject image data, and a facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression. Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means, input means for inputting personal identification information representing the subject person, and subject image data as the personal identification information Storing means associated with the facial expression level, reading means for reading a plurality of the subject image data from the storage means, and the facial expression associated with the subject image data read by the reading means Ranking determining means for determining a ranking of the plurality of read subject image data based on a level; and the reading Display means for displaying a list of thumbnail images of the plurality of subject image data, automatic photographing means for automatically photographing according to the detection output of the facial expression detection means, and the lowest ranking determined by the ranking determination means Second priority selection means for selecting a subject person of the subject image data as a priority, and the display means includes, for each of the thumbnail images displayed in the list, the ranking and the personal identification information. The facial expression detection means includes a plurality of subject persons in the subject image data and a priority selected by the second priority selection means exists in the plurality of subject persons. In this case, the automatic photographing means detects that the facial expression of the priority person is a predetermined facial expression in preference to other subject persons in the subject image data. , Characterized in that it automatically captured in response to the detection output of the facial expression detector.

本発明の電子スチルカメラによれば、被写体画像データの顔表情レベルに基づいて複数の被写体画像データのランキングを決定し、これらの被写体画像データのサムネイル画像とともにランキングも表示するので、表示画面を一見しただけで、いずれの画像が評価レベルが高いのかを容易に把握できる。   According to the electronic still camera of the present invention, the ranking of a plurality of subject image data is determined based on the facial expression level of the subject image data, and the ranking is also displayed together with the thumbnail images of these subject image data. This makes it easy to grasp which image has a high evaluation level.

本発明の実施の形態に係る電子スチルカメラの構成を示すブロック図である。It is a block diagram which shows the structure of the electronic still camera which concerns on embodiment of this invention. 本実施の形態に係る電子スチルカメラのサムネイル一覧表示されたディスプレイ画面を模式的に示す図である。It is a figure which shows typically the display screen by which the thumbnail list display of the electronic still camera concerning this Embodiment was displayed. 本実施の形態に係る電子スチルカメラの第1の変形例であり、サムネイル一覧表示されたディスプレイ画面を模式的に示す図である。It is a 1st modification of the electronic still camera which concerns on this Embodiment, and is a figure which shows typically the display screen by which the thumbnail list was displayed. 本実施の形態に係る電子スチルカメラの第2の変形例であり、サムネイル一覧表示されたディスプレイ画面を模式的に示す図である。It is a 2nd modification of the electronic still camera which concerns on this Embodiment, and is a figure which shows typically the display screen by which the thumbnail list was displayed. 本実施の形態に係る電子スチルカメラの第3の変形例であり、サムネイル一覧表示されたディスプレイ画面を模式的に示す図である。It is a 3rd modification of the electronic still camera which concerns on this Embodiment, and is a figure which shows typically the display screen by which the thumbnail list was displayed.

以下、本発明の実施の形態による電子スチルカメラについて、図面を参照しながら説明する。
図1は、本発明の実施の形態による電子スチルカメラの構成を示すブロック図である。
図1に示されるように、電子スチルカメラは、撮影レンズ11、絞り12、撮像素子13、バッファメモリ14および画像処理部15を備える。また、デジタルカメラは、画像記録部16、CPU(Central Processing Unit)17、ROM(Read Only Memory)18、バス19、画像読出し部20、識別データ入力部35、顔表情設定部36、優先者選定部37、表示制御部41、ディスプレイ42および画像選択部43を備える。
Hereinafter, an electronic still camera according to an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a configuration of an electronic still camera according to an embodiment of the present invention.
As shown in FIG. 1, the electronic still camera includes a photographic lens 11, an aperture 12, an image sensor 13, a buffer memory 14, and an image processing unit 15. Further, the digital camera includes an image recording unit 16, a CPU (Central Processing Unit) 17, a ROM (Read Only Memory) 18, a bus 19, an image reading unit 20, an identification data input unit 35, a facial expression setting unit 36, and a priority selection. Unit 37, display control unit 41, display 42, and image selection unit 43.

画像処理部15、画像記録部16、CPU17、ROM18、画像読出し部20、識別データ入力部35、顔表情設定部36、優先者選定部37、表示制御部41および画像選択部43は、バス19を介して互いに接続されている。   The image processing unit 15, the image recording unit 16, the CPU 17, the ROM 18, the image reading unit 20, the identification data input unit 35, the facial expression setting unit 36, the priority selection unit 37, the display control unit 41, and the image selection unit 43 are connected to the bus 19. Are connected to each other.

CPU17は、顔検出部21、顔表情検出部23、顔表情レベル評価部25、自動撮影部27およびランキング決定部28として機能する。
ROM18は、顔データ記憶部22、顔表情データ記憶部24、顔表情レベルデータ記憶部26および顔登録データ記憶部29として機能する。
The CPU 17 functions as a face detection unit 21, a facial expression detection unit 23, a facial expression level evaluation unit 25, an automatic photographing unit 27, and a ranking determination unit 28.
The ROM 18 functions as a face data storage unit 22, a facial expression data storage unit 24, a facial expression level data storage unit 26 and a face registration data storage unit 29.

撮影レンズ11は、ズームレンズやフォーカスレンズを含む複数のレンズで構成され、被写体像を撮像素子13上に結像する。図1では簡単のため、撮影レンズ11は1枚のレンズで示されている。撮像素子13は、撮影レンズ11からの被写体光L1を光電変換することにより画像信号を生成する。   The photographing lens 11 includes a plurality of lenses including a zoom lens and a focus lens, and forms a subject image on the image sensor 13. In FIG. 1, for the sake of simplicity, the taking lens 11 is shown as a single lens. The imaging element 13 generates an image signal by photoelectrically converting the subject light L1 from the photographing lens 11.

撮像素子13から出力される画像信号は、バッファメモリ14を介して画像処理部15に送られ、ここで所定の種々の画像処理が施される。撮影開始前の段階では、撮像素子13からの画像信号は、バッファメモリ14、画像処理部15を経てバス19を介してディスプレイ42に送られ、スルー画像として表示される。撮影段階では、撮像素子13からの画像信号は、バッファメモリ14、画像処理部15を経てバス19を介して画像記録部16にて記録される。   The image signal output from the image pickup device 13 is sent to the image processing unit 15 via the buffer memory 14, where predetermined various image processing is performed. At the stage before the start of photographing, the image signal from the image sensor 13 is sent to the display 42 via the buffer 19 via the buffer memory 14 and the image processing unit 15 and displayed as a through image. In the photographing stage, the image signal from the image sensor 13 is recorded in the image recording unit 16 via the bus 19 via the buffer memory 14 and the image processing unit 15.

画像記録部16は、画像データとその画像データに関する属性データ(タグ情報)とを関連付けて不揮発性のメモリ(記憶媒体)16aに記録する。画像データには、被写体を撮影レンズ11、絞り12、撮像素子13によって撮影した被写体画像や、外部機器から画像記録部16に入力された被写体画像が含まれる。   The image recording unit 16 records the image data and attribute data (tag information) related to the image data in association with each other in the nonvolatile memory (storage medium) 16a. The image data includes a subject image obtained by photographing the subject with the photographing lens 11, aperture 12, and image sensor 13, and a subject image input to the image recording unit 16 from an external device.

画像読出し部20は、画像記録部16のメモリ16aに記録されている画像データの検索や属性データに基づいて画像の再生を行う操作部である。   The image reading unit 20 is an operation unit that searches for image data recorded in the memory 16a of the image recording unit 16 and reproduces an image based on attribute data.

顔検出部21は、被写体画像データを入力し、これを顔データ記憶部22に予め記憶されている顔データと比較することにより、画像中の被写体人物の顔を検出する。被写体人物が複数人の場合は各人の顔を検出する。顔データ記憶部22は、例えば、眉、眼、鼻、唇の形状に関する特徴点のデータを記憶している。   The face detection unit 21 inputs subject image data and compares it with face data stored in advance in the face data storage unit 22 to detect the face of the subject person in the image. When there are a plurality of subjects, the face of each person is detected. The face data storage unit 22 stores, for example, feature point data relating to the shape of eyebrows, eyes, nose, and lips.

顔検出には、例えば、特開2001−16573号公報に開示されている検出手法を用いることができる。この検出手法は、入力画像中から特徴点を抽出して被写体の顔領域、顔の大きさ等を検出するものである。特徴点としては、眉、眼、鼻、唇の各端点、および顔の輪郭点、例えば頭頂点や顎の下端点が挙げられる。   For the face detection, for example, a detection method disclosed in Japanese Patent Laid-Open No. 2001-16573 can be used. In this detection method, feature points are extracted from an input image to detect the face area, face size, etc. of the subject. The feature points include end points of eyebrows, eyes, nose, lips, and face contour points, such as the head vertex and the lower end point of the chin.

他の顔検出としては、例えば、特開2005−157679号公報に開示されている検出手法を用いることができる。この検出手法は、先ず、入力画像中の2画素間の輝度差を特徴量として学習しておき、その特徴量に基づいて入力画像中の所定領域に顔が存在するか否かを示す推定値を算出し、推定値が1以上のときにその所定領域に顔が存在すると判別するものである。   As other face detection, for example, a detection method disclosed in JP-A-2005-157679 can be used. In this detection method, first, a luminance difference between two pixels in an input image is learned as a feature amount, and an estimated value indicating whether or not a face exists in a predetermined region in the input image based on the feature amount. And when the estimated value is 1 or more, it is determined that a face exists in the predetermined area.

顔表情検出部23は、顔検出部21により検出された顔領域の画像の顔表情を顔表情データ記憶部24に予め記憶されている所定の顔表情データと比較することにより、被写体画像データ中の被写体人物の顔表情が所定の顔表情に対応することを検出する。また、顔表情検出部23は、被写体人物が複数人の場合は所定の人物の顔について顔表情を検出する。
顔表情には、笑顔、泣き顔、怒り顔、驚き顔、寝顔などの様々な種類があり、顔表情データ記憶部24は、これらの複数の顔表情データを記憶している。顔表情検出部23は、例えば、被写体画像中の被写体人物の顔表情が笑顔であることを検出すると、その旨の検出信号を出力する。
The facial expression detection unit 23 compares the facial expression of the image of the face area detected by the face detection unit 21 with predetermined facial expression data stored in advance in the facial expression data storage unit 24, so that It is detected that the facial expression of the subject person corresponds to a predetermined facial expression. The facial expression detection unit 23 detects a facial expression for the face of a predetermined person when there are a plurality of subject persons.
There are various types of facial expressions such as a smiling face, a crying face, an angry face, a surprised face, and a sleeping face, and the facial expression data storage unit 24 stores the plurality of facial expression data. For example, when detecting that the facial expression of the subject person in the subject image is a smile, the facial expression detection unit 23 outputs a detection signal to that effect.

顔表情検出部23が顔領域の画像の顔表情を検出する場合には、特開2008−42319号公報に開示されている検出手法を用いることができる。この検出手法は、例えば笑顔であることを検出するには、検出された画像の顔が笑顔と通常時の顔という2つの顔表情のいずれに近いかに基づいて表情の種類を判断するものである。   When the facial expression detection unit 23 detects a facial expression of an image in the face area, a detection method disclosed in Japanese Patent Application Laid-Open No. 2008-42319 can be used. In this detection method, for example, in order to detect a smile, the type of facial expression is determined based on whether the face of the detected image is close to the two facial expressions of a smile and a normal face. .

顔表情レベル評価部25は、顔検出部21により検出された顔領域の画像の顔表情を顔表情レベルデータ記憶部26に予め記憶されている複数の顔表情レベルデータと比較することにより、顔領域の画像中の被写体人物の顔表情がいずれの顔表情レベルに対応するかを評価する。顔表情レベル評価部25は、被写体人物の顔表情レベルに対応する評価信号を出力する。画像記録部16は、被写体画像データと、評価信号に基づく属性データ(顔表情の種類とその顔表情レベル)とを関連付けて1つの画像ファイルとしてメモリ16aに記録する。   The facial expression level evaluation unit 25 compares the facial expression of the image of the facial area detected by the face detection unit 21 with a plurality of facial expression level data stored in advance in the facial expression level data storage unit 26, thereby It is evaluated which facial expression level the facial expression of the subject person in the image of the region corresponds to. The facial expression level evaluation unit 25 outputs an evaluation signal corresponding to the facial expression level of the subject person. The image recording unit 16 records subject image data and attribute data (a type of facial expression and its facial expression level) based on the evaluation signal in the memory 16a as one image file.

顔表情レベルデータ記憶部26は、顔表情の度合い(顔表情レベル)、例えば、笑顔の度合い(笑顔レベル)が10%、20%、30%、・・・、100%であるときの各笑顔の特徴を表す笑顔レベルデータ(例えば、特徴点同士の間隔)を笑顔レベル毎に記憶している。笑顔レベルの数値が高まるにつれて、笑顔表情は微笑程度から大笑いへとその笑顔の度合いが大きくなってゆく。同様に、顔表情レベルデータ記憶部26は、泣き顔、怒り顔などについてもレベルデータを記憶している。   The facial expression level data storage unit 26 stores each smile when the facial expression level (facial expression level), for example, the smile level (smile level) is 10%, 20%, 30%,..., 100%. Smile level data (for example, the interval between feature points) representing each feature is stored for each smile level. As the smile level increases, the smile level increases from smile level to big smile level. Similarly, the facial expression level data storage unit 26 stores level data for crying faces, angry faces, and the like.

笑顔の度合いを判定する手法には、例えば、特開2004−46591号公報に開示されている手法を用いることができる。この判定手法は、入力された部分画像の笑顔について笑顔の度合いの評価を行い、笑顔評価値を算出する。笑顔評価の際は、予め記憶されている笑顔データを参照して眉、瞳孔、唇の各要素の形状の評価ポイントを算出し、各評価ポイントを係数により重み付けした上で合算した値を笑顔評価値としている。   As a method for determining the degree of smile, for example, a method disclosed in Japanese Patent Application Laid-Open No. 2004-46591 can be used. This determination method evaluates the degree of smile for the smile of the input partial image, and calculates a smile evaluation value. When evaluating smiles, calculate the evaluation points for the shape of each element of the eyebrows, pupils, and lips by referring to the smile data stored in advance. Value.

自動撮影部27は、顔表情検出部23からの検出信号に応じて撮影レンズ11、絞り12および撮像素子13に動作信号を出力して被写体の自動撮影を行う。この自動撮影は、顔表情検出部23が所定の顔表情、例えば笑顔を検出する毎に1枚の画像を撮像する。   The automatic photographing unit 27 performs automatic photographing of the subject by outputting operation signals to the photographing lens 11, the diaphragm 12, and the image sensor 13 in accordance with the detection signal from the facial expression detecting unit 23. In this automatic photographing, one image is captured every time the facial expression detection unit 23 detects a predetermined facial expression, for example, a smile.

ランキング決定部28は、画像読出し部20によってメモリ16aから読み出された被写体画像データについてランク付けを行う。すなわち、ランキング決定部28は、被写体画像データ毎に付加されている属性データ、例えば、笑顔レベル80%、60%というレベル値に基づいて複数の被写体画像データについて順位を付ける。そして、ランキング結果を表す信号を出力する。   The ranking determining unit 28 ranks the subject image data read from the memory 16a by the image reading unit 20. That is, the ranking determination unit 28 ranks a plurality of subject image data based on attribute data added to each subject image data, for example, level values of smile levels 80% and 60%. And the signal showing a ranking result is output.

顔登録データ記憶部29は、カメラに登録した登録人物の顔画像に基づいた特徴的な顔情報を登録データとして記憶する。なお、この特徴的な顔情報とは、例えば、眉、眼、鼻、唇などの特徴点が持つ特徴量のデータである。   The face registration data storage unit 29 stores characteristic face information based on face images of registered persons registered in the camera as registration data. The characteristic face information is, for example, characteristic amount data of feature points such as eyebrows, eyes, nose, and lips.

識別データ入力部35は、メモリ16aに記録されている画像ファイル中の属性データとして被写体人物を表す個人識別データ、例えば、その人物の名前やニックネームを入力する操作部である。個人識別データの入力により、属性データには、被写体人物の顔表情の種類とその顔表情レベル(例えば、笑顔レベル:80%)と個人名(例えば、Aさん)とが含まれる。そして、画像記録部16は、被写体画像データと、属性データとを関連付けてメモリ16aに記録する。   The identification data input unit 35 is an operation unit for inputting personal identification data representing a subject person, for example, the name or nickname of the person as attribute data in the image file recorded in the memory 16a. Due to the input of the personal identification data, the attribute data includes the type of facial expression of the subject person, the facial expression level (for example, smile level: 80%), and the personal name (for example, Mr. A). Then, the image recording unit 16 records the subject image data and the attribute data in the memory 16a in association with each other.

顔表情設定部36は、被写体人物の顔表情の種類を外部から設定する操作部であり、笑顔を含む複数の顔表情の設定ができる。例えば、顔表情の設定が笑顔であれば、顔表情検出部23は笑顔を検出して検出信号を発生し、自動撮影が行われる。また、顔表情設定部36が笑顔を設定すれば、画像読出し部20は、メモリ16aに記録されている被写体画像データのうち笑顔の被写体画像データを読み出す。   The facial expression setting unit 36 is an operation unit for setting the type of facial expression of the subject person from the outside, and can set a plurality of facial expressions including a smile. For example, if the facial expression setting is a smile, the facial expression detection unit 23 detects a smile, generates a detection signal, and automatic shooting is performed. If the facial expression setting unit 36 sets a smile, the image reading unit 20 reads smile subject image data from the subject image data recorded in the memory 16a.

優先者選定部37は、ランキング決定部28によってランク付けが行われた複数の被写体画像データについて、最上位にランクされた被写体画像データの被写体人物を選定する第1の選定部および最下位にランクされた被写体画像データの被写体人物を選定する第2の選定部を有し、第1の選定部と第2の選定部との間で切換え可能に構成されている。   The prioritizer selection unit 37 ranks the first selection unit and the lowest rank that select the subject person of the highest-ranked subject image data for the plurality of subject image data ranked by the ranking determination unit 28. A second selection unit for selecting a subject person in the subject image data, and is configured to be switchable between the first selection unit and the second selection unit.

これにより、被写体画像データ中に複数の被写体人物が存在し、複数の被写体人物中に第1の選定部によって選定された人物(ランク:最上位)が存在した場合、その人物を他の人物に優先して顔表情を検出して自動撮影を行うことができる。同様に、複数の被写体人物中に第2の選定部によって選定された人物(ランク:最下位)が存在した場合、その人物を他の人物に優先して顔表情を検出して自動撮影を行うことができる。
最上位および最下位にランクされた被写体画像データの被写体人物については、被写体画像データから顔の特徴を表す顔登録データが作成され、この顔登録データが顔登録データ記憶部29に記録される。
As a result, when there are a plurality of subject persons in the subject image data, and the person selected by the first selection unit (rank: highest) exists among the plurality of subject persons, the person is designated as another person. Automatic photographing can be performed by detecting facial expressions with priority. Similarly, when a person (rank: lowest) selected by the second selection unit exists among a plurality of subject persons, the facial expression is detected with priority on the person over other persons, and automatic shooting is performed. be able to.
For the subject person of the subject image data ranked at the top and the bottom, face registration data representing facial features is created from the subject image data, and this face registration data is recorded in the face registration data storage unit 29.

表示制御部41は、ディスプレイ42による表示を制御する。すなわち、表示制御部41は、ディスプレイ42がスルー画像の表示、バッファメモリ14に一時的に記録されている被写体画像の表示、画像記録部16のメモリ16aに保存された被写体画像の再生表示を行なう時の表示態様を制御する。例えば、表示制御部41は、ディスプレイ42に被写体画像のみを表示させたり、属性情報を付加した被写体画像を表示させる。また、表示制御部41は、被写体画像データのサムネイル画像の一覧表示の態様、例えば、サムネイル画像の画面上での配置、ランキング決定部28からの信号に基づくランク表示を制御する。   The display control unit 41 controls display on the display 42. That is, the display control unit 41 displays the through image on the display 42, displays the subject image temporarily recorded in the buffer memory 14, and reproduces and displays the subject image stored in the memory 16a of the image recording unit 16. Controls the display mode of the hour. For example, the display control unit 41 displays only the subject image on the display 42 or displays the subject image with the attribute information added. Further, the display control unit 41 controls the display mode of thumbnail images of subject image data, for example, the display of thumbnail images on the screen and the rank display based on the signal from the ranking determination unit 28.

ディスプレイ42は、表示制御部41の指令により、スルー画像、バッファメモリ14に一時的に記録されている被写体画像、メモリ16aに保存された被写体画像の表示を行い、被写体画像に関連する属性情報の表示を行う。また、ディスプレイ42は、表示制御部41の指令により、サムネイル画像の一覧表示を行う。   The display 42 displays a through image, a subject image temporarily recorded in the buffer memory 14, and a subject image stored in the memory 16a according to a command from the display control unit 41, and displays attribute information related to the subject image. Display. In addition, the display 42 displays a list of thumbnail images according to instructions from the display control unit 41.

画像選択部43は、ディスプレイ42に一覧表示された複数のサムネイル画像の中から任意のサムネイル画像を選択する操作部であり、例えば圧力センサ付きの表示画面(タッチパネル)の場合は、任意のサムネイル画像にタッチすることにより選択操作が可能である。   The image selection unit 43 is an operation unit that selects an arbitrary thumbnail image from a plurality of thumbnail images displayed as a list on the display 42. For example, in the case of a display screen (touch panel) with a pressure sensor, an arbitrary thumbnail image is selected. A selection operation is possible by touching.

以上のように構成された電子スチルカメラは、次のように動作する。
先ず、顔表情設定部36によって所定の顔表情として「笑顔」を設定する。顔検出部21は、スルー画像を顔データ記憶部22の顔データと比較することにより、スルー画像中の被写体人物の顔を検出する。
The electronic still camera configured as described above operates as follows.
First, “smile” is set as a predetermined facial expression by the facial expression setting unit 36. The face detection unit 21 detects the face of the subject person in the through image by comparing the through image with the face data in the face data storage unit 22.

顔表情検出部23は、顔検出部21により検出された顔領域の画像の顔表情を顔表情データ記憶部24に予め記憶されている所定の顔表情データと比較することにより、スルー画像中の被写体人物の顔表情が笑顔であることを検出する。顔表情検出部23は、この笑顔検出により検出信号を出力し、自動撮影部34は、笑顔が検出された被写体の自動撮影を行う。自動撮影によって得られた被写体画像データは、笑顔検出された画像データであることを示す属性データとともにメモリ16aに記録される。   The facial expression detection unit 23 compares the facial expression of the image of the face area detected by the face detection unit 21 with predetermined facial expression data stored in advance in the facial expression data storage unit 24, thereby It is detected that the facial expression of the subject person is a smile. The facial expression detection unit 23 outputs a detection signal based on this smile detection, and the automatic photographing unit 34 performs automatic photographing of a subject in which a smile is detected. The subject image data obtained by the automatic photographing is recorded in the memory 16a together with attribute data indicating that the image data is a smile detected.

顔表情レベル評価部25は、自動撮影によって得られた被写体画像データ中の被写体人物の笑顔について、顔表情レベルデータ記憶部26に記憶された笑顔レベルデータと比較して、この笑顔の度合い(笑顔レベル)を評価し、その評価した笑顔レベルを表す判定信号を出力する。
画像記録部16は、被写体画像データと、その画像データに関する属性データ(例えば、笑顔レベル90%)とを関連付けてメモリ16aに記録する。
The facial expression level evaluation unit 25 compares the smile level of the subject person in the subject image data obtained by automatic shooting with the degree of smile (smile) compared to the smile level data stored in the facial expression level data storage unit 26. Level) and a determination signal representing the evaluated smile level is output.
The image recording unit 16 records subject image data and attribute data related to the image data (for example, smile level 90%) in the memory 16a in association with each other.

画像読出し部20は、メモリ16aから所定の被写体画像データを読み出す。顔表情設定部36によって所定の顔表情として「笑顔」を設定すると、画像読出し部20は、上記の属性データ(例えば、笑顔レベル90%)を利用して検索し、笑顔の被写体人物の被写体画像データを読み出す。   The image reading unit 20 reads predetermined subject image data from the memory 16a. When “smile” is set as the predetermined facial expression by the facial expression setting unit 36, the image reading unit 20 searches using the attribute data (for example, smile level 90%), and the subject image of the smiling subject person Read data.

読み出された被写体画像データに基づく再生画像をディスプレイ42に表示させ、識別データ入力部35によってその再生画像中の被写体人物を表す個人識別データ、例えば、その人物名「Aさん」を入力する。これにより、読み出された被写体画像データの属性データには、笑顔レベル90%のデータに加えて「Aさん」のデータが追記される。そして、画像記録部16は、被写体画像データと、笑顔レベルデータおよび人物名データが含まれる属性データとをメモリ16aに記録する。   A reproduced image based on the read subject image data is displayed on the display 42, and personal identification data representing the subject person in the reproduced image, for example, the person name “Mr. A” is input by the identification data input unit 35. As a result, “Mr. A” data is added to the attribute data of the read subject image data in addition to the smile level 90% data. Then, the image recording unit 16 records subject image data and attribute data including smile level data and person name data in the memory 16a.

上述した動作を繰り返すことにより、複数の被写体画像データについて属性データが作成され、複数の被写体画像データと属性データとがメモリ16aに記録される。
続いて、これら複数の被写体画像データについて笑顔レベルに基づくランキングを決定する動作が行われる。画像読出し部20は、属性データを利用して「笑顔」を検索し、複数の被写体画像データをメモリ16aから読み出す。
By repeating the above-described operation, attribute data is created for a plurality of subject image data, and the plurality of subject image data and attribute data are recorded in the memory 16a.
Subsequently, an operation for determining a ranking based on the smile level for the plurality of subject image data is performed. The image reading unit 20 searches for “smile” using the attribute data, and reads a plurality of subject image data from the memory 16a.

ランキング決定部28は、これらの読み出された被写体画像データについて、笑顔レベル90%、80%というレベル値に基づいて順位を付ける。例えば、笑顔レベル値が90%、80%、80%、70%、60%の属性データにそれぞれ関連する5つの被写体画像データがあった場合、ランキングは、順に第1位、第2位、第2位、第4位、第5位となる。   The ranking determining unit 28 ranks the read subject image data on the basis of smile level 90% and 80% level values. For example, when there are five subject image data related to attribute data with smile level values of 90%, 80%, 80%, 70%, and 60%, the rankings are ranked first, second, 2nd, 4th and 5th.

このようにして、ランキングが決定された複数の被写体画像データのサムネイル画像は、ディスプレイ42に一覧表示される。
図2は、サムネイル一覧表示されたディスプレイ42の画面を模式的に示す図である。図2には、5つのサムネイル画像が属性データとともに示されており、左上段のサムネイル画像に注目すると、サムネイル画像101、ランキングである「第1位」111、人物名である「Aさん」121、笑顔レベルである「90%」131が表示されている。同様に、画面の中央上段のサムネイル画像では、サムネイル画像102、「第2位」112、「Bさん」122、「80%」132が表示されている。他の3つのサムネイル画像についても、符号は省略したが、同様である。
In this way, thumbnail images of a plurality of subject image data for which ranking has been determined are displayed as a list on the display 42.
FIG. 2 is a diagram schematically showing a screen of the display 42 displayed as a thumbnail list. In FIG. 2, five thumbnail images are shown together with the attribute data. When attention is paid to the thumbnail image in the upper left, the thumbnail image 101, the ranking “first” 111, and the person name “Mr. A” 121. “90%” 131 which is a smile level is displayed. Similarly, the thumbnail image 102, “second place” 112, “Mr. B” 122, and “80%” 132 are displayed in the thumbnail image at the upper center of the screen. The same applies to the other three thumbnail images, although the reference numerals are omitted.

なお、図2では、5つのサムネイル画像をランキングの順に配置して表示しているが、5つのサムネイル画像にはそれぞれ順位が付記されているので、必ずしもランキングの順に配置する必要はない。例えば、複数のサムネイル画像を撮影順に配置して表示してもよい。また、図2では、笑顔レベルを数値で表示しているが、グラフ化して、例えば棒グラフのバーの長さで表示してもよい。   In FIG. 2, five thumbnail images are arranged and displayed in the ranking order. However, since the ranking is added to each of the five thumbnail images, it is not always necessary to arrange them in the ranking order. For example, a plurality of thumbnail images may be arranged and displayed in the shooting order. In FIG. 2, the smile level is displayed as a numerical value. However, the smile level may be displayed as a graph, for example, by the bar length of a bar graph.

本実施の形態による電子スチルカメラは以下の作用効果を奏する。
(1)複数のサムネイル画像を被写体人物の笑顔のランキングを付けて一覧表示するので、画面を一見しただけで、笑顔評価の高い画像を認識できる。
(2)複数のサムネイル画像を被写体人物の笑顔のランキングと人物名とを付けて一覧表示するので、画面を一見しただけで、笑顔評価の高い被写体人物の画像を認識できる。
(3)複数のサムネイル画像を被写体人物の笑顔のランキングと人物名と笑顔レベルとを付けて一覧表示するので、画面を一見しただけで、笑顔評価の高い被写体人物の画像を認識でき、同時に笑顔レベルも知ることができる。
The electronic still camera according to the present embodiment has the following effects.
(1) Since a plurality of thumbnail images are displayed in a list with a ranking of the smile of the subject person, an image with a high smile evaluation can be recognized at a glance.
(2) Since a plurality of thumbnail images are displayed in a list with a ranking of the person's smile and the name of the person, it is possible to recognize an image of a person with a high smile evaluation at a glance.
(3) Since multiple thumbnail images are displayed in a list with the smile ranking of the subject person, the name of the person, and the smile level, it is possible to recognize the image of the subject person with a high smile rating at a glance and smile simultaneously. You can also know the level.

本実施の形態による電子スチルカメラは、以下の動作を行うこともできる。
(1)画像の拡大表示
ディスプレイ42に一覧表示された複数のサムネイル画像のうち、画像選択部43によって任意のサムネイル画像を選択することにより、そのサムネイル画像について画像を画面全体に拡大表示することができる。このとき、拡大表示時間を笑顔レベルの高さに応じて変更し、笑顔レベルが高い程、拡大表示時間を長く設定してもよい。例えば、笑顔レベル80%の被写体画像であれば拡大表示時間を5秒間と長くし、笑顔レベル40%の被写体画像であれば拡大表示時間を2秒間と短くする。また、スライドショーの場合は、笑顔レベルが高い被写体画像は、表示再生時間を長く、且つ表示サイズを拡大し、笑顔レベルが低い被写体画像は、表示再生時間を短く、且つ表示サイズを縮小してもよい。
The electronic still camera according to the present embodiment can also perform the following operations.
(1) Enlarged display of an image By selecting an arbitrary thumbnail image from among a plurality of thumbnail images displayed as a list on the display 42 by the image selection unit 43, the thumbnail image can be enlarged and displayed on the entire screen. it can. At this time, the enlargement display time may be changed according to the smile level, and the enlargement display time may be set longer as the smile level is higher. For example, if the subject image has a smile level of 80%, the enlarged display time is lengthened to 5 seconds, and if the subject image has a smile level of 40%, the enlarged display time is shortened to 2 seconds. In the case of a slide show, a subject image with a high smile level has a long display reproduction time and the display size is expanded, and a subject image with a low smile level has a short display reproduction time and a reduction in display size. Good.

(2)同一人物のサムネイル画像の一覧表示
ディスプレイ42に笑顔ランキングを付けて一覧表示された複数のサムネイル画像のうち、画像選択部43によって任意の人物名を選択することにより、その人物のサムネイル画像から成るサムネイル一覧表示に切り換えることができる。このとき、笑顔レベルに応じて各サムネイル画像の表示サイズを変更し、笑顔レベルが高い程、表示サイズを大きく設定してもよい。
(2) List display of thumbnail images of the same person By selecting an arbitrary person name by the image selection unit 43 from a plurality of thumbnail images displayed as a list with a smile ranking on the display 42, thumbnail images of the person are displayed. You can switch to the thumbnail list display that consists of At this time, the display size of each thumbnail image may be changed according to the smile level, and the display size may be set larger as the smile level is higher.

(3)同一レベルのサムネイル画像の一覧表示
ディスプレイ42に笑顔ランキングを付けて一覧表示された複数のサムネイル画像のうち、画像選択部43によって任意の笑顔レベルを選択することにより、その笑顔レベルに等しいレベルのサムネイル画像から成るサムネイル一覧表示に切り換えることができる。
(3) List display of thumbnail images at the same level By selecting an arbitrary smile level by the image selection unit 43 from among a plurality of thumbnail images displayed as a list with a smile ranking on the display 42, it is equal to the smile level. It is possible to switch to a thumbnail list display composed of level thumbnail images.

(4)笑顔ランキングに基づいて選定された人物の優先撮影
ランキング決定部28により、複数の被写体画像データについて笑顔レベルに基づいて順位付けが行われ、最上位と最下位とが決定されると、次の撮影に際して、最上位にランクされた被写体画像データの被写体人物、または最下位にランクされた被写体画像データの被写体人物を優先して笑顔を検出し自動撮影を行うことができる。
先ず、優先者選定部37が最上位にランクされた被写体画像データの被写体人物を優先者として選定する。撮影に際して、スルー画像中に複数の被写体人物がおり、その中に優先者が存在している場合、顔表情検出部23は、顔登録データ記憶部29に記録されている顔登録データにより優先者を認識し、笑顔検出動作を開始する。そして、顔表情検出部23が優先者の笑顔を検出すると、自動撮影部27により自動撮影が行われる。
(4) The priority shooting ranking determining unit 28 of the person selected based on the smile ranking ranks the plurality of subject image data based on the smile level, and when the highest level and the lowest level are determined, At the time of the next shooting, it is possible to perform automatic shooting by detecting a smile with priority given to the subject person of the subject image data ranked highest or the subject person of the subject image data ranked lowest.
First, the priority selection unit 37 selects the subject person of the subject image data ranked at the top as the priority. At the time of shooting, when there are a plurality of subject persons in the through image, and there is a priority person, the facial expression detection unit 23 uses the face registration data recorded in the face registration data storage part 29 to give priority. Is detected and a smile detection operation is started. When the facial expression detection unit 23 detects the priority person's smile, the automatic photographing unit 27 performs automatic photographing.

優先者に対しては、他の被写体人物に優先して笑顔検出と自動撮影が行われる。顔表情検出部23は、優先者の笑顔検出のみを行い、他の被写体人物の笑顔検出は行わず、優先者の笑顔が検出されれば撮影を行う場合と、顔表情検出部23は、スルー画像中の全員の笑顔検出を行うが、優先者は笑顔が1回検出されると撮影を行い、他の被写体人物は笑顔が3回検出されて初めて撮影を行うというように撮影する頻度を異ならせる場合がある。   For the priority person, smile detection and automatic photographing are performed with priority over other subject persons. The facial expression detection unit 23 only detects the priority person's smile, does not detect the smiles of other subject persons, and performs shooting when the priority person's smile is detected. The smiles of all the people in the image are detected, but the priority is taken when the smile is detected once, and the other subjects are photographed for the first time when the smile is detected three times. There is a case to make it.

以上の説明は、最上位にランクされた被写体画像データの被写体人物を優先者と選定した場合であり、最下位にランクされた被写体画像データの被写体人物を優先者と選定した場合も全く同様である。なお、優先者選定部37により、最上位にランクされた被写体画像データの被写体人物の選定と最下位にランクされた被写体画像データの被写体人物の選定とは自由に切り換えることができる。   The above explanation is the case where the subject person of the subject image data ranked at the top is selected as a priority person, and the same applies when the subject person of the subject image data ranked at the bottom part is selected as a priority person. is there. Note that the priority selection unit 37 can freely switch between the selection of the subject person of the subject image data ranked at the top and the selection of the subject person of the subject image data ranked at the bottom.

以下、本実施の形態の電子スチルカメラの変形例について説明する。
上記の実施の形態では、ランキングが決定された複数の被写体画像データのサムネイル画像は、図2に示したように、「第1位」、「第2位」などの順位を付記してディスプレイ42に一覧表示される。図3〜5に示す以下の変形例は、順位を付記しないサムネイル一覧表示の表示態様に関するものであり、同一表示内容には同一符号を付している。
Hereinafter, modifications of the electronic still camera of the present embodiment will be described.
In the above embodiment, the thumbnail images of the plurality of subject image data for which the ranking has been determined are displayed with the order of “first place”, “second place”, etc., as shown in FIG. Are listed. The following modified examples shown in FIGS. 3 to 5 relate to the display mode of the thumbnail list display without ranking, and the same display contents are given the same reference numerals.

図3は、サムネイル一覧表示の第1の変形例であり、図2に示したランキング表示の代わりに、笑顔レベルに応じてサムネイル画像の表示サイズを変更し、笑顔レベル「90%」131のサムネイル画像101aは最も大きいサイズで表示し、笑顔レベル「80%」132のサムネイル画像102aは次に大きいサイズとし、笑顔レベルが低くなるにつれてサイズを小さく表示する。このように表示すると、ランキングが高いサムネイル画像を直観的に識別できる。   FIG. 3 shows a first modification of the thumbnail list display. Instead of the ranking display shown in FIG. 2, the display size of the thumbnail image is changed according to the smile level, and the thumbnail of the smile level “90%” 131 is displayed. The image 101a is displayed in the largest size, the thumbnail image 102a with the smile level “80%” 132 is set to the next largest size, and the size is displayed smaller as the smile level becomes lower. When displayed in this way, a thumbnail image having a high ranking can be intuitively identified.

図4は、サムネイル一覧表示の第2の変形例であり、図2に示したランキング表示の代わりに、ランク順にサムネイル画像をスクロール表示するものである。各サムネイル画像は、図中の矢印で示されるように、次々に画面の下から上へ向かってスクロール表示される。
図5は、サムネイル一覧表示の第3の変形例であり、図2に示したランキング表示の代わりに、サムネイル画像の配置によってランキングも分かるようにしたものである。図5では、画面の左上段の位置を第1位とし、図中の矢印で示されるように、サムネイル画像がランク順に配置される。
FIG. 4 shows a second modification of the thumbnail list display, in which thumbnail images are scrolled in order of rank instead of the ranking display shown in FIG. Each thumbnail image is scroll-displayed one after another from the bottom of the screen, as indicated by the arrows in the figure.
FIG. 5 shows a third modification of the thumbnail list display, in which the ranking is also known by arrangement of thumbnail images instead of the ranking display shown in FIG. In FIG. 5, the top left position of the screen is the first position, and the thumbnail images are arranged in rank order as indicated by the arrows in the figure.

上記の実施の形態では、笑顔などの顔表情を検出すると自動的に撮影する電子スチルカメラについて説明したが、自動撮影部27を有さず、撮影者の意思で撮影を行う電子スチルカメラにも本発明は適用できる。このマニュアル撮影の場合でも、顔表情検出部23により笑顔を検出し、顔表情レベル評価部25により笑顔レベルは評価する。
上記の実施の形態では、電子スチルカメラについて説明したが、本発明は、アプリケーションソフトウエア(画像閲覧編集ソフト)にも適用可能である。
本発明は、その特徴を損なわない限り、以上説明した実施の形態に何ら限定されない。
In the above embodiment, the electronic still camera that automatically shoots when a facial expression such as a smile is detected has been described. The present invention is applicable. Even in the case of this manual photographing, the facial expression detection unit 23 detects a smile, and the facial expression level evaluation unit 25 evaluates the smile level.
In the above embodiment, the electronic still camera has been described. However, the present invention can also be applied to application software (image browsing / editing software).
The present invention is not limited to the embodiments described above as long as the characteristics are not impaired.

16:画像記録部 16a:メモリ
20:画像読出し部 23:顔表情検出部
24:顔表情データ記憶部 25:顔表情レベル評価部
26:顔表情レベルデータ記憶部 27:自動撮影部
28:ランキング決定部 35:識別データ入力部
37:優先者選定部 41:表示制御部
43:画像選択部 101,102:サムネイル画像
16: Image recording unit 16a: Memory 20: Image reading unit 23: Facial expression detection unit 24: Facial expression data storage unit 25: Facial expression level evaluation unit 26: Facial expression level data storage unit 27: Automatic photographing unit 28: Ranking determination Unit 35: Identification data input unit 37: Priority selection unit 41: Display control unit 43: Image selection unit 101, 102: Thumbnail image

Claims (8)

被写体画像データを出力する撮像手段と、
前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
前記被写体人物を表す個人識別情報を入力する入力手段と、
前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、
前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、
前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記選択手段によって選択された前記サムネイル画像を拡大表示すると共に前記顔表情レベルに応じて拡大表示時間を変更することを特徴とする電子スチルカメラ。
Imaging means for outputting subject image data;
Facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression;
Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means ;
Input means for inputting personal identification information representing the subject person;
Storage means for storing the subject image data in association with the personal identification information and the facial expression level;
Reading means for reading a plurality of the subject image data from the storage means;
Ranking determining means for determining a ranking of the plurality of read subject image data based on the facial expression level associated with the subject image data read by the reading means;
Display means for displaying a list of thumbnail images of the plurality of the read subject image data;
Selecting means for selecting an arbitrary thumbnail image from the plurality of thumbnail images displayed in the list ,
The display means additionally displays the ranking and the personal identification information on each of the thumbnail images displayed in the list , enlarges and displays the thumbnail image selected by the selection means, and responds to the facial expression level. An electronic still camera characterized by changing the enlarged display time .
被写体画像データを出力する撮像手段と、
前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
前記被写体人物を表す個人識別情報を入力する入力手段と、
前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示し、当該サムネイル画像の各々に、前記ランキングと前記個人識別情報と数値化またはグラフ化された顔表情レベルとを付記表示する表示手段と、
前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、
前記選択手段により、前記一覧表示された複数の前記サムネイル画像に付記表示された前記顔表情レベルから任意の顔表情レベルが選択されると、
前記表示手段は、前記選択手段によって選択された前記顔表情レベルと等しい顔表情レベルを有する被写体画像データのサムネイル画像を一覧表示することを特徴とする電子スチルカメラ。
Imaging means for outputting subject image data;
Facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression;
Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means;
Input means for inputting personal identification information representing the subject person;
Storage means for storing the subject image data in association with the personal identification information and the facial expression level;
Reading means for reading a plurality of the subject image data from the storage means;
Ranking determining means for determining a ranking of the plurality of read subject image data based on the facial expression level associated with the subject image data read by the reading means;
Display a list of thumbnail images of the plurality of the read subject image data, and display the ranking, the personal identification information, and the numerical expression or graphed facial expression level on each of the thumbnail images. Means,
Selecting means for selecting an arbitrary thumbnail image from the plurality of thumbnail images displayed in the list ,
When an arbitrary facial expression level is selected from the facial expression levels additionally displayed on the thumbnail images displayed in the list by the selection unit,
The electronic still camera , wherein the display means displays a list of thumbnail images of subject image data having a facial expression level equal to the facial expression level selected by the selection means .
請求項1または2に記載の電子スチルカメラにおいて、
前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段を更に備えることを特徴とする電子スチルカメラ。
The electronic still camera according to claim 1 or 2 ,
An electronic still camera, further comprising automatic photographing means for automatically photographing according to a detection output of the facial expression detecting means.
請求項1または2に記載の電子スチルカメラにおいて、
前記個人識別情報は、前記被写体人物の名前とニックネームとの少なくとも一方であることを特徴とする電子スチルカメラ。
The electronic still camera according to claim 1 or 2 ,
The electronic still camera, wherein the personal identification information is at least one of a name and a nickname of the subject person.
請求項1に記載の電子スチルカメラにおいて、
前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記顔表情レベルを数値化またはグラフ化して付記表示することを特徴とする電子スチルカメラ。
The electronic still camera according to claim 1.
The electronic still camera, wherein the display means displays the face expression level as a numerical value or a graph in addition to each of the thumbnail images displayed in the list.
請求項1または2に記載の電子スチルカメラにおいて、
前記選択手段により、前記一覧表示された複数の前記サムネイル画像に付記表示された前記個人識別情報から任意の個人識別情報が選択されると、
前記表示手段は、前記選択手段によって選択された前記個人識別情報を有する被写体画像データのサムネイル画像を一覧表示することを特徴とする電子スチルカメラ。
The electronic still camera according to claim 1 or 2 ,
When arbitrary personal identification information is selected from the personal identification information additionally displayed on the thumbnail images displayed in the list by the selection means,
The electronic still camera, wherein the display means displays a list of thumbnail images of subject image data having the personal identification information selected by the selection means.
被写体画像データを出力する撮像手段と、
前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
前記被写体人物を表す個人識別情報を入力する入力手段と、
前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、
前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、
前記ランキング決定手段によってランキング一位と決定された被写体画像データの被写体人物を優先者と選定する第1の優先者選定手段と、を備え、
前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、
前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第1の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、
前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする電子スチルカメラ。
Imaging means for outputting subject image data;
Facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression;
Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means;
Input means for inputting personal identification information representing the subject person;
Storage means for storing the subject image data in association with the personal identification information and the facial expression level;
Reading means for reading a plurality of the subject image data from the storage means;
Ranking determining means for determining a ranking of the plurality of read subject image data based on the facial expression level associated with the subject image data read by the reading means;
Display means for displaying a list of thumbnail images of the plurality of the read subject image data;
Automatic photographing means for automatically photographing according to the detection output of the facial expression detecting means;
First priority selection means for selecting a subject person of the subject image data determined as the first ranking by the ranking determination means as a priority,
The display means additionally displays the ranking and the personal identification information on each thumbnail image displayed in the list.
The facial expression detecting means has priority when there are a plurality of subject persons in the subject image data and the priority selected by the first priority selecting means is present in the plurality of subject persons. Detecting that the person's facial expression is a predetermined facial expression over the other subject person in the subject image data,
The electronic still camera according to claim 1, wherein the automatic photographing unit automatically photographs in accordance with a detection output of the facial expression detection unit.
被写体画像データを出力する撮像手段と、
前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
前記被写体人物を表す個人識別情報を入力する入力手段と、
前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、
前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、
前記ランキング決定手段によってランキング最下位と決定された被写体画像データの被写体人物を優先者と選定する第2の優先者選定手段と、を備え、
前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、
前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第2の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、
前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする電子スチルカメラ。
Imaging means for outputting subject image data;
Facial expression detection means for detecting that the facial expression of the subject person in the subject image data is a predetermined facial expression;
Level evaluation means for evaluating the facial expression level of the subject person detected by the facial expression detection means;
Input means for inputting personal identification information representing the subject person;
Storage means for storing the subject image data in association with the personal identification information and the facial expression level;
Reading means for reading a plurality of the subject image data from the storage means;
Ranking determining means for determining a ranking of the plurality of read subject image data based on the facial expression level associated with the subject image data read by the reading means;
Display means for displaying a list of thumbnail images of the plurality of the read subject image data;
Automatic photographing means for automatically photographing according to the detection output of the facial expression detecting means;
Second priority selection means for selecting a subject person of the subject image data determined as the lowest ranking by the ranking determination means as a priority,
The display means additionally displays the ranking and the personal identification information on each thumbnail image displayed in the list.
The facial expression detection means has priority when a plurality of subject persons exist in the subject image data and a priority selected by the second priority selection means exists in the plurality of subject persons. Detecting that the person's facial expression is a predetermined facial expression over the other subject person in the subject image data,
The electronic still camera according to claim 1, wherein the automatic photographing unit automatically photographs in accordance with a detection output of the facial expression detection unit.
JP2009028775A 2009-02-10 2009-02-10 Electronic still camera Expired - Fee Related JP5304294B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009028775A JP5304294B2 (en) 2009-02-10 2009-02-10 Electronic still camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009028775A JP5304294B2 (en) 2009-02-10 2009-02-10 Electronic still camera

Publications (2)

Publication Number Publication Date
JP2010187109A JP2010187109A (en) 2010-08-26
JP5304294B2 true JP5304294B2 (en) 2013-10-02

Family

ID=42767505

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009028775A Expired - Fee Related JP5304294B2 (en) 2009-02-10 2009-02-10 Electronic still camera

Country Status (1)

Country Link
JP (1) JP5304294B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5277230B2 (en) * 2010-11-11 2013-08-28 株式会社バッファロー Tag information management device, tag information management system, tag information management program, tag information management method
JP5792977B2 (en) * 2011-03-31 2015-10-14 キヤノン株式会社 Image processing apparatus, image processing method, ophthalmic apparatus, and medical system
JP2013146025A (en) * 2012-01-16 2013-07-25 Canon Inc Imaging apparatus
JP6778006B2 (en) * 2016-03-31 2020-10-28 株式会社 資生堂 Information processing equipment, programs and information processing systems
JP6242995B1 (en) * 2016-12-07 2017-12-06 株式会社Access Information processing apparatus, work recording system, program, and information processing method
WO2018225113A1 (en) * 2017-06-05 2018-12-13 日本電気株式会社 Value determining device, value determining method, recording medium having value determining program recorded thereon, system, and notifying device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4799101B2 (en) * 2005-09-26 2011-10-26 富士フイルム株式会社 Image processing method, apparatus, and program
JP2008022240A (en) * 2006-07-12 2008-01-31 Fujifilm Corp Photographing device, image processor, image file generating method, image processing method, and image processing program
JP4197019B2 (en) * 2006-08-02 2008-12-17 ソニー株式会社 Imaging apparatus and facial expression evaluation apparatus
JP2008078713A (en) * 2006-09-19 2008-04-03 Sony Corp Recording apparatus and method, program, and reproducing apparatus and method
JP4453721B2 (en) * 2007-06-13 2010-04-21 ソニー株式会社 Image photographing apparatus, image photographing method, and computer program

Also Published As

Publication number Publication date
JP2010187109A (en) 2010-08-26

Similar Documents

Publication Publication Date Title
JP4794584B2 (en) Imaging device, image display device, and program thereof
JP5195120B2 (en) Digital camera
JP4645685B2 (en) Camera, camera control program, and photographing method
JP5304294B2 (en) Electronic still camera
US8077216B2 (en) Image pickup apparatus with a human face detecting function, method and program product for detecting a human face
JP5157647B2 (en) camera
JP4732303B2 (en) Imaging device
JP6176991B2 (en) Information processing apparatus, control method thereof, and program
JP5181841B2 (en) Imaging apparatus, imaging control program, image reproducing apparatus, and image reproducing program
JP2013121097A (en) Imaging apparatus, imaging method, image generating apparatus, image generating method and program
US8174567B2 (en) Digital photographing apparatus, method of controlling the apparatus, and recording medium having recorded thereon program for executing the method
JP5157704B2 (en) Electronic still camera
JP5272797B2 (en) Digital camera
JP2017212755A (en) Display device
JP5157761B2 (en) Electronic still camera
JP5434096B2 (en) Digital camera
JP5200959B2 (en) Digital camera
JP5167964B2 (en) Display control apparatus, display control method, and program
JP5293223B2 (en) Digital camera
JP2010171849A (en) Image reproducing apparatus and electronic camera
JP2010034686A (en) Digital camera
JP2010068297A (en) Digital camera
JP2010226485A (en) Image processing apparatus and digital camera
JP2005157961A (en) Imaging apparatus and image processor
JP2012015912A (en) Electronic device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120921

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130528

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130610

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5304294

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees