JP2011029978A5 - - Google Patents

Download PDF

Info

Publication number
JP2011029978A5
JP2011029978A5 JP2009174158A JP2009174158A JP2011029978A5 JP 2011029978 A5 JP2011029978 A5 JP 2011029978A5 JP 2009174158 A JP2009174158 A JP 2009174158A JP 2009174158 A JP2009174158 A JP 2009174158A JP 2011029978 A5 JP2011029978 A5 JP 2011029978A5
Authority
JP
Japan
Prior art keywords
image
smile
subject
images
predetermined state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009174158A
Other languages
Japanese (ja)
Other versions
JP5488961B2 (en
JP2011029978A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2009174158A priority Critical patent/JP5488961B2/en
Priority claimed from JP2009174158A external-priority patent/JP5488961B2/en
Publication of JP2011029978A publication Critical patent/JP2011029978A/en
Publication of JP2011029978A5 publication Critical patent/JP2011029978A5/ja
Application granted granted Critical
Publication of JP5488961B2 publication Critical patent/JP5488961B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上記目的達成のため、本発明による画像処理装置は、被写体を所定の時間間隔で撮影する撮影手段と、前記撮影手段による撮影中において、逐次撮影されていく画像に基づいて、前記被写体の顔の表情が笑顔になったタイミングを検出する笑顔検出手段と、前記笑顔検出手段により検出されたタイミングに基づいて、前記撮影手段により撮影中の画像の中から、前記被写体の顔の表情が笑顔になったときの画像である笑顔画像と、前記被写体の顔の表情が笑顔になる前または後の画像である非笑顔画像を特定し、この特定された笑顔画像と非笑顔画像とを含む複数の画像を関連付けて記録する記録手段と、前記記録手段により記録された、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生する再生手段とを備えることを特徴とする。
また、好ましい態様として更に、前記記録手段は、前記笑顔検出手段による検出タイミングの画像を前記笑顔画像として特定するとともに、この笑顔画像から前または後へと順番に非笑顔の状態となる画像の位置を検索し、この検索された位置の画像を前記非笑顔画像として特定することを特徴とする。
また、好ましい態様として更に、前記記録手段は、前記特定された笑顔画像から後へと順番に非笑顔の状態となる画像の位置を検索して非笑顔画像を特定し、
前記再生手段は、前記笑顔画像と非笑顔画像が撮影された時間的な順番を逆転して再生することで、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生することを特徴とする。
また、好ましい態様として更に、前記撮影手段により所定の時間間隔で撮影された画像を、所定枚数または所定時間分、循環的に保持することにより、前記被写体が所定の状態になる前の複数の画像を保持する保持手段を更に備え、
前記記録手段は更に、前記保持手段に保持されている画像の中から、前記笑顔画像を特定するとともに、この特定された笑顔画像から前へと順番に非笑顔の状態となる画像の位置を検索して非笑顔画像を特定することを可能にしたことを特徴とする。
また、好ましい態様として更に、前記再生手段は、前記記録手段により記録された、前記笑顔画像と非笑顔画像に基づいて、前記被写体の顔の表情が、該笑顔画像における顔の表情と該非笑顔画像における顔の表情の中間の表情となる画像を補間して生成することで、前記被写体の顔の表情が非笑顔状態から笑顔状態へと連続的に変化するように画像再生することを特徴とする。
For the purposes achieved, the image processing apparatus according to the present invention includes a photographing unit for photographing a subject at a predetermined time interval, during by that shooting in the shooting means, based on an image will be sequentially captured, the object Smile detection means for detecting the timing when the facial expression becomes a smile , and based on the timing detected by the smile detection means , the facial expression of the subject is smiling from the image being photographed by the photographing means. A plurality of images including a smile image that is an image when the subject becomes a non-smile image that is an image before or after the facial expression of the subject becomes a smile , and the identified smile image and non-smile image and recording means for recording in association with the image, recorded by the recording means, on the basis of the plurality of images including a smiling face image and a non-smiling face image, the facial expression of the face of the subject from a non-smiling state It comprising: a reproduction means for image reproduction as continuously changes to the state of the face.
Further, as a preferable aspect, the recording unit specifies an image at a detection timing by the smile detection unit as the smile image, and a position of an image that is in a non-smile state in order from the smile image forward or backward. And the image at the searched position is specified as the non-smile image.
Further, as a preferred aspect, the recording means specifies a non-smiling image by searching for a position of an image that is in a non-smiling state sequentially from the specified smiling image,
The reproduction means continuously changes the facial expression of the subject from a non-smile state to a smile state by reversing the time order in which the smile image and the non-smile image were taken. The image is reproduced as described above.
Further, as a preferred aspect, a plurality of images before the subject is in a predetermined state are obtained by cyclically holding a predetermined number of images or a predetermined time for images captured by the imaging unit at a predetermined time interval. Holding means for holding
The recording means further specifies the smile image from the images held in the holding means, and searches for the position of the image that is in a non-smile state in order from the specified smile image. Thus, it is possible to specify a non-smiling image.
Further, as a preferred aspect, the reproducing means is further configured such that, based on the smile image and the non-smile image recorded by the recording means, the facial expression of the subject is the facial expression in the smile image and the non-smile image. The image is reproduced so that the facial expression of the subject continuously changes from a non-smiling state to a smiling state by interpolating and generating an image that is an intermediate facial expression of the facial expression in .

また、好ましい態様として更に、前記記録手段は、前記被写体が所定の状態になったときの画像と、前記所定の状態になる前または後の複数の画像とを含む画像グループを、前記被写体が所定の状態になったときの画像を識別可能なファイル形式で記録することを特徴とする。 Further, as a preferred aspect , the recording unit may further include an image group including an image when the subject is in a predetermined state and a plurality of images before or after the subject is in the predetermined state. It is characterized in that an image when the state is reached is recorded in an identifiable file format.

また、好ましい態様として更に、前記記録手段は、前記被写体が所定の状態になったときの画像と、前記所定の状態になる前または後の複数の画像とを含む画像グループを、それぞれの画像の時系列関係が特定可能なファイル形式で記録することを特徴とする。 Further, as a preferable aspect , the recording unit further includes an image group including an image when the subject is in a predetermined state and a plurality of images before or after the subject is in the predetermined state. It is recorded in a file format in which the time series relationship can be specified.

また、好ましい態様として更に、前記再生手段は、前記記録手段により記録された画像グループ内の複数画像を、前記ファイル形式により特定される時系列関係の順に再生することを特徴とする。 In a preferred aspect , the reproducing means further reproduces a plurality of images in the image group recorded by the recording means in the order of time series specified by the file format.

また、好ましい態様として更に、前記記録手段により記録された複数の画像グループについて、前記ファイル形式により特定される前記被写体が所定の状態になったときの画像に基づく参照画像を生成して一覧表示する表示手段と、前記一覧表示された参照画像から前記再生手段により再生させる一連の画像を指定する指定手段とを更に備え、前記再生手段は、前記指定手段により指定された参照画像に対応する画像グループを対象として、該画像グループ内の前記被写体が所定の状態になったときの画像と、前記所定の状態になる前または後の複数の画像とに基づいて、前記被写体が非所定状態から前記所定状態へと連続的に変化するように画像再生することを特徴とする。 Further, as a preferred aspect, for a plurality of image groups recorded by the recording means, reference images based on images when the subject specified by the file format is in a predetermined state are generated and displayed in a list. Display means; and designation means for designating a series of images to be reproduced by the reproduction means from the list-displayed reference images, wherein the reproduction means includes an image group corresponding to the reference image designated by the designation means The subject is moved from the non-predetermined state to the predetermined state based on an image when the subject in the image group is in a predetermined state and a plurality of images before or after the predetermined state. It is characterized in that an image is reproduced so as to continuously change to a state.

また、好ましい態様として更に、前記撮影手段により所定の時間間隔で撮影された画像を、所定枚数または所定時間分、循環的に保持することにより、前記被写体が所定の状態になる前の複数の画像を保持する保持手段を更に備え、前記記録手段は、前記所定状態検出手段により検出された前記被写体が所定の状態になったときの画像と、前記保持手段に保持されている前記所定の状態になる前の複数の画像とを関連付けて記録し、前記再生手段は、前記記録手段により記録された、前記被写体が所定の状態になったときの画像と、前記所定の状態になる前の複数の画像とに基づいて、前記被写体が非所定状態から前記所定状態へと連続的に変化するように画像再生することを特徴とする。 Further, as a preferred aspect, a plurality of images before the subject is in a predetermined state are obtained by cyclically holding a predetermined number of images or a predetermined time for images captured by the imaging unit at a predetermined time interval. Holding means for holding the image, wherein the recording means has an image when the subject detected by the predetermined state detecting means is in a predetermined state and the predetermined state held by the holding means. A plurality of images before being recorded, and the reproduction unit records the images recorded by the recording unit when the subject is in a predetermined state and the plurality of images before the predetermined state is reached. Based on the image, the image is reproduced such that the subject continuously changes from the non-predetermined state to the predetermined state.

また、好ましい態様として更に、前記所定状態検出手段により、前記被写体が所定の状態になったことが検出されると、前記被写体が所定の状態になったときの画像と、前記被写体が所定の状態になった後の複数の画像とを保持する保持手段を更に具備し、前記記録手段は、前記所定状態検出手段により検出された前記被写体が所定の状態になったときの画像と、前記保持手段に保持されている前記所定の状態になった後の複数の画像とを関連付けて記録し、前記再生手段は、前記記録手段により記録された、前記被写体が所定の状態になったときの画像と、前記所定の状態になった後の複数の画像とに基づいて、前記被写体が非所定状態から前記所定状態へと連続的に変化するような画像再生を行うことを特徴とする。 Further, as a preferred aspect, when the predetermined state detecting means detects that the subject has entered a predetermined state, an image when the subject has entered a predetermined state and the subject are in a predetermined state Holding means for holding a plurality of images after becoming the image, and the recording means includes an image when the subject detected by the predetermined state detecting means is in a predetermined state, and the holding means A plurality of images that have been held in the predetermined state and recorded in association with each other, and the reproduction unit records the image recorded by the recording unit when the subject is in the predetermined state. The image reproduction is performed such that the subject continuously changes from the non-predetermined state to the predetermined state based on the plurality of images after the predetermined state is reached.

また、好ましい態様として更に、前記被写体が所定の状態になったときの画像と、前記所定の状態になった後の複数の画像とに基づいて、各画像の中間状態の画像を生成する中間画像生成手段を更に備え、前記記録手段は、前記被写体が所定の状態になったときの画像と、前記保持手段に保持されている前記所定の状態になった後の複数の画像と、前記中間画像生成手段により生成された前記中間状態の画像とを、時系列関係が特定可能なファイル形式で記録することを特徴とする。 Further, as a preferred aspect, an intermediate image that generates an intermediate state image of each image based on an image when the subject is in a predetermined state and a plurality of images after the predetermined state is reached. And a recording unit configured to generate an image when the subject is in a predetermined state, a plurality of images after the predetermined state is held in the holding unit, and the intermediate image. The intermediate state image generated by the generation unit is recorded in a file format in which a time-series relationship can be specified.

また、上記目的達成のため、本発明による画像処理方法は、被写体を所定の時間間隔で撮影するステップと、前記撮影中において、逐次撮影されていく画像に基づいて、前記被写体の顔の表情が笑顔になったタイミングを検出するステップと、前記検出されたタイミングに基づいて、前記撮影手段により撮影中の画像の中から、前記被写体の顔の表情が笑顔になったときの画像である笑顔画像と、前記被写体の顔の表情が笑顔になる前または後の画像である非笑顔画像を特定し、この特定された笑顔画像と非笑顔画像とを含む複数の画像を関連付けて記録するステップと、前記記録された前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生するステップと
を含むことを特徴とする。
In order to achieve the above object, an image processing method according to the present invention includes a step of photographing a subject at a predetermined time interval, and a facial expression of the subject based on images sequentially photographed during the photographing. detecting the timing became smiling, based on the detected timing, from an image being captured by the imaging means, a smile image facial expression of the subject is an image when it becomes smile Identifying a non-smiling image that is an image before or after the facial expression of the subject becomes a smile, and associating and recording a plurality of images including the identified smiling image and non-smiling image ; based on a plurality of images containing said recorded the smile image and unsmiling image, based on a plurality of images containing said smile image and unsmiling image, the facial expression of the face of the subject is a non-smiling Characterized in that it comprises a step of image reproduction to continuously change from state to smile state.

また、上記目的達成のため、本発明によるプログラムは、画像処理装置のコンピュータに、被写体を所定の時間間隔で撮影する撮影機能、前記撮影機能による撮影中において、逐次撮影されていく画像に基づいて、前記被写体の顔の表情が笑顔になったタイミングを検出する笑顔検出機能、前記笑顔検出機能により検出されたタイミングに基づいて、前記撮影機能により撮影中の画像の中から、前記被写体の顔の表情が笑顔になったときの画像である笑顔画像と、前記被写体の顔の表情が笑顔になる前または後の画像である非笑顔画像を特定し、この特定された笑顔画像と非笑顔画像とを含む複数の画像を関連付けて記録する記録機能、前記記録機能により記録された、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生する再生機能を実行させることを特徴とする。 Also, for the purposes achieved, the program according to the present invention causes a computer of an image processing apparatus, photographing function for photographing a subject at predetermined time intervals, during the photographing function by that shooting, the image will be sequentially photographed based on, smile detection function expression of the face of the subject to detect the timing became smiling, based on the detection timing by the smile detection function, from the image being captured by the imaging function, the subject A smile image that is an image when a facial expression becomes a smile and a non-smile image that is an image before or after the facial expression of the subject becomes a smile are identified, and the identified smile image and non-smile recording function for recording a plurality of associated images including the image, the recorded by the recording function based on said plurality of images including a smiling face image and a non-smiling face image, the smile image And based on a plurality of images including a non-smiling face image, and characterized in that to execute a playback function expression of the face of the subject is image reproduction as continuously changes to smile from the unsmiling state condition To do.

Claims (14)

被写体を所定の時間間隔で撮影する撮影手段と、
前記撮影手段による撮影中において、逐次撮影されていく画像に基づいて、前記被写体の顔の表情が笑顔になったタイミングを検出する笑顔検出手段と、
前記笑顔検出手段により検出されたタイミングに基づいて、前記撮影手段により撮影中の画像の中から、前記被写体の顔の表情が笑顔になったときの画像である笑顔画像と、前記被写体の顔の表情が笑顔になる前または後の画像である非笑顔画像を特定し、この特定された笑顔画像と非笑顔画像とを含む複数の画像を関連付けて記録する記録手段と、
前記記録手段により記録された、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生する再生手段と
を備えることを特徴とする画像処理装置。
Photographing means for photographing a subject at predetermined time intervals;
During imaging the that by the imaging means, and the smile detection unit that sequentially based on captured by going image, detects the timing at which the facial expressions of the subject becomes smile,
Based on the timing detected by the smile detection means , from among the images being photographed by the photographing means , a smile image that is an image when the facial expression of the subject becomes a smile , and the face of the subject A recording unit that identifies a non-smiling image that is an image before or after the facial expression becomes a smile , and records a plurality of images including the identified smiling image and the non-smiling image in association with each other;
Based on a plurality of images including the smile image and the non-smile image recorded by the recording means, the image is such that the facial expression of the subject continuously changes from a non-smile state to a smile state . An image processing apparatus comprising: a reproducing means for reproducing.
前記記録手段は、前記笑顔検出手段による検出タイミングの画像を前記笑顔画像として特定するとともに、この笑顔画像から前または後へと順番に非笑顔の状態となる画像の位置を検索し、この検索された位置の画像を前記非笑顔画像として特定することを特徴とする請求項1に記載の画像処理装置。The recording unit specifies an image at a detection timing by the smile detection unit as the smile image, and searches for a position of an image that is in a non-smiling state in order from the smile image to the front or the back. The image processing apparatus according to claim 1, wherein an image at a selected position is specified as the non-smiling image. 前記記録手段は、前記特定された笑顔画像から後へと順番に非笑顔の状態となる画像の位置を検索して非笑顔画像を特定し、The recording means specifies a non-smiling image by searching for a position of an image that is in a non-smiling state in order from the identified smiling image,
前記再生手段は、前記笑顔画像と非笑顔画像が撮影された時間的な順番を逆転して再生することで、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生することを特徴とする請求項2に記載の画像処理装置。The reproduction means continuously changes the facial expression of the subject from a non-smile state to a smile state by reversing the time order in which the smile image and the non-smile image were taken. The image processing apparatus according to claim 2, wherein the image is reproduced as described above.
前記撮影手段により所定の時間間隔で撮影された画像を、所定枚数または所定時間分、循環的に保持することにより、前記被写体が所定の状態になる前の複数の画像を保持する保持手段を更に備え、Holding means for holding a plurality of images before the subject is in a predetermined state by holding the images photographed by the photographing means at predetermined time intervals in a cyclic manner for a predetermined number or a predetermined time. Prepared,
前記記録手段は更に、前記保持手段に保持されている画像の中から、前記笑顔画像を特定するとともに、この特定された笑顔画像から前へと順番に非笑顔の状態となる画像の位置を検索して非笑顔画像を特定することを可能にしたことを特徴とする請求項2または3に記載の画像処理装置。The recording means further specifies the smile image from the images held in the holding means, and searches for the position of the image that is in a non-smile state in order from the specified smile image. The image processing apparatus according to claim 2, wherein a non-smiling image can be specified.
前記再生手段は、前記記録手段により記録された、前記笑顔画像と非笑顔画像に基づいて、前記被写体の顔の表情が、該笑顔画像における顔の表情と該非笑顔画像における顔の表情の中間の表情となる画像を補間して生成することで、前記被写体の顔の表情が非笑顔状態から笑顔状態へと連続的に変化するように画像再生することを特徴とする請求項1乃至4のいずれかに記載の画像処理装置。Based on the smile image and the non-smile image recorded by the recording unit, the reproduction unit has a facial expression of the subject intermediate between the facial expression in the smile image and the facial expression in the non-smile image. The image is reproduced so that the facial expression of the subject continuously changes from a non-smiling state to a smiling state by interpolating and generating an image that becomes a facial expression. An image processing apparatus according to claim 1. 前記記録手段は、
前記被写体が所定の状態になったときの画像と、前記所定の状態になる前または後の複数の画像とを含む画像グループを、前記被写体が所定の状態になったときの画像を識別可能なファイル形式で記録することを特徴とする請求項1乃至5のいずれかに記載の画像処理装置。
The recording means includes
An image group including an image when the subject is in a predetermined state and a plurality of images before or after the predetermined state can be identified as an image when the subject is in the predetermined state 6. The image processing apparatus according to claim 1, wherein the image processing apparatus records in a file format.
前記記録手段は、
前記被写体が所定の状態になったときの画像と、前記所定の状態になる前または後の複数の画像とを含む画像グループを、それぞれの画像の時系列関係が特定可能なファイル形式で記録することを特徴とする請求項1乃至6のいずれかに記載の画像処理装置。
The recording means includes
An image group including an image when the subject is in a predetermined state and a plurality of images before or after the predetermined state is recorded in a file format in which the time-series relationship of each image can be specified The image processing apparatus according to claim 1, wherein the image processing apparatus is an image processing apparatus.
前記再生手段は、
前記記録手段により記録された画像グループ内の複数画像を、前記ファイル形式により特定される時系列関係の順に再生することを特徴とする請求項1乃至7のいずれかに記載の画像処理装置。
The reproducing means includes
8. The image processing apparatus according to claim 1 , wherein a plurality of images in the image group recorded by the recording unit are reproduced in the order of time series specified by the file format.
前記記録手段により記録された複数の画像グループについて、前記ファイル形式により特定される前記被写体が所定の状態になったときの画像に基づく参照画像を生成して一覧表示する表示手段と、
前記一覧表示された参照画像から前記再生手段により再生させる一連の画像を指定する指定手段と
を更に備え、
前記再生手段は、
前記指定手段により指定された参照画像に対応する画像グループを対象として、該画像グループ内の前記被写体が所定の状態になったときの画像と、前記所定の状態になる前または後の複数の画像とに基づいて、前記被写体が非所定状態から前記所定状態へと連続的に変化するように画像再生することを特徴とする請求項6乃至8のいずれかに記載の画像処理装置。
Display means for generating and displaying a list of reference images based on images when the subject specified by the file format is in a predetermined state for a plurality of image groups recorded by the recording means;
Designating means for designating a series of images to be reproduced by the reproducing means from the list-displayed reference images;
The reproducing means includes
Targeting an image group corresponding to the reference image specified by the specifying means, an image when the subject in the image group is in a predetermined state and a plurality of images before or after the predetermined state is reached 9. The image processing apparatus according to claim 6 , wherein the image is reproduced so that the subject continuously changes from the non-predetermined state to the predetermined state.
前記撮影手段により所定の時間間隔で撮影された画像を、所定枚数または所定時間分、循環的に保持することにより、前記被写体が所定の状態になる前の複数の画像を保持する保持手段を更に備え、
前記記録手段は、
前記所定状態検出手段により検出された前記被写体が所定の状態になったときの画像と、前記保持手段に保持されている前記所定の状態になる前の複数の画像とを関連付けて記録し、
前記再生手段は、
前記記録手段により記録された、前記被写体が所定の状態になったときの画像と、前記所定の状態になる前の複数の画像とに基づいて、前記被写体が非所定状態から前記所定状態へと連続的に変化するように画像再生する
ことを特徴とする請求項1乃至9のいずれかに記載の画像処理装置。
Holding means for holding a plurality of images before the subject is in a predetermined state by holding the images photographed by the photographing means at predetermined time intervals in a cyclic manner for a predetermined number or a predetermined time. Prepared,
The recording means includes
An image when the subject detected by the predetermined state detection unit is in a predetermined state and a plurality of images before the predetermined state held by the holding unit are recorded in association with each other.
The reproducing means includes
The subject is changed from the non-predetermined state to the predetermined state based on the image recorded by the recording unit when the subject is in a predetermined state and a plurality of images before the predetermined state is reached. The image processing apparatus according to claim 1 , wherein the image is reproduced so as to change continuously.
前記所定状態検出手段により、前記被写体が所定の状態になったことが検出されると、前記被写体が所定の状態になったときの画像と、前記被写体が所定の状態になった後の複数の画像とを保持する保持手段を更に具備し、
前記記録手段は、
前記所定状態検出手段により検出された前記被写体が所定の状態になったときの画像と、前記保持手段に保持されている前記所定の状態になった後の複数の画像とを関連付けて記録し、
前記再生手段は、
前記記録手段により記録された、前記被写体が所定の状態になったときの画像と、前記所定の状態になった後の複数の画像とに基づいて、前記被写体が非所定状態から前記所定状態へと連続的に変化するような画像再生を行う
ことを特徴とする請求項1乃至9のいずれかに記載の画像処理装置。
When the predetermined state detecting means detects that the subject has entered a predetermined state, an image when the subject has entered a predetermined state and a plurality of images after the subject has entered the predetermined state A holding means for holding the image;
The recording means includes
An image when the subject detected by the predetermined state detection unit is in a predetermined state and a plurality of images after the predetermined state held by the holding unit are recorded in association with each other.
The reproducing means includes
The subject is changed from the non-predetermined state to the predetermined state based on the image recorded by the recording unit when the subject is in a predetermined state and a plurality of images after the predetermined state is reached. The image processing apparatus according to claim 1 , wherein the image reproduction is performed so as to continuously change.
前記被写体が所定の状態になったときの画像と、前記所定の状態になった後の複数の画像とに基づいて、各画像の中間状態の画像を生成する中間画像生成手段を更に備え、
前記記録手段は、
前記被写体が所定の状態になったときの画像と、前記保持手段に保持されている前記所定の状態になった後の複数の画像と、前記中間画像生成手段により生成された前記中間状態の画像とを、時系列関係が特定可能なファイル形式で記録する
ことを特徴とする請求項11に記載の画像処理装置。
An intermediate image generating means for generating an intermediate state image of each image based on an image when the subject is in a predetermined state and a plurality of images after the predetermined state;
The recording means includes
An image when the subject is in a predetermined state, a plurality of images after the predetermined state is held in the holding unit, and an image in the intermediate state generated by the intermediate image generating unit The image processing apparatus according to claim 11 , wherein the time-series relationship is recorded in a file format that can identify the time-series relationship.
被写体を所定の時間間隔で撮影するステップと、
前記撮影中において、逐次撮影されていく画像に基づいて、前記被写体の顔の表情が笑顔になったタイミングを検出するステップと、
前記検出されたタイミングに基づいて、前記撮影手段により撮影中の画像の中から、前記被写体の顔の表情が笑顔になったときの画像である笑顔画像と、前記被写体の顔の表情が笑顔になる前または後の画像である非笑顔画像を特定し、この特定された笑顔画像と非笑顔画像とを含む複数の画像を関連付けて記録するステップと、
前記記録された前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生するステップと
を含むことを特徴とする画像処理方法。
Photographing a subject at predetermined time intervals;
Detecting the timing when the facial expression of the subject becomes a smile based on images that are sequentially photographed during the photographing ;
Based on the detected timing, from an image being captured by the imaging means, and smile image facial expression of the subject is an image when it becomes a smile, the expression of the face of the subject is smiling Identifying a non-smile image that is a before or after image, and associating and recording a plurality of images including the identified smile image and non-smile image ;
Based on a plurality of images including the recorded smile image and a non-smile image , based on a plurality of images including the smile image and a non-smile image, the facial expression of the subject from a state of non-smile And a step of reproducing an image so as to continuously change to a smiling state .
画像処理装置のコンピュータに、
被写体を所定の時間間隔で撮影する撮影機能、
前記撮影機能による撮影中において、逐次撮影されていく画像に基づいて、前記被写体の顔の表情が笑顔になったタイミングを検出する笑顔検出機能、
前記笑顔検出機能により検出されたタイミングに基づいて、前記撮影機能により撮影中の画像の中から、前記被写体の顔の表情が笑顔になったときの画像である笑顔画像と、前記被写体の顔の表情が笑顔になる前または後の画像である非笑顔画像を特定し、この特定された笑顔画像と非笑顔画像とを含む複数の画像を関連付けて記録する記録機能、
前記記録機能により記録された、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記笑顔画像と非笑顔画像とを含む複数の画像に基づいて、前記被写体の顔の表情が非笑顔の状態から笑顔の状態へと連続的に変化するように画像再生する再生機能
を実行させることを特徴とするプログラム。
In the computer of the image processing device,
Shooting function for shooting the subject at predetermined time intervals,
Wherein during by that photography shooting function, based on an image will be sequentially captured, smile detection function expression of the face of the subject to detect the timing became smiling,
Based on the timing detected by the smile detection function , a smile image , which is an image when the facial expression of the subject is smiling , is selected from the images being shot by the shooting function, and the face of the subject. A recording function that identifies a non-smiling image that is an image before or after the facial expression becomes a smile and associates and records a plurality of images including the identified smiling image and non-smiling image ,
Based on the plurality of images including the smile image and the non-smile image recorded by the recording function, based on the plurality of images including the smile image and the non-smile image, the facial expression of the subject is not A program characterized by executing a playback function for playing back images so as to continuously change from a smiling state to a smiling state .
JP2009174158A 2009-07-27 2009-07-27 Image processing apparatus, image processing method, and program Expired - Fee Related JP5488961B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009174158A JP5488961B2 (en) 2009-07-27 2009-07-27 Image processing apparatus, image processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009174158A JP5488961B2 (en) 2009-07-27 2009-07-27 Image processing apparatus, image processing method, and program

Publications (3)

Publication Number Publication Date
JP2011029978A JP2011029978A (en) 2011-02-10
JP2011029978A5 true JP2011029978A5 (en) 2012-08-02
JP5488961B2 JP5488961B2 (en) 2014-05-14

Family

ID=43638176

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009174158A Expired - Fee Related JP5488961B2 (en) 2009-07-27 2009-07-27 Image processing apparatus, image processing method, and program

Country Status (1)

Country Link
JP (1) JP5488961B2 (en)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004046591A (en) * 2002-07-12 2004-02-12 Konica Minolta Holdings Inc Picture evaluation device
JP2004208210A (en) * 2002-12-26 2004-07-22 Megachips System Solutions Inc Image editing system
JP4867310B2 (en) * 2004-11-25 2012-02-01 カシオ計算機株式会社 CAMERA, RECORDED IMAGE RECORDING / DISPLAY METHOD, AND PROGRAM
JP4666657B2 (en) * 2007-03-28 2011-04-06 オリンパスイメージング株式会社 Image reproduction apparatus, imaging apparatus, image display program, recording medium, and image display method
JP4829186B2 (en) * 2007-07-27 2011-12-07 オリンパスイメージング株式会社 Imaging device
JP4720810B2 (en) * 2007-09-28 2011-07-13 富士フイルム株式会社 Image processing apparatus, imaging apparatus, image processing method, and image processing program
JP2009118009A (en) * 2007-11-02 2009-05-28 Sony Corp Imaging apparatus, method for controlling same, and program
JP4315234B2 (en) * 2008-08-15 2009-08-19 ソニー株式会社 Imaging apparatus and facial expression evaluation apparatus
JP2010226495A (en) * 2009-03-24 2010-10-07 Olympus Imaging Corp Photographing device

Similar Documents

Publication Publication Date Title
US8810688B2 (en) Information processing apparatus and information processing method
US8218833B2 (en) Image capturing apparatus, method of determining presence or absence of image area, and recording medium
JP2011015256A5 (en)
JP2007194819A5 (en)
JP2011010128A5 (en) REPRODUCTION DEVICE, IMAGING DEVICE, ITS CONTROL METHOD, DISPLAY DEVICE, AND DISPLAY METHOD
JP2007019678A5 (en)
TW200536389A (en) Intelligent key-frame extraction from a video
EP2128868A3 (en) Image pickup apparatus, image pickup method, playback control apparatus, playback control method, and program
JP2005341064A5 (en)
JP2010147861A5 (en)
JP2006054746A5 (en)
CN101945212A (en) Image capture device, image processing method and program
JP2011164799A5 (en)
JP2011120061A5 (en)
JP2009033351A5 (en)
JP2008182374A5 (en)
JP2008227820A5 (en)
JP2017201742A5 (en)
JP2015082692A (en) Video editing device, video editing method, and video editing program
JP2009290819A5 (en)
JP2010283412A5 (en) Imaging apparatus, imaging method, reproduction method, image processing apparatus, and image processing program
JP2011029978A5 (en)
JP2013121097A (en) Imaging apparatus, imaging method, image generating apparatus, image generating method and program
JP2009265122A5 (en)
JP5602562B2 (en) Image generating apparatus, reproducing apparatus, reproducing system, image generating method and reproducing method