JP2011234015A - 端末装置 - Google Patents
端末装置 Download PDFInfo
- Publication number
- JP2011234015A JP2011234015A JP2010100865A JP2010100865A JP2011234015A JP 2011234015 A JP2011234015 A JP 2011234015A JP 2010100865 A JP2010100865 A JP 2010100865A JP 2010100865 A JP2010100865 A JP 2010100865A JP 2011234015 A JP2011234015 A JP 2011234015A
- Authority
- JP
- Japan
- Prior art keywords
- face
- detected
- focusing
- smile
- detection unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Automatic Focus Adjustment (AREA)
- Focusing (AREA)
Abstract
【解決手段】端末装置は、撮影により逐次生成された画像から人物の顔を検出する顔検出部と、撮影のための焦点合わせを行う合焦機構と、前記合焦機構の制御を行う制御部とを備え、前記制御部は、前記顔検出部の検出動作が開始されてから初めて顔が検出されると前記合焦機構に対して焦点合わせを行うよう制御し、当該焦点合わせ後において前記顔検出部で顔が検出されなくなるまでは前記合焦機構に対して焦点合わせを抑止するよう制御し、再度顔が検出されると前記合焦機構に対して再度焦点合わせを行うよう制御する。
【選択図】図2
Description
この端末装置では、撮影時において顔認識により被写体の顔を検出すると、検出した顔に焦点を自動的に合わせ、撮影を行う。
顔認識を備えたカメラ機能における焦点合わせの技術が、特許文献1に開示されている。この特許文献1では、被写体の撮影時に当該被写体の顔を検出すると、先ず検出した顔に焦点を自動的に合わせ、設定された焦点を固定し、その後被写体が動くことにより、被写体の撮影位置が変化すると、固定した焦点を解除するものである。
このような場合では、度々焦点合わせが実行され、ユーザの利便性を低下させることも有り得る。
以下、本発明に係る端末装置の一実施形態である携帯電話機について説明する。
1.1 概要
端末装置は、例えば、カメラ付携帯電話機であり、その外観について図1を参照しつつ説明する。図1(a)は、本実施の形態における携帯電話機10の閉状態の斜視図であり、(b)は開状態の斜視図である。また、図1(c)は、携帯電話機10の開状態における背面図である。
筐体11には、液晶ディスプレイ(以下、LCD(Liquid Crystal Monitor))などで構成された表示部106とスピーカ部13とが配置されている。
筐体12には、マイクロフォン14とキー操作部15とが配置されている。また、筐体12の側面にはキー操作部16、17が配置され、背面には、カメラレンズ20が配置されている。
携帯電話機10は、顔検出機能を備えており、撮影時に顔を検出すると、焦点合わせを行う。その後、顔が検出され続けている間は、携帯電話機10は、焦点合わせを行わない。そして、顔が検出されなくなった後に再度顔が検出されると、携帯電話機10は、再度焦点合わせを行う。
以下において、通常撮影及び笑顔撮影における焦点合わせに係る機能について説明する。
ここでは、携帯電話機10の通常撮影及び笑顔撮影における焦点合わせに係る機能に係る構成について説明する。
携帯電話機10は、図2で示すように、画像記憶部101、撮影機構102、顔検出部103、笑顔検出部104、制御部105、表示部106及びユーザ操作部107から構成されている。
(1)画像記憶部101
画像記憶部101は、通常撮影及び笑顔撮影の機能により撮影された画像を記憶する領域を有している。
撮影機構102は、カメラレンズ20と、焦点合わせ、ズーム及び絞り・シャッターを行う機構とを備えており、これらの機構の動作により撮影が行われる。
焦点合わせを行う機構は、カメラレンズ20により写された(撮影された)被写体において、後述する顔検出部103で検出された顔に基づいて焦点合わせを行う。具体的には、検出された顔の領域の中心位置に対してパッシブ方式による距離測定を行う。ここで、ここで、パッシブ方式とは、自然光を用いて測距する方式であり、焦点距離を無限遠からマクロ(例えば、10cm)まで段階的に変更させ、最適な焦点距離を求める方式である。そして、撮影機構102は、パッシブ方式で測定された複数の焦点距離のうち、検出された顔が最も鮮明となる焦点距離を特定する。
顔検出部103は、カメラレンズ20により写された被写体から人の顔を検出するものである。具体的には、顔検出部103は、人物の顔のサンプル画像を予め記憶しており、カメラレンズ20で写された被写体とのマッチング処理を行うことで、顔を検出する。
なお、顔検出については、既知の技術であるので、ここでの詳細な説明は省略する。
(4)笑顔検出部104
笑顔検出部104は、笑顔撮影時に動作し、顔検出部103で検出された顔の笑顔度を検出するものである。具体的には、笑顔検出部104は、笑顔の特徴部位(例えば、目尻、目頭、口元等)のサンプル画像を予め記憶している。笑顔検出部104は、顔検出部103で検出された顔の位置に基づいて、撮影された顔の位置を特定する。そして、笑顔検出部104は、笑顔の特徴部位のサンプル画像と特定した顔における対象部位とのマッチング処理を行い、一致度(笑顔度)を取得する。ここで、笑顔度は、0から100までの整数の何れかが設定される。例えば、笑顔の数値が高いほど、被写体である人物が笑顔であり、笑顔度が100でる場合には満面の笑顔となっている。
(5)制御部105
制御部105は、携帯電話機10における動作全体の制御を行うものである。
ここでは、通常撮影時における機能と笑顔撮影時における機能とについて説明する。
制御部105は、顔検出部103で顔が検出されているか否かを監視する。そして、制御部105は、監視フラグを用いて撮影機構102における焦点合わせの機構の動作を制御する。ここで、監視フラグとは、顔検出部103で顔が検出されているか否かを示す値であり、値“0”は未検出であることを示し、値“1”は検出中であることを示すものである。
制御部105は、監視フラグの値が1である間、つまり顔検出部103で顔が検出されている間は、撮影機構102に対して焦点合わせの動作を抑止するよう制御する。
さらに、制御部105は、ユーザ操作によりキー操作部16が押下されると(シャッターが押下されると)、その時点でカメラレンズ20により写された画像を画像記憶部101へ保存する。
ここで、制御部105は、顔検出部103で顔検出数の増減に関係なく少なくとも1つ以上の顔が検出されている間、つまり顔の検出数が0とならない限り、顔が検出されている状態と判定し、監視フラグは1のままとする。
制御部105は、顔検出部103で顔が検出されているか否かを監視する。検出状況に応じて、撮影機構102の焦点合わせの動作を制御する。笑顔撮影時においても、通常撮影時と同様に監視フラグを用いて撮影機構102の焦点合わせの動作を制御する。なお、監視フラグを用いた焦点合わせの動作の制御については上述しているので、ここでの説明は省略する。
表示部106は、撮影前において、カメラレンズ20に写った(撮影された)被写体を表示する。このとき、顔検出部103で顔が検出されると、検出された顔を囲む枠をも表示する。
(7)ユーザ操作部107
ユーザ操作部107は、キー操作部15、16、17を含むものであり、ユーザによる操作指示を受け付ける機能を有している。具体的には、通常撮影時における画像の保存指示(キー操作部16の押下)を受け付ける。また、通常撮影と笑顔撮影との切り替え指示をも受け付ける。
ここでは、携帯電話機10における通常撮影と笑顔撮影とに係る動作について説明する。
(1)通常撮影時の動作
先ず、通常撮影時の動作について、図3で示す流れ図を用いて説明する。
顔検出部103で顔が検出されると、撮影機構102の焦点合わせ機構は、検出された顔に基づいて焦点合わせを行う(ステップS10)。具体的には、制御部105が、監視フラグが0である場合に顔検出部103で顔が検出されたことを検知すると、撮影機構102に対して焦点合わせの動作を行うよう制御する。
キー操作部16が押下されたと判断する場合(ステップS15における「Yes」)、制御部105は、その時点でカメラレンズ20により写された画像を画像記憶部101へ保存する(ステップS30)。
先ず、笑顔撮影時の動作について、図4で示す流れ図を用いて説明する。
顔検出部103は、カメラレンズ20に写った(撮影された)被写体から顔を検出する(ステップS100)。
顔検出部103で顔が検出されると、撮影機構102の焦点合わせ機構は、検出された顔に基づいて焦点合わせを行う(ステップS105)。具体的には、制御部105が、監視フラグが0である場合に顔検出部103で顔が検出されたことを検知すると、撮影機構102に対して焦点合わせの動作を行うよう制御する。
制御部105は、所定の閾値以上である笑顔度が存在するか否かを判断する(ステップS115)。
所定の閾値以上である笑顔度が存在しないと判断する場合(ステップS115における「No」)、制御部105は、顔検出部103で顔が検出されているか否かを判断する(ステップS120)。顔検出部103で顔が検出されていると判断する場合(ステップS120における「Yes」)、処理はステップS110へ戻る。顔検出部103で顔が検出されていないと判断する場合(ステップS120における「No」)、制御部105は、顔検出部103で顔が再検出されるのを待つ(ステップS125)。具体的には、制御部105は、顔検出部103で顔が再検出されない間は(ステップS125における「No」)、処理はステップS125を繰り返す。顔検出部103で顔が再検出されると(ステップS125における「Yes」)、処理はステップS105へ戻る。
ここでは、具体例を用いて、顔検出時から画像が保存されるまでの間における処理の遷移について説明する。
(1)通常撮影の場合
ここでは、通常撮影時において、検出時から画像が保存されるまでの間に表示部106で表示される画面の遷移に基づいて、処理の遷移を図5を用いて説明する。
その後、シャッターの押下(キー操作部16の押下)がなされると、その時点の画像が保存される(画像D104を参照)。
(2)笑顔撮影の場合
ここでは、笑顔撮影時において、検出時から画像が保存されるまでの間に表示部106で表示される画面の遷移に基づいて、処理の遷移を図6を用いて説明する。
その後、所定の閾値以上である笑顔度の笑顔が検出されると、その時点の画像が保存される(画像D204を参照)。
1.5 変形例
以上、実施の形態及び変形例に基づいて説明したが、本発明は上記の実施の形態及び変形例に限られない。例えば、以下のような変形例が考えられる。
笑顔度の閾値は他の値であってもよい。
(2)上記実施の形態において、顔検出は最大4人としたが、これに限定されない。
顔検出の最大数は、5以上であってもよい。
(4)上記実施の形態において、焦点合わせがなされた後の再焦点合わせは、顔が未検出状態となった後再度顔が検出された場合としたが、これに限定されない。
(5)上記実施の形態において、焦点合わせは、パッシブ方式で行うこととしたが、これに限定されない。
焦点合わせは、アクティブ方式であってもよい。
1.6 補足
(1)本発明の一態様である、 端末装置は、画像から人物の顔を検出する顔検出部と、焦点合わせを行う合焦機構と、前記合焦機構の制御を行う制御部とを備え、前記制御部は、前記顔検出部の検出動作により顔が検出されていない状態から検出された状態になると前記合焦機構に対して焦点合わせを行うよう制御し、当該焦点合わせ後において前記顔検出部で顔が検出されなくなるまでは前記合焦機構に対して焦点合わせを抑止するよう制御することを特徴とする。
(2)ここで、前記合焦機構は、前記制御部から焦点合わせの指示を受け付けると、顔検出部で検出された顔に対する焦点距離を変更しながら、当該顔の鮮明さが最適となる焦点距離を特定するとしてもよい。
(3)ここで、 前記端末装置は、さらに、前記顔検出部で検出された一の顔に対して笑顔を検出する笑顔検出部を備え、前記制御部は、さらに、前記合焦機構による焦点合わせがなされた後、前記笑顔検出部で前記一の顔に対する笑顔が検出されると、笑顔が検出された画像を所定の記憶領域に保存するとしてもよい。
(4)ここで、前記顔検出部は、前記画像中の少なくとも1つ以上の顔を検出し、前記制御部は、前記顔検出部により少なくとも1つ以上の顔が検出されている場合に、前記顔が検出されている状態と判定するとしてもよい。
11、12 筐体
13 スピーカ部
14 マイクロフォン
15、16、17 キー操作部
20 カメラレンズ
101 画像記憶部
102 撮影機構
103 顔検出部
104 笑顔検出部
105 制御部
106 表示部
107 ユーザ操作部
Claims (4)
- 画像から人物の顔を検出する顔検出部と、
焦点合わせを行う合焦機構と、
前記合焦機構の制御を行う制御部とを備え、
前記制御部は、前記顔検出部の検出動作により顔が検出されていない状態から検出された状態になると前記合焦機構に対して焦点合わせを行うよう制御し、当該焦点合わせ後において前記顔検出部で顔が検出されなくなるまでは前記合焦機構に対して焦点合わせを抑止するよう制御する
ことを特徴とする端末装置。 - 前記合焦機構は、
前記制御部から焦点合わせの指示を受け付けると、顔検出部で検出された顔に対する焦点距離を変更しながら、当該顔の鮮明さが最適となる焦点距離を特定する
ことを特徴とする請求項1に記載の端末装置。 - 前記端末装置は、さらに、
前記顔検出部で検出された一の顔に対して笑顔を検出する笑顔検出部を備え、
前記制御部は、さらに、前記合焦機構による焦点合わせがなされた後、前記笑顔検出部で前記一の顔に対する笑顔が検出されると、笑顔が検出された画像を所定の記憶領域に保存する
ことを特徴とする請求項2に記載の端末装置。 - 前記顔検出部は、前記画像中の少なくとも1つ以上の顔を検出し、
前記制御部は、前記顔検出部により少なくとも1つ以上の顔が検出されている場合に、前記顔が検出されている状態と判定する
ことを特徴とする請求項1から3の何れかに記載の端末装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010100865A JP2011234015A (ja) | 2010-04-26 | 2010-04-26 | 端末装置 |
US13/091,421 US8760564B2 (en) | 2010-04-26 | 2011-04-21 | Terminal device and control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010100865A JP2011234015A (ja) | 2010-04-26 | 2010-04-26 | 端末装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011234015A true JP2011234015A (ja) | 2011-11-17 |
JP2011234015A5 JP2011234015A5 (ja) | 2013-03-21 |
Family
ID=44815505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010100865A Pending JP2011234015A (ja) | 2010-04-26 | 2010-04-26 | 端末装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8760564B2 (ja) |
JP (1) | JP2011234015A (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6148431B2 (ja) * | 2010-12-28 | 2017-06-14 | キヤノン株式会社 | 撮像装置およびその制御方法 |
US9307200B2 (en) * | 2014-04-10 | 2016-04-05 | Cisco Technology, Inc. | Use of face and motion detection for best view framing in video conference endpoint |
CN105592260A (zh) * | 2014-10-24 | 2016-05-18 | 中兴通讯股份有限公司 | 一种对焦方法、装置及终端 |
CN107257433B (zh) | 2017-06-16 | 2020-01-17 | Oppo广东移动通信有限公司 | 对焦方法、装置、终端和计算机可读存储介质 |
CN107249100A (zh) * | 2017-06-30 | 2017-10-13 | 北京金山安全软件有限公司 | 一种拍照方法、装置、电子设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005117530A (ja) * | 2003-10-10 | 2005-04-28 | Nikon Gijutsu Kobo:Kk | デジタルカメラ |
JP2009005316A (ja) * | 2007-06-25 | 2009-01-08 | Sony Corp | 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム |
JP2010041435A (ja) * | 2008-08-05 | 2010-02-18 | Canon Inc | 撮像装置及びその制御方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8159561B2 (en) | 2003-10-10 | 2012-04-17 | Nikon Corporation | Digital camera with feature extraction device |
JP2009171301A (ja) | 2008-01-17 | 2009-07-30 | Panasonic Corp | 撮像装置、携帯端末及びカメラ制御方法 |
US8300136B2 (en) * | 2008-06-26 | 2012-10-30 | Canon Kabushiki Kaisha | Imaging apparatus for detecting a face image and imaging method |
-
2010
- 2010-04-26 JP JP2010100865A patent/JP2011234015A/ja active Pending
-
2011
- 2011-04-21 US US13/091,421 patent/US8760564B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005117530A (ja) * | 2003-10-10 | 2005-04-28 | Nikon Gijutsu Kobo:Kk | デジタルカメラ |
JP2009005316A (ja) * | 2007-06-25 | 2009-01-08 | Sony Corp | 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム |
JP2010041435A (ja) * | 2008-08-05 | 2010-02-18 | Canon Inc | 撮像装置及びその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
US8760564B2 (en) | 2014-06-24 |
US20110261220A1 (en) | 2011-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5136669B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US8928770B2 (en) | Multi-subject imaging device and imaging method | |
JP4542011B2 (ja) | カメラ及び手ぶれ補正方法及び手ぶれ補正プログラム | |
WO2017092128A1 (zh) | 预览图像的显示方法和装置 | |
US9888176B2 (en) | Video apparatus and photography method thereof | |
KR20100027700A (ko) | 촬영 방법 및 장치 | |
CN110769147B (zh) | 拍摄方法及电子设备 | |
WO2016110075A1 (zh) | 一种移动终端相机的拍照方法及装置 | |
JP2011234015A (ja) | 端末装置 | |
JP5594485B2 (ja) | 携帯通信装置 | |
RU2635873C2 (ru) | Способ и устройство для отображения информации кадрирования | |
JP2016009873A (ja) | 情報処理装置、情報処理システム、情報処理方法およびプログラム | |
EP3211879A1 (en) | Method and device for automatically capturing photograph, electronic device | |
JP2013017218A (ja) | 画像処理装置、画像処理方法及びプログラム | |
US8866934B2 (en) | Image pickup apparatus capable of deleting video effect superimposed on moving image, method of controlling the apparatus, and moving image-recording apparatus, as well as storage medium | |
JP2014045404A (ja) | 携帯端末 | |
JP2010161704A (ja) | 携帯端末、その撮影制御方法、プログラム及び記録媒体 | |
JP2007233135A (ja) | 撮影装置及びその操作子設定方法 | |
JP2013190791A (ja) | 携帯端末機のイメージ撮影装置及び方法 | |
JP2010252238A (ja) | 撮像装置および撮像方法 | |
JP7064609B2 (ja) | 撮影装置、撮影方法、及びプログラム | |
WO2016178267A1 (ja) | 撮像指示装置、撮像システム、撮影方法およびプログラム | |
JP5535854B2 (ja) | カメラ装置、撮影者判定方法、撮影者登録方法及び制御プログラム | |
CN118283411A (zh) | 一种图像采集方法、装置及存储介质 | |
JP2004242208A (ja) | 移動体通信端末装置および画像補正処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130201 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140210 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20140606 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140610 |