JP2015082247A - 電子機器、判定方法及びプログラム - Google Patents
電子機器、判定方法及びプログラム Download PDFInfo
- Publication number
- JP2015082247A JP2015082247A JP2013220486A JP2013220486A JP2015082247A JP 2015082247 A JP2015082247 A JP 2015082247A JP 2013220486 A JP2013220486 A JP 2013220486A JP 2013220486 A JP2013220486 A JP 2013220486A JP 2015082247 A JP2015082247 A JP 2015082247A
- Authority
- JP
- Japan
- Prior art keywords
- face
- user
- image data
- face direction
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
ユーザが映像コンテンツを再生しているディスプレイ(テレビ画面)を見ているか否かは、ユーザとコンテンツの関わりにおいて最も基本的な指標である。
電子機器1は、図2に示すように、第1顔向き推定部11と、顔色算出部12と、第2顔向き推定部13と、判定部14と、を備える。
第2顔向き推定部13は、顔色算出部12により算出された顔色情報に基づいて、第1撮像部21により生成された画像データに含まれているユーザを特定し、当該ユーザの顔向きを推定する。
判定部14は、第1顔向き推定部11により推定した顔向きと、第2顔向き推定部13により推定した顔向きとに基づいて、ユーザが所定の方向を向いているかどうかを判定する。
出射部31は、第1撮像部21による撮影方向に対して、所定の波長を有する光を出射する。
受光部32は、出射部31により出射された光が反射した光を受光する。
奥行き画像生成部33は、第1撮像部21により生成された画像データと、出射部31により出射された光と、受光部32により受光された光とに基づいて、奥行き画像データを生成する。
パターン照射方式の場合には、出射部31は、所定のパターンを持ったレーザー光を第1撮像部21による撮影方向に対して出射する。受光部32は、その反射光を受光する。奥行き画像生成部33は、出射光と反射光を比較して、光のひずみに基づいて対象までの距離を測定し、奥行き画像データを生成する。
第1顔向き推定部11は、第1撮像部21により生成された画像データと、第2撮像部22により生成された奥行き画像データを解析して、ユーザの顔向きに関する10特徴量(3次元の座標位置(X,Y,Z)、3次元角度(Yaw,Pitch,Roll)、2次元画像上の顔領域位置(x,y)、2次元画像上の顔領域幅と高さ(w,h))を取得し、3次元顔モデルMを生成することにより、ユーザの顔向きを3次元空間で推定する。3次元顔モデルMをユーザの顔に重ねた様子を図4及び図5に模式的に示す。
第2顔向き推定部13は、顔色算出部12により算出された顔色情報と、第1撮像部21により生成した画像データを解析して、ユーザの顔向きに関する6特徴量(latitude(顔が上又は下を向いているか否かの情報)、longitude(顔が左又は右を向いているか否かの情報)、画像データ内の顔領域位置(x,y)、画像データ内の顔領域幅・高さ(w,h))を取得し、取得した6特徴量に基づいて画像データから顔領域を検出し、顔領域内の特徴点の位置関係からユーザの顔向きを推定する。
顔領域検出部42は、顔色情報入力部41に入力された顔色情報に基づいて、人物の顔が写っている顔領域を抽出する。
また、第2顔向き推定部13は、顔色算出部12により算出された顔色情報を利用して顔向き推定を行っているので、単体でも精度よく顔向きの推定ができていると言える。
2 撮像機器
11 第1顔向き推定部
12 顔色算出部
13 第2顔向き推定部
14 判定部
21 第1撮像部
22 第2撮像部
31 出射部
32 受光部
33 奥行き画像生成部
41 顔色情報入力部
42 顔領域検出部
43 顔部品追跡部
44 可変テンプレートDB
Claims (4)
- 第1撮像部により生成された画像データと、前記第1撮像部による撮像方向の奥行きを走査して奥行き画像データを生成する第2撮像部により生成された奥行き画像データとに基づいて、3次元顔モデルを生成し、ユーザの顔向きを三次元空間で推定する第1顔向き推定部と、
前記3次元顔モデルが生成されている領域を前記画像データから抽出し、当該抽出した領域から顔色情報を算出する顔色算出部と、
前記顔色算出部により算出された顔色情報に基づいて、前記第1撮像部により生成された画像データに含まれているユーザを特定し、当該ユーザの顔向きを推定する第2顔向き推定部と、
前記第1顔向き推定部により推定した顔向きと、前記第2顔向き推定部により推定した顔向きとに基づいて、ユーザが所定の方向を向いているかどうかを判定する判定部とを備える電子機器。 - 前記判定部は、複数のユーザが存在する場合、ユーザごとに所定の方向を見ているかどうかを判定する請求項1記載の電子機器。
- 画像データと、奥行き画像データとに基づいて、3次元顔モデルを生成し、ユーザの顔向きを三次元空間で推定する第1顔向き推定工程と、
前記3次元顔モデルが生成されている領域を前記画像データから抽出し、当該抽出した領域から顔色情報を算出する顔色算出工程と、
前記顔色算出工程により算出された顔色情報に基づいて、前記画像データに含まれているユーザを特定し、当該ユーザの顔向きを推定する第2顔向き推定工程と、
前記第1顔向き推定工程により推定した顔向きと、前記第2顔向き推定工程により推定した顔向きとに基づいて、ユーザが所定の方向を向いているかどうかを判定する判定工程とを備える判定方法。 - 画像データと、奥行き画像データとに基づいて、3次元顔モデルを生成し、ユーザの顔向きを三次元空間で推定する第1顔向き推定工程と、
前記3次元顔モデルが生成されている領域を前記画像データから抽出し、当該抽出した領域から顔色情報を算出する顔色算出工程と、
前記顔色算出工程により算出された顔色情報に基づいて、前記画像データに含まれているユーザを特定し、当該ユーザの顔向きを推定する第2顔向き推定工程と、
前記第1顔向き推定工程により推定した顔向きと、前記第2顔向き推定工程により推定した顔向きとに基づいて、ユーザが所定の方向を向いているかどうかを判定する判定工程とをコンピュータに実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013220486A JP6214334B2 (ja) | 2013-10-23 | 2013-10-23 | 電子機器、判定方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013220486A JP6214334B2 (ja) | 2013-10-23 | 2013-10-23 | 電子機器、判定方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015082247A true JP2015082247A (ja) | 2015-04-27 |
JP6214334B2 JP6214334B2 (ja) | 2017-10-18 |
Family
ID=53012807
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013220486A Expired - Fee Related JP6214334B2 (ja) | 2013-10-23 | 2013-10-23 | 電子機器、判定方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6214334B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019527448A (ja) * | 2016-07-21 | 2019-09-26 | ゲシュティゴン、ゲゼルシャフト、ミット、ベシュレンクテル、ハフツングGestigon Gmbh | 車両の運転者の状態を監視するための方法及びシステム |
JP2020522764A (ja) * | 2018-05-10 | 2020-07-30 | ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド | 生体検知方法および装置、システム、電子機器、記憶媒体 |
US10930010B2 (en) | 2018-05-10 | 2021-02-23 | Beijing Sensetime Technology Development Co., Ltd | Method and apparatus for detecting living body, system, electronic device, and storage medium |
WO2021251184A1 (ja) * | 2020-06-11 | 2021-12-16 | ソニーグループ株式会社 | 画像処理装置、画像処理方法、並びに記録媒体 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011071795A (ja) * | 2009-09-28 | 2011-04-07 | Hitachi Consumer Electronics Co Ltd | 放送受信装置 |
-
2013
- 2013-10-23 JP JP2013220486A patent/JP6214334B2/ja not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011071795A (ja) * | 2009-09-28 | 2011-04-07 | Hitachi Consumer Electronics Co Ltd | 放送受信装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019527448A (ja) * | 2016-07-21 | 2019-09-26 | ゲシュティゴン、ゲゼルシャフト、ミット、ベシュレンクテル、ハフツングGestigon Gmbh | 車両の運転者の状態を監視するための方法及びシステム |
JP2020522764A (ja) * | 2018-05-10 | 2020-07-30 | ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド | 生体検知方法および装置、システム、電子機器、記憶媒体 |
US10930010B2 (en) | 2018-05-10 | 2021-02-23 | Beijing Sensetime Technology Development Co., Ltd | Method and apparatus for detecting living body, system, electronic device, and storage medium |
WO2021251184A1 (ja) * | 2020-06-11 | 2021-12-16 | ソニーグループ株式会社 | 画像処理装置、画像処理方法、並びに記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP6214334B2 (ja) | 2017-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11600191B2 (en) | System and method for validating honest test taking | |
US8667519B2 (en) | Automatic passive and anonymous feedback system | |
JP5024067B2 (ja) | 顔認証システム、方法及びプログラム | |
CN109891189B (zh) | 策划的摄影测量 | |
US20150006281A1 (en) | Information processor, information processing method, and computer-readable medium | |
CN113168231A (zh) | 用于跟踪真实世界对象的移动以改进虚拟对象定位的增强技术 | |
US9639770B2 (en) | System and method for improving communication productivity | |
KR101766347B1 (ko) | 집중도 평가시스템 | |
KR20190020779A (ko) | 인게이지먼트값 처리 시스템 및 인게이지먼트값 처리 장치 | |
CN107851324B (zh) | 信息处理系统、信息处理方法和记录介质 | |
EP3241151A1 (en) | An image face processing method and apparatus | |
JP2007310454A (ja) | 画像評価装置および被験者集中度算出装置、並びに、画像評価プログラムおよび被験者集中度算出プログラム | |
Lawanont et al. | Neck posture monitoring system based on image detection and smartphone sensors using the prolonged usage classification concept | |
Chen et al. | Statistical and structural information backed full-reference quality measure of compressed sonar images | |
JP2012123727A (ja) | 広告効果測定サーバ、広告効果測定装置、プログラム、広告効果測定システム | |
JP6214334B2 (ja) | 電子機器、判定方法及びプログラム | |
KR20190088478A (ko) | 인게이지먼트 측정 시스템 | |
JP6583996B2 (ja) | 映像評価装置、及びプログラム | |
TWI384383B (zh) | 視線察覺裝置及其方法 | |
US20230135997A1 (en) | Ai monitoring and processing system | |
JP2009301242A (ja) | 頭部候補抽出方法、頭部候補抽出装置、頭部候補抽出プログラムおよびそのプログラムを記録した記録媒体 | |
US20220189200A1 (en) | Information processing system and information processing method | |
JP6336414B2 (ja) | 画像集中誘導装置及びそれを用いた画像集中誘導方法 | |
WO2018136063A1 (en) | Eye gaze angle feedback in a remote meeting | |
KR101587533B1 (ko) | 피사체의 시선에 따라 영상을 이동시키는 영상처리시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160829 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170714 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170822 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170919 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6214334 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |