JP6147198B2 - ロボット - Google Patents
ロボット Download PDFInfo
- Publication number
- JP6147198B2 JP6147198B2 JP2014003718A JP2014003718A JP6147198B2 JP 6147198 B2 JP6147198 B2 JP 6147198B2 JP 2014003718 A JP2014003718 A JP 2014003718A JP 2014003718 A JP2014003718 A JP 2014003718A JP 6147198 B2 JP6147198 B2 JP 6147198B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- unit
- detection unit
- skin color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims description 190
- 230000005236 sound signal Effects 0.000 claims 1
- 238000000034 method Methods 0.000 description 95
- 230000008569 process Effects 0.000 description 89
- 238000000605 extraction Methods 0.000 description 49
- 238000004364 calculation method Methods 0.000 description 32
- 230000004044 response Effects 0.000 description 27
- 238000013528 artificial neural network Methods 0.000 description 16
- 210000003128 head Anatomy 0.000 description 13
- 230000007246 mechanism Effects 0.000 description 11
- 238000009825 accumulation Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 230000008859 change Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 239000000872 buffer Substances 0.000 description 6
- 239000000284 extract Substances 0.000 description 3
- 210000004709 eyebrow Anatomy 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 210000001061 forehead Anatomy 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Description
Claims (8)
- 連続して撮影される撮影画像から顔を表す第1顔画像を検出する第1顔検出部と、
前記第1顔画像が検出された場合、前記第1顔検出部による検出より長い時間を掛けて前記撮影画像から顔を表す第2顔画像を検出する第2顔検出部と、
前記第1顔画像に基づいて、連続する撮影画像内の顔の位置を追跡する顔追跡部と、
予め登録された少なくとも一人の顔画像に基づいて、前記第2顔画像に表されている人物を識別する顔識別部と、
を備え、
前記第1顔検出部は、色空間における顔の色の範囲の条件である第1色条件を記憶し、前記撮影画像から前記第1色条件を満たす領域を含む前記第1顔画像を検出し、
前記第2顔検出部は、前記第2顔画像の中から基準領域を選択し、前記基準領域内の色の範囲を示す色情報を検出し、
前記第1顔検出部は、前記色情報に基づいて前記第1色条件を変更し、
前記第2顔検出部は、色空間における顔の色の範囲の条件であり且つ前記第1色条件の初期値より広い範囲を示す第2色条件を記憶し、前記撮影画像から前記第2色条件を満たす領域を含む矩形領域である第2候補画像を検出し、第2候補画像が検出されなかった場合、前記撮影画像内を走査して前記第2候補画像を決定し、前記第2候補画像が顔を表すか否かを判定する、
ロボット。 - 連続して前記撮影画像を撮影する画像入力部と、
前記位置が前記撮影画像の中心に向かう方向へ、前記画像入力部を移動させる駆動部と、を更に備える、
請求項1に記載のロボット。 - 連続して撮影された複数の撮影画像内に動体が存在することを検出する動体検出部を更に備え、
前記第1顔画像が検出された場合または前記動体の存在が検出された場合、前記第2顔検出部は、前記撮影画像から前記第2顔画像を検出する、
請求項1又は2の何れかに記載のロボット。 - 前記第1顔検出部は、予め定められた第1検出周期毎に、前記第1顔画像の検出を行い、
前記第2顔画像が検出された場合、前記顔追跡部は、前記位置の追跡を開始し、
前記位置が追跡されている間、前記第2顔検出部は、前記第1検出周期より長く予め定められた第2検出周期毎に、前記第2顔画像の検出を行う、
請求項1乃至3の何れかに記載のロボット。 - 前記第1検出部は、前記撮影画像から前記第1色条件を満たす領域を含む矩形領域である第1候補画像を検出し、前記第1候補画像が正面顔を表すか否かを判定し、前記第1候補画像が正面顔を表すと判定された場合、前記第1候補画像を前記第1顔画像と決定する、
請求項4に記載のロボット。 - 前記第1顔検出部は、前記第1候補画像の縦横比を算出し、前記第1候補画像内のエッジを検出し、前記縦横比と前記エッジの左右の偏差とに基づいて、前記第1候補画像が顔を表すか否かを判定する、
請求項5に記載のロボット。 - 前記第1顔検出部は、色空間における顔の色の範囲の条件である第1色条件を記憶し、前記撮影画像から前記第1色条件を満たす領域を含む前記第1顔画像を検出する、
前記第2顔検出部は、前記第2顔画像の中から基準領域を選択し、前記基準領域内の色の範囲を示す色情報を検出し、
前記第1顔検出部は、前記色情報に基づいて前記第1色条件を変更し、
前記色情報と前記識別された人物の識別子とを関連付けて記憶する記憶部を更に備え、
前記駆動部が特定識別子の人物の方向へ前記画像入力部を移動させる場合、第1顔検出部は、前記記憶部から前記特定識別子に対応する色情報を読み出し、前記読み出された色情報に基づいて前記第1色条件を変更する、
請求項2に記載のロボット。 - 音声を音声信号に変換する音声入力部と、
前記第1顔検出部により正面顔を表す第1顔画像が検出された場合、前記音声認識部は、ユーザから前記ロボットへの発話であると認識する発話認識部と、
を更に備える、
請求項1乃至7の何れかに記載のロボット。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014003718A JP6147198B2 (ja) | 2014-01-10 | 2014-01-10 | ロボット |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014003718A JP6147198B2 (ja) | 2014-01-10 | 2014-01-10 | ロボット |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015132955A JP2015132955A (ja) | 2015-07-23 |
JP6147198B2 true JP6147198B2 (ja) | 2017-06-14 |
Family
ID=53900108
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014003718A Active JP6147198B2 (ja) | 2014-01-10 | 2014-01-10 | ロボット |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6147198B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017217314A1 (ja) | 2016-06-13 | 2017-12-21 | 日本電気株式会社 | 応対装置、応対システム、応対方法、及び記録媒体 |
CN106228112B (zh) | 2016-07-08 | 2019-10-29 | 深圳市优必选科技有限公司 | 人脸检测跟踪方法及机器人头部转动控制方法和机器人 |
JP7026105B2 (ja) * | 2017-03-24 | 2022-02-25 | 株式会社日立国際電気 | サービス提供システム |
CN109955248A (zh) * | 2017-12-26 | 2019-07-02 | 深圳市优必选科技有限公司 | 一种机器人及其人脸跟随方法 |
JPWO2022130513A1 (ja) * | 2020-12-15 | 2022-06-23 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4590717B2 (ja) * | 2000-11-17 | 2010-12-01 | ソニー株式会社 | 顔識別装置及び顔識別方法 |
JP3843742B2 (ja) * | 2001-03-09 | 2006-11-08 | 独立行政法人科学技術振興機構 | ロボット視聴覚システム |
JP2004013768A (ja) * | 2002-06-11 | 2004-01-15 | Gen Tec:Kk | 個人識別方法 |
JP2005242582A (ja) * | 2004-02-25 | 2005-09-08 | Univ Waseda | 顔検出装置およびその方法 |
JP4577301B2 (ja) * | 2006-11-24 | 2010-11-10 | トヨタ自動車株式会社 | 顔向き検知装置 |
JP2011229044A (ja) * | 2010-04-22 | 2011-11-10 | Mitsubishi Electric Corp | 画像監視記録装置 |
-
2014
- 2014-01-10 JP JP2014003718A patent/JP6147198B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2015132955A (ja) | 2015-07-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6147198B2 (ja) | ロボット | |
JP6230726B2 (ja) | 音声認識装置および音声認識方法 | |
US8416998B2 (en) | Information processing device, information processing method, and program | |
KR102133728B1 (ko) | 인공지능을 이용한 멀티모달 감성인식 장치, 방법 및 저장매체 | |
KR102463806B1 (ko) | 이동이 가능한 전자 장치 및 그 동작 방법 | |
KR20100086262A (ko) | 로봇 및 그 제어방법 | |
CN109558788B (zh) | 静默语音输入辨识方法、计算装置和计算机可读介质 | |
JP2009222969A (ja) | 音声認識ロボットおよび音声認識ロボットの制御方法 | |
KR101187600B1 (ko) | 스테레오 카메라 기반의 3차원 실시간 입술 특징점 추출을 이용한 음성 인식 장치 및 음성 인식 방법 | |
KR102290186B1 (ko) | 사람의 감성 상태를 결정하기 위하여 영상을 처리하는 감성인식 방법 | |
US20210256282A1 (en) | Information processing apparatus, information processing method, and storage medium | |
JP2010128015A (ja) | 音声認識の誤認識判定装置及び音声認識の誤認識判定プログラム | |
JP2019217122A (ja) | ロボット、ロボットの制御方法及びプログラム | |
JP2007280417A (ja) | 姿勢認識装置及び自律ロボット | |
CN111241922A (zh) | 一种机器人及其控制方法、计算机可读存储介质 | |
CN110221693A (zh) | 一种基于人机交互的智能零售终端操作系统 | |
US20200272810A1 (en) | Response apparatus and response method | |
JP2008004050A (ja) | 個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 | |
US20230073265A1 (en) | Information processing device and action mode setting method | |
US20210103736A1 (en) | Control apparatus, control system, control method, and storage medium | |
KR20210066774A (ko) | 멀티모달 기반 사용자 구별 방법 및 장치 | |
JP2015150620A (ja) | ロボット制御システムおよびロボット制御プログラム | |
JP5718973B2 (ja) | 顔認識装置、顔認識方法、およびコンピュータプログラム | |
JP6916130B2 (ja) | 話者推定方法および話者推定装置 | |
EP2793102A2 (en) | Information processing device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160309 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170307 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170329 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170516 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170516 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6147198 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |