JP6860431B2 - 計算機システム、対話制御方法、及び計算機 - Google Patents
計算機システム、対話制御方法、及び計算機 Download PDFInfo
- Publication number
- JP6860431B2 JP6860431B2 JP2017113189A JP2017113189A JP6860431B2 JP 6860431 B2 JP6860431 B2 JP 6860431B2 JP 2017113189 A JP2017113189 A JP 2017113189A JP 2017113189 A JP2017113189 A JP 2017113189A JP 6860431 B2 JP6860431 B2 JP 6860431B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- authentication process
- image
- template
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 215
- 230000002452 interceptive effect Effects 0.000 title claims description 17
- 230000008569 process Effects 0.000 claims description 188
- 238000012545 processing Methods 0.000 claims description 33
- 238000003384 imaging method Methods 0.000 claims description 13
- 210000004556 brain Anatomy 0.000 description 87
- 210000003462 vein Anatomy 0.000 description 69
- 230000004044 response Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 230000008451 emotion Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 206010011971 Decreased interest Diseases 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/14—Vascular patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Security & Cryptography (AREA)
- General Engineering & Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Library & Information Science (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Collating Specific Patterns (AREA)
- User Interface Of Digital Computer (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
101 リモートブレイン計算機
102 マザーブレイン計算機
103 ネットワーク
110 ユーザ
201、301、401 演算装置
202、302、402 記憶装置
203、303、403 通信装置
204 撮像装置
205 音声再生装置
206 集音装置
207 駆動制御装置
208 駆動装置
211、311、411 制御モジュール
212、314 対話DB
312 認証モジュール
313 推定モジュール
412 顔画像DB
413 静脈画像DB
500 言語辞書
600 推定ユーザ用テンプレート
610 登録ユーザ用テンプレート
Claims (12)
- ユーザとの対話を行い、所定のサービスを提供する計算機システムであって、
画像を取得する撮像装置、ユーザに出力する発話内容を定義するテンプレートを選択する計算機、及び前記テンプレートに基づいて発話内容を生成する生成装置を備え、
前記計算機は、
演算装置、前記演算装置に接続される記憶装置、及び前記演算装置に接続されるインタフェースを有し、
前記テンプレートを格納する対話データベースを保持し、
前記インタフェースを介して、前記撮像装置が取得した画像を用いた認証処理に使用する認証用画像を格納する画像データベースと接続し、
前記対話データベースは、ユーザを特徴付ける属性に基づいて区分されたユーザ層に属するユーザに出力する発話内容を定義する複数の第1テンプレートと、特定の個人に出力する発話内容を定義する複数の第2テンプレートとを格納し、
前記演算装置は、
前記ユーザと前記撮像装置との間の距離を算出し、
前記距離が第1閾値より大きい場合、前記撮像装置が取得した画像を用いて前記ユーザの前記属性を推定する属性推定処理を実行し、前記属性推定処理の結果に基づいて、前記対話データベースから前記ユーザが属する前記ユーザ層に対応する前記第1テンプレートを選択し、
前記距離が前記第1閾値以下である場合、前記撮像装置が取得した画像及び前記画像データベースに基づいて前記ユーザを特定する認証処理を実行し、前記認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択し、
前記生成装置に、前記第1テンプレート及び前記第2テンプレートのいずれかを通知することを特徴とする計算機システム。 - 請求項1に記載の計算機システムであって、
前記演算装置は、
前記第1テンプレートが選択された後に、前記距離が前記第1閾値以下となった場合、前記認証処理を実行し、前記認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択し、
前記生成装置に前記第2テンプレートを通知することを特徴とする計算機システム。 - 請求項2に記載の計算機システムであって、
前記認証処理は、第1の認証処理と、前記第1の認証処理より認証精度が高い第2の認証処理とを含み、
前記演算装置は、
前記距離が前記第1閾値以下かつ第2閾値より大きい場合、前記第1の認証処理を実行し、前記第1の認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択し、
前記距離が前記第2閾値以下である場合、前記第2の認証処理を実行し、前記第2の認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択することを特徴とする計算機システム。 - 請求項3に記載の計算機システムであって、
前記演算装置は、
前記属性推定処理の結果に基づいて、前記第1の認証処理で参照する前記画像データベースの参照範囲を特定し、
前記第1の認証処理の結果に基づいて、前記第2の認証処理で参照する前記画像データベースの参照範囲を特定することを特徴とする計算機システム。 - ユーザとの対話を行い、所定のサービスを提供する計算機システムにおける対話制御方法であって、
前記計算機システムは、画像を取得する撮像装置、ユーザに出力する発話内容を定義するテンプレートを選択する計算機、及び前記テンプレートに基づいて発話内容を生成する生成装置を備え、
前記計算機は、
演算装置、前記演算装置に接続される記憶装置、及び前記演算装置に接続されるインタフェースを有し、
前記テンプレートを格納する対話データベースを保持し、
前記インタフェースを介して、前記撮像装置が取得した画像を用いた認証処理に使用する認証用画像を格納する画像データベースと接続し、
前記対話データベースは、ユーザを特徴付ける属性に基づいて区分されたユーザ層に属するユーザに出力する発話内容を定義する複数の第1テンプレートと、特定の個人に出力する発話内容を定義する複数の第2テンプレートとを格納し、
前記対話制御方法は、
前記演算装置が、前記ユーザと前記撮像装置との間の距離を算出する第1のステップと、
前記演算装置が、前記距離が第1閾値より大きい場合、前記撮像装置が取得した画像を用いて前記ユーザの前記属性を推定する属性推定処理を実行し、前記属性推定処理の結果に基づいて、前記対話データベースから前記ユーザが属する前記ユーザ層に対応する前記第1テンプレートを選択する第2のステップと、
前記演算装置が、前記距離が前記第1閾値以下である場合、前記撮像装置が取得した画像及び前記画像データベースに基づいて前記ユーザを特定する認証処理を実行し、前記認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択する第3のステップと、
前記演算装置が、前記生成装置に、前記第1テンプレート及び前記第2テンプレートのいずれかを通知する第4のステップと、を含むことを特徴とする対話制御方法。 - 請求項5に記載の対話制御方法であって、
前記第1テンプレートが選択された後に、前記距離が前記第1閾値以下となった場合、前記演算装置が、前記認証処理を実行し、前記認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択するステップと、
前記演算装置が、前記生成装置に前記第2テンプレートを通知するステップと、を含むことを特徴とする対話制御方法。 - 請求項6に記載の対話制御方法であって、
前記認証処理は、第1の認証処理と、前記第1の認証処理より認証精度が高い第2の認証処理とを含み、
前記第3のステップは、
前記演算装置が、前記距離が前記第1閾値以下かつ第2閾値より大きい場合、前記第1の認証処理を実行し、前記第1の認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択する第5のステップと、
前記演算装置が、前記距離が前記第2閾値以下である場合、前記第2の認証処理を実行し、前記第2の認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択する第6のステップと、を含むことを特徴とする対話制御方法。 - 請求項7に記載の対話制御方法であって、
前記第5のステップは、前記演算装置が、前記属性推定処理の結果に基づいて、前記第1の認証処理で参照する前記画像データベースの参照範囲を特定するステップを含み、
前記第6のステップは、前記演算装置が、前記第1の認証処理の結果に基づいて、前記第2の認証処理で参照する前記画像データベースの参照範囲を特定するステップを含むことを特徴とする対話制御方法。 - ユーザとの対話を行い、所定のサービスを提供する計算機システムに含まれる計算機であって、
前記計算機は、
演算装置、前記演算装置に接続される記憶装置、前記演算装置に接続されるインタフェース、及び前記演算装置に接続され、画像を取得する撮像装置を有し、
ユーザに出力する発話内容を定義するテンプレートを格納する対話データベースを保持し、
前記インタフェースを介して、ユーザと対話を行う対話装置、及び前記撮像装置が取得した画像を用いた認証処理に使用する認証用画像を格納する画像データベースと接続し、
前記対話データベースは、ユーザを特徴付ける属性に基づいて区分されたユーザ層に属するユーザに出力する発話内容を定義する複数の第1テンプレートと、特定の個人に出力する発話内容を定義する複数の第2テンプレートとを格納し、
前記演算装置は、
前記ユーザと前記撮像装置との間の距離を算出し、
前記距離が第1閾値より大きい場合、前記撮像装置が取得した画像を用いて前記ユーザの前記属性を推定する属性推定処理を実行し、前記属性推定処理の結果に基づいて、前記対話データベースから前記ユーザが属する前記ユーザ層に対応する前記第1テンプレートを選択し、
前記距離が前記第1閾値以下である場合、前記撮像装置が取得した画像及び前記画像データベースに基づいて前記ユーザを特定する認証処理を実行し、前記認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択し、
前記第1テンプレート及び前記第2テンプレートのいずれかに基づいて発話内容を生成することを特徴とする計算機。 - 請求項9に記載の計算機であって、
前記演算装置は、前記第1テンプレートが選択された後に、前記距離が前記第1閾値以下となった場合、前記認証処理を実行し、前記認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択することを特徴とする計算機。 - 請求項10に記載の計算機であって、
前記認証処理は、第1の認証処理と、前記第1の認証処理より認証精度が高い第2の認証処理とを含み、
前記演算装置は、
前記距離が前記第1閾値以下かつ第2閾値より大きい場合、前記第1の認証処理を実行し、前記第1の認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択し、
前記距離が前記第2閾値以下である場合、前記第2の認証処理を実行し、前記第2の認証処理の結果に基づいて、前記対話データベースから前記ユーザに対応する前記第2テンプレートを選択することを特徴とする計算機。 - 請求項11に記載の計算機であって、
前記演算装置は、
前記属性推定処理の結果に基づいて、前記第1の認証処理で参照する前記画像データベースの参照範囲を特定し、
前記第1の認証処理の結果に基づいて、前記第2の認証処理で参照する前記画像データベースの参照範囲を特定することを特徴とする計算機。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017113189A JP6860431B2 (ja) | 2017-06-08 | 2017-06-08 | 計算機システム、対話制御方法、及び計算機 |
US16/002,039 US10621421B2 (en) | 2017-06-08 | 2018-06-07 | Computer system, dialogue control method, and computer |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017113189A JP6860431B2 (ja) | 2017-06-08 | 2017-06-08 | 計算機システム、対話制御方法、及び計算機 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018206228A JP2018206228A (ja) | 2018-12-27 |
JP2018206228A5 JP2018206228A5 (ja) | 2020-02-27 |
JP6860431B2 true JP6860431B2 (ja) | 2021-04-14 |
Family
ID=64738269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017113189A Active JP6860431B2 (ja) | 2017-06-08 | 2017-06-08 | 計算機システム、対話制御方法、及び計算機 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10621421B2 (ja) |
JP (1) | JP6860431B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6684009B1 (ja) * | 2019-10-03 | 2020-04-22 | 株式会社クリューシステムズ | プログラム、映像処理装置及び認証方法 |
WO2021131031A1 (ja) * | 2019-12-27 | 2021-07-01 | 慎太郎 稲垣 | 興行ビジネス方法、興行システム及び認証装置 |
JP7355243B2 (ja) * | 2020-06-11 | 2023-10-03 | 日本電気株式会社 | 情報処理装置、情報処理方法及びプログラム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6173266B1 (en) * | 1997-05-06 | 2001-01-09 | Speechworks International, Inc. | System and method for developing interactive speech applications |
US7030863B2 (en) * | 2000-05-26 | 2006-04-18 | America Online, Incorporated | Virtual keyboard system with automatic correction |
US6606596B1 (en) * | 1999-09-13 | 2003-08-12 | Microstrategy, Incorporated | System and method for the creation and automatic deployment of personalized, dynamic and interactive voice services, including deployment through digital sound files |
US7505921B1 (en) * | 2000-03-03 | 2009-03-17 | Finali Corporation | System and method for optimizing a product configuration |
JP2001307098A (ja) * | 2000-04-19 | 2001-11-02 | Nippon Telegr & Teleph Corp <Ntt> | 人物属性推定方法および人物属性推定装置 |
JP4072033B2 (ja) * | 2002-09-24 | 2008-04-02 | 本田技研工業株式会社 | 受付案内ロボット装置 |
JP2010079609A (ja) * | 2008-09-26 | 2010-04-08 | Brother Ind Ltd | 個人認証装置、個人認証プログラム、および個人認証装置を備えたインターホンシステム |
JP2010108200A (ja) | 2008-10-30 | 2010-05-13 | Mitsubishi Electric Corp | 個人認証装置及び個人認証方法 |
US10276170B2 (en) * | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
US10289896B2 (en) * | 2014-06-23 | 2019-05-14 | British Telecommunications Public Limited Company | Biometric identification |
BR112016027700A2 (pt) * | 2014-06-27 | 2017-08-15 | Microsoft Technology Licensing Llc | Proteção de dados baseada em reconhecimento de usuário e gesto |
JP6450138B2 (ja) | 2014-10-07 | 2019-01-09 | 株式会社Nttドコモ | 情報処理装置及び発話内容出力方法 |
US10250650B2 (en) * | 2015-01-05 | 2019-04-02 | Harman International Industries, Incorporated | Discovery playlist creation |
US20170250930A1 (en) * | 2016-02-29 | 2017-08-31 | Outbrain Inc. | Interactive content recommendation personalization assistant |
JP2017209769A (ja) * | 2016-05-27 | 2017-11-30 | グローリー株式会社 | サービスシステム、及び、ロボット |
JP6440327B2 (ja) * | 2016-07-25 | 2018-12-19 | ユニボット株式会社 | 防犯システム、防犯方法、及びロボット |
-
2017
- 2017-06-08 JP JP2017113189A patent/JP6860431B2/ja active Active
-
2018
- 2018-06-07 US US16/002,039 patent/US10621421B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018206228A (ja) | 2018-12-27 |
US20190005311A1 (en) | 2019-01-03 |
US10621421B2 (en) | 2020-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11030412B2 (en) | System and method for chatbot conversation construction and management | |
EP3491533B1 (en) | Providing command bundle suggestions for an automated assistant | |
CN109147770B (zh) | 声音识别特征的优化、动态注册方法、客户端和服务器 | |
US11551219B2 (en) | Payment method, client, electronic device, storage medium, and server | |
JP6657124B2 (ja) | 会話理解システムのためのセッションコンテキストモデリング | |
CN107886949B (zh) | 一种内容推荐方法及装置 | |
CN110288985B (zh) | 语音数据处理方法、装置、电子设备及存储介质 | |
US11855988B2 (en) | Synchronizing access controls between computing devices | |
US10838746B2 (en) | Identifying parameter values and determining features for boosting rankings of relevant distributable digital assistant operations | |
CN107481720A (zh) | 一种显式声纹识别方法及装置 | |
JP6860431B2 (ja) | 計算機システム、対話制御方法、及び計算機 | |
US20080298562A1 (en) | Voice aware demographic personalization | |
CN111095892A (zh) | 电子装置及其控制方法 | |
JP2020004381A (ja) | 情報プッシュ方法及び装置 | |
CN116018791A (zh) | 在助手系统中使用单个请求进行多人呼叫 | |
US11561761B2 (en) | Information processing system, method, and storage medium | |
JP7347217B2 (ja) | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム | |
CN110570843B (zh) | 一种用户语音识别方法和装置 | |
JP6481643B2 (ja) | 音声処理システムおよび音声処理方法 | |
JPWO2017199486A1 (ja) | 情報処理装置 | |
CN109712606A (zh) | 一种信息获取方法、装置、设备及存储介质 | |
CN109460504A (zh) | 知识社区中预约答题的解答主体推荐方法及其装置、电子设备、计算机可读介质 | |
US11842737B2 (en) | Automated assistant interaction prediction using fusion of visual and audio input | |
JP7207543B2 (ja) | 情報推薦装置、情報推薦システム、情報推薦方法及び情報推薦プログラム | |
CN110459203A (zh) | 一种智能语音导游方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200110 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200110 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200812 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200901 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201030 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210309 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210326 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6860431 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |