JP7749524B2 - 対話方法、サーバ装置、およびプログラム - Google Patents
対話方法、サーバ装置、およびプログラムInfo
- Publication number
- JP7749524B2 JP7749524B2 JP2022123426A JP2022123426A JP7749524B2 JP 7749524 B2 JP7749524 B2 JP 7749524B2 JP 2022123426 A JP2022123426 A JP 2022123426A JP 2022123426 A JP2022123426 A JP 2022123426A JP 7749524 B2 JP7749524 B2 JP 7749524B2
- Authority
- JP
- Japan
- Prior art keywords
- query
- expression
- user terminal
- condition
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/183—Speech classification or search using natural language modelling using context dependencies, e.g. language models
- G10L15/19—Grammatical context, e.g. disambiguation of the recognition hypotheses based on word sequence rules
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/243—Natural language query formulation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9032—Query formulation
- G06F16/90332—Natural language query formulation or dialogue systems
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1822—Parsing for meaning understanding
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
Description
図1は、実施の形態における対話システムの構成の一例を示す図である。対話システム1は、メインサーバ100、ユーザ端末200、API(Application Programming Interface)サーバ800、および制御サーバ900を含む。図1では、メインサーバ100、ユーザ端末200、APIサーバ800、および制御サーバ900のそれぞれの数量は1であるが、本開示によって説明される技術においてこれらの数量は1に制限されない。
図3は、メインサーバ100のハードウエア構成の一例を示す図である。メインサーバ100は、CPU(Central Processing Unit)101と、通信I/F(インターフェース)102と、ストレージ103とを含む。ストレージ103は、各種のプログラムを格納するプログラム用領域1031、および、各種のデータを格納するデータ領域1032を含む。
図4は、ユーザ端末200のハードウエア構成の一例を示す図である。ユーザ端末200は、CPU201と、ディスプレイ202と、マイクロフォン203と、スピーカ204と、入力デバイス205と、通信I/F206と、ストレージ207とを含む。ストレージ207は、各種のプログラムを格納するプログラム用領域2071、および、各種のデータを格納するデータ領域2072を含む。
対話システム1において、メインサーバ100は、ユーザから設定表現を受け付けると、当該設定表現からクエリおよび条件を抽出し、登録情報として、当該クエリおよび条件をストレージ103に格納する。図5~図7を参照して、クエリおよび条件を設定表現から抽出して登録情報として格納するための処理について説明する。
図5は、登録情報の内容の一例を表す図である。図5において「Key」として示されるように、格納されるデータは、7種類の項目(「Query Text」「Query Type」「Query Domain」「Trigger Type」「Trigger Value」「Trigger Repeat」「Trigger Rule」)を含む。「Query Text」「Query Type」および「Query Domain」は、クエリを構成する情報である。「Trigger Type」「Trigger Value」「Trigger Repeat」および「Trigger Rule」は、条件を構成する情報である。図5には、「Notes」として、各項目に関する解説が付記されている。以下、各項目について説明する。
「Query Type」は、クエリの種類を識別する。一実現例では、クエリの種類として、「質問」および「命令」が定義される。「質問」は、ユーザが尋ねたい内容を表すクエリであることを意味する。「命令」は、ユーザが実現を希望する内容を表すクエリであることを意味する。
図6は、登録情報のデータ構造の第1具体例を、設定表現とともに示す図である。
図7は、登録情報のデータ構造の第2具体例を、設定表現とともに示す図である。
図8は、登録情報のデータ構造の第3具体例を、設定表現とともに示す図である。
図2を参照して説明されたように、対話システム1は、条件によって特定される状況が発生したことに応じて、問合表現を出力する。
図9は、ポーリングクエリのフレームのデータ構造の第1具体例を示す図である。図9の例は、設定表現として図6に示された表現が入力された場合に対応する。
図11は、ポーリングクエリのフレームのデータ構造の第2具体例を示す図である。図11の例は、設定表現として図7に示された表現が入力された場合に対応する。
図13は、ポーリングクエリのフレームのデータ構造の第3具体例を示す図である。図13の例は、設定表現として図8に示された表現が入力された場合に対応する。
図15は、問合表現の生成方法を説明するための図である。図15を参照して、クエリを含む問合表現の生成方法の一例を説明する。
図16~図19は、対話システム1が実施する処理のフローチャートである。図16~図19には、メインサーバ100において実施される処理と、ユーザ端末200において実施される処理が示される。一実現例では、メインサーバ100は、CPU101にサーバ用アプリを実行させることによって上記処理を実施する。一実現例では、ユーザ端末200は、CPU201に端末用アプリを実行させることによって上記処理を実施する。
ステップS222にて、ユーザ端末200は、問合表現を出力し、ステップS202(図16)へ制御を戻す。
図16~図19を参照して説明された処理では、メインサーバ100は、設定表現を取得し、当該設定表現から取得された登録情報をストレージ103に格納する。そして、メインサーバ100は、上記登録情報の中の条件によって特定される状況が発生すると、ステップS134にて、ユーザ端末200に対して、上記登録情報の中のクエリを含む問合表現の出力を指示する。これに応じて、ステップS222にて、ユーザ端末200は問合表現を出力する。その後、ユーザ端末200は、ステップS202にて、問合表現に対する回答の音声を取得すると、ステップS204にて、当該音声をメインサーバ100へ送信する。メインサーバ100は、ステップS100にて、上記音声を受信し、ステップS138にて、当該音声に従った動作を実施する。
(動作の第1具体例)
対話システム1における動作の第1具体例として、図6に示された登録情報が格納された場合の動作を説明する。
対話システム1における動作の第2具体例として、図7に示された登録情報が格納された場合の動作を説明する。
対話システム1における動作の第3具体例として、図8に示された登録情報が格納された場合の動作を説明する。
上述の実施の形態では、設定表現および問合表現の双方の形態が音声であったが、これらは音声に限定されない。設定表現は、テキストとしてユーザ端末200に入力されてもよい。この場合、ユーザ端末200は、入力されたテキストをメインサーバ100へ送信する。設定表現は、ユーザ端末200を介することなく、メインサーバ100へ直接入力されてもよい。また、問合表現も、テキストとして出力されてもよい。
Claims (16)
- サーバ装置によって実施される対話方法であって、
ユーザ端末から、クエリと条件とを含む設定表現を取得するステップと、
前記クエリおよび前記条件をメモリに格納するステップと、
前記条件によって特定される状況が発生したことに応じて、前記クエリを含む問合表現を出力するための制御を実施するステップと、備え、
前記問合表現を出力するための前記制御は、前記問合表現の出力の指示を前記ユーザ端末へ出力することを含む、対話方法。 - 前記設定表現に対して自然言語解釈を実施することにより、前記クエリおよび前記条件を前記設定表現から抽出するステップをさらに備える、請求項1に記載の対話方法。
- 前記設定表現を取得するステップは、前記設定表現に対応する音声を受け取ることを含む、請求項1または請求項2に記載の対話方法。
- 特定のメッセージの入力を取得するステップをさらに備え、
前記設定表現を受け付けるステップは、前記ユーザ端末から前記特定のメッセージが取得されたことに応じて実施される、請求項1または請求項2に記載の対話方法。 - 前記クエリに対して自然言語解釈を実施することにより、前記クエリが適合する文法を特定するステップと、
前記文法が属するドメインを特定するステップと、
前記ドメインが前記メモリに格納されたリストに登録されているか否かを判断するステップと、
前記ドメインが前記リストに登録されていないことに応じて、前記クエリおよび前記条件を前記メモリに登録することを回避するステップと、をさらに備える、請求項1または請求項2に記載の対話方法。 - 前記設定表現を取得するステップは、2以上のユーザのうち前記設定表現に対応するユーザを特定する情報を受け取ることを含み、
前記リストは、2以上のユーザのうち1以上のユーザを特定する情報に関連付けられており、
前記ドメインが前記リストに登録されているか否かを判断するステップは、
前記ドメインが基づく前記設定表現に対応するユーザを特定することと、
前記ユーザに関連付けられた前記リストを特定することと、を含む、請求項5に記載の対話方法。 - 前記設定表現に基づいて、前記クエリの種類を特定するステップと、
前記種類に基づく態様に従って、前記問合表現を生成するステップと、をさらに備える、請求項1または請求項2に記載の対話方法。 - 前記種類に基づく態様は、前記問合表現において前記クエリに追加される内容を識別する、請求項7に記載の対話方法。
- 前記問合表現は、肯定または否定を意味する回答を要求する質問を含む、請求項1または請求項2に記載の対話方法。
- 前記状況は、自動車に関する状況を含む、請求項1または請求項2に記載の対話方法。
- 前記条件は、前記状況が発生する頻度を規定する、請求項1または請求項2に記載の対話方法。
- サーバ装置とユーザ端末とによって実施される対話方法であって、
前記ユーザ端末によって、クエリと条件とを含む設定表現を受け取るステップと、
前記サーバ装置によって、前記ユーザ端末から前記設定表現を取得するステップと、
前記サーバ装置によって、前記クエリおよび前記条件をメモリに格納するステップと、
前記サーバ装置によって、前記ユーザ端末に対し、前記条件によって特定される状況が発生したことに応じて、前記クエリを含む問合表現の出力を指示するステップと、
前記ユーザ端末によって、前記サーバ装置からの指示に応じて、前記問合表現を出力するステップと、を備える、対話方法。 - 前記ユーザ端末は、前記設定表現を音声で受け取る、請求項12に記載の対話方法。
- 前記ユーザ端末によって、前記条件によって特定される状況が発生したか否かを判断するためのデータを前記サーバ装置へ送信するステップを、さらに備える、請求項12または請求項13に記載の対話方法。
- プロセッサと、
前記プロセッサによって実行されることにより、前記プロセッサに請求項1または請求項2に記載の対話方法を実施させる、プログラムを格納するメモリと、を備える、サーバ装置。 - プロセッサによって実行されることにより、前記プロセッサに請求項1または請求項2に記載の対話方法を実施させる、プログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022123426A JP7749524B2 (ja) | 2022-08-02 | 2022-08-02 | 対話方法、サーバ装置、およびプログラム |
| US18/361,791 US20240046923A1 (en) | 2022-08-02 | 2023-07-28 | Method and system for proactive interaction |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022123426A JP7749524B2 (ja) | 2022-08-02 | 2022-08-02 | 対話方法、サーバ装置、およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024020889A JP2024020889A (ja) | 2024-02-15 |
| JP7749524B2 true JP7749524B2 (ja) | 2025-10-06 |
Family
ID=89769413
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022123426A Active JP7749524B2 (ja) | 2022-08-02 | 2022-08-02 | 対話方法、サーバ装置、およびプログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20240046923A1 (ja) |
| JP (1) | JP7749524B2 (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001014599A (ja) | 1999-06-25 | 2001-01-19 | Toshiba Corp | 覚醒度管理装置、覚醒度管理方法および覚醒度管理プログラムを格納するコンピュータ読み取り可能な記録媒体 |
| JP2006171709A (ja) | 2004-11-17 | 2006-06-29 | Denso Corp | 音声対話装置、音声対話方法 |
| JP2017068359A (ja) | 2015-09-28 | 2017-04-06 | 株式会社デンソー | 対話装置及び対話制御方法 |
| US20190073363A1 (en) | 2017-09-07 | 2019-03-07 | Xerox Corporation | Contextual memory bandit for proactive dialogs |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08185599A (ja) * | 1994-12-28 | 1996-07-16 | Nissan Motor Co Ltd | 車両用後側方監視装置 |
| US9230560B2 (en) * | 2012-10-08 | 2016-01-05 | Nant Holdings Ip, Llc | Smart home automation systems and methods |
| US10997570B1 (en) * | 2015-07-10 | 2021-05-04 | Wells Fargo Bank, N.A. | Context-aware, vehicle-based mobile banking |
| US10297254B2 (en) * | 2016-10-03 | 2019-05-21 | Google Llc | Task initiation using long-tail voice commands by weighting strength of association of the tasks and their respective commands based on user feedback |
| US11436417B2 (en) * | 2017-05-15 | 2022-09-06 | Google Llc | Providing access to user-controlled resources by automated assistants |
| US10747954B2 (en) * | 2017-10-31 | 2020-08-18 | Baidu Usa Llc | System and method for performing tasks based on user inputs using natural language processing |
| US12198695B2 (en) * | 2019-05-31 | 2025-01-14 | Apple Inc. | Voice assistant discoverability through on-device targeting and personalization |
| US11455996B2 (en) * | 2020-07-27 | 2022-09-27 | Google Llc | Automated assistant adaptation of a response to an utterance and/or of processing of the utterance, based on determined interaction measure |
| US12032627B2 (en) * | 2021-11-15 | 2024-07-09 | Microsoft Technology Licensing, Llc | Hybrid transformer-based dialog processor |
-
2022
- 2022-08-02 JP JP2022123426A patent/JP7749524B2/ja active Active
-
2023
- 2023-07-28 US US18/361,791 patent/US20240046923A1/en active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001014599A (ja) | 1999-06-25 | 2001-01-19 | Toshiba Corp | 覚醒度管理装置、覚醒度管理方法および覚醒度管理プログラムを格納するコンピュータ読み取り可能な記録媒体 |
| JP2006171709A (ja) | 2004-11-17 | 2006-06-29 | Denso Corp | 音声対話装置、音声対話方法 |
| JP2017068359A (ja) | 2015-09-28 | 2017-04-06 | 株式会社デンソー | 対話装置及び対話制御方法 |
| US20190073363A1 (en) | 2017-09-07 | 2019-03-07 | Xerox Corporation | Contextual memory bandit for proactive dialogs |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2024020889A (ja) | 2024-02-15 |
| US20240046923A1 (en) | 2024-02-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20220247701A1 (en) | Chat management system | |
| US20230274746A1 (en) | Dynamic redfish query uri binding from context oriented interaction | |
| US9911412B2 (en) | Evidence-based natural language input recognition | |
| KR100679043B1 (ko) | 음성 대화 인터페이스 장치 및 방법 | |
| CN116648745A (zh) | 用于提供安全自动化助理的方法和系统 | |
| US20210241775A1 (en) | Hybrid speech interface device | |
| CN109545205B (zh) | 基于上下文的虚拟助理实现 | |
| JP2017107078A (ja) | 音声対話方法、音声対話装置及び音声対話プログラム | |
| CN117157643A (zh) | 利用知识蒸馏的ai nlp编码器的域自适应 | |
| JP6084654B2 (ja) | 音声認識装置、音声認識システム、当該音声認識システムで使用される端末、および、話者識別モデルを生成するための方法 | |
| US12361939B2 (en) | Electronic device for providing update information through an artificial intelligence agent service | |
| US20250252136A1 (en) | Free-form, automatically-generated conversational graphical user interfaces | |
| JP2017058673A (ja) | 対話処理装置及び方法と知能型対話処理システム | |
| US20240386886A1 (en) | Generating and updating a custom automated assistant based on a domain-specific resource | |
| US20260010735A1 (en) | Chatbot disambiguation | |
| JP5327838B2 (ja) | 音声入力分散処理方法及び音声入力分散処理システム | |
| WO2019035371A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| JP2019105685A (ja) | 対話管理装置及びプログラム | |
| EP3644309A1 (en) | System and method for integrated printing of voice assistant search results | |
| JP2024020889A (ja) | 対話方法、サーバ装置、およびプログラム | |
| JP7029434B2 (ja) | コンピュータによって実行される方法、サーバ装置、情報処理システム、プログラム、およびクライアント端末 | |
| JP7705739B2 (ja) | 情報提供方法、データベースの生成方法、およびプログラム | |
| CN112346764B (zh) | 数据更新方法、终端设备及计算机可读存储介质 | |
| JP6226911B2 (ja) | サーバ装置、システム、音声認識機能を管理するための方法、および、情報通信端末を制御するためのプログラム | |
| CN108710707A (zh) | 展示弱势群体用户信息的方法、装置、终端设备及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231221 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20241225 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250107 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20250407 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250516 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250826 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250924 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7749524 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |