JPWO2016104736A1 - Communication providing system and communication providing method - Google Patents
Communication providing system and communication providing method Download PDFInfo
- Publication number
- JPWO2016104736A1 JPWO2016104736A1 JP2016566534A JP2016566534A JPWO2016104736A1 JP WO2016104736 A1 JPWO2016104736 A1 JP WO2016104736A1 JP 2016566534 A JP2016566534 A JP 2016566534A JP 2016566534 A JP2016566534 A JP 2016566534A JP WO2016104736 A1 JPWO2016104736 A1 JP WO2016104736A1
- Authority
- JP
- Japan
- Prior art keywords
- user
- answer
- question
- data
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
Abstract
利用者個人の個性、人格を適正に表現することのできるコミュニケーションシステム、コミュニケーション方法を提供することを目的の一つとする。一つ又は複数のソーシャル・ネットワーキング・サービスに登録されている第1の利用者のソーシャルデータと、複数のソーシャル・ネットワーキング・サービスに登録されている複数の利用者のソーシャルデータと、複数のソーシャル・ネットワーキング・サービスから収集された複数のテキストデータと、の情報が記憶されたデータベースと、第1の利用者に対する第2の利用者の質問を、データベースに記憶されている情報の少なくとも一部に基づいて、質問に対する回答を推論し又は学習して決定する人工知能としての機能を有する情報処理モジュールと、を含むコミュニケーション提供システムが提供される。One of the purposes is to provide a communication system and a communication method that can appropriately express the individuality and personality of each user. Social data of a first user registered in one or more social networking services, social data of a plurality of users registered in a plurality of social networking services, and a plurality of social data A plurality of text data collected from a networking service; a database storing information; and a second user query for the first user based on at least a portion of the information stored in the database. Thus, there is provided a communication providing system including an information processing module having a function as an artificial intelligence that infers or learns and determines an answer to a question.
Description
本発明は、インターネット等の電気通信回線を通じてアクセスしたユーザとの間で自動的にコミュニケーションを行う対話型のシステムに関する。 The present invention relates to an interactive system for automatically communicating with a user who has accessed through a telecommunication line such as the Internet.
ソーシャル・ネットワーキング・サービスの普及により、スマートフォン、タブレット端末、パーソナルコンピュータ等のデバイスを使用して複数のユーザ同士が情報を発信し共有することが可能となっている。それにより、個人が取得し又は発信することのできる情報の量は増大し、その範囲は著しく拡大している。端末装置にインストールされたアプリケーション・ソフトウエアを操作すれば、複数人と同時に情報を共有することも容易にできる。コミュニケーションの内容は、音声や文字のみではなく、静止画像や動画によるコミュニケーションも可能となり、情報の量及び質が増大しているといえる。 With the spread of social networking services, it is possible for a plurality of users to transmit and share information using devices such as smartphones, tablet terminals, and personal computers. Thereby, the amount of information that an individual can obtain or transmit has increased, and its range has been significantly expanded. By operating application software installed in the terminal device, information can be easily shared simultaneously with a plurality of people. The content of communication is not limited to voice and text, but communication using still images and moving images is also possible, and it can be said that the amount and quality of information is increasing.
ソーシャル・ネットワーキング・サービスを利用すれば、時間的及び距離的障害を克服して、複数人と多量の情報を相互に、しかもリアルタイムで共有することができる反面、それぞれのユーザはプライベートな時間を持っているのが通常であるため、常にリアルタイムで情報交換ができるとは限らないのが実情である。また、ソーシャル・ネットワーキング・サービスの利用者は、友人として関連付けられた複数人に対し同時に情報を発信することができるが、複数の友人のそれぞれと個別に且つ同時的にコミュニケーションを図ることは困難である。 Social networking services can overcome time and distance obstacles and share a large amount of information with each other in real time, but each user has private time. In reality, it is not always possible to exchange information in real time. In addition, users of social networking services can simultaneously send information to multiple people associated as friends, but it is difficult to communicate with each of multiple friends individually and simultaneously. is there.
ところで、記録媒体に予想される質問に対する回答の文書データを記憶させておき、ユーザの質問に応じて回答を自答的に出力する自動対話型システムが開示されている(特許文献1,2参照)。しかしながら、これらの自動対話型のシステムは、予め回答文書が用意されているので、対話は画一的であり時々刻々と変化する社会情勢に応じた会話をすることができない。また、質問をする相手方の個性や感情を表現できないといった問題がある。
By the way, an automatic interactive system is disclosed that stores document data of answers to expected questions on a recording medium and outputs answers in response to user questions (see
本発明の一実施形態は、このような問題に鑑み、利用者個人の個性、人格を表現することのできるコミュニケーションシステム、コミュニケーション方法を提供することを目的の一つとする。 In view of such a problem, an embodiment of the present invention has an object to provide a communication system and a communication method that can express individual personality and personality of a user.
本発明の一実施形態によれば、一つ又は複数のソーシャル・ネットワーキング・サービスに登録されている第1の利用者のソーシャルデータと、複数のソーシャル・ネットワーキング・サービスに登録されている複数の利用者のソーシャルデータと、複数のソーシャル・ネットワーキング・サービスから収集された複数のテキストデータと、の情報が記憶されたデータベースと、第1の利用者に対する第2の利用者の質問を、データベースに記憶されている情報の少なくとも一部に基づいて、質問に対する回答を推論し又は学習して決定する人工知能としての機能を有する情報処理モジュールと、を含むコミュニケーション提供システムが提供される。 According to one embodiment of the present invention, a first user's social data registered with one or more social networking services and a plurality of uses registered with multiple social networking services. A database in which information of a user's social data and a plurality of text data collected from a plurality of social networking services is stored, and a second user's question for the first user is stored in the database There is provided a communication providing system including an information processing module having a function as an artificial intelligence that infers or learns an answer to a question and determines based on at least a part of the information being asked.
本発明の一実施形態において、データベースは、第1の利用者のソーシャルデータを記憶する第1のデータベースと、複数の利用者のソーシャルデータを記憶する第2のデータベースと、複数のテキストデータを記憶する第3のデータベースと、に階層化されていてもよい。 In one embodiment of the present invention, the database stores a first database that stores social data of a first user, a second database that stores social data of a plurality of users, and a plurality of text data. The third database may be hierarchized.
本発明の一実施形態において、人工知能としての機能を有する情報処理モジュールは、第1のデータベース、第2のデータベース及び第3のデータベースに記録されているデータの中から、質問に対する適切な回答を、上位のデータベースに記録された情報の少なくとも一部に基づいて推論し生成してもよい。 In one embodiment of the present invention, an information processing module having a function as an artificial intelligence sends an appropriate answer to a question from data recorded in the first database, the second database, and the third database. Inference may be made based on at least part of the information recorded in the upper database.
本発明の一実施形態において、人工知能としての機能を有する情報処理モジュールは、第1のデータベースに記憶されている複数の利用者のソーシャルデータから質問に対する回答を傾向分析し、質問に対する回答を推論し又は学習して決定してもよい。 In one embodiment of the present invention, an information processing module having a function as artificial intelligence performs trend analysis on answers to questions from social data of a plurality of users stored in the first database, and infers answers to the questions. Or may be determined by learning.
本発明の一実施形態において、傾向分析は、質問に対する複数の利用者の回答の時間的な変化を分析するものであってもよい。 In one embodiment of the present invention, the trend analysis may analyze a temporal change in answers of a plurality of users to a question.
本発明の一実施形態において、第1の利用者のソーシャルデータ及び複数の利用者のソーシャルデータは、テキストデータ並びに、音声データ、写真データおよびに映像データの一以上から生成されたテキストデータであるものが含まれる。 In one embodiment of the present invention, the first user's social data and the plurality of users' social data are text data and text data generated from one or more of audio data, photo data, and video data. Things are included.
本発明の一実施形態において、類似する質問を類似質問としてグループ化し、類似質問に対応する回答が対応付けられている類似データベースを含み、人工知能としての機能を有する情報処理モジュールは、類似データベースから質問の回答を選択してもよい。 In one embodiment of the present invention, an information processing module including a similar database in which similar questions are grouped as similar questions and an answer corresponding to the similar question is associated, and having a function as an artificial intelligence is obtained from the similar database. An answer to the question may be selected.
本発明の一実施形態において、類似データベースは、類似質問内容をグループ化して記録する類似質問データベースと、類似質問に対応する回答を記憶する類似回答データベースとを含んでいてもよい。 In one embodiment of the present invention, the similar database may include a similar question database that groups and records the contents of similar questions, and a similar answer database that stores answers corresponding to the similar questions.
本発明の一実施形態において、類似データベースは、第1の利用者のソーシャルデータの中から質問と回答の内容を類型化したデータが記憶される第1の類似データベースと、複数の利用者のソーシャルデータの中から質問と回答の内容を類型化したデータが記憶される第2の類似データベースと、テキストデータの中から質問と回答の内容を類型化したデータが記憶される第3の類似データベースとに階層化されていてもよい。 In one embodiment of the present invention, the similar database includes a first similar database in which data categorizing the contents of a question and an answer among social data of the first user, and social data of a plurality of users. A second similar database that stores data that classifies the contents of questions and answers from data, and a third similar database that stores data that classifies the contents of questions and answers from text data; It may be hierarchized.
本発明の一実施形態において、第2の利用者が回答の評価した情報を取得して、回答に評価値を付ける評価モジュールを含んでいてもよい。 In one embodiment of the present invention, an evaluation module that acquires information evaluated by the second user and assigns an evaluation value to the answer may be included.
本発明の一実施形態において、評価モジュールは、回答の評価結果を、第1の利用者に通知する通知モジュールを含んでいてもよい。 In one embodiment of the present invention, the evaluation module may include a notification module for notifying the first user of the evaluation result of the answer.
本発明の一実施形態において、通知モジュールから通知を受けた第1の利用者が、質問に対する回答の内容を編集する編集モジュールと、編集モジュールで編集された内容に基づいて質問に対する回答の内容を更新する更新モジュールとを含んでいてもよい。 In one embodiment of the present invention, a first user who has received a notification from the notification module edits the content of the answer to the question, and the content of the answer to the question based on the content edited by the editing module. And an update module to be updated.
本発明の一実施形態において、評価モジュールは、評価結果に基づいて優先準位を付け、人工知能としての機能を有する情報処理モジュールは、優先順位に基づいて質問に対する適切な回答を推論し又は学習して決定してもよい。 In one embodiment of the present invention, the evaluation module assigns a priority level based on the evaluation result, and the information processing module having a function as artificial intelligence infers or learns an appropriate answer to the question based on the priority. May be determined.
本発明の一実施形態において、データベースは、経時的に、第1の利用者のソーシャルデータ、第2の利用者のソーシャルデータ、テキストデータを更新し蓄積する機能を有していてもよい。 In one embodiment of the present invention, the database may have a function of updating and accumulating the first user's social data, the second user's social data, and text data over time.
本発明の一実施形態において、第1の利用者の三次元画像データを生成する画像データ生成モジュールを含んでいてもよい。 In one embodiment of the present invention, an image data generation module that generates three-dimensional image data of the first user may be included.
本発明の一実施形態において、データベースは、第1の利用者の音声データを含み、音声データから音素データを生成する音素データ生成モジュールと、音素データを用いて会話の音声を生成する音声生成モジュールとを含んでいてもよい。 In one embodiment of the present invention, the database includes the first user's voice data, and generates a phoneme data generation module that generates phoneme data from the voice data, and a voice generation module that generates voice of conversation using the phoneme data. And may be included.
本発明の一実施形態において、人工知能としての機能を有する情報処理モジュールは、質問に対する回答の頻度を解析し、頻度の高い回答に対応する質問を類似データベースに記録する機能を有していてもよい。 In one embodiment of the present invention, an information processing module having a function as artificial intelligence may have a function of analyzing a frequency of answers to a question and recording a question corresponding to a high-frequency answer in a similar database. Good.
本発明の一実施形態において、人工知能としての機能を有する情報処理モジュールは、個人ソーシャルデータに含まれるテキストデータの構文解析をし、質問に対する回答を推論し又は学習して決定する機能を有していてもよい。 In one embodiment of the present invention, an information processing module having a function as artificial intelligence has a function of parsing text data included in personal social data and inferring or learning an answer to a question. It may be.
本発明の一実施形態によれば、第1の利用者の登録情報に基づいて仮想的な第1の利用者の個人像を生成し、第2の利用者が仮想個人に対して送信した質問を受け付け、質問に対する回答を、第1の利用者のソーシャルデータ、複数の利用者のソーシャルデータ又は予め登録されている複数のテキストデータのいずれか一種に基づいて推論し又は学習して決定し、決定された回答を、第2の利用者に提供するコミュニケーション提供方法が提供される。 According to one embodiment of the present invention, a question that a virtual personal image of the first user is generated based on the registration information of the first user and is transmitted to the virtual individual by the second user. The answer to the question is determined by inferring or learning based on one type of social data of the first user, social data of a plurality of users or a plurality of text data registered in advance, A communication providing method for providing the determined answer to the second user is provided.
本発明の一実施形態において、質問に対する回答を、第1に第1の利用者のソーシャルデータを検索し、適切な回答を得られないとき、第2に複数の利用者のソーシャルデータを検索し、適切な回答を得られないとき、第3に予め登録されている複数のソーシャルデータを検索するようにしてもよい。 In one embodiment of the present invention, first, the first user's social data is searched for an answer to the question, and when an appropriate answer cannot be obtained, the second is searched for a plurality of users' social data. Thirdly, when an appropriate answer cannot be obtained, a plurality of social data registered in advance may be searched.
本発明の一実施形態において、質問に対する回答を、複数の利用者のソーシャルデータから、質問に対する回答を傾向分析し、質問に対する回答を推論し又は学習して決定するようにしてもよい。 In one embodiment of the present invention, the answer to the question may be determined by trend analysis of the answer to the question from the social data of a plurality of users, and inferring or learning the answer to the question.
本発明の一実施形態において、傾向分析は、質問に対する複数の利用者の回答の時間的な変化を分析するものであってもよい。 In one embodiment of the present invention, the trend analysis may analyze a temporal change in answers of a plurality of users to a question.
本発明の一実施形態において、第1の利用者のソーシャルデータ及び複数の利用者のソーシャルデータは、テキストデータ及び、音声データ、写真データ並びに映像データから生成されたテキストデータであってもよい。 In one embodiment of the present invention, the first user's social data and the plurality of users' social data may be text data and text data generated from audio data, photo data, and video data.
本発明の一実施形態において、類似する質問を類似質問としてグループ化し、類似質問に対応する回答を対応付けて類似データベースに記憶させ、質問に対する回答を、類似データベースから質問の回答を選択するようにしてもよい。 In an embodiment of the present invention, similar questions are grouped as similar questions, answers corresponding to similar questions are stored in a similar database in association with each other, and answers to the questions are selected from the similar database. May be.
本発明の一実施形態において、類似データベースに、第1の利用者のソーシャルデータの中から質問と回答の内容を類型化したデータが記憶させ、複数の利用者のソーシャルデータの中から質問と回答の内容を類型化したデータが記憶させ、テキストデータの中から質問と回答の内容を類型化したデータが記憶させてもよい。 In one embodiment of the present invention, data similar to the contents of questions and answers is stored in the similar database from the social data of the first user, and the questions and answers are stored from the social data of a plurality of users. May be stored, and data in which the contents of questions and answers are categorized from text data may be stored.
本発明の一実施形態において、第2の利用者が回答の評価した情報を取得して、回答に評価値を付けるようにしてもよい。 In an embodiment of the present invention, information evaluated by the second user may be acquired and an evaluation value may be attached to the answer.
本発明の一実施形態において、回答の評価結果を、第1の利用者に通知するようにしてもよい。 In one embodiment of the present invention, the evaluation result of the answer may be notified to the first user.
本発明の一実施形態において、通知モジュールから通知を受けた第1の利用者が、質問に対する回答の内容を編集した内容を受け付け、編集された内容に基づいて質問に対する回答の内容を更新するようにしてもよい。 In one embodiment of the present invention, the first user who receives the notification from the notification module receives the edited content of the answer to the question and updates the content of the answer to the question based on the edited content. It may be.
本発明の一実施形態において、評価結果に基づいて優先準位を付け、優先順位に基づいて質問に対する適切な回答を推論し又は学習して決定するようにしてもよい。 In one embodiment of the present invention, a priority level may be assigned based on the evaluation result, and an appropriate answer to the question may be inferred or learned based on the priority order.
本発明の一実施形態において、第1の利用者のソーシャルデータ、第2の利用者のソーシャルデータ、テキストデータを経時的に更新し蓄積するようにしてもよい。 In one embodiment of the present invention, the social data of the first user, the social data of the second user, and the text data may be updated and accumulated over time.
本発明の一実施形態において、第1の利用者の三次元画像データを生成するようにしてもよい。 In an embodiment of the present invention, three-dimensional image data of the first user may be generated.
本発明の一実施形態において、第1の利用者の音声データを記憶して、音声データから音素データを生成し、音素データを用いて会話の音声を生成するようにしてもよい。 In one embodiment of the present invention, the first user's voice data may be stored, phoneme data may be generated from the voice data, and conversational voice may be generated using the phoneme data.
本発明の一実施形態において、質問に対する回答の頻度を解析し、頻度の高い回答に対応する質問を類似データベースに記録するようにしてもよい。 In one embodiment of the present invention, the frequency of answers to a question may be analyzed, and a question corresponding to a high-frequency answer may be recorded in a similar database.
本発明の一実施形態において、個人ソーシャルデータに含まれるテキストデータの構文解析をし、質問に対する回答を推論し又は学習して決定するようにしてもよい。 In one embodiment of the present invention, text data included in personal social data may be parsed and an answer to a question may be inferred or learned to be determined.
本発明の一実施形態によれば、利用者が利用している様々なソーシャル・ネットワーキング・サービスからデータを取得し、データベースに蓄積することで、人工知能(AI)が利用者の思考を学習し、質問に対する適切な回答を提供するシステムを提供することができる。 According to an embodiment of the present invention, artificial intelligence (AI) learns a user's thoughts by acquiring data from various social networking services used by the user and storing it in a database. A system that provides appropriate answers to questions can be provided.
以下、本発明の実施の形態を、図面等を参照しながら説明する。但し、本発明は多くの異なる態様で実施することが可能であり、以下に例示する実施の形態の記載内容に限定して解釈されるものではない。また、図面は説明をより明確にするため、実際の態様に比べ、各部の幅、厚さ、形状等について模式的に表される場合があるが、あくまで一例であって、本発明の解釈を限定するものではない。また、本明細書と各図において、既出の図に関して前述したものと同様の要素には、同一の符号を付して、詳細な説明を適宜省略することがある。 Embodiments of the present invention will be described below with reference to the drawings. However, the present invention can be implemented in many different modes and should not be construed as being limited to the description of the embodiments exemplified below. In addition, the drawings may be schematically represented with respect to the width, thickness, shape, and the like of each part in comparison with actual aspects for the sake of clarity of explanation, but are merely examples, and the interpretation of the present invention is not limited. It is not limited. In addition, in the present specification and each drawing, elements similar to those described above with reference to the previous drawings are denoted by the same reference numerals, and detailed description may be omitted as appropriate.
[システムの概要]
図1Aは、本発明の一実施形態に係るコミュニケーション提供システムと、ソーシャル・ネットワーキング・サービス(以下「SNS」ともいう。)及び、このコミュニケーション提供システムを利用する利用者との関係を示す。本実施形態に係るコミュニケーション提供システム100は、利用者が利用している様々なSNSからデータを取得しデータベースに蓄積する機能を有している。コミュニケーション提供システム100はさらに、データベースに蓄積された情報に基づいて、利用者の思考を推論し学習する機能(人工知能としての機能)を有し、質問に対する適切な回答を提供可能としている。以下、その詳細を説明する。[System Overview]
FIG. 1A shows a relationship between a communication providing system according to an embodiment of the present invention, a social networking service (hereinafter also referred to as “SNS”), and a user who uses this communication providing system. The
図1Aにおいて、コミュニケーション提供システム100は、複数の利用者202との間で電気通信回線を通じてアクセス可能な状態に置かれている。複数の利用者202は、コミュニケーション提供システム100が提供するサービスによって、直接的及び間接的にコミュニケーションを相互に図ることができる。
In FIG. 1A, the
図1Aは、複数の利用者202が、それぞれのユーザ端末200によってコミュニケーション提供システム100と電気通信回線を通じて双方に通信可能な状態に置かれていることを示している。ここで、複数の利用者202は、コミュニケーション提供システム100を介して提供されるサービスを受けるために予め登録された利用者の集合であることが好ましい。コミュニケーション提供システム100を介して提供されるサービスの利用を登録制とすることで、コミュニケーションの安全性及び信頼性を高めることができる。
FIG. 1A shows that a plurality of
なお、必ずしも、複数の利用者202の全員がコミュニケーション提供システム100を介して提供されるサービスを受けるために予め登録されている必要は、ない。例えば、複数の利用者202の少なくとも一人は匿名のユーザとしてコミュニケーション提供システム100を利用できるようになっていてもよい。
Note that it is not always necessary that all of the plurality of
コミュニケーション提供システム100は、公衆に提供されているSNS300の一つ又は複数と通信可能な状態に置かれている。SNS300としては、例えば、Twitter(登録商標)、Facebook(登録商標)等であり、インターネット上で提供される様々なコミュニケーションサービスが例示される。なお、SNSにより提供されるコミュニケーションの態様は様々であり、上記に例示されるサービスに限定されるものではない。本実施形態において、コミュニケーション提供システム100と連携するSNS300は、その利用者のソーシャルデータが提供されるものであればよく、複数の利用者間で情報を共有できる態様のものであることが好ましい。
The
なお、本明細書において「ソーシャルデータ」とは、何らかのSNSを通じて、利用者が特定人(例えば、友人として登録されている他の利用者。)又は不特定人に発信する文字(顔文字を含む)、記号、音声、静止画像、動画等の情報をいう。また、「個人ソーシャルデータ」とは、複数の利用者の内、特定個人のソーシャルデータを指すものとする。 In this specification, “social data” refers to characters (including emoticons) that a user sends to a specific person (for example, another user registered as a friend) or an unspecified person through some kind of SNS. ), Information such as symbols, sounds, still images, and moving images. Further, “personal social data” refers to social data of a specific individual among a plurality of users.
コミュニケーション提供システム100は、少なくとも一つ、好ましくは複数のSNS300から、それぞれに蓄積されるソーシャルデータを取得する。コミュニケーション提供システム100が行うソーシャルデータの取得は、リアルタイムで実行されてもよいし、一定時間又は一定期間ごとに適時行われてもよい。コミュニケーション提供システム100は、取得したソーシャルデータをデータベースに蓄積する。データベースに蓄積される情報の量及び質を高めるためには、コミュニケーション提供システム100は複数のSNS300と連携してソーシャルデータを取得することが好ましい。
The
具体的なソーシャルデータの取得と取得されたソーシャルデータがデータベースに蓄積される過程の一例としては、次のものがある。まず、第1の利用者204が、パーソナルコンピュータやスマートフォンなどを用いて、第1の利用者204の属性をコミュニケーション提供システム100に登録を行う。このために、第1の利用者204は、例えば、図1Bに示すように、「ようこそpersonalized AIへ」に示される画面をブラウザやアプリを用いて表示を行い、「登録へ」のボタン1を押す。すると、第1の利用者204の属性を入力する画面が表示される。第1の利用者204の属性には、SNS300のいずれのSNSからソーシャルデータを取得するかを特定するための情報(SNS特定情報)および、ソーシャルデータを取得するSNSにおける第1の利用者204の認証情報が含まれ得る。例えば、図1Cに示されるように、SNS特定情報をフィールド2に入力し、認証情報として、ユーザ名およびパスワードをフィールド3および4に入力する。そして、「登録」のボタン5を押す。
Specific examples of the process of acquiring social data and the acquired social data in the database include the following. First, the
第1の利用者204の属性は、コミュニケーション提供システム100の記憶装置、例えばデータベースなどを格納する2次記憶などに格納される。コミュニケーション提供システム100は、SNS特定情報およびSNSの認証情報を用いて、SNS特定情報で特定されるSNSにアクセスを行い、第1の利用者204の認証情報を用いてSNSにログインなどを行う。この後、コミュニケーション提供システム100は、そのSNSに格納されている第1の利用者204に関する情報、すなわちソーシャルデータ、を取得する。第1の利用者204に関する情報には、第1の利用者204がそのSNSにおける特定のユーザと交換したメッセージや、第1の利用者204がそのSNSに投稿した記事、写真、音声情報、動画(音声情報を含み得る)が含まれる。
The attributes of the
コミュニケーション提供システム100は、そのSNSより取得した第1の利用者204に関する情報をデータベースに格納する。この場合、コミュニケーション提供システム100は、そのSNSより取得した第1の利用者204に関する情報を、そのままデータベースにすることができる。あるいは、コミュニケーション提供システム100は、取得した情報の属性や内容に応じて、第1の利用者204に関する情報を、別の情報に変換してデータベースに蓄積してもよい。
The
例えば、そのSNSにおける第1の利用者204が別の利用者からの質問に対して回答したことを表わす情報が取得されると、別の利用者からの質問とそれに対する第1の利用者204の回答とを互いに関連付けてデータベースに蓄積することができる。この場合、データベースは、複数の領域(サブデータベース、あるいはテーブルなど)により構成されており、(1)質問が蓄積される領域および(2)回答が蓄積される領域を含むことができる。したがって、質問が蓄積される領域には、別の利用者からの質問が蓄積され、回答が蓄積される領域には、第1の利用者204の回答が蓄積される。また、別の利用者からの質問と第1の利用者204の回答とは互いに関連付けられ、例えば、第3の領域に関連付けのための情報が格納される。例えば、質問に対する主キーと回答に関する主キーとの組が第3の領域に格納される。
For example, when information indicating that the
なお、コミュニケーション提供システム100は、SNS特定情報により特定されるSNSから第1の利用者204に関する全ての情報が取得されデータベースに蓄積されていない場合には、データベースに蓄積された情報の、第1の利用者204に関する全ての情報の比率を第1の利用者204に提示してもよい。これにより、第1の利用者204は、情報の蓄積の程度を知ることができ、例えば、複数の利用者202のいずれかからの質問に対して、コミュニケーション提供システム100が第1の利用者204に代わって回答を行うか否かを決定することができる。また、このような情報の蓄積の程度を複数の利用者202に提示することにより、質問に対する回答の適切さを予想することも可能となる。
Note that the
例えば、図1Dに示されるように、データベースに蓄積された情報の、第1の利用者204に関する全ての情報の比率を円グラフ6として表示し、60%の情報がデータベースに蓄積された場合には、「あなたの60%になりました。」と表示される。第1の利用者204が、60%以上であればよいと考えれば、「公開」のボタン7を押す。これにより、コミュニケーション提供システム100は、データベースに蓄積された情報を用いて、他のユーザからの質問に回答を行う。
For example, as shown in FIG. 1D, when the ratio of all information related to the
また第1の利用者204が60%では不満であると考えれば、その後、全て(100%)の情報がデータベースに蓄積され、例えば図1Eに示すように「私はあなたになり切りました」というメッセージが表示される。第1の利用者204がこれで満足であれば、「公開」のボタン8を押す。これにより、コミュニケーション提供システム100は、データベースに蓄積された情報を用いて、他のユーザからの質問に回答を行う。
If the
なお、第1の利用者204は、コミュニケーション提供システム100に試みの質問をいくつか行うことが可能になっていてもよい。いくつかの試みの質問に対する回答を見て、「公開」のボタン7および8を押すようになっていてもよい。
Note that the
SNSによって提供されるソーシャルデータであっても、利用者のプライバシーは確保されるべきである。本実施形態に係るコミュニケーション提供システム100は、それぞれのSNS300で利用者が個別に設定している情報を反映することが可能となっている。例えば、あるSNS300を利用する利用者が、個人プロフィールは非公開とし、SNSに投稿するメッセージは公開すると設定している場合、さらにはメッセージ毎に公開又は非公開、公開の範囲が設定されている場合、コミュニケーション提供システム100はその設定を引き継ぐことができる。
Even with social data provided by SNS, the privacy of the user should be ensured. The
したがって、コミュニケーション提供システム100は、第1の利用者204に関する情報を取得してデータベースに蓄積する場合、その情報の開示の範囲もデータベースに蓄積することになる。例えば、図1Fに示すように、SNS6(301)における利用者207との1対1のメッセージの交換301−1であれば、このメッセージの交換301−1による質問と回答は、利用者207に対してのみ開示される。言い換えると、利用者207以外の利用者Aがコミュニケーション提供システム100を用いて行った質問が、第1の利用者204が利用者207との1対1のメッセージの交換においてのみ出現したのならば、その質問に対する回答は、利用者Aには提供されないようになる。
Therefore, when the
第1の利用者204がSNS6における特定のグループにおいてのみ回答した回答についても、その特定のグループに属している利用者以外が質問を行っても、その回答は提供されない。例えば、図1Fに示すように、SNS6において、第1の利用者204が、グループ301−2において質問を受けて、回答した場合、その回答は、グループ3010−2に属している利用者208に開示される。
Even if the
一方、第1の利用者204が、SNSにおいて、だれでも見られる状態で質問に対して回答などを行った場合には、どの利用者がその質問を行っても、その回答がコミュニケーション提供システム100から提供される。例えば、第1の利用者204が、SNS6(301)に属しているどの利用者にも閲覧可能な状態(301−3)下において、質問に回答すると、第1の利用者204とは、特別な関係がなく、単に同じSNS6に属している利用者209から同様の質問をうけると、その回答が提供される。
On the other hand, when the
本実施形態において、コミュニケーション提供システム100からサービスが提供される複数の利用者202は、同時に一つ又は複数のSNS300の利用者であることが好ましい。コミュニケーション提供システム100は、複数の利用者202のそれぞれのソーシャルデータを、公衆に提供されているSNS300から取得するためである。すなわち、複数の利用者202は、SNS300のコミュニティに参加していることで、コミュニケーション提供システム100を介してサービスの提供を受けることができる。
In this embodiment, it is preferable that the plurality of
図1Aは、第2の利用者206が、コミュニケーション提供システム100を介して、第1の利用者204と対話をする態様を示す。だたし、本実施形態における特徴の一つは、第1の利用者204と第2の利用者206とは直接的にメッセージの交換をするのではなく、コミュニケーション提供システム100によって生成された仮想的な第1の利用者204bと実在する第2の利用者206とが対話する形式をとっている。これにより、同じ質問が複数回、第1の利用者204に対して行われたとしても、第1の利用者204に代わってコミュニケーション提供システム100が仮想的な第1の利用者204bとして回答を行うことができる。これにより、第1の利用者204の手間を減少させることができる。例えば、第1の利用者204が著名人である場合、多くの利用者が同じ質問を行っても、第1の利用者204には負担とならないようにすることができる。また、特殊な質問がされたとしても、そのような質問に対して第1の利用者204が過去に回答している場合には、第1の利用者204が過去の回答を探すことなく、コミュニケーション提供システム100が仮想的な第1の利用者204bとして回答を行うことができる。これによっても第1の利用者204の手間を減少させることができる。
FIG. 1A shows a mode in which the
この場合における対話の一例は、次の通りである。まず、第2の利用者206は、コミュニケーション提供システム100にアクセスし、必要ならばログインなどを行った後、対話を希望する相手(第1の利用者204b)を特定する。例えば、図1Gに示すように、質問を行なうための画面を表示させ、「ログインする」のボタン9を押し、ログインする。あるいは、匿名の利用者として質問をする場合には、「匿名」のボタン10を押す。また、対話を希望する相手を特定するために、図1Hに示すように、フィールド11に対話を希望する相手のユーザ名を入力する。あるいは、第2の利用者206のコミュニケーション提供システム100における知人の一覧を表示して、対話を希望する相手を特定することもできる。
An example of the dialogue in this case is as follows. First, the
そしてユーザ端末200から相手(第1の利用者204b)に対する質問を送信する。例えば、図1Hに示すように、フィールド12に質問を入力し、エンターキーなどを押すことにより、コミュニケーション提供システム100に質問が受け付けられる。質問を受け付けたコミュニケーション提供システム100は、それに対する適切な回答をユーザ端末200に送信する。例えば、フィールド12に「あなたは誰ですか?」という質問が入力されたとすると、図1Jに示すように、フィールド14に「私は社長です。」という回答が表示される。また、このとき、第1の利用者204の顔写真データ13が表示されるようになっていてもよい。この顔写真データ13は、後述するように、3次元データにより生成されたデータであってもよい。
And the question with respect to the other party (1st user 204b) is transmitted from the
このとき、コミュニケーション提供システム100が送信する回答は、第1の例として、第1の利用者204の個人ソーシャルデータに基づき生成される。第2の例として、コミュニケーション提供システム100は、個人ソーシャルデータの中から適切な回答を見つけられないとき、複数の利用者のソーシャルデータを参照して適切な回答を生成し応答する。
At this time, the answer transmitted by the
この場合、コンピュータシステムの特性により、第2の利用者206が質問をするために要する時間(ユーザ端末200を操作する時間)に対し、仮想的な第1の利用者204bの応答は極めて速いものとなる。そのため、複数の利用者202は、上述のように、同時多発的に仮想的な第1の利用者204bと対話をすることが可能となる。
In this case, due to the characteristics of the computer system, the response of the virtual first user 204b is extremely fast with respect to the time required for the
本実施形態において、第1の利用者204の個人ソーシャルデータに基づいて生成される仮想的な第1の利用者204bは、コミュニケーション提供システム100を介して具現化されるものと考えることができる。別の観点からは、コミュニケーション提供システム100によって実行されるコンピュータプログラム又はアプリケーションプログラム上に仮想的な第1の利用者204bが存在するものとみなすこともできる。あるいは、仮想的な第1の利用者204bは、コミュニケーション提供システム100を構成するハードウェア資源と、その上で実行されるソフトウェア資源とによって具現化される存在であるとみなすこともできる。
In the present embodiment, the virtual first user 204b generated based on the personal social data of the
図2は、本実施形態に係るコミュニケーション提供システム100の機能的構成を示す。コミュニケーション提供システム100は、人工知能としての機能を有する情報処理モジュール104、データベース102を含んで構成されている。
FIG. 2 shows a functional configuration of the
なお、図2で示すコミュニケーション提供システム100は、ハードディスク、半導体メモリ及び磁気メモリ等のメモリモジュール又はストレージデバイスによりデータベース102が実現され、中央処理装置(CPU)又はこれと同等の機能を有する演算処理回路により実現されるデバイスにより情報処理モジュール104が実現され得る。ここで、情報処理モジュールとは、ハードウェア資源、又は、ハードウェア資源とソフトウェア資源により実現される機能ブロックともみなすことができ、情報処理部又は情報処理手段と呼ばれる場合もある。以下、本明細書でモジュールと標記されるものについては同様である。
The
ここで、人工知能とは、推論、判断など知的な機能をハードウェア資源及びソフトウェア資源を使って実現されるものであり、知識としてのデータを記憶するデータベースを含む概念として認識されてもよい。また、人工知能には学習する機能があり、それにより過去の情報(データ)から将来を予測する能力を有していてもよい。本実施形態においても、人工知能としての機能を有する情報処理モジュール104とは、少なくとも上記のように通常の人工知能としての機能を有するものを含むものとする。
Here, the artificial intelligence means that intelligent functions such as inference and judgment are realized by using hardware resources and software resources, and may be recognized as a concept including a database for storing data as knowledge. . Artificial intelligence also has a learning function, which may have the ability to predict the future from past information (data). Also in the present embodiment, the
データベース102は、少なくともソーシャルデータを記憶する領域を有している。図2では、データベース102に、SNS300から取得されるソーシャルデータを記憶する第1のデータベース102a、第2のデータベース102bが含まれている態様を示す。また、第3のデータベース102cは、同様にソーシャルデータを含むようにしてもよいし、コミュニケーションで使用される単語、語彙、定型文が予め記憶されていてもよい。
The
第1のデータベース102a、第2のデータベース102b及び第3のデータベース102cは、質問と回答(または、問いかけと応答)といったように、ソーシャルデータに含まれる対話の内容を関連付けられて記憶されている。また、個人のツイート(つぶやき)のように一方的に発信されるソーシャルデータが含まれていてもよい。
The
一般的には、ツイート(つぶやき)は質問に対する回答ではない場合が多い。この場合には、ツイート(つぶやき)の構文解析などを行い、主語、目的語、場所や時間、態様を表わす副詞句などに分解し、主語、目的語、場所や時間、態様を表わす副詞句などを尋ねる質問とそれに対する回答とを生成して、データベースに第1の利用者204に関する情報を蓄積してもよい。例えば、第1の利用者204が「私の妹が、昨日、自動車を購入する契約をしました。」とつぶやきを行ったとする。このとき、主語は、「私の妹」、目的語は、「自動車」および「契約」、時間を表わす副詞句は、「昨日」となる。そこで、「誰がしたのですか?」という質問を生成し「私の妹です。」という回答を生成し、「いつしたのですか?」という質問を生成し、「昨日です。」という回答を生成し、「何を購入する契約をしたのですか?」という質問を生成し「自動車です。」という回答を生成し、「何をしたのですか?」という質問を生成し「自動車を購入する契約です。」という回答を生成し、それぞれをデータベースに蓄積することができる。
In general, tweets (tweets) are often not answers to questions. In this case, the tweet (tweet) is parsed and decomposed into adverb phrases representing the subject, object, place, time, and form, and adverb phrases representing the subject, object, place, time, and form, etc. Information about the
類似データベース106は、類似する質問を一つのクループとし、そのグループに対する回答が関連付けられて記憶されている。類似データベース106は、前述の第1乃至第3のデータベースに対応して、第1の類似データベース106a、第2の類似データベース106b、第3の類似データベース106cに分割されていてもよい。
The
人工知能としての機能を有する情報処理モジュール104は、データベース102及び類似データベース106と連携して人工知能としての機能を発揮する外、メッセージ(回答情報等)の編集機能、メッセージ(回答情報等)の評価機能、評価結果の通知機能、利用者の音声を再現するための音素生成機能、新しい質問を生成する質問生成機能、利用者の三次元映像を生成する三次元映像化機能を含んでいる。
The
コミュニケーション提供システム100は、複数の利用者(図2で例示する、ユーザ端末202a、202b)と双方向に通信可能な状態に置かれている。別言すれば、ユーザ端末202a、202bはコミュニケーション提供システム100及びSNS300と通信可能であり、一方、コミュニケーション提供システム100から見れば複数のユーザ端末202a、202bと通信可能であり、SNS300からソーシャルデータを入手可能な状態に置かれている。
The
コミュニケーション提供システム100は、第1の利用者204に対する仮想的な第1の利用者204bをシステム上に生成し、複数の他の利用者と逐次的又は同時多発的に会話をすることが可能である。この場合、仮想的な第1の利用者204bは、アクセスしてくる全ての利用者と平等に会話をすることが可能である。一方、第1の利用者204にとっては、複数の第2の利用者202の中に、親密度合(家族、友人関係)や組織的な関係(同一法人又はグループに属するか否か)等によって、回答の範囲を制限したいという要求がある。すなわち、第1の利用者204は、第2の利用者206との関係において、質問に対して回答を留保したい場合もある。
The
本実施形態に係るコミュニケーション提供システム100は、第1の利用者204が複数の利用者202に対して、仮想的な第1の利用者204bによって自動的に回答をしても良いか否かの設定をしておく機能を有している。図1Kは、第1の利用者204が操作するユーザ端末の画面表示の一例を示す。図1Kで示す画面表示は、第1の利用者204がコミュニケーション提供システム100を介して提供されるサービスを受けるために登録されている利用者毎に、自動的な回答をしても良いか否かを設定する段階を示す。図1Kでは、利用者名や利用者のサムネイル画像等による利用者を識別する表示210と、回答可否の選択スイッチ211が示されている。第1の利用者204は、このような画面表示を見ながら、利用者ごとに自動的な回答可否を設定することができる。なお、このような設定は適時変更可能であり、第1の利用者204は適時回答可否の選択スイッチ211を操作して設定を変更することができる。
In the
図1Lは、複数の第2の利用者202に対し、回答可否の設定が個別になされている場合におけるコミュニケーション提供システム100の動作を示す。例えば、第2の利用者206から質問がされた場合(S31)、その利用者の識別と自動的な回答可否の判断を行う(S32)。質問をした第2の利用者206が、第1の利用者204によって「回答可」と設定されている場合、仮想的な第1の利用者204bは回答を生成し(S33)、第2の利用者206に対して回答をする(S34)。一方、質問をした第2の利用者206が、第1の利用者204によって「回答不可」と設定されている場合(S32)、仮想的な第1の利用者204bは回答を留保することとなる。
FIG. 1L shows the operation of the
このように、コミュニケーション提供システム100は、第1の利用者204が、複数の第2の利用者202に対し、個別に回答可否の設定をする機能を提供することができる。すなわち、コミュニケーション提供システム100は、第2の利用による質問に対し、情報処理モジュール104で回答を生成するか否かの設定をする機能を有する。それにより、仮想的な第1の利用者204bによるコミュニケーションの範囲を設定することができる。これにより、第1の利用者204にとっては、特定の利用者とのコミュニケーションを制限することができ、コミュニケーション提供システム100においては、仮想的な第1の利用者204bが複数の第2の利用者202の全てと、全ての質問に対する回答をしなくても良いので、システムの負荷を軽減することができる。
As described above, the
以下、コミュニケーション提供システム100が利用者の仮想的個人を生成し、当該仮想個人が他の利用者とコミュニケーションを可能とするための構成を詳細に説明する。
Hereinafter, a configuration for generating a virtual individual of the user by the
[データベース]
図3Aは、本発明の一実施形態に係るコミュニケーション提供システム100におけるデータベース102構成を説明する図である。図3Aで示すように、データベース102は複数の階層に分かれて構築されていてもよい。第1のデータベース102aは、各利用者に対応するデータベースであり、個人ソーシャルデータが記憶されている。この第1のデータベース102aに記憶される個人ソーシャルデータは、コミュニケーション提供システム100において、仮想的な利用者データを生成するときの基礎データとしても利用される。したがって、個人ソーシャルデータおよびそれから生成される情報は、利用者ごとにデータベースに記憶される。また、個人ソーシャルデータから生成される情報には、後述のように、個人ソーシャルデータをキーワードにより分析して得られるベクトル、個人ソーシャルデータをコンセプトにより分析して得られるベクトル、個人ソーシャルデータをタイプにより分析したベクトル、および、個人ソーシャルデータをグループにより分析したベクトルのいずれか一以上が含まれる。[Database]
FIG. 3A is a diagram illustrating the configuration of the
第1のデータベース102aに記憶されるデータは、複数のSNS300から取得される個人ソーシャルデータを含んでいる。例えば、ある利用者がSNSに投稿したコメント、当該利用者と他の利用者との間で、SNS上で交わされたコミュニケーションの内容、当該利用者のツイート(つぶやき)などの情報が記憶されている。また、上述したように、質問と回答とを生成して、これらが記憶されているようにすることもできる。
The data stored in the
第2のデータベース102bは、複数の利用者のソーシャルデータが記憶されている。第2のデータベース102bに記憶されるデータは、複数のSNS300から取得されるそれぞれの利用者のソーシャルデータを含んでいる。第2のデータベース102bは第1のデータベース102aと比べて、記憶されるデータ量が多くなっている。この第2のデータベース102bは、階層的には第1のデータベース102aの下位に位置している。
The
なお、第1のデータベース102aに記憶されているソーシャルデータの変化に基づいて、第2のデータベース102bに記憶されているデータを変更することが可能である。例えば、多数の利用者が同様の質問に対する回答の長さや文体、内容が変化することが検出された場合に、その変化に応じて第2のデータベース102bに記憶されているデータを変更することが可能である。すなわち、図3Bに示すように、第1のデータベース102aに対する傾向分析を行い、第2のデータベース102bを更新することができる。このような場合の一例としては、「あなたはどのような人ですか?」という質問に対して、従来は多数の利用者が、「私は短気な性格です。」などというように、性格を返答していたのに対して、近時は、「私は会社員です。」などというように、職業を返答するような変化が検出された場合に、この変化に応じて、第2のデータベース102bに記憶されているデータを変更し、「あなたはどのような人ですか?」という質問に対して、職業を返答するようにすることもできる。なお、このような変更を「質問に対する回答を傾向分析する」という場合がある。
Note that the data stored in the
第3のデータベース102cは、複数のテキストデータを記憶している。第3のデータベース102cに記憶されるデータは、予め設定された任意のテキストデータであってもよく、またはSNS上に出現するテキストの中で出現頻度の高いテキストを収集したものであってもよい。例えば、SNSにおいて交わされるチャットと呼ばれるリアルタイムコミュニケーションの中から出現頻度の高いテキストを収集したものであってもよい。
The
具体的に、第1のデータベース102aに記憶される第1の利用者のソーシャルデータは、チャットと呼ばれるリアルタイムコミュニケーションにおけるデータ、Twitter(登録商標)等にアップロードされたツイート、Facebook(登録商標)等にアップロードされたコメント、並びにコメントに対する他の利用者のコメント等が記憶されている。また、第2のデータベース102bに記憶される複数の利用者のソーシャルデータは、上記と同様のデータを含み、さらに、質問とそれに対する回答のテキストデータが関連付けられて記憶されていてもよい。また、第3のデータベース102cにおいても、複数のテキストデータが、質問とそれに対する回答と言う形式で関連付けられて記憶されていてもよい。
Specifically, the first user's social data stored in the
第1のデータベース102a、第2のデータベース102bに記憶されるソーシャルデータは、テキストデータであることが好ましい。しかし、このテキストデータは、SNSの利用者が作成したテキストデータのみならず、音声データ、写真データ及び映像データから生成されたテキストデータが含まれていてもよい。
The social data stored in the
例えば、音声データ及び映像データに含まれる音声データは、音声をテキスト変換してテキストデータとしてデータベースに記憶させることができる。また、利用者が写真や動画をSNSにアップデートするときは、コメントを同時に付す場合があり、またそのコメントに対する他の利用者のコメントが付けられる場合がある。また、写真や動画、音声には、撮影場所やその内容がタグとして付与される場合がある。そこで、写真データ及び映像データからテキストデータを生成するに当たっては、それに付されたタグ、コメント等のデータをテキストデータとし、データベースに記憶させることができる。また、写真データ及び映像データが取得された位置情報(国名、地名等)、日付情報をテキストデータとしてデータベースに記憶させることができる。言い換えると、音声データ、写真データおよび映像データのいずれか一以上に基づいて、テキストデータを生成し、データベースに記憶することができる。 For example, audio data included in audio data and video data can be converted into text and stored in a database as text data. In addition, when a user updates a photo or video to the SNS, a comment may be attached at the same time, and another user's comment may be attached to the comment. In addition, in some cases, a photo location, a content, or a content is added to a photo, a moving image, or a sound. Therefore, in generating text data from photo data and video data, data such as tags and comments attached thereto can be stored as text data in a database. In addition, position information (country name, place name, etc.) and date information from which photo data and video data are acquired can be stored in a database as text data. In other words, text data can be generated and stored in a database based on one or more of audio data, photo data, and video data.
このようなデータベース102は、図2を参照して説明したように、人工知能としての機能を有する情報処理モジュール104と連携し、または協働して動作する。第1のデータベース102aは利用者の個人ソーシャルデータが記憶されるので、この階層を用いたものは個人を反映させる人工知能として「プライベートAI」あるいは「パーソナライズド(personalized)AI」と表現することもできる。また第2のデータベースは、利用者全体のソーシャルデータが記憶されるので、この階層を使って実現されるものは「エブリワンAI」あるいは「コモンセンスAI」と表現することもできる。
As described with reference to FIG. 2, such a
[情報処理モジュール(人工知能)]
人工知能としての機能を有する情報処理モジュール104は、データベース102に記憶されているソーシャルデータを用いて仮想個人を生成し、実在の利用者とコミュニケーションを行う。人工知能としての機能を有する情報処理モジュール104は、例えば、データベース102に記憶されているテキストデータを認識し、質問に対する回答を作成又は生成する機能を有する。このとき人工知能としての機能を有する情報処理モジュール104は、データベース102に記憶されたテキストデータから、質問に対する適切な回答を推論し又は学習して決定する機能を有している。[Information processing module (artificial intelligence)]
The
人工知能としての機能を有する情報処理モジュール104は、仮想的な第1の利用者204bに対する第2の利用者206の質問を受け付け、それに対する回答を作成又は生成する。このとき、人工知能としての機能を有する情報処理モジュール104は、データベース102の上位の階層から順に回答を求める処理を行う。
The
図4は、人工知能としての機能を有する情報処理モジュール104がデータベース102を検索して質問に対する回答を作成する工程の一例をフローチャートで示す。以下、図4を参照しつつ、処理の流れを説明する。
FIG. 4 is a flowchart showing an example of a process in which the
最初に、人工知能としての機能を有する情報処理モジュール104がある質問に対する回答を作成又は生成するとき、最初に第1のデータベース102aの中から当該質問に対する適した回答を検索する(S01)。第1のデータベース102aから回答が得られれば、それは第1の利用者204の思考、思想及び感情等を最も的確に反映させたものとなる(S06)。
First, when an
第1のデータベース102aの中から当該質問に対する適した回答を検索する場合には、第1のデータベース102aに蓄積された質問のうち、当該質問と文字列として一致している質問を検索し、検索された質問と関連付けられた回答を検索することができる。あるいは、第1のデータベース102aに蓄積された質問のうち、当該質問と文字列として完全一致していなくても、ある程度の表記の揺らぎを考慮して一致するかどうかを判定して検索を行うこともできる。また、第1のデータベース102aに蓄積された質問のうち、当該質問に含まれる単語数が最も大きいものを検索することもできる。この場合、単語数に加えて、単語が並ぶ順序を考慮して検索することもできる。また、第1のデータベース102aに蓄積された質問と、当該質問との意味の解析を行い、最も意味が近いものを検索することもできる。意味の解析として、例えば、所定の論理体系に基づいて、回答からの論理的な帰結を結論として導き出したり、回答が前提としている条件を導き出したりすることを含めることができる。このように、回答を検出する場合に、文字列として完全一致していない場合を含む場合には、「回答を推論して決定する」という場合がある。また、文字列として完全一致している場合には、「回答を学習して決定する」という場合がある。
When searching for a suitable answer to the question from the
人工知能としての機能を有する情報処理モジュール104は、第1のデータベース102aの中から回答を得ることができないとき(S02)、下位の階層にある第2のデータベース102bを検索する(S03)。第2のデータベース102bから得られる回答は、大多数の利用者が特定の質問に対してどのように回答しているかの傾向を知ることができ、平均的で妥当な回答を得ることができる。例えば、
「貴方は誰ですか」
という質問に対し、
「私は○○(名前)です。」
という回答が多くなされている場合、人工知能としての機能を有する情報処理モジュール104は同様の回答を、質問に対する回答として決定することができる。上記は簡単な質問の一例であるが、第2のデータベース102bに基づけば、多数の利用者の回答傾向が反映されるので、時流に沿った回答を得ることができる(S06)。When the
"who are you"
In response to the question
“I am XX (name).”
The
人工知能としての機能を有する情報処理モジュール104は、第2のデータベース102bで回答を見つけることができないとき(S04)、第3のデータベース102cを検索する(S05)。第3のデータベース102cには膨大な数のテキストデータが記憶されているので、その中から回答を選択することができる。そして、その選択されたものを回答とする(S06)。
When the
[類似する質問の判断]
データベース102は、質問と質問に対する返答を関連付けて記憶している。しかし、人間社会のコミュニケーションにおける質問(問いかけ)と、それに対する返回答(返答)は画一的なものではないのが通常である。例えば、初対面の人の名前を問いかけようとする場合、「貴方は誰ですか?」と問いかけるような場合もあれば、「お名前を教えて下さい」と問いかける場合もある。[Judging similar questions]
The
本発明の一実施形態では、このような類似の質問がなされたときに、該当する質問に対する返答を選択する仕組みが設けられている。例えば、前述の「貴方は誰ですか?」と、「お名前を教えて下さい」との質問に対しては、いずれも「私はアニーです。」という返答があっても違和感がない。この仕組みは、図2で説明したような、類似データベース106として構築されていてもよい。
In one embodiment of the present invention, when such a similar question is made, a mechanism for selecting a response to the corresponding question is provided. For example, in response to the above-mentioned questions “Who are you?” And “Tell me your name”, there is no sense of incongruity even if you reply “I am Annie.” This mechanism may be constructed as the
図5は、類似データベース106の一例を示す。類似データベース106は、質問を記憶する質問データベース107と、返答を記憶する返答データベース108とを含んでいる。あるいは、類似データベース106の中で質問を記憶する領域と、返答を記憶する領域が設けられていてもよい。
FIG. 5 shows an example of the
質問データベース107には複数の質問がデータとして記憶されている。複数の質問は、類似する質問が関連付けられて一つのグループとして記憶されている。例えば、前述の「貴方は誰ですか?」と「お名前を教えて下さい」とは類似する質問として関連付けられて記憶されている。
The
返答データベース108は、質問に対する応答内容、すなわち複数の返答がデータとして記憶されている。例えば、前述の「私はアニーです。」という返答が記憶されている。返答データベース108の中で、返答データは特定の質問と関連付けられている。上記の例に従えば、「貴方は誰ですか?」と「お名前を教えて下さい」との質問は一つのグループとしてまとめられ、その返答として「私はアニーです。」という返答と関連付けられている。
The
図6Aは、類似データベース106の他の態様を示す。図6Aでは、類似データベース106が階層化されている態様を示す例えば、類似データベース106は、第1のデータベース102aに対応する第1の類似データベース106a、第2のデータベース102bに対応する第2の類似データベース106b、第3のデータベース102cに対応する第3の類似データベース106cに階層化されていてもよい。
FIG. 6A shows another aspect of the
第1の類似データベース106aは、特定の利用者ごとに、その利用者の個人ソーシャルデータに基づいて作成されている。個人ソーシャルデータに含まれるチャット等によるテキストデータや、テキスト化された会話の内容から、質問文に対応するテキストデータと、返答文に対応するテキストデータが記憶される。この場合、図5で説明したように、質問文に対応するテキストデータの内、類似する質問文データがクループ化されて質問データベースに記憶され、それに対する返答文データが返答データベースに記憶され、関連付けられている。
The first
第2の類似データベース106bは、複数の利用者のソーシャルデータに基づいて作成されている。複数の利用者のソーシャルデータに含まれるチャット等によるテキストデータや、テキスト化された会話の内容から、質問文に対応するテキストデータと、返答文に対応するテキストデータが記憶される。第2の類似データベース106bも、図5で説明したように、質問文に対応するテキストデータの内、類似する質問文データがクループ化されて質問データベースに記憶され、それに対する返答文データが返答データベースに記憶され、関連付けられている。
The second
なお、第1の類似データベース106aに記憶されているソーシャルデータの変化に基づいて、第2の類似データベース106bに記憶されているデータを変更することが可能である。すなわち、図6Bに示すように、第1の類似データベース106aの傾向分析を行い、その結果を用いて第2の類似データベース106bを更新することができる。例えば、「貴方は誰ですか?」と「お名前を教えて下さい」との質問それぞれに、多数の利用者が指名を回答している場合があるとする。この場合、多数の利用者について、第1の類似データベース106aにおいて、「貴方は誰ですか?」と「お名前を教えて下さい」とが類似した質問であることが検出された場合に、第2の類似データベース106bにおいても、「貴方は誰ですか?」と「お名前を教えて下さい」との質問の両方を類似した質問とするように、第2の類似データベース106bを更新することができる。
Note that the data stored in the second
第3の類似データベース106cは、複数のテキストデータを記憶している。複数のテキストデータは予め用意された質問文と、それに対する返答文のテキストデータであってもよい。これらのテキストデータは、SNS上に出現するテキストデータの中で出現頻度の高いテキストデータを収集したものであってもよい。第3の類似データベース106cも、図5で説明したように、質問文に対応するテキストデータの内、類似する質問文データがクループ化されて質問データベースに記憶され、それに対する返答文データが返答データベースに記憶され、関連付けられている。
The third
このように、類似データベース106は、第1の利用者のソーシャルデータの中から質問と回答の内容を類型化したデータが記憶される第1の類似データベースと、複数の利用者のソーシャルデータの中から質問と回答の内容を類型化したデータが記憶される第2の類似データベースと、テキストデータの中から質問と回答の内容を類型化したデータが記憶される第3の類似データベースとに階層化されていることが好ましい。
As described above, the
本実施形態によれば、複数の質問に対し、同一の返答でよいと判断されるものは、質問と返答の組み合わせとして関連付けられている。このような処置により、質問とそれに対する返答の組み合わせを全通り記憶させる必要がなく、記憶容量を節約することができる。また、質問に対する返答にすばやくアクセスすることができる。 According to this embodiment, what is determined to be the same response for a plurality of questions is associated as a combination of the question and the response. By such a procedure, it is not necessary to memorize all combinations of questions and responses to the questions, and the storage capacity can be saved. It also provides quick access to answers to questions.
さらに、本実施形態に係るコミュニケーション提供システムでは、人工知能としての機能を有する情報処理モジュール104が、第2のデータベース102bを参照して、多くの利用者からの回答に、同一の内容が多いと判断される場合には、その回答に対する質問事項を自動的に類似データベース106に追加し、更新する機能を有していてもよい。このように、複数の利用者のソーシャルデータを参照して類似データベースを更新することにより、類似と判断される質問と回答の組み合わせはより的確に、かつ正確になり、コミュニケーションの精度を高めることができる。
Furthermore, in the communication providing system according to the present embodiment, when the
[音素の生成]
本実施形態に係るコミュニケーション提供システムは、図1Aで示す態様において、第2の利用者206が音声で話しかけることでその音声を認識し、第1の利用者204の本人の音声(又は、擬似的な本人の音声)で返答する機能を有していてもよい。あるいは、第2の利用者206が文字情報などにより非音声的に質問をした場合に、第1の利用者204の本人の音声(又は、擬似的な本人の音声)で返答する機能を有していてもよい。このような音声による返答の方式としては、あらかじめ第1の利用者204の本人の音声を数多く録音しておき、それを用いて返答文を音声データとして作成する方式がとり得る。しかしながら、このような方式は、利用者本人に予め多量の音声データの入力を強いることになり、全ての利用者に適用することは好ましくなく、また利用者の利便性を損なうこととなる。[Generate phonemes]
In the communication providing system according to the present embodiment, in the mode shown in FIG. 1A, the
そこで本実施形態に係るコミュニケーション提供システム100おいては、SNSを介して行われる利用者の音声によるコミュニケーションのデータを随時収録し、それに基づいて音素データを作成する。例えば、利用者が音声によるコミュニケーションの中で話している言葉を取り出し、複数の単語のセットを作成する。
Therefore, in the
そしてこの単語のセットを、音素を作成するデータとして記憶する。音素の作り方は、まず利用者の属性(例えば、性別、年齢等)に合わせて、予め用意された音声データの特徴(波形)と、実際の利用者の音声波形とを比較する。そして、利用者の音声の波形に近づくように、予め用意された音声データの波形を調整する。調整された音声データを利用者の音素データとして用いる。 This set of words is stored as data for creating phonemes. In order to create phonemes, first, a feature (waveform) of voice data prepared in advance and an actual user's voice waveform are compared in accordance with user attributes (for example, sex, age, etc.). Then, the waveform of the voice data prepared in advance is adjusted so as to approach the waveform of the user's voice. The adjusted voice data is used as the phoneme data of the user.
あるいは、あらかじめ第1の利用者204の本人の音声を数多く録音しておき、それを用いて返答文を音声データとして作成する方式が用いられる場合には、次のようにすることも可能である。すなわち、あらかじめ第1の利用者204の本人の音声を数多く録音する場合、あらかじめ定められた文を第1の利用者204に読ませて音声データを取得するとする。このとき、SNSを介して行われる利用者の音声によるコミュニケーションのデータを随時収録し、第1の利用者204の発した音声の認識を行う。そして、あらかじめ定められた文やその一部を構成する単語の部分の認識がされた場合、その認識された部分の音声データを取得して記憶する。もし、この処理を繰り返し、取得して記憶された音声データを適切に連接することにより、あらかじめ定められた文全体の音声データが得られる場合には、連接した音声データを登録する。これにより、あらかじめ第1の利用者204の本人の音声を数多く録音して、音声データを作成する方式が用いられていても、第1の利用者204に負担をかけることなく、第1の利用者204の本人の音声を数多く録音した音声データを取得することができる。
Alternatively, when a method is used in which a large number of voices of the
このような音素データの作成は、人工知能としての機能を有する情報処理モジュール104とデータベース102によって行われても良いし、音素を作成する外部のサーバと連携して実行されてもよい。
The creation of such phoneme data may be performed by the
人工知能としての機能を有する情報処理モジュール104では、第2の利用者206が音声による質問をした場合に、返答文のテキストデータを、上記のようにして作成された音素データを用いて音声データを作成する。そして、作成された音声データを返答文として、第2の利用者206に送信する。
In the
このように、SNSを介して行われる会話の音声データを取得して、各利用者に会わせた音素データを作成することで、利用者に特別な負荷を与えることなく、コミュニケーション提供システム100が擬似的であっても、利用者本人に近い音声データを作成し、音声コミュニケーションを成立させることができる。
As described above, the
[回答の評価]
本実施形態に係るコミュニケーション提供システムは、第2の利用者206が、コミュニケーション提供システム100から送信された回答の内容を評価する評価モジュールを有することができる。回答の評価は、第2の利用者206のユーザ端末200を操作することによって行うことができる。ユーザ端末200に、回答内容を画面表示するとともに、評価を行うためのアイコン(またはボタン)を表示させ、第2の利用者206はその画面表示に従って操作をすることにより、評価を実行することができる。評価用の画面は、回答のメッセージと共に、「Like」、「Dislike」を示すアイコン(またはボタン)(図1Jのボタン15および16)を表示させることで構築することができる。また、評価は2者択一式ではなく、利用者が点数を付ける形式のものであってもよい。[Evaluation of answer]
The communication providing system according to the present embodiment can include an evaluation module in which the
図7は、第2の利用者206が仮想の第1の利用者204bに対して行った質問に対して、コミュニケーション提供システム100から回答された回答を評価する態様を説明する図である。
FIG. 7 is a diagram for explaining an aspect in which an answer answered from the
図7において、第2の利用者206(A氏、B氏、C氏の何れか)が、コミュニケーション提供システム100上に生成される仮想の第1の利用者204bとコミュニケーションを図るため、ある質問をした場合が示されている(図中の左側)。第2の利用者206(A氏、B氏、C氏の何れか)は、コミュニケーション提供システム100から提供された回答を評価する。例えば、A氏の場合であれば「Dislike」と評価し、B氏やC氏の場合であれば「Like」と評価している(図中の略中央)。
In FIG. 7, the second user 206 (any of Mr. A, Mr. B, and Mr. C) has a question to communicate with the virtual first user 204 b generated on the
人工知能としての機能を有する情報処理モジュール104は、評価モジュールに入力された評価情報を返答文毎に集計し、評価データとして蓄積することができる。例えば、評価データはポイント制として、返答文データに対等付けて記憶するようにしてもよい。人工知能としての機能を有する情報処理モジュール104は、評価値に基づいて、質問に対する応答時に、評価値の高い応答データが優先して選択されるように序列化をすることができる。
The
また、第2の利用者206が、ある返答内容について低い評価を与えた場合、その情報を第1の利用者204に通知するようにしてもよい。通知を受けた第1の利用者204は、返答内容を編集し、返答文を更新することができる。
Further, when the
[質問に対する回答の編集]
本実施形態に係るコミュニケーション提供システムは、コミュニケーション提供システム100が作成した返答文を、第1の利用者204が自ら編集する編集モジュールを有する。例えば、
「貴方は誰ですか」又は「お名前を教えて下さい」
という質問に対し、
「私は○○(名前)です。」
と返答するように、人工知能としての機能を有する情報処理モジュール104は学習されているとする。しかし、利用者によっては、このように導き出された返答内容では適切でないと考える場合がある。例えば、上記の質問に対して、
「私は○○会社の代表取締役です。」
と答えることが適切であると考える場合がある。[Edit answer to question]
The communication providing system according to the present embodiment includes an editing module that allows the
"Who are you" or "Tell me your name"
In response to the question
“I am XX (name).”
It is assumed that the
“I am the CEO of XX Company.”
May be considered appropriate.
また、第1の利用者204は、図7で示すように、応答内容に対して低い評価の通知を受ける場合がある(図中の左側)。その場合、第1の利用者204は、返答内容を修正し、編集したいと考える場合がある。
Further, as shown in FIG. 7, the
本実施形態に係るコミュニケーション提供システム100は、このような場合、利用者が、人工知能としての機能を有する情報処理モジュール104が作成した応答文と異なる応答文を設定したいとき、個別に応答文を編集モジュールの機能により編集することができる。
In such a case, the
応答内容の編集の方式としては、利用者が応答内容のテキストデータを自己のユーザ端末200から入力し、内容を更新モジュールにより更新するようにしてもよい。また、好ましい態様としては、利用者が、人工知能としての機能を有する情報処理モジュール104と対話して学習させてもよい。
As a method of editing the response content, the user may input text data of the response content from the
例えば、第1の利用者204が、ユーザ端末200を使ってコミュニケーション提供システム100にアクセスし、コミュニケーション提供システム100上に作成された擬似的な第1の利用者204に、例えば、
「お名前を教えて下さい」
と問いかける。人工知能としての機能を有する情報処理モジュール104は、予め用意されている回答として、
「私は、○○(名前)です。」
と応答する。第1の利用者204は、この応答内容に問題ないと判断することができる。この場合、第1の利用者204は編集機能を使用しないで済む。次に、別の質問として、「貴方は誰ですか」
という問いかけに対し、人工知能としての機能を有する情報処理モジュール104は、予め用意されている回答として、
「私は、○○(名前)です。」
という応答がなされると、第1の利用者204は、この応答は適切ではないと判断し、編集機能を使用する。例えば、ユーザ端末200の画面表示に従ってアイコンを操作し、編集モードにする。そして、「私は、○○(名前)です。」という応答内容を、「私は○○会社の代表取締役です。」という応答内容に設定する。これにより、「貴方は誰ですか」という問いかけに対しては、「私は○○会社の代表取締役です。」と回答するように設定することができる。For example, the
"Tell me your name"
Ask. The
“I am XX (name).”
Responds. The
In response to the question, the
“I am XX (name).”
When the response is made, the
この場合、「お名前を教えて下さい」と「貴方は誰ですか」が、図5で示す類似データベース106において、同じ類似グループに登録されているとき、この類似データベース106の内容を更新する。例えば、「お名前を教えて下さい」に対しては「私は、○○(名前)です。」が回答されるようにし、「貴方は誰ですか」に対しては「私は○○会社の代表取締役です。」と回答されるように、別のグループとして登録し直すことができる。
In this case, when “Tell me your name” and “Who are you” are registered in the same
図8Aは、第2の利用者206による質問と回答の評価と、第1の利用者204が編集を行う態様を説明するフローチャートを示す。
FIG. 8A shows a flowchart describing the evaluation of questions and answers by the
図8Aにおいて、第2の利用者206は、コミュニケーション提供システム100の存在する仮想の第1の利用者204bにアクセスし、ある質問(問いかけ)をする(S11)。コミュニケーション提供システム100は質問に対する回答を生成し(S12)、第2の利用者206へその回答を送信する(S13)。そして、第2の利用者206は、得られた回答を評価する(S14)。
In FIG. 8A, the
コミュニケーション提供システム100は評価値を集計する(S15)。評価値が通常又は高いもの、若しくは一定レベルより高い評価値のものは、その回答は好ましい回答であるとして、重み付けをするようにしてもよい(S16,S17)。この場合、重み付けされた回答は、次回の検索のときに選択される確率が高くなるようにされていてもよい。
The
また、回答の評価が低かったものは、その旨を第1の利用者204に通知する(S16,S18)。通知を受けた第1の利用者204は(S19)、好ましい回答となるように、回答の内容を編集する(S20)。コミュニケーション提供システム100は、編集された回答を受信したとき、データベースに記録されている該当する回答を修正し、更新する(S21)。第1の利用者204は、回答の内容を修正する必要がないと判断した場合には、そのままにしておくこともできる。
In addition, if the evaluation of the answer is low, the
なお、図8Aでは、第2の利用者206が質問をし、第1の利用者204が質問に対する回答を編集するという対立関係で示す。しかし、本発明の一実施形態はこれに限定されず、第1の利用者204が、コミュニケーション提供システム100に表れる仮想の第1の利用者204bと会話をし、自ら質問をして、自ら評価及び編集をするという処理を行うことができる。このような処理により、第1の利用者204は、質問に対する回答の内容を知ることができ、また回答を評価し、回答を編集して好ましい回答が得られるようにすることができる。すなわち、人工知能としての機能を有する情報処理モジュール104を学習させることができる。
In FIG. 8A, the
このように本実施形態に係るコミュニケーション提供システム100は、質問と応答の関連付けられたデータを、利用者が編集して、新たな応答文を作成することができる。この場合において、利用者は、コミュニケーション提供システム100上に生成される擬似的な自己と対話をしながら、質問に対する適切な応答をするように人工知能機能を学習させることができる。
As described above, the
この場合において、第1の利用者204は、コミュニケーション提供システム100上に生成される仮想的な第1の利用者204bと対話をしながら、質問に対する回答を編集し、また人工知能としての機能を有する情報処理モジュール104に学習させることができる。
In this case, the
[回答候補の表示と選択]
図8Bは、コミュニケーション提供システム100が、質問に対する回答の候補を生成し、利用者がこれを選択する態様を示す。コミュニケーション提供システム100は、個人ソーシャルデータが記憶された第1のデータベース102aに基づいて、質問に対する回答の候補を生成する。このとき、人工知能としての機能を有する第1の情報処理モジュール104aは、異なるロジックに基づいて複数の回答の候補を生成する機能を有する。人工知能としての機能を有する第1の情報処理モジュール104aは、第1の利用者の個人ソーシャルデータの中から、近時の会話の内容に重み付けをして回答の候補を生成し、別のロジックとしては全データの中から出現頻度の高い会話の内容に基づいて回答候補を作成する。例えば、好きな食べ物の関する質問に対し、最近食べて美味しかった食べ物を回答するロジックと、第1の利用者が昔から好きであった食べ物を回答するロジックとがある。[Display and selection of answer candidates]
FIG. 8B shows an aspect in which the
また、人工知能としての機能を有する情報処理モジュール104bは、第1の情報処理モジュール104aが第1のデータベース102aの中に適切な答えを見つけられない場合、第2のデータベース102bに記憶されているデータに基づいて回答の候補を作成する。第2のデータベース102bには、利用者全体のソーシャルデータが記憶されていることの他、例えば、インターネット上にある様々な情報をクローリングして収集して記憶されている。人工知能としての機能を有する情報処理モジュール104bが生成する質問に対する回答は、利用者個人の個性を反映した回答ではなく、社会通念上一般化された回答が生成される。例えば、国際試合で優勝した自国の選手に関する質問に対して、喜ばしいという回答が生成される。
Further, the
人工知能としての機能を有する情報処理モジュール104によって生成された回答の候補は、第1の利用者の端末204aに出力される。例えば、人工知能としての機能を有する第1の情報処理モジュール104aは7通りの回答の候補を生成し、第1の利用者の端末204aに回答の候補を出力する。図8Bは、第1の利用者の端末204aに回答A1〜A7が表示される態様を示す。第1の利用者の端末204aには、人工知能としての機能を有する情報処理モジュール104によって生成された回答の候補が、優先度の高い順(最も的確であると判断される回答の順)にA1〜A7の回答候補が表示される。第1の利用者は、この回答A1〜A7を参照して、自己の判断で回答の順番を変更することができる。図8Bでは、回答候補A1とA3の順番を入れ替えている。
The answer candidates generated by the
第1の利用者が変更した、回答候補の順は、人工知能としての機能を有する情報処理モジュール104に反映される。その結果、次回同じ質問がされた場合には、A3、A2、A1の順に回答の候補が生成される。この結果は、人工知能としての機能を有する情報処理モジュール104によって生成される擬似的な第1の利用者204bの回答として利用される。このように、人工知能としての機能を有する情報処理モジュール104が、質問に対する回答の候補を複数生成し、第1の利用者がこの回答候補を選択することで、擬似的な第1の利用者204bの回答をより適切なものとすることができる。
The order of answer candidates changed by the first user is reflected in the
このような回答候補の編集機能は、前述の編集モジュールの機能により回答候補を編集し、更新モジュールの機能により、編集モジュールで編集された内容に基づいて質問に対する回答候補を更新することができる。 Such an answer candidate editing function can edit an answer candidate by the function of the editing module described above, and can update an answer candidate for the question based on the contents edited by the editing module by the function of the update module.
[ユーザ写真の三次元化]
本実施形態に係るコミュニケーション提供システム100は、利用者の姿を画像データとして取得し、三次元の画像データに変換してユーザ端末に表示させることができる。例えば、図1Aで示す構成において、第2の利用者206が、コミュニケーション提供システム100上に生成される仮想の第1の利用者と対話をするとき、ユーザ端末200に第1の利用者の映像を表示させることができる。[Three-dimensional user photos]
The
利用者の画像データは、ユーザ端末200の撮像機能を使って取得することができる。例えば、利用者は、ユーザ端末200を使って自己の写真を撮影し、コミュニケーション提供システム100に、その画像データをアップロードする。あるいは、利用者がSNSなどにおいて、その利用者を撮影して他の利用者とメッセージを交換した情報が記録されている場合には、その撮影した情報を用いて、画像データを抽出することもできる。これにより、利用者の最新の画像データを取得することができ、利用者の最新の画像データに基づいて、ユーザ写真の三次元化を実現することができる。
User image data can be acquired using the imaging function of the
コミュニケーション提供システム100は、二次元の写真データから、そこに写っている人物の3次元形状を推測し、また計算して3次元画像データを生成することができる。その方法として、例えば、物体の肌理の密度分布などから奥行き情報を求める方法や、物体表面での光の反射の強さから法線方向を計算する方法によって、三次元の画像データを作成する。
The
利用者の3次元画像データは、上述したように、適宜更新するようにしてもよい。別の構成としては、例えば、第1のデータベース102aに収録された、特定の利用者の個人ソーシャルデータの中から画像データを検索し、顔認識の機能を使って利用者の写っている画像データを特定する。そして、利用者の写っている画像データの中から、最新のデータを選択し、そのデータに基づいて利用者の3次元画像データを更新する構成も提供することができる。
The user's three-dimensional image data may be appropriately updated as described above. As another configuration, for example, image data is retrieved from the personal social data of a specific user recorded in the
このように、コミュニケーション提供システム100上に存在する仮想個人と対話をするときに、相手方の映像を三次元画像でユーザ端末に表示させることで、コミュニケーションに実体感を持たせることができる。この場合において、仮想個人の三次元映像が、より直近のデータに更新されることで、話し相手の姿がより具体的なものとなり、擬似的なコミュニケーションを介してより親密感を高めることができる。
In this way, when interacting with a virtual individual existing on the
[質問の自動生成]
本実施形態のコミュニケーション提供システム100は、データベース102に記憶されているソーシャルデータを使って、質問文を自動的に生成し、登録しておく機能を有する。[Automatic question generation]
The
例えば、第1のデータベース102aには、第1の利用者204の個人ソーシャルデータとして、個人的な「ツイート」が多く収録されていてもよい。個人的な「ツイート」とは、例えば、「今日は東京で買い物をした。」、「渋谷で待ち合わせ中。」などである。このような個人ソーシャルデータは、問いかけに対する応答の形式を有していないものの、「ツイート」の中には、少なくとも一つの情報が含まれている。
For example, in the
前述の文例では、「東京」、「渋谷」といった地名に関する情報が含まれている。また、それ以外にも、食べ物、天候、服装、株価、ニュースのキーワード、人名など様々な情報を個人ソーシャルデータの中から見出すことができる。 In the above sentence example, information on place names such as “Tokyo” and “Shibuya” is included. In addition, various information such as food, weather, clothes, stock prices, news keywords, and names can be found from personal social data.
人工知能としての機能を有する情報処理モジュール104は、このような個人ソーシャルデータのテキストデータを、名詞、動詞、形容詞等に分解し、構文解釈して得られた情報から、質問データを作成し登録しておく機能を有する。人工知能としての機能を有する情報処理モジュール104は、第2のデータベース102bに登録されている複数の利用者のソーシャルデータを参照し、どのような会話がなされているのかを学習する。例えば、「どこに行きましたか?」という質問に対して、「機能は○○(地名)へ行きました。」というような会話が数多くなされている場合、地名に対する質問文として「どこに行きましたか?」という質問文を生成し、第1のデータベース102に登録する。複数の質問文が作成可能な場合には、類似データベース106に登録することも可能である。
The
このように、人工知能としての機能を有する情報処理モジュール104が、個人ソーシャルデータから自動的に設問文を作成することで、対話能力を高めることができる。
As described above, the
[人間らしさの表現方法]
質問に対する返答には揺らぎを与えるようにしてもよい。例えば、
「お元気ですか?」
という質問に対し、
「元気です。あなたはいかがですか?」
という返答が設定されていたとしても、必ずしもこの返答をしないようにしてもよい。例えば、他の多くの利用者が「すごくいいよ!」と返答をしているとき、それに影響をされて同様に回答をするようにしてもよい。[How to express humanity]
You may make it give fluctuation to the reply to a question. For example,
"How are you?"
In response to the question
"I'm fine. How are you?"
Even if a reply is set, this reply may not necessarily be made. For example, when many other users are replying “very good!”, They may be influenced and respond in the same way.
この揺らぎは、利用者の性格分析から、揺らぎの発生する確率の多い人、または他の利用者に影響されにくい人、などのパラメータを当該利用者に割り当てておいてもよい。それにより、その揺らぎの反映され方により個々の利用者の性格、あるいはその利用者らしさを演出することができる。このようなパラメータは、利用者の属性として、コミュニケーション提供システムへ100の登録時に、コミュニケーション提供システムへ100に格納して、必要に応じて読み出すことができる。また、このようなパラメータや性格分析の結果は、第1のデータベース102aに蓄積された利用者の回答の時間的な変化を検出した結果をコミュニケーション提供システムへ100に格納して、必要に応じて読み出すことができる。同様に、第1の類似データベース106aに蓄積された利用者に関する情報の時間的な変化を検出した結果をコミュニケーション提供システム100に格納して、必要に応じて読み出すことができる。
For this fluctuation, parameters such as a person who has a high probability of occurrence of fluctuation or a person who is not easily influenced by other users may be assigned to the user based on a personality analysis of the user. Thereby, the personality of each user or the userness can be produced depending on how the fluctuation is reflected. Such parameters can be stored in the
[質問に対する回答の導出]
人工知能としての機能を有する情報処理モジュール104は、問いかけに対する応答を次のようにして行うことができる。[Derivation of answers to questions]
The
−全体的な構成−
例えば、利用者1と、利用者2とで次のような会話がなされることを想定する。ここで、T1、T2・・・は時刻を表すものとする。-Overall configuration-
For example, it is assumed that the
利用者1:「こんにちは」[T1]
利用者2:「こんにちは」[T2]
利用者1:「ごきげんいかがですか」[T3]
利用者2:「調子いいよ、あなたは」[T4]
利用者1:「今日は素晴らしいよ」[T5]User 1: "Hello" [T1]
User 2: "Hello" [T2]
User 1: “How are you?” [T3]
User 2: “You are fine, you are” [T4]
User 1: “Today is wonderful” [T5]
利用者1と利用者2のこのような会話の内容をまとめると表1及び表2に示すようになる。
The contents of such a conversation between the
このような、利用者1と利用者2との間で交わされる典型的な会話の中で、例えば、利用者1の質問に対する回答は、「こんにちは」に対する「ごきげんいかがですか」であることが判る。これは、利用者1は利用者2に対し、すでに「こんにちは」と述べている文脈から理解することができる。
In such a typical conversation between the
利用者が、ツイートなどの一方的な会話、つまり質問を受けずに答えを与えている場合もある。例えば、次のようなツイートである。 In some cases, the user gives an answer without receiving a question, that is, a one-way conversation such as a tweet. For example, the following tweet:
利用者1:「なんて素晴らしい試合だ」[T1]
利用者1:「コンピューティングの将来はユビキタス人工知能である」[T2]User 1: “What a great game” [T1]
User 1: “The future of computing is ubiquitous artificial intelligence” [T2]
利用者1によるこのようなツイートをまとめると表3のようになる。
Table 3 summarizes such tweets by
質問と回答の組み合わせは過去の会話の中から得ることができる。コミュニケーション提供システム100は過去の会話を学習することができる。本実施形態に係るコミュニケーション提供システム100は、過去の会話データ(データベースに蓄積されているソーシャルデータ)を学習することで、新しい質問を生成し、応答を推論し予測することができる。図9は、質問を受けたとき、過去の会話の中からその回答を検索し、また適切な回答を予測するための構成を示す。
A combination of questions and answers can be obtained from past conversations. The
回答を予測するための重要な側面は、人工知能が人間の行動を模倣しなければならないところにある。質問への応答は、その質問をしている人に依存する。したがって、ある利用者がした質問に対する応答を予測するには、人工知能は、当該利用者の過去の会話データを参照し、その中から得られる優先順位の高い応答内容を予測する必要がある。 An important aspect for predicting answers is where artificial intelligence must mimic human behavior. The response to a question depends on the person asking the question. Therefore, in order to predict a response to a question made by a certain user, the artificial intelligence needs to refer to the user's past conversation data and predict a response content with a high priority obtained from the data.
しかし、過去の会話データの中から適切な応答文を検出することができない場合、人工知能は、第1の利用者が他の利用者と交わしている会話の中から、適切な応答文を見つける必要がある。これを行う場合には、他の利用者が交わしている会話を検索することによって、他の利用者の個人情報等、機密事項が漏洩しないように注意する必要がる。 However, if an appropriate response sentence cannot be detected from past conversation data, the artificial intelligence finds an appropriate response sentence from the conversation that the first user exchanges with another user. There is a need. When doing this, it is necessary to be careful not to leak confidential matters such as personal information of other users by searching for conversations with other users.
このような場合、個人情報が漏洩する危険を排除するために、人工知能は、他の利用者が交わしている会話の内容において、各回答の機密性のスコアを推定するようにする。 In such a case, in order to eliminate the risk of leakage of personal information, the artificial intelligence estimates the confidentiality score of each answer in the content of the conversation exchanged by other users.
例えば、既に他の利用者と共有されている回答文は、機密性のスコアは低いものとなる。また、上記例文にあるような、一般的な回答文は、仮に他の利用者と共有されていないものであっても、機密性のスコアは低いものとすることができる。 For example, an answer sentence that has already been shared with another user has a low confidentiality score. Moreover, even if a general answer sentence as in the above example sentence is not shared with other users, the confidentiality score can be low.
利用者2から利用者1への質問に対する回答を選択するための処理の流れを図10に示す。人工知能は、最初に、過去に交わされた第1の利用者と第2の利用者との会話の中から適した回答があるかを検索する(S21)。その結果、適した回答が見つかった場合には、それを回答として選択する(S22、S26)。一方、適した回答が見つからない場合には、全利用者の会話の中から学習した回答を一つ又は複数選択する(S22、S23)。ここで得られた回答に対し、機密性のスコアを評価する(S24)。そして、機密性のスコアの低いものを選択し、回答として選択する(S25、S26)。
FIG. 10 shows a flow of processing for selecting an answer to a question from the
−回答の検索−
また、図11に示すように、質問に対する回答は、次のようにランク分けしてもよい。例えば、図11で示すように、第1の利用者と第2の利用者が過去に交わした会話の中から回答が見つけられる場合、その回答は両者の間で共有され得る「個人レベル」の回答とすることができる。また、第1の利用者が他の利用者と交わしている会話の中から、適切な応答文を見つける場合には、得られた一つ又は複数の回答について機密性のスコアを評価する。そして、機密性のスコアが低い回答を「公開レベル」の回答とすることができる。さらに、図12で示すように、複数の利用者のソーシャルデータを学習し、そこから得られた一つ又は複数の回答の機密性のスコアを評価し、スコアの低い回答を「共有レベル」の回答とすることができる。-Search for answers-
Moreover, as shown in FIG. 11, the answers to the questions may be ranked as follows. For example, as shown in FIG. 11, when an answer is found in a conversation that the first user and the second user have exchanged in the past, the answer can be shared between the two at the “personal level”. Can be an answer. Further, when finding an appropriate response sentence from the conversation in which the first user exchanges with other users, the confidentiality score is evaluated for one or a plurality of obtained answers. An answer with a low confidentiality score can be set as a “public level” answer. Furthermore, as shown in FIG. 12, the social data of a plurality of users is learned, the confidentiality score of one or a plurality of answers obtained therefrom is evaluated, and an answer with a low score is assigned to a “shared level”. Can be an answer.
このような利用者を数式化して表すと、次式のように表すことができる。
ここで、
は、利用者iと利用者jとの会話を表すサブモデルである。Such a user can be expressed by the following equation.
here,
Is a submodel representing a conversation between user i and user j.
そして、全ての利用者の会話を表すパブリックサブモデル
は次式で表すことができる。
ここで、Q(i,j)は利用者jから利用者iに対してなされた質問を表し、A(i、j)は利用者iから利用者jになされた回答を示し、tは対応する時間を示す。And a public submodel that represents all user conversations
Can be expressed as:
Here, Q (i, j) represents a question made from user j to user i, A (i, j) represents an answer made from user i to user j, and t corresponds. Indicates the time to do.
質問に対する回答の関係を、関数fを用いて次式のように表すことができる。
ここで、qは利用者iに対する利用者jの質問(またはクエリ)であり、Aは予測される回答である。The relationship of the answers to the questions can be expressed as follows using the function f.
Here, q is a question (or query) of user j with respect to user i, and A is a predicted answer.
そして、例えば、その回答の機密性のスコアが第1の閾値より高い場合、予測される回答は個人レベルの回答となる。また、機密性のスコアが第1の閾値以下であり、その機密性のスコアが第2の閾値より低い場合は、、予測される回答は公開レベルの回答となる。そして、これらに該当しない場合は共有レベルの回答として扱うことができる。なお、機密性のスコアが第2の閾値より低いとは、機密性と対を成す概念である公開性のスコアとすることもできる。例えば、機密性のスコアをCprivateとし、公開性のスコアをCpublicとした場合、Cprivate= 1−Cpublicと定義したりすることができる。For example, when the confidentiality score of the answer is higher than the first threshold, the predicted answer is an individual level answer. Further, when the confidentiality score is equal to or lower than the first threshold value and the confidentiality score is lower than the second threshold value, the predicted answer is a public level answer. If it does not correspond to these, it can be treated as a shared level answer. Note that the confidentiality score being lower than the second threshold may be a publicity score that is a concept that forms a pair with confidentiality. For example, if the confidentiality score is C private and the publicity score is C public , it can be defined as C private = 1-C public .
このような回答レベルの態様は、次式で表すことができる。
ここで、Cprivateは個人レベルの回答に対する機密性のスコアを与え、Cpublicは公開性のスコアを与える。Such an aspect of the answer level can be expressed by the following equation.
Here, Cprivate gives a confidentiality score for the personal level answer, and C public gives a publicity score.
質問に対する回答として最も適していると判断される回答は一つであり、次式で示すことができる。
ここで、sim(q,Qx)は、q及びtuple(Qx,Ax,tx)との間の類似性又はマッチングを示す関数である。There is one answer that is judged to be the most appropriate answer for the question, and can be expressed by the following equation.
Here, sim (q, Qx) is a function indicating the similarity or matching between q and tuple (Qx, Ax, tx).
−文脈の統合−
質問に対する回答を予測する場合には、文脈を把握することが重要となる。同じ質問に対する回答は、会話の中でなされていた、過去の質問と回答に依拠することができる。これは、「はい」と返事をする場合のような、一般的な質問の場合に特に当てはまるものとなる。そのような質問への答えは、上記で述べた関数に当てはめることができる。文脈を統合するために、過去になされた会話における質問と回答の学習データをグループ化して適用することができる。図13は、会話における質問と回答をグループ化することにより、文脈を統合する態様を示す。クエリと、質問及び回答とのマッチングは、加重和となることが示されている。-Integration of context-
When predicting answers to questions, it is important to understand the context. Answers to the same question can rely on past questions and answers made in the conversation. This is especially true for general questions, such as answering yes. The answers to such questions can be applied to the functions described above. In order to integrate the context, it is possible to apply the learning data of questions and answers in a conversation made in the past as a group. FIG. 13 illustrates how contexts are integrated by grouping questions and answers in a conversation. It is shown that the matching of the query with the question and the answer is a weighted sum.
文脈を統合するときの類似性は次式で示すことができる。
ここで、aiは重み係数であり、Wは文脈ウィンドウに含まれているタプル数を示す。The similarity when integrating contexts can be expressed as:
Here, a i is a weighting factor, and W indicates the number of tuples included in the context window.
−マッチング関数−
過去の会話から質問と回答の適合性を見つけるために、それらの間の類似性を評価する必要がある。ベクトルの集合として質問と回答を、各クエリで表すことができる。2つのベクトルの集合間の類似性は、対応するベクトル間の類似度の加重和として表すことができる。ベクトル間の類似性は、コサイン距離、ユークリッド距離、マハラノビス距離として推定することができる。-Matching function-
To find the relevance of questions and answers from past conversations, it is necessary to evaluate the similarity between them. Questions and answers can be represented in each query as a set of vectors. Similarity between two sets of vectors can be expressed as a weighted sum of similarities between corresponding vectors. Similarity between vectors can be estimated as cosine distance, Euclidean distance, Mahalanobis distance.
質問と回答に対する各クエリは、次式に示すように、キーワード(W)、コンセプト(C)、タイプ(T)及びグループ(G)の、各ベクトルの集合で構成される。
・キーワード
キーワードは、利用者の間で交わされるすべてのメッセージから単語を構築することによって得られる。2つのキーワードの間のベクトルの類似性は、重み付け(TF−IDF:Robertson, S. E., Walker, S., Beaulieu, M. M., Gatford, M., & Payne, A. Okapi at TREC-4. In Proceedings of the 4th Text REtrieval Conference (TREC-4), pp. 73-96, 1995])されたキーワードのコサイン距離として得ることができる。或いは、OkapiBM25(Harman, D. Ranking algorithms. In W. B. Frakes & R. Baeza-Yates (Eds.), Information retrieval: Data structures and algorithms, pp. 363-392. Englewood Cliffs, New Jersey, USA: Prentice Hall, 1992])、または情報検索において使用される任意の他のランク付け関数を用いることができる。キーワード間の類似性には意味的類似性が含まれる。それは、意味的に関連している2つのキーワードは類似していると考えられる。この意味的な関係は、WordNet(G. A. Miller, R. Beckwith, C. D. Fellbaum, D. Gross, K. Miller. WordNet: An online lexical database. Int. J. Lexicograph. 3, 4, pp. 235-244, 1990)、BabelMet(R. Navigli and S. P Ponzetto. BabelNet: The Automatic Construction, Evaluation and Application of a Wide-Coverage Multilingual Semantic Network. Artificial Intelligence, 193, Elsevier, pp. 217-250, 2012)、共出現分析(Harris Z. S. Co-occurrence and transformation in linguistic structure, Language, 33, pp. 283-340., 1957)のデータを用いて得ることができる。類似度を推定する際には、文書内におけるキーワードの順序と場所を考慮しなければならない。システム内の順序を統合する対策として場所を表すインデックスの分散を用いる。図14は、どのようなキーワードの順序が、一致を求める際に重要であるかを示している。Keywords Keywords are obtained by building words from all messages exchanged between users. Vector similarity between two keywords is weighted (TF-IDF: Robertson, SE, Walker, S., Beaulieu, MM, Gatford, M., & Payne, A. Okapi at TREC-4. In Proceedings of the 4th Text REtrieval Conference (TREC-4), pp. 73-96, 1995]). Or, OkapiBM25 (Harman, D. Ranking algorithms. In WB Frakes & R. Baeza-Yates (Eds.), Information retrieval: Data structures and algorithms, pp. 363-392. Englewood Cliffs, New Jersey, USA: Prentice Hall, 1992]), or any other ranking function used in information retrieval. Similarity between keywords includes semantic similarity. It is considered that two keywords that are semantically related are similar. This semantic relationship is described by WordNet (GA Miller, R. Beckwith, CD Fellbaum, D. Gross, K. Miller. WordNet: An online lexical database. Int. J. Lexicograph. 3, 4, pp. 235-244, 1990), BabelMet (R. Navigli and S. P Ponzetto. BabelNet: The Automatic Construction, Evaluation and Application of a Wide-Coverage Multilingual Semantic Network. Artificial Intelligence, 193, Elsevier, pp. 217-250, 2012), co-appearance Analysis (Harris ZS Co-occurrence and transformation in linguistic structure, Language, 33, pp. 283-340., 1957). When estimating similarity, the order and location of keywords in the document must be considered. As a measure to integrate the order in the system, the distribution of indexes representing locations is used. FIG. 14 shows what keyword order is important when seeking a match.
・コンセプト
コンセプトは、語彙の次元を圧縮することで得ることができる。潜在的意味解析(Latent Semantic Analysis)は、コンセプトの限定されたリストを提供するために用いることができる(Thomas K. Landauer, Peter W. Foltz et Darrell Laham. Introduction to Latent Semantic Analysis, Discourse Processes, vol. 25, p. 259-284, 1998)。各質問と応答は、概念空間に投影される。この投影は概念ベクトルを与える。そして、コサイン距離は、概念ベクトル間の類似度を推定することができる。・ Concepts Concepts can be obtained by compressing the vocabulary dimension. Latent Semantic Analysis can be used to provide a limited list of concepts (Thomas K. Landauer, Peter W. Foltz et Darrell Laham. Introduction to Latent Semantic Analysis, Discourse Processes, vol. 25, p. 259-284, 1998). Each question and response is projected into the concept space. This projection gives a concept vector. The cosine distance can estimate the similarity between concept vectors.
・タイプ
タイプは文法構造と評判分析の観点から、メッセージの異なるグループとして定義される。このグループには、質問、人、大体の場所、順序、ロマンチックなメッセージ、幸せなメッセージなどが含まれる。これらの分類は、手動のラベル付けされた特徴ベクトルは、文法構造であるデータ、概念やキーワードを人工知能が学習することによって得ることができる。• Types Types are defined as different groups of messages from the perspective of grammatical structure and reputation analysis. This group includes questions, people, rough places, order, romantic messages, happy messages, and more. These classifications can be obtained by the artificial intelligence learning of manually labeled feature vectors, grammatical data, concepts and keywords.
・グループ
全利用者のタプル(Q,A)は、回答同士のテキストの類似性に基づいてクラスタ化される。各クラスタには名前が与えられる。グループベクトルはタプル(Q,A)が属するクラスタのリストである。どちらも同じような答えを持っているので、明らかに同じグループの2つの質問は類似するものとなる。図15は、質問と回答が、その回答の類似性によってクラスタ化された態様を示し、各クラスタが一つのグループを構成する態様を示す。Group Tuples (Q, A) of all users are clustered based on the similarity of text between answers. Each cluster is given a name. The group vector is a list of clusters to which the tuple (Q, A) belongs. Both have similar answers, so obviously two questions in the same group are similar. FIG. 15 shows a mode in which questions and answers are clustered by the similarity of the answers, and each cluster forms a group.
・テンプレートの生成
利用可能な全てのデータを使って人工知能を学習させることができる。入力ベクトルは質問であり、出力ベクトルは回答となる。任意の質問の回答を得るために、学習された人工知能は、解答のテンプレートを推定する。データベースに記憶されている質問と共にクエリのマッチングと組み合わせることで、データベース内の回答にこのテンプレートの答えを一致させることができる。これは、質問がデータの中に見つけられないときに、回答を見つけることができるようにする上で重要である。どんな監修アルゴリズムであっても、ニューラルネットワーク、サポートベクターマシン、k−Nearest−Neighbors、ガウス混合モデルとして、この場合使用することができる。・ Generation of templates Artificial intelligence can be learned using all available data. The input vector is a question and the output vector is an answer. In order to obtain the answer to any question, the learned artificial intelligence estimates the answer template. Combined with query matching along with the questions stored in the database, the answers in this template can be matched to the answers in the database. This is important in order to be able to find an answer when a question is not found in the data. Any supervised algorithm can be used in this case as a neural network, support vector machine, k-Nearest-Neighbors, Gaussian mixture model.
質問と回答の間でキーワードに共起分析は、回答テンプレートのキーワードの一部に対して実施することができる。図16は、各質問を構成するベクトル(キーワード、コンセプト、タイプ)は、同等の回答ベクトルを推定する予測因子を持っている。回答テンプレートのグループは、質問テンプレートにおけるものと同等である。 Co-occurrence analysis on keywords between questions and answers can be performed on some of the keywords in the answer template. In FIG. 16, the vectors (keywords, concepts, types) constituting each question have a predictor for estimating an equivalent answer vector. The answer template group is equivalent to that in the question template.
以上のように、本発明の一実施形態に係るコミュニケーション提供システムは、コミュニケーション提供システムが様々なSNSからデータを取得しデータベースに蓄積すると共に、人工知能としての機能を有する情報処理モジュールが利用者の思考を学習することで、質問に対する適切な回答を提供することができる。 As described above, in the communication providing system according to the embodiment of the present invention, the communication providing system acquires data from various SNSs and accumulates them in a database, and an information processing module having a function as artificial intelligence is used by a user. Learning thoughts can provide appropriate answers to questions.
本発明の一実施形態に係るコミュニケーション提供システムは、複数のSNSからソーシャルデータを収集し、それを人工知能としての機能を有する情報処理モジュールが推論し学習することで、一利用者では想到し得ない思考についても提供することができる。 The communication providing system according to an embodiment of the present invention collects social data from a plurality of SNSs, and an information processing module having a function as artificial intelligence infers and learns it, so that one user can conceive. You can also offer no thoughts.
さらに、本発明の一実施形態によれば、コミュニケーション提供システム100によって生成される仮想の利用者を生成するデータベース(第1のデータベース102a)に、専門知識を習得させれば、当該仮想の利用者によって様々なサービスを提供することができる。そのような専門知識は、該当する利用者が利用するSNSから習得されるものであってもよい。
Furthermore, according to an embodiment of the present invention, if a database (
例えば、専門知識として、自然科学、人文学、心理学、法律、金融、工学等の各分野における専門知識の少なくとも一つを、仮想の利用者を生成するデータベースに記憶させれば、該当する分野に専門知識を仮想の利用者が使用できるようにすることができる。なお、この場合における専門知識は、書籍等により蓄積された画一的な専門知識のみでなく、ソーシャルネットワーク上で自然人が会話として使用される専門知識の情報が含まれていることが好ましい。このような会話型の専門知識に関する情報が含まれていることにより、コミュニケーション提供システム100は、質問に対する回答として、さまざまな専門知識を有益に活用することができる。
For example, if at least one of the specialized knowledge in each field such as natural science, humanities, psychology, law, finance, engineering, etc. is stored in a database that generates virtual users, the applicable field Expertise can be made available to virtual users. In addition, it is preferable that the expertise in this case includes not only uniform expertise accumulated by books and the like, but also information on expertise used by natural persons as a conversation on a social network. By including information related to such conversational expertise, the
なお、このような専門知識は、例えば、第1の利用者が希望する場合、人工知能によって生成される擬似的な第1の利用者の知識として身につけることができる。その場合、擬似的な第1の利用者は、単に特定の専門知識を取得するのみでなく、当該第1の利用者の個性を加味する形で活用することができる。例えば、第1の利用者が医学分野の知識を有する場合、その知性は擬似的な第1の利用者も医学分野の専門知識を有し、擬似的な第1の利用者がさらに専門知識として法律分野の専門知識を取得すれば、法医学の分野で能力を発揮することが可能となる。 Note that such specialized knowledge can be acquired as pseudo first user knowledge generated by artificial intelligence, for example, if the first user desires. In this case, the pseudo first user can not only acquire specific specialized knowledge but also use the first user in consideration of the individuality of the first user. For example, if the first user has knowledge in the medical field, the pseudo first user also has expertise in the medical field, and the pseudo first user has further specialized knowledge. If you acquire expertise in the legal field, you will be able to demonstrate your abilities in the field of forensic medicine.
この場合、第1のデータベース102aに記憶される専門知識は、質問と回答(すなわちQ&A)形式で記憶されていてもよい。第1のデータベース102に記憶されるソーシャルデータ(知識)は、適時更新することができ、データは消失することがないので、知識量を増やして行くことができる。
In this case, the expertise stored in the
さらに、このような専門知識が記憶される第1のデータベース102aに、全利用者のソーシャルデータが記憶される第2のデータベース102bの情報を反映させ、学習効果を高めることで、より適切な回答を出力させることができる。
Further, by reflecting the information of the
専門知識としては、司法、行政、医療、環境、経済など、利用者の属性に会わせた様々な分野の知識に対応することができる。すなわち、本発明の一実施形態によれば、利用者の属性に合わせて、高い専門知識を有する仮想個人をコミュニケーション提供システム上に出現させ、他の利用者にサービスを提供することができる。 As specialized knowledge, it is possible to deal with knowledge in various fields such as justice, administration, medical care, environment, economy, etc. according to user attributes. That is, according to an embodiment of the present invention, a virtual individual having high expertise can appear on the communication providing system in accordance with the user's attributes, and the service can be provided to other users.
[グループによる知識の共有:グループAI]
図2は、個人ソーシャルデータに基づき構成される、人工知能としての機能を有する情報処理モジュール(第1の情報処理モジュール)と、利用者全体のソーシャルデータに基づき構成される、人工知能としての機能を有する情報処理モジュール(第2の情報処理モジュール)と、の関係を示している。本発明は、さらに複数の第1の情報処理モジュールが集合して、情報又は知識レベルを共有する、人工知能としての機能を有する情報処理モジュール(第3の情報処理モジュール)を有することができる。[Knowledge sharing by group: Group AI]
FIG. 2 shows an information processing module (first information processing module) having a function as artificial intelligence configured based on personal social data and a function as artificial intelligence configured based on social data of the entire user. And the information processing module (second information processing module) having The present invention can further include an information processing module (third information processing module) having a function as an artificial intelligence in which a plurality of first information processing modules are aggregated to share information or a knowledge level.
図17は、個人ソーシャルデータに基づき構成される、人工知能としての機能を有する第1の情報処理モジュール104aが複数存在する態様を示す(第1の情報処理モジュール104a_1〜104a_n(nは2以上の整数))。なお、第1の情報処理モジュール104aは、図2を参照して説明したように、「プライベートAI」、「パーソナライズドAI」と呼ばれる擬似的な利用者を生成するものである。一方、第1の情報処理モジュール104aと連係する第2の情報処理モジュール104bは、利用者全体のソーシャルデータや、ソーシャルネットワーク上にある様々な情報がクローリングされて得られた知識の融合体に基づく人工知能であり「エブリワンAI」、「コモンセンスAI」若しくは「モラールAI」と呼ばれるものである。
FIG. 17 shows a mode in which there are a plurality of first
図17は、複数の第1の情報処理モジュール104a_1〜104a_nが、一つの集合110を形成していることを示す。そして、この集合110に対して、知識及び情報を共有する、人工知能としての機能を有する第3の情報処理モジュール112が接続されている。第3の情報処理モジュール112は、複数の第1の情報処理モジュール104a_1〜104a_nにより生成される共通の知識レベルによって生成される人工知能である。すなわち、第3の情報処理モジュール112は、複数の第1の情報処理モジュール104a_1〜104a_nにより生成される複数の擬似的な利用者の全ての知識と個性及び人格を備えた擬似的な利用者であるといえる。このような第3の情報処理モジュール112は「グループAI」と呼ぶことができる。
FIG. 17 shows that a plurality of first information processing modules 104a_1 to 104a_n form one
第3の情報処理モジュール104cは、複数の第1の情報処理モジュール104a_1〜104a_nにより生成される擬似的な各利用者の知識および個性を発揮することができる。別の観点から見れば、第3の情報処理モジュール112により生成される擬似的な利用者は、第1の情報処理モジュール104aによって生成される擬似的な利用者が個人レベルであるのに対し、複数の個人が集合して生成されるものであるので、法人的な性格を有しているともいえる。
The third information processing module 104c can demonstrate the knowledge and individuality of each pseudo user generated by the plurality of first information processing modules 104a_1 to 104a_n. From another viewpoint, the pseudo user generated by the third
複数の第1の情報処理モジュール104a_1〜104a_nは、第3の情報処理モジュール112と会話をすることができる。これにより、複数の第1の情報処理モジュール104a_1〜104a_nは、お互いの情報や知識を共有することができる。第3の情報処理モジュール112は、第1の情報処理モジュール104a_1〜104a_nにより生成される擬似的な利用者の一人が、このグループから離脱したとしても、その脱離した利用者の知識や個性を保持することができるので、メンバーの離脱による知能の欠損を防止することができる。例えば、人工知能としての機能を有する第3の情報処理モジュール112が、ある法人の一部の機能として運用されるとき、法人に属する構成員(自然人)が途中で離脱しても、離脱したメンバーのスキルをその法人に留めておくことができる。
The plurality of first information processing modules 104a_1 to 104a_n can have a conversation with the third
第3の情報処理モジュール104cは、複数の第1の情報処理モジュール104a_1〜104a_nから、新たな情報を取得することが可能であり、それによって人工知能が成長する。すなわち、第1の情報処理モジュール104a_1〜104a_nによって生成される擬似的な各個人のスキルが向上することにより、そのスキルは第3の情報処理モジュール112によって生成される擬似的な利用者のスキルとして反映される。
The third information processing module 104c can acquire new information from the plurality of first information processing modules 104a_1 to 104a_n, whereby artificial intelligence grows. That is, as the skill of each pseudo individual generated by the first information processing modules 104a_1 to 104a_n is improved, the skill becomes a skill of a pseudo user generated by the third
なお、図17で示すように、第3の情報処理モジュール112は、第2の情報処理モジュール102bと電気通信回線を通してアクセス可能な状態に置かれていてもよい。これにより、第3の情報処理モジュール103cは、幅広く情報を収集することができる。
Note that, as shown in FIG. 17, the third
図17を参照して説明したように、本発明によれば、人工知能によって生成される複数の疑似的な利用者の集合により、その集合を形成する複数の利用者の知識、知能、個性の全てを備えた擬似的な利用者を形成し、活用することができる。 As described with reference to FIG. 17, according to the present invention, a plurality of pseudo users generated by artificial intelligence can be used to determine the knowledge, intelligence, and personality of a plurality of users forming the set. A pseudo user with everything can be formed and used.
100・・・コミュニケーション提供システム、102・・・データベース、104・・・情報処理モジュール、106・・・類似データベース、107・・・質問データベース、108・・・返答データベース、200・・・ユーザ端末、202・・・複数の利用者、204・・・第1の利用者、206・・・第2の利用者、300・・・SNS
DESCRIPTION OF
Claims (38)
前記第1の利用者に対する第2の利用者の質問を、前記データベースに記憶されている前記情報の少なくとも一部に基づいて、前記質問に対する回答を推論し又は学習して決定する人工知能としての機能を有する情報処モジュールと、を含むことを特徴とするコミュニケーション提供システム。Social data of a first user registered in one or more social networking services; social data of a plurality of users registered in the plurality of social networking services; A plurality of text data collected from social networking services and a database in which information is stored;
As artificial intelligence for determining a second user's question for the first user by inferring or learning an answer to the question based on at least a portion of the information stored in the database An information processing module having a function.
前記人工知能としての機能を有する情報処理モジュールは、前記類似データベースから前記質問の回答を選択する、請求項6に記載のコミュニケーション提供システム。Grouping similar questions as similar questions, and including a similar database in which answers corresponding to the similar questions are associated,
The communication providing system according to claim 6, wherein the information processing module having a function as the artificial intelligence selects an answer to the question from the similar database.
前記音素データを用いて会話の音声を生成する音声生成モジュールと、を含む、請求項1に記載のコミュニケーション提供システム。The database includes phonetic data of the first user and generates phoneme data from the voice data;
The communication providing system according to claim 1, further comprising: a voice generation module that generates voice of conversation using the phoneme data.
第2の利用者が前記仮想的な個人に対して送信した質問を受け付け、
前記質問に対する回答を、前記第1の利用者のソーシャルデータ、複数の利用者のソーシャルデータ又は予め登録されている複数のテキストデータのいずれか一種に基づいて推論し又は学習して決定し、
前記決定された回答を、前記第2の利用者に提供することを特徴とするコミュニケーション提供方法。Generating a virtual personal image of the first user based on the registration information of the first user;
Accepts a question sent by the second user to the virtual individual;
An answer to the question is determined by inferring or learning based on any one of the first user's social data, a plurality of users' social data or a plurality of pre-registered text data,
The communication providing method, wherein the determined answer is provided to the second user.
前記質問に対する回答を、前記類似データベースから前記質問の回答を選択する、請求項21に記載のコミュニケーション提供方法。Group similar questions as similar questions, associate corresponding answers to the similar questions and store them in a similar database;
The communication providing method according to claim 21, wherein an answer to the question is selected from the similar database.
A plurality of answer candidates for the second user's question are generated, and the first user edits the answer candidate for the question, and updates the content of the answer to the question based on the edited content The communication providing method according to claim 21.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462096951P | 2014-12-26 | 2014-12-26 | |
US62/096,951 | 2014-12-26 | ||
JP2015008988 | 2015-01-20 | ||
JP2015008988 | 2015-01-20 | ||
PCT/JP2015/086309 WO2016104736A1 (en) | 2014-12-26 | 2015-12-25 | Communication provision system and communication provision method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019055172A Division JP6831522B2 (en) | 2014-12-26 | 2019-03-22 | Communication system |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016104736A1 true JPWO2016104736A1 (en) | 2017-11-24 |
JP6502965B2 JP6502965B2 (en) | 2019-04-17 |
Family
ID=56150748
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016566534A Expired - Fee Related JP6502965B2 (en) | 2014-12-26 | 2015-12-25 | Communication providing system and communication providing method |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6502965B2 (en) |
WO (1) | WO2016104736A1 (en) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6753707B2 (en) | 2016-06-16 | 2020-09-09 | 株式会社オルツ | Artificial intelligence system that supports communication |
JP2018055422A (en) * | 2016-09-29 | 2018-04-05 | 株式会社東芝 | Information processing system, information processor, information processing method, and program |
JP6951712B2 (en) * | 2016-09-30 | 2021-10-20 | 株式会社Nextremer | Dialogue devices, dialogue systems, dialogue methods, and programs |
JPWO2019138567A1 (en) | 2018-01-15 | 2020-12-03 | 富士通株式会社 | Output control program, output control method, and output control device |
JP6787973B2 (en) * | 2018-10-31 | 2020-11-18 | 株式会社リクルート | Systems, methods, and programs to assist in answering questions |
CN109918525B (en) * | 2019-03-12 | 2023-07-04 | 同济大学 | Food picture aesthetic analysis tag data collection system based on WeChat applet |
JP2021077073A (en) | 2019-11-08 | 2021-05-20 | 富士ゼロックス株式会社 | Information management device, information processing device, data structure and program |
CN115552426A (en) * | 2020-05-28 | 2022-12-30 | 三菱电机株式会社 | Inference device, program, and inference method |
JP7101357B2 (en) * | 2020-08-14 | 2022-07-15 | 株式会社オルツ | Systems, programs, and methods for surveys |
WO2022034922A1 (en) * | 2020-08-14 | 2022-02-17 | 株式会社オルツ | System, program and method for questionnaire surveys |
JP7295207B1 (en) | 2021-12-03 | 2023-06-20 | 株式会社ビデオリサーチ | Survey tabulation system |
JP2023082970A (en) | 2021-12-03 | 2023-06-15 | 株式会社ビデオリサーチ | expert answer system |
JP7078307B1 (en) | 2022-01-14 | 2022-05-31 | 望 窪田 | Individualization of learning model |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005038088A (en) * | 2003-07-17 | 2005-02-10 | Toshiba Corp | Question answering device and question answering method |
JP2005196356A (en) * | 2004-01-05 | 2005-07-21 | Nec Corp | System, method and program for dialogue with pseudo-character |
JP2008305322A (en) * | 2007-06-11 | 2008-12-18 | C2Cube Inc | Reputation corpus generation device, target information corpus generation device, server device, virtual chat device and program |
JP2013210792A (en) * | 2012-03-30 | 2013-10-10 | Hitachi Solutions Ltd | Lesson question/answer system |
-
2015
- 2015-12-25 JP JP2016566534A patent/JP6502965B2/en not_active Expired - Fee Related
- 2015-12-25 WO PCT/JP2015/086309 patent/WO2016104736A1/en active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005038088A (en) * | 2003-07-17 | 2005-02-10 | Toshiba Corp | Question answering device and question answering method |
JP2005196356A (en) * | 2004-01-05 | 2005-07-21 | Nec Corp | System, method and program for dialogue with pseudo-character |
JP2008305322A (en) * | 2007-06-11 | 2008-12-18 | C2Cube Inc | Reputation corpus generation device, target information corpus generation device, server device, virtual chat device and program |
JP2013210792A (en) * | 2012-03-30 | 2013-10-10 | Hitachi Solutions Ltd | Lesson question/answer system |
Non-Patent Citations (1)
Title |
---|
中川 雅博: "音声翻訳に合わせ口元の動きを再現", 月刊コンピュータ・ダイジェスト, 第26巻、第12号, JPN6018031845, 10 December 2000 (2000-12-10), JP, pages p.68 * |
Also Published As
Publication number | Publication date |
---|---|
WO2016104736A1 (en) | 2016-06-30 |
JP6502965B2 (en) | 2019-04-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6502965B2 (en) | Communication providing system and communication providing method | |
US11526720B2 (en) | Artificial intelligence system for supporting communication | |
Sutherland et al. | Facial first impressions across culture: Data-driven modeling of Chinese and British perceivers’ unconstrained facial impressions | |
Dame | Making a name for yourself: Tagging as transgender ontological practice on Tumblr | |
Manikonda et al. | What's up with privacy? User preferences and privacy concerns in intelligent personal assistants | |
US10635752B2 (en) | Method and system for creating interactive inquiry and assessment bots | |
Lotfian et al. | Formulating emotion perception as a probabilistic model with application to categorical emotion classification | |
US11829725B2 (en) | Computer implemented method for the automated analysis or use of data | |
JP6831522B2 (en) | Communication system | |
Okazaki et al. | How to mine brand Tweets: Procedural guidelines and pretest | |
US10770072B2 (en) | Cognitive triggering of human interaction strategies to facilitate collaboration, productivity, and learning | |
Aattouri et al. | Modeling of an artificial intelligence based enterprise callbot with natural language processing and machine learning algorithms | |
Wu et al. | Toward predicting active participants in tweet streams: A case study on two civil rights events | |
Yenkikar et al. | Sentimlbench: Benchmark evaluation of machine learning algorithms for sentiment analysis | |
Abu Shaqra et al. | A multi-modal deep learning system for arabic emotion recognition | |
Eichinger et al. | Affinity: A system for latent user similarity comparison on texting data | |
Liang et al. | CI-Bot: a hybrid chatbot enhanced by crowdsourcing | |
Zanzotto et al. | Have you lost the thread? discovering ongoing conversations in scattered dialog blocks | |
Alsulami et al. | Extracting attributes for twitter hashtag communities | |
JP2021033860A (en) | Server and computer program | |
CN115497482B (en) | Voice dialogue method and related device | |
Ishanka | A context-aware travel recommendation system based on user emotion and personality | |
Hauffa | Topic-Driven Characterization of Social Relationships for the Analysis of Social Influence | |
Alharthi | The Use of Items Personality Profiles in Recommender Systems | |
Meiselwitz | Social Computing and Social Media. Communication and Social Communities: 11th International Conference, SCSM 2019, Held as Part of the 21st HCI International Conference, HCII 2019, Orlando, FL, USA, July 26-31, 2019, Proceedings, Part II |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180821 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181017 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190322 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6502965 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |