JP6659910B2 - データへのアクセス許可を要求するボット - Google Patents

データへのアクセス許可を要求するボット Download PDF

Info

Publication number
JP6659910B2
JP6659910B2 JP2019505058A JP2019505058A JP6659910B2 JP 6659910 B2 JP6659910 B2 JP 6659910B2 JP 2019505058 A JP2019505058 A JP 2019505058A JP 2019505058 A JP2019505058 A JP 2019505058A JP 6659910 B2 JP6659910 B2 JP 6659910B2
Authority
JP
Japan
Prior art keywords
user
bot
messaging application
computer
computing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019505058A
Other languages
English (en)
Other versions
JP2019530050A (ja
Inventor
ファン、シェルビアン
ダン、リチャード
ボルコフ、アントン
ロドリゲス、アダム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of JP2019530050A publication Critical patent/JP2019530050A/ja
Application granted granted Critical
Publication of JP6659910B2 publication Critical patent/JP6659910B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3271Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using challenge-response
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/16Implementing security features at a particular protocol layer
    • H04L63/168Implementing security features at a particular protocol layer above the transport layer

Description

本出願は、「BOT PERMISSIONS」と題され、2016年9月20日に出願された米国特許出願第62/397,047号の利益を主張し、その全体が参照により本明細書に組み込まれる。
ユーザは、メッセージングサービスを使用して、チャット、インスタントメッセージなどのメッセージング会話を行う。メッセージング会話は、任意のユーザデバイス、例えばコンピュータ、モバイルデバイス、ウェアラブルデバイスなどを使用して実施することができる。ユーザがメッセージングアプリケーションを使用してより多くの会話を行い、より多くのタスクを実行するにつれて、(例えばボットまたは他の自動化されたアシスタントアプリケーションを介した)メッセージング会話またはタスクへの自動化された支援が効率改善に役に立つ可能性がある。自動化はユーザがメッセージング通信をより効率的に行うのを助けることができるが、メッセージングボットがいつどのようにユーザ情報にアクセスするか、およびメッセージングボットがどのユーザ情報にアクセスすることを許可されているかに関する許可を管理する必要があり得る。
本明細書で提供される背景の説明は、本開示の状況を概略的に提示することを目的としている。本発明者らの成果は、本背景技術の欄に記載されている限りにおいて、出願時に先行技術として適格ではない可能性がある記載の態様と同様に、明示的にも暗示的にも本開示に対する先行技術として認めたものではない。
いくつかの実装形態は、コンピュータにより実装される方法を含むことができ、本方法は、第1のユーザに関連する第1のコンピューティングデバイス上にメッセージングアプリケーションを提供して、第1のユーザと少なくとも1つの他のユーザとの間の通信を可能にすること、メッセージングアプリケーションにおいてユーザ要求を検出することを含み得る。本方法は、ユーザ要求に応答するアクションが、第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定すること、第1のユーザに関連するデータへのアクセスを第1のユーザが承認または禁止することを可能にする許可インタフェースを第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせることも含み得る。本方法はさらに、第1のユーザに関連するデータへのアクセスの承認を示すユーザ入力を第1のユーザから受信すると、第1のユーザに関連するデータにアクセスして、ユーザ要求に応答するアクションを実行することを含み得る。
本方法は、第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を第1のユーザから受信すると、タスクが実行されないという標示をメッセージングアプリケーションに提供することも含み得る。いくつかの実装形態においては、第1のユーザは人間のユーザを含み、少なくとも1つの他のユーザは支援エージェントを含むことができる。
いくつかの実装形態においては、第1のユーザは人間のユーザであり、少なくとも1つの他のユーザは、第1のユーザとは異なる、第2のコンピューティングデバイスに関連する第2の人間のユーザを含む。許可インタフェースは、第1のユーザに関連する第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングされることができ、許可インタフェースは、第2の人間のユーザに関連する第2のコンピューティングデバイス上には表示されない。
本方法は、第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を第1のユーザから受信すると、第1のユーザに関連する第1のコンピューティングデバイス上にレンダリングするための第1の標示を提供することをさらに含み得る。本方法は、少なくとも1つの他のユーザに関連する第2のコンピューティングデバイス上にレンダリングするための第2の標示を提供することも含むことができ、第1の標示および第2の標示は、ユーザ要求に応えることの失敗を示すものであり、第1の標示および第2の標示は異なっている。
いくつかの実装形態においては、第1の標示および第2の標示は、異なるテキストコンテンツ、異なるスタイル、および異なるフォーマットのうちの1つまたは複数を含み得る。いくつかの実装形態においては、第1のユーザは人間のユーザを含み、少なくとも1つの他のユーザは、第1のユーザとは異なる第2の人間のユーザと、支援エージェントとを含む。ユーザ要求は、第1のユーザに関連する第1のコンピューティングデバイスから受信されることができる。本方法は、ユーザ要求に応答して、メッセージングアプリケーションにおいて別個の会話を開始することも含み得る。別個の会話は、第1のユーザと支援エージェントとを含むことができ、第2の人間のユーザを含まない。
いくつかの実装形態においては、ユーザ要求を検出することは、第1のユーザおよび少なくとも1つの他のユーザのうちの一または複数からメッセージングアプリケーションにおいて受信された1つまたは複数のメッセージを分析することを含む。1つまたは複数のメッセージは、テキストメッセージ、マルチメディアメッセージ、および支援エージェントへのコマンドのうちの1つまたは複数を含み得る。ユーザ要求に応答するアクションを実行することは、第1のメッセージングアプリケーションへ1つまたは複数の提案を提供することを含む。
本方法は、1つまたは複数の提案をメッセージングアプリケーションにおいてレンダリングさせることも含み得る。1つまたは複数の提案は、第1のユーザによって選択されたときに提案についての詳細を表示させる提案要素としてレンダリングされることができる。
いくつかの実装形態においては、コンピュータにより実装される方法を含むことができる。本方法は、メッセージングアプリケーションにおいてユーザ要求を検出すること、ユーザ要求に応答するアクションが、第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定することを含み得る。本方法は、第1のユーザに関連するデータへのアクセスを第1のユーザが承認または禁止することを可能にする許可インタフェースを第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせることも含み得る。本方法は、さらに、許可インタフェースにおいて第1のユーザからの承認を受信すると、第1のユーザに関連するデータにアクセスし、ユーザ要求に応答するアクションを実行することを含み得る。
本方法は、第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を第1のユーザから受信すると、タスクが実行されないという標示をメッセージングアプリケーションに提供することも含み得る。本方法は、第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を第1のユーザから受信すると、メッセージングアプリケーションにおいてレンダリングするための第1の標示を提供することをさらに含み得る。本方法は、少なくとも1つの他のユーザに関連する第2のメッセージングアプリケーションにおいてレンダリングするための第2の標示を提供することも含むことができ、第1の標示および第2の標示は、ユーザ要求に応えることの失敗を示すものであり、第1の標示および第2の標示は異なっている。
いくつかの実装形態は、1つまたは複数のプロセッサによって実行されると、1つまたは複数のプロセッサに動作を実施させる命令を記憶した非一時的コンピュータ可読媒体に結合された1つまたは複数のプロセッサを備えるシステムを含み得る。動作は、第1のユーザに関連する第1のコンピューティングデバイス上にメッセージングアプリケーションを提供して、第1のユーザと少なくとも1つの他のユーザとの間の通信を可能にすること、メッセージングアプリケーションにおいてユーザ要求を検出することを含み得る。動作は、ユーザ要求に応答するアクションが、第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定すること、第1のユーザに関連するデータへのアクセスを第1のユーザが承認または禁止することを可能にする許可インタフェースを第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせることも含み得る。動作は、さらに、第1のユーザに関連するデータへのアクセスの承認を示すユーザ入力を第1のユーザから受信すると、第1のユーザに関連するデータにアクセスして、ユーザ要求に応答するアクションを実行することを含み得る。
動作は、第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を第1のユーザから受信すると、タスクが実行されないという標示をメッセージングアプリケーションに提供することも含み得る。いくつかの実装形態においては、第1のユーザは人間のユーザを含み、少なくとも1つの他のユーザは支援エージェントを含むことができる。いくつかの実装形態においては、第1のユーザは人間のユーザを含み、少なくとも1つの他のユーザは、第1のユーザとは異なり、第2のコンピューティングデバイスに関連する第2の人間のユーザを含むことができる。許可インタフェースは、第1のユーザに関連する第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングされることができ、第2の人間のユーザに関連する第2のコンピューティングデバイス上には表示されない。
いくつかの実装形態によるメッセージがユーザとボットとの間で交換され得る例示的な環境のブロック図である。 いくつかの実装形態によるユーザデバイスおよびボット通信の例示的な構成の図である。 いくつかの実装形態によるユーザデバイスおよびボット通信の例示的な構成の図である。 いくつかの実装形態によるユーザデバイスおよびボット通信の例示的な構成の図である。 いくつかの実装形態によるボット許可を管理するための例示的な方法のフロー図である。 いくつかの実装形態によるボットメッセージングを伴う例示的なユーザインタフェースの図である。 いくつかの実装形態によるボットメッセージングを伴う例示的なユーザインタフェースの図である。 いくつかの実装形態によるボット許可を管理するための例示的な方法のフロー図である。 いくつかの実装形態によるボット許可を管理するように構成された例示的なコンピューティングデバイスの図である。
本明細書で説明される1つまたは複数の実装形態は、メッセージングアプリケーションボットのための許可制御および管理に関する。
図1は、自動支援エージェントを可能とし、いくつかの実施形態では自動支援エージェントを提供するメッセージングサービスを提供するための例示的な環境100のブロック図を示す。例示的な環境100は、メッセージングサーバ101、1つまたは複数のクライアントデバイス115a、115n、サーバ135、およびネットワーク140を含む。ユーザ125a〜125nは、それぞれのクライアントデバイス115a、115nに関連付けられることができる。サーバ135は、例えば、メッセージングサービスを提供する当事者とは異なる当事者によって制御されるサードパーティサーバであり得る。様々な実装形態では、以下でさらに詳細に説明するように、サーバ135はボットサービスを実装することができる。いくつかの実装形態では、環境100は、図1に示されている1つまたは複数のサーバまたはデバイスを含まないことがあり、または図1に示されない他のサーバまたはデバイスを含むことがある。図1および残りの図において、参照番号の後の文字、例えば「115a」は、その特定の参照番号を有する要素への参照を表す。後続の文字を除いた本文中の参照番号、例えば「115」は、その参照番号を有する要素の実装に対する一般的な参照を表す。
図示の実装形態では、メッセージングサーバ101、クライアントデバイス115、およびサーバ135は、ネットワーク140を介して通信可能に結合されている。様々な実装形態では、ネットワーク140は、有線または無線の従来型のものとすることができ、星型構成、トークンリング構成または他の構成を含む多数の異なる構成をとることができる。さらに、ネットワーク140は、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)(例えばインターネット)、および/または複数のデバイスが通信することができる他の相互接続されたデータパスを含むことができる。いくつかの実装形態では、ネットワーク140はピアツーピアネットワークであってよい。ネットワーク140は、様々な異なる通信プロトコルでデータを送信するために電気通信ネットワークの一部に結合されるかまたはその一部を含むこともできる。いくつかの実装形態では、ネットワーク140は、ショートメッセージングサービス(SMS)、マルチメディアメッセージングサービス(MMS)、ハイパーテキスト転送プロトコル(HTTP)、直接データ接続、電子メールなどを介することを含むデータの送受信のための、ブルートゥース(登録商標)通信ネットワーク、Wi−Fi(登録商標)、またはセルラー通信ネットワークを含む。図1は、クライアントデバイス115、メッセージングサーバ101、およびサーバ135に結合された1つのネットワーク140を示しているが、実際には、1つまたは複数のネットワーク140が、これらのエンティティに結合し得る。
メッセージングサーバ101は、プロセッサ、メモリ、およびネットワーク通信機能を含み得る。いくつかの実装形態では、メッセージングサーバ101は、ハードウェアサーバである。いくつかの実装形態では、メッセージングサーバ101は、仮想化環境に埋め込まれ得る。例えば、メッセージングサーバ101は、1つまたは複数の他の仮想マシンを含み得るハードウェアサーバ上で実行される仮想マシンであってよい。メッセージングサーバ101は、信号線102を介してネットワーク140に通信可能に結合されている。信号線102は、イーサネット(登録商標)、同軸ケーブル、光ファイバケーブルなどのような有線接続、またはWi−Fi、ブルートゥース、または他の無線技術などの無線接続とすることができる。いくつかの実装形態では、メッセージングサーバ101は、ネットワーク140を介して、クライアントデバイス115a〜115n、サーバ135、およびボット113のうちの1つまたは複数との間でデータを送受信する。いくつかの実装形態では、メッセージングサーバ101は、ユーザ(例えば、ユーザ125のうちのいずれか)が他のユーザおよび/またはボットとメッセージを交換することを可能にするためのクライアント機能を提供するメッセージングアプリケーション103aを含み得る。メッセージングアプリケーション103aは、サーバアプリケーション、クライアント−サーバアプリケーションのサーバモジュール、または(例えば、1つまたは複数のクライアントデバイス115上の対応するクライアントメッセージングアプリケーション103bを有する)分散アプリケーションとすることができる。
メッセージングサーバ101は、メッセージングサーバ101を介して交換されたメッセージ、1つまたは複数のボットのデータおよび/または構成、ならびに1つまたは複数のユーザ125に関連するユーザデータを、それぞれのユーザからそのようなデータを格納するための明示的な許可がある場合には格納することができるデータベース199も含む。いくつかの実施形態では、メッセージングサーバ101は、1つまたは複数の支援エージェント、例えばボット107aおよび111を含むことができる。他の実施形態では、支援エージェントは、メッセージングサーバ101上ではなく、クライアントデバイス115a〜n上に実装され得る。
メッセージングアプリケーション103aは、ユーザ125と1つまたは複数のボット105、107a、107b、109a、109b、111、および113との間のメッセージの交換を可能にするためのプロセッサによって動作可能なコードおよびルーチンであり得る。いくつかの実装形態では、メッセージングアプリケーション103aは、フィールドプログラマブルゲートアレイ(FPGA)または特定用途向け集積回路(ASIC)を含むハードウェアを使用して実装され得る。いくつかの実装形態では、メッセージングアプリケーション103aは、ハードウェアとソフトウェアとの組み合わせを使用して実装され得る。
様々な実装形態では、クライアントデバイス115に関連するそれぞれのユーザが、メッセージの格納について同意したときに、データベース199は、1つまたは複数のクライアントデバイス115間で交換されたメッセージを格納することができる。いくつかの実装形態では、クライアントデバイス115に関連するそれぞれのユーザがメッセージの格納について同意したときに、データベース199は、1つまたは複数のクライアントデバイス115と、例えば他のクライアントデバイス、メッセージングサーバ101、およびサーバ135などの異なるデバイス上に実装された1つまたは複数のボットとの間で交換されるメッセージを格納し得る。一または複数のユーザが同意しない実装形態では、それらのユーザによって送受信されたメッセージは格納されない。
いくつかの実装形態では、メッセージは、例えば、メッセージの送信者および受信者だけが暗号化されたメッセージを見ることができるように暗号化されてもよい。いくつかの実装形態では、メッセージが格納されている。いくつかの実装形態では、データベース199は、例えば、ボット107a、ボット111などの1つまたは複数のボットのデータおよび/または構成をさらに格納することができる。ユーザ125が、(ソーシャルネットワークデータ、連絡先情報、画像などのような)ユーザデータの格納に同意するいくつかの実装形態では、データベース199はそのような同意を提供したそれぞれのユーザ125に関連するユーザデータを格納することもできる。
いくつかの実装形態では、メッセージングアプリケーション103a/103bは、ユーザ125が新しいボットを作成することを可能にするユーザインタフェースを提供することができる。これらの実装形態では、メッセージングアプリケーション103a/103bは、メッセージングアプリケーション103a/103bのユーザ間の会話にユーザ作成ボットを含めることを可能にする機能を含み得る。
クライアントデバイス115は、メモリおよびハードウェアプロセッサを含むコンピューティングデバイス、例えば、カメラ、ラップトップコンピュータ、タブレットコンピュータ、携帯電話、ウェアラブルデバイス、モバイル電子メールデバイス、携帯型ゲーム機、携帯型音楽プレーヤー、リーダデバイス、ヘッドマウントディスプレイ、またはネットワーク140に無線でアクセスすることができる他の電子デバイスなどであり得る。
図示の実装形態では、クライアントデバイス115aは信号線108を介してネットワーク140に結合され、クライアントデバイス115nは信号線110を介してネットワーク140に結合されている。信号線108および110は、例えばイーサネットなどの有線接続、またはWi−Fi、ブルートゥース、または他の無線技術などの無線接続とすることができる。クライアントデバイス115a、115nは、それぞれユーザ125a、125nによってアクセスされる。図1のクライアントデバイス115a、115nは例として用いられている。図1は2つのクライアントデバイス115aおよび115nを示しているが、本開示は1つまたは複数のクライアントデバイス115を有するシステムアーキテクチャに適用される。
いくつかの実装形態では、クライアントデバイス115は、ユーザ125によって着用されるウェアラブルデバイスであり得る。例えば、クライアントデバイス115は、クリップ(例えば、リストバンド)の一部、宝飾品の一部、または眼鏡の一部として含まれてもよい。別の例では、クライアントデバイス115は、スマートウォッチとすることができる。様々な実装形態では、ユーザ125は、デバイスのディスプレイ上でメッセージングアプリケーション103a/103bからのメッセージを閲覧することができ、スピーカまたはデバイスの他の出力デバイスなどを介してメッセージにアクセスすることができる。例えば、ユーザ125は、スマートウォッチやスマートリストバンドのディスプレイ上でメッセージを閲覧することができる。別の例では、ユーザ125は、クライアントデバイス115に結合された、またはその一部であるヘッドホン(図示せず)、クライアントデバイス115のスピーカ、クライアントデバイス115の触覚フィードバック要素などを介してメッセージにアクセスすることができる。
いくつかの実装形態では、メッセージングアプリケーション103bはクライアントデバイス115aに格納されている。いくつかの実装形態では、メッセージングアプリケーション103b(例えば、シンクライアントアプリケーション、クライアントモジュールなど)は、メッセージングサーバ101に格納されている対応するメッセージングアプリケーション103a(例えば、サーバアプリケーション、サーバモジュールなど)を有するクライアントデバイス115aに格納されているクライアントアプリケーションであり得る。例えば、メッセージングアプリケーション103bは、クライアントデバイス115a上のユーザ125aによって作成されたメッセージをメッセージングサーバ101に格納されているメッセージングアプリケーション103aに送信することができる。
いくつかの実装形態では、メッセージングアプリケーション103aは、メッセージングサーバ101に格納されているスタンドアロンアプリケーションとすることができる。ユーザ125aは、クライアントデバイス115a上のブラウザまたは他のソフトウェアを使用してウェブページを介してメッセージングアプリケーション103aにアクセスすることができる。いくつかの実装形態では、クライアントデバイス115a上に実装されているメッセージングアプリケーション103bは、メッセージングサーバ101上に含まれているものと同じまたは類似のモジュールを含むことができる。いくつかの実装形態では、メッセージングアプリケーション103bは、例えば、1つまたは複数のクライアントデバイス115が他のクライアントデバイス115とのメッセージ交換を可能にする機能を含むピアツーピアまたは他の構成で、スタンドアロンクライアントアプリケーションとして実装され得る。これらの実装形態では、メッセージングサーバ101は、限定されたメッセージング機能(例えば、クライアント認証、バックアップなど)を含むか、またはそのような機能を含まない可能性がある。いくつかの実装形態では、メッセージングサーバ101は、1つまたは複数のボット、例えばボット107aおよびボット111を実装することができる。
サーバ135は、プロセッサ、メモリ、およびネットワーク通信機能を含み得る。いくつかの実装形態では、サーバ135はハードウェアサーバである。サーバ135は、信号線128を介してネットワーク140に通信可能に結合されている。信号線128は、イーサネット、同軸ケーブル、光ファイバケーブルなどのような有線接続、またはWi−Fi、ブルートゥース、または他の無線技術などの無線接続とすることができる。いくつかの実装形態では、サーバ135は、ネットワーク140を介してメッセージングサーバ101およびクライアントデバイス115のうちの1つまたは複数との間でデータを送受信する。サーバ135は1つのサーバとして示されているが、様々な実装態様は1つまたは複数のサーバ135を含み得る。サーバ135は、サーバアプリケーションまたはサーバモジュールとして1つまたは複数のボット、例えばボット109aおよびボット113を実装することができる。
様々な実装形態では、サーバ135は、メッセージングサーバ101を管理するのと同じエンティティ、例えばメッセージングサービスのプロバイダの一部とすることができる。いくつかの実装形態では、サーバ135は、例えば、メッセージングアプリケーション103a/103bを提供するエンティティとは異なるエンティティによって制御されるサードパーティサーバとすることができる。いくつかの実装形態では、サーバ135はボットを提供またはホストする。
ボットは自動化されたサービスで、1つまたは複数のコンピュータに実装されており、ユーザは主にテキストを通じて、例えばメッセージングアプリケーション103a/103bを介して対話する。ボットは、ボットが様々なメッセージングアプリケーションのユーザと対話できるように、ボットプロバイダによって実装され得る。いくつかの実装形態では、メッセージングアプリケーション103a/103bのプロバイダは、1つまたは複数のボットを提供することもある。いくつかの実装形態では、メッセージングアプリケーション103a/103bのプロバイダによって提供されるボットは、ボットが他のメッセージングアプリケーションに含まれることができるように、例えば他のプロバイダによって提供されるように構成され得る。ボットは他のモードに比べていくつかの利点を提供することが可能である。例えば、ボットは、クライアントデバイスにアプリケーションをインストールしたり、ウェブサイトにアクセスしたりすることなく、ユーザが新しいサービス(例えば、タクシー予約サービス、レストラン予約サービスなど)を試すことを許可することができる。さらに、ユーザは、テキストを介してボットと対話することができ、これは、ウェブサイト、ソフトウェアアプリケーション、電話通話、例えば、対話式音声応答(interactive voice response:IVR)サービス、またはサービスとやり取りする他の方法を使用するのに必要な学習と比較して、最小限の学習しか必要とせず、または全く学習を必要としない。メッセージングサービスまたはアプリケーションにボットを組み込むことで、ユーザは、メッセージングサービス内で旅行の計画、買い物、イベントのスケジュール、情報の取得などのさまざまなタスクを他のユーザと協力することも可能となり、タスクを実行するためのさまざまなアプリケーション(例えば、タクシー予約アプリケーション、レストラン予約アプリケーション、カレンダーアプリケーションなど)間またはWebサイト間での切り替えのような面倒な操作を排除することができる。
ボットは、メッセージングアプリケーション103a/103bを介して一または複数のユーザ(例えば、ユーザ125a〜nのうちのいずれか)と対話して情報を提供するか、またはメッセージングアプリケーション103内で特定のアクションを実施するように構成されたコンピュータプログラムまたはアプリケーション(例えば、ソフトウェアアプリケーション)として実装されてもよい。一例として、情報検索ボットは、インターネット上の情報を検索し、メッセージングアプリ内で最も関連性の高い検索結果を提示することができる。別の例として、トラベルボットは、例えば、メッセージングアプリ内で旅行およびホテルのチケットの購入を可能にし、メッセージングアプリ内でホテルを予約し、メッセージングアプリ内でレンタカーを予約することなどによって、メッセージングアプリケーション103を介して旅行手配をする能力を有し得る。別の例として、タクシーボットは、別個のタクシー予約アプリを起動することも呼び出すこともせずに、例えば、(ユーザ125が位置情報へのアクセスを許可する場合にクライアントデバイス115からタクシーボットによって取得される)ユーザの位置にタクシーを呼び出す能力を有し得る。別の例として、コーチ/チューターボットは、ユーザを個人指導して、例えば、試験に現れる可能性がある質問をし、ユーザの応答が正しいか誤っているかについてのフィードバックを提供することによって、メッセージングアプリ内のいくつかの科目の内容についてユーザを指導し得る。別の例として、ゲームボットは、メッセージングアプリ内においてユーザとは反対サイドまたは同じサイドでゲームをプレイすることができる。別の例として、コマーシャルボットは、例えば、商人のカタログから製品情報を検索し、メッセージングアプリを通じて購入を可能とすることによって、特定の商人からサービスを提供することができる。別の例として、インタフェースボットは、メッセージングアプリのユーザが遠隔デバイスまたは車両とチャットし、そこから情報を検索し、および/または遠隔デバイスまたは車両に命令を提供できるように遠隔デバイスまたは車両とインタフェースしてもよい。
ボットの機能には、ユーザの意図を理解して実行することが含まれ得る。ユーザの意図は、ユーザの会話およびその文脈を分析し理解することによって理解され得る。ボットは、会話の変化するコンテキスト、または時間の経過とともに進化する会話に基づくユーザの変化する感情および/または意図を理解することもできる。例えば、ユーザAがコーヒーのための会議を提案したが、ユーザBがコーヒーを好まないと述べた場合、ボットはユーザBにコーヒーに対する否定的な感情スコアを割り当て、会議のためにコーヒーショップを提案しない可能性がある。
メッセージングアプリケーション103a/103bのユーザと通信することができるボットを実装することは、多くの利点を提供することができる。従来、ユーザは、請求書の支払い、食べ物の注文、チケットの予約などの活動を実行するためにソフトウェアアプリケーションまたはウェブサイトを利用することがある。そのような実施に関する問題は、複数の活動を実行するために、ユーザが複数のソフトウェアアプリケーションやウェブサイトをインストールまたは使用することを要求されることである。例えば、ユーザは、(例えば、公益事業会社からの)公共料金の請求書に対する支払いをするため、映画のチケットを購入するため(例えば、チケットサービスプロバイダからのチケット予約アプリケーション)、(例えばそれぞれのレストランから)レストランの予約をするために、異なるソフトウェアアプリケーションをインストールしなければならない場合があり、または各活動のためにそれぞれのウェブサイトを訪問する必要があり得る。そのような実施に関する別の問題は、ユーザが複雑なユーザインタフェース、例えばウィンドウ、ボタン、チェックボックス、ダイアログボックスなどのような複数のユーザインタフェース要素を使用して実装されたユーザインタフェースなどを学習しなくてはならないことである。
したがって、1つまたは複数の説明された実装形態の利点は、単一のアプリケーションが、別個のウェブサイトへのアクセスまたはソフトウェアアプリケーションのインストールおよび実行を必要とせずに、ユーザが任意の数の相手との対話を含むアクティビティを実行できることであり、これはクライアントデバイス上のメモリ、ストレージ、および処理リソースの消費を削減する技術的効果を有する。説明された実装形態の利点は、会話型インタフェースにより、ユーザが、例えば複雑なユーザインタフェースを学習する必要なしに、そのような活動を完了することをより簡単かつ迅速とすることであり、これは計算リソースの消費を低減するという技術的効果を有する。説明された実装形態の別の利点は、ボットを実装することによって、例えば、通信サーバ、1つまたは複数のWebサーバでホストされているWebサイト、EメールサーバでホストされているカスタマーサポートEメールなどのうちの一つまたは複数を使用して実装された無料電話番号など、様々な参加エンティティがより低いコストでユーザ対話を提供できるようになることであり、これは、ユーザ対話を可能とするために展開される計算リソースの必要性を減らすことができるという技術的効果を有する。説明された特徴の他の技術的効果は、通信ネットワークにわたってユーザタスクを完了するために必要とされるシステム処理および伝送リソースの消費の問題の縮小である。
本明細書における特定の例は、ボットと一または複数のユーザとの間の対話を説明しているが、ボットとユーザ125との間の1対1の対話、ボットと二以上のユーザとの間の(例えば、グループメッセージングの会話における)1対多の対話、複数のボットとユーザとの間の多対1の対話、および複数のボットと複数のユーザとの間の多対多の対話などの様々なタイプの対話が可能である。さらに、いくつかの実装形態では、ボットは、メッセージングアプリケーション103を介して、ボット間の直接通信を介して、または組み合わせにより、他のボット(例えば、ボット107a/107b、109a/109b、111、113など)と対話するようにも構成され得る。例えば、レストラン予約ボットは、テーブルを予約するために特定のレストランのボットと対話することができる。
特定の実施形態では、ボットは会話型インタフェースを使用して自然言語を使用してユーザと会話的に対話することができる。いくつかの実施形態では、ボットは、例えばレストランの住所の要求に応じて、「レストランRの位置はLである」などのテンプレートを使用するなど、テンプレートベースのフォーマットを使用して、ユーザと対話するための文章を作成することができる。場合によっては、例えばボットがユーザと対話するために自然言語を使用するかどうか、ボットがテンプレートベースの対話を使用するかどうかなど、ユーザが、ボット対話フォーマットを選択できるようにすることが可能であり得る。
ボットが自然言語を使用して会話的に対話する場合、ボットの対話の内容および/またはスタイルは、自然言語処理を使用して判定される会話の内容、会話中のユーザの識別情報、1つまたは複数の会話コンテキスト(例えば、ユーザの対話に関する履歴情報、ソーシャルグラフに基づく会話内のユーザ間の関係)、外部条件(例えば、天気、交通)、ユーザのスケジュール、ユーザに関連する関連コンテキストなどのうちの一つまたは複数に基づいて動的に変化し得る。このような場合、ボットの対話の内容とスタイルは、会話に参加しているユーザが同意した要素のみに基づいて異なる。
一例として、会話のユーザがフォーマルな言葉を使用していると判断された場合(例えば、俗語や絵文字がない、または最小限の俗語または絵文字)、ボットもフォーマルな言葉を使用してその会話内で対話することができ、逆もまた同様である。別の例として、会話中のユーザが(現在および/または過去の会話に基づいて)絵文字のヘビーユーザであると判定された場合、ボットは、1つまたは複数の絵文字を使用してそのユーザと対話することもできる。別の例として、会話中の2人のユーザがソーシャルグラフ内で遠い関係であると判定された場合(例えば、彼らの間に2人以上の中間ノードを有する、例えば、彼らが友達の友達の友達であることを示す)、ボットはその会話でよりフォーマルな言葉を使用し得る。会話に参加しているユーザが、ユーザのソーシャルグラフ、スケジュール、場所、またはユーザに関連するその他のコンテキストなどの要素をボットが利用することに同意していない場合、ボットの対話の内容およびスタイルは、このような要素を利用する必要がないデフォルトスタイル、例えばニュートラルスタイルであり得る。
さらに、いくつかの実装形態では、一または複数のボットは、ユーザとの会話をやり取りするための機能を含むことができる。例えば、ユーザが、「@ムービーボット映画を推薦してくれませんか?(@moviebot Can you recommend a movie?)」と入力することにより映画に関する情報を要求した場合、「ムービーボット(moviebot)」というボットが「コメディーの気分ですか?」と応答し得る。次に、ユーザは、例えば「いいえ」と応答する場合があり、これに対し、ボットは、「了解しました。「宇宙と星」というタイトルのSF映画は素晴らしい評価を得ています。チケットを予約しましょうか?」と応答し得る。するとユーザは、「はい、私は午後6時より後に行くことができます。スティーブが参加できるかどうか確認してください」と表明することができる。ボットが自分の連絡先についての情報にアクセスすることに対するユーザの同意、およびボットからメッセージを受信することに対する友人スティーブの同意があると、ボットはユーザの友人スティーブにメッセージを送信し、適切な時間に映画チケットを予約するさらなるアクションを実行することが可能である。
特定の実施形態では、会話に参加しているユーザは、例えば、ボット名またはボットハンドル(例えば、タクシー(taxi)、@タクシーボット(@taxibot)、@ムービー(@movies)など)を入力すること、音声コマンド(例えば、「銀行ボットを呼び出して」など)を使用すること、ユーザインタフェース要素(例えば、ボット名またはハンドルでラベル付けされたボタンまたはその他の要素)をアクティブにすることなどによって、特定のボットまたは特定のタスクを実行するボットを呼び出すことが可能とされ得る。ボットが呼び出されると、ユーザ125は、他のユーザ125にメッセージを送信するのと同様の方法で、メッセージングアプリケーション103a/103bを介してボットにメッセージを送信することができる。例えば、タクシーを呼ぶには、ユーザは「@タクシーボットタクシーを呼んで(@taxibot get me a cab)」と入力することができ、ホテルを予約するには、ユーザは「@ホテルボット 私の近くの中華料理店で4人のテーブルを予約して(@hotelbot book a table for 4 at a Chinese restaurant near me)」と入力することができる。
特定の実施形態では、ボットは、具体的に呼び出されることなく、メッセージング会話内の情報またはアクションを自動的に提案することができる。つまり、ユーザはボットを特別に呼び出す必要がないかもしれない。これらの実施形態では、ボットは、継続的にまたは別々の時点での会話の分析および理解に依存することができる。会話の分析は、特定のユーザのニーズを理解し、いつボットが支援を提案すべきかを識別するために使用することができる。一例として、ボットは、ユーザが情報を必要としていると判定した場合(例えば、ユーザが他のユーザに質問することに基づいて、複数のユーザがある情報を有していないことを示すことに基づいて)、何らかの情報を検索して答えを提案することが可能である。別の例として、複数のユーザが中華料理を食べることに興味を表明したと判定された場合、ボットは自動的にユーザの近くにある一連の中華レストランを提案してもよく、これは、レストランの場所、評価、ウェブサイトへのリンクなどの任意の情報の提案を含む。
特定の実施形態では、ボットを自動的に呼び出したり、またはユーザがボットを明示的に呼び出すのを待ったりするのではなく、自動的な提案がメッセージング会話中の一または複数のユーザに対し行われて、一または複数のボットを呼び出すことができる。これらの実施形態では、会話は継続的にまたは別々の時点で分析されることができ、会話の分析は、特定のユーザのニーズを理解し、いつ会話内でボットを提案すべきかを識別するために使用することができる。
ボットが具体的に呼び出されることなく、メッセージング会話内において情報またはアクションを自動的に提案することができる実施形態では、例えば、メッセージング会話に参加している一または複数のユーザが、ユーザの会話の分析をボットが実施することについて同意しない場合、そのような機能は無効にされる。さらに、そのような機能は、ユーザ入力に基づいて一時的に無効にされてもよい。例えば、会話がプライベートであるかセンシティブであることをユーザが示したとき、会話コンテキストの分析は、ユーザがボットをアクティブにするための入力を提供するまで一時停止される。さらに、分析機能が無効化されているという標示を、例えばユーザインタフェース要素を用いて、会話の参加者に提供することができる。
様々な実装形態では、ボットは様々な構成で実装され得る。例えば、図1に示されるように、ボット105はクライアントデバイス115a上に実装される。この例では、ボットは、クライアントデバイス115aに対してローカルなソフトウェアアプリケーション内のモジュールであり得る。例えば、ユーザがクライアントデバイス115a上にタクシーを呼ぶアプリケーションをインストールした場合、ボット機能はタクシーを呼ぶアプリケーションにモジュールとして組み込まれることができる。この例では、ユーザは、例えば「@タクシーボットタクシーを呼んで(@taxibot get me a cab)」というメッセージを送信することによって、タクシーボットを呼び出すことが可能である。メッセージングアプリケーション103bは、タクシーを呼ぶアプリケーション内のボットモジュールを自動的に起動させることができる。このようにして、ユーザがメッセージングアプリケーション103を介してボットと会話することができるように、ボットはクライアントデバイス上にローカルに実装され得る。
図1に示す別の例では、ボット107aはクライアントデバイス115a上に実装されているように示され、ボット107bはメッセージングサーバ101上に実装されているように示されている。この例では、ボットは、ボット107a(サーバモジュール)およびボット107b(クライアントモジュール)のそれぞれによって提供されるボット機能の一部を用いて、例えばクライアント−サーバコンピュータプログラムとして、実装することができる。例えば、ボットがハンドル@カレンダー(@calendar)を有するスケジューリングボットである場合、ユーザ115aは、「@カレンダー 夕方に洗濯物を受け取ることをリマインドして(@calendar remind me to pick up laundry in the evening)」と入力することによって、リマインダをスケジュールすることができ、これは、ボット107b(クライアントモジュール)によって取り扱われ得る。この例を続けると、ユーザ115aがボットに「ジムは4時に会えるかをチェックして」と言うと、ボット107a(サーバモジュール)はメッセージを交換するためにユーザであるジム(またはジムのスケジューリングボット)に連絡し、ユーザ115aに応答を提供する。
別の例では、ボット109a(サーバモジュール)はサーバ135上に実装され、ボット109b(クライアントモジュール)はクライアントデバイス115上に実装される。この例では、ボット機能は、クライアントデバイス115、およびメッセージングサーバ101とは異なるサーバ135上に実装されたモジュールによって提供される。いくつかの実装形態では、ボットは、例えば、複数のクライアントデバイスおよびサーバ(例えば、クライアントデバイス115、サーバ135、メッセージングサーバ101など)にわたって分散されたモジュールを用いて、分散アプリケーションとして実装され得る。いくつかの実装形態では、ボットは、サーバアプリケーションとして実装されることができ、それは、例えば、メッセージングサーバ101上に実装されるボット111、およびサーバ135上に実装されるボット113である。
クライアントのみ、サーバのみ、クライアント−サーバ、分散などの種々の実装は、様々な利点を提供することができる。例えば、クライアントのみの実装では、ボット機能をローカルで、例えば、ネットワークアクセスがなくても、提供することが可能であり、これは、例えば、ユーザがネットワークのサービスエリア外にいるとき、または少ないまたは限られたネットワーク帯域幅しか有しない任意のエリア内にいる場合のような、特定の状況において有利であり得る。サーバのみ、クライアント−サーバ、または分散構成などの1つまたは複数のサーバを含む実装では、例えば、金融取引、チケットの予約などのクライアントデバイスでローカルに提供できない特定の機能が許可され得る。
図1では、ボットをメッセージングアプリケーション103とは異なるものとして示しているが、いくつかの実装形態では、1つまたは複数のボットは、メッセージングアプリケーション103の一部として実装され得る。ボットがメッセージングアプリケーション103の一部として実装される実装形態では、ボットを実行する前にユーザの許可が取得される。例えば、ボットがメッセージングアプリケーション103a/103bの一部として実行される場合、メッセージングアプリケーション103a/103bは、特定の活動を実施することができるボット、例えば、送受信メッセージを翻訳する翻訳ボット、ユーザのカレンダー上のイベントをスケジュールするスケジューリングボットなどを提供することが可能である。この例では、翻訳ボットはユーザの具体的な許可がある場合にのみアクティブになる。ユーザが同意しない場合、メッセージングアプリケーション103a/103b内のボットは実装されない(例えば、無効化、削除など)。ユーザが同意する場合、ボットまたはメッセージングアプリケーション103a/103bは、メッセージングアプリケーション103a/103bを介してユーザ間で交換されるメッセージを限定的に使用して、特定の機能、例えば、翻訳、スケジューリングなどを提供することができる。
いくつかの実装形態では、メッセージングアプリケーション103a/103bのプロバイダおよびユーザ125とは異なるサードパーティが、特定の目的のためにメッセージングアプリケーション103a/103bを介してユーザ125と通信することができるボットを提供し得る。例えば、タクシーサービスプロバイダはタクシーボットを提供し、発券サービスはイベントチケットを予約できるボットを提供し、銀行ボットは金融取引を実行する機能を提供することができる。
メッセージングアプリケーション103を介してボットを実装する際、ボットは、特定のユーザ許可があった場合にのみユーザと通信することを許可される。例えば、ユーザがボットを呼び出すと、ボットは、例えば、ボットを呼び出すというユーザの動作に基づいて返信することができる。別の例では、ユーザは、ユーザに連絡することができる特定のボットまたはボットの種類を示すことができる。例えば、ユーザは、旅行ボットが自分と通信することを許可するが、ショッピングボットには許可を与えないことがある。この例では、メッセージングアプリケーション103a/103bは、旅行ボットがユーザとメッセージを交換することを許可するが、ショッピングボットからのメッセージをフィルタリングまたは拒否することができる。
さらに、いくつかの機能(例えば、タクシーの呼出、フライト予約、友達への連絡など)を提供するために、ボットは、場所、支払い情報、連絡先などのユーザデータへのボットのアクセスをユーザが許可することを要求し得る。そのような場合、ユーザには、ボットへアクセスを許可または拒否するオプションが提示される。ユーザがアクセスを拒否した場合、ボットはメッセージで、例えば「申し訳ありませんが、タクシーを予約することができません」と、応答する可能性がある。さらに、ユーザは、限定されたやり方で情報へのアクセスを提供することができ、例えば、ユーザは、ボットの特定の起動時にのみタクシーボットが現在位置にアクセスすることを許可し、他の場合は許可しないことができる。異なる実装形態では、ユーザは、ボットがアクセスできる情報の種類、量、および粒度を制御することができ、そのような許可をいつでも変更することができる(例えば、ユーザインタフェースを介した)機能が提供されている。いくつかの実装形態では、ボットがそのようなデータにアクセスすることができるようになる前に、例えば、個人を識別可能な情報を削除するなど、情報を特定のデータ要素に制限するためにユーザデータが処理され得る。さらに、ユーザは、メッセージングアプリケーション103a/103bおよび1つまたは複数のボットによるユーザデータの使用を制御することができる。例えば、ユーザは、金融取引を行う能力を提供するボットが、取引完了前にユーザ認証を必要とすることを指定することができ、例えば、ボットは、「映画「宇宙と星」のチケットは各12ドルです。このまま予約しますか?」というメッセージ、または「このシャツの最安値は送料込みで125ドルです。あなたの下4桁1234のクレジットカードに請求しますか?」というメッセージを送信し得る。
いくつかの実装形態では、メッセージングアプリケーション103a/103bは、1つまたは複数の提案、例えば提案された応答を、例えばボタンのユーザインタフェース、または他のユーザインタフェース要素を介してユーザ125に提供することもできる。提案された応答は、例えば、ユーザが応答を入力する必要性を減らすか、または無くすことによって、より迅速な対話を可能にし得る。提案された応答は、例えば、クライアントデバイスがテキスト入力機能を欠いているとき(例えば、キーボードまたはマイクロフォンを含まないスマートウォッチ)に、ユーザがメッセージに迅速かつ容易に応答することを可能にし得る。提案された応答は、例えば、ユーザが提案された応答を選択したときに(例えば、タッチスクリーン上の対応するユーザインタフェース要素を選択することによって)、ユーザがメッセージに迅速に応答することも可能にし得る。提案された応答は、応答を生成するようにトレーニングされた予測モデル、例えば機械学習モデルを使用して生成されることが可能である。
例えば、メッセージングアプリケーション103a/103bは、メッセージングアプリケーション103とのユーザの対話を向上させることが可能な、例えばディープラーニングモデルなどの機械学習を実装することができる。機械学習モデルは、合成データ、例えば、ユーザ情報を使用せずにコンピュータによって自動的に生成されたデータを使用してトレーニングすることができる。いくつかの実装形態では、機械学習モデルは、例えば、トレーニングのためにユーザデータを利用する許可がユーザから明示的に得られているサンプルデータに基づいてトレーニングされ得る。例えば、サンプルデータは、受信されたメッセージと、受信されたメッセージに対して送信された応答とを含み得る。サンプルデータに基づいて、機械学習モデルは受信されたメッセージに対する応答を予測することができ、次にそれを提案された応答として提供することができる。例えば、受信されたメッセージおよびユーザのコンテキストに基づいてカスタマイズされた応答の選択を提供することにより、受信されたメッセージに対する応答を作成するユーザの負担を軽減することによって、ユーザの対話は強化される。例えば、ユーザが同意するとき、提案された応答は、ユーザの以前の活動、例えば、会話における以前のメッセージ、異なる会話におけるメッセージなどに基づいてカスタマイズされ得る。例えば、そのような活動は、ユーザに対する適切な提案応答、例えば、ユーザの対話スタイルに基づく遊び心のある応答、フォーマルな応答などを判定するために用いられ得る。別の例では、ユーザが1つまたは複数の優先言語および/またはロケールを指定すると、メッセージングアプリケーション103a/103bは、ユーザの優先言語で提案された応答を生成することができる。様々な例では、提案される応答は、テキスト応答、画像、マルチメディアなどであり得る。
いくつかの実装形態では、機械学習は、メッセージングサーバ101上、クライアントデバイス115上、またはメッセージングサーバ101およびクライアントデバイス115の両方の上で実装され得る。いくつかの実装形態では、単純な機械学習モデルがクライアントデバイス115上に実装され(例えば、クライアントデバイスのメモリ、ストレージ、および処理制約内でモデルの動作を可能にするため)、複雑な機械学習モデルがメッセージングサーバ101上に実装され得る。ユーザが機械学習技術の使用について同意しない場合、そのような技術は実装されない。いくつかの実装形態では、ユーザは、機械学習がクライアントデバイス115上にのみ実装されることに選択的に同意し得る。これらの実装形態では、機械学習はクライアントデバイス115上で実装されることができ、これにより、機械学習モデルに対する更新または機械学習モデルによって使用されるユーザ情報がローカルに格納または使用されて、メッセージングサーバ101、サーバ135、他のクライアントデバイス115などの他のデバイスと共有されない。
例えば、機械学習技術に基づく提案を受け取ることに同意するユーザに対し、提案は、メッセージングアプリケーション103によって提供され得る。例えば、提案は、コンテンツ(例えば、映画、本など)、スケジュール(例えば、ユーザのカレンダー上の利用可能時間)、イベント/開催地(例えば、レストラン、コンサートなど)等の提案を含み得る。いくつかの実装形態では、会話に参加しているユーザが会話データの使用に同意する場合、提案は、会話内容に基づいた、着信メッセージへの提案された応答を含み得る。例えば、会話の内容に基づく提案に同意した2人のユーザのうちの第1のユーザが「軽い食事はどうですか?イタリア料理はどうですか?」というメッセージを送信すると、例えば、「@アシスタントランチ、イタリア料理、2人用のテーブル(@assistant lunch, Italian, table for 2)」という応答が、第2のユーザに提案され得る。この例では、提案された応答は(記号@およびボットハンドルアシスタントによって識別された)ボットを含む。第2のユーザがこの応答を選択すると、アシスタントボットが会話に追加され、メッセージがボットに送信される。次に、ボットからの応答が会話に表示され、2人のユーザのいずれかがボットにさらにメッセージを送信することができる。この例では、アシスタントボットは会話のコンテンツへのアクセスを提供されず、提案された応答はメッセージングアプリケーション103によって生成される。
特定の実装形態では、提案された応答の内容は、ボットがすでに会話中に存在しているか、または会話に組み込むことができるかに基づいてカスタマイズされ得る。例えば、旅行ボットをメッセージングアプリに組み込むことができると判定された場合、フランスへの航空券の費用についての質問に対する提案された応答は、「旅行ボットに聞いてみましょう!」であり得る。
異なる実装形態では、提案、例えば提案された応答は、テキスト(例えば、「素晴らしい!」)、絵文字(例えば、笑顔、眠そうな顔など)、画像(例えば、ユーザの写真ライブラリからの写真)、テンプレートのフィールドにユーザデータが挿入されたテンプレートに基づいて生成されたテキスト(例えば、「彼女の番号は<電話番号>」、ここで、ユーザがユーザデータへのアクセスを提供するならば、フィールド<電話番号>は、ユーザデータに基づいて記入されている)、リンク(例えば、ユニフォームリソースロケータ)などのうちの一つまたは複数を含み得る。いくつかの実装形態では、提案された応答は、例えば、色、フォント、レイアウトなどを使用してフォーマット化および/またはスタイル化され得る。例えば、映画の推薦を含む提案された応答は、映画についての説明文、映画からの画像、およびチケットを購入するためのリンクを含むことができる。異なる実装形態では、提案された応答は、異なるタイプのユーザインタフェース要素として、例えば、テキストボックス、情報カードなどとして提示され得る。
異なる実装形態では、ユーザは、提案を受け取るかどうか、どのタイプの提案を受け取るか、提案の頻度などを制御することができる。例えば、ユーザは提案を受け取ることを完全に辞退するか、特定のタイプの提案を選択するか、または一日のうちの特定の時間帯にだけ提案を受け取ることが可能である。別の例では、ユーザはパーソナライズされた提案を受け取ることを選択し得る。この例では、ユーザデータの使用および機械学習技術の使用に関するユーザの選好に基づいて提案を提供するために機械学習が使用され得る。
図2は、いくつかの実装形態による、通信中の1つのユーザデバイスおよび1つのボットまたは支援エージェントの例示的な構成の図である。図2に示す構成例では、ユーザデバイス202(例えば、図1の115a〜115n)は、ボット204(例えば、105、107a、107b、109a、109b、111、および/または113)と1対1で会話している。ユーザデバイス202に関連するユーザ(例えば、ユーザ125a〜125n)は、ボット204を呼び出し、ボット204との通信セッションに参加することができる。かわりに、ボット204は、ユーザデバイス202に関連するユーザとの通信を自動的に開始してもよい。本実施例に記載の「ユーザ」は人間のユーザを指すことが理解されよう。しかし、当然のことながら、ユーザは、コンピュータまたは他の人間でないシステムを含むことができ、ユーザとボットとの間の通信は、人間のユーザとボットとの間、コンピュータなどの人間でないもの(例えば、コンピュータ上で実行されるソフトウェアアプリケーションなど)とボットとの間、および/または1つまたは複数のボットと1つまたは複数の他のボットとの間の通信を含み得る。
図3は、いくつかの実装形態による、通信中の2以上のユーザデバイスと単一のボットまたは支援エージェントとの例示的な構成の図である。図3に示す構成例では、ユーザデバイス302〜306(例えば、図1の115a〜115n)は、ボット308(例えば、105、107a、107b、109a、109b、111、および/または113)を含むグループメッセージング会話中であり得る。ユーザデバイス302〜306に関連するユーザの一または複数(例えば、ユーザ125a〜125nのうちの一または複数)は、ボット308と対話し、ボット308との通信セッションに参加することができる。ボットからの通信の一部または全部は、グループメッセージング会話に配置され得る。また、ボット308との間で提供されるある情報は、その情報に関連するユーザにのみ利用可能であり、例えば表示され得る。ボット308は、ユーザデバイス302〜306に関連するユーザのうちの一または複数との通信を自動的に開始することができる。
図4は、いくつかの実装形態による、通信中の2以上のユーザデバイスおよび2以上のボットまたは支援エージェントの例示的な構成の図である。図4に示す構成例では、ユーザデバイス402および任意選択で404(例えば図1の115a〜115n)は、複数のボット406〜408(例えば図1の105、107a、107b、109a、109b、111、および/または113)を含むグループメッセージング会話中であり得る。ユーザデバイス402〜404に関連するユーザのうちの一または複数(例えば、ユーザ125a〜125nのうちの一または複数)は、ボット406〜408のうちの一方または両方と対話し、ボット406〜408との通信セッションに参加することができる。ボットからの通信の一部または全部は、グループメッセージング会話に配置され得る。また、ボット406〜408との間で提供されるある情報は、その情報に関連するユーザにのみ利用可能であり、例えば表示され得る。ボット406〜408は、ユーザデバイス402〜404に関連するユーザのうちの一または複数との通信を自動的に開始することができる。
図5は、いくつかの実装形態によるボット許可を管理するための例示的な方法のフロー図である。処理は502から始まり、ユーザからの要求がボットで受信される。要求は、ボットが実行するように要求されたタスクを含み得る。いくつかの実装形態では、要求はボットに対するコマンドであり得る。例えば、予約ボットに対するコマンドを含む要求は、「@予約ボット近くのホテルを探して(@reservationbot find a hotel nearby)」であり、アシスタントボットに対するコマンドを含む要求は、「@アシスタントジムに私のフライトの詳細を送って(@assistant send my flight details to Jim)」などであり得る。この例では、ボットは、ボットハンドル、例えば、「@」記号の後に続くボットの名前(例えば、予約ボット(reservationbot)、アシスタント(assistant)など)によって識別される。タスクを実行するため、および/またはリクエストに対する応答を提供するため、ボットはユーザデータへのアクセスを必要とし得る。ユーザおよびボットは、1対1の通信配置であり得る(例えば、図2)。例えば、ユーザはカーサービスの迎車を要求することができ、自動車サービスボットは、どの車がユーザの送迎に利用可能であるかを判定するためにユーザの位置を知る必要がある可能性がある。別の例では、ユーザは近くのホテルでホテル予約をすることを望む可能性があり、ホテル予約ボットは、ユーザの位置を知る必要がある可能性がある。さらに別の例では、ボットは、ユーザ情報(例えば、写真、カレンダエントリ、フライトスケジュールなど)を共有することを含むユーザに対する提案された応答を提供することができ、提案ボットは、提案された応答のために有用であり得るデータにアクセスするためのユーザの許可を得て、実際の応答としてそのようなデータを提供する必要があり得る。要求は、ユーザからの要求であってもよいし、(例えば、提案応答ボットなどからの)自動的に生成された要求であってもよい。処理は504に続く。
504で、許可ユーザインタフェース要素が、要求に関連するユーザに表示される。許可要求ユーザインタフェース要素の一例を図6に示し、以下に説明する。許可ユーザインタフェース要素は、音声プロンプトとして、または他のユーザインタフェースおよび/または出力方法を使用して提示されてもよい。処理は506に続く。506において、ユーザがボットにユーザデータにアクセスまたは取得する許可を与えるかどうかの標示が受信される。標示は、ユーザが許可を与えるか否かを示すユーザインタフェース要素選択(例えば、タッチ、タップ、画面上のユーザインタフェースボタンの選択、タイプ入力、音声入力、ジェスチャ入力など)の形で受信され得る。例えば、ユーザは、図6の許可ユーザインタフェース要素に示されている「今は認めない」または「承認する」オプションのうちの1つを選択することができる。処理は508に続く。
508において、ボット許可システムは許可が与えられたか否かを判定する。許可が与えられたかどうかを判定することは、ステップ506で受信された標示を評価することによって達成できる。許可が与えられた場合、処理は510に続く。許可が与えられなかった場合、処理は514に続く。
510で、ボットと共有されているユーザデータの標示が任意選択で提供され得る。例えば、図7に示す標示「位置データを共有します」は、ユーザによって与えられた許可に従って、ユーザデータがボットと共有されたことの標示として提供され得る。処理は512に続く。512で、ボットは、与えられた許可に関連するタスクを完了するためにさらなる処理を実行することができる。例えば、カーサービスボットは、どの車がユーザにカーサービスを提供する場所にいるかを判定し続けることができる。別の例では、宿泊施設ボットは、共有されたユーザ位置を使用して、空がありレンタル可能な近くの宿泊施設を判定することができる。
514で、ボットは、タスクを辞退することの標示をユーザに対して表示させることができる。例えば、ボットは、「申し訳ありませんが、現在地を取得できませんでした−車をスケジュールできません」などのような標示を提供できる。標示は、グラフィカルユーザインタフェース上に表示されてもよく、および/または音声キューまたは他の出力標示の形で提供されてもよい。
図6は、いくつかの実装形態によるボットメッセージングを伴う例示的なユーザインタフェース600の図である。特に、ユーザインタフェース600は、ユーザからボットへのメッセージ(602)を含む。メッセージ602は、ユーザの個人情報、(例えば、近くのホテルを見つける)例えば位置情報の使用を必要とし得る要求(「私に近くのホテルを見つけて」)を含む。ユーザからの要求に応答して、ボットは、要求を完了するためにボットがユーザの位置データにアクセスする必要があることを示すメッセージ(604)をユーザに送信することができる。
ボットは、許可承認/拒否インタフェース要素606を表示させることができる。許可要素606は、どのタイプの許可が必要であるかの説明(608)、およびボットがユーザデータにアクセス(または受信)するための許可を拒否するための入力要素610および承認するための入力要素612を含むことができる。
図7は、図6から続く、ユーザがボットにユーザの位置データを使用する許可を与える、例示的なユーザインタフェース700の図である。ユーザインタフェース700は、図6に関連して上述した要素602〜604を含む。ユーザインタフェース700は、例えば入力要素612を選択することによってユーザが許可を与えることに応答して、ユーザデータがボットと共有されたという標示(702)も含む。ユーザインタフェース700は、ボットが要求に取り組んでいることを示すボットからのメッセージ(704)、およびボットからの1つまたは複数のオプションの提案(706および708)も含む。ユーザが提案要素(706、708)のうちの1つを選択すると、ボットは、ボットからの提案についての詳細、この例ではボットによって識別された提案された近くのホテルについての詳細を表示させることができる。
図8は、いくつかの実装形態による、グループメッセージングコンテキスト内で(例えば、「グループチャット」内で)ボット許可を管理するための例示的な方法のフロー図である。処理は802で始まり、ユーザからの要求がボットで受信される。要求されたタスクを実行するために、および/または要求に対する応答を提供するために、ボットはユーザデータへのアクセスを必要とし得る。ユーザおよびボットは、(例えば、図3または図4に示されるように)複数のユーザおよび/またはボットとのグループ通信構成にあってもよい。例えば、複数のユーザとの通信セッションにおいて、ユーザは、例えば複数のユーザのためにカーサービスの迎車を要求し得る。カーサービスボットは、どの車がユーザを迎えに行くのに利用可能であるかを判定するために、迎車に含まれるべき各ユーザの位置を知る必要がある可能性がある。別の例では、ユーザは、会話に参加しているユーザのグループのために近くのホテルでホテル予約をすることを望む可能性がある。この例では、ホテル予約ボットは、ユーザのグループに関する情報、例えば名前、支払い情報などを知る必要があり得る。要求はユーザからの要求である場合もあれば、(提案応答ボットなどから)自動的に生成された要求である場合もある。処理は804に続く。
804で、進捗標示が任意選択でボットによって表示され、要求を行っている個々のユーザまたはグループがグループ会話においてこれを見ることができる。例えば、カーサービスボットは、グループ会話で「手配中です」などのメッセージを表示し得る。処理は806に続く。
806で、許可ユーザインタフェース要素を要求に関連するユーザに表示させる。許可要求ユーザインタフェース要素の例は、図6に示されており、上で説明されている。許可ユーザインタフェース要素は、音声プロンプトとして、または他のユーザインタフェースおよび/または出力方法を使用して提示されてもよい。処理は808に続く。
808で、一または複数のユーザがボットに、それぞれのユーザデータにアクセスまたは取得する許可を与えるかどうかの標示が受信される。標示は、ユーザが許可を与えるか否かを示すユーザインタフェース要素選択(例えば、タッチ、タップ、画面上のユーザインタフェースボタンの選択、タイプ入力、音声入力、ジェスチャ入力など)の形で受け取ることができる。例えば、ユーザは、図6の許可ユーザインタフェース要素に示されている「今は認めない」または「承認する」のうちの1つを選択することができる。処理は810に続く。
810で、ボット許可システムは許可が与えられたか否かを判定する。許可が与えられたかどうかを判定することは、ステップ808で受信された標示を評価することによって達成できる。許可が与えられた場合、処理は812に続く。許可が与えられなかった場合、処理は816に続く。
812で、ボットはユーザと1対1のチャットを開始することができる。1対1のチャット、および1対1のチャットで交換されたメッセージは、グループメッセージング会話のユーザグループからは見えない。処理は814に続く。
814で、ボットは、1対1のユーザメッセージングの会話内で与えられた許可に関連するタスクを完了するためにさらなる処理を実行することができる。例えば、カーサービスボットは、どの車がユーザにカーサービスを提供する場所にいるかを判定し続けることができる。別の例では、宿泊施設ボットは、共有のユーザ位置を使用して、空がありレンタル可能な近くの宿泊施設を判定することができる。
816で、ボットは、グループメッセージング会話内でタスクを辞退することの「礼儀正しい」標示をユーザに表示させることができる。例えば、ボットは、「私はあなたの位置を知ることができませんでした−車をスケジュールすることができません」などのような標示を提供することができる。標示は、グラフィカルユーザインタフェース上に表示されるか、または音声キューまたは他の出力標示の形で提供され得る。辞退メッセージの礼儀正しい態様は、ユーザがユーザのデータを使用の許可をボットに与えなかったことを明示的には示さないメッセージを含むことができる。異なる実装形態では、標示は、例えば要求に基づいて、または他の要因に基づいて、異なるテキストコンテンツを含み得る。例えば、車を呼ぶという文脈でユーザが位置へのアクセスを禁止することに応答した標示は、「すみません、位置を取得できません」、「近くの車を見つけることができません」などのテキストコンテンツを含むことができる。いくつかの実装形態では、グループ会話の異なる参加者に異なる標示が送信されることがある。いくつかの実装形態では、標示は、異なるフォーマット、例えば、テキストボックス、グラフィカル表示、アニメーション表示などを使用することができる。いくつかの実装形態では、標示は、異なるスタイル、例えば、太字テキスト、イタリック体テキスト、フォント、色などを使用することができる。
図9は、本明細書に記載の1つまたは複数の機能を実装するために使用することができる例示的なコンピューティングデバイス900のブロック図である。一例では、コンピューティングデバイス900は、クライアント(またはユーザ)デバイス、例えば図1に示されるクライアントデバイス115a〜115nのうちのいずれかを実装するために使用され得る。コンピューティングデバイス900は、上述したような任意の適切なコンピュータシステム、サーバ、または他の電子もしくはハードウェアデバイスであり得る。
本明細書に記載の1つまたは複数の方法は、任意のタイプのコンピューティングデバイス上で実行することができるスタンドアロンプログラム、ウェブブラウザ上で実行されるプログラム、モバイルコンピューティングデバイス(携帯電話、スマートフォン、タブレットコンピュータ、ウェアラブルデバイス(腕時計、アームバンド、宝飾品、帽子、バーチャルリアリティゴーグルまたはメガネ、拡張現実ゴーグルまたはメガネなど)、ラップトップコンピュータなど)上で実行されるモバイルアプリケーション(「app」)において実行することができる。一例では、クライアント/サーバアーキテクチャを使用することができ、例えば、(ユーザデバイスとしての)モバイルコンピューティングデバイスは、ユーザ入力データをサーバデバイスに送信し、出力のための(例えば、表示のための)最終出力データをサーバから受信する。別の例では、すべての計算は、モバイルコンピューティングデバイス上のモバイルアプリ(および/または他のアプリ)内で実行することができる。別の例では、計算は、モバイルコンピューティングデバイスと1つまたは複数のサーバデバイスとの間で分割することができる。
いくつかの実装形態では、コンピューティングデバイス900は、プロセッサ902、メモリ904、および入力/出力(I/O)インタフェース906を含む。プロセッサ902は、プログラムコードを実行し、コンピューティングデバイス900の基本動作を制御するための1つまたは複数のプロセッサおよび/または処理回路であり得る。「プロセッサ」は、データ、信号または他の情報を処理する任意の適切なハードウェアおよび/またはソフトウェアシステム、機構または構成要素を含む。プロセッサは、汎用中央処理装置(CPU)、複数の処理装置、機能を達成するための専用回路、または他のシステムを有するシステムを含み得る。処理は特定の地理的位置に限定される必要はなく、または時間的な制限がある必要もない。例えば、プロセッサは、その機能を「リアルタイム」、「オフライン」、「バッチモード」などで実行することができる。処理の部分は、異なる時間に、異なる場所で、異なる(または同じ)処理システムにより実行することができる。コンピュータは、メモリと通信する任意のプロセッサであり得る。
メモリ904は、通常、プロセッサ902によるアクセスのためにコンピューティングデバイス900に設けられ、プロセッサにより実行される命令を格納するのに適したランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、電気的消去可能読み取り専用メモリ(EEPROM)、フラッシュメモリなどの任意の適切なプロセッサ読み取り可能記憶媒体とすることができ、プロセッサ902とは別個に配置され、および/またはそれと一体化され得る。メモリ904は、オペレーティングシステム908、およびメッセージングアプリケーション、ボットアプリケーションなどの1つまたは複数のアプリケーション910を含む、プロセッサ902によってコンピューティングデバイス900上で動作するソフトウェアを格納することができる。いくつかの実装形態では、アプリケーション910は、プロセッサ902が本明細書に記載の機能、例えば、図5および/または図8の方法のうちの1つまたは複数を実施することを可能とする命令を含み得る。例えば、アプリケーション910は、本明細書で説明されたようなボット許可を管理するためのプログラムを含むメッセージングおよび/またはボットアプリケーションを含むことができる。アプリケーションのうちの1つまたは複数は、例えば、選択可能なオプションまたはコントロール、および選択されたオプションに基づくデータを表示するためのユーザ入力に応答して表示されるユーザインタフェースを提供することができる。本明細書で開示された1つまたは複数の方法は、いくつかの環境およびプラットフォーム、例えば、任意のタイプのコンピューティングデバイス上で実行できるスタンドアロンコンピュータプログラム、ウェブページを有するウェブアプリケーション、モバイルコンピューティングデバイス上で実行されるモバイルアプリケーション(「app」)などとして、動作することができる。
あるいは、メモリ904内のソフトウェアのいずれも、他の任意の適切な記憶場所またはコンピュータ可読媒体に記憶することができる。さらに、メモリ904(および/または他の接続された単数または複数の記憶デバイス)は、メッセージ、許可設定、ユーザ設定および関連データ構造、パラメータ、オーディオデータ、ユーザ設定、および/または本明細書で説明された機能で使用される他の命令およびデータをデータベース912に格納することができる。メモリ904および他の任意の種類の記憶装置(磁気ディスク、光ディスク、磁気テープ、または他の有形の媒体)は、「記憶装置」または「記憶デバイス」と見なすことができる。
I/Oインタフェース906は、コンピューティングデバイス900を他のシステムおよびデバイスとインタフェースすることを可能にするための機能を提供することができる。インタフェースされたデバイスは、コンピューティングデバイス900の一部として含めることができ、または分離してコンピューティングデバイス900と通信することができる。例えば、ネットワーク通信デバイス、無線通信デバイス、記憶デバイス、および入力/出力デバイスは、I/Oインタフェース906を介して通信することができる。いくつかの実装形態では、I/Oインタフェース906は、入力デバイス(キーボード、ポインティングデバイス、タッチスクリーン、マイクロフォン、カメラ、スキャナ、センサなど)および/または出力デバイス(表示デバイス、スピーカーデバイス、プリンター、モーターなど)のようなインタフェースデバイスに接続することができる。
I/Oインタフェース906に接続することができるインタフェースデバイスのいくつかの例は、コンテンツ、例えば、本明細書で説明されるような出力アプリケーションの画像、ビデオ、および/またはユーザインタフェースを表示するために使用できる表示デバイス914を含み得る。表示デバイス914は、ローカル接続(例えば、表示バス)および/またはネットワーク接続を介してコンピューティングデバイス900に接続されることができ、任意の適切な表示デバイスとすることができる。表示デバイス914は、液晶ディスプレイ(LCD)、発光ダイオード(LED)、またはプラズマディスプレイスクリーン、陰極線管(CRT)、テレビ、モニター、タッチスクリーン、3Dディスプレイスクリーン、または他の視覚的表示デバイスのような任意の適切な表示デバイスを含むことができる。例えば、表示デバイス914は、モバイルデバイスに提供されるフラットディスプレイスクリーン、ゴーグルデバイスに提供される複数の表示スクリーン、またはコンピュータデバイス用のモニタスクリーンであり得る。
I/Oインタフェース906は、他の入力および出力デバイスとインタフェースすることができる。いくつかの例は、画像フレームをキャプチャすることができる1つまたは複数のカメラを含む。方位センサ、例えば、ジャイロスコープおよび/または加速度計は、デバイスの方位(いくつかの実装形態では視野の方位に対応することができる)および/またはカメラの方位を示すセンサデータを提供することができる。いくつかの実装形態は、音声(例えば、音声コマンドなど)をキャプチャするためのマイクロフォン、音声を出力するためのオーディオスピーカデバイス、または他の入出力デバイスを提供することができる。
説明を簡単にするために、図9は、プロセッサ902、メモリ904、I/Oインタフェース906、オペレーティングシステム908、およびボット許可アプリケーション910のためにそれぞれ1つのブロックを示している。これらのブロックは、1つまたは複数のプロセッサまたは処理回路、オペレーティングシステム、メモリ、I/Oインタフェース、アプリケーション、および/またはソフトウェアモジュールを表すことができる。他の実装形態では、コンピューティングデバイス900は、示された構成要素の全てを有しない場合があり、かつ/または本明細書に示されたものの代わりにまたはそれに加えて他のタイプの要素を含む他の要素を有し得る。ユーザデバイス(例えば、115a〜115n)は、本明細書のいくつかの実装形態で説明されるように、ブロックおよび動作を実行するものとして説明されているが、ユーザデバイス(例えば115a〜115n)または同様のデバイスの任意の適切なコンポーネントまたはコンポーネントの組合せ、またはそのようなシステムに関連する任意の適切な1つまたは複数のプロセッサが、説明されているブロックおよび動作を実行し得る。
本明細書に記載の方法は、コンピュータプログラム命令またはコードによって実装することができ、それらはコンピュータ上で実行することができる。例えば、コードは、1つまたは複数のデジタルプロセッサ(例えば、マイクロプロセッサまたは他の処理回路)によって実装することができ、半導体または固体メモリ、磁気テープ、リムーバブルコンピュータディスケット、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、フラッシュメモリ、リジッドメモリを含む、磁気、光学、電磁気、または半導体の記憶媒体のような、非一時的コンピュータ可読媒体(例えば、記憶媒体)を含むコンピュータプログラム製品に格納することができる。プログラム命令は、例えば、サーバ(例えば、分散システムおよび/またはクラウドコンピューティングシステム)から配信されるサービスとしてのソフトウェア(SaaS)の形で、電子信号に含まれ、電子信号として提供されることもできる。あるいは、1つまたは複数の方法をハードウェア(論理ゲートなど)で、またはハードウェアとソフトウェアの組合せで実装することができる。ハードウェアの例は、プログラマブルプロセッサ(例えば、フィールドプログラマブルゲートアレイ(FPGA)、コンプレックスプログラマブルロジックデバイス(CPLD)など)、汎用プロセッサ、グラフィックプロセッサ、特定用途向け集積回路(ASIC)などであり得る。1つまたは複数の方法は、システム上で実行されているアプリケーションの一部またはコンポーネントとして、あるいは他のアプリケーションおよびオペレーティングシステムと共に実行されているアプリケーションまたはソフトウェアとして実行することができる。
説明は、その特定の実装形態に関して記載されているが、これらの特定の実装形態は単なる例示であり、限定的なものではない。例に示されている概念は、他の例および実装にも適用することができる。
本明細書で説明する特定の実装形態が、ユーザに関する個人情報(例えば、ユーザの電話番号または部分的な電話番号、ユーザデータ、ユーザのソーシャルネットワークに関する情報、ユーザの位置および時間、ユーザのバイオメトリック情報、ユーザの活動およびデモグラフィック情報)を収集または使用し得る状況では、個人情報が収集されるかどうか、個人情報が保存されるかどうか、個人情報が使用されるかどうか、およびどのようにユーザに関する情報が収集され、保存され、使用されるかを制御する一または複数の機会がユーザに提供される。すなわち、本明細書で論じられるシステムおよび方法は、具体的にそのようにすることについて関連するユーザから明示的な許可を受けた場合に、ユーザの個人情報を収集し、保存し、かつ/または使用する。さらに、特定のデータは、個人を特定できる情報が削除されるように、保存または使用される前に1つまたは複数の方法で処理され得る。一例として、ユーザの識別情報は、個人を識別可能な情報が判定され得ないように取り扱われ得る。別の例として、ユーザの地理的位置は、ユーザの特定の位置が判定されることができないように、より大きな領域に一般化され得る。
本開示に記載されている機能ブロック、動作、特徴、方法、デバイス、およびシステムは、当業者に知られているように、システム、デバイス、および機能ブロックの異なる組み合わせに統合または分割することができることに留意されたい。特定の実装形態のルーチンを実装するために、任意の適切なプログラミング言語およびプログラミング技術が使用され得る。手続き型またはオブジェクト指向などの異なるプログラミング技術が使用され得る。ルーチンは、単一の処理デバイスまたは複数のプロセッサ上で実行することができる。ステップ、動作、または計算は特定の順序で提示され得るが、異なる特定の実装形態においてはその順序は変更されてもよい。いくつかの実装形態では、本明細書において連続的なものとして示されている複数のステップまたは動作が同時に実行され得る。さらなる実装形態が以下に開示される。
[実装形態1]
コンピュータにより実行される方法であって、
第1のユーザに関連する第1のコンピューティングデバイス上にメッセージングアプリケーションを提供して、前記第1のユーザと少なくとも1つの他のユーザとの間の通信を可能にすること、
前記メッセージングアプリケーションにおいてユーザ要求を検出すること、
前記ユーザ要求に応答するアクションが、前記第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定すること、
前記第1のユーザに関連するデータへのアクセスを前記第1のユーザが承認または禁止することを可能にする許可インタフェースを前記第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせること、
前記第1のユーザに関連するデータへのアクセスの承認を示すユーザ入力を前記第1のユーザから受信すると、前記第1のユーザに関連するデータにアクセスして、前記ユーザ要求に応答するアクションを実行すること
を含む方法。
[実装形態2]
前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、タスクが実行されないという標示を前記メッセージングアプリケーションに提供することをさらに含む、実装形態1に記載のコンピュータにより実行される方法。
[実装形態3]
前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは支援エージェントである、実装形態1または2に記載のコンピュータにより実行される方法。
[実装形態4]
前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは、前記第1のユーザとは異なる、第2のコンピューティングデバイスに関連する第2の人間のユーザを含み、前記許可インタフェースは、前記第1のユーザに関連する前記第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングされ、前記許可インタフェースは、前記第2の人間のユーザに関連する前記第2のコンピューティングデバイス上に表示されない、実装形態1、2、または3に記載のコンピュータにより実行される方法。
[実装形態5]
前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、
前記第1のユーザに関連する前記第1のコンピューティングデバイス上にレンダリングするための第1の標示を提供すること、
前記少なくとも1つの他のユーザに関連する第2のコンピューティングデバイス上にレンダリングするための第2の標示を提供すること
をさらに含み、前記第1の標示および前記第2の標示は、前記ユーザ要求に応えることの失敗を示すものであり、前記第1の標示および前記第2の標示は異なっている、実装形態1乃至4のいずれか一つに記載のコンピュータにより実行される方法。
[実装形態6]
前記第1の標示および前記第2の標示は、異なるテキストコンテンツ、異なるスタイル、および異なるフォーマットのうちの1つまたは複数を有する、実装形態5に記載のコンピュータにより実行される方法。
[実装形態7]
前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは、前記第1のユーザとは異なる第2の人間のユーザと、支援エージェントとを含み、前記ユーザ要求は、前記第1のユーザに関連する前記第1のコンピューティングデバイスから受信され、前記方法は、前記ユーザ要求に応答して、前記メッセージングアプリケーションにおいて別個の会話を開始することをさらに含み、前記別個の会話は、前記第1のユーザと前記支援エージェントとを含み、前記第2の人間のユーザを含まない、実装形態1乃至6のいずれか一つに記載のコンピュータにより実行される方法。
[実装形態8]
前記ユーザ要求を検出することは、前記第1のユーザおよび前記少なくとも1つの他のユーザのうちの一または複数から前記メッセージングアプリケーションにおいて受信された1つまたは複数のメッセージを分析することを含む、実装形態1乃至7のいずれか一つに記載のコンピュータにより実行される方法。
[実装形態9]
前記1つまたは複数のメッセージは、テキストメッセージ、マルチメディアメッセージ、および支援エージェントへのコマンドのうちの1つまたは複数を含む、実装形態8に記載のコンピュータにより実行される方法。
[実装形態10]
前記ユーザ要求に応答するアクションを実行することは、前記第1のメッセージングアプリケーションへ1つまたは複数の提案を提供することを含む、実装形態1乃至9のいずれか一つに記載のコンピュータにより実行される方法。
[実装形態11]
前記1つまたは複数の提案を前記メッセージングアプリケーションにおいてレンダリングさせることをさらに含む、実装形態10に記載のコンピュータにより実行される方法。
[実装形態12]
前記1つまたは複数の提案は、前記第1のユーザによって選択されたときに前記提案についての詳細を表示させる提案要素としてレンダリングされる、実装形態11に記載のコンピュータにより実行される方法。

Claims (20)

  1. コンピュータにより実装される方法であって、
    第1のユーザに関連する第1のコンピューティングデバイス上にメッセージングアプリケーションを提供して、前記第1のユーザと少なくとも1つの他のユーザとの間の通信を可能にすること、
    前記メッセージングアプリケーションにおいてユーザ要求を検出すること、
    前記ユーザ要求に応答するアクションが、前記第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定すること、
    前記第1のユーザに関連するデータへのアクセスを前記第1のユーザが承認または禁止することを可能にする許可インタフェースを前記第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせること、
    前記第1のユーザに関連するデータへのアクセスの承認を示すユーザ入力を前記第1のユーザから受信すると、前記第1のユーザに関連するデータにアクセスして、前記ユーザ要求に応答するアクションを実行すること
    を含む方法。
  2. 前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、前記アクションが実行されないという標示を前記メッセージングアプリケーションに提供することをさらに含む、請求項1に記載のコンピュータにより実装される方法。
  3. 前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは支援エージェントである、請求項1に記載のコンピュータにより実装される方法。
  4. 前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは、前記第1のユーザとは異なる、第2のコンピューティングデバイスに関連する第2の人間のユーザを含み、前記許可インタフェースを前記第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせることは、前記許可インタフェースを前記第1のコンピューティングデバイス上にローカルに表示することを含む、請求項1に記載のコンピュータにより実装される方法。
  5. 前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、前記第1のユーザに関連する前記第1のコンピューティングデバイス上にレンダリングするための第1の標示を提供することをさらに含み、前記第1の標示は、前記第1のユーザが前記第1のユーザに関連するデータへのアクセスを禁止していること、および前記アクションを実行することができないことの標示を含む、請求項4に記載のコンピュータにより実装される方法。
  6. 前記少なくとも1つの他のユーザに関連する第2のコンピューティングデバイス上にレンダリングするための第2の標示を提供することをさらに含み、前記第1の標示および前記第2の標示は、前記ユーザ要求に応えることの失敗を示すものであり、前記第1の標示および前記第2の標示は異なっている、請求項5に記載のコンピュータにより実装される方法。
  7. 前記第1の標示および前記第2の標示は、異なるテキストコンテンツ、異なるスタイル、および異なるフォーマットのうちの1つまたは複数を有する、請求項6に記載のコンピュータにより実装される方法。
  8. 前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは、前記第1のユーザとは異なる第2の人間のユーザと、支援エージェントとを含み、前記ユーザ要求は、前記第1のユーザに関連する前記第1のコンピューティングデバイス上で受信され、前記方法は、前記ユーザ要求に応答して、前記メッセージングアプリケーションにおいて別個の会話を開始することをさらに含み、前記別個の会話は、前記第1のユーザと前記支援エージェントとを含み、前記第2の人間のユーザを除外している、請求項1に記載のコンピュータにより実装される方法。
  9. 前記ユーザ要求を検出することは、前記第1のユーザおよび前記少なくとも1つの他のユーザのうちの一または複数から前記メッセージングアプリケーションにおいて受信された1つまたは複数のメッセージを分析することを含む、請求項1に記載のコンピュータにより実装される方法。
  10. 前記1つまたは複数のメッセージは、テキストメッセージ、マルチメディアメッセージ、および支援エージェントへのコマンドのうちの1つまたは複数を含む、請求項9に記載のコンピュータにより実装される方法。
  11. 前記ユーザ要求に応答するアクションを実行することは、第1のメッセージングアプリケーションにおいて1つまたは複数のユーザ選択可能な提案を提供することを含み、前記1つまたは複数のユーザ選択可能な提案から特定の提案をユーザが選択すると、対応するメッセージが第1のデバイスから前記少なくとも1つの他のユーザのデバイスに送信される、請求項1に記載のコンピュータにより実装される方法。
  12. 前記1つまたは複数の提案を前記メッセージングアプリケーションにおいてレンダリングさせることをさらに含む、請求項11に記載のコンピュータにより実装される方法。
  13. 前記1つまたは複数の提案は、前記第1のユーザによって選択されたときに前記提案についての詳細を表示させる提案要素としてレンダリングされる、請求項12に記載のコンピュータにより実装される方法。
  14. コンピュータにより実装される方法であって、
    第1のコンピューティングデバイス上で実行されているメッセージングアプリケーションにおいて、第1のユーザからのユーザ要求を検出すること、
    前記ユーザ要求に応答するアクションが、前記第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定すること、
    前記第1のユーザに関連するデータへのアクセスを前記第1のユーザが承認または禁止することを可能にする許可インタフェースを前記第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせること、
    前記許可インタフェースにおいて前記第1のユーザからの承認を受信すると、前記第1のユーザに関連するデータにアクセスし、前記ユーザ要求に応答するアクションを実行すること
    を含む方法。
  15. 前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、前記アクションが実行されないという標示を前記メッセージングアプリケーションに提供することをさらに含む、請求項14に記載のコンピュータにより実装される方法。
  16. 前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、
    前記メッセージングアプリケーションにおいてレンダリングするための第1の標示を提供すること、
    少なくとも1つの他のユーザに関連する第2のメッセージングアプリケーションにおいてレンダリングするための第2の標示を提供すること
    をさらに含み、前記第1の標示および前記第2の標示は、前記ユーザ要求に応えることの失敗を示すものであり、前記第1の標示および前記第2の標示は異なっている、請求項14に記載のコンピュータにより実装される方法。
  17. 1つまたは複数のプロセッサによって実行されると、前記1つまたは複数のプロセッサに動作を実施させる命令を記憶した非一時的コンピュータ可読媒体に結合された1つまたは複数のプロセッサを備えるシステムであって、前記動作は、
    第1のユーザに関連する第1のコンピューティングデバイス上にメッセージングアプリケーションを提供して、前記第1のユーザと少なくとも1つの他のユーザとの間の通信を可能にすること、
    前記メッセージングアプリケーションにおいてユーザ要求を検出すること、
    前記ユーザ要求に応答するアクションが、前記第1のユーザに関連するデータへのアクセスを必要とすることをプログラム的に判定すること、
    前記第1のユーザに関連するデータへのアクセスを前記第1のユーザが承認または禁止することを可能にする許可インタフェースを前記第1のコンピューティングデバイス上のメッセージングアプリケーションにおいてレンダリングさせること、
    前記第1のユーザに関連するデータへのアクセスの承認を示すユーザ入力を前記第1のユーザから受信すると、前記第1のユーザに関連するデータにアクセスして、前記ユーザ要求に応答するアクションを実行すること
    を含む、システム。
  18. 前記動作は、前記第1のユーザに関連するデータへのアクセスを禁止するユーザ入力を前記第1のユーザから受信すると、前記アクションが実行されないという標示を前記メッセージングアプリケーションに提供することをさらに含む、請求項17に記載のシステム。
  19. 前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは支援エージェントである、請求項17に記載のシステム。
  20. 前記第1のユーザは人間のユーザであり、前記少なくとも1つの他のユーザは、前記第1のユーザとは異なる第2の人間のユーザと、支援エージェントとを含み、前記ユーザ要求は、前記第1のユーザに関連する前記第1のコンピューティングデバイス上で受信され、前記動作は、前記ユーザ要求に応答して、前記メッセージングアプリケーションにおいて別個の会話を開始することをさらに含み、前記別個の会話は、前記第1のユーザと前記支援エージェントとを含み、前記第2の人間のユーザを除外している、請求項17に記載のシステム。
JP2019505058A 2016-09-20 2017-09-19 データへのアクセス許可を要求するボット Active JP6659910B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662397047P 2016-09-20 2016-09-20
US62/397,047 2016-09-20
PCT/US2017/052333 WO2018057536A1 (en) 2016-09-20 2017-09-19 Bot requesting permission for accessing data

Publications (2)

Publication Number Publication Date
JP2019530050A JP2019530050A (ja) 2019-10-17
JP6659910B2 true JP6659910B2 (ja) 2020-03-04

Family

ID=60022179

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019505058A Active JP6659910B2 (ja) 2016-09-20 2017-09-19 データへのアクセス許可を要求するボット

Country Status (5)

Country Link
US (4) US10511450B2 (ja)
JP (1) JP6659910B2 (ja)
CN (1) CN109716727B (ja)
DE (1) DE112017003594T5 (ja)
WO (1) WO2018057536A1 (ja)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10530723B2 (en) 2015-12-21 2020-01-07 Google Llc Automatic suggestions for message exchange threads
KR20180070659A (ko) 2015-12-21 2018-06-26 구글 엘엘씨 메시징 애플리케이션들을 위한 자동적인 제안들 및 다른 콘텐츠
US10015124B2 (en) * 2016-09-20 2018-07-03 Google Llc Automatic response suggestions based on images received in messaging applications
US10547574B2 (en) 2016-09-20 2020-01-28 Google Llc Suggested responses based on message stickers
US10511450B2 (en) 2016-09-20 2019-12-17 Google Llc Bot permissions
US10361975B2 (en) * 2016-10-10 2019-07-23 Microsoft Technology Licensing, Llc Messaging bot selection in multi-bot chat sessions
US10416846B2 (en) 2016-11-12 2019-09-17 Google Llc Determining graphical element(s) for inclusion in an electronic communication
US11140101B2 (en) * 2017-03-27 2021-10-05 Orion Labs, Inc. Bot group messaging method
US10333868B2 (en) * 2017-04-14 2019-06-25 Facebook, Inc. Techniques to automate bot creation for web pages
WO2018212822A1 (en) 2017-05-16 2018-11-22 Google Inc. Suggested actions for images
US10348658B2 (en) 2017-06-15 2019-07-09 Google Llc Suggested items for use with embedded applications in chat conversations
US10404636B2 (en) 2017-06-15 2019-09-03 Google Llc Embedded programs and interfaces for chat conversations
US10659409B1 (en) * 2017-09-29 2020-05-19 Snap Inc. Media access system
US10891526B2 (en) 2017-12-22 2021-01-12 Google Llc Functional image archiving
US20210012778A1 (en) * 2018-03-20 2021-01-14 Sony Corporation Information processing device and information processing system
CN110308877A (zh) * 2018-03-20 2019-10-08 富士施乐株式会社 消息提供装置和非暂时性计算机可读介质
CN110377240A (zh) * 2018-04-13 2019-10-25 富士施乐株式会社 消息提供装置、消息提供方法以及非暂时计算机可读介质
US10419934B1 (en) * 2018-05-09 2019-09-17 Facebook, Inc. Systems and methods for authenticating users based on enriched data
USD950587S1 (en) 2018-08-31 2022-05-03 Zoox, Inc. Display screen or portion thereof having a graphical user interface
JP7167592B2 (ja) * 2018-09-25 2022-11-09 富士フイルムビジネスイノベーション株式会社 制御装置、及び制御プログラム
JP6938597B2 (ja) * 2018-11-22 2021-09-22 株式会社カカオ 日程サービスを提供するインスタントメッセージングサービス方法及び装置
US10970911B2 (en) * 2019-02-21 2021-04-06 Facebook Technologies, Llc Graphics processing chip with machine-learning based shader
US11596867B2 (en) 2019-03-19 2023-03-07 modl.ai ApS AI-based content generation for gaming applications
US11331581B2 (en) 2019-03-19 2022-05-17 modl.ai ApS Experience based game development and methods for use therewith
US10918948B2 (en) * 2019-03-19 2021-02-16 modl.ai ApS Game bot generation for gaming applications
JP7287040B2 (ja) * 2019-03-22 2023-06-06 富士フイルムビジネスイノベーション株式会社 メッセージ提供装置、プログラム、及び表示制御方法
JP7255474B2 (ja) * 2019-12-17 2023-04-11 トヨタ自動車株式会社 制御装置、システム、プログラム、端末装置、及び制御方法
US10841251B1 (en) * 2020-02-11 2020-11-17 Moveworks, Inc. Multi-domain chatbot
US11888790B2 (en) 2020-06-26 2024-01-30 Cisco Technology, Inc. Dynamic skill handling mechanism for bot participation in secure multi-user collaboration workspaces
CN111680328B (zh) * 2020-07-09 2023-06-23 腾讯科技(深圳)有限公司 一种数据处理方法、装置、服务器及计算机可读存储介质
US11436793B1 (en) 2021-02-12 2022-09-06 Facebook Technologies, Llc Systems and methods for graphics rendering based on machine learning
CN115570558B (zh) * 2022-10-28 2023-07-11 武汉恒新动力科技有限公司 面向被操控对象集群的体感协同遥操作系统及方法

Family Cites Families (315)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5963649A (en) * 1995-12-19 1999-10-05 Nec Corporation Message authorization system for authorizing message for electronic document
US6092102A (en) 1997-10-24 2000-07-18 University Of Pittsburgh Of The Commonwealth System Of Higher Education System and method for notifying users about information or events of an enterprise
US7966078B2 (en) 1999-02-01 2011-06-21 Steven Hoffberg Network media appliance system and method
JP2000298676A (ja) 1999-04-14 2000-10-24 Bandai Co Ltd 情報提供装置
JP4485035B2 (ja) * 2000-08-29 2010-06-16 富士通株式会社 仮想空間のセキュリティ方法
WO2002027712A1 (en) * 2000-09-29 2002-04-04 Professorq, Inc. Natural-language voice-activated personal assistant
JP2002132804A (ja) 2000-10-24 2002-05-10 Sanyo Electric Co Ltd ユーザ支援システム
US20020103837A1 (en) 2001-01-31 2002-08-01 International Business Machines Corporation Method for handling requests for information in a natural language understanding system
WO2003024094A1 (fr) 2001-09-10 2003-03-20 Nikon Corporation Systeme d'appareil photo numerique, appareil de stockage d'images et appareil photo numerique
US7636750B2 (en) 2001-10-24 2009-12-22 Sprint Spectrum L.P. Method and system for controlling scope of user participation in a communication session
US7283992B2 (en) 2001-11-30 2007-10-16 Microsoft Corporation Media agent to suggest contextually related media content
US20040001099A1 (en) 2002-06-27 2004-01-01 Microsoft Corporation Method and system for associating actions with semantic labels in electronic documents
US7234117B2 (en) 2002-08-28 2007-06-19 Microsoft Corporation System and method for shared integrated online social interaction
US20110107223A1 (en) 2003-01-06 2011-05-05 Eric Tilton User Interface For Presenting Presentations
US7574661B2 (en) 2003-02-25 2009-08-11 Panasonic Corporation Application program prediction method and mobile terminal
WO2004104758A2 (en) 2003-05-16 2004-12-02 Picasa, Inc. Networked chat and media sharing systems and methods
US8645697B1 (en) * 2003-08-08 2014-02-04 Radix Holdings, Llc Message authorization
US7363029B2 (en) * 2003-09-12 2008-04-22 Core Mobility, Inc. Unified interface for voice, text or picture message authoring
US20120322428A1 (en) 2004-09-30 2012-12-20 Motedata Inc. Network of tags
US10635723B2 (en) 2004-02-15 2020-04-28 Google Llc Search engines and systems with handheld document data capture devices
US7363295B2 (en) 2004-04-19 2008-04-22 Yahoo! Inc. Techniques for inline searching in an instant messenger environment
WO2005125070A2 (en) 2004-06-14 2005-12-29 Semandex Networks, Inc. System and method for providing content-based instant messaging
US7464110B2 (en) 2004-06-30 2008-12-09 Nokia Corporation Automated grouping of image and other user data
US7734927B2 (en) * 2004-07-21 2010-06-08 International Business Machines Corporation Real-time voting based authorization in an autonomic workflow process using an electronic messaging system
US7917582B2 (en) 2004-07-27 2011-03-29 Siemens Enterprise Communications, Inc. Method and apparatus for autocorrelation of instant messages
US20060150119A1 (en) 2004-12-31 2006-07-06 France Telecom Method for interacting with automated information agents using conversational queries
US7720436B2 (en) 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US7197324B2 (en) * 2005-01-31 2007-03-27 Sweeney Robert J Permission based text messaging
US7603413B1 (en) 2005-04-07 2009-10-13 Aol Llc Using automated agents to facilitate chat communications
US7860319B2 (en) 2005-05-11 2010-12-28 Hewlett-Packard Development Company, L.P. Image management
US7512580B2 (en) 2005-08-04 2009-03-31 Sap Ag Confidence indicators for automated suggestions
CN1988461A (zh) 2005-12-23 2007-06-27 腾讯科技(深圳)有限公司 一种即时通信工具的聊天场景音乐播放方法和系统
US7747785B2 (en) 2006-04-14 2010-06-29 Microsoft Corporation Instant messaging plug-ins
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7752554B2 (en) * 2006-10-05 2010-07-06 Microsoft Corporation Bot identification and control
WO2008045811A2 (en) 2006-10-10 2008-04-17 Orgoo, Inc. Integrated electronic mail and instant messaging system
US8145708B2 (en) * 2006-11-10 2012-03-27 Microsoft Corporation On-line virtual robot (bot) security agent
US20080120371A1 (en) 2006-11-16 2008-05-22 Rajat Gopal Relational framework for non-real-time audio/video collaboration
JP2008191748A (ja) 2007-02-01 2008-08-21 Oki Electric Ind Co Ltd ユーザ間コミュニケーション方法、ユーザ間コミュニケーションプログラム、ユーザ間コミュニケーション装置
WO2008153098A1 (ja) 2007-06-14 2008-12-18 Sharp Kabushiki Kaisha 画像データ受信装置、操作装置、操作システム、画像データのデータ構造、制御方法、操作方法、プログラム、および、記録媒体
JP2009009334A (ja) 2007-06-27 2009-01-15 Ricoh Co Ltd 画像処理装置、画像処理方法及び画像処理プログラム
TW200910845A (en) * 2007-08-17 2009-03-01 Mobot Technology Inc Location based anonymous instant message exchange method and system
CN101159576B (zh) 2007-08-30 2013-07-17 腾讯科技(深圳)有限公司 聊天方法、聊天室客户端、系统管理后台及服务器
US20110035662A1 (en) 2009-02-18 2011-02-10 King Martin T Interacting with rendered documents using a multi-function mobile device, such as a mobile phone
US20110145068A1 (en) 2007-09-17 2011-06-16 King Martin T Associating rendered advertisements with digital content
US8082151B2 (en) 2007-09-18 2011-12-20 At&T Intellectual Property I, Lp System and method of generating responses to text-based messages
US20090119584A1 (en) 2007-11-02 2009-05-07 Steve Herbst Software Tool for Creating Outlines and Mind Maps that Generates Subtopics Automatically
CA2708757A1 (en) 2007-12-17 2009-06-25 Play Megaphone System and method for managing interaction between a user and an interactive system
WO2009122324A1 (en) 2008-03-31 2009-10-08 Koninklijke Philips Electronics N.V. Method for modifying a representation based upon a user instruction
US20090282114A1 (en) 2008-05-08 2009-11-12 Junlan Feng System and method for generating suggested responses to an email
US20090327436A1 (en) * 2008-06-30 2009-12-31 Chen Shihn-Cheng Instant messaging network control module
US8166019B1 (en) 2008-07-21 2012-04-24 Sprint Communications Company L.P. Providing suggested actions in response to textual communications
JP5273712B2 (ja) 2008-08-11 2013-08-28 シャープ株式会社 情報処理装置、情報処理方法および情報処理プログラム
US8805110B2 (en) 2008-08-19 2014-08-12 Digimarc Corporation Methods and systems for content processing
US8929868B2 (en) 2008-08-25 2015-01-06 France Telecom System and method to identify and transfer to a wireless device actionable items based on user selected content
US8391618B1 (en) 2008-09-19 2013-03-05 Adobe Systems Incorporated Semantic image classification and search
US8055710B2 (en) 2008-09-24 2011-11-08 International Business Machines Corporation System, method and computer program product for intelligent multi-person chat history injection
USD599363S1 (en) 2008-11-24 2009-09-01 Microsoft Corporation Transitional cursor user interface for a portion of a display screen
USD611053S1 (en) 2008-11-24 2010-03-02 Microsoft Corporation Transitional user interface for a portion of a display screen
US20130036162A1 (en) * 2009-02-10 2013-02-07 Mikekoenigs.Com, Inc. Automated Communication Techniques
US20100228590A1 (en) 2009-03-03 2010-09-09 International Business Machines Corporation Context-aware electronic social networking
JP4739438B2 (ja) 2009-03-26 2011-08-03 株式会社エヌ・ティ・ティ・ドコモ 通信端末及びメール返信方法
US9195898B2 (en) 2009-04-14 2015-11-24 Qualcomm Incorporated Systems and methods for image recognition using mobile devices
US20120131520A1 (en) 2009-05-14 2012-05-24 Tang ding-yuan Gesture-based Text Identification and Selection in Images
US9782527B2 (en) 2009-05-27 2017-10-10 Tc1 Llc Monitoring of redundant conductors
US9043407B1 (en) * 2009-06-12 2015-05-26 Avaya Inc. Interactive user interface to communication-enabled business process platforms method and apparatus
USD651609S1 (en) 2009-06-26 2012-01-03 Microsoft Corporation Display screen with an animated image
EP2449481A4 (en) 2009-07-02 2013-12-25 Livechime Inc SYSTEM AND METHOD FOR EXTENDING DIGITAL CONTENT
US8572084B2 (en) 2009-07-28 2013-10-29 Fti Consulting, Inc. System and method for displaying relationships between electronically stored information to provide classification suggestions via nearest neighbor
US9128610B2 (en) 2009-09-30 2015-09-08 At&T Mobility Ii Llc Virtual predictive keypad
US8831279B2 (en) 2011-03-04 2014-09-09 Digimarc Corporation Smartphone-based methods and systems
US8121618B2 (en) 2009-10-28 2012-02-21 Digimarc Corporation Intuitive computing methods and systems
US8400548B2 (en) 2010-01-05 2013-03-19 Apple Inc. Synchronized, interactive augmented reality displays for multifunction devices
USD624927S1 (en) 2010-01-19 2010-10-05 Microsoft Corporation User interface for a portion of a display screen
US8650210B1 (en) 2010-02-09 2014-02-11 Google Inc. Identifying non-search actions based on a search query
US8782556B2 (en) 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
US8655965B2 (en) 2010-03-05 2014-02-18 Qualcomm Incorporated Automated messaging response in wireless communication systems
US8266109B1 (en) 2010-03-09 2012-09-11 Symantec Corporation Performance of scanning containers for archiving
JP2011211696A (ja) 2010-03-10 2011-10-20 Nikon Corp 画像データ処理システム、画像データ処理プログラム、及び画像データ処理装置
JP5733907B2 (ja) 2010-04-07 2015-06-10 キヤノン株式会社 画像処理装置、画像処理方法、コンピュータプログラム
US9929982B2 (en) 2010-04-08 2018-03-27 Microsoft Technology Licensing, Llc Designating automated agents as friends in a social network service
US20110252207A1 (en) 2010-04-08 2011-10-13 Oracle International Corporation Dynamic content archiving
US20170098122A1 (en) 2010-06-07 2017-04-06 Affectiva, Inc. Analysis of image content with associated manipulation of expression presentation
USD648343S1 (en) 2010-06-24 2011-11-08 Microsoft Corporation Display screen with user interface
USD648735S1 (en) 2010-06-25 2011-11-15 Microsoft Corporation Display screen with animated user interface
US20120030289A1 (en) 2010-07-30 2012-02-02 Avaya Inc. System and method for multi-model, context-sensitive, real-time collaboration
US8781152B2 (en) 2010-08-05 2014-07-15 Brian Momeyer Identifying visual media content captured by camera-enabled mobile device
US9936333B2 (en) 2010-08-10 2018-04-03 Microsoft Technology Licensing, Llc Location and contextual-based mobile application promotion and delivery
KR101722687B1 (ko) 2010-08-10 2017-04-04 삼성전자주식회사 객체간 또는 객체와 유저간에 정보 제공 방법, 그 방법을 수행할 수 있는 유저 디바이스, 및 저장 매체
US8966590B2 (en) * 2010-08-17 2015-02-24 Facebook, Inc. Managing social network accessibility based on age
US9262517B2 (en) 2010-08-18 2016-02-16 At&T Intellectual Property I, L.P. Systems and methods for social media data mining
US8566911B2 (en) * 2010-10-06 2013-10-22 Blackberry Limited Method of obtaining authorization for accessing a service
KR101753031B1 (ko) 2010-11-15 2017-06-30 엘지전자 주식회사 이동 단말기 및 이것의 메타데이터 설정 방법
KR101060753B1 (ko) 2011-01-04 2011-08-31 (주)올라웍스 입력 이미지에 포함된 객체에 대한 콜렉션을 수행할 수 있도록 지원하기 위한 방법, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
US20120179717A1 (en) 2011-01-11 2012-07-12 Sony Corporation System and method for effectively providing entertainment recommendations to device users
US8688698B1 (en) 2011-02-11 2014-04-01 Google Inc. Automatic text suggestion
EP2678784A4 (en) 2011-02-23 2014-08-06 Bottlenose Inc ADAPTIVE SYSTEM ARCHITECTURE FOR IDENTIFYING POPULAR TOPICS IN NEWS
US8849931B2 (en) 2011-03-15 2014-09-30 Idt Messaging, Llc Linking context-based information to text messages
US8938669B1 (en) 2011-03-15 2015-01-20 Google Inc. Inline user addressing in chat and document editing sessions
US20130262574A1 (en) 2011-03-15 2013-10-03 Gabriel Cohen Inline User Addressing in Chat Sessions
US8554701B1 (en) 2011-03-18 2013-10-08 Amazon Technologies, Inc. Determining sentiment of sentences from customer reviews
JP2012221480A (ja) 2011-04-06 2012-11-12 L Is B Corp メッセージ処理システム
US9049259B2 (en) 2011-05-03 2015-06-02 Onepatont Software Limited System and method for dynamically providing visual action or activity news feed
EP2523436A1 (en) 2011-05-11 2012-11-14 Alcatel Lucent Mobile device and method of managing applications for a mobile device
USD658201S1 (en) 2011-05-27 2012-04-24 Microsoft Corporation Display screen with animated user interface
USD658678S1 (en) 2011-05-27 2012-05-01 Microsoft Corporation Display screen with animated user interface
USD658677S1 (en) 2011-05-27 2012-05-01 Microsoft Corporation Display screen with animated user interface
US8832284B1 (en) 2011-06-16 2014-09-09 Google Inc. Virtual socializing
US8589407B2 (en) 2011-06-17 2013-11-19 Google Inc. Automated generation of suggestions for personalized reactions in a social network
US8881250B2 (en) 2011-06-17 2014-11-04 Ebay Inc. Passporting credentials between a mobile app and a web browser
US8700480B1 (en) 2011-06-20 2014-04-15 Amazon Technologies, Inc. Extracting quotes from customer reviews regarding collections of items
US9588668B2 (en) 2011-07-21 2017-03-07 Imerj, Llc Methods of displaying a second view
US9245253B2 (en) 2011-08-19 2016-01-26 Disney Enterprises, Inc. Soft-sending chat messages
US8659667B2 (en) 2011-08-29 2014-02-25 Panasonic Corporation Recipe based real-time assistance for digital image capture and other consumer electronics devices
US9179278B2 (en) 2011-09-01 2015-11-03 Qualcomm Incorporated Systems and methods involving augmented menu using mobile device
US10102546B2 (en) 2011-09-15 2018-10-16 Stephan HEATH System and method for tracking, utilizing predicting, and implementing online consumer browsing behavior, buying patterns, social networking communications, advertisements and communications, for online coupons, products, goods and services, auctions, and service providers using geospatial mapping technology, and social networking
CA3023918C (en) 2011-09-30 2022-11-29 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US20180032997A1 (en) 2012-10-09 2018-02-01 George A. Gordon System, method, and computer program product for determining whether to prompt an action by a platform in connection with a mobile device
KR101521332B1 (ko) 2011-11-08 2015-05-20 주식회사 다음카카오 인스턴트 메시징 서비스 및 인스턴트 메시징 서비스로부터 확장된 복수의 서비스들을 제공하는 방법
US9697016B2 (en) 2011-11-15 2017-07-04 Microsoft Technology Licensing, Llc Search augmented menu and configuration for computer applications
USD673172S1 (en) 2011-11-21 2012-12-25 Microsoft Corporation Display screen with animated graphical user interface
KR101402506B1 (ko) 2011-12-01 2014-06-03 라인 가부시키가이샤 인스턴트 메시징 어플리케이션을 이용한 대화형 정보제공 시스템 및 방법
USD701228S1 (en) 2012-01-06 2014-03-18 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD699744S1 (en) 2012-01-06 2014-02-18 Microsoft Corporation Display screen with an animated graphical user interface
AU344579S (en) 2012-01-09 2012-09-27 Samsung Electronics Co Ltd Display screen for an electronic device
USD705802S1 (en) 2012-02-07 2014-05-27 Microsoft Corporation Display screen with animated graphical user interface
USD705251S1 (en) 2012-02-09 2014-05-20 Microsoft Corporation Display screen with animated graphical user interface
GB2499395A (en) 2012-02-14 2013-08-21 British Sky Broadcasting Ltd Search method
US9306878B2 (en) 2012-02-14 2016-04-05 Salesforce.Com, Inc. Intelligent automated messaging for computer-implemented devices
USD699739S1 (en) 2012-02-22 2014-02-18 Microsoft Corporation Display screen with animated graphical user interface
US20130218885A1 (en) 2012-02-22 2013-08-22 Salesforce.Com, Inc. Systems and methods for context-aware message tagging
USD701527S1 (en) 2012-02-23 2014-03-25 Htc Corporation Display screen with transitional graphical user interface
USD701528S1 (en) 2012-02-24 2014-03-25 Htc Corporation Display screen with transitional graphical user interface
US8620021B2 (en) 2012-03-29 2013-12-31 Digimarc Corporation Image-related methods and arrangements
US8855430B1 (en) 2012-05-30 2014-10-07 Google Inc. Refining image annotations
US20130346235A1 (en) 2012-06-20 2013-12-26 Ebay, Inc. Systems, Methods, and Computer Program Products for Caching of Shopping Items
USD705244S1 (en) 2012-06-20 2014-05-20 Microsoft Corporation Display screen with animated graphical user interface
US9191786B2 (en) 2012-06-27 2015-11-17 At&T Intellectual Property I, L.P. Method and apparatus for generating a suggested message to be sent over a network
US9412136B2 (en) 2012-07-09 2016-08-09 Facebook, Inc. Creation of real-time conversations based on social location information
KR20140011073A (ko) 2012-07-17 2014-01-28 삼성전자주식회사 텍스트 추천 방법 및 장치
US9019415B2 (en) 2012-07-26 2015-04-28 Qualcomm Incorporated Method and apparatus for dual camera shutter
US9195645B2 (en) 2012-07-30 2015-11-24 Microsoft Technology Licensing, Llc Generating string predictions using contexts
KR101899817B1 (ko) 2012-08-01 2018-09-19 엘지전자 주식회사 이동단말기 및 그 제어 방법
USD695755S1 (en) 2012-08-06 2013-12-17 Samsung Electronics Co., Ltd. TV monitor with graphical user interface
US20140047413A1 (en) 2012-08-09 2014-02-13 Modit, Inc. Developing, Modifying, and Using Applications
US20140052540A1 (en) 2012-08-20 2014-02-20 Giridhar Rajaram Providing content using inferred topics extracted from communications in a social networking system
KR102068604B1 (ko) 2012-08-28 2020-01-22 삼성전자 주식회사 휴대단말기의 문자 인식장치 및 방법
USD706802S1 (en) 2012-08-28 2014-06-10 Samsung Electronics Co., Ltd. Portable electronic device displaying transitional graphical user interface
US9218333B2 (en) 2012-08-31 2015-12-22 Microsoft Technology Licensing, Llc Context sensitive auto-correction
JP6160996B2 (ja) 2012-09-12 2017-07-12 パナソニックIpマネジメント株式会社 撮像装置
US20140088954A1 (en) 2012-09-27 2014-03-27 Research In Motion Limited Apparatus and method pertaining to automatically-suggested emoticons
US10691743B2 (en) 2014-08-05 2020-06-23 Sri International Multi-dimensional realization of visual content of an image collection
US9299060B2 (en) 2012-10-12 2016-03-29 Google Inc. Automatically suggesting groups based on past user interaction
KR20140052155A (ko) 2012-10-19 2014-05-07 삼성전자주식회사 디스플레이 장치, 디스플레이 장치 제어 방법 및 디스플레이 장치의 제어를 위한 정보처리장치
USD714821S1 (en) 2012-10-24 2014-10-07 Microsoft Corporation Display screen with animated graphical user interface
WO2014068573A1 (en) 2012-10-31 2014-05-08 Aniways Advertising Solutions Ltd. Custom emoticon generation
US20140156801A1 (en) 2012-12-04 2014-06-05 Mobitv, Inc. Cowatching and connected platforms using a push architecture
US9244905B2 (en) 2012-12-06 2016-01-26 Microsoft Technology Licensing, Llc Communication context based predictive-text suggestion
US20140164506A1 (en) 2012-12-10 2014-06-12 Rawllin International Inc. Multimedia message having portions of networked media content
US20140171133A1 (en) 2012-12-18 2014-06-19 Google Inc. Query response
CN103067490B (zh) 2012-12-26 2015-11-25 腾讯科技(深圳)有限公司 移动终端通讯会话的通知方法、终端、服务器及系统
GB201322037D0 (en) 2013-12-12 2014-01-29 Touchtype Ltd System and method for inputting images/labels into electronic devices
US9020956B1 (en) 2012-12-31 2015-04-28 Google Inc. Sentiment and topic based content determination methods and systems
US8930481B2 (en) 2012-12-31 2015-01-06 Huawei Technologies Co., Ltd. Message processing method, terminal and system
US20140189538A1 (en) 2012-12-31 2014-07-03 Motorola Mobility Llc Recommendations for Applications Based on Device Context
US9374327B2 (en) 2013-01-08 2016-06-21 Vmware, Inc. Intelligent chat system
KR20140091633A (ko) 2013-01-11 2014-07-22 삼성전자주식회사 모바일 장치에서의 상황 인지에 따른 추천 항목을 제공하기 위한 방법 및 이를 위한 모바일 장치
KR101821358B1 (ko) 2013-01-22 2018-01-25 네이버 주식회사 다자간 메신저 서비스를 제공하는 방법 및 시스템
US20140237057A1 (en) 2013-02-21 2014-08-21 Genesys Telecommunications Laboratories, Inc. System and method for processing private messages in a contact center
JP6255646B2 (ja) 2013-03-04 2018-01-10 株式会社L is B メッセージシステム
USD704726S1 (en) 2013-03-04 2014-05-13 Roger Leslie Maxwell Display screen or portion thereof with animated graphical user interface
US20140344058A1 (en) * 2013-03-15 2014-11-20 Fision Holdings, Inc Systems and methods for distributed marketing automation
US8825474B1 (en) 2013-04-16 2014-09-02 Google Inc. Text suggestion output using past interaction data
US9177318B2 (en) 2013-04-22 2015-11-03 Palo Alto Research Center Incorporated Method and apparatus for customizing conversation agents based on user characteristics using a relevance score for automatic statements, and a response prediction function
US9923849B2 (en) 2013-05-09 2018-03-20 Ebay Inc. System and method for suggesting a phrase based on a context
WO2014200621A1 (en) 2013-06-13 2014-12-18 Evernote Corporation Initializing chat sessions by pointing to content
US10599765B2 (en) 2013-06-27 2020-03-24 Avaya Inc. Semantic translation model training
ES2707967T3 (es) 2013-07-16 2019-04-08 Pinterest Inc Controles de menú contextual basado en objetos
US9330110B2 (en) 2013-07-17 2016-05-03 Xerox Corporation Image search system and method for personalized photo applications using semantic networks
US9794198B2 (en) 2013-07-19 2017-10-17 Tencent Technology (Shenzhen) Company Limited Methods and systems for creating auto-reply messages
US10162884B2 (en) 2013-07-23 2018-12-25 Conduent Business Services, Llc System and method for auto-suggesting responses based on social conversational contents in customer care services
EP2838060A1 (en) * 2013-08-14 2015-02-18 Facebook, Inc. Methods and systems for facilitating e-commerce payments
US9161188B2 (en) 2013-08-22 2015-10-13 Yahoo! Inc. System and method for automatically suggesting diverse and personalized message completions
CN104035947B (zh) 2013-09-16 2016-04-13 腾讯科技(深圳)有限公司 兴趣点推荐方法及装置、获取推荐兴趣点的方法及装置
EP2852105A1 (en) 2013-09-20 2015-03-25 Ignazio Di Tocco Computer system and related process supporting the communication of users located in the same geographical area, in order to establish a starting contact leading to a personal communication
US9401881B2 (en) 2013-09-26 2016-07-26 International Business Machines Corporation Automatic question generation and answering based on monitored messaging sessions
US9329692B2 (en) 2013-09-27 2016-05-03 Microsoft Technology Licensing, Llc Actionable content displayed on a touch screen
US20150100537A1 (en) 2013-10-03 2015-04-09 Microsoft Corporation Emoji for Text Predictions
US8996639B1 (en) 2013-10-15 2015-03-31 Google Inc. Predictive responses to incoming communications
US20150127753A1 (en) 2013-11-04 2015-05-07 Meemo, Llc Word Recognition and Ideograph or In-App Advertising System
CN105940397B (zh) 2013-12-12 2020-08-14 移动熨斗公司 用于应用同步的方法和系统
KR20150071768A (ko) 2013-12-18 2015-06-29 에스케이하이닉스 주식회사 이미지 센서 및 그 제조방법
US10565268B2 (en) 2013-12-19 2020-02-18 Adobe Inc. Interactive communication augmented with contextual information
WO2015100362A1 (en) 2013-12-23 2015-07-02 24/7 Customer, Inc. Systems and methods for facilitating dialogue mining
US9519408B2 (en) 2013-12-31 2016-12-13 Google Inc. Systems and methods for guided user actions
US9817813B2 (en) 2014-01-08 2017-11-14 Genesys Telecommunications Laboratories, Inc. Generalized phrases in automatic speech recognition systems
US20150207765A1 (en) 2014-01-17 2015-07-23 Nathaniel Brantingham Messaging Service with Conversation Suggestions
US9721183B2 (en) 2014-01-31 2017-08-01 Hulu, LLC Intelligent determination of aesthetic preferences based on user history and properties
US9515968B2 (en) 2014-02-05 2016-12-06 Facebook, Inc. Controlling access to ideograms
CN106164934A (zh) 2014-02-10 2016-11-23 谷歌公司 智能相机用户界面
CN104836720B (zh) 2014-02-12 2022-02-25 北京三星通信技术研究有限公司 交互式通信中进行信息推荐的方法及装置
US10095748B2 (en) 2014-03-03 2018-10-09 Microsoft Technology Licensing, Llc Personalized information query suggestions
CN103841007B (zh) 2014-03-04 2017-05-10 腾讯科技(深圳)有限公司 网络游戏系统中的数据处理方法、装置及系统
KR102106787B1 (ko) 2014-03-17 2020-05-06 에스케이텔레콤 주식회사 메신저 프로그램과 어플리케이션 연동 방법, 이를 위한 장치 및 시스템
CN104951428B (zh) 2014-03-26 2019-04-16 阿里巴巴集团控股有限公司 用户意图识别方法及装置
US9544257B2 (en) 2014-04-04 2017-01-10 Blackberry Limited System and method for conducting private messaging
US9213941B2 (en) 2014-04-22 2015-12-15 Google Inc. Automatic actions based on contextual replies
US10482163B2 (en) 2014-04-23 2019-11-19 Klickafy, Llc Clickable emoji
CN103995872B (zh) 2014-05-21 2017-04-05 王青 一种在应用中基于场景展开讨论与聊天的方法与系统
US10255449B2 (en) 2014-05-30 2019-04-09 Apple Inc. Permission request
US10445396B2 (en) 2014-05-31 2019-10-15 Apple Inc. Device, method, and graphical user interface for extending functionality of a host application to another application
US9380010B2 (en) 2014-06-03 2016-06-28 International Business Machines Corporation Conversation branching for more efficient resolution
WO2015200350A1 (en) 2014-06-24 2015-12-30 Google Inc. Ranking and selecting images for display from a set of images
WO2016003469A1 (en) 2014-07-03 2016-01-07 Nuance Communications, Inc. System and method for suggesting actions based upon incoming messages
US9420331B2 (en) 2014-07-07 2016-08-16 Google Inc. Method and system for categorizing detected motion events
US9043196B1 (en) 2014-07-07 2015-05-26 Machine Zone, Inc. Systems and methods for identifying and suggesting emoticons
US9990105B2 (en) 2014-07-08 2018-06-05 Verizon Patent And Licensing Inc. Accessible contextual controls within a graphical user interface
US20160043817A1 (en) 2014-07-18 2016-02-11 RSS Technologies, LLC Methods and apparatus for locality based broadcasting
EP3757928A1 (en) 2014-07-31 2020-12-30 Samsung Electronics Co., Ltd. Message service providing device and method of providing content via the same
CN104202718A (zh) 2014-08-05 2014-12-10 百度在线网络技术(北京)有限公司 一种向用户提供信息的方法与装置
US10218652B2 (en) 2014-08-08 2019-02-26 Mastercard International Incorporated Systems and methods for integrating a chat function into an e-reader application
US9965559B2 (en) 2014-08-21 2018-05-08 Google Llc Providing automatic actions for mobile onscreen content
US9705832B2 (en) 2014-08-27 2017-07-11 Lenovo (Singapore) Pte. Ltd. Context-aware aggregation of text-based messages
US10447621B2 (en) 2014-09-04 2019-10-15 Microsoft Technology Licensing, Llc App powered extensibility of messages on an existing messaging service
US10146748B1 (en) 2014-09-10 2018-12-04 Google Llc Embedding location information in a media collaboration using natural language processing
JP6561996B2 (ja) 2014-11-07 2019-08-21 ソニー株式会社 情報処理装置、制御方法、および記憶媒体
US20160140477A1 (en) 2014-11-13 2016-05-19 Xerox Corporation Methods and systems for assigning tasks to workers
US9569728B2 (en) 2014-11-14 2017-02-14 Bublup Technologies, Inc. Deriving semantic relationships based on empirical organization of content by users
CN105786455B (zh) 2014-12-17 2020-02-18 深圳市腾讯计算机系统有限公司 一种数据处理方法、装置及终端
US20160179816A1 (en) 2014-12-22 2016-06-23 Quixey, Inc. Near Real Time Auto-Suggest Search Results
US9727218B2 (en) 2015-01-02 2017-08-08 Microsoft Technology Licensing, Llc Contextual browser frame and entry box placement
KR20160089152A (ko) 2015-01-19 2016-07-27 주식회사 엔씨소프트 화행 분석을 통한 스티커 추천 방법 및 시스템
KR101634086B1 (ko) 2015-01-19 2016-07-08 주식회사 엔씨소프트 감정 분석을 통한 스티커 추천 방법 및 시스템
US20160224524A1 (en) 2015-02-03 2016-08-04 Nuance Communications, Inc. User generated short phrases for auto-filling, automatically collected during normal text use
US20160226804A1 (en) 2015-02-03 2016-08-04 Google Inc. Methods, systems, and media for suggesting a link to media content
US9661386B2 (en) 2015-02-11 2017-05-23 Google Inc. Methods, systems, and media for presenting a suggestion to watch videos
US10079785B2 (en) 2015-02-12 2018-09-18 Google Llc Determining reply content for a reply to an electronic communication
US20160284011A1 (en) * 2015-03-25 2016-09-29 Facebook, Inc. Techniques for social messaging authorization and customization
US10353542B2 (en) 2015-04-02 2019-07-16 Facebook, Inc. Techniques for context sensitive illustrated graphical user interface elements
US10965622B2 (en) 2015-04-16 2021-03-30 Samsung Electronics Co., Ltd. Method and apparatus for recommending reply message
US9703541B2 (en) 2015-04-28 2017-07-11 Google Inc. Entity action suggestion on a mobile device
US9883358B2 (en) 2015-05-08 2018-01-30 Blackberry Limited Electronic device and method of determining suggested responses to text-based communications
US10909329B2 (en) 2015-05-21 2021-02-02 Baidu Usa Llc Multilingual image question answering
US10504509B2 (en) 2015-05-27 2019-12-10 Google Llc Providing suggested voice-based action queries
US10091140B2 (en) 2015-05-31 2018-10-02 Microsoft Technology Licensing, Llc Context-sensitive generation of conversational responses
KR20160148260A (ko) 2015-06-16 2016-12-26 삼성전자주식회사 전자 장치 및 이의 제어 방법
US10274911B2 (en) 2015-06-25 2019-04-30 Intel Corporation Conversational interface for matching text of spoken input based on context model
US10042866B2 (en) 2015-06-30 2018-08-07 Adobe Systems Incorporated Searching untagged images with text-based queries
US9712466B2 (en) 2015-11-10 2017-07-18 Wrinkl, Inc. Integrating actionable objects into an on-line chat communications platform
US10423657B2 (en) 2015-07-15 2019-09-24 Rewardstyle, Inc. Systems and methods for screenshot linking
US20170031575A1 (en) 2015-07-28 2017-02-02 Microsoft Technology Licensing, Llc Tailored computing experience based on contextual signals
CN105141503A (zh) * 2015-08-13 2015-12-09 北京北信源软件股份有限公司 一种全新的即时通信智能机器人
CN105183276A (zh) 2015-08-19 2015-12-23 小米科技有限责任公司 在聊天界面实现游戏的方法、装置及终端设备
CN105068661B (zh) * 2015-09-07 2018-09-07 百度在线网络技术(北京)有限公司 基于人工智能的人机交互方法和系统
US10445425B2 (en) 2015-09-15 2019-10-15 Apple Inc. Emoji and canned responses
US9467435B1 (en) * 2015-09-15 2016-10-11 Mimecast North America, Inc. Electronic message threat protection system for authorized users
US11025569B2 (en) 2015-09-30 2021-06-01 Apple Inc. Shared content presentation with integrated messaging
US10789525B2 (en) 2015-10-02 2020-09-29 Adobe Inc. Modifying at least one attribute of an image with at least one attribute extracted from another image
KR20170048964A (ko) 2015-10-27 2017-05-10 라인 가부시키가이샤 메시지 제공 방법, 장치, 및 컴퓨터 프로그램과, 표시 제어 방법, 장치 및 컴퓨터 프로그램
CN105262675A (zh) 2015-10-29 2016-01-20 北京奇虎科技有限公司 基于电子书进行的聊天控制方法和装置
KR102393928B1 (ko) 2015-11-10 2022-05-04 삼성전자주식회사 응답 메시지를 추천하는 사용자 단말 장치 및 그 방법
US9633048B1 (en) 2015-11-16 2017-04-25 Adobe Systems Incorporated Converting a text sentence to a series of images
US10129193B2 (en) 2015-11-17 2018-11-13 International Business Machines Corporation Identifying relevant content contained in message streams that appear to be irrelevant
US20170147202A1 (en) 2015-11-24 2017-05-25 Facebook, Inc. Augmenting text messages with emotion information
KR102427833B1 (ko) 2015-11-30 2022-08-02 삼성전자주식회사 사용자 단말장치 및 디스플레이 방법
CN105306281B (zh) * 2015-12-03 2019-05-14 腾讯科技(深圳)有限公司 信息处理方法及客户端
US20170171117A1 (en) 2015-12-10 2017-06-15 International Business Machines Corporation Message Suggestion Using Dynamic Information
KR20180070659A (ko) 2015-12-21 2018-06-26 구글 엘엘씨 메시징 애플리케이션들을 위한 자동적인 제안들 및 다른 콘텐츠
US10530723B2 (en) 2015-12-21 2020-01-07 Google Llc Automatic suggestions for message exchange threads
US10732783B2 (en) 2015-12-28 2020-08-04 Microsoft Technology Licensing, Llc Identifying image comments from similar images
KR101712180B1 (ko) 2015-12-29 2017-03-06 라인 가부시키가이샤 메시지를 송수신하기 위한 컴퓨터로 읽을 수 있는 기록매체에 저장된 프로그램, 방법 및 장치
US9560152B1 (en) 2016-01-27 2017-01-31 International Business Machines Corporation Personalized summary of online communications
US11477139B2 (en) 2016-02-25 2022-10-18 Meta Platforms, Inc. Techniques for messaging bot rich communication
US20170250935A1 (en) 2016-02-25 2017-08-31 Facebook, Inc. Techniques for messaging bot app interactions
US20170250930A1 (en) 2016-02-29 2017-08-31 Outbrain Inc. Interactive content recommendation personalization assistant
US20170288942A1 (en) * 2016-03-30 2017-10-05 Microsoft Technology Licensing, Llc Portal for Provisioning Autonomous Software Agents
US10831802B2 (en) * 2016-04-11 2020-11-10 Facebook, Inc. Techniques to respond to user requests using natural-language machine learning based on example conversations
US10452671B2 (en) 2016-04-26 2019-10-22 Facebook, Inc. Recommendations from comments on online social networks
US9866693B2 (en) 2016-05-06 2018-01-09 Genesys Telecommunications Laboratories, Inc. System and method for monitoring progress of automated chat conversations
US20170344224A1 (en) 2016-05-27 2017-11-30 Nuance Communications, Inc. Suggesting emojis to users for insertion into text-based messages
CN105898627B (zh) 2016-05-31 2019-04-12 北京奇艺世纪科技有限公司 一种视频播放方法及装置
US11088973B2 (en) 2016-06-12 2021-08-10 Apple Inc. Conversion of text relating to media content and media extension apps
US10785175B2 (en) 2016-06-12 2020-09-22 Apple Inc. Polling extension application for interacting with a messaging application
US10505872B2 (en) 2016-06-12 2019-12-10 Apple Inc. Messaging application interacting with one or more extension applications
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10852912B2 (en) 2016-06-12 2020-12-01 Apple Inc. Image creation app in messaging app
US10554599B2 (en) 2016-06-12 2020-02-04 Apple Inc. Conversion of detected URL in text message
US20170359283A1 (en) 2016-06-12 2017-12-14 Apple Inc. Music creation app in messaging app
US10194288B2 (en) 2016-06-12 2019-01-29 Apple Inc. Sticker distribution system for messaging apps
US10595169B2 (en) 2016-06-12 2020-03-17 Apple Inc. Message extension app store
US9990128B2 (en) 2016-06-12 2018-06-05 Apple Inc. Messaging application interacting with one or more extension applications
US20170366479A1 (en) * 2016-06-20 2017-12-21 Microsoft Technology Licensing, Llc Communication System
US10254935B2 (en) 2016-06-29 2019-04-09 Google Llc Systems and methods of providing content selection
US10445845B2 (en) * 2016-06-30 2019-10-15 Paypal, Inc. Communicating in chat sessions using chat bots to provide real-time recommendations for negotiations
US10515393B2 (en) 2016-06-30 2019-12-24 Paypal, Inc. Image data detection for micro-expression analysis and targeted data services
US9805371B1 (en) 2016-07-08 2017-10-31 Asapp, Inc. Automatically suggesting responses to a received message
US20180032499A1 (en) 2016-07-28 2018-02-01 Google Inc. Automatically Generating Spelling Suggestions and Corrections Based on User Context
US10049310B2 (en) 2016-08-30 2018-08-14 International Business Machines Corporation Image text analysis for identifying hidden text
KR20180026983A (ko) 2016-09-05 2018-03-14 삼성전자주식회사 전자 장치 및 그 제어 방법
US10547574B2 (en) 2016-09-20 2020-01-28 Google Llc Suggested responses based on message stickers
WO2018057537A1 (en) 2016-09-20 2018-03-29 Google Llc Bot interaction
US10015124B2 (en) 2016-09-20 2018-07-03 Google Llc Automatic response suggestions based on images received in messaging applications
US10511450B2 (en) 2016-09-20 2019-12-17 Google Llc Bot permissions
US11176931B2 (en) 2016-09-23 2021-11-16 Microsoft Technology Licensing, Llc Conversational bookmarks
CN106484831A (zh) 2016-09-29 2017-03-08 百度在线网络技术(北京)有限公司 搜索系统、方法和装置
US10416846B2 (en) 2016-11-12 2019-09-17 Google Llc Determining graphical element(s) for inclusion in an electronic communication
US20180196854A1 (en) 2017-01-11 2018-07-12 Google Inc. Application extension for generating automatic search queries
US10146768B2 (en) 2017-01-25 2018-12-04 Google Llc Automatic suggested responses to images received in messages using language model
US10229427B2 (en) 2017-04-10 2019-03-12 Wildfire Systems, Inc. Virtual keyboard trackable referral system
US20180316637A1 (en) 2017-05-01 2018-11-01 Microsoft Technology Licensing, Llc Conversation lens for context
CA3062326A1 (en) 2017-05-05 2018-11-08 Liveperson, Inc. Dynamic response prediction for improved bot task processing
WO2018212822A1 (en) 2017-05-16 2018-11-22 Google Inc. Suggested actions for images
US10827319B2 (en) 2017-06-02 2020-11-03 Apple Inc. Messaging system interacting with dynamic extension app
US10348658B2 (en) 2017-06-15 2019-07-09 Google Llc Suggested items for use with embedded applications in chat conversations
US10404636B2 (en) 2017-06-15 2019-09-03 Google Llc Embedded programs and interfaces for chat conversations

Also Published As

Publication number Publication date
WO2018057536A1 (en) 2018-03-29
US10511450B2 (en) 2019-12-17
CN109716727B (zh) 2021-10-15
CN109716727A (zh) 2019-05-03
US20230379173A1 (en) 2023-11-23
US20180109526A1 (en) 2018-04-19
US20200099538A1 (en) 2020-03-26
US20220255760A1 (en) 2022-08-11
US11336467B2 (en) 2022-05-17
US11700134B2 (en) 2023-07-11
DE112017003594T5 (de) 2019-04-25
JP2019530050A (ja) 2019-10-17

Similar Documents

Publication Publication Date Title
JP6659910B2 (ja) データへのアクセス許可を要求するボット
JP6605151B2 (ja) ボットインタラクション
JP6625789B2 (ja) 言語モデルを用いたメッセージ内受信画像に対する自動提案応答
US11825023B2 (en) Method and system for virtual assistant conversations
US10719713B2 (en) Suggested comment determination for a communication session based on image feature extraction
US11063776B2 (en) System and method for operating networked computer systems for use in communicating with mobile devices
CN112534837B (zh) 用于提供灵活且集成的通信、调度和商业平台的系统和方法
US20230385012A1 (en) Smart table system utilizing extended reality
US11397956B1 (en) Two way screen mirroring using a smart table
US11853933B1 (en) Systems and methods for an interactive customer interface utilizing customer device context

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190131

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200206

R150 Certificate of patent or registration of utility model

Ref document number: 6659910

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250