JP6974152B2 - 情報処理装置及び情報処理方法 - Google Patents
情報処理装置及び情報処理方法 Download PDFInfo
- Publication number
- JP6974152B2 JP6974152B2 JP2017236979A JP2017236979A JP6974152B2 JP 6974152 B2 JP6974152 B2 JP 6974152B2 JP 2017236979 A JP2017236979 A JP 2017236979A JP 2017236979 A JP2017236979 A JP 2017236979A JP 6974152 B2 JP6974152 B2 JP 6974152B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- user
- text
- meaning
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 169
- 238000003672 processing method Methods 0.000 title claims description 86
- 238000000034 method Methods 0.000 claims description 98
- 238000001514 detection method Methods 0.000 claims description 37
- 230000006870 function Effects 0.000 claims description 25
- 238000012790 confirmation Methods 0.000 claims description 23
- 238000004458 analytical method Methods 0.000 claims description 21
- 238000012545 processing Methods 0.000 claims description 14
- 238000013527 convolutional neural network Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 5
- 238000012706 support-vector machine Methods 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 4
- 230000001960 triggered effect Effects 0.000 claims description 3
- 239000000126 substance Substances 0.000 claims description 2
- 238000004590 computer program Methods 0.000 claims 4
- 238000004891 communication Methods 0.000 description 23
- 230000000694 effects Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 238000012546 transfer Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- CVOFKRWYWCSDMA-UHFFFAOYSA-N 2-chloro-n-(2,6-diethylphenyl)-n-(methoxymethyl)acetamide;2,6-dinitro-n,n-dipropyl-4-(trifluoromethyl)aniline Chemical compound CCC1=CC=CC(CC)=C1N(COC)C(=O)CCl.CCCN(CCC)C1=C([N+]([O-])=O)C=C(C(F)(F)F)C=C1[N+]([O-])=O CVOFKRWYWCSDMA-UHFFFAOYSA-N 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000015654 memory Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/284—Lexical analysis, e.g. tokenisation or collocates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
- G06F3/04895—Guidance during keyboard input operation, e.g. prompting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/237—Lexical tools
- G06F40/242—Dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
- G06F40/295—Named entity recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
- H04M1/72436—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/26—Devices for calling a subscriber
- H04M1/27—Devices whereby a plurality of signals may be stored simultaneously
- H04M1/274—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
- H04M1/2745—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
- H04M1/2753—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips providing data content
- H04M1/2757—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips providing data content by data transmission, e.g. downloading
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- General Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Quality & Reliability (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Data Mining & Analysis (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Machine Translation (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
図1は、本実施例における情報処理装置1000のハードウェア構造を示す図である。
本実施例において、スマートフォンを情報処理装置の例示として記述する。しかし、注意されたいのは、本実施例では、スマートフォンを情報処理装置1000として例示するが、明らかなことに、それに限らず、本発明の情報処理装置は、移動端末(スマートフォン、スマートウォッチ、スマートリストバンド、音楽プレーヤー)、ラップトップ、タブレット、PDA(パーソナルデジタルアシスタント)、ファクシミリ装置、プリンタ、または、タッチスクリーン及び情報処理機能を有するインターネット機器(例えば、デジタルカメラ、冷蔵庫、テレビなど)などの種々の装置であってもよい。
[第1の実施例に係る情報処理方法]
本発明に係る情報処理方法は、情報処理装置1000のCPU103が、ROM104または記憶装置106に記憶された制御プログラム、或いは、通信ユニット109を介してネットワークで情報処理装置1000に接続されたネットワークサーバ(図示されない)からダウンロードされた制御プログラムを読み取ることによって実現されてもよい。
そのうち、「2017−02−24 15:00:00」(「明日の午後3時」に対応)は時間タイプを示す文節であり、「国貿ビル302」はアドレスタイプを示す文節であり、「会議があり」はイベントタイプを示す文節である。
図5は、第1の実施例に係る情報処理装置のソフトウェア構造を例示するブロック図である。図5に示すように、情報処理装置1000は、検出ユニット1101、注目テキスト取得ユニット1102、第1の自然言語理解ユニット1103、第2の自然言語理解ユニット1104および表示ユニット1105を含む。検出ユニット1101は、ディスプレイ108に対するタッチ操作を検出する。注目テキスト取得ユニット1102は、検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを注目テキストとして取得する。第1の自然言語理解ユニット1103は、単語分割ユニット11031と固有表現識別ユニット11032を含み、単語分割ユニット11031は、注目テキストに対して単語分割を行うことで単語分割の結果を取得し、かつ、固有表現識別ユニット11032は注目テキストに対して固有表現識別処理を行うことで、注目テキストの固有表現識別の結果を取得する。第2の自然言語理解ユニット1104は、注目テキストに対して語義分析を行うことで、注目テキストの構造化語義を取得する。表示ユニット1105は、表示インターフェースを生成するとともに、ディスプレイに注目テキストが含まれた表示インターフェースを表示させる。
[第2の実施例に係る情報処理方法]
以下は、本発明の第2の実施例に係る情報処理方法を、図6〜図7(b)を参照しながら説明する。そのうち、図6は、本発明の第2の実施例に係る情報処理方法を例示するフローチャートである。図7(a)〜図7(b)は、本発明の第2の実施例に係る情報処理方法の操作過程を示す例示的な表示画面である。
書では、ユーザ意図とそのユーザ意図にマッチングすることができる候補操作とが関連付
けて記憶されている。表2は、本発明に係る情報処理方法における予め定義された辞書を
例示する。そのうち、それぞれの意図に対して、同一の候補操作種類(例えば、第三者ア
プリケーション)に対応して複数の候補操作がある可能性があり、ユーザによる実際なイ
ンストールされた状況に応じて、どの候補操作を呼び出すかを確定する。
図8は、第2の実施例に係る情報処理装置のソフトウェア構造を例示するブロック図である。図8に示すように、第2の実施例に係る情報処理装置2000と第1の実施例に係る情報処理装置1000との相違点は、ユーザ意図取得ユニット1205と候補操作確定ユニット1206とが追加され、かつ、表示ユニット1105の代わりに、表示ユニット1207を用いることである。
[第3の実施例に係る情報処理方法]
以下は、本発明の第3の実施例に係る情報処理方法を、図9および図10(a)〜図10(c)を参照しながら説明する。そのうち、図9は、本発明の第3の実施例に係る情報処理方法を例示するフローチャートである。図10(a)〜図10(c)は、本発明の第3の実施例に係る情報処理方法の操作過程を示す例示的な表示画面である。
図13は、第3の実施例に係る情報処理装置のソフトウェア構造を例示するブロック図である。図13に示すように、第3の実施例に係る情報処理装置3000と第2の実施例に係る情報処理装置2000との相違点は、ユーザ選択受付ユニット1308と操作ウェイクアップユニット1309とが追加されることである。
[第4の実施例に係る情報処理方法]
以下は、本発明の第4の実施例に係る情報処理方法を、図14および図15(a)〜図15(e)を参照しながら説明する。そのうち、図14は、本発明の第4の実施例に係る情報処理方法を例示するフローチャートである。図15(a)〜図15(e)は、本発明の第4の実施例に係る情報処理方法の操作過程を示す例示的な表示画面である。
{
"app_name" : "Calendar",
"app_type": "system",
"command" : "create_calendar_event",
"arguments": "{\"time\":\"2017−02−24 15:00
:00\",\"location\":\"国貿ビル302\",\"title\":\"会
議があり\"}"
},
{
"app_name" : "WeChat",
"app_type": "third_party",
"command" : "share_to_wechat",
"arguments":"{\"text\":\"明日の午後3時に会議があり、国貿ビ
ル302に来てください\"}"
}
]
そのうち、app_nameは、候補操作の唯一の標識IDを示し、app_typeは候補操作の種類を示し、commandは予め定義された候補操作を呼び出す命令の名称であり、argumentsは呼び出し命令に伝送するパラメータである。
図16は、第4の実施例に係る情報処理装置のソフトウェア構造を例示するブロック図である。図16に示すように、第4の実施例に係る情報処理装置4000と第3の実施例に係る情報処理装置3000との相違点は、文節選択判断ユニット1410と注目テキストリセットユニット1411とが追加されることである。
[第5の実施例に係る情報処理方法]
以下は、本発明の第5の実施例に係る情報処理方法を、図17及び図18(a)と図18(b)を参照しながら説明する。そのうち、図17は、本発明の第5の実施例に係る情報処理方法を例示するフローチャートである。図18(a)と図18(b)は、本発明の第5の実施例に係る情報処理方法の操作過程を示す例示的な表示画面である。
図19は、第5の実施例に係る情報処理装置のソフトウェア構造を例示する。図19に示すように、第5の実施例に係る情報処理装置5000と第3の実施例に係る情報処理装置3000との相違点は、ユーザ意図取得ユニット1205の代わりに、ユーザ意図取得ユニット1505を用いて、そのうち、ユーザ意図取得ユニット1505は、注目テキストに対してユーザ意図への識別を行うことで、注目テキストに対応したユーザ意図を取得するほかに、さらに、注目テキストにおける各文節に対してユーザ意図への識別を行うことで、ユーザ意図を反映可能な各文節に対応したユーザ意図を取得するということである。
Claims (26)
- 情報を表示するためのタッチパネル式のディスプレイを備えた情報処理装置に用いられる情報処理方法であって、
前記情報処理装置がプロセッサを備え、前記プロセッサが、検出ユニット、注目テキスト取得ユニット、第1の自然言語理解ユニット、第2の自然言語理解ユニットおよび表示ユニットとしての機能を備え、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を前記検出ユニットにより検出する検出ステップ(S101)と、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを前記注目テキスト取得ユニットにより注目テキストとして取得する注目テキスト取得ステップ(S102)と、
前記注目テキスト取得ユニットにより取得された注目テキストに対して前記第1の自然言語理解ユニットにより、単語分割と固有表現識別に基づく第1の自然言語理解処理を行って、注目テキストの単語分割の結果および固有表現識別の結果を取得する第1の自然言語理解ステップ(S103)と、
前記注目テキスト取得ユニットにより取得された注目テキストに対して、前記第2の自然言語理解ユニットにより、語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義のタイプに応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ステップ(S104)と、
前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義に基づいて、または、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義と、前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果との両方に基づいて、前記構造化語義のうちの複数の語義セグメントをマークするように、前記表示ユニットにより、前記ディスプレイに注目テキストを表示する表示ステップ(S105)と、を含むことを特徴とする情報処理方法。 - 前記プロセッサが、ユーザ意図取得ユニットおよび候補操作確定ユニットとしての機能をさらに備え、
前記注目テキスト取得ユニットにより取得された注目テキストの内容、または、さらに前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果ならびに前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義のうちの少なくとも1つに基づいて、前記ユーザ意図取得ユニットにより、注目テキストに対してユーザが意図的に行う所望の処理であるユーザ意図の識別をサポートベクターマシン(SVM)と、畳み込みニューラルネットワーク(CNN)との2種類のモジュールのうちのいずれかで行うことで、注目テキストに対応したユーザ意図を取得するユーザ意図取得ステップ(S205)と、
予め定義された辞書に基づき、前記ユーザ意図取得ユニットにより取得されたユーザ意図にマッチングした1つまたは複数の候補操作を前記候補操作確定ユニットにより確定する候補操作確定ステップ(S206)と、をさらに含み、
前記表示ステップ(S207)では、前記候補操作確定ユニットにより確定された候補操作を操作可能に表示することを特徴とする請求項1に記載の情報処理方法。 - 前記プロセッサが、ユーザ選択受付ユニットおよび操作ウェイクアップユニットとしての機能をさらに備え、
ユーザ意図取得ステップ(S205)では、さらに、注目テキストの語義セグメントのうち、語義セグメントに対応する固有表現識別の結果または語義セグメントのタイプを、ユーザ意図マッチング処理により、取得した各ユーザ意図に関連付けられたキー語義セグメントとして、前記ユーザ意図取得ユニットにより当該ユーザ意図に関連付けて記憶し、かつ、
当該情報処理方法は、
前記ディスプレイに表示された候補操作に対するユーザの選択を前記ユーザ選択受付ユニットにより検出するユーザ選択受付ステップ(S308)と、
前記ユーザ選択受付ユニットにより検出された、それぞれの選択された候補操作にマッチングしたユーザ意図と、ユーザ意図取得処理により関連付けられたキー語義セグメントを、ウェイクアップ操作に導入する語義セグメントとして、ユーザが選択した候補操作を前記操作ウェイクアップユニットによりウェイクアップする操作ウェイクアップステップ(S309)と、をさらに含むことを特徴とする請求項2に記載の情報処理方法。 - 前記プロセッサが、語義セグメント選択判断ユニットおよび注目テキストリセットユニットとしての機能をさらに備え、
前記ディスプレイに表示された語義セグメントに対するユーザの選択を検出したか否かを前記語義セグメント選択判断ユニットにより判断する語義セグメント選択判断ステップ(S410)と、
ユーザが語義セグメントを選択したことを検出したと前記語義セグメント選択判断ユニットにより判断された場合、ユーザが選択した語義セグメントを注目テキストとして、ユーザが選択した語義セグメントに前記注目テキストリセットユニットによりユーザ意図取得処理を適用し、ユーザが選択した語義セグメントを注目テキストとして、処理が前記ユーザ意図取得ステップに戻る注目テキストリセットステップ(S411)と、をさらに含むことを特徴とする請求項3に記載の情報処理方法。 - 前記ユーザ意図取得ステップでは、さらに、注目テキストにおける前記第2の自然言語理解ユニットにより取得された各語義セグメントに対してユーザ意図取得処理を行いユーザ意図の識別を行うことで、ユーザ意図を反映可能な各語義セグメントに対応したユーザ意図を取得する(S505)ことを特徴とする請求項2または3に記載の情報処理方法。
- 前記表示ステップでは、語義セグメントのマークを付けて単語分割するように注目テキストを表示することを特徴とする請求項1〜4のいずれか1項に記載の情報処理方法。
- 前記表示ステップでは、さらに、前記第2の自然言語理解ユニットにより取得された注目テキストの語義セグメントのうち、前記ユーザ意図取得ユニットにより取得されたユーザ意図に関連付けられたキー語義セグメントに対してタイプ別にマークするように、注目テキストを前記ディスプレイに表示し、
前記候補操作は、ユーザ意図にマッチングすることができる候補アプリケーションプログラムまたは候補ウェブサイトリンクであることを特徴とする請求項2〜4のいずれか1項に記載の情報処理方法。 - 前記候補操作確定ステップ(S206)は、確定された複数の候補操作を並び替える候補操作並び替えステップ(S2061)をさらに含み、
前記表示ステップ(S207)では、候補操作並び替えステップでの並び替えに従って、選択される候補操作を表示することを特徴とする請求項2〜4のいずれか1項に記載の情報処理方法。 - 前記操作ウェイクアップステップ(S309)は、
前記ユーザ選択受付ステップで検出された候補操作に対するユーザの選択について、ユーザに選択された候補操作を呼び出すための、ウェイクアップ指令と指令パラメータを含む呼び出し指令を生成する操作指令生成ステップ(S3091)と、
操作指令生成ステップにて生成された呼び出し指令について、ユーザ意図取得ステップにおいて記憶された、ユーザ選択の候補操作にマッチングするユーザ意図に関連付けられたキー語義セグメントを生成された呼び出しの指令パラメータとして抽出するキー語義セグメント抽出ステップ(S3092)と、
指令パラメータによって、キー語義セグメントを、呼び出し指令の呼び出し対象としてユーザが選択した候補操作に導入し、かつ、ウェイクアップ指令を用いてユーザが選択した候補操作をウェイクアップする導入・ウェイクアップステップ(S3093)と、をさらに含み、
前記操作指令生成ステップ(S3091)は、候補操作をウェイクアップする指令を生成するステップS30911と、候補操作インターフェース関数を呼び出す指令を生成するステップS30912と、前記構造化語義におけるキー語義セグメントを、候補操作インターフェースパラメータの形式で前記インターフェース関数に伝送するステップS30913と、をさらに含むことを特徴とする請求項3または4に記載の情報処理方法。 - 情報を表示するためのタッチパネル式のディスプレイと、プロセッサと、を備えた情報処理装置であって、
前記プロセッサが、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を検出する検出ユニット(1101)、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを注目テキストとして取得する注目テキスト取得ユニット(1102)、
前記注目テキスト取得ユニットにより取得された注目テキストに対して単語分割と固有表現識別に基づく第1の自然言語理解処理を行って、注目テキストの単語分割の結果および固有表現識別の結果を取得する第1の自然言語理解ユニット(1103)、
前記注目テキスト取得ユニットにより取得された注目テキストに対して語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義のタイプに応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ユニット(1104)、および、
前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義に基づいて、または、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義と、前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果との両方に基づいて、前記構造化語義のうちの複数の語義セグメントをマークするように、前記ディスプレイに注目テキストを表示する表示ユニット(1105)としての機能を含むことを特徴とする情報処理装置。 - 前記プロセッサが、
前記注目テキスト取得ユニットにより取得された注目テキストの内容、または、さらに前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果ならびに前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義のうちの少なくとも1つに基づいて、注目テキストに対してユーザが意図的に行う所望の処理であるユーザ意図の識別を行うことで、注目テキストに対応したユーザ意図を取得するユーザ意図取得ユニット(1205)、および、
予め定義された辞書に基づき、前記ユーザ意図にマッチングした1つまたは複数の候補操作を確定する候補操作確定ユニット(1206)としての機能をさらに含み、
前記表示ユニットは、さらに、確定された候補操作を操作可能に前記ディスプレイに表示することを特徴とする請求項10に記載の情報処理装置。 - 前記ユーザ意図取得ユニットは、さらに、注目テキストの語義セグメントのうち、語義セグメントに対応する固有表現識別の結果または語義セグメントのタイプを、ユーザ意図マッチング処理により、取得した各ユーザ意図に関連付けられたキー語義セグメントとして、当該ユーザ意図に関連付けて記憶し、かつ、
前記プロセッサが、
前記ディスプレイに表示された候補操作に対するユーザの選択を検出するユーザ選択受付ユニット(1308)、および、
前記ユーザ選択受付ユニットにより検出された、それぞれの選択された候補操作にマッチングしたユーザ意図と関連付けられたキー語義セグメントを、ウェイクアップ操作に導入する語義セグメントとして、ユーザが選択した候補操作をウェイクアップする操作ウェイクアップユニット(1309)としての機能をさらに含むことを特徴とする請求項11に記載の情報処理装置。 - 前記プロセッサが、
前記ディスプレイに表示された語義セグメントに対するユーザの選択を検出したか否かを判断する語義セグメント選択判断ユニット(1410)、および、
前記語義セグメント選択判断ユニットにより、ユーザが語義セグメントを選択したことを検出したと判断された場合、ユーザが選択した語義セグメントを注目テキストとして、ユーザが選択した語義セグメントにユーザ意図取得処理を適用し、ユーザが選択した語義セグメントを注目テキストとして前記ユーザ意図取得ユニットへ返す注目テキストリセットユニット(1411)としての機能をさらに含むことを特徴とする請求項12に記載の情報処理装置。 - 前記ユーザ意図取得ユニットは、さらに、注目テキストにおける前記第2の自然言語理解ユニットにより取得された各語義セグメントに対してユーザ意図の識別を行うことで、ユーザ意図を反映可能な各語義セグメントに対応したユーザ意図を取得することを特徴とする請求項11または12に記載の情報処理装置。
- 前記表示ユニットは、語義セグメントのマークを付けて単語分割するように注目テキストを前記ディスプレイに表示することを特徴とする請求項10〜13のいずれか1項に記載の情報処理装置。
- 前記表示ユニットは、前記第2の自然言語理解ユニットにより取得された注目テキストの語義セグメントのうち、前記ユーザ意図取得ユニットにより取得されたユーザ意図に関連付けられたキー語義セグメントに対してタイプ別にマークするように、注目テキストを前記ディスプレイに表示し、
前記候補操作は、前記ユーザ意図取得ユニットにより取得されたユーザ意図にマッチングすることができる候補アプリケーションプログラムまたは候補ウェブサイトリンクであることを特徴とする請求項11〜13のいずれか1項に記載の情報処理装置。 - 前記候補操作確定ユニットは、確定された複数の候補操作を並び替える候補操作並び替えユニットを含み、
前記表示ユニットは、前記候補操作並び替えユニットによる並び替えに従って、選択される候補操作を前記ディスプレイに表示することを特徴とする請求項11〜13のいずれか1項に記載の情報処理装置。 - 前記操作ウェイクアップユニットは、
前記ユーザ選択受付ユニットにより検出された候補操作に対するユーザの選択について、ユーザに選択された候補操作を呼び出すための、ウェイクアップ指令と指令パラメータを含む呼び出し指令を生成する操作指令生成ユニットと、
前記操作指令生成ユニットにより生成されたユーザ選択操作によりトリガされた呼び出し指令に応じて、ユーザ意図取得ユニットにおいて記憶された、ユーザ選択の候補操作にマッチングするユーザ意図に関連付けられたキー語義セグメントを生成された呼び出しの指令パラメータとして抽出するキー語義セグメント抽出ユニットと、
前記キー語義セグメント抽出ユニットにより抽出された指令パラメータによって、キー語義セグメントを、呼び出し指令の呼び出し対象としてユーザが選択した候補操作に導入し、かつ、ウェイクアップ指令を用いてユーザが選択した候補操作をウェイクアップする導入・ウェイクアップユニットと、をさらに含み、
前記操作指令生成ユニットは、候補操作をウェイクアップする指令を生成するユニットと、候補操作インターフェース関数を呼び出す指令を生成するユニットと、前記構造化語義におけるキー語義セグメントを、候補操作インターフェースパラメータの形式で前記インターフェース関数に伝送するユニットと、をさらに含むことを特徴とする請求項12または13に記載の情報処理装置。 - コンピュータプログラムが記憶されたコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが、情報を表示するためのタッチパネル式のディスプレイを備えた情報処理装置を構成するプロセッサによって実行される際に、前記プロセッサが、検出ユニット、注目テキスト取得ユニット、第1の自然言語理解ユニット、第2の自然言語理解ユニットおよび表示ユニットとしての機能を発揮して情報処理方法を実現し、
当該情報処理方法は、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を前記検出ユニットにより検出する検出ステップ(S101)と、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを前記注目テキスト取得ユニットにより注目テキストとして取得する注目テキスト取得ステップ(S102)と、
前記注目テキスト取得ユニットにより取得された注目テキストに対して前記第1の自然言語理解ユニットにより、単語分割と固有表現識別に基づく第1の自然言語理解処理を行って、注目テキストの単語分割の結果および固有表現識別の結果を取得する第1の自然言語理解ステップ(S103)と、
前記注目テキスト取得ユニットにより取得された注目テキストに対して、前記第2の自然言語理解ユニットにより、語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義のタイプに応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ステップ(S104)と、
前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義に基づいて、または、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義と、前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果との両方に基づいて、前記構造化語義のうちの複数の語義セグメントをマークするように、前記表示ユニットにより、前記ディスプレイに注目テキストを表示する表示ステップ(S105)と、を含むことを特徴とするコンピュータ読取可能な記憶媒体。 - 情報を表示するためのタッチパネル式のディスプレイと、プロセッサと、を備えた情報処理装置であって、
前記プロセッサが、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を検出する検出ユニット(1101)、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを注目テキストとして取得する注目テキスト取得ユニット(1102)、
予め定義された辞書に基づき、ユーザ意図取得ユニットに注目テキストを入力することにより取得されたユーザ意図にマッチングした1つまたは複数の候補操作を確定する候補操作確定ユニット(1206)、および、
前記ディスプレイに、前記候補操作確定ユニットにより確定された候補操作を操作可能に表示する表示ユニット(1207)としての機能を含むことを特徴とする情報処理装置。 - 前記プロセッサが、
前記注目テキスト取得ユニットにより取得された注目テキストに対して単語分割と固有表現識別に基づく第1の自然言語理解処理を行って、注目テキストの単語分割の結果および固有表現識別の結果を取得する第1の自然言語理解ユニット(1103)、および、
前記注目テキスト取得ユニットにより取得された注目テキストに対して語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義のタイプに応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ユニット(1104)としての機能をさらに含み、
前記表示ユニットは、さらに、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義に基づいて、または、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義と、前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果との両方に基づいて、前記構造化語義のうちの複数の語義セグメントをマークするように、注目テキストを前記ディスプレイに表示し、
前記ユーザ意図取得ユニットは、取得された注目テキストの語義セグメントのうち、サポートベクターマシン(SVM)と、畳み込みニューラルネットワーク(CNN)との2種類のモジュールのうちのいずれかによって、取得した各ユーザ意図に関連付けられた語義セグメントをキー語義セグメントとして、当該ユーザ意図に関連付けて記憶し、
前記ディスプレイに表示された候補操作に対するユーザの選択を検出するユーザ選択受付ユニット(1308)、および、
前記ユーザ選択受付ユニットにより検出された、ユーザにより選択された候補操作のそれぞれにマッチングした前記ユーザ意図と関連付けられた前記キー語義セグメントを、ウェイクアップ操作に導入する語義セグメントとして、ユーザが選択した候補操作をウェイクアップする操作ウェイクアップユニット(1309)としての機能のために使用することを特徴とする請求項20に記載の情報処理装置。 - 情報を表示するためのタッチパネル式のディスプレイを備えた情報処理装置に用いられる情報処理方法であって、
前記情報処理装置がプロセッサを備え、前記プロセッサが、検出ユニット、注目テキスト取得ユニット、ユーザ意図取得ユニット、候補操作確定ユニットおよび表示ユニットとしての機能を備え、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を前記検出ユニットにより検出する検出ステップ(S101)と、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを、前記注目テキスト取得ユニットにより注目テキストとして取得する注目テキスト取得ステップ(S102)と、
前記注目テキスト取得ユニットにより取得された注目テキストの内容に基づいて、前記ユーザ意図取得ユニットにより、注目テキストに対してユーザが意図的に行う所望の処理であるユーザ意図の識別を行うことで、注目テキストに対応したユーザ意図を取得するユーザ意図取得ステップ(S205)と、
予め定義された辞書に基づき、前記ユーザ意図取得ユニットにより取得されたユーザ意図にマッチングした1つまたは複数の候補操作を前記候補操作確定ユニットにより確定する候補操作確定ステップ(S206)と、
前記表示ユニットにより、前記ディスプレイに、前記候補操作確定ユニットにより確定された候補操作を操作可能に表示する表示ステップ(S207)と、を含むことを特徴とする情報処理方法。 - 前記プロセッサが、第1の自然言語理解ユニットおよび第2の自然言語理解ユニットとしての機能をさらに備え、
前記注目テキスト取得ユニットにより注目テキストに対して、前記第1の自然言語理解ユニットにより、単語分割と固有表現識別に基づく第1の自然言語理解処理を行って、注目テキストの単語分割の結果および固有表現識別の結果を取得する第1の自然言語理解ステップ(S103)と、
前記注目テキスト取得ユニットにより注目テキストに対して、前記第2の自然言語理解ユニットにより、語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義に応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ステップ(S104)と、をさらに含み、
前記表示ステップ(S105)では、さらに、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義に基づいて、または、注目テキストの構造化語義と、前記第1の自然言語理解ユニットにより取得された注目テキストの単語分割の結果および固有表現識別の結果との両方に基づいて、前記構造化語義のうちの複数の語義セグメントをマークするように、前記ディスプレイに注目テキストを表示し、
前記ユーザ意図取得ステップでは、前記第2の自然言語理解ユニットにより取得された注目テキストの語義セグメントのうち、前記ユーザ意図取得ユニットにより取得された各ユーザ意図に関連付けられた語義セグメントをキー語義セグメントとして、当該ユーザ意図に関連付けて記憶し、
前記ディスプレイに表示された候補操作に対するユーザの選択を検出するユーザ選択受付ユニット(1308)、および、
前記ユーザ選択受付ユニットにより検出された、ユーザにより選択された候補操作のそれぞれにマッチングした前記ユーザ意図と関連付けられた前記キー語義セグメントを、ウェイクアップ操作に導入する語義セグメントとして、ユーザが選択した候補操作をウェイクアップする操作ウェイクアップユニット(1309)としての機能のために使用することを特徴とする請求項22に記載の情報処理方法。 - コンピュータプログラムが記憶されたコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが、情報を表示するためのタッチパネル式のディスプレイを備えた情報処理装置を構成するプロセッサによって実行される際に、前記プロセッサが、検出ユニット、注目テキスト取得ユニット、ユーザ意図取得ユニット、候補操作確定ユニットおよび表示ユニットとしての機能を発揮して情報処理方法を実現し、
前記情報処理方法は、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を前記検出ユニットにより検出する検出ステップ(S101)と、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを、前記注目テキスト取得ユニットにより注目テキストとして取得する注目テキスト取得ステップ(S102)と、
前記注目テキスト取得ユニットにより取得された注目テキストの内容に基づいて、前記ユーザ意図取得ユニットにより、注目テキストに対してユーザが意図的に行う所望の処理であるユーザ意図の識別を行うことで、注目テキストに対応したユーザ意図を取得するユーザ意図取得ステップ(S205)と、
予め定義された辞書に基づき、前記ユーザ意図取得ユニットにより取得されたユーザ意図にマッチングした1つまたは複数の候補操作を前記候補操作確定ユニットにより確定する候補操作確定ステップ(S206)と、
前記表示ユニットにより、前記ディスプレイに、前記候補操作確定ユニットにより確定された候補操作を操作可能に表示する表示ステップ(S207)と、を含むことを特徴とするコンピュータ読取可能な記憶媒体。 - 情報を表示するためのタッチパネル式のディスプレイと、プロセッサと、を備えた情報処理装置であって、
前記プロセッサが、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を検出する検出ユニット、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを注目テキストとして取得する注目テキスト取得ユニット、
前記注目テキスト取得ユニットにより取得された注目テキストに対して語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義のタイプに応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ユニット、
前記注目テキスト取得ユニットにより取得された注目テキストの内容および第2の自然言語理解ユニットにより取得された注目テキストの構造化語義のうちの少なくとも一方に基づいて、注目テキストに対してユーザが意図的に行う所望の処理であるユーザ意図の識別を行うことで、注目テキストに対応したユーザ意図を取得し、かつ、注目テキストの語義セグメントのうち、取得した各ユーザ意図に関連付けられた語義セグメントをキー語義セグメントとして、当該ユーザ意図に関連付けて記憶するユーザ意図取得ユニット、
前記ユーザ意図取得ユニットにより取得された注目テキストのユーザ意図にマッチングした1つまたは複数の候補操作を確定する候補操作確定ユニット、
文字を含む情報に対する特定のタッチ操作が前記検出ユニットにより検出されたことに応じて、ウェイクアップ指令を用いてユーザが選択した候補操作を、前記ディスプレイに操作可能に表示する表示ユニット、および、
前記候補操作確定ユニットにより確定された、ユーザにより選択された候補操作のそれぞれにマッチングしたユーザ意図と関連付けられたキー語義セグメントを、ウェイクアップ操作に導入する語義セグメントとして、ユーザが前記ディスプレイに表示された候補操作に対して選択した候補操作に応じてウェイクアップする操作ウェイクアップユニットとしての機能を含むことを特徴とする情報処理装置。 - 情報を表示するためのタッチパネル式のディスプレイと、プロセッサと、を備えた情報処理装置であって、
前記プロセッサが、
前記ディスプレイに表示された文字を含む情報に対する特定のタッチ操作を検出する検出ユニット、
前記検出ユニットにより検出された特定のタッチ操作に基づき、前記タッチ操作によりタッチされた情報のうちのテキストを注目テキストとして取得する注目テキスト取得ユニット、
前記注目テキスト取得ユニットにより取得された注目テキストに対して語義分析に基づいて、第2の自然言語理解処理を行って、注目テキストが語義のタイプに応じて、フレーム意味論(Frame Semantic)と文脈自由文法に基づく語義分析器による語義分析処理に基づき、分割されて得られる複数の語義セグメントと、当該複数の語義セグメントのそれぞれの語義のタイプとにより定義される構造化語義を取得する第2の自然言語理解ユニット、
前記注目テキスト取得ユニットにより取得された注目テキストの内容および前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義のうちの少なくとも一方に基づいて、注目テキストに対してユーザが意図的に行う所望の処理であるユーザ意図の識別を行うことで、注目テキストに対応したユーザ意図を取得し、かつ、注目テキストの語義セグメントのうち、取得した各ユーザ意図に関連付けられた語義セグメントをキー語義セグメントとして、当該ユーザ意図に関連付けて記憶するユーザ意図取得ユニット、
前記ユーザ意図取得ユニットにより取得された前記注目テキストのユーザ意図にマッチングした1つまたは複数の候補操作を確定する候補操作確定ユニット、
文字を含む情報に対する特定のタッチ操作が前記検出ユニットにより検出されたことに応じて、前記注目テキストを、前記第2の自然言語理解ユニットにより取得された注目テキストの構造化語義に基づいて前記構造化語義のうちの複数の語義セグメントをマークするように前記ディスプレイに表示し、かつ、前記ユーザ意図取得ユニットにより取得された注目テキストの、ウェイクアップ指令を用いてユーザが選択した候補操作を前記ディスプレイに表示する表示ユニット、および、
前記候補操作確定ユニットにより確定された、ユーザにより選択された候補操作のそれぞれにマッチングしたユーザ意図と関連付けられたキー語義セグメントを、ウェイクアップ操作に導入する語義セグメントとして、ユーザが前記ディスプレイに表示された候補操作に対して選択した候補操作に応じてウェイクアップする操作ウェイクアップユニットとしての機能を含むことを特徴とする情報処理装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710187933.X | 2017-03-27 | ||
CN201710187933.XA CN106933809A (zh) | 2017-03-27 | 2017-03-27 | 信息处理装置及信息处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018163641A JP2018163641A (ja) | 2018-10-18 |
JP6974152B2 true JP6974152B2 (ja) | 2021-12-01 |
Family
ID=59424905
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017236979A Active JP6974152B2 (ja) | 2017-03-27 | 2017-12-11 | 情報処理装置及び情報処理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11086512B2 (ja) |
JP (1) | JP6974152B2 (ja) |
CN (4) | CN106933809A (ja) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107491312A (zh) * | 2017-08-25 | 2017-12-19 | 北京安云世纪科技有限公司 | 应用程序的触发方法、装置和移动终端 |
CN109917988B (zh) * | 2017-12-13 | 2021-12-21 | 腾讯科技(深圳)有限公司 | 选中内容显示方法、装置、终端及计算机可读存储介质 |
JP2019128374A (ja) * | 2018-01-22 | 2019-08-01 | トヨタ自動車株式会社 | 情報処理装置、及び情報処理方法 |
JP7078429B2 (ja) * | 2018-03-20 | 2022-05-31 | 株式会社Screenホールディングス | テキストマイニング方法、テキストマイニングプログラム、および、テキストマイニング装置 |
CN109032467A (zh) * | 2018-06-28 | 2018-12-18 | 成都西可科技有限公司 | 数据定位方法、装置、电子设备及计算机可读存储介质 |
CN109145286A (zh) * | 2018-07-02 | 2019-01-04 | 昆明理工大学 | 基于BiLSTM-CRF神经网络模型并融合越南语语言特征的名词短语识别方法 |
CN109165292A (zh) * | 2018-07-23 | 2019-01-08 | Oppo广东移动通信有限公司 | 数据处理方法、装置以及移动终端 |
CN109388807B (zh) * | 2018-10-30 | 2021-09-21 | 中山大学 | 电子病历命名实体识别的方法、装置及存储介质 |
CN109791570B (zh) * | 2018-12-13 | 2023-05-02 | 香港应用科技研究院有限公司 | 高效且精确的命名实体识别方法和装置 |
CN110046238B (zh) * | 2019-03-29 | 2024-03-26 | 华为技术有限公司 | 对话交互方法、图形用户界面、终端设备以及网络设备 |
CN110083284B (zh) * | 2019-05-06 | 2023-04-18 | 腾讯科技(深圳)有限公司 | 候选信息处理装置、候选信息显示方法、存储介质及电子设备 |
CN110188278A (zh) * | 2019-05-31 | 2019-08-30 | 三角兽(北京)科技有限公司 | 应用程序推荐方法、装置、电子设备及计算机可读存储介质 |
CN110232141A (zh) * | 2019-05-31 | 2019-09-13 | 三角兽(北京)科技有限公司 | 资源获取方法、资源获取装置、存储介质和电子设备 |
US11379113B2 (en) * | 2019-06-01 | 2022-07-05 | Apple Inc. | Techniques for selecting text |
CN110278327B (zh) * | 2019-06-10 | 2021-01-08 | 维沃移动通信有限公司 | 数据处理方法及移动终端 |
US11157707B2 (en) | 2019-07-23 | 2021-10-26 | International Business Machines Corporation | Natural language response improvement in machine assisted agents |
US11138212B2 (en) | 2019-07-23 | 2021-10-05 | International Business Machines Corporation | Natural language response recommendation clustering for rapid retrieval |
CN110413756B (zh) | 2019-07-29 | 2022-02-15 | 北京小米智能科技有限公司 | 自然语言处理的方法、装置及设备 |
CN112307315A (zh) * | 2019-08-02 | 2021-02-02 | 广州三星通信技术研究有限公司 | 智能推荐服务的方法及装置 |
CN110619877A (zh) * | 2019-09-27 | 2019-12-27 | 安徽咪鼠科技有限公司 | 应用于激光笔的语音识别人机交互方法、装置、系统和存储介质 |
CN110648653A (zh) * | 2019-09-27 | 2020-01-03 | 安徽咪鼠科技有限公司 | 基于智能语音鼠标的字幕实现方法、装置、系统和存储介质 |
CN110825222A (zh) * | 2019-10-22 | 2020-02-21 | 清华大学 | 智能设备的文本呈现方法以及智能设备 |
CN110866092B (zh) * | 2019-11-25 | 2023-03-14 | 腾讯科技(深圳)有限公司 | 信息搜索方法、装置、电子设备和存储介质 |
CN112989828B (zh) * | 2019-12-17 | 2024-08-02 | 医渡云(北京)技术有限公司 | 命名实体识别模型的训练方法、装置、介质及电子设备 |
CN111209362A (zh) * | 2020-01-07 | 2020-05-29 | 苏州城方信息技术有限公司 | 基于深度学习的地址数据解析方法 |
CN111859106A (zh) * | 2020-05-07 | 2020-10-30 | 北京嘀嘀无限科技发展有限公司 | 信息处理方法、装置、设备及存储介质 |
CN112560408A (zh) * | 2020-12-18 | 2021-03-26 | 广东轩辕网络科技股份有限公司 | 一种文本标注方法、装置、终端及存储介质 |
CN112700769B (zh) * | 2020-12-26 | 2024-07-05 | 中国科学技术大学 | 一种语义理解方法、装置、设备以及计算机可读存储介质 |
CN112800775B (zh) * | 2021-01-28 | 2024-05-31 | 中国科学技术大学 | 语义理解方法、装置、设备及存储介质 |
CN112884440B (zh) * | 2021-03-02 | 2024-05-24 | 岭东核电有限公司 | 核电试验中的试验工序执行方法、装置和计算机设备 |
CN115408483B (zh) * | 2022-08-29 | 2023-04-14 | 中国人民解放军32021部队 | 一种北斗导航服务定位性能智能预测方法及装置 |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5966686A (en) * | 1996-06-28 | 1999-10-12 | Microsoft Corporation | Method and system for computing semantic logical forms from syntax trees |
US5864845A (en) * | 1996-06-28 | 1999-01-26 | Siemens Corporate Research, Inc. | Facilitating world wide web searches utilizing a multiple search engine query clustering fusion strategy |
WO2004036939A1 (fr) * | 2002-10-18 | 2004-04-29 | Institute Of Acoustics Chinese Academy Of Sciences | Appareil de communication mobile numerique portable, procede de commande vocale et systeme |
JP2005322083A (ja) * | 2004-05-10 | 2005-11-17 | Fuji Xerox Co Ltd | 文書属性入力装置および方法 |
US8819034B2 (en) * | 2005-12-14 | 2014-08-26 | Blackberry Limited | Method and apparatus for generating a new event directly from a document |
JP2009075733A (ja) * | 2007-09-19 | 2009-04-09 | Toshiba Corp | 候補表示装置及び方法 |
CN101414296B (zh) * | 2007-10-15 | 2012-07-25 | 日电(中国)有限公司 | 自适应服务推荐设备及方法、自适应服务推荐系统及方法 |
RU2399959C2 (ru) * | 2008-10-29 | 2010-09-20 | Закрытое акционерное общество "Авикомп Сервисез" | Способ автоматизированной обработки текста на естественном языке путем его семантической индексации, способ автоматизированной обработки коллекции текстов на естественном языке путем их семантической индексации и машиночитаемые носители |
CN101655876A (zh) * | 2009-09-17 | 2010-02-24 | 广东国笔科技股份有限公司 | 一种基于语义分析的智能检索系统及方法 |
JP2012027723A (ja) * | 2010-07-23 | 2012-02-09 | Sony Corp | 情報処理装置、情報処理方法及び情報処理プログラム |
US9524291B2 (en) * | 2010-10-06 | 2016-12-20 | Virtuoz Sa | Visual display of semantic information |
CN102567433A (zh) * | 2010-12-07 | 2012-07-11 | 中国电信股份有限公司 | 基于输入法的处理方法、装置和移动终端 |
US8838434B1 (en) * | 2011-07-29 | 2014-09-16 | Nuance Communications, Inc. | Bootstrap call router to other languages using selected N-best translations |
US9305108B2 (en) * | 2011-10-05 | 2016-04-05 | Google Inc. | Semantic selection and purpose facilitation |
CN102880649B (zh) * | 2012-08-27 | 2016-03-02 | 北京搜狗信息服务有限公司 | 一种个性化信息处理方法和系统 |
CN103678418B (zh) * | 2012-09-25 | 2017-06-06 | 富士通株式会社 | 信息处理方法和信息处理设备 |
US8713433B1 (en) * | 2012-10-16 | 2014-04-29 | Google Inc. | Feature-based autocorrection |
CN104301500A (zh) * | 2013-07-16 | 2015-01-21 | 中兴通讯股份有限公司 | 一种终端控制方法、装置和终端 |
CN104899187A (zh) * | 2014-03-06 | 2015-09-09 | 武汉元宝创意科技有限公司 | 人机交互的分词与语义标示的方法与系统 |
US9213941B2 (en) * | 2014-04-22 | 2015-12-15 | Google Inc. | Automatic actions based on contextual replies |
CN104331393A (zh) * | 2014-05-06 | 2015-02-04 | 广州三星通信技术研究有限公司 | 用于针对用户的输入操作提供备选项的设备及方法 |
US9607032B2 (en) * | 2014-05-12 | 2017-03-28 | Google Inc. | Updating text within a document |
CN104951433B (zh) * | 2015-06-24 | 2018-01-23 | 北京京东尚科信息技术有限公司 | 基于上下文进行意图识别的方法和系统 |
CN106484671B (zh) * | 2015-08-25 | 2019-05-28 | 北京中搜云商网络技术有限公司 | 一种时效性查询内容的识别方法 |
US10210383B2 (en) * | 2015-09-03 | 2019-02-19 | Microsoft Technology Licensing, Llc | Interacting with an assistant component based on captured stroke information |
US10387034B2 (en) * | 2015-09-03 | 2019-08-20 | Microsoft Technology Licensing, Llc | Modifying captured stroke information into an actionable form |
US20170068436A1 (en) * | 2015-09-03 | 2017-03-09 | Microsoft Technology Licensing, Llc | Interpreting and Supplementing Captured Stroke Information |
CN105808058A (zh) * | 2016-03-04 | 2016-07-27 | 陈包容 | 一种智能显示粘贴提示的方法及装置 |
CN106021600B (zh) * | 2016-06-12 | 2018-03-09 | 腾讯科技(深圳)有限公司 | 信息提示方法及装置 |
CN106155550A (zh) * | 2016-06-28 | 2016-11-23 | 乐视控股(北京)有限公司 | 一种界面的显示方法和装置 |
CN106325688B (zh) * | 2016-08-17 | 2020-01-14 | 北京字节跳动网络技术有限公司 | 一种文本处理方法及装置 |
CN106406806B (zh) * | 2016-09-19 | 2020-01-24 | 北京儒博科技有限公司 | 一种用于智能设备的控制方法及装置 |
CN106484266B (zh) * | 2016-10-18 | 2020-02-21 | 北京字节跳动网络技术有限公司 | 一种文本处理方法及装置 |
US10027796B1 (en) * | 2017-03-24 | 2018-07-17 | Microsoft Technology Licensing, Llc | Smart reminder generation from input |
-
2017
- 2017-03-27 CN CN201710187933.XA patent/CN106933809A/zh active Pending
- 2017-10-24 CN CN201910152309.5A patent/CN109857327B/zh active Active
- 2017-10-24 CN CN201711000883.6A patent/CN107765970B/zh active Active
- 2017-10-24 CN CN201910152308.0A patent/CN109885251B/zh active Active
- 2017-12-11 JP JP2017236979A patent/JP6974152B2/ja active Active
-
2018
- 2018-03-23 US US15/933,803 patent/US11086512B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN107765970B (zh) | 2019-03-12 |
US11086512B2 (en) | 2021-08-10 |
CN109885251B (zh) | 2022-03-15 |
CN109857327A (zh) | 2019-06-07 |
CN107765970A (zh) | 2018-03-06 |
US20180275817A1 (en) | 2018-09-27 |
CN106933809A (zh) | 2017-07-07 |
CN109857327B (zh) | 2021-10-15 |
CN109885251A (zh) | 2019-06-14 |
JP2018163641A (ja) | 2018-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6974152B2 (ja) | 情報処理装置及び情報処理方法 | |
CN110276007B (zh) | 用于提供信息的装置和方法 | |
US20200159392A1 (en) | Method of processing content and electronic device thereof | |
KR102447503B1 (ko) | 메시지 서비스를 제공하는 전자기기 및 그 전자기기가 컨텐트 제공하는 방법 | |
EP3300008A1 (en) | Method and apparatus for recommending texts | |
EP2440988B1 (en) | Touch anywhere to speak | |
EP2657856A1 (en) | Contact search method, device and mobile terminal applying same | |
AU2010327454A1 (en) | Method and apparatus for providing user interface | |
CN111602107B (zh) | 一种应用退出时的显示方法及终端 | |
JP2015060391A (ja) | ユーザのデータ入力に応じて情報提供を行うためのサーバ装置、端末装置、プログラム、システムおよび方法 | |
CN109543014B (zh) | 人机对话方法、装置、终端及服务器 | |
KR20160016526A (ko) | 정보 제공하는 방법 및 이를 위한 전자기기 | |
CN105740242A (zh) | 基于二维码的信息搜索装置与方法及移动终端 | |
KR102370373B1 (ko) | 정보 제공하는 방법 및 이를 위한 전자기기 | |
CN112925878B (zh) | 数据处理方法和装置 | |
JP2017531889A (ja) | 文字列記憶方法及び装置 | |
KR102404853B1 (ko) | 단말기 및 그 동작 방법 | |
CN118468852A (zh) | 文章热度计算方法、装置、终端及存储介质 | |
Pascual Espada et al. | Method Based on Context-Information to Improve User Experience on Mobile Web-Based Applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171211 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190403 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190527 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190726 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190729 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200507 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20200507 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20200514 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20200519 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20200605 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20200609 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20200806 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20200806 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210112 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210323 |
|
C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20210406 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210623 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210706 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20210914 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20211019 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20211019 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211104 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6974152 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |