JP2018036621A - 情報入力方法および装置 - Google Patents

情報入力方法および装置 Download PDF

Info

Publication number
JP2018036621A
JP2018036621A JP2017023271A JP2017023271A JP2018036621A JP 2018036621 A JP2018036621 A JP 2018036621A JP 2017023271 A JP2017023271 A JP 2017023271A JP 2017023271 A JP2017023271 A JP 2017023271A JP 2018036621 A JP2018036621 A JP 2018036621A
Authority
JP
Japan
Prior art keywords
input
information
user
voice information
pictograph
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017023271A
Other languages
English (en)
Other versions
JP6718828B2 (ja
Inventor
チン・ティエン
Tian Qin
ジャオ・シャオレイ
Xiaolei Zhao
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Publication of JP2018036621A publication Critical patent/JP2018036621A/ja
Application granted granted Critical
Publication of JP6718828B2 publication Critical patent/JP6718828B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63—Querying
    • G06F16/632—Query formulation
    • G06F16/634—Query by example, e.g. query by humming
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/274—Converting codes to words; Guess-ahead of partial word inputs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40—Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition

Abstract

【課題】本願は、情報入力方法および装置を開示する。【解決手段】当該方法の一具体的な実施形態は、ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信するステップと、音声情報に関連付けられた絵文字を候補結果とするステップと、ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力するステップと、を含み、ここで、絵文字は、複数のユーザが音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む。ユーザが音声によって入力する場合に、ユーザの音声入力の意味を正確に理解することができ、話したコンテンツ、気分に基づいて、マッチングする絵文字をインテリジェントに推薦することができることを可能にしたため、ユーザが絵文字を素早く入力することに役立ち、ユーザが絵文字を検索する煩雑な操作を簡略化し、ユーザに利便性を提供する。【選択図】図２

Description

本願は、コンピュータ分野に関し、具体的に入力方式分野に関し、特に情報入力方法および装置に関する。
現在、いくつかの入力方式は音声入力機能を提供する。ユーザが入力方式の音声入力機能によって入力する場合に、一般的に、入力した音声を文に変換してから入力する方式を使用する。
しかしながら、上記の方式で音声入力を行う場合に、例えばユーザが入力する際に、様々な状況下で異なるタイプの絵文字を入力する必要がある要求を満たすことができず、音声入力機能が比較的単一である。
本願は、情報入力方法および装置を提供し、上記背景技術における技術的問題を解決することに用いられる。
第一の態様によれば、本願は、情報入力方法を提供し、この方法は、ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信するステップと、前記音声情報に関連付けられた絵文字を候補結果とするステップと、前記ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力するステップと、を含み、ここで、前記絵文字は、複数のユーザが前記音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む。
第二の態様によれば、本願は、情報入力装置を提供し、この装置は、ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信するように配置されている受信ユニットと、前記音声情報に関連付けられた絵文字を候補結果とするように配置されている選択ユニットと、前記ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力するように配置されている入力ユニットと、を備え、ここで、前記絵文字は、複数のユーザが前記音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む。
本願によって提供された情報入力方法および装置は、ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信し、音声情報に関連付けられた絵文字を候補結果とし（ここで、絵文字は、複数のユーザが音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む）、ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力ことによって、ユーザが音声によって入力する場合に、ユーザの音声入力の意味を正確に理解することができ、話したコンテンツ、気分に基づいて、マッチングする絵文字をインテリジェントに推薦することができることを可能にしたため、ユーザが絵文字を素早く入力することに役立ち、ユーザが絵文字を検索する煩雑な操作を簡略化し、ユーザに利便性を提供する。
以下、図面を参照しながら非限定的な実施例を詳細に説明することにより、本願の他の特徴、目的、および利点は、より明らかになる。
本願の情報入力方法または装置の実施例に適用できる例示的なシステムアーキテクチャ図である。 本願に係る情報入力方法の一実施例のフローチャートを示す。 本願に係る情報入力方法の別の実施例のフローチャートを示す。 本願に係る情報入力装置の構造模式図を示す。 本願の実施例を実現するための情報入力装置に適用されるコンピュータシステムを示す。
以下、図面および実施例を参照しながら、本願をさらに詳しく説明する。ただし、ここで説明されている具体的な実施例は、係る発明を解釈するためのものに過ぎず、本発明の範囲を制限するものではないと理解されるべきである。また、説明の便宜上、図面に本発明と関連する部分のみが示されている。
ただし、衝突がない限り、本願における実施例、および実施例における特徴は、互いに組み合せてもよい。以下、図面を参照しながら実施例に基づいて本発明を詳細に説明する。
図１は、本願の情報入力方法または装置の実施例に適用できる例示的なシステムアーキテクチャ１００を示す。
図１に示すように、システムアーキテクチャ１００は、端末機器１０１、１０２、１０３、ネットワーク１０４、およびサーバー１０５を含んでもよい。ネットワーク１０４は、端末機器１０１、１０２、１０３とサーバー１０５との間に伝送リンクのメディアを提供することに用いられる。ネットワーク１０４は、様々な接続タイプ、例えば有線、無線伝送リンクまたは光ケーブルなどを含んでもよい。
ユーザは、端末機器１０１、１０２、１０３を用いてネットワーク１０４を介してサーバー１０５と対話することによって、メッセージなどを受信したり送信したりすることができる。端末機器１０１、１０２、１０３に、様々な通信アプリケーション、例えば、入力方式のアプリケーション、ブラウザのアプリケーション、検索のアプリケーション、文字処理のアプリケーションなどがインストールされてもよい。
端末機器１０１、１０２、１０３は、ディスプレイを有し且つネットワーク通信をサポートする様々な電子機器であってもよく、スマートフォン、タブレットＰＣ、電子書籍リーダー、ＭＰ３プレーヤー（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ Ａｕｄｉｏ Ｌａｙｅｒ ＩＩＩ、動画専門家集団オーディオレイヤー３）、ＭＰ４（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ Ａｕｄｉｏ Ｌａｙｅｒ ＩＶ、動画専門家集団オーディオレイヤー４）プレーヤー、ラップトップポータブルコンピュータ、およびデスクトップコンピュータなどを含むが、これらに限定されるものではない。
サーバー１０５は、大量の絵文字を取得し、端末機器１０１、１０２、１０３における入力方式のアプリケーションに大量の絵文字を送信することができる。端末１０１、１０２、１０３における入力方式のアプリケーションは、ユーザによって入力された音声情報を記録し、音声情報と画面上で表示された絵文字との対応関係を確立することができる。
図１における端末機器、ネットワーク、およびサーバーの数は単に例示的なものであることを当業者は理解すべきである。必要に応じて、端末機器、ネットワーク、およびサーバーの数が任意である。
本願に係る情報入力方法の一実施例のフロー２００を示す図２を参照する。なお、本願の実施例によって提供された情報入力方法は、図１における端末機器１０１、１０２、１０３により実行されてもよく、それに応じて、情報入力装置は端末機器１０１、１０２、１０３に設置されてもよい。当該方法は以下のステップを含む。
ステップ２０１：ユーザによって入力された音声情報を受信する。
本実施例では、ユーザの音声情報はアプリケーションの入力領域に入力されるべきコンテンツに関連付けられる。例えば、ユーザ同士がインスタントメッセージアプリケーションを介してチャットする場合に、インスタントメッセージアプリケーションの入力領域にコンテンツを入力する必要がある際に、音声入力機器（例えばマイク）で音声情報を入力することができる。
ステップ２０２：音声情報に関連付けられた絵文字を候補結果とする。
本実施例では、ユーザによって入力された音声情報に関連付けられた絵文字は、複数のユーザが音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む。
本実施例では、複数のユーザが意味に関連付けられた音声情報を入力した際の、画面上で比較的に多く表示された絵文字を選択して候補結果として、音声情報を入力する現在のユーザに推薦することができる。
本実施例のいくつかの代替的な実現方式では、更に、複数のユーザの履歴入力情報を取得するステップと、意味に関連付けられた複数の音声情報を確定するステップと、意味に関連付けられた複数の音声情報に対応する絵文字を集合するステップと、絵文字から対応する入力回数が回数閾値よりも大きい絵文字を選択するステップと、を含み、ここで、履歴入力情報は、履歴入力における入力された音声情報と、アプリケーションの入力領域に入力された絵文字とを含む。
本実施例では、ユーザが音声によって入力する過程において音声情報に関連付けられた絵文字を候補結果としてユーザに絵文字を推薦するために、大量のユーザによって入力された音声情報と大量の絵文字との対応関係を事前に確立することができる。
本実施例では、ステップ２０１におけるユーザとは、音声情報を入力する現在のユーザを意味してもよい。ステップ２０１により現在のユーザによって入力された音声情報を受信する前に、大量のユーザが以前に入力した音声情報と、音声情報を入力した際にアプリケーションの入力領域（例えばインスタントメッセージアプリケーションの入力領域）に入力した絵文字、即ち画面上で表示された絵文字とを事前に取得することができる。大量のユーザの履歴入力から意味に関連付けられた音声情報を検索して、複数の音声情報セットを取得することができる。各音声情報セットにおいては、複数のユーザによって入力された音声に関連付けられた音声情報を含む。また、複数のユーザが音声情報セットにおける音声情報を入力する際に選択した画面上で表示された絵文字を集合して、絵文字セットを取得することができる。
それによって、意味に関連付けられた音声情報からなる音声情報セットと、絵文字セットとの対応関係を確立することができ、各音声情報セットは１つの絵文字セットに対応する。音声情報セットと絵文字セットとの対応関係は、複数のユーザが意味に関連付けられた音声情報を入力する際に、どれらの絵文字を選択して画面上で表示するかを示すことができる。さらに、音声情報セットに対応する絵文字セットにおける、画面上で表示された回数が回数閾値よりも大きい絵文字を検索することができる。つまり、複数のユーザが意味に関連付けられた音声情報を入力する際の、画面上で比較的に多く表示された絵文字を検索する。
大量のユーザによって入力された音声情報と、大量の絵文字との対応関係を事前に確立した後に、ステップ２０１における現在のユーザが音声入力を行う場合に、現在のユーザによって入力された音声情報に関連付けられた音声情報を検索し、現在のユーザによって入力された音声情報に関連付けられた音声情報が属する音声情報セットを確定することができる。次に、音声情報セットに対応する絵文字セットにおける、画面上で表示された回数が回数閾値よりも大きい絵文字を検索することができる。つまり、複数のユーザが意味に関連付けられた音声情報を入力する際の、画面上で比較的に多く表示された絵文字を検索して候補結果とする。
例えば、複数のユーザが以前に入力した時に音声によって「暇だな」、「今週の仕事は予定より早く終わった」などの意味に関連付けられた音声情報を入力する際に、画面上で表示された絵文字はいずれもリラックスタイプの絵文字「コーヒー」、即ち入力回数が回数閾値よりも大きい絵文字「コーヒー」である。
ステップ２０１におけるユーザが現在の入力において音声によって「のんびりした金曜日の午後」を入力する際に、「のんびりした金曜日の午後」が「暇だな」、「今週の仕事は予定より早く終わった」の意味に関連付けられるため、「暇だな」、「今週の仕事は予定より早く終わった」に対応する画面上で表示された絵文字、即ち絵文字「コーヒー」を候補結果として、音声情報を入力する現在のユーザに推薦することができる。
ステップ２０３：ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力する。
本実施例では、ステップ２０２によって音声情報に関連付けられた絵文字を候補結果とした後に、ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力することができる。つまり、ユーザは、複数のユーザがステップ２０１によって入力された意味に関連付けられた音声情報を入力した際の、画面上で比較的に多く表示された絵文字を選択し検索して、候補結果としてアプリケーションの入力領域に入力することができる。
例えば、ユーザ同士がインスタントメッセージアプリケーションを介してチャットする場合に、現在のユーザによって入力された音声情報「のんびりした金曜日の午後」が、複数のユーザが前に入力した音声情報「暇だな」、「今週の仕事は予定より早く終わった」などの音声情報に意味的に関連付けられ、且つ複数のユーザが前に「暇だな」、「今週の仕事は予定より早く終わった」などの音声情報を入力した際に画面上で表示させた絵文字がいずれも絵文字「コーヒー」であり、即ち、画面上で表示された回数が回数閾値よりも大きい場合に、候補結果は、絵文字「コーヒー」を含むことができる。音声によって「のんびりした金曜日の午後」を入力する現在のユーザは、候補結果から絵文字「コーヒー」を選択して画面上で表示することができる。
本実施例では、入力方式で本実施例における上記ステップ２０１〜２０３を実行してもよい。入力方式は、ユーザが音声によって入力する場合に、ユーザの音声入力の意味を正確に理解することができ、話したコンテンツ、気分に基づいて、マッチングする絵文字をインテリジェントに推薦することができるため、ユーザが絵文字を素早く入力することに役立ち、ユーザが絵文字を検索する煩雑な操作を簡略化し、ユーザに利便性を提供する。
本願に係る情報入力方法の別の実施例のフロー３００を示す図３を参照する。なお、本願の実施例によって提供された情報入力方法は、図１における端末機器１０１、１０２、１０３により実行されてもよい。当該方法は以下のステップを含む。
ステップ３０１：ユーザによって入力された音声情報を受信する。
本実施例では、ユーザの音声情報はアプリケーションの入力領域に入力されるべきコンテンツに関連付けられる。例えば、ユーザがアプリケーションの入力領域にコンテンツを入力する必要がある場合に、音声入力機器（例えばマイク）で音声情報を入力することができる。
ステップ３０２：音声情報に対応する意味認識結果に関連付けられた絵文字を候補結果とする。
本実施例では、ステップ３０１によりユーザによって入力された音声情報を受信した後に、音声情報に対して意味認識を行い、音声情報に対応する文を取得することができる。次に、ルールマッチング方式で文に対して意味認識を行い、意味認識結果を取得することができる。
本実施例では、ルールマッチング方式で入力された音声情報に対応する文に対して意味認識を行うことができて、意味認識結果を取得することができる。意味認識結果は、ユーザの気持ちを表す気持ちタイプを含む。例えば、ユーザの気持ちタイプを表すキーワードを含むルールマッチングテンプレートを事前に設定してもよく、ユーザの異なるタイプの気持ちに対して、対応するタイプのルールマッチングテンプレートを設定する。ユーザによって入力された音声情報に対応する文が、ルールマッチングテンプレートとマッチングする場合に、ルールマッチングテンプレートのタイプに基づいて、ユーザの気持ちの気持ちタイプを確定することができる。
本実施例では、各気持ちタイプと絵文字との対応関係を事前に確立してもよい。各気持ちタイプと絵文字との対応関係に基づいて、ユーザによって入力された音声情報に対して意味認識を行うことによって得られたユーザの気持ちの気持ちタイプに対応する絵文字を確定する。それによって、気持ちタイプに対応する絵文字を候補結果とすることができる。例えば、ユーザが「暇だな」を入力する際に、意味認識によって、ユーザの気持ちの気持ちタイプがリラックスタイプであると認識することができるため、リラックスタイプに属する絵文字、例えば絵文字「コーヒー」を候補結果とすることができる。
本実施例では、以下の方式で大量の絵文字と気持ちタイプとの対応関係を確立することができ、即ち、複数の絵文字を事前に取得し、複数の絵文字を注釈し、絵文字に対応するユーザの気持ちの気持ちタイプを表すことが可能な絵文字の注釈情報を取得する。例えば、ユーザの気持ちの気持ちタイプとしての「嬉しい」タイプを、「非常に嬉しい」、「わりに嬉しい」などのサブタイプに区分してもよい。絵文字および注釈情報を用いてサンプルデータとして、ディープラーニングモデルをトレーニングしてもよい。例えば、気持ちタイプである「嬉しい」タイプの各サブタイプの絵文字および各サブタイプの絵文字の注釈情報をサンプルデータとして、ディープラーニングモデルをトレーニングしてもよい。複数の絵文字および複数の絵文字の注釈情報を用いてディープラーニングモデルをトレーニングした後に、ディープラーニングモデルは絵文字の特徴と気持ちタイプとの対応関係を学習することができる。トレーニングされたディープラーニングモデルで大量の絵文字に対応する気持ちタイプを認識して、大量の絵文字と気持ちタイプとの対応関係を確立してもよい。
本実施例では、ステップ３０１におけるユーザとは、音声情報を入力する現在のユーザを意味してもよい。ステップ３０１により現在のユーザによって入力された音声情報を受信する前に、大量のユーザが以前に入力した音声情報と、音声情報を入力した際にアプリケーションの入力領域（例えばインスタントメッセージアプリケーションの入力領域）に入力した絵文字、即ち画面上で表示された絵文字とを事前に取得することができる。大量のユーザの履歴入力から意味に関連付けられた音声情報を検索して、複数の音声情報セットを取得することができる。各音声情報セットにおいては、複数のユーザによって入力された音声に関連付けられた音声情報を含む。また、複数のユーザが音声情報セットにおける音声情報を入力する際の、画面上で表示させた絵文字を集合して、絵文字セットを取得することができる。
それによって、意味に関連付けられた音声情報からなる音声情報セットと絵文字セットとの対応関係を確立することができ、各音声情報セットは１つの絵文字セットに対応する。音声情報セットと絵文字セットとの対応関係は、複数のユーザが意味に関連付けられた音声情報を入力する際に、どれらの絵文字を選択して画面上で表示するかを示すことができる。さらに、音声情報セットに対応する絵文字セットにおける、画面上で表示された回数が回数閾値よりも大きい絵文字を検索することができる。即ち複数のユーザが意味に関連付けられた音声情報を入力する際の、画面上で比較的に多く表示された絵文字を検索する。
大量のユーザによって入力された音声情報と、大量の絵文字との対応関係を事前に確立した後に、ステップ３０１における現在のユーザが音声入力を行う場合に、現在のユーザによって入力された音声情報に関連付けられた音声情報を検索し、現在のユーザによって入力された音声情報に関連付けられた音声情報が属する音声情報セットを確定することができる。次に、音声情報セットに対応する絵文字セットにおける、画面上で表示された回数が回数閾値よりも大きい絵文字を検索することができる。つまり、複数のユーザが意味に関連付けられた音声情報を入力する際の、画面上で比較的に多く表示された絵文字を検索して候補結果とする。
例えば、複数のユーザが以前に入力した時に音声によって「暇だな」、「今週の仕事は予定より早く終わった」などの意味に関連付けられた音声情報を入力する際に、意味認識によって、ユーザの気持ちタイプがリラックスタイプであると認識することができるため、絵文字「コーヒー」を含むリラックスタイプの絵文字を候補結果とすることを推薦する。「暇だな」、「今週の仕事は予定より早く終わった」などの意味に関連付けられた音声情報を入力するユーザがいずれも絵文字「コーヒー」を選択して画面上で表示させた場合に、ユーザが選択した画面上で表示された絵文字「コーヒー」を記録することができる。
それによって、ステップ３０１における現在のユーザが音声によって「のんびりした金曜日の午後」を入力する場合に、現在のユーザが音声によって入力した「のんびりした金曜日の午後」は「暇だな」、「今週の仕事は予定より早く終わった」などの音声情報の意味に関連付けられるため、「暇だな」、「今週の仕事は予定より早く終わった」などの音声情報に対応する画面上で表示された絵文字「コーヒー」を候補結果として、音声によって「のんびりした金曜日の午後」を入力する現在のユーザに推薦することができる。
ステップ３０３：ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力する。
本実施例では、ステップ３０２によって音声情報に関連付けられた絵文字を候補結果とした後に、ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力することができる。つまり、ユーザは、複数のユーザがステップ３０１によって入力された意味に関連付けられた音声情報を入力した際の、画面上で比較的に多く表示された絵文字を選択し検索して、候補結果としてアプリケーションの入力領域に入力することができる。
例えば、ユーザ同士がインスタントメッセージアプリケーションを介してチャットする場合に、現在のユーザによって入力された音声情報「のんびりした金曜日の午後」が、複数のユーザが前に入力した音声情報「暇だな」、「今週の仕事は予定より早く終わった」などの音声情報に意味的に関連付けられ、且つ複数のユーザが前に「暇だな」、「今週の仕事は予定より早く終わった」などの音声情報を入力した際に画面上で表示させた絵文字がいずれも絵文字「コーヒー」であり、即ち、画面上で表示された回数が回数閾値よりも大きい場合に、候補結果は、絵文字「コーヒー」を含むことができる。現在のユーザは、音声によって「のんびりした金曜日の午後」を入力する際に、候補結果における絵文字「コーヒー」を選択して画面上で表示させることができる。
本実施例では、入力方式で本実施例における上記ステップ３０１〜３０３を実行してもよい。入力方式は、ユーザが音声によって入力する場合に、ユーザの音声入力の意味を正確に理解することができ、話したコンテンツ、気分に基づいて、マッチングする絵文字をインテリジェントに推薦することができるため、ユーザが絵文字を素早く入力することに役立ち、ユーザが絵文字を検索する煩雑な操作を簡略化し、ユーザに利便性を提供する。
図４を参照し、上記各図に示す方法の実現として、本願は、情報入力装置の一実施例を提供し、当該装置の実施例は図２に示す方法の実施例に対応し、当該装置は具体的に様々な電子機器に適用することができる。
図４に示すように、本実施例の情報入力装置４００は、受信ユニット４０１、選択ユニット４０２、入力ユニット４０３を備える。受信ユニット４０１は、ユーザによって入力された、アプリケーションの入力領域に入力されるコンテンツに関連付けられる音声情報を受信することに用いられ、選択ユニット４０２は、音声情報に関連付けられた絵文字を候補結果とすることに用いられ、絵文字は、複数のユーザが音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含み、入力ユニット４０３は、ユーザが候補結果から選択した絵文字を入力領域に入力することに用いられる。
本実施例のいくつかの代替的な実現方式では、装置４００は更に、音声情報に関連付けられた絵文字を候補結果とする前に、音声情報に対して音声認識を行い、音声情報に対応する文を取得するための音声認識ユニット（図示せず）と、ルールマッチング方式で文に対して意味認識を行い、ユーザの気持ちを表す気持ちタイプを含む意味認識結果を取得するための意味認識ユニット（図示せず）と、気持ちタイプに対応する絵文字を音声情報に関連付けられた絵文字とするための絵文字確定ユニット（図示せず）と、を備える。
本実施例のいくつかの代替的な実現方式では、装置４００は更に、複数の絵文字の、絵文字に対応する気持ちタイプを表す注釈情報を取得するための情報取得ユニット（図示せず）と、絵文字と注釈情報を用いてサンプルデータとし、ディープラーニングモデルをトレーニングするためのトレーニングユニット（図示せず）と、トレーニングされたディープラーニングモデルで大量の絵文字に対応する気持ちタイプを認識するための表情タイプ認識ユニット（図示せず）と、大量の絵文字と気持ちタイプとの対応関係を確立するための確立ユニットと、を備える。
本実施例のいくつかの代替的な実現方式では、装置４００は更に、ユーザによって入力された音声情報を受信する前に、複数のユーザの履歴入力情報を取得するための履歴入力情報取得ユニット（図示せず）と、意味に関連付けられた複数の音声情報を確定するための関連音声情報確定ユニット（図示せず）と、意味に関連付けられた複数の音声情報に対応する絵文字を集合するための絵文字集合ユニット（図示せず）と、絵文字から対応する入力回数が回数閾値よりも大きい絵文字を選択するための絵文字選択ユニット（図示せず）と、を備え、ここで、履歴入力情報は、履歴入力における入力された音声情報と、アプリケーションの入力領域に入力された絵文字とを含む。
本実施例のいくつかの代替的な実現方式では、装置４００は更に、入力方法でユーザによって入力された音声情報を受信するための入力方式実行ユニット（図示せず）を備える。
図５は、本願の実施例を実現するための情報入力装置に適用されるコンピュータシステムを示す。
図５に示すように、コンピュータシステム５００は、読み出し専用メモリ（ＲＯＭ）５０２に記憶されているプログラムまたは記憶部５０８からランダムアクセスメモリ（ＲＡＭ）５０３にロードされたプログラムに基づいて様々な適当な動作および処理を実行することができる中央処理装置（ＣＰＵ）５０１を備える。ＲＡＭ５０３には、システム５００の操作に必要な様々なプログラムおよびデータがさらに記憶されている。ＣＰＵ５０１、ＲＯＭ５０２およびＲＡＭ５０３は、バス５０４を介して互いに接続されている。入力／出力（Ｉ／Ｏ）インターフェース５０５もバス５０４に接続されている。
キーボード、マウスなどを含む入力部５０６、陰極線管（ＣＲＴ）、液晶ディスプレイ（ＬＣＤ）など、およびスピーカなどを含む出力部５０７、ハードディスクなどを含む記憶部５０８、およびＬＡＮカード、モデムなどを含むネットワークインターフェースカードの通信部５０９は、Ｉ／Ｏインターフェース５０５に接続されている。通信部５０９は、例えばインターネットのようなネットワークを介して通信処理を実行する。ドライバ５１０は、必要に応じてＩ／Ｏインターフェース５０５に接続される。リムーバブルメディア５１１は、例えば、マグネチックディスク、光ディスク、光磁気ディスク、半導体メモリなどのようなものであり、必要に応じてドライバ５１０に取り付けられ、したがって、ドライバ５１０から読み出されたコンピュータプログラムが必要に応じて記憶部５０８にインストールされる。
特に、本願の実施例によれば、上記のフローチャートを参照しながら記載されたプロセスは、コンピュータのソフトウェアプログラムとして実現されてもよい。例えば、本願の実施例は、コンピュータプログラム製品を含み、当該コンピュータプログラム製品は、機械可読媒体に有形に具現化されるコンピュータプログラムを含み、前記コンピュータプログラムは、フローチャートで示される方法を実行するためのプログラムコードを含む。このような実施例では、当該コンピュータプログラムは、通信部５０９を介してネットワークからダウンロードされてインストールされてもよく、および／またはリムーバブルメディア５１１からインストールされてもよい。
図面におけるフローチャートおよびブロック図は、本願の各実施例に係るシステム、方法およびコンピュータプログラム製品により実現可能なアーキテクチャ、機能および操作を示す。ここで、フローチャートまたはブロック図における各枠は、１つのモジュール、プログラムセグメント、またはコードの一部を代表してもよく、前記モジュール、プログラムセグメント、またはコードの一部は、規定された論理機能を達成するための１つ以上の実行可能な命令を含む。なお、いくつかの代替実施態様として、枠に示された機能は、図面に示された順番と異なる順番で実行されてもよい。例えば、連続して示された２つの枠は、関連する機能に応じて、実際にほぼ並行に実行されてもよく、逆の順番で実行されてもよい。なお、ブロック図および／またはフローチャートにおける各枠と、ブロック図および／またはフローチャートにおける枠の組合せは、規定された機能または操作を実行する、ハードウェアに基づく専用システムで実現されてもよく、あるいは、専用ハードウェアとコンピュータの命令との組合せで実行されてもよい。
一方、本願は、不揮発性コンピュータ記憶媒体をさらに提供し、当該不揮発性コンピュータ記憶媒体は、上記した実施例の前記装置に含まれる不揮発性コンピュータ記憶媒体であってもよく、独立に存在して端末に組み立てられていない不揮発性コンピュータ記憶媒体であってもよい。前記不揮発性コンピュータ記憶媒体は、１つ以上のプログラムが記憶され、前記１つ以上のプログラムが１つの機器により実行された場合に、上記した機器に以下の通りにさせ、すなわち、ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信し、前記音声情報に関連付けられた絵文字を候補結果とし、前記ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力し、ここで、前記絵文字は、複数のユーザが前記音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む。
以上の記載は、本願の好ましい実施例、および使用された技術的原理の説明に過ぎない。本願に係る特許請求の範囲が、上記した技術的特徴の特定な組合せからなる技術案に限定されることではなく、本願の趣旨を逸脱しない範囲で、上記の技術的特徴または同等の特徴の任意の組合せからなる他の技術案も含むべきであることを、当業者は理解すべきである。例えば、上記の特徴と、本願に開示された類似の機能を持っている技術的特徴（これらに限定されていない）とを互いに置き換えてなる技術案が挙げられる。

Claims (10)

  1. ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信するステップと、
    前記音声情報に関連付けられた絵文字を候補結果とするステップと、
    前記ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力するステップと、を含み、
    ここで、前記絵文字は、複数のユーザが前記音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む
    ことを特徴とする情報入力方法。
  2. 前記音声情報に関連付けられた絵文字を候補結果とする前に、
    前記音声情報に対して音声認識を行い、音声情報に対応する文を取得するステップと、
    ルールマッチング方式で前記文に対して意味認識を行い、ユーザの気持ちを表す気持ちタイプを含む意味認識結果を取得するステップと、
    前記気持ちタイプに対応する絵文字を前記音声情報に関連付けられた絵文字とするステップと、を更に含む
    ことを特徴とする請求項１に記載の方法。
  3. 複数の絵文字の、絵文字に対応する気持ちタイプを表す注釈情報を取得するステップと、
    前記絵文字と前記注釈情報を用いてサンプルデータとし、ディープラーニングモデルをトレーニングするステップと、
    トレーニングされたディープラーニングモデルで大量の絵文字に対応する気持ちタイプを認識するステップと、
    大量の絵文字と気持ちタイプとの対応関係を確立するステップと、を更に含む
    ことを特徴とする請求項２に記載の方法。
  4. ユーザによって入力された音声情報を受信する前に、
    複数のユーザの履歴入力情報を取得するステップと、
    意味に関連付けられた複数の音声情報を確定するステップと、
    意味に関連付けられた複数の音声情報に対応する絵文字を集合するステップと、
    前記絵文字から対応する入力回数が回数閾値よりも大きい絵文字を選択するステップと、を更に含み、
    ここで、前記履歴入力情報は、履歴入力における入力された音声情報と、アプリケーションの入力領域に入力された絵文字とを含む
    ことを特徴とする請求項３に記載の方法。
  5. 前記のユーザによって入力された音声情報を受信するステップにおいては、
    入力方式でユーザによって入力された音声情報を受信するステップを含む
    ことを特徴とする請求項４に記載の方法。
  6. ユーザによって入力された、アプリケーションの入力領域に入力されるべきコンテンツに関連付けられた音声情報を受信するように配置されている受信ユニットと、
    前記音声情報に関連付けられた絵文字を候補結果とするように配置されている選択ユニットと、
    前記ユーザが候補結果から選択した絵文字をアプリケーションの入力領域に入力するように配置されている入力ユニットと、を備え、
    ここで、前記絵文字は、複数のユーザが前記音声情報の意味に関連付けられた音声情報を入力する履歴入力における、アプリケーションの入力領域への入力の回数が回数閾値よりも大きい絵文字を含む
    ことを特徴とする情報入力装置。
  7. 前記音声情報に関連付けられた絵文字を候補結果とする前に、前記音声情報に対して音声認識を行い、音声情報に対応する文を取得するように配置されている音声認識ユニットと、
    ルールマッチング方式で前記文に対して意味認識を行い、ユーザの気持ちを表す気持ちタイプを含む意味認識結果を取得するように配置されている意味認識ユニットと、
    前記気持ちタイプに対応する絵文字を前記音声情報に関連付けられた絵文字とするように配置されている絵文字確定ユニットと、を更に備える
    ことを特徴とする請求項６に記載の装置。
  8. 複数の絵文字の、絵文字に対応する気持ちタイプを表す注釈情報を取得するように配置されている情報取得ユニットと、
    前記絵文字と前記注釈情報を用いてサンプルデータとし、ディープラーニングモデルをトレーニングするように配置されているトレーニングユニットと、
    トレーニングされたディープラーニングモデルで大量の絵文字に対応する気持ちタイプを認識するように配置されている表情タイプ認識ユニットと、
    大量の絵文字と気持ちタイプとの対応関係を確立するように配置されている確立ユニットと、を更に備える
    ことを特徴とする請求項７に記載の装置。
  9. ユーザによって入力された音声情報を受信する前に、複数のユーザの履歴入力情報を取得するように配置されている履歴入力情報取得ユニットと、
    意味に関連付けられた複数の音声情報を確定するように配置されている関連音声情報確定ユニットと、
    意味に関連付けられた複数の音声情報に対応する絵文字を集合するように配置されている絵文字集合ユニットと、
    前記絵文字から対応する入力回数が回数閾値よりも大きい絵文字を選択するように配置されている絵文字選択ユニットと、を更に備え、
    ここで、前記履歴入力情報は、履歴入力における入力された音声情報と、アプリケーションの入力領域に入力された絵文字とを含む
    ことを特徴とする請求項８に記載の装置。
  10. 入力方式でユーザによって入力された音声情報を受信するように配置されている入力方式実行ユニットを更に備える
    ことを特徴とする請求項９に記載の装置。
JP2017023271A 2016-08-30 2017-02-10 情報入力方法および装置 Active JP6718828B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201610770021.0A CN106372059B (zh) 2016-08-30 2016-08-30 信息输入方法和装置
CN201610770021.0 2016-08-30

Publications (2)

Publication Number Publication Date
JP2018036621A true JP2018036621A (ja) 2018-03-08
JP6718828B2 JP6718828B2 (ja) 2020-07-08

Family

ID=57902432

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017023271A Active JP6718828B2 (ja) 2016-08-30 2017-02-10 情報入力方法および装置

Country Status (5)

Country Link
US (1) US10210865B2 (ja)
EP (1) EP3291224A1 (ja)
JP (1) JP6718828B2 (ja)
KR (1) KR101909807B1 (ja)
CN (1) CN106372059B (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102310587B1 (ko) * 2021-02-10 2021-10-13 주식회사 인피닉 연속된 이미지들에 대한 스켈레톤 데이터 생성 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램
KR102310588B1 (ko) * 2021-02-10 2021-10-13 주식회사 인피닉 인공지능 학습을 위한 스켈레톤 데이터 생성 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램
KR102343036B1 (ko) * 2021-02-10 2021-12-24 주식회사 인피닉 작업 가이드를 제공할 수 있는 어노테이션 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10057358B2 (en) * 2016-12-09 2018-08-21 Paypal, Inc. Identifying and mapping emojis
CN106873800A (zh) * 2017-02-20 2017-06-20 北京百度网讯科技有限公司 信息输出方法和装置
CN106888158B (zh) * 2017-02-28 2020-07-03 天翼爱动漫文化传媒有限公司 一种即时通信方法和装置
CN106886606A (zh) * 2017-03-21 2017-06-23 联想(北京)有限公司 用于根据用户语音推荐表情的方法和系统
CN109213332B (zh) * 2017-06-29 2022-11-08 北京搜狗科技发展有限公司 一种表情图片的输入方法和装置
CN107153496B (zh) 2017-07-04 2020-04-28 北京百度网讯科技有限公司 用于输入表情图标的方法和装置
CN110019885B (zh) * 2017-08-01 2021-10-15 北京搜狗科技发展有限公司 一种表情数据推荐方法及装置
CN107450746A (zh) * 2017-08-18 2017-12-08 联想(北京)有限公司 一种表情符号的插入方法、装置和电子设备
CN107479723B (zh) * 2017-08-18 2021-01-15 联想(北京)有限公司 一种表情符号的插入方法、装置和电子设备
CN107609092B (zh) * 2017-09-08 2021-03-09 北京百度网讯科技有限公司 智能应答方法和装置
CN109814730B (zh) * 2017-11-20 2023-09-12 北京搜狗科技发展有限公司 输入方法和装置、用于输入的装置
CN108335226A (zh) * 2018-02-08 2018-07-27 江苏省农业科学院 农业种质资源信息实时智能采集系统
US11310176B2 (en) 2018-04-13 2022-04-19 Snap Inc. Content suggestion system
CN108733651A (zh) * 2018-05-17 2018-11-02 新华网股份有限公司 表情符号预测方法及模型构建方法、装置、终端
CN109033423A (zh) * 2018-08-10 2018-12-18 北京搜狗科技发展有限公司 同传字幕显示方法及装置、智能会议方法、装置及系统
CN110910898B (zh) * 2018-09-15 2022-12-30 华为技术有限公司 一种语音信息处理的方法和装置
CN109525725B (zh) * 2018-11-21 2021-01-15 三星电子（中国）研发中心 一种基于情绪状态的信息处理方法和装置
CN109683726B (zh) * 2018-12-25 2022-08-05 北京微播视界科技有限公司 字符输入方法、装置、电子设备及存储介质
CN109697290B (zh) * 2018-12-29 2023-07-25 咪咕数字传媒有限公司 一种信息处理方法、设备及计算机存储介质
CN111489131A (zh) * 2019-01-25 2020-08-04 北京搜狗科技发展有限公司 一种信息推荐方法及装置
US20220121817A1 (en) * 2019-02-14 2022-04-21 Sony Group Corporation Information processing device, information processing method, and information processing program
CN110149549B (zh) * 2019-02-26 2022-09-13 腾讯科技（深圳）有限公司 信息的显示方法及装置
KR102381737B1 (ko) * 2019-03-22 2022-03-31 박정길 보이스 이모티콘 편집 방법 및 보이스 이모티콘 편집 방법을 실행시키는 프로그램이 기록된 기록 매체
US11335360B2 (en) * 2019-09-21 2022-05-17 Lenovo (Singapore) Pte. Ltd. Techniques to enhance transcript of speech with indications of speaker emotion
CN113051427A (zh) * 2019-12-10 2021-06-29 华为技术有限公司 一种表情制作方法和装置
CN112148133B (zh) * 2020-09-10 2024-01-23 北京百度网讯科技有限公司 确定推荐表情的方法、装置、设备和计算机存储介质
CN113297359B (zh) * 2021-04-23 2023-11-28 阿里巴巴新加坡控股有限公司 交互信息的方法以及装置
KR20230033208A (ko) * 2021-08-30 2023-03-08 박정훈 반려동물 이미지에서 학습한 표정을 이용한 커뮤니케이션 서비스 시스템 및 방법
US11657558B2 (en) * 2021-09-16 2023-05-23 International Business Machines Corporation Context-based personalized communication presentation
WO2023141887A1 (zh) * 2022-01-27 2023-08-03 Oppo广东移动通信有限公司 语义通信的传输方法、终端设备
CN115641837A (zh) * 2022-12-22 2023-01-24 北京资采信息技术有限公司 一种智能机器人对话意图识别方法和系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003129711A (ja) * 2001-10-26 2003-05-08 Matsushita Electric Works Ltd 電気錠制御装置
JP2006048352A (ja) * 2004-08-04 2006-02-16 Matsushita Electric Ind Co Ltd キャラクタ映像表示機能付き通信端末およびその制御方法
JP2007003669A (ja) * 2005-06-22 2007-01-11 Murata Mach Ltd 文書作成装置
JP2008129711A (ja) * 2006-11-17 2008-06-05 Sky Kk 入力文字変換システム
JP2009277015A (ja) * 2008-05-14 2009-11-26 Fujitsu Ltd 入力支援プログラム、入力支援装置および入力支援方法
WO2016002251A1 (ja) * 2014-06-30 2016-01-07 クラリオン株式会社 情報処理システム、及び、車載装置
JP2016036500A (ja) * 2014-08-07 2016-03-22 シャープ株式会社 音声出力装置、ネットワークシステム、音声出力方法、および音声出力プログラム

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7983910B2 (en) * 2006-03-03 2011-07-19 International Business Machines Corporation Communicating across voice and text channels with emotion preservation
KR100902861B1 (ko) * 2007-11-20 2009-06-16 경원대학교 산학협력단 수신된 문자메시지를 아바타에 의하여 음성으로 출력하는이동통신단말기 및 그 제어방법
KR100941598B1 (ko) * 2007-11-27 2010-02-11 (주)씨앤에스 테크놀로지 감정적 콘텐츠 효과를 포함하는 전화 통신 서비스를제공하는 ＶｏＩＰ 전화 통신 시스템 및 방법
CN100570545C (zh) * 2007-12-17 2009-12-16 腾讯科技（深圳）有限公司 表情输入方法及装置
US8756527B2 (en) * 2008-01-18 2014-06-17 Rpx Corporation Method, apparatus and computer program product for providing a word input mechanism
US8351581B2 (en) * 2008-12-19 2013-01-08 At&T Mobility Ii Llc Systems and methods for intelligent call transcription
US9015033B2 (en) * 2010-10-26 2015-04-21 At&T Intellectual Property I, L.P. Method and apparatus for detecting a sentiment of short messages
WO2012147274A1 (ja) * 2011-04-26 2012-11-01 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 入力補助装置、入力補助方法及びプログラム
WO2013089668A2 (en) * 2011-12-12 2013-06-20 Empire Technology Development Llc Content-based automatic input protocol selection
KR20130069263A (ko) * 2011-12-18 2013-06-26 인포뱅크 주식회사 정보처리 방법 및 시스템과 기록매체
WO2013094982A1 (ko) 2011-12-18 2013-06-27 인포뱅크 주식회사 정보처리 방법 및 시스템과 기록매체
US20130159919A1 (en) * 2011-12-19 2013-06-20 Gabriel Leydon Systems and Methods for Identifying and Suggesting Emoticons
US20140108308A1 (en) * 2012-07-13 2014-04-17 Social Data Technologies, LLC System and method for combining data for identifying compatibility
US20150100537A1 (en) * 2013-10-03 2015-04-09 Microsoft Corporation Emoji for Text Predictions
US20150262238A1 (en) * 2014-03-17 2015-09-17 Adobe Systems Incorporated Techniques for Topic Extraction Using Targeted Message Characteristics
CN104076944B (zh) * 2014-06-06 2017-03-01 北京搜狗科技发展有限公司 一种聊天表情输入的方法和装置
CN104298429B (zh) * 2014-09-25 2018-05-04 北京搜狗科技发展有限公司 一种基于输入的信息展示方法和输入法系统
US10924444B2 (en) * 2014-12-02 2021-02-16 Facebook, Inc. Device, method, and graphical user interface for managing customer relationships using a lightweight messaging platform
KR101733011B1 (ko) * 2015-06-18 2017-05-08 라인 가부시키가이샤 소셜 네트워크 서비스 기반 추천 정보 제공 장치 및 이를 이용한 방법
US20180077095A1 (en) * 2015-09-14 2018-03-15 X Development Llc Augmentation of Communications with Emotional Data
US10157224B2 (en) * 2016-02-03 2018-12-18 Facebook, Inc. Quotations-modules on online social networks

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003129711A (ja) * 2001-10-26 2003-05-08 Matsushita Electric Works Ltd 電気錠制御装置
JP2006048352A (ja) * 2004-08-04 2006-02-16 Matsushita Electric Ind Co Ltd キャラクタ映像表示機能付き通信端末およびその制御方法
JP2007003669A (ja) * 2005-06-22 2007-01-11 Murata Mach Ltd 文書作成装置
JP2008129711A (ja) * 2006-11-17 2008-06-05 Sky Kk 入力文字変換システム
JP2009277015A (ja) * 2008-05-14 2009-11-26 Fujitsu Ltd 入力支援プログラム、入力支援装置および入力支援方法
WO2016002251A1 (ja) * 2014-06-30 2016-01-07 クラリオン株式会社 情報処理システム、及び、車載装置
JP2016036500A (ja) * 2014-08-07 2016-03-22 シャープ株式会社 音声出力装置、ネットワークシステム、音声出力方法、および音声出力プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
中村 純平: "対話システムにおける顔文字の学習", 情報処理学会研究報告, vol. 第2003巻, JPN6018013349, 7 March 2003 (2003-03-07), JP, pages 169 - 176, ISSN: 0004174694 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102310587B1 (ko) * 2021-02-10 2021-10-13 주식회사 인피닉 연속된 이미지들에 대한 스켈레톤 데이터 생성 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램
KR102310588B1 (ko) * 2021-02-10 2021-10-13 주식회사 인피닉 인공지능 학습을 위한 스켈레톤 데이터 생성 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램
KR102343036B1 (ko) * 2021-02-10 2021-12-24 주식회사 인피닉 작업 가이드를 제공할 수 있는 어노테이션 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램

Also Published As

Publication number Publication date
KR20180025121A (ko) 2018-03-08
CN106372059A (zh) 2017-02-01
US10210865B2 (en) 2019-02-19
EP3291224A1 (en) 2018-03-07
US20180061407A1 (en) 2018-03-01
JP6718828B2 (ja) 2020-07-08
KR101909807B1 (ko) 2018-10-18
CN106372059B (zh) 2018-09-11

Similar Documents

Publication Publication Date Title
JP2018036621A (ja) 情報入力方法および装置
JP7127106B2 (ja) 質問応答処理、言語モデルの訓練方法、装置、機器および記憶媒体
US10521189B1 (en) Voice assistant with user data context
CN110969012B (zh) 文本纠错方法、装置、存储介质及电子设备
US20240107127A1 (en) Video display method and apparatus, video processing method, apparatus, and system, device, and medium
JP2019003604A (ja) ビデオベースの通信におけるコンテンツキュレーションのための方法、システム及びプログラム
WO2017186050A1 (zh) 人机智能问答系统的断句识别方法和装置
CN110674241B (zh) 地图播报的管理方法、装置、电子设备和存储介质
CN106601254A (zh) 信息输入方法和装置及计算设备
CN109933217B (zh) 用于推送语句的方法和装置
EP3506256A1 (en) Information processing device and information processing method
WO2020181783A1 (zh) 用于发送信息的方法和装置
KR20190001895A (ko) 문자 입력 방법 및 장치
WO2021068493A1 (zh) 用于处理信息的方法和装置
CN110096701A (zh) 消息转换处理方法、装置、存储介质及电子设备
CN112532507B (zh) 用于呈现表情图像、用于发送表情图像的方法和设备
CN116521841A (zh) 用于生成回复信息的方法、装置、设备及介质
CN114357278A (zh) 一种话题推荐方法、装置及设备
CN112182255A (zh) 用于存储媒体文件和用于检索媒体文件的方法和装置
CN113302628A (zh) 利用领域知识微移神经会话式模型
CN116501960B (zh) 内容检索方法、装置、设备及介质
CN113542797A (zh) 视频播放中的互动方法、装置及计算机可读存储介质
CN111353070A (zh) 视频标题的处理方法、装置、电子设备及可读存储介质
KR20190134080A (ko) 채팅 서비스 제공 장치
KR20200073502A (ko) 채팅 서비스 제공 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180417

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190129

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191024

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20191101

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20191213

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200615

R150 Certificate of patent or registration of utility model

Ref document number: 6718828

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250