JP7026020B2 - 音声対話方法、装置、端末、サーバ、可読記憶媒体及びプログラム - Google Patents

音声対話方法、装置、端末、サーバ、可読記憶媒体及びプログラム Download PDF

Info

Publication number
JP7026020B2
JP7026020B2 JP2018145053A JP2018145053A JP7026020B2 JP 7026020 B2 JP7026020 B2 JP 7026020B2 JP 2018145053 A JP2018145053 A JP 2018145053A JP 2018145053 A JP2018145053 A JP 2018145053A JP 7026020 B2 JP7026020 B2 JP 7026020B2
Authority
JP
Japan
Prior art keywords
notification information
user
control
server
control target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018145053A
Other languages
English (en)
Other versions
JP2019091006A (ja
Inventor
ザン,ゾンチー
ウォン,ティアン
Original Assignee
バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド
シャンハイ シャオドゥ テクノロジー カンパニー リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド, シャンハイ シャオドゥ テクノロジー カンパニー リミテッド filed Critical バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド
Publication of JP2019091006A publication Critical patent/JP2019091006A/ja
Application granted granted Critical
Publication of JP7026020B2 publication Critical patent/JP7026020B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/1815Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • G10L17/22Interactive procedures; Man-machine interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Description

本発明は、音声対話技術分野に関し、特に音声対話方法、装置、端末、サーバ可読記憶媒体及びプログラムに関する。
現在、音声対話という対話方式は、次第に人間とコンピュータとの対話の主流となる。音声対話の操作システムも人々の生活に登場し、例えば、様々な音声アシスタント等。音声対話の操作システムが搭載されているスマートデバイスは、音声を使用して所要な情報を便利に取得できる。しかしながら、現在の音声対話の操作システムは、音声対話シーンで、ユーザが各サービスによってプッシュされた通知情報を積極的に取得又は削除するには、音声対話シーンを終了する必要があり、そうしなければ、図形化のインタフェースで取得又は削除することができない。操作が複雑で、音声対話シーンでのユーザエクスペリエンスを低下してしまって、使用が便利ではなくて、ユーザエクスペリエンスが悪いという技術課題が存在する。
本発明実施例は、音声対話方法、装置、端末、サーバ及び可読記憶媒体を提供し、背景技術における上記の技術課題を少なくとも解決する。
第1の態様よれば、本発明実施例は、
ユーザの音声により、ユーザの制御対象と制御意図を取得するステップと、
制御対象がサーバに予め記憶されたユーザの選択可能な通知情報に属するか否かを判断するステップと、
音声対話シーンで、制御対象がユーザの選択可能な通知情報に属する場合、サーバが制御対象に対して前記制御意図に対応する制御を実行するステップと、を含み、
ユーザの選択可能な通知情報は、サーバに予め記憶されて、ユーザに対するプリセットルールを有する通知情報である音声対話方法を提供する。
第2の態様によれば、本発明実施例は、
通知情報を記憶する記憶モジュールと、
ユーザの音声により、ユーザの制御対象と制御意図を取得する取得モジュールと、
音声対話シーンで、制御対象がサーバに予め記憶されたユーザの選択可能な通知情報に属するか否かを判断し、制御対象がユーザの選択可能な通知情報に属する場合、サーバが制御対象に対して前記制御意図に対応する制御を実行する制御モジュールと、を備え、
ユーザの選択可能な通知情報は、サーバに予め記憶されて、ユーザに対するプリセットルールを有する通知情報である音声対話装置を提供する。
第3の態様によれば、本発明実施例は、
1つ又は複数のプロセッサと、
1つ又は複数のプログラムを記憶する記憶装置と、を備え、
前記1つ又は複数のプログラムが前記1つ又は複数のプロセッサにより実行される場合、前記1つ又は複数のプロセッサに第1の態様の何れかに記載の方法を実現させる端末を提供する。
第4の態様によれば、本発明実施例は、
1つ又は複数のプロセッサと、
1つ又は複数のプログラム、及び通知情報を記憶する記憶装置と、を備え、
前記1つ又は複数のプログラムが前記1つ又は複数のプロセッサにより実行される場合、前記1つ又は複数のプロセッサに第1の態様の何れかに記載の方法を実行させるサーバを提供する。
第5の態様によれば、コンピュータプログラムを記憶し、該プログラムがプロセッサにより実行される場合、第1の態様の何れかに記載の方法を実現するコンピュータ可読記憶媒体を提供する。
前記技術案のうちの1つの技術案は、ユーザの制御対象と制御意図に基づいて、制御対象がユーザの選択可能な通知情報に属する場合、サーバが制御対象に対して前記制御意図に対応する制御を実行し;制御対象がユーザの選択可能な通知情報に属することに対するユーザの制御の効率が高まられ、音声対話シーンで音声対話によって実現できる制御タイプを拡大し、音声対話シーンでのユーザエクスペリエンスを向上するというメリット又は有益な効果を有する。
前記技術案のうちの別の技術案は、制御モジュールが制御対象に対して制御意図に対応する操作を行い、即ち、音声対話シーンでユーザが音声によって制御対象の選定した通知情報を制御することを実現し、本発明の実施例における音声対話装置のユーザが制御対象の選定した通知情報に対する制御の効率が高まられ、音声対話シーンで音声対話によって実現できる制御タイプを更に拡大し、音声対話シーンでのユーザエクスペリエンスを向上するというメリット又は有益な効果を有する。
上記概要は、明細書の目的のために説明されたが、何らかの形態で本発明を限定するものではない。上記例示的な態様、実施形態及び特徴に加えて、図面及び以下の詳細な説明を参照することによって、本発明のさらなる態様、実施形態及び特徴は分かりやすくなる。
図面において、特に断らない限り、複数の図面を通して同一符号は同一又は類似の部材又は要素を示す。これらの図面は必ずしも縮尺で描かれたものではない。なお、これらの図面は本発明に開示された幾つかの実施形態のみを示し、本発明の範囲を限定するものではない。
本発明の実施例1の音声対話方法のフロー図である。 本発明実施例5の音声対話方法におけるサーバの記憶装置の略図である。 本発明実施例6の音声対話装置の略図である。 本発明実施例11の端末の略図である。 本発明実施例12のサーバの略図である。
以下では、幾つかの例示的な実施例のみを簡単に説明する。当業者であれば、本発明の趣旨又は範囲を逸脱せずに、説明した実施例に様々な変更を施すことができると理解できる。従って、図面と説明は本質的に例示的であり、限定的ではないとみなされるべきである。
実施例1
本発明実施例1は、音声対話での通知情報制御方法を提供し、図1に示すように、以下のステップを含む。
ステップS100では、ユーザの音声により、ユーザの制御対象と制御意図を取得する。
本発明実施例の1つの例において、ユーザの音声は、ユーザの音声データを取得できる端末により取得され、端末は、スマートフォン、タブレット、スマートロボット等の設備を含むが、これらに限られない、多種音声識別技術を使用してユーザの音声を解析して、ユーザの制御対象と制御意図を取得し、選択可能な方式として、ユーザの音声をクラウドサーバにアップロードして解析してもよい、解析した後の結果によってユーザのニーズを取得し、元に取得したユーザの音声データを処理してクラウドサーバにアップロードするデータの大きさを減少してもよい。
ステップS200では、制御対象がサーバに予め記憶されたユーザの選択可能な通知情報に属するか否かを判断し、サーバがクラウドサーバであってもよい。
ステップS300では、音声対話シーンで、制御対象がユーザの選択可能な通知情報に属する場合、サーバは制御対象に対して前記制御意図に対応する制御を実行する。
ここで、ユーザの選択可能な通知情報は、サーバに予め記憶されて、ユーザに対するプリセットルールを有する通知情報である。
本発明実施例における音声対話方法は、ユーザの制御対象と制御意図に基づいて、制御対象がユーザの選択可能な通知情報に属する場合、サーバは制御対象に対して前記制御意図に対応する制御を実行し;制御対象がユーザの選択可能な通知情報に属することに対するユーザの制御の効率が高まられ、音声対話シーンで音声対話によって実現できる制御タイプを拡大し、音声対話シーンでのユーザエクスペリエンスを向上する。
本発明実施例のうちの1つの例として、ユーザの選択可能な通知情報は、プッシュ対象がユーザである通知情報になる。この例において、ユーザの音声が「私の通知情報があるか」であれば、取得したユーザの制御対象がユーザの未読通知情報であり、制御意図が取得することである。ユーザの音声が「アラームを作成する」であれば、取得したユーザの制御対象が目覚し時計であり、目覚し時計がユーザの選択可能な通知情報ではないので、本発明実施例の音声方法を適用しない。
本発明実施例の別の例として、ユーザは親であり、ユーザとプリセット関連を有する他のユーザは、例えば、子であり、ユーザの選択可能な通知情報は、プッシュ対象が自分であり、及びプッシュ対象がこの子であるという通知情報を含む。この例において、ユーザの音声が「〇〇〇(この子)の通知情報があるか」であれば、ユーザの制御対象がこの子であるという未読通知情報を取得し、制御意図が取得することである。
実施例2
本発明実施例2は、本発明実施例1に基づき、ユーザの制御意図が取得することである。
サーバが制御対象に対して前記制御意図に対応する制御を実行するのは、
制御意図が取得することであるか否かを判断するステップと、
前記制御意図が取得することである場合、サーバは制御対象の選定した通知情報を再生データに形成してユーザの使用する端末に送信するステップと、を含み、
前記再生データは、ユーザの使用する端末が音声対話シーンでサポートする再生フォーマットのデータを含み、制御対象の選定した通知情報が制御対象に係る通知情報である。
本発明実施例における音声対話方法は、前記制御意図が取得することである場合、サーバが、制御対象に基づいて再生データを形成してユーザの使用する端末に送信し、即ち、音声対話シーンで音声によってユーザが制御対象の選定した通知情報に対して取得することを実現し、ユーザが制御対象の選定した通知情報を取得する効率が高まられ、音声対話シーンで音声対話によって実現できる操作タイプを更に拡大し、音声対話シーンでのユーザエクスペリエンスを向上する。
サーバに予め記憶された通知情報の形式はさまざまであり、テキスト、オーディオ、画像等、及び前記幾つかの形式の組み合わせであってもよい。
ユーザの使用する端末は、音声対話シーンで再生フォーマットをサポートすることは制限され、例えば、オーディオと画像フォーマットのファイルを再生でき、テキストフォーマットのファイルを再生できない。この場合、制御対象の中に何れかの通知情報がテキスト、オーディオ、及び画像を含めば、サーバがテキストを処理してテキストに対応するオーディオを形成する。即ち、サーバは該通知情報を処理し、従来のオーディオ、従来の画像、及びテキストに対応するオーディオを含む再生データを形成する。つまり、サーバは、制御対象における各通知情報を再生データに形成するのは、少なくとも以下のステップを含む。
サーバは、通知情報におけるテキストを処理してテキストに対応するオーディオに形成する。
また、例えば、ユーザの使用する端末が音声対話シーンでサポートする再生ファーマットは、再生可能な特定フォーマットのオーディオである。この場合、制御対象におけるある通知情報は、他のフォーマットのオーディオを含めば、サーバは他のフォーマットのオーディオを処理して、元のオーディオに対応する特定フォーマットのオーディオを形成する。即ち、サーバは、制御対象における通知情報を処理して、元のオーディオに対応する特定フォーマットのオーディオを含む通知情報の再生データを形成する。つまり、サーバは、通知情報の再生データを形成するのは、少なくとも以下のステップを含む。
サーバは、通知情報におけるユーザの使用する端末が音声対話シーンでサポートしない再生フォーマットを処理して、音声対話シーンでサポートされる再生フォーマットを形成し、前記制御対象における通知情報に基づいて再生データを形成する。
サーバは再生データをユーザの使用する端末に送信した後、プリセット再生ルールによってユーザの使用する端末での再生を制御する必要がある。
プリセット再生ルールは、異なるタイプの通知情報に対して、異なる再生ルールを設置することができる。例えば、あるタイプの通知情報に対して、該タイプの通知情報の再生データをユーザの使用する端末に送信した後、直ちに再生するように設置することができ、例えば、天気予報等。例えば、別のタイプの通知情報に対して、該タイプの通知情報の再生データをユーザの使用する端末に送信した後、ユーザが更に対話しなければ再生できないように設置してもよい。対話が手動による対話であってもよいし、音声による対話であってもよい、例えば、データが大きいビデオクリップ等でもよい。
更に、ユーザの使用する端末で通知情報の再生データを再生する場合、ユーザの音声により取得されたユーザの制御対象の選定した通知情報が変更すれば、サーバが変更後の制御対象の選定した通知情報を再生データに形成してユーザの使用する端末に送信する。つまり、ある通知情報の再生データを再生する時に、音声対話によって別の制御対象の選定した通知情報を取得することを実現できる。
1つの例において、例えば、ユーザの使用する端末で天気予報を再生する時に、ユーザが天気予報を聞きたくない場合、「前へ」、「次へ」、「最後へ」等を使用して、ユーザが変更後の制御対象の選定した通知情報を取得することを実現できる。
実施例3
本発明実施例3は、本発明実施例1に基づき、ユーザの制御意図が削除することである。
サーバが制御対象に対して前記制御意図に対応する制御を実行するのは以下のステップを含む。
制御意図が削除することであるか否かを判断し、
前記制御意図が削除することである場合、サーバが制御対象の選定した通知情報を前記サーバから削除する。
本発明実施例における音声対話での通知情報制御方法は、ユーザのニーズが制御対象の選定した通知情報を削除することである場合、サーバは制御対象の選定した通知情報を削除して通知情報を削除することを実現し、即ち、音声対話シーンで音声によってユーザが制御対象の選定した通知情報を削除することを実現し、ユーザが制御対象の選定した通知情報を削除する効率が高まられ、音声対話シーンで音声対話によって実現できる操作タイプを更に拡大し、音声対話シーンでのユーザエクスペリエンスを向上する。
実施例4
本発明実施例4は、本発明実施例2と本発明実施例3との組み合わせであり、詳細な説明を控える。
実施例5
本発明実施例5は本発明実施例1~4に基づき、各ユーザの選択可能な通知情報に対して更に限定する。
各ユーザの選択可能な通知情報は、プッシュ対象がユーザである通知情報、及び/又はプッシュ対象がユーザとプリセット関連を有する他のユーザである通知情報を含む。
ユーザの選択可能な通知情報のプッシュ対象が自分であり、及び自分とプリセット関連を有する他のユーザである通知情報であれば、例えば、親としてのユーザが選択できる通知情報は、プッシュ対象が自分である通知情報、及びプッシュ対象が自分の後見する未成年者であるというユーザの通知情報である。当然、後見人ユーザと後見される未成年者ユーザとの間にプリセット関連を作らなければならない。
1つの例において、前述した選択可能な通知情報は、プッシュ対象がユーザである通知情報である場合、
ユーザの音声データが「Aサービスの通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザであるというAサービスの未読通知情報であり、
ユーザの音声データが「昨日の通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザであるという昨日の未読通知情報であり、
ユーザの音声データが「通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザであるという全ての未読通知情報であり、
ユーザの音声データが「既読通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザである全ての既読の通知情報である。
通知情報がサーバに記憶される方式は複数があり、1つの選択可能な方式として、図2に示すように、前記サーバの記憶装置が、複数のユーザ記憶ユニット100、例えば、図2に示すユーザ1記憶ユニットとユーザ2記憶ユニットとを備え、前記ユーザ記憶ユニットは、複数のキューユニット110、例えば、図2に示すユーザ1記憶ユニットのキューユニットAとB、ユーザ2記憶ユニットのキューユニットAとCを備え、キューユニットは、未読通知情報キュー111と、既読通知情報キュー112と、例えば、図2に示すユーザ1記憶ユニットのキューユニットAのサービスAの既読通知情報キュー、サービスAの未読通知情報キュー、サービスBの既読通知情報キュー、サービスBの未読通知情報キューを備える。
ここで、1つのユーザ記憶ユニットは、プッシュ対象が同一のユーザである通知情報を記憶し、同一の記憶ユニットのうちの1つのキューユニットは、同一のユーザの同一のソースサービスの通知情報を記憶し、同一のキューユニットの未読情報キューと既読情報キューは、それぞれ同一のユーザの同一のソースサービスの未読通知情報及び既読通知情報を記憶する。
1つの例において、プリセット期間後、サーバが既読通知情報を自動的に削除するように設置してもよい。
実施例6
本発明実施例6は、図3に示すように、
通知情報を記憶する記憶モジュール210と、
ユーザの音声によりユーザの制御対象と制御意図を取得する取得モジュール220と、
音声対話シーンで、制御対象がサーバに予め記憶されて、ユーザの選択可能な通知情報に属するか否かを判断し、制御対象がユーザの選択可能な通知情報に属する場合、サーバが制御対象に対して前記制御意図に対応する制御を実行する制御モジュール230と、を備え、
ここで、ユーザの選択可能な通知情報は、サーバに予め記憶されて、ユーザに対するプリセットルールを有する通知情報である音声対話装置を提供する。
本発明実施例における音声対話装置は、通知情報を記憶する記憶モジュールと、ユーザの音声によりユーザの制御対象と制御意図を取得する取得モジュールと、音声対話シーンで、制御対象がサーバに予め記憶されて、ユーザの選択可能な通知情報に属するか否かを判断する制御モジュールとを備え、制御対象がユーザの選択可能な通知情報に属する場合、サーバは制御対象に対して前記制御意図に対応する制御を実行する。
このようにして、ユーザのニーズが制御対象を制御する場合、制御モジュールは、制御対象に対して制御意図に対応する操作を行い、即ち、音声対話シーンで、ユーザが音声によって制御対象の選定した通知情報を制御することを実現し、本発明実施例における音声対話装置のユーザが制御対象の選定した通知情報を制御する効率が高まられ、音声対話シーンで音声対話によって実現できる制御タイプを更に拡大し、音声対話シーンでのユーザエクスペリエンスを向上する。
実施例7
本発明実施例7は本発明実施例6との相違点が、再生モジュールを更に備えることにある。
本発明実施例7は再生モジュールを更に備える。
制御モジュールは、前記制御意図が取得することである場合、制御対象に基づき、再生データを形成して再生モジュールに送信するように更に設置され、
ここで、前記再生データは、再生モジュールが音声対話シーンで支持される再生フォーマットのデータを備え、制御対象の選定した通知情報は制御対象に係る通知情報である。
本発明実施例における音声対話装置は、ユーザのニーズが制御対象の選定した通知情報を取得する時に、制御モジュールが制御対象の選定した通知情報を再生データに形成して再生モジュールに送信し、即ち、音声対話シーンで音声によってユーザが制御対象の選定した通知情報を取得することを実現し、ユーザが制御対象の選定した通知情報を取得する効率が高まられ、音声対話シーンで音声対話によって実現できる操作タイプを更に拡大し、音声対話シーンでユーザエクスペリエンスを向上する。
記憶モジュールに予め記憶された通知情報の形式は様々であり、テキスト、オーディオ、画像等、及び上記幾つか形式の組み合わせであってもよい。
再生モジュールが音声対話シーンで再生フォーマットをサポートすることは制限され、例えば、オーディオと画像フォーマットのファイルを再生でき、テキストフォーマットのファイルを再生できない。この場合、制御対象の選定したある通知情報が、テキスト、オーディオ、及び画像を含めば、制御モジュールがテキストを処理してテキストに対応するオーディオを形成する。即ち、制御モジュールは、制御対象の選定したこの通知情報を処理して、従来のオーディオ、従来の画像、及びテキストに対応するオーディオを含む通知情報の再生データを形成する。つまり、制御モジュールは、少なくとも具体的に制御対象の選定した通知情報のうちのテキストを処理してテキストに対応するオーディオを形成するように設置される。
また、再生モジュールが音声対話シーンでサポートする再生フォーマットは、再生可能な特定フォーマットのオーディオである。この場合、制御対象の選定したある通知情報が、他のフォーマットのオーディオを含めば、制御モジュールは他のフォーマットのオーディオを処理して、従来のオーディオに対応する特定フォーマットのオーディオを形成し、即ち、制御モジュールは、制御対象の選定した該通知情報を処理して、元のオーディオに対応する特定フォーマットのオーディオを含む通知情報の再生データを形成する。言い換えれば、制御モジュールは、少なくとも具体的に制御対象の選定した通知情報における音声対話装置が音声対話シーンでサポートしない再生フォーマットを処理して、音声対話シーンでサポートする再生フォーマットを形成し、前記通知情報に基づいて再生データに形成する。
再生のプリセットルールは、異なるタイプの通知情報に対して異なる再生ルールを設置できる。例えば、あるタイプの通知情報に対して、該タイプの通知情報の再生データを再生モジュールに送信した後、直ちに再生するように設置することができ、例えば、天気予報等。例えば、別のタイプの通知情報に対して、該タイプの通知情報の再生データを再生モジュールに送信した後、ユーザが更に対話しなければ再生できないように設置してもよい、対話は手動による対話であってもよいし、音声による対話であってもよい、例えば、データが大きなビデオクリップ等でもよい。
更に、前記制御モジュールがある通知情報の再生データを再生する場合、ユーザのニーズが制御対象の選定した通知情報の変更であれば、変更後の制御対象の選定した通知情報を再生データに形成して前記再生モジュールに送信する。言い換えれば、ある通知情報のデータを再生する時に、音声対話によって別の通知情報を取得することを実現できる。
1つの例において、音声対話装置で天気予報を再生する場合、ユーザが天気予報を聞きたくない時に、「前へ」、「次へ」、「最後へ」等を使用して、ユーザが新たに選定した通知情報を取得することを実現できる。
実施例8
本発明実施例8が本発明実施例6との相違点は、制御モジュールの具体的な役割にある。
1つの例において、前記制御モジュールは、ユーザにより制御対象の選定した通知情報に対する制御操作が削除することである場合、制御対象の選定した通知情報を前記記憶モジュールから削除するように更に設置される。
本発明実施例における音声対話装置は、ユーザのニーズが制御対象の選定した通知情報を削除することである場合、制御モジュールは、制御対象の選定した通知情報を削除して制御対象の選定した通知情報の削除を実現し、即ち、音声対話装置が音声対話シーンで音声によってユーザにより制御対象の選定した通知情報を削除することを実現し、ユーザが制御対象の選定した通知情報を削除する効率が高まられ、音声対話シーンで音声対話によって実現できる操作タイプを更に拡大し、音声対話シーンでユーザエクスペリエンスを向上する。
実施例9
本発明実施例9は、本発明実施例7と本発明実施例8との組合せであり、詳細な説明を控える。
実施例10
本発明実施例10は本発明実施例6~9に基づき、各ユーザの選択可能な通知情報に対して更なる具体的な限定を行う。
各ユーザの選択可能な通知情報は、プッシュ対象がユーザである通知情報、及び/又はプッシュ対象がユーザとプリセット関連を有する他のユーザの通知情報を含む。
ユーザの選択可能な通知情報は、プッシュ対象が自分及び自分とプリセット関連を有する他のユーザである通知情報であり、例えば、親としてのユーザの選択可能な通知情報は、プッシュ対象が自分であって、及びプッシュ対象が自分の後見する未成年者のユーザである通知情報を含めば、当然、後見人ンユーザと後見される未成年者ユーザとの間にプリセット関連を作らなければならない。
1つの例において、前述した選択可能な通知情報は、プッシュ対象がユーザである通知情報である場合、
ユーザの音声データが「Aサービスの通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザであるというAサービスの未読通知情報であり、
ユーザの音声データが「昨日の通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザであるという昨日の未読通知情報であり、
ユーザの音声データが「通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザであるという全ての未読の通知情報であり、
ユーザの音声データは、「既読の通知情報」であれば、制御対象の選定した通知情報は、プッシュ対象がユーザである全ての既読の通知情報である。
記憶モジュールにおいて通知情報を記憶する方式は複数があり、1つの選択可能な方式として、記憶モジュールは、未読通知情報キューと既読通知情報キューとを有する複数のキューユニットを有する複数のユーザ記憶ユニットを備え、
ここで、ユーザ記憶ユニットは、プッシュ対象が同一のユーザである通知情報を記憶するように設置され、同一の記憶ユニットの1つのキューユニットが、同一のユーザの同一のソースサービスの通知情報を記憶するように設置され、同一のキューユニットの未読情報キューと既読情報キューが、それぞれ同一のユーザの同一のソースサービスの未読通知情報と既読通知情報を記憶するように設置される。
1つの例において、プリセット期間後、既読通知情報が自動に削除されるようにさらに設置してもよい。
実施例11
本発明実施例11は、図4に示すように、
1つ又は複数のプロセッサ310と、
1つ又は複数のプログラムを記憶する記憶装置320と、を備え、
前記1つ又は複数のプログラムが前記1つ又は複数のプロセッサにより実行される場合、前記1つ又は複数のプロセッサに本発明実施例1~5の何れかの項に記載の方法を実行させる端末を提供する。
実施例12
本発明実施例12は、図5に示すように、
1つ又は複数のプロセッサ410と、
1つ又は複数のプログラム及び通知情報を記憶する記憶装置420と、を備え、
前記1つ又は複数のプログラムが前記1つ又は複数のプロセッサにより実行される場合、前記1つ又は複数のプロセッサに本発明実施例1~5の何れかの項に記載の方法を実現させるサーバを提供する。
実施例13
本発明実施例12は、コンピュータプログラムを記憶し、該プログラムがプロセッサにより実行される場合、本発明の実施例1~5の何れかの項に記載の方法を実現するコンピュータ可読記憶媒体を提供する。
本明細書の説明において、「1つの実施例」、「幾つかの実施例」、「例」、「具体的な例」、又は「幾つかの例」等の記述は、該実施例又は例を参照して説明された具体的な特徴、構造、材料又は特性が本発明の少なくとも1つの実施例又は例に含まれることを意味する。さらに、説明された具体的な特徴、構造、材料又は特性はいずれか又は複数の実施例又は例において適宜な方式で組み合わせることができる。また、矛盾しない限り、当業者は本明細書に記載の異なる実施例又は例及び異なる実施例又は例の特徴を組み合わせることができる。
本発明の記載において、別途に明確で具体的な限定がない限り、「複数」の意味は2つ以上である。
フローチャートにおいて又はここでほかの形態で説明されたすべてのプロセス又は方法についての説明は、特定のロジック機能又はプロセスのステップを実現するための1つ又は複数の実行可能な命令を含むコードのモジュール、セグメント又は部分を示すと理解でき、且つ、当業者であれば、本発明の好適な実施形態の範囲は別の実現を含み、示された又は検討された順序にもかかわらず、係る機能に応じてほぼ同時に又は反対順序で機能を実行してもよいと理解できる。
フローチャートに示された又はここでほかの形態で説明されたロジック及び/又はステップは、例えば、ロジック機能を実現するための実行可能な命令のシーケンスリストとしてみなされてもよく、具体的には、命令実行システム、装置又は機器(例えば、コンピュータに基づくシステム、プロセッサを備えたシステム、又は命令実行システム、装置又は機器から命令を読み取って命令を実行するほかのシステム)の使用に供し、又はこれらの命令実行システム、装置又は機器と組み合わせて使用するように、任意のコンピュータ可読媒体に実現される。本明細書において、「コンピュータ可読媒体」は、命令実行システム、装置又は機器の使用に供し、又はこれらの命令実行システム、装置又は機器と組み合わせて使用するように、プログラムを具備、記憶、通信、伝播又は伝送できる装置である。
本発明実施例に記載されるコンピュータ可読媒体は、コンピュータ可読信号媒体、又はコンピュータ可読記憶媒体、又は前記両者の任意の組合せでもよい。コンピュータ可読媒体のより具体的な例(非網羅的なリスト)は、1つ又は複数の配線を有する電気接続部(電子装置)、ポータブルコンピュータディスクボックス(磁気装置)、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、消去可能プログラマブル読み取り専用メモリ(EPROM又はフラッシュメモリ)、ファイバ装置、及びポータブル読み取り専用メモリ(CDROM)を含む。また、コンピュータ可読媒体はさらに、前記プログラムを印刷可能な紙やほかの適切な媒体であってもよく、例えば紙やほかの媒体を光走査し、続いて編集、解釈し又は必要に応じてほかの適宜な形態で処理して前記プログラムを電子的に取得し、その後、コンピュータメモリに記憶する。
本発明の実施例では、コンピュータ可読信号媒体はベースバンドに伝播されるデータ信号又は搬送波の一部として伝播されるデータ信号を含んでもよいし、前記データ信号はコンピュータ可読プログラムコードを搭載する。このような伝播されるデータ信号は様々な形態であり、電磁信号、光信号又は上記任意の適切な組合せを含むが、それに限定されない。コンピュータ可読信号媒体はさらにコンピュータ可読記憶媒体以外の任意のコンピュータ可読媒体であってもよく、該コンピュータ可読媒体は命令実行システム、入力法又はデバイスに用いられるプログラム又はそれらと組み合わせて使用されるプログラムを送信、伝播又は伝送できる。コンピュータ可読媒体に含まれるプログラムコードは任意の適切な媒体で伝送でき、無線、ワイヤー、ケーブル、無線周波数(Radio Frequency、RF)等、又はそれらの任意の適切な組合せを含むが、それらに限定されない。
なお、本発明の各部分はハードウェア、ソフトウェア、ファームウェア又はそれらの組合せによって実現できると理解できる。上記実施形態では、複数のステップ又は方法は、メモリに記憶され且つ適切な命令実行システムにより実行されるソフトウェア又はファームウェアによって実現できる。例えば、ハードウェアで実現される場合、別の実施形態と同様に、データ信号に対してロジック機能を実現するための論理ゲート回路を有する離散論理回路、適切な組合せ論理ゲート回路を有する特定用途向け集積回路、プログラマブルゲートアレイ(PGA)、フィールドプログラマブルゲートアレイ(FPGA)等という公知技術のうちのいずれか又はそれらの組合せによって実現できる。
当業者は、上記実施例の方法に含まれるすべて又は一部のステップを、プログラムによって関連ハードウェアに命令を出して完成させることができ、前記プログラムはコンピュータ可読記憶媒体に記憶され、該プログラムが実行される時、方法の実施例のステップのいずれか又はそれらの組合せを含むと理解できる。
また、本発明の各実施例の各機能ユニットは1つの処理モジュールに集積されてもよいし、各ユニットは別々に物理的に存在してもよいし、2つ又は2つ以上のユニットは1つのモジュールに集積されてもよい。上記集積したモジュールはハードウェアの形態で実現されてもよく、ソフトウェア機能モジュールの形態で実現されてもよい。前記集積したモジュールがソフトウェア機能モジュールの形態で実現されて且つ独立した製品として販売又は使用される場合、コンピュータ可読記憶媒体に記憶されてもよい。前記記憶媒体は読み出し専用メモリ、磁気ディスク又は光ディスク等であってもよい。
以上、本発明の具体的な実施形態を説明したが、本発明の保護範囲を限定するものではなく、本発明に開示された技術的範囲を逸脱せずに当業者が容易に想到し得る種々の変更や置換はすべて、本発明の保護範囲に属する。従って、本発明の保護範囲は特許請求の範囲に定められる。
100 ユーザ記憶ユニット
110 キューユニット
111 未読通知情報キュー
112 既読通知情報キュー
210 記憶モジュール
220 取得モジュール
230 制御モジュール
310 端末のプロセッサ
320 端末の記憶装置
410 サーバのプロセッサ
420 サーバの記憶装置

Claims (16)

  1. 音声対話方法であって、
    音声対話シーンで、サーバからプッシュされた通知情報を受信するステップと、
    ユーザの音声により、ユーザの制御対象と制御意図を取得するステップと、
    制御対象がサーバに予め記憶されたユーザの選択可能な通知情報に属するか否かを判断するステップと、
    御対象がユーザの選択可能な通知情報に属する場合、サーバが制御対象に対して前記制御意図に対応する制御を実行するステップと、を含み、
    ユーザの選択可能な通知情報は、サーバに予め記憶されてユーザに対するプリセットルールを有する通知情報であることを特徴とする音声対話方法。
  2. 前記サーバが制御対象に対して前記制御意図に対応する制御を実行することは、
    前記制御意図が取得することであるか否かを判断するステップと、
    前記制御意図が取得することである場合、サーバは制御対象の選定した通知情報を再生データに形成してユーザの使用する端末に送信するステップと、を含み、
    前記再生データは、ユーザの使用する端末が音声対話シーンでサポートする再生フォーマットのデータを含み、制御対象の選定した通知情報が制御対象に係る通知情報であることを特徴とする請求項1に記載の方法。
  3. 前記サーバが制御対象の選定した通知情報を再生データに形成することは、
    サーバが制御対象の選定した通知情報におけるテキストを処理してテキストに対応するオーディオを形成するステップを含むことを特徴とする請求項2に記載の方法。
  4. ユーザの使用する端末が通知情報の再生データを再生する場合、制御対象の選定した通知情報が変更すれば、サーバは変更後の制御対象の選定した通知情報を再生データに形成してユーザの使用する端末に送信するステップを更に含むことを特徴とする請求項2に記載の方法。
  5. 前記サーバが制御対象に対して前記制御意図に対応する制御を実行することは、
    前記制御意図が削除することであるか否かを判断するステップと、
    前記制御意図が削除することである場合、サーバは制御対象の選定した通知情報を前記サーバから削除するステップとを更に含むことを特徴とする請求項1に記載の方法。
  6. 各ユーザの選択可能な通知情報は、プッシュ対象がユーザである通知情報、及び/又はプッシュ対象がユーザとプリセット関連を有する他のユーザである通知情報を含むことを特徴とする請求項1~5のいずれかの項に記載の方法。
  7. 前記サーバの記憶装置は、未読通知情報キューと既読通知情報キューを含む複数のキューユニットを含む複数のユーザ記憶ユニットを備え、
    1つのユーザ記憶ユニットは、プッシュ対象が同一のユーザである通知情報を記憶し、同一の記憶ユニットの1つのキューユニットは、同一のユーザの同一のソースサービスの通知情報を記憶し、同一のキューユニットの未読情報キューと既読情報キューは、それぞれ同一のユーザの同一のソースサービスの未読通知情報と既読通知情報を記憶するように設置されることを特徴とする請求項1~5の何れかの項に記載の方法。
  8. 音声対話装置であって、
    音声対話シーンで、サーバからプッシュされた通知情報を受信する受信モジュールと、
    通知情報を記憶する記憶モジュールと、
    ユーザの音声により、ユーザの制御対象と制御意図を取得する取得モジュールと、
    御対象がサーバに予め記憶されたユーザの選択可能な通知情報に属するか否かを判断し、制御対象がユーザの選択可能な通知情報に属する場合、サーバが制御対象に対して前記制御意図に対応する制御を実行する制御モジュールとを備え、
    ユーザの選択可能な通知情報は、サーバに予め記憶されて、ユーザに対するプリセットルールを有する通知情報であることを特徴とする音声対話装置。
  9. 再生モジュールを更に備え、
    前記制御意図が取得することである場合、前記制御モジュールは制御対象の選定した通知情報を再生データに形成して前記再生モジュールに送信するように設置され、
    前記再生データは、再生モジュールが音声対話シーンでサポートする再生フォーマットのデータを含み、
    制御対象の選定した通知情報が制御対象に係る通知情報であることを特徴とする請求項8に記載の装置。
  10. 前記制御モジュールは、具体的に制御対象の選定した通知情報におけるテキストを処理して、テキストに対応するオーディオを形成するように設置されることを特徴とする請求項9に記載の装置。
  11. 前記制御モジュールが通知情報の再生データを再生する場合、制御対象の選定した通知情報が変更すれば、前記制御モジュールは変更後の制御対象の選定した通知情報を再生データに形成して前記再生モジュールに送信するように設置されることを特徴とする請求項9に記載の装置。
  12. 前記制御意図が削除することである場合、前記制御モジュールは制御対象の選定した通知情報を前記記憶モジュールから削除するように設置されることを特徴とする請求項8に記載の装置。
  13. 端末であって、
    1つ又は複数のプロセッサと、
    1つ又は複数のプログラムを記憶する記憶装置と、を備え、
    前記1つ又は複数のプログラムが前記1つ又は複数のプロセッサにより実行される場合、前記1つ又は複数のプロセッサに請求項1~7の何れかの項に記載の方法を実現させることを特徴とする端末。
  14. サーバであって、
    1つ又は複数のプロセッサと、
    1つ又は複数のプログラム、及び通知情報を記憶する記憶装置と、を備え、
    前記1つ又は複数のプログラムが前記1つ又は複数のプロセッサにより実行される場合、前記1つ又は複数のプロセッサに請求項1~7の何れかの項に記載の方法を実行させることを特徴とするサーバ。
  15. コンピュータ可読記憶媒体であって、
    コンピュータプログラムを記憶し、該プログラムがプロセッサにより実行される場合、請求項1~7の何れかの項に記載の方法を実現することを特徴とするコンピュータ可読記憶媒体。
  16. コンピュータにおいて、プロセッサにより実行される場合、請求項1~7の何れかの項に記載の方法を実現することを特徴とするプログラム
JP2018145053A 2017-11-16 2018-08-01 音声対話方法、装置、端末、サーバ、可読記憶媒体及びプログラム Active JP7026020B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201711139757.9 2017-11-16
CN201711139757.9A CN107919120B (zh) 2017-11-16 2017-11-16 语音交互方法及装置,终端,服务器及可读存储介质

Publications (2)

Publication Number Publication Date
JP2019091006A JP2019091006A (ja) 2019-06-13
JP7026020B2 true JP7026020B2 (ja) 2022-02-25

Family

ID=61896524

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018145053A Active JP7026020B2 (ja) 2017-11-16 2018-08-01 音声対話方法、装置、端末、サーバ、可読記憶媒体及びプログラム

Country Status (3)

Country Link
US (1) US10811010B2 (ja)
JP (1) JP7026020B2 (ja)
CN (1) CN107919120B (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109117233A (zh) * 2018-08-22 2019-01-01 百度在线网络技术(北京)有限公司 用于处理信息的方法和装置
CN110928995B (zh) * 2019-11-28 2022-12-09 中国建设银行股份有限公司 一种交互信息处理方法、装置、设备及存储介质
CN111916080A (zh) * 2020-08-04 2020-11-10 中国联合网络通信集团有限公司 语音识别资源选取方法、装置、计算机设备及存储介质
CN112130547B (zh) * 2020-09-28 2024-05-03 广州小鹏汽车科技有限公司 一种车辆交互的方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007538432A (ja) 2004-05-21 2007-12-27 ヴォイス オン ザ ゴー インコーポレイテッド リモートアクセスシステムおよび方法、知的エージェント
US20100240402A1 (en) 2009-03-23 2010-09-23 Marianna Wickman Secondary status display for mobile device
WO2016158792A1 (ja) 2015-03-31 2016-10-06 ソニー株式会社 情報処理装置、制御方法、およびプログラム
JP2017138698A (ja) 2016-02-02 2017-08-10 ソニー株式会社 情報処理装置、情報処理方法およびプログラム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7970608B2 (en) * 2006-08-18 2011-06-28 Nuance Communications, Inc. Providing contextual information for spoken information
US8417553B2 (en) * 2009-10-14 2013-04-09 Everbridge, Inc. Incident communication system
US8989699B2 (en) * 2010-07-27 2015-03-24 Ford Global Technologies, Llc Methods and apparatus for selective emergency alert notification and response
US8611506B2 (en) * 2011-07-08 2013-12-17 Blackberry Limited Methods and apparatus to facilitate voicemail interaction
KR20140089871A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 대화형 서버, 그 제어 방법 및 대화형 시스템
KR20140089863A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 디스플레이 장치, 및 이의 제어 방법, 그리고 음성 인식 시스템의 디스플레이 장치 제어 방법
EP3005075A1 (en) * 2013-06-08 2016-04-13 Apple Inc. Automatically adapting user interfaces for hands-free interaction
EP3264258A4 (en) * 2015-02-27 2018-08-15 Sony Corporation Information processing device, information processing method, and program
US9721566B2 (en) * 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US20170047063A1 (en) * 2015-03-31 2017-02-16 Sony Corporation Information processing apparatus, control method, and program
CN105224278B (zh) 2015-08-21 2019-02-22 百度在线网络技术(北京)有限公司 语音交互服务处理方法及装置
CN105183422B (zh) * 2015-08-31 2018-06-05 百度在线网络技术(北京)有限公司 语音控制应用程序的方法和装置
CN105391873A (zh) * 2015-11-25 2016-03-09 上海新储集成电路有限公司 一种在移动设备中实现本地语音识别的方法
US10187440B2 (en) * 2016-05-27 2019-01-22 Apple Inc. Personalization of media streams
CN106201177B (zh) * 2016-06-24 2019-10-15 维沃移动通信有限公司 一种操作执行方法及移动终端
CN107204185B (zh) 2017-05-03 2021-05-25 深圳车盒子科技有限公司 车载语音交互方法、系统及计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007538432A (ja) 2004-05-21 2007-12-27 ヴォイス オン ザ ゴー インコーポレイテッド リモートアクセスシステムおよび方法、知的エージェント
US20100240402A1 (en) 2009-03-23 2010-09-23 Marianna Wickman Secondary status display for mobile device
WO2016158792A1 (ja) 2015-03-31 2016-10-06 ソニー株式会社 情報処理装置、制御方法、およびプログラム
JP2017138698A (ja) 2016-02-02 2017-08-10 ソニー株式会社 情報処理装置、情報処理方法およびプログラム

Also Published As

Publication number Publication date
JP2019091006A (ja) 2019-06-13
US10811010B2 (en) 2020-10-20
US20190147868A1 (en) 2019-05-16
CN107919120B (zh) 2020-03-13
CN107919120A (zh) 2018-04-17

Similar Documents

Publication Publication Date Title
JP7026020B2 (ja) 音声対話方法、装置、端末、サーバ、可読記憶媒体及びプログラム
JP6616473B2 (ja) ページを制御する方法および装置
JP7387891B2 (ja) 動画ファイルの生成方法、装置、端末及び記憶媒体
US11670339B2 (en) Video acquisition method and device, terminal and medium
JP6970145B2 (ja) 音声出力方法および装置
USRE48430E1 (en) Two-dimensional code processing method and terminal
US20170195387A1 (en) Method and Electronic Device for Increasing Start Play Speed
JP7038226B2 (ja) ビデオ処理方法、装置、端末および媒体
CN112333536A (zh) 音视频编辑方法、设备以及计算机可读存储介质
US10356359B2 (en) Information processing apparatus, method for controlling the information processing apparatus, and recording medium
WO2018149353A1 (zh) 电子终端、存储介质及其视频录制方法及装置
CN111435600B (zh) 用于处理音频的方法和装置
CN104601535A (zh) 视频处理方法和系统
US20160359932A1 (en) Display device and method of controlling the same
US20220167043A1 (en) Method and system for playing streaming content
JP7058795B2 (ja) ビデオ処理方法、装置、端末及び記憶媒体
US9569543B2 (en) Sharing of documents with semantic adaptation across mobile devices
CN111385599A (zh) 视频处理方法和装置
CN115269920A (zh) 交互方法、装置、电子设备和存储介质
CN109660940B (zh) 一种生成信息的方法与设备
CN113608816A (zh) 进度的调整方法、装置、电子设备和存储介质
US20150346988A1 (en) Image displaying apparatus, driving method thereof, and apparatus and method for supporting resource
JP2008217123A (ja) 通信システム、端末装置、サーバ、端末装置の制御方法及びそのプログラム
KR102126514B1 (ko) 컨텐츠 관리 방법과 장치 및 기록 매체
CN111045635B (zh) 音频处理方法和装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180801

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190918

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190918

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191115

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200414

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200813

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20200813

C11 Written invitation by the commissioner to file amendments

Free format text: JAPANESE INTERMEDIATE CODE: C11

Effective date: 20200825

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20201020

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20201021

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20201218

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20201222

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210326

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20210531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20210531

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20210716

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20211013

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20211222

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20220127

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20220127

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220214

R150 Certificate of patent or registration of utility model

Ref document number: 7026020

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150