JP3629384B2 - 情報選択装置及び記録媒体 - Google Patents
情報選択装置及び記録媒体 Download PDFInfo
- Publication number
- JP3629384B2 JP3629384B2 JP18280199A JP18280199A JP3629384B2 JP 3629384 B2 JP3629384 B2 JP 3629384B2 JP 18280199 A JP18280199 A JP 18280199A JP 18280199 A JP18280199 A JP 18280199A JP 3629384 B2 JP3629384 B2 JP 3629384B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- signal
- voice
- audio
- selection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は複数の音声情報を用いて、その音声情報源に関連づけられた情報を選択する情報選択方法、情報選択装置およびプログラムを記録したことを特徴とする記録媒体に関する。
【０００２】
【従来の技術】
従来の技術として、複数の情報から一つの情報を選択する方法として、ディスプレイ上に示される文字情報を用いた検索エンジンなどが挙げられる。しかし、画面に注目しつづける作業はユーザにとって負担になる。そこで音声を利用する技術が注目されている。また、ラジオ番組、音楽ＣＤなどの多数候補の音声メディアが選択対象にあるときは、文字情報だけを用いて取捨選択するよりも実際にその内容を聞き、直接選択するほうが自然である。
【０００３】
現在知られている音声のみの情報選択インタフェースとしては、電話のプッシュホンサービスが挙げられる（手法１）。これは情報を選択する際に「○○するには１を…押してください」という音声ガイドが流れ、そのガイド音声にしたがって指定のボタンを押すものである。
【０００４】
また、入力手段として音声認識機能を用いて音声でシステムを操作する手法もある（手法２）。この手法では、あらかじめ決められている操作コマンドを音声で入力するか、音声認識機能に自然言語処理機能を付け加え、日常会話のような口調でシステムを操作する手法もある。
【０００５】
また、時間とともに選択対象項目が変わっていく方法が文献１（特開平６−１４９５１７号広報）に記載されている。ここでは、ユーザやプログラムの要求（一定時間経った後に出される）によって選択対象項目を変えていき、その項目名を画面に表示するとともにその項目に対応する音階をスピーカーから発生させる。ユーザは自分の欲する項目名が現れた時に所定の入力を行うことで、その項目を選択することができる。
【０００６】
【発明が解決しようとする課題】
しかしながら手法１では、選択できる情報の個数や内容に応じて毎回押すボタンが異なってくることが生じ、一回の選択操作のたびに音声ガイドを参照しなおさなくてはならず、時間がかかる。また、押すことができるボタンが増えるためユーザがボタンの場所を覚えきれず手元のボタンの位置を確認しながら押さなければならないという手間が生じ、同時に視線を逸らして作業する事が危険な場面においては、このボタンの位置確認が危険を伴う事となる。
【０００７】
また、手法２では、あらかじめ音声コマンドが決められている場合は、決められた音声コマンドの種類を覚えて操作しなくてはならず煩わしさを感じる。自然言語処理機能については、自由度の高い音声入力に対して入力された言葉がどんな内容を意味するかを理解できる能力に乏しく、まだ実用的な段階に達するまでの技術が確立されていないのが現状である。
【０００８】
また、文献１では、必ず表示装置（ディスプレイなど）が必要とされ、音声だけでユーザに必要な情報を提供する事ができない。また、それぞれの情報について関連付けられている音声情報は、所定の音色による音階のみである。この方法では、音色と音程情報にユーザが慣れるまでは使いこなす事ができない。
【０００９】
本発明は上記課題に基づいて創案されたもので、複数の情報から一つを選択する際に音声を利用したユーザインタフェースとなる情報選択手法、情報選択装置および記録媒体を提供することを目的とする。
【００１０】
【課題を解決するための手段】
本発明に係る情報選択装置は、複数の音声情報に基づき、音声情報毎に関連付けられた信号から所望の信号を選択可能な情報選択装置である。
情報選択装置は、音声情報提示手段、指示手段、選択手段および制御手段を備えて、信号は、音声出力指示信号と操作指示信号を含む。
音声出力指示信号は、音声出力指示信号ごとに対応付けられた音声内容情報の音声出力を指示する信号であり、操作指示信号は、操作指示信号毎に対応付けられた操作を指示する信号である。
音声情報提示手段は、複数の音声情報を時間経過に従い循環的に音声出力し、指示手段は、外部から操作された選択指示を選択手段に与え、選択手段は、選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた信号を選択する。
制御手段は、選択手段により選択された信号が音声出力指示信号である場合には、当該音声出力指示信号に対応付けられた音声内容情報を音声出力し、選択された信号が操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行なう。
【００１１】
このように、情報源を音声情報として音声により提示することにより、視覚認識のみに頼ることなく、情報源を選択することが可能になる。また、音声情報が提示されている際に、その音声情報を選択することにより、単一の操作で情報源を選択することが可能になる。
【００１２】
本発明に係る情報選択装置は、前記音声情報の切り替えを指示する手段、を備えてなることによって、上記の目的を達成する。
【００１３】
このように、音声情報の切り替えを指示により行うことにより、ユーザの指示による切り替えが可能になるため、ユーザ自身の好みに適合したタイミングで音声情報提示を行うことが可能になる。
【００１４】
本発明に係る情報選択装置は、前記切り替え指示手段が、提示中の音声情報より後に提示される音声情報、又は、提示中の音声情報より前に提示される音声情報の提示を指示するものであることによって、上記の目的を達成する。
【００１５】
このように、音声情報提示中に、その音声より後に提示される音声情報や既に提示された音声情報を提示するよう、ユーザの指示により切り替えを行うことができるため、ユーザの意思によって次々と情報を参照することができる。この切り替えは、提示中の音声情報の直前又は直後の音声情報に限られるものではなく、巻き戻しや早送りによっていくつかの音声情報を飛ばして提示するものであってもよい。
【００１６】
本発明による情報選択装置は、前記音声内容情報は、信号の他に情報が関連付けされて、所望の音声情報に対応付けられた前記信号が選択されたときに、他の情報も提示する手段、を備えてなることによって上記の目的を達成する。
【００１７】
このように、情報源の持つ画像情報等音声情報以外の情報を提示することにより、提示中の音声情報の他の情報はもとより、提示していない音声情報の他の情報も提示することが可能になり、情報源の持つより多くの情報をユーザが一度に把握することが可能となる。
【００１８】
情報源の持つ音声情報以外の情報として、画像情報を記載したが、本発明はこれに限定されるものではなく、ユーザの他の五感（触覚、味覚、嗅覚）に訴えるものであっても、情報を伝えるものであればよい。例えば、ユーザが着ている服に電流が走る、匂いがする、味がする等により、情報を提示することも可能である。
【００１９】
本発明による情報選択装置は、前記音声内容情報が、信号の他に視覚情報が関連付けされて、前記音声情報の切り替えに伴って、この視覚情報も順次切り替えて提示する手段を、有することによって上記の目的を達成する。
【００２０】
このように、情報源の持つ画像などの視覚情報等音声情報以外の情報を、その音声情報提示中に、提示することにより、情報源の持つより多くの情報をユーザが一度に把握することが可能になる。
本発明による情報選択装置は、複数の音声内容情報に関連付けられた視覚情報は表示提示手段により一覧表示されて、表示提示手段は、一覧表示される複数の視覚情報のうち音声情報の時間経過に従う循環的な表示に伴って視覚情報を注目を促す態様で表示することを特徴とする。
また、選択指示は単一のボタン操作であることを特徴とする。
【００２２】
本発明による情報選択方法は、前記情報選択方法を繰り返し用いることにより、カテゴライズされた情報源の中から、徐々に情報を絞り込むステップを備えてなることによって上記の目的を達成する。
【００２３】
このように、カテゴライズされた情報源の中から、徐々に情報を絞り込むことにより、大量の情報源の中から、ユーザが得たい情報に容易に辿り着くことが可能となる。
【００２４】
本発明による記録媒体は、コンピュータを、複数の音声情報に基づき、音声情報毎に関連付けられた信号であって音声出力指示信号と操作指示信号を含む信号から所望の信号を選択可能とするために、音声情報提示手段、指示手段、選択手段および制御手段、として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、音声出力指示信号は、音声出力指示信号ごとに対応付けられた音声内容情報の音声出力を指示する信号であり、操作指示信号は、操作指示信号毎に対応付けられた操作を指示する信号である。
音声情報提示手段は、複数の音声情報を時間経過に従い循環的に音声出力し、指示手段は、外部から操作された選択指示を選択手段に与え、選択手段は、選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた信号を選択し、制御手段は、選択手段により選択された信号が音声出力指示信号である場合には、当該音声出力指示信号に対応付けられた音声内容情報を音声出力し、選択された信号が操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行なうことを特徴とする。
【００２５】
【発明の実施の形態】
以下、本発明の好適な実施の形態を図面を参照して詳細に説明する。
【００２６】
図８は、本発明を実現するための機器のシステム構成図である。システムは、音声記憶部８１１、主制御部８１２、メニュー制御部８１３、音声変換部８１４、再生制御部８１５、情報記憶部８１６を含んだ制御装置８１、ヘッドフォン、スピーカーなどの音声提示用外部情報提示装置８２、ディスプレイなどの音声以外の情報提示用外部情報提示装置８３、決定ボタンを少なくとも備え、他に十字パッド、ジョグダイヤル、シャトルリング、マウスなどを備えた提示指示装置８４、からなる。この図において、制御装置８１と、外部情報提示装置８２，８３、提示指示装置８４とは、ケーブルを用いて１台のマシンに接続されているが、本願発明はこれに限定されるものではなく、ケーブル、ネットワーク経由、無線（電波やＩＲ等）通信により、相互に接続されていてもよい。
【００２７】
主制御部８１２は、情報記憶部８１６に格納された情報にしたがって、音声記憶部８１１に格納されている音声情報の再生、もしくは情報記憶部８１６の内容を音声変換部８１４で変換した音声の再生を再生制御部８１５に指示する。
【００２８】
提示指示装置８４からの入力があった場合、もしくは、主制御部８１２からの指示があった場合、メニュー制御部８１３に従って提示情報を切り替え前述のように再生を再生制御部８１５に指示する。
（第１の実施の形態）
図１は、実施の形態の操作イメージ図である。ユーザ１は、ヘッドフォン装置２を通して、制御装置３が提示する音声情報を順番に聞く。制御装置３の入力手段には戻しボタン４、決定ボタン５、送りボタン６を備えたコントローラが設けられている。制御装置３は、複数の情報源に対応する音声情報を順次切り替えて提示する。つまり、提示されるべき全ての情報ＰがＳ個あったとすると、情報ＰはＰ１からＰＳまでソーティングされており、制御装置３は、Ｐ１を提示し終わるとＰ２の提示、Ｐ２の提示の後はＰ３…、のように、順次切り替えて提示していく。
【００２９】
ここでこのユーザに提示する情報のソーティング順（並び順）は、以前に情報を選択した際のユーザの好みを反映するものであってもよい。
【００３０】
図２は、図１の実施の形態の動作を説明する制御フロー図である。ここでは、Ｎ番目の情報ＰＮを提示しているときについて説明する。システムを起動すると、まずソーティング済みの提示されるべき全ての情報のうち、一番目に順序づけられた情報から提示し始めることとする。（S201）ＰＮの提示中にボタンが押されなかった場合、ＰＮ＋１を次の提示情報とする(S205)。このときＮ＋１がＳを越える、つまりＳ番目の情報まで提示してしまった場合は次に１番目の情報を提示するとする（S207）。ＰＮの提示中にボタンが押された場合はただちにＰＮの提示を中止する（S208）。押されたボタンが戻しボタンだった場合は次に提示する情報をＰＮ−１とする（S211）。Ｎ−１が０となる、つまりＮが１だった場合には、次にＳ番目の情報を提示する（S214）。押されたボタンが送りボタンだった場合は次の提示する情報をＰＮ＋１とする（S210）。Ｎ＋１がＳを越える場合は前述のとおりである（S207）。押されたボタンが決定ボタンだった場合は、ＰＮをユーザの所望の情報であると判断する（S213）。
(第２の実施の形態)
図３は本発明をメールアプリケーションに応用したときの操作の流れを示している。この例では、図２に記載の方法を複数回繰り返し利用している。以下、図１、図２、図３を用いて、メールアプリケーションを例にとって説明する。まず最初にアプリケーションをスタートするとメールが何件来ているかを音声で知らせる（S301）。その後提示する音声情報として「○通目○○さんより」のように差出人を読み上げたものと、アプリケーションを終了させる「終了します」メッセージを用意し、順番に提示する(S302)。ユーザが上記選択手段に基づいて一つメールを選択すると、選択されたメールの日付、差出人、件名を読み上げ(S303)、そのメールに対する処理を示すメッセージを提示すべき音声情報として提示する(S304)。以下同様に、選択できる情報を自動的に提示し、ユーザが前記選択手段を用いて選択していくことで動作が進行する。情報の内容を把握するのにメッセージを最初から最後まで聞く必要のないときは、情報が提示されている間に送りボタン６を押すことで、現在提示されている情報を飛ばして次の情報の提示を促す事ができる。同様に、前に聞いた情報の内容を忘れてしまいもう一度確認したい場合は戻しボタン４を押すことで前に提示されていた情報を再度提示させることができる。例えば、図３において、返信メールの録音に失敗しもう一度録音しなおしたい場合は、その他のメッセージ「送信します(S3081)」「送信を取りやめます(S3082)」を送りボタン６で飛ばし、「録音をやり直します(S3083)」をすぐに提示させることができる。または、戻しボタン４で情報の提示順を逆順に辿り、提示させてもよい。
【００３１】
こうして、操作ボタンを３つとし、実際の操作を音声で提示し、その音声を選択させる形をとって操作を進めることで、操作ボタンの確認作業を軽減し、聴覚だけで操作できるインタフェースを実現できる。
【００３２】
また、情報の提示を、複数メールを提示（Ｓ３０２）、選択したメールに対する操作一覧（Ｓ３０４，Ｓ３０６，Ｓ３０８）の４段階に分ける事によって、その都度必要な情報をユーザに提示することができ、メール本体の選択と選択したメールに対する操作を同じ方法と同じボタンで扱うことができる。
【００３３】
次に、図８と図３を用いて、メモリの動きを説明する。
【００３４】
まず、主制御部８１２は情報記憶部８１６に従い、到着メール件数に応じて「メールが到着しています。新しいメールは○件です」（S301)の部分に件数を入れて音声変換部８１４において音声メッセージに変換し、変換後の音声の再生を再生制御部８１５に指示する。その後、情報記憶部８１６に格納されている到着メールの差出人一覧をそれぞれ、音声変換部８１４を通じてそれぞれ「○通目○○さんより」（S3021〜S3023）と音声に変換したものと、音声記憶部８１１に格納されている「終了します」（S3024)とをメール選択メニューとして、情報記憶部８１６に格納する。
【００３５】
メニュー制御部８１３は格納された音声メニューＳ３０２をそれぞれ順に再生制御部８１５に再生するように指示する。
【００３６】
ユーザ８５が、メール差出人音声（Ｓ３０２１〜Ｓ３０２３）が再生されているときに
提示指示装置８４中の決定ボタンを押した場合、主制御部８１２は、ユーザがボタンを押したときに提示中であったメールに該当する題名情報を情報記憶部８１６に問い合わせ、「○通目○○さんより○○○について」（Ｓ３０３）のように何通目の誰から来たどんな題名であるかという音声に音声変換部８１２を通じて音声に変換し情報記憶部８１６に格納し、再生制御部８１５で再生する。
【００３７】
その後、選択されたメールに対して行える動作を読み上げた音声「読み上げます（Ｓ３０４１）」「次のメールを読みます（Ｓ３０４２）」を音声記憶部８１１から読み出し、機能メニュー（Ｓ３０４）として、情報記憶部８１６に格納する。メニュー制御部８１３は、情報記憶部８１６に格納された機能メニュー（Ｓ３０４）をそれぞれ順に再生制御部８１５に再生するように指示する。
【００３８】
以下同様にユーザ８５の指示に従って情報記憶部８１６に音声メニューを読みこみ、メニュー制御部８１３によって、音声提示が指示される。
【００３９】
図３中のＳ３０２４，Ｓ３０４，Ｓ３０５，Ｓ３０６，Ｓ３０７，Ｓ３０８は固定メッセージのため
あらかじめ音声記憶部８１１に音声として記憶されており、提示するときには直接情報記憶部８１６に読みこみ、再生制御部８１５で再生される。
【００４０】
S301,S3021〜S3023、S303は、メールの内容によって変わってくるため、情報記憶部８１５に格納されているメール内容を音声変換部８１４を通じて音声に変換し、変換後音声を情報記憶部８１６に格納し、再生制御部８１５によって再生する。
【００４１】
この例では、メールを扱ったために音声変換部８１４はテキストを音声合成するものであるが、扱う情報によっては、音声合成だけとは限らず、人声以外の音声であってもよい。
【００４２】
また本発明は、メールアプリケーションだけではなく、音楽ＣＤや多チャンネル放送の番組案内などに応用することもできる。
(第３の実施の形態)
図４に、本発明を音楽ＣＤ検索システムに応用した例を示す。スタートさせると、まず、ジャンルを読み上げた音声を情報として提示し(S401)、その中から邦楽を選ぶと、邦楽の中のさらに細かいジャンルを提示する(S402)。以下同様にしてカテゴリのインデックスを選択決定する動作を繰り返し、所望の情報を選択する。図４中のS402、S405には、カテゴリのインデックスを音声合成したものではなく、ＣＤのサビの部分などでも一意にその情報の中身が理解できるため、直接ＣＤの音声をインデックスとして使用してもよい。以上のように、検索対象となる情報の数が多くなる場合にはカテゴライズしてインデックスをユーザに提示することで、所望の情報をユーザに提供する。また、元の操作に（一つ上の階層に）戻るには、図1中の戻しボタン４、決定ボタン５、送りボタン６に新たに一つ前に戻るボタンを付け加えてもよい。また、一つ前の階層に戻れる場合には、提示する情報とともに「一つ前のメニューに戻る」という音声情報を提示し、ユーザがその情報を選んだときには一つ前の階層に戻ることができるようにしてもよい。
【００４３】
図４の例では、選択できるメニュー、インデックスをＳ４０１， Ｓ４０２， Ｓ４０３， Ｓ４０５， Ｓ４０６， Ｓ４０７の７段階に分ける事によって所望の音楽情報を得ることができる。また、７段階のインデックス情報に「一つ前のメニューに戻る」メッセージを付け加え、情報本体と、システム操作コマンドを同じ次元で扱うこともできる。
【００４４】
多チャンネル放送の番組案内に本発明を応用する場合には、チャンネル別、時間別の他に、ジャンル別、対象年齢別などのインデックスを用意して、ユーザが所望の番組を選べるように促してもよい。この場合も、インデックス名を音声合成したものを提示音声としてもよいし、番組中の音声をそのまま用いてもよい。
【００４５】
現在放送中の番組一覧を本発明の手法で提示するときには、一定時間ごとにチャンネルを切り替えて提示してもよいし、それぞれの番組における特徴のある音声を番組の情報として提示してもよい。この場合は、時間が経ち、あるチャンネルにおいて番組が次の番組に入れ替わった場合には順次それに対応して、入れ替わった番組の音声を提示する。
【００４６】
また、聴覚情報だけでなく、補助的に視覚情報を用いて、視覚と聴覚の両方で情報をユーザに提示してもよい。以下視覚情報を補助的に用いた例として図５、図６を用いて説明する。
【００４７】
図5は、第１の実施の形態において、視覚情報を補助的に用いたときのイメージ図である。
ユーザ１は、ヘッドフォン装置２を通して、制御装置３が提示する音声情報を順番に聞く。それと同時に、制御装置3は、提示している音声情報に関連付けられた画像情報をディスプレイ装置８に提示する。ディスプレイ装置8には、提示すべき全ての情報についての画像が一覧表示されており、音声にて提示中の情報に関連付けられた情報に対応する画像情報は太枠で囲むなどの、一目で提示中の音声に関連付けられている事がわかるような工夫をする。
【００４８】
図６は、提示情報が切り替わったときのディスプレイ装置８の表示の変化を示している。制御装置３は、複数の情報源に対応する音声情報を順次切り替えて提示すると当時に、ディスプレイ装置８に提示している画像情報についても、提示音声を切り替える毎に対応する画像情報に注目がいくような工夫をする。図６では、音声にて提示中の情報に関連付けられた情報に対応する画像情報は太枠で囲んでいる。Ｓ６１の状態ではＧの情報を音声にて提示中である。ここで、ユーザの指示がない場合もしくは、ユーザが送るボタン６を押すことによって次の情報の提示が指示された場合、制御装置３は、Ｈの情報を提示し、太枠をＨに移動する（Ｓ６２）。Ｓ６１の状態で、ユーザが十字パッドの下方向キーを押したとき、制御装置３は、ディスプレイ装置８上でＧの下に表示しているＫの情報の提示をユーザによって指示されたと判断し、Ｇの音声提示を中止し、Ｋの音声提示を開始し、当時に太枠をＫに移動する（Ｓ６３）。
【００４９】
このように、画像情報を併用することで、音声で提示中でない他の情報を画像情報を用いて閲覧でき、また、戻しボタン４、送りボタン６を一回押すだけでは提示を指示できない情報を十字パッドを用いて提示を指示させることができる。ポインティングデバイスとして使用する十字パッドは、マウス、シャトルリング、ジョグダイアル、マウス、ジョイスティックなどでも構わない。
【００５０】
以上、本発明の方法について説明したが、図７を参照して、本発明を実現する装置について説明する。
【００５１】
７１はディスプレイ装置、７２はヘッドフォン、７３はハードディスク、７４はメモリ、７５はＣＰＵ、７６は十字パッド、決定ボタン、送りボタン、戻しボタン、一つ前の階層に戻るボタン、を備えたコントローラ、である。プログラムはネットワーク経由またはプログラム媒体の形でハードディスク７３から供給され、メモリ７４に蓄えられる。ＣＰＵ７５は、メモリ７４上のプログラムを読み、ヘッドフォン７２に供給する。また、提示中の音声に合わせ提示中の音声に対応した画像を際立たせるよう制御してディスプレイ装置７１に供給する。コントローラ７６からの指示があるとＣＰＵ２５はコントローラ７６が押されたときにヘッドフォンに供給していた音声情報に基づく情報をユーザの所望の情報であると判断する。
【００５２】
なお、本発明は上記実施の形態に限定されるものではない。本発明は、コンピュータを制御装置３として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であってもよく、例えば、磁気テープ、ＣＤ−ＲＯＭ、ＩＣカード、ＲＡＭカード等のいかなるタイプの記録媒体であってもよい。
【００５３】
また、本明細書中に記述したメールアプリケーション、ＣＤカタログ、多チャンネル放送への応用のほかにも、本発明は、多くの情報の中から一つを選ぶ、メニューの中から所望のものを選択する形の技術として広い分野で応用が可能である。
【００５４】
【発明の効果】
本発明の如く、それぞれある情報に関連付けられた複数の音声情報を用いて、順次切り替えて再生することで順番にユーザに情報を提示し、ユーザがボタンを押したときに再生されているものをユーザの所望の情報と判断させることで、ボタン一つでも複数の情報の中からユーザが所望の情報を選択することができる。
【００５５】
また、ユーザの指示がなければ提示される音声情報、提示が終わり次第すぐに次の情報の提示に移るが、ユーザの指示により次に提示されるべき音声情報の提示、一つ前に提示されていた情報の再提示を指示することができ、時間を短縮して所望の情報を得ることもできる。
【００５６】
このように、複数の音声情報を順次再生しユーザに提示することで、複数の情報源の中から一つの情報を選択する際に良好なユーザインタフェースを提供できる。
【００５７】
また、コントローラによって選択操作されたときに再生していた音声情報に関連付けられた情報をユーザの所望の情報と決めておけば、一つのボタンで情報選択を行うことができる。また、戻し、送り、を併用することで、提示待ち時間の節約ができ、短時間で所望の情報を得ることができる。また、画像を併用することで、単にソーティングされた情報をソーティング順に参照するだけでなく、直接選択することもできる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態の操作イメージ図である。
【図２】本発明の基本動作を説明する制御フロー図である。
【図３】本発明をメールのアプリケーションに適用したときの、提示情報の移り変わりの様子を示す制御フロー図である。
【図４】本発明を音楽ＣＤ検索に適用したときの、提示情報の移り変わりの様子を示す制御フロー図である。
【図５】本発明の第２の実施の形態の操作イメージ図である。
【図６】本発明に画像を併用した場合の、表示の変化を表す。
【図７】本発明を実現する装置の構成図である。
【図８】本発明を実現する装置の構成図である。
【発明の属する技術分野】
本発明は複数の音声情報を用いて、その音声情報源に関連づけられた情報を選択する情報選択方法、情報選択装置およびプログラムを記録したことを特徴とする記録媒体に関する。
【０００２】
【従来の技術】
従来の技術として、複数の情報から一つの情報を選択する方法として、ディスプレイ上に示される文字情報を用いた検索エンジンなどが挙げられる。しかし、画面に注目しつづける作業はユーザにとって負担になる。そこで音声を利用する技術が注目されている。また、ラジオ番組、音楽ＣＤなどの多数候補の音声メディアが選択対象にあるときは、文字情報だけを用いて取捨選択するよりも実際にその内容を聞き、直接選択するほうが自然である。
【０００３】
現在知られている音声のみの情報選択インタフェースとしては、電話のプッシュホンサービスが挙げられる（手法１）。これは情報を選択する際に「○○するには１を…押してください」という音声ガイドが流れ、そのガイド音声にしたがって指定のボタンを押すものである。
【０００４】
また、入力手段として音声認識機能を用いて音声でシステムを操作する手法もある（手法２）。この手法では、あらかじめ決められている操作コマンドを音声で入力するか、音声認識機能に自然言語処理機能を付け加え、日常会話のような口調でシステムを操作する手法もある。
【０００５】
また、時間とともに選択対象項目が変わっていく方法が文献１（特開平６−１４９５１７号広報）に記載されている。ここでは、ユーザやプログラムの要求（一定時間経った後に出される）によって選択対象項目を変えていき、その項目名を画面に表示するとともにその項目に対応する音階をスピーカーから発生させる。ユーザは自分の欲する項目名が現れた時に所定の入力を行うことで、その項目を選択することができる。
【０００６】
【発明が解決しようとする課題】
しかしながら手法１では、選択できる情報の個数や内容に応じて毎回押すボタンが異なってくることが生じ、一回の選択操作のたびに音声ガイドを参照しなおさなくてはならず、時間がかかる。また、押すことができるボタンが増えるためユーザがボタンの場所を覚えきれず手元のボタンの位置を確認しながら押さなければならないという手間が生じ、同時に視線を逸らして作業する事が危険な場面においては、このボタンの位置確認が危険を伴う事となる。
【０００７】
また、手法２では、あらかじめ音声コマンドが決められている場合は、決められた音声コマンドの種類を覚えて操作しなくてはならず煩わしさを感じる。自然言語処理機能については、自由度の高い音声入力に対して入力された言葉がどんな内容を意味するかを理解できる能力に乏しく、まだ実用的な段階に達するまでの技術が確立されていないのが現状である。
【０００８】
また、文献１では、必ず表示装置（ディスプレイなど）が必要とされ、音声だけでユーザに必要な情報を提供する事ができない。また、それぞれの情報について関連付けられている音声情報は、所定の音色による音階のみである。この方法では、音色と音程情報にユーザが慣れるまでは使いこなす事ができない。
【０００９】
本発明は上記課題に基づいて創案されたもので、複数の情報から一つを選択する際に音声を利用したユーザインタフェースとなる情報選択手法、情報選択装置および記録媒体を提供することを目的とする。
【００１０】
【課題を解決するための手段】
本発明に係る情報選択装置は、複数の音声情報に基づき、音声情報毎に関連付けられた信号から所望の信号を選択可能な情報選択装置である。
情報選択装置は、音声情報提示手段、指示手段、選択手段および制御手段を備えて、信号は、音声出力指示信号と操作指示信号を含む。
音声出力指示信号は、音声出力指示信号ごとに対応付けられた音声内容情報の音声出力を指示する信号であり、操作指示信号は、操作指示信号毎に対応付けられた操作を指示する信号である。
音声情報提示手段は、複数の音声情報を時間経過に従い循環的に音声出力し、指示手段は、外部から操作された選択指示を選択手段に与え、選択手段は、選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた信号を選択する。
制御手段は、選択手段により選択された信号が音声出力指示信号である場合には、当該音声出力指示信号に対応付けられた音声内容情報を音声出力し、選択された信号が操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行なう。
【００１１】
このように、情報源を音声情報として音声により提示することにより、視覚認識のみに頼ることなく、情報源を選択することが可能になる。また、音声情報が提示されている際に、その音声情報を選択することにより、単一の操作で情報源を選択することが可能になる。
【００１２】
本発明に係る情報選択装置は、前記音声情報の切り替えを指示する手段、を備えてなることによって、上記の目的を達成する。
【００１３】
このように、音声情報の切り替えを指示により行うことにより、ユーザの指示による切り替えが可能になるため、ユーザ自身の好みに適合したタイミングで音声情報提示を行うことが可能になる。
【００１４】
本発明に係る情報選択装置は、前記切り替え指示手段が、提示中の音声情報より後に提示される音声情報、又は、提示中の音声情報より前に提示される音声情報の提示を指示するものであることによって、上記の目的を達成する。
【００１５】
このように、音声情報提示中に、その音声より後に提示される音声情報や既に提示された音声情報を提示するよう、ユーザの指示により切り替えを行うことができるため、ユーザの意思によって次々と情報を参照することができる。この切り替えは、提示中の音声情報の直前又は直後の音声情報に限られるものではなく、巻き戻しや早送りによっていくつかの音声情報を飛ばして提示するものであってもよい。
【００１６】
本発明による情報選択装置は、前記音声内容情報は、信号の他に情報が関連付けされて、所望の音声情報に対応付けられた前記信号が選択されたときに、他の情報も提示する手段、を備えてなることによって上記の目的を達成する。
【００１７】
このように、情報源の持つ画像情報等音声情報以外の情報を提示することにより、提示中の音声情報の他の情報はもとより、提示していない音声情報の他の情報も提示することが可能になり、情報源の持つより多くの情報をユーザが一度に把握することが可能となる。
【００１８】
情報源の持つ音声情報以外の情報として、画像情報を記載したが、本発明はこれに限定されるものではなく、ユーザの他の五感（触覚、味覚、嗅覚）に訴えるものであっても、情報を伝えるものであればよい。例えば、ユーザが着ている服に電流が走る、匂いがする、味がする等により、情報を提示することも可能である。
【００１９】
本発明による情報選択装置は、前記音声内容情報が、信号の他に視覚情報が関連付けされて、前記音声情報の切り替えに伴って、この視覚情報も順次切り替えて提示する手段を、有することによって上記の目的を達成する。
【００２０】
このように、情報源の持つ画像などの視覚情報等音声情報以外の情報を、その音声情報提示中に、提示することにより、情報源の持つより多くの情報をユーザが一度に把握することが可能になる。
本発明による情報選択装置は、複数の音声内容情報に関連付けられた視覚情報は表示提示手段により一覧表示されて、表示提示手段は、一覧表示される複数の視覚情報のうち音声情報の時間経過に従う循環的な表示に伴って視覚情報を注目を促す態様で表示することを特徴とする。
また、選択指示は単一のボタン操作であることを特徴とする。
【００２２】
本発明による情報選択方法は、前記情報選択方法を繰り返し用いることにより、カテゴライズされた情報源の中から、徐々に情報を絞り込むステップを備えてなることによって上記の目的を達成する。
【００２３】
このように、カテゴライズされた情報源の中から、徐々に情報を絞り込むことにより、大量の情報源の中から、ユーザが得たい情報に容易に辿り着くことが可能となる。
【００２４】
本発明による記録媒体は、コンピュータを、複数の音声情報に基づき、音声情報毎に関連付けられた信号であって音声出力指示信号と操作指示信号を含む信号から所望の信号を選択可能とするために、音声情報提示手段、指示手段、選択手段および制御手段、として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、音声出力指示信号は、音声出力指示信号ごとに対応付けられた音声内容情報の音声出力を指示する信号であり、操作指示信号は、操作指示信号毎に対応付けられた操作を指示する信号である。
音声情報提示手段は、複数の音声情報を時間経過に従い循環的に音声出力し、指示手段は、外部から操作された選択指示を選択手段に与え、選択手段は、選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた信号を選択し、制御手段は、選択手段により選択された信号が音声出力指示信号である場合には、当該音声出力指示信号に対応付けられた音声内容情報を音声出力し、選択された信号が操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行なうことを特徴とする。
【００２５】
【発明の実施の形態】
以下、本発明の好適な実施の形態を図面を参照して詳細に説明する。
【００２６】
図８は、本発明を実現するための機器のシステム構成図である。システムは、音声記憶部８１１、主制御部８１２、メニュー制御部８１３、音声変換部８１４、再生制御部８１５、情報記憶部８１６を含んだ制御装置８１、ヘッドフォン、スピーカーなどの音声提示用外部情報提示装置８２、ディスプレイなどの音声以外の情報提示用外部情報提示装置８３、決定ボタンを少なくとも備え、他に十字パッド、ジョグダイヤル、シャトルリング、マウスなどを備えた提示指示装置８４、からなる。この図において、制御装置８１と、外部情報提示装置８２，８３、提示指示装置８４とは、ケーブルを用いて１台のマシンに接続されているが、本願発明はこれに限定されるものではなく、ケーブル、ネットワーク経由、無線（電波やＩＲ等）通信により、相互に接続されていてもよい。
【００２７】
主制御部８１２は、情報記憶部８１６に格納された情報にしたがって、音声記憶部８１１に格納されている音声情報の再生、もしくは情報記憶部８１６の内容を音声変換部８１４で変換した音声の再生を再生制御部８１５に指示する。
【００２８】
提示指示装置８４からの入力があった場合、もしくは、主制御部８１２からの指示があった場合、メニュー制御部８１３に従って提示情報を切り替え前述のように再生を再生制御部８１５に指示する。
（第１の実施の形態）
図１は、実施の形態の操作イメージ図である。ユーザ１は、ヘッドフォン装置２を通して、制御装置３が提示する音声情報を順番に聞く。制御装置３の入力手段には戻しボタン４、決定ボタン５、送りボタン６を備えたコントローラが設けられている。制御装置３は、複数の情報源に対応する音声情報を順次切り替えて提示する。つまり、提示されるべき全ての情報ＰがＳ個あったとすると、情報ＰはＰ１からＰＳまでソーティングされており、制御装置３は、Ｐ１を提示し終わるとＰ２の提示、Ｐ２の提示の後はＰ３…、のように、順次切り替えて提示していく。
【００２９】
ここでこのユーザに提示する情報のソーティング順（並び順）は、以前に情報を選択した際のユーザの好みを反映するものであってもよい。
【００３０】
図２は、図１の実施の形態の動作を説明する制御フロー図である。ここでは、Ｎ番目の情報ＰＮを提示しているときについて説明する。システムを起動すると、まずソーティング済みの提示されるべき全ての情報のうち、一番目に順序づけられた情報から提示し始めることとする。（S201）ＰＮの提示中にボタンが押されなかった場合、ＰＮ＋１を次の提示情報とする(S205)。このときＮ＋１がＳを越える、つまりＳ番目の情報まで提示してしまった場合は次に１番目の情報を提示するとする（S207）。ＰＮの提示中にボタンが押された場合はただちにＰＮの提示を中止する（S208）。押されたボタンが戻しボタンだった場合は次に提示する情報をＰＮ−１とする（S211）。Ｎ−１が０となる、つまりＮが１だった場合には、次にＳ番目の情報を提示する（S214）。押されたボタンが送りボタンだった場合は次の提示する情報をＰＮ＋１とする（S210）。Ｎ＋１がＳを越える場合は前述のとおりである（S207）。押されたボタンが決定ボタンだった場合は、ＰＮをユーザの所望の情報であると判断する（S213）。
(第２の実施の形態)
図３は本発明をメールアプリケーションに応用したときの操作の流れを示している。この例では、図２に記載の方法を複数回繰り返し利用している。以下、図１、図２、図３を用いて、メールアプリケーションを例にとって説明する。まず最初にアプリケーションをスタートするとメールが何件来ているかを音声で知らせる（S301）。その後提示する音声情報として「○通目○○さんより」のように差出人を読み上げたものと、アプリケーションを終了させる「終了します」メッセージを用意し、順番に提示する(S302)。ユーザが上記選択手段に基づいて一つメールを選択すると、選択されたメールの日付、差出人、件名を読み上げ(S303)、そのメールに対する処理を示すメッセージを提示すべき音声情報として提示する(S304)。以下同様に、選択できる情報を自動的に提示し、ユーザが前記選択手段を用いて選択していくことで動作が進行する。情報の内容を把握するのにメッセージを最初から最後まで聞く必要のないときは、情報が提示されている間に送りボタン６を押すことで、現在提示されている情報を飛ばして次の情報の提示を促す事ができる。同様に、前に聞いた情報の内容を忘れてしまいもう一度確認したい場合は戻しボタン４を押すことで前に提示されていた情報を再度提示させることができる。例えば、図３において、返信メールの録音に失敗しもう一度録音しなおしたい場合は、その他のメッセージ「送信します(S3081)」「送信を取りやめます(S3082)」を送りボタン６で飛ばし、「録音をやり直します(S3083)」をすぐに提示させることができる。または、戻しボタン４で情報の提示順を逆順に辿り、提示させてもよい。
【００３１】
こうして、操作ボタンを３つとし、実際の操作を音声で提示し、その音声を選択させる形をとって操作を進めることで、操作ボタンの確認作業を軽減し、聴覚だけで操作できるインタフェースを実現できる。
【００３２】
また、情報の提示を、複数メールを提示（Ｓ３０２）、選択したメールに対する操作一覧（Ｓ３０４，Ｓ３０６，Ｓ３０８）の４段階に分ける事によって、その都度必要な情報をユーザに提示することができ、メール本体の選択と選択したメールに対する操作を同じ方法と同じボタンで扱うことができる。
【００３３】
次に、図８と図３を用いて、メモリの動きを説明する。
【００３４】
まず、主制御部８１２は情報記憶部８１６に従い、到着メール件数に応じて「メールが到着しています。新しいメールは○件です」（S301)の部分に件数を入れて音声変換部８１４において音声メッセージに変換し、変換後の音声の再生を再生制御部８１５に指示する。その後、情報記憶部８１６に格納されている到着メールの差出人一覧をそれぞれ、音声変換部８１４を通じてそれぞれ「○通目○○さんより」（S3021〜S3023）と音声に変換したものと、音声記憶部８１１に格納されている「終了します」（S3024)とをメール選択メニューとして、情報記憶部８１６に格納する。
【００３５】
メニュー制御部８１３は格納された音声メニューＳ３０２をそれぞれ順に再生制御部８１５に再生するように指示する。
【００３６】
ユーザ８５が、メール差出人音声（Ｓ３０２１〜Ｓ３０２３）が再生されているときに
提示指示装置８４中の決定ボタンを押した場合、主制御部８１２は、ユーザがボタンを押したときに提示中であったメールに該当する題名情報を情報記憶部８１６に問い合わせ、「○通目○○さんより○○○について」（Ｓ３０３）のように何通目の誰から来たどんな題名であるかという音声に音声変換部８１２を通じて音声に変換し情報記憶部８１６に格納し、再生制御部８１５で再生する。
【００３７】
その後、選択されたメールに対して行える動作を読み上げた音声「読み上げます（Ｓ３０４１）」「次のメールを読みます（Ｓ３０４２）」を音声記憶部８１１から読み出し、機能メニュー（Ｓ３０４）として、情報記憶部８１６に格納する。メニュー制御部８１３は、情報記憶部８１６に格納された機能メニュー（Ｓ３０４）をそれぞれ順に再生制御部８１５に再生するように指示する。
【００３８】
以下同様にユーザ８５の指示に従って情報記憶部８１６に音声メニューを読みこみ、メニュー制御部８１３によって、音声提示が指示される。
【００３９】
図３中のＳ３０２４，Ｓ３０４，Ｓ３０５，Ｓ３０６，Ｓ３０７，Ｓ３０８は固定メッセージのため
あらかじめ音声記憶部８１１に音声として記憶されており、提示するときには直接情報記憶部８１６に読みこみ、再生制御部８１５で再生される。
【００４０】
S301,S3021〜S3023、S303は、メールの内容によって変わってくるため、情報記憶部８１５に格納されているメール内容を音声変換部８１４を通じて音声に変換し、変換後音声を情報記憶部８１６に格納し、再生制御部８１５によって再生する。
【００４１】
この例では、メールを扱ったために音声変換部８１４はテキストを音声合成するものであるが、扱う情報によっては、音声合成だけとは限らず、人声以外の音声であってもよい。
【００４２】
また本発明は、メールアプリケーションだけではなく、音楽ＣＤや多チャンネル放送の番組案内などに応用することもできる。
(第３の実施の形態)
図４に、本発明を音楽ＣＤ検索システムに応用した例を示す。スタートさせると、まず、ジャンルを読み上げた音声を情報として提示し(S401)、その中から邦楽を選ぶと、邦楽の中のさらに細かいジャンルを提示する(S402)。以下同様にしてカテゴリのインデックスを選択決定する動作を繰り返し、所望の情報を選択する。図４中のS402、S405には、カテゴリのインデックスを音声合成したものではなく、ＣＤのサビの部分などでも一意にその情報の中身が理解できるため、直接ＣＤの音声をインデックスとして使用してもよい。以上のように、検索対象となる情報の数が多くなる場合にはカテゴライズしてインデックスをユーザに提示することで、所望の情報をユーザに提供する。また、元の操作に（一つ上の階層に）戻るには、図1中の戻しボタン４、決定ボタン５、送りボタン６に新たに一つ前に戻るボタンを付け加えてもよい。また、一つ前の階層に戻れる場合には、提示する情報とともに「一つ前のメニューに戻る」という音声情報を提示し、ユーザがその情報を選んだときには一つ前の階層に戻ることができるようにしてもよい。
【００４３】
図４の例では、選択できるメニュー、インデックスをＳ４０１， Ｓ４０２， Ｓ４０３， Ｓ４０５， Ｓ４０６， Ｓ４０７の７段階に分ける事によって所望の音楽情報を得ることができる。また、７段階のインデックス情報に「一つ前のメニューに戻る」メッセージを付け加え、情報本体と、システム操作コマンドを同じ次元で扱うこともできる。
【００４４】
多チャンネル放送の番組案内に本発明を応用する場合には、チャンネル別、時間別の他に、ジャンル別、対象年齢別などのインデックスを用意して、ユーザが所望の番組を選べるように促してもよい。この場合も、インデックス名を音声合成したものを提示音声としてもよいし、番組中の音声をそのまま用いてもよい。
【００４５】
現在放送中の番組一覧を本発明の手法で提示するときには、一定時間ごとにチャンネルを切り替えて提示してもよいし、それぞれの番組における特徴のある音声を番組の情報として提示してもよい。この場合は、時間が経ち、あるチャンネルにおいて番組が次の番組に入れ替わった場合には順次それに対応して、入れ替わった番組の音声を提示する。
【００４６】
また、聴覚情報だけでなく、補助的に視覚情報を用いて、視覚と聴覚の両方で情報をユーザに提示してもよい。以下視覚情報を補助的に用いた例として図５、図６を用いて説明する。
【００４７】
図5は、第１の実施の形態において、視覚情報を補助的に用いたときのイメージ図である。
ユーザ１は、ヘッドフォン装置２を通して、制御装置３が提示する音声情報を順番に聞く。それと同時に、制御装置3は、提示している音声情報に関連付けられた画像情報をディスプレイ装置８に提示する。ディスプレイ装置8には、提示すべき全ての情報についての画像が一覧表示されており、音声にて提示中の情報に関連付けられた情報に対応する画像情報は太枠で囲むなどの、一目で提示中の音声に関連付けられている事がわかるような工夫をする。
【００４８】
図６は、提示情報が切り替わったときのディスプレイ装置８の表示の変化を示している。制御装置３は、複数の情報源に対応する音声情報を順次切り替えて提示すると当時に、ディスプレイ装置８に提示している画像情報についても、提示音声を切り替える毎に対応する画像情報に注目がいくような工夫をする。図６では、音声にて提示中の情報に関連付けられた情報に対応する画像情報は太枠で囲んでいる。Ｓ６１の状態ではＧの情報を音声にて提示中である。ここで、ユーザの指示がない場合もしくは、ユーザが送るボタン６を押すことによって次の情報の提示が指示された場合、制御装置３は、Ｈの情報を提示し、太枠をＨに移動する（Ｓ６２）。Ｓ６１の状態で、ユーザが十字パッドの下方向キーを押したとき、制御装置３は、ディスプレイ装置８上でＧの下に表示しているＫの情報の提示をユーザによって指示されたと判断し、Ｇの音声提示を中止し、Ｋの音声提示を開始し、当時に太枠をＫに移動する（Ｓ６３）。
【００４９】
このように、画像情報を併用することで、音声で提示中でない他の情報を画像情報を用いて閲覧でき、また、戻しボタン４、送りボタン６を一回押すだけでは提示を指示できない情報を十字パッドを用いて提示を指示させることができる。ポインティングデバイスとして使用する十字パッドは、マウス、シャトルリング、ジョグダイアル、マウス、ジョイスティックなどでも構わない。
【００５０】
以上、本発明の方法について説明したが、図７を参照して、本発明を実現する装置について説明する。
【００５１】
７１はディスプレイ装置、７２はヘッドフォン、７３はハードディスク、７４はメモリ、７５はＣＰＵ、７６は十字パッド、決定ボタン、送りボタン、戻しボタン、一つ前の階層に戻るボタン、を備えたコントローラ、である。プログラムはネットワーク経由またはプログラム媒体の形でハードディスク７３から供給され、メモリ７４に蓄えられる。ＣＰＵ７５は、メモリ７４上のプログラムを読み、ヘッドフォン７２に供給する。また、提示中の音声に合わせ提示中の音声に対応した画像を際立たせるよう制御してディスプレイ装置７１に供給する。コントローラ７６からの指示があるとＣＰＵ２５はコントローラ７６が押されたときにヘッドフォンに供給していた音声情報に基づく情報をユーザの所望の情報であると判断する。
【００５２】
なお、本発明は上記実施の形態に限定されるものではない。本発明は、コンピュータを制御装置３として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であってもよく、例えば、磁気テープ、ＣＤ−ＲＯＭ、ＩＣカード、ＲＡＭカード等のいかなるタイプの記録媒体であってもよい。
【００５３】
また、本明細書中に記述したメールアプリケーション、ＣＤカタログ、多チャンネル放送への応用のほかにも、本発明は、多くの情報の中から一つを選ぶ、メニューの中から所望のものを選択する形の技術として広い分野で応用が可能である。
【００５４】
【発明の効果】
本発明の如く、それぞれある情報に関連付けられた複数の音声情報を用いて、順次切り替えて再生することで順番にユーザに情報を提示し、ユーザがボタンを押したときに再生されているものをユーザの所望の情報と判断させることで、ボタン一つでも複数の情報の中からユーザが所望の情報を選択することができる。
【００５５】
また、ユーザの指示がなければ提示される音声情報、提示が終わり次第すぐに次の情報の提示に移るが、ユーザの指示により次に提示されるべき音声情報の提示、一つ前に提示されていた情報の再提示を指示することができ、時間を短縮して所望の情報を得ることもできる。
【００５６】
このように、複数の音声情報を順次再生しユーザに提示することで、複数の情報源の中から一つの情報を選択する際に良好なユーザインタフェースを提供できる。
【００５７】
また、コントローラによって選択操作されたときに再生していた音声情報に関連付けられた情報をユーザの所望の情報と決めておけば、一つのボタンで情報選択を行うことができる。また、戻し、送り、を併用することで、提示待ち時間の節約ができ、短時間で所望の情報を得ることができる。また、画像を併用することで、単にソーティングされた情報をソーティング順に参照するだけでなく、直接選択することもできる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態の操作イメージ図である。
【図２】本発明の基本動作を説明する制御フロー図である。
【図３】本発明をメールのアプリケーションに適用したときの、提示情報の移り変わりの様子を示す制御フロー図である。
【図４】本発明を音楽ＣＤ検索に適用したときの、提示情報の移り変わりの様子を示す制御フロー図である。
【図５】本発明の第２の実施の形態の操作イメージ図である。
【図６】本発明に画像を併用した場合の、表示の変化を表す。
【図７】本発明を実現する装置の構成図である。
【図８】本発明を実現する装置の構成図である。
Claims (10)
- 複数の音声情報に基づき、前記音声情報毎に関連付けられた信号から所望の信号を選択可能な情報選択装置であって、
前記情報選択装置は、音声情報提示手段、指示手段、選択手段および制御手段を備えて、
前記信号は、音声出力指示信号と操作指示信号を含み、
前記音声出力指示信号は、前記音声出力指示信号ごとに対応付けられた音声内容情報の音声出力を指示する信号であり、
前記操作指示信号は、前記操作指示信号毎に対応付けられた操作を指示する信号であり、
前記音声情報提示手段は、前記複数の音声情報を時間経過に従い循環的に音声出力し、
前記指示手段は、外部から操作された選択指示を前記選択手段に与え、
前記選択手段は、前記選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた前記信号を選択し、
前記制御手段は、前記選択手段により選択された信号が前記音声出力指示信号である場合には、当該音声出力指示信号に対応付けられた音声内容情報を音声出力し、選択された信号が前記操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行なう、情報選択装置。 - 前記操作指示信号毎に対応付けられた操作には、前記制御手段により音声出力された前記音声内容情報に対する操作が含まれる、請求項１に記載の情報選択装置。
- 複数の音声内容情報が予め階層化された複数のカテゴリに区分されて、前記音声内容情報の各カテゴリを示すカテゴリ音声情報を含む複数の音声情報に基づき、前記音声情報毎に関連付けられた信号から所望の信号を選択可能な情報選択装置であって、
前記情報選択装置は、音声情報提示手段、指示手段、選択手段および制御手段を備えて、
前記音声情報提示手段は、指示された階層のカテゴリの前記カテゴリ音声情報を含む前記複数の音声情報を時間経過に従い循環的に音声出力し、
前記信号は、音声出力指示信号と操作指示信号を含み、
前記音声出力指示信号は、前記音声出力指示信号毎に対応付けられたカテゴリ音声情報が示すカテゴリの階層よりも１つ下の階層のカテゴリを示す前記カテゴリ音声情報の音声出力を指示する信号であり、
前記操作指示信号は、前記操作指示信号毎に対応付けられた操作を指示する信号であり、
前記指示手段は、外部から操作された選択指示を前記選択手段に与え、
前記選択手段は、前記選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた前記信号を選択し、
前記制御手段は、前記選択手段により選択された信号が前記音声出力指示信号である場合には、前記音声情報提示手段が循環的に音声出力する前記カテゴリ音声情報のカテゴリを前記１つ下の階層に設定し、かつ設定されたカテゴリのカテゴリ音声情報の音声出力を前記音声情報提示手段に指示し、選択された信号が前記操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行ない、
前記操作指示信号に対応付けられた操作には、前記音声情報提示手段により提示される前記カテゴリ音声情報のカテゴリの階層を１つ上の階層に戻す操作が含まれ、
前記音声情報提示手段による音声情報の提示および前記選択手段による選択を繰返すことによりカテゴライズされた前記複数の音声内容情報から徐々に所望の音声内容情報を絞り込むことを特徴とする、情報選択装置。 - 前記音声情報提示手段により提示される前記音声情報の切り替えを指示する切り替え指示手段をさらに備える、請求項１乃至３のいずれかに記載の情報選択装置。
- 前記切り替え指示手段は、提示中の音声情報より後に提示される音声情報、又は、提示中の音声情報より前に提示される音声情報の提示を指示するものであることを特徴とする、請求項４に記載の情報選択装置。
- 前記音声内容情報は、前記信号の他に情報が関連付けされて、所望の音声情報に対応付けられた前記信号が選択されたときに、他の情報も提示する手段をさらに備える、請求項１乃至５のいずれかに記載の情報選択装置。
- 前記音声内容情報は、前記信号の他に視覚情報が関連付けされて、前記音声情報提示手段により前記複数の音声情報を時間経過に従い循環的に音声出力するのに伴って、前記視覚情報も時間経過に従い循環的に表示することにより提示する表示提示手段をさらに備える、請求項１乃至６のいずれかに記載の情報選択装置。
- 複数の前記音声内容情報に関連付けられた前記視覚情報は前記表示提示手段により一覧表示されて、前記表示提示手段は、一覧表示される複数の前記視覚情報のうち前記音声情報の時間経過に従う循環的な表示に伴って、関連付けされている前記視覚情報を時間経過に従い循環的に注目を促す態様で表示することを特徴とする、請求項７に記載の情報選択装置。
- 前記選択指示は単一のボタン操作であることを特徴とする、請求項１乃至８のいずれかに記載の情報選択装置。
- コンピュータを、
複数の音声情報に基づき、前記音声情報毎に関連付けられた信号であって音声出力指示信号と操作指示信号を含む信号から所望の信号を選択可能とするために、音声情報提示手段、指示手段、選択手段および制御手段、として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
前記音声出力指示信号は、前記音声出力指示信号ごとに対応付けられた音声内容情報の音声出力を指示する信号であり、
前記操作指示信号は、前記操作指示信号毎に対応付けられた操作を指示する信号であり、
前記音声情報提示手段は、前記複数の音声情報を時間経過に従い循環的に音声出力し、
前記指示手段は、外部から操作された選択指示を前記選択手段に与え、
前記選択手段は、前記選択指示が与えられた時点で提示されている音声情報に基づいて、当該音声情報に関連付けられた前記信号を選択し、
前記制御手段は、前記選択手段により選択された信号が前記音声出力指示信号である場合には、当該音声出力指示信号に対応付けられた音声内容情報を音声出力し、選択された信号が前記操作指示信号である場合には、当該操作指示信号に対応付けられた操作を行なうことを特徴とする、コンピュータ読み取り可能な記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP18280199A JP3629384B2 (ja) | 1999-06-29 | 1999-06-29 | 情報選択装置及び記録媒体 |
| US09/504,438 US6983251B1 (en) | 1999-02-15 | 2000-02-15 | Information selection apparatus selecting desired information from plurality of audio information by mainly using audio |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP18280199A JP3629384B2 (ja) | 1999-06-29 | 1999-06-29 | 情報選択装置及び記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001013978A JP2001013978A (ja) | 2001-01-19 |
| JP3629384B2 true JP3629384B2 (ja) | 2005-03-16 |
Family
ID=16124670
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP18280199A Expired - Fee Related JP3629384B2 (ja) | 1999-02-15 | 1999-06-29 | 情報選択装置及び記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3629384B2 (ja) |
Families Citing this family (59)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8645137B2 (en) | 2000-03-16 | 2014-02-04 | Apple Inc. | Fast, language-independent method for user authentication by voice |
| JP4672152B2 (ja) * | 2001-01-23 | 2011-04-20 | 三菱電機株式会社 | 音声出力制御装置 |
| US7117442B1 (en) | 2001-02-01 | 2006-10-03 | International Business Machines Corporation | Efficient presentation of database query results through audio user interfaces |
| US7752546B2 (en) * | 2001-06-29 | 2010-07-06 | Thomson Licensing | Method and system for providing an acoustic interface |
| JP2006201749A (ja) | 2004-12-21 | 2006-08-03 | Matsushita Electric Ind Co Ltd | 音声による選択装置、及び選択方法 |
| WO2006107074A1 (ja) * | 2005-04-05 | 2006-10-12 | Matsushita Electric Industrial Co., Ltd. | 携帯端末装置 |
| US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
| JP2007172440A (ja) * | 2005-12-26 | 2007-07-05 | Matsushita Electric Ind Co Ltd | 電気機器 |
| US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
| US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
| US8898568B2 (en) * | 2008-09-09 | 2014-11-25 | Apple Inc. | Audio user interface |
| US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
| US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
| US9431006B2 (en) | 2009-07-02 | 2016-08-30 | Apple Inc. | Methods and apparatuses for automatic speech recognition |
| US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
| US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
| US9280610B2 (en) | 2012-05-14 | 2016-03-08 | Apple Inc. | Crowd sourcing information to fulfill user requests |
| US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
| US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
| US9582608B2 (en) | 2013-06-07 | 2017-02-28 | Apple Inc. | Unified ranking with entropy-weighted information for phrase-based semantic auto-completion |
| WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
| WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
| KR101922663B1 (ko) | 2013-06-09 | 2018-11-28 | 애플 인크. | 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스 |
| US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
| US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
| US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
| US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
| US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
| US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
| US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
| US11010550B2 (en) | 2015-09-29 | 2021-05-18 | Apple Inc. | Unified language modeling framework for word prediction, auto-completion and auto-correction |
| US10366158B2 (en) | 2015-09-29 | 2019-07-30 | Apple Inc. | Efficient word encoding for recurrent neural network language models |
| US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
| US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
| US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
| US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
| US10446143B2 (en) | 2016-03-14 | 2019-10-15 | Apple Inc. | Identification of voice inputs providing credentials |
| US9934775B2 (en) | 2016-05-26 | 2018-04-03 | Apple Inc. | Unit-selection text-to-speech synthesis based on predicted concatenation parameters |
| US9972304B2 (en) | 2016-06-03 | 2018-05-15 | Apple Inc. | Privacy preserving distributed evaluation framework for embedded personalized systems |
| US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
| US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
| DK179309B1 (en) | 2016-06-09 | 2018-04-23 | Apple Inc | Intelligent automated assistant in a home environment |
| US10509862B2 (en) | 2016-06-10 | 2019-12-17 | Apple Inc. | Dynamic phrase expansion of language input |
| US10192552B2 (en) | 2016-06-10 | 2019-01-29 | Apple Inc. | Digital assistant providing whispered speech |
| US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
| US10490187B2 (en) | 2016-06-10 | 2019-11-26 | Apple Inc. | Digital assistant providing automated status report |
| US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
| DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
| DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
| DK179049B1 (en) | 2016-06-11 | 2017-09-18 | Apple Inc | Data driven natural language event detection and classification |
| DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
| US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
| US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
| DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
| DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
| DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
| DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
| DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
| DK179549B1 (en) | 2017-05-16 | 2019-02-12 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01231100A (ja) * | 1988-03-11 | 1989-09-14 | Hitachi Ltd | 音声データフアイル検索方法 |
| JP3175937B2 (ja) * | 1989-12-27 | 2001-06-11 | カシオ計算機株式会社 | メニュー表示装置 |
| JPH0795255B2 (ja) * | 1990-06-13 | 1995-10-11 | 工業技術院長 | 情報提示装置 |
| JP3389258B2 (ja) * | 1992-03-25 | 2003-03-24 | 三洋電機株式会社 | 文章読み上げ装置 |
| JPH05281987A (ja) * | 1992-04-02 | 1993-10-29 | Sanyo Electric Co Ltd | 可搬性文書読み上げ装置 |
| JPH06149517A (ja) * | 1992-11-10 | 1994-05-27 | Hitachi Ltd | メニュー選択方法及び装置 |
| JPH07298162A (ja) * | 1994-04-27 | 1995-11-10 | Toshiba Corp | 二画面テレビ受像機における音声回路 |
| JPH08194492A (ja) * | 1995-01-18 | 1996-07-30 | Fujitsu Ltd | 議事録作成支援装置 |
| JPH0974531A (ja) * | 1995-09-04 | 1997-03-18 | Sony Corp | 音声映像装置 |
| JPH09114493A (ja) * | 1995-10-19 | 1997-05-02 | N T T Data Tsushin Kk | 対話制御装置 |
| JPH09282278A (ja) * | 1996-04-15 | 1997-10-31 | Ricoh Co Ltd | 端末装置および情報配信システム |
| JP3847838B2 (ja) * | 1996-05-13 | 2006-11-22 | キヤノン株式会社 | 情報処理方法及び装置 |
| JPH1078952A (ja) * | 1996-07-29 | 1998-03-24 | Internatl Business Mach Corp <Ibm> | 音声合成方法、音声合成装置、ハイパーテキストの制御方法及び制御装置 |
| JPH10105370A (ja) * | 1996-09-25 | 1998-04-24 | Canon Inc | 文書読み上げ装置，文書読み上げ方法および記憶媒体 |
| JPH10207479A (ja) * | 1997-01-22 | 1998-08-07 | Yamaha Corp | カラオケ装置 |
| JP4032468B2 (ja) * | 1997-11-17 | 2008-01-16 | ソニー株式会社 | 電子機器における機能操作方法、電子機器において実行可能なプログラムが格納された媒体 |
| JP4032467B2 (ja) * | 1997-11-17 | 2008-01-16 | ソニー株式会社 | 電子機器における機能操作方法、電子機器において実行可能なプログラムが格納された媒体 |
| JPH11164215A (ja) * | 1997-11-28 | 1999-06-18 | Toshiba Corp | テレビジョン受像機 |
| JPH11167398A (ja) * | 1997-12-04 | 1999-06-22 | Mitsubishi Electric Corp | 音声合成装置 |
-
1999
- 1999-06-29 JP JP18280199A patent/JP3629384B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001013978A (ja) | 2001-01-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3629384B2 (ja) | 情報選択装置及び記録媒体 | |
| US6983251B1 (en) | Information selection apparatus selecting desired information from plurality of audio information by mainly using audio | |
| US8064888B2 (en) | Communications system that provides user-selectable data when user is on-hold | |
| Sawhney et al. | Speaking and listening on the run: Design for wearable audio computing | |
| Resnick et al. | Skip and scan: cleaning up telephone interface | |
| US5444768A (en) | Portable computer device for audible processing of remotely stored messages | |
| KR101386012B1 (ko) | 플레이리스트 편집 방법 및 이를 적용한 멀티미디어재생장치 | |
| KR101386852B1 (ko) | 공간적 청각 큐들을 이용한 데이터 검색 | |
| KR20070067179A (ko) | 정보 관리 방법, 정보 관리 프로그램 및 정보 관리 장치 | |
| Hindus et al. | Capturing, structuring, and representing ubiquitous audio | |
| JP3763300B2 (ja) | テンプレートファイル編集装置及び編集プログラム | |
| EP0905951A1 (en) | Mobile telephone | |
| JP3766770B2 (ja) | 情報提示装置、情報提示方法、及び情報提示プログラムを記録したコンピュータで読取可能な記録媒体 | |
| US20050286384A1 (en) | Music selection apparatus, music selection system and music selection method | |
| JPH06161704A (ja) | 音声インタフェース・ビルダ・システム | |
| JP4492190B2 (ja) | 情報処理装置および方法、プログラム | |
| US6885732B2 (en) | Voice message vignettes | |
| EP1519382A2 (en) | Information reproducing method, recording medium on which information reproducing program is computer-readably recorded, and information reproducing apparatus | |
| US20070117080A1 (en) | Auxiliary operation system of handheld electronic device | |
| WO1997037344A1 (fr) | Terminal possedant une fonction de synthese vocale et systeme dispensant des donnees caracteres utilisant ce terminal | |
| JP4212592B2 (ja) | 移動通信端末装置 | |
| Sawhney | Contextual awareness, messaging and communication in nomadic audio environments | |
| JP2022051500A (ja) | 関連情報提供方法及びシステム | |
| JP4520375B2 (ja) | 音声操作支援装置、電子機器、画像形成装置およびプログラム | |
| JP2001290841A (ja) | 情報提示装置、情報提示方法および情報提示プログラムを記録したコンピュータで読取可能な記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040316 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040514 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040824 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041025 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20041130 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041213 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071217 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081217 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091217 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091217 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101217 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101217 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111217 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111217 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121217 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121217 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |