JP4567111B2

JP4567111B2 - 情報選択方法、情報選択装置及び記録媒体

Info

Publication number: JP4567111B2
Application number: JP03629999A
Authority: JP
Inventors: あずさ梅本; 充水口; 直樹浦野
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 1999-02-15
Filing date: 1999-02-15
Publication date: 2010-10-20
Anticipated expiration: 2019-02-15
Also published as: JP2000236600A

Description

【０００１】
【発明の属する技術分野】
本発明は、複数の音像に基づき、その音像に関係づけられた情報を選択する情報選択方法、情報選択装置及び記録媒体に関する。
なお、この明細書で、「音像の位置」とは、可能な限り、その場所で音が発生しているように聞こえる場所、又は、その方向から音が聞こえる方向のどちらの意味にも用いる。
【０００２】
【従来の技術】
従来の技術として、複数の情報から１つの情報を選択する方法として、ディスプレイ上に示される文字情報を用いた検索エンジンなどがあげられる。しかし、画面に注目し続ける作業はユーザにとって負担になる。そこで音声を利用する技術が注目されている。また、ラジオ番組、音楽ＣＤなどの多数候補の音声メディアが選択対象にあるときは、文字情報だけを用いて取捨選択するよりも実際にその内容を聞き、直接選択する方が自然である。
【０００３】
複数の音源に基づき、その音源に関係づけられた情報を選択する方法が文献１（特開平１０−１２４２９２号公報）に記載されている。ここでは、複数の音源がユーザの周囲に定位されており、基本的には同じ音量で同時に音を発生している。ユーザは同時に発生する音を聞き分け、所望の方向を指示することにより、その方向の音像と関係づけられた情報を選択することができる。具体的に説明すると、例えば、ビデオ機器の操作として、前方には「再生」、右に「録画」、後方には「巻き戻し」、左には「停止」などの各音声メッセージを定位させる。ユーザが録音したい場合には十字パッドなどのポインティングデバイスを用いて、右方を選択すればよい。文献１に記載された別の方法では、各音像毎にわずかに時間差をおいて発音させる、音質差（男声、女声）をつけることにより、発生する各音を聞き取りやすくする工夫がなされている。
【０００４】
また、単一音源がユーザの周囲で回転し、ユーザが方向を示すことにより、聞き逃した情報を再度再生させる方法が文献２(Minoru kobayashi,Chris Schmandt(MIT)“Dynamic Soundscape:mapping time to space for audio browsing"(CHI97))に記載されている。ここでは、まず、１つの音源が一定の音量と音質で、各トピックを読み上げながらユーザの周囲を回転する。聞き逃したトピックがあるとき、ユーザがそのトピックを発声していた部分を、ポインティングデバイスを用いて指し示すと、その場所に音源が発生し、その場所を通過するとき発声していたトピックから再生し始める。なお、その際は、元の音源は音量を落とし、新たに発声した音源は、音量を大きめに再生し、両者とも回転する。このシステムは同時に８個までの音源が存在することが許されている。
【０００５】
【発明が解決しようとする課題】
しかしながら、文献１の方法では、時間差を置いて発音させたり、方向別に音質を変え、音像の定位位置を分かりやすくしたとしても、人間が聞き分けられる方向は高々８方向と限界があり、選択肢が多数存在する場合には対応できない。
また、ビデオ予約のように、再生、録画等の単語のみの発音の場合はよいが、複数のニュース番組のように連続した内容の音声が発生している場合は、たとえ８方向以下であっても聞き分けは困難である。
【０００６】
また、文献２の方法では、ユーザの入力がない限り、発音される音は一つのみであり、同時に複数の情報を得ることはできない。
本発明は上記課題に基づいて創案されたもので、複数の情報から１つを選択する際に、音声を利用したユーザインタフェースとなる情報選択方法、情報選択装置及び記録媒体を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明の情報選択装置は、音源を備え、所望の情報を選択する情報選択装置であって、前記音源より音像を提示する際に、複数の音像が移動しているかのように、個々の音像の位置を制御する音像制御手段と、選択指示を受け付ける選択指示受付手段と、前記選択指示受付手段において、選択指示を受け付けた時点において、ユーザの最も近くに位置している音像に関連付けられている情報が選択されたと判断する情報選択手段と、を備えるものである。また、各々の音像の音量を制御することによって、複数の音像が移動しているかのように音像の位置を制御することで、音量に関係づけて情報を選択することができる。前記ユーザの最も近くに位置している音像とは、前記音像制御手段によって制御された音像の音量が、最も大きい音像であってもよい。
【０００８】
さらに、前記音像制御手段は、前記個々の音像の位置を、大略円周上を移動しているかのように制御することで、各音像の区別が容易な音像の位置配置とすることができる。また、音像の位置変化指示を受け付ける位置変化指示受付手段を備え、前記音像制御手段は、前記位置変化指示受付手段にて受け付けた指示に基づいて、前記個々の音像の位置を、進める或いは戻すよう制御することで、ユーザの意思によって音像の位置変化を制御することができる。
【０００９】
さらに、画像表示手段と、前記画像表示手段にて、前記個々の音像の位置に、各々の音像に関連付けられている情報に対応する画像を表示するよう制御する画像表示制御手段と、を備えることで、更に視覚を利用して情報を選択することができる。また、前記画像表示制御手段は、個々の音像の位置変化に伴って、表示する画像の面積を変化させてもよい。
【００１０】
また、本発明の情報選択方法は、音像を提示し、複数の音像が移動しているかのように、個々の音像の位置を制御する音像制御ステップと、選択指示を受け付ける選択指示受付ステップと、前記選択指示受付ステップにおいて、選択指示を受け付けた時点において、ユーザの最も近くに位置している音像に関連付けられている情報が選択されたと判断する情報選択ステップと、を備える、情報選択方法である。また、本発明は、音像を提示し、複数の音像が移動しているかのように、個々の音像の位置を制御する音像制御ステップと、選択指示を受け付ける選択指示受付ステップと、前記選択指示受付ステップにおいて、選択指示を受け付けた時点において、ユーザの最も近くに位置している音像に関連付けられている情報が選択されたと判断する情報選択ステップと、を機能させるためのプログラムを記録した、コンピュータ読み取り可能な記録媒体である。
【００１１】
【発明の実施の形態】
以下、本発明の好適な実施の形態を図面を参照して詳細に説明する。
図１は、第１の実施の形態の操作イメージ図である。ユーザ１は、ヘッドフォン装置２を通して、制御装置３で制御される複数の音像を聞く。制御装置３の入力手段には巻き戻しボタン４、決定ボタン５、早送りボタン６を備えたコントローラが設けられている。制御装置３は、ユーザ１の正面方向の水平面上にある音像Ｐ１〜Ｐ２Ｎを認識できるように、ヘッドフォン装置２又はステレオスピーカの左右の音量調節を実現する演算を用い、複数音像Ｐ１〜Ｐ２Ｎが円周上を一定間隔で回転しているかのように同時再生する制御を行う。回転制御を行う際、ある音像Ｐがユーザに最も近い点Ａに来たときにはその音量を最大に設定し、最も遠い点Ｂに来たときに最小音量になるよう、回転とともに音量を順次下げていき、その後、Ｂにて最小音量になった後、Ａにて最大音量になるよう、順次音量を上げる。図１中の各音像の音量の大小関係は、Ｐ１＞Ｐ２＞・・・＞ＰＮ＞ＰＮ＋１＜・・・＜Ｐ２Ｎ、Ｐ２Ｎ＜Ｐ１となる。（ここまで、図２のＳ１２１）。
【００１２】
図２は、第１の実施の形態の動作を説明する制御フロー図である。以下、図１と図２を用いて多チャンネル放送のスポーツ番組案内を例にとって説明する。プロレス番組にはプロレスラーのテーマソング、相撲中継には相撲の始まりに鳴る太鼓の音、といった、各スポーツを連想させる音楽又は音声を用意し、音像として回転させる。また音声は、各放送の音声そのものを用いてもよい。ここでは、図１の音像Ｐ１がプロレスラーのテーマソング、Ｐ２が相撲の太鼓の音、ＰＮ＋１がテニスボールをラケットで打った音、Ｐ２Ｎが野球の応援歌だとする。
【００１３】
ステップＳ１２において、上記のように音量の異なる音像が回転し、ステップＳ１３において、ユーザが最大音量のプロレスを選びたいと判断した場合には、図１の状態で決定ボタン５を押すと、プロレスが所望の情報として処理される（図２のＳ１３，１６，１７）。図１の状態で他のスポーツを選びたいときには、所望のものが一番大きく聞こえるまで待つか、早送りボタン６，巻き戻しボタン４を用いて、選びたいものが一番大きく聞こえるようにするために、各音像の位置を１ステップ戻すか（Ｓ１４）、各音像の位置を１ステップ進める（Ｓ１５）。その後、決定ボタン５を押す。例えば、図１における状態で野球を選びたい場合には、少し待つか、早送りボタン６を押す。相撲は、長く待つか巻き戻しボタン４を押す、もしくは、早送りボタン６で調整すればよい。また、各音像のそれぞれの位置に対応する選択スイッチを設けておいて選択しようとする音像に対応する選択スイッチを押すようにしてもよい。この場合には、所望の音像を直接に選択することができる。
【００１４】
図２のステップＳ１２を再び参照する。多チャンネル放送の映画放送案内など、数が多く一度に回転させるのが困難な数の選択肢については、一定数のみを抽出して回転させる。一定時間選択されない音像については、ユーザから最も遠い点Ｂにおいて未回転の情報と入れ替えることにより、多数の選択肢から、一つを選ぶ場合に対応する（図２、Ｓ１２２，Ｓ１２３）。その際、情報が新しくなったことを示すために、通知音を情報発音の妨げにならない程度に発音させる。この方法を図５を用いて説明する。前述のスポーツ番組案内において、テニスが一定時間選択されていなかった場合（図５(a)参照）、未回転音像キューＱの先頭にある音像（ゴルフ番組の音像であったとする）を未回転音像キューＱから取り出し、テニスの代わりに回転させる。テニスの音像は、未回転音像キューＱの最後に入れる（図５(b)）。その後、ゴルフの音像が初めて最大音量に設定されるときに、通知音を同時に発音させる（図５(c)）。
【００１５】
図３は第２の実施の形態の操作イメージ図であり、図４はその動作を説明する制御フロー図である。情報選択のために音像だけでなく、画像も併用する場合について説明する。制御装置３の入力手段には巻き戻しボタン４、決定ボタン５、早送りボタン６、十字パッド７、ディスプレイ装置８を備えたコントローラが設けられている。ユーザ１は、ヘッドフォン装置２及びディスプレイ装置８を通して、制御装置３で制御される複数の画像を見、音像を聞く。制御装置３は、画像情報を表示するためのディスプレイ装置８を用い、一定間隔を置いて回転する音像Ｐ１〜Ｐ２Ｎにそれぞれ対応づけられた画像Ｄ１〜Ｄ２Ｎを音像に同期させて回転させる制御を行う（図４、Ｓ３２１）。音量と画像の対応は、最大音量のとき画像は面積最大になり、その後、音量は順次小さくなり、最小音量になる。この音量と対応して画像の面積は面積最大から順次小さくなり、面積が最小になる。その後、音量と面積は再び、最小から次第に大きくなり、最大音量、面積最大となる。
【００１６】
ユーザが情報を選択する場合には、ポインティングデバイス、例えば十字パッド７を用いてディスプレイ８装置上のポインタＦを操作し、ディスプレイ装置８上の画像を直接に選択する。あるいは、図３の状態で他のスポーツを選びたいときには、所望の画像が手前に来て音像が一番大きく聞こえるまで待つか、早送りボタン６，巻き戻しボタン４を用いて、選びたいものが手前に来て音像が一番大きく聞こえるようにするために、各画像及び音像の位置を１ステップ戻すか（Ｓ３４）、各画像及び音像の位置を１ステップ進める（Ｓ３５）。その後、決定ボタン５あるいは十字パッド７を押す。これによって、十字パッド７によって指示された音像に関連づけられた情報を「所望の情報」と判断する（Ｓ３６）。例えば、図３における状態で野球を選びたい場合には、少し待つか、早送りボタン６を押す。相撲は、長く待つか巻き戻しボタン４を押す、もしくは、早送りボタン６で調整すればよい。
【００１７】
図４のステップＳ３２を再び参照する。多チャンネル放送の映画放送案内など、数が多く一度に回転させるのが困難な数の選択肢については、一定数のみを抽出して回転させる。一定時間選択されない音像については、ユーザから最も遠い点Ｂにおいて未回転の情報と入れ替えることにより、多数の選択肢から、一つを選ぶ場合に対応する（Ｓ３２２，Ｓ３２３）。
選択メニューが多い場合、カテゴライズすることが可能であれば、まずカテゴリのインデックスを、インデックスの名前を読み上げた音像で作成し、その音像を選択すると、該カテゴリの内容を各々音像として回転させるといったように、メニューを階層化してもよい。
【００１８】
図６はその具体例の操作イメージ図である。まず、図６(a)において、スポーツ、映画、音楽、ドラマのうちスポーツのカテゴリを示す音像を選択したとする。その音像を選択すると、該カテゴリの内容、すなわち、野球、プロレス、テニス、相撲等の音像を回転させる。次に図６(b)において、野球を示す音像を選択すると、このカテゴリの下の階層である巨人ｖｓ阪神、中日ｖｓヤクルト、横浜ｖｓ広島、西武ｖｓ近鉄といった対戦カードの音像が回転する（図６(c)）。
【００１９】
以上、本発明の方法について説明したが、図７を参照して、本発明を実現する装置について説明する。１１はディスプレイ、１２はヘッドフォン、１３はハードディスク、１４はメモリ、１５はＣＰＵ、１６は十字パッド、決定ボタン、早送りボタン、巻き戻しボタンを備えたコントローラである。プログラムはネットワーク経由又はプログラム媒体の形でハードディスク１３から供給され、メモリ１４に蓄えられる。ＣＰＵ１５は、メモリ１４上のプログラムを読み、複数の音像を音量・回転制御を加えて、ヘッドフォン１２に供給する。また、複数の音像にあわせ、複数の画像を大きさ調整・回転制御を加えてディスプレイ１１に供給する。コントローラ１６からの指示があるとＣＰＵ１５はコントローラ１６に指示された音像、画像をユーザの所望の情報であると判断する。
【００２０】
なお、本発明は上記実施の形態に限定されるものではない。
本発明は、コンピュータを制御装置３として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であってもよく、例えば、磁気テープ、ＣＤ−ＲＯＭ、ＩＣカード、ＲＡＭカード等のいかなるタイプの記録媒体であってもよい。
【００２１】
【発明の効果】
以上のように、本発明を用いれば、音声を利用して多くの情報源の中から１つを選択することができる。また、最大の音量の音像が所望の情報であると決めておけば、１つのボタンで情報選択を行うことができる。また、早送り、巻き戻しを併用することで、回転待ち時間の節約ができ、短時間で所望の情報を得ることができる。
また、方向性をもった選択方法を採用することで、待ち時間をさらに短縮することができる。また音像だけでなく、画像も併用して回転させることで、回転状況と、回転している情報の視覚情報も画像で確認できるので、さらに容易に所望の情報を得ることができる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態の操作イメージ図である。
【図２】第１の実施の形態の動作を説明する制御フロー図である。
【図３】第２の実施の形態の操作イメージ図である。
【図４】第２の実施の形態の動作を説明するフロー図である。
【図５】第１の実施の形態の詳細な操作イメージ図である。
【図６】メニュー階層化の操作イメージ図である。
【図７】本発明を実現する装置の構成図である。
【符号の説明】
１ユーザ
２ヘッドフォン装置
３制御装置
４巻き戻しボタン
５決定ボタン
６早送りボタン
７十字パッド

Claims

音源を備え、所望の情報を選択する情報選択装置であって、
前記音源より音像を提示する際に、複数の音像が順次ユーザの近くに移動するかのように、個々の音像の位置をユーザ操作によらずに制御する音像制御手段と、
選択指示を受け付ける選択指示受付手段と、
前記選択指示受付手段において、選択指示を受け付けた時点において、ユーザの最も近くに位置している音像に関連付けられている情報が選択されたと判断する、情報選択手段と、
を備える、情報選択装置。
前記音像制御手段は、各々の音像の音量を制御することによって、複数の音像が移動しているかのように音像の位置を制御する、請求項１に記載の情報選択装置。
前記ユーザの最も近くに位置している音像とは、前記音像制御手段によって制御された音像の音量が、最も大きい音像である、請求項２に記載の情報選択装置。
前記音像制御手段は、前記個々の音像の位置を、大略円周上を移動しているかのように制御する、請求項１乃至請求項３のいずれか一項に記載の情報選択装置。
さらに、音像の位置変化指示を受け付ける位置変化指示受付手段を備え、
前記音像制御手段は、前記位置変化指示受付手段にて受け付けた指示に基づいて、前記個々の音像の位置を、進める或いは戻すよう制御する、請求項１乃至請求項４のいずれか一項に記載の情報選択装置。
さらに、画像表示手段と、
前記画像表示手段にて、前記個々の音像の位置に、各々の音像に関連付けられている情報に対応する画像を表示するよう制御する画像表示制御手段と、
を備える、請求項１乃至請求項５のいずれか一項に記載の情報選択装置。
前記画像表示制御手段は、個々の音像の位置変化に伴って、表示する画像の面積を変化させる、請求項６に記載の情報選択装置。
音像を提示し、複数の音像が順次ユーザの近くに移動するかのように、個々の音像の位置をユーザ操作によらずに制御する音像制御ステップと、
選択指示を受け付ける選択指示受付ステップと、
前記選択指示受付ステップにおいて、選択指示を受け付けた時点において、ユーザの最も近くに位置している音像に関連付けられている情報が選択されたと判断する、情報選択ステップと、
を備える、情報選択方法。
音像を提示し、複数の音像が順次ユーザの近くに移動するかのように、個々の音像の位置をユーザ操作によらずに制御する音像制御ステップと、
選択指示を受け付ける選択指示受付ステップと、
前記選択指示受付ステップにおいて、選択指示を受け付けた時点において、ユーザの最も近くに位置している音像に関連付けられている情報が選択されたと判断する、情報選択ステップと、
を機能させるためのプログラムを記録した、コンピュータ読み取り可能な記録媒体。