JP4672823B2 - 音声データ選択方法、音声出力装置 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、音声データによるプログラム（例えば楽曲）を出力（例えば再生出力）することのできる音声出力装置、及び再生出力等のための音声データ選択方法に関するものである。
【０００２】
【従来の技術】
例えば複数のプログラム（以下、プログラムとして楽曲データの例で述べていく）を再生出力可能な再生装置では、通常、ユーザーが再生させたい楽曲を選択できるようにされる。
例えばＣＤ（COMPACT DISC）プレーヤやＭＤ（MINI DISC）プレーヤでは、装填されているディスク内に収録されている楽曲について、ユーザーはトラックナンバを指定することで所望の楽曲を再生させることができる。
また比較的大型の表示部を備えた場合や、パーソナルコンピュータ等に接続してそのモニタ画面を利用できる場合などは、再生可能な楽曲を曲名やアイコン等で一覧表示させ、ユーザーがその一覧表示上で楽曲の選択をできるものも開発されている。
【０００３】
【発明が解決しようとする課題】
ところで、再生装置として表示部が小さく一覧表示ができない機器の場合や、ユーザーが収録されている各楽曲のナンバ（トラックナンバ）がわからず、所望の楽曲をダイレクトに選択できない場合は、面倒な選択操作が必要になる。
即ち、ユーザーは例えば楽曲の頭出し再生操作などを行いながら１曲づつその曲頭部分などを聴いていき、目的の曲であるか否かを判断していくという煩雑かつ時間のかかる操作が必要になってしまう。
【０００４】
なお据置型の再生装置では、比較的多数の操作キーを配置できるため、例えば数字キーを用意して上記のようなトラックナンバを直接入力して選曲することも可能となるが、携帯用の小型の再生装置の場合はキー数の削減という観点やスペースの制約などから数字キーを用意することは困難であり、上記のような１曲づつ聴きながら所望の曲を探していくという操作を行わざるを得ない。
また選択の容易性実現には上記のように表示部を有効利用することが通常考えられるが、小型軽量化や省電力という要望がある場合は表示部を利用する選択手法は適切とはいえない。
【０００５】
【課題を解決するための手段】
本発明はこのような事情に応じたものであり、基本的には表示を利用しないで、かつ最小限の操作子を必要とするのみで、ユーザーが聴覚によって曲等の音声プログラムの内容を判別し、容易にプログラム選択を行うことができるようにすることを目的とする。
【０００６】
このために、複数の再生用音声データが出力可能なソース（例えばメモリ、ディスク、チューナ等）から出力することのできる音声出力装置（例えば再生装置）において、各再生用音声データの一部を選択用音声データとする。そして少なくとも２チャンネル以上の音声出力系から、選択候補とされる複数の選択用音声データを、互いに異なる定位に音声出力させる。そして出力されている選択用音声データの中から決定操作によって指定された選択用音声データに対応する再生用音声データが選択決定され、選択決定された再生用音声データを再生される。つまりユーザーには、同時に複数の選択用音声データを異なる定位、例えば左、センター、右として聞き分けることができるようにし、その中で所望の再生用音声データを選択できるようにする。そして、異なる定位で音声出力させている選択用音声データの中で、特定の音像位置に定位されている選択用音声データが、前記選択中の選択用音声データとされるようにする。
【０００７】
【発明の実施の形態】
以下、本発明の実施の形態としての再生装置について説明していく。なお説明上、再生出力されるプログラムとは１つの楽曲データで或る例とし、また選択動作の際に各プログラムに対応して出力される選択用音声データを「イヤコン」と呼ぶこととする。説明は次の順序で行ない、特に「１．再生装置の構成」「２．曲選択動作」において１つの実施の形態としての再生装置及びそれに採用されているプログラム選択方法を説明した後、「３．再生装置の構成の他の例」〜「１１．他の各種変形例」までで、各種部位の変形例を述べていく。
１．再生装置の構成
２．曲選択動作
３．再生装置の構成の他の例
４．イヤコンデータの他の例
５．イヤコンをポインタデータで設定する例
６．記憶形態の他の例
７．イヤコンの出力定位例
８．選択中のイヤコンの識別例
９．選択操作／出力イヤコンの他の例
１０．表示部の他の例
１１．他の各種変形例
【０００８】
１．再生装置の構成
図１に再生装置の構成例を示す。
この再生装置はマイクロコンピュータによって形成されたコントローラ１により全体の動作が制御される。
操作部１１としてはユーザーが操作する各種の操作子（キーやダイヤル）が用意されている。例えば再生、録音、停止、サーチ、動作モード切換などのための操作子が用意される。また後述するプログラム選択（以下、曲選択ともいう）のために選択操作（選択候補や選択中の曲の切換操作）や決定操作（候補の中で選択中の曲を選択決定する操作）が可能とされる。
【０００９】
コントローラ１は操作部１１から入力されるユーザーの操作や、ＲＯＭ２に保持している動作プログラムに応じて、各部に対して所要の制御を行うことになる。また、再生装置で実行している動作に応じて、例えば液晶パネルなどで小型に形成されている表示部１０における表示動作を制御する。
【００１０】
記憶部３は、例えばフラッシュメモリなどの固体メモリや、或いはハードディスクドライブ（ＨＤＤ）などにより構成される。この例の場合は、記憶部３には楽曲データや、各楽曲に対応するイヤコンとしてのデータが格納されるものとしており、従ってこの再生装置は記憶部３に記憶された楽曲やイヤコンを再生出力できるものとされる。
【００１１】
演算処理部４は例えばＤＳＰ（DIGITAL SIGNAL PROCESSER）により構成され、各種の信号処理を行う。例えば記憶部３へ格納する楽曲データについての圧縮や所定のエンコード処理、記憶部３から読み出した楽曲データの伸長や所定のデコード処理を行う。また、後述するイヤコン生成のための処理や、複数のイヤコンデータを同時出力する場合の各データの定位や音量（音圧レベル）調整、合成処理なども実行する。なおバッファメモリ１３は、例えば複数のイヤコンデータの出力のための合成処理の際などに演算処理部４が一時的にデータを格納する部位として用いられる。
【００１２】
記憶部３に格納される楽曲データは、アナログ音声入力部５又はデジタル音声入力部７から入力することができる。
アナログ音声信号が入力された場合は、アナログ音声入力部５で入力ゲイン調整や等が行われた後、Ａ／Ｄ変換器６でデジタルデータ化され、演算処理部４に供給される。そして所定の圧縮エンコード等が行われ、記憶部３に格納（録音）される。
またデジタル音声信号が入力された場合は、そのデジタルデータがデジタル音声入力部７から演算処理部４に供給され、所定の圧縮エンコード等が行われて記憶部３に格納（録音）される。
【００１３】
記憶部３から読み出された音声データは、演算処理部４でデコードされた後、Ｄ／Ａ変換器８でアナログ音声信号（Ｌ、Ｒの２チャンネルステレオ）とされ、ステレオ音声出力処理部９でアナログ系の処理、例えば増幅、マスターレベル調整、イコライジング処理等がおこなわれ、再生音声信号として出力される。例えばヘッドホン、スピーカなどに供給され、ステレオ音声として再生出力される。もしくはラインアウトとして他の機器に供給されることもある。
【００１４】
２．曲選択動作
このような再生装置において、ユーザーは記憶部３に楽曲を録音しておくことで、その中から再生させたい曲を選んで再生出力させることができる。例えばＣＤプレーヤやＭＤプレーヤ、その他の音源となる機器を接続してアナログ音声入力部５もしくはデジタル音声入力部７に音声信号を供給することで、記憶部３に楽曲データを格納できる。
そして、記憶部３に格納されている楽曲データについては、ユーザーはイヤコンとしての再生音声を聞きながら、操作部１１での選択操作、決定操作を行うことで、再生させたい所望の曲を探し、選択決定できる。
【００１５】
まず、記憶部３に格納される楽曲データ及びイヤコンデータは例えば図２のようになる。
例えば図２（ａ）のように複数の楽曲データＭ１、Ｍ２、Ｍ３・・・・が格納されるとすると、各楽曲データＭ１、Ｍ２、Ｍ３・・・にそれぞれ対応してイヤコンデータＥＭ１、ＥＭ２、ＥＭ３・・・が生成され格納される。つまり記憶部３内で図２（ｂ）のように楽曲データとイヤコンデータが対応されて管理される状態となる。
ここで、イヤコンデータＥＭ１、ＥＭ２、ＥＭ３・・・は、図２（ａ）のように、対応する楽曲データＭ１、Ｍ２、Ｍ３・・・の一部分を抽出したデータとされている。即ち各楽曲の特徴となるような部分として、いわゆる曲のサビの部分や、主たるメロディの部分などが抽出されてイヤコンデータとされる。
【００１６】
このように複数の楽曲及びイヤコンが格納されている状態で、再生させる楽曲の選択を行う場合には、再生出力可能な曲（つまり記憶部３に格納された全楽曲）のうち所定数づつが順次選択候補とされて、そのイヤコンデータがステレオ音像空間内で異なる定位にいて同時出力される。
本例では、同時再生数を３とし、つまり３つの曲のイヤコンデータを、左、センター、右という３つの定位でそれぞれ出力する。左右のステレオスピーカもしくはステレオヘッドホンで聴いているユーザーにとっては、図３に音像空間を模式的に示すように、ユーザー位置「Ｕ」に対して○で示す左、センター、右という３つの位置から異なる楽曲が聞こえてくることになる。
【００１７】
さらに、３つのイヤコンのうち、１つのイヤコンを「選択中」としてユーザーに容易に認識させるために、例えばセンターに位置しているイヤコンの音声出力の音圧レベルを左右のそれに対して相対的に大きなものとする。「選択中」とは、いわゆる表示上でのカーソル位置のような意味合いであり、つまりその時点で決定操作を行うことで、選択が確定する状態にあるもののことをいっている。
図４は○の大きさを音圧レベルとして示しているが、センター定位するイヤコン音声を最も大きくすることで、ユーザーにとっては、破線の○で示すようにセンター定位の音声が左右の音声よりも近い位置で際だってはっきり聞こえることになり、例えばこの時点で決定操作を行うことで、その最もはっきり聞こえている楽曲が選択されるということを容易に認識できる。
【００１８】
また、このように３つのイヤコンを同時再生すると、その時点では選択可能な候補が３つの曲しかないことになるが、もちろん記憶部３に格納されている楽曲データは３曲に限られないため、より多数の曲を選択候補とする必要がある。そこで本例では、ユーザーの選択操作に応じて、選択候補となる３つの楽曲（イヤコン）がスクロールされていくように切り換えられるとともに、選択中のイヤコンが切り換えられていくようにしている。
この選択操作に応じた出力切換を図５で説明する。
【００１９】
例えば記憶部３に１０曲分の楽曲データ及びイヤコンが格納されていると仮定する。
まず曲選択が開始される最初の時点では、選択状態ＳＬ１として示すように、楽曲Ｍ１、Ｍ２についてのイヤコンＥＭ１，ＥＭ２が同時に出力される。そしてこの状態では楽曲Ｍ１についてのイヤコンＥＭ１が選択中となるように、イヤコンＥＭ１がセンター定位、イヤコンＥＭ２が右定位とされるとともに、イヤコンＥＭ１の方が音圧レベルが高いものとされる。
この状態でもしユーザーが選択中であるイヤコンＥＭ１が所望の曲であるとして決定操作を行ったら、曲Ｍ１の選択が確定し、曲Ｍ１の再生動作に移ることになる。
【００２０】
ところがイヤコンＥＭ１が所望の曲でないときは、ユーザーは選択操作を行うことになり、するとイヤコン再生出力は選択状態ＳＬ２に移行する。即ち選択候補として楽曲Ｍ１、Ｍ２、Ｍ３についてのイヤコンＥＭ１，ＥＭ２、ＥＭ３が同時に出力される。そしてこの状態では楽曲Ｍ２についてのイヤコンＥＭ２が選択中となるように、イヤコンＥＭ１が左定位、イヤコンＥＭ２がセンター定位、イヤコンＥＭ３が右定位とされるとともに、イヤコンＥＭ２が他のイヤコンより音圧レベルが高いものとされる。
この状態でもしユーザーが決定操作を行ったら、曲Ｍ２（イヤコンＥＭ２）の選択が確定し、曲Ｍ２の再生動作に移ることになる。
【００２１】
また、選択状態ＳＬ２からさらにユーザーが選択操作を行なったら、イヤコン再生出力は選択状態ＳＬ３に移行する。即ち選択候補として楽曲Ｍ２、Ｍ３、Ｍ４についてのイヤコンＥＭ２、ＥＭ３、ＥＭ４が同時に出力される。そしてこの状態ではイヤコンＥＭ３が選択中となるように、イヤコンＥＭ２が左定位、イヤコンＥＭ３がセンター定位、イヤコンＥＭ４が右定位とされるとともに、イヤコンＥＭ３が他のイヤコンより音圧レベルが高いものとされる。
この状態でもしユーザーが決定操作を行ったら、曲Ｍ３（イヤコンＥＭ３）の選択が確定し、曲Ｍ３の再生動作に移ることになる。
【００２２】
つまり、以下同様に選択操作により図示する選択状態ＳＬ１〜ＳＬ１０が切り換えられていくことで、ユーザーは各曲のイヤコンを順次選択中としていくことができ、所望の楽曲（イヤコン）が選択中となった時点で決定操作を行うことである曲の選択が確定される。
また、選択状態ＳＬ１〜ＳＬ１０が切り換えられていくことに応じて選択候補、即ち出力されるイヤコンは１つづつ更新されていくことになり、ユーザーにとっては音像空間内で各曲が右から左に順次スクロールしていくように感じられることになる。
さらに選択中のイヤコンを中心として前後の曲が左右で聞こえる、つまり同時に３曲を確認できるため、所望の曲を探す操作が効率的に実行できる。
【００２３】
そしてこのような選曲操作を実現するためには図５（ｂ）に示すようにユーザーの操作のために再生装置は選択操作キーと決定操作キーを用意すればよいものとなる。
なお選択操作キーは、１つのキーとして設け、その操作に応じて選択状態ＳＬ１→ＳＬ２→ＳＬ３→・・・・ＳＬ１０→ＳＬ１→・・・というように切り換えられていくようにしてもよいし、選択状態を図５（ａ）における上下方向に移行させることができるようにアップ／ダウンキーとして形成してもよい。
また決定操作キーは、独立したキーとして設けてもよいし、例えば再生キーを兼用してもよい。但し、後述するが、上記のような曲選択が、再生させる曲の選択以外の目的のためにも実行できるようにする場合は、再生キーとの兼用ではなく、独立したキーとして決定操作キーを設けることが好適である。
【００２４】
なお、イヤコンデータは図２に示したように楽曲の一部であり演奏時間長としては短いデータである。例えば各イヤコンは１０秒程度の演奏時間のデータとして設定される。このため、或る選択状態（ＳＬ１〜ＳＬ１０）が、ユーザーの選択操作又は決定操作を待機していて１０秒程度以上継続される場合などは、各イヤコンは繰り返し再生されることになる。
【００２５】
ところで本例の再生装置では表示部１０を有し、これによって楽曲の選択動作の際に補助的な表示を実行してユーザーにわかりやすい選択操作を提供できる。
例えば本例の再生装置を、図６（ａ）に示すような携帯用の小型の機器とし、いわゆるヘッドホンリモコンと呼ばれているようなヘッドホン３０のコード上の所定位置に表示部１０を備えたリモコン部２０が形成されているとする。
このリモコン部２０を図６（ｂ）に示すが、例えば操作部１１に相当する各種キーとして、再生／ポーズキー２１、停止キー２２、サーチキー２３，２４や、上記選択操作キーに相当するアップ／ダウンキー２５、上記決定操作キーに相当するエンターキー２６などが設けられる。そして表示部１０となる小型の液晶モニタが配されている。
【００２６】
このような小型の表示部１０であっても、例えば図７のような表示を行うことでユーザーの選択操作のガイドを行うことができる。
即ちイヤコンの再生が図５の選択状態ＳＬ１とされている場合は図７（ａ）のように１曲目、２曲目がセンター及び右に定位されていることを示すとともに、センターを例えば点滅させて、１曲目が選択中の状態にあることを提示する。また選択状態ＳＬ２の際には図７（ｂ）のように１曲目、２曲目、３曲目が左、センター、右に定位されていることを示すとともに、センターを点滅させて、２曲目が選択中の状態にあることを提示する。同様に選択状態ＳＬ３の際には図７（ｃ）のような表示を行う。
このようなガイドを行うことで、ユーザーは必要に応じて表示を確認しながら、選択操作を進めることができる。
【００２７】
以上のような曲選択動作を実現するためのコントローラ１の各種処理を、図８〜図１１で説明する。
【００２８】
まず図８でイヤコンを生成するための処理を説明する。
イヤコンは、例えば楽曲データの記録時、即ちユーザーがアナログ音声入力部５又はデジタル音声入力部７から音声信号を入力して記憶部３に格納させる際に同時に生成したり、或いは記録後の所定の時点で、記憶部３に格納されている楽曲データ（まだ対応するイヤコンが生成されていない楽曲データ）に対して処理を行ってイヤコンを生成することが考えられる。
また、演算処理部４の処理性能が高く、或る程度以上の高速処理が可能であれば、予めイヤコンを生成しておくのではなく、楽曲選択のためにイヤコンを出力する際にそのイヤコンを生成するようにしてもよい。
【００２９】
ここでは、楽曲データの記憶部３への録音と同時に、又は記憶部への録音が完了した直後もしくは或る程度後の時点で、イヤコンを生成するとして述べていく。つまり、あくまで楽曲選択動作が実行される時点では、既にイヤコンが生成され記憶部３に図２に示したように格納されているものとする場合である。なお入力された楽曲データを記憶部３へ録音していく際に同時にイヤコンを生成する場合は、演算処理部４では、楽曲データの録音のための処理、即ち圧縮エンコードや記憶部３への転送処理と並行して図８の制御によって指示される処理が行われることになる。
【００３０】
コントローラ１は録音のために入力された楽曲データ（もしくは記憶部３への録音を完了した楽曲データ）に対して、図８の処理を行って演算処理部４にイヤコンを生成させる。
本例では、図２に示したように楽曲内の特徴的な部分（サビなど）を抽出してイヤコンとするために、まずステップＦ１０１では、その特徴部分抽出のためのパラメータを設定する。
【００３１】
特徴的な部分の抽出のためには多様な方法があるが、例えばサビなど曲の中で最も盛り上がる部分とする場合は、平均音圧や周波数スペクトルに基づく抽出方法が考えられる。即ち音圧の大きくなった部位や、高域周波数成分が多くなった部位が、曲中で最も特徴的な部分であるとする。
そこでステップＦ１０１では平均音圧と周波数スペクトル、及び必要なしきい値等をパラメータとし、ステップＦ１０２で対象となる楽曲データについて平均音圧とその時間変化、及び周波数スペクトルとその時間変化を検出していくスキャンを実行する。
【００３２】
このスキャン結果により、平均音圧が或るしきい値を越えた部分がある時間以上継続したこと、及び周波数スペクトルとして或る特徴（例えば高域シフト傾向）が所定時間以上継続しことが認められたら、その部分を特徴部分として認識する。
【００３３】
なお、楽曲データの入力と同時にイヤコン生成する場合は、その入力されてくる楽曲データに対してスキャンを行うことになり、また、既に記憶部３に記憶された楽曲データに対してイヤコンを生成する場合は、例えば記憶部３から一旦楽曲データを読み出してバッファメモリ１３に格納しながらスキャンを行うことなどが考えられる。
【００３４】
このような特徴部分が抽出できるまで、もしくはその楽曲データが終了するまで、ステップＦ１０３，Ｆ１０４のループでスキャンを続ける。
そして或る時点で特徴部分が抽出できたら、ステップＦ１０３からＦ１０５に進み、抽出したデータ部分、つまりステレオ音声データである楽曲データの一部を、モノラルデータに変換し、さらにステップＦ１０６で圧縮処理を行う。なお既に記憶部３に記憶された圧縮データからデータ抽出を行った場合は、ステップＦ１０６の処理は不要となる。
【００３５】
モノラル変換、圧縮処理が完了したら、ステップＦ１０７で、それをイヤコンデータとして記憶部３に記憶させ、これによって１つの楽曲データに対応するイヤコンが生成されたことになる。
このようなイヤコン生成処理は、入力されてくる楽曲データ毎、もしくは記憶部３に格納されている楽曲データ毎に実行されることになる。
【００３６】
ところで多様な楽曲を考えると、ステップＦ１０４でスキャン終了となっても特徴部分が抽出できないこともあり得る。そこでその様な場合はステップＦ１０１に戻ってパラメータを更新する。即ち特徴部分に相当すると判断する条件を変化させる。例えばしきい値を下げたり、音圧パラメータのみを有効とするなどして条件を変化させる。そしてステップＦ１０２から再度スキャンを開始することになる。
【００３７】
以上の図８のようなイヤコン抽出処理は一例であり、他にも処理例や処理タイミングは各種考えられる。
また、イヤコン生成のための特徴部分は、ユーザーが曲中の任意の位置を指定できるようにしてもよい。
【００３８】
例えばこのようにしてイヤコンが生成され、図２のような記憶状態となったら、その後はイヤコンを用いた曲選択動作が実行できる。
再生する曲の選択のためのユーザーの操作に対応する処理を図９に示す。
図９はユーザーの選択操作（例えばアップ／ダウンキー２５の操作）又は決定操作（例えばエンターキー２６又は再生キー２１の操作）を監視する処理を示しており、コントローラ１はステップＦ２０１，Ｆ２０２，Ｆ２０３のループでこれらのユーザー操作を監視している。
そしてユーザーが選択操作を行ったらステップＦ２０４で選択出力処理、即ち図５で説明した或る選択状態でのイヤコンデータの出力制御を行う。
またユーザーが決定操作（又は再生操作）を行ったら、ステップＦ２０５に進んで再生動作を実行すべく制御を行うことになる。
【００３９】
ステップＦ２０４として行われる選択出力処理は、図１０に示される処理となる。
まずステップＦ３０１で、選択のための同時再生を行う曲（この場合はイヤコン）を設定する。例えば最初に選択操作が行われた時点であれば、図５の選択状態ＳＬ１を実現するために、ここではイヤコンＥＭ１，ＥＭ２を同時再生曲（選択候補）として設定する。
また、選択状態ＳＬ１にあるときに再度ユーザーが選択操作を行って図９のステップＦ２０４に進んだ場合は、図１０のステップＦ３０１で、選択状態ＳＬ２を実現するためにイヤコンＥＭ１，ＥＭ２，ＥＭ３を同時再生曲として設定することになる。
【００４０】
選択候補となる同時再生曲を設定したら、ステップＦ３０２で設定された各イヤコンが記憶部３に存在するか否かを確認する。そして選択候補とすべき楽曲のなかで対応するイヤコンが存在しないものがあれば、ステップＦ３０３でイヤコン生成処理を行う。即ち上述した図８の処理を行ってイヤコンを生成する。
【００４１】
ただし上述のように楽曲データの記憶時に同時にイヤコンが生成されるのであれば、ステップＦ３０２の時点でイヤコンデータは存在するはずであるため、必ずしもこのステップＦ３０２，Ｆ３０３のような処理は必要ない。一方、上述したように演算処理部４の処理能力が高ければ、イヤコンは予め生成しておくものではなく選択出力時に生成するものとしてもよい。その様な場合は、選択候補が設定された後にステップＦ３０３で必要なイヤコンが生成されることになる。
【００４２】
必要なイヤコンが揃ったら、ステップＦ３０４で記憶部３からイヤコンを読み出し、例えばバッファメモリ１３に格納しながらステップＦ３０５で音情報成形処理を実行するように演算処理部４に対して指示する。このステップＦ３０４，Ｆ３０５の処理を、選択候補となった各イヤコン（例えば選択状態ＳＬ１の出力の場合は、ＥＭ１，ＥＭ２、選択状態ＳＬ５の出力の場合はＥＭ４、ＥＭ５、ＥＭ６）に対して実行する。
【００４３】
音情報成形とは次のような処理となる。
まず原曲の特徴を損なわない範囲で、イヤコンデータの定位に寄与しない高域と低域の周波数成分をカット又は減少させるフィルタリング処理が行われる。
またイヤコンデータの演奏時間が、予め設定した一定時間になるように時間軸での圧縮又はカットを行うという時間軸方向の処理が行われる。但し、予めイヤコンが一定の演奏時間のデータとして生成されている場合は必要ない。
さらに音圧に関する処理がある。これは３つ（又は２つ）のイヤコンを同時出力することに際して、合成された音声データの音圧がユーザーにとって過度の音圧レベルにならないようにするための処理であり、このため各イヤコンデータのレベルを所定レベル減衰させる処理を行う。
またピーク音圧が規格値を越えないように各イヤコンデータのリミッタ制御も行うことになる。
また、イヤコンデータ内に無音部分が生じている場合は、その部分をカットするということを行ってもよい。
【００４４】
以上のような各イヤコンデータの読出及び音情報成形が行われ、同時出力するイヤコンデータが揃ったら（例えば音情報成形された２つ又は３つのイヤコンデータがバッファメモリ１３に格納された状態となったら）、ステップＦ３０６からＦ３０７に進み、立体音像合成処理を行う。
立体音像合成処理とは、即ち複数のイヤコン（モノラルデータ）をステレオ音像空間内でそれぞれ異なる定位となるようにして合成する処理である。
例えば各イヤコンデータに対して所要の位相差パラメータ、レベル差パラメータを用いて合成処理を行う。
【００４５】
特に本例の場合は、定位として３つのイヤコンを左、センター、右に振り分けること、及びセンター定位の音声が最も高い音圧レベルとなることを実現するための合成処理となる。従って、具体的には、まず音圧レベルに関しては、センター定位すべきイヤコンについては増加させ、左右に定位するイヤコンに関しては減衰させる。
また、定位に関しては、例えばＬ／Ｒ２チャンネルステレオの出力系統に対して、センター定位のイヤコンはＬ：Ｒ＝５：５、右定位のイヤコンはＬ：Ｒ＝２：８、左定位のイヤコンはＬ：Ｒ＝８：２という各音量バランスを与えることで定位を確定させる。
そしてその様に処理した各イヤコンデータを合成し、Ｌ、Ｒ２チャンネルのステレオ音声出力データとする。このように合成処理により生成されたイヤコン合成データは例えばバッファメモリ１３に格納する。以上の処理で、例えば図５の選択状態ＳＬ１〜ＳＬ１０のうちの今回出力すべき或る１つの選択状態を実現するイヤコン合成データが生成されたことになる。
【００４６】
そしてステップＦ３０８では表示部１０の表示状態を、今回出力する選択状態に応じて実行させ（図７参照）、ステップＦ３０９で、イヤコン合成データをＤ／Ａ変換器８、ステレオ音声出力処理部９を介して音声として出力することになる。従って、図３、図４で説明したような定位及び音量バランスで、ユーザーに対して３つ（又は選択状態ＳＬ１、ＳＬ１０の場合は２つ）のイヤコン音声が同時に出力されることになる。
【００４７】
その後、ユーザーが選択操作を行って図９のステップＦ２０４に進むたびに、その操作に応じて出力すべき選択状態（図５参照）に従って、図１０の処理が行われ、図５で説明したように各種選択状態がユーザーに提供されていく。つまりユーザーは選択操作を繰り返すことで、所望の楽曲が選択中となっている状態を探していくことができる。
【００４８】
所望の楽曲が選択中（つまり比較的大音量でのセンター定位）となった時点で、ユーザーは決定操作を行うと、処理は図９のステップＦ２０５に進み、図１１に示す再生処理が行われて、その選択決定された楽曲が再生される。
即ちステップＦ４０１で、記憶部３から選択決定されたイヤコンに対応する楽曲データの読出を開始させ、ステップＦ４０２で演算処理部４でのデコード処理を開始させる。
これによって記憶部３から読み出されてくる楽曲データがＤ／Ａ変換器８、ステレオ音声出力処理部９を介してステレオ音声として出力されることになる。
【００４９】
このように楽曲データの再生を実行している間は、ステップＦ４０３，Ｆ４０４でユーザーの停止操作及び楽曲データの再生終了を監視しており、停止操作又は再生終了となったらステップＦ４０５で再生処理を停止させる。
【００５０】
以上の図８〜図１１のような処理により、ユーザーは或る曲を再生させたいときに、イヤコンデータを聴きながら目的の曲を探していくことができる。
そしてそのイヤコンデータは、複数のイヤコンデータが立体音像空間内で異なる定位で認識されるものとなり、従って同時に多数のイヤコンを確認できる。これによって迅速かつ簡易に目的の曲を探すことができ、また表示部が小型の（もしくは存在しない）再生装置であっても、さらには操作子の少ない再生装置であっても、選択操作性はよいものとなる。
またそのようにして選択決定された楽曲が再生出力されるようにすることで、選択決定操作が再生操作を兼ねるものとなり、再生のためのユーザーの操作はより簡単なものとなる。
【００５１】
また選択時に選択操作に応じて図５の各選択状態が切り換えられていくことは、各イヤコンがスクロールして順次選択中となるようなものとユーザーに認識され、これはユーザー自身が行う選択操作による出力音声の変化をより認識しやすく、また選択操作の意味もわかりやすいものとできる。
さらに選択中の選択用音声データとしては、例えばセンターなどの特定の音像位置に定位され、かつ最も大きい音圧レベルとされるため、同時に複数のイヤコンが聞こえる状態でもユーザーは選択中のイヤコンをはっきり認識でき、各時点で決定操作の実行すべきか否かを迷うことはない。
【００５２】
また本例の場合は、図７のように表示部１０でも、同時再生出力されているイヤコン（楽曲データのナンバ）と、その中で選択中のイヤコン（楽曲データのナンバ）を表示し、ユーザーの選択のための補助となるようにしているため、ユーザーはこれによって選択中の楽曲ナンバを確認できるなど、便利なものとなる。
【００５３】
ところでイヤコンデータについては、記憶する（もしくは記憶した）各楽曲データに対応して予め生成して保持しておくことで、曲選択時、つまり複数のイヤコンを出力する際の処理負担を軽減することができる。またこれにより演算処理部４がさほど高度な演算処理能力を備える必要がなくなり、装置コストの削減にもつながる。
一方、演算処理部４が高度な演算処理能力を備えている場合は、曲選択時（イヤコン出力時）にイヤコンを生成するようにすることで、特にそれ以前にイヤコンを生成しておくという準備は不要となり、また当然記憶部３にイヤコンデータの記憶領域も不要となる。
【００５４】
３．再生装置の構成の他の例
以下、本発明としての各種の変形例を述べていく。ここではまず再生装置の構成としての例を説明する。
図１２は再生装置の他の構成例を示し定る。なお図１と同一部分は同一符号を付し説明を省略する。
この構成例では、再生装置がディスクドライブ１２を有するものとなり、これによってＣＤ、ＭＤなどのディスク、つまり楽曲データを収録するディスクの再生が可能とされるものである。
【００５５】
この場合、ディスクドライブ１２にディスクが装填されることに応じて、そのディスクに収録されているプログラム（楽曲）をスキャンしてイヤコンを生成し、例えばディスクのトラックナンバに対応させて記憶部３に記憶していく。
従って、ユーザーが装填したディスクに収録されている或る楽曲を再生させるために選択操作を行った場合は、記憶部３に収録されているイヤコンを用いて上述してきたような、複数イヤコンを異なる定位で同時再生する動作を行う。
そして或る選択状態で決定操作が行われた場合は、その決定されたイヤコンに対応するディスク上のトラック（楽曲データ）の再生を開始させるようにする。
【００５６】
このようにすることで、いわゆる可搬性メディアで或るＣＤやＭＤというディスクに収録されている楽曲に対してユーザーは、上記例と同様に曲選択を実行できる。
【００５７】
なお、この構成の場合でもアナログ音声入力部５又はデジタル音声入力部７から入力された楽曲データを記憶部３に記憶し、またそれに対応するイヤコンを生成して記憶するようにしてもよい。
またディスクドライブ１２がＭＤに対するドライブなどであって記録機能を有するものである場合は、アナログ音声入力部５又はデジタル音声入力部７から入力された楽曲データを装填されているＭＤに記録するようにすることもできる。その場合は、記録する各楽曲データに対応するイヤコンを生成して記憶部３に記憶するようにすればよい。
ただしこれらの様な録音機能を設けない構成も考えられ、その場合は一点鎖線で囲った入力系の部位は不要となる。
【００５８】
図１３は再生装置のさらに他の構成例であり、この場合は、記憶部３を可搬型の固体メモリ９１（例えばメモリーカード、メモリスティックなど）に対するメモリドライブとして構成するものである。
この場合は、アナログ音声入力部５又はデジタル音声入力部７から入力された楽曲データを記憶部３に装填されている固体メモリ９１に記憶し、またそれに対応するイヤコンを生成して記憶するようにすることで、図１の構成の再生装置と同様に楽曲選択時のイヤコンを用いた再生出力（異定位同時再生）を行うことができる。つまりユーザーは上記同様の選択動作を実行して容易に所望の曲を再生させることができる。
もちろん、楽曲データが記憶された固体メモリ９１が装填された際に、収録されている各楽曲データに対応するイヤコンを生成し、固体メモリ９１に記憶させるようにすることも考えられる。
【００５９】
また可搬性の固体メモリ９１を用いることで、例えば楽曲データとイヤコンデータを予め記憶した固体メモリ９１をユーザーに販売、提供するという方式も考えられる。つまり音楽メディアメーカー側が、収録する各楽曲データに応じた最適なイヤコンデータを予め生成して記憶させておく。このようにすれば再生装置側でイヤコン生成を行う必要はなくなるとともに、楽曲の特徴をよく表す最も好適な部分をイヤコンとして選択時にユーザーに提示できるようにもなる。
また、このように予め楽曲データ及びイヤコンが記憶された固体メモリ９１のみを使用可能とするときは、一点鎖線で囲った入力系の部位は不要となる。
【００６０】
４．イヤコンデータの他の例
ところでイヤコンデータは、楽曲データの中でサビなどの最も特徴のある部分としてきたが、からなずしもその様な部位をサーチして生成するのではなく、或る程度規則的に抽出してもよい。例えば図１４は、各楽曲データの先頭部分の所定時間分を、イヤコンとする例である。
このように規則的に楽曲データ内の或る部分をイヤコンとして抽出するものとすれば、イヤコン抽出処理は非常に簡易化され、例えば処理速度の遅い演算処理部であっても選択のためのイヤコン出力時にイヤコンを生成するということも可能となる。
【００６１】
もちろん楽曲データの先頭位置に限らず、例えば楽曲の開始から１０秒の地点から２０秒の地点までをイヤコンとするなど、楽曲データの途中の特定部分としてもよい。
【００６２】
また上述したようにイヤコンをサビなどの特徴部分とする場合については、そのイヤコン部分としての演奏時間長は、一定時間としてもよいし、特徴部分の長さに応じて可変時間長としてもよい。
さらに、特徴部分とする場合や規則的に抽出する場合に限らず、イヤコンデータを高速再生音声など、通常の再生時とは異なった速度としてユーザーに聞こえるデータ（例えば時間軸方向に間引きを行ったデータ）としてもよい。
【００６３】
５．イヤコンをポインタデータで設定する例
以上の説明では、イヤコンとして楽曲データの一部を抽出したデータを生成する例を述べてきたが、イヤコンとしてのデータ自体を記憶部３に保存しておく必要はなく、例えばイヤコン再生時にそのイヤコンとすべきデータ部分を指定するポインタデータ（イヤコンポインタ）を記憶するようにすることも考えられる。
例えば図１５のように、記憶部３には楽曲データＭ１、Ｍ２・・・に対応してイヤコンポインタＰ１、Ｐ２・・・を記憶するようにする。
【００６４】
このイヤコンポインタとは、図１６に示すように、楽曲データ内の或る部分をアドレス（記憶部３内の楽曲データの記憶されたアドレス）などでイヤコンとして使用する部位を指定するものである。
例えば楽曲データＭ１について図１６（ａ）に示すようにアドレスａｄ１〜ａｄ２の区間が特徴部分として抽出された場合は、対応するイヤコンポインタＰ１として図１６（ｂ）に示すようにその特徴部分のスタートアドレスをアドレスａｄ１、エンドアドレスをアドレスａｄ２として記憶する。
【００６５】
或いは楽曲データＭ１の特徴部分となるアドレスａｄ１〜ａｄ２の区間の演奏時間が１０秒であれば、図１６（ｃ）のように、対応するイヤコンポインタＰ１として、その特徴部分のスタートアドレスをアドレスａｄ１と、演奏時間１０秒（アドレス長又はデータ長）として記憶する。
このようにイヤコンポインタを記憶しておけば、イヤコンを出力する際には、そのイヤコンポインタに従って実際の楽曲データの一部を抽出して読み出すようにすればよく、実データとしてのイヤコンデータを保存しておく必要はない。これによって記憶部３に必要なデータ容量も削減できる。
【００６６】
なお、イヤコンデータとしてのデータ長（演奏時間長）が可変とされる場合は、図１６（ｂ）又は（ｃ）のような形態のイヤコンポインタが必要となるが、イヤコンデータのデータ長が固定とされる場合は、イヤコンポインタはスタートアドレスのみでよいものとなる。
また、図１４のように楽曲データ内の特定の部分をイヤコンとする場合でも、イヤコンポインタを記憶する方式を採用できることはいうまでもない。
【００６７】
楽曲データ内の特徴的な部分を抽出してイヤコンとする場合の、図１６（ｂ）又は（ｃ）のようなイヤコンポインタの設定処理を図１７に示す。
この処理においてステップＦ１５１〜Ｆ１５４は、図８のステップＦ１０１〜Ｆ１０４と同様となるため説明を省略する。
楽曲データをスキャンして特徴部分が抽出できたら、ステップＦ１５５で、その特徴部分のスタートアドレスとエンドアドレス（又はスタートアドレスと特徴部分の時間長（データ長））を検出する。
そしてステップＦ１５６として、検出したスタートアドレスとエンドアドレス（又はスタートアドレスと特徴部分の時間長（データ長））を、その楽曲データに対応させて記憶部３に記憶する。
これにより図１６に示したようなイヤコンポインタを設定できる。
【００６８】
またイヤコンポインタを保存する方式の場合の、曲選択の際の処理（イヤコン出力処理）は図１８のようになる。
ステップＦ３５１〜Ｆ３５３、及びステップＦ３５８〜Ｆ３６０は図１０のステップＦ３０１〜Ｆ３０３、及びステップＦ３０７〜Ｆ３０９と同様になる。
この場合は、同時に出力する各イヤコンの読出処理としてステップＦ３５４〜Ｆ３５７の処理が図１０と異なるものとなる。
即ちステップＦ３５４では選択候補とされた楽曲に対応するイヤコンポインタに基づいて、その楽曲データの一部、つまりイヤコンポインタで示される部分を記憶部から読み出す。
読み出された楽曲データの一部はステレオ音声データであるので、ステップＦ３５５でモノラル音声データに変換する。
そしてステップＦ３５６で図１０のステップＦ３０５と同様に音情報整形処理を行い、イヤコンデータを得ることになる。
【００６９】
このようにして選択候補とされる各楽曲のイヤコンを得たら、ステップＦ３５８以降で、それらを異なる定位やそれぞれ所要の音節レベルで合成し、同時に再生出力することになる。
従って、イヤコンポインタを記憶する方式の場合でも、ユーザーの選択操作は全く同様に実現される。
【００７０】
６．記憶形態の他の例
ところで、以上のような再生装置の構成やイヤコン方式の各例に応じて、記憶部３の記憶形態は多様に考えられることが理解される。
即ち図２（ｂ）や図１５に示した記憶形態の他にも、図１９（ａ）（ｂ）（ｃ）のような記憶形態が考えられる。
【００７１】
図１９（ａ）は記憶部３に楽曲データのみを記憶することとし、イヤコンデータ又はイヤコンポインタを記憶しない例である。これは、イヤコンデータをイヤコンの再生の際（つまり曲選択の際）に生成する処理方式を採用した場合の記憶形態となる。
なお、図１２のようにディスクドライブに装填されたディスクの楽曲データを再生対象とするとともに、イヤコンデータについてはイヤコンの再生の際に生成するものとした場合などは、記憶部３を不要とすることも可能である。
【００７２】
図１９（ｂ）は、記憶部３にイヤコンデータのみを記憶する形態である。これは図１２のようにディスクドライブに装填されたディスクの楽曲データを再生対象とするとともに、ディスク装填に応じて、ディスクに収録された各楽曲データに対応するイヤコンデータを生成して記憶部３に格納していく場合の記憶形態となる。
【００７３】
図１９（ｃ）は、記憶部３にイヤコンポインタのみを記憶する形態である。これは図１２のようにディスクドライブに装填されたディスクの楽曲データを再生対象とするとともに、ディスク装填に応じてイヤコンポインタを生成して記憶部３に格納し、イヤコン再生時にイヤコンポインタに応じてディスク上の楽曲データの一部を抽出してイヤコンデータを得るようにした場合の記憶形態となる。
【００７４】
７．イヤコンの出力定位例
イヤコンの出力は３つのイヤコンデータをそれぞれ左、センター、右という各定位とすることとして説明してきたが、それ以外にも多様に考えられる。図２０で他の定位例を述べていく。図２０の各図において○が音像位置、Ｕが音像空間内でのユーザー位置を示している。
【００７５】
まず図２０（ａ）は、同じく３つのイヤコンデータを左、センター、右という各定位で同時に出力するものである。ただし、上述してきた例は図３のように音像空間内のユーザーの位置Ｕに対して左の音像は左前方、右の音像は右前方としていたが、この図２０（ａ）の例は、左の音像はユーザー位置Ｕに対して左真横となる位置、右の音像はユーザー位置Ｕに対して右真横となる位置となるようにするものである。
これは、例えばＬ／Ｒ２チャンネルステレオの出力系統に対して、センター定位のイヤコンはＬ：Ｒ＝５：５、右定位のイヤコンはＬ：Ｒ＝０：１０、左定位のイヤコンはＬ：Ｒ＝１０：０という各音量バランスを与えることで実現する。
このようにすることで、ユーザーにとっては左、センター、右という各音像の定位感をよりはっきり認識できるようになる。
【００７６】
図２０（ｂ）は、２つのイヤコンを同時に左（ユーザー位置Ｕの左前方）と右（ユーザー位置Ｕの右前方）という各定位で出力する例である。
例えばＬ／Ｒ２チャンネルステレオの出力系統に対して、右定位のイヤコンはＬ：Ｒ＝３：７、左定位のイヤコンはＬ：Ｒ＝７：３という各音量バランスを与えることで実現する。
【００７７】
例えばユーザーによっては３つのイヤコンを同時に聴くことが困難であると感じる人もいるため、その様な事情を考慮する場合は、このように同時出力数を２つとして、各音像がよりはっきり聞き取れるようにすることが考えられる。
【００７８】
もちろん、Ｌ／Ｒ２チャンネルステレオの出力系統に対して、右定位のイヤコンはＬ：Ｒ＝０：１０、左定位のイヤコンはＬ：Ｒ＝１０：０という各音量バランスを与えることで２つの音像をユーザーにとって左真横と右真横に聞こえるようにしてもよい。
【００７９】
図２０（ｃ）は、４つのイヤコンを、左、センター、右、後方という各定位で同時出力する例である。
このような出力を行うためには、例えばスピーカシステムとして３チャンネル、もしくは４チャンネルのものが用いられている場合は、単純に各イヤコンデータ信号を振り分けることで実現できる。また左右２チャンネルのスピーカシステムもしくはヘッドホンの場合でも、左右出力音声のタイム差（遅延処理）などによりユーザーの後方から聞こえてくるように感じさせる処理が可能であることは既に知られており、そのような手法を採ってもよい。
【００８０】
図２０（ｄ）は、５つのイヤコンをユーザーが、左真横、左前方、センター、右前方、右真横にそれぞれ感じるように同時に出力する例である。
このようにより多数のイヤコンを同時に聞けるようにすることで、ユーザーの選択操作の効率化することができる。
【００８１】
以上例示した以外にも、イヤコンの同時出力数や各イヤコン音像の定位関係については各種考えられる。
【００８２】
なお、同時出力するイヤコンの数や定位関係は、ユーザーによって好みが分かれるものとなり、また各ユーザーの音像聞き取り能力の差異により好ましい出力状態が異なるものとなる。
例えば聴感の発達した人であれば、多数の音像の聞き分けも容易であり、従って図２０（ｄ）のようになるべく多数のイヤコンを出力することで、選択効率の向上を実現できる。
一方、各定位の音像をあまり聞き分けられない人であれば、逆に図２０（ｄ）のような出力では音像選択がしずらいものとなり、その様な人は図２０（ｂ）のように同時出力数が少ない方が好ましい。
【００８３】
このようにユーザー毎に最適なイヤコン出力数や定位関係は異なるものとなるため、再生装置としてはユーザーが所望のイヤコン出力数や所望の定位関係を選択できるようにすることが望ましい。
また或る定位状態においても、その定位をユーザーが微調整（例えば左音像を若干右側にずらすなど）できるようにし、ユーザーが自分にとって最適な定位関係を作ることができるようにすると好適である。
【００８４】
８．選択中のイヤコンの識別例
以上のような同時出力するイヤコン数及び定位関係だけでなく、同時出力されているイヤコンの中で現在選択中のイヤコン（その時点で決定操作を行うことで選択が確定することになるイヤコン）をユーザーに識別させるための手法も各種考えられる。
例えば上述してきた例では図５でも説明したように、選択中のイヤコンがセンター定位であってかつ音圧レベルが最大となるようにしていた。
つまり特定の定位と音量差によってユーザーに選択中の音像を識別させていた。
【００８５】
このような特定定位と音量差により選択中のイヤコンを識別させる方式としての他の例を図２１に示す。
図２１（ａ）は、２つのイヤコンを左右の各定位で同時出力する場合に、例えば選択中のイヤコンを左定位とするとともに、その左定位のイヤコンの音圧レベルを右定位のイヤコンよりも大きいものとする例である。（図中、○の大きさが音圧を示すものとしている。）
これによって破線の○で示すようにユーザーにとっては左音像の方が右音像よりも近い位置ではっきりと聞き取れることになり、選択中のイヤコンを識別できる。
【００８６】
また図２１（ｂ）は、例えば選択中のイヤコンだけでなく、それ以外のイヤコン間でも音量差を持たせる例である。
この場合、３つのイヤコンを左、センター、右の各定位で同時出力する場合に、例えば選択中のイヤコンを左定位とするとともに、その左定位のイヤコンの音圧レベルを最も大きいものとする。
また、例えば選択中でないセンターのイヤコンや右のイヤコンにも音量差を持たせ、例えば右のイヤコンが最も小さい音量となるようにする。
【００８７】
このようにすると、破線の○で示すようにユーザーにとっては左音像の方が最も近い位置ではっきりと聞き取れることになり、選択中のイヤコンを識別できる。そしてさらに、各イヤコンがユーザーの左側から右後方に向かって並んでいるように認識されることになり、例えばこの時点で選択操作を行うと現在センター定位しているイヤコンが左定位となって選択中となること、及び２回選択操作を行うと現在右に定位しているイヤコンが左定位となって選択中となることなどが認識できる。
つまりユーザーにとっては、選択操作に応じて選択候補となる各イヤコンが右遠方から左近傍に向かって近づいてくるように感じられ、これによって選択中のイヤコンや、自分が実行すべき選択操作、決定操作を捉えやすくすることができる。
【００８８】
ところで、例えば出力されている各音像を全て同等に聞こえるようにしたい場合、つまり音圧レベルとして各イヤコンに差を与えたくないような場合は、特定の定位にあるイヤコンが選択中であるとするようにしてもよい。
例えばユーザーがセンター定位のイヤコンが選択中であるとわかっていれば、特に音量差を設定しなくても、ユーザーは的確に選択操作、決定操作を行うことができる。もちろん、右定位又は左定位のものが選択中であると決めてもよい。
【００８９】
一方、音量差を設定して最もよく聞こえる音像が選択中のイヤコンであるとすることは、特定定位を選択中であるとすることに比べて、より多くのユーザーにとってわかりやすいものとなる。
例えば上記のように特定の定位を選択中であるとする場合は、取扱説明書などでユーザーにそのことを伝えなければならないため、取扱説明書を読んでいなかったり使用方法の説明を受けていないユーザーにとってはわかりにくいものとなる。ところが音量差を設けて、１つのイヤコンを最も際だたせるようにすれば、ユーザーは直感的にそのイヤコンが選択中であることが認識できる。
このように音圧レベルに差を持たせて選択中のイヤコンを提示することは有効であるが、この方式を採用する場合は、必ずしも或る特定の定位を選択中とすることにこだわらなくてもよいことになる。
【００９０】
例えば図２２に、３つのイヤコンＥＭ１，ＥＭ２、ＥＭ３を右、センター、左の各定位で同時出力する例を示している。このとき、この３つのイヤコンについては定位に変化がないまま、選択操作に応じて最大音圧となるイヤコンが変化されていくようにするものである。
即ち、ある時点では図２２（ａ）のように右定位されているイヤコンＥＭ１が最大音量とされて選択中であることが提示される。
ここでユーザーが選択操作を行うと、今度は図２２（ｂ）のように、選択候補となる３つのイヤコンＥＭ１，ＥＭ２、ＥＭ３は変わらないが、センター定位のイヤコンＥＭ２が最大音量とされることになって選択中となる。
さらに選択操作が行われると図２２（ｃ）のように、左定位のイヤコンＥＭ３が最大音量とされることになって、選択中のイヤコンがＥＭ３となる。
【００９１】
このようにした場合、出力される各イヤコンの定位は変動しないうえで、選択中のイヤコンをはっきり認識できる。
ユーザーによっては、イヤコンの定位が移動されない方が選択しやすいという人もいるため、その様な要望のある場合に好適である。
【００９２】
以上の各例のように選択中のイヤコンをユーザーが識別できるようにする方式としては、特定の定位のイヤコンを選択中とすること、音量差により選択中のイヤコンを提示すること、特定の定位と音量差の両方により選択中のイヤコンを提示することなど、各種の方式が考えられ、これらの各方式において、例示した以外にも多様な例が考えられる。
【００９３】
また、定位や音量で識別させる以外にも、音質的な変化を与えて識別させるといった方式も可能である。
例えば選択中となるイヤコンの音声データには高域を強調するような信号処理を施し、同時出力する他のイヤコンの音声データには高域をカットするようなフィルタリングを行うようにすると、ユーザにとっては選択中のイヤコンがはっきり聞き取れ、逆に他のイヤコンはくぐもった感じに聞き取れることになるため、選択中のイヤコンを識別できる。
【００９４】
また、選択中のイヤコンの提示をどのような方式で実行するとよいかは、個々のユーザーによって好みや識別の容易性が分かれることになるため、再生装置としてはユーザーが選択中のイヤコンの識別方式を選択できるようにすることが好ましい。
【００９５】
９．選択操作／出力イヤコンの他の例
例えば３つのイヤコンを同時再生するとした場合、図５で説明したようにユーザーの選択操作に従ってイヤコンがスクロールしていくように選択状態（ＳＬ１〜ＳＬ１０）が切り換えられていくとしたが、この選択状態の切換例も各種考えられる。
【００９６】
図２３は選択操作を階層的に実現する例であり、この場合、ユーザーの操作としては選択状態をページ切り換えしていく操作と、ページ内で選択中のイヤコンを切り換えていく２段階の操作が行われることになる。従って必要な操作キーは図２３（ｂ）のようにページ選択のための操作子、曲選択（選択中のイヤコンの切り換え）のための操作子、及び決定操作のための操作子となる。
【００９７】
図５の例と同様に、例えば記憶部３に１０曲分の楽曲データ及びイヤコンが格納されていると仮定して図２３（ａ）の方式を説明する。
まず曲選択が開始される最初の時点では、ページ選択状態ＳＬ１１として示すように、楽曲Ｍ１、Ｍ２、Ｍ３についてのイヤコンＥＭ１，ＥＭ２，ＥＭ３が同時に出力される。
そしてこのページ選択状態ＳＬ１１では、最初に選択状態ＳＬ１１１として示すように、楽曲Ｍ１についてのイヤコンＥＭ１が選択中となるようする。選択中のイヤコンの識別方式としては例えば図２２のように、定位位置ではなく音圧レベルのみでユーザーに認識されるようにする。即ちこの例ではページ選択状態ＳＬ１１ではイヤコンＥＭ１，ＥＭ２，ＥＭ３がそれぞれ左、センター、右と定位されるため、左定位であるイヤコンＥＭ１の音圧レベルが最大とされる。
【００９８】
ここで、ページ選択状態ＳＬ１１として出力されているイヤコンＥＭ１，ＥＭ２，ＥＭ３の中でユーザーが所望する曲があった場合は、曲選択操作を行って選択状態ＳＬ１１１、ＳＬ１１２、ＳＬ１１３を切り換える。例えばイヤコンＥＭ２が所望の曲であった場合は、選択状態ＳＬ１１２とした時点、つまりユーザーにとってイヤコンＥＭ２が最大音量で聞こえる状態で決定操作を行えばよい。
【００９９】
一方、イヤコンＥＭ１，ＥＭ２，ＥＭ３の中には所望の曲がない場合は、ユーザーはページ選択操作を行って、ページ選択状態ＳＬ１１、ＳＬ１２、ＳＬ１３、ＳＬ１４を切り換えていく。そして所望の曲が含まれるページ選択状態において、曲選択操作を行って所望の曲（イヤコン）が選択中となるようにし、その状態で決定操作を行う。
【０１００】
即ちこのような選択操作方式によれば、ページ選択操作によって所望の曲が含まれるページを探していき、そのページとなったら曲選択操作を行って出力されている３つのイヤコンの中から所望の曲のイヤコンを選択して決定操作すればよい。このため、ぺージ選択を有効に利用することで、多数の曲が再生可能な場合に効率よく所望の曲を選択できることになる。
【０１０１】
続いて図２４（ａ）にさらに他の選択操作方式の例を示す。
これは、ユーザーの選択操作に応じて選択中のイヤコンがＥＭ１→ＥＭ２→ＥＭ３→ＥＭ４→・・・というように変化していくものであるが、各イヤコンの定位は固定される例である。
またこれも選択中のイヤコンの識別は例えば最大音量レベルのものとして提示するものとする。
【０１０２】
この場合、曲選択が開始される最初の時点では、選択状態ＳＬ２１として示すように、楽曲Ｍ１、Ｍ２、Ｍ３についてのイヤコンＥＭ１，ＥＭ２，ＥＭ３が左、センター、右という各定位で同時に出力される。
そしてこのページ選択状態ＳＬ２１では、左定位であるイヤコンＥＭ１の音圧レベルが最大とされ、イヤコンＥＭ１が選択中であることがユーザーに提示される。
【０１０３】
ここでユーザーが選択操作を行うと、選択状態ＳＬ２２とされ、この場合イヤコンＥＭ１，ＥＭ２，ＥＭ３が左、センター、右という各定位で同時に出力されることは変わらないが、センター定位であるイヤコンＥＭ２の音圧レベルが最大とされ、イヤコンＥＭ２が選択中であることがユーザーに提示される。
さらにユーザーが選択操作を行うと、選択状態ＳＬ２３とされ、右定位であるイヤコンＥＭ３の音圧レベルが最大とされてイヤコンＥＭ３が選択中であることがユーザーに提示される。
【０１０４】
さらにユーザーが選択操作を行うと、選択状態ＳＬ２４として、今度は楽曲Ｍ４、Ｍ５、Ｍ６についてのイヤコンＥＭ４，ＥＭ５，ＥＭ６が左、センター、右という各定位で同時に出力される。そして、左定位であるイヤコンＥＭ４の音圧レベルが最大とされてイヤコンＥＭ４が選択中であることがユーザーに提示される。
【０１０５】
このように選択状態を切り換えていきながら、ユーザーは所望の曲が選択中となるようにし、その時点で決定操作を行うことで、曲が選択決定される。
【０１０６】
この選択操作方式の場合は、必要な操作子は図２４（ｂ）に示すように選択操作子（例えばアップ／ダウンキー）と決定操作子となる。
そして、各イヤコンの定位は固定されることから、所望のイヤコンを探しやすいという利点も生じる。
【０１０７】
これらの例以外にも多様な選択操作方式例が考えられる。
またユーザーの方式設定操作（選択操作モードの設定）によって、好ましい選択操作方式が選択できるようにしてもよい。
【０１０８】
また、以上の例は基本的には選択操作キーの操作に応じて選択中のイヤコンが切り換えられていくものとしているが、このようなキー操作を不要とする例も考えられる。
例えばヘッドホンを使用する場合に、ヘッドホンに加速度センサや回転センサを内蔵するようにし、ユーザーの頭の向きの変化を検出する。そして例えば右を向いたときには右定位のイヤコンが選択中となるようにする。具体的には、ユーザーが正面を向いているときは図２４の選択状態ＳＬ２２とし、右を向いたら選択状態ＳＬ２３に切り換える。またその状態からさらに右側に首を振ったら選択状態ＳＬ２４に移行するなど方式とすることで、選択操作をユーザーの動作により実現できる。この場合、選択操作子を不要とすることもできる。
またさらに、ユーザーがうなずくように首を縦に振ったことを決定操作として処理を行うことも考えられる。
【０１０９】
また選択操作、決定操作のための操作子は、図６（ｂ）のようなキー操作子ではなく、図２５に示すようなダイヤル２７としてもよい。このダイヤル２７は、上方回動、下方回動、及び押圧が可能とし、上方回動をアップ方向の選択操作、下方回動をダウン方向の選択操作、押圧を決定操作とする例である。
また上方回動、下方回動はその回動角度に応じてアップもしくはダウン方向のステップ数を変動させることで、選択状態を効率よく切り換えていくことも可能となる。
【０１１０】
ところで、イヤコンの再生出力に関しては、 通常の演奏速度よりも高速で再生させるなどの手法も考えられる。
【０１１１】
１０．表示部の他の例
本発明では基本的にイヤコンを聴いて曲選択をおこなうものであるため、表示部１０において選択のための表示を行うこと、もしくは表示部を設けることは必ずしも必要ではない。但し、表示部１０において選択のガイドとなるような表示を行うことで、ユーザーの選択操作、決定操作をわかりやすいものとすることができる。
このため、図７で説明したように例えば小型液晶パネルなどにおいてイヤコン出力状態を表示することが考えられるが、その表示内容、表示形態は、上述してきた各種選択操作方式、イヤコン同時出力数、定位関係などに応じて設定されるものであることはいうまでもない。
【０１１２】
また、液晶パネル等の表示素子を用いずに、例えばＬＥＤなどの発光素子で簡易的なガイド表示を行うこともできる。
例えば図２６は、図２２のように選択中のイヤコンを最大音圧とするとともに、各イヤコンの定位は変更しない方式を採用する場合に好適な表示例を示している。
【０１１３】
この場合、ヘッドホンリモコンなどの部位に、図２６に示すように左、センター、右に対応する３つのＬＥＤによる表示部１５を配する。
そして例えば図２２（ｂ）のようにセンター定位のイヤコンが選択中の場合には、図２６（ａ）のようにセンタのＬＥＤを発光（又は点滅）させ、左右のＬＥＤはオフ（又は点灯）させる。
また図２２（ｃ）のように左定位のイヤコンが選択中の場合には、図２６（ｂ）のように左のＬＥＤを発光（又は点滅）させ、センター及び右のＬＥＤはオフ（又は点灯）させる。
このようにすることで、ユーザーは選択中のイヤコンを目でも確認できる。また、ＬＥＤを用いることで、表示部を安価でかつ小さいスペース内に設けることが可能となる。
【０１１４】
１１．他の各種変形例
以上、実施の形態として実現できる各種の例を述べてきたが、本発明はさらに多様な変形例が考えられる。
【０１１５】
まず、いままでの説明では、楽曲の選択は再生を目的とするものとしてきた。しかしながら再生以外にも楽曲を選択する必要がある場合に本発明の選択方法を適用できることになる。
例えば図１のような再生装置でいえば、記憶部３に記憶させた楽曲のうちで消去したい曲を選択する場合にも、上記同様のイヤコンによる選択動作を適用できる。もちろん消去だけでなく、ある楽曲データを何らかの編集操作のために指定したい場合なども同様である。
【０１１６】
さらに、一般にプログラム再生と呼ばれているようにユーザーが曲順を指定してその指定順に再生を行っていくような特殊な再生動作方式が知られているが、その様なプログラム再生させる曲を順次選択していく際に、上記同様のイヤコンによる選択を行うことが可能である。
即ち本発明は、各種の目的のために或る楽曲データ等を指定したい場合の選択方式として広く適用できるものである。
【０１１７】
また、本発明のイヤコン選択方式で選択するデータ（再生出力するプログラム）としては、楽曲データに限られず、また記憶部３や図１２のディスクドライブ１２にから再生されるデータに限られるものではない。
例えば受信したラジオ放送について局別にイヤコンを生成し、その各イヤコン（つまり放送音声）を異なる定位で同時出力してユーザーが聴きたい放送局を選択できるようにすることが考えられる。
同様に有線放送などのチャンネル選択にも本発明は利用できる。
つまり本発明としての音声出力装置は、上述してきた再生装置のみならず、放送受信装置として実現するような例も考えられる。
【０１１８】
また、選択動作の際に複数のイヤコンを同時再生することに加えて、他の音声データを合成して出力することも考えられる。
例えば選択操作のためのガイド音声をイヤコンとは異なる定位で出力してユーザーに操作を説明するなども可能である。
【０１１９】
【発明の効果】
以上の説明からわかるように本発明では以下のような各種効果が得られ、これによってユーザーの使用に好適な音声出力装置、及びプログラム選択が実現できる。
【０１２０】
まず本発明では少なくとも２チャンネル以上の音声出力系から、選択候補とされる複数の選択用音声データを、互いに異なる定位で同時に出力させ、出力されている選択用音声データの中から決定操作によって指定された選択用音声データに対応する再生用音声データが選択決定されるようにしている。つまり、ユーザーは表示でいうアイコンのように、各再生用音声データ（楽曲等）についての選択用音声データ（イヤコン）を立体音像空間内で認識することができ、その中で所望の再生用音声データを選択できる。従って、表示部のない（もしくは小型の表示部しか持たない）音声出力装置であっても、さらには操作子の少ない音声出力装置であっても、ユーザーは容易かつ迅速に再生用音声データ選択を行うことが可能となるという効果がある。またこれにより装置の小型化や、ユーザーの使用性の向上を実現できる。
【０１２１】
またそのようにして選択決定された再生用音声データは再生出力（又は受信出力）させる再生用音声データとして再生出力（又は受信出力）を開始させることで、本発明の音声出力装置を再生装置や受信装置として実現する場合にユーザーの求める適切な動作を効率よく、かつユーザーの操作負担なしに進めることができる。
【０１２２】
同時出力する選択用音声データ、つまり各時点での選択候補については、選択操作に応じて、一部又は全部を変更していく（順送りやページ切換）ことで、同時出力数よりも多数の再生用音声データの選択が容易に実現できる。
また選択操作に応じて、その時点で決定操作が行われた場合に選択決定されることになる選択中の選択用音声データを変更していくことで、各選択用音声データの出力を、ユーザーの操作に対応したユーザーにとってわかりやすいものとできる。
【０１２３】
各時点で選択中の選択用音声データとしては、特定の音像位置に定位されている選択用音声データと決めることで、ユーザーが選択中であるのがどれであるかを認識できるようになる。
また、選択中の選択用音声データは、同時出力されている中で最も大きい音圧レベルとされるようにすることで、ユーザーにとって選択中の選択用音声データを非常に容易に認識でき、もって選択操作の容易性を向上させるとともに選択ミスが発生しにくいようにすることができる。
さらに、少なくとも選択候補とされて同時出力されている選択用音声データの中で選択中の選択用音声データを示す表示を実行できる表示手段を備えることで、ユーザーにとって選択中の再生用音声データが何であるか認識しやすいものとできる。
【０１２４】
選択用音声データについては、出力可能な各再生用音声データに対応して予め生成して保持しておくことで、再生用音声データ選択時、つまり複数の選択用音声データを出力する際の処理負担を軽減することができる。またこれにより音声出力装置がさほど高度な演算処理能力を備える必要がなくなり、装置コストの削減にもつながる。
一方、高度な演算処理能力を備えた音声出力装置では、選択用音声データは、再生用音声データ選択時に選択候補とされた際に生成され、出力されるようにすることで、特にそれ以前に選択用音声データを生成しておくという準備は不要となる。
【０１２５】
また各再生用音声データに対するポインタデータを設定し、再生用音声データ選択を行う際には、ポインタデータで示される再生用音声データ内の一部のデータを選択用音声データとして出力させることで、選択用音声データを予め抽出して記憶しておくなどの処理は不要となり、記憶に必要な容量も少なくできる。
【図面の簡単な説明】
【図１】本発明の実施の形態の再生装置のブロック図である。
【図２】実施の形態の再生装置での楽曲データ及びイヤコンデータの記憶形態の説明図である。
【図３】実施の形態の複数のイヤコン出力の際の定位の説明図である。
【図４】実施の形態の複数のイヤコンの音圧レベルの説明図である。
【図５】実施の形態の選択状態及び選択決定方式の説明図である。
【図６】実施の形態の再生装置の外観例の説明図である。
【図７】実施の形態の再生装置の表示部の表示例の説明図である。
【図８】実施の形態のイヤコン抽出処理のフローチャートである。
【図９】実施の形態の操作対応処理のフローチャートである。
【図１０】実施の形態の選択出力処理のフローチャートである。
【図１１】実施の形態の再生処理のフローチャートである。
【図１２】本発明の他の実施の形態の再生装置のブロック図である。
【図１３】本発明のさらに他の実施の形態の再生装置のブロック図である。
【図１４】実施の形態の楽曲データ及びイヤコンデータの記憶形態の他の例の説明図である。
【図１５】実施の形態の楽曲データ及びイヤコンポインタの記憶形態の例の説明図である。
【図１６】実施の形態の楽曲データ及びイヤコンポインタの記憶形態の例の説明図である。
【図１７】実施の形態のイヤコンポインタ抽出処理のフローチャートである。
【図１８】実施の形態のイヤコンポインタを用いた選択出力処理のフローチャートである。
【図１９】実施の形態の記憶部の各種の記憶形態例の説明図である。
【図２０】実施の形態のイヤコン出力に関する各種定位例の説明図である。
【図２１】実施の形態のイヤコン出力に関する音圧レベル例の説明図である。
【図２２】実施の形態のイヤコン出力に関する音圧レベル例の説明図である。
【図２３】実施の形態の選択操作方式の他の例の説明図である。
【図２４】実施の形態の選択操作方式の他の例の説明図である。
【図２５】実施の形態の操作部の操作子の例の説明図である。
【図２６】実施の形態の表示部の他の例の説明図である。
【符号の説明】
１ コントローラ、２ ＲＯＭ、３ 記憶部、４ 演算処理部、５ アナログ音声入力部、６ Ａ／Ｄ変換器、７ デジタル音声入力部、８ Ｄ／Ａ変換器、９ ステレオ音声出力処理部、１０，１５ 表示部、１１ 操作部、１２ ディスクドライブ、１３ バッファメモリ

Claims (15)

1. 複数の再生用音声データが出力可能な音声出力装置において、特定の再生用音声データを選択する音声データ選択方法として、
   各再生用音声データの一部を選択用音声データとし、
   少なくとも２チャンネル以上の音声出力系から、選択候補とされる複数の選択用音声データを、互いに異なる定位に音声出力させ、
   出力されている選択用音声データの中から決定操作によって指定された選択用音声データに対応する再生用音声データが選択決定され、
   選択決定された再生用音声データが再生され、
   異なる定位で音声出力させている選択用音声データの中で、特定の音像位置に定位されている選択用音声データが、前記選択中の選択用音声データとされる
   音声データ選択方法。
2. 選択操作に応じて、前記選択候補の一部又は全部を変更することを特徴とする請求項１に記載の音声データ選択方法。
3. 選択操作に応じて、その時点で前記決定操作が行われた場合に選択決定されることになる選択中の選択用音声データを変更していくことを特徴とする請求項１に記載の音声データ選択方法。
4. 前記選択用音声データは、出力可能な各再生用音声データに対応して予め生成して保持しておくことを特徴とする請求項１に記載の音声データ選択方法。
5. 前記選択用音声データは、前記選択候補とされた際に生成され、出力されることを特徴とする請求項１に記載の音声データ選択方法。
6. 上記再生用音声データは、楽曲データであることを特徴とする請求項１に記載の音声データ選択方法。
7. 少なくとも２チャンネル以上の音声出力手段と、
   少なくとも選択操作及び決定操作が可能な操作手段と、
   複数の再生用音声データが出力可能な再生用音声データソース手段と、
   出力する音声データに対する信号処理を行なって前記音声出力手段から出力させることのできる信号処理手段と、
   前記各再生用音声データの一部を選択用音声データとして得ることができるとともに、再生用音声データの選択を行う際に、前記信号処理手段によって、選択候補とされる複数の選択用音声データを互いに異なる定位で前記音声出力手段から音声出力させ、その出力されている選択用音声データの中から前記決定操作によって指定された選択用音声データに対応する再生用音声データが決定されたと判別し、選択決定された再生用音声データを再生制御する制御手段と、
   を備え、
   前記制御手段は、前記決定操作がされた際に、異なる定位で音声に出力させている選択用音声データの中で、特定の音像位置に定位されている選択用音声データが選択決定されたと判別する
   音声出力装置。
8. 前記制御手段は、選択決定された再生用音声データが前記音声出力手段から出力されるように、前記再生用音声データソース手段及び前記信号処理手段の制御を行うことを特徴とする請求項７に記載の音声出力装置。
9. 前記制御手段は、前記選択操作に応じて、前記選択候補の一部又は全部を変更することを特徴とする請求項７に記載の音声出力装置。
10. 前記制御手段は、前記選択操作に応じて、その時点で前記決定操作が行われた場合に選択決定されることになる選択中の選択用音声データを変更していくことを特徴とする請求項７に記載の音声出力装置。
11. 前記制御手段は、出力可能な各再生用音声データに対応して予め前記選択用音声データを生成させ保持させておくことを特徴とする請求項７に記載の音声出力装置。
12. 前記制御手段は、前記選択候補を設定した際に、その選択候補となる前記選択用音声データを生成させ、出力させることを特徴とする請求項７に記載の音声出力装置。
13. 前記制御手段は、各再生用音声データに対するポインタデータを設定し、再生用音声データ選択を行う際には、前記ポインタデータで示される再生用音声データ内の一部のデータを前記選択用音声データとして出力させることを特徴とする請求項７に記載の音声出力装置。
14. 再生用音声データ選択の際に、少なくとも、前記選択候補とされて音声出力されている選択用音声データの中で、その時点で前記決定操作により選択決定されることになる選択中の選択用音声データを示す表示を実行できる表示手段を備えたことを特徴とする請求項７に記載の音声出力装置。
15. 上記再生用音声データは、楽曲データであることを特徴とする請求項７に記載の音声出力装置。

Images