JP2009265714A - 画像表示方法、画像表示プログラム、および楽曲再生装置 - Google Patents

Abstract

【課題】再生中の楽曲のイメージをユーザにより的確に伝える。
【解決手段】所定の楽曲データベースから楽曲の特徴を示す少なくとも一つの特徴情報に関連付けられた楽曲データを複数取得する楽曲データ取得ステップと、取得された各楽曲データへのリンクを、各々に関連付けられた少なくとも一つの特徴情報に基づき、楽曲の傾向を表現する所定の座標領域に配置する楽曲リンク配置ステップと、再生中の楽曲に関連付けられた少なくとも一つの特徴情報に基づき、所定の画像データベースから該楽曲に応じた画像を取得する画像取得ステップと、画像をリンクが配置された座標領域とともに所定のディスプレイに表示する画像表示ステップを実行する方法を提供する。
【選択図】図２

Description

この発明は、楽曲再生時に該楽曲のイメージに適した画像を表示する画像表示方法、画像表示プログラム、および楽曲再生装置に関する。

近年、楽曲データをＭＰ３（MPEG-1 Audio Layer-3）等の高圧縮率の音声圧縮コーデックを用いて圧縮して大容量のＨＤＤ（Hard Disk Drive）に記憶するオーディオ装置が普及している。このようなオーディオ装置においては、数千曲から数万曲といった膨大な数の楽曲を記憶することができる。したがって、ユーザは、ＨＤＤの残容量に注意を払うことなく所望の楽曲をオーディオ装置に次々と記憶させることができる。しかし、このようにＨＤＤに多数の楽曲を記憶できる反面、そのなかから聴きたい楽曲を速やかに探し出すことが難くなるといった問題が生じている。

上記問題を解消すべく、膨大な数の楽曲のなかから所望の楽曲を検索するのに好適な楽曲検索技術が種々提案されている。その一例が特許文献１に開示されている。特許文献１によれば、楽曲は、ＣＤ（Compact Disc）等からリッピングされて楽曲データベースに格納される。このとき楽曲は、複数の評価項目によって評価されて、該評価結果と関連付けられる。このようにして楽曲データベースに格納された各楽曲（より正確には、球体で表示された楽曲へのリンク）は、該評価結果にしたがって、各評価項目に対応する３軸で表現された仮想的な三次元空間に配置される。該三次元空間は、各楽曲へのリンクに加えてさらに、各評価項目に対応した楽曲のイメージを表す印象標語が該空間の端部付近に重畳されてディスプレイに表示される。ユーザは、ディスプレイに表示された三次元空間内の各リンクの位置を視認して各楽曲のイメージを視覚的に捉えることにより、聴取したい楽曲を感覚的に選び出すことができる。
特開２００７−１１９１３号公報

特許文献１に示されるように、上記三次元空間の端部付近に配置されるリンクに対応する楽曲ほど、該端部付近に重畳表示された印象標語に近いイメージを有する。したがって、ユーザは、三次元空間の端部付近に配置されたリンクに対応する楽曲であれば印象標語と容易に結び付けてそのイメージを掴むことができる。しかし、三次元空間の中央付近に配置されたリンクに対応する楽曲、別の言い方をすると、何れの印象標語の表示位置からも離れて配置されたリンクに対応する楽曲は、何れの印象標語とも結び付けにくい。すなわち、特許文献１に例示される従来技術の場合、リンクの位置によっては楽曲のイメージが掴みにくい、あるいは、楽曲を実際に再生するまではそのイメージが全く掴めないという欠点があった。

本発明はこのような事情に鑑みてなされたものであり、その目的とするところは、再生中の楽曲のイメージをユーザに伝えるのに好適な楽曲再生装置を提供することにある。また、そのような楽曲再生装置に適したプログラム、および該プログラムに関連する方法を提供することにある。

上記の課題を解決する本発明の一形態に係る画像表示方法は、楽曲再生時に次のステップを実行する方法である。すなわち、当該画像表示方法は、所定の楽曲データベースから楽曲の特徴を示す少なくとも一つの特徴情報に関連付けられた楽曲データを複数取得する楽曲データ取得ステップと、取得された各楽曲データへのリンクを、各々に関連付けられた少なくとも一つの特徴情報に基づき、楽曲の傾向を表現する所定の座標領域に配置する楽曲リンク配置ステップと、再生中の楽曲に関連付けられた少なくとも一つの特徴情報に基づき、所定の画像データベースから該楽曲に応じた画像を取得する画像取得ステップと、画像をリンクが配置された座標領域とともに所定のディスプレイに表示する画像表示ステップを実行する方法である。

このように楽曲再生とともにその楽曲に応じた画像を表示させることにより、ユーザに、楽曲のイメージを聴覚だけでなく視覚的にも捉えさせることができる。このため、楽曲のイメージがユーザにより直感的に伝わる。

本発明に係る画像表示方法によれば、画像データベースにより、それぞれ異なる画像が座標領域を所定範囲毎に分割した分割領域毎に関連付けられて管理される場合に、画像取得ステップにおいて、再生中の楽曲に対応するリンクが配置される分割領域に関連付けられた画像が取得されるようにしてもよい。

さらに、画像データベースにより、それぞれ異なる背景色情報が分割領域の各々をさらに分割した小分割領域毎に関連付けられて管理される場合に、画像取得ステップにおいて、再生中の楽曲に対応するリンクが配置される小分割領域に関連付けられた画像が取得され、画像表示ステップにおいて、取得された背景色情報に基づき取得された画像を加工して、リンクが配置された座標領域とともにディスプレイに表示するようにしてもよい。

また、座標領域表示中にリンクが選択されるユーザ操作がなされた場合に、選択されたリンクに対応する楽曲に関連付けられた少なくとも一つの特徴情報に基づき、所定の画像データベースから該楽曲に応じた画像を新たに取得する画像再取得ステップと、新たに取得された画像をリンクが配置された座標領域とともにディスプレイに表示する画像再表示ステップとを実行するようにしてもよい。

あるいは、座標領域表示中にリンクが選択されるユーザ操作がなされた場合に、選択されたリンクの座標領域内の位置に基づきプレイリストを作成するプレイリスト作成ステップを実行させた後、作成されたプレイリストにしたがって楽曲を再生するようにしてもよい。

また、プレイリスト作成ステップにおいて、選択されたリンクの位置を含む所定領域内に含まれる全ての楽曲をリストしたプレイリストを作成するようにしてもよい。

さらに、ディスプレイがタッチパネルである場合に、該タッチパネルがタップされたとき、プレイリスト作成ステップにおいて、タップがシングルまたはダブルタップであるかに応じて所定領域の広さが変更するようにしてもよい。

あるいは、プレイリスト作成ステップにおいて、選択されたリンクの位置に近い所定数のリンクに対応する楽曲をリストしたプレイリストを作成するようにしてもよい。

また、本発明に係る画像表示方法は、作成されたプレイリストをディスプレイに表示するプレイリスト表示ステップをさらに実行する方法としてもよい。

プレイリスト表示ステップにおいては、作成されたプレイリストを画像に置き換えて表示するようにしてもよい。

また、本発明に係る画像表示方法は、作成されたプレイリストにリストされた楽曲に対応するリンクを強調表示またはアニメーション表示する強調表示ステップと、一旦再生されたプレイリスト中の楽曲に対応するリンクの強調表示またはアニメーション表示を終了する強調表示終了ステップとをさらに実行する方法としてもよい。

ここで、再生中の楽曲に対応するリンクを強調表示またはアニメーション表示するようにしてもよい。

さらには、楽曲再生から所定時間経過後に、再生中の楽曲に対応するリンクの強調表示またはアニメーション表示を終了させてもよい。

また、画像取得ステップで取得された画像は、座標領域の背景画像として表示されてもよい。

座標領域は、例えば二次元または三次元座標領域の何れとしてもよい。

上記の課題を解決する本発明の一形態に係る画像表示プログラムは、上記何れかの画像表示方法をコンピュータに実行させるためのプログラムである。

また、上記の課題を解決する本発明の一形態に係る楽曲再生装置は、所定の楽曲データベースから楽曲の特徴を示す少なくとも一つの特徴情報に関連付けられた楽曲データを複数取得する楽曲データ取得手段と、取得された各楽曲データへのリンクを、各々に関連付けられた少なくとも一つの特徴情報に基づき、楽曲の傾向を表現する所定の座標領域に配置する楽曲リンク配置手段と、再生中の楽曲に関連付けられた少なくとも一つの特徴情報に基づき、所定の画像データベースから該楽曲に応じた画像を取得する画像取得手段と、画像をリンクが配置された座標領域とともに所定のディスプレイに表示する画像表示手段とを有することを特徴とする。

本発明に係る画像表示方法、画像表示プログラム、および楽曲再生装置によれば、楽曲再生とともにその楽曲に応じた画像が表示され、ユーザに、楽曲のイメージを聴覚だけでなく視覚的にも捉えさせることができる。このため、楽曲のイメージがユーザにより直感的に伝わるようになる。

以下、図面を参照して、本発明の実施形態のオーディオ装置について説明する。

図１は、本実施形態のオーディオ装置１００の構成を示すブロック図である。図１に示されるように、オーディオ装置１００の各ブロックは、システムバス１０を介して互いに接続されている。各ブロックは、オーディオ装置１００の電源投入後、システムバス１０を介して必要なハードウェアにアクセスする。

例えばオーディオ装置１００の電源投入直後は、ＣＰＵ（Central Processing Unit）２０がＲＯＭ（Read-Only Memory）２２にアクセスする。ＣＰＵ２０は、ＲＯＭ２２に格納されたファームウェアを呼び出してＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）２４のワークエリアに展開し、オーディオ装置１００のシステムを起動する。これにより、各ブロックがＣＰＵ２０による制御下で必要に応じて連係動作して処理を実行し、ユーザ操作等により選択された楽曲が再生される。

ユーザ操作を受け付けるデバイスとして、操作キー（ハードウェアキー）２６がオーディオ装置１００のフロントパネルに設けられている。該フロントパネルには、再生中の楽曲に関する情報を表示する液晶ディスプレイ２８も設けられている。液晶ディスプレイ２８はタッチパネル構造を有し、入力装置としての機能も兼ね備えている。ユーザは、操作キー２６に対するキー入力や、液晶ディスプレイ２８に表示されるＧＵＩ（Graphical User Interface）に対するフィンガータッチやペンタッチを行うことにより、オーディオ装置１００を操作することができる。

電源投入後に楽曲再生（単に楽曲の再生を指示する操作）のユーザ操作が行われると、液晶ディスプレイ２８に所定の楽曲再生用画面が表示されるとともに、前回使用時に最後に再生された楽曲（以下、「ラストワン」と記す。）がスピーカ３０により再生される。このときオーディオ装置１００の各ブロックで実行される処理を以下に説明する。

まず、上記ユーザ操作に応じた操作信号が生成されてＣＰＵ２０に入力される。ＣＰＵ２０は、該操作信号に応答してＥＥＰＲＯＭ（Electrically Erasable and Programmable Read Only Memory）３２にアクセスする。ここで、新たに楽曲が再生される毎に、次に説明される楽曲データベース３４ａから該楽曲の情報（例えば楽曲名）が読み出されてＥＥＰＲＯＭ３２に上書き保存される。これは、ＥＥＰＲＯＭ３２がラストワンの情報を常に保持することを意味する。

ＣＰＵ２０は、ＥＥＰＲＯＭ３２からラストワンの情報を読み出すと、該情報を検索キーとして内蔵ストレージ３４に記憶された楽曲データベース３４ａにアクセスする。内蔵ストレージ３４は、容量を優先させる設計であれば例えばＨＤＤが、アクセス速度を優先させる設計であれば例えばフラッシュメモリが、それぞれ採用される。

内蔵ストレージ３４に記憶された楽曲データベース３４ａには、例えばＣＤ等からリッピングされた楽曲データが蓄積されている。ここで、オーディオ装置１００で実行されるリッピング処理について説明する。

リッピング処理は、メディアドライブ３６とＤＳＰ（Digital Signal Processor）３８との連係動作により実行される。メディアドライブ３６は、ＣＤやＤＶＤ（Digital Versatile Disc）、ＢＤ（Blu-ray Disc）等の記録メディアを再生するドライブである。ＤＳＰ３８は、オーディオデータに対するコーデック処理や、該コーデック処理により伸張されたデジタルオーディオデータのアナログ変換処理等を行う信号処理回路である。

メディアドライブ３６のスロットに例えば音楽ＣＤが挿入されると、メディアドライブ３６は、各トラックの楽曲データ（ＰＣＭ（pulse code modulation）形式）を読み込んでＤＳＰ３８に出力する。ＤＳＰ３８は、メディアドライブ３６からのＰＣＭ形式の楽曲データをＭＰ３やＡＡＣ（Advanced Audio Coding）等の音声圧縮コーデックにより圧縮する。圧縮された楽曲データは、ＣＰＵ２０の制御の下、内蔵ストレージ３４の楽曲データベース３４ａに格納される。このようにして楽曲データがリッピングされる。なお、ＤＳＰ３８において実行される音声圧縮コーデックの形式はＭＰ３やＡＡＣに限らない。オーディオ装置１００の仕様に応じて他の非可逆圧縮コーデックや可逆圧縮コーデック等が採用されることもある。

内蔵ストレージ３４には、さらに、楽曲データベース３４ａの各楽曲データを管理するための楽曲管理レコード群が記憶されている。各楽曲管理レコードは、各楽曲データに関連付けられたデータであり、「楽曲名」、「アーティスト名」、「アルバム名」、「ジャンル」、「特徴（後述）」等の各フィールドにエントリされたデータで構成されている。ユーザは、ユーザ操作により各フィールドにテキストデータをエントリさせることができる。

また、オーディオ装置１００は、図示省略された通信モデムによりインターネットにアクセスすることができる。例えばリッピング時にＣＤのＴＯＣ（Table of contents）情報が読み込まれると、ＣＰＵ２０は、該通信モデムを介してインターネット上のＣＤＤＢ（CD DataBase）にアクセスして、該ＴＯＣ情報に該当する楽曲名等のメタ情報をダウンロードする。次いで、リッピング中のＣＤの楽曲データに対応する楽曲管理レコードを作成する。そして、作成された楽曲管理レコードの各フィールドに、ダウンロードされたメタ情報の各テキストデータをエントリする。この場合、ユーザは、楽曲名等を手入力する必要がない。

なお、オーディオ装置１００においては、ＵＳＢ（Universal Serial Bus）メモリなどの外付けストレージ４０に格納された楽曲データも楽曲データベース３４ａに格納することができる。詳しくは、オーディオ装置１００は、図示省略されたＵＳＢやＩＥＥＥ １３９４（Institute of Electrical and Electronic Engineers 1394）規格に準拠したポートを有し、外付けストレージ４０を接続できる構成を有する。該ポートに外付けストレージ４０が接続されると、ＣＰＵ２０は、ＰｎＰ（Plug and Play）により外付けストレージ４０を認識してリソースの割当てやデバイスドライバの導入等を行う。これにより、ＣＰＵ２０は、外付けストレージ４０に記憶されたデータにアクセスできるようになる。このため、外付けストレージ４０に記憶された楽曲データをオーディオ装置１００に保存するようにユーザ操作がなされると、ＣＰＵ２０は、外付けストレージ４０の楽曲データを内蔵ストレージ３４にコピーする。該楽曲データに楽曲名等のメタ情報が付帯する場合には、該楽曲データに対応する楽曲管理レコードを作成後、メタ情報の各テキストデータを該当するフィールドにエントリする。このように楽曲データベース３４ａには、ＣＤ等からのリッピング以外によっても楽曲データが格納される。

このようにして多数の楽曲データが蓄積された楽曲データベース３４ａのなかから、ＣＰＵ２０により生成された検索キーに対応する楽曲データが抽出されてＤＳＰ３８に出力される。ＤＳＰ３８は、入力された楽曲データを伸張し、さらに、伸張された楽曲データをアナログ形式の楽曲データに変換して音声増幅回路４２に出力する。音声増幅回路４２は、ボリュームに応じた増幅率によりアナログ形式の楽曲データをゲイン調整してスピーカ３０に出力する。これにより、ラストワン、つまり、前回使用時に最後に再生された楽曲がスピーカ３０により再生される。

以上説明した楽曲データに対する処理と同時に、液晶ディスプレイ２８に所定の楽曲再生用画面を表示させる処理が実行される。具体的には、楽曲データベース３４ａから楽曲データが抽出される際、該楽曲データに関連付けられた楽曲管理レコードのデータ、すなわち、楽曲名等のテキストデータも抽出されて画像処理回路４４に入力される。画像処理回路４４は、例えばＲＯＭ２２から、楽曲名やアーティスト名等を表示するアイコンが配置された楽曲再生用画面を読み出す。次いで、楽曲データベース３４ａから抽出されたテキストデータを用いて該楽曲再生用画面を加工して液晶ディスプレイ２８に出力する。これにより、スピーカ３０から楽曲が再生されると同時に、再生中の楽曲に関する情報が液晶ディスプレイ２８に表示される。

なお、上記においては、メディアドライブ３６のスロットに音楽ＣＤが挿入されたときにＤＳＰ３８等によりリッピング処理が行われることを説明した。このときＤＳＰ３８は、さらに、タイムシフト再生処理も実行する。すなわち、ＤＳＰ３８は、メディアドライブ３６により読み取られたＰＣＭ形式の楽曲データをＭＰ３データ等に圧縮変換しつつ、該圧縮変換された楽曲データを例えばＤＳＰ３８に内蔵されたリングバッファにバッファリングする。リングバッファは、所定再生時間分の楽曲データをバッファリングして順次掃き出す。掃き出された楽曲データは、アナログ形式の楽曲データに変換されて音声増幅回路４２に出力され、スピーカ３０により再生される。つまり、ＤＳＰ３８は、楽曲データのリッピングと再生を並行して実行する。このため、オーディオ装置１００においては、楽曲データのリッピング中に長い時間無音状態になることが有効に避けられ、ユーザにストレスを感じさせない。タイムシフト再生処理による楽曲再生時にも液晶ディスプレイ２８には所定の楽曲再生用画面が表示される。

ところで、オーディオ装置１００の製品形態には、部屋等に設置される据置型のオーディオセットコンポや、持ち運びを想定したポータブル音楽プレイヤー、乗用車等に搭載される車載型オーディオ機器（またはカーナビゲーション装置）等が想定される。このなかでオーディオ装置１００が車載型オーディオ機器として構成される場合、オーディオ装置１００には、ユーザである運転手の運転をできる限り妨げないように高い操作性が要求される。このような要求に応えるべく、本発明に係るオーディオ装置１００においては、次に説明されるＧＵＩが実装されている。該ＧＵＩは、楽曲の選択操作をユーザに直感的に行わせることを可能とする。以下、説明の便宜上、該ＧＵＩを「楽曲選択用ＧＵＩ」と記す。

図２は、楽曲選択用ＧＵＩを図示したものである。上記楽曲再生用画面の表示中に所定のユーザ操作がなされると、液晶ディスプレイ２８の表示が楽曲選択用ＧＵＩに遷移する。なお、ユーザ設定により、電源投入後に楽曲再生のユーザ操作がなされると楽曲選択用ＧＵＩがダイレクトに表示されるようにしてもよい。

図２に示されるように、楽曲選択用ＧＵＩの右端部には「再生」や「停止」等の操作用アイコンが配置される。また、液晶ディスプレイ２８の表示領域のうち各アイコンが配置される領域以外の略全領域（以下、「背景画像表示領域２００」と記す。）に亘って矩形状の背景画像２１０が表示される。なお、背景画像２１０の形状は矩形状に限定されず、仕様に応じて三角形、多角形、円形、楕円形等の種々の形状が選択される。

また、図２に示されるように、所定の印象標語が背景画像２１０の各辺の中点付近に重畳表示される。詳細には、背景画像２１０の上辺、下辺、右辺、左辺のそれぞれの中点付近に「元気」、「癒し」、「クール」、「ホット」の印象標語が表示される。なお、図２において、説明の便宜上、背景画像２１０の右辺、左辺の各中点を通るｘ軸を、背景画像２１０の上辺、下辺の各中点を通るｙ軸を、それぞれ一点鎖線で示す。本実施形態においてｘおよびｙ軸は、仮想的な直線であり、実際には液晶ディスプレイ２８に表示されるものではない。

さらに、背景画像２１０上には、●印の複数のプロットおよび単一のアイコン２２０が重畳表示される。●印のプロットおよびアイコン２２０は、楽曲データベース３４ａに蓄積された各楽曲（より正確には楽曲データ）へのリンクである。また、アイコン２２０は再生中の楽曲へのリンクであり、識別性が高ければ静止画アイコンであっても動画アイコン（アニメーションアイコン）であってもよい。背景画像２１０上における各リンクの位置は、該リンクに対応する楽曲のイメージに応じて決められる。

図３は、図２に示される楽曲選択用ＧＵＩを表示する際に実行される楽曲選択用ＧＵＩ表示処理のフローチャート図である。上述したように楽曲選択用ＧＵＩに遷移するための所定のユーザ操作がなされると、ＣＰＵ２０は、図３に示されるように、内蔵ストレージ３４にアクセスして全ての楽曲管理レコードの「特徴」フィールドにエントリされた特徴データを読み出す（ステップ１、以下、本明細書および図面においてステップを「Ｓ」と略記する。）。なお、図３の楽曲選択用ＧＵＩ表示処理は、オーディオ装置１００の電源がオフされた時点、あるいは、図２の「閉じる」や「戻る」等の他の画面への遷移を伴う操作がなされた時点で終了する。

ここで特徴データは、ＤＳＰ３８による楽曲解析処理により数値化された楽曲の特徴を表すデータである。すなわち、ＤＳＰ３８は、音楽ＣＤ等に記録された楽曲データをリッピングする際、楽曲データの予め定められたデータ解析開始点から一定のフレーム長に対してＦＦＴ（Fast Fourier Transform）処理を行い、パワースペクトルを算出する。次いで、算出されたパワースペクトルに基づき楽曲の特徴データを算出する。算出された各特徴データは、対応する楽曲管理レコードの「特徴」フィールドにエントリされる。なお、このような楽曲解析処理の詳細は、例えば特許文献１（特開２００７−１１９１３号公報）や特開２００７−２５７１６２号公報に開示されている。

ＤＳＰ３８により算出された特徴データは、図２のｘおよびｙ軸に対応した座標で表現されるデータである。例えば特徴データが座標（０，０）である場合、対応する楽曲の●印のプロットは、ｘ軸とｙ軸との交点、つまり、背景画像２１０の中心に配置される。説明を加えると、ＤＳＰ３８に組み込まれた楽曲解析用プログラムは、一般的に元気を感じさせる楽曲の場合にはｘ軸に対応する座標値が大きい特徴データを算出し、一般的に癒しを感じさせる楽曲の場合にはｘ軸に対応する座標値が小さい特徴データを算出するように設計されている。また、一般的にクールを感じさせる楽曲の場合にはｙ軸に対応する座標値が大きい特徴データを算出し、一般的にホットを感じさせる楽曲の場合にはｙ軸に対応する座標値が小さい特徴データを算出するように設計されている。

このようにして算出された特徴データを、ＣＰＵ２０はＳ１の処理において読み出す。ＣＰＵ２０は次いで、再生中の楽曲の特徴データの座標値を検索キーとして、内蔵ストレージ３４に記憶された背景画像データベース３４ｂにアクセスする（Ｓ２）。ここではアイコン２２０の座標値が検索キーとなる。

背景画像データベース３４ｂには、楽曲選択用ＧＵＩの背景画像が格納されている。図４（ａ）および（ｂ）は、背景画像データベース３４ｂの構造を概念的に示す図である。また、図５は、背景画像データベース３４ｂの各画像と背景画像表示領域２００との関係を説明するための図である。図５においては、説明の便宜上、左上および中央の領域に関してのみ図４（ｂ）と同じ分割単位で領域を図示している。

図４（ａ）は、背景画像データベース３４ｂの最上位層に格納された背景画像Ａ〜Ｉを示す。図４（ａ）に示される背景画像Ａ〜Ｉの配置は、楽曲選択用ＧＵＩ上の背景画像が表示される背景画像表示領域２００と各背景画像との対応関係を表している。すなわち、背景画像データベース３４ｂにおいて背景画像Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ、Ｉはそれぞれ、図５に示される背景画像表示領域２００の上段左領域Ａ’内、上段中央領域Ｂ’内、上段右領域Ｃ’内、中段左領域Ｄ’内、中央領域Ｅ’内、中段右領域Ｆ’内、下段左領域Ｇ’内、下段中央領域Ｈ’内、下段右領域Ｉ’内の座標値と関連付けられて管理されている。

背景画像表示領域２００の上段領域内の座標値と関連付けられた背景画像には、ユーザが視覚を通じて元気を感じる画像（例えば人がジャンプしている写真等）が採用される。背景画像表示領域２００の下段領域内の座標値と関連付けられた背景画像には、ユーザが視覚を通じて癒しを感じる画像（例えば動物や自然の写真等）が採用される。背景画像表示領域２００の右領域内の座標値と関連付けられた背景画像には、ユーザが視覚を通じてクールと感じる画像（例えばジャズ奏者の写真等）が採用される。背景画像表示領域２００の左領域内の座標値と関連付けられた背景画像には、ユーザが視覚を通じてホットと感じる画像（例えば南国の写真等）が採用される。背景画像表示領域２００の中央領域内の座標値と関連付けられた背景画像には、ユーザが視覚を通じて元気、癒し、クール、ホット等の様々な印象を受ける画像が採用される。背景画像Ａ〜Ｉは、不透明な画像としてもよく、あるいはハーフトーン画像としてもよい。

また、図４（ｂ）は、各背景画像Ａ〜Ｉの下位層に格納された背景色情報を示す図であり、図４（ａ）と同様に景画像表示領域２００と各背景色情報との対応関係を表している。下位層に格納された背景色情報の実体は、半透明の単色を表現するカラーコードである。図４（ｂ）に示されるように、各下位層には４つの背景色情報（例えば背景画像Ａの下位層には背景色情報Ａ１〜Ａ４）が格納されている。背景画像データベース３４ｂにおいて背景色情報Ａ１、Ａ２、Ａ３、Ａ４はそれぞれ、図５に示される背景領域Ａの左上領域ａ１内、右上領域ａ２内、左下領域ａ３内、右下領域ａ４内の座標値と関連付けられて管理されている。背景画像Ｂ〜Ｉの下位層の背景色情報も、背景色情報Ａ１〜Ａ４と同じように座標値との関連付けがなされた状態で管理されている。

なお、背景画像表示領域２００中「元気」の印象標語の表示位置付近の座標値と関連付けられた背景色情報ほどオレンジに近い色を表現したものとなっている。そして、背景色情報は、「元気」の印象標語から離れて「ホット」の印象標語の表示位置に近付くほど色相、明度、彩度が階調的に変化してレッドに近い色を表現したものとなる。また、「元気」の印象標語から離れて「癒し」の印象標語の表示位置に近付くほど色相、明度、彩度が階調的に変化してグリーンに近い色を表現したものとなる。さらに、「元気」の印象標語から離れて「クール」の印象標語の表示位置に近付くほど色相、明度、彩度が階調的に変化してグレーに近い色を表現したものとなる。

背景画像データベース３４ｂは、Ｓ２のアクセス処理に応答して、最上位層のなかから検索キーに応じた背景画像を抽出する。ここで、検索キーであるアイコン２２０の座標値は中央領域Ｅ’に含まれる。したがって、背景画像データベース３４ｂは、中央領域Ｅ’に関連付けられた背景画像Ｅ（例えば山が写された風景画）を抽出してＣＰＵ２０に送信する（Ｓ３）。

背景画像データベース３４ｂはさらに、Ｓ２のアクセス処理に応答して、下位層のなかから検索キーに応じた背景色情報を抽出する。ここで、検索キーであるアイコン２２０の座標値は領域ｅ４に含まれる。したがって、背景画像データベース３４ｂは、領域ｅ４に関連付けられた背景色情報Ｅ４を抽出してＣＰＵ２０に送信する（Ｓ４）。背景色情報Ｅ４に関連付けられた背景画像表示領域２００上の領域は、「元気」および「ホット」の印象標語に比べて「癒し」および「クール」の印象標語にやや近い。このため、背景色情報Ｅ４は、オレンジ、レッド、グリーン、グレーが混ざりつつも、グリーンとグレーが若干強い色（以下、説明の便宜上、「緑がかったグレー」と記す。）を表現したカラーコードとなっている。

ＣＰＵ２０は、背景画像データベース３４ｂから抽出された背景画像Ｅおよび背景色情報Ｅ４を画像処理回路４４に出力する。画像処理回路４４は、入力された背景画像Ｅを、背景画像表示領域２００のサイズに合わせて縮小（または拡大）するとともに、背景画像Ｅ全体に背景色情報Ｅ４が表現する色、つまり、緑がかったグレーを重ねた合成画像を生成する（Ｓ５）。

画像処理回路４４は、液晶ディスプレイ２８上に表示させる描画データを生成する（Ｓ６）。具体的には、画像処理回路４４は、楽曲選択用ＧＵＩ上の背景画像表示領域２００に上記合成画像、つまり背景画像２１０をはめ込む。さらに、背景画像２１０上に「元気」、「癒し」、「クール」、「ホット」の印象標語を重畳するとともに、Ｓ１の処理で読み出された各特徴データに基づき背景画像２１０上に各楽曲へのリンク画像を重畳する。このとき再生中の楽曲へのリンクを強調表示させるため、該再生中の楽曲へのリンク画像にはアイコン２２０が用いられ、それ以外の楽曲へのリンク画像には●印のプロット画像が用いられる。このようにして生成された描画データが液晶ディスプレイ２８に出力される。

以上説明されたＳ１〜Ｓ６の処理により、図２に示される楽曲選択用ＧＵＩが液晶ディスプレイ２８に表示される。楽曲選択用ＧＵＩ上には、背景画像２１０、ここでは「緑がかったグレーのハーフトーンが重ねられた風景画像」が大きく表示される。背景画像２１０は、再生中の楽曲の特徴を数値化した特徴データに基づき決定された画像であって、再生中の楽曲のイメージが画像化されたものである。このように楽曲再生とともにその楽曲に合ったイメージの画像を表示することにより、ユーザは、楽曲のイメージを聴覚だけでなく視覚的にも捉えることができる。

ＣＰＵ２０はＳ６の処理に次いで待機状態に移行して、再生される楽曲が変更するか否かを所定時間毎に判定する（Ｓ７）。再生される楽曲の変更は、再生中の楽曲が終了して次の楽曲が再生されるときや、ユーザ操作による楽曲選択操作がなされたとき等に発生する。この場合のユーザ操作には、運転手の運転をできる限り妨げない主旨からすると、例えば背景画像２１０上に配置された●印のプロットへのフィンガータッチ等といった操作が望ましい。

ＣＰＵ２０は、上記フィンガータッチ等により再生楽曲の変更が発生すると判定した場合（Ｓ７：ＹＥＳ）、Ｓ２の処理に戻りＳ２〜Ｓ６の処理を再度実行する。これにより、楽曲選択用ＧＵＩ上には、変更後の再生楽曲のイメージが画像化された背景画像２１０が表示される。また、前回再生されていた楽曲へのリンクがアイコン２２０から●印のプロットに置き換わるとともに、変更後の再生楽曲へのリンクが●印のプロットからアイコン２２０に置き換わる。

ユーザの脳には、楽曲選択用ＧＵＩを表示させた状態で繰り返し楽曲を聴取するうちに、背景画像表示領域２００中の何れの箇所をフィンガータッチ等すれば何れの背景画像２１０が表示されるかが記憶される。したがって、例えばＣＤや外付けストレージ４０等から新たに取り込まれた楽曲へのリンクが領域ｅ４内に表示される場合、ユーザは、該楽曲が「緑がかったグレーのハーフトーンが重ねられた風景画像」を見た時に自らが感じ取るイメージを有することを、実際に再生する前に知覚することができる。つまり、ユーザは、楽曲へのリンクが背景画像表示領域２００中の何れの箇所に表示されるかに拘わらず、該楽曲の曲調等を容易にイメージすることができる。

本発明は上記実施形態に限定されるものではなく、本発明の技術的思想の範囲において様々な変形が可能である。例えば背景画像や背景色情報は、オーディオ装置１００に予め備えられたものに限らず、外付けストレージ４０等から背景画像データベース３４ｂに取り込まれたものとしてもよい。この場合、ユーザは、楽曲選択用ＧＵＩ上で好みの背景画像を表示させることができる。

また、本実施形態においては、各楽曲はユーザ操作が無い限り全フレームが再生される。しかし、楽曲選択用ＧＵＩ上で楽曲の選択操作がなされたときには、楽曲の一部のフレームのみを再生するようにしてもよい。

また、本実施形態においては、再生中の楽曲に対応するリンクが常にアイコン２２０として表示される。しかし、数フレームが再生された時点（すなわち再生してから所定時間経過後）でアイコン２２０から●印のプロットに切り替わるようにしてもよい。

また、背景画像データベース３４ｂは、二階層構造に限定されず、一階層構造（例えば図４（ａ）に示される階層のみ）としてもよく、あるいは、三階層以上の構造（例えば図４（ｂ）のさらに下位の層を少なくとも一階層以上有する構造）としてもよい。また、各階層の背景画像や背景色情報等の数は、より多数としてもよい。

また、背景画像表示領域２００上をフィンガータッチしたときに再生される楽曲は、タッチされた位置に最も近いリンクに対応する一曲のみとしてもよく、あるいは、該タッチされた位置付近の数曲としてもよい。後者の場合、ＣＰＵ２０は、タッチされた位置を中心に所定半径以内の領域に含まれるリンクに対応する楽曲をリストしたプレイリストを作成する。なお、ダブルタップ時にはシングルタップ時よりも上記所定半径が大きくなる。つまり、ダブルタップ時にはプレイリストを構成する楽曲数が増加する。また、ＣＰＵ２０は、リンク位置がタッチされた位置に近い所定数の楽曲をリストしたプレイリストを作成することもできる。あるいは、タッチされた位置が含まれる領域（領域Ａ’やａ１等）内の全ての楽曲をリストしたプレイリストを作成することもできる。プレイリストの曲順は、例えばタッチされた位置に近い順となる。このようにして作成されたプレイリストにしたがって楽曲が再生される。プレイリストにしたがって再生される楽曲が変更される場合にも図３のＳ２〜Ｓ６の処理が実行される。

また、上述したようにプレイリストが作成されたとき、該プレイリストに含まれる全ての楽曲に対応するリンクがアイコン２２０のように強調表示またはアニメーション表示されてもよい。この場合、一旦再生されたプレイリスト中の楽曲に対応するリンクは、強調表示またはアニメーション表示から●印のプロットに切り替わるようにしてもよい。

さらに、作成されたプレイリストは、背景画像表示領域２００の右隣の領域（「停止」等の操作用アイコンが表示される領域）に重畳表示されてもよい。この場合、強調表示またはアニメーション表示されるリンクが●印のプロットに切り替わるようにしてもよい。また、作成されたプレイリストは、背景画像２１０と置き換わって表示されてもよい。

また、特徴データは三次元座標で表現されるデータとしてもよい。この場合、各楽曲に対応するリンクは、二次元領域である背景画像表示領域２００で無く特許文献１（特開２００７−１１９１３号公報）に例示される仮想的な該三次元空間に配置される。

本発明の実施形態のオーディオ装置の構成を示すブロック図である。 本発明の実施形態の楽曲選択用ＧＵＩを示す図である。 本発明の実施形態の楽曲選択用ＧＵＩを表示する際に実行される楽曲選択用ＧＵＩ表示処理のフローチャート図である。 本発明の実施形態の背景画像データベースの概念的な構造図である。 本発明の実施形態の背景画像データベースの各画像と背景画像表示領域との関係を説明するための図である。

符号の説明

１０ システムバス
２０ ＣＰＵ
２２ ＲＯＭ
２４ ＲＡＭ
２６ 操作キー
２８ 液晶ディスプレイ
３０ スピーカ
３２ ＥＥＰＲＯＭ
３４ 内蔵ストレージ
３４ａ 楽曲データベース
３４ｂ 背景画像データベース
３６ メディアドライブ
３８ ＤＳＰ
４２ 音声増幅回路
４４ 画像処理回路
１００ オーディオ装置

Claims (31)

1. 楽曲再生時に、
   所定の楽曲データベースから楽曲の特徴を示す少なくとも一つの特徴情報に関連付けられた楽曲データを複数取得する楽曲データ取得ステップと、
   前記取得された各楽曲データへのリンクを、各々に関連付けられた前記少なくとも一つの特徴情報に基づき、楽曲の傾向を表現する所定の座標領域に配置する楽曲リンク配置ステップと、
   再生中の楽曲に関連付けられた前記少なくとも一つの特徴情報に基づき、所定の画像データベースから該楽曲に応じた画像を取得する画像取得ステップと、
   前記画像を前記リンクが配置された座標領域とともに所定のディスプレイに表示する画像表示ステップと、
   を実行することを特徴とする画像表示方法。
2. 前記画像データベースにより、それぞれ異なる前記画像が前記座標領域を所定範囲毎に分割した分割領域毎に関連付けられて管理される場合に、
   前記画像取得ステップにおいて、前記再生中の楽曲に対応するリンクが配置される分割領域に関連付けられた画像が取得されることを特徴とする、請求項１に記載の画像表示方法。
3. 前記画像データベースにより、それぞれ異なる背景色情報が前記分割領域の各々をさらに分割した小分割領域毎に関連付けられて管理される場合に、
   前記画像取得ステップにおいて、さらに、前記再生中の楽曲に対応するリンクが配置される小分割領域に関連付けられた画像が取得され、
   前記画像表示ステップにおいて、前記取得された背景色情報に基づき前記取得された画像を加工して、前記リンクが配置された座標領域とともに前記ディスプレイに表示することを特徴とする、請求項２に記載の画像表示方法。
4. 前記座標領域表示中に前記リンクが選択されるユーザ操作がなされた場合に、
   前記選択されたリンクに対応する楽曲に関連付けられた前記少なくとも一つの特徴情報に基づき、前記所定の画像データベースから該楽曲に応じた画像を新たに取得する画像再取得ステップと、
   前記新たに取得された画像を前記リンクが配置された座標領域とともに前記ディスプレイに表示する画像再表示ステップと、
   を実行することを特徴とする、請求項１から請求項３の何れかに記載の画像表示方法。
5. 前記座標領域表示中に前記リンクが選択されるユーザ操作がなされた場合に、
   前記選択されたリンクの前記座標領域内の位置に基づきプレイリストを作成するプレイリスト作成ステップを実行し、
   前記作成されたプレイリストにしたがって楽曲を再生することを特徴とする、請求項１から請求項４の何れかに記載の画像表示方法。
6. 前記プレイリスト作成ステップにおいて、前記選択されたリンクの位置を含む所定領域内に含まれる全ての楽曲をリストしたプレイリストを作成することを特徴とする、請求項５に記載の画像表示方法。
7. 前記ディスプレイがタッチパネルである場合に、該タッチパネルがタップされたとき、
   前記プレイリスト作成ステップにおいて、前記タップがシングルまたはダブルタップであるかに応じて前記所定領域の広さが変更することを特徴とする、請求項６に記載の画像表示方法。
8. 前記プレイリスト作成ステップにおいて、前記選択されたリンクの位置に近い所定数のリンクに対応する楽曲をリストしたプレイリストを作成することを特徴とする、請求項５に記載の画像表示方法。
9. 前記作成されたプレイリストを前記ディスプレイに表示するプレイリスト表示ステップをさらに実行することを特徴とする、請求項５から請求項８の何れかに記載の画像表示方法。
10. 前記プレイリスト表示ステップにおいて、前記作成されたプレイリストを前記画像に置き換えて表示すること特徴とする、請求項９に記載の画像表示方法。
11. 前記作成されたプレイリストにリストされた楽曲に対応するリンクを強調表示またはアニメーション表示する強調表示ステップと、
    一旦再生された前記プレイリスト中の楽曲に対応するリンクの強調表示またはアニメーション表示を終了する強調表示終了ステップと、
    を実行することを特徴とする、請求項５から請求項１０の何れかに記載の画像表示方法。
12. 前記再生中の楽曲に対応するリンクを強調表示またはアニメーション表示することを特徴とする、請求項１から請求項１１の何れかに記載の画像表示方法。
13. 楽曲再生から所定時間経過後に、前記再生中の楽曲に対応するリンクの強調表示またはアニメーション表示を終了することを特徴とする、請求項１２に記載の画像表示方法。
14. 前記画像は、前記座標領域の背景画像として表示されることを特徴とする、請求項１から請求項１３に記載の画像表示方法。
15. 前記座標領域は、二次元または三次元座標領域であることを特徴とする、請求項１から請求項１４に記載の画像表示方法。
16. 請求項１から請求項１５の何れかに記載された画像表示方法をコンピュータに実行させるための画像表示プログラム。
17. 楽曲を再生する楽曲再生装置において、
    所定の楽曲データベースから楽曲の特徴を示す少なくとも一つの特徴情報に関連付けられた楽曲データを複数取得する楽曲データ取得手段と、
    前記取得された各楽曲データへのリンクを、各々に関連付けられた前記少なくとも一つの特徴情報に基づき、楽曲の傾向を表現する所定の座標領域に配置する楽曲リンク配置手段と、
    再生中の楽曲に関連付けられた前記少なくとも一つの特徴情報に基づき、所定の画像データベースから該楽曲に応じた画像を取得する画像取得手段と、
    前記画像を前記リンクが配置された座標領域とともに所定のディスプレイに表示する画像表示手段と、
    を有することを特徴とする楽曲再生装置。
18. 前記画像データベースは、前記座標領域を所定範囲毎に分割し、それぞれ異なる前記画像を分割領域毎に関連付けて管理し、
    前記画像取得手段は、前記再生中の楽曲に対応するリンクが配置される分割領域に関連付けられた画像を取得することを特徴とする、請求項１７に記載の楽曲再生装置。
19. 前記画像データベースは、それぞれ異なる背景色情報を、前記分割領域の各々をさらに分割した小分割領域毎に関連付けて管理し、
    前記画像取得手段は、さらに、前記再生中の楽曲に対応するリンクが配置される小分割領域に関連付けられた画像を取得し、
    前記画像表示手段は、前記取得された背景色情報に基づき前記取得された画像を加工して、前記リンクが配置された座標領域とともに前記ディスプレイに表示することを特徴とする、請求項１８に記載の楽曲再生装置。
20. ユーザ操作を受け付ける操作手段をさらに有し、
    前記画像取得手段は、前記操作手段により前記リンクが選択されるユーザ操作がなされた場合に、該選択されたリンクに対応する楽曲に関連付けられた前記少なくとも一つの特徴情報に基づき、前記所定の画像データベースから該楽曲に応じた画像を新たに取得し、
    前記画像表示手段は、前記新たに取得された画像を前記リンクが配置された座標領域とともに前記ディスプレイに表示することを特徴とする、請求項１７から請求項１９の何れかに記載の楽曲再生装置。
21. 前記操作手段により前記リンクが選択されるユーザ操作がなされた場合に、該選択されたリンクの前記座標領域内の位置に基づきプレイリストを作成するプレイリスト作成手段をさらに有し、
    前記作成されたプレイリストにしたがって楽曲を再生することを特徴とする、請求項２０に記載の楽曲再生装置。
22. 前記プレイリスト作成手段は、前記選択されたリンクの位置を含む所定領域内に含まれる全ての楽曲をリストしたプレイリストを作成することを特徴とする、請求項２１に記載の楽曲再生装置。
23. 前記ディスプレイがタッチパネルである場合に、該タッチパネルがタップされたとき、
    前記プレイリスト作成手段は、前記タップがシングルまたはダブルタップであるかに応じて前記所定領域の広さを変更することを特徴とする、請求項２２に記載の楽曲再生装置。
24. 前記プレイリスト作成手段は、前記選択されたリンクの位置に近い所定数のリンクに対応する楽曲をリストしたプレイリストを作成することを特徴とする、請求項２３に記載の楽曲再生装置。
25. 前記作成されたプレイリストを前記ディスプレイに表示するプレイリスト表示手段をさらに有することを特徴とする、請求項２１から請求項２４の何れかに記載の楽曲再生装置。
26. 前記プレイリスト表示手段は、前記作成されたプレイリストを前記画像に置き換えて表示すること特徴とする、請求項２５に記載の楽曲再生装置。
27. 前記作成されたプレイリストにリストされた楽曲に対応するリンクを強調表示またはアニメーション表示する強調表示手段と、
    一旦再生された前記プレイリスト中の楽曲に対応するリンクの強調表示またはアニメーション表示を終了する強調表示終了手段と、
    を有することを特徴とする、請求項２１から請求項２６の何れかに記載の楽曲再生装置。
28. 前記再生中の楽曲に対応するリンクを強調表示またはアニメーション表示することを特徴とする、請求項１７から請求項２７の何れかに記載の楽曲再生装置。
29. 楽曲再生から所定時間経過後に、前記再生中の楽曲に対応するリンクの強調表示またはアニメーション表示を終了することを特徴とする、請求項２８に記載の楽曲再生装置。
30. 前記画像は、前記座標領域の背景画像として表示されることを特徴とする、請求項１７から請求項２９に記載の楽曲再生装置。
31. 前記座標領域は、二次元または三次元座標領域であることを特徴とする、請求項１７から請求項３０に記載の楽曲再生装置。

Images