JP4573877B2

JP4573877B2 - ナビゲーション装置、ナビゲーション方法、並びにナビゲーションプログラム及びその記録媒体

Info

Publication number: JP4573877B2
Application number: JP2007544169A
Authority: JP
Inventors: 健太郎山本
Original assignee: Pioneer Corp
Current assignee: Pioneer Corp
Priority date: 2005-11-09
Filing date: 2006-11-09
Publication date: 2010-11-04
Anticipated expiration: 2026-11-09
Also published as: WO2007055259A1; JPWO2007055259A1

Description

本発明は、ナビゲーション装置、ナビゲーション方法、並びにナビゲーションプログラム及びその記録媒体に関する。

従来から、車両等の移動体に搭載され、移動経路に関する地図情報等のナビゲーション情報を提供するナビゲーション装置が広く普及している。こうしたナビゲーション装置の技術の進化は目覚しく、近年では、例えば、利用者の感情状態を推定することにより、同利用者に対し、ナビゲーション操作等に関する的確な行動パターンを視聴覚的に提示する技術等が提案されている。

こうした利用者の感情状態を把握する機能を具備したナビゲーション装置として、例えば、運転席のシートに設置された温度センサにより取得された利用者の「体温」や、ハンドルに設置された圧力センサにより取得された利用者の「手の動き」等から、同利用者の喜怒哀楽に関する感情状態を総合的に判断するもの（特許文献１参照；以下、「従来例」という）等が提案されている。この従来例の技術を応用することにより、例えば、推定された感情状態に応じた音声ガイドを行うなどの新たな技術の提供が期待できる。

特開２００２−７３６３４号公報

しかしながら、従来例の技術においては、利用者の感情状態の推定に際し、温度センサや圧力センサ等の接触型センサを利用しているため、利用者は、これらのセンサに接触していなければならず、煩わしさを感じるなどの問題が一例として挙げられる。また、これらの接触型センサの使用により、装置全体の構成が複雑化するなどの問題が一例として挙げられる。

本発明は、上記のような事情を鑑みてなされたものであり、利用者の感情状態を考慮した音声ガイドを簡易な形態により行うことを目的とする。

本発明は、第１の観点からすると、マルチメディアコンテンツを再生するコンテンツ再生手段と；前記コンテンツ再生手段により再生された前記マルチメディアコンテンツから、人の感情を反映していると推定される特徴量を抽出する特徴量抽出手段と；前記人の感情の種類に応じた視聴覚情報の提示形態をそれぞれ表現した視聴覚データを記憶する視聴覚データ記憶手段と；利用者に対し前記視聴覚情報を提示すべき事象が生じたときに、前記特徴量抽出手段により抽出された前記特徴量に対応した視聴覚データを前記視聴覚データ記憶手段から読み出して、該当する視聴覚情報を再生する視聴覚情報再生手段と；を備え、前記特徴量抽出手段は、前記コンテンツ再生手段により最後に再生されたマルチメディアコンテンツに関して抽出した特徴量を、新たなマルチメディアコンテンツの再生、又は所定時間の経過まで保持する、ことを特徴とするナビゲーション装置である。

本発明は、第２の観点からすると、コンテンツ再生手段により再生されたマルチメディアコンテンツから、人の感情を反映していると推定される特徴量を抽出する特徴量抽出工程と；利用者に対し視聴覚情報を提示すべき事象が生じたときに、前記特徴量抽出工程で抽出された前記特徴量に基づき、前記人の感情の種類に応じた提示形態からなる視聴覚情報を再生する視聴覚情報再生工程と；を備え、前記特徴量抽出工程では、前記コンテンツ再生手段により最後に再生されたマルチメディアコンテンツに関して抽出した特徴量を、新たなマルチメディアコンテンツの再生、又は所定時間の経過まで保持する、ことを特徴とするナビゲーション方法である。

本発明は、第３の観点からすると、本発明のナビゲーション方法をナビゲーション装置の演算手段に実行させる、ことを特徴とするナビゲーションプログラムである。

本発明は、第４の観点からすると、本発明のナビゲーションプログラムがナビゲーション装置の演算手段により読み取り可能に記録されている、ことを特徴とするナビゲーションプログラムを記録した記録媒体である。

以下、本発明の一実施形態を、図１〜図５Ｂを参照して説明する。本実施形態では、移動体である車両等の移動としての走行に関するナビゲーション装置を例示して説明する。また、本実施形態のナビゲーション装置で扱われるメディアデータは楽曲データであり、再生されるマルチメディアコンテンツは楽曲であり、利用者に提示される視聴覚情報は音声ガイドであるものとする。

［構成］
図１には、本実施形態に係るナビゲーション装置１００の構成がブロック図にて示されている。図１に示されるように、このナビゲーション装置１００は、制御ユニット１１０と、ハードディスク装置１２０と、光学ディスクドライブ装置（本発明にいう「記録媒体読取手段」）１３０と、操作入力ユニット１４０と、音声入力ユニット１５０と、画像表示ユニット１６０と、音声出力ユニット１７０と、走行センサユニット１８０と、ＧＰＳ（Global Positioning System）受信ユニット１９０と、メディア放送受信ユニット２００とを備えている。上記制御ユニット１１０以外の要素１２０〜２００は、それぞれ制御ユニット１１０に接続されている。

制御ユニット１１０は、ナビゲーション装置１００全体を統括制御すると共に、演算手段としても機能してナビゲーション処理の全般を行う。この制御ユニット１１０は、中央処理装置（ＣＰＵ：Central Processing Unit）、読出専用メモリ（ＲＯＭ：Read Only Memory）、ランダムアクセスメモリ（ＲＡＭ：Random Access Memory）等を備えて構成され、様々なプログラムが実行されるようになっている。

制御ユニット１１０は、プログラムを実行することにより、（ｉ）コンテンツ再生部（本発明にいう「コンテンツ再生手段」）１１１と、（ii）曲調抽出部（本発明にいう「特徴量抽出手段」）１１２と、（iii）音声ガイド再生部（本発明にいう「視聴覚情報再生手段」）１１３としての機能を発揮する。

コンテンツ再生部１１１は、各種マルチメディアコンテンツの再生を制御する機能を有する。このコンテンツ再生部１１１は、利用者により指定された楽曲データ、すなわち、（ｉ）ハードディスク装置１２０に事前に記憶されたメディアデータである楽曲データ、又は（ii）光学ディスクドライブ装置１３０によりアクセス可能な記録媒体ＲＭに記録されたメディアデータである楽曲データを読み出す。そして、コンテンツ再生部１１１は、読み出された楽曲データを利用して、利用者により指定されたマルチメディアコンテンツである楽曲を、音声出力ユニット１７０を通じて再生する。

曲調抽出部１１２は、コンテンツ再生部１１１により再生された楽曲に関連づけられたメタ情報の各要素から、人の感情を反映していると推定される特徴量として、該当する楽曲の曲調を抽出する機能を有する。この曲調抽出部１１２は、基本的に、コンテンツ再生部１１１に対して新たな楽曲の再生が指示されるごとに、その楽曲に関するメタ情報から所要の曲調をリアルタイムに抽出して順次更新する。また、曲調抽出部１１２は、コンテンツ再生部１１１により最後に再生された楽曲に関して抽出した曲調を、新たな楽曲が再生されるまで又は所定時間が経過するまで保持する機能も有している。

音声ガイド再生部１１３は、利用者に対し音声ガイドを行うべき事象が生じたときに、曲調抽出部１１２により抽出された楽曲の曲調に応じた発話形態からなる音声ガイドを再生する機能を有する。音声ガイドを行うべき事象としては、例えば、利用者が車両の走行ルート変更を指定する際に、操作ユニット１４０における不図示の発話ボタンの利用者による押下操作がある。また、車両が交差点等の道路分岐点へ進入する前段階における脱出経路予告（装置自身により自動的に行われる地点認識）等も、音声ガイドを行うべき事象となる。

ハードディスク装置１２０は、制御ユニット１１０で実行されるプログラムを記憶するほか、後述する楽曲データ、楽曲メタ情報、音声ガイドデータ、地図データ等の各種データを記憶する。制御ユニット１１０は、ハードディスク装置１２０の記憶領域にアクセス可能であり、当該記憶領域に対するデータの書込み及び読出しを行うことができる。

ハードディスク装置１２０には、楽曲データ記憶領域（本発明にいう「メディアデータ記憶手段」）１２１と、楽曲メタ情報記憶領域（本発明にいう「メタ情報記憶手段」）１２２と、音声ガイドデータ記憶領域（本発明にいう「視聴覚データ記憶手段」）１２３と、地図データ記憶領域１２４とが設定されている。

楽曲データ記憶領域１２１は、複数の楽曲に関する楽曲データを事前に記憶する領域である。ここで、制御ユニット１１０のコンテンツ再生部１１１は、操作入力ユニット１４０を通じて利用者から指定された楽曲に関する楽曲データを楽曲データ記憶領域１２１から読み出して、該当する楽曲を再生するよう機能する。なお、楽曲データのファイル形式としては、例えば、ＭＰ３（MPEG-1 (Moving Picture Experts Group -1) Audio Layer 3）を適用することができる。

楽曲メタ情報記憶領域１２２は、楽曲データ記憶領域１２１に記憶された複数の楽曲データにそれぞれ関連づけられた複数の楽曲メタ情報を事前に記憶する領域である。ここで、制御ユニット１１０の曲調抽出部１１２は、コンテンツ再生部１１１により再生された楽曲に関する楽曲メタ情報を楽曲メタ情報記憶領域１２２から読み出して、所要の曲調を抽出するよう機能する。なお、楽曲メタ情報の形式としては、上記楽曲データのファイル形式にＭＰ３を適用した場合には、同ＭＰ３ファイルに付随するメタ情報であるＩＤ３（Identification 3）タグをそのまま適用することができる（以下、ＭＰ３ファイル及びＩＤ３タグの適用を前提とする）。

楽曲メタ情報記憶領域１２２には、例えば、図２に示されるように、（ｉ）楽曲ごとにＩＤ３タグの基本的要素を記憶するためのＩＤ３領域１２２Ａと、（ii）同ＩＤ３タグに含まれていない他の要素を必要により追記的に記憶するための追記領域１２２Ｂとが設定されている。ここでは、ＩＤ３領域１２２Ａとして、該当する楽曲に関する「曲名」、「アーティスト名」、「アルバム名」、「ジャンル」等の要素が記憶され、追記領域１２２Ｂとして、同楽曲の演奏形態に関する「ＢＰＭ（Beats Per Minute）」、「平均音量」、「調性」等の要素が記憶された例が示されている。上記追記領域１２２Ｂの各要素は、曲調抽出部１１２による曲調抽出の適正化に資するものである。

図１に戻り、音声ガイドデータ記憶領域１２３は、人の感情の種類に応じた発話形態をそれぞれ表現してなる複数の音声ガイドデータを記憶する領域である。

ここで、制御ユニット１１０の曲調抽出部１１２は、図３に示されるように、上記楽曲メタ情報記憶領域１２２の各要素に基づいて、コンテンツ再生部１１１により現在再生されている楽曲の曲調が、「ノリのいい曲調」、「明るい曲調」、「癒される曲調」、「静かな曲調」、「悲しい曲調」のいずれに相当するかを抽出する。そして、制御ユニット１１０の音声ガイド再生部１１３は、その抽出された曲調に対応した音声ガイドデータとして、「ノリのいい言葉使い（最も“Positive”）」、「明るい言葉使い」、「癒される言葉使い」、「静かな言葉使い」、「悲しい言葉使い（最も“Negative”）」のいずれかを音声ガイドデータ記憶領域１２３から読み出し、該当する音声ガイドを音声出力ユニット１７０を通じて再生する。

なお、楽曲がコンテンツ再生部１１１により最後に再生されてから所定時間が経過する前に音声ガイドを行うべき事象が生じた場合、音声ガイド再生部１１３は、曲調抽出部１１２により現在まで保持されている曲調に対応した、該当する音声ガイドを再生するよう機能する。また、上記所定時間が経過した後に音声ガイドを行うべき事象が生じた場合、音声ガイド再生部１１３は、デフォルトの音声ガイド（例えば、“Normal”の「癒される言葉使い」）を再生するようになっている。

図１に戻り、地図データ記憶領域１２４は、ナビゲーション装置１００としての基本機能であるナビゲーション機能を実現するためのナビゲーション処理で利用される地図データを、ＤＶＤ−ＲＯＭ（Digital Video Disk - Read Only Memory）等の記録媒体から導入して保持する領域である。なお、音声ガイドデータ記憶領域１２３に記憶された各言葉使いごとの音声ガイドデータは、前述した道路分岐点進入時の脱出経路予告等についての音声ガイドデータに関し、上記地図データ記憶領域１２４に記憶された地図データ上の地点情報との間で関連づけが図られている。

光学ディスクドライブ装置１３０は、楽曲データ（ＭＰ３ファイル）及びこれに付随する楽曲メタ情報（ＩＤ３タグ）が記録されてなるＣＤ（Compact Disc）やＤＶＤ−ＲＯＭ等の任意の記録媒体ＲＭにアクセス可能なものである。ここで、光学ディスクドライブ装置１３０は、操作入力ユニット１４０を通じて利用者から指定された楽曲に関して、上記記録媒体ＲＭから読み取った楽曲データを制御ユニット１１０のコンテンツ再生部１１１に向けて転送する。このとき、コンテンツ再生部１１１は、転送された楽曲データの再生処理を遂行すると共に、同楽曲データに付随している楽曲メタ情報を曲調抽出部１１２に転送し、これを同曲調抽出部１１２における曲調抽出に供する。

操作入力ユニット１４０は、ナビゲーション装置１１０の本体部に設けられたキー部や、キー部を備えるリモート入力装置等により構成される。ここで、双方のキー部には、利用者が車両の走行ルート変更を指定する際に、音声入力ユニット１５０及び音声出力ユニット１７０を機能させるための発話ボタンが装備される。また、本体部に設けられたキー部としては、画像表示ユニット１６０の表示デバイスに設けられたタッチパネルを用いることができる。この操作入力ユニット１４０を利用者が操作することにより、ナビゲーション装置１００の動作内容の設定が行われる。例えば、目的地の設定、情報の検索設定、車両の走行状況表示設定等のほか、再生対象媒体（ハードディスク装置１２０又は記録媒体ＲＭ）の指定を含む楽曲再生指定が、これに当たる。以上の入力内容は、操作入力ユニット１４０から制御ユニット１１０へ送られる。

音声入力ユニット１５０は、利用者の発話内容を認識する音声認識装置等により構成される。このときの音声認識結果は、音声入力ユニット１５０から制御ユニット１１０へ送られ、同制御ユニット１１０は、例えば、その音声認識結果に基づくルート変更（別ルート検索）等に関するコマンド処理を実行する。

画像表示ユニット１６０は、（ｉ）液晶表示パネル、有機ＥＬ（Electro Luminescence）パネル、ＰＤＰ（Plasma Display Panel）等の表示デバイスと、（ii）制御ユニット１１０から送出された表示制御データに基づいて、画像表示ユニット１６０全体の制御を行うグラフィックレンダラ等の表示コントローラと、（iii）表示画像データを記憶する表示画像メモリ等を備えて構成されている。この画像表示ユニット１６０は、制御ユニット１１０による制御下で、地図情報、経路情報、操作ガイダンス情報等を表示するほか、コンテンツ再生部１１１により再生されるマルチメディアコンテンツが画像データからなる場合に、該当する画像を表示したりもする。

音声出力ユニット１７０は、制御ユニット１１０によるコマンド応答（操作入力ユニット１４０における発話ボタンの押下操作に対する応答）時の応答音声（音声ガイド）を合成するための音声合成装置や、音声増幅器を経て増幅された音声合成信号を音声に変換して外部に放音するスピーカ等を備えて構成されている。この音出力ユニット１７０は、制御ユニット１１０による制御下で、車両の進行方向、走行状況、交通状況、上記コマンド応答等に関する音声ガイドを出力するほか、コンテンツ再生部１１１により再生された楽曲を出力する。

走行センサユニット１８０は、（ｉ）車両の移動速度を検出する速度センサと、（ii）車両進行方向である方位角を検出する方位角センサと、（iii）車両に作用している加速度を検出する加速度センサとを備えている。ここで、速度センサは、例えば、車軸や車輪の回転により出力されるパルス信号や電圧値を検出する。また、方位角センサは、例えば、いわゆるジャイロセンサとして構成され、方位角を検出する。また、加速度センサは、例えば、重力加速度を検出する。こうした検出結果は、走行センサユニット１８０から制御ユニット１１０へ送られる。

ＧＰＳ受信ユニット１９０は、複数のＧＰＳ衛星からの電波の受信結果に基づいて、車両の現在位置の擬似座標値を算出し、制御ユニット１１０へ報告する。また、ＧＰＳ受信ユニット１９０は、ＧＰＳ衛星から送出された時刻に基づいて現在時刻を計時し、これを制御ユニット１１０へ送る。

メディア放送受信ユニット２００は、例えば、地上デジタル放送受信装置やＦＭ（Frequency Modulation）多重放送受信装置等を備えて構成される。このメディア放送受信ユニット２００は、受信した地上デジタル放送やＦＭ多重放送等の放送波から放送信号を再生し、これを制御ユニット１１０へ送る。これら放送信号は、制御ユニット１１０から画像表示ユニット１６０及び音声出力ユニット１７０に転送されて、利用者による放送視聴に供される。

以上、一実施形態に係るナビゲーション装置１００の構成を説明したが、その構成要素としてのプログラム要素１１１〜１１３は、演算手段として機能する制御ユニット１１０により読み取りが可能な形態に、任意の種類の記録媒体に記録することが可能である。

［動作］
次に、以上のように構成されたナビゲーション装置１００の音声ガイド処理に関する動作について説明する。なお、以下においては、車両の走行中に、ハードディスク装置１２０の楽曲データ記憶領域１２１に記憶された楽曲データ（楽曲）が既に再生されている状況において、利用者が車両の走行ルート変更を指定するために、操作入力ユニット１４０の発話ボタンを押下した場合における音声ガイド処理の例を説明する。

図４に示されるように、音声ガイド処理Ｓ１０は、ナビゲーション装置１００の制御ユニット１１０が、ステップＳ１１において、操作入力ユニット１４０の発話ボタンが利用者により押下されたか否かを判定することにより開始される。発話ボタンが押下されたことが判定されない場合（ステップＳ１１；Ｎ）、制御ユニット１１０は、同発話ボタンの押下が判定されるまで、音声ガイドについては待機状態を維持する。

ここで、利用者が車両の走行ルートの変更を指定するために操作入力ユニット１４０の発話ボタンを押下し、その事実を制御ユニット１１０が判定すると（ステップＳ１１；Ｙ）、同制御ユニット１１０の曲調抽出部１１２は、まず、コンテンツ再生部１１１により現在再生中にある楽曲（楽曲データ記憶領域１２１中の楽曲データ）に関する楽曲メタ情報を、ハードディスク装置１２０の楽曲メタ情報記憶領域１２２から読み出す。次に、曲調抽出部１１２は、ステップＳ１２において、上記読み出された楽曲メタ情報から現在再生中の楽曲に関する曲調を抽出する（本発明にいう「特徴量抽出工程」）。そして、制御ユニット１１０は、ステップＳ１３において、コンテンツ再生部１１１により現在再生中にある楽曲をミュートする。

次に、制御ユニット１１０の音声ガイド再生部１１３は、ステップＳ１４において、上記抽出された曲調に対応した「発話ボタン応答用」の音声ガイドデータを、ハードディスク装置１２０の音声ガイドデータ記憶領域１２３から読み出す。そして、制御ユニット１１０のコンテンツ再生部１１１は、ステップＳ１５において、上記読み出された音声ガイドデータに該当する音声ガイドを再生し、これを音声出力ユニット１７０を通じて外部に放音させる。

このとき、例えば、ステップＳ１２において抽出された曲調が「明るい曲調」であった場合、音声ガイド再生部１１３は、図５Ａに示されるように、その曲調に対応した音声ガイドとして、「どうしましたか？」という文言を明るい言葉使いで表現した音声ガイドを再生する。これに対し、抽出された曲調が「悲しい曲調」であった場合、音声ガイド再生部１１３は、図５Ｂに示されるように、曲調対応の音声ガイドとして、「いかがしましょうか？」という文言を悲しい言葉使いで表現した音声ガイドを再生する。

次に、上記のように音声ガイドが再生され、これに対し、利用者が車両の走行ルート変更のために「ルート変更。」という文言を発話すると（図５Ａ及び図５Ｂ参照）、制御ユニット１１０は、ステップＳ１６において、音声入力ユニット１５０を通じて利用者の音声を入力する。このとき、音声入力ユニット１５０では、利用者の発話にかかる音声認識が行われ、その音声認識結果が制御ユニット１１０へ送られる。そして、制御ユニット１１０は、ステップＳ１７において、上記音声認識結果から所要のコマンド処理を実行する。

ここで、制御ユニット１１０は、上記コマンド処理に際し、ステップＳ１８において、音声認識結果から識別される利用者の要求内容に対応した応答が必要であるか否かを判定する。ここでは、利用者の要求内容が「走行ルート変更」であり、同利用者に別走行ルートを提示するための応答を行う必要があるため（ステップＳ１８；Ｙ）、制御ユニット１１０は、前述したステップＳ１４において、先に抽出された曲調に対応した「別ルート提示用」の音声ガイドデータを、ハードディスク装置１２０の音声ガイドデータ記憶領域１２３から読み出す（本発明にいう「視聴覚情報再生工程」の一部）。

このとき、例えば、前述のステップＳ１２において抽出された曲調が「明るい曲調」であった場合、音声ガイド再生部１１３は、図５Ａに示されるように、その曲調に対応した音声ガイドとして、「じゃあ、有料標準ルートにしましょう。」という文言を明るい言葉使いで表現した音声ガイドを再生する。これに対し、抽出された曲調が「悲しい曲調」であった場合、音声ガイド再生部１１３は、図５Ｂに示されるように、曲調対応の音声ガイドとして、「有料標準ルートをお勧めします。」という文言を悲しい言葉使いで表現した音声ガイドを再生する（本発明にいう「視聴覚情報再生工程」の一部）。

次に、上記のように音声ガイドが再生され、これに対し、利用者が車両の走行ルート変更に際して有料標準ルートの選択を回避するために「有料回避。」という文言を発話すると（図５Ａ及び図５Ｂ参照）、制御ユニット１１０は、前述したステップＳ１６において、音声入力ユニット１５０を通じて利用者の音声を入力し、続くステップＳ１７において、上記音声認識結果から所要のコマンド処理を実行する。

ここで、制御ユニット１１０は、上記コマンド処理に際し、前述したステップＳ１８において、音声認識結果から識別される利用者の要求内容に対応した応答が更に必要であるか否かを判定する。ここでは、利用者の要求内容が「有料標準ルートの選択の回避」であり、同利用者に有料回避ルートを更に提示するための応答を行う必要があるため（ステップＳ１８；Ｙ）、制御ユニット１１０は、前述したステップＳ１４において、先に抽出された曲調に対応した「有料回避ルート提示用」の音声ガイドデータを、ハードディスク装置１２０の音声ガイドデータ記憶領域１２３から読み出す。

このとき、例えば、前述のステップＳ１２において抽出された曲調が「明るい曲調」であった場合、音声ガイド再生部１１３は、図５Ａに示されるように、その曲調に対応した音声ガイドとして、「おせっかいでした。じゃあ、有料回避のルートを優先します。」という文言を明るい言葉使いで表現した音声ガイドを再生する。これに対し、抽出された曲調が「悲しい曲調」であった場合、音声ガイド再生部１１３は、図５Ｂに示されるように、曲調対応の音声ガイドとして、「申し訳ございません。では、有料回避のルートを優先します。」という文言を悲しい言葉使いで表現した音声ガイドを再生する。

次に、上記のように音声ガイドが再生されると、制御ユニット１１０は、実際に有料回避ルートの計算を行って、その計算結果により示される新たなルートを画面表示ユニット１６０上の地図情報に重畳表示する。この処理により、利用者の要求内容であった「走行ルート変更」が達せられる。このため、制御ユニット１１０は、続くステップＳ１６及びＳ１７における各処理を行わずに、前述したステップＳ１８において、利用者の要求内容に対応した応答が必要であるか否かを最終的に判定する。ここでは、利用者の要求内容が達せられて、これ以上の応答を行う必要はなくなったため（ステップＳ１８；Ｎ）、制御ユニット１１０は、ステップＳ１９において、前述したステップＳ１３において再生中の楽曲に対してなされていたミュートを解除する。そして、制御ユニット１１０は、利用者により次に発話ボタンが押下されるまで、音声ガイドについては待機状態を維持する。

以上、実施形態に係るナビゲーション装置１００の音声ガイド処理Ｓ１０に関する動作について、音声ガイドの再生に際し、ハードディスク装置１２０の楽曲データ記憶領域１２１に記憶された楽曲データに基づいて曲調を抽出する例を挙げて説明した。これに代え、本発明によれば、記録媒体ＲＭに記録された楽曲データに関連づけられている楽曲メタ情報に基づいて曲調を抽出することも勿論可能である。この場合、以上に説明した音声ガイド処理Ｓ１０における曲調抽出（ステップＳ１２）の対象を、記録媒体ＲＭ中に楽曲データに付随して記録された楽曲メタ情報に変更し、かつ、再生楽曲ミュート（ステップＳ１３）及び楽曲ミュート解除（ステップＳ１９）の対象を、記録媒体ＲＭ（光学ディスクドライブ装置１３０）に変更すればよい。

また、上記の例では、楽曲データ（楽曲）が既に再生されている状況において、所要の音声ガイドを再生する場合を示したが、本発明によれば、音声ガイド再生時に楽曲が再生されていない場合（過去に再生されていた場合）にも対応可能である。この場合、音声ガイド処理Ｓ１０における曲調抽出（ステップＳ１２）を、（ｉ）楽曲が再生が指定されるごとに、所要の曲調を楽曲メタ情報からリアルタイムに抽出し、（ii）その抽出した（最後に再生された楽曲に関する）楽曲メタ情報を所定時間にわたり保持する処理に変更すればよい。そして、音声ガイド再生出力（ステップＳ１５）における人の感情状態に応じた音声ガイドの再生を、例えば、上記所定時間の経過前において限定的に実行し、その経過後には、デフォルトの音声ガイドを再生するようにすればよい。

また、上記の例では、利用者による発話ボタンの押下操作に伴って所要の音声ガイドを再生する場合を示したが、本発明によれば、車両が交差点等の道路分岐点へ進入する前段階における脱出経路予告に伴って、音声ガイドを再生する場合にも対応可能である。この場合、音声ガイド処理Ｓ１０における発話ボタン押下判定（ステップＳ１１）、利用者音声入力（ステップＳ１６）、及び応答必要判定（ステップＳ１７）を排除し、ナビゲーション装置１００（制御ユニット１１０）により自動地点認識が行われるごとに、所要の音声ガイドを自動再生させるようにすればよい。

［作用効果］
以上に説明したように、本実施形態では、制御ユニット１１０の曲調抽出部１１２が、コンテンツ再生部１１１により再生された楽曲に関連づけられた楽曲メタ情報の各要素から、人の感情を反映していると推定される楽曲の曲調を抽出する。そして、制御ユニット１１０の音声ガイド再生部１１３が、曲調抽出部１１２により抽出された曲調に対応した音声ガイドデータを、ハードディスク装置１２０の音声ガイドデータ記憶領域１２３から読み出して、該当する音声ガイドを再生する。

このため、利用者の感情状態を考慮した音声ガイドを、従来のように、温度センサや圧力センサ等の接触型センサを用いることなく、ナビゲーション装置１００に標準で搭載される音楽再生機能のみを用いることにより簡易に実現することが可能となる。この結果、主にプログラム構成を変更するだけで、ヒューマンインタフェースに優れた音声ガイド機能を有するナビゲーション装置１００を構成することが可能となる。

［実施形態の変形］
本発明は、上記の実施形態に限定されるものではなく、様々な変形が可能である。

例えば、上記の実施形態では、曲調抽出部１１２自身に楽曲の曲調を抽出させるようにした。これに対し、楽曲メタ情報記憶領域１２２中の追記領域１２２Ｂ等に、メタ情報の各要素から判断される曲調をあらかじめ記憶させておき、当該記憶領域を曲調抽出部１２２に直接参照させるようにしてもよい。

また、上記の実施形態では、曲調抽出部１１２に楽曲メタ情報記憶領域１２２を参照させて楽曲の曲調を抽出させるようにした。これに対し、曲調抽出部１１２自身に、楽曲メタ情報記憶領域１２２を参照させることなく、コンテンツ再生部１１１で再生された楽曲の波形データを直接分析させ、このときの分析結果から、楽曲の曲調を抽出させるようにしてもよい。なお、この分析結果は、楽曲メタ情報記憶領域１２２の追記領域１２２Ｂに対して追記可能であり、所要の曲調抽出の適正化に供するための新たな楽曲メタ情報として利用することができる。

また、上記の実施形態では、マルチメディアコンテンツの種類が楽曲であることを前提としたが、これ以外にも、メタ情報が付随するものであれば、各種画像を扱うことも可能である。この場合、ハードディスク装置１２０の楽曲データ記憶領域１２１に加えて画像データ記憶領域を設けたり、画像データが記録された記録媒体ＲＭの内容を光学ディスクドライブ装置１３０に読み取らせて、所要の音声ガイド処理を行わせるようにすればよい。

また、上記の実施形態では、マルチメディアコンテンツがナビゲーション装置１００に事前に内蔵され、又は記録媒体ＲＭから読み取られる場合を説明した。これに加え、マルチメディアコンテンツの提供媒体としては、メディア放送受信ユニット２００を通じて受信される地上デジタル放送やＦＭ多重放送等の放送を利用することもできる。この場合において、再生中の放送信号にメタ情報が重畳されているときには、当該メタ情報を利用してマルチメディアコンテンツの特徴量（例えば、放送楽曲の場合には曲調、放送画像の場合には番組内容）を抽出し、これを音声ガイドデータの選定に供するようにすればよい。

また、上記の実施形態では、視聴覚情報が音声ガイドであることを前提としたが、これ以外にも、例えば、ナビゲーション操作に際して車両が登録地点に接近したときに音声出力ユニット１７０から放音される報知音の音色に関しても、人の感情の種類に応じて変化させることが可能である。この場合、デフォルトでチャイム音などに設定されている報知音の音色に関するハードディスク装置１２０内のデータを、例えば、抽出された曲調が「明るい曲調」のときには「トランペットの音」に設定し、それが「悲しい曲調」のときには「フルートの音」に設定するなどすればよい。

また、上記の視聴覚情報に関連し、例えば、実施形態で示した音声ガイド（図５Ａ及び図５Ｂ参照）を画像表示ユニット１６０に同時に表示させ、このとき用いるべき画像情報の表示形態をデフォルト値から変化させることなども可能である。この場合、当該画像情報の表示形態に関するハードディスク装置１２０内のデータを、例えば、抽出された曲調が「明るい曲調」のときには、四隅が丸みを帯びた表示ウインドウ中に「ポップ体」によるフォント表示を行うものに設定し、それが「悲しい曲調」のときには、四隅が直角な表示ウインドウ中に「明朝体」によるフォント表示を行うものに設定するなどすればよい。

また、上記の実施形態では、制御ユニット１１０における各機能を、対応するプログラムを実行することにより実現したが、その一部又は全てを、ファームウエアの実装等をしたハードウエアにより実現することもできる。

また、上記の実施形態では、車載のナビゲーション装置に本発明を適用した例を挙げて説明したが、マルチメディア再生機能を有するものであれば、例えば、航空機や船舶等に搭載されるナビゲーション装置にも、本発明を適用することが可能である。また、同様な条件により、例えば、携帯情報装置である、ＰＤＡ（Personal Digital Assistant）、携帯電話端末、ＰＨＳ（Personal Handyphone System）端末、携帯型パーソナルコンピュータ等に搭載されるナビゲーション装置にも、本発明を適用することができる。

本発明の一実施形態に係るナビゲーション装置の内部構成を示す機能ブロック図である。図１の楽曲メタ情報記憶領域に記憶される楽曲メタ情報要素の一例を示す図である。抽出曲調と音声ガイドデータに設定される言葉使いとの対応関係を示す図である。図１の制御ユニットにおいて実行される音声ガイド処理を説明するためのフローチャートである。図４の音声ガイド処理において抽出曲調が「明るい」とされた場合の音声ガイド形態の一例を示す図である。図４の音声ガイド処理において抽出曲調が「悲しい」とされた場合の音声ガイド形態の一例を示す図である。

Claims

マルチメディアコンテンツを再生するコンテンツ再生手段と；
前記コンテンツ再生手段により再生された前記マルチメディアコンテンツから、人の感情を反映していると推定される特徴量を抽出する特徴量抽出手段と；
前記人の感情の種類に応じた視聴覚情報の提示形態をそれぞれ表現した視聴覚データを記憶する視聴覚データ記憶手段と；
利用者に対し前記視聴覚情報を提示すべき事象が生じたときに、前記特徴量抽出手段により抽出された前記特徴量に対応した視聴覚データを前記視聴覚データ記憶手段から読み出して、該当する視聴覚情報を再生する視聴覚情報再生手段と；を備え、
前記特徴量抽出手段は、前記コンテンツ再生手段により最後に再生されたマルチメディアコンテンツに関して抽出した特徴量を、新たなマルチメディアコンテンツの再生、又は所定時間の経過まで保持する、ことを特徴とするナビゲーション装置。
前記特徴量抽出手段は、前記コンテンツ再生手段に対して新たなマルチメディアコンテンツの再生が指定されるごとに、所要の特徴量をリアルタイムに抽出して順次更新する、ことを特徴とする請求項１に記載のナビゲーション装置。
前記視聴覚情報再生手段は、前記所定時間の経過後に前記視聴覚情報を提示すべき事象が生じたときに、デフォルトの視聴覚情報を再生する、ことを特徴とする請求項１又は２に記載のナビゲーション装置。
前記マルチメディアコンテンツを記憶するメディアデータ記憶手段と；
前記メディアデータ記憶手段に記憶された前記マルチメディアコンテンツに関連づけられたメタ情報を記憶するメタ情報記憶手段と；を更に備え、
前記コンテンツ再生手段は、前記メディアデータ記憶手段から読み出されたマルチメディアコンテンツを再生し、
前記特徴量抽出手段は、前記コンテンツ再生手段により再生された前記マルチメディアコンテンツに関して前記メタ情報記憶手段に記憶されたメタ情報から所要の特徴量を抽出する、ことを特徴とする請求項１〜３のいずれか一項に記載のナビゲーション装置。
前記メタ情報記憶手段は、前記特徴量抽出手段による前記特徴量の抽出を適正化しうる要素を追記するための追記領域を備える、ことを特徴とする請求項４に記載のナビゲーション装置。
前記マルチメディアコンテンツが記録された記録媒体にアクセス可能な記録媒体読取手段を更に備え、
前記コンテンツ再生手段は、前記記録媒体読取手段により前記記録媒体から読み出されたマルチメディアコンテンツを再生し、
前記特徴量抽出手段は、前記コンテンツ再生手段により再生された前記マルチメディアコンテンツに付随するメタ情報から所要の特徴量を抽出する、ことを特徴とする請求項１〜５のいずれか一項に記載のナビゲーション装置。
前記マルチメディアコンテンツを受信可能なメディア放送受信手段を更に備え、
前記コンテンツ再生手段は、前記メディア放送受信手段により受信されたマルチメディアコンテンツを再生し、
前記特徴量抽出手段は、前記コンテンツ再生手段により再生された前記マルチメディアコンテンツに付随するメタ情報から所要の特徴量を抽出する、ことを特徴とする請求項１〜６のいずれか一項に記載のナビゲーション装置。
前記特徴量抽出手段は、前記コンテンツ再生手段により再生された前記マルチメディアコンテンツの波形データを分析した結果から所要の特徴量を抽出する、ことを特徴とする請求項１〜７のいすれか一項に記載のナビゲーション装置。
前記視聴覚情報は、音声ガイドを含み、
前記視聴覚データは、前記人の感情の種類に応じて前記音声ガイドの発話形態をそれぞれ表現した音声ガイドデータを含む、ことを特徴とする請求項１〜８のいずれか一項に記載のナビゲーション装置。
前記視聴覚情報は、報知音を含み、
前記視聴覚データは、前記人の感情の種類に応じて前記報知音の音色をそれぞれ表現した報知音データを含む、ことを特徴とする請求項１〜９のいずれか一項に記載のナビゲーション装置。
前記視聴覚情報は、画像情報を含み、
前記視聴覚データは、前記人の感情の種類に応じて前記画像情報の表示形態をそれぞれ表現した画像情報データを含む、ことを特徴とする請求項１〜１０のいずれか一項に記載のナビゲーション装置。
前記マルチメディアコンテンツは、楽曲であり、
前記特徴量抽出手段は、所要の特徴量として前記楽曲の曲調を抽出する、ことを特徴とする請求項１〜１１のいずれか一項に記載のナビゲーション装置。
コンテンツ再生手段により再生されたマルチメディアコンテンツから、人の感情を反映していると推定される特徴量を抽出する特徴量抽出工程と；
利用者に対し視聴覚情報を提示すべき事象が生じたときに、前記特徴量抽出工程で抽出された前記特徴量に基づき、前記人の感情の種類に応じた提示形態からなる視聴覚情報を再生する視聴覚情報再生工程と；を備え、
前記特徴量抽出工程では、前記コンテンツ再生手段により最後に再生されたマルチメディアコンテンツに関して抽出した特徴量を、新たなマルチメディアコンテンツの再生、又は所定時間の経過まで保持する、ことを特徴とするナビゲーション方法。
請求項１３に記載のナビゲーション方法をナビゲーション装置の演算手段に実行させる、ことを特徴とするナビゲーションプログラム。
請求項１４に記載のナビゲーションプログラムがナビゲーション装置の演算手段により読み取り可能に記録されている、ことを特徴とするナビゲーションプログラムを記録した記録媒体。