JP2015216586A - 電子システム、メディアの出力方法及び出力プログラム - Google Patents

Abstract

【課題】 競合しない関係にあるメディアの画像データと音声データを同時に出力可能な「電子システム、メディアの出力方法及び出力プログラム」を提供する。【解決手段】 本発明に係る電子装置と携帯端末とを含む電子システムのメディアの出力方法は、次のステップを含む。電子装置において実行されているラジオ放送出力し（Ｓ１００）、ラジオ放送に関するメディア情報を携帯端末に通知し（Ｓ１０２）、携帯端末においてメディア情報に基づきメディアを検索し（Ｓ１０６）、携帯端末において検索されたメディアを実行し、かつユーザー入力によって指示されたメディアを実行し、携帯端末において実行された一方のメディアの画像データと他方のメディアの音声データとを含むメディアデータを電子装置に送信し（Ｓ１１０）、電子装置において一方のメディアの画像データと他方のメディアの音声データとを出力部に出力する（Ｓ１１４）。【選択図】 図６

Description

本発明は、電子装置と当該電子装置に接続可能な携帯端末とを含む電子システムに関し、特に、電子装置および／または携帯端末において実行されるメディアまたはコンテンツの出力方法に関する。

現在、移動体等の車両に搭載された電子装置と携帯端末とを接続し、電子装置および携帯端末の双方の機能を複合的に利用可能な電子システムが普及している。例えば、スマートフォン（多機能型情報携帯）を車内に持ち込んだとき、スマートフォンを車載装置に接続することで、スマートフォンから車載装置を制御することができる。スマートフォンと車載装置間の通信規格の１つに、例えば、ミラーリンク（登録商標）と呼ばれるものがある。ミラーリンク（登録商標）では、スマートフォンに搭載されているアプリケーションが実行されたとき、その音声や画像を車載装置に出力させたり、あるいはスマートフォンから車載装置に搭載されている機能を実行させることができる。これにより、個人のスマートフォンに記憶された音楽や映像などのコンテンツを共有することができる。また、車載装置は、接続されたスマートフォンの通信機能を利用し、音楽や映像など各種メディア情報を外部ネットワークから取得することもできる。メディア情報を外部から取得する技術については、例えば、特許文献１、２などに開示されている。

特許文献１には、放送波のエリア制限を反映させてコンテンツ受信への切り替えを可能とする視聴システムが開示されている。特許文献２には、車両周辺内のノマディック無線通信装置を利用し、車内でインターネット・ラジオ・アプリケーションを実行するシステムが開示されている。

特開２００５−１３６８７９号公報 特表２０１２−５２９４０３号公報

図８（Ａ）に、車載装置とスマートフォンとがミラーリンク等によって接続されたときに実行されるメディアの遷移を示し、図８（Ｂ）に、そのときの車載装置の出力状態の遷移を示す。図８（Ａ）に示すように、スマートフォン２から車載装置１に対して、地上波ラジオ放送の受信を開始させるための制御信号が送信される。例えば、スマートフォン２に搭載されたメニュー画面からユーザーが地上波ラジオ放送を起動させるボタンなどをタッチ操作することにより行われる。あるいは、ラジオ放送の起動は、スマートフォン２から指示するのではなく、車載装置１の入力部から直接指示をするようにしてもよい。車載装置１は、このような制御信号を受信すると、ラジオ放送の受信を開始する。そして、車載装置１のスピーカからラジオ放送が出力され、車載装置１の表示部３には、図８（Ｂ）に示すように、放送局名、番組名、ラジオ受信周波数などのラジオ再生画面が表示される。

次に、ユーザーがスマートフォン２が保有するナビゲーション機能を起動させると、スマートフォン２から車載装置１に対して、ナビゲーションの画像データと、ガイダンスのための音声データが送信される。これにより、車載装置１の表示部３には、ナビゲーションの画像が表示され、車載装置１のスピーカからガイダンスの音声が出力される。車載装置１では、スマートフォンからの画像データおよび音声データに出力を切り替えてしまうため、ラジオ放送が聴けなくなってしまう。

再び、ラジオ放送を聴くため、ユーザーがスマートフォン２からラジオ放送を起動させると、車載装置１は、車載装置のメディアが実行されたことに応答してラジオ放送に出力を切り替えてしまう。このため、表示部３は、ラジオ再生画面に切り替わり、ナビゲーション画像が非表示となってしまい、ナビゲーション機能を利用することができなくなってしまう。

このように、車載装置とスマートフォンとを接続した電子システムにおいて、車載装置のメディアが実行され、次に、スマートフォンのメディアが実行された場合に、仮に２つのメディアの画像データと音声データとが競合しない関係にあったとしても、両者を同時に車載装置から出力することができないという不都合があった。

本発明は、このような従来の課題を解決するものであり、競合しない関係にあるメディアの画像データと音声データとを同時に出力することができる電子システム、メディアの出力方法及び出力プログラムを提供することを目的とする。

本発明に係る電子システムは、電子装置と、当該電子装置に接続可能な携帯端末とを含む電子システムであって、電子装置は、メディアを実行する実行手段と、携帯端末と接続する接続手段と、前記実行手段により実行している電子装置側の情報または前記接続手段から得られる携帯端末側の情報を選択する選択手段と、前記選択手段によって選択された情報を出力する出力手段と、前記選択手段により電子装置側の情報が選択されるとき、前記実行手段によって実行されているメディアに関連するメディア情報を前記接続手段を介して携帯端末に通知する通知手段とを有し、携帯端末は、電子装置と接続する携帯端末側の接続手段と、携帯端末側のメディアを実行する実行手段と、電子装置側の通知手段により通知されたメディア情報に基づきメディアを検索する検索手段と、操作入力を受け取る入力手段と、前記入力手段によって指示されたメディアと前記検索手段によって検索されたメディアが前記携帯端末側の実行手段によって実行されるとき、前記携帯端末側の実行手段によってそれぞれ実行される一方のメディアの画像データと他方のメディアの音声データとを組み合わせたデータを前記携帯端側の情報として前記携帯端末側の接続手段を介して電子装置へ送信する送信手段とを有する。

好ましくは前記通知手段は、前記入力手段によってメディアが選択されたことに応答して前記メディア情報を通知する。好ましくは携帯端末から画像データおよび音声データを含む前記携帯端末側の情報が受信されたとき、前記選択手段は、前記携帯端末側の情報を選択する。好ましくは前記通知手段は、前記実行手段によって現在実行しているメディアに関するメディア情報を通知する。好ましくは前記メディア情報がラジオ放送に関する情報であるとき、前記検索手段は、対応するインターネットラジオ放送局を検索する。好ましくは前記メディア情報が音楽データに関する情報であるとき、前記検索手段は、対応する音楽データを入手可能なサイトまたはストレージを検索する。好ましくは前記携帯端末側の実行手段によってナビゲーション機能が実行されるとき、前記送信手段は、ナビゲーションの画像データとインターネットラジオ放送局から受信した音声データとを前記携帯端末側の情報として送信する。好ましくは前記携帯端末側の実行手段によってナビゲーション機能が実行されるとき、前記送信手段は、ナビゲーションの画像データと検索された音楽データとを前記第２の情報として送信する。好ましくは電子装置は、車両に搭載された車載装置であり、前記出力手段は、画像データおよび音声データを出力するためのディスプレイおよびスピーカを含み、携帯端末は、多機能型携帯端末である。

本発明に係る電子装置は、携帯端末と接続可能であり、携帯端末から送信される画像データおよび音声データを出力可能なものであって、メディアを実行する実行手段と、携帯端末と接続する接続手段と、前記実行手段により実行している電子装置側の情報または前記接続手段から得られる携帯端末側の情報を選択する選択手段と、前記選択手段によって選択された情報を出力する出力手段と、前記選択手段により前記電子装置側の情報が選択されるとき、前記実行手段によって実行されているメディアに関連するメディア情報を前記接続手段を介して携帯端末に通知する通知手段とを有する。

本発明に係る携帯端末は、電子装置に音声データおよび画像データを送信し、音声データおよび画像データを電子装置から出力させることが可能なものであって、操作入力を受け取る入力手段と、メディアを実行する実行手段と、電子装置から受信したメディア情報に基づきメディアを検索する検索手段と、前記入力手段によって指示されたメディアと前記検索手段によって検索されたメディアが前記実行手段により実行されたとき、前記実行手段によってそれぞれ実行される一方のメディアの画像データと他方のメディアの音声データとを電子装置に送信する送信手段とを有する。

本発明に係るメディアの出力方法は、電子装置と、当該電子装置に接続可能な携帯端末とを含む電子システムにおいて行われるものであって、電子装置において実行されているメディアの情報を出力部に出力するステップと、前記電子装置において実行されているメディアに関するメディア情報を携帯端末に通知するステップと、携帯端末において前記メディア情報に基づきメディアを検索するステップと、携帯端末において検索されたメディアを実行し、かつ操作入力によって指示されたメディアを実行するステップと、前記操作入力によって指示されたメディアと前記検索されたメディアが携帯端末側の実行手段により実行されたとき、前記実行手段によってそれぞれ実行される一方のメディアの画像データと他方のメディアの音声データとを含む組合せのデータを電子装置に送信するステップと、電子装置において前記組合せのデータを受信するステップと、電子装置において前記組合せのデータを前記出力部に出力するステップとを有する。

本発明に係るメディアの出力プログラムは、電子装置に音声データおよび画像データを送信し、音声データおよび画像データを電子装置に出力させることが可能な携帯端末が実行するものであって、操作入力を受け取るステップと、電子装置から受信したメディア情報に基づきメディアを検索するステップと、前記操作入力によって指示されたメディアと前記検索するステップによって検索されたメディアがそれぞれ実行されたとき、一方のメディアの画像データと他方のメディアの音声データとを含む組合せのデータを電子装置に送信するステップとを有する。

本発明によれば、電子装置がメディアを実行しているときに、携帯端末側からユーザーによってメディアの実行がされた場合、電子装置が実行しているメディアを携帯端末側において実行するようにし、携帯端末側から２つのメディアの画像データと音声データの組合せを電子装置へ送信するようにしたので、電子装置が実行しているメディアの情報を継続して利用することができる。

本発明の実施例に係る電子システムを説明する図である。 本発明の実施例に係る車載装置の構成を示すブロック図である。 車載装置の出力部の内部構成を示す図である。 本発明の実施例に係る出力制御プログラムの機能的な構成を示すブロック図である。 本発明の実施例に係るスマートフォンの構成を示すブロック図である。 本実施例のスマートフォンに表示されるメニュー画面の一例を示す図である。 本実施例のスマートフォンのメディアの出力制御プログラムの機能的な構成を示すブロック図である。 本実施例に係る電子システムにおけるメディアの出力制御動作の一例を説明するフローである。 本実施例における車載装置の出力状態の遷移を示す図である。 図８（Ａ）は、従来の電子システムにおいて実行されるメディアの遷移を示す図であり、図８（Ｂ）は、車載装置の出力状態の遷移を示す図である。

次に、本発明の実施の形態について図面を参照して詳細に説明する。本発明の好ましい実施態様に係る電子システムは、電子装置と、当該電子装置に接続可能な携帯端末を含み、電子装置は、ミラーリンク等の通信機能により携帯端末から送信される画像データおよび音声データを出力することが可能である。

電子装置は、種々の機能を搭載することができる。例えば、電子装置は、オーディオデータやビデオデータを再生する機能、ラジオ／テレビ放送を受信して視聴する機能、目的地までの経路を案内するナビゲーション機能、インターネットなどのネットワークに接続する通信機能などを搭載することができる。さらに電子装置は、種々の外部機器、例えば、スマートフォンなどの携帯端末との接続が可能であり、好ましい態様では、電子装置と携帯端末とは、ＵＳＢ（登録商標）ケーブル等の有線、あるいは無線ＬＡＮ（登録商標）、ＷｉＦｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線によって接続することが可能である。電子装置と携帯端末は、予め決められた通信規格によって相互にデータ通信が可能である。好ましい例では、電子装置と携帯端末は、ミラーリンクと呼ばれる通信規格により相互通信が行われる。ミラーリンク機能は、例えば、電子装置を、接続された携帯端末の出力装置として利用することを可能にし、電子装置は、携帯端末から送信される画像データや音声データを出力することができる。

携帯端末は、電子装置との接続が可能であり、好ましい態様では、ネットワーク通信を介して外部ネットワーク等とデータの送受を行うことができる無線通信機能、オーディオデータやビデオデータを再生する機能、ラジオ／テレビ放送を受信して視聴する機能、目的地までの経路を案内するナビゲーション機能などを搭載することができる。さらに携帯端末は、接続された電子装置から受信したメディア情報に基づき、内部メモリや外部ネットワークから同一のまたは類似のメディアを検索するメディア検索機能を備える。携帯端末は、例えば、多機能型携帯電話機（スマートフォン）、携帯電話機、ノート型ＰＣ、タブレット型ＰＣ、その他の同様の端末であることができる。

本実施例では、電子装置および携帯端末がそれぞれ保有する機能、アプリケーションをメディアを称することがある。例えば、オーディオ・ビデオ再生機能、ラジオ放送を受信する機能、アプリケーションソフトウエアの機能などの１つ１つの機能がメディアと称され得る。

次に、本発明の実施例に係る電子システムについて説明する。図１は、本実施例の電子システムの概要を示す図である。ここでは、電子装置の例示として車載装置を、携帯端末の例示としてスマートフォンを用いる。同図に示すように、電子システム１０は、車載装置１００と、車載装置１００に有線または無線により接続されたスマートフォン２００とを備える。車載装置１００とスマートフォン２００とは、例えばミラーリンク等の接続手段３００により接続される。これにより、スマートフォン２００は、車載装置１００の入力装置として機能することができ、車載装置１００は、スマートフォン２００の出力装置として機能することができる。但し、ミラーリンクは一例であり、車載装置１００は、スマートフォン２００から送信される画像データおよび音声データを受信し、これを出力することができる機能を備えていればよい。

車載装置１００は、オーディオ再生機能やラジオ再生機能などを搭載し、オーディオ再生画面やラジオ再生画面などの画像データを表示するための表示部１１０、音声データを出力するためのスピーカ(音声出力部)１２０、ユーザーからの音声指示などを入力するマイクロフォン１３０を備える。スピーカ１２０、マイクロフォン１３０は、車内スピーカ、車内マイクに限らず、これ以外にも、車載装置１００に無線または有線で接続されたヘッドセットであってもよい。

典型的なスマートフォン２００は、公衆電話回線網２１０を利用する電話機能、インターネット等のネットワーク通信２２０を利用するデータ通信機能、車載装置１００やヘッドフォンセットなどの外部機器を介して音声通話などを行うハンズフリー機能、目的地までの経路を案内するナビゲーション機能、メディアを再生する機能等を備えている。

車載装置１００は、接続手段３００によってスマートフォン２００に接続される。接続手段３００は、その接続方法を特に限定するものではなく、例えば、無線ＬＡＮ、ＷｉＦｉ、ＵＳＢなどによって両者を接続することができる。接続手段３００は、車載装置１００とスマートフォン２００の間でデータや制御信号の双方向通信を行うことを可能にする。車載装置１００とスマートフォン２００とが接続手段３００によって接続されたとき、電子システム１０は、車載装置１００が保有するメディアに加え、スマートフォン２００が保有するメディアを実行することができる。好ましい態様では、接続手段３００が確立されたとき、スマートフォン２００によって実行されたメディアの情報が車載装置１００において優先的に出力される。また、接続手段３００は、ユーザー操作によって任意に解除または再接続することができる。

図２は、車載装置１００の一構成例を示すブロック図である。車載装置１００は、ＣＤ、ＤＶＤ、ブルーレイディスク、ハードディスク装置などに格納されたオーディオデータやビデオデータを再生するオーディオ・ビデオ（ＡＶ）再生部１４０、ＡＭ／ＦＭラジオ放送やテレビ放送を受信する放送受信部１４２、道路地図を表示して目的地までの誘導経路を案内するナビゲーション部１４４、図１に示す接続手段３００によってスマートフォン２００との接続を可能にしたり、外部のネットワーク等とデータ通信を行うことを可能にする通信部１４６、スマートフォン２００が接続手段３００によって接続されたときスマートフォン２００から画像データや音声データを受信する受信部１４８、プログラムやデータ等を記憶する記憶部１５０、画像データや音声データを出力する表示部１１０やスピーカ１２０を含む出力部１５２、ユーザーからの操作や音声等を受け取る入力部１５４、マイクロコントローラやマイクロプロセッサ等を含みプログラムを実行することで各部を制御する制御部１６０を含んで構成される。なお、ここに示される構成は例示であり、車載装置１００は、必ずしもこのような構成に限定されるものではない。

図２Ａに、出力部１５２の内部構成を示す。出力部１５２は、画像データを出力する表示部１１０と、音声データを出力する音声出力部１２０と、画像データの選択を行う画像データ選択部ＳＥＬ１と、音声データの選択を行う音声データ選択部ＳＥＬ２とを含む。画像データ選択部ＳＥＬ１は、受信部１４８で受信された画像データまたは車載装置１００が生成した画像データのいずれかを選択し、音声データ選択部ＳＥＬ２は、受信部１４８で受信された音声データまたは車載装置１００が生成した音声データのいずれかを選択する。画像データ選択部ＳＥＬ１および音声データ選択部ＳＥＬ２の選択は、制御部１６０からの選択制御信号Ｓ１、Ｓ２によって制御される。ここで、車載装置１００が生成した画像データおよび音声データとは、車載装置１００が保有するメディアが実行されたときに生成されるデータであって、具体的には、ＡＶ再生部１４０、放送受信部１４２、ナビゲーション部１４４が実行されたときに生成される画像データおよび音声データである。

記憶部１５０には、制御部１６０が実行する各種プログラムが格納される。図３に、車載装置１００の出力部１５２を制御する出力制御プログラムの機能的な構成を示す。出力制御プログラム１８０は、車載装置１００とスマートフォン２００との間に接続手段３００が確立されたか否かを判定する接続判定部１８２と、車載装置１００において実行されているメディアを識別するメディア識別部１８４と、図２Ａに示す出力部１５２の画像データ選択部ＳＥＬ１および音声データ選択部ＳＥＬ２を制御する選択制御信号Ｓ１、Ｓ２を生成するデータ選択部１８６と、メディア識別部１８４により識別されたメディアに関するメディア情報を携帯端末に通知するメディア情報通知部１８８とを備える。

接続判定部１８２は、車載装置１００が接続手段３００によってスマートフォン２００に接続されているか否かを判定する。この判定結果は、データ選択部１８６およびメディア情報通知部１８８へ提供される。メディア識別部１８４は、車載装置１００によって実行されているメディアを識別する。具体的には、メディア識別部１８４は、ＡＶ再生部１４０、放送受信部１４２、ナビゲーション部１４４のいずれかが実行されているか否かを識別し、実行されている場合には、さらに詳細な情報が付加される。例えば、ＡＶ再生部１４０によってＣＤが再生されている場合には、ＣＤのタイトルまたはアルバム名、楽曲名、アーティスト名などが識別される。ラジオ放送が受信されている場合には、ラジオ放送の番組名、チャンネル周波数などが識別される。メディア識別部１８４の識別結果は、データ選択部１８６およびメディア情報通知部１８８へ提供される。

データ選択部１８６は、接続判定部１８２によって接続手段３００によって車載装置１００とスマートフォン２００とが接続されていると判定されたとき、出力部１５２の出力制御を行う。例えば、スマートフォン２００から車載装置１００のＡＶ再生部１４０を実行させるコマンドが送信されたとき、データ選択部１８６は、車載装置１００が生成した画像データおよび音声データが出力されるように選択制御信号Ｓ１、Ｓ２を出力部１５２へ提供する。また、スマートフォン２００から車載装置１００へ画像データおよび音声データが送信され、これらのデータが受信部１４８によって受信されたとき、データ選択部１８６は、受信部１４８で受信された画像データおよび音声データが出力されるように選択制御信号Ｓ１、Ｓ２を出力部１５２へ提供する。これ以外にも、スマートフォン２００が保有するメディアが実行されたことを示す制御信号がスマートフォン２００から車載装置１００に送信されたとき、データ選択部１８６は、受信部１４８で受信された画像データおよび音声データが出力されるようにする。

メディア情報通知部１８８は、接続判定部１８２によって接続手段３００が確立されていると判定されているとき、車載装置１００によって現在実行されているメディアに関するメディア情報をスマートフォン２００へ通知する。メディア情報は、好ましくは、メディア識別部１８４によって識別された識別結果を参照して作成される。例えば、現在再生している音楽の楽曲名、歌手名、アルバム名、再生時間、あるいはラジオ放送の放送局、番組名、ラジオ受信周波数等をメディア情報としてスマートフォン２００に通知することができる。

図４は、スマートフォン２００の典型的な一構成例を示す。スマートフォン２００は、ユーザーからの入力を受け取る入力部２３０、車載装置１００との間で接続手段３００による接続を確立したり、公衆電話回線網２１０やネットワーク通信２２０を介しての通信を可能にする通信部２３２、ディスプレイの表示を制御する表示部２３４、スピーカからの音声出力を制御する音声出力部２３６、スマートフォン２００が記憶するメディアやネットワークから配信されるメディアを再生するメディア再生部２３８、マイクロコントローラやマイクロプロセッサ等を含みプログラムを実行することで各部を制御する制御部２４０、制御部２４０が実行するアプリケーションソフトやその他のプログラムなどを格納するプログラムメモリ２４２、および画像データや音声データ等のメディア等の種々のデータを格納するデータメモリ２４４を備えている。

アプリケーションソフトは、ユーザーが任意にスマートフォン２００に搭載することができ、例えば、通信部２３２を介してネットワークサーバーなどから所望のアプリケーションソフトウエアをダウンロードすることができる。例えば、ナビゲーション機能を実行するアプリケーション、音楽や画像を再生するアプリケーション、情報を検索するアプリケーションなどである。

制御部２４０は、スマートフォン２００が接続手段３００によって車載装置１００と接続されたとき、スマートフォン２００から車載装置１００を遠隔操作できるような通信制御を行う。好ましい態様では、接続手段３００による接続が確立されたとき、表示部２３４には、図４Ａに示すようなメニュー画面が表示される。メニュー画面ＭＮには、スマートフォン２００が保有するアプリケーションや機能を実行するための入力ボタンとして、メディア再生部２３８を起動させるボタンＡ１、ナビゲーションのアプリケーションを起動させるボタンＡ２、電話機能を起動させるボタンＡ３などを含む。さらにメニュー画面ＭＮには、車載装置１００が保有するアプリケーションや機能を起動させるためのボタンＡ４が含まれるようにしてもよい。ボタンＡ１ないしＡ３が選択され、スマートフォン２００が保有するアプリケーションや機能が実行されたとき、スマートフォン２００から車載装置１００に対して画像データおよび／または音声データが送信される。ボタンＡ４が選択され、車載装置１００が保有するアプリケーションや機能を起動させるとき、スマートフォン２００は、それらのメディアを起動するためのコマンドを含む制御信号を車載装置１００へ送信する。こうして、ユーザーは、メニュー画面ＭＮを介して所望のアプリケーションや機能を実行させることができる。但し、メニュー画面ＭＮの表示は必須ではなく、例えば、車載装置１００が接続手段３００によって接続されたとき、車載装置１００からアイコン情報を受け取り、受け取ったアイコン情報をスマートフォンのアイコン情報と一緒に表示部２３４に表示させるようにしてもよい。さらに、車載装置１００とスマートフォン２００との間に接続手段３００が確立されたとき、車載装置１００への入力指示は、必ずしもスマートフォン２００からだけに制限されるのではなく、車載装置１００の入力部１５４（図２を参照）を介して行うことも可能である。

次に、スマートフォン２００が接続手段３００によって車載装置１００と接続されているときのメディアの出力制御について説明する。上記したように、車載装置１００は、スマートフォン２００または車載装置１００が実行するメディアの出力装置として機能し、車載装置１００が保有するメディアが実行されているときにスマートフォンのメディアの実行がユーザーによって指示されたときであっても、車載装置１００が実行するメディアとスマートフォン２００が実行するメディアに競合関係がなければ、２つのメディアの画像データと音声データとが同時に車載装置１００から出力されるようにするのが望ましい。例えば、スマートフォン２００において、ナビゲーションのアプリケーションが起動されるような場合、ユーザーにとって常時必要な情報は、道路地図情報であり、すなわち、音声データが常時必要とされるわけではないし、またそれが常時出力されるわけではない。このため、ユーザーは、ナビゲーションの情報に加えて、同時に、バックグランドでの音声情報の出力を所望する。つまり、ナビゲーションを実行しながら、ラジオ放送を聴いたり、ＣＤ等の楽曲を聴くことである。本実施例のスマートフォン２００は、車載装置１００でメディアが実行されている間に、スマートフォン２００で別のメディアが実行されるとき、車載装置１００で実行しているメディアをスマートフォン２００でも実行できるようにし、スマートフォン２００で実行された２つのメディアの画像データと音声データとを組合わせたメディアデータを車載装置１００へ送信し、車載装置１００は、受信したメディアデータを出力する。

図５は、スマートフォンに搭載されるメディアの出力制御プログラムの機能的な構成を示す図である。メディアの出力制御プログラム２５０は、スマートフォン２００と車載装置１００との間に接続手段３００が確立されているか否かを判定する接続判定部２５２と、車載装置１００からのメディア情報を受信するメディア情報受信部２５４と、受信したメディア情報に基づき車載装置１００が実行するメディアと同一または類似のメディアを検索するメディア検索部２５６と、ユーザー操作によって選択されたメディアや車載装置１００から通知されたメディア情報のメディアを識別するメディア識別部２５８と、スマートフォン２００において複数のメディアが実行されたとき、適切な画像データと音声データとの組合せであるメディアデータを生成するメディアデータ生成部２６０と、メディアデータの送信を制御する送信制御部２６２とを備える。

メディア検索部２５６は、メディア情報受信部２５４で受信したメディア情報に基づき車載装置１００が実行しているメディアと同一または共通のメディアを検索する。メディア検索部２５６は、スマートフォン２００が保有しているアプリケーションソフトあるいはデータメモリ２４４に記憶されているデータの中から、車載装置が実行しているメディアを同一または共通のメディアを検索する。さらに通信部２３２を介して、外部のネットワーク上から同一または共通のメディアを検索する。例えば、メディア情報がラジオ放送に関するものであった場合、メディア検索部２５６は、ラジオ放送と同じ番組を配信しているインターネットラジオの配信サイトを検索し、そこをアクセスする。また、メディア情報が楽曲再生に関するものであった場合、メディア検索部２５６は、データメモリ２４４を検索し、同じ楽曲が存在する場合にはメディア再生部２３８にそれを再生させる。データメモリ２４４に存在しない場合には、通信部２３２を介して同じ楽曲データを配信するサイトを検索し、そこをアクセスする。メディア検索部２５６の検索結果は、メディアデータ生成部２６０へ提供される。

メディア識別部２５８は、ユーザーによって選択されたメディアを識別する。例えば、ユーザーがスマートフォン２００にインストールされているアプリケーションソフトを起動したとき、当該アプリケーションが識別される。また、ユーザーが車載装置１００の機能またはアプリケーションを起動させたとき、当該機能またはアプリケーションが識別される。さらにメディア識別部２５８は、メディア情報受信部２５４で受信されたメディア情報に基づき車載装置１００が実行しているメディアを識別する。これらの識別結果は、メディアデータ生成部２６０へ提供される。

メディアデータ生成部２６０は、複数のアプリケーションまたは機能が同時に起動されたとき、画像データと音声データとの最適な組合せとなるメディアデータを生成する。例えば、ナビゲーションとラジオ放送、ナビゲーションと楽曲再生の組合せであれば、ナビゲーションの画像データとラジオまたは楽曲再生の音声データとを含むメディアデータが生成される。送信制御部２６２は、メディアデータ生成部２６０で生成されたメディアデータを車載装置１００へ送信する。車載装置１００は、上記したように受信部１４８でメディアデータを受信し、出力部１５２は、受信した画像データと音声データをそれぞれ出力する。

次に、本実施例に係る電子システムにおけるメディアの出力制御動作について図６を参照して説明する。また、図７は、そのときの車載装置の出力動作の遷移を示す図である。車載装置１００とスマートフォン２００とが接続手段３００により接続され、次に、ユーザーが車載装置１００に搭載されたラジオ放送の受信を起動させる。この起動は、図４Ａに示すようなメニュー画面を介して行われてもよいし、車載装置１００の入力部１５４から直接起動されてもよい。車載装置１００のメディア識別部１８４は、メディアとしてラジオ放送が選択されたことを識別し、その識別結果をデータ選択部１８６へ提供する。データ選択部１８６は、データ選択部ＳＥＬ１、ＳＥＬ２が車載装置１００が生成したデータを選択するように、選択制御信号Ｓ１、Ｓ２を出力部１５２へ提供する。これにより、図７（Ａ）に示すように、車載装置１００の音声出力部１２０からラジオ放送が出力され、表示部１１０にはラジオ再生画面が出力される（Ｓ１００）。

次に、メディア情報通知部１８８は、メディア識別部１８４の識別結果に基づき、車載装置１００が実行しているメディアに関するメディア情報をスマートフォン２００へ通知する（Ｓ１０２）。ここでは、受信しているラジオ放送の内容を識別できるようなメディア情報が通知される。スマートフォン２００は、メディア情報受信部２５４においてメディア情報を受信する（Ｓ１０４）。メディア情報受信部２５４で受信されたメディア情報は、メディア識別部２５８へ提供され、メディア識別部２５８は、車載装置１００が現在実行しているメディアを識別する。

さらに、メディア情報が通知されたことに応答して、メディア検索部２５６は、受信したメディア情報に基づきメディアを検索する（Ｓ１０６）。ここの例では、車載装置１００がラジオ放送を受信しているので、メディア検索部２５６は、そのラジオ放送と同じ番組内容を配信しているインターネットラジオの配信サイトを検索し、その検索情報を保持する。

次に、スマートフォン２００において、ユーザーがナビゲーションのアプリケーションを起動する（Ｓ１０８）。例えば、図４Ａに示すメニュー画面からボタンＡ２がユーザーによって選択される。メディア識別部２５８は、ナビゲーションが起動されたことを識別し、その識別結果をメディア検索部２５６およびメディアデータ生成部２６０へ提供する。メディア検索部２５６は、先の検索結果に基づきインターネットラジオ放送の配信サイトにアクセスし、そこからラジオ放送の音声データをダウンロードさせる。メディアデータ生成部２６０は、メディア識別部２５８によって識別された２つのメディアが競合関係にあるか否かを判定し、競合関係にない（バックグランド再生が可能）と判定すれば、２つのメディアの実行により得られた画像データと音声データの組合せをメディアデータして生成する（Ｓ１１０）。本例では、メディアデータ生成部２６０は、ナビゲーションの実行により得られたナビゲーション画像データと、メディア検索部２５６によって検索されたラジオ放送の音声データとの組合せをメディアデータとして生成する。そして、送信制御部２６２は、メディアデータを車載装置１００へ送信する。なお、ナビゲーションにおいて音声案内が発生する場合には、メディアデータ生成部２６０は、ラジオ放送の音声データ内に音声案内を割り込みさせる。

スマートフォン２００から送信されたメディアデータは、車載装置１００の受信部１４８によって受信される（Ｓ１１２）。データ選択部１８６は、受信部１４８でメディアデータが受信されると、データ選択部ＳＥＬ１、ＳＥＬ２が受信部１４８のメディアデータを選択するように、選択制御信号Ｓ１、Ｓ２を出力部１５２へ提供する（Ｓ１１４）。これにより、車載装置１００では、図７（Ｂ）に示すように、表示部１１０にナビゲーション画像が出力され、音声出力部からラジオ放送が出力される（Ｓ１１６）。

このように、本実施例によれば、車載装置が保有するメディアが実行されているときに、ユーザーがスマートフォンが保有するメディを実行させた場合、２つのメディアの画像データと音声データとが競合しなければ、車載装置が実行していたメディアをさらにスマートフォンにおいて実行させ、２つのメディアによって生成された画像データと音声データを車載装置において同時に出力させることができる。

上記実施例では、車載装置１００は、スマートフォン２００においてナビゲーションのアプリケーションが起動される前に、メディア情報を通知するようにしたが、これに限らず、ナビゲーションのアプリケーションが起動されたことに応答してメディア情報を通知するようにしてもよい。この場合、メディア検索部２５６は、メディア情報に基づきラジオ放送を検索し、ラジオ放送のサイトをアクセスすることで即座にラジオ放送の音声データを取得する。

さらに上記実施例は、車載装置においてラジオ放送が受信されているときにスマートフォンにおいてナビゲーションアプリケーションが起動される例を示したが、これ以外のメディアの組合せであっても、画像データと音声データとが競合しない関係、すなわち一方のメディアをバックグランドで動作させても問題がない組合せであれば、本発明を同様に適用することができる。

本発明は、上記実施例に限定されるものではなく、特許請求の範囲に記載された発明の要旨の範囲において、種々の変形・変更が可能である。

１０：電子システム １００：車載装置
１１０：表示部 １２０：スピーカ（音声出力部）
１３０：マイクロフォン １４０：ＡＶ再生部
１４２：放送受信部 １４４：ナビゲーション部
１４６：通信部 １４８：受信部
１５０：記憶部 １５２：出力部
１５４：入力部 １６０：制御部
１８０：出力制御プログラム １８２：接続判定部
１８４：メディア識別部 １８６：データ選択部
１８８：メディア情報通知部 ２００：スマートフォン
２１０：公衆電話回線網 ２２０：ネットワーク通信
２３０：入力部 ２３２：通信部
２３４：表示部 ２３６：音声出力部
２３８：メディア再生部 ２４０：制御部
２４２：プログラムメモリ ２４４：データメモリ
２５０：メディアの出力制御プログラム ２５２：接続判定部
２５４：メディア情報受信部 ２５６：メディア検索部
２５８：メディア識別部 ２６０：メディアデータ生成部
２６２：送信制御部

Claims (22)

1. 電子装置と、当該電子装置に接続可能な携帯端末とを含む電子システムであって、
   電子装置は、
   メディアを実行する実行手段と、
   携帯端末と接続する接続手段と、
   前記実行手段により実行している電子装置側の情報または前記接続手段から得られる携帯端末側の情報を選択する選択手段と、
   前記選択手段によって選択された情報を出力する出力手段と、
   前記選択手段により電子装置側の情報が選択されるとき、前記実行手段によって実行されているメディアに関連するメディア情報を前記接続手段を介して携帯端末に通知する通知手段とを有し、
   携帯端末は、
   電子装置と接続する携帯端末側の接続手段と、
   携帯端末側のメディアを実行する実行手段と、
   電子装置側の通知手段により通知されたメディア情報に基づきメディアを検索する検索手段と、
   操作入力を受け取る入力手段と、
   前記入力手段によって指示されたメディアと前記検索手段によって検索されたメディアが前記携帯端末側の実行手段によって実行されるとき、前記携帯端末側の実行手段によってそれぞれ実行される一方のメディアの画像データと他方のメディアの音声データとを組み合わせたデータを前記携帯端側の情報として前記携帯端末側の接続手段を介して電子装置へ送信する送信手段と、を有する電子システム。
2. 前記通知手段は、前記入力手段によってメディアが選択されたことに応答して前記メディア情報を通知する、請求項１に記載の電子システム。
3. 携帯端末から画像データおよび音声データを含む前記携帯端末側の情報が受信されたとき、前記選択手段は、前記携帯端末側の情報を選択する、請求項１または２に記載の電子システム。
4. 前記通知手段は、前記実行手段によって現在実行しているメディアに関するメディア情報を通知する、請求項１ないし３いずれか１つに記載の電子システム。
5. 前記メディア情報がラジオ放送に関する情報であるとき、前記検索手段は、対応するインターネットラジオ放送局を検索する、請求項１ないし４いずれか１つに記載の電子システム。
6. 前記メディア情報が音楽データに関する情報であるとき、前記検索手段は、対応する音楽データを入手可能なサイトまたはストレージを検索する、請求項１ないし４いずれか１つに記載の電子システム。
7. 前記携帯端末側の実行手段によってナビゲーション機能が実行されるとき、前記送信手段は、ナビゲーションの画像データとインターネットラジオ放送局から受信した音声データとを前記携帯端末側の情報として送信する、請求項５に記載の電子システム。
8. 前記携帯端末側の実行手段によってナビゲーション機能が実行されるとき、前記送信手段は、ナビゲーションの画像データと検索された音楽データとを前記第２の情報として送信する、請求項６に記載の電子システム。
9. 電子装置は、車両に搭載された車載装置であり、前記出力手段は、画像データおよび音声データを出力するためのディスプレイおよびスピーカを含み、携帯端末は、多機能型携帯端末である、請求項１ないし８いずれか１つに記載の電子システム。
10. 携帯端末と接続可能であり、携帯端末から送信される画像データおよび音声データを出力可能な電子装置であって、
    メディアを実行する実行手段と、
    携帯端末と接続する接続手段と、
    前記実行手段により実行している電子装置側の情報または前記接続手段から得られる携帯端末側の情報を選択する選択手段と、
    前記選択手段によって選択された情報を出力する出力手段と、
    前記選択手段により前記電子装置側の情報が選択されるとき、前記実行手段によって実行されているメディアに関連するメディア情報を前記接続手段を介して携帯端末に通知する通知手段とを有する、電子装置。
11. 電子装置はさらに、携帯端末から画像データおよび音声データを含む前記携帯端末側の情報を受信する受信手段を有し、前記選択手段は、前記携帯端末側の情報が受信されたとき、前記携帯端末側の情報を選択する、請求項１０に記載の電子装置。
12. 前記出力手段は、前記携帯端末側の情報を出力するとき、前記携帯端末側の情報に含まれる一方のメディアに関する画像データと他方のメディアに関する音声データとを出力する、請求項１０または１１に記載の電子装置。
13. 電子装置に音声データおよび画像データを送信し、音声データおよび画像データを電子装置から出力させることが可能な携帯端末であって、
    操作入力を受け取る入力手段と、
    メディアを実行する実行手段と、
    電子装置から受信したメディア情報に基づきメディアを検索する検索手段と、
    前記入力手段によって指示されたメディアと前記検索手段によって検索されたメディアが前記実行手段により実行されたとき、前記実行手段によってそれぞれ実行される一方のメディアの画像データと他方のメディアの音声データとを電子装置に送信する送信手段と、
    を有する携帯端末。
14. 前記実行手段は、ナビゲーション機能と音楽再生機能とを実行し、前記送信手段は、ナビゲーションの画像データと音楽再生された音声データとを送信する、請求項１３に記載の携帯端末。
15. 前記実行手段は、ナビゲーション機能とインターネットラジオ受信機能とを実行し、前記送信手段は、ナビゲーションの画像データとインターネットラジオ放送から受信された音声データとを送信する、請求項１３に記載の携帯端末。
16. 電子装置と、当該電子装置に接続可能な携帯端末とを含む電子システムのメディアの出力方法であって、
    電子装置において実行されているメディアの情報を出力部に出力するステップと、
    前記電子装置において実行されているメディアに関するメディア情報を携帯端末に通知するステップと、
    携帯端末において前記メディア情報に基づきメディアを検索するステップと、
    携帯端末において検索されたメディアを実行し、かつ操作入力によって指示されたメディアを実行するステップと、
    前記操作入力によって指示されたメディアと前記検索されたメディアが携帯端末側の実行手段により実行されたとき、前記実行手段によってそれぞれ実行される一方のメディアの画像データと他方のメディアの音声データとを含む組合せのデータを電子装置に送信するステップと、
    電子装置において前記組合せのデータを受信するステップと、
    電子装置において前記組合せのデータを前記出力部に出力するステップと、
    を有するメディアの出力方法。
17. 前記通知するステップは、現在実行されている音楽データまたはラジオ放送を識別可能なメディア情報を通知する、請求項１６に記載のメディアの出力方法。
18. 前記メディア情報がラジオ放送に関する情報であるとき、前記検索するステップは、対応するインターネットラジオ放送局を検索する、請求項１６または１７に記載のメディアの出力方法。
19. 前記メディア情報が音楽データに関する情報であるとき、前記検索するステップは、対応する音楽データを入手可能なサイトまたはストレージを検索する、請求項１６ないし１７いずれか１つに記載のメディアの出力方法。
20. 前記一方のメディアは、ナビゲーションに関するものであり、前記他方のメディアは、ラジオ放送に関するものである、請求項１６ないし１９いずれか１つに記載のメディアの出力方法。
21. 電子装置に音声データおよび画像データを送信し、音声データおよび画像データを電子装置から出力させることが可能な携帯端末におけるメディアの出力方法であって、
    操作入力を受け取るステップと、
    電子装置から受信したメディア情報に基づきメディアを検索するステップと、
    前記操作入力によって指示されたメディアと前記検索するステップによって検索されたメディアがそれぞれ実行されたとき、一方のメディアの画像データと他方のメディアの音声データとを含む組合せのデータを電子装置に送信するステップと、
    を有するメディアの出力方法。
22. 電子装置に音声データおよび画像データを送信し、音声データおよび画像データを電子装置に出力させることが可能な携帯端末が実行するメディアの出力プログラムであって、
    操作入力を受け取るステップと、
    電子装置から受信したメディア情報に基づきメディアを検索するステップと、
    前記操作入力によって指示されたメディアと前記検索するステップによって検索されたメディアがそれぞれ実行されたとき、一方のメディアの画像データと他方のメディアの音声データとを含む組合せのデータを電子装置に送信するステップと、
    を有するメディアの出力プログラム。
    

Images