JP2022019994A - 表示システム - Google Patents

Abstract

【課題】軽快な操作が可能となる表示システムを提供する。
【解決手段】表示システム１００において、カーナビゲーション装置１０は、メニュー画像等を表示する表示部１Ｃと、スマートフォン２０と通信する有線処理部１９又は無線処理部１Ａと、を備え、スマートフォン２０は、カーナビゲーション装置１０と通信する有線処理部２Ｄ又は無線処理部２Ｅと、当該メニュー画像の指定された一部を拡大した拡大画像を表示する表示部２６と、を備えている。そして、カーナビゲーション装置１０は、スマートフォン２０から拡大画像の範囲を示す座標情報を受信し、表示部１Ｃに、拡大画像に該当する範囲を枠Ｆとして表示する。
【選択図】図１

Description

本発明は、画像等を表示する表示システムに関する。

カーナビゲーション装置などのタッチパネルを備えた電子機器においては、その表示部にボタン等の画像を表示して、当該ボタンをタッチすることで操作が行われている。

この種の電子機器においては、画面に表示されたボタンのサイズが小さいこと等により正確な操作がやりにくいといった問題があり、その解決のために例えば特許文献１に記載の方法等が提案されている。

特許文献１には、タッチパネルが指でタッチされたとき、指接触部の周辺にある選択ボタン２を拡大表示し、そのままタッチパネルから指を離さずに、タッチしようとしていた選択ボタン移動させてから指を離すようにして操作することが記載されている。

特開２００８－６５５０４号公報

特許文献１に記載の方法の場合、指接触部の周辺が拡大表示されるので、次に操作したいボタン等が拡大表示範囲外にある場合、その位置が分かりにくいという問題がある。例えばカーナビゲーション装置で目的地等を入力するためにソフトウェアキーボード等から文字を入力する場合、特許文献１の場合、拡大表示したキー入力を行って指を離して通常表示に戻してから次に入力したいキーを探す必要がある。そのため、スムーズかつ軽快に入力するのが困難となる場合があった。

また、一般に、カーナビゲーション装置等に用いられるタッチパネルは、コストを重視して抵抗膜式であることが多い。この抵抗膜式タッチパネルは、２つの抵抗膜が接触した地点の電圧からタッチ位置を検出するため、いわゆるマルチタッチと呼ばれる操作（フリックやスワイプ或いはピンチイン／ピンチアウト等）が受け付けられないものが多い。したがって、マルチタッチ機能により操作性を高めることは困難である。さらに、タッチパネルの無い電子機器の場合、画面上に表示されるボタンと異なり拡大等はできないので、物理的にボタンのサイズを変更するのは不可能である。

そこで、本発明は、上述した問題に鑑み、例えば、軽快な操作が可能となる表示システムを提供することを目的とする。

上記課題を解決するために、請求項１に記載された発明は、第１端末と第２端末とからなる表示システムであって、前記第１端末は、当該第１端末を操作するための複数画像を含む第１画像を表示する第１表示部及び前記第２端末と通信する第１通信部を備え、前記第２端末は、前記第１端末と通信する第２通信部、前記第１画像とは前記複数画像の配置が異なる態様であって前記第１端末を操作するための第２画像を記憶する記憶部、及び前記第１画像に対応する前記第２画像を表示する第２表示部を備え、前記第１端末は、前記第２端末から前記第２画像の第２表示部における表示範囲を示す表示範囲情報を受信し、前記表示範囲情報に基づいて前記第１表示部に前記第１画像内における前記第２画像の表示範囲を表示することを特徴とする。

請求項７に記載された発明は、表示装置を操作するための複数画像を含む第１画像を表示する表示部と、前記第１画像とは前記複数画像の配置が異なる画像であって前記表示装置を操作するための第２画像が記憶されて前記第２画像が表示される外部端末と通信する通信部と、を備え、前記通信部は、前記第２画像の前記外部端末における表示範囲を示す表示範囲情報を受信し、前記表示部は、前記表示範囲情報に基づいて前記第１画像内における前記第２画像の表示範囲を表示する、ことを特徴とする。

請求項８に記載された発明は、表示部に画像を表示する表示装置で実行される表示方法において、前記表示装置を操作するための複数画像を含む第１画像とは前記複数画像の配置が異なる画像であって前記表示装置を操作するための第２画像が記憶されて前記第２画像が表示される外部端末から前記外部端末における前記第２画像の表示範囲を示す表示範囲情報を受信する通信工程と、前記表示範囲情報に基づいて前記表示部に前記第１画像内における前記第２画像の表示範囲を表示する表示工程と、を含むことを特徴とする。

請求項９に記載された発明は、請求項８に記載の表示方法を、コンピュータにより実行
させることを特徴とする表示プログラムである。

請求項１０に記載された発明は、請求項９に記載の表示プログラムを格納したことを特
徴とするコンピュータ読み取り可能な記録媒体である。

本発明の第１の実施例にかかる表示システムの概略ブロック構成図である。 図１に示された表示システムのカーナビゲーション装置とスマートフォンとのそれぞれの表示態様についての説明図である。 図１に示された表示システムの動作のフローチャートである。 本発明の第２の実施例にかかる表示システムのカーナビゲーション装置とスマートフォンとのそれぞれの表示態様についての説明図である。 本発明の第２の実施例にかかる表示システムの動作のフローチャートである。

以下、本発明の一実施形態にかかる表示システムを説明する。本発明の一実施形態にかかる表示システムは、第１端末が、画像を表示する第１表示部と、第２端末と通信する第１通信部と、を備え、第２端末が、第１端末と通信する第２通信部と、当該画像の指定された一部を拡大した拡大画像を表示する第２表示部と、を備えている。そして、第１端末は、第２端末から拡大画像の範囲を示す情報を受信し、第１表示部に、画像内における拡大画像の範囲を示す情報を表示する。このようにすることにより、第１端末に表示されるＵＩ（User Interface）を第２端末に表示させて第２端末で第１端末の操作をすることが可能となる。したがって、例えば第１端末よりも操作性の優れた入力装置等を有する第２端末から操作することで軽快な操作が可能となる。また、第１端末に第２端末で表示している範囲を表示することで、第２表示部においてどの辺りを表示しているのかが強調されて分かり易くなり、第２端末において次に操作するボタン等を表示するためのスクロール動作等が行いやすくなる。

また、本発明の他の実施形態にかかる表示システムは、第１端末が、第１画像を表示する第１表示部及び第２端末と通信する第１通信部を備え、第２端末が、第１端末と通信する第２通信部、第１端末を操作するための第２画像を記憶する記憶部、及び第１画像に対応する第２画像を表示する第２表示部を備えている。そして、第１端末は、第２端末から第２画像の表示範囲情報を受信し、第１表示部に第１画像内における第２画像の表示範囲情報を表示する。このようにすることにより、第１端末に表示されるＵＩ（User Interface）に相当する画像を第２端末に表示させて第２端末で第１端末の操作をすることが可能となる。したがって、例えば第１端末よりも操作性の優れた入力装置等を有する第２端末から操作することで軽快な操作が可能となる。また、第１端末に第２端末の表示に対応する範囲を表示することで、第２表示部においてどの辺りを操作しているのかが強調されて分かり易くなる。更には、第１端末から画像を送信しないので通信する際のデータ量を削減できる。

また、第１端末は、第２端末から受信した情報に基づいて、範囲を囲む枠として第１表示部に表示してもよい。このようにすることにより、拡大画像の範囲や第２画像に対応する範囲を第１端末上に枠として表示して使用者等に表示することができる。

また、第１端末は、第２端末から受信した情報に基づいて、範囲の内側を当該範囲の外側とは異なる態様で第１表示部に表示してもよい。このようにすることにより、拡大画像の範囲や第２画像に対応する範囲を網掛けや色付け或いは点滅等の態様で表示して使用者等に表示することができる。

また、第１端末の第１表示部には抵抗膜式タッチパネルが設けられ、第２端末の第２表示部には静電容量式タッチパネルが設けられていてもよい。このようにすることにより、抵抗膜式タッチパネルが設けられている第１表示部であっても、第２端末からフリックやスワイプ、或いはピンチイン／ピンチアウトといった操作により第１端末の操作を行うことが可能となる。

また、第１端末はナビゲーション装置であり、第２端末は携帯機器であってもよい。このようにすることにより、ナビゲーション装置をスマートフォン等の携帯機器から操作することが可能となる。したがって、例えばスマートフォンが対応するフリックやスワイプ、或いはピンチイン／ピンチアウトといった操作によりナビゲーション装置の操作が可能となる。

また、本発明の一実施形態にかかる表示装置は、画像を表示する表示部と、当該画像の指定された一部を拡大した拡大画像が表示される外部端末と通信する通信部と、を備えている。そして、通信部は、画像を外部端末に送信し、外部端末から拡大画像の範囲を示す情報を受信し、表示部は、画像内における拡大画像の範囲を示す情報を表示する。このようにすることにより、例えば表示装置よりも操作性の優れた入力装置等を有する外部端末から操作されることで軽快な操作が可能となる。また、表示部に外部端末で表示している範囲を表示することで、外部端末でどの辺りを表示しているのかが強調されて分かり易くなり、外部端末において次に操作するボタン等を表示するためのスクロール動作等が行いやすくなる。

また、本発明の他の実施形態にかかる表示装置は、第１画像を表示する表示部と、表示装置を操作するための第２画像が記憶され、当該第２画像が表示される外部端末と通信する通信部と、を備えている。そして、通信部は、第２画像の表示範囲情報を受信し、表示部は、第１画像内における第２画像の表示範囲情報を表示する。このようにすることにより、例えば表示装置よりも操作性の優れた入力装置等を有する外部端末から操作することで軽快な操作が可能となる。また、表示部に外部端末の表示に対応する範囲を表示することで、外部端末からどの辺りを操作しているのかが強調されて分かり易くなる。更には、外部端末に対して画像を送信しないので通信する際のデータ量を削減できる。

また、本発明の一実施形態にかかる表示方法は、画像を外部端末に送信し、当該画像の指定された一部を拡大した拡大画像が表示される外部端末から拡大画像の範囲を示す情報を受信する通信工程と、表示部に画像内における拡大画像に該当する範囲を示す情報を表示する表示工程と、を含んでいる。このようにすることにより、例えば自身よりも操作性の優れた外部端末から操作することで軽快な操作が可能となる。また、表示部に外部端末で表示している範囲を表示することで、どの辺りを表示しているのかが分かり易くなり、次に操作するボタン等を表示するためのスクロール動作等が行いやすくなる。

また、上述した表示方法を、コンピュータにより実行させてもよい。このようにすることにより、コンピュータを利用して、例えば自身よりも操作性の優れた外部端末から操作することで軽快な操作が可能となる。また、表示部に外部端末で表示している範囲を表示することで、どの辺りを表示しているのかが分かり易くなり、次に操作するボタン等を表示するためのスクロール動作等が行いやすくなる。

また、上述した表示プログラムをコンピュータ読み取り可能な記録媒体に格納してもよい。このようにすることにより、当該プログラムを機器に組み込む以外に単体でも流通させることができ、バージョンアップ等も容易に行える。

また、本発明の他の実施形態にかかる表示方法は、表示装置を操作するための第２画像が記憶され、当該第２画像が表示される外部端末から第２画像の表示範囲情報を受信する通信工程と、表示部に第１画像内における第２画像の表示範囲情報を表示する表示工程と、を含んでいる。このようにすることにより、例えば表示装置よりも操作性の優れた外部端末から操作することで軽快な操作が可能となる。また、表示部に外部端末の表示に対応する範囲を表示することで、外部端末からどの辺りを操作しているのかが強調されて分かり易くなる。更には、外部端末に対して画像を送信しないので通信する際のデータ量を削減できる。

また、上述した表示方法を、コンピュータにより実行させてもよい。このようにすることにより、コンピュータを利用して、例えば表示装置よりも操作性の優れた外部端末から操作することで軽快な操作が可能となる。また、表示部に外部端末の表示に対応する範囲を表示することで、外部端末からどの辺りを操作しているのかが強調されて分かり易くなる。更には、外部端末に対して画像を送信しないので通信する際のデータ量を削減できる。

また、上述した表示プログラムをコンピュータ読み取り可能な記録媒体に格納してもよい。このようにすることにより、当該プログラムを機器に組み込む以外に単体でも流通させることができ、バージョンアップ等も容易に行える。

本発明の第１の実施例にかかる表示装置を有する表示システム１００を図１乃至図３を参照して説明する。

図１に示すように、表示システム１００は、第１端末としてのカーナビゲーション装置１０と、第２端末（携帯機器）としてのスマートフォン２０と、を有している。

カーナビゲーション装置１０は、ＣＰＵ１１と、ＲＯＭ１２と、ＲＡＭ１３と、音声信号処理部１４と、位置認識処理部１５と、Ｉ／Ｆブロック１６と、記憶部１７と、操作部１８と、有線処理部１９と、無線処理部１Ａと、表示制御部１Ｂと、表示部１Ｃと、音声合成部１Ｄと、スピーカ１Ｅと、を有している。

ＣＰＵ１１は、ＲＯＭ１２に記憶されている処理プログラムに基づいて動作し、カーナビゲーション装置１０の全体動作を司る中央演算装置（Central Processing Unit）である。本実施例においては、表示部１Ｃに表示されている画像をスマートフォン２０に送信させるよう有線処理部１９又は無線処理部１Ａを制御したり、スマートフォン２０から有線処理部１９又は無線処理部１Ａが取得した座標情報に基づいて、表示部１Ｃに表示されている画像のうちスマートフォン２０の表示部２６に表示されている範囲を特定する動作等を行う。

ＲＯＭ１２は、ＣＰＵ１１が読み出すカーナビゲーション装置としての各種処理プログラム等が記憶されている読出し専用の不揮発性メモリ（Read Only Memory）である。

ＲＡＭ１３は、ＣＰＵ１１が各種処理をする際にワークエリアとして利用する揮発性のメモリ（Random Access Memory）である。

音声信号処理部１４は、記憶部１７に記憶されている楽曲データを再生したり、図示しない光ディスク装置にセットされた光ディスクに記憶されている楽曲データをリッピングして記憶部１７に格納したりする。

位置認識処理部１５は、図示しないＧＰＳ（Global Positioning System）受信機やジャイロセンサ等からの信号に基づいて自身の現在位置を算出（認識）する。

Ｉ／Ｆブロック１６は、記憶部１７や操作部１８とＣＰＵ１１とを接続するためのインタフェース（Ｉ／Ｆ）である。

記憶部１７は、例えば、案内用の地図データや上述した楽曲データ等が記憶されている。記憶部１７は、例えばハードディスクドライブやＳＳＤ（Solid State Drive）などの不揮発性の記憶媒体で構成されている。なお、記憶部１７に記憶しているデータは外部サーバ等に記憶させ、必要に応じてダウンロードするようにしてもよい。

操作部１８は、例えば表示部１Ｃの表面に重ねられているタッチパネルで構成されている。本実施例の操作部１８を構成するタッチパネルは抵抗膜式のタッチパネルで構成されている。

第１通信部としての有線処理部１９は、スマートフォン２０と有線接続して通信するためのインタフェースとなる。有線接続の規格としてはＵＳＢ（Universal Serial Bus）やＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）、ＭＨＬ（Mobile High-definition Link）等が挙げられる。

第１通信部としての無線処理部１Ａは、スマートフォン２０と無線接続して通信するためのインタフェースとなる。無線接続の規格としてはＷｉ－Ｆｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標）等が挙げられる。なお、有線処理部１９及び無線処理部１Ａは、通信相手であるスマートフォン２０が対応するいずれか一方を有していれば両方有していなくてもよい。また、両方有している場合でもいずれか一方のみで通信をすればよい。

表示制御部１Ｂは、ＣＰＵ１１からの制御に基づいて表示部１Ｃに表示する画像データを生成する。

第１表示部としての表示部１Ｃは、液晶ディスプレイやＥＬディスプレイ等から構成され、表示制御部１Ｂが生成した画像データを表示する。表示部１Ｃには、例えば、案内のための地図や、各種操作のためのメニューやボタン或いは再生中の楽曲タイトル等が表示される。

音声合成部１Ｄは、ＣＰＵ１１からの制御に基づいてスピーカ１Ｅから出力される案内用の音声等を合成する。

スピーカ１Ｅは、音声合成部１Ｄが合成した案内用の音声等を出力する。

スマートフォン２０は、ＣＰＵ２１と、ＲＯＭ２２と、ＲＡＭ２３と、公衆回線通信部２４と、表示制御部２５と、表示部２６と、音声処理部２７と、スピーカ２８と、マイク２９と、Ｉ／Ｆブロック２Ａと、記憶部２Ｂと、操作部２Ｃと、有線処理部２Ｄと、無線処理部２Ｅと、を有している。

ＣＰＵ２１は、ＲＯＭ２２に記憶されている処理プログラム等に基づいて動作し、スマートフォン２０の全体動作を司る。本実施例においては、カーナビゲーション装置１０から有線処理部２Ｄ又は無線処理部２Ｅが取得した画像を表示部２６に表示させるよう表示制御部２５を制御したり、表示部２６に表示されている画像の範囲を示す座標情報を算出して有線処理部２Ｄ又は無線処理部２Ｅに対してカーナビゲーション装置１０に送信させる動作等を行う。

ＲＯＭ２２は、ＣＰＵ２１が読み出すＯＳ（Operating System）等の処理プログラム等が記憶されている不揮発性のメモリである。

ＲＡＭ１３は、ＣＰＵ２１が各種処理をする際にワークエリアとして利用する揮発性のメモリである。

公衆回線通信部２４は、スマートフォン２０が携帯電話網等の公衆回線を構成する基地局等と通信する。

表示制御部２５は、ＣＰＵ２１からの制御に基づいて表示部２６に表示する画像データを生成する。

第２表示部としての表示部２６は、液晶ディスプレイやＥＬディスプレイ等から構成され、表示制御部２５が生成した画像データを表示する。表示部２６には、例えば、初期画面や起動中のアプリの画面等が表示される。

音声処理部２７は、携帯電話として使用している場合に、公衆回線通信部２４が受信した通話相手の音声を再生してスピーカ２８に出力したり、マイク２９に使用者が入力した通話内容を音声データに変換したりする。また、音声処理部２７は、アプリが発生或いは再生した音声データ等をスピーカ２８に出力する。

スピーカ２８は、音声処理部２７から出力された音声を出力する。

マイク２９は、使用者等が入力した通話内容等を電気信号に変換して音声処理部２７に出力する。

Ｉ／Ｆブロック２Ａは、記憶部２Ｂや操作部２ＣとＣＰＵ２１とを接続するためのインタフェースである。

記憶部２Ｂは、例えば、アプリ等のデータが記憶されている。記憶部２Ｂは、例えばＳＳＤなどの不揮発性の記憶媒体で構成されている。

操作部２Ｃは、例えば表示部２６の表面に重ねられているタッチパネルで構成されている。本実施例の操作部２Ｃを構成するタッチパネルは静電容量式のタッチパネルで構成されている。静電容量式タッチパネルは、周知のように、マルチタッチ操作が可能であり、抵抗膜式タッチパネルよりも操作性が優れている。

第２通信部としての有線処理部２Ｄは、カーナビゲーション装置１０と有線接続して通信するためのインタフェースとなる。有線接続の規格としてはＵＳＢ（Universal Serial Bus）やＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）、ＭＨＬ（Mobile High-definition Link）等が挙げられる。

第２通信部としての無線処理部２Ｅは、カーナビゲーション装置１０と無線接続して通信するためのインタフェースとなる。無線接続の規格としてはＷｉ－Ｆｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標）等が挙げられる。

次に、上述した構成の表示システム１００の動作の概要について図２を参照して説明する。図２（ａ）はカーナビゲーション装置１０の表示部１Ｃの画像の表示例を示した正面図、図２（ｂ）はスマートフォン２０に表示された拡大画像の表示例を示した正面図である。本実施例では、まず、カーナビゲーション装置１０とスマートフォン２０とを無線又は有線により接続する。

そして、カーナビゲーション装置１０の表示部１Ｃに表示されている全体画像（画面全体の画像情報）をスマートフォン２０に送信する。スマートフォン２０では、カーナビゲーション装置１０から受信した全体画像を表示部２６に表示する。なお、図２の例では、表示部１Ｃに表示される画像としてソフトウェアキーボードで説明するが、メニュー画像等でもよいし、地図等とともに操作用ボタン画像が表示された形態であってもよい。要するにカーナビゲーション装置１０の操作の用に供する画像を含む画像であればよい。

ここで、使用者等が、スマートフォン２０が予め有しているピンチイン等の操作機能により全体画像の一部を図２（ｂ）のように拡大して指定する。即ち、表示部２６は、画像全体又は当該画像の指定された一部を拡大した拡大画像を表示する。そして、その拡大画像の範囲の座標情報を拡大画像の範囲を示す情報としてカーナビゲーション装置１０に送信する。

カーナビゲーション装置１０では、受信した座標情報に基づいて、表示部１Ｃに表示しているメニュー画像内にスマートフォン２０で表示されている拡大画像の範囲を示す枠Ｆを表示する。この枠Ｆは、図２（ａ）に示したようにスマートフォン２０で表示されている範囲を囲むように表示される拡大画像の範囲を示す情報である。即ち、カーナビゲーション装置１０は、スマートフォン２０（第２端末）から座標情報（拡大画像の範囲を示す情報）を受信し、表示部１Ｃ（第１表示部）に、拡大画像の範囲を示す情報を表示している。

この枠Ｆは、スマートフォン２０の表示部２６においてスワイプ等の操作機能によりスクロールされるとそれに合わせて座標情報が更新されて移動する。また、更なる拡大や縮小等がされた場合も、座標情報が表示範囲に応じて更新され枠Ｆが変形する。

なお、図２では、スマートフォン２０の表示部２６に表示される範囲を枠Ｆで表示したが、例えば、その範囲内を網掛けや色付け等で周囲と異ならせる、或いはその範囲内のみ点滅させる等、その範囲の内側と外側とで異なる態様で表示してもよい。

次に、上述した構成の表示システム１００の動作のフローチャートを図３を参照して説明する。このフローチャートはカーナビゲーション装置（カーナビ）１０側はＣＰＵ１１が実行し、スマートフォン２０側はＣＰＵ２１が実行する。即ち、カーナビゲーション装置１０側は、表示部１Ｃに画像を表示する表示装置の表示方法をコンピュータが実行するコンピュータプログラム、スマートフォン２０側は、表示部２６に画像を表示する表示装置の表示方法をコンピュータが実行するコンピュータプログラムとなっている。

まず、カーナビゲーション装置１０側において、ステップＳ１１で携帯操作モードをＯＮにする。この携帯操作モードとは、上述したような携帯端末（スマートフォン２０）での操作を許可するモードであり、例えば、起動時に表示部１Ｃに選択肢を表示させてＯＮにするか否かを使用者等に選択させてもよいし、後にメニュー画面等からＯＮにできるようにしてもよい。

次に、ステップＳ１２において、スマートフォン２０と通信接続処理を行う。即ち、有線処理部１９又は無線処理部１Ａにスマートフォン２０の有線処理部２Ｄ又は無線処理部２Ｅと所定の通信規格（ＵＳＢやＢｌｕｅｔｏｏｔｈ（登録商標）等）により接続する処理を行わせる。

次に、ステップＳ１３において、表示制御部１Ｂが、メニュー画像等を表示部１Ｃに表示させる。そして、表示部１Ｃに表示しているメニュー画像等を有線処理部１９又は無線処理部１Ａにスマートフォン２０へ送信させる。

一方、スマートフォン２０側においては、ステップＳ２１でカーナビコントロール用ＵＩアプリを起動（ＯＮ）にする。このアプリは予めスマートフォン２０にインストールされているものであり、概要で説明した動作のうちスマートフォン２０側の動作を行うものである。

次に、ステップＳ２２において、カーナビゲーション装置１０と通信接続処理を行う。即ち、有線処理部２Ｄ又は無線処理部２Ｅにカーナビゲーション装置１０の有線処理部１９又は無線処理部１Ａと所定の通信規格（ＵＳＢやＢｌｕｅｔｏｏｔｈ（登録商標）等）により接続する処理を行わせる。

次に、ステップＳ２３において、カーナビゲーション装置１０から送信されたメニュー画像を有線処理部２Ｄ又は無線処理部２Ｅが受信して、表示制御部２５に当該メニュー画像等を表示部１Ｃに表示させる。そして、このときの表示部２６での表示範囲の座標情報を算出して有線処理部２Ｄ又は無線処理部２Ｅに送信させる。

この座標は、ステップＳ２３で受信したメニュー画像等に付加される座標であり、例えばカーナビゲーション装置１０から受信した画像の左上を原点（０，０）として画像の解像度や画面の画素数等に基づいて適宜付加される。そして、表示部２６の表示範囲を示す座標を座標情報としてカーナビゲーション装置１０に送信する。座標情報として送信する座標としては、例えば、矩形（四角形）の場合は表示範囲の左上の座標と右下の座標とすればよい。なお、ステップＳ２３の場合、初期状態であり、表示部２６にはメニュー画像等の全体が表示されているので、座標情報としては、原点とメニュー画像等の右下位置の座標を送信すればよい。

次に、ステップＳ１４において、カーナビゲーション装置１０側でスマートフォン２０から受信した座標情報に基づいて、表示部１Ｃに表示されているメニュー画像にスマートフォン２０の表示部２６での表示範囲を四角形の枠で表示する。カーナビゲーション装置１０においても、スマートフォン２０と同様の規則によって座標を付加することで枠を表示することができる。なお、ステップＳ１４の場合、表示部２６にはメニュー画像全体が表示されているので、メニュー画像等の全体を囲む枠となる。また、枠の形状は四角形に限らず、円、楕円や多角形等他の形状であってもよい。或いは、表示部２６にメニュー画像等の全体が表示されている場合は枠で表示する効果が小さいので座標情報を送信しなくてもよい。

一方、スマートフォン２０側において、ステップＳ２４でピンチイン／ピンチアウト、スワイプ／フリック等の操作を実施する。そして、ステップＳ２３と同様に表示部２６の表示範囲を示す座標を座標情報としてカーナビゲーション装置１０に送信する。また、スマートフォン２０で表示部２６に表示されたボタン等がタッチされた場合は、タッチされたことを示す情報（操作情報）もカーナビゲーション装置１０に送信する。

次に、ステップＳ１５において、カーナビゲーション装置１０側でスマートフォン２０から受信した座標情報に基づいて、表示部１Ｃに表示されているメニュー画像等にスマートフォン２０の表示部２６の表示範囲に合わせて四角形の枠を拡大又は縮小表示する。或いはスマートフォン２０側でスワイプ操作によりスクロールされた場合は当該枠を移動させる。また、スマートフォン２０からタッチされたことを示す情報を受信した場合は、その情報が示す操作に対応する動作を実行する。

例えば図２（ａ）のようなソフトウェアキーボードがメニュー画像として表示されていた場合に、「あ」の部分を拡大するようにピンチイン操作を行い図２（ｂ）のようにスマートフォン２０の表示部２６に表示した場合、図２（ｂ）の表示範囲を示す座標情報がカーナビゲーション装置１０に送信され、その座標情報に基づいて表示部１Ｃには枠Ｆが表示される。

そして、操作によりカーナビゲーション装置１０側でメニュー画像等（画像データ）が更新された場合はその都度新たなメニュー画像等をスマートフォン２０に送信し、スマートフォン２０では、ステップＳ２５で当該新たなメニュー画像等を表示部２６に表示する。以降は、ステップＳ１４～Ｓ１５及びステップＳ２４～２５を繰り返す。

上述したフローチャートの説明から明らかなように、ステップＳ１３、Ｓ１４、Ｓ１５が通信工程、ステップＳ１４、Ｓ１５が表示工程として機能する。

また、本実施例にかかるカーナビゲーション装置１０は、画像を表示する表示部１Ｃと、当該画像の指定された一部を拡大した拡大画像が表示されるスマートフォン２０（外部端末）と通信する有線処理部１９又は無線処理部１Ａ（通信部）と、を備え、有線処理部１９又は無線処理部１Ａ（通信部）は、画像をスマートフォン２０（外部端末）に送信し、スマートフォン２０（外部端末）から拡大画像の範囲を示す情報を受信し、表示部１Ｃは、拡大画像に該当する範囲を表示する、ことを特徴とする表示装置として機能する。

また、本実施例にかかるスマートフォン２０は、カーナビゲーション装置１０（外部機器）と通信する有線処理部２Ｄ又は無線処理部２Ｅ（通信部）と、カーナビゲーション装置１０（外部機器）から受信したメニュー画像等（画像）の指定された一部を拡大した拡大画像を表示する表示部２６と、を備え、有線処理部２Ｄ又は無線処理部２Ｅ（通信部）は、スマートフォン２０（外部機器）へ座標情報（拡大画像の範囲を示す情報）を送信する、ことを特徴とする表示装置として機能する。

本実施例によれば、カーナビゲーション装置１０は、メニュー画像等を表示する表示部１Ｃと、スマートフォン２０と通信する有線処理部１９又は無線処理部１Ａと、を備え、スマートフォン２０は、カーナビゲーション装置１０と通信する有線処理部２Ｄ又は無線処理部２Ｅと、当該メニュー画像等の指定された一部を拡大した拡大画像を表示する表示部２６と、を備えている。そして、カーナビゲーション装置１０は、スマートフォン２０から座標情報を受信し、表示部１Ｃにメニュー画像等における拡大画像の範囲を枠Ｆとして表示する。このようにすることにより、カーナビゲーション装置１０に表示されるＵＩ（User Interface）をスマートフォン２０に表示させてスマートフォン２０でカーナビゲーション装置１０の操作をすることが可能となる。したがって、例えばカーナビゲーション装置１０よりも操作性の優れたタッチパネルを有するスマートフォン２０から操作することで軽快な操作が可能となる。

また、カーナビゲーション装置１０にスマートフォン２０で表示している範囲を表示することで、表示部２６でどの辺りを表示しているのかが強調されて分かり易くなり、スマートフォン２０において次に操作するボタン等を表示するためのスクロール動作等が行いやすくなる。

また、カーナビゲーション装置１０の操作部１８は抵抗膜式タッチパネルで構成され表示部１Ｃに重ねられており、スマートフォン２０の操作部２Ｃは静電容量式タッチパネルで構成され表示部２６に重ねられている。このようにすることにより、抵抗膜式タッチパネルが設けられている表示部１Ｃを有するカーナビゲーション装置１０であっても、スマートフォン２０からフリックやスワイプ、或いはピンチイン／ピンチアウトといった操作によりカーナビゲーション装置の操作を行うことが可能となる。

本実施例の第２の実施例にかかる表示システムについて、図４乃至図５を参照して説明する。なお、前述した第１の実施例と同一部分には、同一符号を付して説明を省略する。

本実施例はブロック構成等は図１と同様であるが、本実施例の場合、カーナビゲーション装置１０からメニュー画像等の画像を送信せずに、スマートフォン２０が予めカーナビゲーション装置１０のメニュー画像等に対応する画像を有している点が異なる。

このカーナビゲーション装置１０のメニュー画像に対応する画像（例えばカーナビゲーション装置１０のメニュー画像と同じ画像）は、例えばアプリとしてスマートフォン２０にインストールして記憶部２Ｂに記憶させればよい。この場合、フローチャートは図３のステップＳ１３において、メニュー等の画像データを送信するのに代えて、表示部１Ｃに現在表示しているメニュー画像等を識別する情報である表示画像識別情報をスマートフォン２０へ送信させる。この表示画像識別情報は、例えば表示するメニュー画像毎に付与されたＩＤ等で構成されている。表示画像識別情報を受信したスマートフォン２０は、当該表示画像識別情報に示されたメニュー画像等を表示部２６に表示させる。以降は、図３のフローチャートと同様に動作する。

また、本実施例の場合、アプリのメニュー画像等内のボタン等の配置もカーナビゲーション装置１０での表示態様と一致しなくてもよい。即ち、カーナビゲーション装置１０のメニュー画像と同じ画像でなくてもよい。

図４にアプリのメニュー画像等内のボタン等の配置もカーナビゲーション装置１０での表示態様と一致しない場合の表示例を示す。図４（ａ）はカーナビゲーション装置１０の表示部１Ｃに表示されるメニュー画像等（第１画像）の例である。図４（ｂ）はスマートフォン２０で動作しているアプリの表示部２６の表示例（第２画像）である。図４（ｂ）は、図４（ａ）に示したメニュー項目の一部が表示されているのみであり、他の項目を選択する場合はスクロール操作をして表示させる必要がある。

図４に示したように、カーナビゲーション装置１０の表示部１Ｃに表示されているメニュー画像等とスマートフォン２０に表示されているアプリの画像とは一致しない。この場合でも、座標情報に代えてアプリの表示画像の範囲を示す情報を第２画像の表示範囲情報としてスマートフォン２０からカーナビゲーション装置１０に送信することで、その情報に基づいて図４（ａ）の枠Ｆのようにスマートフォン２０の表示範囲を第２画像の表示範囲情報として表示することができる。

アプリの表示画像の範囲を示す情報は、例えば、アプリの各メニューボタンに付与したＩＤ等とする。図４（ｂ）の例で説明すると、「名称／マルチ検索」ボタン、「フリーワード音声検索」ボタン、「住所」ボタン、「電話番号」ボタンにそれぞれ付与されているＩＤをアプリの表示画面の範囲を示す情報として送信する。カーナビゲーション装置１０側では、受信したＩＤはメニュー画像に表示されているボタン等に紐付けられており、そのＩＤに基づいて図４（ａ）に示された枠Ｆのような表示が可能となる。

なお、図４の例では枠Ｆは１つとなっているが、アプリ側にボタン等の配置によっては枠Ｆが複数表示される場合もある。

本実施例においても、スマートフォン２０側で拡大操作を行ってもよい。本実施例の場合、第１の実施例と異なり、カーナビゲーション装置１０とスマートフォン２０とで表示される画像が一致していないので座標情報を送信しても枠Ｆを正しく表示することはできない。そこで、座標情報に代えて拡大されて表示部２６に表示されている範囲のボタン等のＩＤをアプリの表示画像の範囲を示す情報としてカーナビゲーション装置１０に送信し、その情報に基づいて枠Ｆを表示する。このようにすることにより、スマートフォン２０に拡大表示されている範囲とほぼ同等の範囲を示すことが可能となる。

次に、アプリのメニュー画像等内のボタン等の配置もカーナビゲーション装置１０での表示態様と一致しない場合のフローチャートを、図５を参照して説明する。このフローチャートはカーナビゲーション装置（カーナビ）１０側はＣＰＵ１１が実行し、スマートフォン（スマホ）２０側はＣＰＵ２１が実行する。

まず、カーナビゲーション装置１０側において、ステップＳ１１、Ｓ１２は図３と同様である。次に、ステップＳ１３Ａにおいて、表示制御部１Ｂにメニュー画像等を表示部１Ｃに表示させる。そして、表示部１Ｃに現在表示しているメニュー画像等を識別する情報である表示画像識別情報を有線処理部１９又は無線処理部１Ａにスマートフォン２０へ送信させる。

一方、スマートフォン２０側において、ステップＳ２１、Ｓ２２は図３と同様である。次に、ステップＳ２３Ａにおいて、ステップＳ１３Ａでカーナビゲーション装置１０から送信された表示画像識別情報を有線処理部２Ｄ又は無線処理部２Ｅが受信して、当該表示画像識別情報が示すＩＤ等に対応するアプリ内のメニュー画像等を表示部２６に表示させる。そして、このときの表示部２６で表示されているアプリの表示画像の範囲を示す情報を有線処理部２Ｄ又は無線処理部２Ｅに送信させる。

次に、ステップＳ１４Ａにおいて、カーナビゲーション装置１０側でスマートフォン２０から受信した、アプリの表示画像の範囲を示す情報に基づいて、表示部１Ｃに表示されているメニュー画像にスマートフォン２０の表示部２６での表示範囲に対応する枠を表示する。なお、枠は、図４（ａ）に示したように四角形でなくてもよい。

一方、スマートフォン２０側において、ステップＳ２４Ａでピンチイン／ピンチアウト、スワイプ／フリック等の操作を実施する。そして、ステップＳ２３Ａと同様にアプリの表示画像の範囲を示す情報をカーナビゲーション装置１０に送信する。また、スマートフォン２０で表示部２６に表示されたボタン等がタッチされた場合は、タッチされたことを示す情報もカーナビゲーション装置１０に送信する。

次に、ステップＳ１５Ａにおいて、カーナビゲーション装置１０側でスマートフォン２０から受信した、アプリの表示画像の範囲を示す情報に基づいて、表示部１Ｃに表示されているメニュー画像等にスマートフォン２０の表示部２６での表示範囲に合わせて枠を変形する。或いはスマートフォン２０側でスワイプ操作によりスクロールされた場合は当該枠を移動させる。また、スマートフォン２０からタッチされたことを示す情報を受信した場合は、その情報が示す操作に対応する動作を実行する。

そして、操作によりカーナビゲーション装置１０側でメニュー画像等（画像データ）が更新された場合はその都度新たな表示画像識別情報をスマートフォン２０に送信し、スマートフォン２０では、ステップＳ２５で当該新たな表示画像識別情報に対応するアプリ内のメニュー画像等を表示部２６に表示する。以降は、ステップＳ１４Ａ～Ｓ１５Ａ及びステップＳ２４Ａ～２５Ａを繰り返す。

上述したフローチャートの説明から明らかなように、ステップＳ１４Ａ、Ｓ１５Ａが通信工程 、ステップＳ１４Ａ、Ｓ１５Ａが表示工程として機能する。

また、本実施例にかかるカーナビゲーション装置１０は、メニュー画像等（第１画像）を表示する表示部１Ｃと、表示装置を操作するアプリの画像（第２画像）が表示されるスマートフォン２０（外部端末）と通信する有線処理部１９又は無線処理部１Ａ（通信部）と、を備え、有線処理部１９又は無線処理部１Ａ（通信部）は、アプリの表示画面の範囲を示す情報（第２画像の表示範囲情報）を受信し、表示部１Ｃは、メニュー画像等（第１画像）内におけるアプリの画像（第２画像）の表示範囲を枠Ｆとして表示する、ことを特徴とする表示装置として機能する。

また、本実施例にかかるスマートフォン２０は、カーナビゲーション装置１０（外部機器）と通信する有線処理部２Ｄ又は無線処理部２Ｅ（通信部）と、カーナビゲーション装置１０（外部機器）を操作する画像を記憶する記憶部２Ｂと、カーナビゲーション装置１０（外部機器）から受信した表示画像識別情報（表示内容に関する情報）に基づいて対応するアプリの画像を表示する表示部２６と、を備え、有線処理部２Ｄ又は無線処理部２Ｅ（通信部）は、カーナビゲーション装置１０へアプリの表示画面の範囲を示す情報（第２画像の表示範囲情報）を送信する、ことを特徴とする表示装置として機能する。

本実施例によれば、カーナビゲーション装置１０は、メニュー画像等を表示する表示部１Ｃと、スマートフォン２０と通信する有線処理部１９又は無線処理部１Ａと、を備え、スマートフォン２０は、カーナビゲーション装置１０と通信する有線処理部２Ｄ又は無線処理部２Ｅ、カーナビゲーション装置１０を操作するためのアプリを記憶する記憶部２Ｂ、及びアプリのメニュー画像等を表示する表示部２６、を備えている。そして、カーナビゲーション装置１０は、スマートフォン２０からアプリの表示画像の範囲を示す情報を受信し、表示部１Ｃに、メニュー画像等内におけるアプリの表示画像の範囲を枠Ｆとして表示する。このようにすることにより、カーナビゲーション装置１０に表示されるＵＩ（User Interface）に相当する画像をスマートフォン２０に表示させてスマートフォン２０でカーナビゲーション装置１０の操作をすることが可能となる。したがって、例えばカーナビゲーション装置１０よりも操作性の優れたタッチパネルを有するスマートフォン２０から操作することで軽快な操作が可能となる。

また、カーナビゲーション装置１０にスマートフォン２０の表示に対応する範囲を表示することで、スマートフォン２０においてどの辺りを操作しているのかが強調されて分かり易くなる。更には、カーナビゲーション装置１０から画像を送信しないので通信する際のデータ量を削減できる。

なお、上述した２つの実施例では第１端末としてカーナビゲーション装置１０、第２端末としてスマートフォン２０、として説明したが、それに限らない。例えば第２端末はスマートフォン２０ではなくタブレット端末等のマルチタッチが可能なタッチパネルを有する電子機器であればよい。また、第１端末もカーナビゲーション装置１０ではなく、船舶や航空機用のナビゲーション装置或いはカーオーディオ等であってもよい。さらには第１端末としてタッチパネルを有しないが画面上のメニューボタンやアイコン等を操作する機器（パーソナルコンピュータ等）であってもよい。

また、第２端末のタッチパネルも静電容量式に限らず、光学式等のマルチタッチが可能な方式であれば他の方式であってもよい。第１端末のタッチパネルも抵抗膜式に限らず、超音波式等であってもよいし、上述したようにタッチパネルを備えなくてもよい。

また、本発明は上記実施例に限定されるものではない。即ち、当業者は、従来公知の知見に従い、本発明の骨子を逸脱しない範囲で種々変形して実施することができる。かかる変形によってもなお本発明の表示装置や表示システムの構成を具備する限り、勿論、本発明の範疇に含まれるものである。

１０ カーナビゲーション装置（第１端末、表示装置）
１８ 操作部（抵抗膜式タッチパネル）
１９ 有線処理部（第１通信部、通信部）
１Ａ 無線処理部（第１通信部、通信部）
１Ｃ 表示部（第１表示部、表示部）
２０ スマートフォン（第２端末）
２６ 表示部（第２表示部）
２Ｂ 記憶部
２Ｃ 操作部（静電容量式タッチパネル）
２Ｄ 有線処理部（第２通信部）
２Ｅ 無線処理部（第２通信部）
１００ 表示システム
Ｆ 枠（範囲）

Claims (1)

1. 第１端末と第２端末とからなる表示システムであって、
   前記第１端末は、当該第１端末を操作するための複数画像を含む第１画像を表示する第１表示部及び前記第２端末と通信する第１通信部を備え、
   前記第２端末は、前記第１端末と通信する第２通信部、前記第１画像とは前記複数画像の配置が異なる態様であって前記第１端末を操作するための第２画像を記憶する記憶部、及び前記第１画像に対応する前記第２画像を表示する第２表示部を備え、
   前記第１端末は、前記第２端末から前記第２画像の第２表示部における表示範囲を示す表示範囲情報を受信し、前記表示範囲情報に基づいて前記第１表示部に前記第１画像内における前記第２画像の表示範囲を表示することを特徴とする表示システム。

Images