JP2015046671A - Mobile terminal device - Google Patents

Mobile terminal device Download PDF

Info

Publication number
JP2015046671A
JP2015046671A JP2013175405A JP2013175405A JP2015046671A JP 2015046671 A JP2015046671 A JP 2015046671A JP 2013175405 A JP2013175405 A JP 2013175405A JP 2013175405 A JP2013175405 A JP 2013175405A JP 2015046671 A JP2015046671 A JP 2015046671A
Authority
JP
Japan
Prior art keywords
application
display
display device
information
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013175405A
Other languages
Japanese (ja)
Other versions
JP6058507B2 (en
Inventor
一則 吉岡
Kazunori Yoshioka
一則 吉岡
下谷 光生
Mitsuo Shitaya
光生 下谷
芳禎 水谷
Yoshisada Mizutani
芳禎 水谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2013175405A priority Critical patent/JP6058507B2/en
Publication of JP2015046671A publication Critical patent/JP2015046671A/en
Application granted granted Critical
Publication of JP6058507B2 publication Critical patent/JP6058507B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)
  • Selective Calling Equipment (AREA)

Abstract

PROBLEM TO BE SOLVED: To enable a mobile terminal device, including a plurality of display units, to perform appropriate cooperative operation with an information display device having one or more indicators.SOLUTION: A mobile terminal device 20 includes: a split view display unit 24 functioning as two display units; and a communication unit 26 for communicating with an external information display device 10. The information display device 10 includes a split view display device 14 functioning as two indicators. A control unit 21 of the mobile terminal device 20, simultaneously executable of a plurality of applications, displays an image of each application currently in execution on the two display units of the split view display unit 24 in a distributed manner, and also transmits the image to the information display device 10 through the communication unit 26.

Description

本発明は、情報表示装置と携帯端末装置とが連携して動作する情報表示システムに関し、特に、同時に複数のアプリケーションプログラムを実行可能な携帯端末装置に関する。   The present invention relates to an information display system in which an information display device and a mobile terminal device operate in cooperation, and more particularly to a mobile terminal device capable of executing a plurality of application programs simultaneously.

車載用の情報表示装置として、運転席用の表示器と助手席用の表示器とを備え、それらの表示器に互いに異なる画像を表示可能なものがある。そのような情報表示装置では、例えば、運転席用の表示器に経路案内(ナビゲーション)用の地図を表示させ、助手席用の表示器にテレビ放送等の映像を表示させることができる。さらに、運転席用の表示器において、車両の走行中にはテレビ放送等の映像を表示しないように制限をかけることで、不注意運転(ドライバディストラクション)を防止することができる。また、運転席から画面を見る場合と助手席から画面を見る場合とで互いに異なる画像が見えるスプリットビュー表示装置を用いることで、運転席用の表示器および助手席用の表示器を物理的に1つの画面で実現することも提案されている(例えば下記の特許文献1)。   As an in-vehicle information display device, there is an information display device that includes a display for a driver's seat and a display for a passenger's seat, and can display different images on these displays. In such an information display device, for example, a map for route guidance (navigation) can be displayed on a display for a driver's seat, and an image such as a television broadcast can be displayed on a display for a passenger's seat. In addition, in the driver's seat display, inadvertent driving (driver distraction) can be prevented by restricting the display of images such as television broadcasts while the vehicle is running. In addition, by using a split view display device that allows different images to be seen when viewing the screen from the driver's seat and when viewing the screen from the passenger seat, the driver's seat indicator and the passenger seat indicator can be physically connected. Realization with one screen is also proposed (for example, Patent Document 1 below).

また、スマートフォンや携帯電話などの携帯端末装置との通信機能を有する情報表示装置が実用化されている。そのような情報表示装置としては、携帯端末装置で動作中のアプリケーションプログラム(以下、「アプリケーション」または「アプリ」という)が出力する画像や音声を取得してそれを自己の表示器やスピーカから出力したり、取得した画像や音声に基づくユーザの操作に応じて携帯端末装置で動作中のアプリケーションを制御したりするなど、携帯端末装置との連携動作を可能とするリンク機能(例えばMirrorLink(登録商標)機能)を有するものがある(例えば特許文献2)。   In addition, information display devices having a communication function with mobile terminal devices such as smartphones and mobile phones have been put into practical use. As such an information display device, an image or sound output from an application program (hereinafter referred to as “application” or “application”) running on a portable terminal device is acquired and output from its own display or speaker. Link function (for example, MirrorLink (registered trademark) that enables cooperative operation with a mobile terminal device, such as controlling applications running on the mobile terminal device according to user operations based on acquired images and sounds) ) Function) (for example, Patent Document 2).

国際公開第2006/100904号International Publication No. 2006/100904 特開2003−244343号公報JP 2003-244343 A

近年の携帯端末装置の多機能化により、複数の表示部(スプリットビュー表示装置で構成された表示部も含む)を有する携帯端末装置が実用化されている。そのため、複数の表示部を有する携帯端末装置と1以上の表示器を有する情報表示装置との連携動作を適切に行う技術の開発が今後の課題となると考えられる。   2. Description of the Related Art With the recent increase in functionality of mobile terminal devices, mobile terminal devices having a plurality of display units (including a display unit including a split view display device) have been put into practical use. For this reason, it is considered that development of a technique for appropriately performing a cooperative operation between a mobile terminal device having a plurality of display units and an information display device having one or more displays will be a future problem.

本発明は以上のような課題を解決するためになされたものであり、複数の表示部を有する携帯端末装置において、1以上の表示器を有する情報表示装置との適切な連携動作を可能にすることを目的とする。   The present invention has been made to solve the above-described problems, and enables an appropriate cooperative operation with an information display device having one or more displays in a mobile terminal device having a plurality of display units. For the purpose.

本発明に係る携帯端末装置は、それぞれ異なる画像を表示可能な複数の表示部と、1以上の表示器を有する外部の情報表示装置との通信を行う通信部と、同時に複数のアプリケーションを実行可能であり、実行中の各アプリケーションの画像を、複数の表示部に振り分けて表示させると共に、通信部を介して情報表示装置へ送信する制御部と、を備えるものである。   The portable terminal device according to the present invention can execute a plurality of applications simultaneously with a plurality of display units capable of displaying different images and a communication unit communicating with an external information display device having one or more displays. A control unit that distributes and displays an image of each application being executed on a plurality of display units and transmits the images to the information display device via the communication unit.

本発明によれば、1以上の表示器を有する情報表示装置との適切な連携動作を行うことが可能な、複数の表示部を有する携帯端末装置が得られる。   ADVANTAGE OF THE INVENTION According to this invention, the portable terminal device which has a some display part which can perform suitable cooperation operation | movement with the information display apparatus which has one or more displays is obtained.

実施の形態1に係る情報表示システムの構成図である。1 is a configuration diagram of an information display system according to Embodiment 1. FIG. 実施の形態1に係る情報表示装置の動作を示すフローチャートである。3 is a flowchart illustrating an operation of the information display device according to the first embodiment. 情報表示装置が行う操作・表示制限情報送信処理のフローチャートである。It is a flowchart of the operation / display restriction information transmission processing performed by the information display device. 情報表示装置が行うアプリ画像表示処理のフローチャートである。It is a flowchart of the application image display process which an information display apparatus performs. 情報表示装置が行う操作対応処理のフローチャートである。It is a flowchart of the operation corresponding | compatible process which an information display apparatus performs. 実施の形態1に係る携帯端末装置の動作を示すフローチャートである。3 is a flowchart showing an operation of the mobile terminal device according to the first embodiment. 携帯端末装置が行うアプリ制御信号対応処理のフローチャートである。It is a flowchart of the application control signal corresponding | compatible process which a portable terminal device performs. 携帯端末装置が行う操作対応処理のフローチャートである。It is a flowchart of the operation corresponding | compatible process which a portable terminal device performs. 携帯端末装置が行うアプリ画像表示・送信処理のフローチャートである。It is a flowchart of the application image display / transmission process which a portable terminal device performs. 情報表示装置と携帯端末装置との接続例を示す図である。It is a figure which shows the example of a connection of an information display apparatus and a portable terminal device. 情報表示装置と携帯端末装置との接続例を示す図である。It is a figure which shows the example of a connection of an information display apparatus and a portable terminal device. 情報表示装置と携帯端末装置との接続例を示す図である。It is a figure which shows the example of a connection of an information display apparatus and a portable terminal device.

<実施の形態1>
図1は、本発明の実施の形態1に係る情報表示システムの構成図である。当該情報表示システムは、互いに連携した動作が可能な情報表示装置10と携帯端末装置20とを含んでいる。情報表示装置10の具体例としてはカーナビゲーション装置、ディスプレイオーディオ装置などがあり、携帯端末装置20の具体例としてはスマートフォンや携帯電話などがある。
<Embodiment 1>
FIG. 1 is a configuration diagram of an information display system according to Embodiment 1 of the present invention. The information display system includes an information display device 10 and a mobile terminal device 20 that can operate in cooperation with each other. Specific examples of the information display device 10 include a car navigation device and a display audio device. Specific examples of the mobile terminal device 20 include a smartphone and a mobile phone.

情報表示装置10は、制御部11、記憶部12、第1画像生成部13a、第2画像生成部13b、通信部16およびインタフェース部17を備え、スプリットビュー表示装置14、タッチパネル装置15、車内LAN18、スピーカ19が接続された構成となっている。情報表示装置10は、コンピュータを用いて構成されており、制御部11、第1画像生成部13aおよび第2画像生成部13bは、コンピュータがプログラムに従って動作することにより実現される。   The information display device 10 includes a control unit 11, a storage unit 12, a first image generation unit 13a, a second image generation unit 13b, a communication unit 16, and an interface unit 17, and includes a split view display device 14, a touch panel device 15, and an in-vehicle LAN 18. The speaker 19 is connected. The information display device 10 is configured using a computer, and the control unit 11, the first image generation unit 13a, and the second image generation unit 13b are realized by the computer operating according to a program.

制御部11は、情報表示装置10の全体制御、情報表示装置10に接続した機器の制御、アプリケーションの実行などを行う。記憶部12は、ハードディスク、リムーバブルディスク、メモリなどの記憶媒体によって構成されており、制御部11が実行するアプリケーションのプログラムが記憶されている。   The control unit 11 performs overall control of the information display device 10, control of devices connected to the information display device 10, execution of applications, and the like. The storage unit 12 is configured by a storage medium such as a hard disk, a removable disk, or a memory, and stores an application program executed by the control unit 11.

情報表示装置10に接続されたスプリットビュー表示装置14は、第1画面14aと第2画面14bとをそれぞれ異なる方向に表示することができ、2つの表示器として機能する。制御部11は、同時に複数のアプリケーションを実行可能であり、それら複数のアプリケーションの画像を、第1画面14aと第2画面14bとに振り分けて表示させることができる。   The split view display device 14 connected to the information display device 10 can display the first screen 14a and the second screen 14b in different directions, and functions as two displays. The control unit 11 can execute a plurality of applications at the same time, and can display images of the plurality of applications on the first screen 14a and the second screen 14b.

実施の形態1では、情報表示装置10は車両に搭載されており、スプリットビュー表示装置14はその車両のセンターパネルに設置されているものと仮定する。また、スプリットビュー表示装置14において、第1画面14aは運転席側から見える画面(表示器)であり、第2画面14bは助手席側から見える画面(表示器)であるものとする。以下の説明では、第1画面14aを「運転席側画面」、第2画面14bを「助手席側画面」という。運転席側画面14aは、ドライバディストラクションを防止するために、車両の走行中に操作および表示の制限(操作・表示制限)を行う必要がある表示器である。助手席側画面14bは運転者からは見えないため、操作・表示制限を必要としない表示器である。   In the first embodiment, it is assumed that the information display device 10 is mounted on a vehicle and the split view display device 14 is installed on the center panel of the vehicle. In the split view display device 14, the first screen 14a is a screen (display) that can be seen from the driver's seat side, and the second screen 14b is a screen (display) that can be seen from the passenger seat side. In the following description, the first screen 14a is referred to as “driver's seat side screen”, and the second screen 14b is referred to as “passenger seat side screen”. The driver's seat side screen 14a is a display that needs to be restricted for operation and display (operation / display restriction) while the vehicle is traveling in order to prevent driver distraction. Since the passenger side screen 14b is not visible to the driver, it is a display that does not require any operation / display restrictions.

第1画像生成部13aおよび第2画像生成部13bは、制御部11による制御のもと、スプリットビュー表示装置14(運転席側画面14aおよび助手席側画面14b)に表示させる画像のデータを生成する手段である。運転席側画面14aに表示させる画像のデータは、第1画像生成部13aによって生成され、助手席側画面14bに表示させる画像のデータは、第2画像生成部13bによって生成される。   The first image generation unit 13 a and the second image generation unit 13 b generate image data to be displayed on the split view display device 14 (driver seat side screen 14 a and passenger seat side screen 14 b) under the control of the control unit 11. It is means to do. Image data to be displayed on the driver's seat screen 14a is generated by the first image generator 13a, and image data to be displayed on the passenger seat screen 14b is generated by the second image generator 13b.

タッチパネル装置15は、スプリットビュー表示装置14の画面上に設けられており、運転席側画面14aおよび助手席側画面14bに対するユーザの操作を受け付ける操作入力手段である。スプリットビュー表示装置14では、運転席側画面14aと助手席側画面14bが物理的に1つの画面によって実現されているため、タッチパネル装置15は、運転席側画面14aと助手席側画面14bとで共用されることになる。この場合、タッチパネル装置15に行われた操作が運転席側画面14aに対する操作なのか、助手席側画面14bに対する操作なのかを識別する必要がある。その識別の方法としては、例えば、カメラやセンサ(不図示)を用いて、操作が運転席側から行われたのか助手席側から行われたのかを検出する方法などが考えられる。   The touch panel device 15 is provided on the screen of the split view display device 14, and is an operation input unit that receives a user operation on the driver's seat side screen 14a and the passenger seat side screen 14b. In the split view display device 14, since the driver's seat side screen 14a and the passenger seat side screen 14b are physically realized by one screen, the touch panel device 15 includes the driver seat side screen 14a and the passenger seat side screen 14b. It will be shared. In this case, it is necessary to identify whether the operation performed on the touch panel device 15 is an operation on the driver seat side screen 14a or an operation on the passenger seat side screen 14b. As the identification method, for example, a method of detecting whether the operation is performed from the driver seat side or the passenger seat side using a camera or a sensor (not shown) can be considered.

また、運転席側画面14aと助手席側画面14bのそれぞれに個別の操作入力手段を設けてもよい。例えば、タッチパネル装置15を運転席側画面14a専用の操作入力手段にして、助手席側画面14bに対する操作はリモコン(不図示)を用いて行うように構成してもよい。ここでは、スプリットビュー表示装置14およびタッチパネル装置15が情報表示装置10に外付けされた例を示したが、それらは情報表示装置10に内蔵されていてもよい。   In addition, individual operation input means may be provided on each of the driver's seat side screen 14a and the passenger seat side screen 14b. For example, the touch panel device 15 may be configured as an operation input unit dedicated to the driver's seat screen 14a, and the operation on the passenger seat screen 14b may be performed using a remote controller (not shown). Here, an example in which the split view display device 14 and the touch panel device 15 are externally attached to the information display device 10 has been shown, but they may be incorporated in the information display device 10.

通信部16は、情報表示装置10が携帯端末装置20と連携(リンク)するのに必要な通信を行う機能を有し、携帯端末装置20との間で、画像データ、音声データ、制御信号など各種の情報をやりとりする。   The communication unit 16 has a function of performing communication necessary for the information display device 10 to link (link) with the mobile terminal device 20, and image data, audio data, control signals, and the like with the mobile terminal device 20. Exchange various information.

情報表示装置10は、単独で動作する「通常モード」と、携帯端末装置20と連携して動作する「リンクモード」の2つの動作モードを有している。通常モードでは、制御部11は、記憶部12に記憶されているアプリケーションを実行し、実行中の各アプリケーションの画像を運転席側画面14aと助手席側画面14bに振り分けて表示させる。リンクモードでは、制御部11は、携帯端末装置20で実行中の各アプリケーションの画像を通信部16を介して取得し、それらの画像を運転席側画面14aと助手席側画面14bに振り分けて表示させる。   The information display device 10 has two operation modes: a “normal mode” that operates independently and a “link mode” that operates in cooperation with the mobile terminal device 20. In the normal mode, the control unit 11 executes the application stored in the storage unit 12, and distributes and displays the images of each application being executed on the driver seat side screen 14a and the passenger seat side screen 14b. In the link mode, the control unit 11 acquires images of each application being executed on the mobile terminal device 20 via the communication unit 16, and distributes and displays the images on the driver side screen 14a and the passenger side screen 14b. Let

なお、通信部16と携帯端末装置20との間の通信方式は、例えばUSB(Universal Serial Bus)ケーブルやLAN(Local Area Network)ケーブルなどを用いる有線通信でもよいし、無線LANやBluetooth(登録商標)などの無線通信でもよい。   Note that the communication method between the communication unit 16 and the mobile terminal device 20 may be wired communication using, for example, a USB (Universal Serial Bus) cable or a LAN (Local Area Network) cable, or may be a wireless LAN or Bluetooth (registered trademark). ) Or the like.

インタフェース部17は、情報表示装置10と外部の機器との接続手段である。ここではインタフェース部17に車内LAN18およびスピーカ19が接続された例を示している。情報表示装置10は、インタフェース部17に接続された車内LAN18から、例えば車両の速度やGPS(Global Positioning System)受信機が取得した位置情報など、車両の状態を示す情報(車両情報)を取得できる。また、情報表示装置10は、インタフェース部17に接続されたスピーカ19から音声を出力することもできる。   The interface unit 17 is a connection unit between the information display device 10 and an external device. Here, an example in which an in-vehicle LAN 18 and a speaker 19 are connected to the interface unit 17 is shown. The information display device 10 can acquire information (vehicle information) indicating the state of the vehicle, such as vehicle speed and position information acquired by a GPS (Global Positioning System) receiver, from the in-vehicle LAN 18 connected to the interface unit 17. . The information display device 10 can also output sound from the speaker 19 connected to the interface unit 17.

一方、携帯端末装置20は、制御部21、記憶部22、第1画像生成部23a、第2画像生成部23b、スプリットビュー表示部24、タッチパネル部25および通信部26を備えている。携帯端末装置20は、コンピュータを用いて構成されており、制御部21、第1画像生成部23a、第2画像生成部23bは、コンピュータがプログラムに従って動作することにより実現される。   On the other hand, the mobile terminal device 20 includes a control unit 21, a storage unit 22, a first image generation unit 23a, a second image generation unit 23b, a split view display unit 24, a touch panel unit 25, and a communication unit 26. The mobile terminal device 20 is configured using a computer, and the control unit 21, the first image generation unit 23a, and the second image generation unit 23b are realized by the computer operating according to a program.

制御部21は、携帯端末装置20の全体制御や、アプリケーションの実行などを行う。記憶部22は、ハードディスク、リムーバブルディスク、メモリなどの記憶媒体によって構成されており、制御部21が実行するアプリケーションのプログラムが記憶されている。   The control unit 21 performs overall control of the mobile terminal device 20 and execution of an application. The storage unit 22 is configured by a storage medium such as a hard disk, a removable disk, or a memory, and stores an application program executed by the control unit 21.

実施の形態1では、記憶部22に記憶されているアプリケーションは、「操作・表示制限機能を有するアプリ」、「操作・表示制限を必要とするアプリ」、「操作・表示制限を必要としないアプリ」に分類される。   In the first embodiment, the applications stored in the storage unit 22 are “an application having an operation / display restriction function”, “an application that requires an operation / display restriction”, and “an application that does not require an operation / display restriction”. "are categorized.

「操作・表示制限機能を有するアプリ」は、そのアプリケーション自身が操作・表示制限機能を有しており、車両の走行中に操作を無効にしたり実行画面を隠したりする操作・表示制限の処理を自ら行うことができる。なお、操作・表示制限機能を有するアプリには、操作制限機能のみを有するものや、表示制限機能のみを行うものも含まれる。   The “app with operation / display restriction function” itself has an operation / display restriction function, and performs an operation / display restriction process that disables the operation or hides the execution screen while the vehicle is running. You can do it yourself. The application having the operation / display restriction function includes an application having only the operation restriction function and an application having only the display restriction function.

「操作・表示制限を必要とするアプリ」は、そのアプリケーション自身は操作・表示制限機能を持たないが、車両の走行中に操作および表示を制限することが好ましいものである。その具体例としては、画像ビューワや動画再生アプリといった映像アプリが挙げられる。なお、操作・表示制限を必要とするアプリには、操作制限のみを必要とするものや、表示制限のみを必要とするものも含まれる。   The “app that requires operation / display restriction” does not have an operation / display restriction function, but it is preferable to restrict the operation and display while the vehicle is running. Specific examples thereof include video applications such as an image viewer and a video playback application. Note that applications that require operation / display restrictions include those that require only operation restrictions and those that require only display restrictions.

「操作・表示制限を必要としないアプリ」は、車両の走行中も操作および表示を制限しないことが好ましいものである。その具体例としては、運転を支援するナビゲーションアプリなどが挙げられる。   The “app that does not require operation / display restriction” preferably does not restrict the operation and display even while the vehicle is running. Specific examples thereof include a navigation application that supports driving.

アプリケーションが、操作・表示制限機能を有するアプリ、操作・表示制限を必要とするアプリ、操作・表示制限を必要としないアプリのどれに属するかという情報は、各アプリケーションの付属情報として記憶部22に記憶されている。なお、付属情報は、アプリケーション自身のプログラムファイルに記述されていてもよいし、それに関連付けされた付属ファイルに記述されていてもよい。   Information on which application belongs to an application having an operation / display restriction function, an application requiring an operation / display restriction, or an application not requiring an operation / display restriction is stored in the storage unit 22 as attached information of each application. It is remembered. The attached information may be described in the program file of the application itself, or may be described in an attached file associated therewith.

スプリットビュー表示部24は、第1画面24aおよび第2画面24bをそれぞれ異なる方向に表示することで、2つの表示部として機能する。制御部21は、同時に複数のアプリケーションを実行可能であり、それら複数のアプリケーションの画像を、第1画面24aと第2画面24bとに振り分けて表示させることができる。   The split view display unit 24 functions as two display units by displaying the first screen 24a and the second screen 24b in different directions. The control unit 21 can execute a plurality of applications at the same time, and can display the images of the plurality of applications in a divided manner on the first screen 24a and the second screen 24b.

第1画像生成部23aおよび第2画像生成部23bは、スプリットビュー表示部24(第1画面24aおよび第2画面24b)に表示させる画像のデータを生成する手段である。第1画面24aに表示させる画像のデータは、第1画像生成部23aによって生成され、第2画面24bに表示させる画像のデータは、第2画像生成部23bによって生成される。   The first image generation unit 23a and the second image generation unit 23b are means for generating image data to be displayed on the split view display unit 24 (first screen 24a and second screen 24b). The image data to be displayed on the first screen 24a is generated by the first image generation unit 23a, and the image data to be displayed on the second screen 24b is generated by the second image generation unit 23b.

タッチパネル部25は、スプリットビュー表示部24の画面上に設けられており、第1画面24aおよび第2画面24bに対するユーザによる操作を受け付ける操作入力手段である。スプリットビュー表示部24の物理的な画面は一つなので、タッチパネル部25は第1画面24aと第2画面24bとで共用される。そのため、カメラやセンサ(不図示)を用いて、タッチパネル部25に行われた操作が第1画面24aに対する操作なのか、第2画面24bに対する操作なのかを識別する必要がある。また、第1画面24aと第2画面24bのそれぞれに個別の操作入力手段を設けてもよい。   The touch panel unit 25 is an operation input unit that is provided on the screen of the split view display unit 24 and receives user operations on the first screen 24a and the second screen 24b. Since the split view display unit 24 has one physical screen, the touch panel unit 25 is shared by the first screen 24a and the second screen 24b. Therefore, it is necessary to identify whether the operation performed on the touch panel unit 25 is an operation on the first screen 24a or an operation on the second screen 24b using a camera or a sensor (not shown). Moreover, you may provide a separate operation input means in each of the 1st screen 24a and the 2nd screen 24b.

通信部26は、携帯端末装置20が情報表示装置10とリンクするのに必要な通信を行う機能を有し、情報表示装置10との間で、画像データ、音声データ、制御信号など各種の情報をやりとりする。   The communication unit 26 has a function of performing communication necessary for the mobile terminal device 20 to link with the information display device 10, and various information such as image data, audio data, and control signals with the information display device 10. Communicate.

携帯端末装置20も、単独で動作する「通常モード」と、情報表示装置10と連携して動作する「リンクモード」の2つの動作モードを有しており、動作モードの切り換えはユーザの操作によって行われる。通常モードでは、制御部21は、記憶部22に記憶されているアプリケーションを実行し、実行中の各アプリケーションの画像を第1画面24aと第2画面24bに振り分けて表示させる。   The mobile terminal device 20 also has two operation modes, a “normal mode” that operates independently and a “link mode” that operates in cooperation with the information display device 10. Switching of the operation mode is performed by a user operation. Done. In the normal mode, the control unit 21 executes the application stored in the storage unit 22, and distributes and displays the images of each application being executed on the first screen 24a and the second screen 24b.

リンクモードでは、制御部21は、実行中の各アプリケーションの画像を通信部26を介して情報表示装置10へと送信する。その際、制御部21は、実行中の各アプリケーションの画像を情報表示装置10の運転席側画面14aと助手席側画面14bのどちらに表示させるかを指定する識別子を、各アプリケーションの画像のデータに付す。以下、運転席側画面14aで表示するように指定されるアプリケーションを「運転者用アプリ」、助手席側画面14bで表示するように指定されるアプリケーションを「同乗者用アプリ」という。携帯端末装置20で実行される各アプリケーションが「運転者用アプリ」と「同乗者用アプリ」のどちらになるかは、予め決められていてもよいし、アプリケーションを起動する際にユーザがどちらかを指定するようにしてもよい。   In the link mode, the control unit 21 transmits an image of each application being executed to the information display device 10 via the communication unit 26. At that time, the control unit 21 uses an identifier for designating whether to display an image of each application being executed on the driver side screen 14a or the passenger side screen 14b of the information display device 10 as image data of each application. It is attached to. Hereinafter, an application designated to be displayed on the driver's seat screen 14a is referred to as “driver application”, and an application designated to be displayed on the passenger seat screen 14b is referred to as “passenger application”. Whether each application executed on the mobile terminal device 20 is a “driver application” or a “passenger application” may be determined in advance, and either one of the users is activated when starting the application. May be specified.

以下、実施の形態1に係る情報表示システムにおける情報表示装置10および携帯端末装置20の動作を説明する。   Hereinafter, operations of the information display device 10 and the mobile terminal device 20 in the information display system according to Embodiment 1 will be described.

図2は、情報表示装置10の動作を示すフローチャートである。情報表示装置10が起動すると、制御部11は、リンクモードが開始されたかを確認し(ステップS11)、リンクモードが開始されていなければ(ステップS11でNO)、通常モードの動作を行う(ステップS12)。   FIG. 2 is a flowchart showing the operation of the information display apparatus 10. When the information display device 10 is activated, the control unit 11 confirms whether the link mode has been started (step S11). If the link mode has not been started (NO in step S11), the control unit 11 operates in the normal mode (step S11). S12).

通常モードでは、制御部11は、記憶部12に記憶されているアプリケーションを実行し、第1画像生成部13aおよび第2画像生成部13bを制御して、実行中の各アプリケーションの画像を運転席側画面14aおよび助手席側画面14bに表示させる。通常モードの情報表示装置10の動作は、一般的な情報表示装置の動作と同様であり、本発明との関連が薄いため詳細な説明は省略する。   In the normal mode, the control unit 11 executes an application stored in the storage unit 12, controls the first image generation unit 13a and the second image generation unit 13b, and displays an image of each application being executed in the driver's seat. It is displayed on the side screen 14a and the passenger seat side screen 14b. The operation of the information display device 10 in the normal mode is the same as the operation of a general information display device, and is not related to the present invention, so that detailed description is omitted.

一方、リンクモードが開始されると(ステップS11でYES)、制御部11は、通信部16を制御して携帯端末装置20との通信を行い、携帯端末装置20に対してリンクを要求する。このとき携帯端末装置20から応答があると、情報表示装置10と携帯端末装置20とのリンクが確立される(ステップS13)。   On the other hand, when the link mode is started (YES in step S <b> 11), the control unit 11 controls the communication unit 16 to communicate with the mobile terminal device 20 and requests the mobile terminal device 20 for a link. At this time, if there is a response from the mobile terminal device 20, a link between the information display device 10 and the mobile terminal device 20 is established (step S13).

携帯端末装置20とのリンクが確立すると、制御部11は、携帯端末装置20で実行中の各アプリケーションの画像および付属情報を、通信部16を介して受信する(ステップS14)。携帯端末装置20から送られてくるアプリケーションの画像には、そのアプリケーションが運転者用アプリか同乗者用アプリかを示す識別子(運転席側画面14aと助手席側画面14bのどちらに表示させるかを指定する識別子)が付されている。また、アプリケーションの付属情報には、そのアプリケーションが「操作・表示制限機能を有するアプリ」、「操作・表示制限を必要とするアプリ」、「操作・表示制限を必要としないアプリ」のどれに該当するかを示す情報が含まれている。   When the link with the mobile terminal device 20 is established, the control unit 11 receives an image and attached information of each application being executed on the mobile terminal device 20 via the communication unit 16 (step S14). In the image of the application sent from the mobile terminal device 20, an identifier indicating whether the application is a driver application or a passenger application (whether to be displayed on the driver side screen 14a or the passenger side screen 14b). (Identifier to be specified) is attached. In addition, in the attached information of an application, the application corresponds to any one of “an application having an operation / display restriction function”, “an application that requires an operation / display restriction”, and “an application that does not require an operation / display restriction”. Contains information that indicates whether to do it.

次に、制御部11は、インタフェース部17を介して、車内LAN18から車両情報(速度や位置情報)を取得し、その車両情報に基づいて、車両の状態が、運転席側画面14aの操作・表示制限をする必要がある状態か否かを判断する。例えば、車両が走行中であれば、操作および表示の制限が必要と判断し、車両が停止中であれば、操作および表示の制限が不要と判断する。また、車両の状態をさらに細分化して、操作制限のみが必要な状態や、表示制限のみが必要な状態などを、判断結果に含ませてもよい。そして、その判断結果に応じて操作・表示制限を指示する情報(操作・表示制限情報)を生成する(ステップS15)。さらに、制御部11は、生成した操作・表示制限情報を携帯端末装置20へ送信する処理(操作・表示制限情報送信処理)を行う(ステップS16)。なお、操作・表示制限情報には、操作制限のみを指示ずるものや表示制限のみを指示するものも含まれる。   Next, the control unit 11 acquires vehicle information (speed and position information) from the in-vehicle LAN 18 via the interface unit 17, and based on the vehicle information, the state of the vehicle is determined by operating the driver's seat side screen 14 a. It is determined whether or not display restriction is necessary. For example, if the vehicle is running, it is determined that the limitation of operation and display is necessary, and if the vehicle is stopped, it is determined that the limitation of operation and display is unnecessary. In addition, the state of the vehicle may be further subdivided, and the determination result may include a state where only operation restriction is required or a state where only display restriction is required. Then, information (operation / display restriction information) for instructing operation / display restriction is generated according to the determination result (step S15). Furthermore, the control part 11 performs the process (operation / display restriction information transmission process) which transmits the produced | generated operation / display restriction information to the portable terminal device 20 (step S16). The operation / display restriction information includes information for instructing only operation restrictions and information for instructing only display restrictions.

図3は、操作・表示制限情報送信処理のフローチャートである。操作・表示制限情報送信処理では、情報表示装置10は、まず携帯端末装置20で運転者用アプリが実行されているか否か確認する(ステップS21)。この確認は、ステップS14で取得した、携帯端末装置20で実行中の各アプリケーションの画像に付された識別子を参照することにより可能である。携帯端末装置20で運転者用アプリが実行されていなければ(ステップS21でNO)、制御部11は、操作・表示制限情報を送信しない。   FIG. 3 is a flowchart of the operation / display restriction information transmission process. In the operation / display restriction information transmission process, the information display device 10 first checks whether or not the driver application is being executed on the mobile terminal device 20 (step S21). This confirmation can be made by referring to the identifier attached to the image of each application being executed on the mobile terminal device 20 acquired in step S14. If the driver application is not executed on the mobile terminal device 20 (NO in step S21), the control unit 11 does not transmit the operation / display restriction information.

携帯端末装置20で運転者用アプリが実行されていれば(ステップS21でYES)、制御部11は、その中に操作・表示制限機能を有するアプリ、または、操作・表示制限を必要とするアプリが含まれているか否かを確認する(ステップS22,S23)。この確認は、ステップS14で取得した、携帯端末装置20で実行中の各アプリケーションの付属情報を参照することにより可能である。携帯端末装置20で実行中の運転者用アプリに、操作・表示制限機能を有するアプリ、または、操作・表示制限を必要とするアプリが含まれていれば(ステップS22でYES、または、ステップS23でYES)、制御部11は、通信部16を介して携帯端末装置20へ操作・表示制限情報を送信する(ステップS24)。そうでなければ(ステップS22でNO、且つ、ステップS23でNO)、制御部11は、操作・表示制限情報を送信しない。   If a driver application is being executed on the mobile terminal device 20 (YES in step S21), the control unit 11 includes an application having an operation / display restriction function or an application requiring operation / display restriction. Is included (steps S22 and S23). This confirmation can be made by referring to the attached information of each application being executed in the mobile terminal device 20 acquired in step S14. If the driver application being executed on the mobile terminal device 20 includes an application having an operation / display restriction function or an application requiring operation / display restriction (YES in step S22, or step S23). The control unit 11 transmits the operation / display restriction information to the mobile terminal device 20 via the communication unit 16 (step S24). Otherwise (NO in step S22 and NO in step S23), control unit 11 does not transmit operation / display restriction information.

図2に戻り、制御部11は、操作・表示制限情報送信処理(ステップS16)を終えると、携帯端末装置20から受信した各アプリケーションの画像を、運転席側画面14aおよび助手席側画面14bに表示させる処理(アプリ画像表示処理)を行う(ステップS17)。   Returning to FIG. 2, when the operation / display restriction information transmission process (step S <b> 16) is completed, the control unit 11 displays the image of each application received from the mobile terminal device 20 on the driver seat side screen 14 a and the passenger seat side screen 14 b. Processing for displaying (application image display processing) is performed (step S17).

図4は、アプリ画像表示処理のフローチャートである。アプリ画像表示処理では、制御部11は、まずステップS14で運転者用アプリの画像を受信したか否かを確認する(ステップS31)。運転者用アプリの画像を受信したならば(ステップS31でYES)、制御部11はその運転者用アプリの画像を運転席側画面14aに表示させる(ステップS32)。   FIG. 4 is a flowchart of the application image display process. In the application image display process, the control unit 11 first confirms whether or not the driver application image has been received in step S14 (step S31). If the image of the driver application is received (YES in step S31), the control unit 11 displays the image of the driver application on the driver seat side screen 14a (step S32).

続いて、制御部11は、ステップS14で同乗者用アプリの画像を受信したか否かを確認する(ステップS33)。同乗者用アプリの画像を受信したならば、(ステップS36でYES)、制御部11はその同乗者用アプリの画像を助手席側画面14bに表示させる(ステップS34)。   Then, the control part 11 confirms whether the image of the passenger application was received by step S14 (step S33). If an image of the passenger application is received (YES in step S36), the control unit 11 displays the image of the passenger application on the passenger seat side screen 14b (step S34).

図2に戻り、制御部11は、アプリ画像表示処理(ステップS17)を終えると、タッチパネル装置15に対して行われたユーザの操作に応じた処理(操作対応処理)を行う(ステップS18)。   Returning to FIG. 2, when the application image display process (step S <b> 17) is finished, the control unit 11 performs a process (operation corresponding process) corresponding to the user operation performed on the touch panel device 15 (step S <b> 18).

図5は、操作対応処理のフローチャートである。操作対応処理では、制御部11は、まずタッチパネル装置15において運転者用アプリに対する操作(運転席側画面14aに対する操作)が行われたか否かを確認する(ステップS41)。運転者用アプリの操作が行われたならば(ステップS41でYES)、制御部11は、タッチパネル装置15の操作に応じた運転者用アプリの制御信号を携帯端末装置20へ送信する(ステップS42)。また、制御部11は、運転者用アプリの制御信号を携帯端末装置20へ送信する際、その制御信号が運転席側画面14aに表示された運転者用アプリに対するものであることを示す識別子(運転席用識別子)を付して送信する。   FIG. 5 is a flowchart of the operation handling process. In the operation handling process, the control unit 11 first checks whether or not an operation on the driver application (operation on the driver's seat side screen 14a) has been performed on the touch panel device 15 (step S41). If the operation of the driver application is performed (YES in step S41), the control unit 11 transmits a control signal for the driver application corresponding to the operation of the touch panel device 15 to the mobile terminal device 20 (step S42). ). In addition, when the control unit 11 transmits a control signal for the driver application to the mobile terminal device 20, the identifier indicating that the control signal is for the driver application displayed on the driver's seat screen 14a ( Send the driver identifier).

続いて、制御部11は、タッチパネル装置15において同乗者用アプリに対する操作が行われたか否かを確認する(ステップS43)。制御部11は、同乗者用アプリの操作が行われたならば(ステップS43でYES)、その操作に応じた同乗者用アプリの制御信号を携帯端末装置20へ送信する(ステップS44)。また、制御部11は、同乗者用アプリの制御信号を携帯端末装置20へ送信する際、その制御信号が助手席側画面14bに表示された同乗者用アプリに対するものであることを示す識別子(助手席用識別子)を付して送信する。   Then, the control part 11 confirms whether operation with respect to the passenger application was performed in the touch panel apparatus 15 (step S43). If the operation for the passenger application is performed (YES in step S43), the control unit 11 transmits a control signal for the passenger application corresponding to the operation to the mobile terminal device 20 (step S44). In addition, when the control unit 11 transmits the control signal for the passenger application to the mobile terminal device 20, the control unit 11 indicates that the control signal is for the passenger application displayed on the passenger side screen 14b ( (Passenger seat identifier) is sent.

図2に戻り、制御部11は、リンクモードが終了されるまで、ステップS14〜S18を繰り返し実行する(ステップS19)。なお、ステップS14〜S18は、図2に示す順番で行われなくてもよく、例えばステップS14〜S18がそれぞれ並列に実行されてもよい。また、リンクモードの終了は必ずしもユーザからの指示で行われなくてもよく、例えば、携帯端末装置20側で全てのアプリケーションの実行が終了したときに自動的にリンクモードが終了するようにしてもよい。   Returning to FIG. 2, the control unit 11 repeatedly executes steps S14 to S18 until the link mode is terminated (step S19). Note that steps S14 to S18 may not be performed in the order shown in FIG. 2, and for example, steps S14 to S18 may be performed in parallel. Moreover, the end of the link mode does not necessarily have to be performed according to an instruction from the user. For example, the link mode may be automatically ended when execution of all applications is completed on the mobile terminal device 20 side. Good.

次に、携帯端末装置20の動作を説明する。図6は、実施の形態1に係る携帯端末装置20の動作を示すフローチャートである。携帯端末装置20が起動すると、制御部21は、リンクモードが開始されたかを確認し(ステップS51)、リンクモードが開始されていなければ(ステップS51でNO)、通常モードの動作を行う(ステップS52)。   Next, the operation of the mobile terminal device 20 will be described. FIG. 6 is a flowchart showing the operation of the mobile terminal device 20 according to the first embodiment. When the mobile terminal device 20 is activated, the control unit 21 confirms whether the link mode has been started (step S51). If the link mode has not been started (NO in step S51), the control unit 21 performs the normal mode operation (step S51). S52).

通常モードでは、制御部21は、記憶部22に記憶されているアプリケーションを実行し、第1画像生成部23aおよび第2画像生成部23bを制御して、実行中の各アプリケーションの画像を第1画面24aおよび第2画面24bに表示させる。通常モードの携帯端末装置20の動作は、一般的な携帯端末装置の動作と同様であり、本発明との関連が薄いため詳細な説明は省略する。   In the normal mode, the control unit 21 executes the application stored in the storage unit 22, controls the first image generation unit 23a and the second image generation unit 23b, and displays the image of each application being executed in the first mode. It is displayed on the screen 24a and the second screen 24b. The operation of the mobile terminal device 20 in the normal mode is the same as that of a general mobile terminal device, and is not related to the present invention.

一方、携帯端末装置20のリンクモードが開始されると(ステップS51でYES)、制御部21は、情報表示装置10からのリンク要求を待つ(ステップS53)。情報表示装置10からのリンク要求があると(ステップS53でYES)、制御部21は、通信部26を制御して情報表示装置10との通信を行い、そのリンク要求に応答する。それにより、情報表示装置10と携帯端末装置20とのリンクが確立する(ステップS54)。   On the other hand, when the link mode of the mobile terminal device 20 is started (YES in step S51), the control unit 21 waits for a link request from the information display device 10 (step S53). When there is a link request from the information display device 10 (YES in step S53), the control unit 21 controls the communication unit 26 to communicate with the information display device 10 and responds to the link request. Thereby, the link of the information display apparatus 10 and the portable terminal device 20 is established (step S54).

情報表示装置10とのリンクが確立すると、制御部21は、実行中の全てのアプリケーションの付属情報を情報表示装置10へ送信済みか否かを確認する(ステップS55)。付属情報を送信していない実行中のアプリケーションが存在すれば(ステップS55でNO)、制御部21は、その付属情報を通信部26を介して情報表示装置10へと送信する(ステップS56)。   When the link with the information display device 10 is established, the control unit 21 confirms whether or not the attached information of all the applications being executed has been transmitted to the information display device 10 (step S55). If there is a running application that does not transmit the attached information (NO in step S55), the control unit 21 transmits the attached information to the information display device 10 via the communication unit 26 (step S56).

実行中の全てのアプリケーションの付属情報を情報表示装置10へ送信した後(ステップS55でYES)、制御部21は、情報表示装置10から送られてくる操作・表示制限情報を受信する(ステップS57)。そして、受信した操作・表示制限情報を、運転者用アプリとして実行中の操作・表示制限機能を有するアプリの動作に反映させる(ステップS58)。   After transmitting the attached information of all the applications being executed to the information display device 10 (YES in step S55), the control unit 21 receives the operation / display restriction information sent from the information display device 10 (step S57). ). Then, the received operation / display restriction information is reflected on the operation of the application having the operation / display restriction function being executed as the driver application (step S58).

このステップS58では、運転者用アプリとして実行中の操作・表示制限機能を有するアプリに、操作・表示制限情報が引き渡され、その操作・表示制限機能が発揮される。例えば、操作・表示制限情報に操作制限の指示が含まれていた場合には、運転者用アプリは、操作を無効にしたり操作画面を隠したりして、ユーザが運転者用アプリの操作をできない状態にする。また、操作・表示制限情報に表示制限の指示が含まれていた場合には、運転者用アプリは、実行画面を暗転させたり他の画像に差し替えたりして、ユーザが運転者用アプリの画像を視認できない状態にする。これらの処理により、ドライバディストラクションが防止される。   In this step S58, the operation / display restriction information is delivered to the application having the operation / display restriction function being executed as the driver application, and the operation / display restriction function is exhibited. For example, when an operation restriction instruction is included in the operation / display restriction information, the driver application disables the operation or hides the operation screen so that the user cannot operate the driver application. Put it in a state. In addition, when a display restriction instruction is included in the operation / display restriction information, the driver application darkens the execution screen or replaces it with another image, and the user images the driver application. Is not visible. By these processes, driver distraction is prevented.

なお、図3を用いて説明したように、操作・表示制限情報は、携帯端末装置20が運転者用アプリとして操作・表示制限機能を有するアプリまたは操作・表示制限を必要とするアプリを実行している場合に、情報表示装置10から送信される。その条件に当てはまらず、情報表示装置10から操作・表示制限情報が送信されないときは、ステップS57,S58はスキップされる。   As described with reference to FIG. 3, the operation / display restriction information is executed by the mobile terminal device 20 executing an application having an operation / display restriction function or an application requiring operation / display restriction as a driver application. The information is displayed from the information display device 10. If the condition is not met and the operation / display restriction information is not transmitted from the information display device 10, steps S57 and S58 are skipped.

その後、制御部21は、情報表示装置10から送られてくるアプリケーションの制御信号に応じて実行中のアプリケーションを制御する処理(アプリ制御信号対応処理)を行う(ステップS59)。   Thereafter, the control unit 21 performs processing (application control signal corresponding processing) for controlling the application being executed in accordance with the application control signal transmitted from the information display device 10 (step S59).

図7は、アプリ制御信号対応処理のフローチャートである。アプリ制御信号対応処理では、制御部21は、まず運転者用アプリの制御信号を受信したか確認する(ステップS71)。受信した制御信号が運転者用アプリに対するものか同乗者用アプリに対するものかは、それに付された識別子から判断できる。   FIG. 7 is a flowchart of the application control signal handling process. In the application control signal handling process, the control unit 21 first confirms whether a control signal for the driver application has been received (step S71). Whether the received control signal is for the driver application or the passenger application can be determined from the identifier attached thereto.

運転者用アプリの制御信号が受信されたならば(ステップS71でYES)、その運転者用アプリが、操作制限機能を有するアプリ、操作制限を必要とするアプリ、操作制限を必要としないアプリのどれに該当するかを確認する(ステップS72,S73)。   If the control signal for the driver application is received (YES in step S71), the driver application is an application having an operation restriction function, an application requiring an operation restriction, or an application not requiring an operation restriction. Which one corresponds is confirmed (steps S72 and S73).

運転者用アプリが操作制限機能を有するアプリである場合(ステップS72でYES)、受信した制御信号に応じた運転者用アプリの制御を行う(ステップS75)。その結果、情報表示装置10で行われた運転者用アプリに対する操作が、携帯端末装置20で実行中の運転者用アプリの動作に反映される。操作制限機能を有するアプリは操作・表示制限情報に応じた操作制限処理を自ら行うことができるため、操作制限に関する特別な処理を行う必要はない。   If the driver application is an application having an operation restriction function (YES in step S72), the driver application is controlled in accordance with the received control signal (step S75). As a result, the operation for the driver application performed on the information display device 10 is reflected in the operation of the driver application being executed on the mobile terminal device 20. Since an application having an operation restriction function can perform an operation restriction process according to the operation / display restriction information, it is not necessary to perform a special process relating to the operation restriction.

また、運転者用アプリが操作制限を必要としないアプリである場合も(ステップS73でNO)、制御部21は、受信した制御信号に応じた運転者用アプリの制御を行う(ステップS75)。操作制限を必要としないアプリの画像は、車両の状態に関わらず操作を制限する必要がないからである。   Further, when the driver application is an application that does not require operation restriction (NO in step S73), the control unit 21 controls the driver application in accordance with the received control signal (step S75). This is because an image of an application that does not require operation restriction need not be restricted regardless of the state of the vehicle.

運転者用アプリが操作制限を必要とするアプリである場合(ステップS73でYES)、制御部21は、図6のステップS55で受信した操作・表示制限情報に基づいて、車両の状態が操作制限を必要とする状態か否かを判断し(ステップS74)、操作制限を必要としない状態であれば(ステップS74でNO)、受信した制御信号に応じた運転者用アプリの制御を行う(ステップS75)。このとき、操作制限を必要とする状態であれば(ステップS74でYES)、その運転者用アプリの制御信号に応じた運転者用アプリの制御は行わない。つまり、情報表示装置10で行われた運転者用アプリに対する操作は無効となる。運転者用アプリの操作ができなければ、運転者は操作を試みないため、ドライバディストラクションが防止される。なお、表示制限せずに操作制限のみを行うケース(例えばナビゲーションアプリにおいて地図を表示させたまま操作のみを制限するようなケース)では、運転者が操作を試みることを未然に防止するために、その旨を情報表示装置10の運転席側画面14aに表示させることが好ましい。   When the driver application is an application that requires operation restriction (YES in step S73), the control unit 21 determines that the vehicle state is operation restriction based on the operation / display restriction information received in step S55 of FIG. Is determined (step S74). If the operation is not limited (NO in step S74), the driver application is controlled in accordance with the received control signal (step S74). S75). At this time, if it is a state that requires operation restriction (YES in step S74), the driver application is not controlled in accordance with the control signal of the driver application. That is, the operation for the driver application performed on the information display device 10 is invalid. If the driver application cannot be operated, the driver does not try to operate, so driver distraction is prevented. In cases where only the operation is restricted without restricting the display (for example, the case where only the operation is restricted while the map is displayed in the navigation application), in order to prevent the driver from trying the operation in advance, It is preferable to display that on the driver's seat screen 14a of the information display device 10.

続いて、制御部21は、情報表示装置10から同乗者用アプリの制御信号を受信したか確認する(ステップS76)。同乗者用アプリでは操作制限が不要なため、制御部21は、同乗者用アプリの制御信号が受信されたならば(ステップS76でYES)、その制御信号に応じた同乗者用アプリの制御を行う(ステップS77)。その結果、情報表示装置10で行われた同乗者用アプリに対する操作が、携帯端末装置20で実行中の同乗者用アプリの動作に反映される。   Then, the control part 21 confirms whether the control signal of the passenger application was received from the information display apparatus 10 (step S76). Since the passenger application does not require any operation restriction, if the control signal for the passenger application is received (YES in step S76), the control unit 21 controls the passenger application according to the control signal. This is performed (step S77). As a result, the operation for the passenger application performed on the information display device 10 is reflected in the operation of the passenger application being executed on the mobile terminal device 20.

なお、図5を用いて説明したように、情報表示装置10は、ユーザがタッチパネル装置15を用いて運転者用アプリまたは同乗者用アプリに対する操作を行ったときに、そのアプリケーションの制御信号を送信する。情報表示装置10からアプリケーションの制御信号が送信されていなければ、アプリ制御信号対応処理では何も行われない。   As described with reference to FIG. 5, when the user performs an operation on the driver application or the passenger application using the touch panel device 15, the information display device 10 transmits a control signal of the application. To do. If no application control signal is transmitted from the information display device 10, nothing is performed in the application control signal handling process.

図6に戻り、制御部21は、アプリ制御信号対応処理(ステップS59)を終えると、タッチパネル部25に対して行われたユーザの操作に応じた処理(操作対応処理)を行う(ステップS60)。   Returning to FIG. 6, after completing the application control signal handling process (step S59), the control unit 21 performs a process (operation handling process) corresponding to the user operation performed on the touch panel unit 25 (step S60). .

図8は、操作対応処理のフローチャートである。操作対応処理では、制御部21は、まずタッチパネル部25において運転者用アプリに対する操作が行われたか否かを確認する(ステップS81)。運転者用アプリの操作が行われたならば(ステップS81でYES)、その運転者用アプリが、操作制限機能を有するアプリ、操作制限を必要とするアプリ、操作制限を必要としないアプリのどれに該当するかを確認する(ステップS82,S83)。   FIG. 8 is a flowchart of the operation handling process. In the operation handling process, the control unit 21 first confirms whether or not an operation for the driver application is performed on the touch panel unit 25 (step S81). If the driver application is operated (YES in step S81), the driver application is any of an application having an operation restriction function, an application requiring an operation restriction, and an application not requiring an operation restriction. (Steps S82 and S83).

運転者用アプリが操作制限機能を有するアプリである場合(ステップS82でYES)、制御部21は、タッチパネル部25の操作内容に応じた運転者用アプリの制御を行う(ステップS85)。操作制限機能を有するアプリは操作・表示制限情報に応じた操作制限処理を自ら行うことができるため、操作制限に関する特別な処理を行う必要はない。   When the driver application is an application having an operation restriction function (YES in step S82), the control unit 21 controls the driver application according to the operation content of the touch panel unit 25 (step S85). Since an application having an operation restriction function can perform an operation restriction process according to the operation / display restriction information, it is not necessary to perform a special process relating to the operation restriction.

また、運転者用アプリが操作制限を必要としないアプリである場合も(ステップS83でNO)、制御部21は、タッチパネル部25の操作内容に応じた運転者用アプリの制御を行う(ステップS85)。操作制限を必要としないアプリの画像は、車両の状態に関わらず操作を制限する必要がないからである。   Also, when the driver application is an application that does not require operation restriction (NO in step S83), the control unit 21 controls the driver application according to the operation content of the touch panel unit 25 (step S85). ). This is because an image of an application that does not require operation restriction need not be restricted regardless of the state of the vehicle.

運転者用アプリが操作制限を必要とするアプリである場合(ステップS83でYES)、制御部21は、操作・表示制限情報に基づいて、車両の状態が操作制限を必要とする状態か否かを判断し(ステップS84)、操作制限を必要としない状態であれば(ステップS84でNO)、タッチパネル部25の操作内容に応じた運転者用アプリの制御を行う(ステップS85)。このとき、操作制限を必要とする状態であれば(ステップS84でYES)、タッチパネル部25の操作に応じた運転者用アプリの制御は行わない。つまり、運転者用アプリに対する操作は無効となる。運転者用アプリの操作ができなければ、運転者は操作を試みないため、ドライバディストラクションが防止される。なお、表示制限せずに操作制限のみを行うケースでは、運転者が操作を試みることを未然に防止するために、その旨を第1画面24aに表示させることが好ましい。   When the driver application is an application that requires operation restriction (YES in step S83), the control unit 21 determines whether or not the vehicle state requires operation restriction based on the operation / display restriction information. Is determined (step S84), and if the operation is not limited (NO in step S84), the driver application is controlled according to the operation content of the touch panel unit 25 (step S85). At this time, if it is a state that requires operation restriction (YES in step S84), the driver application is not controlled according to the operation of the touch panel unit 25. That is, the operation for the driver application is invalid. If the driver application cannot be operated, the driver does not try to operate, so driver distraction is prevented. In the case where only the operation restriction is performed without restricting the display, it is preferable to display the fact on the first screen 24a in order to prevent the driver from attempting the operation.

続いて、制御部21は、タッチパネル部25において同乗者用アプリに対する操作が行われたか否かを確認する(ステップS86)。同乗者用アプリでは操作制限が不要なため、制御部21は、同乗者用アプリに対する操作が行われたならば(ステップS86でYES)、その制御信号に応じた同乗者用アプリの制御を行う(ステップS87)。   Then, the control part 21 confirms whether operation with respect to the passenger application was performed in the touch panel part 25 (step S86). Since the passenger application does not require any operation restriction, the control unit 21 controls the passenger application according to the control signal when an operation is performed on the passenger application (YES in step S86). (Step S87).

図6に戻り、制御部21は、操作対応処理(ステップS60)を終えると、アプリケーションの画像を、第1画面24aおよび第2画面24bに表示させると共に情報表示装置10へと送信する処理(アプリ画像表示・送信処理)を行う(ステップS61)。第1画面24aおよび第2画面24bのそれぞれにどのアプリケーションの画像が表示されるかはユーザによって指定されるが、ここでは運転者用アプリの画像を第1画面24aに表示し、同乗者用アプリの画像を第2画面24bに表示するように、ユーザが指定したものと仮定する。   Returning to FIG. 6, when the operation corresponding process (step S <b> 60) is finished, the control unit 21 displays an application image on the first screen 24 a and the second screen 24 b and transmits to the information display device 10 (application). Image display / transmission processing) is performed (step S61). Which application image is displayed on each of the first screen 24a and the second screen 24b is specified by the user, but here, the image of the driver application is displayed on the first screen 24a, and the passenger application It is assumed that the user designates the image to be displayed on the second screen 24b.

図9は、アプリ画像表示・送信処理のフローチャートである。アプリ画像表示・送信処理では、制御部21は、まず運転者用アプリを実行しているか否かを確認する(ステップS91)。運転者用アプリが実行中であれば(ステップS91でYES)、その運転者用アプリが、表示制限機能を有するアプリ、表示制限を必要とするアプリ、表示制限を必要としないアプリのどれに該当するかを確認する(ステップS92,S93)。   FIG. 9 is a flowchart of the application image display / transmission process. In the application image display / transmission process, the control unit 21 first checks whether or not the driver application is being executed (step S91). If the driver application is being executed (YES in step S91), the driver application corresponds to an application having a display restriction function, an application requiring display restriction, or an application not requiring display restriction. It is confirmed whether to do (steps S92, S93).

運転者用アプリが表示制限機能を有するアプリである場合(ステップS92でYES)、制御部21は、その運転者用アプリの画像を、第1画面24aに表示させると共に情報表示装置10へ送信する(ステップS95,S96)。表示制限機能を有するアプリの画像は、操作・表示制限情報に応じた表示制限処理がアプリケーション自身によって施されているため、表示制限に関する特別な処理を行う必要はない。なお、制御部21は、運転者用アプリの画像を情報表示装置10へ送信するとき、それを情報表示装置10の運転席側画面14aに表示させるように指定する識別子(運転席用識別子)を付して送信する。   When the driver application is an application having a display restriction function (YES in step S92), the control unit 21 displays an image of the driver application on the first screen 24a and transmits it to the information display device 10. (Steps S95 and S96). Since an application image having a display restriction function is subjected to display restriction processing according to operation / display restriction information by the application itself, it is not necessary to perform special processing relating to display restriction. In addition, when the control part 21 transmits the image of the driver application to the information display device 10, an identifier (driver seat identifier) that specifies that the image is displayed on the driver side screen 14 a of the information display device 10 is displayed. Attach and send.

運転者用アプリが表示制限を必要としないアプリである場合も(ステップS93でNO)、制御部21は、その運転者用アプリの画像を、第1画面24aに表示させると共に情報表示装置10へ送信する(ステップS95,S96)。表示制限を必要としないアプリの画像は、車両の状態に関わらず表示を制限する必要がないからである。   Even when the driver application is an application that does not require display restriction (NO in step S93), the control unit 21 displays an image of the driver application on the first screen 24a and also to the information display device 10. Transmit (steps S95 and S96). This is because it is not necessary to restrict the display of an image of an application that does not require display restriction regardless of the state of the vehicle.

運転者用アプリが表示制限を必要とするアプリである場合(ステップS93でYES)、制御部21は、操作・表示制限情報に基づいて車両が表示制限を必要とする状態にあるか否かを判断し(ステップS94)、表示制限を必要としない状態であれば(ステップS94でNO)、その運転者用アプリの画像を、第1画面24aに表示させると共に情報表示装置10へ送信する(ステップS95,S96)。このとき、表示制限を必要とする状態であれば(ステップS94でYES)、その運転者用アプリの画像を、第1画面24aに表示させることも情報表示装置10へ送信することも行わない。それにより、情報表示装置10の運転席側画面14aおよび携帯端末装置20の第1画面24aに運転者用アプリの画像が表示されなくなるので、ドライバディストラクションが防止される。   When the driver application is an application that requires display restriction (YES in step S93), the control unit 21 determines whether or not the vehicle is in a state that requires display restriction based on the operation / display restriction information. If it is determined (step S94) and the display restriction is not required (NO in step S94), the image of the driver application is displayed on the first screen 24a and transmitted to the information display device 10 (step S94). S95, S96). At this time, if display restriction is required (YES in step S94), the image of the driver application is not displayed on the first screen 24a or transmitted to the information display device 10. As a result, the driver application image is not displayed on the driver's seat side screen 14a of the information display device 10 and the first screen 24a of the mobile terminal device 20, so that driver distraction is prevented.

続いて、制御部21は、同乗者用アプリが実行されているか否かを確認する(ステップS97)。同乗者用アプリは表示制限が不要なため、制御部21は、同乗者用アプリが実行されていれば(ステップS97でYES)、その同乗者用アプリの画像を、第2画面24bに表示させると共に情報表示装置10へ送信する(ステップS98,S99)。なお、制御部21は、同乗者用アプリの画像を情報表示装置10へ送信するとき、それを情報表示装置10の助手席側画面14bに表示させるように指定する識別子(助手席用識別子)を付して送信する。   Subsequently, the control unit 21 confirms whether or not the passenger application is being executed (step S97). Since the passenger application does not require display restrictions, the control unit 21 displays an image of the passenger application on the second screen 24b if the passenger application is executed (YES in step S97). At the same time, it is transmitted to the information display device 10 (steps S98, S99). The control unit 21 transmits an identifier (passenger seat identifier) that designates that when the image of the passenger application is transmitted to the information display device 10 to be displayed on the passenger seat side screen 14b of the information display device 10. Attach and send.

図6に戻り、携帯端末装置20は、情報表示装置10からリンクの解除要求があるまで、ステップS55〜S61を繰り返し実行する(ステップS62)。リンクの解除要求があれば(ステップS62でYES)、情報表示装置10とのリンクを解除してリンクモードを終了する(ステップS63)。なお、ステップS57〜S61は、必ずしも図6に示した順番で行われなくてもよく、例えばステップS57〜S61がそれぞれ並列に実行されてもよい。   Returning to FIG. 6, the portable terminal device 20 repeatedly executes Steps S <b> 55 to S <b> 61 until there is a link release request from the information display device 10 (Step S <b> 62). If there is a request for releasing the link (YES in step S62), the link with the information display device 10 is released and the link mode is terminated (step S63). Note that steps S57 to S61 do not necessarily have to be performed in the order shown in FIG. 6, and for example, steps S57 to S61 may be executed in parallel.

上記の説明では、情報表示装置10が操作・表示制限情報を生成し、それを携帯端末装置20が受信する構成としたが、携帯端末装置20が操作・表示制限情報を生成してもよい。例えば、携帯端末装置20がGPS受信機を備える場合には、現在位置の変化から、携帯端末装置20が持ち込まれた車両が走行中か否かを判断できるので、その判断結果に基づいて操作・表示制限情報を生成することができる。   In the above description, the information display device 10 generates the operation / display restriction information and the mobile terminal device 20 receives the information. However, the mobile terminal device 20 may generate the operation / display restriction information. For example, when the mobile terminal device 20 includes a GPS receiver, it can be determined whether or not the vehicle in which the mobile terminal device 20 is brought is running from the change in the current position. Display restriction information can be generated.

また、携帯端末装置20で複数のアプリケーションが実行されていても、画像を情報表示装置10へ送信するアプリケーションはそのうちの1つでもよい。例えば、携帯端末装置20のスプリットビュー表示部24が有する2つの画面のうち、第1画面24aが携帯端末装置20の操作者から常に見える表示部であり、第2画面24bが操作者から常には見えない(携帯端末装置20の向きを変えなければ見えない)表示部である場合、第2画面24bに表示されるアプリケーションの画像のみが情報表示装置10へ送信されるようにしてもよい。この場合、ユーザは、常には見えない第2画面24bに表示される画像を、情報表示装置10の表示器(運転席側画面14aまたは助手席側画面14b)で見ることができる。つまり、携帯端末装置20の向きを変えずに、第1画面24aに表示されるアプリケーションの画像と、第2画面24bに表示されるアプリケーションの画像との両方を視認できるようになる。   Even if a plurality of applications are executed on the mobile terminal device 20, one of the applications that transmits an image to the information display device 10 may be used. For example, of the two screens of the split view display unit 24 of the mobile terminal device 20, the first screen 24a is a display unit that is always visible to the operator of the mobile terminal device 20, and the second screen 24b is always visible from the operator. In the case of a display unit that cannot be seen (it cannot be seen unless the orientation of the mobile terminal device 20 is changed), only the application image displayed on the second screen 24 b may be transmitted to the information display device 10. In this case, the user can see the image displayed on the second screen 24b that is not always visible on the display device (the driver seat side screen 14a or the passenger seat side screen 14b) of the information display device 10. That is, both the application image displayed on the first screen 24a and the application image displayed on the second screen 24b can be visually recognized without changing the orientation of the mobile terminal device 20.

なお、携帯端末装置20の「操作者から常には見える表示部」としては、上の例の他に、実施の形態2で説明するスライド式の2画面表示部における下側の画面などがある。   In addition to the above example, the “display unit that is always visible to the operator” of the mobile terminal device 20 includes a lower screen in the sliding two-screen display unit described in the second embodiment.

また実施の形態1では、携帯端末装置20において、運転者用アプリと同乗者用アプリがそれぞれ1つずつ実行されることを前提としたが、運転者用アプリと同乗者用アプリがそれぞれ複数実行されてもよい。例えば運転者用アプリが複数実行された場合、それらの画像を運転席側画面14aに並べて表示させたり、重ねて表示させたりするとよい。それぞれの運転者用アプリの画像を運転席側画面14aに表示させるときのレイアウトは、情報表示装置10側で設定してもよいし、携帯端末装置20から、そのレイアウトを指定する情報を、携帯端末装置20に送信するようにしてもよい。   In the first embodiment, the mobile terminal device 20 is premised on that one driver application and one passenger application are executed. However, a plurality of driver applications and passenger applications are executed. May be. For example, when a plurality of driver applications are executed, these images may be displayed side by side on the driver's seat side screen 14a or displayed in a superimposed manner. The layout for displaying the image of each driver application on the driver's seat side screen 14a may be set on the information display device 10 side, or information for specifying the layout from the mobile terminal device 20 You may make it transmit to the terminal device 20. FIG.

<実施の形態2>
実施の形態2では、携帯端末装置20の表示部のバリエーションについて説明する。
<Embodiment 2>
In the second embodiment, variations of the display unit of the mobile terminal device 20 will be described.

実施の形態1においては、携帯端末装置20が備える2つの表示部を、1つの画面で実現されるスプリットビュー型のものとしたが、それぞれ独立した画面を持つものでもよい。例えば、閉じた状態では2つの画面が向き合うように折り畳まれ、開くと2つの画面が見えるようになる折りたたみ式の2画面表示部や、2つの画面が上下に重ねて配置され、通常状態では下側の画面は見えないが(つまり、下側の画面は操作者から常には見えない)、上側の画面をスライドさせると下側の画面が現れるスライド式の2画面表示部などが考えられる。また、携帯端末装置20は3つ以上の表示部を備えていてもよい。   In the first embodiment, the two display units included in the mobile terminal device 20 are of the split view type realized by one screen, but may have independent screens. For example, the two screens are folded so that the two screens face each other in the closed state, and the two screens can be seen when opened. Although the side screen is not visible (that is, the lower screen is not always visible to the operator), a slide-type two-screen display unit in which the lower screen appears when the upper screen is slid can be considered. Moreover, the portable terminal device 20 may include three or more display units.

<実施の形態3>
実施の形態3では、情報表示装置10に接続される表示器のバリエーションについて説明する。
<Embodiment 3>
In the third embodiment, a variation of the display connected to the information display device 10 will be described.

実施の形態1においては、情報表示装置10に接続された2つの表示部を、1つの画面で実現されるスプリットビュー型のものとしたが、それぞれ独立した画面を持つものでもよい。また、情報表示装置10が車両に搭載される場合、表示器の設置場所はセンターパネルに限られない。例えば、車両の運転席用の表示器は、車両のインストルメントパネル内に配置してもよいし、フロントガラスに画面を投影させるヘッドアップディスプレイとしてもよい。   In the first embodiment, the two display units connected to the information display device 10 are of the split view type realized by a single screen, but may have independent screens. When the information display device 10 is mounted on a vehicle, the installation location of the display device is not limited to the center panel. For example, the display device for the driver's seat of the vehicle may be disposed in the instrument panel of the vehicle, or may be a head-up display that projects a screen on the windshield.

さらに、携帯端末装置20は3つ以上の表示器が接続されてもよい。例えば、運転席用の表示器、助手席用の表示器に加え、後部座席用の表示器を接続させることが考えられる。逆に、携帯端末装置20に1つの表示器のみ(例えば運転席用の表示器のみ)が接続されている場合にも、本発明は適用可能である。   Furthermore, three or more displays may be connected to the mobile terminal device 20. For example, it is conceivable to connect an indicator for the rear seat in addition to the indicator for the driver's seat and the indicator for the passenger seat. Conversely, the present invention is also applicable when only one display device (for example, only a display device for the driver's seat) is connected to the mobile terminal device 20.

<実施の形態4>
実施の形態4では、情報表示装置10と携帯端末装置20との間の通信方式のバリエーションについて説明する。
<Embodiment 4>
In the fourth embodiment, a variation of a communication method between the information display device 10 and the mobile terminal device 20 will be described.

実施の形態1の情報表示システムのように、情報表示装置10と携帯端末装置20との間で受け渡しするデータ(画像データや制御信号)に、運転者用アプリのものか同乗者用アプリのものかを区別するための識別子を付すようにすれば、図10のように通信経路を1つとし、それらのデータを同一の通信経路で情報表示装置へ送信することが可能である。携帯端末装置20に3つ以上の表示器が接続される場合には、その数に合わせて識別子の種類を増やせばよい。   As in the information display system of the first embodiment, the data (image data and control signal) transferred between the information display device 10 and the mobile terminal device 20 is the driver app or the passenger app. If an identifier for discriminating between the two is attached, it is possible to have one communication path as shown in FIG. 10 and to transmit the data to the information display apparatus through the same communication path. When three or more indicators are connected to the mobile terminal device 20, the number of identifiers may be increased in accordance with the number.

また、図11のように通信経路を2つにし、片方を運転者用アプリのデータの受け渡しに用い、もう片方を同乗者用アプリのデータの受け渡しに用いるように規定してもよい。この場合、受け渡しに用いられた通信経路から、データが運転者用アプリのものか同乗者用アプリのものかを区別できるので、データに識別子を付す必要がなくなる。2つの通信経路の通信規格は同じでなくてもよく、例えば図12のように、片方はUSBを用いた通信経路、もう片方は無線LAN(W−LAN)を用いた通信経路としてもよい。また、携帯端末装置20に3つ以上の表示器が接続される場合は、その数に合わせて通信経路の数を増やせばよい。   Further, as shown in FIG. 11, two communication paths may be used, and one of the two communication paths may be used for data transfer of the driver application, and the other may be used for data transfer of the passenger application. In this case, since it is possible to distinguish whether the data is for the driver application or the passenger application from the communication path used for delivery, it is not necessary to attach an identifier to the data. The communication standards of the two communication paths may not be the same. For example, as shown in FIG. 12, one may be a communication path using USB, and the other may be a communication path using a wireless LAN (W-LAN). Further, when three or more displays are connected to the mobile terminal device 20, the number of communication paths may be increased according to the number.

<実施の形態5>
実施の形態5では、携帯端末装置20で実行されるアプリケーションに対する運転者用アプリと同乗者用アプリの指定の方法、すなわち、携帯端末装置20で実行されるアプリケーションの画像を情報表示装置10の運転席側画面14aと助手席側画面14bのどちらに表示させるかを指定する方法のバリエーションについて説明する。
<Embodiment 5>
In the fifth embodiment, the driver application and the passenger application designation method for the application executed on the mobile terminal device 20, that is, the image of the application executed on the mobile terminal device 20 is displayed on the information display device 10. A variation of the method for designating which of the seat side screen 14a and the passenger side screen 14b is displayed will be described.

携帯端末装置20で実行されるアプリケーションが運転者用アプリになるか同乗者用アプリになるかは、アプリケーションごとに予め設定されていてもよいし、アプリケーションを起動する際にユーザが指定するようにしてもよい。   Whether an application executed on the mobile terminal device 20 is a driver application or a passenger application may be set in advance for each application, or may be specified by the user when starting the application. May be.

また、各アプリケーションに対する運転者用アプリまたは同乗者用アプリの指定が、予め定められたルールに基づいて自動的に行われるようにしてもよい。例えば、操作・表示制限機能を有するアプリは自動的に運転者用アプリとして指定され、運転席側画面14a(操作・表示制限を必要とする表示器)に表示されるようにしてもよい。逆に、操作・表示制限機能を有しないアプリの画像は、自動的に同乗者用アプリとして指定され、助手席側画面14b(操作・表示制限を必要としない表示器)に表示されるようにしてもよい。   The designation of the driver application or the passenger application for each application may be automatically performed based on a predetermined rule. For example, an application having an operation / display restriction function may be automatically designated as a driver application and displayed on the driver's seat screen 14a (display that requires operation / display restriction). Conversely, an image of an application that does not have an operation / display restriction function is automatically designated as a passenger application, and is displayed on the passenger side screen 14b (display that does not require operation / display restrictions). May be.

また、アプリケーションの画像が携帯端末装置20のどの表示部に表示されるかに応じて、運転者用アプリまたは同乗者用アプリの指定が自動的に行われるようにしてもよい。例えば図1の構成の場合、携帯端末装置20の第1画面24aに表示されるアプリケーションは自動的に運転者用アプリとして指定され、第2画面24bに表示されるアプリケーションは自動的に同乗者用アプリとして指定されるようにしてもよい。   Further, depending on which display unit of the mobile terminal device 20 displays the application image, the driver application or the passenger application may be automatically specified. For example, in the case of the configuration shown in FIG. 1, the application displayed on the first screen 24a of the mobile terminal device 20 is automatically designated as the driver application, and the application displayed on the second screen 24b is automatically used for the passenger. You may make it designate as an application.

また例えば、携帯端末装置20が、操作者から常に見える表示部と、常には見えない表示部とを有している場合、常に見える表示部に表示されるアプリケーションは自動的に運転者用アプリとして指定され、常には見えない表示部に表示されるアプリケーションは自動的に同乗者用アプリとして指定されるようにしてもよい。   In addition, for example, when the mobile terminal device 20 has a display unit that is always visible to the operator and a display unit that is not always visible, the application displayed on the display unit that is always visible is automatically set as a driver application. An application that is designated and displayed on a display unit that is not always visible may be automatically designated as a passenger application.

<実施の形態6>
実施の形態1では、携帯端末装置20が実行するアプリケーションが、操作・表示制限機能を有するアプリ、操作・表示制限を必要とするアプリ、操作・表示制限を必要としないアプリのうちのどれであるか予め決められていたが、それは変更可能でもよく、例えばユーザが任意に設定できるようにしてもよい。
<Embodiment 6>
In the first embodiment, the application executed by the mobile terminal device 20 is any of an application having an operation / display restriction function, an application requiring an operation / display restriction, and an application not requiring an operation / display restriction. However, it may be changeable, for example, the user may arbitrarily set it.

また例えば、携帯端末装置20が操作者から常に見える表示部と常には見えない表示部とを有している場合、操作者から常に見える表示部に表示されるアプリケーションは操作・表示制限を必要としないアプリであるとみなして(操作・表示制限機能を有するアプリであってもその機能を発揮させない)、その画像を情報表示装置へ送信するようにしてもよい。   In addition, for example, when the mobile terminal device 20 has a display unit that is always visible to the operator and a display unit that is not always visible, the application displayed on the display unit that is always visible to the operator requires operation / display restrictions. The image may be transmitted to the information display device by assuming that the application is not to be performed (even if the application has an operation / display restriction function, the function is not exhibited).

また、携帯端末装置20が、アプリケーションの種別に基づき、そのアプリケーションが操作・表示制限を必要とするか否かを設定するようにしてもよい。例えば、ナビゲーションアプリは操作・表示制限を必要としないアプリとして設定し、映像アプリ(画像ビューワや動画再生アプリ)は、操作・表示制限を必要とするアプリとして設定することなどが考えられる。   Further, the mobile terminal device 20 may set whether or not the application requires operation / display restriction based on the type of application. For example, a navigation application may be set as an application that does not require operation / display restrictions, and a video application (image viewer or video playback application) may be set as an application that requires operation / display restrictions.

<実施の形態7>
実施の形態1では、携帯端末装置20で動作する運転者用アプリを「操作・表示制限機能を有するアプリ」、「操作・表示制限を必要とするアプリ」、「操作・表示制限を必要としないアプリ」に分類したが、それに代えて、例えば、各アプリケーションに必要とされる操作・表示制限の度合い(操作・表示制限レベル)を規定してもよい。例えば次のようなレベル分けが考えられる。
<Embodiment 7>
In the first embodiment, the driver application operating on the mobile terminal device 20 is “an app having an operation / display restriction function”, “an app that requires operation / display restriction”, and “no operation / display restriction”. However, instead of this, for example, the degree of operation / display restriction (operation / display restriction level) required for each application may be defined. For example, the following levels can be considered.

・レベル0:駐車中(パーキングブレーキオン)でのみ動作を許可
・レベル1:停車中または一定速度以下でのみ動作を許可
・レベル2:一般道路用の操作・表示制限
・レベル3:高速道路用の操作・表示制限
・レベル10:操作・表示制限なし(操作・表示制限を必要としないアプリ)
各アプリケーションの操作・表示制限レベルは、そのアプリケーションの付属情報として記憶部22に記憶される。
・ Level 0: Permits operation only when parked (parking brake on) ・ Level 1: Permits operation only when parked or below a certain speed ・ Level 2: Restricted operation / display for general roads ・ Level 3: For expressways Operation / display restrictions ・ Level 10: No operation / display restrictions (apps that do not require operation / display restrictions)
The operation / display restriction level of each application is stored in the storage unit 22 as attached information of the application.

この場合、情報表示装置10から携帯端末装置20へと送信される操作・表示制限情報に、より詳細な車両の状態(パーキングブレーキのオン/オフや、走行中の道路の種別など)の情報を含ませる必要がある。携帯端末装置20の制御部21は、受信した操作・表示制限情報に基づいて、運転者用アプリに対し操作・表示制限レベルに応じた内容の操作・表示制限を実施する。   In this case, the operation / display restriction information transmitted from the information display device 10 to the mobile terminal device 20 includes more detailed information on the vehicle state (such as parking brake on / off and the type of road that is running). Must be included. Based on the received operation / display restriction information, the control unit 21 of the mobile terminal device 20 performs the operation / display restriction on the content corresponding to the operation / display restriction level for the driver application.

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。   It should be noted that the present invention can be freely combined with each other within the scope of the invention, and each embodiment can be appropriately modified or omitted.

10 情報表示装置、11 制御部、12 記憶部、13a 第1画像生成部、13b 第2画像生成部、14 スプリットビュー表示装置、14a 第1画面(運転席側画面)、14b 第2画面(助手席側画面)、15 タッチパネル装置、16 通信部、17 インタフェース部、18 車内LAN、19 スピーカ、20 携帯端末装置、21 制御部、22 記憶部、23a 第1画像生成部、23b 第2画像生成部、24 スプリットビュー表示部、24a 第1画面、24b 第2画面、25 タッチパネル部、26 通信部。   DESCRIPTION OF SYMBOLS 10 Information display apparatus, 11 Control part, 12 Storage part, 13a 1st image generation part, 13b 2nd image generation part, 14 Split view display apparatus, 14a 1st screen (driver's seat side screen), 14b 2nd screen (assistant) Seat side screen), 15 touch panel device, 16 communication unit, 17 interface unit, 18 in-vehicle LAN, 19 speaker, 20 mobile terminal device, 21 control unit, 22 storage unit, 23a first image generation unit, 23b second image generation unit 24 split view display section, 24a first screen, 24b second screen, 25 touch panel section, 26 communication section.

Claims (15)

それぞれ異なる画像を表示可能な複数の表示部と、
1以上の表示器を有する外部の情報表示装置との通信を行う通信部と、
同時に複数のアプリケーションを実行可能であり、実行中の各アプリケーションの画像を、前記複数の表示部に振り分けて表示させると共に、前記通信部を介して前記情報表示装置へ送信する制御部と、を備える
ことを特徴とする携帯端末装置。
A plurality of display units capable of displaying different images,
A communication unit for communicating with an external information display device having one or more displays;
A control unit capable of simultaneously executing a plurality of applications, displaying an image of each application being executed on the plurality of display units, and transmitting the images to the information display device via the communication unit; The portable terminal device characterized by the above-mentioned.
前記通信部は、前記情報表示装置との間に複数の通信経路を確立でき、
前記制御部は、実行中の各アプリケーションの画像をそれぞれ個別の通信経路で前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The communication unit can establish a plurality of communication paths with the information display device,
The mobile terminal device according to claim 1, wherein the control unit transmits an image of each application being executed to the information display device through an individual communication path.
前記制御部は、実行中の各アプリケーションの画像を同一の通信経路で前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The mobile terminal device according to claim 1, wherein the control unit transmits an image of each application being executed to the information display device through the same communication path.
前記制御部は、実行中の各アプリケーションの制御信号を前記情報表示装置から受信し、前記制御信号に基づいて実行中の各アプリケーションを制御する
請求項1記載の携帯端末装置。
The mobile terminal device according to claim 1, wherein the control unit receives a control signal of each application being executed from the information display device, and controls each application being executed based on the control signal.
前記制御部は、実行中の各アプリケーションが操作・表示制限を必要とするか否かの情報、実行中の各アプリケーションが操作・表示制限機能を有するか否かの情報、実行中の各アプリケーションに必要とされる操作・表示制限の度合いを示す情報のいずれかを、前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The control unit includes information on whether or not each application being executed requires operation / display restriction, information on whether or not each application being executed has an operation / display restriction function, and information on each application being executed. The mobile terminal device according to claim 1, wherein one of pieces of information indicating a required degree of operation / display restriction is transmitted to the information display device.
前記携帯端末装置が実行可能な複数のアプリケーションは、操作・表示制限機能を有するものを含む
請求項5記載の携帯端末装置。
The mobile terminal device according to claim 5, wherein the plurality of applications that can be executed by the mobile terminal device includes an application / operation limiting function.
前記制御部は、操作・表示制限機能を有しないアプリケーションの画像を、前記情報表示装置の操作・表示制限が不要な表示器に表示するように指定する信号を、前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The control unit transmits to the information display device a signal designating to display an image of an application that does not have an operation / display restriction function on a display that does not require operation / display restriction of the information display device. Item 2. The mobile terminal device according to Item 1.
前記制御部は、前記複数の表示部のうち特定の表示部に表示されるアプリケーションの画像のみを前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The mobile terminal device according to claim 1, wherein the control unit transmits only an image of an application displayed on a specific display unit among the plurality of display units to the information display device.
前記特定の表示部は、操作者から常には見えない表示部である
請求項8記載の携帯端末装置。
The mobile terminal device according to claim 8, wherein the specific display unit is a display unit that is not always visible to an operator.
前記情報表示装置は複数の表示器を有しており、
前記制御部は、実行中の各アプリケーションの画像を前記情報表示装置のどの表示器に表示させるか指定する情報を、前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The information display device has a plurality of indicators,
The mobile terminal device according to claim 1, wherein the control unit transmits, to the information display device, information specifying which display device of the information display device displays an image of each application being executed.
前記制御部は、実行中の各アプリケーションの画像を前記情報表示装置の表示器に表示させるときのレイアウトを指定する情報を、前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The mobile terminal device according to claim 1, wherein the control unit transmits, to the information display device, information specifying a layout for displaying an image of each application being executed on a display device of the information display device.
前記複数の表示部はスプリットビュー表示装置で構成されており、
前記情報表示装置はスプリットビュー表示装置で構成された表示器を有しており、
前記制御部は、前記複数の表示部であるスプリットビュー表示装置の各画面に表示するアプリケーションの画像を、前記情報表示装置の表示器であるスプリットビュー表示装置の各画面に表示するように指定する情報を、前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The plurality of display units are configured by a split view display device,
The information display device has a display composed of a split view display device,
The control unit designates that an image of an application to be displayed on each screen of the split view display device that is the plurality of display units is displayed on each screen of the split view display device that is a display of the information display device. The mobile terminal device according to claim 1, wherein information is transmitted to the information display device.
前記制御部は、前記複数の表示部のうち操作者から常に見える表示部に表示するアプリケーションの画像を、操作・表示制限を必要としないアプリケーションの画像とみなして前記情報表示装置へ送信する
請求項1記載の携帯端末装置。
The control unit regards an image of an application displayed on a display unit that is always visible to an operator among the plurality of display units as an image of an application that does not require operation / display restrictions, and transmits the image to the information display device. The mobile terminal device according to 1.
前記制御部は、前記情報表示装置から取得した情報に基づいて、実行中の各アプリケーションの操作・表示制限を制御する
請求項1記載の携帯端末装置。
The mobile terminal device according to claim 1, wherein the control unit controls operation / display restriction of each application being executed based on information acquired from the information display device.
前記制御部は、前記携帯端末装置が持ち込まれた車両の走行状況を判断し、前記車両の走行状況に基づいて、実行中の各アプリケーションの操作・表示制限を制御する
請求項1記載の携帯端末装置。
2. The mobile terminal according to claim 1, wherein the control unit determines a traveling state of a vehicle in which the portable terminal device is brought in, and controls operation / display restriction of each application being executed based on the traveling state of the vehicle. apparatus.
JP2013175405A 2013-08-27 2013-08-27 Mobile terminal device Expired - Fee Related JP6058507B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013175405A JP6058507B2 (en) 2013-08-27 2013-08-27 Mobile terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013175405A JP6058507B2 (en) 2013-08-27 2013-08-27 Mobile terminal device

Publications (2)

Publication Number Publication Date
JP2015046671A true JP2015046671A (en) 2015-03-12
JP6058507B2 JP6058507B2 (en) 2017-01-11

Family

ID=52671882

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013175405A Expired - Fee Related JP6058507B2 (en) 2013-08-27 2013-08-27 Mobile terminal device

Country Status (1)

Country Link
JP (1) JP6058507B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018074332A (en) * 2016-10-27 2018-05-10 日本精機株式会社 Remote operation device

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09153195A (en) * 1995-12-01 1997-06-10 Toyota Motor Corp Information display device for vehicle
JP2003304282A (en) * 2002-04-10 2003-10-24 Nippon Telegr & Teleph Corp <Ntt> Client server system and transmission band management apparatus
JP2004130894A (en) * 2002-10-09 2004-04-30 Fujitsu Ten Ltd Vehicle-mounted information processing device
JP2007206108A (en) * 2006-01-31 2007-08-16 Sharp Corp Mobile type electronic equipment
JP2007265236A (en) * 2006-03-29 2007-10-11 Toshiba Corp Screen transmission device and screen display method
JP2009204862A (en) * 2008-02-27 2009-09-10 Fujitsu Ten Ltd Video signal processing apparatus, display device, and video signal processing method
JP2010130670A (en) * 2008-12-01 2010-06-10 Fujitsu Ten Ltd In-vehicle system
JP2011176591A (en) * 2010-02-24 2011-09-08 Nec Corp Radio communication system using mobile terminal
JP2011238253A (en) * 2006-09-14 2011-11-24 Sharp Corp Electronic apparatus, method for selecting operative function, and program
JP2012142023A (en) * 2012-04-09 2012-07-26 Ntt Docomo Inc Information processor and program
WO2012124600A1 (en) * 2011-03-15 2012-09-20 シャープ株式会社 Display device
JP2012222403A (en) * 2011-04-04 2012-11-12 Denso Corp Information display system, and in-vehicle device and portable device constituting the system
US20130076793A1 (en) * 2011-09-27 2013-03-28 Imerj LLC Desktop application manager: tapping dual-screen cards
WO2013094066A1 (en) * 2011-12-22 2013-06-27 パイオニア株式会社 Information processing terminal, display device, information processing method, display method, information processing program, and display program

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09153195A (en) * 1995-12-01 1997-06-10 Toyota Motor Corp Information display device for vehicle
JP2003304282A (en) * 2002-04-10 2003-10-24 Nippon Telegr & Teleph Corp <Ntt> Client server system and transmission band management apparatus
JP2004130894A (en) * 2002-10-09 2004-04-30 Fujitsu Ten Ltd Vehicle-mounted information processing device
JP2007206108A (en) * 2006-01-31 2007-08-16 Sharp Corp Mobile type electronic equipment
JP2007265236A (en) * 2006-03-29 2007-10-11 Toshiba Corp Screen transmission device and screen display method
JP2011238253A (en) * 2006-09-14 2011-11-24 Sharp Corp Electronic apparatus, method for selecting operative function, and program
JP2009204862A (en) * 2008-02-27 2009-09-10 Fujitsu Ten Ltd Video signal processing apparatus, display device, and video signal processing method
JP2010130670A (en) * 2008-12-01 2010-06-10 Fujitsu Ten Ltd In-vehicle system
JP2011176591A (en) * 2010-02-24 2011-09-08 Nec Corp Radio communication system using mobile terminal
WO2012124600A1 (en) * 2011-03-15 2012-09-20 シャープ株式会社 Display device
JP2012222403A (en) * 2011-04-04 2012-11-12 Denso Corp Information display system, and in-vehicle device and portable device constituting the system
US20130076793A1 (en) * 2011-09-27 2013-03-28 Imerj LLC Desktop application manager: tapping dual-screen cards
WO2013094066A1 (en) * 2011-12-22 2013-06-27 パイオニア株式会社 Information processing terminal, display device, information processing method, display method, information processing program, and display program
JP2012142023A (en) * 2012-04-09 2012-07-26 Ntt Docomo Inc Information processor and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018074332A (en) * 2016-10-27 2018-05-10 日本精機株式会社 Remote operation device

Also Published As

Publication number Publication date
JP6058507B2 (en) 2017-01-11

Similar Documents

Publication Publication Date Title
JP6074150B2 (en) In-vehicle information system, information terminal, application execution method, program
JP5494573B2 (en) Display device, portable communication terminal, and display system
JP5548668B2 (en) A system that links in-vehicle devices and portable information terminals
US9684523B2 (en) In-vehicle information system, information terminal, and application execution method
JP2013216295A (en) In-vehicle information system, information terminal, application executing method and program
JP6362875B2 (en) In-vehicle device, in-vehicle information system
JP6258077B2 (en) COMMUNICATION SYSTEM AND ELECTRONIC DEVICE, PAIRING METHOD, PAIRING PROGRAM
JP2016085710A (en) Electronic device, system, and operation mode selection program
JP6033186B2 (en) Mobile terminal device
KR20110076520A (en) Apparatus and method of car bluetooth interface
JP2015220533A (en) On-vehicle information system, on-vehicle device, information terminal, application execution method
US9456338B2 (en) Control apparatus and wireless communication system
JP6282599B2 (en) Information display control device and communication terminal
JP6058507B2 (en) Mobile terminal device
WO2013180279A1 (en) In-vehicle information system, information terminal, application execution method, and program
JP6035108B2 (en) Information terminal, information system, information terminal program
WO2015029130A1 (en) Information display device
JP2014177218A (en) Communication system, communication device, and communication method
JP2012191349A (en) On-vehicle apparatus system, and on-vehicle apparatus and portable terminal constituting the same
JP6320171B2 (en) Information system and wireless communication management device
JP5812322B2 (en) In-vehicle device system and in-vehicle device constituting the in-vehicle system
JP7193904B2 (en) Electronic devices and systems
JP2014219600A (en) Device system and information processing apparatus
JP2014233019A (en) Information processing device and computer program
JP2016078735A (en) On-vehicle device, in-vehicle device, information output method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150831

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160526

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160624

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160927

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161107

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20161115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161207

R150 Certificate of patent or registration of utility model

Ref document number: 6058507

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees