JP5573809B2 - Control device - Google Patents

Control device Download PDF

Info

Publication number
JP5573809B2
JP5573809B2 JP2011227054A JP2011227054A JP5573809B2 JP 5573809 B2 JP5573809 B2 JP 5573809B2 JP 2011227054 A JP2011227054 A JP 2011227054A JP 2011227054 A JP2011227054 A JP 2011227054A JP 5573809 B2 JP5573809 B2 JP 5573809B2
Authority
JP
Japan
Prior art keywords
display
model
displayed
image
portable device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011227054A
Other languages
Japanese (ja)
Other versions
JP2013090051A (en
Inventor
誠 大江
幸一 枡田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2011227054A priority Critical patent/JP5573809B2/en
Priority to PCT/JP2012/004120 priority patent/WO2013054455A1/en
Publication of JP2013090051A publication Critical patent/JP2013090051A/en
Application granted granted Critical
Publication of JP5573809B2 publication Critical patent/JP5573809B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85Arrangements for transferring vehicle- or driver-related data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143Touch sensitive instrument input devices
    • B60K2360/1438Touch screens
    • B60K2360/1442Emulation of input devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/182Distributing information between displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/184Displaying the same information on different displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/573Mobile devices controlling vehicle functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/586Wired data transfers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/589Wireless data transfers
    • B60K2360/5894SIM cards
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/589Wireless data transfers
    • B60K2360/5911Bluetooth
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/16Details of telephonic subscriber devices including more than one display unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • Instrument Panels (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Description

本発明は、携帯装置を車載装置で遠隔操作するための技術に関する。   The present invention relates to a technique for remotely operating a mobile device with an in-vehicle device.

スマートフォン(多機能型携帯電話機)に代表されるように、近年の携帯装置は様々な機能を有しており、例えば車載ナビゲーション装置と同等のナビゲーション機能を有するものも知られている。ただし、こうした携帯装置の表示画面は、車両に搭載される表示装置の表示画面よりもサイズが小さいことが通常であり、車載装置と比較して、車両における視認や操作がしづらかった。   As represented by smartphones (multifunctional mobile phones), recent portable devices have various functions, and for example, devices having a navigation function equivalent to that of an in-vehicle navigation device are also known. However, the display screen of such a portable device is usually smaller in size than the display screen of the display device mounted on the vehicle, and it is difficult to visually recognize and operate the vehicle as compared with the in-vehicle device.

こうした背景から、車載装置と携帯装置とを通信可能に構成して連携させることにより、携帯装置の有する機能を車載装置で利用可能とする技術が提案されている。この技術では、携帯装置の表示部で表示される画像を車載表示装置で表示するとともに、車載装置で行われた操作を携帯装置に反映させる。つまり、携帯装置を車載装置で遠隔操作することで、携帯装置の有する機能を車載装置で利用可能とする。   From such a background, a technology has been proposed in which the functions of the mobile device can be used by the in-vehicle device by configuring the in-vehicle device and the mobile device to be communicable and linked. In this technique, an image displayed on the display unit of the mobile device is displayed on the in-vehicle display device, and an operation performed on the in-vehicle device is reflected on the mobile device. That is, by remotely operating the mobile device with the in-vehicle device, the functions of the mobile device can be used with the in-vehicle device.

ところで、携帯装置を車載装置で遠隔操作するには、携帯装置で行うことのできる操作を車載装置でも行うことができるようにすることが好ましい。ここで、携帯装置の表示画面に表示される操作ボタン(ソフトウェアボタン)は、車載装置の表示画面にも表示されるが、携帯装置が有するハードウェアボタン(メカニカルなボタン)は、携帯装置の表示画面に表示されないため、車載装置の表示画面にも表示されない。そこで、携帯装置が有するハードウェアボタンを、車載装置の表示画面にソフトウェアボタンとして表示させる技術が提案されている(特許文献1参照)。   By the way, in order to remotely control the portable device with the in-vehicle device, it is preferable that operations that can be performed with the portable device can be performed with the in-vehicle device. Here, the operation buttons (software buttons) displayed on the display screen of the mobile device are also displayed on the display screen of the in-vehicle device, but the hardware buttons (mechanical buttons) of the mobile device are displayed on the mobile device. Since it is not displayed on the screen, it is not displayed on the display screen of the in-vehicle device. Therefore, a technique has been proposed in which hardware buttons of a portable device are displayed as software buttons on the display screen of the in-vehicle device (see Patent Document 1).

具体的には、特許文献1に記載の情報表示システムでは、携帯電話の表示画面に表示されている情報とは別に、その携帯電話のハードウェアボタンに対応する操作コマンドデータが車載機側に供給される。車載機の表示画面には、携帯電話の表示画面に表示されている情報(例えば地図データ)が表示されるとともに、その横に、携帯電話の操作コマンド(英数字キーやファンクションキー)が、携帯電話の操作キー配列と略同一の配列でソフトウェアボタンとして表示される。そして、車載機側で表示されたソフトウェアボタンがユーザにより操作されると、該当する操作コマンドが携帯電話に供給される。携帯電話では、供給された操作コマンドが自己の操作コマンドと解釈され、操作コマンドに応じた処理が実行される。   Specifically, in the information display system described in Patent Document 1, operation command data corresponding to the hardware button of the mobile phone is supplied to the in-vehicle device separately from the information displayed on the display screen of the mobile phone. Is done. The information displayed on the display screen of the mobile phone (for example, map data) is displayed on the display screen of the in-vehicle device, and the operation command (alphanumeric key or function key) of the mobile phone is displayed next to the mobile phone. It is displayed as a software button with a layout almost identical to the telephone operation key layout. When the software button displayed on the vehicle-mounted device side is operated by the user, the corresponding operation command is supplied to the mobile phone. In the mobile phone, the supplied operation command is interpreted as its own operation command, and processing corresponding to the operation command is executed.

特開2003−244343号公報JP 2003-244343 A

携帯装置の有するハードウェアボタンは、携帯装置の機種によって種類、数、デザイン、配置などが異なるが、前述した特許文献1に記載の構成では、携帯装置の機種の違いまでは考慮されていない。車載装置の表示画面に表示されたハードウェアボタンの種類、数、デザイン、配置などが、携帯装置のハードウェアボタンと大きく相違すると、操作性が悪化してしまうという問題がある。   The hardware buttons of the portable device have different types, numbers, designs, arrangements, and the like depending on the model of the portable device, but the configuration described in Patent Document 1 does not take into account differences in the model of the portable device. If the type, number, design, arrangement, etc. of the hardware buttons displayed on the display screen of the in-vehicle device are significantly different from the hardware buttons of the mobile device, there is a problem that the operability is deteriorated.

本発明は、こうした問題にかんがみてなされたものであり、車載装置の表示画面に表示されたハードウェアボタンの操作性を向上させるための技術を提供することを目的としている。   The present invention has been made in view of these problems, and an object thereof is to provide a technique for improving the operability of hardware buttons displayed on a display screen of an in-vehicle device.

本発明の制御装置は、携帯装置と通信を行うための通信手段、画像を表示する表示手段、及び、操作を入力する入力手段、を備える車載装置において、携帯装置を遠隔操作するための遠隔操作処理を実行するものである。そして、この制御装置が備える実行手段は、携帯装置の表示部で表示される画像を通信手段を介して入力して表示手段に表示させる画像表示処理と、入力手段により入力された操作を通信手段を介して携帯装置へ出力する操作出力処理と、を遠隔操作処理として実行する。また、この実行手段は、入力処理手段及び表示処理手段を備える。入力処理手段は、携帯装置の機種を特定するための機種特定情報を通信手段を介して入力する。そして、表示処理手段は、機種特定情報に基づいて、携帯装置が有するハードウェアボタンに対応する操作用画像を、携帯装置の表示部で表示される画像とともに表示手段に表示させる。 The control device of the present invention is a remote operation for remotely operating a mobile device in an in-vehicle device including a communication means for communicating with the mobile device, a display means for displaying an image, and an input means for inputting an operation. The process is executed. And the execution means with which this control apparatus is provided is an image display process which inputs the image displayed on the display part of a portable apparatus via a communication means, and displays it on a display means, The operation input by the input means is a communication means And an operation output process for outputting to the portable device via a remote control process. The execution means includes an input processing means and a display processing means. The input processing means inputs model specifying information for specifying the model of the portable device via the communication means. Then, the display processing unit causes the display unit to display an operation image corresponding to the hardware button of the portable device together with the image displayed on the display unit of the portable device based on the model specifying information.

このような構成によれば、携帯装置の機種に応じて異なる操作用画像を表示手段に表示させることができる。したがって、携帯装置の機種に関係なく共通の操作用画像が表示される構成と比較して、操作用画像に対する操作を行いやすくする(操作性を向上させる)ことができる。   According to such a configuration, different operation images can be displayed on the display unit depending on the model of the portable device. Therefore, compared with a configuration in which a common operation image is displayed regardless of the model of the portable device, it is possible to make the operation image easier to operate (improve operability).

ただし、操作用画像を表示手段に表示させると、操作用画像を表示手段に表示させない場合と比較して、携帯装置の表示部で表示される画像のための表示領域を小さくする必要がある。そこで、操作用画像が必要とされる度合いに応じて、操作用画像を表示しないようにしてもよい。   However, when the operation image is displayed on the display unit, it is necessary to reduce the display area for the image displayed on the display unit of the portable device as compared with the case where the operation image is not displayed on the display unit. Therefore, the operation image may not be displayed depending on the degree to which the operation image is required.

例えば、表示処理手段は、機種特定情報に基づき特定される機種の携帯装置がタッチパネルを有しない場合に、携帯装置の表示部で表示される画像とともに操作用画像を表示手段に表示させ、機種特定情報に基づき特定される機種の携帯装置がタッチパネルを有する場合には、操作用画像を表示手段に表示させないようにしてもよい。すなわち、タッチパネルを有する携帯装置では、表示部で表示される画像にソフトウェアボタンが表示されるため、タッチパネルを有しない携帯装置と比較して、ハードウェアボタンが必要とされる度合いが低い。このため、タッチパネルを有する携帯装置の場合には操作用画像を表示させないようにすることで、携帯装置の表示部で表示される画像のための表示領域を大きくすることができる。 For example, the display processing unit, when no portable device touch panel type identified based on the model identification information, to display the operation image on the display unit together with the image displayed on the display unit of the portable device, the model When the portable device of the model specified based on the specific information has a touch panel, the operation image may not be displayed on the display means. That is, in a portable device having a touch panel, software buttons are displayed on an image displayed on the display unit, and therefore, the degree of need for hardware buttons is low compared to a portable device not having a touch panel. For this reason, in the case of a portable device having a touch panel, the display area for an image displayed on the display unit of the portable device can be enlarged by preventing the operation image from being displayed.

また、例えば、表示処理手段は、機種特定情報に基づき特定される機種の携帯装置が有するハードウェアボタンの数が所定のしきい値以上である場合に、携帯装置の表示部で表示される画像とともに操作用画像を表示手段に表示させ、機種特定情報に基づき特定される機種の携帯装置が有するハードウェアボタンの数がしきい値未満である場合には、操作用画像を表示手段に表示させないようにしてもよい。すなわち、ハードウェアボタンの数が少ないほど、ハードウェアボタンが必要とされる度合いが低いため、ハードウェアボタンの数がしきい値未満である場合には操作用画像を表示させないようにすることで、携帯装置の表示部で表示される画像のための表示領域を大きくすることができる。 Also, For example, the display processing means is displayed in the case the number of hardware buttons included in the portable device models that are specified based on the model identification information is equal to or greater than a predetermined threshold value, the mobile device display unit The operation image is displayed on the display means together with the image, and the operation image is displayed on the display means when the number of hardware buttons of the portable device of the model specified based on the model specifying information is less than the threshold value. It may not be allowed to. In other words, the smaller the number of hardware buttons, the lower the degree of need for hardware buttons. Therefore, when the number of hardware buttons is less than the threshold value, the operation image is not displayed. The display area for an image displayed on the display unit of the portable device can be enlarged.

ただし、操作用画像が全く表示されないようにすると、不便となる状況も生じ得る。そこで、表示処理手段は、操作用画像を表示手段に表示させる表示モードと、操作用画像を表示手段に表示させない表示モードとを、入力手段により入力される操作に応じて切り替えるようにしてもよい。このような構成によれば、操作用画像を必要に応じて表示させることができる。 However, if the operation image is not displayed at all, an inconvenient situation may occur. Therefore, the display processing means, a display mode for displaying an operation image on the display unit, and a display mode that does not display the operation image on the display means, be switched in response to the operation input by the input means Good. According to such a configuration, the operation image can be displayed as necessary.

ところで、操作用画像は、例えば、携帯装置が有するハードウェアボタンの種類、数、デザイン、配置などに応じた画像とすることができる。このような操作用画像は、複数種類の機種に応じてあらかじめ記憶されていてもよいが、例えばのようにしてもよい。すなわち、表示処理手段が、機種特定情報に基づき特定される機種に対応する操作用画像を、外部装置から取得する。このような構成によれば、携帯装置の機種に対応する操作用画像を記憶していない場合にも、外部装置から取得することができる。 By the way, the image for operation can be made into the image according to the kind, number, design, arrangement | positioning, etc. of the hardware button which a portable apparatus has, for example. Such operation images may be stored in advance according to a plurality of types of models, but may be as follows , for example. That, the display processing means, the operation image corresponding to the model identified based on the model identification information, obtained from an external device. According to such a configuration, even when an operation image corresponding to the model of the portable device is not stored, it can be acquired from the external device.

一方、携帯装置の機種が特定できない場合も考えられる。このような場合には、例えば、表示処理手段は、デフォルトの操作用画像を、携帯装置の表示部で表示される画像とともに表示手段に表示させるようにしてもよい。このようにすれば、携帯装置の機種が特定できない場合にも、標準的なハードウェアボタンなどを操作用画像として表示することができる。 On the other hand, there may be a case where the model of the portable device cannot be specified. In such a case, For example, the display processing means, an image for the default operation, together with the image displayed on the display unit of the portable device may be displayed on the display means. In this way, even when the model of the portable device cannot be specified, standard hardware buttons and the like can be displayed as operation images.

また、機種特定情報としては、それ自体が機種を表すものであってもよいが、これに限ったものではなく、機種を特定するための情報であればよい。例えば、表示処理手段は、携帯装置の固有情報と機種とを対応付けて記憶し、入力処理手段により機種特定情報として取得される携帯装置の固有情報に基づき、携帯装置の機種を特定してもよい。このような構成によれば、機種特定情報が機種そのものを表すものでない場合にも、機種特定情報に基づいて機種を特定することができる。 Further, the model specifying information may itself represent the model, but is not limited to this, and any information for specifying the model may be used. For example, the display processing means in association with the unique information and the model of the mobile device, based on the unique information of the mobile device acquired as model identification information by the input processing means, to identify the model of the portable device Also good . According to such a configuration, even when the model identification information does not represent the model itself, the model can be identified based on the model identification information.

実施形態の無線通信システムの構成を示すブロック図である。It is a block diagram which shows the structure of the radio | wireless communications system of embodiment. (A)はタッチパネル式の表示画面及び1つのハードウェアボタンを備えるスマートフォンとVNC接続した車載装置の表示画面を示す図、(B)はタッチパネル式でない表示画面及び多数のハードウェアボタンを備えるスマートフォンとVNC接続した車載装置の表示画面を示す図、(C)はタッチパネル式の表示画面及び3つのハードウェアボタンを備えるスマートフォンとVNC接続した車載装置の表示画面を示す図である。(A) is a diagram showing a display screen of a vehicle-mounted device connected to a smartphone equipped with a touch panel display screen and one hardware button, and (B) is a smartphone equipped with a display screen that is not a touch panel display and a number of hardware buttons. The figure which shows the display screen of the vehicle-mounted apparatus connected with VNC, (C) is a figure which shows the display screen of the vehicle-mounted apparatus connected with the smart phone provided with a touchscreen type display screen and three hardware buttons. 車載装置の制御部が実行する接続処理のフローチャートである。It is a flowchart of the connection process which the control part of a vehicle-mounted apparatus performs. スマートフォンの表示画面に表示されている画像が全域に表示された車載装置の表示画面を示す図である。It is a figure which shows the display screen of the vehicle-mounted apparatus with which the image currently displayed on the display screen of a smart phone was displayed on the whole region.

以下、本発明が適用された実施形態について、図面を用いて説明する。
[1.全体構成]
図1は、実施形態の無線通信システムの構成を示すブロック図である。この無線通信システムは、車両に搭載された車載装置1と、車両に乗車したユーザが所持するスマートフォン2とによって構成される。
Embodiments to which the present invention is applied will be described below with reference to the drawings.
[1. overall structure]
FIG. 1 is a block diagram illustrating a configuration of a wireless communication system according to an embodiment. This wireless communication system includes an in-vehicle device 1 mounted on a vehicle and a smartphone 2 possessed by a user who has boarded the vehicle.

車載装置1は、ナビゲーション機能や音楽再生機能などを有する電子機器であり、BT通信部11、Wi−Fi通信部12、タッチパネル表示部13、音出力部14、広域通信部15及び制御部16を備える。なお、車載装置1は、車両に常に固定されたタイプのものであってもよく、また、車外へ持ち運び可能なタイプのものであってもよい。   The in-vehicle device 1 is an electronic device having a navigation function, a music playback function, and the like, and includes a BT communication unit 11, a Wi-Fi communication unit 12, a touch panel display unit 13, a sound output unit 14, a wide area communication unit 15, and a control unit 16. Prepare. The in-vehicle device 1 may be of a type that is always fixed to the vehicle, or of a type that can be carried outside the vehicle.

BT通信部11は、Bluetooth(登録商標)規格に従った近距離無線通信(以下「BT無線通信」という。)を行うための通信モジュールを備え、車載装置1と外部の通信機器(例えばスマートフォン2)との間で、BT無線通信を可能とするための機能を有する。BT通信部11による通信エリアは、車両の室内をカバーするように設定されている。   The BT communication unit 11 includes a communication module for performing short-range wireless communication (hereinafter referred to as “BT wireless communication”) in accordance with the Bluetooth (registered trademark) standard, and the in-vehicle device 1 and an external communication device (for example, the smartphone 2). ) To enable BT wireless communication. The communication area by the BT communication unit 11 is set so as to cover the interior of the vehicle.

Wi−Fi通信部12は、Wi−Fi(登録商標)規格に従った近距離無線通信(以下「WF無線通信」という。)を行うための通信モジュールを備え、車載装置1と外部の通信機器(例えばスマートフォン2)との間で、WF無線通信を可能とするための機能を有する。Wi−Fi通信部12による通信エリアも、BT通信部11と同様、車両の室内をカバーするように設定されている。   The Wi-Fi communication unit 12 includes a communication module for performing short-range wireless communication (hereinafter referred to as “WF wireless communication”) according to the Wi-Fi (registered trademark) standard, and includes the in-vehicle device 1 and an external communication device. (For example, the smartphone 2) has a function for enabling WF wireless communication. The communication area by the Wi-Fi communication unit 12 is also set so as to cover the interior of the vehicle, similarly to the BT communication unit 11.

タッチパネル表示部13は、タッチパネル式の表示装置を備え、表示画面に画像を表示する機能と、ユーザによる操作をタッチパネルから入力する機能とを有する。タッチパネル表示部13の表示画面は、車両に乗車したユーザ(特に運転者)が視認可能な位置に配置されている。また、音出力部14は、車両の室内に設けられたスピーカから音を出力する機能を有する。   The touch panel display unit 13 includes a touch panel display device, and has a function of displaying an image on a display screen and a function of inputting a user operation from the touch panel. The display screen of the touch panel display unit 13 is arranged at a position where a user (especially a driver) who gets on the vehicle can visually recognize. The sound output unit 14 has a function of outputting sound from a speaker provided in the vehicle interior.

広域通信部15は、携帯電話網を介した通信(各地に配置された携帯電話基地局等を介した広域無線通信)を行うための無線通信モジュールを備え、車載装置1と外部のセンタ3との間で、遠距離での無線通信を可能とするための機能を有する。   The wide area communication unit 15 includes a wireless communication module for performing communication via a mobile phone network (wide area wireless communication via mobile phone base stations or the like arranged in various places). Has a function for enabling wireless communication at a long distance.

制御部16は、CPU、ROM、RAM、IOポート等からなる周知のマイクロコンピュータを中心に構成されており、バスラインを介して接続されたBT通信部11、Wi−Fi通信部12、タッチパネル表示部13、音出力部14及び広域通信部15を制御する機能を有する。   The control unit 16 is configured around a known microcomputer including a CPU, ROM, RAM, IO port, and the like, and includes a BT communication unit 11, a Wi-Fi communication unit 12, and a touch panel display connected via a bus line. Unit 13, sound output unit 14, and wide area communication unit 15.

一方、スマートフォン2は、ナビゲーション機能や音楽再生機能などを有する多機能型携帯電話機であり、BT通信部21、Wi−Fi通信部22、表示部23、操作部24、音出力部25及び制御部26を備える。   On the other hand, the smartphone 2 is a multifunctional mobile phone having a navigation function, a music playback function, and the like, and includes a BT communication unit 21, a Wi-Fi communication unit 22, a display unit 23, an operation unit 24, a sound output unit 25, and a control unit. 26.

BT通信部21は、BT無線通信を行うための通信モジュールを備え、スマートフォン2と外部の通信機器(例えば車載装置1)との間で、BT無線通信を可能とするための機能を有する。   The BT communication unit 21 includes a communication module for performing BT wireless communication, and has a function for enabling BT wireless communication between the smartphone 2 and an external communication device (for example, the in-vehicle device 1).

Wi−Fi通信部22は、WF無線通信を行うための通信モジュールを備え、スマートフォン2と外部の通信機器(例えば車載装置1)との間で、WF無線通信を可能とするための機能を有する。   The Wi-Fi communication unit 22 includes a communication module for performing WF wireless communication, and has a function for enabling WF wireless communication between the smartphone 2 and an external communication device (for example, the in-vehicle device 1). .

表示部23は、表示画面に画像を表示する機能を有する。また、操作部24は、ユーザによる操作を入力する機能を有する。操作部24は、表示部23の表示画面の前面にタッチパネルとして設けられるものであってもよく、また、タッチパネルに代えて又はタッチパネルに加えて、ハードウェアボタンとして設けられるものであってもよい。   The display unit 23 has a function of displaying an image on the display screen. The operation unit 24 has a function of inputting an operation by the user. The operation unit 24 may be provided as a touch panel on the front surface of the display screen of the display unit 23, or may be provided as a hardware button instead of or in addition to the touch panel.

音出力部25は、スピーカから音を出力する機能を有する。
制御部26は、CPU、ROM、RAM、IOポート等からなる周知のマイクロコンピュータを中心に構成されており、バスラインを介して接続されたBT通信部21、Wi−Fi通信部22、表示部23及び音出力部25を制御する機能を有する。
The sound output unit 25 has a function of outputting sound from a speaker.
The control unit 26 is configured around a known microcomputer including a CPU, a ROM, a RAM, an IO port, and the like, and includes a BT communication unit 21, a Wi-Fi communication unit 22, and a display unit connected via a bus line. 23 and the sound output unit 25 are controlled.

[2.処理の概要]
次に、本実施形態の無線通信システムで実行される処理の概要について説明する。この無線通信システムにおいて、車載装置1は、車両に乗車したユーザが所持するスマートフォン2とVNC(Virtual Network Computing)接続し、スマートフォン2を車載装置1で遠隔操作するための遠隔操作処理を実行する。具体的には、車載装置1の制御部16は、スマートフォン2の表示部23で表示されている画像を表す画像信号を、Wi−Fi通信部12を介して入力し、入力した画像信号の表す画像をタッチパネル表示部13に表示させる画像表示処理を実行する。また、制御部16は、スマートフォン2の音出力部25から出力されている音を表す音声信号を、BT通信部11を介して入力し、入力した音声信号の表す音を音出力部14からも出力させる音出力処理を実行する。さらに、制御部16は、タッチパネル表示部13により入力された操作を表す操作信号をBT通信部11を介してスマートフォン2へ出力し、出力した操作信号の表す操作がスマートフォン2の操作部24で入力された場合の処理をスマートフォン2に実行させる操作出力処理を実行する。このような遠隔操作処理(画像表示処理、音出力処理及び操作出力処理)により、VNC接続中は、スマートフォン2を車載装置1で遠隔操作することができ、その結果、スマートフォン2の有する機能を車載装置1で利用することができる。
[2. Overview of processing]
Next, an outline of processing executed in the wireless communication system of the present embodiment will be described. In this wireless communication system, the in-vehicle device 1 performs VNC (Virtual Network Computing) connection with a smartphone 2 possessed by a user who has boarded the vehicle, and executes remote operation processing for remotely operating the smartphone 2 with the in-vehicle device 1. Specifically, the control unit 16 of the in-vehicle device 1 inputs an image signal representing an image displayed on the display unit 23 of the smartphone 2 via the Wi-Fi communication unit 12, and represents the input image signal. An image display process for displaying an image on the touch panel display unit 13 is executed. In addition, the control unit 16 inputs an audio signal representing the sound output from the sound output unit 25 of the smartphone 2 via the BT communication unit 11, and also outputs the sound represented by the input audio signal from the sound output unit 14. The sound output process to be output is executed. Further, the control unit 16 outputs an operation signal representing an operation input by the touch panel display unit 13 to the smartphone 2 via the BT communication unit 11, and an operation represented by the output operation signal is input by the operation unit 24 of the smartphone 2. The operation output process which makes the smart phone 2 perform the process at the time of being performed is performed. By such remote operation processing (image display processing, sound output processing, and operation output processing), the smartphone 2 can be remotely operated by the in-vehicle device 1 while the VNC is connected. It can be used in the device 1.

また、制御部16は、画像表示処理において、スマートフォン2が有するハードウェアボタン(ボタンコマンド)に対応する操作用画像(ソフトウェアボタンを表す画像)を、スマートフォン2の表示部23で表示される画像とともに、タッチパネル表示部13に表示させる。   In addition, the control unit 16 displays an operation image (an image representing a software button) corresponding to a hardware button (button command) included in the smartphone 2 in an image display process together with an image displayed on the display unit 23 of the smartphone 2. And displayed on the touch panel display unit 13.

例えば、図2(A)に示すように、タッチパネル式の表示画面A1及び1つのハードウェアボタンA2を備えるスマートフォンAとVNC接続した場合、車載装置1の表示画面には、スマートフォンAの表示画面A1に表示されている画像と、ハードウェアボタンA2を表す操作用画像とが表示される。なお、この例では、操作用画像に、標準機能ボタンN1,N2が付加されている。標準機能ボタンとは、スマートフォン2の機種に関係なく利用される機能が対応付けられたボタンであり、例えば、通話開始/停止ボタン、ハンズフリー通話/単独通話の切り替えボタン、音量調整ボタン、テンキーボタン、上下左右ボタン、メニューへ戻るボタンなどが挙げられる。このように、スマートフォン2のボタンコマンドに加え、車載装置1側の独自コマンドをソフトウェアボタンとして表示してもよい。   For example, as shown in FIG. 2A, when a VNC connection is made with a smartphone A having a touch panel display screen A1 and one hardware button A2, the display screen A1 of the smartphone A is displayed on the display screen of the in-vehicle device 1. And an operation image representing the hardware button A2 are displayed. In this example, standard function buttons N1 and N2 are added to the operation image. The standard function buttons are buttons associated with functions used regardless of the model of the smartphone 2, for example, a call start / stop button, a hands-free call / independent call switching button, a volume adjustment button, a numeric keypad button , Up / down / left / right buttons, and a menu return button. Thus, in addition to the button command of the smartphone 2, the unique command on the in-vehicle device 1 side may be displayed as a software button.

また、図2(B)に示すように、タッチパネル式でない表示画面B1及び多数のハードウェアボタンB2,B3,B4,…を備えるスマートフォンBとVNC接続した場合、車載装置1の表示画面には、スマートフォンBの表示画面B1に表示されている画像と、ハードウェアボタンB2,B3,B4を表す操作用画像とが表示される。なお、この例では、スマートフォンBが有するすべてのハードウェアボタンが操作用画像に表示されるのではなく、一部のハードウェアボタンが表示されている。   In addition, as shown in FIG. 2B, when a VNC connection is made with a smartphone B having a non-touch panel display screen B1 and a number of hardware buttons B2, B3, B4,. An image displayed on the display screen B1 of the smartphone B and an operation image representing the hardware buttons B2, B3, and B4 are displayed. In this example, all hardware buttons of the smartphone B are not displayed in the operation image, but some hardware buttons are displayed.

また、図2(C)に示すように、タッチパネル式の表示画面C1及び3つのハードウェアボタンC2,C3,C4を備えるスマートフォンCとVNC接続した場合、車載装置1の表示画面には、スマートフォンCの表示画面C1に表示されている画像と、ハードウェアボタンC2,C3,C4を表す操作用画像とが表示される。   In addition, as shown in FIG. 2C, when a VNC connection is made with a smartphone C having a touch panel display screen C1 and three hardware buttons C2, C3, C4, the display screen of the in-vehicle device 1 includes the smartphone C The image displayed on the display screen C1 and the operation image representing the hardware buttons C2, C3, and C4 are displayed.

このように、スマートフォン2の機種に応じて、その機種のスマートフォン2が有するハードウェアボタンに対応する操作用画像を表示する。具体的には、スマートフォン2が有するハードウェアボタンの種類、数、デザイン、配置などに応じた操作用画像を表示することで、ユーザが直感的に操作することができるようにしている。そして、制御部16は、操作出力処理において、操作用画像に対する操作を表す操作信号をBT通信部11を介してスマートフォン2へ出力し、出力した操作信号の表す操作がスマートフォン2の操作部24で入力された場合の処理をスマートフォン2に実行させる。なお、ここでいうデザインとは、例えば、色、形、配置、操作方法である。操作方法の例としては、例えば、受話操作をプッシュボタンにより操作するタイプのスマートフォンもあれば、スライドボタンにより操作するタイプのスマートフォンもある。そのため、操作方法も車載装置1とスマートフォン2とで合わせることができれば、より操作性を向上することができる。   Thus, according to the model of the smart phone 2, the operation image corresponding to the hardware button of the smart phone 2 of the model is displayed. Specifically, the user can operate intuitively by displaying an operation image corresponding to the type, number, design, arrangement, and the like of the hardware buttons of the smartphone 2. Then, in the operation output process, the control unit 16 outputs an operation signal representing an operation on the operation image to the smartphone 2 via the BT communication unit 11, and the operation represented by the output operation signal is performed by the operation unit 24 of the smartphone 2. The process when input is executed by the smartphone 2. In addition, a design here is a color, a shape, arrangement | positioning, and an operation method, for example. As an example of the operation method, for example, there are a smartphone of a type that operates a receiving operation with a push button, and a smartphone of a type that operates with a slide button. Therefore, if the operation method can be matched between the in-vehicle device 1 and the smartphone 2, the operability can be further improved.

また、VNC接続は、車載装置1が、遠隔操作処理の対象(VNC接続の候補)として登録されているスマートフォン2との間で、BT無線通信で通信接続がされたことを条件として開始される。すなわち、ユーザは、遠隔操作に用いるスマートフォン2を、車載装置1にあらかじめ登録する。この登録の際に、BT無線通信のためのペアリング設定を行うことにより、それ以降は、スマートフォン2をBT無線通信が可能な状態(例えば、電源及びBT無線通信の設定がオンにされた状態)で車両に持ち込むだけで、車載装置1とスマートフォン2とが自動的にBT無線通信で通信接続される。そして、BT無線通信で通信接続されると、スマートフォン2から車載装置1へVNC要求が送信され、VNC接続される。   The VNC connection is started on the condition that the in-vehicle device 1 is connected to the smartphone 2 registered as a target for remote operation processing (candidate for VNC connection) by BT wireless communication. . That is, the user registers the smartphone 2 used for remote operation in the in-vehicle device 1 in advance. By performing the pairing setting for BT wireless communication at the time of this registration, the smartphone 2 can be in BT wireless communication thereafter (for example, the power supply and BT wireless communication settings are turned on) ), The in-vehicle device 1 and the smartphone 2 are automatically connected for communication by BT wireless communication. When the communication connection is established by the BT wireless communication, a VNC request is transmitted from the smartphone 2 to the in-vehicle device 1 to establish a VNC connection.

[3.処理手順]
次に、車載装置1で実行される具体的な処理手順について説明する。図3は、車載装置1の制御部16が実行する接続処理のフローチャートである。制御部16は、図3の接続処理を開始すると、まずS101で、スマートフォン2からBT通信部11を介してVNC要求を受信したか否かを判定し(換言すれば、VNC要求の有無を監視し)、VNC要求を受信するまで、監視を継続する。そして、制御部16は、S101でVNC要求を受信したと判定すると、S102へ移行し、VNC要求の送信元であるスマートフォン2とのVNC接続を開始する。
[3. Processing procedure]
Next, a specific processing procedure executed by the in-vehicle device 1 will be described. FIG. 3 is a flowchart of connection processing executed by the control unit 16 of the in-vehicle device 1. When the connection process of FIG. 3 is started, the control unit 16 first determines in S101 whether or not a VNC request has been received from the smartphone 2 via the BT communication unit 11 (in other words, monitors whether there is a VNC request) Monitoring) until a VNC request is received. When determining that the VNC request has been received in S101, the control unit 16 proceeds to S102 and starts the VNC connection with the smartphone 2 that is the transmission source of the VNC request.

続いて、制御部16は、S103で、VNC接続の対象となるスマートフォン2から、そのスマートフォン2の機種を特定するための機種特定情報を取得する。機種特定情報は、それ自体が機種を表す情報であってもよく、また、機種を特定するための手掛かりになる情報(例えば、製造メーカ、キャリア、シリアルナンバー、IPアドレスなど)であってもよい。例えば、1つの機種しか有しない製造メーカのスマートフォン2であれば、製造メーカから機種を特定することができる。また、製造メーカとキャリアとの組み合わせて機種を特定することができる場合もある。また、車載装置1への登録時にスマートフォン2の固有情報(例えばシリアルナンバーやIPアドレス)と機種とを対応付けて記憶しておくことで、固有情報から機種を特定することができる。なお、機種特定情報の取得手順は特に限定されるものではなく、例えば、VNC要求の受信後に要求元のスマートフォン2にBT通信部11を介して機種特定情報の要求を送信するように構成してもよく、また、あらかじめスマートフォン2がVNC要求とともに機種特定情報を送信するように構成してもよい。   Subsequently, in S103, the control unit 16 acquires model specifying information for specifying the model of the smartphone 2 from the smartphone 2 as a target of VNC connection. The model specifying information may be information representing the model itself, or may be information (for example, manufacturer, carrier, serial number, IP address, etc.) that serves as a clue for specifying the model. . For example, if the manufacturer's smartphone 2 has only one model, the model can be specified from the manufacturer. In some cases, a model can be specified by a combination of a manufacturer and a carrier. Further, by storing the unique information (for example, serial number or IP address) of the smartphone 2 and the model in association with each other at the time of registration in the in-vehicle device 1, the model can be specified from the unique information. In addition, the acquisition procedure of model specific information is not specifically limited, For example, it is comprised so that the request | requirement of model specific information may be transmitted via the BT communication part 11 to the request origin smart phone 2 after reception of a VNC request. Alternatively, the smartphone 2 may be configured to transmit the model specifying information together with the VNC request in advance.

続いて、制御部16は、S104で、VNC接続の対象となるスマートフォン2の機種を、機種特定情報に基づき特定することができたか否かを判定する。そして、制御部16は、S104で機種を特定することができたと判定した場合には、S105へ移行し、特定した機種に対応する操作用画像を記憶しているか否かを判定する。   Subsequently, in S104, the control unit 16 determines whether or not the model of the smartphone 2 that is the target of VNC connection can be specified based on the model specifying information. If the control unit 16 determines in S104 that the model has been specified, the control unit 16 proceeds to S105, and determines whether or not an operation image corresponding to the specified model is stored.

このS105で、機種に対応する操作用画像を記憶していないと判定した場合には、S106へ移行し、操作用画像をセンタ3から取得した後、S107へ移行する。具体的には、広域通信部15を介して機種を表す情報をセンタ3へ送信する。センタ3は、複数種類の機種に対応する操作用画像を記憶するデータ保有部31を備えており、車載装置1から機種を表す情報を受信すると、その機種に対応する操作用画像を返信する。一方、S105で、機種に対応する操作用画像を記憶していると判定した場合には、そのままS107へ移行する。   If it is determined in S105 that the operation image corresponding to the model is not stored, the process proceeds to S106, and after obtaining the operation image from the center 3, the process proceeds to S107. Specifically, information representing the model is transmitted to the center 3 via the wide area communication unit 15. The center 3 includes a data holding unit 31 that stores operation images corresponding to a plurality of types of models. When information representing a model is received from the in-vehicle device 1, the center 3 returns an operation image corresponding to the model. On the other hand, if it is determined in S105 that the operation image corresponding to the model is stored, the process proceeds to S107 as it is.

S107では、制御部16は、VNC接続の対象となるスマートフォン2の機種に対応する操作用画像をタッチパネル表示部13に表示させた後、S109へ移行する。一方、前述したS104で、機種を特定することができなかったと判定した場合には、S108へ移行し、あらかじめ用意されているデフォルトの(例えば標準的なボタンが配置された)操作用画像をタッチパネル表示部13に表示させた後、S109へ移行する。   In S107, the control unit 16 causes the touch panel display unit 13 to display an operation image corresponding to the model of the smartphone 2 that is a target of VNC connection, and then proceeds to S109. On the other hand, if it is determined in S104 described above that the model could not be specified, the process proceeds to S108, and a default operation image (for example, standard buttons arranged) prepared in advance is displayed on the touch panel. After displaying on the display unit 13, the process proceeds to S109.

S109では、制御部16は、VNC接続の対象となるスマートフォン2の機種が、タッチパネルを備える機種であるか否かを判定する。そして、S109で、タッチパネルを備える機種であると判定した場合には、S110へ移行し、操作用画像を非表示にして、その分、スマートフォン2の表示画面に表示されている画像を大きく表示させる。例えば前述した図2(A)の表示画面であれば、図4に示すように、車載装置1の表示画面の全域に、スマートフォンAの表示画面A1に表示されている画像が表示される。ただし、操作用画像の表示/非表示を切り替えるための切替ボタンSを表示画面の一部に表示しておき、ユーザの操作に応じて操作用画像を表示させ、再度非表示にする操作を可能とする。一方、S109で、タッチパネルを備える機種でないと判定した場合には、操作用画像を非表示にしない。その後、VNC接続が終了すると、図3の接続処理を終了する。   In S109, the control unit 16 determines whether or not the model of the smartphone 2 that is the target of VNC connection is a model that includes a touch panel. If it is determined in S109 that the model is equipped with a touch panel, the process proceeds to S110, the operation image is hidden, and the image displayed on the display screen of the smartphone 2 is displayed larger accordingly. . For example, if it is the display screen of FIG. 2 (A) mentioned above, as shown in FIG. 4, the image currently displayed on the display screen A1 of the smart phone A will be displayed in the whole region of the display screen of the vehicle-mounted apparatus 1. FIG. However, a switching button S for switching between display / non-display of the operation image is displayed on a part of the display screen, the operation image is displayed according to the user's operation, and an operation for hiding it again is possible. And On the other hand, if it is determined in S109 that the model does not include a touch panel, the operation image is not hidden. Thereafter, when the VNC connection is terminated, the connection process of FIG. 3 is terminated.

[4.効果]
以上説明したように、本実施形態の車載装置1によれば、VNC接続の対象となるスマートフォン2の機種に応じて、異なる操作用画像をタッチパネル表示部13に表示させることができる。したがって、スマートフォン2の機種に関係なく共通の操作用画像が表示される構成と比較して、操作用画像に対する操作を行いやすくする(操作性を向上させる)ことができる。
[4. effect]
As described above, according to the in-vehicle device 1 of the present embodiment, different operation images can be displayed on the touch panel display unit 13 according to the model of the smartphone 2 that is the target of VNC connection. Therefore, compared to a configuration in which a common operation image is displayed regardless of the model of the smartphone 2, it is possible to easily perform an operation on the operation image (improve operability).

また、本実施形態の車載装置1は、VNC接続の対象となるスマートフォン2がタッチパネルを有しない場合に操作用画像を表示し、タッチパネルを有する場合には操作用画像を非表示にする(S109,S110)。このように、ハードウェアボタンが必要とされる度合いが低いスマートフォン2の場合には、操作用画像を表示させないようにすることで、スマートフォン2の表示部23で表示される画像のための表示領域を大きくすることができる。しかも、操作用画像の表示/非表示を切り替えるための切替ボタンSを表示し(S110)、操作用画像を表示させる表示モードと、操作用画像を表示させない表示モードとを、切替ボタンSに対する操作に応じて切り替えるため、操作用画像を必要に応じて表示させることができる。   Further, the in-vehicle device 1 of the present embodiment displays an operation image when the smartphone 2 that is a target of VNC connection does not have a touch panel, and hides the operation image when it has a touch panel (S109, S110). In this manner, in the case of the smartphone 2 that requires a low degree of hardware buttons, the display area for the image displayed on the display unit 23 of the smartphone 2 is prevented by not displaying the operation image. Can be increased. In addition, the switching button S for switching between display / non-display of the operation image is displayed (S110), and the display mode for displaying the operation image and the display mode for not displaying the operation image are operated with respect to the switch button S. Therefore, the operation image can be displayed as necessary.

また、本実施形態の車載装置1は、記憶していない操作用画像をセンタ3から取得するようにしているため(S105,S106)、VNC接続の対象となるスマートフォン2の機種に対応する操作用画像を記憶していない場合にも、その機種に対応する操作用画像を表示することができる。   Moreover, since the vehicle-mounted apparatus 1 of this embodiment is acquiring the operation image which is not memorize | stored from the center 3 (S105, S106), it is for operation corresponding to the model of the smart phone 2 used as the object of VNC connection. Even when no image is stored, an operation image corresponding to the model can be displayed.

また、本実施形態の車載装置1は、スマートフォン2の機種が特定できない場合には、デフォルトの操作用画像を表示するようにしているため(S104,S108)、VNC接続の対象となるスマートフォン2の機種が特定できない場合にも、標準的なハードウェアボタンなどを操作用画像として表示することができる。   Moreover, since the vehicle-mounted apparatus 1 of this embodiment displays the default operation image when the model of the smartphone 2 cannot be specified (S104, S108), the smartphone 2 that is the target of VNC connection. Even when the model cannot be specified, a standard hardware button or the like can be displayed as an operation image.

また、本実施形態の車載装置1は、スマートフォン2の固有情報と機種とを対応付けて記憶し、機種特定情報として取得される固有情報に基づき機種を特定することができる(S103,S104)。このように、機種特定情報が機種そのものを表すものでない場合にも、機種特定情報に基づいて機種を特定することができる。   Moreover, the vehicle-mounted apparatus 1 of this embodiment can associate and memorize | store the specific information and model of the smart phone 2, and can specify a model based on the specific information acquired as model specific information (S103, S104). Thus, even when the model specifying information does not represent the model itself, the model can be specified based on the model specifying information.

なお、車載装置1が、特許請求の範囲に記載の車載装置の一例に相当し、BT通信部11及びWi−Fi通信部12が、無線通信手段の一例に相当し、タッチパネル表示部13が、表示手段及び入力手段の一例に相当し、制御部16が、制御装置の一例に相当する。また、接続処理が、実行手段としての処理の一例に相当し、S103の処理が、入力処理手段としての処理の一例に相当し、S104〜S110の処理が、表示処理手段としての処理の一例に相当する。また、スマートフォン2が、携帯装置の一例に相当し、表示部23が、表示部の一例に相当する。また、センタ3が、外部装置の一例に相当する。   The in-vehicle device 1 corresponds to an example of the in-vehicle device described in the claims, the BT communication unit 11 and the Wi-Fi communication unit 12 correspond to an example of a wireless communication unit, and the touch panel display unit 13 It corresponds to an example of a display unit and an input unit, and the control unit 16 corresponds to an example of a control device. The connection process corresponds to an example of a process as an execution unit, the process of S103 corresponds to an example of a process as an input processing unit, and the processes of S104 to S110 are examples of a process as a display processing unit. Equivalent to. The smartphone 2 corresponds to an example of a mobile device, and the display unit 23 corresponds to an example of a display unit. The center 3 corresponds to an example of an external device.

[5.他の実施形態]
以上、本発明の実施形態について説明したが、本発明は、上記実施形態に限定されることなく、種々の形態を採り得ることは言うまでもない。
[5. Other Embodiments]
As mentioned above, although embodiment of this invention was described, it cannot be overemphasized that this invention can take a various form, without being limited to the said embodiment.

(1)上記実施形態では、車載装置1が、VNC接続の対象となるスマートフォン2がタッチパネルを有しない場合に操作用画像を表示し、タッチパネルを有する場合には操作用画像を非表示にするようにしているが(S109,S110)、これに限定されるものではない。例えば、機種特定情報に基づき特定される機種のスマートフォン2が有するハードウェアボタンの数が、所定のしきい値以上(例えば4つ以上)の場合に操作用画像を表示し、しきい値未満の場合には操作用画像を非表示にするようにしてもよい。ハードウェアボタンの数が少ないほど、ハードウェアボタンが必要とされる度合いが低いからである。このようにしても、上記実施形態と同様の効果を得ることができる。   (1) In the above embodiment, the in-vehicle device 1 displays an operation image when the smartphone 2 to be VNC connected does not have a touch panel, and hides the operation image when the smartphone 2 has a touch panel. However, the present invention is not limited to this (S109, S110). For example, when the number of hardware buttons of the smartphone 2 of the model specified based on the model specifying information is greater than or equal to a predetermined threshold value (for example, four or more), an operation image is displayed, In this case, the operation image may be hidden. This is because the smaller the number of hardware buttons, the lower the degree of need for hardware buttons. Even if it does in this way, the effect similar to the said embodiment can be acquired.

(2)上記実施形態では、車載装置1が、VNC接続の対象となるスマートフォン2の機種に対応する操作用画像を記憶していない場合に、その操作用画像をセンタ3から取得するようにしているが(S105,S106)、これに代えて、例えばそのスマートフォン2から操作用画像を取得するようにしてもよい。また、車載装置1が、スマートフォン2から、そのスマートフォン2が有するハードウェアボタンの情報(ボタンコマンド)を取得し、取得したボタンコマンドに基づいて操作用画像を生成してもよい。また、スマートフォン2から機種特定情報を入力して機種を特定し、特定した機種のハードウェアボタンに対応したデザインのボタンを表示するという方法に代えて、車載装置1が、スマートフォン2から、ボタンの数や種類だけでなくデザイン情報も入力し、入力した情報に対応したデザインのボタンを表示するようにしてもよい。このような方法でも、VNC接続の対象となるスマートフォン2のハードウェアボタンに合ったボタン表示とすることができ、操作性が向上する。   (2) In the above embodiment, when the in-vehicle device 1 does not store an operation image corresponding to the model of the smartphone 2 that is a target of VNC connection, the operation image is acquired from the center 3. However, instead of this, for example, an operation image may be acquired from the smartphone 2. Moreover, the vehicle-mounted apparatus 1 may acquire the information (button command) of the hardware button which the smart phone 2 has from the smart phone 2, and may produce | generate the image for operation based on the acquired button command. Further, instead of a method of inputting model specifying information from the smartphone 2 and specifying a model, and displaying a button having a design corresponding to the hardware button of the specified model, the in-vehicle device 1 receives the button from the smartphone 2. Not only the number and type, but also design information may be input, and a button of a design corresponding to the input information may be displayed. Even with such a method, it is possible to display buttons that match the hardware buttons of the smartphone 2 that is the target of VNC connection, and the operability is improved.

(3)上記実施形態では、スマートフォン2を車載装置1で遠隔操作するためにVNC接続する構成を例示したが、遠隔操作の手法は特に限定されず、例えば、車載情報端末と携帯端末との連携を可能にするインタフェース規格であるターミナルモードに基づき遠隔操作する構成でもよい。要するに、携帯装置の表示部で表示される画像を無線通信手段を介して入力して表示手段に表示させる画像表示処理と、入力手段により入力された操作を無線通信手段を介して携帯装置へ出力する操作出力処理とを実行するものであればよい。   (3) In the above embodiment, the configuration in which VNC connection is performed in order to remotely operate the smartphone 2 with the in-vehicle device 1 is exemplified. However, the remote operation method is not particularly limited, and for example, cooperation between the in-vehicle information terminal and the mobile terminal The remote control may be performed based on the terminal mode, which is an interface standard that enables the above. In short, an image display process in which an image displayed on the display unit of the portable device is input via the wireless communication means and displayed on the display means, and an operation input by the input means is output to the portable device via the wireless communication means. Any operation output process may be performed.

(4)上記実施形態では、車載装置1とスマートフォン2とが無線通信を行う構成を例示したが、これに代えて、USBケーブルなどを介して有線通信を行う構成としてもよく、また、有線通信と無線通信とを併用する構成としてもよい。   (4) In the above embodiment, the configuration in which the in-vehicle device 1 and the smartphone 2 perform wireless communication is illustrated, but instead of this, a configuration in which wired communication is performed via a USB cable or the like may be used. And wireless communication may be used together.

(5)上記実施形態では、携帯装置としてスマートフォンを例示したが、これ以外の携帯電話機でもよく、また、携帯電話機以外の携帯装置(例えばタブレット端末)でもよい。   (5) In the said embodiment, although the smart phone was illustrated as a portable apparatus, a portable telephone other than this may be sufficient, and portable apparatuses (for example, tablet terminal) other than a portable telephone may be sufficient.

(6)本発明の制御装置は、制御部16の一部(チップモジュール)として構成してもよい。   (6) The control device of the present invention may be configured as a part (chip module) of the control unit 16.

1…車載装置、2…スマートフォン、3…センタ、11…BT通信部、12…Wi−Fi通信部、13…タッチパネル表示部、14…音出力部、15…広域通信部、16…制御装置、16…制御部、21…BT通信部、22…Wi−Fi通信部、23…表示部、24…操作部、25…音出力部、26…制御部、31…データ保有部、A1,B1,C1…表示画面、A2,B2,B3,B4,C2,C3,C4…ハードウェアボタン、N1…標準機能ボタン、S…切替ボタン   DESCRIPTION OF SYMBOLS 1 ... In-vehicle apparatus, 2 ... Smartphone, 3 ... Center, 11 ... BT communication part, 12 ... Wi-Fi communication part, 13 ... Touch panel display part, 14 ... Sound output part, 15 ... Wide area communication part, 16 ... Control apparatus, DESCRIPTION OF SYMBOLS 16 ... Control part, 21 ... BT communication part, 22 ... Wi-Fi communication part, 23 ... Display part, 24 ... Operation part, 25 ... Sound output part, 26 ... Control part, 31 ... Data holding part, A1, B1, C1, display screen, A2, B2, B3, B4, C2, C3, C4 ... hardware buttons, N1 ... standard function buttons, S ... switch buttons

Claims (5)

携帯装置と通信を行うための通信手段、画像を表示する表示手段、及び、操作を入力する入力手段、を備える車載装置において、前記携帯装置を遠隔操作するための遠隔操作処理を実行する制御装置であって、
前記携帯装置の表示部で表示される画像を前記通信手段を介して入力して前記表示手段に表示させる画像表示処理と、前記入力手段により入力された操作を前記通信手段を介して前記携帯装置へ出力する操作出力処理と、を前記遠隔操作処理として実行する実行手段を備え、
前記実行手段は、
前記携帯装置の機種を特定するための機種特定情報を前記通信手段を介して入力する入力処理手段と、
前記機種特定情報に基づいて、前記携帯装置が有するハードウェアボタンに対応する操作用画像を、前記携帯装置の表示部で表示される画像とともに前記表示手段に表示させる表示処理手段と、
を備え
前記表示処理手段は、前記機種特定情報に基づき特定される機種の前記携帯装置が有するハードウェアボタンの数が所定のしきい値以上である場合に、前記携帯装置の表示部で表示される画像とともに前記操作用画像を前記表示手段に表示させ、前記機種特定情報に基づき特定される機種の前記携帯装置が有するハードウェアボタンの数が前記しきい値未満である場合には、前記操作用画像を前記表示手段に表示させない
ことを特徴とする制御装置。
In a vehicle-mounted device comprising communication means for communicating with a portable device, display means for displaying an image, and input means for inputting an operation, a control device for executing remote operation processing for remotely operating the portable device Because
An image display process in which an image displayed on the display unit of the portable device is input through the communication unit and displayed on the display unit, and an operation input by the input unit is input through the communication unit. Operation output processing to output to, and execution means for executing as the remote operation processing,
The execution means includes
Input processing means for inputting model specifying information for specifying the model of the portable device via the communication means;
Display processing means for causing the display means to display an operation image corresponding to a hardware button of the portable device together with an image displayed on the display unit of the portable device based on the model specifying information;
Equipped with a,
The display processing unit displays an image displayed on the display unit of the portable device when the number of hardware buttons included in the portable device of the model specified based on the model specifying information is equal to or greater than a predetermined threshold value. When the number of hardware buttons included in the portable device of the model specified based on the model specifying information is less than the threshold value, the operation image is displayed on the display means. Is not displayed on the display means
A control device characterized by that.
請求項1に記載の制御装置であって、
前記表示処理手段は、前記操作用画像を前記表示手段に表示させる表示モードと、前記操作用画像を前記表示手段に表示させない表示モードとを、前記入力手段により入力される操作に応じて切り替える
ことを特徴とする制御装置。
The control device according to claim 1 ,
The display processing means switches between a display mode in which the operation image is displayed on the display means and a display mode in which the operation image is not displayed on the display means in accordance with an operation input by the input means. A control device characterized by.
請求項1又は請求項2に記載の制御装置であって、
前記表示処理手段は、前記機種特定情報に基づき特定される機種に対応する前記操作用画像を、外部装置から取得する
ことを特徴とする制御装置。
The control device according to claim 1 or 2 ,
The control apparatus, wherein the display processing unit acquires the operation image corresponding to a model specified based on the model specifying information from an external device.
請求項1から請求項までのいずれか1項に記載の制御装置であって、
前記表示処理手段は、前記携帯装置の機種が特定できない場合には、デフォルトの操作用画像を、前記携帯装置の表示部で表示される画像とともに前記表示手段に表示させる
ことを特徴とする制御装置。
The control device according to any one of claims 1 to 3 , wherein
The display processing unit displays a default operation image on the display unit together with an image displayed on the display unit of the portable device when the model of the portable device cannot be specified. .
請求項1から請求項までのいずれか1項に記載の制御装置であって、
前記表示処理手段は、前記携帯装置の固有情報と機種とを対応付けて記憶し、前記入力処理手段により前記機種特定情報として取得される前記携帯装置の固有情報に基づき、前記携帯装置の機種を特定する
ことを特徴とする制御装置。
The control device according to any one of claims 1 to 4 , wherein:
The display processing means stores the unique information and model of the portable device in association with each other, and determines the model of the portable device based on the unique information of the portable device acquired as the model specifying information by the input processing means. A control device characterized by specifying.
JP2011227054A 2011-10-14 2011-10-14 Control device Expired - Fee Related JP5573809B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2011227054A JP5573809B2 (en) 2011-10-14 2011-10-14 Control device
PCT/JP2012/004120 WO2013054455A1 (en) 2011-10-14 2012-06-26 Control device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011227054A JP5573809B2 (en) 2011-10-14 2011-10-14 Control device

Publications (2)

Publication Number Publication Date
JP2013090051A JP2013090051A (en) 2013-05-13
JP5573809B2 true JP5573809B2 (en) 2014-08-20

Family

ID=48081527

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011227054A Expired - Fee Related JP5573809B2 (en) 2011-10-14 2011-10-14 Control device

Country Status (2)

Country Link
JP (1) JP5573809B2 (en)
WO (1) WO2013054455A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014037992A1 (en) * 2012-09-04 2014-03-13 三菱電機株式会社 Information apparatus
US9302676B2 (en) * 2013-09-09 2016-04-05 Visteon Global Technologies, Inc. Methods and systems for simulating a smart device user interface on a vehicle head unit

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003244343A (en) * 2002-02-21 2003-08-29 Toyota Motor Corp Display device, portable terminal and information display system
JPWO2008026529A1 (en) * 2006-08-31 2010-01-21 クラリオン株式会社 Hands-free communication device and sound quality adjustment device
JP4836885B2 (en) * 2007-07-04 2011-12-14 シャープ株式会社 Non-contact input device for mobile communication terminal, mobile communication terminal and mail creation system
JP2010130552A (en) * 2008-11-28 2010-06-10 Fujitsu Ten Ltd Remote control system and remote control method

Also Published As

Publication number Publication date
WO2013054455A1 (en) 2013-04-18
JP2013090051A (en) 2013-05-13

Similar Documents

Publication Publication Date Title
US9055158B2 (en) Vehicular apparatus, mobile phone, and instrument coordination system
US8676270B2 (en) Display apparatus, mobile communication terminal and display system
JP5801351B2 (en) Portable electronic device linkage system, information providing apparatus, portable electronic device, and program for portable electronic device
US8706034B2 (en) On-vehicle information processing apparatus and method
JP2013012825A (en) Short-range communication system, vehicle apparatus, and portable communication terminal
US20140308989A1 (en) Setting systems and setting methods
JP5726008B2 (en) Display control apparatus and display control method for connected device list
JP2010130552A (en) Remote control system and remote control method
JP5573809B2 (en) Control device
JP5556785B2 (en) Control device and radio communication system
CN111417929A (en) Interface display method and control terminal
JP5692332B2 (en) VEHICLE DEVICE AND DEVICE LINKING SYSTEM
US20220335818A1 (en) Electronic device for controlling external electronic device and method thereof
EP3563216B1 (en) Method and apparatus for controlling a mobile terminal
KR20130066722A (en) Interlocking type avn terminal and method driving thereof
US9197729B2 (en) Method for operating a mobile telephone
KR20120094700A (en) Vehicle multimedia system for supporting smartphone's remote control and method thereof
CN108605074B (en) Method and equipment for triggering voice function
JP5451581B2 (en) Method for reducing power consumption of mobile phone terminals
TW201408035A (en) Handheld device
JP6047948B2 (en) Vehicle equipment
KR20130095711A (en) Method and apparatus for generating user configurable user interface in a portable terminal
KR20130054030A (en) Wireless hands free apparatus with auto connecting function and method thereof
JP2011103560A (en) Hands-free call device
TW201717601A (en) Vehicle wireless off-hook device and method comprising an instrument unit, a prompt unit, and an off-hook unit

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140401

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140603

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140616

R151 Written notification of patent or utility model registration

Ref document number: 5573809

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees