JP6032286B2 - In-vehicle device, portable terminal control method and program - Google Patents

In-vehicle device, portable terminal control method and program Download PDF

Info

Publication number
JP6032286B2
JP6032286B2 JP2014532833A JP2014532833A JP6032286B2 JP 6032286 B2 JP6032286 B2 JP 6032286B2 JP 2014532833 A JP2014532833 A JP 2014532833A JP 2014532833 A JP2014532833 A JP 2014532833A JP 6032286 B2 JP6032286 B2 JP 6032286B2
Authority
JP
Japan
Prior art keywords
information
screen
touch panel
smartphone
vehicle device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014532833A
Other languages
Japanese (ja)
Other versions
JPWO2014034193A1 (en
Inventor
英徳 塚原
英徳 塚原
淳 内村
淳 内村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2014034193A1 publication Critical patent/JPWO2014034193A1/en
Application granted granted Critical
Publication of JP6032286B2 publication Critical patent/JP6032286B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6075—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6075—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)
  • Telephone Function (AREA)

Description

本発明は、車載機、携帯端末制御方法およびプログラムに関し、例えば、スマートフォン等の携帯端末を制御する車載機、携帯端末制御方法およびプログラムに関する。   The present invention relates to an in-vehicle device, a portable terminal control method, and a program, and for example, relates to an in-vehicle device, a portable terminal control method, and a program that control a portable terminal such as a smartphone.

近年、通信技術の進歩によって情報端末は多機能化し、スマートフォンやタブレット端末などの持ち運び可能な携帯型情報端末が登場している。携帯型情報端末においては、電子メールの送受信だけでなく、インターネットに接続したウェブサーバからＨＴＭＬ、ＸＭＬなどのマークアップ言語で記述された文書ファイルを取得し、ウェブページを閲覧するブラウザ機能を標準的に有する。このような携帯型情報端末では、ボタン入力に加えて、画面上を指でタッチ等することで入力操作できるタッチパネル手段を備えるものが主流である。   In recent years, information terminals have become multifunctional due to advances in communication technology, and portable information terminals such as smartphones and tablet terminals have appeared. In portable information terminals, in addition to sending and receiving e-mails, a standard browser function that obtains document files written in markup languages such as HTML and XML from a web server connected to the Internet and browses web pages Have. In such a portable information terminal, in addition to button input, a mainstream is provided with touch panel means that can perform an input operation by touching the screen with a finger or the like.

自動車に搭載されるカーナビゲーションシステム（以下、単に「カーナビ」とも称する）などの車載情報端末においても、従来のルート検索機能やテレビ観賞機能に加えて、インターネット通信を利用した電子メールの送受信、ホームページの閲覧、電子商取引など様々な情報の収集を可能にするものが発売されている。   In-vehicle information terminals such as car navigation systems (hereinafter also simply referred to as “car navigation”) installed in automobiles, in addition to the conventional route search function and TV viewing function, send and receive e-mails using Internet communication, and websites Products that enable the collection of various information such as browsing and electronic commerce are on sale.

ところで、自動車を所有するユーザの多くは、自動車に搭載される車載情報端末とともに、無線通信によってデータ送受信する機能を有する携帯型情報端末を保有している。車載情報端末においてインターネット通信を利用するためには、インターネットアクセスや最新情報入手、電子メール等の機能を加えるために通信機能が必要となるが、ユーザがカーナビなどの車載情報端末専用に通信費用を支払うことは高コストになるため難しい。従って、多くのユーザは所有している携帯型情報端末と車載情報端末を無線ＬＡＮ、 Ｂｌｕｅｔｏｏｔｈ（登録商標）、有線ケーブル等のインターフェイスを介して接続し、携帯型情報端末の通信機能を用いて、車載情報端末に通信機能を提供する方法を取りつつある。   By the way, many users who own a car have a portable information terminal having a function of transmitting and receiving data by wireless communication together with an in-vehicle information terminal mounted on the car. In order to use Internet communication in an in-vehicle information terminal, a communication function is required to add functions such as Internet access, latest information acquisition, and e-mail. It is difficult to pay because it is expensive. Therefore, many users connect their own portable information terminal and in-vehicle information terminal via an interface such as a wireless LAN, Bluetooth (registered trademark), a wired cable, etc., and use the communication function of the portable information terminal, A method of providing a communication function to an in-vehicle information terminal is being taken.

特許文献１には、スマートフォンと通信するカーナビゲーション装置が記載されている。   Patent Document 1 describes a car navigation device that communicates with a smartphone.

また、カーナビゲーション装置のような車載機でスマートフォンを操作することを可能にする技術も知られている。   In addition, a technology that enables a smartphone to be operated with an in-vehicle device such as a car navigation device is also known.

この技術では、スマートフォンに対して、車載機による遠隔操作を可能にするための設定変更が行われ、遠隔操作用の仕組み（具体的には、車載機による遠隔操作用の専用のアプリケーションプログラム）が入れ込まれる。   In this technology, settings are changed for a smartphone to enable remote operation by an in-vehicle device, and a remote operation mechanism (specifically, a dedicated application program for remote operation by the in-vehicle device) is provided. It is inserted.

なお、この設定変更や遠隔操作用の仕組みの入れ込みは、通常禁止されているスマートフォンに対する遠隔操作を許容するための操作であり、管理者権限を有する者でないと行えない特殊な作業である。   It should be noted that the setting change or the remote operation mechanism is an operation for allowing a remote operation to a normally prohibited smartphone, and is a special operation that can only be performed by a person with administrator authority.

特開２０１２−１４１２０１号公報JP 2012-141001 A

車載機で携帯端末の操作を可能にする技術では、車載機による遠隔操作用の専用のアプリケーションプログラムが必要となり、車載機による遠隔操作用の専用のアプリケーションプログラムを携帯端末にインストールしなければならないという課題があった。また、携帯端末は、車載機による遠隔操作用の専用のアプリケーションプログラムを動作させて車載機からの情報を解析する必要があるため、操作情報に対する追従性つまり操作性が良くなかった。   In the technology that enables operation of the mobile terminal with the in-vehicle device, a dedicated application program for remote operation by the in-vehicle device is required, and a dedicated application program for remote operation by the in-vehicle device must be installed in the mobile terminal There was a problem. In addition, since the mobile terminal needs to analyze information from the in-vehicle device by operating a dedicated application program for remote operation by the in-vehicle device, the followability to the operation information, that is, the operability is not good.

本発明の目的は、上記課題を解決可能な車載機、携帯端末制御方法およびプログラムを提供することである。   An object of the present invention is to provide an in-vehicle device, a portable terminal control method, and a program that can solve the above-described problems.

本発明の車載機は、
所定通信方式に対応する携帯端末と通信する車載機であって、
前記車載機への操作としてタッチ操作を検出するタッチパネルと、
前記タッチパネルが検出した車載機への操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手段と、
前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手段と、
を含み、
前記生成手段は、前記タッチパネルにて検出されたタッチ操作に応じて、前記タッチパネル上での前記タッチ操作の位置を前記携帯端末の表示画面上の操作位置に変換し、前記携帯端末の表示画面上に設定された基準位置から当該携帯端末の表示画面上の操作位置への移動量を前記操作情報として生成し、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する。 The in-vehicle device of the present invention is
An in-vehicle device that communicates with a portable terminal corresponding to a predetermined communication method,
A touch panel for detecting a touch operation as an operation to the in-vehicle device,
In response to an operation on the in-vehicle device detected by the touch panel, a generation unit that generates operation information corresponding to the operation and complying with the predetermined communication method,
Communication means for transmitting the operation information to the portable terminal by the predetermined communication method;
Only including,
The generation means converts the position of the touch operation on the touch panel into an operation position on the display screen of the mobile terminal according to the touch operation detected by the touch panel, and displays the position on the display screen of the mobile terminal. A movement amount from the reference position set to the operation position on the display screen of the mobile terminal is generated as the operation information, and the reference position is changed according to the end position of the touch operation on the touch panel. .

本発明の携帯端末制御方法は、
所定通信方式に対応する携帯端末と通信する車載機が行う携帯端末制御方法であって、
前記車載機への操作としてタッチ操作をタッチパネルが検出する検出ステップと、
前記タッチパネルが検出した操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成ステップと、
前記操作情報を前記所定通信方式で前記携帯端末に送信する通信ステップと、を含み、
前記生成ステップは、前記タッチパネルにて検出されたタッチ操作に応じて、前記タッチパネル上での前記タッチ操作の位置を前記携帯端末の表示画面上の操作位置に変換し、前記携帯端末の表示画面上に設定された基準位置から当該携帯端末の表示画面上の操作位置への移動量を前記操作情報として生成し、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する。 The mobile terminal control method of the present invention
A mobile terminal control method performed by an in-vehicle device that communicates with a mobile terminal corresponding to a predetermined communication method,
A detection step in which a touch panel detects a touch operation as an operation to the in-vehicle device;
In accordance with the operation detected by the touch panel, a generation step for generating operation information corresponding to the operation and complying with the predetermined communication method;
A communication step of transmitting the operation information to the portable terminal by the predetermined communication method ,
The generation step converts the position of the touch operation on the touch panel into an operation position on the display screen of the mobile terminal according to the touch operation detected by the touch panel, A movement amount from the reference position set to the operation position on the display screen of the mobile terminal is generated as the operation information, and the reference position is changed according to the end position of the touch operation on the touch panel. .

本発明のプログラムは、
所定通信方式に対応する携帯端末と通信するコンピュータに、
前記車載機への操作としてタッチ操作をタッチパネルが検出する検出手順と、
前記タッチパネルが検出した操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手順と、
前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手順と、を実行させ、
前記生成手順は、前記タッチパネルにて検出されたタッチ操作に応じて、前記タッチパネル上での前記タッチ操作の位置を前記携帯端末の表示画面上の操作位置に変換し、前記携帯端末の表示画面上に設定された基準位置から当該携帯端末の表示画面上の操作位置への移動量を前記操作情報として生成し、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する。 The program of the present invention
To a computer that communicates with a portable terminal that supports a predetermined communication method,
A detection procedure in which a touch panel detects a touch operation as an operation to the in-vehicle device;
In accordance with the operation detected by the touch panel, a generation procedure for generating operation information corresponding to the operation and compliant with the predetermined communication method,
A communication procedure for transmitting the operation information to the mobile terminal by the predetermined communication method ,
The generation procedure converts the position of the touch operation on the touch panel into an operation position on the display screen of the mobile terminal according to the touch operation detected on the touch panel, A movement amount from the reference position set to the operation position on the display screen of the mobile terminal is generated as the operation information, and the reference position is changed according to the end position of the touch operation on the touch panel. .

本発明によれば、車載機による遠隔操作用の専用のアプリケーションプログラムを必要とせずに、車載機で携帯端末を操作することが可能となり、また、操作性の向上を図ることが可能になる。   According to the present invention, it is possible to operate a mobile terminal with an in-vehicle device without requiring a dedicated application program for remote operation by the in-vehicle device, and to improve operability.

本発明の第１実施形態の車載機１とスマートフォン２とを示したブロック図である。It is the block diagram which showed the vehicle equipment 1 and the smart phone 2 of 1st Embodiment of this invention. 車載機１とスマートフォン２の外観図である。It is an external view of the vehicle equipment 1 and the smart phone 2. FIG. 車両内に車載機１とスマートフォン２とが配置された例を示した図である。It is the figure which showed the example by which the vehicle equipment 1 and the smart phone 2 are arrange | positioned in the vehicle. 車載機１とスマートフォン２との接続時の動作を説明するためのシーケンス図である。It is a sequence diagram for demonstrating the operation | movement at the time of the connection of the vehicle equipment 1 and the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. タッチパネル１４へのタッチ操作が行われたときの動作を説明するためのシーケンス図である。FIG. 10 is a sequence diagram for explaining an operation when a touch operation on the touch panel 14 is performed. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. タッチパネル１４へのドラッグ操作、フリック操作が行われたときの動作を説明するためのシーケンス図である。It is a sequence diagram for demonstrating operation | movement when drag operation and the flick operation to the touch panel 14 are performed. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 車載機１の画面とスマートフォン２の画面とを示した図である。It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. 本発明の第２実施形態の車載機１０Ａとスマートフォン２とを示したブロック図である。It is the block diagram which showed 10 A of vehicle equipment and the smart phone 2 of 2nd Embodiment of this invention. タッチパネル１４の分割領域を示した図である。FIG. 4 is a diagram showing divided areas of the touch panel 14. 本発明の第３実施形態の車載機１０Ｂとスマートフォン２Ｂとを示したブロック図である。It is the block diagram which showed the vehicle equipment 10B and smart phone 2B of 3rd Embodiment of this invention.

以下、本発明の実施形態について図面を参照して説明する。   Embodiments of the present invention will be described below with reference to the drawings.

（第１実施形態）
図１は、本発明の第１実施形態の車載機１とスマートフォン２とを示したブロック図である。図２は、車載機１とスマートフォン２の外観図である。(First embodiment)
FIG. 1 is a block diagram showing an in-vehicle device 1 and a smartphone 2 according to the first embodiment of the present invention. FIG. 2 is an external view of the in-vehicle device 1 and the smartphone 2.

車載機１は、スマートフォン２と通信する。   The in-vehicle device 1 communicates with the smartphone 2.

スマートフォン２は、携帯端末の一例である。なお、携帯端末は、スマートフォンに限らず適宜変更可能であり、例えば、タブレット端末でもよい。   The smartphone 2 is an example of a mobile terminal. Note that the mobile terminal is not limited to a smartphone and can be changed as appropriate, and may be, for example, a tablet terminal.

スマートフォン２は、Bluetooth（登録商標）を用いた無線通信機能と、HDMI（High-Definition Multimedia Interface）端子を用いた有線通信機能と、を有する。   The smartphone 2 has a wireless communication function using Bluetooth (registered trademark) and a wired communication function using an HDMI (High-Definition Multimedia Interface) terminal.

スマートフォン２は、BluetoothのHID（Human Interface Device）プロファイル（以下、単に「HIDプロファイル」とも称する）を有する。HIDプロファイルは、マウスやキーボード等の入力装置を無線化するためのBluetoothのプロファイルである。   The smartphone 2 has a Bluetooth HID (Human Interface Device) profile (hereinafter also simply referred to as “HID profile”). The HID profile is a Bluetooth profile for wireless input devices such as a mouse and a keyboard.

BluetoothのHIDプロファイルにて定められた通信方式は、所定通信方式の一例である。   The communication method defined by the Bluetooth HID profile is an example of a predetermined communication method.

スマートフォン２は、HIDプロファイルに準拠した操作情報（例えば、マウスからの移動量情報、クリック情報またはリリース情報）を受け付け、その操作情報に応じて動作する。なお、HIDプロファイルに準拠した操作情報としては、マウスからの移動量情報、クリック情報、リリース情報の他にも、例えば、キーボードからのキー入力情報や、操作状態を元に戻すための戻す情報がある。   The smartphone 2 receives operation information (for example, movement amount information from the mouse, click information, or release information) based on the HID profile, and operates according to the operation information. In addition to the movement amount information from the mouse, the click information, and the release information, the operation information compliant with the HID profile includes, for example, key input information from the keyboard and information to be returned to restore the operation state. is there.

また、スマートフォン２は、BluetoothのSPP（Serial Port Profile）プロファイル（以下、単に「SPPプロファイル」と称する）を有する。SPPプロファイルは、Bluetooth機器を仮想シリアルポート化するためのBluetoothのプロファイルである。スマートフォン２は、SPPプロファイルに準拠した端末情報（例えば、スマートフォン２の向き（縦、横）、画面解像度や端末の状態）を車載機１に送信する。   The smartphone 2 has a Bluetooth SPP (Serial Port Profile) profile (hereinafter simply referred to as “SPP profile”). The SPP profile is a Bluetooth profile for making a Bluetooth device a virtual serial port. The smartphone 2 transmits terminal information compliant with the SPP profile (for example, the orientation (vertical, horizontal), screen resolution, and terminal state) of the smartphone 2 to the in-vehicle device 1.

また、スマートフォン２は、例えば、ナビゲーション用アプリケーションを記憶し、ナビゲーション用アプリケーションを実行することによって、ナビゲーション画面を表示する。スマートフォン２は、HDMI端子を介して、スマートフォン２が表示している画面（以下「表示画面」と称する）を表す画面情報を車載機１に送信する。   For example, the smartphone 2 stores a navigation application and displays a navigation screen by executing the navigation application. The smartphone 2 transmits screen information representing a screen (hereinafter referred to as “display screen”) displayed on the smartphone 2 to the in-vehicle device 1 via the HDMI terminal.

車載機１は、車両に設置され、スマートフォン２と通信することで、例えばナビゲーション装置として機能する。   The in-vehicle device 1 is installed in a vehicle and functions as, for example, a navigation device by communicating with the smartphone 2.

図３は、車両内に車載機１とスマートフォン２とが配置された例を示した図である。   FIG. 3 is a diagram illustrating an example in which the in-vehicle device 1 and the smartphone 2 are arranged in the vehicle.

図３では、スマートフォン２が格納装置４を介してケーブル３で車載機１と接続されている。   In FIG. 3, the smartphone 2 is connected to the vehicle-mounted device 1 with the cable 3 via the storage device 4.

図３では、自動車のダッシュボード５の中央上部に車載機１がはめ込まれており、ダッシュボード５の下方の運転席側に格納装置４が配置されている。スマートフォン２は、格納装置４に収容されている。   In FIG. 3, the vehicle-mounted device 1 is fitted in the upper center of the dashboard 5 of the automobile, and the storage device 4 is disposed on the driver seat side below the dashboard 5. The smartphone 2 is accommodated in the storage device 4.

本実施形態では、格納装置４の内部にコネクタが配置されており、このコネクタを通じて格納装置４と車載機１とが有線で接続している。このため、スマートフォン２が格納装置４に収容され、格納装置４内のコネクタがスマートフォン２のHDMI端子に挿入されることで、車載機１とスマートフォン２との有線接続が確立される。   In this embodiment, the connector is arrange | positioned inside the storage apparatus 4, and the storage apparatus 4 and the vehicle equipment 1 are connected with the wire through this connector. For this reason, the smartphone 2 is accommodated in the storage device 4, and the wired connection between the in-vehicle device 1 and the smartphone 2 is established by inserting the connector in the storage device 4 into the HDMI terminal of the smartphone 2.

なお、車載機１とスマートフォン２との有線接続の手法は、図３に示した例に限らず、適宜変更可能である。   In addition, the method of wired connection with the vehicle equipment 1 and the smart phone 2 is not restricted to the example shown in FIG. 3, and can be changed suitably.

図１に戻って、車載機１は、無線通信部１１と、有線通信部１２と、表示部１３と、タッチパネル１４と、制御部１５と、を含む。なお、無線通信部１１と有線通信部１２は、通信部１６に含まれる。   Returning to FIG. 1, the in-vehicle device 1 includes a wireless communication unit 11, a wired communication unit 12, a display unit 13, a touch panel 14, and a control unit 15. The wireless communication unit 11 and the wired communication unit 12 are included in the communication unit 16.

無線通信部１１は、HIDプロファイルおよびSPPプロファイルを有し、スマートフォン２と、HIDプロファイルに準拠した無線通信やSPPプロファイルに準拠した無線通信を行う。   The wireless communication unit 11 has an HID profile and an SPP profile, and performs wireless communication based on the HID profile and wireless communication based on the SPP profile with the smartphone 2.

有線通信部１２は、HDMI端子を有し、スマートフォン２のHDMI端子と有線で接続される。有線通信部１２は、スマートフォン２から、スマートフォン２の画面（例えば、ナビゲーション画面）を表す画面情報や音声情報を受信する。   The wired communication unit 12 has an HDMI terminal and is connected to the HDMI terminal of the smartphone 2 by wire. The wired communication unit 12 receives screen information and audio information representing a screen (for example, a navigation screen) of the smartphone 2 from the smartphone 2.

表示部１３は、表示手段の一例である。   The display unit 13 is an example of a display unit.

表示部１３は、タッチパネル１４の背面側に重なり合うように積層され、種々の画面を表示する。表示部１３は、有線通信部１２がスマートフォン２から受信した画面情報に応じた画面（例えば、操作画面であるナビゲーション画面）を表示する。   The display unit 13 is stacked so as to overlap the back side of the touch panel 14 and displays various screens. The display unit 13 displays a screen corresponding to the screen information received by the wired communication unit 12 from the smartphone 2 (for example, a navigation screen that is an operation screen).

タッチパネル１４は、検出手段の一例である。   The touch panel 14 is an example of a detection unit.

タッチパネル１４は、車載機１への操作を検出する。例えば、タッチパネル１４は、表示部１３が表示している画面（例えば、操作画面）に対する操作（タッチパネル１４へのタッチ操作）を検出する。なお、タッチパネル１４には、ＸＹ座標が割り付けられている。タッチパネル１４は、ＸＹ座標を用いて操作位置（タッチ操作位置）を検出する。   The touch panel 14 detects an operation on the in-vehicle device 1. For example, the touch panel 14 detects an operation (touch operation on the touch panel 14) on a screen (for example, an operation screen) displayed on the display unit 13. The touch panel 14 is assigned XY coordinates. The touch panel 14 detects an operation position (touch operation position) using XY coordinates.

制御部１５は、生成手段の一例である。   The control unit 15 is an example of a generation unit.

制御部１５は、車載機１を制御する。   The control unit 15 controls the in-vehicle device 1.

例えば、制御部１５は、タッチパネル１４にて検出された操作に応じて、その操作に対応しHIDプロファイルに準拠した操作情報（例えば、マウスからの移動量情報、クリック情報またはリリース情報）を生成する。   For example, in response to an operation detected on the touch panel 14, the control unit 15 generates operation information (for example, movement amount information from the mouse, click information, or release information) corresponding to the operation and conforming to the HID profile. .

通信部１６は、スマートフォン２と通信する。   The communication unit 16 communicates with the smartphone 2.

例えば、通信部１６では、無線通信部１１が、制御部１５にて生成された操作情報を、HIDプロファイルにしたがって、スマートフォン２に無線送信し、また、スマートフォン２からSPPプロファイルにしたがって送信された端末情報を受信する。   For example, in the communication unit 16, the wireless communication unit 11 wirelessly transmits the operation information generated by the control unit 15 to the smartphone 2 according to the HID profile, and the terminal transmitted from the smartphone 2 according to the SPP profile. Receive information.

スマートフォン２は、インターネット通信機能を有し、表示部２１と、タッチパネル２２と、無線通信部２３と、有線通信部２４と、制御部２５と、を含む。   The smartphone 2 has an Internet communication function, and includes a display unit 21, a touch panel 22, a wireless communication unit 23, a wired communication unit 24, and a control unit 25.

表示部２１は、種々の画面を表示する。   The display unit 21 displays various screens.

タッチパネル２２は、表示部２１の前面に重なり合うように積層され、表示部２１が表示している画面へのタッチ操作を検出する。   The touch panel 22 is stacked so as to overlap the front surface of the display unit 21, and detects a touch operation on the screen displayed by the display unit 21.

無線通信部２３は、HIDプロファイルおよびSPPプロファイルを有し、車載機１の無線通信部１１とBluetoothを用いた無線通信を行う。例えば、無線通信部２３は、車載機１からHIDプロファイルに準拠した操作情報を受信し、車載機１へSPPプロファイルに準拠した端末情報を送信する。   The wireless communication unit 23 has an HID profile and an SPP profile, and performs wireless communication with the wireless communication unit 11 of the in-vehicle device 1 using Bluetooth. For example, the wireless communication unit 23 receives operation information that conforms to the HID profile from the in-vehicle device 1 and transmits terminal information that conforms to the SPP profile to the in-vehicle device 1.

有線通信部２４は、HDMI端子を有し、車載機１の有線通信部１２が有するHDMI端子と有線で接続される。有線通信部２４は、車載機１へ、スマートフォン２の画面を表す画面情報や音声情報を送信する。   The wired communication unit 24 has an HDMI terminal and is connected to the HDMI terminal of the wired communication unit 12 of the in-vehicle device 1 by wire. The wired communication unit 24 transmits screen information and audio information representing the screen of the smartphone 2 to the in-vehicle device 1.

制御部２５は、タッチパネル２２が検出したタッチ操作や、無線通信部２３が受信した操作情報にしたがって、スマートフォン２の動作を制御する。例えば、制御部２５は、タッチパネル２２が検出したタッチ操作や、無線通信部２３が受信した操作情報にしたがって、表示部２１上の画面を変更する。本実施形態では、制御部２５は、ナビゲーション用アプリケーションを記憶し、ナビゲーション用アプリケーションを実行してナビゲーション画面を表示部２１に表示する。   The control unit 25 controls the operation of the smartphone 2 according to the touch operation detected by the touch panel 22 and the operation information received by the wireless communication unit 23. For example, the control unit 25 changes the screen on the display unit 21 according to the touch operation detected by the touch panel 22 or the operation information received by the wireless communication unit 23. In the present embodiment, the control unit 25 stores a navigation application, executes the navigation application, and displays a navigation screen on the display unit 21.

次に、動作を説明する。   Next, the operation will be described.

以下では、車載機１がスマートフォン２のBluetoothマウスとして使用される例を説明する。   Below, the example in which the vehicle equipment 1 is used as a Bluetooth mouse | mouth of the smart phone 2 is demonstrated.

＜接続時の動作＞
まず、車載機１とスマートフォン２との接続時の動作を説明する。<Operation during connection>
First, the operation at the time of connection between the in-vehicle device 1 and the smartphone 2 will be described.

図４は、車載機１とスマートフォン２との接続時の動作を説明するためのシーケンス図である。また、図５〜８は、接続時の車載機１の画面とスマートフォン２の画面とを示した図である。   FIG. 4 is a sequence diagram for explaining the operation at the time of connection between the in-vehicle device 1 and the smartphone 2. Moreover, FIGS. 5-8 is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2 at the time of connection.

まず、スマートフォン２の有線通信部２４が有するHDMI端子が、車載機１の有線通信部１２が有するHDMI端子とケーブル３にて接続され、スマートフォン２が、ケーブル３を介して画面情報を車載機１に送信し始める（ステップＳ４０１）。なお、画面情報の送信は継続的に実行されるが、図４では、いくつかのタイミングでの画面情報の送信動作のみが示されている。   First, the HDMI terminal of the wired communication unit 24 of the smartphone 2 is connected to the HDMI terminal of the wired communication unit 12 of the in-vehicle device 1 via the cable 3, and the smartphone 2 transmits the screen information via the cable 3 to the in-vehicle device 1. (Step S401). Although transmission of screen information is continuously performed, FIG. 4 shows only screen information transmission operations at several timings.

車載機１では、有線通信部１２は、スマートフォン２からケーブル３を介して画面情報を受信すると、画面情報を制御部１５に出力する。   In the in-vehicle device 1, when the wired communication unit 12 receives screen information from the smartphone 2 via the cable 3, the wired communication unit 12 outputs the screen information to the control unit 15.

制御部１５は、画面情報を受け付けると、画面情報に応じた画面（以下「スマートフォン画面」と称する）を表示部１３に表示する（ステップＳ４０２）。   Upon receiving the screen information, the control unit 15 displays a screen corresponding to the screen information (hereinafter referred to as “smart phone screen”) on the display unit 13 (step S402).

なお、以下では、スマートフォン２で表示されているスマートフォン画面を「スマートフォン画面２ａ２」と称し、車載機１で表示されているスマートフォン画面を「スマートフォン画面２ａ１」と称する。   Hereinafter, the smartphone screen displayed on the smartphone 2 is referred to as “smart phone screen 2a2”, and the smartphone screen displayed on the in-vehicle device 1 is referred to as “smart phone screen 2a1”.

図５は、車載機１の表示部１３がスマートフォン２からの画面情報に応じてスマートフォン画面２ａ１を表示した状況の一例を示した図である。   FIG. 5 is a diagram illustrating an example of a situation in which the display unit 13 of the in-vehicle device 1 displays the smartphone screen 2 a 1 according to the screen information from the smartphone 2.

なお、車載機１の表示部１３の縦横比とスマートフォン２の表示部２１の縦横比が異なる場合、図５に示したように、表示部１３の表示面１３ｂには、黒画像１３ａが表示される。   When the aspect ratio of the display unit 13 of the in-vehicle device 1 and the aspect ratio of the display unit 21 of the smartphone 2 are different, as shown in FIG. 5, the black image 13 a is displayed on the display surface 13 b of the display unit 13. The

図５では、表示面１３ｂは、横長のスマートフォン画面２ａ２に対応する横長のスマートフォン画面２ａ１を表示している。しかしながら、スマートフォン画面２ａ２が縦長である場合には、制御部１５は、縦長のスマートフォン画面２ａ２に対応する縦長のスマートフォン画面２ａ１を表示面１３ｂに表示する。この場合、黒画像１３ａは、表示面１３ｂの左右に表示される。   In FIG. 5, the display surface 13b displays a horizontally long smartphone screen 2a1 corresponding to the horizontally long smartphone screen 2a2. However, when the smartphone screen 2a2 is vertically long, the control unit 15 displays the vertically long smartphone screen 2a1 corresponding to the vertically long smartphone screen 2a2 on the display surface 13b. In this case, the black image 13a is displayed on the left and right of the display surface 13b.

また、車載機１の表示部１３の縦横比とスマートフォン２の表示部２１の縦横比が異なる場合、制御部１５は、画面情報の縦横比（解像度）が表示部１３の縦横比（解像度）に合うように、画面情報の縦横比（解像度）を変換し、縦横比（解像度）が変換された画面情報に応じたスマートフォン画面２ａ１を表示面１３ｂに表示してもよい。この場合、表示面１３ｂ全体にスマートフォン画面２ａ１が表示され、黒画像１３ａは表示されない。   When the aspect ratio of the display unit 13 of the in-vehicle device 1 and the aspect ratio of the display unit 21 of the smartphone 2 are different, the control unit 15 sets the aspect ratio (resolution) of the screen information to the aspect ratio (resolution) of the display unit 13. In order to match, the aspect ratio (resolution) of the screen information may be converted, and the smartphone screen 2a1 corresponding to the screen information with the converted aspect ratio (resolution) may be displayed on the display surface 13b. In this case, the smartphone screen 2a1 is displayed on the entire display surface 13b, and the black image 13a is not displayed.

制御部１５は、表示面１３ｂにスマートフォン画面２ａ１を表示すると、スマートフォン２からの画面情報を参照して、画面情報にて規定されたスマートフォン画面２ａ２のサイズ（横と縦の画素数）を検出し、かつ、表示面１３ｂ内のスマートフォン画面２ａ１の位置を検出する。   When displaying the smartphone screen 2a1 on the display surface 13b, the control unit 15 refers to the screen information from the smartphone 2 and detects the size (number of pixels in the horizontal and vertical directions) of the smartphone screen 2a2 defined by the screen information. And the position of the smart phone screen 2a1 in the display surface 13b is detected.

本実施形態では、制御部１５は、表示面１３ｂ内のスマートフォン画面２ａ１の四隅２ａ１１〜２ａ１４の各位置（各ＸＹ座標）を、基点の位置として検出する。   In this embodiment, the control part 15 detects each position (each XY coordinate) of the four corners 2a11 to 2a14 of the smart phone screen 2a1 in the display surface 13b as the position of the base point.

制御部１５は、スマートフォン画面２ａ２のサイズ（横と縦の画素数）と基点の位置の検出結果とを、位置特定情報として保持する（ステップＳ４０３）。   The control unit 15 holds the size (number of horizontal and vertical pixels) of the smartphone screen 2a2 and the detection result of the base point position as position specifying information (step S403).

なお、位置特定情報は、画面情報にて規定されたスマートフォン画面２ａ２と、表示面１３ｂ内のスマートフォン画面２ａ１と、の対応関係を表す。   In addition, position specific information represents the correspondence of the smart phone screen 2a2 prescribed | regulated by screen information, and the smart phone screen 2a1 in the display surface 13b.

図６は、表示面１３ｂ内のスマートフォン画面２ａ１の四隅の位置２ａ１１〜２ａ１４を示した図である。   FIG. 6 is a diagram showing the positions 2a11 to 2a14 at the four corners of the smartphone screen 2a1 in the display surface 13b.

本実施形態では、基点の位置の検出は、制御部１５が表示面１３ｂにスマートフォン画面２ａ１の表示を開始したときのみに行われる。なお、基点の位置の検出は、例えば、定期的に行われてもよい。   In the present embodiment, the position of the base point is detected only when the control unit 15 starts displaying the smartphone screen 2a1 on the display surface 13b. Note that the position of the base point may be detected periodically, for example.

続いて、車載機１の無線通信部１１からスマートフォン２の無線通信部２３に対してSPPプロファイルの接続が実行される（ステップＳ４０４）。この接続は、車載機１のユーザが車載機１およびスマートフォン２を操作することにより実行される。   Subsequently, the connection of the SPP profile is executed from the wireless communication unit 11 of the in-vehicle device 1 to the wireless communication unit 23 of the smartphone 2 (step S404). This connection is performed when the user of the vehicle-mounted device 1 operates the vehicle-mounted device 1 and the smartphone 2.

なお、基点の位置の検出に関し、予めスマートフォン２に設定情報として基点の位置が登録され、制御部１５が、SPPプロファイルにて、基点の位置についての設定情報をスマートフォン２から取得し、取得された基点の位置を保持してもよい。   In addition, regarding the detection of the position of the base point, the position of the base point is registered in advance in the smartphone 2 as setting information, and the control unit 15 acquires the setting information about the position of the base point from the smartphone 2 in the SPP profile. You may hold | maintain the position of a base point.

続いて、車載機１の無線通信部１１からスマートフォン２の無線通信部２３に対してHIDプロファイルの接続が実行される（ステップＳ４０５）。この接続は、車載機１のユーザが車載機１およびスマートフォン２を操作することにより実行される。   Subsequently, the connection of the HID profile is executed from the wireless communication unit 11 of the in-vehicle device 1 to the wireless communication unit 23 of the smartphone 2 (step S405). This connection is performed when the user of the vehicle-mounted device 1 operates the vehicle-mounted device 1 and the smartphone 2.

この接続により、スマートフォン２（制御部２５）は、車載機１をBluetoothマウスとして認識し、Bluetoothマウスが接続されたと認識する。続いて、制御部２５は、スマートフォン画面２ａ２にマウスカーソル２１ａを表示する（ステップＳ４０６）。これに伴い、制御部２５は、マウスカーソル２１ａが表示されたスマートフォン画面を表す画面情報を、有線通信部２４を介して車載機１に送信し（ステップＳ４０７）、車載機１の制御部１５は、表示面１３ｂ上に、マウスカーソル２１ａが表示されたスマートフォン画面２ａ２を表示する（ステップＳ４０８）。   By this connection, the smartphone 2 (the control unit 25) recognizes the in-vehicle device 1 as a Bluetooth mouse and recognizes that the Bluetooth mouse is connected. Subsequently, the control unit 25 displays the mouse cursor 21a on the smartphone screen 2a2 (step S406). Accordingly, the control unit 25 transmits screen information representing the smartphone screen on which the mouse cursor 21a is displayed to the in-vehicle device 1 via the wired communication unit 24 (step S407), and the control unit 15 of the in-vehicle device 1 The smart phone screen 2a2 on which the mouse cursor 21a is displayed is displayed on the display surface 13b (step S408).

図７は、車載機１とスマートフォン２との間でHIDプロファイル同士が接続され、スマートフォン画面２ａ１および２ａ２にマウスカーソル２１ａが表示された状況の一例を示した図である。   FIG. 7 is a diagram illustrating an example of a situation in which HID profiles are connected between the in-vehicle device 1 and the smartphone 2 and the mouse cursor 21a is displayed on the smartphone screens 2a1 and 2a2.

一方、車載機１とスマートフォン２とのHIDプロファイルでの接続が実行されると、車載機１では、制御部１５は、マウスカーソル２１ａをスマートフォン画面２ａ２上の基準位置に移動するために、HIDプロファイルに準拠した基準移動量情報を生成する（ステップＳ４０９）。   On the other hand, when the connection with the HID profile between the in-vehicle device 1 and the smartphone 2 is executed, the control unit 15 in the in-vehicle device 1 moves the mouse cursor 21a to the reference position on the smartphone screen 2a2, Is generated (step S409).

なお、スマートフォン画面２ａ２上の基準位置は、例えば、デフォルトでスマートフォン画面２ａ２の右下隅の位置、つまり、スマートフォン画面２ａ１の右下隅２ａ１１の位置に対応する位置（図６参照）に設定されている。本実施形態では、スマートフォン画面２ａ２上の基準位置の情報は、制御部１５に保持されている。   Note that the reference position on the smartphone screen 2a2 is, for example, set to a position at the lower right corner of the smartphone screen 2a2 by default, that is, a position corresponding to the position of the lower right corner 2a11 of the smartphone screen 2a1 (see FIG. 6). In the present embodiment, information on the reference position on the smartphone screen 2a2 is held in the control unit 15.

基準移動量情報は、マウスカーソル２１ａがスマートフォン画面２ａ２上のどの位置にあってもスマートフォン画面２ａ２の右下隅に移動できる移動量を表す。   The reference movement amount information represents a movement amount that can be moved to the lower right corner of the smartphone screen 2a2 regardless of the position of the mouse cursor 21a on the smartphone screen 2a2.

続いて、制御部１５は、基準移動量情報を無線通信部１１に出力する。   Subsequently, the control unit 15 outputs the reference movement amount information to the wireless communication unit 11.

無線通信部１１は、基準移動量情報を受け付けると、基準移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ４１０）。   When receiving the reference movement amount information, the wireless communication unit 11 transmits the reference movement amount information to the smartphone 2 in accordance with the HID profile (step S410).

スマートフォン２では、無線通信部２３は、車載機１から基準移動量情報を受信すると、基準移動量情報を制御部２５に出力する。   In the smartphone 2, when the wireless communication unit 23 receives the reference movement amount information from the in-vehicle device 1, the wireless communication unit 23 outputs the reference movement amount information to the control unit 25.

制御部２５は、基準移動量情報を受け付けると、スマートフォン画面２ａ２上で、基準移動量情報が表す移動量だけマウスカーソル２１ａを移動して、マウスカーソル２１ａをスマートフォン画面２ａ２上の基準位置（スマートフォン画面２ａ２の右下隅の位置、つまり、スマートフォン画面２ａ１の右下隅２ａ１１の位置に対応する位置）に持っていく（ステップＳ４１１）。   Upon receiving the reference movement amount information, the control unit 25 moves the mouse cursor 21a by the movement amount represented by the reference movement amount information on the smartphone screen 2a2, and moves the mouse cursor 21a to the reference position (smart phone screen) on the smartphone screen 2a2. 2a2 is taken to the position of the lower right corner, that is, the position corresponding to the position of the lower right corner 2a11 of the smartphone screen 2a1 (step S411).

なお、マウスカーソル２１ａがスマートフォン画面２ａ２の右下隅の位置にくると、マウスカーソル２１ａは、スマートフォン画面２ａ２から外れる。このため、マウスカーソル２１ａは、スマートフォン画面２ａ２および２ａ１上に表示されなくなる。   In addition, when the mouse cursor 21a comes to the position of the lower right corner of the smartphone screen 2a2, the mouse cursor 21a is detached from the smartphone screen 2a2. For this reason, the mouse cursor 21a is not displayed on the smartphone screens 2a2 and 2a1.

図８は、マウスカーソル２１ａがスマートフォン画面２ａ２の右下隅（基準位置）に位置するときの一例を示した図である。   FIG. 8 is a diagram illustrating an example when the mouse cursor 21a is positioned at the lower right corner (reference position) of the smartphone screen 2a2.

＜タッチ操作時の動作＞
次に、マウスカーソル２１ａがスマートフォン画面２ａ２の右下隅（基準位置）に位置する状況（以下「初期状況」と称する）で、車載機１のタッチパネル１４へのタッチ操作が行われたときの動作を説明する。<Operation during touch operation>
Next, in a situation where the mouse cursor 21a is located in the lower right corner (reference position) of the smartphone screen 2a2 (hereinafter referred to as “initial situation”), an operation when the touch operation on the touch panel 14 of the in-vehicle device 1 is performed is performed. explain.

図９は、タッチパネル１４へのタッチ操作が行われたときの動作を説明するためのシーケンス図である。また、図１０〜１４は、タッチ操作時の車載機１の画面とスマートフォン２の画面とを示した図である。   FIG. 9 is a sequence diagram for explaining an operation when a touch operation on the touch panel 14 is performed. 10 to 14 are diagrams showing the screen of the vehicle-mounted device 1 and the screen of the smartphone 2 during the touch operation.

タッチパネル１４は、初期状況下でタッチ操作を検出すると、タッチ操作位置（ＸＹ座標）を検出し（ステップＳ９０１）、タッチ操作位置１ａを制御部１５に出力する。   When the touch panel 14 detects a touch operation under an initial condition, the touch panel 14 detects a touch operation position (XY coordinates) (step S901), and outputs the touch operation position 1a to the control unit 15.

制御部１５は、タッチ操作位置１ａを受け付けると、位置特定情報を用いて、タッチ操作位置１ａが、表示部２１上のスマートフォン画面２ａ２（画面情報にて規定されたスマートフォン画面２ａ２）のどの位置（操作位置）にあたるかを計算する。   Upon receiving the touch operation position 1a, the control unit 15 uses the position specifying information to determine which position (on the smartphone screen 2a2 defined by the screen information) the touch operation position 1a is on the display unit 21 ( Calculate whether it corresponds to the operation position).

本実施形態では、制御部１５は、位置特定情報を用いて、タッチ操作位置１ａを、表示部２１上のスマートフォン画面２ａ２の操作位置２ａに変換する（ステップＳ８０２）。以下、タッチ操作位置から変換された位置を「変換位置」と称する。   In the present embodiment, the control unit 15 converts the touch operation position 1a into the operation position 2a of the smartphone screen 2a2 on the display unit 21 using the position specifying information (step S802). Hereinafter, the position converted from the touch operation position is referred to as “converted position”.

例えば、制御部１５は、位置特定情報を用いて、４つの基点にて特定される領域のサイズと、画面情報にて規定されたスマートフォン画面２ａ２のサイズと、の対応関係を算出し、その対応関係を用いて、４つの基点にて特定される領域内のタッチ操作位置１ａを、画面情報にて規定されたスマートフォン画面２ａ２内の操作位置（変換位置）２ａに変換する。   For example, the control unit 15 calculates the correspondence between the size of the area specified by the four base points and the size of the smartphone screen 2a2 defined by the screen information using the position specifying information, and the correspondence Using the relationship, the touch operation position 1a in the area specified by the four base points is converted into the operation position (conversion position) 2a in the smartphone screen 2a2 defined by the screen information.

一例としては、制御部１５は、Ｘ座標について、基点２ａ１４（図６参照）のＸ座標位置からタッチ操作位置のＸ座標位置までの長さＬｘ１と、タッチ操作位置のＸ座標位置から基点２ａ１１（図６参照）のＸ座標位置までの長さＬｘ２と、の比「Ｌｘ１：Ｌｘ２」を求める。そして、制御部１５は、スマートフォン画面２ａ２の横方向（Ｘ軸）を「Ｌｘ１：Ｌｘ２」に分割する位置を変換位置のＸ座標として特定する。   As an example, for the X coordinate, the control unit 15 determines the length Lx1 from the X coordinate position of the base point 2a14 (see FIG. 6) to the X coordinate position of the touch operation position, and the base point 2a11 ( The ratio “Lx1: Lx2” to the length Lx2 up to the X coordinate position of FIG. And the control part 15 specifies the position which divides | segments the horizontal direction (X-axis) of the smart phone screen 2a2 into "Lx1: Lx2" as a X coordinate of a conversion position.

また、制御部１５は、Ｙ座標について、基点２ａ１３（図６参照）のＹ座標位置からタッチ操作位置のＹ座標位置までの長さＬｙ１と、タッチ操作位置のＹ座標位置から基点２ａ１４（図６参照）のＹ座標位置までの長さＬｙ２と、の比「Ｌｙ１：Ｌｙ２」を求める。そして、制御部１５は、スマートフォン画面２ａ２の縦方向（Ｙ軸）を「Ｌｙ１：Ｌｙ２」に分割する位置を変換位置のＹ座標として特定する。   The control unit 15 also sets the length Ly1 from the Y coordinate position of the base point 2a13 (see FIG. 6) to the Y coordinate position of the touch operation position and the base point 2a14 (FIG. 6) from the Y coordinate position of the touch operation position. The ratio “Ly1: Ly2” to the length Ly2 to the Y coordinate position of (see) is obtained. And the control part 15 specifies the position which divides | segments the vertical direction (Y-axis) of the smart phone screen 2a2 into "Ly1: Ly2" as a Y coordinate of a conversion position.

図１０は、タッチ操作位置１ａと変換位置２ａとの一例を示した図である。   FIG. 10 is a diagram illustrating an example of the touch operation position 1a and the conversion position 2a.

続いて、制御部１５は、位置特定情報を用いて、スマートフォン画面２ａ２の右下隅（基準位置）から変換位置２ａへの移動量を表す移動量情報を生成する（ステップＳ９０３）。   Then, the control part 15 produces | generates the movement amount information showing the movement amount to the conversion position 2a from the lower right corner (reference | standard position) of the smart phone screen 2a2 using position specific information (step S903).

本実施形態では、制御部１５は、Ｘ軸方向の移動量とＹ軸方向の移動量とを表す移動量情報を生成する。なお、移動量情報は、Bluetoothマウスから送信されるマウスの移動量を表す情報に対応し、HIDプロファイルに準拠した情報（操作情報）となる。   In the present embodiment, the control unit 15 generates movement amount information representing the movement amount in the X-axis direction and the movement amount in the Y-axis direction. The movement amount information corresponds to information indicating the movement amount of the mouse transmitted from the Bluetooth mouse, and is information (operation information) based on the HID profile.

続いて、制御部１５は、移動量情報を無線通信部１１に出力する。   Subsequently, the control unit 15 outputs the movement amount information to the wireless communication unit 11.

無線通信部１１は、移動量情報を受け付けると、移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０４）。   Upon receiving the movement amount information, the wireless communication unit 11 transmits the movement amount information to the smartphone 2 according to the HID profile (step S904).

図１１は、移動量情報の送信を示した図である。   FIG. 11 is a diagram illustrating transmission of movement amount information.

制御部１５は、移動量情報を無線通信部１１に出力すると、クリック操作を表すクリック情報を、無線通信部１１に出力する。   When the movement amount information is output to the wireless communication unit 11, the control unit 15 outputs click information indicating a click operation to the wireless communication unit 11.

無線通信部１１は、クリック情報を受け付けると、クリック情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０５）。   When receiving the click information, the wireless communication unit 11 transmits the click information to the smartphone 2 according to the HID profile (step S905).

図１２は、クリック情報の送信を示した図である。   FIG. 12 is a diagram illustrating transmission of click information.

なお、クリック情報も操作情報の一例となる。   Click information is also an example of operation information.

スマートフォン２では、無線通信部２３は、車載機１から移動量情報を受信すると、移動量情報を制御部２５に出力し、車載機１からクリック情報を受信すると、クリック情報を制御部２５に出力する。   In the smartphone 2, the wireless communication unit 23 outputs the movement amount information to the control unit 25 when receiving the movement amount information from the in-vehicle device 1, and outputs the click information to the control unit 25 when receiving the click information from the in-vehicle device 1. To do.

制御部２５は、移動量情報とクリック情報を受け付けると、スマートフォン画面２ａ２上で、移動量情報が表す移動量だけマウスカーソル２１ａを基準位置から移動して、マウスカーソル２１ａをスマートフォン画面２ａ上の変換位置２ａに持っていき、変換位置２ａでのクリック操作を受け付ける（ステップＳ９０６）。   When receiving the movement amount information and the click information, the control unit 25 moves the mouse cursor 21a from the reference position by the movement amount represented by the movement amount information on the smartphone screen 2a2, and converts the mouse cursor 21a on the smartphone screen 2a. Bring it to the position 2a and accept a click operation at the conversion position 2a (step S906).

その後、タッチパネル１４が、タッチ操作の終了を検出すると（ステップＳ９０７）、タッチパネル１４は、タッチ操作の終了を制御部１５に通知する。   Thereafter, when the touch panel 14 detects the end of the touch operation (step S907), the touch panel 14 notifies the control unit 15 of the end of the touch operation.

制御部１５は、タッチ操作の終了の通知を受け付けると、リリース操作を表すリリース情報を無線通信部１１に出力する。   When receiving the notification of the end of the touch operation, the control unit 15 outputs release information representing the release operation to the wireless communication unit 11.

無線通信部１１は、リリース情報を受け付けると、リリース情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０８）。   When receiving the release information, the wireless communication unit 11 transmits the release information to the smartphone 2 according to the HID profile (step S908).

図１３は、リリース情報の送信を示した図である。   FIG. 13 is a diagram illustrating transmission of release information.

制御部１５は、リリース情報を無線通信部１１に出力すると、続いて、基準移動量情報を、無線通信部１１に出力する。   When outputting the release information to the wireless communication unit 11, the control unit 15 subsequently outputs the reference movement amount information to the wireless communication unit 11.

無線通信部１１は、基準移動量情報を受け付けると、基準移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０９）。   When receiving the reference movement amount information, the wireless communication unit 11 transmits the reference movement amount information to the smartphone 2 according to the HID profile (step S909).

図１４は、基準移動量情報の送信を示した図である。   FIG. 14 is a diagram illustrating transmission of reference movement amount information.

スマートフォン２では、無線通信部２３は、車載機１からリリース情報を受信すると、リリース情報を制御部２５に出力し、車載機１から基準移動量情報を受信すると、基準移動量情報を制御部２５に出力する。   In the smartphone 2, the wireless communication unit 23 outputs the release information to the control unit 25 when receiving release information from the in-vehicle device 1, and receives the reference movement amount information from the in-vehicle device 1, and transmits the reference movement amount information to the control unit 25. Output to.

制御部２５は、リリース情報と基準移動量情報を受け付けると、マウスカーソル２１ａが存在する位置でのリリース操作を受け付け、その後、マウスカーソル２１ａをスマートフォン画面２ａ２上の基準位置に持っていく（ステップＳ９１０）。   Upon receiving the release information and the reference movement amount information, the control unit 25 receives the release operation at the position where the mouse cursor 21a is present, and then brings the mouse cursor 21a to the reference position on the smartphone screen 2a2 (step S910). ).

＜ドラッグ操作、フリック操作時の動作＞
次に、初期状況で、車載機１のタッチパネル１４へのドラッグ操作、フリック操作が行われたときの動作を説明する。<Drag / flick operation>
Next, an operation when a drag operation or a flick operation to the touch panel 14 of the in-vehicle device 1 is performed in an initial state will be described.

図１５は、タッチパネル１４へのドラッグ操作、フリック操作が行われたときの動作を説明するためのシーケンス図である。また、図１６〜１９は、ドラッグ操作、フリック操作時の車載機１の画面とスマートフォン２の画面とを示した図である。   FIG. 15 is a sequence diagram for explaining an operation when a drag operation or a flick operation is performed on the touch panel 14. 16 to 19 are diagrams showing the screen of the vehicle-mounted device 1 and the screen of the smartphone 2 during the drag operation and the flick operation.

なお、図１５において、図９に示した処理と同一の処理には同一符号を付してある。   In FIG. 15, the same processes as those shown in FIG. 9 are denoted by the same reference numerals.

以下、図９に示した処理と異なる処理を中心に動作を説明する。   Hereinafter, the operation will be described focusing on the processing different from the processing shown in FIG.

タッチパネル１４が、初期状況下で最初にタッチ操作を検出すると、ステップＳ９０１〜Ｓ９０６が実行される。   When the touch panel 14 first detects a touch operation under an initial condition, steps S901 to S906 are executed.

図１６は、ステップＳ９０６が実行された際の状況の一例を示した図である。   FIG. 16 is a diagram illustrating an example of a situation when step S906 is executed.

その後、タッチパネル１４が、タッチ操作が継続された状況でのタッチ操作の位置の移動、つまり、ドラッグ操作またはフリック操作を検出すると（ステップＳ１５０１）、タッチパネル１４は、タッチ操作の移動先の位置（ＸＹ座標）を、制御部１５に出力する。なお、図１７では、ドラッグ操作の例を示してある。   Thereafter, when the touch panel 14 detects a movement of the position of the touch operation in a state where the touch operation is continued, that is, a drag operation or a flick operation (step S1501), the touch panel 14 detects the position (XY) of the movement destination of the touch operation. Coordinate) is output to the control unit 15. FIG. 17 shows an example of the drag operation.

制御部１５は、タッチ操作の移動先の位置を受け付けると、位置特定情報を用いて、タッチ操作の移動先の位置が、表示部２１上のスマートフォン画面２ａ２（画面情報にて規定されたスマートフォン画面２ａ２）のどの位置にあたるかを計算する。   When the control unit 15 receives the position of the touch operation destination, the position of the touch operation destination is displayed on the smartphone screen 2a2 on the display unit 21 (the smartphone screen defined by the screen information) using the position specifying information. The position in 2a2) is calculated.

本実施形態では、制御部１５は、位置特定情報を用いて、タッチ操作の移動先の位置を、スマートフォン画面２ａ２の操作位置に変換する（ステップＳ１５０２）。以下、タッチ操作の移動先の位置から変換された位置を「移動先変換位置」と称する。   In the present embodiment, the control unit 15 converts the position of the movement destination of the touch operation into the operation position on the smartphone screen 2a2 using the position specifying information (step S1502). Hereinafter, the position converted from the position of the movement destination of the touch operation is referred to as “movement destination conversion position”.

続いて、制御部１５は、位置特定情報を用いて、変換位置（クリック位置）から移動先変換位置へのマウスカーソル２１ａの移動量を表す移動量情報を生成する（ステップＳ１５０３）。   Subsequently, the control unit 15 uses the position specifying information to generate movement amount information representing the movement amount of the mouse cursor 21a from the conversion position (click position) to the movement destination conversion position (step S1503).

本実施形態では、制御部１５は、Ｘ軸方向の移動量とＹ軸方向の移動量とを表す移動量情報を生成する。   In the present embodiment, the control unit 15 generates movement amount information representing the movement amount in the X-axis direction and the movement amount in the Y-axis direction.

続いて、制御部１５は、ステップＳ１５０３で生成した移動量情報を無線通信部１１に出力する。その後、制御部１５は、変換位置を移動先変換位置に更新して、移動先変換位置を新たな変換位置とする。なお、変換位置を移動先変換位置に更新した旨は、スマートフォン２には通知されない。   Subsequently, the control unit 15 outputs the movement amount information generated in step S1503 to the wireless communication unit 11. Thereafter, the control unit 15 updates the conversion position to the movement destination conversion position, and sets the movement destination conversion position as a new conversion position. The smartphone 2 is not notified that the conversion position has been updated to the destination conversion position.

無線通信部１１は、移動量情報を受け付けると、移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ１５０４）。   Upon receiving the movement amount information, the wireless communication unit 11 transmits the movement amount information to the smartphone 2 according to the HID profile (step S1504).

スマートフォン２では、無線通信部２３は、車載機１から移動量情報を受信すると、移動量情報を制御部２５に出力する。   In the smartphone 2, the wireless communication unit 23 outputs the movement amount information to the control unit 25 when receiving the movement amount information from the in-vehicle device 1.

制御部２５は、移動量情報を受け付けると、スマートフォン画面２ａ２上で、移動量情報が表す移動量だけマウスカーソル２１ａを移動して、マウスカーソル２１ａをスマートフォン画面２ａ２上の移動変換位置に持っていく（ステップＳ１５０５）。   Upon receiving the movement amount information, the control unit 25 moves the mouse cursor 21a by the movement amount represented by the movement amount information on the smartphone screen 2a2, and brings the mouse cursor 21a to the movement conversion position on the smartphone screen 2a2. (Step S1505).

図１７は、マウスカーソル２１ａの移動変換位置への移動を示した図である。   FIG. 17 is a diagram illustrating the movement of the mouse cursor 21a to the movement conversion position.

なお、本実施形態では、制御部１５は、タッチパネル１４がドラッグ操作またはフリック操作を検出したかを所定時間間隔（例えば、０．２秒間隔）で確認し、タッチパネル１４がドラッグ操作またはフリック操作を検出するごとに、ステップＳ１５０２〜Ｓ１５０４を繰り返す。なお、所定時間間隔は、０．２秒間隔に限らず適宜変更可能である。   In the present embodiment, the control unit 15 confirms whether the touch panel 14 has detected a drag operation or a flick operation at a predetermined time interval (for example, every 0.2 seconds), and the touch panel 14 performs the drag operation or the flick operation. Every time it is detected, steps S1502 to S1504 are repeated. The predetermined time interval is not limited to the 0.2 second interval and can be changed as appropriate.

また、移動量情報にて表すことができる移動量に上限値があり、変換位置から移動先変換位置への移動量が上限値を超える場合、制御部１５は、移動量情報を複数回送信することによって、変換位置から移動先変換位置への移動量をスマートフォン２に通知する。   In addition, when the movement amount that can be represented by the movement amount information has an upper limit value and the movement amount from the conversion position to the destination conversion position exceeds the upper limit value, the control unit 15 transmits the movement amount information a plurality of times. Thus, the smartphone 2 is notified of the amount of movement from the conversion position to the destination conversion position.

その後、タッチパネル１４が、タッチ操作の終了を検出すると（ステップＳ９０７）、ステップＳ９０８〜Ｓ９１０が実行される。   Thereafter, when the touch panel 14 detects the end of the touch operation (step S907), steps S908 to S910 are executed.

図１８は、ドラッグ操作またはフリック操作終了時のリリース情報の送信を示した図である。   FIG. 18 is a diagram illustrating transmission of release information at the end of the drag operation or flick operation.

図１９は、リリース情報の送信後に行われる基準移動量情報の送信を示した図である。   FIG. 19 is a diagram illustrating transmission of reference movement amount information performed after transmission of release information.

次に、本実施形態の効果について説明する。   Next, the effect of this embodiment will be described.

本実施形態によれば、タッチパネル１４は、車載機１への操作を検出する。制御部１５は、タッチパネル１４にて検出された操作に応じて、その操作に対応しかつBluetoothのHIDプロファイルに準拠した操作情報（移動量情報、クリック情報またはリリース情報）を生成する。通信部１６は、制御部１５にて生成された操作情報を、BluetoothのHIDプロファイルにて規定された通信方式で、BluetoothのHIDプロファイルを有するスマートフォン２に送信する。   According to the present embodiment, the touch panel 14 detects an operation on the in-vehicle device 1. In response to the operation detected on the touch panel 14, the control unit 15 generates operation information (movement amount information, click information, or release information) corresponding to the operation and conforming to the Bluetooth HID profile. The communication unit 16 transmits the operation information generated by the control unit 15 to the smartphone 2 having the Bluetooth HID profile by a communication method defined by the Bluetooth HID profile.

本実施形態では、車載機１とスマートフォン２との通信を、BluetoothのHIDプロファイルにて規定された通信方式で行うため、管理者権限を有さない者でも車載機１とスマートフォン２とを接続することができる。   In the present embodiment, since communication between the in-vehicle device 1 and the smartphone 2 is performed by a communication method defined by the Bluetooth HID profile, even those who do not have administrator authority connect the in-vehicle device 1 and the smartphone 2. be able to.

そして、車載機１は、ユーザによる操作を、スマートフォン２が有するBluetoothのHIDプロファイルに準拠した操作情報に変換し、その操作情報を、BluetoothのHIDプロファイルにて規定された通信方式でスマートフォン２に送信する。このため、車載機１からの操作情報にて、スマートフォン２を操作可能になる。   The in-vehicle device 1 converts the operation by the user into operation information that conforms to the Bluetooth HID profile of the smartphone 2, and transmits the operation information to the smartphone 2 by the communication method defined by the Bluetooth HID profile. To do. For this reason, the smartphone 2 can be operated with the operation information from the in-vehicle device 1.

したがって、車載機による遠隔操作用の専用のアプリケーションプログラムを必要とせずに、車載機１にてスマートフォン２を操作することが可能になる。   Therefore, the smartphone 2 can be operated by the in-vehicle device 1 without requiring a dedicated application program for remote operation by the in-vehicle device.

なお、この効果は、タッチパネル１４と制御部１５と通信部１６（無線通信部１１）とからなる車載機でも奏する。   This effect is also achieved by an in-vehicle device including the touch panel 14, the control unit 15, and the communication unit 16 (wireless communication unit 11).

また、車載機による遠隔操作用の専用のアプリケーションプログラムを動作させて車載機１からの情報を解析する必要がなくなるので、スマートフォン２では、操作情報に対する追従性が向上する。   In addition, since it is not necessary to operate the dedicated application program for remote operation by the in-vehicle device and analyze the information from the in-vehicle device 1, the smartphone 2 improves the follow-up performance to the operation information.

また、本実施形態では、BluetoothのHIDプロファイルにて定められた通信方式が、所定通信方式として使用される。このため、BluetoothのHIDプロファイルを用いることで、管理者権限を有する者でないと行えない特殊な作業を行うことなく、車載機１にてスマートフォン２を操作することが可能になる。   In the present embodiment, the communication method defined by the Bluetooth HID profile is used as the predetermined communication method. For this reason, by using the Bluetooth HID profile, it is possible to operate the smartphone 2 on the in-vehicle device 1 without performing special work that can only be performed by a person having administrator authority.

なお、所定通信方式は、BluetoothのHIDプロファイルにて定められた通信方式に限らない。例えば、所定通信方式として、USB（Universal Serial Bus）マウスに対応する通信方式が用いられてもよい。   The predetermined communication method is not limited to the communication method defined by the Bluetooth HID profile. For example, a communication method corresponding to a USB (Universal Serial Bus) mouse may be used as the predetermined communication method.

所定通信方式として、USBマウスに対応する通信方式が用いられる場合、車載機１はUSBケーブルを有し、スマートフォン２はUSBポートを有し、車載機１のUSBケーブルがスマートフォン２のUSBポートに接続される。制御部１５は、タッチパネル１４が検出した操作に対応しかつUSBマウスに対応する通信方式に準拠した操作情報（移動量情報、クリック情報またはリリース情報）を生成し、操作情報をUSBケーブルでスマートフォン２に送信する。この場合、USBケーブルが通信手段の一例となる。このように、操作情報の通信は、無線通信でもよく有線通信でもよい。   When a communication method corresponding to a USB mouse is used as the predetermined communication method, the in-vehicle device 1 has a USB cable, the smartphone 2 has a USB port, and the USB cable of the in-vehicle device 1 is connected to the USB port of the smartphone 2. Is done. The control unit 15 generates operation information (movement amount information, click information or release information) corresponding to the operation detected by the touch panel 14 and compatible with the USB mouse, and the operation information is transmitted to the smartphone 2 using the USB cable. Send to. In this case, the USB cable is an example of communication means. As described above, the communication of the operation information may be wireless communication or wired communication.

また、本実施形態では、タッチパネル１４が検出手段として用いられている。このため、車載機１のタッチパネル１４を、スマートフォン２の操作を受け付けるためのインターフェイスとして用いることが可能になる。   In the present embodiment, the touch panel 14 is used as a detection unit. For this reason, it becomes possible to use the touch panel 14 of the vehicle equipment 1 as an interface for accepting the operation of the smartphone 2.

なお、検出手段は、タッチパネル１４に限らず適宜変更可能である。例えば、検出手段として、ユーザによる音声操作を検出する音声解析部が用いられてもよい。   The detection means is not limited to the touch panel 14 and can be changed as appropriate. For example, a voice analysis unit that detects a voice operation by the user may be used as the detection unit.

また、本実施形態では、表示部１３がタッチパネル１４の背面側に設けられ、通信部１６は、スマートフォン２からスマートフォン２の画面（スマートフォン画面２ａ２）を表す画面情報を受信し、表示部１３は、画面情報に応じてスマートフォン画面２ａ１を表示する。制御部１５は、画面情報にて規定されるスマートフォン画面２ａ２のサイズと、表示部１３内のスマートフォン画面２ａ１の位置と、を表す位置特定情報を生成する。制御部１５は、タッチパネル１４にて検出されたタッチ操作に応じて、位置特定情報を用いて、タッチパネル１４上でのタッチ操作の位置を、スマートフォン２でのスマートフォン画面２ａ２上の操作位置に変換する。制御部１５は、スマートフォン２でのスマートフォン画面２ａ２上の操作位置に基づいて、操作情報（移動量情報やクリック情報）を生成する。   Moreover, in this embodiment, the display part 13 is provided in the back side of the touch panel 14, the communication part 16 receives the screen information showing the screen (smart phone screen 2a2) of the smart phone 2 from the smart phone 2, and the display part 13 is the following. The smartphone screen 2a1 is displayed according to the screen information. The control part 15 produces | generates the positional specific information showing the size of the smart phone screen 2a2 prescribed | regulated by screen information, and the position of the smart phone screen 2a1 in the display part 13. FIG. The control unit 15 converts the position of the touch operation on the touch panel 14 to the operation position on the smartphone screen 2 a 2 on the smartphone 2 using the position specifying information according to the touch operation detected on the touch panel 14. . The control unit 15 generates operation information (movement amount information and click information) based on the operation position on the smartphone screen 2a2 on the smartphone 2.

このため、車載機１におけるタッチ操作を、スマートフォン２におけるタッチ操作として処理することが可能になる。   For this reason, it becomes possible to process the touch operation in the vehicle equipment 1 as the touch operation in the smartphone 2.

また、本実施形態では、制御部１５は、スマートフォン２でのスマートフォン画面２ａ２上の操作位置に基づいて、スマートフォン２でのスマートフォン画面２ａ２上に設定された基準位置から、スマートフォン２でのスマートフォン画面２ａ２上の操作位置へ、の移動量を表す移動量情報と、クリック操作を表すクリック情報と、を操作情報として生成する。   Moreover, in this embodiment, the control part 15 is based on the operation position on the smart phone screen 2a2 in the smart phone 2, From the reference position set on the smart phone screen 2a2 in the smart phone 2, the smart phone screen 2a2 in the smart phone 2 The movement amount information indicating the movement amount to the upper operation position and the click information indicating the click operation are generated as operation information.

このため、車載機１におけるタッチ操作を、BluetoothのHIDプロファイルに準拠した操作情報に変更することが可能になる。   For this reason, it becomes possible to change the touch operation in the vehicle equipment 1 to the operation information based on the Bluetooth HID profile.

また、本実施形態では、制御部１５は、タッチパネル１４がタッチ操作の終了を検出すると、スマートフォン２でのスマートフォン画面２ａ２上の操作位置から、スマートフォン２でのスマートフォン画面２ａ２上に設定された基準位置へ、の移動量を表す移動量情報と、リリース操作を表すリリース情報と、を操作情報として生成する。   Moreover, in this embodiment, the control part 15 will be the reference position set on the smart phone screen 2a2 in the smart phone 2 from the operation position on the smart phone screen 2a2 in the smart phone 2, if the touch panel 14 detects completion | finish of touch operation. The movement amount information representing the amount of movement and the release information representing the release operation are generated as operation information.

このため、タッチパネル１４へのタッチ操作の終了に伴い、スマートフォン２でのスマートフォン画面２ａへの仮想的なタッチ操作を終了でき、さらに、マウスカーソルの位置を基準位置に戻すことが可能になる。   For this reason, with the completion of the touch operation on the touch panel 14, the virtual touch operation on the smartphone screen 2a on the smartphone 2 can be terminated, and the position of the mouse cursor can be returned to the reference position.

また、本実施形態では、制御部１５は、タッチパネル１４がタッチ操作の検出後にタッチ操作を継続した状況でのタッチ操作の位置の移動を検出すると、位置特定情報を用いて、移動後のタッチ操作の位置を、スマートフォン２でのスマートフォン画面２ａ２上の移動位置に変換する。そして、制御部１５は、スマートフォン２でのスマートフォン画面２ａ２上の操作位置から、スマートフォン２でのスマートフォン画面２ａ２上の移動位置へ、の移動量を表す移動量情報を、操作情報として生成する。   In the present embodiment, when the control unit 15 detects the movement of the position of the touch operation in a situation where the touch operation is continued after the touch panel 14 detects the touch operation, the touch operation after the movement is performed using the position specifying information. Is converted into a movement position on the smartphone screen 2a2 on the smartphone 2. And the control part 15 produces | generates the movement amount information showing the movement amount from the operation position on the smart phone screen 2a2 in the smart phone 2 to the movement position on the smart phone screen 2a2 as operation information.

このため、車載機１のタッチパネル１４へのドラッグ操作やフリック操作を、BluetoothのHIDプロファイルに準拠した操作情報に変更することが可能になる。   For this reason, it becomes possible to change the drag operation and flick operation to the touch panel 14 of the vehicle-mounted device 1 to operation information conforming to the Bluetooth HID profile.

（第２実施形態）
次に、本発明の第２実施形態について説明する。(Second Embodiment)
Next, a second embodiment of the present invention will be described.

第１実施形態では、スマートフォン画面２ａ２上の基準位置が固定されていたが、第２実施形態では、スマートフォン画面２ａ２上の基準位置は、タッチ操作の終了位置に応じて変更される。   In the first embodiment, the reference position on the smartphone screen 2a2 is fixed, but in the second embodiment, the reference position on the smartphone screen 2a2 is changed according to the end position of the touch operation.

以下、第２実施形態について、第１実施形態と異なる点を中心に説明する。   Hereinafter, the second embodiment will be described focusing on differences from the first embodiment.

図２０は、本発明の第２実施形態の車載機１０Ａとスマートフォン２とを示したブロック図である。なお、図２０において、図１に示したものと同一構成のものには同一符号を付してある。   FIG. 20 is a block diagram showing the in-vehicle device 10A and the smartphone 2 according to the second embodiment of the present invention. In FIG. 20, the same components as those shown in FIG.

車載機１０Ａは、無線通信部１１と、有線通信部１２と、表示部１３と、タッチパネル１４と、制御部１５Ａと、を含む。   The in-vehicle device 10A includes a wireless communication unit 11, a wired communication unit 12, a display unit 13, a touch panel 14, and a control unit 15A.

制御部１５Ａは、生成手段の一例である。   The control unit 15A is an example of a generation unit.

制御部１５Ａは、図１に示した制御部１５が有する機能に加えて、スマートフォン画面２ａ２上の基準位置をタッチ操作の終了位置に応じて変更する機能を有する。   The control unit 15A has a function of changing the reference position on the smartphone screen 2a2 in accordance with the end position of the touch operation, in addition to the function of the control unit 15 illustrated in FIG.

本実施形態では、図２１に示すように、タッチパネル１４が、左上領域１４ａ、右上領域１４ｂ、左下領域１４ｃおよび右下領域１４ｄの４つの領域に分けられている。   In the present embodiment, as shown in FIG. 21, the touch panel 14 is divided into four areas: an upper left area 14a, an upper right area 14b, a lower left area 14c, and a lower right area 14d.

制御部１５Ａは、タッチ操作の終了位置が左上領域１４ａに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の左上隅の位置に設定する。   When the end position of the touch operation is included in the upper left area 14a, the control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the upper left corner of the smartphone screen 2a2.

また、制御部１５Ａは、タッチ操作の終了位置が右上領域１４ｂに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の右上隅の位置に設定する。   In addition, when the end position of the touch operation is included in the upper right region 14b, the control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the upper right corner of the smartphone screen 2a2.

また、制御部１５Ａは、タッチ操作の終了位置が左下領域１４ｃに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の左下隅の位置に設定する。   In addition, when the end position of the touch operation is included in the lower left region 14c, the control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the lower left corner of the smartphone screen 2a2.

また、制御部１５Ａは、タッチ操作の終了位置が右下領域１４ｄに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の右下隅の位置に設定する。   In addition, when the end position of the touch operation is included in the lower right region 14d, the control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the lower right corner of the smartphone screen 2a2.

本実施形態によれば、制御部１５Ａは、タッチパネル１４上でのタッチ操作の終了位置に応じて、スマートフォン画面２ａ２上の基準位置を変更する。   According to the present embodiment, the control unit 15A changes the reference position on the smartphone screen 2a2 according to the end position of the touch operation on the touch panel 14.

一般的に、スマートフォン等の携帯端末に設けられたタッチパネルにおいて、タッチ操作が終了した後に、新たなタッチ操作が行われる位置は、直前のタッチ操作の終了位置の近くであることが多い。   Generally, in a touch panel provided on a mobile terminal such as a smartphone, a position where a new touch operation is performed after the touch operation is completed is often near the end position of the previous touch operation.

このため、制御部１５Ａが、タッチパネル１４上でのタッチ操作の終了位置に応じてスマートフォン画面２ａ２上の基準位置を変更することによって、スマートフォン画面２ａ２上の基準位置が、次に行われるタッチ操作に応じた操作位置の近くになる可能性を高くすることができる。スマートフォン画面２ａ２上の基準位置が、次に行われるタッチ操作に応じた操作位置の近くになると、マウスカーソル２１ａの移動量を少なくでき、マウスカーソル２１ａの移動に伴う処理を少なくすることが可能になる。   For this reason, the control unit 15A changes the reference position on the smartphone screen 2a2 according to the end position of the touch operation on the touch panel 14, so that the reference position on the smartphone screen 2a2 is changed to the next touch operation to be performed. The possibility of being close to the corresponding operation position can be increased. When the reference position on the smartphone screen 2a2 is close to the operation position corresponding to the next touch operation, the amount of movement of the mouse cursor 21a can be reduced, and the processing associated with the movement of the mouse cursor 21a can be reduced. Become.

（第３実施形態）
次に、本発明の第３実施形態について説明する。(Third embodiment)
Next, a third embodiment of the present invention will be described.

第３実施形態は、第１実施形態または第２実施形態に、車載機でのスマートフォン画面２ａ１についての自動キャリブレーション機能を付加したものである。   In the third embodiment, an automatic calibration function for the smartphone screen 2a1 in the in-vehicle device is added to the first embodiment or the second embodiment.

なお、自動キャリブレーション機能は、スマートフォンでのスマートフォン画面２ａ２が、縦長の画面（縦表示）または横長の画面（横表示）に切り替わる場合に実行される。具体的には、車載機が、スマートフォン画面２ａ２が縦表示または横表示かを示す状態情報（以下、単に「状態情報」と称する）を、SPPプロファイルを用いてスマートフォンから取得し、その状態情報に応じて車載機でのスマートフォン画面２ａ１を変更する。   The automatic calibration function is executed when the smartphone screen 2a2 on the smartphone is switched to a vertically long screen (vertical display) or a horizontally long screen (horizontal display). Specifically, the in-vehicle device acquires state information indicating whether the smartphone screen 2a2 is displayed vertically or horizontally (hereinafter simply referred to as “state information”) from the smartphone using the SPP profile, and includes the state information in the state information. Accordingly, the smartphone screen 2a1 on the in-vehicle device is changed.

以下、第３実施形態について、第１実施形態に自動キャリブレーション機能が付加された例を説明する。   Hereinafter, an example in which an automatic calibration function is added to the first embodiment will be described for the third embodiment.

図２２は、本発明の第３実施形態の車載機１０Ｂとスマートフォン２Ｂとを示したブロック図である。なお、図２２において、図１に示したものと同一構成のものには同一符号を付してある。   FIG. 22 is a block diagram showing the in-vehicle device 10B and the smartphone 2B according to the third embodiment of the present invention. In FIG. 22, the same components as those shown in FIG.

スマートフォン２Ｂは、インターネット通信機能を有し、表示部２１と、タッチパネル２２と、無線通信部２３と、有線通信部２４と、制御部２５Ｂと、を含む。   The smartphone 2B has an Internet communication function and includes a display unit 21, a touch panel 22, a wireless communication unit 23, a wired communication unit 24, and a control unit 25B.

制御部２５Ｂは、図１に示した制御部２５が有する機能を有する。   The control unit 25B has the function of the control unit 25 shown in FIG.

さらに、制御部２５Ｂは、スマートフォン２Ｂでのスマートフォン画面２ａ２が、縦長の画面または横長の画面に切り替わると、SPPプロファイルを用いて状態情報を車載機１０Ｂに送信する。   Further, when the smartphone screen 2a2 on the smartphone 2B is switched to a vertically long screen or a horizontally long screen, the control unit 25B transmits state information to the in-vehicle device 10B using the SPP profile.

また、制御部２５Ｂは、縦長の画面での基点の位置を表す縦画面設定情報と、横長の画面での基点の位置を表す横画面設定情報と、を予め保持している。   The control unit 25B holds in advance vertical screen setting information indicating the position of the base point on the vertically long screen and horizontal screen setting information indicating the position of the base point on the horizontally long screen.

車載機１０Ｂは、無線通信部１１と、有線通信部１２と、表示部１３と、タッチパネル１４と、制御部１５Ｂと、を含む。   The in-vehicle device 10B includes a wireless communication unit 11, a wired communication unit 12, a display unit 13, a touch panel 14, and a control unit 15B.

制御部１５Ｂは、生成手段の一例である。   The control unit 15B is an example of a generation unit.

制御部１５Ｂは、図１に示した制御部１５が有する機能を有する。   The control unit 15B has the function of the control unit 15 shown in FIG.

さらに、制御部１５Ｂは、SPPプロファイルを用いてスマートフォン２Ｂから状態情報を受信すると、状態情報を参照して、スマートフォン２Ｂでのスマートフォン画面２ａ２が縦長の画面か横長の画面かを確認する。   Furthermore, when receiving the state information from the smartphone 2B using the SPP profile, the control unit 15B refers to the state information and confirms whether the smartphone screen 2a2 on the smartphone 2B is a vertically long screen or a horizontally long screen.

制御部１５Ｂは、スマートフォン画面２ａ２が縦長の画面である場合には、SPPプロファイルを用いて、縦画面設定情報をスマートフォン２Ｂから取得し、取得された縦長の画面での基点の位置を保持する。   When the smartphone screen 2a2 is a vertically long screen, the control unit 15B acquires the vertical screen setting information from the smartphone 2B using the SPP profile, and holds the position of the base point on the acquired vertically long screen.

また、制御部１５Ｂは、スマートフォン画面２ａ２が横長の画面である場合には、SPPプロファイルを用いて、横画面設定情報をスマートフォン２Ｂから取得し、取得された横長の画面での基点の位置を保持する。   In addition, when the smartphone screen 2a2 is a landscape screen, the control unit 15B acquires landscape screen setting information from the smartphone 2B using the SPP profile and holds the position of the base point on the obtained landscape screen. To do.

なお、制御部１５Ｂは、例えば、スマートフォン２Ｂが縦画面設定情報と横画面設定情報とを保持していない場合、縦長の画面での基点の位置を、制御部１５Ｂが表示面１３ｂに縦長のスマートフォン画面２ａ１の表示を最初に行ったときのみに検出し、その検出結果を保持し、また、横長の画面での基点の位置を、制御部１５Ｂが表示面１３ｂに横長のスマートフォン画面２ａ１の表示を最初に行ったときのみに検出し、その検出結果を保持してもよい。   For example, when the smartphone 2B does not hold the vertical screen setting information and the horizontal screen setting information, the control unit 15B indicates the position of the base point on the vertical screen, and the control unit 15B displays the vertical smartphone on the display surface 13b. Only when the display of the screen 2a1 is performed for the first time, the detection result is retained, and the position of the base point on the horizontally long screen is displayed by the control unit 15B on the display surface 13b. Detection may be performed only when it is performed for the first time, and the detection result may be retained.

本実施形態によれば、スマートフォン２Ｂでのスマートフォン画面２ａ２の縦表示や横表示の切り替わりに応じて、車載機１０Ｂでのスマートフォン画面２ａ１を自動的に変更することが可能になる。   According to the present embodiment, it is possible to automatically change the smartphone screen 2a1 on the in-vehicle device 10B in accordance with the switching between the vertical display and the horizontal display of the smartphone screen 2a2 on the smartphone 2B.

なお、図２２は、第１実施形態に自動キャリブレーション機能が付加された例を示したが、第２実施形態に自動キャリブレーション機能が付加されてもよい。   FIG. 22 shows an example in which the automatic calibration function is added to the first embodiment, but the automatic calibration function may be added to the second embodiment.

なお、上記各実施形態において、スマートフォン２に、車載機１からの操作情報にしたがって動作することを前提に作成された専用アプリケーション（アプリケーションプログラム）が搭載されていてもよい。以下、スマートフォン２内の制御部２５のうち、専用アプリケーションを実行している部分を「アプリケーション実行部」と称する。   In each of the above embodiments, a dedicated application (application program) created on the assumption that the smartphone 2 operates in accordance with operation information from the in-vehicle device 1 may be installed. Hereinafter, the portion of the control unit 25 in the smartphone 2 that executes the dedicated application is referred to as an “application execution unit”.

専用アプリケーションが実行されている状況で、制御部２５が、無線通信部２３を介して車載機１からの操作情報を受け付けると、その操作情報をアプリケーション実行部に渡す。アプリケーション実行部は、その操作情報を処理する。   When the control unit 25 receives operation information from the in-vehicle device 1 via the wireless communication unit 23 in a situation where the dedicated application is being executed, the control unit 25 passes the operation information to the application execution unit. The application execution unit processes the operation information.

また、上記各実施形態において、有線通信部１２と有線通信部２４は、HDMI端子を用いた有線通信を行ったが、有線通信部１２と有線通信部２４との間の有線通信は、HDMI端子を用いた有線通信に限らず適宜変更可能である。例えば、有線通信部１２と有線通信部２４との間の有線通信として、MHL（Mobile High-Definition Link）が用いられてもよい。   Moreover, in each said embodiment, although the wired communication part 12 and the wired communication part 24 performed wired communication using the HDMI terminal, the wired communication between the wired communication part 12 and the wired communication part 24 is HDMI terminal. The present invention is not limited to wired communication using, and can be changed appropriately. For example, MHL (Mobile High-Definition Link) may be used as wired communication between the wired communication unit 12 and the wired communication unit 24.

また、上記各実施形態において、有線通信部１２と有線通信部２４との間の有線通信の代わりに、画面を圧縮して送信する無線通信、または無線HDMIなど、無線通信が利用されてもよい。   In each of the above embodiments, instead of wired communication between the wired communication unit 12 and the wired communication unit 24, wireless communication such as wireless communication that compresses and transmits a screen, or wireless HDMI may be used. .

また、上記各実施形態では、端末情報の通信にSPPプロファイルが用いられたが、端末情報の通信は、SPPプロファイルにしたがった通信に限らず、適宜変更可能である。   In each of the above embodiments, the SPP profile is used for communication of terminal information. However, the communication of terminal information is not limited to communication according to the SPP profile, and can be changed as appropriate.

また、上記各実施形態において、制御部１５は、タッチパネル１４がマルチタッチ操作を検出した場合、マルチタッチ操作に対応しHIDプロファイルに準拠した操作情報を生成してもよい。   In each of the above embodiments, when the touch panel 14 detects a multi-touch operation, the control unit 15 may generate operation information corresponding to the multi-touch operation and conforming to the HID profile.

また、上記各実施形態では、車載機１および１０Ａは、スマートフォン２から情報を受信し、その情報に応じた表示を実行する。このため、車載機１および１０Ａは、スマートフォン２がインターネット通信を行って取得した情報を表示できる。よって、車載機１および１０Ａには、インターネット通信機能を搭載しなくてもよくなり、車載機１および１０Ａについての通信の費用を抑えることが可能になる。   Moreover, in each said embodiment, the vehicle equipment 1 and 10A receives information from the smart phone 2, and performs the display according to the information. For this reason, the in-vehicle devices 1 and 10A can display information acquired by the smartphone 2 through Internet communication. Therefore, the in-vehicle devices 1 and 10A do not need to be equipped with an Internet communication function, and it is possible to reduce the communication cost for the in-vehicle devices 1 and 10A.

また、上記実施形態において、車載機１または１０Ａ（制御部１５または１５Ａ）は、コンピュータにて実現されてもよい。この場合、このコンピュータは、コンピュータにて読み取り可能なＣＤ−ＲＯＭ（Compact Disk Read Only Memory）のような記録媒体に記録されたプログラムを読込み実行して、または、有線通信または無線通信で受信したプログラム（例えばアプリケーションプログラム）を受信し実行して、車載機１または１０Ａ（制御部１５または１５Ａ）として機能する。記録媒体は、ＣＤ−ＲＯＭに限らず適宜変更可能である。   Moreover, in the said embodiment, the vehicle equipment 1 or 10A (control part 15 or 15A) may be implement | achieved by the computer. In this case, the computer reads and executes a program recorded on a recording medium such as a CD-ROM (Compact Disk Read Only Memory) that can be read by the computer, or a program received by wired communication or wireless communication. (For example, an application program) is received and executed, and functions as the vehicle-mounted device 1 or 10A (the control unit 15 or 15A). The recording medium is not limited to the CD-ROM and can be changed as appropriate.

以上説明した各実施形態において、図示した構成は単なる一例であって、本発明はその構成に限定されるものではない。   In each embodiment described above, the illustrated configuration is merely an example, and the present invention is not limited to the configuration.

実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。この出願は、２０１２年８月２７日に出願された日本出願特願２０１２−１８６５８５を基礎とする優先権を主張し、その開示の全てをここに取り込む。   Although the present invention has been described with reference to the embodiments, the present invention is not limited to the above-described embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention. This application claims the priority on the basis of Japanese application Japanese Patent Application No. 2012-186585 for which it applied on August 27, 2012, and takes in those the indications of all here.

１、１０Ａ、１０Ｂ 車載機
１１ 無線通信部
１２ 有線通信部
１３ 表示部
１４ タッチパネル
１５、１５Ａ、１５Ｂ 制御部
１６ 通信部
２、２Ｂ スマートフォン
２１ 表示部
２２ タッチパネル
２３ 無線通信部
２４ 有線通信部
２５、２５Ｂ 制御部1, 10A, 10B In-vehicle device 11 Wireless communication unit 12 Wired communication unit 13 Display unit 14 Touch panel 15, 15A, 15B Control unit 16 Communication unit 2, 2B Smartphone 21 Display unit 22 Touch panel 23 Wireless communication unit 24 Wired communication unit 25, 25B Control unit

Claims (8)

所定通信方式に対応する携帯端末と通信する車載機であって、
前記車載機への操作としてタッチ操作を検出するタッチパネルと、
前記タッチパネルが検出した車載機への操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手段と、
前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手段と、
を含み、
前記生成手段は、前記タッチパネルにて検出されたタッチ操作に応じて、前記タッチパネル上での前記タッチ操作の位置を前記携帯端末の表示画面上の操作位置に変換し、前記携帯端末の表示画面上に設定された基準位置から当該携帯端末の表示画面上の操作位置への移動量を前記操作情報として生成し、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する、車載機。 An in-vehicle device that communicates with a portable terminal corresponding to a predetermined communication method,
A touch panel for detecting a touch operation as an operation to the in-vehicle device,
In response to an operation on the in-vehicle device detected by the touch panel, a generation unit that generates operation information corresponding to the operation and complying with the predetermined communication method,
Communication means for transmitting the operation information to the portable terminal by the predetermined communication method;
Only including,
The generation means converts the position of the touch operation on the touch panel into an operation position on the display screen of the mobile terminal according to the touch operation detected by the touch panel, and displays the position on the display screen of the mobile terminal. A movement amount from the reference position set to the operation position on the display screen of the mobile terminal is generated as the operation information, and the reference position is changed according to the end position of the touch operation on the touch panel. In-vehicle machine. 請求項１に記載の車載機において、
前記所定通信方式は、BluetoothのHIDプロファイルにて定められた通信方式、または、USBマウスに対応する通信方式である、車載機。 The in-vehicle device according to claim 1,
The in-vehicle device, wherein the predetermined communication method is a communication method defined by a Bluetooth HID profile or a communication method corresponding to a USB mouse. 請求項１または２に記載の車載機において、
前記タッチパネルの背面側に設けられた表示手段をさらに含み、
前記通信手段は、前記携帯端末から前記携帯端末の表示画面を表す画面情報を受信し、
前記表示手段は、前記画面情報に応じて前記携帯端末の表示画面を表示し、
前記生成手段は、前記画面情報にて規定される前記携帯端末の表示画面のサイズと、前記表示手段内の前記携帯端末の表示画面の位置と、を表す位置特定情報を生成し、当該携帯端末の表示画面上の操作位置に基づいて前記操作情報を生成する、車載機。 In the in-vehicle device according to claim 1 or 2 ,
It further includes display means provided on the back side of the touch panel,
The communication means receives screen information representing a display screen of the mobile terminal from the mobile terminal,
The display means displays a display screen of the mobile terminal according to the screen information,
The generating unit generates position specifying information representing a size of a display screen of the portable terminal defined by the screen information and a position of the display screen of the portable terminal in the display unit, and the portable terminal A vehicle-mounted device that generates the operation information based on an operation position on the display screen. 請求項３に記載の車載機において、
前記生成手段は、前記携帯端末の表示画面上の操作位置に基づいて、クリック操作を表すクリック情報を生成する、車載機。 In the in-vehicle device according to claim 3 ,
The generation unit, based on the operation position on the display screen of the portable terminal, generating a click information indicating a click operation, the vehicle-mounted device. 請求項４に記載の車載機において、
前記生成手段は、前記タッチパネルが前記タッチ操作の終了を検出すると、前記携帯端末の表示画面上の操作位置から前記基準位置への移動量を表す移動量情報と、リリース操作を表すリリース情報と、を前記操作情報として生成する、車載機。 The in-vehicle device according to claim 4 ,
The generation means, when the touch panel detects the end of the touch operation, movement amount information representing a movement amount from the operation position on the display screen of the portable terminal to the reference position, release information representing a release operation, Is generated as the operation information. 請求項３から５のいずれか１項に記載の車載機において、
前記生成手段は、前記タッチパネルが前記タッチ操作の検出後に当該タッチ操作が継続された状況での当該タッチ操作の位置の移動を検出すると、前記位置特定情報を用いて、前記移動後の前記タッチ操作の位置を前記携帯端末の表示画面上の移動位置に変換し、前記携帯端末の表示画面上の操作位置から前記携帯端末の表示画面上の移動位置への移動量を表す移動量情報を、前記操作情報として生成する、車載機。 The in-vehicle device according to any one of claims 3 to 5 ,
The generation unit detects the movement of the position of the touch operation in a state where the touch operation is continued after the touch panel detects the touch operation, and uses the position specifying information to perform the touch operation after the movement. Is converted into a movement position on the display screen of the portable terminal, and movement amount information representing the movement amount from the operation position on the display screen of the portable terminal to the movement position on the display screen of the portable terminal is An in-vehicle device that is generated as operation information. 所定通信方式に対応する携帯端末と通信する車載機が行う携帯端末制御方法であって、
前記車載機への操作としてタッチ操作をタッチパネルが検出する検出ステップと、
前記タッチパネルが検出した操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成ステップと、
前記操作情報を前記所定通信方式で前記携帯端末に送信する通信ステップと、を含み、
前記生成ステップは、前記タッチパネルにて検出されたタッチ操作に応じて、前記タッチパネル上での前記タッチ操作の位置を前記携帯端末の表示画面上の操作位置に変換し、前記携帯端末の表示画面上に設定された基準位置から当該携帯端末の表示画面上の操作位置への移動量を前記操作情報として生成し、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する、携帯端末制御方法。 A mobile terminal control method performed by an in-vehicle device that communicates with a mobile terminal corresponding to a predetermined communication method,
A detection step in which a touch panel detects a touch operation as an operation to the in-vehicle device;
In accordance with the operation detected by the touch panel, a generation step for generating operation information corresponding to the operation and complying with the predetermined communication method;
Look including a communication step of transmitting to said mobile terminal by said predetermined communication scheme the operation information,
The generation step converts the position of the touch operation on the touch panel into an operation position on the display screen of the mobile terminal according to the touch operation detected by the touch panel, A movement amount from the reference position set to the operation position on the display screen of the mobile terminal is generated as the operation information, and the reference position is changed according to the end position of the touch operation on the touch panel. , Mobile terminal control method. 所定通信方式に対応する携帯端末と通信するコンピュータに、
前記車載機への操作としてタッチ操作をタッチパネルが検出する検出手順と、
前記タッチパネルが検出した操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手順と、
前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手順と、を実行させ、
前記生成手順は、前記タッチパネルにて検出されたタッチ操作に応じて、前記タッチパネル上での前記タッチ操作の位置を前記携帯端末の表示画面上の操作位置に変換し、前記携帯端末の表示画面上に設定された基準位置から当該携帯端末の表示画面上の操作位置への移動量を前記操作情報として生成し、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する、プログラム。 To a computer that communicates with a portable terminal that supports a predetermined communication method,
A detection procedure in which a touch panel detects a touch operation as an operation to the in-vehicle device;
In accordance with the operation detected by the touch panel, a generation procedure for generating operation information corresponding to the operation and compliant with the predetermined communication method,
A communication procedure for transmitting the operation information to the mobile terminal by the predetermined communication method ,
The generation procedure converts the position of the touch operation on the touch panel into an operation position on the display screen of the mobile terminal according to the touch operation detected on the touch panel, A movement amount from the reference position set to the operation position on the display screen of the mobile terminal is generated as the operation information, and the reference position is changed according to the end position of the touch operation on the touch panel. ,program.
JP2014532833A 2012-08-27 2013-05-22 In-vehicle device, portable terminal control method and program Active JP6032286B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012186585 2012-08-27
JP2012186585 2012-08-27
PCT/JP2013/064147 WO2014034193A1 (en) 2012-08-27 2013-05-22 Onboard device, mobile terminal control method, and recording medium

Publications (2)

Publication Number Publication Date
JPWO2014034193A1 JPWO2014034193A1 (en) 2016-08-08
JP6032286B2 true JP6032286B2 (en) 2016-11-24

Family

ID=50183020

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014532833A Active JP6032286B2 (en) 2012-08-27 2013-05-22 In-vehicle device, portable terminal control method and program

Country Status (2)

Country Link
JP (1) JP6032286B2 (en)
WO (1) WO2014034193A1 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109240633B (en) * 2013-03-13 2021-10-22 歌乐株式会社 Display device and information terminal operation method
CN104182167A (en) * 2013-05-27 2014-12-03 阿尔派株式会社 Display device, display device operation method and information display system
JP6111480B2 (en) * 2013-07-05 2017-04-12 シャープ株式会社 Display device, terminal device, display system, and display method
JP2015187830A (en) * 2014-03-12 2015-10-29 パナソニックＩｐマネジメント株式会社 display control system
JP2015196495A (en) * 2014-04-03 2015-11-09 株式会社デンソー Input device for vehicle
JP6397530B2 (en) * 2017-03-24 2018-09-26 クラリオン株式会社 Display device
TWI707275B (en) * 2018-03-22 2020-10-11 大陸商東莞寶德電子有限公司 Computer input system and input method with distributing computation function
JPWO2019208323A1 (en) * 2018-04-23 2020-10-01 仁也 中島 Remote control device for mobile terminals
CN113360116A (en) * 2021-06-25 2021-09-07 阿波罗智联(北京)科技有限公司 Method, device and equipment for controlling terminal and storage medium

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001296948A (en) * 2000-04-12 2001-10-26 Ricoh Co Ltd Display system, information input/display system, picture scroll method and storage medium
JP2007258984A (en) * 2006-03-22 2007-10-04 Toshiba Corp Radio communication system and radio communication method
JP5494318B2 (en) * 2010-07-20 2014-05-14 株式会社デンソー Mobile terminal and communication system
JP2012093940A (en) * 2010-10-27 2012-05-17 Kddi Corp Remote operation system, remote operation method and program
JP2012129765A (en) * 2010-12-15 2012-07-05 Alpine Electronics Inc Electronic device

Also Published As

Publication number Publication date
WO2014034193A1 (en) 2014-03-06
JPWO2014034193A1 (en) 2016-08-08

Similar Documents

Publication Publication Date Title
JP6032286B2 (en) In-vehicle device, portable terminal control method and program
KR102016975B1 (en) Display apparatus and method for controlling thereof
JP5999573B2 (en) Information display processing device
CN110320976B (en) User terminal device and display method thereof
JP5825631B2 (en) Electronic equipment
JP5871080B2 (en) Image display device, portable terminal device, information processing system, image display device control method, and program
JP6020864B2 (en) In-vehicle information system
WO2014017722A1 (en) Display device for executing multiple applications and method for controlling the same
EP2753053B1 (en) Method and apparatus for dynamic display box management
EP3021572A1 (en) Display apparatus and control method thereof
CN109597548B (en) Menu display method, device, equipment and storage medium
JP2012008968A (en) On-vehicle device to cooperate with mobile device and to achieve input operation that is possible for mobile device
JP2014229304A (en) Display device, operation method of display device, information display system and operation program of display device
CN110879683A (en) Screen information sharing method, terminal and vehicle
EP2645622B1 (en) Image processing apparatus and image processing system
KR20140028546A (en) Apparatus for controlling key input and method for the same
US11144155B2 (en) Electronic device
JP2014219885A (en) Test support method and test support system
WO2014104685A1 (en) Display apparatus and method for providing menu thereof
CN104765564A (en) Screen-shooting method and device
JP6034709B2 (en) Terminal device, external display device, and information system including terminal device and external display device
KR20150044417A (en) Method for user interface integration between plurality of terminals, and terminal thereof
JP6397530B2 (en) Display device
JP5213033B2 (en) Software input key display method, program, and information processing terminal
KR102425957B1 (en) Mobile apparatus displaying end effect and cotrol method there of

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160927

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161010

R150 Certificate of patent or registration of utility model

Ref document number: 6032286

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150