WO2014034193A1 - 車載機、携帯端末制御方法および記録媒体 - Google Patents

車載機、携帯端末制御方法および記録媒体 Download PDF

Info

Publication number
WO2014034193A1
WO2014034193A1 PCT/JP2013/064147 JP2013064147W WO2014034193A1 WO 2014034193 A1 WO2014034193 A1 WO 2014034193A1 JP 2013064147 W JP2013064147 W JP 2013064147W WO 2014034193 A1 WO2014034193 A1 WO 2014034193A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
screen
smartphone
vehicle device
mobile terminal
Prior art date
Application number
PCT/JP2013/064147
Other languages
English (en)
French (fr)
Inventor
英徳 塚原
淳 内村
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2014532833A priority Critical patent/JP6032286B2/ja
Publication of WO2014034193A1 publication Critical patent/WO2014034193A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6075—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6075—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091—Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface

Definitions

  • the present invention relates to a vehicle-mounted device, a mobile terminal control method, and a program, and for example, relates to a vehicle-mounted device, a mobile terminal control method, and a program that control a mobile terminal such as a smartphone.
  • portable information terminals such as smartphones and tablet terminals have appeared.
  • portable information terminals in addition to sending and receiving e-mails, a standard browser function that obtains document files written in markup languages such as HTML and XML from a web server connected to the Internet and browses web pages Have.
  • a mainstream is provided with touch panel means that can perform an input operation by touching the screen with a finger or the like.
  • In-vehicle information terminals such as car navigation systems (hereinafter also simply referred to as “car navigation”) installed in automobiles, in addition to the conventional route search function and TV viewing function, send and receive e-mails using Internet communication, and websites Products that enable the collection of various information such as browsing and electronic commerce are on sale.
  • car navigation car navigation systems
  • Patent Document 1 describes a car navigation device that communicates with a smartphone.
  • settings are changed for a smartphone to enable remote operation by an in-vehicle device, and a remote operation mechanism (specifically, a dedicated application program for remote operation by the in-vehicle device) is provided. It is inserted.
  • a remote operation mechanism specifically, a dedicated application program for remote operation by the in-vehicle device
  • this setting change or remote operation mechanism is an operation that allows remote operation of smartphones that are normally prohibited, and is a special operation that can only be performed by a person with administrator authority.
  • An object of the present invention is to provide an in-vehicle device, a mobile terminal control method, and a program that can solve the above-described problems.
  • the in-vehicle device of the present invention is An in-vehicle device that communicates with a portable terminal corresponding to a predetermined communication method, Detecting means for detecting an operation to the in-vehicle device; In response to an operation on the vehicle-mounted device detected by the detection unit, a generation unit that generates operation information corresponding to the operation and compliant with the predetermined communication method; Communication means for transmitting the operation information to the portable terminal by the predetermined communication method.
  • the mobile terminal control method of the present invention A mobile terminal control method performed by an in-vehicle device that communicates with a mobile terminal corresponding to a predetermined communication method, Detecting an operation to the in-vehicle device, In response to an operation on the in-vehicle device, the operation information corresponding to the operation and compliant with the predetermined communication method is generated, The operation information is transmitted to the portable terminal by the predetermined communication method.
  • the recording medium of the present invention is To a computer that communicates with a portable terminal that supports a predetermined communication method, A detection procedure for detecting an operation to the in-vehicle device; In accordance with an operation to the in-vehicle device, a generation procedure for generating operation information corresponding to the operation and compliant with the predetermined communication method, A computer-readable recording medium storing a program for executing a communication procedure for transmitting the operation information to the portable terminal by the predetermined communication method.
  • the present invention it is possible to operate a portable terminal with an in-vehicle device without requiring a dedicated application program for remote operation by the in-vehicle device, and it is possible to improve operability.
  • FIG. 1 It is the block diagram which showed the vehicle equipment 1 and the smart phone 2 of 1st Embodiment of this invention. It is an external view of the vehicle equipment 1 and the smart phone 2.
  • FIG. It is the figure which showed the example by which the vehicle equipment 1 and the smart phone 2 are arrange
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the
  • FIG. 10 is a sequence diagram for explaining an operation when a touch operation on the touch panel 14 is performed. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2. FIG. It is a sequence diagram for demonstrating operation
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the figure which showed the screen of the vehicle equipment 1 and the screen of the smart phone 2.
  • FIG. It is the block diagram which showed 10 A of vehicle equipment and the smart phone 2 of 2nd Embodiment of this invention.
  • FIG. 4 is a diagram showing divided areas of the touch panel 14. It is the block diagram which showed the vehicle equipment 10B and smart phone 2B of 3rd Embodiment of this invention.
  • FIG. 1 is a block diagram showing an in-vehicle device 1 and a smartphone 2 according to the first embodiment of the present invention.
  • FIG. 2 is an external view of the in-vehicle device 1 and the smartphone 2.
  • the in-vehicle device 1 communicates with the smartphone 2.
  • the smartphone 2 is an example of a mobile terminal.
  • the mobile terminal is not limited to a smartphone and can be changed as appropriate, and may be, for example, a tablet terminal.
  • the smartphone 2 has a wireless communication function using Bluetooth (registered trademark) and a wired communication function using an HDMI (High-Definition Multimedia Interface) terminal.
  • Bluetooth registered trademark
  • HDMI High-Definition Multimedia Interface
  • the smartphone 2 has a Bluetooth HID (Human Interface Device) profile (hereinafter also simply referred to as “HID profile”).
  • HID profile is a Bluetooth profile for wireless input devices such as a mouse and a keyboard.
  • the communication method defined by the Bluetooth HID profile is an example of a predetermined communication method.
  • the smartphone 2 receives operation information (for example, movement amount information from the mouse, click information, or release information) that conforms to the HID profile, and operates according to the operation information.
  • operation information for example, movement amount information from the mouse, click information, or release information
  • the operation information compliant with the HID profile includes, for example, key input information from the keyboard and information to be returned to restore the operation state. is there.
  • the smartphone 2 has a Bluetooth SPP (Serial Port Profile) profile (hereinafter simply referred to as “SPP profile”).
  • SPP profile is a Bluetooth profile for making a Bluetooth device a virtual serial port.
  • the smartphone 2 transmits terminal information compliant with the SPP profile (for example, the orientation (vertical, horizontal), screen resolution, and terminal state) of the smartphone 2 to the in-vehicle device 1.
  • the smartphone 2 stores a navigation application and displays a navigation screen by executing the navigation application.
  • the smartphone 2 transmits screen information representing a screen (hereinafter referred to as “display screen”) displayed on the smartphone 2 to the in-vehicle device 1 via the HDMI terminal.
  • the in-vehicle device 1 is installed in a vehicle and functions as, for example, a navigation device by communicating with the smartphone 2.
  • FIG. 3 is a diagram showing an example in which the in-vehicle device 1 and the smartphone 2 are arranged in the vehicle.
  • the smartphone 2 is connected to the vehicle-mounted device 1 with the cable 3 via the storage device 4.
  • the vehicle-mounted device 1 is fitted in the upper center of the dashboard 5 of the automobile, and the storage device 4 is disposed on the driver seat side below the dashboard 5.
  • the smartphone 2 is accommodated in the storage device 4.
  • a connector is disposed inside the storage device 4, and the storage device 4 and the vehicle-mounted device 1 are connected by wire through this connector.
  • the smartphone 2 is accommodated in the storage device 4, and the wired connection between the in-vehicle device 1 and the smartphone 2 is established by inserting the connector in the storage device 4 into the HDMI terminal of the smartphone 2.
  • the method of wired connection between the in-vehicle device 1 and the smartphone 2 is not limited to the example shown in FIG. 3 and can be changed as appropriate.
  • the in-vehicle device 1 includes a wireless communication unit 11, a wired communication unit 12, a display unit 13, a touch panel 14, and a control unit 15.
  • the wireless communication unit 11 and the wired communication unit 12 are included in the communication unit 16.
  • the wireless communication unit 11 has an HID profile and an SPP profile, and performs wireless communication based on the HID profile and wireless communication based on the SPP profile with the smartphone 2.
  • the wired communication unit 12 has an HDMI terminal and is connected to the HDMI terminal of the smartphone 2 by wire.
  • the wired communication unit 12 receives screen information and audio information representing a screen (for example, a navigation screen) of the smartphone 2 from the smartphone 2.
  • the display unit 13 is an example of a display unit.
  • the display unit 13 is stacked so as to overlap the back side of the touch panel 14 and displays various screens.
  • the display unit 13 displays a screen corresponding to the screen information received by the wired communication unit 12 from the smartphone 2 (for example, a navigation screen that is an operation screen).
  • the touch panel 14 is an example of a detection unit.
  • the touch panel 14 detects an operation on the in-vehicle device 1. For example, the touch panel 14 detects an operation (touch operation on the touch panel 14) on a screen (for example, an operation screen) displayed on the display unit 13. The touch panel 14 is assigned XY coordinates. The touch panel 14 detects an operation position (touch operation position) using XY coordinates.
  • the control unit 15 is an example of a generation unit.
  • the control unit 15 controls the in-vehicle device 1.
  • control unit 15 in response to an operation detected on the touch panel 14, the control unit 15 generates operation information (for example, movement amount information from the mouse, click information, or release information) corresponding to the operation and conforming to the HID profile. .
  • operation information for example, movement amount information from the mouse, click information, or release information
  • the communication unit 16 communicates with the smartphone 2.
  • the wireless communication unit 11 wirelessly transmits the operation information generated by the control unit 15 to the smartphone 2 according to the HID profile, and the terminal transmitted from the smartphone 2 according to the SPP profile. Receive information.
  • the smartphone 2 has an Internet communication function, and includes a display unit 21, a touch panel 22, a wireless communication unit 23, a wired communication unit 24, and a control unit 25.
  • the display unit 21 displays various screens.
  • the touch panel 22 is stacked so as to overlap the front surface of the display unit 21 and detects a touch operation on the screen displayed by the display unit 21.
  • the wireless communication unit 23 has an HID profile and an SPP profile, and performs wireless communication with the wireless communication unit 11 of the in-vehicle device 1 using Bluetooth. For example, the wireless communication unit 23 receives operation information that conforms to the HID profile from the in-vehicle device 1 and transmits terminal information that conforms to the SPP profile to the in-vehicle device 1.
  • the wired communication unit 24 has an HDMI terminal, and is connected to the HDMI terminal of the wired communication unit 12 of the in-vehicle device 1 by wire.
  • the wired communication unit 24 transmits screen information and audio information representing the screen of the smartphone 2 to the in-vehicle device 1.
  • the control unit 25 controls the operation of the smartphone 2 according to the touch operation detected by the touch panel 22 and the operation information received by the wireless communication unit 23. For example, the control unit 25 changes the screen on the display unit 21 according to the touch operation detected by the touch panel 22 or the operation information received by the wireless communication unit 23.
  • the control unit 25 stores a navigation application, executes the navigation application, and displays a navigation screen on the display unit 21.
  • FIG. 4 is a sequence diagram for explaining the operation when the in-vehicle device 1 and the smartphone 2 are connected.
  • 5 to 8 are diagrams showing the screen of the in-vehicle device 1 and the screen of the smartphone 2 at the time of connection.
  • the HDMI terminal of the wired communication unit 24 of the smartphone 2 is connected to the HDMI terminal of the wired communication unit 12 of the in-vehicle device 1 via the cable 3, and the smartphone 2 transmits the screen information via the cable 3 to the in-vehicle device 1.
  • Step S401 Although transmission of screen information is continuously performed, FIG. 4 shows only screen information transmission operations at several timings.
  • the wired communication unit 12 when the wired communication unit 12 receives screen information from the smartphone 2 via the cable 3, the wired communication unit 12 outputs the screen information to the control unit 15.
  • the control unit 15 When the control unit 15 receives the screen information, the control unit 15 displays a screen corresponding to the screen information (hereinafter referred to as “smart phone screen”) on the display unit 13 (step S402).
  • a screen corresponding to the screen information hereinafter referred to as “smart phone screen”
  • the smartphone screen displayed on the smartphone 2 is referred to as “smart phone screen 2a2”, and the smartphone screen displayed on the in-vehicle device 1 is referred to as “smart phone screen 2a1”.
  • FIG. 5 is a diagram illustrating an example of a situation in which the display unit 13 of the in-vehicle device 1 displays the smartphone screen 2a1 according to the screen information from the smartphone 2.
  • the black image 13 a is displayed on the display surface 13 b of the display unit 13.
  • the display surface 13b displays a horizontally long smartphone screen 2a1 corresponding to the horizontally long smartphone screen 2a2.
  • the control unit 15 displays the vertically long smartphone screen 2a1 corresponding to the vertically long smartphone screen 2a2 on the display surface 13b.
  • the black image 13a is displayed on the left and right of the display surface 13b.
  • the control unit 15 sets the aspect ratio (resolution) of the screen information to the aspect ratio (resolution) of the display unit 13.
  • the aspect ratio (resolution) of the screen information may be converted, and the smartphone screen 2a1 corresponding to the screen information with the converted aspect ratio (resolution) may be displayed on the display surface 13b.
  • the smartphone screen 2a1 is displayed on the entire display surface 13b, and the black image 13a is not displayed.
  • the control unit 15 When displaying the smartphone screen 2a1 on the display surface 13b, the control unit 15 refers to the screen information from the smartphone 2 and detects the size (number of pixels in the horizontal and vertical directions) of the smartphone screen 2a2 defined by the screen information. And the position of the smart phone screen 2a1 in the display surface 13b is detected.
  • control unit 15 detects each position (each XY coordinate) of the four corners 2a11 to 2a14 of the smartphone screen 2a1 in the display surface 13b as the position of the base point.
  • the control unit 15 holds the size (number of horizontal and vertical pixels) of the smartphone screen 2a2 and the detection result of the position of the base point as position specifying information (step S403).
  • the position specifying information represents a correspondence relationship between the smartphone screen 2a2 defined by the screen information and the smartphone screen 2a1 in the display surface 13b.
  • FIG. 6 is a diagram showing the positions 2a11 to 2a14 at the four corners of the smartphone screen 2a1 in the display surface 13b.
  • the position of the base point is detected only when the control unit 15 starts displaying the smartphone screen 2a1 on the display surface 13b. Note that the position of the base point may be detected periodically, for example.
  • the SPP profile is connected from the wireless communication unit 11 of the in-vehicle device 1 to the wireless communication unit 23 of the smartphone 2 (step S404). This connection is performed when the user of the vehicle-mounted device 1 operates the vehicle-mounted device 1 and the smartphone 2.
  • the position of the base point is registered in advance in the smartphone 2 as setting information, and the control unit 15 acquires the setting information about the position of the base point from the smartphone 2 in the SPP profile. You may hold
  • the HID profile is connected from the wireless communication unit 11 of the in-vehicle device 1 to the wireless communication unit 23 of the smartphone 2 (step S405). This connection is performed when the user of the vehicle-mounted device 1 operates the vehicle-mounted device 1 and the smartphone 2.
  • This connection causes the smartphone 2 (control unit 25) to recognize the in-vehicle device 1 as a Bluetooth mouse and recognize that the Bluetooth mouse is connected. Subsequently, the control unit 25 displays the mouse cursor 21a on the smartphone screen 2a2 (step S406). Accordingly, the control unit 25 transmits screen information representing the smartphone screen on which the mouse cursor 21a is displayed to the in-vehicle device 1 via the wired communication unit 24 (step S407), and the control unit 15 of the in-vehicle device 1 The smart phone screen 2a2 on which the mouse cursor 21a is displayed is displayed on the display surface 13b (step S408).
  • FIG. 7 is a diagram illustrating an example of a situation in which the HID profiles are connected between the in-vehicle device 1 and the smartphone 2, and the mouse cursor 21a is displayed on the smartphone screens 2a1 and 2a2.
  • the control unit 15 in the in-vehicle device 1 moves the mouse cursor 21a to the reference position on the smartphone screen 2a2, Is generated (step S409).
  • the reference position on the smartphone screen 2a2 is set to a position corresponding to the position of the lower right corner of the smartphone screen 2a2, that is, the position of the lower right corner 2a11 of the smartphone screen 2a1 (see FIG. 6) by default.
  • information on the reference position on the smartphone screen 2a2 is held in the control unit 15.
  • the reference movement amount information represents a movement amount that can be moved to the lower right corner of the smartphone screen 2a2 regardless of the position of the mouse cursor 21a on the smartphone screen 2a2.
  • control unit 15 outputs the reference movement amount information to the wireless communication unit 11.
  • the wireless communication unit 11 Upon receiving the reference movement amount information, the wireless communication unit 11 transmits the reference movement amount information to the smartphone 2 according to the HID profile (step S410).
  • the wireless communication unit 23 outputs the reference movement amount information to the control unit 25 when receiving the reference movement amount information from the in-vehicle device 1.
  • the control unit 25 Upon receiving the reference movement amount information, the control unit 25 moves the mouse cursor 21a by the movement amount represented by the reference movement amount information on the smartphone screen 2a2, and moves the mouse cursor 21a to the reference position (smart phone screen) on the smartphone screen 2a2.
  • 2a2 is taken to the position of the lower right corner, that is, the position corresponding to the position of the lower right corner 2a11 of the smartphone screen 2a1 (step S411).
  • FIG. 8 is a diagram showing an example when the mouse cursor 21a is positioned at the lower right corner (reference position) of the smartphone screen 2a2.
  • FIG. 9 is a sequence diagram for explaining an operation when a touch operation on the touch panel 14 is performed.
  • 10 to 14 are diagrams showing the screen of the vehicle-mounted device 1 and the screen of the smartphone 2 at the time of the touch operation.
  • the touch panel 14 detects a touch operation position (XY coordinates) when detecting a touch operation under an initial condition (step S901), and outputs the touch operation position 1a to the control unit 15.
  • the control unit 15 Upon receiving the touch operation position 1a, the control unit 15 uses the position specifying information to determine which position (on the smartphone screen 2a2 defined by the screen information) the touch operation position 1a is on the display unit 21 ( Calculate whether it corresponds to the operation position).
  • control unit 15 converts the touch operation position 1a into the operation position 2a of the smartphone screen 2a2 on the display unit 21 using the position specifying information (step S802).
  • the position converted from the touch operation position is referred to as “converted position”.
  • control unit 15 calculates the correspondence between the size of the area specified by the four base points and the size of the smartphone screen 2a2 defined by the screen information using the position specifying information, and the correspondence Using the relationship, the touch operation position 1a in the area specified by the four base points is converted into the operation position (conversion position) 2a in the smartphone screen 2a2 defined by the screen information.
  • the control unit 15 determines the length Lx1 from the X coordinate position of the base point 2a14 (see FIG. 6) to the X coordinate position of the touch operation position, and the base point 2a11 ( The ratio “Lx1: Lx2” to the length Lx2 up to the X coordinate position of FIG. And the control part 15 specifies the position which divides
  • the control unit 15 also sets the length Ly1 from the Y coordinate position of the base point 2a13 (see FIG. 6) to the Y coordinate position of the touch operation position and the base point 2a14 (FIG. 6) from the Y coordinate position of the touch operation position.
  • the ratio “Ly1: Ly2” to the length Ly2 to the Y coordinate position of (see) is obtained.
  • the control part 15 specifies the position which divides
  • FIG. 10 is a diagram showing an example of the touch operation position 1a and the conversion position 2a.
  • control unit 15 uses the position specifying information to generate movement amount information representing the movement amount from the lower right corner (reference position) of the smartphone screen 2a2 to the conversion position 2a (Step S903).
  • control unit 15 generates movement amount information indicating the movement amount in the X-axis direction and the movement amount in the Y-axis direction.
  • the movement amount information corresponds to information indicating the movement amount of the mouse transmitted from the Bluetooth mouse, and is information (operation information) based on the HID profile.
  • control unit 15 outputs the movement amount information to the wireless communication unit 11.
  • the wireless communication unit 11 When the wireless communication unit 11 receives the movement amount information, the wireless communication unit 11 transmits the movement amount information to the smartphone 2 according to the HID profile (step S904).
  • FIG. 11 is a diagram showing transmission of movement amount information.
  • control unit 15 When the control unit 15 outputs the movement amount information to the wireless communication unit 11, the control unit 15 outputs click information indicating a click operation to the wireless communication unit 11.
  • the wireless communication unit 11 When the wireless communication unit 11 receives the click information, the wireless communication unit 11 transmits the click information to the smartphone 2 according to the HID profile (step S905).
  • FIG. 12 is a diagram showing transmission of click information.
  • Click information is also an example of operation information.
  • the wireless communication unit 23 outputs the movement amount information to the control unit 25 when receiving the movement amount information from the in-vehicle device 1, and outputs the click information to the control unit 25 when receiving the click information from the in-vehicle device 1. To do.
  • the control unit 25 moves the mouse cursor 21a from the reference position by the movement amount represented by the movement amount information on the smartphone screen 2a2, and converts the mouse cursor 21a on the smartphone screen 2a. Bring it to the position 2a and accept a click operation at the conversion position 2a (step S906).
  • step S907 the touch panel 14 notifies the control unit 15 of the end of the touch operation.
  • control unit 15 When the control unit 15 receives the notification of the end of the touch operation, the control unit 15 outputs release information representing the release operation to the wireless communication unit 11.
  • the wireless communication unit 11 transmits the release information to the smartphone 2 according to the HID profile (step S908).
  • FIG. 13 is a diagram showing transmission of release information.
  • the control unit 15 outputs the release information to the wireless communication unit 11, and subsequently outputs the reference movement amount information to the wireless communication unit 11.
  • the wireless communication unit 11 Upon receiving the reference movement amount information, the wireless communication unit 11 transmits the reference movement amount information to the smartphone 2 according to the HID profile (step S909).
  • FIG. 14 is a diagram illustrating transmission of reference movement amount information.
  • the wireless communication unit 23 outputs the release information to the control unit 25 when receiving release information from the in-vehicle device 1, and receives the reference movement amount information from the in-vehicle device 1, and transmits the reference movement amount information to the control unit 25. Output to.
  • the control unit 25 Upon receiving the release information and the reference movement amount information, the control unit 25 receives the release operation at the position where the mouse cursor 21a is present, and then brings the mouse cursor 21a to the reference position on the smartphone screen 2a2 (step S910). ).
  • FIG. 15 is a sequence diagram for explaining an operation when a drag operation or a flick operation to the touch panel 14 is performed.
  • FIGS. 16 to 19 are diagrams showing the screen of the vehicle-mounted device 1 and the screen of the smartphone 2 at the time of a drag operation and a flick operation.
  • steps S901 to S906 are executed.
  • FIG. 16 is a diagram showing an example of a situation when step S906 is executed.
  • step S1501 when the touch panel 14 detects a movement of the position of the touch operation in a state where the touch operation is continued, that is, a drag operation or a flick operation (step S1501), the touch panel 14 detects the position (XY) of the movement destination of the touch operation. Coordinate) is output to the control unit 15.
  • FIG. 17 shows an example of the drag operation.
  • the control unit 15 When the control unit 15 receives the position of the touch operation destination, the position of the touch operation destination is displayed on the smartphone screen 2a2 on the display unit 21 (the smartphone screen defined by the screen information) using the position specifying information.
  • the position in 2a2) is calculated.
  • control unit 15 converts the position of the touch operation destination to the operation position on the smartphone screen 2a2 using the position specifying information (step S1502).
  • the position converted from the position of the movement destination of the touch operation is referred to as “movement destination conversion position”.
  • control unit 15 uses the position specifying information to generate movement amount information indicating the movement amount of the mouse cursor 21a from the conversion position (click position) to the movement destination conversion position (step S1503).
  • control unit 15 generates movement amount information indicating the movement amount in the X-axis direction and the movement amount in the Y-axis direction.
  • control unit 15 outputs the movement amount information generated in step S1503 to the wireless communication unit 11. Thereafter, the control unit 15 updates the conversion position to the movement destination conversion position, and sets the movement destination conversion position as a new conversion position.
  • the smartphone 2 is not notified that the conversion position has been updated to the destination conversion position.
  • the wireless communication unit 11 Upon receiving the movement amount information, the wireless communication unit 11 transmits the movement amount information to the smartphone 2 according to the HID profile (step S1504).
  • the wireless communication unit 23 when the wireless communication unit 23 receives the movement amount information from the in-vehicle device 1, the wireless communication unit 23 outputs the movement amount information to the control unit 25.
  • the control unit 25 Upon receiving the movement amount information, the control unit 25 moves the mouse cursor 21a by the movement amount represented by the movement amount information on the smartphone screen 2a2, and brings the mouse cursor 21a to the movement conversion position on the smartphone screen 2a2. (Step S1505).
  • FIG. 17 is a diagram illustrating the movement of the mouse cursor 21a to the movement conversion position.
  • control unit 15 confirms whether the touch panel 14 has detected a drag operation or a flick operation at a predetermined time interval (for example, every 0.2 seconds), and the touch panel 14 performs the drag operation or the flick operation. Every time it is detected, steps S1502 to S1504 are repeated.
  • the predetermined time interval is not limited to the 0.2 second interval and can be changed as appropriate.
  • the control unit 15 transmits the movement amount information a plurality of times.
  • the smartphone 2 is notified of the amount of movement from the conversion position to the destination conversion position.
  • steps S908 to S910 are executed.
  • FIG. 18 is a diagram showing transmission of release information at the end of the drag operation or flick operation.
  • FIG. 19 is a diagram illustrating transmission of reference movement amount information performed after transmission of release information.
  • the touch panel 14 detects an operation on the in-vehicle device 1.
  • the control unit 15 In response to the operation detected on the touch panel 14, the control unit 15 generates operation information (movement amount information, click information, or release information) corresponding to the operation and conforming to the Bluetooth HID profile.
  • the communication unit 16 transmits the operation information generated by the control unit 15 to the smartphone 2 having the Bluetooth HID profile by a communication method defined by the Bluetooth HID profile.
  • the in-vehicle device 1 converts the operation by the user into operation information that conforms to the Bluetooth HID profile of the smartphone 2, and transmits the operation information to the smartphone 2 by the communication method defined by the Bluetooth HID profile. To do. For this reason, the smartphone 2 can be operated with the operation information from the in-vehicle device 1.
  • an in-vehicle device including the touch panel 14, the control unit 15, and the communication unit 16 (wireless communication unit 11).
  • the smartphone 2 can improve the follow-up to the operation information.
  • the communication method defined by the Bluetooth HID profile is used as the predetermined communication method. For this reason, by using the Bluetooth HID profile, it is possible to operate the smartphone 2 on the in-vehicle device 1 without performing special work that can only be performed by a person having administrator authority.
  • the predetermined communication method is not limited to the communication method defined by the Bluetooth HID profile.
  • a communication method corresponding to a USB (Universal Serial Bus) mouse may be used as the predetermined communication method.
  • the in-vehicle device 1 When a communication method corresponding to a USB mouse is used as the predetermined communication method, the in-vehicle device 1 has a USB cable, the smartphone 2 has a USB port, and the USB cable of the in-vehicle device 1 is connected to the USB port of the smartphone 2. Is done.
  • the control unit 15 generates operation information (movement amount information, click information or release information) corresponding to the operation detected by the touch panel 14 and compatible with the USB mouse, and the operation information is transmitted to the smartphone 2 using the USB cable. Send to.
  • the USB cable is an example of communication means.
  • the communication of the operation information may be wireless communication or wired communication.
  • the touch panel 14 is used as a detection means. For this reason, it becomes possible to use the touch panel 14 of the vehicle equipment 1 as an interface for accepting the operation of the smartphone 2.
  • the detection means is not limited to the touch panel 14 and can be changed as appropriate.
  • a voice analysis unit that detects a voice operation by the user may be used as the detection unit.
  • the display part 13 is provided in the back side of the touch panel 14, the communication part 16 receives the screen information showing the screen (smart phone screen 2a2) of the smart phone 2 from the smart phone 2, and the display part 13 is the following.
  • the smartphone screen 2a1 is displayed according to the screen information.
  • the control part 15 produces
  • the control unit 15 converts the position of the touch operation on the touch panel 14 to the operation position on the smartphone screen 2 a 2 on the smartphone 2 using the position specifying information according to the touch operation detected on the touch panel 14. .
  • the control unit 15 generates operation information (movement amount information and click information) based on the operation position on the smartphone screen 2a2 on the smartphone 2.
  • control part 15 is based on the operation position on the smart phone screen 2a2 in the smart phone 2, From the reference position set on the smart phone screen 2a2 in the smart phone 2, the smart phone screen 2a2 in the smart phone 2 The movement amount information indicating the movement amount to the upper operation position and the click information indicating the click operation are generated as operation information.
  • control part 15 will be the reference position set on the smart phone screen 2a2 in the smart phone 2 from the operation position on the smart phone screen 2a2 in the smart phone 2, if the touch panel 14 detects completion
  • the movement amount information representing the amount of movement and the release information representing the release operation are generated as operation information.
  • the virtual touch operation on the smartphone screen 2a on the smartphone 2 can be ended, and the position of the mouse cursor can be returned to the reference position.
  • the control unit 15 when the control unit 15 detects the movement of the position of the touch operation in a situation where the touch operation is continued after the touch panel 14 detects the touch operation, the touch operation after the movement is performed using the position specifying information. Is converted into a movement position on the smartphone screen 2a2 on the smartphone 2. And the control part 15 produces
  • the reference position on the smartphone screen 2a2 is fixed, but in the second embodiment, the reference position on the smartphone screen 2a2 is changed according to the end position of the touch operation.
  • FIG. 20 is a block diagram showing the in-vehicle device 10A and the smartphone 2 according to the second embodiment of the present invention.
  • the same components as those shown in FIG. 20 are identical to FIG. 20.
  • the in-vehicle device 10A includes a wireless communication unit 11, a wired communication unit 12, a display unit 13, a touch panel 14, and a control unit 15A.
  • the control unit 15A is an example of a generation unit.
  • the control unit 15A has a function of changing the reference position on the smartphone screen 2a2 in accordance with the end position of the touch operation in addition to the function of the control unit 15 shown in FIG.
  • the touch panel 14 is divided into four areas, an upper left area 14a, an upper right area 14b, a lower left area 14c, and a lower right area 14d.
  • control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the upper left corner of the smartphone screen 2a2.
  • control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the upper right corner of the smartphone screen 2a2.
  • control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the lower left corner of the smartphone screen 2a2.
  • control unit 15A sets the reference position on the smartphone screen 2a2 to the position of the lower right corner of the smartphone screen 2a2.
  • control unit 15A changes the reference position on the smartphone screen 2a2 according to the end position of the touch operation on the touch panel 14.
  • a position where a new touch operation is performed after the touch operation is completed is often near the end position of the previous touch operation.
  • control unit 15A changes the reference position on the smartphone screen 2a2 according to the end position of the touch operation on the touch panel 14, so that the reference position on the smartphone screen 2a2 is changed to the next touch operation to be performed.
  • the possibility of being close to the corresponding operation position can be increased.
  • the reference position on the smartphone screen 2a2 is close to the operation position corresponding to the next touch operation, the amount of movement of the mouse cursor 21a can be reduced, and the processing associated with the movement of the mouse cursor 21a can be reduced. Become.
  • an automatic calibration function for the smartphone screen 2a1 in the in-vehicle device is added to the first embodiment or the second embodiment.
  • the automatic calibration function is executed when the smartphone screen 2a2 on the smartphone is switched to a vertically long screen (vertical display) or a horizontally long screen (horizontal display). Specifically, the in-vehicle device acquires state information indicating whether the smartphone screen 2a2 is displayed vertically or horizontally (hereinafter simply referred to as “state information”) from the smartphone using the SPP profile, and includes the state information in the state information. Accordingly, the smartphone screen 2a1 on the in-vehicle device is changed.
  • FIG. 22 is a block diagram showing the in-vehicle device 10B and the smartphone 2B according to the third embodiment of the present invention.
  • the same components as those shown in FIG. 22 are identical to FIG. 22.
  • the smartphone 2B has an Internet communication function, and includes a display unit 21, a touch panel 22, a wireless communication unit 23, a wired communication unit 24, and a control unit 25B.
  • the control unit 25B has the function of the control unit 25 shown in FIG.
  • control unit 25B transmits state information to the in-vehicle device 10B using the SPP profile.
  • control unit 25B holds in advance vertical screen setting information indicating the position of the base point on the vertically long screen and horizontal screen setting information indicating the position of the base point on the horizontally long screen.
  • the in-vehicle device 10B includes a wireless communication unit 11, a wired communication unit 12, a display unit 13, a touch panel 14, and a control unit 15B.
  • the control unit 15B is an example of a generation unit.
  • the control unit 15B has the function of the control unit 15 shown in FIG.
  • control unit 15B when receiving the state information from the smartphone 2B using the SPP profile, the control unit 15B refers to the state information and confirms whether the smartphone screen 2a2 on the smartphone 2B is a vertically long screen or a horizontally long screen.
  • the control unit 15B acquires the vertical screen setting information from the smartphone 2B using the SPP profile, and holds the position of the base point on the acquired vertically long screen.
  • the control unit 15B acquires landscape screen setting information from the smartphone 2B using the SPP profile and holds the position of the base point on the obtained landscape screen. To do.
  • the control unit 15B indicates the position of the base point on the vertical screen, and the control unit 15B displays the vertical smartphone on the display surface 13b. Only when the display of the screen 2a1 is performed for the first time, the detection result is retained, and the position of the base point on the horizontally long screen is displayed by the control unit 15B on the display surface 13b. Detection may be performed only when it is performed for the first time, and the detection result may be retained.
  • the smartphone screen 2a1 on the in-vehicle device 10B can be automatically changed according to the switching of the vertical display and the horizontal display of the smartphone screen 2a2 on the smartphone 2B.
  • FIG. 22 shows an example in which the automatic calibration function is added to the first embodiment, but the automatic calibration function may be added to the second embodiment.
  • a dedicated application (application program) created on the assumption that the smartphone 2 operates according to operation information from the in-vehicle device 1 may be mounted on the smartphone 2.
  • the portion of the control unit 25 in the smartphone 2 that executes the dedicated application is referred to as an “application execution unit”.
  • the control unit 25 receives operation information from the in-vehicle device 1 via the wireless communication unit 23, the operation information is passed to the application execution unit.
  • the application execution unit processes the operation information.
  • the wired communication part 12 and the wired communication part 24 performed wired communication using the HDMI terminal
  • the wired communication between the wired communication part 12 and the wired communication part 24 is HDMI terminal.
  • the present invention is not limited to wired communication using, and can be changed as appropriate.
  • MHL Mobile High-Definition Link
  • MHL Mobile High-Definition Link
  • wireless communication such as wireless communication that compresses and transmits a screen, or wireless HDMI may be used.
  • the SPP profile is used for communication of terminal information.
  • communication of terminal information is not limited to communication according to the SPP profile and can be changed as appropriate.
  • control unit 15 may generate operation information corresponding to the multi-touch operation and conforming to the HID profile.
  • the vehicle equipment 1 and 10A receives information from the smart phone 2, and performs the display according to the information.
  • the in-vehicle devices 1 and 10A can display information acquired by the smartphone 2 through Internet communication. Therefore, the in-vehicle devices 1 and 10A do not need to be equipped with an Internet communication function, and it is possible to reduce the communication cost for the in-vehicle devices 1 and 10A.
  • the in-vehicle device 1 or 10A may be realized by a computer.
  • the computer reads and executes a program recorded on a recording medium such as a CD-ROM (Compact Disk Read Only Memory) that can be read by the computer, or a program received by wired communication or wireless communication. (For example, an application program) is received and executed, and functions as the vehicle-mounted device 1 or 10A (the control unit 15 or 15A).
  • a recording medium such as a CD-ROM (Compact Disk Read Only Memory) that can be read by the computer, or a program received by wired communication or wireless communication. (For example, an application program) is received and executed, and functions as the vehicle-mounted device 1 or 10A (the control unit 15 or 15A).
  • the recording medium is not limited to the CD-ROM and can be changed as appropriate.

Abstract

　所定通信方式に対応する携帯端末と通信する車載機は、車載機への操作を検出する検出手段と、検出手段が検出した車載機への操作に応じて該操作に対応し所定通信方式に準拠した操作情報を生成する生成手段と、操作情報を所定通信方式で携帯端末に送信する通信手段と、を含む。

Description

車載機、携帯端末制御方法および記録媒体
　本発明は、車載機、携帯端末制御方法およびプログラムに関し、例えば、スマートフォン等の携帯端末を制御する車載機、携帯端末制御方法およびプログラムに関する。
　近年、通信技術の進歩によって情報端末は多機能化し、スマートフォンやタブレット端末などの持ち運び可能な携帯型情報端末が登場している。携帯型情報端末においては、電子メールの送受信だけでなく、インターネットに接続したウェブサーバからＨＴＭＬ、ＸＭＬなどのマークアップ言語で記述された文書ファイルを取得し、ウェブページを閲覧するブラウザ機能を標準的に有する。このような携帯型情報端末では、ボタン入力に加えて、画面上を指でタッチ等することで入力操作できるタッチパネル手段を備えるものが主流である。
　自動車に搭載されるカーナビゲーションシステム（以下、単に「カーナビ」とも称する）などの車載情報端末においても、従来のルート検索機能やテレビ観賞機能に加えて、インターネット通信を利用した電子メールの送受信、ホームページの閲覧、電子商取引など様々な情報の収集を可能にするものが発売されている。
　ところで、自動車を所有するユーザの多くは、自動車に搭載される車載情報端末とともに、無線通信によってデータ送受信する機能を有する携帯型情報端末を保有している。車載情報端末においてインターネット通信を利用するためには、インターネットアクセスや最新情報入手、電子メール等の機能を加えるために通信機能が必要となるが、ユーザがカーナビなどの車載情報端末専用に通信費用を支払うことは高コストになるため難しい。従って、多くのユーザは所有している携帯型情報端末と車載情報端末を無線ＬＡＮ、　Ｂｌｕｅｔｏｏｔｈ（登録商標）、有線ケーブル等のインターフェイスを介して接続し、携帯型情報端末の通信機能を用いて、車載情報端末に通信機能を提供する方法を取りつつある。
　特許文献１には、スマートフォンと通信するカーナビゲーション装置が記載されている。
　また、カーナビゲーション装置のような車載機でスマートフォンを操作することを可能にする技術も知られている。
　この技術では、スマートフォンに対して、車載機による遠隔操作を可能にするための設定変更が行われ、遠隔操作用の仕組み（具体的には、車載機による遠隔操作用の専用のアプリケーションプログラム）が入れ込まれる。
　なお、この設定変更や遠隔操作用の仕組みの入れ込みは、通常禁止されているスマートフォンに対する遠隔操作を許容するための操作であり、管理者権限を有する者でないと行えない特殊な作業である。
特開２０１２－１４１２０１号公報
　車載機で携帯端末の操作を可能にする技術では、車載機による遠隔操作用の専用のアプリケーションプログラムが必要となり、車載機による遠隔操作用の専用のアプリケーションプログラムを携帯端末にインストールしなければならないという課題があった。また、携帯端末は、車載機による遠隔操作用の専用のアプリケーションプログラムを動作させて車載機からの情報を解析する必要があるため、操作情報に対する追従性つまり操作性が良くなかった。
　本発明の目的は、上記課題を解決可能な車載機、携帯端末制御方法およびプログラムを提供することである。
　本発明の車載機は、
　所定通信方式に対応する携帯端末と通信する車載機であって、
　前記車載機への操作を検出する検出手段と、
　前記検出手段が検出した車載機への操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手段と、
　前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手段と、を含む。
　本発明の携帯端末制御方法は、
　所定通信方式に対応する携帯端末と通信する車載機が行う携帯端末制御方法であって、
　前記車載機への操作を検出する検出し、
　前記車載機への操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成し、
　前記操作情報を前記所定通信方式で前記携帯端末に送信する。
　本発明の記録媒体は、
　所定通信方式に対応する携帯端末と通信するコンピュータに、
　前記車載機への操作を検出する検出手順と、
　前記車載機への操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手順と、
　前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手順と、を実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体である。
　本発明によれば、車載機による遠隔操作用の専用のアプリケーションプログラムを必要とせずに、車載機で携帯端末を操作することが可能となり、また、操作性の向上を図ることが可能になる。
本発明の第１実施形態の車載機１とスマートフォン２とを示したブロック図である。 車載機１とスマートフォン２の外観図である。 車両内に車載機１とスマートフォン２とが配置された例を示した図である。 車載機１とスマートフォン２との接続時の動作を説明するためのシーケンス図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 タッチパネル１４へのタッチ操作が行われたときの動作を説明するためのシーケンス図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 タッチパネル１４へのドラッグ操作、フリック操作が行われたときの動作を説明するためのシーケンス図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 車載機１の画面とスマートフォン２の画面とを示した図である。 本発明の第２実施形態の車載機１０Ａとスマートフォン２とを示したブロック図である。 タッチパネル１４の分割領域を示した図である。 本発明の第３実施形態の車載機１０Ｂとスマートフォン２Ｂとを示したブロック図である。
　以下、本発明の実施形態について図面を参照して説明する。
　（第１実施形態）
　図１は、本発明の第１実施形態の車載機１とスマートフォン２とを示したブロック図である。図２は、車載機１とスマートフォン２の外観図である。
　車載機１は、スマートフォン２と通信する。
　スマートフォン２は、携帯端末の一例である。なお、携帯端末は、スマートフォンに限らず適宜変更可能であり、例えば、タブレット端末でもよい。
　スマートフォン２は、Bluetooth（登録商標）を用いた無線通信機能と、HDMI（High-Definition　Multimedia　Interface）端子を用いた有線通信機能と、を有する。
　スマートフォン２は、BluetoothのHID（Human　Interface　Device）プロファイル（以下、単に「HIDプロファイル」とも称する）を有する。HIDプロファイルは、マウスやキーボード等の入力装置を無線化するためのBluetoothのプロファイルである。
　BluetoothのHIDプロファイルにて定められた通信方式は、所定通信方式の一例である。
　スマートフォン２は、HIDプロファイルに準拠した操作情報（例えば、マウスからの移動量情報、クリック情報またはリリース情報）を受け付け、その操作情報に応じて動作する。なお、HIDプロファイルに準拠した操作情報としては、マウスからの移動量情報、クリック情報、リリース情報の他にも、例えば、キーボードからのキー入力情報や、操作状態を元に戻すための戻す情報がある。
　また、スマートフォン２は、BluetoothのSPP（Serial　Port　Profile）プロファイル（以下、単に「SPPプロファイル」と称する）を有する。SPPプロファイルは、Bluetooth機器を仮想シリアルポート化するためのBluetoothのプロファイルである。スマートフォン２は、SPPプロファイルに準拠した端末情報（例えば、スマートフォン２の向き（縦、横）、画面解像度や端末の状態）を車載機１に送信する。
　また、スマートフォン２は、例えば、ナビゲーション用アプリケーションを記憶し、ナビゲーション用アプリケーションを実行することによって、ナビゲーション画面を表示する。スマートフォン２は、HDMI端子を介して、スマートフォン２が表示している画面（以下「表示画面」と称する）を表す画面情報を車載機１に送信する。
　車載機１は、車両に設置され、スマートフォン２と通信することで、例えばナビゲーション装置として機能する。
　図３は、車両内に車載機１とスマートフォン２とが配置された例を示した図である。
　図３では、スマートフォン２が格納装置４を介してケーブル３で車載機１と接続されている。
　図３では、自動車のダッシュボード５の中央上部に車載機１がはめ込まれており、ダッシュボード５の下方の運転席側に格納装置４が配置されている。スマートフォン２は、格納装置４に収容されている。
　本実施形態では、格納装置４の内部にコネクタが配置されており、このコネクタを通じて格納装置４と車載機１とが有線で接続している。このため、スマートフォン２が格納装置４に収容され、格納装置４内のコネクタがスマートフォン２のHDMI端子に挿入されることで、車載機１とスマートフォン２との有線接続が確立される。
　なお、車載機１とスマートフォン２との有線接続の手法は、図３に示した例に限らず、適宜変更可能である。
　図１に戻って、車載機１は、無線通信部１１と、有線通信部１２と、表示部１３と、タッチパネル１４と、制御部１５と、を含む。なお、無線通信部１１と有線通信部１２は、通信部１６に含まれる。
　無線通信部１１は、HIDプロファイルおよびSPPプロファイルを有し、スマートフォン２と、HIDプロファイルに準拠した無線通信やSPPプロファイルに準拠した無線通信を行う。
　有線通信部１２は、HDMI端子を有し、スマートフォン２のHDMI端子と有線で接続される。有線通信部１２は、スマートフォン２から、スマートフォン２の画面（例えば、ナビゲーション画面）を表す画面情報や音声情報を受信する。
　表示部１３は、表示手段の一例である。
　表示部１３は、タッチパネル１４の背面側に重なり合うように積層され、種々の画面を表示する。表示部１３は、有線通信部１２がスマートフォン２から受信した画面情報に応じた画面（例えば、操作画面であるナビゲーション画面）を表示する。
　タッチパネル１４は、検出手段の一例である。
　タッチパネル１４は、車載機１への操作を検出する。例えば、タッチパネル１４は、表示部１３が表示している画面（例えば、操作画面）に対する操作（タッチパネル１４へのタッチ操作）を検出する。なお、タッチパネル１４には、ＸＹ座標が割り付けられている。タッチパネル１４は、ＸＹ座標を用いて操作位置（タッチ操作位置）を検出する。
　制御部１５は、生成手段の一例である。
　制御部１５は、車載機１を制御する。
　例えば、制御部１５は、タッチパネル１４にて検出された操作に応じて、その操作に対応しHIDプロファイルに準拠した操作情報（例えば、マウスからの移動量情報、クリック情報またはリリース情報）を生成する。
　通信部１６は、スマートフォン２と通信する。
　例えば、通信部１６では、無線通信部１１が、制御部１５にて生成された操作情報を、HIDプロファイルにしたがって、スマートフォン２に無線送信し、また、スマートフォン２からSPPプロファイルにしたがって送信された端末情報を受信する。
　スマートフォン２は、インターネット通信機能を有し、表示部２１と、タッチパネル２２と、無線通信部２３と、有線通信部２４と、制御部２５と、を含む。
　表示部２１は、種々の画面を表示する。
　タッチパネル２２は、表示部２１の前面に重なり合うように積層され、表示部２１が表示している画面へのタッチ操作を検出する。
　無線通信部２３は、HIDプロファイルおよびSPPプロファイルを有し、車載機１の無線通信部１１とBluetoothを用いた無線通信を行う。例えば、無線通信部２３は、車載機１からHIDプロファイルに準拠した操作情報を受信し、車載機１へSPPプロファイルに準拠した端末情報を送信する。
　有線通信部２４は、HDMI端子を有し、車載機１の有線通信部１２が有するHDMI端子と有線で接続される。有線通信部２４は、車載機１へ、スマートフォン２の画面を表す画面情報や音声情報を送信する。
　制御部２５は、タッチパネル２２が検出したタッチ操作や、無線通信部２３が受信した操作情報にしたがって、スマートフォン２の動作を制御する。例えば、制御部２５は、タッチパネル２２が検出したタッチ操作や、無線通信部２３が受信した操作情報にしたがって、表示部２１上の画面を変更する。本実施形態では、制御部２５は、ナビゲーション用アプリケーションを記憶し、ナビゲーション用アプリケーションを実行してナビゲーション画面を表示部２１に表示する。
　次に、動作を説明する。
　以下では、車載機１がスマートフォン２のBluetoothマウスとして使用される例を説明する。
　＜接続時の動作＞
　まず、車載機１とスマートフォン２との接続時の動作を説明する。
　図４は、車載機１とスマートフォン２との接続時の動作を説明するためのシーケンス図である。また、図５～８は、接続時の車載機１の画面とスマートフォン２の画面とを示した図である。
　まず、スマートフォン２の有線通信部２４が有するHDMI端子が、車載機１の有線通信部１２が有するHDMI端子とケーブル３にて接続され、スマートフォン２が、ケーブル３を介して画面情報を車載機１に送信し始める（ステップＳ４０１）。なお、画面情報の送信は継続的に実行されるが、図４では、いくつかのタイミングでの画面情報の送信動作のみが示されている。
　車載機１では、有線通信部１２は、スマートフォン２からケーブル３を介して画面情報を受信すると、画面情報を制御部１５に出力する。
　制御部１５は、画面情報を受け付けると、画面情報に応じた画面（以下「スマートフォン画面」と称する）を表示部１３に表示する（ステップＳ４０２）。
　なお、以下では、スマートフォン２で表示されているスマートフォン画面を「スマートフォン画面２ａ２」と称し、車載機１で表示されているスマートフォン画面を「スマートフォン画面２ａ１」と称する。
　図５は、車載機１の表示部１３がスマートフォン２からの画面情報に応じてスマートフォン画面２ａ１を表示した状況の一例を示した図である。
　なお、車載機１の表示部１３の縦横比とスマートフォン２の表示部２１の縦横比が異なる場合、図５に示したように、表示部１３の表示面１３ｂには、黒画像１３ａが表示される。
　図５では、表示面１３ｂは、横長のスマートフォン画面２ａ２に対応する横長のスマートフォン画面２ａ１を表示している。しかしながら、スマートフォン画面２ａ２が縦長である場合には、制御部１５は、縦長のスマートフォン画面２ａ２に対応する縦長のスマートフォン画面２ａ１を表示面１３ｂに表示する。この場合、黒画像１３ａは、表示面１３ｂの左右に表示される。
　また、車載機１の表示部１３の縦横比とスマートフォン２の表示部２１の縦横比が異なる場合、制御部１５は、画面情報の縦横比（解像度）が表示部１３の縦横比（解像度）に合うように、画面情報の縦横比（解像度）を変換し、縦横比（解像度）が変換された画面情報に応じたスマートフォン画面２ａ１を表示面１３ｂに表示してもよい。この場合、表示面１３ｂ全体にスマートフォン画面２ａ１が表示され、黒画像１３ａは表示されない。
　制御部１５は、表示面１３ｂにスマートフォン画面２ａ１を表示すると、スマートフォン２からの画面情報を参照して、画面情報にて規定されたスマートフォン画面２ａ２のサイズ（横と縦の画素数）を検出し、かつ、表示面１３ｂ内のスマートフォン画面２ａ１の位置を検出する。
　本実施形態では、制御部１５は、表示面１３ｂ内のスマートフォン画面２ａ１の四隅２ａ１１～２ａ１４の各位置（各ＸＹ座標）を、基点の位置として検出する。
　制御部１５は、スマートフォン画面２ａ２のサイズ（横と縦の画素数）と基点の位置の検出結果とを、位置特定情報として保持する（ステップＳ４０３）。
　なお、位置特定情報は、画面情報にて規定されたスマートフォン画面２ａ２と、表示面１３ｂ内のスマートフォン画面２ａ１と、の対応関係を表す。
　図６は、表示面１３ｂ内のスマートフォン画面２ａ１の四隅の位置２ａ１１～２ａ１４を示した図である。
　本実施形態では、基点の位置の検出は、制御部１５が表示面１３ｂにスマートフォン画面２ａ１の表示を開始したときのみに行われる。なお、基点の位置の検出は、例えば、定期的に行われてもよい。
　続いて、車載機１の無線通信部１１からスマートフォン２の無線通信部２３に対してSPPプロファイルの接続が実行される（ステップＳ４０４）。この接続は、車載機１のユーザが車載機１およびスマートフォン２を操作することにより実行される。
　なお、基点の位置の検出に関し、予めスマートフォン２に設定情報として基点の位置が登録され、制御部１５が、SPPプロファイルにて、基点の位置についての設定情報をスマートフォン２から取得し、取得された基点の位置を保持してもよい。
　続いて、車載機１の無線通信部１１からスマートフォン２の無線通信部２３に対してHIDプロファイルの接続が実行される（ステップＳ４０５）。この接続は、車載機１のユーザが車載機１およびスマートフォン２を操作することにより実行される。
　この接続により、スマートフォン２（制御部２５）は、車載機１をBluetoothマウスとして認識し、Bluetoothマウスが接続されたと認識する。続いて、制御部２５は、スマートフォン画面２ａ２にマウスカーソル２１ａを表示する（ステップＳ４０６）。これに伴い、制御部２５は、マウスカーソル２１ａが表示されたスマートフォン画面を表す画面情報を、有線通信部２４を介して車載機１に送信し（ステップＳ４０７）、車載機１の制御部１５は、表示面１３ｂ上に、マウスカーソル２１ａが表示されたスマートフォン画面２ａ２を表示する（ステップＳ４０８）。
　図７は、車載機１とスマートフォン２との間でHIDプロファイル同士が接続され、スマートフォン画面２ａ１および２ａ２にマウスカーソル２１ａが表示された状況の一例を示した図である。
　一方、車載機１とスマートフォン２とのHIDプロファイルでの接続が実行されると、車載機１では、制御部１５は、マウスカーソル２１ａをスマートフォン画面２ａ２上の基準位置に移動するために、HIDプロファイルに準拠した基準移動量情報を生成する（ステップＳ４０９）。
　なお、スマートフォン画面２ａ２上の基準位置は、例えば、デフォルトでスマートフォン画面２ａ２の右下隅の位置、つまり、スマートフォン画面２ａ１の右下隅２ａ１１の位置に対応する位置（図６参照）に設定されている。本実施形態では、スマートフォン画面２ａ２上の基準位置の情報は、制御部１５に保持されている。
　基準移動量情報は、マウスカーソル２１ａがスマートフォン画面２ａ２上のどの位置にあってもスマートフォン画面２ａ２の右下隅に移動できる移動量を表す。
　続いて、制御部１５は、基準移動量情報を無線通信部１１に出力する。
　無線通信部１１は、基準移動量情報を受け付けると、基準移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ４１０）。
　スマートフォン２では、無線通信部２３は、車載機１から基準移動量情報を受信すると、基準移動量情報を制御部２５に出力する。
　制御部２５は、基準移動量情報を受け付けると、スマートフォン画面２ａ２上で、基準移動量情報が表す移動量だけマウスカーソル２１ａを移動して、マウスカーソル２１ａをスマートフォン画面２ａ２上の基準位置（スマートフォン画面２ａ２の右下隅の位置、つまり、スマートフォン画面２ａ１の右下隅２ａ１１の位置に対応する位置）に持っていく（ステップＳ４１１）。
　なお、マウスカーソル２１ａがスマートフォン画面２ａ２の右下隅の位置にくると、マウスカーソル２１ａは、スマートフォン画面２ａ２から外れる。このため、マウスカーソル２１ａは、スマートフォン画面２ａ２および２ａ１上に表示されなくなる。
　図８は、マウスカーソル２１ａがスマートフォン画面２ａ２の右下隅（基準位置）に位置するときの一例を示した図である。
　＜タッチ操作時の動作＞
　次に、マウスカーソル２１ａがスマートフォン画面２ａ２の右下隅（基準位置）に位置する状況（以下「初期状況」と称する）で、車載機１のタッチパネル１４へのタッチ操作が行われたときの動作を説明する。
　図９は、タッチパネル１４へのタッチ操作が行われたときの動作を説明するためのシーケンス図である。また、図１０～１４は、タッチ操作時の車載機１の画面とスマートフォン２の画面とを示した図である。
　タッチパネル１４は、初期状況下でタッチ操作を検出すると、タッチ操作位置（ＸＹ座標）を検出し（ステップＳ９０１）、タッチ操作位置１ａを制御部１５に出力する。
　制御部１５は、タッチ操作位置１ａを受け付けると、位置特定情報を用いて、タッチ操作位置１ａが、表示部２１上のスマートフォン画面２ａ２（画面情報にて規定されたスマートフォン画面２ａ２）のどの位置（操作位置）にあたるかを計算する。
　本実施形態では、制御部１５は、位置特定情報を用いて、タッチ操作位置１ａを、表示部２１上のスマートフォン画面２ａ２の操作位置２ａに変換する（ステップＳ８０２）。以下、タッチ操作位置から変換された位置を「変換位置」と称する。
　例えば、制御部１５は、位置特定情報を用いて、４つの基点にて特定される領域のサイズと、画面情報にて規定されたスマートフォン画面２ａ２のサイズと、の対応関係を算出し、その対応関係を用いて、４つの基点にて特定される領域内のタッチ操作位置１ａを、画面情報にて規定されたスマートフォン画面２ａ２内の操作位置（変換位置）２ａに変換する。
　一例としては、制御部１５は、Ｘ座標について、基点２ａ１４（図６参照）のＸ座標位置からタッチ操作位置のＸ座標位置までの長さＬｘ１と、タッチ操作位置のＸ座標位置から基点２ａ１１（図６参照）のＸ座標位置までの長さＬｘ２と、の比「Ｌｘ１：Ｌｘ２」を求める。そして、制御部１５は、スマートフォン画面２ａ２の横方向（Ｘ軸）を「Ｌｘ１：Ｌｘ２」に分割する位置を変換位置のＸ座標として特定する。
　また、制御部１５は、Ｙ座標について、基点２ａ１３（図６参照）のＹ座標位置からタッチ操作位置のＹ座標位置までの長さＬｙ１と、タッチ操作位置のＹ座標位置から基点２ａ１４（図６参照）のＹ座標位置までの長さＬｙ２と、の比「Ｌｙ１：Ｌｙ２」を求める。そして、制御部１５は、スマートフォン画面２ａ２の縦方向（Ｙ軸）を「Ｌｙ１：Ｌｙ２」に分割する位置を変換位置のＹ座標として特定する。
　図１０は、タッチ操作位置１ａと変換位置２ａとの一例を示した図である。
　続いて、制御部１５は、位置特定情報を用いて、スマートフォン画面２ａ２の右下隅（基準位置）から変換位置２ａへの移動量を表す移動量情報を生成する（ステップＳ９０３）。
　本実施形態では、制御部１５は、Ｘ軸方向の移動量とＹ軸方向の移動量とを表す移動量情報を生成する。なお、移動量情報は、Bluetoothマウスから送信されるマウスの移動量を表す情報に対応し、HIDプロファイルに準拠した情報（操作情報）となる。
　続いて、制御部１５は、移動量情報を無線通信部１１に出力する。
　無線通信部１１は、移動量情報を受け付けると、移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０４）。
　図１１は、移動量情報の送信を示した図である。
　制御部１５は、移動量情報を無線通信部１１に出力すると、クリック操作を表すクリック情報を、無線通信部１１に出力する。
　無線通信部１１は、クリック情報を受け付けると、クリック情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０５）。
　図１２は、クリック情報の送信を示した図である。
　なお、クリック情報も操作情報の一例となる。
　スマートフォン２では、無線通信部２３は、車載機１から移動量情報を受信すると、移動量情報を制御部２５に出力し、車載機１からクリック情報を受信すると、クリック情報を制御部２５に出力する。
　制御部２５は、移動量情報とクリック情報を受け付けると、スマートフォン画面２ａ２上で、移動量情報が表す移動量だけマウスカーソル２１ａを基準位置から移動して、マウスカーソル２１ａをスマートフォン画面２ａ上の変換位置２ａに持っていき、変換位置２ａでのクリック操作を受け付ける（ステップＳ９０６）。
　その後、タッチパネル１４が、タッチ操作の終了を検出すると（ステップＳ９０７）、タッチパネル１４は、タッチ操作の終了を制御部１５に通知する。
　制御部１５は、タッチ操作の終了の通知を受け付けると、リリース操作を表すリリース情報を無線通信部１１に出力する。
　無線通信部１１は、リリース情報を受け付けると、リリース情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０８）。
　図１３は、リリース情報の送信を示した図である。
　制御部１５は、リリース情報を無線通信部１１に出力すると、続いて、基準移動量情報を、無線通信部１１に出力する。
　無線通信部１１は、基準移動量情報を受け付けると、基準移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ９０９）。
　図１４は、基準移動量情報の送信を示した図である。
　スマートフォン２では、無線通信部２３は、車載機１からリリース情報を受信すると、リリース情報を制御部２５に出力し、車載機１から基準移動量情報を受信すると、基準移動量情報を制御部２５に出力する。
　制御部２５は、リリース情報と基準移動量情報を受け付けると、マウスカーソル２１ａが存在する位置でのリリース操作を受け付け、その後、マウスカーソル２１ａをスマートフォン画面２ａ２上の基準位置に持っていく（ステップＳ９１０）。
　＜ドラッグ操作、フリック操作時の動作＞
　次に、初期状況で、車載機１のタッチパネル１４へのドラッグ操作、フリック操作が行われたときの動作を説明する。
　図１５は、タッチパネル１４へのドラッグ操作、フリック操作が行われたときの動作を説明するためのシーケンス図である。また、図１６～１９は、ドラッグ操作、フリック操作時の車載機１の画面とスマートフォン２の画面とを示した図である。
　なお、図１５において、図９に示した処理と同一の処理には同一符号を付してある。
　以下、図９に示した処理と異なる処理を中心に動作を説明する。
　タッチパネル１４が、初期状況下で最初にタッチ操作を検出すると、ステップＳ９０１～Ｓ９０６が実行される。
　図１６は、ステップＳ９０６が実行された際の状況の一例を示した図である。
　その後、タッチパネル１４が、タッチ操作が継続された状況でのタッチ操作の位置の移動、つまり、ドラッグ操作またはフリック操作を検出すると（ステップＳ１５０１）、タッチパネル１４は、タッチ操作の移動先の位置（ＸＹ座標）を、制御部１５に出力する。なお、図１７では、ドラッグ操作の例を示してある。
　制御部１５は、タッチ操作の移動先の位置を受け付けると、位置特定情報を用いて、タッチ操作の移動先の位置が、表示部２１上のスマートフォン画面２ａ２（画面情報にて規定されたスマートフォン画面２ａ２）のどの位置にあたるかを計算する。
　本実施形態では、制御部１５は、位置特定情報を用いて、タッチ操作の移動先の位置を、スマートフォン画面２ａ２の操作位置に変換する（ステップＳ１５０２）。以下、タッチ操作の移動先の位置から変換された位置を「移動先変換位置」と称する。
　続いて、制御部１５は、位置特定情報を用いて、変換位置（クリック位置）から移動先変換位置へのマウスカーソル２１ａの移動量を表す移動量情報を生成する（ステップＳ１５０３）。
　本実施形態では、制御部１５は、Ｘ軸方向の移動量とＹ軸方向の移動量とを表す移動量情報を生成する。
　続いて、制御部１５は、ステップＳ１５０３で生成した移動量情報を無線通信部１１に出力する。その後、制御部１５は、変換位置を移動先変換位置に更新して、移動先変換位置を新たな変換位置とする。なお、変換位置を移動先変換位置に更新した旨は、スマートフォン２には通知されない。
　無線通信部１１は、移動量情報を受け付けると、移動量情報をHIDプロファイルにしたがってスマートフォン２に送信する（ステップＳ１５０４）。
　スマートフォン２では、無線通信部２３は、車載機１から移動量情報を受信すると、移動量情報を制御部２５に出力する。
　制御部２５は、移動量情報を受け付けると、スマートフォン画面２ａ２上で、移動量情報が表す移動量だけマウスカーソル２１ａを移動して、マウスカーソル２１ａをスマートフォン画面２ａ２上の移動変換位置に持っていく（ステップＳ１５０５）。
　図１７は、マウスカーソル２１ａの移動変換位置への移動を示した図である。
　なお、本実施形態では、制御部１５は、タッチパネル１４がドラッグ操作またはフリック操作を検出したかを所定時間間隔（例えば、０．２秒間隔）で確認し、タッチパネル１４がドラッグ操作またはフリック操作を検出するごとに、ステップＳ１５０２～Ｓ１５０４を繰り返す。なお、所定時間間隔は、０．２秒間隔に限らず適宜変更可能である。
　また、移動量情報にて表すことができる移動量に上限値があり、変換位置から移動先変換位置への移動量が上限値を超える場合、制御部１５は、移動量情報を複数回送信することによって、変換位置から移動先変換位置への移動量をスマートフォン２に通知する。
　その後、タッチパネル１４が、タッチ操作の終了を検出すると（ステップＳ９０７）、ステップＳ９０８～Ｓ９１０が実行される。
　図１８は、ドラッグ操作またはフリック操作終了時のリリース情報の送信を示した図である。
　図１９は、リリース情報の送信後に行われる基準移動量情報の送信を示した図である。
　次に、本実施形態の効果について説明する。
　本実施形態によれば、タッチパネル１４は、車載機１への操作を検出する。制御部１５は、タッチパネル１４にて検出された操作に応じて、その操作に対応しかつBluetoothのHIDプロファイルに準拠した操作情報（移動量情報、クリック情報またはリリース情報）を生成する。通信部１６は、制御部１５にて生成された操作情報を、BluetoothのHIDプロファイルにて規定された通信方式で、BluetoothのHIDプロファイルを有するスマートフォン２に送信する。
　本実施形態では、車載機１とスマートフォン２との通信を、BluetoothのHIDプロファイルにて規定された通信方式で行うため、管理者権限を有さない者でも車載機１とスマートフォン２とを接続することができる。
　そして、車載機１は、ユーザによる操作を、スマートフォン２が有するBluetoothのHIDプロファイルに準拠した操作情報に変換し、その操作情報を、BluetoothのHIDプロファイルにて規定された通信方式でスマートフォン２に送信する。このため、車載機１からの操作情報にて、スマートフォン２を操作可能になる。
　したがって、車載機による遠隔操作用の専用のアプリケーションプログラムを必要とせずに、車載機１にてスマートフォン２を操作することが可能になる。
　なお、この効果は、タッチパネル１４と制御部１５と通信部１６（無線通信部１１）とからなる車載機でも奏する。
　また、車載機による遠隔操作用の専用のアプリケーションプログラムを動作させて車載機１からの情報を解析する必要がなくなるので、スマートフォン２では、操作情報に対する追従性が向上する。
　また、本実施形態では、BluetoothのHIDプロファイルにて定められた通信方式が、所定通信方式として使用される。このため、BluetoothのHIDプロファイルを用いることで、管理者権限を有する者でないと行えない特殊な作業を行うことなく、車載機１にてスマートフォン２を操作することが可能になる。
　なお、所定通信方式は、BluetoothのHIDプロファイルにて定められた通信方式に限らない。例えば、所定通信方式として、USB（Universal　Serial　Bus）マウスに対応する通信方式が用いられてもよい。
　所定通信方式として、USBマウスに対応する通信方式が用いられる場合、車載機１はUSBケーブルを有し、スマートフォン２はUSBポートを有し、車載機１のUSBケーブルがスマートフォン２のUSBポートに接続される。制御部１５は、タッチパネル１４が検出した操作に対応しかつUSBマウスに対応する通信方式に準拠した操作情報（移動量情報、クリック情報またはリリース情報）を生成し、操作情報をUSBケーブルでスマートフォン２に送信する。この場合、USBケーブルが通信手段の一例となる。このように、操作情報の通信は、無線通信でもよく有線通信でもよい。
　また、本実施形態では、タッチパネル１４が検出手段として用いられている。このため、車載機１のタッチパネル１４を、スマートフォン２の操作を受け付けるためのインターフェイスとして用いることが可能になる。
　なお、検出手段は、タッチパネル１４に限らず適宜変更可能である。例えば、検出手段として、ユーザによる音声操作を検出する音声解析部が用いられてもよい。
　また、本実施形態では、表示部１３がタッチパネル１４の背面側に設けられ、通信部１６は、スマートフォン２からスマートフォン２の画面（スマートフォン画面２ａ２）を表す画面情報を受信し、表示部１３は、画面情報に応じてスマートフォン画面２ａ１を表示する。制御部１５は、画面情報にて規定されるスマートフォン画面２ａ２のサイズと、表示部１３内のスマートフォン画面２ａ１の位置と、を表す位置特定情報を生成する。制御部１５は、タッチパネル１４にて検出されたタッチ操作に応じて、位置特定情報を用いて、タッチパネル１４上でのタッチ操作の位置を、スマートフォン２でのスマートフォン画面２ａ２上の操作位置に変換する。制御部１５は、スマートフォン２でのスマートフォン画面２ａ２上の操作位置に基づいて、操作情報（移動量情報やクリック情報）を生成する。
　このため、車載機１におけるタッチ操作を、スマートフォン２におけるタッチ操作として処理することが可能になる。
　また、本実施形態では、制御部１５は、スマートフォン２でのスマートフォン画面２ａ２上の操作位置に基づいて、スマートフォン２でのスマートフォン画面２ａ２上に設定された基準位置から、スマートフォン２でのスマートフォン画面２ａ２上の操作位置へ、の移動量を表す移動量情報と、クリック操作を表すクリック情報と、を操作情報として生成する。
　このため、車載機１におけるタッチ操作を、BluetoothのHIDプロファイルに準拠した操作情報に変更することが可能になる。
　また、本実施形態では、制御部１５は、タッチパネル１４がタッチ操作の終了を検出すると、スマートフォン２でのスマートフォン画面２ａ２上の操作位置から、スマートフォン２でのスマートフォン画面２ａ２上に設定された基準位置へ、の移動量を表す移動量情報と、リリース操作を表すリリース情報と、を操作情報として生成する。
　このため、タッチパネル１４へのタッチ操作の終了に伴い、スマートフォン２でのスマートフォン画面２ａへの仮想的なタッチ操作を終了でき、さらに、マウスカーソルの位置を基準位置に戻すことが可能になる。
　また、本実施形態では、制御部１５は、タッチパネル１４がタッチ操作の検出後にタッチ操作を継続した状況でのタッチ操作の位置の移動を検出すると、位置特定情報を用いて、移動後のタッチ操作の位置を、スマートフォン２でのスマートフォン画面２ａ２上の移動位置に変換する。そして、制御部１５は、スマートフォン２でのスマートフォン画面２ａ２上の操作位置から、スマートフォン２でのスマートフォン画面２ａ２上の移動位置へ、の移動量を表す移動量情報を、操作情報として生成する。
　このため、車載機１のタッチパネル１４へのドラッグ操作やフリック操作を、BluetoothのHIDプロファイルに準拠した操作情報に変更することが可能になる。
　（第２実施形態）
　次に、本発明の第２実施形態について説明する。
　第１実施形態では、スマートフォン画面２ａ２上の基準位置が固定されていたが、第２実施形態では、スマートフォン画面２ａ２上の基準位置は、タッチ操作の終了位置に応じて変更される。
　以下、第２実施形態について、第１実施形態と異なる点を中心に説明する。
　図２０は、本発明の第２実施形態の車載機１０Ａとスマートフォン２とを示したブロック図である。なお、図２０において、図１に示したものと同一構成のものには同一符号を付してある。
　車載機１０Ａは、無線通信部１１と、有線通信部１２と、表示部１３と、タッチパネル１４と、制御部１５Ａと、を含む。
　制御部１５Ａは、生成手段の一例である。
　制御部１５Ａは、図１に示した制御部１５が有する機能に加えて、スマートフォン画面２ａ２上の基準位置をタッチ操作の終了位置に応じて変更する機能を有する。
　本実施形態では、図２１に示すように、タッチパネル１４が、左上領域１４ａ、右上領域１４ｂ、左下領域１４ｃおよび右下領域１４ｄの４つの領域に分けられている。
　制御部１５Ａは、タッチ操作の終了位置が左上領域１４ａに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の左上隅の位置に設定する。
　また、制御部１５Ａは、タッチ操作の終了位置が右上領域１４ｂに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の右上隅の位置に設定する。
　また、制御部１５Ａは、タッチ操作の終了位置が左下領域１４ｃに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の左下隅の位置に設定する。
　また、制御部１５Ａは、タッチ操作の終了位置が右下領域１４ｄに含まれる場合には、スマートフォン画面２ａ２上の基準位置を、スマートフォン画面２ａ２の右下隅の位置に設定する。
　本実施形態によれば、制御部１５Ａは、タッチパネル１４上でのタッチ操作の終了位置に応じて、スマートフォン画面２ａ２上の基準位置を変更する。
　一般的に、スマートフォン等の携帯端末に設けられたタッチパネルにおいて、タッチ操作が終了した後に、新たなタッチ操作が行われる位置は、直前のタッチ操作の終了位置の近くであることが多い。
　このため、制御部１５Ａが、タッチパネル１４上でのタッチ操作の終了位置に応じてスマートフォン画面２ａ２上の基準位置を変更することによって、スマートフォン画面２ａ２上の基準位置が、次に行われるタッチ操作に応じた操作位置の近くになる可能性を高くすることができる。スマートフォン画面２ａ２上の基準位置が、次に行われるタッチ操作に応じた操作位置の近くになると、マウスカーソル２１ａの移動量を少なくでき、マウスカーソル２１ａの移動に伴う処理を少なくすることが可能になる。
　（第３実施形態）
　次に、本発明の第３実施形態について説明する。
　第３実施形態は、第１実施形態または第２実施形態に、車載機でのスマートフォン画面２ａ１についての自動キャリブレーション機能を付加したものである。
　なお、自動キャリブレーション機能は、スマートフォンでのスマートフォン画面２ａ２が、縦長の画面（縦表示）または横長の画面（横表示）に切り替わる場合に実行される。具体的には、車載機が、スマートフォン画面２ａ２が縦表示または横表示かを示す状態情報（以下、単に「状態情報」と称する）を、SPPプロファイルを用いてスマートフォンから取得し、その状態情報に応じて車載機でのスマートフォン画面２ａ１を変更する。
　以下、第３実施形態について、第１実施形態に自動キャリブレーション機能が付加された例を説明する。
　図２２は、本発明の第３実施形態の車載機１０Ｂとスマートフォン２Ｂとを示したブロック図である。なお、図２２において、図１に示したものと同一構成のものには同一符号を付してある。
　スマートフォン２Ｂは、インターネット通信機能を有し、表示部２１と、タッチパネル２２と、無線通信部２３と、有線通信部２４と、制御部２５Ｂと、を含む。
　制御部２５Ｂは、図１に示した制御部２５が有する機能を有する。
　さらに、制御部２５Ｂは、スマートフォン２Ｂでのスマートフォン画面２ａ２が、縦長の画面または横長の画面に切り替わると、SPPプロファイルを用いて状態情報を車載機１０Ｂに送信する。
　また、制御部２５Ｂは、縦長の画面での基点の位置を表す縦画面設定情報と、横長の画面での基点の位置を表す横画面設定情報と、を予め保持している。
　車載機１０Ｂは、無線通信部１１と、有線通信部１２と、表示部１３と、タッチパネル１４と、制御部１５Ｂと、を含む。
　制御部１５Ｂは、生成手段の一例である。
　制御部１５Ｂは、図１に示した制御部１５が有する機能を有する。
　さらに、制御部１５Ｂは、SPPプロファイルを用いてスマートフォン２Ｂから状態情報を受信すると、状態情報を参照して、スマートフォン２Ｂでのスマートフォン画面２ａ２が縦長の画面か横長の画面かを確認する。
　制御部１５Ｂは、スマートフォン画面２ａ２が縦長の画面である場合には、SPPプロファイルを用いて、縦画面設定情報をスマートフォン２Ｂから取得し、取得された縦長の画面での基点の位置を保持する。
　また、制御部１５Ｂは、スマートフォン画面２ａ２が横長の画面である場合には、SPPプロファイルを用いて、横画面設定情報をスマートフォン２Ｂから取得し、取得された横長の画面での基点の位置を保持する。
　なお、制御部１５Ｂは、例えば、スマートフォン２Ｂが縦画面設定情報と横画面設定情報とを保持していない場合、縦長の画面での基点の位置を、制御部１５Ｂが表示面１３ｂに縦長のスマートフォン画面２ａ１の表示を最初に行ったときのみに検出し、その検出結果を保持し、また、横長の画面での基点の位置を、制御部１５Ｂが表示面１３ｂに横長のスマートフォン画面２ａ１の表示を最初に行ったときのみに検出し、その検出結果を保持してもよい。
　本実施形態によれば、スマートフォン２Ｂでのスマートフォン画面２ａ２の縦表示や横表示の切り替わりに応じて、車載機１０Ｂでのスマートフォン画面２ａ１を自動的に変更することが可能になる。
　なお、図２２は、第１実施形態に自動キャリブレーション機能が付加された例を示したが、第２実施形態に自動キャリブレーション機能が付加されてもよい。
　なお、上記各実施形態において、スマートフォン２に、車載機１からの操作情報にしたがって動作することを前提に作成された専用アプリケーション（アプリケーションプログラム）が搭載されていてもよい。以下、スマートフォン２内の制御部２５のうち、専用アプリケーションを実行している部分を「アプリケーション実行部」と称する。
　専用アプリケーションが実行されている状況で、制御部２５が、無線通信部２３を介して車載機１からの操作情報を受け付けると、その操作情報をアプリケーション実行部に渡す。アプリケーション実行部は、その操作情報を処理する。
　また、上記各実施形態において、有線通信部１２と有線通信部２４は、HDMI端子を用いた有線通信を行ったが、有線通信部１２と有線通信部２４との間の有線通信は、HDMI端子を用いた有線通信に限らず適宜変更可能である。例えば、有線通信部１２と有線通信部２４との間の有線通信として、MHL（Mobile　High-Definition　Link）が用いられてもよい。
　また、上記各実施形態において、有線通信部１２と有線通信部２４との間の有線通信の代わりに、画面を圧縮して送信する無線通信、または無線HDMIなど、無線通信が利用されてもよい。
　また、上記各実施形態では、端末情報の通信にSPPプロファイルが用いられたが、端末情報の通信は、SPPプロファイルにしたがった通信に限らず、適宜変更可能である。
　また、上記各実施形態において、制御部１５は、タッチパネル１４がマルチタッチ操作を検出した場合、マルチタッチ操作に対応しHIDプロファイルに準拠した操作情報を生成してもよい。
　また、上記各実施形態では、車載機１および１０Ａは、スマートフォン２から情報を受信し、その情報に応じた表示を実行する。このため、車載機１および１０Ａは、スマートフォン２がインターネット通信を行って取得した情報を表示できる。よって、車載機１および１０Ａには、インターネット通信機能を搭載しなくてもよくなり、車載機１および１０Ａについての通信の費用を抑えることが可能になる。
　また、上記実施形態において、車載機１または１０Ａ（制御部１５または１５Ａ）は、コンピュータにて実現されてもよい。この場合、このコンピュータは、コンピュータにて読み取り可能なＣＤ－ＲＯＭ（Compact　Disk　Read　Only　Memory）のような記録媒体に記録されたプログラムを読込み実行して、または、有線通信または無線通信で受信したプログラム（例えばアプリケーションプログラム）を受信し実行して、車載機１または１０Ａ（制御部１５または１５Ａ）として機能する。記録媒体は、ＣＤ－ＲＯＭに限らず適宜変更可能である。
　以上説明した各実施形態において、図示した構成は単なる一例であって、本発明はその構成に限定されるものではない。
　実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。この出願は、２０１２年８月２７日に出願された日本出願特願２０１２－１８６５８５を基礎とする優先権を主張し、その開示の全てをここに取り込む。
　　　１、１０Ａ、１０Ｂ　車載機
　　　１１　　　　無線通信部
　　　１２　　　　有線通信部
　　　１３　　　　表示部
　　　１４　　　　タッチパネル
　　　１５、１５Ａ、１５Ｂ　制御部
　　　１６　　　　通信部
　　　２、２Ｂ　　スマートフォン
　　　２１　　　　表示部
　　　２２　　　　タッチパネル
　　　２３　　　　無線通信部
　　　２４　　　　有線通信部
　　　２５、２５Ｂ　制御部

Claims (10)

  1. 　所定通信方式に対応する携帯端末と通信する車載機であって、
    　前記車載機への操作を検出する検出手段と、
    　前記検出手段が検出した車載機への操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手段と、
    　前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手段と、を含む車載機。
  2. 　前記所定通信方式は、BluetoothのHIDプロファイルにて定められた通信方式、または、USBマウスに対応する通信方式である、請求項１に記載の車載機。
  3. 　前記検出手段は、前記車載機への操作として、タッチ操作を検出するタッチパネルである、請求項１または２に記載の車載機。
  4. 　前記タッチパネルの背面側に設けられた表示手段をさらに含み、
    　前記通信手段は、前記携帯端末から前記携帯端末の表示画面を表す画面情報を受信し、
    　前記表示手段は、前記画面情報に応じて前記携帯端末の表示画面を表示し、
    　前記生成手段は、前記画面情報にて規定される前記携帯端末の表示画面のサイズと、前記表示手段内の前記携帯端末の表示画面の位置と、を表す位置特定情報を生成し、前記タッチパネルにて検出されたタッチ操作に応じて、前記位置特定情報を用いて、前記タッチパネル上での前記タッチ操作の位置を、前記携帯端末の表示画面上の操作位置に変換し、当該携帯端末の表示画面上の操作位置に基づいて前記操作情報を生成する、請求項１から３のいずれか１項に記載の車載機。
  5. 　前記生成手段は、前記携帯端末の表示画面上の操作位置に基づいて、前記携帯端末の表示画面上に設定された基準位置から前記携帯端末の表示画面上の操作位置への移動量を表す移動量情報と、クリック操作を表すクリック情報と、を前記操作情報として生成する、　請求項４に記載の車載機。
  6. 　前記生成手段は、前記タッチパネルが前記タッチ操作の終了を検出すると、前記携帯端末の表示画面上の操作位置から前記基準位置への移動量を表す移動量情報と、リリース操作を表すリリース情報と、を前記操作情報として生成する、請求項５に記載の車載機。
  7. 　前記生成手段は、前記タッチパネル上での前記タッチ操作の終了位置に応じて、前記基準位置を変更する、請求項６に記載の車載機。
  8. 　前記生成手段は、前記タッチパネルが前記タッチ操作の検出後に当該タッチ操作が継続された状況での当該タッチ操作の位置の移動を検出すると、前記位置特定情報を用いて、前記移動後の前記タッチ操作の位置を前記携帯端末の表示画面上の移動位置に変換し、前記携帯端末の表示画面上の操作位置から前記携帯端末の表示画面上の移動位置への移動量を表す移動量情報を、前記操作情報として生成する、請求項４から７のいずれか１項に記載の車載機。
  9. 　所定通信方式に対応する携帯端末と通信する車載機が行う携帯端末制御方法であって、
    　前記車載機への操作を検出し、
    　前記検出した操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成し、
    　前記操作情報を前記所定通信方式で前記携帯端末に送信する、携帯端末制御方法。
  10. 　所定通信方式に対応する携帯端末と通信するコンピュータに、
    　前記車載機への操作を検出する検出手順と、
    　前記検出した操作に応じて、当該操作に対応し前記所定通信方式に準拠した操作情報を生成する生成手順と、
    　前記操作情報を前記所定通信方式で前記携帯端末に送信する通信手順と、を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
PCT/JP2013/064147 2012-08-27 2013-05-22 車載機、携帯端末制御方法および記録媒体 WO2014034193A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014532833A JP6032286B2 (ja) 2012-08-27 2013-05-22 車載機、携帯端末制御方法およびプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012186585 2012-08-27
JP2012-186585 2012-08-27

Publications (1)

Publication Number Publication Date
WO2014034193A1 true WO2014034193A1 (ja) 2014-03-06

Family

ID=50183020

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/064147 WO2014034193A1 (ja) 2012-08-27 2013-05-22 車載機、携帯端末制御方法および記録媒体

Country Status (2)

Country Link
JP (1) JP6032286B2 (ja)
WO (1) WO2014034193A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014229304A (ja) * 2013-05-27 2014-12-08 アルパイン株式会社 表示装置、表示装置の操作方法、情報表示システム及び表示装置の操作プログラム
JP2015014945A (ja) * 2013-07-05 2015-01-22 シャープ株式会社 表示装置、端末機器、表示システム、及び表示方法
JP2015187830A (ja) * 2014-03-12 2015-10-29 パナソニックＩｐマネジメント株式会社 表示制御システム
JP2015196495A (ja) * 2014-04-03 2015-11-09 株式会社デンソー 車両用入力装置
JP2017120664A (ja) * 2017-03-24 2017-07-06 クラリオン株式会社 表示装置
JP2018110039A (ja) * 2013-03-13 2018-07-12 クラリオン株式会社 表示装置、情報端末操作方法
JP2019169134A (ja) * 2018-03-22 2019-10-03 東莞寶トク電子有限公司 演算量分担機能付きコンピュータ入力システム及びそのコンピュータ入力方法
JPWO2019208323A1 (ja) * 2018-04-23 2020-10-01 仁也 中島 携帯端末の遠隔操作用デバイス

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001296948A (ja) * 2000-04-12 2001-10-26 Ricoh Co Ltd 表示システム、情報入力／表示システム、画面スクロール方法及び記憶媒体
JP2007258984A (ja) * 2006-03-22 2007-10-04 Toshiba Corp 無線通信装置及び無線通信方法
JP2012026750A (ja) * 2010-07-20 2012-02-09 Denso Corp 携帯端末および通信システム
JP2012093940A (ja) * 2010-10-27 2012-05-17 Kddi Corp 遠隔操作システム、遠隔操作方法およびプログラム
JP2012129765A (ja) * 2010-12-15 2012-07-05 Alpine Electronics Inc 電子装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001296948A (ja) * 2000-04-12 2001-10-26 Ricoh Co Ltd 表示システム、情報入力／表示システム、画面スクロール方法及び記憶媒体
JP2007258984A (ja) * 2006-03-22 2007-10-04 Toshiba Corp 無線通信装置及び無線通信方法
JP2012026750A (ja) * 2010-07-20 2012-02-09 Denso Corp 携帯端末および通信システム
JP2012093940A (ja) * 2010-10-27 2012-05-17 Kddi Corp 遠隔操作システム、遠隔操作方法およびプログラム
JP2012129765A (ja) * 2010-12-15 2012-07-05 Alpine Electronics Inc 電子装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018110039A (ja) * 2013-03-13 2018-07-12 クラリオン株式会社 表示装置、情報端末操作方法
JP2014229304A (ja) * 2013-05-27 2014-12-08 アルパイン株式会社 表示装置、表示装置の操作方法、情報表示システム及び表示装置の操作プログラム
JP2015014945A (ja) * 2013-07-05 2015-01-22 シャープ株式会社 表示装置、端末機器、表示システム、及び表示方法
JP2015187830A (ja) * 2014-03-12 2015-10-29 パナソニックＩｐマネジメント株式会社 表示制御システム
JP2015196495A (ja) * 2014-04-03 2015-11-09 株式会社デンソー 車両用入力装置
JP2017120664A (ja) * 2017-03-24 2017-07-06 クラリオン株式会社 表示装置
JP2019169134A (ja) * 2018-03-22 2019-10-03 東莞寶トク電子有限公司 演算量分担機能付きコンピュータ入力システム及びそのコンピュータ入力方法
JPWO2019208323A1 (ja) * 2018-04-23 2020-10-01 仁也 中島 携帯端末の遠隔操作用デバイス

Also Published As

Publication number Publication date
JP6032286B2 (ja) 2016-11-24
JPWO2014034193A1 (ja) 2016-08-08

Similar Documents

Publication Publication Date Title
JP6032286B2 (ja) 車載機、携帯端末制御方法およびプログラム
JP5999573B2 (ja) 情報表示処理装置
KR102016975B1 (ko) 디스플레이 장치 및 그 제어 방법
EP2860615B1 (en) Display device
JP5825631B2 (ja) 電子装置
JP6020864B2 (ja) 車載情報システム
JP5555555B2 (ja) 携帯機器と連携し、該携帯機器に対して可能な入力操作を実現する車載機器
JP5532018B2 (ja) 端末装置、プログラムおよびリモート操作システム
JP5871080B2 (ja) 画像表示装置、携帯端末装置、情報処理システム、画像表示装置制御方法及びプログラム
EP2753053B1 (en) Method and apparatus for dynamic display box management
JP2014229304A (ja) 表示装置、表示装置の操作方法、情報表示システム及び表示装置の操作プログラム
CN110879683A (zh) 屏幕信息共享的方法、终端及车辆
US11144155B2 (en) Electronic device
EP3336844A1 (en) Electronic device and image synchronizing method thereof
JP2012124578A (ja) 車載装置、車載システム及び携帯端末
JP2010130552A (ja) 遠隔操作システム及び遠隔操作方法
US20160253088A1 (en) Display control apparatus and display control method
KR20150044417A (ko) 복수의 단말 간 사용자인터페이스 통합 방법 및 이를 수행하는 단말
JP6397530B2 (ja) 表示装置
EP2908235A1 (en) Link display method and device
WO2014148352A1 (ja) 情報端末、操作領域制御方法及び操作領域制御プログラム
CN115798377A (zh) 屏幕显示控制方法、装置、车机及存储介质
JP2013161207A (ja) 情報表示装置
JP2016110470A (ja) 電子機器の連携システム
JPWO2015097853A1 (ja) 情報処理装置、携帯端末、制御方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13833282

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014532833

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13833282

Country of ref document: EP

Kind code of ref document: A1