WO2012127791A1 - 車両用装置、携帯電話機、および機器連携システム - Google Patents

車両用装置、携帯電話機、および機器連携システム Download PDF

Info

Publication number
WO2012127791A1
WO2012127791A1 PCT/JP2012/001394 JP2012001394W WO2012127791A1 WO 2012127791 A1 WO2012127791 A1 WO 2012127791A1 JP 2012001394 W JP2012001394 W JP 2012001394W WO 2012127791 A1 WO2012127791 A1 WO 2012127791A1
Authority
WO
WIPO (PCT)
Prior art keywords
call
vehicle
mobile phone
hands
screen
Prior art date
Application number
PCT/JP2012/001394
Other languages
English (en)
French (fr)
Inventor
健司 三宅
幸一 枡田
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Priority to US14/004,484 priority Critical patent/US9055158B2/en
Priority to CN201280014695.8A priority patent/CN103460680B/zh
Priority to EP12760346.2A priority patent/EP2690846B1/en
Publication of WO2012127791A1 publication Critical patent/WO2012127791A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/02Details of telephonic subscriber devices including a Bluetooth interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Definitions

  • the present disclosure relates to a vehicle device that displays information displayed on a screen of a mobile phone, the mobile phone, and a device cooperation system including the mobile phone and the vehicle device.
  • a mobile phone (hereinafter referred to as a touch panel mobile phone) that performs operation input using a touch panel is connected to a vehicle device equipped with a touch panel, and the touch panel mobile phone is connected to the touch panel of the vehicle device (hereinafter referred to as a vehicle touch panel).
  • a technique for displaying a screen of a telephone is known.
  • image data displayed on a screen of a touch panel type mobile phone is received by a vehicle device, and the touch panel type mobile phone is displayed on the screen of the vehicle touch panel based on the received image data. It is disclosed to display an image similar to that displayed in.
  • Patent Document 1 when information displayed on the vehicle touch panel is operated by a user, the coordinates of the operation location on the vehicle touch panel are converted to the coordinates on the touch panel of the touch panel mobile phone. And transmitting to a mobile terminal.
  • the screen of the touch panel type mobile phone can be displayed on the vehicle touch panel without installing the application program (hereinafter referred to as application) of the touch panel type mobile phone in the vehicle device, and the touch panel type can be operated by operating the vehicle touch panel.
  • application application program
  • a standard called a terminal mode whose name has been changed to Mirror Link (registered trademark) later is known.
  • the terminal mode is an example of the technology, but in this specification, the terminal mode is used as a generic name of the technology.
  • the vehicle device In the terminal mode, the vehicle device is only used as a screen display unit and an operation unit of a touch panel type mobile phone. Therefore, it is not necessary to install the application of the touch panel type mobile phone in the vehicle device.
  • the information transmitted from the touch panel mobile phone to the vehicle device is basically only color information for each pixel (hereinafter referred to as pixel information).
  • pixel information the function of the touch panel mobile phone can be used in the vehicle device without installing the application of the touch panel mobile phone in the vehicle device, so that the processing load of the vehicle device can be reduced. .
  • a vehicle device such as an in-vehicle navigation device having a hands-free function is connected to a mobile phone so that a call using the mobile phone can be performed using a speaker or a microphone of the vehicle device.
  • a hands-free system is also known.
  • the call start button of the mobile phone when the call start button of the mobile phone is operated, the call is started using the speaker or microphone of the mobile phone, while the call start button of the vehicle device is operated by operating the vehicle touch panel, for example.
  • a hands-free call is generally started using a speaker or a microphone of a vehicle device.
  • the call start button displayed on the screen of the vehicle touch panel has been operated.
  • the information transmitted from the touch panel type mobile phone to the vehicle device is basically only pixel information. Therefore, on the vehicle device side, is the call start button displayed on the screen? Is difficult to detect, and it is difficult to detect that the call start button has been operated.
  • the vehicular apparatus as aspect 1 of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • a call state detection section for detecting that the mobile phone is in a call state; When it is detected in the call state detection section that the mobile phone is in a call state within a predetermined time after detecting a pressing operation on the vehicle side display unit, a call is made using the speaker and microphone of the own device.
  • a vehicle-side call switching section that switches to hands-free calling.
  • the mobile phone When the mobile phone enters a call state in a short time after detecting the pressing operation of the vehicle side display unit, the user can There is a high possibility that a call is started by operating a call start display area for starting a call on the mobile phone on the touch panel screen. In addition, since the vehicle touch panel is pressed, it is highly likely that the user needs a hands-free call. From the above, according to the above configuration, the mobile phone is switched to the hands-free call based on the fact that the cellular phone is in a call state within a predetermined time after detecting the pressing operation on the vehicle touch panel. It becomes possible to switch to the hands-free call by judging the necessity of switching to the hands-free call on the device side.
  • the hands-free call is a call using a speaker or a microphone of a vehicle device. Further, switching to the hands-free call is performed by (A) outputting the voice input from the mobile phone to the speaker of the vehicle device and outputting the voice input from the microphone of the vehicle device to the mobile phone. Change the input / output route of the speaker or microphone of the vehicle device (for example, change the usage of the speaker or microphone of the vehicle device from a non-hands-free call application, such as navigation, audio, voice recognition, etc.) And (B) by requesting the mobile phone side to start a hands-free call.
  • the vehicular apparatus as aspect 2 of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • a touch operation detection section that detects that a pressing operation has been performed on the vehicle-side display unit and that identifies a pixel region in which the pressing operation on the screen of the vehicle-side display unit has been performed.
  • a call area image feature storage unit storing image characteristics of a call start display area for starting a call on the mobile phone on the touch panel screen. Based on the pixel information acquired from the mobile phone, the image features stored in the call area image feature storage unit, and the pixel area specified in the touch operation detection section, an image of the call start display area is displayed.
  • a call operation determination section that determines whether or not a pixel area in which an image of the call start display area on the screen of the vehicle-side display unit is displayed has been pressed. When the call operation determination section determines that the pixel area where the image of the call start display area is displayed has been pressed, the vehicle side call switching is switched to a hands-free call in which a call is made using the speaker and microphone of the own device. section.
  • the pixel information obtained from the mobile phone and the image feature and the touch operation detection section for the call start display area for starting a call on the mobile phone on the touch panel screen of the mobile phone are specified. Based on the determined pixel area, it is determined whether or not the pixel area on the screen of the vehicle touch panel on which the image of the call start display area is displayed is pressed, and hands-free based on the positive determination Switch to a call. Therefore, even with the above configuration, it is possible to switch to the hands-free call by determining the necessity of switching to the hands-free call on the vehicle device side.
  • the vehicular apparatus as the third aspect of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying a mobile screen, which is a screen displayed on the touch panel, on the vehicle-side display unit, and a user for the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation has been performed is specified as the operation target area, and the A control circuit that executes processing for transmitting a signal indicating an operation target area to the mobile phone via the communication unit.
  • a switching instruction accepting unit that accepts an operation input from a user for instructing switching to a hands-free call or starting a call.
  • a vehicle-side call switching section for switching to a hands-free call in which a call is made using the speaker and microphone of the own device when the operation input is received by the switching instruction receiving unit.
  • the switching instruction accepting unit is generated by an image on a unique screen area for displaying a screen uniquely generated by the own device, which is different from the portable screen area for displaying the portable screen in the display area of the vehicle-side display unit. Touch switch or an operation input device different from the touch switch.
  • the user may instruct switching to a hands-free call or initiating a call by a method other than a pressing operation from the user on the touch screen of the mobile phone and the mobile screen on the vehicle-side display unit.
  • the switching instruction receiving unit When the operation input is received by the switching instruction receiving unit, the call is switched to the hands-free call. Therefore, the necessity for switching to the hands-free call can be determined on the vehicle device side depending on whether or not the operation input is received by the switching instruction receiving unit, and the switch to the hands-free call can be performed.
  • the vehicular apparatus as the fourth aspect of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying a mobile screen, which is a screen displayed on the touch panel, on the vehicle-side display unit, and a user for the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation has been performed is specified as the operation target area, and the A control circuit that executes processing for transmitting a signal indicating an operation target area to the mobile phone via the communication unit.
  • An incoming state detection section for detecting that the mobile phone is in an incoming state. Includes a hands-free switch button image for instructing switching to a hands-free call for making a call using the speaker and microphone of its own device when it is detected in the incoming state detection section that the mobile phone is in an incoming state.
  • a vehicle-side generated screen display section that generates and displays the hands-free switching screen independently from the mobile screen.
  • a hands-free switching operation detection section for detecting a user's operation input to the area of the hands-free switching button image in the hands-free switching screen.
  • a vehicle-side call switching section that switches to a hands-free call when the operation input is detected in the hands-free switching operation detection section.
  • a hands-free switching screen including a hands-free switching button image for instructing switching to a hands-free call when it is detected in the incoming state detection section that the mobile phone is in an incoming state. Is generated and displayed. Then, when the user's operation input for the area of the hands-free switching button image in the hands-free switching screen is detected in the hands-free switching operation detection section, switching to the hands-free call is performed. Since the hands-free switching screen is generated and displayed independently from the mobile screen, the device for the vehicle can determine the necessity of switching to hands-free calling and switch to hands-free calling. It becomes possible.
  • the vehicular apparatus as aspect 5 of the present disclosure is provided to include the following.
  • a communication unit that communicates with a mobile phone equipped with a touch panel.
  • a vehicle side display unit used in the vehicle.
  • a pressing operation on the vehicle-side display unit When the user performs a pressing operation on the vehicle-side display unit, a pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is
  • a control circuit that performs processing for specifying an operation target area and transmitting a signal indicating the operation target area to the mobile phone via the communication unit.
  • a call state detection section for detecting that the mobile phone is in a call state. Contains a hands-free switching button image for instructing switching to a hands-free call for making a call using the speaker and microphone of the own device when it is detected that the mobile phone is in a call state in the call state detection section
  • a vehicle-side generated screen display section that generates and displays the hands-free switching screen independently from the mobile screen.
  • a hands-free switching operation detection section for detecting a user's operation input to the area of the hands-free switching button image in the hands-free switching screen.
  • a vehicle-side call switching section that switches to a hands-free call when the operation input is detected in the hands-free switching operation detection section.
  • the hands when it is detected in the call state detection section that the mobile phone is in a call state, the hands are displayed on at least a part of the area where the mobile screen on the vehicle-side display unit is displayed.
  • a hands-free switching screen including a hands-free switching button image for instructing switching to a free call is generated and displayed. Then, when the user's operation input for the area of the hands-free switching button image in the hands-free switching screen is detected in the hands-free switching operation detection section, switching to the hands-free call is performed. Since the hands-free switching screen is generated and displayed independently from the mobile screen, the device for the vehicle can determine the necessity of switching to hands-free calling and switch to hands-free calling. It becomes possible.
  • the vehicular apparatus as the sixth aspect of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • a call state detection section for detecting that the mobile phone is in a call state.
  • a vehicle-side call switching section that switches to a hands-free call in which a call is made using the speaker and microphone of its own device when it is detected in the call state detection section that the mobile phone is in a call state.
  • the mobile phone when it is detected in the call state detection section that the mobile phone is in a call state, it is switched to a hands-free call.
  • a mobile device having a vehicle touch panel When a mobile device having a vehicle touch panel is connected to a mobile phone and the screen of the mobile phone is displayed on the vehicle touch panel, the user may not be operating the mobile phone or may not be able to operate it. High nature. Therefore, when the mobile phone is in a call state when the mobile phone screen is displayed on the vehicle touch panel as described above, there is a high possibility that switching to a hands-free call is necessary. Therefore, it is possible to switch to the hands-free call by determining whether the hands-free call is to be performed on the vehicle device side.
  • the vehicular apparatus as the viewpoint 7 of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • the mobile phone When call voice data is received from the mobile phone, the mobile phone is switched to a hands-free call using the speaker and microphone of its own device. On the other hand, when call voice data is not received from the mobile phone, the mobile phone A vehicle-side call switching section for switching to the hands-free call when a call state is established.
  • the vehicular apparatus as the viewpoint 8 of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying a mobile screen, which is a screen displayed on the touch panel, on the vehicle-side display unit, and a user for the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation has been performed is specified as the operation target area, and the A control circuit that executes processing for transmitting a signal indicating an operation target area to the mobile phone via the communication unit.
  • a call state detection section for detecting that the mobile phone is in a call state.
  • the vehicle side display unit is switched to the hands-free call for making a call using the speaker and the microphone of the own device while the call voice data is not received from the mobile phone.
  • a mobile screen operation that is a pressing operation on a call start display area for starting a call on the mobile phone displayed in the mobile screen, or to display a screen uniquely generated by the own device.
  • the hands on the basis of detection of a unique screen operation that is a pressing operation on a region of a switching button image for instructing to switch to or start a call on the self-screen region provided in the display region of the display unit Vehicle side call switching section to switch to free calls.
  • the vehicle device side determines the necessity of switching to the hands-free call and performs the hands-free call. It is possible to switch to Even when call voice data is not received from the mobile phone, it is possible to switch to a hands-free call based on detection of a mobile screen operation or detection of a unique screen operation.
  • the mobile screen operation is a pressing operation on the pixel area on the screen of the vehicle-side display unit corresponding to the call start display area for starting a call on the mobile phone in the mobile screen displayed on the vehicle-side display unit.
  • the original screen operation is different from the mobile screen area that displays the mobile screen in the display area of the vehicle side display unit. This is a pressing operation on the area of the switching button image for instructing switching or starting of a call.
  • the vehicular apparatus as the ninth aspect of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • An incoming call detection section for detecting that the mobile phone is receiving an incoming call.
  • a call state detection section for detecting that the mobile phone is in a call state. While detecting in the incoming call detection section that the mobile phone is receiving a call, the mobile phone is in a call state in the call state detection section within a predetermined time after detecting a pressing operation on the vehicle side display unit.
  • a vehicle-side call switching section that performs incoming call processing to switch to a hands-free call that uses the speaker and microphone of its own device when it is detected that
  • the mobile phone when the mobile phone is receiving a call (that is, an incoming state), it is detected that the mobile phone is in a call state within a predetermined time after detecting a pressing operation on the vehicle-side display unit. If you do, you can switch to a hands-free call. Therefore, it becomes possible to switch to the hands-free call by judging the necessity of switching to the hands-free call on the vehicle device side during the incoming call of the mobile phone.
  • a call state is established within a predetermined time after detecting a pressing operation on the vehicle-side display unit. Is a condition for switching to a hands-free call, so that it is possible to appropriately determine whether to switch to a hands-free call in accordance with the characteristics of the incoming call.
  • the vehicular apparatus as the viewpoint 10 of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • a calling state detection section for detecting that the mobile phone is in a calling state or a calling state.
  • a call state detection section for detecting that the mobile phone is in a call state. After detecting that a pressing operation on the vehicle-side display unit is detected, the call state is detected in the call state detection section in the call state detection section, and then the call state A vehicle-side call switching section that performs processing at the time of outgoing call switching to a hands-free call in which a call is made using the speaker and microphone of its own device when it is detected in the detection section that the mobile phone is in a call state.
  • the mobile phone enters a call state after detecting that either a call-out state or a call state is detected within a predetermined time after detecting a pressing operation on the vehicle-side display unit. Can be switched to a hands-free call. Therefore, it becomes possible to switch to the hands-free call by judging the necessity of switching to the hands-free call on the vehicle device side during the calling or calling of the mobile phone.
  • the other party when calling or calling a mobile phone, the other party does not always answer immediately, but according to the above configuration, the call state has been entered after either the calling state or the calling state. Is a condition for switching to a hands-free call, so it is possible to appropriately determine whether to switch to a hands-free call according to the characteristics at the time of outgoing call or call.
  • the vehicular apparatus as the viewpoint 11 of the present disclosure is provided to include the following.
  • a vehicle side display unit used in the vehicle. A process of acquiring pixel information of the screen of the touch panel via the communication unit and displaying the screen displayed on the touch panel on the vehicle-side display unit, and a pressing operation from the user on the vehicle-side display unit
  • the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is specified as the operation target area, and the operation target area is
  • a call state detection section for detecting which of a plurality of predetermined call states is a call state indicating a state in call control of the mobile phone.
  • a latest press time recording section for recording the time of the latest press operation on the vehicle touch panel. Based on the latest pressing operation time recorded in the latest pressing time recording section and the call status of the mobile phone detected in the call status detection section, a hands-free call that uses the speaker and microphone of its own device to make a call.
  • the vehicle side call switching section to switch.
  • the vehicle side call switching section has a difference between the time of the latest pressing operation recorded in the latest pressing time recording section and the current time when the mobile phone detected in the call state detecting section is in a specific call state. If it is within the predetermined time, switch to a hands-free call.
  • the mobile phone as the viewpoint 12 of the present disclosure is provided to include the following. It communicates with a mobile phone provided with a touch panel, acquires pixel information of the screen of the touch panel, displays the screen displayed on the touch panel on a vehicle side display unit used in the vehicle, and the vehicle side When the user performs a pressing operation on the display unit, the pixel area on the screen of the touch panel corresponding to the pixel area on the screen of the vehicle-side display unit where the pressing operation is performed is the operation target area.
  • a touch panel that is connected by communication with a vehicular device that transmits a signal indicating the operation target area to the mobile phone.
  • An identification section for identifying whether the own device is in a call state due to a user's operation input to the own device or whether the device is in a call state based on a user's pressing operation on the vehicle-side display unit of the vehicle device. Hands that makes a call using the speaker and microphone of the vehicle device when the identification section identifies that the device is in a call state based on a user's pressing operation on the vehicle side display unit of the vehicle device Mobile phone call switching section for switching to free calls.
  • the identification section when the identification section identifies that the device is in a call state based on a user's pressing operation on the vehicle side display unit of the vehicle device, the mobile phone is switched to a hands-free call. Since the identification section is provided in the mobile phone, it is possible to switch to the hands-free call by judging the necessity of switching to the hands-free call on the mobile phone side.
  • the device cooperation system is a mobile phone provided with a touch panel provided to include the following.
  • the vehicle device according to any one of the above viewpoints 1 to 11.
  • the vehicle device transmits a request signal for requesting switching to a hands-free call to the mobile phone.
  • the mobile phone receives the request signal transmitted from the vehicle device, the mobile phone transmits an audio signal received from a public line to the vehicle device.
  • the vehicle device including the touch panel for the vehicle and the touch panel mobile phone are connected to each other.
  • the screen of the mobile phone is displayed on the vehicle touch panel, the necessity of switching to the hands-free call can be determined on the vehicle device side, and the switch to the hands-free call can be performed.
  • the vehicle device transmits a request signal requesting switching to the hands-free call to the mobile phone, and the mobile phone receives the request signal transmitted from the vehicle device.
  • the voice signal received from the public line is transmitted to the vehicle device, the user can perform a hands-free call from the vehicle device side to the mobile phone side without the user having to switch to the hands-free call on the mobile phone side. It becomes possible to automatically switch to a call.
  • the device cooperation system as the 14 points of view of the present disclosure is provided to include the following.
  • the vehicle device switches to a hands-free call when an audio signal is received from the mobile phone.
  • the vehicle device including the vehicle touch panel and the touch panel mobile phone are connected to each other.
  • the screen of the mobile phone is displayed on the vehicle touch panel, the necessity of switching to the hands-free call can be determined on the vehicle device side, and the switch to the hands-free call can be performed.
  • the vehicular device switches to a hands-free call when receiving an audio signal from the mobile phone, the hands-free call is not started when there is no audio signal from the mobile phone side.
  • the mobile phone side when the mobile phone side is set to always have a hands-free call when communicating with the vehicle device, and a voice signal is transmitted, the user does not have to perform an operation to switch to the hands-free call. It becomes possible to automatically start a hands-free call.
  • the device cooperation system as the fifteenth aspect of the present disclosure is provided to include the following.
  • a mobile phone with a touch panel The vehicle device according to any one of the above viewpoints 1 to 11.
  • the mobile phone When receiving the signal indicating the operation target area transmitted from the vehicle device, the mobile phone performs the same input as when operating the operation target area on the screen of the touch panel.
  • the vehicle device including the touch panel for the vehicle and the touch panel mobile phone are connected to each other.
  • the screen of the mobile phone is displayed on the vehicle touch panel, the necessity of switching to the hands-free call can be determined on the vehicle device side, and the switch to the hands-free call can be performed.
  • the drawing is: It is a block diagram which shows the schematic structure of an apparatus cooperation system; It is a block diagram which shows schematic structure of a mobile telephone; It is a block diagram which shows schematic structure of the apparatus for vehicles; It is a schematic diagram for demonstrating an example of the image characteristic of a call start button; It is a flowchart which shows the flow of the processing related to hands-free call switching in the control circuit; FIG.
  • FIG. 3 is a sequence diagram showing exchange of information between the mobile phone and the vehicle device until switching to a hands-free call when a call is received by the mobile phone in the first embodiment; It is a schematic diagram which shows the example of a display of H / F switching button; It is a flowchart which shows the flow of the processing related to hands-free call switching in the control circuit; FIG.
  • 10 is a sequence diagram showing exchange of information between a mobile phone and a vehicle device until switching to a hands-free call when a call is received at the mobile phone in Embodiment 2; 10 (a) and 10 (b) are schematic diagrams showing display examples of the H / F switching button at the time of multipoint connection; The sequence diagram which shows the exchange of the information between the mobile telephone and the apparatus for vehicles after switching to the hands-free call after switching to the hands-free call at the time of the incoming call of the mobile telephone in Embodiment 3 Is It is a schematic diagram for demonstrating an example of the switching of the display of a vehicle touch panel; 10 is a flowchart showing a flow of hands-free call switching related processing in the control circuit in the fourth embodiment; 10 is a flowchart showing a flow of processing related to hands-free call switching in a main control unit in Embodiment 5; It is a schematic diagram which shows the example of a display of H / F switching button; 17 is a flowchart showing a flow of hands-
  • FIG. 19A and FIG. 19B are schematic diagrams for explaining the outline of the hands-free call switching related processing in the seventh embodiment; 10 is a flowchart showing a flow of hands-free call switching related processing in a control circuit in Embodiment 8; 10 is a flowchart showing a flow of hands-free call switching related processing in the control circuit in Embodiment 9; and It is a flowchart which shows the outline of the newest touch time recording process.
  • FIG. 1 is a block diagram illustrating a schematic configuration of a device cooperation system 100 according to the first embodiment.
  • the device cooperation system 100 includes a mobile phone 1 and a vehicle device 2.
  • the device cooperation system 100 stores the image data generated by the mobile phone 1 in the vehicular device 2 for display on the screen of the mobile phone 1.
  • the mobile device 2 displays the screen indicated by the image data on the vehicle device 2 and operates the cellular phone 1 by an operation input to the vehicle device 2.
  • the screen content (mobile screen) equivalent to that of the mobile phone 1 is displayed on the screen of the vehicle device 2, but what kind of processing is being performed on the mobile screen, In addition, the vehicle device 2 cannot determine what kind of button is pressed by the user.
  • the vehicle device 2 In the terminal mode, the vehicle device 2 is only used as a screen display unit and an operation unit of a touch panel type mobile phone. Therefore, it is not necessary to install the application of the touch panel type mobile phone in the vehicle device 2.
  • the information transmitted from the touch panel mobile phone to the vehicle device is basically only color information for each pixel (hereinafter referred to as pixel information).
  • pixel information In the terminal mode, since the functions of the touch panel type mobile phone can be used by the vehicle device 2 without installing the application of the touch panel type mobile phone in the vehicle device, the processing load of the vehicle device 2 can be reduced. There is.
  • the screen of the mobile phone 1 is enlarged and displayed while maintaining the aspect ratio in accordance with the screen of the vehicle device 2, or is enlarged and displayed by changing the aspect ratio.
  • the vehicular device 2 receives pixel information generated by the mobile phone 1, size information of the screen of the mobile phone 1, and the like.
  • the type of application executed on the mobile phone 1 text information on the screen, data attributes on the screen, presence / absence of operation buttons, type, display position, and operation buttons are pressed.
  • the detailed information regarding the screen displayed on the screen of the mobile phone 1 such as the processing content executed in the case of the mobile phone 1 is not received.
  • the amount of data communication between the vehicle device 2 and the mobile phone 1 increases.
  • an application for analyzing detailed information is required in the vehicle device 2, and it is difficult to reduce the processing load of the vehicle device 2.
  • the vehicle device 2 receives pixel information from the mobile phone 1.
  • the description will be made on the assumption that detailed information regarding the display content of the screen is not received. However, this does not deny receiving information other than image data. In some cases, information such as the type of application may be received.
  • the mobile phone 1 is a so-called touch panel type mobile phone that performs operation input using a touch panel (that is, a multi-function mobile phone equipped with a touch panel in which operation portions are aggregated on a screen), and is similar to a general touch panel type mobile phone.
  • a touch panel that is, a multi-function mobile phone equipped with a touch panel in which operation portions are aggregated on a screen
  • it has various functions such as a communication function with an external device, a mail function, an Internet connection function (Web connection function), a music player function, a picture viewer function, a moving image reproduction function, and a navigation function.
  • Web connection function Internet connection function
  • music player function music player function
  • picture viewer function a picture viewer function
  • moving image reproduction function a moving image reproduction function
  • FIG. 2 is a block diagram showing a schematic configuration of the mobile phone 1.
  • the mobile phone 1 includes a mobile communication unit 13 including a BT communication unit 11 and a USB communication unit 12, a touch panel unit 16 including a mobile display unit 14 and an operation detection unit 15, and mobile audio input.
  • the mobile communication unit 13 communicates with the vehicle device 2. Specifically, the BT communication unit 11 performs communication (hereinafter referred to as BT communication) with the vehicular device 2 according to Bluetooth (registered trademark), and the USB communication unit 12 performs USB communication with the vehicular device 2. Wired communication by connection (hereinafter referred to as USB communication) is performed. In the present embodiment, it is assumed that the BT communication unit 11 is used for transmission / reception of information related to the control for switching to the hands-free call, and the USB communication unit 12 is used for transmission / reception of image data and position information during terminal mode connection.
  • BT communication communication
  • USB communication Wired communication by connection
  • the image data referred to here is pixel information (for example, color information for each pixel) of each pixel on the screen of the touch panel unit 16, and the position information is position information on the screen of the mobile phone 1. It is assumed that the image data includes pixel coordinate information of each pixel necessary for drawing.
  • the structure which performs communication between the mobile telephone 1 and the apparatus 2 for vehicles by BT communication and USB communication was shown, it does not necessarily restrict to this.
  • it may be configured to perform wireless communication according to short-range wireless communication standards such as ZigBee (registered trademark) or wireless LAN standards such as IEEE 802.11, or may be configured to perform wired communication other than USB communication.
  • short-range wireless communication standards such as ZigBee (registered trademark) or wireless LAN standards such as IEEE 802.11, or may be configured to perform wired communication other than USB communication.
  • transmission / reception of information related to control of switching to a hands-free call and transmission / reception of image data and position information during terminal mode connection are performed by two types of communication (BT communication and USB communication), respectively.
  • BT communication and USB communication the configuration is shown, it is not necessarily limited to this.
  • the transmission / reception of information related to the control for switching to a hands-free call and the transmission / reception of image data and position information during connection in the terminal mode may be performed by one type of communication.
  • the mobile-side display unit 14 displays a screen or the like corresponding to various application programs (hereinafter referred to as applications) of the mobile phone 1 and can display, for example, a full color display, such as a liquid crystal display, an organic EL display, a plasma. It can be configured using a display or the like.
  • applications application programs
  • a full color display such as a liquid crystal display, an organic EL display, a plasma. It can be configured using a display or the like.
  • the operation detection unit 15 uses a touch switch integrated with the portable side display unit 14, detects that the switch corresponding to the touch position is operated, and inputs the position information to the main control unit 19. In other words, the operation detection unit 15 detects which position on the screen displayed on the mobile-side display unit 14 is operated, and inputs the position information to the main control unit 19. In this embodiment, the position information referred to here is, for example, coordinates on the screen of the portable display unit 14.
  • the touch panel unit 16 is a unit in which the mobile side display unit 14 and the operation detection unit 15 are integrated, and displays a screen including, for example, a button display on the mobile side display unit 14 in accordance with an instruction from the main control unit 19.
  • the touch switch may be based on a capacitance method, may be based on a resistance film method, or may be based on another method.
  • the position information may be an identifier such as an ID for identifying each area.
  • the mobile-side voice input unit 17 includes a microphone (hereinafter referred to as a microphone) and converts voices such as voices spoken by the user during a call into voice signals and outputs the voice signals to the main control unit 19.
  • the portable-side voice output unit 18 includes a speaker or the like, and outputs the voice of the other party, various guidance voices, and the like based on instructions from the main control unit 19.
  • the main control unit 19 is configured as a normal computer, and includes, for example, a well-known CPU, ROM, EEPROM, RAM, I / O, and a bus line (none of which is shown) for connecting these configurations. Is provided.
  • the main control unit 19 executes various processes based on various information input from the mobile side communication unit 13, the touch panel unit 16, and the mobile side voice input unit 17.
  • the main control unit 19 executes an application program (hereinafter referred to as an application), generates image data for causing the touch panel unit 16 to display a screen according to the application, and displays the screen according to the image data on the touch panel unit 16.
  • an application may be stored in advance in the ROM, or may be downloaded from a server via a communication network such as a network by a communication unit (not shown).
  • the main control unit 19 determines which button display on the screen being displayed on the touch panel unit 16 is operated based on the position information input from the touch panel unit 16, and performs the operation.
  • the process corresponding to the displayed button is executed. For example, if it is determined that a button display for starting a call on the mobile phone 1 (hereinafter referred to as a call start button) is determined, a process for starting a call on the mobile phone 1 is performed.
  • a call start button a button display for starting a call on the mobile phone 1
  • the main control unit 19 transmits the voice signal input from the portable side voice input unit 17 to the public line during a call, and converts the voice signal received from the public line into voice, thereby converting the voice signal received from the public line to the portable side voice output unit. 18 to output.
  • the main control unit 19 causes the USB communication unit 12 to transmit the image data generated to be displayed on the touch panel unit 16 to the vehicle device 2 when being connected in the terminal mode.
  • image data is transmitted from the USB communication unit 12 to the vehicle device 2
  • the mobile phone 1 and the vehicle device 2 are connected in the terminal mode when the USB connection is made via the USB communication unit 12.
  • it may be configured such that the necessity of connection in the terminal mode can be selected by an operation input from the user to the touch panel unit 16.
  • the main control unit 19 when connected in the terminal mode, the main control unit 19 is displaying on the touch panel unit 16 based on the position information input from the vehicle device 2 via the USB communication unit 12. It is determined which button display on the screen is operated, and processing corresponding to the button display on which the operation is performed is executed.
  • main control unit 19 causes the incoming call state notification indicating that the incoming call is received from the BT communication unit 11 to the vehicular device 2 when the incoming call is received, or when the call is started A call state notification indicating that the call has been started is transmitted from the BT communication unit 11 to the vehicle device 2.
  • the main control unit 19 switches to a hands-free call when the BT communication unit 11 receives a hands-free switching request (described later) transmitted from the vehicle device 2.
  • a hands-free switching request (described later) transmitted from the vehicle device 2.
  • the voice signal received from the public line is transmitted from the BT communication unit 11 to the vehicle device 2 and the voice transmitted from the vehicle device 2 received by the BT communication unit 11 is transmitted. Send the signal to the public line.
  • the vehicle device 2 is mounted on a vehicle such as an automobile, and performs image display and audio input / output.
  • vehicle device 2 for example, an in-vehicle navigation device, an in-vehicle display device, a so-called display audio, or the like can be used.
  • Display audio refers to a vehicular device that is mounted with only basic functions such as a display function, an audio playback function, and a communication function with the mobile phone 1 and is multi-functionalized in cooperation with the mobile phone 1.
  • an in-vehicle navigation device integrated with a display may be used as the vehicle device 2, or a combination of the in-vehicle navigation device and the display that does not include a display may be used as the vehicle device 2.
  • the following explanation will be given on the assumption that the vehicle device 2 is an in-vehicle navigation device integrated with a display.
  • FIG. 3 is a block diagram showing a schematic configuration of the vehicle device 2.
  • the vehicle device 2 includes a vehicle side communication unit 23 including a BT communication unit 21 and a USB communication unit 22, a vehicle side display unit 24, an operation input unit 25, a vehicle side audio input unit 26, and a vehicle side.
  • An audio output unit 27, a storage device 28, and a control circuit 29 are provided.
  • the vehicle-side communication unit 23 communicates with the mobile phone 1. Therefore, the vehicle side communication unit 23 is also referred to as a communication means (means or device). Specifically, the BT communication unit 21 performs BT communication with the mobile phone 1, and the USB communication unit 22 performs USB communication with the mobile phone 1. In the present embodiment, it is assumed that the BT communication unit 21 is used for transmission / reception of information related to the control for switching to the hands-free call, and the USB communication unit 22 is used for transmission / reception of image data and position information during the terminal mode connection. Note that the communication between the vehicle device 2 and the mobile phone 1 may be performed by wireless communication as described above, or may be performed by wired communication.
  • the USB communication unit 22 receives display area information and image data transmitted from the mobile phone 1 and inputs them to the control circuit 29. In addition, the USB communication unit 22 transmits position information output from the control circuit 29 to the mobile phone 1 in accordance with an instruction from the control circuit 29.
  • the vehicle-side display unit 24 displays a screen or the like in accordance with an instruction from the control circuit 29 and can display, for example, a full color, and is configured using a liquid crystal display, an organic EL display, a plasma display, or the like. be able to.
  • the operation input unit 25 for example, a touch switch integrated with the vehicle-side display unit 24, a remote operation switch, or the like is used, and an operation instruction for various functions is given to the control circuit 29 by the switch operation. What integrated the touch switch of the operation input part 25 with the vehicle side display part 24 is also referred to as a vehicle touch panel.
  • the operation input unit 25 detects which position on the screen displayed on the vehicle-side display unit 24 is pressed and controls the position information in the same manner as the operation detection unit 15 described above. It is assumed that the signal is input to the circuit 29.
  • the vehicle-side voice input unit 26 is composed of a microphone or the like, converts voice uttered by the user into a voice signal, and outputs the voice signal to the control circuit 29.
  • the vehicle-side voice output unit 27 is configured by a speaker or the like, and outputs the voice of the other party during a hands-free call, various guidance voices, and the like based on instructions from the control circuit 29.
  • the storage device 28 stores an image feature of a call start display area for starting a call on the mobile phone 1 on the screen of the mobile phone 1. Therefore, the storage device 28 is also referred to as a call area image feature storage unit.
  • the call start display area for starting a call on the mobile phone 1 indicates a button display (hereinafter referred to as a call start button) for starting a call on the screen of the mobile phone 1.
  • the image feature indicates a feature using, as an index, a color, a shape, a temporal change period of pixel information for the same pixel, and the like.
  • the image feature of the call start button is a feature using color as an index
  • the internal color of the call start button graphic, the color of the frame of the call start button graphic, and the like are stored in the storage device 28. It will be.
  • the shape of the call start button graphic, the shape of the character or symbol used for the call start button, and the like are stored in the storage device 28.
  • the start of a call that is a moving image that blinks and changes color or shape.
  • the temporal change period of each pixel of the button is stored in the storage device 28.
  • the image feature of the call start button needs to be distinguishable from button displays other than the call start button (for example, a hold button).
  • a hold button for example, a hold button.
  • the shape of the outer frame of the hold button (A in the figure) is a single-line rectangle as shown in FIG. 4
  • the shape of the outer frame of the call start button (B in the figure) is 2 Make it a rectangle with a heavy line, or make the internal color enclosed by the outer frame different from the hold button.
  • FIG. 4 there is an example in which a character “start button” used for a call start button is different from a character “hold button” used for a hold button.
  • the control circuit 29 is configured as a normal computer, and includes, for example, a well-known CPU, ROM, EEPROM, RAM, I / O, and a bus line (none of which is shown) for connecting these configurations. It has been.
  • the control circuit 29 executes various processes based on various information input from the vehicle side communication unit 23, the operation input unit 25, and the vehicle side voice input unit 26.
  • control circuit 29 When the control circuit 29 receives input of image data (hereinafter referred to as portable-derived image data) received from the mobile phone 1 by the vehicle-side communication unit 23, the control circuit 29 generates an image according to the portable-derived image data and It outputs to the display part 24, and displays the screen (henceforth a portable screen) according to the portable origin image data on the vehicle side display part 24.
  • image data hereinafter referred to as portable-derived image data
  • control circuit 29 for example, based on the display area information transmitted from the mobile phone 1, an image is generated by converting the size and resolution of the mobile-derived image data into the screen size and resolution of the vehicle-side display unit 24. A mobile screen is displayed.
  • a configuration is shown in which the size and resolution of portable-derived image data are converted to the size and resolution of the screen of the vehicle-side display unit 24 based on the display area information transmitted from the mobile phone 1.
  • the size of the mobile phone-derived image data and the conversion ratio of the resolution may be held in the control circuit 29 in advance as fixed values, and the conversion may be performed according to the fixed values.
  • the display area information may not be transmitted from the mobile phone 1.
  • control circuit 29 receives position information indicating which position on the screen displayed on the vehicle-side display unit 24 is pressed from the operation input unit 25, and the control circuit 29 of the mobile phone 1 corresponding to the position information.
  • the coordinates that is, the pixel area
  • the operation target area As a method for specifying the operation target region corresponding to the position information, a configuration may be used in which the size is specified by performing a conversion opposite to the conversion performed when the size of the mobile-derived image data is converted and the image is generated.
  • control circuit 29 is also referred to as control means (means or device).
  • control circuit 29 accepts input of information related to control of switching to the hands-free call received from the mobile phone 1 by the BT communication unit 21 and image data received from the mobile phone 1 by the USB communication unit 22. Processing related to control of switching to free call (hereinafter, hands-free call switching related processing) is executed.
  • FIG. 5 is a flowchart showing a flow of hands-free call switching related processing in the control circuit 29. This flow is started when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • a hands-free call protocol (hands-free call profile for BT communication, hereinafter referred to as HFP) for performing a hands-free call is usually connected before the terminal mode connection. That is, the vehicle device 2 transmits a search signal for searching for the mobile phone 1 capable of BT communication while the power is on. Then, the mobile phone 1 receives the search signal and transmits a search response signal to the vehicle device 2. The vehicular device 2 receives the search response signal and connects the BT communication line to the mobile phone 1. If the connection of the BT communication line is normally completed, the HFP connection with the mobile phone 1 is performed next. Then, when the HFP connection ends normally, the HFP connection is continued. In this state, voice data is transmitted and received between the vehicle device 2 and the mobile phone 1, and a hands-free call is performed by outputting the voice data from the speaker of the vehicle device 2.
  • HFP hands-free call profile for BT communication
  • each secuff is expressed as, for example, S1.
  • each secuff can be divided into a plurality of subsections, while a plurality of secacings can be combined into one section.
  • each section configured in this way can be referred to as a device, a module, or means.
  • each of the above-mentioned sections or a combination thereof is related not only to (i) software secuff combined with a hardware unit (for example, a computer) but also (ii) hardware secuff. It can be realized with or without the function of the device. Furthermore, the hardware section can be configured inside the microcomputer.
  • a software section can be included in the software program.
  • This software program can also be included in a non-transitional computer-readable storage medium as a program product.
  • step S1 a touch operation detection determination process is executed, and the process proceeds to step S2.
  • the touch operation detection determination process it is determined whether or not the vehicular touch panel is pressed. Whether or not the vehicular touch panel is pressed can be determined according to whether or not an operation is detected by the operation input unit 25.
  • step S2 if it is determined in the touch operation detection determination process that the vehicle touch panel has been pressed, that is, if there is a touch operation (YES in step S2), the process proceeds to step S3. If it is not determined in the touch operation detection determination process that the vehicle touch panel has been pressed, that is, if there is no touch operation (NO in step S2), the flow returns to step S1 and the flow is repeated.
  • step S3 a call start button operation determination process is executed, and the process proceeds to step S4.
  • the image of the call start button is displayed on the screen of the vehicle touch panel based on the image data acquired from the mobile phone 1 and the image characteristics of the call start button stored in the storage device 28.
  • An area to be displayed that is, a pixel area
  • the image feature is a feature using the color as an index
  • a portion where the same color continues in the screen is recognized as one figure.
  • the graphic recognized in this way is linear and closed, it is recognized as a graphic frame, and the frame and its interior are recognized as one graphic.
  • a plurality of colors are used for the graphic.
  • a color having a ratio within a predetermined value or more is set as the color of the graphic. If the frame of the graphic recognized as described above or the inside of the graphic frame matches the color stored as the image feature of the call start button, the image of the call start button is displayed in the area where the graphic is located. It is specified as an area displayed on the screen of the vehicle touch panel.
  • the image feature is a feature with the shape as an index
  • pattern matching is performed with the shape stored as the image feature of the call start button, and there are objects to be matched (characters, symbols, figures, etc.)
  • the area where the target is located is specified as the area where the image of the call start button is displayed on the screen of the vehicle touch panel.
  • the image feature is a character
  • the image feature may be specified based on character information read from the screen by character recognition processing and character information stored in advance.
  • the character information read from the image information displayed on the screen matches the character information stored in advance, a certain area around the area where the character information is drawn on the screen, Alternatively, if there is a border around the area, the area inside the border is specified as the area where the image of the call start button is displayed on the screen of the vehicle touch panel.
  • the image feature is a feature using the temporal change cycle of pixel information for the same pixel as an index
  • the same color is continuously displayed in the screen as in the case of the feature using the color as an index. Is recognized as a single figure. If the temporal change period of the pixel information for the recognized figure frame and the same pixel in the figure matches the change period stored as the image feature of the call start button, The area to be positioned is specified as an area where the image of the call start button is displayed on the screen of the vehicle touch panel.
  • an area (hereinafter referred to as an operation area) where an operation is performed by the user on the screen of the vehicle touch panel is specified based on the position information input from the operation input unit 25. Therefore, the control circuit 29 is also referred to as a touch operation detection section or means.
  • the operation area may be one point indicated by the coordinates, or may be a predetermined range centered on the coordinates. Further, when the position information includes coordinates of a plurality of points, a range indicated by the coordinates of the plurality of points may be set as the operation area.
  • the control circuit 29 is also referred to as a call operation determination section or means. Whether the area where the call start button is displayed matches the operation area is determined to match when at least a part of the area where the call start button is displayed overlaps with the operation area. That's fine. In addition, when the area
  • the call start button displayed on the screen of the vehicle touch panel is operated by determining whether the area matches the operation area.
  • the configuration for determining whether or not has been shown, it is not necessarily limited thereto.
  • whether or not the call start button displayed on the screen of the vehicle touch panel has been operated by determining whether or not the image feature of the operation area matches the image feature of the call start button stored in the storage device 28. It is good also as a structure (modification 1) which determines this.
  • the call start button operation determination process may be configured as follows.
  • an area that is, an operation area
  • the operation area may be a range of a figure that includes a part or all of a predetermined range centered on the coordinates, and the position information includes coordinates of a plurality of points. May be included in the range of the figure including part or all of the range indicated by the coordinates of the plurality of points.
  • the recognition of a figure is performed by recognizing a part where the same color continues in the screen as one figure, or when it is linear and closed. What is necessary is just to recognize that it is a frame and to recognize the frame and its inside as one figure.
  • the image feature of the operation area is determined. For example, when the image feature is a feature using a color as an index, a graphic frame or a color inside the operation region partially or entirely is determined as the image feature of the operation region. If the image feature is a feature using the shape as an index, the outline of the figure including part or all of the operation region, and the characters and symbols included in the figure are determined as the image feature of the operation region. Furthermore, when the image feature is a feature using the temporal change period of pixel information for the same pixel as an index, it is possible to display a figure frame partially or entirely included in the operation area or the same pixel in the figure. The temporal change period of the pixel information is determined as the image feature of the operation area.
  • the call start button displayed on the screen of the vehicle touch panel Is determined to have been operated. If the image feature is a feature with the shape as an index, for example, pattern matching may be performed, and the matching may be determined when matching is performed. According to this, since it is possible to narrow down the area where image characteristics need to be obtained to the operation area on the screen of the vehicle touch panel, the vehicle touch panel can be obtained without obtaining the image characteristics of the entire area of the vehicle touch panel screen. It is possible to determine that the call start button displayed on the screen is operated. Therefore, it is possible to reduce the processing load on the control circuit 29.
  • step S4 when it is determined that the call start button is operated in the call start button operation determination process (YES in step S4), the process proceeds to step S5. If the call start button operation determination process does not determine that the call start button is operated (NO in step S4), the process returns to step S1 and the flow is repeated.
  • step S5 a call waiting timer set process is executed, and the process proceeds to step S6.
  • timer counting is started.
  • a timer circuit or the like (not shown) may be used as the timer.
  • step S6 an in-hour call start determination process is executed, and the process proceeds to step S7.
  • the in-hour call start determination process it is determined whether or not it is detected that the mobile phone 1 is in a call state within a predetermined time after the timer count is started in the call waiting timer setting process in step S5. Specifically, it may be configured to detect that the mobile phone 1 is in a call state when the call state notification received from the mobile phone 1 by the BT communication unit 21 is input to the control circuit 29. Therefore, the control circuit 29 is also referred to as a call state detection section or means.
  • the predetermined time mentioned here is a time that is longer than the time difference when the mobile phone 1 is operated by an operation input to the vehicular device 2 during the terminal mode connection, and can be arbitrarily set. For example, one to several seconds may be set as the predetermined time.
  • image features regarding a screen (hereinafter referred to as a call screen) displayed on the touch panel unit 16 during a call on the mobile phone 1 are stored in the storage device 28 in advance, and image data acquired from the mobile phone 1 and the storage device If it is determined that the image feature indicated by the image data acquired from the mobile phone 1 matches the image feature of the call screen based on the image feature of the call screen stored in the mobile phone 1, the mobile phone 1 makes a call It may be configured to detect that the state has been reached. Therefore, the storage device 28 is also referred to as a call screen image feature storage unit.
  • the image characteristics of the call screen include, for example, button colors, shapes, characters (for example, “call” characters), symbols and figures (for example, icon shapes used for call buttons) characteristic of the call screen.
  • step S7 it is determined that it has been detected that the mobile phone 1 is in a call state within a predetermined time after starting the timer count in the call waiting timer setting process (that is, a call start detection within a predetermined time). If yes (YES in step S7), the process proceeds to step S8. If it is not determined that the call start is detected within a predetermined time (NO in step S7), the process returns to step S1 and the flow is repeated.
  • step S8 a hands-free call switching process is executed and the flow is terminated.
  • the BT communication unit 21 transmits a hands-free switching request for requesting switching to the hands-free call to the mobile phone 1 and starts the hands-free call with the vehicle device 2. Therefore, the control circuit 29 is also referred to as a vehicle side call switching section or means.
  • the hands-free switching request is also referred to as a request signal.
  • the hands-free call here refers to a mobile phone that transmits a voice signal of a call voice input from the vehicle-side voice input unit 26 from the BT communication unit 21 to the mobile phone 1 and that is received by the BT communication unit 21. 1 indicates that the audio signal transmitted from 1 is output to the vehicle-side audio output unit 27 to output the other party's audio. In other words, in addition to transmitting the voice uttered by the user to the public line via the mobile phone 1, it indicates that the mobile phone 1 outputs the voice received from the public line. This flow is also terminated when the terminal mode connection between the vehicle device 2 and the mobile phone 1 is canceled.
  • the image data of the standby screen is transmitted from the mobile phone 1 to the vehicle device 2 by USB communication (t2).
  • a standby screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 is displayed on the vehicle touch panel (t 3).
  • a screen according to an application other than the application related to the call function may be used.
  • an incoming call state notification is transmitted from the mobile phone 1 to the vehicle device 2 by BT communication (t5).
  • the incoming screen is displayed on the touch panel 16 of the mobile phone 1 (t6), and the image data of the incoming screen is transferred from the mobile phone 1 to the vehicle device by USB communication. 2 (t7).
  • an incoming call screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 is displayed on the vehicle touch panel (t 8).
  • the incoming call screen includes the above-described call start button.
  • the position information of the operation area is transmitted from the vehicle device 2 to the mobile phone 1 by USB communication (t10). ). Based on the position information, the mobile phone 1 operates the call start button on the mobile phone 1 side to start a call (t11).
  • a call state notification is transmitted from the mobile phone 1 to the vehicle device 2 by BT communication (t12).
  • a call screen is displayed on the touch panel unit 16 of the mobile phone 1 (t13), and image data of the call screen is transmitted from the mobile phone 1 to the vehicle device 2 by USB communication (t14).
  • the vehicle device 2 displays a call screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 on the vehicle touch panel based on the image data (t15).
  • a hands-free switching request is transmitted via the BT communication based on the fact that the mobile phone 1 is in a call state within a predetermined time after the call start button displayed on the screen of the vehicular touch panel is operated. Is transmitted from the vehicular device 2 to the mobile phone 1 (t16). And the apparatus 2 for vehicles is switched to a hands-free call (t17). The mobile phone 1 that has received the hands-free switching request also switches to hands-free calling (t18).
  • the mobile phone 1 When switching to a hands-free call when a call is made from the mobile phone 1, the mobile phone 1 can be switched within a predetermined time after the call start button displayed on the call screen of the vehicle touch panel is operated. Based on the reception of the call state notification, a hands-free switching request is transmitted from the vehicle device 2 to the mobile phone 1 to switch to the hands-free call.
  • switching to the hands-free call is performed based on the reception of the call state notification from the mobile phone 1 within a predetermined time after the screen of the vehicle touch panel is operated.
  • the mobile phone 1 is in a call state in a short time after detecting the operation of the screen of the vehicle touch panel, the user can start the call after receiving an incoming call on the mobile phone 1 or start the call by outgoing call.
  • the call is started by operating the call start button on the screen of the vehicle touch panel.
  • the vehicle touch panel since the vehicle touch panel is operated, there is a high possibility that the user needs a hands-free call. Therefore, according to the above configuration, it is possible to determine the necessity of switching to the hands-free call on the vehicle device 2 side and switch to the hands-free call.
  • the call start button is operated on the vehicle device 2 side from the image data acquired from the mobile phone 1, the image feature of the call start button, and the operation area specified by the control circuit 29. Then, switch to hands-free calling based on the positive determination. Therefore, with the above configuration, it is possible to determine the necessity of switching to the hands-free call on the vehicle device 2 side with higher accuracy and to switch to the hands-free call.
  • the notification of the call state is received from the mobile phone 1 within a predetermined time after the screen of the vehicle touch panel is operated, and the call start button is operated on the vehicle device 2 side.
  • the configuration for switching to a hands-free call when two conditions are met is shown, this is not necessarily the case. For example, it may be configured to switch to a hands-free call when either of the two conditions is satisfied.
  • step S3 in the flow of FIG. And step S4 may be abbreviate
  • the call start button is operated on the vehicle device 2 side, when switching to the hands-free call is performed, Steps S5 to S7 are omitted, and YES is determined in Step S4. What is necessary is just to set it as the structure which transfers to step S8.
  • a hands-free switching request is issued from the vehicle device 2 on the basis that the call state notification is received from the mobile phone 1 within a predetermined time after detecting the operation of the vehicle touch panel screen.
  • the mobile telephone 1 receives an incoming state notification other than a call state, an outgoing state notification, and a call state notification within a predetermined time.
  • a configuration may be adopted in which a hands-free switching request is transmitted from the vehicle device 2 to the mobile phone 1 based on the reception. In this case, the mobile phone 1 temporarily stores the fact that the hands-free switching request has been received, and then performs a hands-free call when the mobile phone 1 enters a call state.
  • Embodiment 2 The present disclosure is not limited to the above-described first embodiment, and the following second embodiment is also included in the technical scope of the present disclosure.
  • Embodiment 2 will be described with reference to the drawings. For convenience of explanation, members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the second embodiment has the same configuration as that of the first embodiment except that the processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29 of the second embodiment receives the input of mobile-derived image data received from the mobile phone 1 by the vehicle-side communication unit 23.
  • An image according to the mobile phone-derived image data is generated and output to the vehicle-side display unit 24, and the mobile screen according to the mobile phone-derived image data is displayed in a partial area of the vehicle-side display unit 24.
  • control circuit 29a displays an independently generated screen generated independently by the own device separately from the mobile screen in an area other than the area where the mobile screen of the vehicle side display unit 24 is displayed. Further, the control circuit 29a also displays an icon of a button for instructing switching between a hands-free call and a handset call (hereinafter referred to as an H / F switch button) on this unique generation screen.
  • the H / F switching button is also referred to as a switching button image. Therefore, the control circuit 29a is also referred to as a switching button image display section or means.
  • the handset call is a call that is performed by the mobile phone 1 alone.
  • Switching to a handset call for the vehicle device 2 means, for example, terminating a hands-free call protocol or switching a route for inputting / outputting a voice (voice route) to a route not via the speaker and microphone of the own device. Show.
  • FIG. C of FIG. 7 shows a mobile screen
  • D shows a uniquely generated screen
  • E shows an H / F switching button.
  • F indicates a call start button on the mobile screen
  • G indicates a call end button on the mobile screen.
  • the uniquely generated screen is displayed around the mobile screen, and the H / F switching button is included in the uniquely generated screen.
  • the design of the H / F switch button is different from the design of the call start button on the mobile screen.
  • a button image including text such as “hands-free” that is not used for the call start button on the mobile screen may be prepared in advance, and this button image may be used as an image of the H / F switching button.
  • a candidate different from the call start button design on the mobile screen is selected and used for the image of the H / F switching button.
  • the design of the call start button on the mobile screen may be determined by, for example, analyzing an image feature of a graphic on the mobile screen.
  • button design information for each model of the mobile phone 1 is stored in the storage device 28 in advance, and information on the model of the mobile phone 1 obtained from the connected mobile phone 1 and information on the button design for each model. Based on the above, the configuration may be obtained by estimating the design of the call start button of the mobile phone 1.
  • the operation method of the H / F switching button may be different from the operation method of the call start button on the mobile screen.
  • the operation input received by the operation input unit 25 corresponding to the H / F switching button may have a different operation method from the operation input received by the operation input unit 25 corresponding to the call start button on the mobile screen.
  • the operation is detected by one touch operation
  • the H / F switching button the operation is detected by two touch operations. According to this, it becomes easier for the user to distinguish between the call start button for instructing the start of the handset call displayed on the mobile screen and the H / F switching button.
  • the H / F switching button may have a similar design to the call start button on the mobile screen.
  • the H / F switching button and the call start button on the mobile screen may be distinguishable by another method.
  • the user can easily distinguish each button. What is necessary is just to set it as such.
  • control circuit 29a may be configured to automatically switch to a hands-free call without causing the control circuit 29a to display a screen asking whether or not to start a hands-free call in response to an operation instruction using the H / F switch button. Good.
  • control circuit 29a displays on the vehicle display a screen asking whether or not to start a hands-free call in response to an operation instruction by the H / F switching button, and that switching to the hands-free call is required. It is good also as a structure which performs the setting which switches to a hands-free call automatically, when an input is received. In addition, what is necessary is just to set it as the structure which the control circuit 29c receives via the operation input part 25 the operation input from the user to the effect of switching to the hands-free call, for example.
  • control circuit 29a executes processing related to control of switching to a hands-free call (hereinafter referred to as hands-free call switching related processing).
  • hands-free call switching related processing processing related to control of switching to a hands-free call
  • FIG. 8 is a flowchart showing a flow of hands-free call switching related processing in the control circuit 29a. This flow is started when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • step S11 the touch operation detection determination process is executed in the same manner as in step S1, and the process proceeds to step S12.
  • step S12 if it is determined in the touch operation detection determination process that the vehicular touch panel is pressed, that is, if there is a touch operation (YES in step S12), the process proceeds to step S13. If it is not determined in the touch operation detection determination process that the vehicular touch panel has been pressed, that is, if there is no touch operation (NO in step S12), the process returns to step S11 and the flow is repeated.
  • step S13 an H / F switching button operation determination process is executed, and the process proceeds to step S14.
  • an operation area based on the position information input from the operation input unit 25, an area (hereinafter referred to as an operation area) where an operation is performed by the user on the screen of the vehicle touch panel is specified.
  • the operation area may be one point indicated by the coordinates, or may be a predetermined range centered on the coordinates. Further, when the position information includes coordinates of a plurality of points, a range indicated by the coordinates of the plurality of points may be set as the operation area.
  • the operation input unit 25 is also referred to as a switching instruction receiving unit.
  • step S14 If it is determined in step S14 that the H / F switch button has been operated (YES in step S14), the process proceeds to step S15. If it is determined that the H / F switch button has not been operated (NO in step S14), the process returns to step S11 and the flow is repeated.
  • step S15 a hands-free call switching process is executed and the flow ends.
  • a hands-free switching request for requesting switching to the hands-free call is transmitted from the BT communication unit 21 to the mobile phone 1, and a hands-free call is started by the vehicle device 2. Therefore, the control circuit 29a is also referred to as a vehicle side call switching section or means.
  • the processing from t21 to t34 is the same as the processing from t1 to t14 in FIG. 6 except that the vehicular device 2 displays the original generation screen outside the standby screen and the incoming call screen in the display area of the vehicle touch panel. It is performed in the same way as the processing.
  • a screen according to an application other than the application related to the call function may be used.
  • the vehicular apparatus 2 displays a call screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 on the vehicular touch panel based on the image data transmitted from the mobile phone 1. At the same time, display of the uniquely generated screen including the H / F switching button is started (t35).
  • a hands-free switching request is transmitted from the mobile phone 1 to the vehicular device 2 by BT communication (t37). . And it connects between the mobile telephones 1 with a hands-free call profile, and switches the apparatus 2 for vehicles to a hands-free call (t38). The mobile phone 1 that has received the hands-free switching request also switches to hands-free calling (t39).
  • the configuration is shown in which the display of the H / F switch button is started when a call is started, but the present invention is not necessarily limited thereto.
  • the mobile phone 1 may be configured to start displaying the H / F switch button when an incoming call is received. In this case, when it is determined that the H / F switching button has been operated, a call may be started even if the call button on the mobile screen is not operated, and switching to a hands-free call may be performed.
  • the mobile phone 1 may be configured to start displaying the H / F switching button when a call is made, or may be configured to always display the H / F switching button while displaying the uniquely generated screen. .
  • the H / F switch button in the unique generation screen is a button unique to the vehicle device 2 that does not exist on the mobile screen. Therefore, it is possible to easily determine that switching to the hands-free call is necessary when the operation input unit 25 detects the touch operation on the area where the H / F switching button is displayed on the uniquely generated screen. Therefore, even with the configuration of the present embodiment, it is possible to switch to the hands-free call by determining the necessity of switching to the hands-free call on the vehicle device 2 side.
  • the control circuit 29a identifies whether a hands-free call or a handset call is in progress. If it is determined that the H / F switching button is operated during the hands-free call, the hand-free call is switched to the handset call. If it is determined that the H / F switch button is operated during the handset call, Switch from a handset call to a hands-free call. As described above, every time the operation input unit 25 receives a touch operation on the area where the H / F switching button is displayed, the control circuit 29a alternately switches between the hands-free call and the handset call.
  • control circuit 29a is configured to keep the H / F switch button displayed on the original generation screen during a call regardless of a hands-free call or a handset call.
  • the control circuit 29a may be configured to detect that the call is in progress from the reception of the call state notification from the mobile phone 1 to the reception of the signal indicating that the call has ended from the mobile phone 1. Therefore, the control circuit 29a is also referred to as a busy detection section or means.
  • the display of the H / F switching button may be ended.
  • the end of the call may be configured such that the control circuit 29a detects that the signal indicating the end of the call is received from the mobile phone 1.
  • control circuit 29a can also be used to switch the H / F switch button even when the connected mobile phone 1 does not have a function for alternately switching between a hands-free call and a handset call during a call. It is good also as a structure to display. Examples of the mobile phone 1 that does not have a function of alternately switching between a hands-free call and a handset call during a call include one that can only switch from a handset call to a hands-free call during a call. According to this, not only the model of the mobile phone 1, but the H / F switching button can be displayed.
  • the vehicle device 2 can be connected to a plurality of mobile phones 1 by communication and is in a state where it can be connected to the plurality of mobile phones 1 (that is, for performing a hands-free call with the plurality of mobile phones 1).
  • the following configuration may be used.
  • the cellular phone 1 and the vehicle device 2 perform both transmission / reception of information related to control of switching to hands-free calling and transmission / reception of image data and position information during terminal mode connection by BT communication. An example will be described.
  • the vehicular device 2 and the plurality of mobile phones 1 are connected at the same time with a plurality of devices in the same profile.
  • information for specifying each mobile phone 1 for example, device ID
  • model information of each mobile phone 1 are used as a control circuit. It shall be registered in 29a.
  • a user name of the mobile phone 1 may be registered.
  • control circuit 29a displays the H / F switch button only for the mobile phone 1 on which the mobile screen is displayed on the vehicle side display unit 24 (that is, connected in the terminal mode), and is connected in the terminal mode.
  • the H / F switching button may not be displayed.
  • what is necessary is just to set it as the structure performed based on apparatus ID registered at the time of a pairing process in the identification of each mobile telephone 1 in the control circuit 29a.
  • the mobile phone 1 connected in the terminal mode is likely to be the mobile phone 1 of the driver of the vehicle. Therefore, with the configuration as described above, the H / F switch button for the driver's mobile phone 1 can be preferentially displayed. In addition, this makes it possible to identify the driver's mobile phone 1 such as checking the device ID of the mobile phone 1 only by performing a touch operation on the area of the H / F switching button on the vehicle-side display unit 24. This makes it possible to simply start a hands-free call on the driver's mobile phone 1 without providing any means.
  • the model name and the user name of the cellular phone 1 may be displayed in addition to the H / F switching button.
  • the model name and user name of the mobile phone 1 may be configured to use the model name and user name registered during the pairing process.
  • the voice communication with the mobile phone 1 that is connected in the terminal mode may be disconnected or muted. Thereby, it is possible to prevent mixing (mixing) of the voice of the hands-free call and the voice of the application being used in the terminal mode other than the hands-free call (voice of music, video, etc.).
  • the control circuit 29a is also connected to the H / F for the mobile phone 1 in which the mobile screen is not displayed on the vehicle-side display unit 24 (that is, not connected in the terminal mode). It is good also as a structure which displays each switch button. In addition, what is necessary is just to set it as the structure performed based on apparatus ID registered at the time of a pairing process in the identification of each mobile telephone 1 in the control circuit 29a.
  • the H / F switch button for any mobile phone 1 is operated by associating the position information of the area where the H / F switch button for each mobile phone 1 is displayed with the device ID of the mobile phone 1. What is necessary is just to make it the structure which can specify whether it was done by the control circuit 29a. And H A configuration may be adopted in which a hands-free call and a handset call with the mobile phone 1 corresponding to the H / F switch button determined to be operated are alternately switched each time the / F switch button is operated. The determination of the operated H / F switching button may be performed by the control circuit 29a in the same manner as the H / F switching button operation determination process.
  • the H / F switching button for each mobile phone 1 is displayed on the original generation screen. Is displayed at the same time.
  • C of Fig.10 (a) shows a portable screen
  • D shows the original production
  • E1 and E2 have shown the H / F switch button.
  • F indicates a call start button on the mobile screen
  • G indicates a call end button on the mobile screen.
  • two mobile phones 1a and 1b are multipoint connected to the vehicle device 2
  • E1 is an H / F switching button for the mobile phone 1a
  • E2 is an H / F for the mobile phone 1b. Assume that it is a switch button.
  • the model name and user name of the mobile phone 1 may be displayed in the same manner as described above in addition to the H / F switch button. . Further, when one of the H / F switching buttons for each mobile phone 1 is operated, the icon display of the H / F switching buttons other than the operated one is prohibited from switching to a hands-free call. It is good also as a structure switched to icon display. Further, at this time, a configuration may be adopted in which operations of the H / F switching buttons other than those operated are not accepted.
  • FIG.10 (b) which divides
  • FIG. 10B is the same as FIG. 10A except that the uniquely generated screen is divided for each H / F switching button for each mobile phone 1.
  • the H / F switching buttons for each mobile phone 1 are sequentially displayed one by one in the original generation screen, for example. There is a mode to be displayed.
  • a configuration for displaying a button for switching the H / F switching button for each mobile phone 1 (hereinafter referred to as a mobile switching button) on the original generation screen may be adopted.
  • C of FIG.10 (c) shows a portable screen
  • D shows an original production
  • E shows the H / F switching button
  • H shows the portable switching button.
  • F indicates a call start button on the mobile screen
  • G indicates a call end button on the mobile screen.
  • a touch switch (H Although the configuration using the touch switch generated by the image of the / F switching button) is shown, it is not necessarily limited thereto.
  • a mechanical (mechanical) switch may be used as the operation input unit 25 that receives the operation input.
  • a known voice recognition device that receives an operation input by performing voice recognition of a voice command spoken by the user may be used.
  • a well-known device such as a proximity switch such as a capacitive panel that detects a predetermined gesture operation of the user or a camera may be used.
  • the above-described mechanical switch, voice recognition device, proximity switch, camera, and the like are also referred to as an operation input device.
  • a configuration in which a hands-free call and a handset call can be alternately switched for each operation on the H / F switch button is shown, but the present invention is not necessarily limited thereto.
  • it may be configured that only switching from a handset call to a hands-free call can be performed by operating the H / F switch button.
  • the hands-free call protocol may be terminated at the end of the call.
  • a call start button having a different icon design from the H / F switch button may be displayed on the original generation screen.
  • the call start button may be configured to be displayed instead of the H / F switching button for alternately switching between the hands-free call and the handset call as a button for instructing switching from the handset call to the hands-free call.
  • the display may be made simultaneously with the H / F switching button.
  • the buttons may have the same function as the H / F switching button, and only the icon design may be different.
  • Embodiment 3 will be described with reference to the drawings.
  • members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 according to the third embodiment includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the third embodiment has the same configuration as that of the first embodiment except that the processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29 when the control circuit 29 according to the third embodiment (hereinafter referred to as the control circuit 29b for convenience) receives the input of portable image data received from the mobile phone 1 by the vehicle-side communication unit 23, An image according to the mobile phone-derived image data is generated and output to the vehicle-side display unit 24, and the mobile screen according to the mobile phone-derived image data is displayed in at least a part of the vehicle-side display unit 24.
  • control circuit 29b switches to the display of the mobile screen and causes the vehicle-side display unit 24 to display a uniquely generated screen generated uniquely by the own device. .
  • the control circuit 29b also displays an icon of a button for instructing switching to the hands-free call (hereinafter, H / F switching button) on this unique generation screen.
  • the uniquely generated screen may be configured to display the mobile screen transparently except for the area where the H / F switch button is displayed.
  • C indicates a mobile screen
  • D indicates a unique generation screen
  • E indicates an H / F switching button.
  • the H / F switch button may have a different design from the call start button on the mobile screen as in the first embodiment, or may have a similar design.
  • the control circuit 29b may be configured to detect that the mobile phone 1 is in an incoming state based on the reception of the incoming state notification from the mobile phone 1. Therefore, the control circuit 29b is also referred to as a vehicle-side generated screen display section or means and an incoming state detection section or means.
  • control circuit 29b determines whether or not the H / F switching button on the original generation screen is operated in the same manner as the hands-free call switching related processing of the first and second embodiments, and the H / F switching button is When it is determined that the operation has been performed, a hands-free call is started. Therefore, the control circuit 29b is also referred to as a hands-free switching operation detection section or means. Further, the uniquely generated screen including the H / F switching button is also referred to as a hands-free switching screen.
  • the description will be made assuming that the H / F switching button displayed on the screen of the vehicle touch panel and the H / S switching button described later are operated.
  • a mobile phone 1 displays a screen according to an application other than the application related to the call function (hereinafter referred to as an application screen) when a call is received, the mobile phone 1 returns from the incoming call screen to the application screen after the start of the call. I will explain it as a thing.
  • the application screen includes, for example, a map screen in a navigation function.
  • the image data of the application screen is transmitted from the mobile phone 1 to the vehicle device 2 by USB communication (t42).
  • the vehicle device 2 displays an application screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 on the vehicle touch panel based on the image data (t43).
  • an incoming state notification is transmitted from the mobile phone 1 to the vehicle device 2 by BT communication (t45).
  • an incoming screen is displayed on the touch panel 16 of the mobile phone 1 (t46), and the image data of the incoming screen is transferred from the mobile phone 1 to the vehicle device 2 by USB communication. Transmit (t47).
  • the vehicle device 2 displays an incoming call screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 on the vehicle touch panel based on the image data (t48). In addition, the vehicle device 2 switches from the display of the incoming call screen (that is, the mobile screen) to the display of the uniquely generated screen including the H / F switch button based on the reception of the incoming call state notification (t49). .
  • FIG. C1 in FIG. 12 shows an application screen as a mobile screen
  • C2 shows an incoming call screen as a mobile screen
  • D shows a uniquely generated screen.
  • I, J, and K have shown the display area of the vehicle touch panel.
  • the case where the uniquely generated screen is displayed around the mobile screen while the mobile screen is displayed will be described as an example.
  • the application screen is also displayed on the vehicle touch panel of the vehicle device 2 as shown in I of FIG. It will be.
  • the mobile phone 1 receives a call and displays the incoming call screen
  • the incoming call screen is also displayed on the vehicle touch panel of the vehicle device 2 as shown in FIG. .
  • the vehicular device 2 replaces the incoming call screen based on the reception of the incoming call state notification, and displays a uniquely generated screen (hereinafter referred to as a hands-free switching screen) including an H / F switching button.
  • a hands-free switching screen a uniquely generated screen including an H / F switching button.
  • a hands-free switching request is transmitted from the mobile phone 1 to the vehicle device 2 by BT communication (t51). ). And it connects between the mobile telephones 1 with a hands-free call profile, and switches the apparatus 2 for vehicles to a hands-free call (t52). The mobile phone 1 that has received the hands-free switching request also switches to hands-free calling (t53). Therefore, the control circuit 29b is also referred to as a vehicle side call switching section or means.
  • the mobile phone 1 resumes the display of the application screen (that is, the application screen) that was being executed at the time of the incoming call (t54), and the image data of the application screen is transferred via USB communication. Is transmitted from the mobile phone 1 to the vehicle device 2 (t55). In the vehicle device 2, based on this image data, the application screen similar to that displayed on the touch panel unit 16 of the mobile phone 1 is displayed on the vehicle touch panel, thereby restarting the display of the application screen (t 56. ). Therefore, the control circuit 29b is also referred to as a portable screen switching section or means.
  • the vehicle device 2 displays a button icon (hereinafter, H / S switching button) for instructing switching to the handset call on the application screen whose display has been resumed.
  • H / S switching button a button icon for instructing switching to the handset call on the application screen whose display has been resumed.
  • the control circuit 29b generates an image of the H / S switching button and displays the image superimposed on the application screen. Therefore, the control circuit 29b is also referred to as a superimposed display section or means.
  • the H / S switching button is not limited to the configuration in which the H / S switching button is superimposed on the resumed application screen, but may be configured to be displayed in an independently generated screen that is displayed around the application screen. Further, when the hands-free call is started and the application screen is not switched from the hands-free switching screen, the H / S switching button may be displayed on the hands-free switching screen.
  • the control circuit 29b of the vehicle device 2 determines whether or not the operation area specified based on the position information input from the operation input unit 25 matches the area where the H / S switching button is displayed. When it is determined that they match, it is detected that the H / S switch button has been operated. Therefore, the control circuit 29b is also referred to as a handset switching operation detection section or means.
  • the hands-free call profile is terminated and the vehicle device 2 is switched to the handset call (t60).
  • the mobile phone 1 that has received the handset switching request also switches to the handset call (t61).
  • the hands-free switching screen is displayed instead of the mobile screen. Absent. For example, when it is detected by the control circuit 29b that the communication state has been established, a hands-free switching screen may be displayed instead of the mobile screen.
  • a configuration in which the control circuit 29b detects that the mobile phone 1 is in a call state based on the reception of a call state notification from the mobile phone 1 may be adopted. Therefore, the control circuit 29b is also referred to as a call state detection section or means.
  • the H / F switch button in the original screen that is switched from the mobile screen when a call is received or when a call starts is a button unique to the vehicle device 2 that does not exist on the mobile screen. Therefore, it is possible to easily determine that switching to the hands-free call is necessary when the operation input unit 25 detects the touch operation on the area where the H / F switching button is displayed on the uniquely generated screen. Therefore, even with the configuration of the present embodiment, it is possible to switch to the hands-free call by determining the necessity of switching to the hands-free call on the vehicle device 2 side.
  • the hands-free call can be easily canceled.
  • the vehicle device 2 can be connected to a plurality of mobile phones 1 by communication and is connected to the plurality of mobile phones 1 by a hands-free communication method for performing a hands-free call, the following is performed. It is good also as a simple structure.
  • the cellular phone 1 and the vehicle device 2 perform both transmission / reception of information related to control of switching to hands-free calling and transmission / reception of image data and position information during terminal mode connection by BT communication. An example will be described.
  • the vehicular device 2 and the plurality of mobile phones 1 are connected at the same time with a plurality of devices in the same profile.
  • information for specifying each mobile phone 1 for example, device ID
  • model information of each mobile phone 1 are used as a control circuit. It shall be registered in 29b.
  • a user name of the mobile phone 1 may be registered.
  • control circuit 29b only when the control circuit 29b detects that the mobile phone 1 on which the mobile screen is displayed on the vehicle-side display unit 24 (that is, connected in the terminal mode) is in an incoming call state or a call state, The display may be switched to the hands-free switching screen.
  • the control circuit 29b specifies individual mobile phones 1 and signals of the individual mobile phones 1 (supplied with device IDs to be transmitted) based on the device IDs registered during the pairing process. What is necessary is just to make it the structure to perform.
  • the mobile phone 1 connected in the terminal mode is the mobile phone 1 of the driver of the vehicle. Therefore, with the above configuration, the mobile phone 1 other than the mobile phone 1 that is likely to be the mobile phone 1 of the vehicle driver or the mobile phone 1 of the driver who is not connected in the terminal mode is used. Hands-free calling can be restricted.
  • the control circuit 29b identifies the mobile phone 1 and specifies the model name or user name of the mobile phone 1 May be configured to be superimposed on the mobile screen or displayed on the original generation screen.
  • the individual mobile phone 1 may be specified by the control circuit 29b based on the device ID registered during the pairing process. Therefore, the control circuit 29b is also referred to as a specific section or means.
  • the model name and user name of the mobile phone 1 may be configured to use the model name and user name registered during the pairing process.
  • the control circuit 29b may be configured to perform notification by outputting a sound from the vehicle-side sound output unit 27.
  • the control circuit 29b is also referred to as a notification section or means.
  • the mobile phone 1 that is multipoint-connected includes a H / F switching button for the mobile phone 1 that does not display a mobile screen on the vehicle-side display unit 24 (that is, is not connected in the terminal mode).
  • the display may be switched to the original generation screen.
  • what is necessary is just to set it as the structure performed based on apparatus ID registered at the time of a pairing process in the identification of each mobile telephone 1 in the control circuit 29b.
  • the configuration is shown in which the display is switched from the mobile screen to the hands-free switching screen when it is detected that the mobile phone 1 being connected is in an incoming call state or a call state. Not limited to this.
  • a configuration in which a hands-free switching screen is superimposed on the mobile screen (Modification 2) may be employed.
  • an original generation screen including an H / F switching button (that is, a hands-free switching screen) Is generated by the control circuit 29b and superimposed on the mobile screen.
  • a hands-free switching screen is superimposed on the mobile screen, it is preferable to perform a so-called pop-up display that is superimposed on a part of the mobile screen. According to this, the mobile screen and the hands-free switching screen can be displayed on the vehicle-side display unit 24 at the same time.
  • Modification 2 has the same configuration as that of the third embodiment except that the hands-free switching screen is superimposed on the mobile screen instead of switching the display from the mobile screen to the hands-free switching screen.
  • control circuit 29b moves or enlarges / reduces the hands-free switching screen to be superimposed on a part of the mobile screen according to the user's operation on the hands-free switching screen.
  • the hands-free switching screen is moved in the direction in which the slide operation was performed. Let It is assumed that the slide operation is detected by the control circuit 29b via the operation input unit 25.
  • the hands-free switching screen is displayed. Reduce.
  • the hands-free switching screen is expanded. Let It is assumed that the control circuit 29b also detects the pinch-in operation and the pinch-out operation via the operation input unit 25.
  • Embodiment 4 will be described with reference to the drawings.
  • members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 in the fourth embodiment includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the fourth embodiment has the same configuration as that of the first embodiment except that the processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29 of the fourth embodiment determines whether or not to switch to a hands-free call when the connected mobile phone 1 is in a call state. Is switched to the hands-free call when the operation input unit 25 accepts an operation input (hereinafter referred to as a switching instruction operation input) instructing that switching is required.
  • a switching instruction operation input an operation input instructing that switching is required.
  • control circuit 29c is in a call state by an operation of a call start button displayed on the touch panel unit 16 of the mobile phone 1 or whether it is in a call state by an operation of a call start button in the mobile screen of the vehicle touch panel. Processing shall be performed without distinction.
  • the control circuit 29c may be configured to detect that the mobile phone 1 is in a call state based on the reception of the call state notification described above from the mobile phone 1. Therefore, the control circuit 29c is also referred to as a call state detection section or means. Further, the control circuit 29c may make an inquiry as to whether or not to switch to a hands-free call by displaying on the vehicle touch panel, or by making a sound output from the vehicle-side sound output unit 27.
  • the operation input unit 25 may be a touch switch that accepts a switching instruction operation input by a touch operation, or may be a voice recognition device that accepts a switching instruction operation input by a voice command.
  • FIG. 13 is a flowchart showing a flow of hands-free call switching related processing in the control circuit 29c. This flow is started when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • step S31 when a call state notification is received from the mobile phone 1 connected in the terminal mode, the call state is detected (YES in step S31), and the process proceeds to step S32. If the call state notification is not received from the mobile phone 1 connected in the terminal mode, the call state is not detected (NO in step S31), and the flow of step S31 is repeated.
  • step S32 necessity inquiry processing is performed, and the process proceeds to step S33.
  • the user is inquired about the necessity of switching to the hands-free call.
  • two buttons for selecting whether or not to switch to a hands-free call are superimposed on the mobile screen of the vehicle touch panel.
  • two buttons are a “necessary button” that requires switching and a “unnecessary button” that does not require switching.
  • it is good also as a structure which displays these buttons in the original production
  • step S33 it is determined whether or not switching to a hands-free call is necessary. For example, when the operation input unit 25 detects a touch operation on the area where the “necessary button” is displayed, it is determined that switching is necessary. On the other hand, when the operation input unit 25 detects a touch operation on the above-described area where the “unnecessary button” is displayed, it is determined that switching is unnecessary. If it is determined that switching is necessary (YES in step S33), the process proceeds to step S34. If it is determined that switching is not necessary (NO in step S33), the flow ends.
  • step S34 a hands-free call switching process is executed and the flow ends.
  • a hands-free switching request for requesting switching to the hands-free call is transmitted from the BT communication unit 21 to the mobile phone 1, and the mobile phone 1 is connected to the mobile phone 1 using the hands-free call profile.
  • the device 2 starts a hands-free call. Therefore, the control circuit 29c is also referred to as a vehicle side call switching section or means.
  • the vehicle device 2 can be connected to a plurality of mobile phones 1 by communication and is connected to the plurality of mobile phones 1 by a hands-free communication method for performing a hands-free call, It is good also as such a structure.
  • the cellular phone 1 and the vehicle device 2 perform both transmission / reception of information related to control of switching to hands-free calling and transmission / reception of image data and position information during terminal mode connection by BT communication. An example will be described.
  • the vehicular device 2 and the plurality of mobile phones 1 are connected at the same time with a plurality of devices in the same profile.
  • information for specifying each mobile phone 1 for example, device ID
  • model information of each mobile phone 1 are used as a control circuit. It shall be registered in 29c.
  • a user name of the mobile phone 1 may be registered.
  • the hands-free call is made only when the control circuit 29c detects that the mobile phone 1 on which the mobile screen is displayed on the vehicle-side display unit 24 (that is, connected in the terminal mode) is in a call state. It is good also as a structure which enables switching to.
  • the control circuit 29c specifies individual mobile phones 1 and signals of the individual mobile phones 1 (assumed to be transmitted with the device ID added) based on the device ID registered during the pairing process. What is necessary is just to be the structure to perform.
  • the control circuit 29c inquires whether or not a hands-free call is necessary. And when the operation input which instruct
  • the mobile phone 1 connected in the terminal mode is the mobile phone 1 of the driver of the vehicle. Therefore, with the above configuration, the mobile phone 1 other than the mobile phone 1 that is likely to be the mobile phone 1 of the vehicle driver or the mobile phone 1 of the driver who is not connected in the terminal mode is used. Hands-free calling can be restricted.
  • the mobile screen 1 is not displayed on the vehicle-side display unit 24 (that is, the mobile phone 1 that is not connected in the terminal mode) is switched to the hands-free call. It is good also as a structure which enables. In addition, what is necessary is just to set it as the structure performed based on apparatus ID registered at the time of a pairing process in the identification of each mobile telephone 1 in the control circuit 29c.
  • control circuit 29c detects that the mobile phone 1 that is not connected in the terminal mode is in a call state
  • the control circuit 29c also inquires whether a hands-free call is necessary. Then, when the operation input unit 25 accepts an operation input instructing that switching is required, a hands-free call is started for the mobile phone 1 that has detected that a call state has been established.
  • control circuit 29c is also referred to as an inquiry section or means
  • operation input unit 25 is also referred to as a necessity instruction receiving unit.
  • a button icon (hereinafter referred to as an H / S switching button) for instructing switching to a handset call is superimposed on the screen of the vehicle touch panel, and the H / S switching button is displayed. It may be configured to switch from a handsfree call to a handset call when operated.
  • the configuration in which the user is inquired about the necessity of switching to the hands-free call when the connected mobile phone 1 is in a call state is shown, but the present invention is not necessarily limited thereto.
  • the user can automatically start a hands-free call for the mobile phone 1 without inquiring of the user whether or not switching to the hands-free call is necessary. Also good.
  • a configuration may be adopted in which a corresponding operation when the connected mobile phone 1 is in a call state can be set in advance. What is necessary is just to set it as the structure set according to the operation input from a user via the operation input part 25, for example for the setting of corresponding
  • control circuit 29c may be configured to automatically switch to a hands-free call without causing the control circuit 29c to display a screen asking whether or not to start a hands-free call in response to an operation instruction using the H / F switch button. Good.
  • control circuit 29c displays on the vehicle display a screen asking whether or not to start a hands-free call in response to an operation instruction by the H / F switching button, and the switch to the hands-free call is required. It is good also as a structure which performs the setting which switches to a hands-free call automatically, when an input is received. In addition, what is necessary is just to set it as the structure which the control circuit 29c receives via the operation input part 25 the operation input from the user to the effect of switching to the hands-free call, for example.
  • Embodiment 5 will be described with reference to the drawings.
  • members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 in the fifth embodiment includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the fifth embodiment has the same configuration as that of the first embodiment except that the process in the control circuit 29 of the vehicle device 2 and the process in the main control unit 19 of the mobile phone 1 are different.
  • control circuit 29d the call start button on the mobile screen of the vehicle touch panel is operated without performing the call start button operation determination process.
  • a signal indicating the coordinates of the operation target area corresponding to the operation position is transmitted to the mobile phone 1.
  • the main control unit 19 (hereinafter referred to as the main control unit 19a for convenience) of the mobile phone 1 of the fifth embodiment executes processing related to control of switching to hands-free calling (hereinafter referred to as hands-free call switching related processing). To do.
  • the flow of the hands-free call switching related process in the main control unit 19a will be described with reference to FIG.
  • FIG. 14 is a flowchart showing a flow of hands-free call switching related processing in the main control unit 19a. This flow is started when the mobile phone 1 is connected to the vehicle device 2 in the terminal mode.
  • step S41 when the mobile phone 1 is in a call state (YES in step S41), the process proceeds to step S42. If the mobile phone 1 is not in a call state (NO in step S41), the flow of step S41 is repeated.
  • step S42 an operation input identification process is performed, and the process proceeds to step S43.
  • the operation input identification process it is identified whether a call state is entered by a user's operation input to the device itself or a call state is entered based on a user's pressing operation on the vehicle-side display unit 24 of the vehicle device 2. Therefore, the main control unit 19a is also referred to as an identification section or means.
  • the position information used to determine that the call start button on the screen of the touch panel unit 16 has been operated was the position information input from the operation detection unit 15. In such a case, it is identified that a call state has been established by a user operation input to the device.
  • the position information is input from the portable communication unit 13 (for example, the USB communication unit 12) (position information input from the vehicle device 2)
  • the vehicle side display unit 24 of the vehicle device 2 is displayed. Based on the user's pressing operation, it is identified that the call has been made.
  • step S43 when it is identified that the telephone is in a call state by the user's operation input to the own device (that is, the input of the own device) (YES in step S43), the flow ends. Further, when it is identified that the telephone conversation state has been established based on the user's pressing operation on the vehicle side display unit 24 of the vehicle device 2 (NO in step S43), the process proceeds to step S44.
  • a hands-free call switching process is executed and the flow ends.
  • a hands-free switching request for requesting switching to the hands-free call is transmitted from the BT communication unit 11 to the vehicle device 2 and the mobile phone 1 starts the hands-free call. Therefore, the main control unit 19a is also referred to as a mobile-side call switching section or means. Also in the vehicular device 2 that has received the hands-free switching request, a hands-free call is started in accordance with this request.
  • the control circuits 29a, 29b, and 29c may be configured to end and switch to the hands-free call protocol when switching from hands-free call to handset call. Moreover, it is good also as a structure which switches from a hands-free call to a handset call by switching the path
  • a route such as a switch circuit is used as a route where the voice data input to the vehicle-side voice input unit 26 is transmitted to the mobile phone 1 and a route where the voice data is not transmitted. Is switched by a typical switch.
  • the route in which the audio data received from the mobile phone 1 is output from the vehicle-side audio output unit 27 is switched to a route that is not output by a physical switch such as a switch circuit.
  • the voice path in which voice data is exchanged between the public line and the vehicle device 2 via the mobile phone 1 is switched to the voice path in which voice data is exchanged between the mobile telephone 1 and the public line. That is, the voice data input to the portable side voice input unit 17 is transmitted to the public line, and the voice data received from the public line is switched to the voice path output from the portable side voice output unit 18.
  • a call voice signal may be transmitted without transmitting the hands-free switching request from the mobile phone 1 to the vehicle device 2.
  • the vehicle device 2 (specifically, the control circuit 29) may be configured to start a hands-free call based on the reception of the call voice signal (call voice data).
  • Embodiment 6 will be described with reference to the drawings.
  • members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 in the sixth embodiment includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the sixth embodiment has the same configuration as that of the first embodiment except that a part of the hands-free call switching related processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29d a process related to hands-free call switching in the control circuit 29 in the sixth embodiment (hereinafter referred to as the control circuit 29d for convenience) will be described using the flowchart shown in FIG. This flow is started, for example, when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • step S51 it is determined whether or not audio data is received from the mobile phone 1. What is necessary is just to make it the structure which determines based on the audio
  • step S52 in order to determine whether the voice data received from the mobile phone 1 is call voice data, the call state of the mobile phone 1 is detected, and the process proceeds to step S53.
  • the call state indicates a state in call control of the mobile phone.
  • the call state of the mobile phone 1 may be detected using a hands-free call profile (HFP) of BT communication.
  • HFP hands-free call profile
  • HFP there is an AT command + CIEV as a command for confirming the call state of the mobile phone, and by determining the command, incoming (incoming call, incoming call reception), outgoing (incoming call reception), call ( It is possible to detect a plurality of call states such as call notification, ringing), talking (communication), line disconnection (disconnect request, disconnection notification), standby (so-called “empty” state), etc. -1431119).
  • the method for detecting the call state of the mobile phone 1 there is a method of using attribute data relating to image data received from the mobile phone 1. That is, at the same time as receiving the image data, for example, when the application ID, version, screen type, screen title, image size, etc. can be acquired as attribute data,
  • the call state may be determined based on the fact that the text related to the call state such as a call or an incoming call is included.
  • step S53 if it is detected that a call is in progress (YES in step S53), it is determined that the voice data received from the mobile phone 1 is call voice data, and the process proceeds to step S54. If it is not detected that the call is in progress (NO in step S53), it is determined that the voice data received from the mobile phone 1 is not call voice data, and the flow returns to step S51 to repeat the flow.
  • step S54 navigation is performed by changing the input / output path (sound input / output path) of the speaker (that is, the vehicle-side audio output unit 27) and the microphone (that is, the vehicle-side audio input unit 26) of the vehicle device 2.
  • the use of the speaker and microphone of the vehicle device 2 is changed from the use other than the hands-free call such as audio and voice recognition to the use of the hands-free call.
  • step S51 when voice data is received from the mobile phone 1 using the hands-free call profile (HFP) of BT communication, the voice data communicated on the HFP is call voice data. Is apparent in the BT standard. This is because voice data other than call voice data such as music data is usually communicated using a profile other than HFP such as A2DP. Therefore, when voice data is received from the mobile phone 1 using HFP, the processing of the subsequent steps S52 to S53 may be omitted and a hands-free call may be performed by the processing of step S54.
  • HFP hands-free call profile
  • step S55 to step S59 when it is not determined that the audio data has been received in the processing of step S51 is the same as the processing of steps S1 to S2 and steps S5 to S7 in the first embodiment. Shall be performed.
  • step S55 touch operation detection determination processing is performed, and the process proceeds to step S56.
  • step S56 if there is a touch operation (YES in step S56), the process proceeds to step S57. If there is no touch operation (NO in step S56), the process returns to step S51 and the flow is repeated.
  • step S57 a call waiting timer setting process is performed, and the process proceeds to step S58.
  • step S58 an in-hour call start determination process is executed, and the process proceeds to step S59.
  • step S59 when it is determined that the call start is detected within a predetermined time (YES in step S59), the process proceeds to step S60, and when it is not determined that the call start is detected within a predetermined time (NO in step S59). Returning to step S51, the flow is repeated.
  • step S60 the BT communication unit 21 transmits a hands-free switching request for requesting switching to the hands-free call to the mobile phone 1, and the process proceeds to step S54.
  • a portable phone having a specification that opens a voice path simultaneously with the start of a call and transmits voice data to a vehicle device, particularly in the case of HFP connection, which is often seen in Europe.
  • a vehicle device particularly in the case of HFP connection, which is often seen in Europe.
  • the telephone 1 it is possible to determine the necessity of switching to the hands-free call on the vehicle device 2 side on the condition that the call voice data is received, and to switch to the hands-free call. Since the mobile phone 1 side is already in a state where hands-free communication is possible, a hands-free switching request is not transmitted from the vehicular device 2 side to the mobile phone 1.
  • Step S55 to Step S60 the necessity for switching to the hands-free call is determined on the vehicle device side on the condition that the call starts within a predetermined time following the touch operation of the vehicle touch panel. , Can make hands-free calls.
  • C indicates a mobile screen on the vehicle touch panel
  • D indicates an original generation screen
  • B indicates a call start button on the mobile screen
  • L indicates a mobile screen on the mobile phone 1
  • M indicates a call start button on the mobile screen of the mobile phone 1.
  • FIG. 17A is a diagram illustrating a case in which call voice data is transmitted from the mobile phone 1.
  • the vehicle device 2 performs a hands-free call without determining the presence or absence of a touch operation on the vehicle touch panel. I do.
  • FIG. 17B is a diagram illustrating a case where call voice data is not transmitted from the mobile phone 1.
  • the vehicle device 2 is conditioned on the start of a call within a predetermined time from a touch operation on the vehicle touch panel. Make a hands-free call. At this time, the vehicle device 2 transmits a hands-free switching request to the mobile phone 1.
  • a hands-free call is performed without performing the hands-free switching determination process as in the first embodiment.
  • a hands-free switching determination process similar to that of the first embodiment is performed, and when a hands-free call is determined to be necessary, a hands-free call is performed. Therefore, it becomes possible to perform a hands-free call appropriately depending on the type of the mobile phone 1 to be connected.
  • Embodiment 7 In the above-described sixth embodiment, when call voice data is not received from the mobile phone 1, the call start within a predetermined time from the touch operation on the vehicle touch panel is set as the determination condition for switching to the hands-free call. Whether or not the touch-operated area is the area of the H / F switch button on the original generation screen described above, and whether or not the mobile phone 1 is in the incoming state as in the form (hereinafter referred to as Embodiment 7) It is good also as composition to do.
  • the device cooperation system 100 in the seventh embodiment includes the mobile phone 1 and the vehicle device 2 as in the sixth embodiment.
  • the sixth embodiment has the same configuration as that of the sixth embodiment except that a part of the hands-free call switching related processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29e a process related to hands-free call switching in the control circuit 29 in the seventh embodiment (hereinafter referred to as the control circuit 29e for convenience) will be described using the flowchart shown in FIG. This flow is started, for example, when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • step S61 it is determined whether or not audio data has been received from the mobile phone 1. If it is determined that voice data has been received (YES in step S61), the process proceeds to step S62. If it is not determined that voice data has been received (NO in step S61), the process proceeds to step S65.
  • step S62 the call state of the mobile phone 1 is detected, and the process proceeds to step S63. If it is detected in step S63 that a call is in progress (YES in step S63), it is determined that the voice data received from the mobile phone 1 is call voice data, and the process proceeds to step S64. If it is not detected that the call is in progress (NO in step S63), it is determined that the voice data received from the mobile phone 1 is not call voice data, and the flow returns to step S61 to repeat the flow.
  • step S64 by changing the input / output paths of the speaker and microphone of the vehicle device 2, the usage of the speaker and microphone of the vehicle device 2 is changed from the use other than the hands-free call to the use of the hands-free call.
  • step S65 to step S66 and the processing from step S68 to step S71 when it is not determined that the audio data is received in the processing of step S61 is the same processing as the processing of step S55 to step S60 in the sixth embodiment. Shall be performed.
  • step S65 touch operation detection determination processing is performed, and the process proceeds to step S66.
  • step S66 if there is a touch operation (YES in step S66), the process moves to step S67, and if there is no touch operation (NO in step S66), the process returns to step S61 and the flow is repeated.
  • step S67 in the same manner as described in the above-described second embodiment, the control circuit 29e generates an original generation screen uniquely generated by the own device separately from the mobile screen, and the mobile screen of the vehicle-side display unit 24. In addition to displaying in an area other than the area to be displayed, an H / F switching button is also displayed on this unique generation screen.
  • step S67 the same process as the H / F switch button operation determination process of the second embodiment is performed, and when it is determined that the H / F switch button (that is, the uniquely generated button) on the uniquely generated screen is operated (YES in step S67). ) Go to Step S71. If it is determined that the H / F switch button on the unique generation screen has not been operated (NO in step S67), the process proceeds to step S68.
  • the H / F switching button is displayed on the unique generation screen, and it is determined whether or not the H / F switching button on the unique generation screen is operated.
  • the present embodiment is not necessarily limited thereto.
  • a call start button having a different icon design from the H / F switch button may be displayed on the original generation screen.
  • the call start button may be configured to be displayed instead of the H / F switching button for alternately switching between the hands-free call and the handset call as a button for instructing switching from the handset call to the hands-free call.
  • the display may be made simultaneously with the H / F switching button.
  • the buttons may have the same function as the H / F switching button, and only the icon design may be different.
  • step S68 a call waiting timer set process is performed, and the process proceeds to step S69.
  • step S69 an in-hour call start determination process is executed, and the process proceeds to step S70.
  • step S70 when it is determined that the call start is detected within a predetermined time (YES in step S70), the process proceeds to step S71, and when it is not determined that the call start is detected within a predetermined time (NO in step S70). Returning to step S61, the flow is repeated.
  • step S71 a hands-free switching request for requesting switching to the hands-free call is transmitted from the BT communication unit 21 to the mobile phone 1, and the process proceeds to step S64.
  • a configuration is shown in which a touch switch integrated with an image displayed on the vehicle-side display unit 24 is used as the operation input unit 25 that receives an operation input from the user instructing switching to a hands-free call.
  • a configuration using a mechanical switch, a voice recognition device, a proximity switch, a camera, or the like may be used.
  • the touch switch is a touch switch generated by an image of the H / F switching button.
  • step S72 if the connected mobile phone 1 is in an incoming state (YES in step S72), the process proceeds to step S73. On the other hand, when the mobile phone 1 is not in an incoming state (NO in step S72), the process returns to step S61 and the flow is repeated.
  • step S73 an inquiry is made to the user as to whether or not switching to a hands-free call is necessary.
  • the above-described H / F switching button may be superimposed on the mobile screen of the vehicle touch panel to inquire the user whether or not switching to the hands-free call is necessary.
  • control circuit 29e determines that switching is necessary when a touch operation on the area where the H / F switch button is displayed is detected by the operation input unit 25 within a certain time, and does not detect within a certain time. In such a case, it may be configured to determine that switching is unnecessary.
  • H / F necessity button a button icon for selecting whether or not to switch to a hands-free call
  • control circuit 29e determines that switching is necessary when a touch operation on the area where the H / F necessity button is displayed is detected within a certain time by the operation input unit 25, and detects within a certain time. What is necessary is just to set it as the structure which determines that switching is unnecessary when it does not do.
  • buttons of “necessary button” that requires switching and “unnecessary button” that does not require switching may be displayed. In this case, it is determined that switching is necessary when a touch operation on an area where a necessary button is displayed is detected, and switching is not necessary when a touch operation on an area where an unnecessary button is displayed is detected. do it.
  • the H / F switching button and the H / F necessity button may be displayed on the original generation screen.
  • the case where the H / F necessity button is superimposed and displayed on the mobile screen will be described as an example.
  • the control circuit 29e is also referred to as a necessity instruction button image display section or means, and the H / F switching button or the H / F necessity button is also referred to as a necessity instruction button.
  • the operation input unit 25 that receives an operation input from the user for instructing whether or not switching to the hands-free call is necessary, as described in the third embodiment, a mechanical switch, a voice recognition device, or a proximity switch Alternatively, a configuration using a camera or a camera may be used.
  • step S74 If it is determined in step S74 that switching to a hands-free call is necessary (YES in step S74), the process proceeds to step S71. On the other hand, if it is determined that it is not necessary (NO in step S74), it waits for the call state to be disconnected or in a standby state, that is, waits for the incoming call state or the call state to end, and then step S61. Return to and repeat the flow.
  • the above steps S72 to S74 are performed. And the subsequent series of processing up to step S71, the mobile device 1 determines the necessity of switching to the hands-free call on the condition that the mobile phone 1 is in an incoming state, and the hands-free call. It can be performed.
  • FIGS. 17A, 17B, 19A, and 19B represent a mobile screen on the vehicle touch panel
  • D represents a uniquely generated screen
  • L represents a mobile screen in the mobile phone 1.
  • E in FIG. 19A indicates the H / F switching button on the original generation screen.
  • N in FIG. 19B indicates the H / F necessity button superimposed on the mobile screen.
  • the vehicle device 2 When call voice data is transmitted from the mobile phone 1, the vehicle device 2 performs a hands-free call without determining whether or not there is a touch operation on the vehicle touch panel (see FIG. 17A).
  • the vehicular device 2 When the call voice data is not transmitted from the mobile phone 1 and the H / F switch button on the original generation screen is not operated, the vehicular device 2 performs a predetermined time from the touch operation on the vehicular touch panel. A hands-free call is made on the condition that the call has started. At this time, the vehicle device 2 transmits a hands-free switching request to the mobile phone 1 (see FIG. 17B).
  • FIG. 19 (a) is a diagram showing a case where call voice data is not transmitted from the mobile phone 1, and a case where the H / F switch button on the original generation screen is operated.
  • the device 2 performs a hands-free call on condition that the H / F switch button on the original generation screen is operated. At this time, the vehicle device 2 transmits a hands-free switching request to the mobile phone 1.
  • FIG. 19B illustrates a case where the incoming state of the mobile phone 1 is detected when no call voice data is transmitted from the mobile phone 1 and no touch operation on the vehicle touch panel is detected.
  • the vehicular device 2 performs a hands-free call on condition that the H / F necessity button superimposed on the mobile screen on the vehicular touch panel is operated.
  • the vehicle device 2 transmits a hands-free switching request to the mobile phone 1.
  • a process for switching to a hands-free call is performed on the condition that the call start within a predetermined time from the touch operation of the vehicle touch panel during the incoming call is determined.
  • a call-time process is performed in which the call is switched to a hands-free call after the call operation is started within a predetermined period of time and then a call state is established.
  • Embodiment 8 will be described with reference to the drawings.
  • members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 in the eighth embodiment includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the eighth embodiment has the same configuration as that of the first embodiment except that a part of the hands-free call switching related processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29f for convenience
  • This flow is started, for example, when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • step S81 the call state of the mobile phone 1 is detected, and the process proceeds to step S82.
  • the call state is detected in the same manner as described in the sixth embodiment. The same applies to the subsequent processing of this flow.
  • step S82 if the detected call state is an incoming call (YES in step S82), the process proceeds to step S83. On the other hand, when the detected call state is not incoming (NO in step S82), the process proceeds to step S92. Therefore, the control circuit 29f is also referred to as an incoming call detection section or means.
  • step S83 the touch operation detection determination process is performed in the same manner as in step S1, and the process proceeds to step S84.
  • step S84 if there is a touch operation (YES in step S84), the process proceeds to step S85, and if there is no touch operation (NO in step S84), the process proceeds to step S90.
  • step S85 a timer value for waiting for a call is set, and the process proceeds to step S86.
  • 3 seconds is set as the timer value.
  • step S86 the call state of the mobile phone 1 is detected and the above monitoring is performed.
  • step S87 if it is detected as a result of monitoring that the call state of the mobile phone 1 is in a call within a predetermined time set in the timer value, it is determined that the call has started within the predetermined time (step S87). YES), the process proceeds to step S88. On the other hand, if it is not detected that the call state of the mobile phone 1 is busy within a predetermined time, it is determined that the telephone call has not started within the predetermined time (NO in step S87), and the flow ends. To do.
  • step S85 to S86 the processing in steps S5 to S6 described above may be performed.
  • step S88 the processing in steps S5 to S6 described above may be performed.
  • step S88 the above-mentioned hands-free switching request is transmitted from the BT communication unit 21 to the mobile phone 1, and the process proceeds to step S89.
  • step S89 in the same manner as in step S54, a process of changing the voice input / output path in the vehicle device 2 from a use other than the hands-free call to a use of the hands-free call is performed.
  • step S90 when it is determined that there is no touch operation in step S84, the call state of the mobile phone 1 is detected, and the process proceeds to step S91.
  • step S91 if the call state of the mobile phone 1 is a line disconnection or standby state (YES in step S91), that is, if it is no longer an incoming state, the flow ends. On the other hand, if the line is not disconnected or in the standby state (NO in step S91), the flow returns to step S83 to repeat the flow.
  • the control circuit 29f is also referred to as a disconnected state detection section or means.
  • step S82 to step S91 is the above-described incoming call processing for determining whether or not to perform a hands-free call when the mobile phone 1 receives an incoming call.
  • the incoming call process is terminated without switching to the hands-free call. become.
  • step S92 when the call state is not incoming in step S82, the touch operation detection determination process is performed in the same manner as in step S1, and the process proceeds to step S93.
  • step S93 if there is a touch operation (YES in step S93), the process proceeds to step S94. On the other hand, if there is no touch operation (NO in step S93), the flow ends.
  • step S94 a call waiting timer value is set in the same manner as in step S85, and the process proceeds to step S95.
  • 3 seconds is set as the timer value.
  • the control circuit 29f is also referred to as a calling state detection section or means.
  • step S96 as a result of the monitoring, if the call state of the mobile phone 1 is calling or ringing within a predetermined time set in the timer value, it is determined that calling / calling has started within the predetermined time (step (YES in S96), the process proceeds to step S97. On the other hand, if the call state of the mobile phone 1 is neither calling nor calling within a predetermined time, it is determined that calling / calling has not started within the predetermined time (NO in step S96), Returning to step S81, the flow is repeated.
  • step S97 the call state of the mobile phone 1 is detected, and the process proceeds to step S98.
  • step S98 if the detected call state is busy (YES in step S98), the process proceeds to step S88. On the other hand, if the detected call state is not busy (NO in step S98), the process proceeds to step S99.
  • step S99 the call state of the mobile phone 1 is detected, and the process proceeds to step S100.
  • step S100 if the call state of mobile phone 1 is a line disconnection or standby state (YES in step S100), that is, if neither the calling state nor the calling state is lost, the flow ends. .
  • step S100 when neither the line disconnection nor the standby state is established (NO in step S100), the flow returns to step S97 to repeat the flow.
  • the series of processing from Step S92 to Step 100 and Step 88 to Step S89 is the above-mentioned calling time processing for determining whether or not to perform a hands-free call when calling or calling the mobile phone 1. Further, as described above, when the call state of the mobile phone 1 becomes a line disconnection or standby state in the middle of the outgoing call process, the outgoing call process is terminated without switching to the hands-free call. become.
  • the present embodiment it is possible to appropriately determine whether to switch to a hands-free call according to the characteristics of the mobile phone 1 at the time of outgoing and incoming calls. Details are as follows. When an incoming call is received, the user may not be able to start a call immediately. When driving a car, especially when starting a call by operating the vehicle touch panel, it is necessary to stop the car at a safe place. The hands-free call is started on the condition that the call has been started within a predetermined time after the touch operation.
  • whether or not the call voice data is received from the mobile phone 1 may be used as a determination condition. Specifically, it is determined whether or not audio data has been received from the mobile phone 1 in the same manner as in step S51 before the process in step S81.
  • step S53 it is determined whether the voice data received from the mobile phone 1 is call voice data in the same manner as in step S53 described above. If it is determined that the voice data is call voice data, the voice input / output path in the vehicular device 2 is changed from the use other than the hands-free call to the use of the hands-free call in the same manner as in step S54. To start a hands-free call. On the other hand, when it is not determined that the voice data has been received, the process proceeds to the above-described step S81, and the above-described incoming call process and outgoing call process are performed.
  • the call state of the mobile phone 1 is a call
  • the incoming call processing for switching to a hands-free call is performed.
  • the call state of the mobile phone 1 is calling or calling and if the time from the latest touch time to the current time is within a predetermined time, a hands-free call is made after waiting for the call state to be entered. Perform outgoing call processing to switch to.
  • Embodiment 9 will be described with reference to the drawings.
  • members having the same functions as those shown in the drawings used in the description of Embodiment 1 are given the same reference numerals, and descriptions thereof are omitted.
  • the device cooperation system 100 includes the mobile phone 1 and the vehicle device 2 as in the first embodiment.
  • the ninth embodiment has the same configuration as that of the first embodiment except that a part of the hands-free call switching related processing in the control circuit 29 of the vehicle device 2 is different.
  • control circuit 29g for convenience
  • This flow is started, for example, when the vehicle device 2 is connected to the mobile phone 1 in the terminal mode.
  • step S111 the call state of the mobile phone 1 is detected, and the process proceeds to step S112.
  • the control circuit 29g is also referred to as a call state detection section or means.
  • the call state is detected in the same manner as described in the sixth embodiment. The same applies to the subsequent processing of this flow.
  • the mobile phone 1 when the mobile phone 1 is automatically notified of the call state when the call state of the mobile phone 1 is changed, the mobile phone 1 is based on the call state notified from the mobile phone 1. It may be configured to detect one call state. In this case, the process shown in this flowchart may be executed by using the notification of the call state as a trigger.
  • step S112 if the detected call state is calling or ringing (YES in step S112), the process proceeds to step S113. On the other hand, if the detected call state is neither outgoing nor ringing (NO in step S112), the process proceeds to step S121.
  • step S113 the latest touch time acquisition process is performed, and the process proceeds to step S114.
  • the latest touch time acquisition process the latest touch time updated by the later-described latest touch time recording process in the control circuit 29g is acquired.
  • FIG. 22 is a flowchart showing an outline of the latest touch time recording process.
  • the flow in FIG. 22 is executed periodically (for example, every second) during the terminal mode connection between the vehicle device 2 and the mobile phone 1, for example.
  • step S201 the touch operation detection determination process is performed in the same manner as in step S1, and the process proceeds to step S202.
  • step S202 if there is a touch operation (YES in step S202), the process proceeds to step S203, and if there is no touch operation (NO in step S202), the flow ends.
  • step S203 the time when the touch operation is detected is recorded as the latest touch time in an electrically rewritable memory such as the RAM of the control circuit 29g, and the flow ends.
  • the control circuit 29 is also referred to as the latest pressed time recording section or means.
  • the time may be obtained from a well-known time measuring unit or means (not shown).
  • step S114 it is determined whether or not the latest touch time acquired in step S113 is within a predetermined time from the current time.
  • the current time may be obtained from the above-described known time measuring unit or means.
  • step S114 If it is determined that the current time is within a predetermined time (YES in step S114), the process proceeds to step S115. On the other hand, if it is determined that it is not within the predetermined time from the current time (NO in step S114), the flow ends. That is, it is determined that the operation instructing the outgoing call is performed not on the vehicle device 2 side but on the mobile phone 1 side, and no hands-free call is performed.
  • step S115 the call state of the mobile phone 1 is detected, and the process proceeds to step S116.
  • step S116 if the detected call state is a call (YES in step S116), the process proceeds to step S119. On the other hand, when the call is not in progress (NO in step S116), the process proceeds to step S117.
  • step S117 the above-mentioned hands-free switching request is transmitted from the BT communication unit 21 to the mobile phone 1, and the process proceeds to step S118.
  • step S118 in the same manner as in step S54, processing for changing the voice input / output path in the vehicular device 2 from the use other than the hands-free call to the use of the hands-free call is performed.
  • step S116 when the detected call state is a call, in step S119, the call state of the mobile phone 1 is detected, and the process proceeds to step S120.
  • step S120 if the detected call state is a line disconnection or standby state (YES in step S120), that is, if neither the calling state nor the calling state is lost, the flow ends. On the other hand, if neither the line disconnection nor the standby state is established (NO in step S120), the process returns to step S115 and the flow is repeated.
  • step S112 to step S120 is the above-described processing at the time of calling for determining whether or not to perform a hands-free call at the time of calling or calling the mobile phone 1. Further, as described above, when the call state of the mobile phone 1 becomes a line disconnection or standby state in the middle of the outgoing call process, the outgoing call process is terminated without switching to the hands-free call. become.
  • step S112 if the detected call state is neither outgoing nor ringing, in step S121, if the detected call state is busy (YES in step S121), the process proceeds to step S122. On the other hand, if the call is not in progress (NO in step S121), the flow ends. In other words, when there is no outgoing call, no call, no call, for example, when a call is received, the flow is terminated once, and when the call state changes from the incoming call to the call, You can make free calls.
  • step S122 the latest touch time acquisition process is performed in the same manner as in step S113, and the process proceeds to step S123.
  • step S123 it is determined whether or not the latest touch time acquired in step S122 is within a predetermined time from the current time.
  • step S123 If it is determined that the current time is within a predetermined time (YES in step S123), the process proceeds to step S117 to perform a hands-free call. On the other hand, if it is determined that it is not within the predetermined time from the current time (NO in step S123), the flow ends. That is, it is determined that the operation instructing the incoming call is performed not on the vehicle device 2 side but on the mobile phone 1 side, and the hands-free call is not performed.
  • step S121 to step S123 and the subsequent steps S117 to S118 is the above-described incoming call process for determining whether or not a hands-free call is performed when the mobile phone 1 is called.
  • the processing load can be reduced.
  • whether or not the call voice data is received from the mobile phone 1 may be used as a determination condition. Specifically, it is determined whether audio data has been received from the mobile phone 1 in the same manner as in step S51 described above before the processing in step S111 described above.
  • step S53 it is determined whether the voice data received from the mobile phone 1 is call voice data in the same manner as in step S53 described above. If it is determined that the voice data is call voice data, the voice input / output path in the vehicular device 2 is changed from the use other than the hands-free call to the use of the hands-free call in the same manner as in step S54. To start a hands-free call. On the other hand, if it is not determined that the voice data has been received, the process proceeds to the above-described step S111, and the above-described incoming call process and outgoing call process are performed.
  • the configuration in which the vehicle-mounted navigation device integrated with the display is used as the vehicle device 2 has been described.
  • the voice input unit and the voice output unit are used. What is necessary is just to set it as the structure used in combination with hands-free call apparatuses, such as a headset for hands-free calls (for example, microphone and speaker).
  • a headset for hands-free calls for example, microphone and speaker.
  • display audio when using display audio as the vehicle device 2, it may be configured to be used in combination with a voice input microphone.
  • the hands-free call switching related processing may be configured to be executed periodically (for example, every second) while the vehicle device 2 and the mobile phone 1 are connected in the terminal mode. . However, if the previous process is ongoing, the previous process may be continued. Further, when a hands-free call has already been performed, a configuration in which the hands-free call switching related process is not performed may be adopted.
  • the type of application being executed on the mobile phone 1 is an application including a call receiving / sending function. Processing may be performed only in cases. In other words, this process may be performed only while the telephone application is being executed without executing the process while the music playback application is being executed. According to this, compared with the case where a process is always performed irrespective of the kind of application in execution, the processing load in the apparatus 2 for vehicles can be suppressed.

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

 車両用装置(2)はタッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、車両側表示部(24、25)とを備える。前記タッチパネルの画面の画素情報を取得し、前記車両側表示部に表示する。当該車両側表示部に対してユーザからの押下操作が行われた場合に、操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する。前記車両側表示部に対する押下操作を検出してから所定時間内に前記携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話に切り替える。

Description

車両用装置、携帯電話機、および機器連携システム 関連出願の相互参照
 本開示は、2011年3月23日に出願された日本出願番号2011-64733号と、2012年2月6日に出願された日本出願番号2012-23313号に基づくもので、ここにその記載内容を援用する。
 本開示は、携帯電話機の画面に表示された情報を表示する車両用装置、その携帯電話機、およびその携帯電話機と車両用装置とを含む機器連携システムに関するものである。
 従来から、タッチパネルを用いて操作入力を行う携帯電話機(以下、タッチパネル式携帯電話機)とタッチパネルを備えた車両用装置とを接続し、車両用装置のタッチパネル(以下、車両用タッチパネル)にタッチパネル式携帯電話機の画面を表示させたりなどする技術が知られている。例えば特許文献1には、タッチパネル式携帯電話機の画面に表示されている画像のデータを車両用装置で受信し、受信した画像のデータをもとに当該車両用タッチパネルの画面に当該タッチパネル式携帯電話機で表示されているのと同様の画像を表示させることが開示されている。他にも、特許文献1には、車両用タッチパネルに表示している情報が利用者により操作された場合に、車両用タッチパネル上の操作箇所の座標をタッチパネル式携帯電話機のタッチパネル上の座標に変換して携帯端末に送信することが開示されている。
 また、タッチパネル式携帯電話機のアプリケーションプログラム(以下、アプリケーション)を車両用装置にインストールしなくても、タッチパネル式携帯電話機の画面を車両用タッチパネルに表示でき、且つ、車両用タッチパネルの操作により、タッチパネル式携帯電話機の操作を可能にする技術として、例えば、後にミラーリンク(登録商標)に名称を変更したターミナルモードという規格が知られている。ターミナルモードは当該技術の一例であるが、本明細書ではターミナルモードを上記技術の総称の意味で用いる。
 ターミナルモードでは、車両用装置を、タッチパネル式携帯電話機の画面表示部および操作部として利用するのみである。それ故、タッチパネル式携帯電話機のアプリケーションを車両用装置にインストールしなくてもよい。タッチパネル式携帯電話機から車両用装置に送信されてくる情報は、基本的には、画素毎の色情報(以下、画素情報)のみである。ターミナルモードでは、タッチパネル式携帯電話機のアプリケーションを車両用装置にインストールしなくても、車両用装置でタッチパネル式携帯電話機の機能を利用できることから、車両用装置の処理負荷が軽減できる等の利点がある。
 また、従来から、ハンズフリー機能を有する車載ナビゲーション装置などの車両用装置と携帯電話機とを接続し、携帯電話機による通話を、車両用装置のスピーカやマイクを用いて行うことができるようにする車載ハンズフリーシステムも知られている。車載ハンズフリーシステムでは、携帯電話機の通話開始ボタンを操作した場合には携帯電話機のスピーカやマイクを用いて通話を開始する一方、例えば車両用タッチパネルの操作により車両用装置の通話開始ボタンを操作した場合には車両用装置のスピーカやマイクを用いてハンズフリー通話を開始するのが一般的である。
 しかしながら、従来の技術では、ターミナルモードを利用しながら従来と同様の車載ハンズフリーシステムを実現することが容易ではない。詳しくは、以下の通りである。ターミナルモードを利用して車両用タッチパネルの画面にタッチパネル式携帯電話機の画面を表示する場合、車両用タッチパネルの画面には、タッチパネル式携帯電話機の画面上の通話開始ボタンを模倣した通話開始ボタンが表示されるだけである。よって、車両用タッチパネルの画面に表示される通話開始ボタンを操作しても、タッチパネル式携帯電話機の通話開始ボタンを操作したものとして処理が行われ、携帯電話機による通話が開始され、ハンズフリー通話を開始することは出来ない。
 また、車両用タッチパネルの画面に表示される通話開始ボタンが操作されたことを車両用装置側で検知することで、ハンズフリー通話を開始することを可能にしようとすることも困難である。詳しくは、ターミナルモードでは、タッチパネル式携帯電話機から車両用装置に送信される情報は基本的に画素情報のみであるので、車両用装置側では画面に表示されているのが通話開始ボタンであるかを判断することが困難であり、通話開始ボタンが操作されたことを検知することは困難である。
JP 2010-130553 A
 本開示の目的は、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、ハンズフリー通話を行うか判断してハンズフリー通話に切り替えを行うことを可能にする車両用装置、携帯電話機、および機器連携システムを提供することにある。
 本開示の観点1としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が通話状態となったことを検出する通話状態検出セクションと、
 前記車両側表示部に対する押下操作を検出してから所定時間内に前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える車両側通話切替セクション。
 車両側表示部の押下操作を検出してから短時間に携帯電話機が通話状態となった場合は、携帯電話機での着信後の通話開始および発信による通話開始のいずれであっても、ユーザが車両用タッチパネルの画面上の当該携帯電話機での通話を開始させるための通話開始表示領域を操作して通話開始された可能性が高い。また、車両用タッチパネルが押下操作されているため、ユーザがハンズフリー通話を必要としている可能性が高い。以上のことから、上記の構成によれば、車両用タッチパネルに対する押下操作を検出してから所定時間内に携帯電話機が通話状態となったことをもとに、ハンズフリー通話に切り替えるので、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 その結果、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性をより精度良く判断してハンズフリー通話に切り替えを行うことが可能になる。
 なお、ハンズフリー通話とは、車両用装置のスピーカやマイクを用いて通話を行うことである。また、ハンズフリー通話への切り替えは、(A)携帯電話機から入力された音声を車両用装置のスピーカへ出力するとともに、車両用装置のマイクから入力された音声を携帯電話機へ出力するように車両用装置のスピーカやマイクの入出力経路を変更すること(例えば、ナビゲーション、オーディオ、音声認識などハンズフリー通話以外の用途からハンズフリー通話の用途へ車両用装置のスピーカやマイクの用途を変更する)、および、(B)携帯電話機側へハンズフリー通話を開始するように要求すること、により行う。
 さらに、本開示の観点2としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記車両側表示部に対する押下操作が行われたことを検出するとともに、前記車両側表示部の画面上での押下操作が行われた画素領域を特定するタッチ操作検出セクション。前記タッチパネルの画面上の当該携帯電話機での通話を開始させるための通話開始表示領域についての画像特徴を記憶している通話領域画像特徴記憶部。前記携帯電話機から取得した画素情報と前記通話領域画像特徴記憶部に記憶している画像特徴と前記タッチ操作検出セクションで特定した画素領域とをもとに、前記通話開始表示領域の画像が表示された前記車両側表示部の画面上の当該通話開始表示領域の画像が表示された画素領域が押下操作されたか否かを判定する通話操作判定セクション。前記通話開始表示領域の画像が表示された画素領域が押下操作されたと前記通話操作判定セクションで判定した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える車両側通話切替セクション。
 上記の車両用装置においては、携帯電話機から取得した画素情報と携帯電話機のタッチパネルの画面上の当該携帯電話機での通話を開始させるための通話開始表示領域についての画像特徴とタッチ操作検出セクションで特定した画素領域とをもとに、当該通話開始表示領域の画像が表示された車両用タッチパネルの画面上の画素領域が押下操作されたか否かを判定し、肯定判定したことをもとにハンズフリー通話に切り替えることになる。よって、上記の構成によっても、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 その結果、上記の構成でも、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本開示の観点3としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。ハンズフリー通話への切り替え、または通話の開始を指示する旨のユーザからの操作入力を受け付ける切替指示受付部。切替指示受付部で前記操作入力を受け付けた場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話へ切り替える車両側通話切替セクション。前記切替指示受付部は、前記車両側表示部の表示領域内の、前記携帯画面を表示する携帯画面領域とは異なる、自装置で独自に生成した画面を表示する独自画面領域上の画像により生成されるタッチスイッチ、または当該タッチスイッチとは異なる操作入力装置から構成される。
 また、上記の車両用装置においては、携帯電話機のタッチパネルおよび車両側表示部における携帯画面に対するユーザからの押下操作以外の方法でハンズフリー通話への切り替え又は通話の開始を指示する旨のユーザからの操作入力を切替指示受付部で受け付けた場合に、ハンズフリー通話へ切り替えることになる。よって、切替指示受付部で操作入力を受け付けたか否かによって、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことができる。
 その結果、上記の構成でも、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本開示の観点4としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が着信状態となったことを検出する着信状態検出セクション。着信状態検出セクションで携帯電話機が着信状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話への切り替えを指示するためのハンズフリー切替ボタン画像を含むハンズフリー切替画面を、携帯画面とは別に独自に生成して表示させる車両側生成画面表示セクション。前記ハンズフリー切替画面中のハンズフリー切替ボタン画像の領域に対するユーザの操作入力を検出するハンズフリー切替操作検出セクション。ハンズフリー切替操作検出セクションで前記操作入力を検出した場合に、ハンズフリー通話へ切り替える車両側通話切替セクション。
 上記の車両用装置においては、着信状態検出セクションで携帯電話機が着信状態となったことを検出した場合に、ハンズフリー通話への切り替えを指示するためのハンズフリー切替ボタン画像を含むハンズフリー切替画面を生成して表示させる。そして、ハンズフリー切替画面中のハンズフリー切替ボタン画像の領域に対するユーザの操作入力をハンズフリー切替操作検出セクションで検出した場合に、ハンズフリー通話へ切り替えることになる。ハンズフリー切替画面は、携帯画面とは別に独自に生成して表示させるものであるので、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 その結果、上記の構成でも、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本開示の観点5としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行う通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、その画素情報に基づいて、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、
 当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が通話状態となったことを検出する通話状態検出セクション。通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話への切り替えを指示するためのハンズフリー切替ボタン画像を含むハンズフリー切替画面を、携帯画面とは別に独自に生成して表示させる車両側生成画面表示セクション。前記ハンズフリー切替画面中のハンズフリー切替ボタン画像の領域に対するユーザの操作入力を検出するハンズフリー切替操作検出セクション。ハンズフリー切替操作検出セクションで前記操作入力を検出した場合に、ハンズフリー通話へ切り替える車両側通話切替セクション。
 上記の車両用装置においては、通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合、車両側表示部上の携帯画面を表示していた領域の少なくとも一部の領域に、ハンズフリー通話への切り替えを指示するためのハンズフリー切替ボタン画像を含むハンズフリー切替画面を生成して表示させる。そして、ハンズフリー切替画面中のハンズフリー切替ボタン画像の領域に対するユーザの操作入力をハンズフリー切替操作検出セクションで検出した場合に、ハンズフリー通話へ切り替えることになる。ハンズフリー切替画面は、携帯画面とは別に独自に生成して表示させるものであるので、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本開示の観点6としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が通話状態となったことを検出する通話状態検出セクション。通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話へ切り替える車両側通話切替セクション。
 上記の車両用装置においては、通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話へ切り替えることになる。車両用タッチパネルを備える車両用装置と携帯電話機とを接続して携帯電話機の画面を車両用タッチパネルで表示させている場合には、ユーザが携帯電話機を操作していない、若しくは操作できない状態である可能性が高い。よって、上述したように携帯電話機の画面を車両用タッチパネルで表示させているときに、携帯電話機が通話状態となった場合には、ハンズフリー通話への切り替えが必要である可能性が高い。従って、ハンズフリー通話を行うかを車両用装置側で判断してハンズフリー通話に切り替えを行うことが可能になる。
 その結果、上記の構成では、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、ハンズフリー通話を行うかを車両用装置側で判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本開示の観点7としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。携帯電話機から通話音声データを受信した場合には、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える一方、携帯電話機から通話音声データを受信していない場合には、携帯電話機が通話状態となった場合に前記ハンズフリー通話に切り替える車両側通話切替セクション。
 携帯電話機から通話音声データを受信した場合には、車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、ハンズフリー通話への切り替えを必要としている可能性が高い。上記の構成によれば、携帯電話機から通話音声データを受信した場合には、ハンズフリー通話に切り替えるので、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。また、携帯電話機から通話音声データを受信していない場合にも、通話状態となった場合にハンズフリー通話に切り替えることができる。
 さらに、本開示の観点8としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が通話状態となったことを検出する通話状態検出セクション。携帯電話機から通話音声データを受信した場合には、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える一方、携帯電話機から通話音声データを受信していない場合に、車両側表示部に表示された携帯画面中の当該携帯電話機での通話を開始させるための通話開始表示領域に対する押下操作である携帯画面操作の検出、または自装置で独自に生成した画面を表示するために車両側表示部の表示領域に設けた自画面領域上の前記ハンズフリー通話への切替または通話の開始を指示するための切替ボタン画像の領域に対する押下操作である独自画面操作の検出をもとに前記ハンズフリー通話に切り替える車両側通話切替セクション。
 上記の車両用装置によれば、携帯電話機から通話音声データを受信した場合には、ハンズフリー通話に切り替えるので、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。また、携帯電話機から通話音声データを受信していない場合にも、携帯画面操作の検出または独自画面操作の検出をもとにハンズフリー通話に切り替えることができる。
 携帯画面操作は、車両側表示部に表示された携帯画面中の当該携帯電話機での通話を開始させるための通話開始表示領域に対応する車両側表示部の画面上の画素領域に対する押下操作である。また、独自画面操作は、車両側表示部の表示領域内の、携帯画面を表示する携帯画面領域とは異なる、自装置で独自に生成した画面を表示する独自画面領域上のハンズフリー通話への切替または通話の開始を指示するための切替ボタン画像の領域に対する押下操作である。
 さらに、本開示の観点9としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が着信中であることを検出する着信中検出セクション。前記携帯電話機が通話状態となったことを検出する通話状態検出セクション。前記携帯電話機が着信中であると着信中検出セクションで検出している間に前記車両側表示部に対する押下操作を検出してから、所定時間内に前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える着信時処理を行う車両側通話切替セクション。
 上記の車両用装置によれば、携帯電話機が着信中(つまり、着信状態)には、車両側表示部に対する押下操作を検出してから所定時間内に携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話に切り替えることができる。よって、携帯電話機の着信中に、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 また、携帯電話機の着信時には、すぐにユーザが通話開始できるとは限らないが、以上の構成によれば、車両側表示部に対する押下操作を検出してから所定時間内に通話状態となったことを、ハンズフリー通話に切り替えを行う条件としているので、着信時の特徴に合わせて適切にハンズフリー通話への切り替えの判断を行うことができる。
 さらに、本開示の観点10としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機が発信状態および呼出状態のいずれかの状態となったことを検出する発呼状態検出セクション。前記携帯電話機が通話状態となったことを検出する通話状態検出セクション。前記車両側表示部に対する押下操作を検出してから所定時間内に前記発呼状態検出セクションで前記携帯電話機が発信状態および呼出状態のいずれかの状態となったことを検出した後に、前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える発信時処理を行う車両側通話切替セクション。
 上記の車両用装置によれば、車両側表示部に対する押下操作を検出してから所定時間内に発信状態および呼出状態のいずれかの状態となったことを検出した後に携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話に切り替えることができる。よって、携帯電話機の発信中や呼出中に、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 また、携帯電話機の発信時や呼出時には、すぐに通話相手が応答するとは限らないが、以上の構成によれば、発信状態および呼出状態のいずれかの状態となってから通話状態となったことを、ハンズフリー通話に切り替えを行う条件としているので、発信時や呼出時の特徴に合わせて適切にハンズフリー通話への切り替えの判断を行うことができる。
 さらに、本開示の観点11としての車両用装置は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行うための通信部。車両内で使用される車両側表示部。前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路。前記携帯電話機の呼制御における状態を示す呼状態が予め定められた複数の呼状態のうちのいずれであるかを検出する呼状態検出セクション。前記車両用タッチパネルに対する最新の押下操作の時刻を記録する最新押下時刻記録セクション。最新押下時刻記録セクションで記録した最新の押下操作の時刻と、呼状態検出セクションで検出した携帯電話機の呼状態とをもとに、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える車両側通話切替セクション。前記車両側通話切替セクションは、前記呼状態検出セクションで検出した携帯電話機が特定の呼状態の場合、且つ、前記最新押下時刻記録セクションで記録した最新の押下操作の時刻と現在時刻との差が所定時間以内である場合に、ハンズフリー通話に切り替える。
 さらに、上記の構成によれば、特定の呼状態の場合にのみ、ハンズフリー通話に切り替えを行うことになるので、呼状態に関わらずにハンズフリー通話への切り替えを行うか否かを判断する態様に比べ、処理負荷を抑えることができる。
 さらに、本開示の観点12としての携帯電話機は次を含むように提供される。タッチパネルを備えた携帯電話機と通信を行って、前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を車両内で使用される車両側表示部に表示するとともに、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記携帯電話機に送信する車両用装置と通信によって接続される、タッチパネル。自機器が、自機器に対するユーザの操作入力によって通話状態となったのか、前記車両用装置の車両側表示部に対するユーザの押下操作をもとに通話状態となったのかを識別する識別セクション。前記車両用装置の車両側表示部に対するユーザの押下操作をもとに自機器が通話状態となったと前記識別セクションで識別した場合に、前記車両用装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話へ切り替える携帯側通話切替セクション。
 上記の携帯電話機においては、車両用装置の車両側表示部に対するユーザの押下操作をもとに自機器が通話状態となったと識別セクションで識別した場合に、ハンズフリー通話へ切り替えることになる。識別セクションは、携帯電話機に備えられるものであるので、携帯電話機側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 その結果、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、携帯電話機側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本開示の観点13としての機器連携システムは次を含むように提供される、タッチパネルを備えた携帯電話機。上記の観点1から観点11のいずれかに記載の車両用装置。ここで、前記車両用装置は、ハンズフリー通話に切り替える場合に、ハンズフリー通話への切り替えを要求する要求信号を前記携帯電話機に送信する。前記携帯電話機は、前記車両用装置から送信された前記要求信号を受信した場合には、公衆回線から受信する音声信号を前記車両用装置へ送信する。
 上記の機器連携システムによれば、タッチパネルを備えた携帯電話機と、前記のいずれかの車両用装置とを含むので、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。また、車両用装置は、ハンズフリー通話に切り替える場合に、ハンズフリー通話への切り替えを要求する要求信号を携帯電話機に送信し、携帯電話機は、車両用装置から送信された要求信号を受信した場合には、公衆回線から受信する音声信号を車両用装置へ送信するので、携帯電話機側でハンズフリー通話への切り換えの操作をユーザが行わなくても、車両用装置側から携帯電話機側のハンズフリー通話への切り替えを自動的に行うことが可能になる。
 さらに、本開示の観14点としての機器連携システムは次を含むように提供される。タッチパネルを備えた携帯電話機。上記観点1の車両用装置。前記車両用装置は、前記携帯電話機から音声信号を受信した場合に、ハンズフリー通話に切り替える。
 上記の機器連携システムによれば、タッチパネルを備えた携帯電話機と、観点1の構成の車両用装置とを含むので、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。また、車両用装置が携帯電話機から音声信号を受信した場合にハンズフリー通話に切り替えるので、携帯電話機側から音声信号がない場合にはハンズフリー通話を開始しない。また、携帯電話機側が車両用装置との通信時に常時ハンズフリー通話となる設定となっており、音声信号が送信されてくる場合には、ハンズフリー通話への切り換えの操作をユーザが行わなくても自動的にハンズフリー通話を開始することが可能になる。
 さらに、本開示の観点15としての機器連携システムは次を含むように提供される。タッチパネルを備えた携帯電話機。上記の観点1から観点11のいずれかに記載の車両用装置。前記携帯電話機は、前記車両用装置から送信された前記操作対象領域を示す信号を受信した場合に、前記タッチパネルの画面上の当該操作対象領域を操作した場合と同様の入力を行う。
 上記の機器連携システムによれば、タッチパネルを備えた携帯電話機と、前記のいずれかの車両用装置とを含むので、車両用タッチパネルを備える車両用装置とタッチパネル式携帯電話機とを接続してタッチパネル式携帯電話機の画面を車両用タッチパネルで表示させている場合において、車両用装置側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 本開示についての上記目的およびその他の目的、特徴や利点は、添付の図面を参照しながら下記の詳細な記述により、より明確になる。その図面は:
機器連携システムの概略的な構成を示すブロック図である; 携帯電話機の概略的な構成を示すブロック図である; 車両用装置の概略的な構成を示すブロック図である; 通話開始ボタンの画像特徴の一例を説明するための模式図である; 制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; 実施形態1における、携帯電話機での電話の着信時にハンズフリー通話への切り替えを行うまでの携帯電話機と車両用装置との間での情報のやり取りを示すシーケンス図である; H/F切替ボタンの表示例を示す模式図である; 制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; 実施形態2における、携帯電話機での電話の着信時にハンズフリー通話への切り替えを行うまでの携帯電話機と車両用装置との間での情報のやり取りを示すシーケンス図である; 図10(a)および図10(b)は、マルチポイント接続時のH/F切替ボタンの表示例を示す模式図である; 実施形態3における、携帯電話機での電話の着信時にハンズフリー通話への切り替えを行ってからハンドセット通話への切り替えを行うまでの携帯電話機と車両用装置との間での情報のやり取りを示すシーケンス図である; 車両用タッチパネルの表示の切り替わりの一例について説明を行うための模式図である; 実施形態4における、制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; 実施形態5における、主制御部でのハンズフリー通話切替関連処理のフローを示すフローチャートである; H/F切替ボタンの表示例を示す模式図である; 実施形態6における制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; 図17(a)および図17(b)は実施形態6におけるハンズフリー通話切替関連処理の概要の説明を行うための模式図である; 実施形態7における制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; 図19(a)および図19(b)は実施形態7におけるハンズフリー通話切替関連処理の概要の説明を行うための模式図である; 実施形態8における制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; 実施形態9における制御回路でのハンズフリー通話切替関連処理のフローを示すフローチャートである; そして 最新タッチ時刻記録処理の概略を示すフローチャートである。
 以下、本開示の実施形態について図面を用いて説明する。
 (実施形態1)
 図1は、実施形態1における機器連携システム100の概略的な構成を示すブロック図である。図1に示すように、機器連携システム100は、携帯電話機1および車両用装置2を含んでいる。
 機器連携システム100は、携帯電話機1と車両用装置2とをターミナルモードで接続中の場合には、携帯電話機1の画面に表示させるために携帯電話機1で生成した画像データを車両用装置2に送信し、車両用装置2でその画像データが示す画面を表示するとともに、車両用装置2への操作入力によって携帯電話機1を操作する。
 上記のようにターミナルモードでは、携帯電話機1と同等の画面内容(携帯画面)を車両用装置2の画面に表示するが、当該携帯画面で、どのような種類の処理が実行されているのか、また、どのような種類のボタンがユーザーによって押されたのか、車両用装置2では、判別できない。
 ターミナルモードでは、車両用装置2を、タッチパネル式携帯電話機の画面表示部および操作部として利用するのみである。それ故、タッチパネル式携帯電話機のアプリケーションを車両用装置2にインストールしなくても良い。タッチパネル式携帯電話機から車両用装置に送信されてくる情報は、基本的には、画素毎の色情報(以下、画素情報)のみである。ターミナルモードでは、タッチパネル式携帯電話機のアプリケーションを車両用装置にインストールしなくても、車両用装置2でタッチパネル式携帯電話機の機能を利用できることから、車両用装置2の処理負荷が軽減できる等の利点がある。
 つまり、車両用装置2では、携帯電話機1の画面を車両用装置2の画面に合わせて縦横比を維持したまま拡大して表示したり、縦横比を変更して拡大表示したりする。この際、車両用装置2は、携帯電話機1で生成した画素情報や携帯電話機1の画面のサイズ情報などを受信する。
 一方で、車両用装置2では、携帯電話機1で実行されているアプリケーションの種類や、画面中のテキスト情報、画面中のデータの属性、操作ボタンの有無、種類、表示位置、操作ボタンが押された場合に実行される処理内容など、携帯電話機1の画面で表示されている画面に関する詳細な情報は受信しない。
 画像データ以外に詳細な情報を受信する場合には、車両用装置2と携帯電話機1との間のデータ通信量が増加する。また、車両用装置2にて詳細な情報を分析するアプリケーションが必要となり、車両用装置2の処理負荷を軽減することは難しいためである。
 そのため、本開示では、車両用装置2は、携帯電話機1から画素情報を受信する。一方で、画面の表示内容に関する詳細な情報は受信しないことを前提に説明する。ただし、これは画像データ以外の情報を受信することを否定するものではない。場合によっては、アプリケーションの種類などの情報を受信する場合も考えられる。
 携帯電話機1は、タッチパネルを用いて操作入力を行う所謂タッチパネル式携帯電話機(つまり、操作部分を画面に集約したタッチパネルを搭載した多機能携帯電話機)であって、一般的なタッチパネル式携帯電話機と同様に、外部機器との通信機能、メール機能、インターネット接続機能(Web接続機能)、音楽プレーヤー機能、ピクチャビューア機能、動画像再生機能、ナビゲーション機能など様々な機能を有しているものである。
 ここで、図2を用いて携帯電話機1の概略的な構成について説明を行う。なお、便宜上、一般的なタッチパネル式携帯電話機が有している機能に関する構成のうち、本開示の説明に不要なものについては説明を省略する。図2は、携帯電話機1の概略的な構成を示すブロック図である。図2に示すように携帯電話機1は、BT通信部11とUSB通信部12とからなる携帯側通信部13、携帯側表示部14と操作検出部15とからなるタッチパネル部16、携帯側音声入力部17、携帯側音声出力部18、および主制御部19を備えている。
 携帯側通信部13は、車両用装置2との間で通信を行う。詳しくは、BT通信部11では、車両用装置2との間でBluetooth(登録商標)に従った通信(以下、BT通信)を行い、USB通信部12では、車両用装置2との間でUSB接続による有線通信(以下、USB通信)を行う。本実施形態では、BT通信部11はハンズフリー通話への切り替えの制御に関連する情報の送受信に用い、USB通信部12はターミナルモード接続中の画像データや位置情報の送受信に用いるものとする。ここで言うところの画像データはタッチパネル部16の画面の各画素の画素情報(例えば画素毎の色情報)であり、位置情報は携帯電話機1の画面上の位置情報であるものとする。画像データには、描画に必要な各画素のピクセル座標の情報も含んでいるものとする。
 なお、本実施形態では、携帯電話機1と車両用装置2との間での通信を、BT通信とUSB通信とで行う構成を示したが、必ずしもこれに限らない。例えばZigBee(登録商標)等の近距離無線通信規格やIEEE802.11等の無線LAN規格などに従った無線通信によって行う構成としてもよいし、USB通信以外の有線通信によって行う構成としてもよい。
 また、本実施形態では、ハンズフリー通話への切り替えの制御に関連する情報の送受信とターミナルモード接続中の画像データや位置情報の送受信とを2種類の通信(BT通信とUSB通信)によってそれぞれ行う構成を示したが、必ずしもこれに限らない。例えば、ハンズフリー通話への切り替えの制御に関連する情報の送受信とターミナルモード接続中の画像データや位置情報の送受信とを1種類の通信によって行う構成としてもよい。
 携帯側表示部14は、携帯電話機1の各種アプリケーションプログラム(以下、アプリケーション)に応じた画面等を表示するものであって、例えばフルカラー表示が可能なものであり、液晶ディスプレイ、有機ELディスプレイ、プラズマディスプレイ等を用いて構成することができる。
 操作検出部15は、携帯側表示部14と一体になったタッチスイッチが用いられ、タッチ位置に対応するスイッチが操作されたことを検出し、その位置情報を主制御部19に入力する。言い換えると、操作検出部15は、携帯側表示部14に表示した画面上のどの位置に対して操作がされたかを検出して、その位置情報を主制御部19に入力する。ここで言うところの位置情報とは、本実施形態では、例えば携帯側表示部14の画面上の座標であるものとする。タッチパネル部16は、携帯側表示部14と操作検出部15とが一体化したものであって、主制御部19の指示に従って携帯側表示部14に例えばボタン表示を含む画面を表示させる。
 なお、タッチスイッチは、静電容量方式によるものであってもよいし、抵抗膜方式によるものであってもよいし、他の方式によるものであってもよい。また、位置情報は、画面を所定数の領域に分割して扱う場合には、例えば各領域を特定するID等の識別子であってもよい。
 携帯側音声入力部17は、マイクロフォン(以下、マイク)等から構成され、通話時にユーザが発話する音声等の音声を音声信号に変換して主制御部19へ出力する。携帯側音声出力部18は、スピーカ等から構成され、主制御部19の指示に基づいて、通話相手の音声や各種案内音声等を出力する。主制御部19は、通常のコンピュータとして構成されており、内部には例えば周知のCPU、ROM、EEPROM、RAM、I/Oおよびこれらの構成を接続するバスライン(いずれも図示せず)等が備えられている。主制御部19は、携帯側通信部13、タッチパネル部16、携帯側音声入力部17から入力された各種情報に基づき、各種処理を実行する。
 例えば、主制御部19は、アプリケーションプログラム(以下、アプリケーション)を実行し、アプリケーションに従った画面をタッチパネル部16に表示させるための画像データを生成し、その画像データに従った画面をタッチパネル部16に表示させる。アプリケーションについては、ROMに予め記憶されている構成としてもよいし、図示しない通信部によってネットワーク等の通信網を介してサーバからダウンロードする構成としてもよい。
 また、主制御部19は、タッチパネル部16から入力される位置情報をもとに、タッチパネル部16に表示中の画面上のどのボタン表示に対して操作が行われたかを判断し、操作が行われたボタン表示に応じた処理を実行する。一例を挙げると、携帯電話機1での通話を開始するためのボタン表示(以下、通話開始ボタン)の操作が行われたと判断した場合には、携帯電話機1での通話を開始する処理を行う。
 さらに、主制御部19は、通話時には携帯側音声入力部17から入力された音声信号を公衆回線へ送信するのに加え、公衆回線から受信した音声信号を音声に変換して携帯側音声出力部18から出力させる。
 また、主制御部19は、ターミナルモードで接続中の場合には、タッチパネル部16に表示させるために生成した画像データをUSB通信部12から車両用装置2へ送信させる。また、画像データをUSB通信部12から車両用装置2へ送信させる場合に、例えば携帯側表示部14の表示領域情報(画面サイズ=幅(Wピクセル)×高さ(Hピクセル)や解像度など)をUSB通信部12から車両用装置2へ送信させるものとする。本実施形態では、携帯電話機1と車両用装置2とがUSB通信部12を介してUSB接続された場合にターミナルモードで接続されるものとする。なお、例えばタッチパネル部16へのユーザからの操作入力によってターミナルモードでの接続の要否を選択可能な構成としてもよい。
 後に詳述するが、ターミナルモードで接続中の場合には、主制御部19は、USB通信部12を介して車両用装置2から入力される位置情報をもとに、タッチパネル部16に表示中の画面上のどのボタン表示に対して操作が行われたかを判断し、操作が行われたボタン表示に応じた処理を実行する。
 他にも、主制御部19は、電話の着信があった場合に電話の着信があったことを示す着信状態通知をBT通信部11から車両用装置2へ送信させたり、通話を開始した場合に通話を開始したことを示す通話状態通知をBT通信部11から車両用装置2へ送信させたりする。
 また、主制御部19は、車両用装置2から送信される後述のハンズフリー切替要求をBT通信部11で受信した場合に、ハンズフリー通話への切替を行う。そして、ハンズフリー通話への切り替え後は、公衆回線から受信した音声信号をBT通信部11から車両用装置2へ送信させるとともに、BT通信部11で受信した車両用装置2から送信されてくる音声信号を公衆回線へ送信する。
 図1に戻って、車両用装置2は、自動車等の車両に搭載されるものであって、画像の表示や音声の入出力を行うものである。車両用装置2としては、例えば車載ナビゲーション装置や車載のディスプレイ装置や所謂ディスプレイオーディオ等を利用することができる。ディスプレイオーディオとは、表示機能やオーディオ再生機能、携帯電話機1との通信機能といった基礎的な機能のみを実装し、携帯電話機1と連携することで多機能化する車両用装置を指している。
 なお、ディスプレイと一体となった車載ナビゲーション装置を車両用装置2として用いてもよいし、ディスプレイを含まない車載ナビゲーション装置とディスプレイとの組を車両用装置2として用いてもよいものとする。本実施形態では、一例として車両用装置2はディスプレイと一体となった車載ナビゲーション装置であるものとして以降の説明を行う。
 ここで、図3を用いて車両用装置2の概略的な構成について説明を行う。なお、便宜上、車両用装置2が有している機能に関する構成のうち、本開示の説明に不要なものについては説明を省略する。図3は、車両用装置2の概略的な構成を示すブロック図である。図3に示すように車両用装置2は、BT通信部21とUSB通信部22とからなる車両側通信部23、車両側表示部24、操作入力部25、車両側音声入力部26、車両側音声出力部27、記憶装置28、および制御回路29を備えている。
 車両側通信部23は、携帯電話機1との間で通信を行う。よって、車両側通信部23は通信手段(meansあるいは device)とも言及する。詳しくは、BT通信部21では、携帯電話機1との間でBT通信を行い、USB通信部22では、携帯電話機1との間でUSB通信を行う。本実施形態では、BT通信部21はハンズフリー通話への切り替えの制御に関連する情報の送受信に用い、USB通信部22はターミナルモード接続中の画像データや位置情報の送受信に用いるものとする。なお、車両用装置2と携帯電話機1との間での通信は、前述したように無線通信によるものであってもよいし、有線通信によるものであってもよい。
 USB通信部22は、携帯電話機1から送信された表示領域情報や画像データを受信して制御回路29に入力する。また、USB通信部22は、制御回路29からの指示に従って、制御回路29から出力される位置情報を携帯電話機1に送信する。
 車両側表示部24は、制御回路29の指示に従った画面等を表示するものであって、例えばフルカラー表示が可能なものであり、液晶ディスプレイ、有機ELディスプレイ、プラズマディスプレイ等を用いて構成することができる。操作入力部25は、例えば車両側表示部24と一体になったタッチスイッチ、或いは、遠隔操作スイッチなどが用いられ、スイッチ操作により制御回路29へ各種機能の操作指示を行う。操作入力部25のタッチスイッチが車両側表示部24に一体になったものは車両用タッチパネルとも言及する。また、操作入力部25は、前述の操作検出部15と同様にして、車両側表示部24に表示した画面上のどの位置に対して押下操作がされたかを検出して、その位置情報を制御回路29に入力するものとする。
 車両側音声入力部26は、マイク等から構成され、ユーザが発話する音声を音声信号に変換して制御回路29へ出力する。車両側音声出力部27は、スピーカ等から構成され、制御回路29の指示に基づいて、ハンズフリー通話時の通話相手の音声や各種案内音声等を出力する。
 記憶装置28は、携帯電話機1の画面上の携帯電話機1での通話を開始させるための通話開始表示領域についての画像特徴が記憶されている。よって、記憶装置28は通話領域画像特徴記憶部とも言及する。携帯電話機1での通話を開始させるための通話開始表示領域とは、携帯電話機1の画面上の通話を開始させるためのボタン表示(以下、通話開始ボタン)を示している。また、画像特徴とは、色、形状、同一の画素に対する画素情報の時間的な変化周期等を指標とした特徴を示している。
 通話開始ボタンについての画像特徴を、色を指標とする特徴とした場合には、通話開始ボタンの図形の内部の色や当該通話開始ボタンの図形の枠の色などが記憶装置28に記憶されることになる。また、形状を指標とする特徴とした場合には、通話開始ボタンの図形の形状や当該通話開始ボタンに用いられている文字や記号の形状などが記憶装置28に記憶されることになる。さらに、同一の画素に対する画素情報(例えば色の情報)の時間的な変化周期を指標とする特徴とした場合には、点滅表示したり色や形状が変化したりする動画となっている通話開始ボタンの各画素の時間的な変化周期が記憶装置28に記憶されることになる。
 通話開始ボタンの画像特徴は、通話開始ボタン以外のボタン表示(例えば保留ボタン)との区別が可能であることが必要である。一例としては、図4に示すように、保留ボタン(図中のA)の外枠の形状が1重線の長方形の場合に、通話開始ボタン(図中のB)の外枠の形状を2重線の長方形としたり、外枠で囲まれる内部の色を保留ボタンと異なる色としたりなどする。また、図4に示すように、通話開始ボタンに用いられる文字「開始ボタン」と保留ボタンに用いられる文字「保留ボタン」とを異ならせるなどの例もある。
 制御回路29は、通常のコンピュータとして構成されており、内部には例えば周知のCPU、ROM、EEPROM、RAM、I/Oおよびこれらの構成を接続するバスライン(いずれも図示せず)等が備えられている。制御回路29は、車両側通信部23、操作入力部25、車両側音声入力部26から入力された各種情報に基づき、各種処理を実行する。
 制御回路29は、携帯電話機1から車両側通信部23で受信した画像データ(以下、携帯由来画像データ)の入力を受け付けた場合に、その携帯由来画像データに従った画像を生成して車両側表示部24に出力し、その携帯由来画像データに従った画面(以下、携帯画面)を車両側表示部24で表示させる。
 制御回路29では、例えば携帯電話機1から送信された表示領域情報をもとに、携帯由来画像データのサイズや解像度を、車両側表示部24の画面のサイズや解像度に変換した画像を生成して携帯画面を表示させるものとする。
 なお、本実施形態では、携帯電話機1から送信された表示領域情報をもとに、携帯由来画像データのサイズや解像度を、車両側表示部24の画面のサイズや解像度に変換する構成を示したが、必ずしもこれに限らない。例えば、携帯由来画像データのサイズや解像度の変換の比率を固定値として予め制御回路29で保持しておき、この固定値に従って変換を行う構成としてもよい。この場合には、携帯電話機1から表示領域情報を送信する構成としなくてもよい。
 また、制御回路29は、車両側表示部24に表示した画面上のどの位置に対して押下操作がされたかの位置情報の入力を操作入力部25から受け、その位置情報に対応する携帯電話機1のタッチパネル部16(詳しくは携帯側表示部12)の画面上の座標(つまり、画素領域)を操作対象領域として特定する。当該位置情報に対応する操作対象領域の特定方法としては、携帯由来画像データのサイズを変換して画像を生成したときの変換と逆の変換を行うことで特定する構成とすればよい。
 そして、操作対象領域として特定した座標を示す信号をUSB通信部22から携帯電話機1に送信することによって、携帯電話機1のタッチパネル部16の画面上の当該操作対象領域を操作した場合と同様の入力を携帯電話機1で行わせる。よって、制御回路29は制御手段(meansあるいはdevice)とも言及する。
 さらに、制御回路29は、BT通信部21で携帯電話機1から受信するハンズフリー通話への切り替えの制御に関連する情報やUSB通信部22で携帯電話機1から受信する画像データの入力を受け付け、ハンズフリー通話への切り替えの制御に関連する処理(以下、ハンズフリー通話切替関連処理)を実行する。
 ここで、図5を用いて、制御回路29でのハンズフリー通話切替関連処理のフローについての説明を行う。図5は、制御回路29でのハンズフリー通話切替関連処理のフローを示すフローチャートである。本フローは、車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 なお、通常、ハンズフリー通話を行うためのハンズフリー通話プロトコル(BT通信では、ハンズフリー通話プロファイル、以下HFP)は、ターミナルモードの接続より前に接続している。つまり、車両用装置2は、電源がオンされている間、BT通信が可能な携帯電話機1を探索する探索信号を送信する。そして、携帯電話機1は、探索信号を受信し、探索応答信号を車両用装置2へ送信する。そして、車両用装置2は、探索応答信号を受信し、携帯電話機1との間でBT通信回線の接続を行う。そして、BT通信回線の接続が正常に終了した場合、次に、携帯電話機1との間でHFP接続を行う。そして、HFP接続が正常に終了した場合、HFP接続を継続する。この状態で、車両用装置2と携帯電話機1との間で、音声データを送受信し、当該音声データを車両用装置2のスピーカから出力したりすることにより、ハンズフリー通話を行う。
 よって、本処理では、HFPが切断されていない限り、改めてHFPを接続する必要はなく、ハンズフリー通話の用途で使用できるようにマイクやスピーカの音声入力経路を切替えることにより、ハンズフリー通話を行うことができるものとして説明する。
 ここで、この出願に記載されるフローチャート、あるいは、フローチャートの処理は、複数のセクッション(あるいはステップと言及される)から構成され、各セクッションはたとえば、S1と表現される。さらに、各セクッションは、複数のサブセクションに分割されることができる、一方、複数のセクッションが合わさって一つのセクションにすることも可能である。さらに、このように構成される各セクションは、デバイス(device)、 モジュール(module)、あるいはミーンズ(means)として言及されることができる。
 また、上記の複数のセクションの各々あるいは組合さったものは、(i)ハードウエアユニット(例えば、コンピュータ)と組み合わさったソフトウエアのセクッションのみならず、(ii) ハードウエアのセクッションとして、関連する装置の機能を含みあるいは含まずに実現できる。さらに、ハードウエアのセクションは、マイクロコンピュータの内部に構成されることもできる。
 さらに、ソフトウエアのセクションは、ソフトウエアプログラムに含まれることができる。このソフトウエアプログラムは、プログラム製品としての非遷移のコンピュータで読み込み可能な記憶媒体に含まれることも可能である。
 まず、ステップS1では、タッチ操作検出判定処理を実行してステップS2に移る。タッチ操作検出判定処理では、車両用タッチパネルが押下操作されたか否かを判定する。車両用タッチパネルが押下操作されたか否かは、操作入力部25で操作を検出したか否かに応じて判定する構成とすればよい。
 ステップS2では、タッチ操作検出判定処理で車両用タッチパネルが押下操作されたと判定した場合、つまり、タッチ操作ありの場合(ステップS2でYES)には、ステップS3に移る。また、タッチ操作検出判定処理で車両用タッチパネルが押下操作されたと判定しなかった場合、つまり、タッチ操作なしの場合(ステップS2でNO)には、ステップS1に戻ってフローを繰り返す。
 ステップS3では、通話開始ボタン操作判定処理を実行してステップS4に移る。通話開始ボタン操作判定処理では、携帯電話機1から取得した画像データと記憶装置28に記憶している通話開始ボタンの画像特徴とをもとに、通話開始ボタンの画像が車両用タッチパネルの画面上に表示される領域(つまり、画素領域)を特定する。
 例えば画像特徴が色を指標とした特徴であった場合には、画面内で同一の色が連続している部分を1つの図形として認識する。また、そのようにして認識した図形が、線状であって閉じた形状となっている場合には、図形の枠であると認識し、その枠およびその内部を一つの図形と認識する。なお、図形には複数の色が使用されていることも多いが、この場合、図形内での比率が所定値以上の色をその図形の色とする。そして、これらのようにして認識した図形の枠やその内部が通話開始ボタンの画像特徴として記憶されている色と一致している場合には、その図形の位置する領域を通話開始ボタンの画像が車両用タッチパネルの画面上に表示される領域として特定する。
 また、画像特徴が形状を指標とした特徴であった場合には、通話開始ボタンの画像特徴として記憶されている形状とのパターンマッチングを行い、マッチングする対象(文字、記号、図形等)が存在した場合にはその対象の位置する領域を通話開始ボタンの画像が車両用タッチパネルの画面上に表示される領域として特定する。なお、画像特徴が文字の場合には、画面上から文字認識処理により読み取った文字情報と、予め記憶しておいた文字情報とに基づいて特定してもよい。具体的には画面上に表示された画像情報より読み取られた文字情報が予め記憶された文字情報と一致する場合には、当該画面上における文字情報が描画されている領域の周囲の一定領域、或いは、周囲に枠線がある場合には当該枠線の内側領域を通話開始ボタンの画像が車両用タッチパネルの画面上に表示される領域として特定する。
 さらに、画像特徴が同一の画素に対する画素情報の時間的な変化周期を指標とした特徴であった場合には、色を指標とする特徴の場合と同様に、画面内で同一の色が連続している部分を1つの図形として認識する。そして、認識した図形の枠やその内部の同一の画素に対する画素情報の時間的な変化周期が通話開始ボタンの画像特徴として記憶されている上記変化周期と一致している場合には、その図形の位置する領域を通話開始ボタンの画像が車両用タッチパネルの画面上に表示される領域として特定する。
 また、通話開始ボタン操作判定処理では、操作入力部25から入力される位置情報をもとに、車両用タッチパネルの画面上のユーザによって操作が行われた領域(以下、操作領域)を特定する。よって、制御回路29はタッチ操作検出セクションあるいは手段とも言及する。操作領域は、位置情報が1点の座標のみの場合には、その座標が示す1点でとしてもよいし、その座標を中心とした所定範囲としてもよい。また、位置情報が複数点の座標を含んでいる場合には、それら複数点の座標が示す範囲を操作領域とすればよい。
 そして、車両側表示部24の画面上に通話開始ボタンの画像が表示される領域を特定できた場合には、通話開始ボタンが表示される領域と上記操作領域とが一致するかを判断し、一致すると判断した場合には、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されたと判定する。よって、制御回路29は通話操作判定セクションあるいは手段とも言及する。通話開始ボタンが表示される領域と上記操作領域とが一致するかについては、通話開始ボタンが表示される領域と上記操作領域との少なくとも一部が重なっている場合に一致すると判断する構成とすればよい。なお、通話開始ボタンの画像が車両側表示部24の画面上に表示される領域を特定できなかった場合には、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されたと判定しない。
 なお、本実施形態では、通話開始ボタンが表示される領域を特定した後に、当該領域が操作領域と一致するか判断することで、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されたか否かを判定する構成を示したが、必ずしもこれに限らない。例えば、操作領域の画像特徴が記憶装置28に記憶している通話開始ボタンの画像特徴と一致するか判断することで、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されたか否かを判定する構成(変形例1)としてもよい。この場合には、通話開始ボタン操作判定処理では以下のように処理を行う構成とすればよい。
 まず、操作入力部25から入力される位置情報をもとに、車両用タッチパネルの画面上のユーザによって操作が行われた領域(つまり、操作領域)を特定する。操作領域は、例えば位置情報が1点の座標のみの場合には、その座標を中心とした所定範囲に一部もしくは全部が含まれる図形の範囲とすればよいし、位置情報が複数点の座標を含んでいる場合には、それら複数点の座標が示す範囲に一部もしくは全部が含まれる図形の範囲とすればよい。なお、図形の認識は、前述したように画面内で同一の色が連続している部分を1つの図形として認識したり、線状であって閉じた形状となっている場合には、図形の枠であると認識してその枠およびその内部を1つの図形と認識したりすればよい。
 続いて、携帯電話機1から取得した画像データと当該操作領域とをもとに、当該操作領域の画像特徴を決定する。例えば、画像特徴が色を指標とした特徴であった場合には、操作領域に一部もしくは全部が含まれる図形の枠や内部の色を操作領域の画像特徴と決定する。画像特徴が形状を指標とした特徴であった場合には、操作領域に一部もしくは全部が含まれる図形の外形や当該図形に含まれる文字や記号を操作領域の画像特徴と決定する。さらに、画像特徴が同一の画素に対する画素情報の時間的な変化周期を指標とした特徴であった場合には、操作領域に一部もしくは全部が含まれる図形の枠やその内部の同一の画素に対する画素情報の時間的な変化周期を操作領域の画像特徴と決定する。
 そして、決定した画像特徴と記憶装置28に記憶している通話開始ボタンの画像特徴が一致するかを判断し、一致すると判断した場合には、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されたと判定する。画像特徴が形状を指標とした特徴であった場合には、例えばパターンマッチングを行い、マッチングした場合に一致すると判断する構成とすればよい。これによれば、画像特徴を求める必要のある領域を車両用タッチパネルの画面上の操作領域に絞り込むことができるので、車両用タッチパネルの画面の全領域の画像特徴を求めなくても、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されたと判定することが可能になる。従って、制御回路29での演算処理の負荷を低減することが可能になる。
 ステップS4では、通話開始ボタン操作判定処理で操作されたのが通話開始ボタンと判定した場合(ステップS4でYES)には、ステップS5に移る。また、通話開始ボタン操作判定処理で操作されたのが通話開始ボタンと判定しなかった場合(ステップS4でNO)には、ステップS1に戻ってフローを繰り返す。
 ステップS5では、通話待ちタイマセット処理を実行してステップS6に移る。通話待ちタイマセット処理では、タイマのカウントを開始する。タイマとしては図示しないタイマ回路等を用いる構成とすればよい。
 ステップS6では、時間内通話開始判定処理を実行してステップS7に移る。時間内通話開始判定処理では、ステップS5の通話待ちタイマセット処理でタイマのカウントを開始してから所定時間以内に、携帯電話機1が通話状態となったことを検出したか否かを判定する。詳しくは、携帯電話機1が通話状態となったことは、携帯電話機1からBT通信部21で受信した通話状態通知の入力が制御回路29に行われたことをもって検出する構成とすればよい。よって、制御回路29は通話状態検出セクションあるいは手段とも言及する。ここで言うところの所定時間とは、ターミナルモード接続中に車両用装置2への操作入力によって携帯電話機1を操作する場合の時差よりも長い時間であって、任意に設定可能な時間である。所定時間としては、例えば1~数秒を設定すればよい。
 なお、携帯電話機1が通話状態となったことは、携帯電話機1からBT通信部21で受信した音声信号の入力が制御回路29に行われたこと(つまり、音声信号を受信したこと)をもって検出する構成としてもよい。
 また、携帯電話機1での通話中にタッチパネル部16に表示される画面(以下、通話画面)についての画像特徴を予め記憶装置28に記憶しておき、携帯電話機1から取得した画像データと記憶装置28に記憶している通話画面の画像特徴とをもとに、携帯電話機1から取得した画像データが示す画像特徴と通話画面の画像特徴とが一致すると判断した場合には、携帯電話機1が通話状態となったことを検出する構成としてもよい。よって、記憶装置28は通話画面画像特徴記憶部とも言及する。通話画面の画像特徴としては、例えば通話画面に特徴的なボタンの色や形状や文字(例えば「通話」との文字)や記号や図形(例えば通話ボタンに用いられるアイコンの図形)等がある。
 ステップS7では、通話待ちタイマセット処理でタイマのカウントを開始してから所定時間以内に、携帯電話機1が通話状態となったことを検出した(つまり、所定時間内の通話開始検出)と判定した場合(ステップS7でYES)には、ステップS8に移る。また、所定時間内の通話開始検出と判定しなかった場合(ステップS7でNO)には、ステップS1に戻ってフローを繰り返す。
 ステップS8では、ハンズフリー通話切替処理を実行してフローを終了する。ハンズフリー通話切替処理では、BT通信部21から携帯電話機1にハンズフリー通話への切替を要求するハンズフリー切替要求を送信させるとともに、車両用装置2でハンズフリー通話を開始する。よって、制御回路29は車両側通話切替セクションあるいは手段とも言及する。ハンズフリー切替要求は要求信号とも言及する。
 ここで言うところのハンズフリー通話とは、車両側音声入力部26から入力されてくる通話音声の音声信号をBT通信部21から携帯電話機1へ送信させるとともに、BT通信部21で受信した携帯電話機1から送信されてくる音声信号を車両側音声出力部27へ出力し、通話相手の音声を出力させることを示す。言い換えると、ユーザが発話した音声を携帯電話機1を介して公衆回線へ送信するのに加え、携帯電話機1が公衆回線から受信した音声を出力することを示す。なお、本フローは、車両用装置2と携帯電話機1とのターミナルモード接続が解消されたときにも終了する。
 続いて、図6を用いて、携帯電話機1での電話の着信時にハンズフリー通話への切替を行うまでの携帯電話機1と車両用装置2との間での情報のやり取りについての説明を行う。ここでは、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されてから所定時間内に携帯電話機1が通話状態となるものとして説明を行う。また、図6中の1重線の矢印がBT通信での情報の流れを示しており、2重線の矢印がUSB通信での情報の流れを示している。
 まず、携帯電話機1のタッチパネル部16に待ち受け画面を表示している場合(t1)には、この待ち受け画面の画像データをUSB通信によって携帯電話機1から車両用装置2へ送信する(t2)。車両用装置2では、この画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様の待ち受け画面を車両用タッチパネルに表示する(t3)。なお、待ち受け画面でなく、通話機能に関するアプリケーション以外のアプリケーションに従った画面であってもよい。
 続いて、携帯電話機1で電話の着信があった場合(t4)には、着信状態通知をBT通信によって携帯電話機1から車両用装置2へ送信する(t5)。また、携帯電話機1で電話の着信があった場合には、携帯電話機1のタッチパネル部16に着信画面を表示し(t6)、この着信画面の画像データをUSB通信によって携帯電話機1から車両用装置2へ送信する(t7)。車両用装置2では、この画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様の着信画面を車両用タッチパネルに表示する(t8)。ここで、着信画面には前述の通話開始ボタンが含まれているものとする。
 車両用タッチパネルに表示されている着信画面中の通話開始ボタンがユーザに操作された場合(t9)に、その操作領域の位置情報をUSB通信によって車両用装置2から携帯電話機1へ送信する(t10)。携帯電話機1では、その位置情報をもとに、携帯電話機1側の通話開始ボタンの操作を行い、通話を開始する(t11)。
 通話を開始した場合、通話状態通知をBT通信によって携帯電話機1から車両用装置2へ送信する(t12)。また、通話を開始した場合、携帯電話機1のタッチパネル部16に通話画面を表示し(t13)、この通話画面の画像データをUSB通信によって携帯電話機1から車両用装置2へ送信する(t14)。車両用装置2では、この画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様の通話画面を車両用タッチパネルに表示する(t15)。
 車両用装置2では、車両用タッチパネルの画面上に表示された通話開始ボタンが操作されてから所定時間内に携帯電話機1が通話状態となったことをもとに、ハンズフリー切替要求をBT通信によって車両用装置2から携帯電話機1へ送信する(t16)。そして、車両用装置2をハンズフリー通話に切り替える(t17)。また、ハンズフリー切替要求を受信した携帯電話機1もハンズフリー通話に切り替える(t18)。
 なお、携帯電話機1からの電話の発信時にハンズフリー通話への切替を行う場合には、車両用タッチパネルの発信画面上に表示された通話開始ボタンが操作されてから所定時間内に携帯電話機1から通話状態通知を受信したことをもとに、ハンズフリー切替要求を車両用装置2から携帯電話機1に送信し、ハンズフリー通話への切替を行うことになる。
 このように、本実施形態では、車両用タッチパネルの画面が操作されてから所定時間内に携帯電話機1から通話状態通知を受信したことをもとに、ハンズフリー通話への切替を行う。車両用タッチパネルの画面の操作を検出してから短時間に携帯電話機1が通話状態となった場合は、携帯電話機1での着信後の通話開始および発信による通話開始のいずれであっても、ユーザが車両用タッチパネルの画面上の通話開始ボタンを操作して通話開始された可能性が高い。また、車両用タッチパネルが操作されているため、ユーザがハンズフリー通話を必要としている可能性が高い。従って、以上の構成によれば、車両用装置2側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことができる。
 さらに、本実施形態では、携帯電話機1から取得した画像データと通話開始ボタンの画像特徴と制御回路29で特定した操作領域とから、通話開始ボタンが車両用装置2側で操作されたことも判定し、肯定判定したことをもとにハンズフリー通話に切り替える。従って、以上の構成によって、車両用装置2側でハンズフリー通話への切り替えの必要性をさらに精度良く判断してハンズフリー通話に切り替えを行うことが可能となっている。
 なお、前述の実施形態では、車両用タッチパネルの画面が操作されてから所定時間内に携帯電話機1から通話状態通知を受信したこと、および通話開始ボタンが車両用装置2側で操作されたことの2つの条件が揃った場合にハンズフリー通話への切り替えを行う構成を示したが、必ずしもこれに限らない。例えば、上記の2つの条件のうちのいずれかを満たす場合にハンズフリー通話への切り替えを行う構成としてもよい。
 例えば、車両用タッチパネルの画面が操作されてから所定時間内に携帯電話機1から通話状態通知を受信した場合にハンズフリー通話への切り替えを行う構成とする場合には、図5のフローのステップS3およびステップS4を省略し、ステップS2の処理の後にステップS5の処理に移行する構成とすればよい。また、通話開始ボタンが車両用装置2側で操作された場合にハンズフリー通話への切り替えを行う構成とする場合には、ステップS5~ステップS7を省略し、ステップS4でYESであった場合にステップS8に移行する構成とすればよい。
 その他、前述の実施形態では、車両用タッチパネルの画面の操作を検出してから所定時間内に携帯電話機1から通話状態通知を受信したことをもとに、ハンズフリー切替要求を車両用装置2から携帯電話機1に送信する構成を示したが、例えば、車両用タッチパネルの画面の操作を検出してから所定時間内に携帯電話機1から通話状態以外の着信状態通知、発信状態通知、呼出状態通知を受信したことをもとに、ハンズフリー切替要求を車両用装置2から携帯電話機1に送信する構成としてもよい。この場合には、携帯電話機1はハンズフリー切替要求を受信したことを一時記憶しておき、その後、通話状態となった場合にハンズフリー通話を行う。
 (実施形態2)
 本開示は上述の実施形態1に限定されるものではなく、次の実施形態2も本開示の技術的範囲に含まれる。以下では、実施形態2について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態2における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態2は、車両用装置2の制御回路29での処理が異なっている点を除けば、実施形態1と同様の構成である。
 具体的には、実施形態2の制御回路29(以下、便宜上、制御回路29aとする)は、携帯電話機1から車両側通信部23で受信した携帯由来画像データの入力を受け付けた場合に、その携帯由来画像データに従った画像を生成して車両側表示部24に出力し、その携帯由来画像データに従った携帯画面を車両側表示部24の一部の領域に表示させる。
 さらに、制御回路29aは、携帯画面とは別に、自装置で独自に生成した独自生成画面を、車両側表示部24の携帯画面を表示させる領域以外の領域に表示させる。また、制御回路29aは、この独自生成画面に、ハンズフリー通話とハンドセット通話との切り替えを指示するためのボタンのアイコン(以下、H/F切替ボタン)も表示させる。なお、H/F切替ボタンは切替ボタン画像とも言及する。よって、制御回路29aは切替ボタン画像表示セクションあるいは手段とも言及する。
 ハンドセット通話とは、携帯電話機1単独で行う通話を示す。車両用装置2にとってのハンドセット通話への切り替えとは、例えばハンズフリー通話プロトコルを終了させることや、音声を入出力する経路(音声経路)を自装置のスピーカおよびマイクを介さない経路に切り替えることを示している。
 ここで、図7を用いて、H/F切替ボタンの表示例について説明を行う。図7のCが携帯画面を示し、Dが独自生成画面を示し、EがH/F切替ボタンを示している。また、Fが携帯画面中の通話開始ボタン、Gが携帯画面中の通話終了ボタンを示している。図7に示すように、独自生成画面は携帯画面の周囲に表示され、その独自生成画面中にH/F切替ボタンは含まれる。
 H/F切替ボタンのデザインは、携帯画面上の通話開始ボタンのデザインとは異なっているものとする。例えば、携帯画面上の通話開始ボタンでは用いられない「ハンズフリー」といったテキスト等を含むボタン画像を予め用意しておき、このボタン画像をH/F切替ボタンの画像に用いる構成とすればよい。
 他にも、H/F切替ボタンの画像として複数の候補を予め用意しておき、携帯画面上の通話開始ボタンのデザインとは異なる候補を選択してH/F切替ボタンの画像に用いる構成としてもよい。携帯画面上の通話開始ボタンのデザインは、例えば携帯画面上の図形の画像特徴を分析することで求める構成としてもよい。また、携帯電話機1の機種ごとのボタンデザインの情報を予め記憶装置28に格納しておき、接続中の携帯電話機1から得られる当該携帯電話機1の機種の情報と上記機種ごとのボタンデザインの情報とをもとに、携帯電話機1の通話開始ボタンのデザインを推測することで求める構成としてもよい。
 これによれば、携帯画面上に表示されるハンドセット通話の開始を指示するための通話開始ボタンと、H/F切替ボタンとの区別をユーザが行い易くなる。
 さらに、H/F切替ボタンの操作方法が、携帯画面上の通話開始ボタンの操作方法とは異なっている構成としてもよい。つまり、H/F切替ボタンに対応する操作入力部25で受け付ける操作入力が、携帯画面上の通話開始ボタンに対応する操作入力部25で受け付ける操作入力とは操作方法が異なっている構成としてもよい。例えば、通話開始ボタンについては1回のタッチ操作で操作を検出するのに対し、H/F切替ボタンについては2回のタッチ操作で操作を検出するなどの例が挙げられる。これによれば、携帯画面上に表示されるハンドセット通話の開始を指示するための通話開始ボタンと、H/F切替ボタンとの区別をユーザがさらに行い易くなる。
 なお、H/F切替ボタンは、携帯画面上の通話開始ボタンと類似のデザインとなっている構成としてもよい。例えば、類似のデザインであっても別の方法によってH/F切替ボタンと携帯画面上の通話開始ボタンとが区別可能となっている構成としてもよい。一例としては、H/F切替ボタンと携帯画面上の通話開始ボタンとを車両用タッチパネルの表示領域内で区別しやすいように表示領域を分割することによって、各ボタンの区別をユーザが行い易くなるようにする構成とすればよい。
 また、H/F切替ボタン(つまり、タッチスイッチ)による操作指示が行われた場合の対応動作を予め設定可能とする構成としてもよい。対応動作の設定は、例えば操作入力部25を介してユーザからの操作入力に従って行う構成とすればよい。
 例えば、H/F切替ボタンによる操作指示によりハンズフリー通話を開始するか否かを問い合わせる画面を制御回路29aが車両ディスプレイに表示させることなく、自動的にハンズフリー通話へ切替える設定を行う構成としてもよい。
 他にも、H/F切替ボタンによる操作指示によりハンズフリー通話を開始するか否かを問い合わせる画面を制御回路29aが車両ディスプレイに表示し、ハンズフリー通話への切り替えを要する旨のユーザからの操作入力を受け付けた場合に、自動的にハンズフリー通話に切り替える設定を行う構成としてもよい。なお、ハンズフリー通話への切り替えを要する旨のユーザからの操作入力は、例えば操作入力部25を介して制御回路29cが受け付ける構成とすればよい。
 また、制御回路29aは、ハンズフリー通話への切り替えの制御に関連する処理(以下、ハンズフリー通話切替関連処理)を実行する。ここで、図8を用いて、制御回路29aでのハンズフリー通話切替関連処理のフローについての説明を行う。図8は、制御回路29aでのハンズフリー通話切替関連処理のフローを示すフローチャートである。本フローは、車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 まず、ステップS11では、ステップS1と同様にしてタッチ操作検出判定処理を実行し、ステップS12に移る。ステップS12では、タッチ操作検出判定処理で車両用タッチパネルが押下操作されたと判定した場合、つまり、タッチ操作ありの場合(ステップS12でYES)には、ステップS13に移る。また、タッチ操作検出判定処理で車両用タッチパネルが押下操作されたと判定しなかった場合、つまり、タッチ操作なしの場合(ステップS12でNO)には、ステップS11に戻ってフローを繰り返す。
 ステップS13では、H/F切替ボタン操作判定処理を実行してステップS14に移る。H/F切替ボタン操作判定処理では、操作入力部25から入力される位置情報をもとに、車両用タッチパネルの画面上のユーザによって操作が行われた領域(以下、操作領域)を特定する。操作領域は、位置情報が1点の座標のみの場合には、その座標が示す1点でとしてもよいし、その座標を中心とした所定範囲としてもよい。また、位置情報が複数点の座標を含んでいる場合には、それら複数点の座標が示す範囲を操作領域とすればよい。
 また、H/F切替ボタン操作判定処理では、車両用タッチパネル(詳しくは車両側表示部24)の表示領域上のH/F切替ボタンの画像が表示される領域と上記操作領域とが一致するか否かを判断する。そして、一致すると判断した場合には、車両用タッチパネルの画面上に表示されたH/F切替ボタンが操作されたと判定し、一致しないと判断した場合には、H/F切替ボタンが操作されていないと判定する。よって、操作入力部25は切替指示受付部とも言及する。
 なお、H/F切替ボタンが表示される領域と上記操作領域とが一致するかについては、H/F切替ボタンが表示される領域と上記操作領域との少なくとも一部が重なっている場合に一致すると判断する構成とすればよい。
 ステップS14では、H/F切替ボタンが操作されたと判定した場合(ステップS14でYES)には、ステップS15に移る。また、H/F切替ボタンが操作されていないと判定した場合(ステップS14でNO)には、ステップS11に戻ってフローを繰り返す。
 ステップS15では、ハンズフリー通話切替処理を実行してフローを終了する。ハンズフリー通話切替処理では、BT通信部21から携帯電話機1にハンズフリー通話への切替を要求するハンズフリー切替要求を送信するとともに、車両用装置2でハンズフリー通話を開始する。よって、制御回路29aは車両側通話切替セクションあるいは手段とも言及する。
 続いて、図9を用いて、携帯電話機1での電話の着信時にハンズフリー通話への切り替えを行うまでの携帯電話機1と車両用装置2との間での情報のやり取りについての説明を行う。ここでは、車両用タッチパネルの画面上に表示された通話開始ボタンおよびH/F切替ボタンが操作されるものとして説明を行う。また、図9中の1重線の矢印がBT通信での情報の流れを示しており、2重線の矢印がUSB通信での情報の流れを示している。
 t21~t34までの処理は、車両用装置2が車両用タッチパネルの表示領域のうちの待ち受け画面や着信画面の領域外に独自生成画面を表示させる点を除けば、図6のt1~t14までの処理と同様に行われる。なお、待ち受け画面でなく、通話機能に関するアプリケーション以外のアプリケーションに従った画面であってもよい。
 t34の処理の後、車両用装置2では、携帯電話機1から送信される画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様の通話画面を車両用タッチパネルに表示するとともに、H/F切替ボタンが含まれる独自生成画面の表示を開始する(t35)。
 車両用装置2では、独自生成画面中のH/F切替ボタンがユーザに操作された場合(t36)に、ハンズフリー切替要求をBT通信によって携帯電話機1から車両用装置2へ送信する(t37)。そして、ハンズフリー通話プロファイルで携帯電話機1との間を接続して、車両用装置2をハンズフリー通話に切り替える(t38)。また、ハンズフリー切替要求を受信した携帯電話機1もハンズフリー通話に切り替える(t39)。
 なお、図9の例では、通話が開始された場合にH/F切替ボタンの表示を開始する構成を示したが、必ずしもこれに限らない。例えば携帯電話機1で電話の着信があった場合にH/F切替ボタンの表示を開始する構成としてもよい。この場合、H/F切替ボタンが操作されたと判定した場合に、携帯画面中の通話ボタンの操作がされていなくても通話を開始し、ハンズフリー通話への切り替えを行う構成としてもよい。
 また、携帯電話機1で電話の発信があった場合にH/F切替ボタンの表示を開始する構成としてもよいし、独自生成画面の表示中はH/F切替ボタンを常時表示する構成としてもよい。
 独自生成画面中のH/F切替ボタンは、携帯画面に存在しない、車両用装置2に独自のボタンである。よって、独自生成画面中のH/F切替ボタンが表示されている領域に対するタッチ操作を操作入力部25で検出したことをもって、ハンズフリー通話への切り替えが必要であることを容易に判断できる。従って、本実施形態の構成によっても、車両用装置2側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 また、制御回路29aは、ハンズフリー通話中かハンドセット通話中かを識別する。そして、ハンズフリー通話中にH/F切替ボタンが操作されたと判定した場合には、ハンズフリー通話からハンドセット通話に切り替え、ハンドセット通話中にH/F切替ボタンが操作されたと判定した場合には、ハンドセット通話からハンズフリー通話に切り替える。このように、H/F切替ボタンの表示されている領域に対するタッチ操作を操作入力部25で受け付けるごとに、制御回路29aがハンズフリー通話とハンドセット通話とを交互に切り替える。
 なお、H/F切替ボタンが操作されたか否かの判定は、H/F切替ボタン操作判定処理と同様にして行うものとする。これによれば、ユーザの意図に反してハンズフリー通話となった場合でも、H/F切替ボタンを操作することでハンズフリー通話を容易に中止することができる。
 制御回路29aは、ハンズフリー通話かハンドセット通話かによらず、通話中は独自生成画面中にH/F切替ボタンを表示させ続ける構成とすることが好ましい。制御回路29aは、通話状態通知を携帯電話機1から受信してから、通話が終了したことを示す信号を携帯電話機1から受信するまでを通話中と検出する構成とすればよい。よって、制御回路29aは通話中検出セクションあるいは手段とも言及する。
 これによれば、携帯電話機1のタッチパネル部16に表示されている画面が通話画面から通話画面以外の地図表示等の画面に切り替わり、車両側表示部24の携帯画面も切り替わった場合にも、通話中は切替ボタン画像を表示し続けることが可能になる。この場合、例えば通話が終了したときに、H/F切替ボタンの表示も終了させる構成すればよい。通話が終了したことは、通話が終了したことを示す信号を携帯電話機1から受信したことをもとに制御回路29aが検出する構成とすればよい。
 さらに、制御回路29aは、接続されている携帯電話機1が、通話中にハンズフリー通話とハンドセット通話とを交互に切り替える機能を有していないものであった場合にも、H/F切替ボタンを表示させる構成としてもよい。通話中にハンズフリー通話とハンドセット通話とを交互に切り替える機能を有していない携帯電話機1とは、例えば通話中はハンドセット通話からハンズフリー通話への切り替えしか行うことができないものが挙げられる。これによれば、携帯電話機1の機種に限らず、H/F切替ボタンを表示できる。
 この他、携帯電話機1の機種によっては携帯画面上に通話を切替える機能がなく、機械的なスイッチの操作(例えば通話キーを長押しする)により通話の切り替えを行うものもある。このような携帯電話機が接続されている場合でも、携帯電話機1の機種に限らず、H/F切替ボタンを表示できる。
 また、車両用装置2が複数の携帯電話機1と通信によって接続できるものであって、複数の携帯電話機1と接続可能な状態にある(つまり、複数の携帯電話機1とハンズフリー通話を行うためのハンズフリー通信方法によって接続されている)場合には、以下のような構成としてもよい。ここでは、携帯電話機1と車両用装置2とが、ハンズフリー通話への切り替えの制御に関連する情報の送受信とターミナルモード接続中の画像データや位置情報の送受信との両方をBT通信によって行う場合を例に挙げて説明を行う。
 車両用装置2と複数の携帯電話機1とは、複数の機器と同時に同じプロファイルで接続されるマルチポイント接続がされているものとする。また、車両用装置2と各携帯電話機1とのBT通信のペアリング処理時に、各携帯電話機1を特定するための情報(例えば機器IDとする)と各携帯電話機1の機種情報とが制御回路29aで登録されるものとする。なお、機種情報の他にも例えば携帯電話機1のユーザ名を登録する構成としてもよい。
 例えば、制御回路29aが、車両側表示部24に携帯画面が表示されている(つまり、ターミナルモードで接続中の)携帯電話機1についてのみ、H/F切替ボタンを表示させ、ターミナルモードで接続されていない携帯電話機1については、H/F切替ボタンを表示させない構成としてもよい。なお、制御回路29aでの個々の携帯電話機1の特定は、ペアリング処理時に登録した機器IDをもとに行う構成とすればよい。
 通常、ターミナルモードで接続中の携帯電話機1は、車両の運転手の携帯電話機1である可能性が高い。よって、以上のような構成とすることで、運転手の携帯電話機1についてのH/F切替ボタンを優先的に表示することが可能になる。また、これにより、車両側表示部24上のH/F切替ボタンの領域に対してタッチ操作を行うだけで、携帯電話機1の機器IDを照合するなどの運転手の携帯電話機1を判別する特別な手段を設けることなく、簡易的に運転手の携帯電話機1におけるハンズフリー通話を開始することが可能となる。
 なお、ターミナルモードで接続中の携帯電話機1についてH/F切替ボタンを表示させる場合に、H/F切替ボタンに加え、その携帯電話機1の機種名やユーザ名を表示させる構成としてもよい。携帯電話機1の機種名やユーザ名については、ペアリング処理時に登録した機種名やユーザ名を用いる構成とすればよい。
 ターミナルモードで接続中でない携帯電話機1でのハンズフリー通話中は、ターミナルモードで接続中の携帯電話機1との音声通信を切断ないしミュート処理しても良い。これにより、ハンズフリー通話の音声とハンズフリー通話以外のターミナルモードで利用中のアプリケーションの音声(音楽や動画などの音声)とが混在(ミキシング)されることを防止できる。
 また、マルチポイント接続されている携帯電話機1については、車両側表示部24に携帯画面が表示されていない(つまり、ターミナルモードで接続中でない)携帯電話機1についても、制御回路29aがH/F切替ボタンを各々表示させる構成としてもよい。なお、制御回路29aでの個々の携帯電話機1の特定は、ペアリング処理時に登録した機器IDをもとに行う構成とすればよい。
 この場合、各携帯電話機1についてのH/F切替ボタンの表示される領域の位置情報と携帯電話機1の機器IDとを紐付けすることにより、どの携帯電話機1についてのH/F切替ボタンが操作されたかを制御回路29aで特定可能な構成とすればよい。そして、H
/F切替ボタンが操作されるごとに、操作されたと判定したH/F切替ボタンに対応する携帯電話機1とのハンズフリー通話とハンドセット通話とを交互に切り替える構成とすればよい。操作されたH/F切替ボタンの判定については、H/F切替ボタン操作判定処理と同様にして制御回路29aで行う構成とすればよい。
 マルチポイント接続されている各携帯電話機1についてH/F切替ボタンを各々表示させる態様としては、図10(a)に示すように、独自生成画面中に各携帯電話機1についてのH/F切替ボタンを同時に表示させる態様がある。なお、図10(a)のCが携帯画面を示し、Dが独自生成画面を示し、E1およびE2がH/F切替ボタンを示している。また、Fが携帯画面中の通話開始ボタン、Gが携帯画面中の通話終了ボタンを示している。ここでは、2台の携帯電話機1aと携帯電話機1bとが車両用装置2とマルチポイント接続されており、E1が携帯電話機1aについてのH/F切替ボタン、E2が携帯電話機1bについてのH/F切替ボタンであるものとする。
 また、各携帯電話機1についてのH/F切替ボタンを表示させる場合、H/F切替ボタンに加え、その携帯電話機1の機種名やユーザ名を前述したのと同様にして表示させる構成としてもよい。さらに、各携帯電話機1についてのH/F切替ボタンのうちの1つが操作された場合には、操作された以外のH/F切替ボタンのアイコン表示を、ハンズフリー通話への切り替えを禁止する旨のアイコン表示に切り替える構成としてもよい。また、このとき、操作された以外のH/F切替ボタンの操作を受け付けないようにする構成としてもよい。
 なお、独自生成画面中に各携帯電話機1についてのH/F切替ボタンを同時に表示させる場合には、独自生成画面中にH/F切替ボタンを複数表示させる構成に限らず、各携帯電話機1についてのH/F切替ボタンごとに独自生成画面を分割して表示させる構成(図10(b)参照)としてもよい。図10(b)は、各携帯電話機1についてのH/F切替ボタンごとに独自生成画面が分割されていることを除けば、図10(a)と同様であるものとする。
 他にも、マルチポイント接続されている各携帯電話機1についてH/F切替ボタンを各々表示させる態様としては、独自生成画面中に各携帯電話機1についてのH/F切替ボタンを例えば1つずつ順番に表示させる態様がある。
 この場合には、各携帯電話機1についてのH/F切替ボタンを切り替えるためのボタン(以下、携帯切替ボタン)を独自生成画面中に表示させる構成(図10(c)参照)とすればよい。なお、図10(c)のCが携帯画面を示し、Dが独自生成画面を示し、EがH/F切替ボタンを示しており、Hが携帯切替ボタンを示している。また、Fが携帯画面中の通話開始ボタン、Gが携帯画面中の通話終了ボタンを示している。そして、この携帯切替ボタンの領域に対しての操作を検出するごとに、各携帯電話機1についてのH/F切替ボタンを順番に切り替えて表示させる構成とすればよい。
 本実施形態では、ハンズフリー通話とハンドセット通話との切り替えを指示する旨のユーザからの操作入力を受け付ける操作入力部25として、車両側表示部24に表示する画像と一体になったタッチスイッチ(H/F切替ボタンの画像により生成されるタッチスイッチ)を用いる構成を示したが、必ずしもこれに限らない。
 例えば、上記操作入力を受け付ける操作入力部25として、メカニカルな(機械的な)スイッチを用いる構成としてもよい。他にも、上記操作入力を受け付ける操作入力部25として、ユーザの発話した音声コマンドの音声認識を行うことによって操作入力を受け付ける周知の音声認識装置を用いる構成としてもよい。さらに、上記操作入力を受け付ける操作入力部25として、ユーザの所定のジェスチャー操作を検出する静電容量式パネルなどの近接スイッチやカメラなどの周知の装置を用いる構成としてもよい。なお、上述のメカニカルなスイッチや音声認識装置や近接スイッチやカメラなどは操作入力装置とも言及する。
 これによれば、H/F切替ボタンを車両側表示部24上に表示しなくても、ハンズフリー通話への切り替えを指示する旨のユーザからの操作入力を受け付けることが可能になるので、車両側表示部24の表示領域を、携帯画面の表示に最大限割り当てることが可能になる。
 本実施形態では、H/F切替ボタンに対する操作ごとにハンズフリー通話とハンドセット通話とを交互に切り替えることが可能な構成を示したが、必ずしもこれに限らない。例えば、H/F切替ボタンに対する操作によって、ハンドセット通話からハンズフリー通話への切り替えだけが可能な構成としてもよい。この場合には、通話終了時にハンズフリー通話プロトコルを終了する構成とすればよい。
 また、H/F切替ボタンとはアイコンのデザインが異なる通話開始ボタンを独自生成画面中に表示させる構成としてもよい。通話開始ボタンについては、ハンドセット通話からハンズフリー通話への切り替えを指示するためだけのボタンとして、ハンズフリー通話とハンドセット通話とを交互に切り替えるH/F切替ボタンの代わりに表示させる構成としてもよいし、当該H/F切替ボタンと同時に表示させる構成としてもよい。他にも、当該H/F切替ボタンと同じ機能のボタンであって、アイコンのデザインだけが異なるものとする構成としてもよい。
 (実施形態3)
 以下では、実施形態3について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態3における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態3は、車両用装置2の制御回路29での処理が異なっている点を除けば、実施形態1と同様の構成である。
 具体的には、実施形態3の制御回路29(以下、便宜上、制御回路29bとする)は、携帯電話機1から車両側通信部23で受信した携帯由来画像データの入力を受け付けた場合に、その携帯由来画像データに従った画像を生成して車両側表示部24に出力し、その携帯由来画像データに従った携帯画面を車両側表示部24の少なくとも一部の領域に表示させる。
 さらに、制御回路29bは、接続されている携帯電話機1が着信状態となった場合に、携帯画面の表示に切り替えて、自装置で独自に生成した独自生成画面を車両側表示部24に表示させる。制御回路29bは、この独自生成画面に、ハンズフリー通話への切り替えを指示するためのボタンのアイコン(以下、H/F切替ボタン)も表示させる。
 また、独自生成画面は、図15に示すように、H/F切替ボタンが表示される領域以外については、携帯画面を透過表示する構成としてもよい。なお、図15中のCが携帯画面、Dが独自生成画面、EがH/F切替ボタンを示している。また、H/F切替ボタンは実施形態1と同様に携帯画面上の通話開始ボタンと異なるデザインとしても良いし、類似のデザインとしてもよい。
 制御回路29bは、携帯電話機1が着信状態となったことを、携帯電話機1から前述の着信状態通知を受信したことをもとに検出する構成とすればよい。よって、制御回路29bは車両側生成画面表示セクションあるいは手段および着信状態検出セクションあるいは手段とも言及する。
 また、制御回路29bは、実施形態1および2のハンズフリー通話切替関連処理と同様にして、独自生成画面上のH/F切替ボタンが操作されたか否かを判定し、H/F切替ボタンが操作されたと判定した場合にハンズフリー通話を開始する。よって、制御回路29bはハンズフリー切替操作検出セクションあるいは手段とも言及する。また、H/F切替ボタンが含まれる独自生成画面はハンズフリー切替画面とも言及する。
 続いて、図11を用いて、携帯電話機1での電話の着信時にハンズフリー通話への切り替えを行ってからハンドセット通話に切り替えを行うまでの携帯電話機1と車両用装置2との間での情報のやり取りについての説明を行う。なお、図11中の1重線の矢印がBT通信での情報の流れを示しており、2重線の矢印がUSB通信での情報の流れを示している。
 ここでは、車両用タッチパネルの画面上に表示されたH/F切替ボタンおよび後述のH/S切替ボタンが操作されるものとして説明を行う。また、携帯電話機1は、電話の着信時に、通話機能に関するアプリケーション以外のアプリケーションに従った画面(以下、アプリ画面)を表示していた場合には、通話の開始後に着信画面からアプリ画面に復帰するものとして説明を行う。アプリ画面には、例えばナビゲーション機能における地図画面などがある。
 まず、携帯電話機1のタッチパネル部16にアプリ画面を表示している場合(t41)には、このアプリ画面の画像データをUSB通信によって携帯電話機1から車両用装置2へ送信する(t42)。車両用装置2では、この画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様のアプリ画面を車両用タッチパネルに表示する(t43)。
 続いて、携帯電話機1で電話の着信があった場合(t44)には、着信状態通知をBT通信によって携帯電話機1から車両用装置2へ送信する(t45)。携帯電話機1で電話の着信があった場合には、携帯電話機1のタッチパネル部16に着信画面を表示し(t46)、この着信画面の画像データをUSB通信によって携帯電話機1から車両用装置2へ送信する(t47)。
 車両用装置2では、この画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様の着信画面を車両用タッチパネルに表示する(t48)。また、車両用装置2では、着信状態通知を受信したことをもとに、着信画面(つまり、携帯画面)の表示から、H/F切替ボタンが含まれる独自生成画面の表示に切り替える(t49)。
 ここで、図12を用いて、車両用タッチパネルの表示の切り替わりの一例についての説明を行う。図12のC1が携帯画面としてのアプリ画面を示しており、C2が携帯画面としての着信画面を示しており、Dが独自生成画面を示している。また、I、J、Kが車両用タッチパネルの表示領域を示している。なお、ここでは、携帯画面の表示中も携帯画面の周囲に独自生成画面が表示される場合を例に挙げて説明を行う。
 まず、携帯電話機1が電話を着信しておらず、アプリ画面を表示している場合には、図12のIに示すように、車両用装置2の車両用タッチパネルにもアプリ画面が表示されることになる。続いて、携帯電話機1で電話の着信があり、着信画面を表示した場合には、図12のJに示すように、車両用装置2の車両用タッチパネルにも着信画面が表示されることになる。その後、車両用装置2では、着信状態通知を受信したことをもとに、着信画面に替えて、H/F切替ボタンが含まれる独自生成画面(以下、ハンズフリー切替画面)を、車両用タッチパネルの表示領域の全域にわたって表示する(図12のK参照)。
 図11に戻って、ハンズフリー切替画面中のH/F切替ボタンがユーザに操作された場合(t50)に、ハンズフリー切替要求をBT通信によって携帯電話機1から車両用装置2へ送信する(t51)。そして、ハンズフリー通話プロファイルで携帯電話機1との間を接続して、車両用装置2をハンズフリー通話に切り替える(t52)。また、ハンズフリー切替要求を受信した携帯電話機1もハンズフリー通話に切り替える(t53)。よって、制御回路29bは車両側通話切替セクションあるいは手段とも言及する。
 続いて、携帯電話機1は、ハンズフリー通話が開始されると、着信時に実行中だったアプリケーションの画面(つまり、アプリ画面)の表示を再開(t54)し、このアプリ画面の画像データをUSB通信によって携帯電話機1から車両用装置2へ送信する(t55)。車両用装置2では、この画像データをもとに、携帯電話機1のタッチパネル部16に表示されるのと同様のアプリ画面を車両用タッチパネルに表示することで、アプリ画面の表示を再開する(t56)。よって、制御回路29bは携帯画面切替セクションあるいは手段とも言及する。
 これによれば、アプリ画面の表示に戻すことで、ハンズフリー通話中であっても、通話以外の任意のアプリを作動させることが可能となる。
 なお、t54で携帯電話機1が着信画面を閉じてアプリ画面を再開する方法は、自動で再開する方法と手動で再開する方法がある。自動で再開する方法としては、携帯電話機1が車両用装置2から通話開始要求又はハンズフリー切替要求を受信したことに基づいて、自動で着信画面を閉じてアプリ画面を再開する方法がある。また、手動で再開する方法としては、ユーザーが携帯電話機1のタッチパネル部16への操作入力によって、着信画面を閉じてアプリ画面を起動する方法がある。
 また、車両用装置2は、表示を再開したアプリ画面に、ハンドセット通話への切り替えを指示するためのボタンのアイコン(以下、H/S切替ボタン)を重畳表示させる。詳しくは、制御回路29bが、H/S切替ボタンの画像を生成してアプリ画面に重畳して表示させる。よって、制御回路29bは重畳表示セクションあるいは手段とも言及する。
 なお、H/S切替ボタンは、表示を再開したアプリ画面に重畳表示させる構成に限らず、アプリ画面の周囲に表示させる独自生成画面中に表示させる構成としてもよい。また、ハンズフリー通話開始時にハンズフリー切替画面からアプリ画面へ切り替えない構成とする場合には、このハンズフリー切替画面中にH/S切替ボタンを表示させる構成としてもよい。
 車両用装置2では、表示されたH/S切替ボタンが操作された場合(t58)に、ハンドセット切替要求をBT通信によって車両用装置2から携帯電話機1へ送信する(t59)。車両用装置2の制御回路29bは、操作入力部25から入力される位置情報をもとに特定した操作領域と、H/S切替ボタンが表示されている領域とが一致するか否かを判断し、一致すると判断した場合に、H/S切替ボタンが操作されたことを検出するものとする。よって、制御回路29bはハンドセット切替操作検出セクションあるいは手段とも言及する。
 続いて、ハンズフリー通話プロファイルを終了して、車両用装置2をハンドセット通話に切り替える(t60)。また、ハンドセット切替要求を受信した携帯電話機1もハンドセット通話に切り替える(t61)。
 なお、図11の例では、携帯電話機1が着信状態となったことを制御回路29bで検出した場合に、携帯画面に替えてハンズフリー切替画面を表示する構成を示したが、必ずしもこれに限らない。例えば通話状態となったことを制御回路29bで検出した場合に、携帯画面に替えてハンズフリー切替画面を表示する構成としてもよい。携帯電話機1が通話状態となったことは、その携帯電話機1から通話状態通知を受信したことをもとにして制御回路29bが検出する構成とすればよい。よって、制御回路29bは通話状態検出セクションあるいは手段とも言及する。
 電話の着信時や通話開始時に携帯画面から切り替えられる独自生成画面中のH/F切替ボタンは、携帯画面に存在しない、車両用装置2に独自のボタンである。よって、独自生成画面中のH/F切替ボタンが表示されている領域に対するタッチ操作を操作入力部25で検出したことをもって、ハンズフリー通話への切り替えが必要であることを容易に判断できる。従って、本実施形態の構成によっても、車両用装置2側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行うことが可能になる。
 さらに、本実施形態の構成によれば、ハンズフリー通話への切り替えが行われた場合にも、車両側表示部24の画面に表示させたH/S切替ボタンを操作すれば、ハンドセット通話へ切り替えることができる。よって、ユーザの意図に反してハンズフリー通話となった場合にも、ハンズフリー通話を容易に中止することができる。
 また、車両用装置2が複数の携帯電話機1と通信によって接続できるものであって、複数の携帯電話機1とハンズフリー通話を行うためのハンズフリー通信方法によって接続される場合には、以下のような構成としてもよい。ここでは、携帯電話機1と車両用装置2とが、ハンズフリー通話への切り替えの制御に関連する情報の送受信とターミナルモード接続中の画像データや位置情報の送受信との両方をBT通信によって行う場合を例に挙げて説明を行う。
 車両用装置2と複数の携帯電話機1とは、複数の機器と同時に同じプロファイルで接続されるマルチポイント接続がされているものとする。また、車両用装置2と各携帯電話機1とのBT通信のペアリング処理時に、各携帯電話機1を特定するための情報(例えば機器IDとする)と各携帯電話機1の機種情報とが制御回路29bで登録されるものとする。なお、機種情報の他にも例えば携帯電話機1のユーザ名を登録する構成としてもよい。
 例えば、制御回路29bが、車両側表示部24に携帯画面が表示されている(つまり、ターミナルモードで接続中の)携帯電話機1が着信状態や通話状態となったことを検出した場合にのみ、ハンズフリー切替画面への表示の切り替えを行う構成としてもよい。なお、制御回路29bでの個々の携帯電話機1および個々の携帯電話機1の信号(機器IDが付加されて送信されるものとする)の特定は、ペアリング処理時に登録した機器IDをもとに行う構成とすればよい。
 前述したように、ターミナルモードで接続中の携帯電話機1は、車両の運転手の携帯電話機1である可能性が高い。よって、以上のような構成とすることで、車両の運転手の携帯電話機1である可能性が高い携帯電話機1以外の携帯電話機1や、ターミナルモードで接続中でない運転手の携帯電話機1でのハンズフリー通話を制限することができる。
 なお、ターミナルモードで接続中でない携帯電話機1が着信状態や通話状態となったことを検出した場合には、制御回路29bがその携帯電話機1を特定し、その携帯電話機1の機種名やユーザ名を、携帯画面に重畳表示させたり、独自生成画面中に表示させたりする構成とすればよい。
 個々の携帯電話機1の特定は、前述したように、ペアリング処理時に登録した機器IDをもとに制御回路29bで行う構成とすればよい。よって、制御回路29bは特定セクションあるいは手段とも言及する。また、携帯電話機1の機種名やユーザ名については、ペアリング処理時に登録した機種名やユーザ名を用いる構成とすればよい。なお、表示以外にも、制御回路29bが車両側音声出力部27から音声出力させることで通知を行わせる構成としてもよい。よって、制御回路29bは通知セクションあるいは手段とも言及する。
 また、マルチポイント接続されている携帯電話機1については、車両側表示部24に携帯画面が表示されていない(つまり、ターミナルモードで接続中でない)携帯電話機1についても、H/F切替ボタンが含まれる独自生成画面への表示の切り替えを行う構成としてもよい。なお、制御回路29bでの個々の携帯電話機1の特定は、ペアリング処理時に登録した機器IDをもとに行う構成とすればよい。
 これによれば、車両の運転手の携帯電話機1である可能性が高い携帯電話機1以外の携帯電話機1や、車両側表示部24に携帯画面が表示されていない運転手の携帯電話機1でもハンズフリー通話を行うことが可能になる。
 また、本実施形態では、接続中の携帯電話機1が着信状態や通話状態となったことを検出した場合に、携帯画面からハンズフリー切替画面への表示の切り替えを行う構成を示したが、必ずしもこれに限らない。例えば、接続中の携帯電話機1が着信状態や通話状態となったことを検出した場合に、携帯画面にハンズフリー切替画面を重畳表示させる構成(変形例2)としてもよい。
 変形例2においては、接続中の携帯電話機1が着信状態や通話状態となったことを制御回路29bで検出した場合に、H/F切替ボタンを含む独自生成画面(つまり、ハンズフリー切替画面)を制御回路29bが生成し、携帯画面に重畳表示させるものとする。携帯画面にハンズフリー切替画面を重畳表示させる場合には、携帯画面の一部に重畳表示させる、所謂ポップアップ表示を行わせることが好ましい。これによれば、携帯画面とハンズフリー切替画面とを車両側表示部24上に同時に表示することができる。
 なお、変形例2は、携帯画面からハンズフリー切替画面への表示の切り替えを行う代わりに、携帯画面にハンズフリー切替画面を重畳表示させる点を除けば、実施形態3と同様の構成であるものとする。
 また、制御回路29bは、携帯画面の一部に重畳表示させるハンズフリー切替画面を、当該ハンズフリー切替画面に対するユーザの操作に従って移動や拡大縮小させる。一例としては、ハンズフリー切替画面に対して、タッチ操作を行ったまま操作位置をスライドさせるスライド操作が行われたことを検出した場合に、スライド操作が行われた方向にハンズフリー切替画面を移動させる。スライド操作の検出は、操作入力部25を介して制御回路29bが行うものとする。
 他にも、ハンズフリー切替画面に対して、2箇所のタッチ操作を行ったまま各操作位置の間隔を狭める方向にスライドさせるピンチイン操作が行われたことを検出した場合に、ハンズフリー切替画面を縮小させる。また、ハンズフリー切替画面に対して、2箇所のタッチ操作を行ったまま各操作位置の間隔を拡げる方向にスライドさせるピンチアウト操作が行われたことを検出した場合に、ハンズフリー切替画面を拡大させる。ピンチイン操作およびピンチアウト操作の検出についても、操作入力部25を介して制御回路29bが行うものとする。
 これによれば、ハンズフリー切替画面を車両側表示部24の表示領域上の任意の場所に移動したり、縮小したりすることによって、携帯画面の視認性を向上させることが可能になる。
 (実施形態4)
 以下では、実施形態4について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態4における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態4は、車両用装置2の制御回路29での処理が異なっている点を除けば、実施形態1と同様の構成である。
 具体的には、実施形態4の制御回路29(以下、便宜上、制御回路29cとする)は、接続されている携帯電話機1が通話状態となった場合に、ハンズフリー通話への切り替えの要否をユーザに問い合わせ、切り替えを必要とする旨を指示する操作入力(以下、切替指示操作入力)を操作入力部25で受け付けたときにハンズフリー通話へ切り替える。
 なお、制御回路29cは、携帯電話機1のタッチパネル部16に表示される通話開始ボタンの操作によって通話状態となったか、車両用タッチパネルの携帯画面中の通話開始ボタンの操作によって通話状態となったかは区別せずに処理を行うものとする。
 制御回路29cは、携帯電話機1が通話状態となったことを、携帯電話機1から前述の通話状態通知を受信したことをもとに検出する構成とすればよい。よって、制御回路29cは通話状態検出セクションあるいは手段とも言及する。また、制御回路29cは、ハンズフリー通話への切り替えの要否の問い合わせを、車両用タッチパネルへの表示によって行ってもよいし、車両側音声出力部27からの音声出力によって行ってもよい。
 なお、操作入力部25は、タッチ操作による切替指示操作入力を受け付けるタッチスイッチであってもよいし、音声コマンドによる切替指示操作入力を受け付ける音声認識装置であってもよい。
 また、制御回路29cは、ハンズフリー通話への切り替えの制御に関連する処理(以下、ハンズフリー通話切替関連処理)を実行する。ここで、図13を用いて、制御回路29cでのハンズフリー通話切替関連処理のフローについての説明を行う。図13は、制御回路29cでのハンズフリー通話切替関連処理のフローを示すフローチャートである。本フローは、車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 まず、ステップS31では、ターミナルモードで接続中の携帯電話機1から通話状態通知を受信した場合に、通話状態を検出したものとして(ステップS31でYES)、ステップS32に移る。また、ターミナルモードで接続中の携帯電話機1から通話状態通知を受信していない場合には、通話状態を検出していないものとして(ステップS31でNO)、ステップS31のフローを繰り返す。
 ステップS32では、要否問い合わせ処理を行って、ステップS33に移る。要否問い合わせ処理では、ハンズフリー通話への切り替えの要否をユーザに問い合わせる。一例としては、ハンズフリー通話への切り替えの要否をそれぞれ選択するための2つのボタンを、車両用タッチパネルの携帯画面に重畳表示させる。例えば2つのボタンは、切り替えを必要とする「必要ボタン」と、切り替えを不要とする「不要ボタン」とする。なお、自装置で独自に生成した独自生成画面中にこれらのボタンを表示させる構成としてもよい。
 ステップS33では、ハンズフリー通話への切り替えの要否を判定する。例えば、上述した「必要ボタン」の表示される領域に対するタッチ操作を操作入力部25で検出した場合に、切り替え必要と判定する。一方、上述した「不要ボタン」の表示される領域に対するタッチ操作を操作入力部25で検出した場合に、切り替え不要と判定する。そして、切り替え必要と判定した場合(ステップS33でYES)には、ステップS34に移る。また、切り替え不要と判定した場合(ステップS33でNO)には、フローを終了する。
 ステップS34では、ハンズフリー通話切替処理を実行してフローを終了する。ハンズフリー通話切替処理では、BT通信部21から携帯電話機1にハンズフリー通話への切替を要求するハンズフリー切替要求を送信し、ハンズフリー通話プロファイルで携帯電話機1との間を接続して、車両用装置2でハンズフリー通話を開始する。よって、制御回路29cは車両側通話切替セクションあるいは手段とも言及する。
 また、車両用装置2が複数の携帯電話機1と通信によって接続できるものであって、複数の携帯電話機1とハンズフリー通話を行うためのハンズフリー通信方法によって接続されている場合には、以下のような構成としてもよい。ここでは、携帯電話機1と車両用装置2とが、ハンズフリー通話への切り替えの制御に関連する情報の送受信とターミナルモード接続中の画像データや位置情報の送受信との両方をBT通信によって行う場合を例に挙げて説明を行う。
 車両用装置2と複数の携帯電話機1とは、複数の機器と同時に同じプロファイルで接続されるマルチポイント接続がされているものとする。また、車両用装置2と各携帯電話機1とのBT通信のペアリング処理時に、各携帯電話機1を特定するための情報(例えば機器IDとする)と各携帯電話機1の機種情報とが制御回路29cで登録されるものとする。なお、機種情報の他にも例えば携帯電話機1のユーザ名を登録する構成としてもよい。
 例えば、制御回路29cが、車両側表示部24に携帯画面が表示されている(つまり、ターミナルモードで接続中の)携帯電話機1が通話状態となったことを検出した場合にのみ、ハンズフリー通話への切り替えを可能とする構成としてもよい。なお、制御回路29cでの個々の携帯電話機1および個々の携帯電話機1の信号(機器IDが付加されて送信されるものとする)の特定は、ペアリング処理時に登録した機器IDをもとに行う構成とすればよい。
 詳しくは、制御回路29cが、ターミナルモードで接続中の携帯電話機1が通話状態となったことを検出した場合にのみ、ハンズフリー通話の要否を問い合わせる。そして、切り替えを必要とする旨を指示する操作入力を受け付けたときに、ターミナルモードで接続中の携帯電話機1についてのハンズフリー通話を開始する。なお、ターミナルモードで接続中でない携帯電話機1が通話状態となったことを検出した場合には、その携帯電話機1についてのハンズフリー通話は許可しないものとする。
 前述したように、ターミナルモードで接続中の携帯電話機1は、車両の運転手の携帯電話機1である可能性が高い。よって、以上のような構成とすることで、車両の運転手の携帯電話機1である可能性が高い携帯電話機1以外の携帯電話機1や、ターミナルモードで接続中でない運転手の携帯電話機1でのハンズフリー通話を制限することができる。
 また、マルチポイント接続されている携帯電話機1については、車両側表示部24に携帯画面が表示されていない(つまり、ターミナルモードで接続中でない)携帯電話機1についても、ハンズフリー通話への切り替えを可能とする構成としてもよい。なお、制御回路29cでの個々の携帯電話機1の特定は、ペアリング処理時に登録した機器IDをもとに行う構成とすればよい。
 詳しくは、制御回路29cが、ターミナルモードで接続中でない携帯電話機1が通話状態となったことを検出した場合にも、ハンズフリー通話の要否を問い合わせる。そして、切り替えを必要とする旨を指示する操作入力を操作入力部25で受け付けたときに、通話状態となったことを検出した携帯電話機1についてのハンズフリー通話を開始する。
 なお、ハンズフリー通話の要否の問い合わせ、および切り替えを必要とする旨を指示する操作入力の受け付けについては、前述したのと同様にして行う構成とすればよい。よって、制御回路29cは問い合わせセクションあるいは手段とも言及し、操作入力部25は要否指示受付部とも言及する。
 これによれば、車両の運転手の携帯電話機1である可能性が高い携帯電話機1以外の携帯電話機1や、車両側表示部24に携帯画面が表示されていない運転手の携帯電話機1でもハンズフリー通話を行うことが可能になる。
 なお、ハンズフリー通話を開始した場合に、車両用タッチパネルの画面にハンドセット通話への切り替えを指示するためのボタンのアイコン(以下、H/S切替ボタン)を重畳表示させ、H/S切替ボタンが操作されたときにハンズフリー通話からハンドセット通話に切り替える構成としてもよい。
 本実施形態では、接続されている携帯電話機1が通話状態となった場合に、ハンズフリー通話への切り替えの要否をユーザに問い合わせる構成を示したが、必ずしもこれに限らない。例えば、接続されている携帯電話機1が通話状態となった場合に、ハンズフリー通話への切り替えの要否をユーザに問い合わせず、当該携帯電話機1についてのハンズフリー通話を自動的に開始する構成としてもよい。
 また、本実施形態では、接続されている携帯電話機1が通話状態となった場合の対応動作を予め設定可能とする構成としてもよい。対応動作の設定は、例えば操作入力部25を介してユーザからの操作入力に従って行う構成とすればよい。
 例えば、H/F切替ボタンによる操作指示によりハンズフリー通話を開始するか否かを問い合わせる画面を制御回路29cが車両ディスプレイに表示させることなく、自動的にハンズフリー通話へ切替える設定を行う構成としてもよい。
 他にも、H/F切替ボタンによる操作指示によりハンズフリー通話を開始するか否かを問い合わせる画面を制御回路29cが車両ディスプレイに表示し、ハンズフリー通話への切り替えを要する旨のユーザからの操作入力を受け付けた場合に、自動的にハンズフリー通話に切り替える設定を行う構成としてもよい。なお、ハンズフリー通話への切り替えを要する旨のユーザからの操作入力は、例えば操作入力部25を介して制御回路29cが受け付ける構成とすればよい。
 (実施形態5)
 前述の実施形態1~4では、車両用装置2側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行う構成を示したが、必ずしもこれに限らない。例えば、次の実施形態5のように、携帯電話機1側でハンズフリー通話への切り替えの必要性を判断してハンズフリー通話に切り替えを行う構成としてもよい。
 以下では、実施形態5について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態5における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態5は、車両用装置2の制御回路29での処理および携帯電話機1の主制御部19での処理が異なっている点を除けば、実施形態1と同様の構成である。
 具体的には、実施形態5の制御回路29(以下、便宜上、制御回路29dとする)では、通話開始ボタン操作判定処理を行わず、車両用タッチパネルの携帯画面上の通話開始ボタンが操作された場合には、その操作位置に対応する操作対象領域の座標を示す信号を携帯電話機1に送信する。
 実施形態5の携帯電話機1の主制御部19(以下、便宜上、主制御部19aとする)は、ハンズフリー通話への切り替えの制御に関連する処理(以下、ハンズフリー通話切替関連処理)を実行する。ここで、図14を用いて、主制御部19aでのハンズフリー通話切替関連処理のフローについての説明を行う。図14は、主制御部19aでのハンズフリー通話切替関連処理のフローを示すフローチャートである。本フローは、携帯電話機1が車両用装置2とターミナルモード接続されたときに開始される。
 まず、ステップS41では、携帯電話機1が通話状態となった場合(ステップS41でYES)、ステップS42に移る。また、携帯電話機1が通話状態となっていない場合(ステップS41でNO)には、ステップS41のフローを繰り返す。
 ステップS42では、操作入力識別処理を行って、ステップS43に移る。操作入力識別処理では、自機器に対するユーザの操作入力によって通話状態となったのか、車両用装置2の車両側表示部24に対するユーザの押下操作をもとに通話状態となったのかを識別する。よって、主制御部19aは識別セクションあるいは手段とも言及する。
 詳しくは、タッチパネル部16の画面中の通話開始ボタンが操作されたとの判断に用いた位置情報(操作が検出された位置の位置情報)が、操作検出部15から入力された位置情報であった場合には、自機器に対するユーザの操作入力によって通話状態となったと識別する。一方、携帯側通信部13(例えばUSB通信部12)から入力された位置情報(車両用装置2から入力された位置情報)であった場合には、車両用装置2の車両側表示部24に対するユーザの押下操作をもとに通話状態となったと識別する。
 ステップS43では、自機器に対するユーザの操作入力によって通話状態となった(つまり、自機器入力)と識別した場合(ステップS43でYES)には、フローを終了する。また、車両用装置2の車両側表示部24に対するユーザの押下操作をもとに通話状態となったと識別した場合(ステップS43でNO)には、ステップS44に移る。
 ステップS44では、ハンズフリー通話切替処理を実行してフローを終了する。ハンズフリー通話切替処理では、BT通信部11から車両用装置2にハンズフリー通話への切替を要求するハンズフリー切替要求を送信し、携帯電話機1でハンズフリー通話を開始する。よって、主制御部19aは携帯側通話切替セクションあるいは手段とも言及する。ハンズフリー切替要求を受信した車両用装置2でも、この要求に従ってハンズフリー通話が開始される。
 なお、制御回路29a・29b・29cは、ハンズフリー通話からハンドセット通話に切り替える場合に、ハンズフリー通話プロトコルを終了して切り替える構成としてもよい。また、ハンズフリー通話プロトコルを終了させずに、音声を入出力する経路(音声経路)を切り替えることでハンズフリー通話からハンドセット通話に切り替える構成としてもよい。
 詳しくは、ハンズフリー通話プロトコルを終了させずに切り替える場合には、車両側音声入力部26に入力された音声データを携帯電話機1に送信していた経路を、送信しない経路にスイッチ回路等の物理的なスイッチによって切り替える。また、携帯電話機1から受信した音声データを車両側音声出力部27から出力していた経路を、出力しない経路にスイッチ回路等の物理的なスイッチによって切り替える。これにより、携帯電話機1を中継して公衆回線と車両用装置2とで音声データをやり取りしていた音声経路を、携帯電話機1と公衆回線とで音声データをやり取りする音声経路に切り替える。つまり、携帯側音声入力部17に入力された音声データを公衆回線に送信し、公衆回線から受信した音声データを携帯側音声出力部18から出力する音声経路に切り替える。
 また、ステップS44では、ハンズフリー切替要求を携帯電話機1から車両用装置2へ送信せずに、通話音声信号を送信する構成としてもよい。この場合には、車両用装置2(詳しくは制御回路29)が、通話音声信号(通話音声データ)を受信したことに基づいてハンズフリー通話を開始する構成とすればよい。
 (実施形態6)
 前述の実施形態1では、車両用タッチパネルのタッチ操作から所定時間以内の通話開始をハンズフリー通話への切り替えの判断条件としていたが、本実施形態(以下、実施形態6)のように、携帯電話機1から通話音声データを受信したか否かも判断条件とする構成としてもよい。
 以下では、実施形態6について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態6における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態6は、車両用装置2の制御回路29でのハンズフリー通話切替関連処理の一部が異なっている点を除けば、実施形態1と同様の構成である。
 ここで、図16に示すフローチャートを用いて、実施形態6における制御回路29(以下、便宜上、制御回路29dとする)でのハンズフリー通話切替関連処理について説明を行う。本フローは、例えば車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 まず、ステップS51では、携帯電話機1から音声データを受信したか否かを判定する。音声データを受信したことは、車両側通信部23が携帯電話機1から受信した音声データが制御回路29dに入力されたことをもとに判定する構成とすればよい。そして、音声データを受信したと判定した場合(ステップS51でYES)には、ステップS52に移る。また、音声データを受信したと判定しなかった場合(ステップS51でNO)には、ステップS55に移る。
 ステップS52では、携帯電話機1から受信した音声データが通話音声データであるかを判断するため、携帯電話機1の呼状態の検出を行って、ステップS53に移る。呼状態とは、携帯電話機の呼制御における状態を示すものである。
 携帯電話機1の呼状態は、BT通信のハンズフリー通話プロファイル(HFP)を使用して検出する構成とすればよい。携帯電話機1の呼状態の変更時に、携帯電話機1から自動的に呼状態の通知が行われる構成となっている場合には、携帯電話機1から通知された呼状態に基づいて、携帯電話機1の呼状態を検出する構成とすればよい。
 または、HFPでは、携帯電話機の呼状態を確認するためのコマンドとしてATコマンド+CIEVがあり、当該コマンドを判別することにより、着信(着呼、着呼受付)、発信(発呼受付)、呼出(呼出通知、呼出中)、通話中(通信中)、および回線切断(切断要求、切断通知)、待受け(所謂「空」の状態)等の複数の呼状態を検出することができる(特開2007-143119号公報参照)。
 また、携帯電話機1の呼状態を検出する方法の別例としては、携帯電話機1から受信する画像データに関する属性データを使用する方法もある。つまり、画像データを受信するのと同時に、属性データとして、例えば、アプリケーションのID、バージョン、画面の種類、画面のタイトル、画像のサイズなどが取得できる場合には、例えば、画面のタイトルに、発信、呼出、着信といった呼状態に関するテキストが含まれることに基づいて、呼状態を判断してもよい。
 なお、前述および後述の実施形態における通話状態や着信状態の検出を、上述した呼状態によって行う構成としてもよい。
 ステップS53では、通話中であることを検出できた場合(ステップS53でYES)には、携帯電話機1から受信した音声データが通話音声データであるものと判断して、ステップS54に移る。また、通話中であることを検出できなかった場合(ステップS53でNO)には、携帯電話機1から受信した音声データが通話音声データでないものと判断して、ステップS51に戻ってフローを繰り返す。
 ステップS54では、車両用装置2のスピーカ(つまり、車両側音声出力部27)やマイク(つまり、車両側音声入力部26)の入出力経路(音声の入出力経路)を変更することにより、ナビゲーション、オーディオ、音声認識などハンズフリー通話以外の用途からハンズフリー通話の用途へ車両用装置2のスピーカやマイクの用途を変更する。
 なお、ステップS51の処理において、BT通信のハンズフリー通話プロファイル(HFP)を使用して携帯電話機1から音声データを受信した場合には、HFP上で通信される音声データは通話音声データであることがBT規格上明らかである。これは、音楽データなど通話音声データ以外の音声データは、通常、A2DPなどのHFP以外のプロファイルを使用して通信されるためである。従って、HFPを使用して携帯電話機1から音声データを受信した場合には、続くステップS52~ステップS53の処理を省略し、ステップS54の処理によってハンズフリー通話を行う構成としてもよい。
 また、ステップS51の処理で音声データを受信したと判定しなかった場合のステップS55~ステップS59までの処理は、実施形態1におけるステップS1~ステップS2、ステップS5~ステップS7の処理と同様の処理を行うものとする。
 簡単に説明を行うと、ステップS55では、タッチ操作検出判定処理を行ってステップS56に移る。ステップS56では、タッチ操作ありの場合(ステップS56でYES)には、ステップS57に移り、タッチ操作なしの場合(ステップS56でNO)には、ステップS51に戻ってフローを繰り返す。
 ステップS57では、通話待ちタイマセット処理を行ってステップS58に移る。ステップS58では、時間内通話開始判定処理を実行してステップS59に移る。ステップS59では、所定時間内の通話開始検出と判定した場合(ステップS59でYES)には、ステップS60に移り、所定時間内の通話開始検出と判定しなかった場合(ステップS59でNO)には、ステップS51に戻ってフローを繰り返す。
 ステップS60では、BT通信部21から携帯電話機1にハンズフリー通話への切替を要求するハンズフリー切替要求を送信させて、ステップS54に移る。
 以上のステップS51~ステップS54の一連の処理を行うことにより、特に欧州で多く見られる、HFP接続中の場合は通話開始と同時に音声パスを開き、音声データを車両用装置へ送信する仕様の携帯電話機1に対しては、通話音声データを受信したことを条件にして車両用装置2側でハンズフリー通話への切り替えの必要性を判断し、ハンズフリー通話に切り替えを行うことができる。なお、携帯電話機1側では、既にハンズフリー通話可能な状態となっているので、車両用装置2側から携帯電話機1へハンズフリー切替要求は送信しない。
 また、特に北米や日本で多く見られるような、HFP接続中の場合に通話開始と同時に音声パスを開いて音声データを車両用装置に送信することのない仕様の携帯電話機に対しては、以上のステップS55~ステップS60の一連の処理を行うことにより、車両用タッチパネルのタッチ操作に続く所定時間以内の通話開始を条件にして車両用装置側でハンズフリー通話への切り替えの必要性を判断し、ハンズフリー通話を行うことができる。
 以下では、図17(a)および図17(b)を用いて、実施形態6におけるハンズフリー通話切替関連処理の概要の説明を行う。なお、図17(a)および図17(b)中のCが車両用タッチパネル上の携帯画面、Dが独自生成画面、Bが携帯画面上の通話開始ボタンを示している。また、Lが携帯電話機1における携帯画面、Mが携帯電話機1の携帯画面における通話開始ボタンを示している。
 図17(a)は、携帯電話機1から通話音声データが送信される場合を示す図であり、この場合、車両用装置2は車両用タッチパネルに対するタッチ操作の有無を判定することなく、ハンズフリー通話を行う。
 図17(b)は、携帯電話機1から通話音声データが送信されない場合を示す図であり、この場合、車両用装置2は車両用タッチパネルに対するタッチ操作から所定時間内に通話開始したことを条件に、ハンズフリー通話を行う。この際、車両用装置2は携帯電話機1へハンズフリー切替要求を送信する。
 本実施形態の構成によれば、携帯電話機1から通話音声データを受信した場合は、実施形態1のようなハンズフリー切替え判断処理を行うことなく、ハンズフリー通話を行う。一方で、通話音声データを受信しない場合は、実施形態1と同様のハンズフリー切替え判断処理を行った上、ハンズフリー通話が必要と判断される場合に、ハンズフリー通話を行う。よって、接続される携帯電話機1の種類に応じて適切にハンズフリー通話を行うことが可能になる。
 (実施形態7)
 前述の実施形態6では、携帯電話機1から通話音声データを受信しなかった場合に車両用タッチパネルのタッチ操作から所定時間以内の通話開始をハンズフリー通話への切り替えの判断条件としていたが、本実施形態(以下、実施形態7)のように、タッチ操作された領域が前述の独自生成画面上のH/F切替ボタンの領域か否か、携帯電話機1が着信状態となったか否かも判断条件とする構成としてもよい。
 以下では、実施形態7について図面を用いて説明を行う。なお、説明の便宜上、前述の
実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態7における機器連携システム100は、実施形態6と同様に携帯電話機1および車両用装置2を含んでいる。実施形態6は、車両用装置2の制御回路29でのハンズフリー通話切替関連処理の一部が異なっている点を除けば、実施形態6と同様の構成である。
 ここで、図18に示すフローチャートを用いて、実施形態7における制御回路29(以下、便宜上、制御回路29eとする)でのハンズフリー通話切替関連処理について説明を行う。本フローは、例えば車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 まず、ステップS61~ステップS64までの処理は、実施形態6におけるステップS51~ステップS54までの処理と同様の処理である。簡単に説明を行うと、ステップS61では、携帯電話機1から音声データを受信したか否かを判定する。そして、音声データを受信したと判定した場合(ステップS61でYES)には、ステップS62に移り、音声データを受信したと判定しなかった場合(ステップS61でNO)には、ステップS65に移る。
 ステップS62では、携帯電話機1の呼状態の検出を行って、ステップS63に移る。ステップS63では、通話中であることを検出できた場合(ステップS63でYES)には、携帯電話機1から受信した音声データが通話音声データであるものと判断して、ステップS64に移る。また、通話中であることを検出できなかった場合(ステップS63でNO)には、携帯電話機1から受信した音声データが通話音声データでないものと判断して、ステップS61に戻ってフローを繰り返す。
 ステップS64では、車両用装置2のスピーカやマイクの入出力経路を変更することにより、ハンズフリー通話以外の用途からハンズフリー通話の用途へ車両用装置2のスピーカやマイクの用途を変更する。
 また、ステップS61の処理で音声データを受信したと判定しなかった場合のステップS65~ステップS66、ステップS68~ステップS71までの処理は、実施形態6におけるステップS55~ステップS60の処理と同様の処理を行うものとする。
 簡単に説明を行うと、ステップS65では、タッチ操作検出判定処理を行ってステップS66に移る。ステップS66では、タッチ操作ありの場合(ステップS66でYES)には、ステップS67に移り、タッチ操作なしの場合(ステップS66でNO)には、ステップS61に戻ってフローを繰り返す。
 ステップS67では、制御回路29eが、前述の実施形態2で説明したのと同様にして、携帯画面とは別に、自装置で独自に生成した独自生成画面を、車両側表示部24の携帯画面を表示させる領域以外の領域に表示させるとともに、この独自生成画面にH/F切替ボタンも表示させる。
 そして、実施形態2のH/F切替ボタン操作判定処理と同様の処理を行い、独自生成画面上のH/F切替ボタン(つまり、独自生成ボタン)が操作されたと判定した場合(ステップS67でYES)には、ステップS71に移る。また、独自生成画面上のH/F切替ボタンが操作されていないと判定した場合(ステップS67でNO)には、ステップS68に移る。
 本実施形態では、独自生成画面にH/F切替ボタンを表示し、独自生成画面上のH/F切替ボタンが操作されたか否かを判定する構成を示したが、必ずしもこれに限らない。例えばH/F切替ボタンとはアイコンのデザインが異なる通話開始ボタンを独自生成画面中に表示させる構成としてもよい。通話開始ボタンについては、ハンドセット通話からハンズフリー通話への切り替えを指示するためだけのボタンとして、ハンズフリー通話とハンドセット通話とを交互に切り替えるH/F切替ボタンの代わりに表示させる構成としてもよいし、当該H/F切替ボタンと同時に表示させる構成としてもよい。他にも、当該H/F切替ボタンと同じ機能のボタンであって、アイコンのデザインだけが異なるものとする構成としてもよい。
 ステップS68では、通話待ちタイマセット処理を行ってステップS69に移る。ステップS69では、時間内通話開始判定処理を実行してステップS70に移る。ステップS70では、所定時間内の通話開始検出と判定した場合(ステップS70でYES)には、ステップS71に移り、所定時間内の通話開始検出と判定しなかった場合(ステップS70でNO)には、ステップS61に戻ってフローを繰り返す。
 ステップS71では、BT通信部21から携帯電話機1にハンズフリー通話への切替を要求するハンズフリー切替要求を送信させて、ステップS64に移る。
 ここでは、ハンズフリー通話への切り替えを指示する旨のユーザからの操作入力を受け付ける操作入力部25として、車両側表示部24に表示する画像と一体になったタッチスイッチを用いる構成を示したが、必ずしもこれに限らない。実施形態3で説明したように、メカニカルなスイッチや音声認識装置や近接スイッチやカメラなどを用いる構成としてもよい。なお、当該タッチスイッチは、言い換えるとH/F切替ボタンの画像により生成されるタッチスイッチである。
 実施形態6で説明した、HFP接続中の場合に通話開始と同時に音声パスを開いて音声データを車両用装置に送信することのない仕様の携帯電話機に対して、以上のステップS67~ステップS71までの一連の処理を行うことにより、独自生成画面上のH/F切替ボタンのタッチ操作を条件にして車両用装置側でハンズフリー通話への切り替えの必要性を判断し、ハンズフリー通話を行うことができる。
 また、ステップS72では、接続されている携帯電話機1が着信状態となった場合(ステップS72でYES)には、ステップS73に移る。一方、携帯電話機1が着信状態となっていない場合(ステップS72でNO)には、ステップS61に戻ってフローを繰り返す。
 ステップS73では、ハンズフリー通話への切り替えの要否をユーザへ問い合わせる。例えば、前述のH/F切替ボタンを車両用タッチパネルの携帯画面に重畳表示させることで、ハンズフリー通話への切り替えの要否をユーザへ問い合わせる構成とすればよい。
 この場合、制御回路29eでは、H/F切替ボタンの表示される領域に対するタッチ操作を一定時間以内に操作入力部25で検出した場合に切り替えが必要と判定し、一定時間以内に検出しなかった場合に切り替えが不要と判定する構成とすればよい。
 また、ハンズフリー通話への切り替えの要否を選択するためのボタンのアイコン(以下、H/F要否ボタン)を、車両用タッチパネルの携帯画面に重畳表示させることで、ハンズフリー通話への切り替えの要否をユーザへ問い合わせる構成としてもよい。
 この場合にも、制御回路29eでは、H/F要否ボタンの表示される領域に対するタッチ操作を一定時間以内に操作入力部25で検出した場合に切り替えが必要と判定し、一定時間以内に検出しなかった場合に切り替えが不要と判定する構成とすればよい。
 また、H/F要否ボタンとして、切り替えを必要とする「必要ボタン」と、切り替えを不要とする「不要ボタン」との2つのボタンを表示する構成としてもよい。この場合には、必要ボタンの表示される領域に対するタッチ操作を検出した場合に切り替えが必要と判定し、不要ボタンの表示される領域に対するタッチ操作を検出した場合に切り替えが不要と判定する構成とすればよい。
 他にも、独自生成画面中にH/F切替ボタンやH/F要否ボタンを表示させる構成としてもよい。本実施形態では、H/F要否ボタンを携帯画面に重畳表示させる場合を例に挙げて説明を行う。なお、制御回路29eは要否指示ボタン画像表示セクションあるいは手段とも言及し、H/F切替ボタンやH/F要否ボタンは要否指示ボタンとも言及する。
 また、ハンズフリー通話への切り替えの要否を指示する旨のユーザからの操作入力を受け付ける操作入力部25として、実施形態3で説明したのと同様に、メカニカルなスイッチや音声認識装置や近接スイッチやカメラなどを用いる構成としてもよい。
 ステップS74では、ハンズフリー通話への切り替えが必要と判定した場合(ステップS74でYES)には、ステップS71へ移る。一方、不要と判定した場合(ステップS74でNO)には、通話状態が回線切断または待ち受け状態となるのを待って、つまり、着信状態、または通話状態が終了するのを待ってから、ステップS61に戻ってフローを繰り返す。
 HFP接続中の場合に通話開始と同時に音声パスを開いて音声データを車両用装置に送信することのない仕様の携帯電話機(実施形態6の説明参照)に対して、以上のステップS72~ステップS74とそれに続くステップS71までの一連の処理を行うことにより、携帯電話機1が着信状態となったことを条件にして車両用装置側でハンズフリー通話への切り替えの必要性を判断し、ハンズフリー通話を行うことができる。
 以下では、図17(a)、図17(b)、図19(a)および図19(b)を用いて、実施形態7におけるハンズフリー通話切替関連処理の概要の説明を行う。なお、図19(a)および図19(b)中のCが車両用タッチパネル上の携帯画面、Dが独自生成画面、Lが携帯電話機1における携帯画面を示している。また、図19(a)中のEが独自生成画面中のH/F切替ボタンを示している。そして、図19(b)のNが携帯画面に重畳表示されたH/F要否ボタンを示している。
 携帯電話機1から通話音声データが送信される場合、車両用装置2は車両用タッチパネルに対するタッチ操作の有無を判定することなく、ハンズフリー通話を行う(図17(a)参照)。
 携帯電話機1から通話音声データが送信されない場合であって、且つ、独自生成画面上のH/F切替ボタンが操作されなかった場合には、車両用装置2は車両用タッチパネルに対するタッチ操作から所定時間内に通話開始したことを条件に、ハンズフリー通話を行う。この際、車両用装置2は携帯電話機1へハンズフリー切替要求を送信する(図17(b)参照)。
 図19(a)は、携帯電話機1から通話音声データが送信されない場合であって、且つ、独自生成画面上のH/F切替ボタンが操作される場合を示す図であり、この場合、車両用装置2は独自生成画面上のH/F切替ボタンが操作されたことを条件に、ハンズフリー通話を行う。この際、車両用装置2は携帯電話機1へハンズフリー切替要求を送信する。
 図19(b)は、携帯電話機1から通話音声データが送信されない場合であって、且つ、車両用タッチパネルに対するタッチ操作が検出されない場合において、携帯電話機1の着信状態を検出した場合について説明するための図である。この場合、車両用装置2は車両用タッチパネル上の携帯画面に重畳表示されたH/F要否ボタンが操作されたことを条件に、ハンズフリー通話を行う。この際、車両用装置2は携帯電話機1へハンズフリー切替要求を送信する。
 (実施形態8)
 前述の実施形態1では、車両用タッチパネルのタッチ操作から所定時間以内の通話開始をハンズフリー通話への切り替えの判断条件とする処理を示したが、本実施形態(以下、実施形態8)のように、携帯電話機1が着信中か発信中(または呼出中)かによって異なった処理を行う構成としてもよい。
 例えば、携帯電話機1が着信中である場合には、着信中における車両用タッチパネルのタッチ操作から所定時間内の通話開始を判断条件に、ハンズフリー通話への切り替えを行う着信時処理を行う。一方、携帯電話機1が着信中でない場合には、タッチ操作から所定時間内の発信開始後、通話状態になるのを待ってハンズフリー通話への切り替えを行う発信時処理を行う。
 以下では、実施形態8について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態8における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態8は、車両用装置2の制御回路29でのハンズフリー通話切替関連処理の一部が異なっている点を除けば、実施形態1と同様の構成である。
 ここで、図20に示すフローチャートを用いて、実施形態8における制御回路29(以下、便宜上、制御回路29fとする)でのハンズフリー通話切替関連処理について説明を行う。本フローは、例えば車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 まず、ステップS81では、携帯電話機1の呼状態を検出し、ステップS82に移る。呼状態の検出については、例えば実施形態6で説明したのと同様にして行うものとする。本フローの以降の処理においても同様であるものとする。
 ステップS82では、検出した呼状態が着信中であった場合(ステップS82でYES)には、ステップS83に移る。一方、検出した呼状態が着信中でなかった場合(ステップS82でNO)には、ステップS92に移る。よって、制御回路29fは着信中検出セクションあるいは手段とも言及する。
 ステップS83では、ステップS1と同様にしてタッチ操作検出判定処理を行って、ステップS84に移る。ステップS84では、タッチ操作ありの場合(ステップS84でYES)には、ステップS85に移り、タッチ操作なしの場合(ステップS84でNO)には、ステップS90に移る。
 ステップS85では、通話待ちのタイマ値を設定し、ステップS86に移る。例えば、3秒をタイマ値として設定する。ここでは、このタイマ値に基づいて、タッチ操作から3秒以内に通話開始されるかを監視することになる。ステップS86では、携帯電話機1の呼状態を検出し、上記監視を行う。
 ステップS87では、監視の結果、タイマ値に設定された所定時間内に、携帯電話機1の呼状態が通話中となったことを検出した場合に、所定時間内に通話開始したと判断(ステップS87でYES)して、ステップS88に移る。一方、所定時間内に携帯電話機1の呼状態が通話中となったことを検出しなかった場合には、所定時間内に通話開始しなかったと判断(ステップS87でNO)して、フローを終了する。
 なお、ステップS85~ステップS86の処理の代わりに、前述のステップS5~ステップS6の処理を行う構成としてもよい。そして、所定時間内の通話開始検出と判定した場合に、ステップS88に移り、所定時間内の通話開始検出と判定しなかった場合に、ステップS81に戻ってフローを繰り返す構成としてもよい。
 ステップS88では、BT通信部21から携帯電話機1に前述のハンズフリー切替要求を送信させて、ステップS89に移る。ステップS89では、ステップS54と同様にして、車両用装置2における音声の入出力の経路を、ハンズフリー通話以外の用途からハンズフリー通話の用途へ変更する処理を行う。
 また、ステップS84においてタッチ操作なしと判定した場合のステップS90では、携帯電話機1の呼状態を検出し、ステップS91に移る。ステップS91では、携帯電話機1の呼状態が回線切断または待受けの状態であった場合(ステップS91でYES)、つまり着信状態でなくなった場合には、フローを終了する。一方、回線切断および待受けのいずれの状態でなかった場合(ステップS91でNO)には、ステップS83に戻ってフローを繰り返す。なお、制御回路29fは切断状態検出セクションあるいは手段とも言及する。
 以上のステップS82~ステップS91の一連の処理が、携帯電話機1の着信時にハンズフリー通話を行うか否かを判断する前述の着信時処理となる。また、前述したように、着信時処理の途中で携帯電話機1の呼状態が回線切断または待受けの状態となった場合には、ハンズフリー通話への切り替えを行わずに着信時処理を終了することになる。
 また、ステップS82において呼状態が着信中でなかった場合のステップS92では、ステップS1と同様にしてタッチ操作検出判定処理を行って、ステップS93に移る。ステップS93では、タッチ操作ありの場合(ステップS93でYES)には、ステップS94に移る。一方、タッチ操作なしの場合(ステップS93でNO)には、フローを終了する。
 ステップS94では、ステップS85と同様にして、通話待ちのタイマ値を設定し、ステップS95に移る。例えば、3秒をタイマ値として設定する。ここでは、このタイマ値に基づいて、タッチ操作から3秒間以内に、発信中または呼出中になったかを監視することになる。ステップS95では、携帯電話機1の呼状態を検出し、上記監視を行う。よって、制御回路29fはの発呼状態検出セクションあるいは手段とも言及する。
 ステップS96では、監視の結果、タイマ値に設定された所定時間内に、携帯電話機1の呼状態が発信中または呼出中になった場合に、所定時間内に発信/呼出開始したと判断(ステップS96でYES)して、ステップS97に移る。一方、所定時間内に携帯電話機1の呼状態が発信中および呼出中のいずれにもならなかった場合には、所定時間内に発信/呼出開始しなかったと判断(ステップS96でNO)して、ステップS81に戻って
フローを繰り返す。
 ステップS97では、携帯電話機1の呼状態を検出し、ステップS98に移る。ステップS98では、検出した呼状態が通話中であった場合(ステップS98でYES)には、ステップS88に移る。一方、検出した呼状態が通話中でなかった場合(ステップS98でNO)には、ステップS99に移る。
 ステップS99では、携帯電話機1の呼状態を検出し、ステップS100に移る。ステップS100では、携帯電話機1の呼状態が回線切断または待ち受けの状態であった場合(ステップS100でYES)、つまり、発信中および呼出中のいずれの状態でもなくなった場合には、フローを終了する。一方、回線切断および待ち受けのいずれの状態でもなかった場合(ステップS100でNO)には、ステップS97に戻ってフローを繰り返す。
 ステップS92~ステップ100、およびステップ88~ステップS89の一連の処理が、携帯電話機1の発信時または呼出時にハンズフリー通話を行うか否かを判断する前述の発信時処理となる。また、前述したように、発信時処理の途中で携帯電話機1の呼状態が回線切断または待受けの状態となった場合には、ハンズフリー通話への切り替えを行わずに発信時処理を終了することになる。
 本実施形態によれば、携帯電話機1の発信時と着信時との特徴に合わせて適切にハンズフリー通話への切り替えの判断を行うことができる。詳しくは、以下の通りである。着信時には、すぐにユーザが通話開始できるとは限らない。特に自動車の運転中には、車両用タッチパネルを操作して通話開始する場合に、自動車を安全な場所に停車させる必要もあるため、着信時には、タッチ操作があるかを着信状態でなくなるまで監視し、タッチ操作があってから所定時間以内に通話開始されたことを判断条件に、ハンズフリー通話を開始する。
 また、発信時や呼出時についても、通話相手がすぐに応答するとは限らないため、ユーザがすぐに通話開始できるとは限らない。そのため、車両用タッチパネルに対するタッチ操作があるかを常時監視し、タッチ操作があってから所定時間以内に発信または呼出が開始された後、通話相手が応答して通話開始されたことを判断条件に、ハンズフリー通話を開始する。
 なお、本実施形態において、実施形態6に説明したのと同様にして、携帯電話機1から通話音声データを受信したか否かも判断条件とする構成としてもよい。詳しくは、前述のステップS81の処理の前に、前述のステップS51と同様にして、携帯電話機1から音声データを受信したか否かを判定する。
 続いて、音声データを受信したと判定した場合には、前述のステップS53と同様にして、携帯電話機1から受信した音声データが通話音声データであるかを判定する。そして、通話音声データであると判定した場合には、ステップS54と同様にして、車両用装置2における音声の入出力の経路を、ハンズフリー通話以外の用途からハンズフリー通話の用途へ変更する処理を行って、ハンズフリー通話を開始する。一方、音声データを受信したと判定しなかった場合には、前述のステップS81に移って、前述した着信時処理や発信時処理を行う。
 (実施形態9)
 前述の実施形態1では、車両用タッチパネルのタッチ操作から所定時間以内の通話開始をハンズフリー通話への切り替えの判断条件とする処理を示したが、本実施形態(以下、実施形態9)のように、最新の「タッチ操作」時刻(以下、最新タッチ時刻)を記録する処理を行うとともに、携帯電話機1が特定の呼状態であることをハンズフリー通話への切り替えの判断条件とする構成としてもよい。
 例えば、携帯電話機1の呼状態が通話中である場合には、最新タッチ時刻から現在時刻までの時間が所定時間以内である場合に、ハンズフリー通話への切り替えを行う着信時処理を行う。一方、携帯電話機1の呼状態が発信中または呼出中である場合、且つ、最新タッチ時刻から現在時刻までの時間が所定時間以内である場合には、通話状態になるのを待ってハンズフリー通話への切り替えを行う発信時処理を行う。
 以下では、実施形態9について図面を用いて説明を行う。なお、説明の便宜上、実施形態1の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。
 実施形態9における機器連携システム100は、実施形態1と同様に携帯電話機1および車両用装置2を含んでいる。実施形態9は、車両用装置2の制御回路29でのハンズフリー通話切替関連処理の一部が異なっている点を除けば、実施形態1と同様の構成である。
 ここで、図21に示すフローチャートを用いて、実施形態9における制御回路29(以下、便宜上、制御回路29gとする)でのハンズフリー通話切替関連処理について説明を行う。本フローは、例えば車両用装置2が携帯電話機1とターミナルモード接続されたときに開始される。
 まず、ステップS111では、携帯電話機1の呼状態を検出し、ステップS112に移る。よって、制御回路29gは呼状態検出セクションあるいは手段とも言及する。呼状態の検出については、例えば実施形態6で説明したのと同様にして行うものとする。本フローの以降の処理においても同様であるものとする。
 ただし、携帯電話機1の呼状態の変更時に、携帯電話機1から自動的に呼状態の通知が行われる構成となっている場合には、携帯電話機1から通知された呼状態に基づいて、携帯電話機1の呼状態を検出する構成とすればよい。また、その場合、呼状態の通知がされたことをトリガにして、本フローチャートに示す処理を実行する構成としてもよい。
 ステップS112では、検出した呼状態が発信中または呼出中であった場合(ステップS112でYES)には、ステップS113に移る。一方、検出した呼状態が発信中および呼出中のいずれでもなかった場合(ステップS112でNO)には、ステップS121に移る。
 ステップS113では、最新タッチ時刻取得処理を行って、ステップS114に移る。最新タッチ時刻取得処理では、制御回路29gでの後述する最新タッチ時刻記録処理によって更新された最新タッチ時刻を取得する。
 ここで、最新タッチ時刻記録処理について図22のフローチャートを用いて説明を行う。図22は、最新タッチ時刻記録処理の概略を示すフローチャートである。図22のフローは、例えば車両用装置2と携帯電話機1とのターミナルモード接続中において、周期的(例えば1秒毎)に実行されるものとする。
 ステップS201では、ステップS1と同様にしてタッチ操作検出判定処理を行って、ステップS202に移る。ステップS202では、タッチ操作ありの場合(ステップS202でYES)には、ステップS203に移り、タッチ操作なしの場合(ステップS202でNO)には、フローを終了する。
 ステップS203では、タッチ操作を検出した時刻を最新タッチ時刻として例えば制御回路29gのRAM等の電気的に書き換え可能なメモリに記録し、フローを終了する。ステップS203では、新たな最新タッチ時刻を記録する場合に、既に記録されているデータに上書きすることで最新タッチ時刻を更新していくものとする。よって、制御回路29は最新押下時刻記録セクションあるいは手段とも言及する。時刻については、図示しない周知の計時部あるいは手段から取得する構成とすればよい。
 図21に戻って、ステップS114では、ステップS113で取得した最新タッチ時刻が現在時刻から所定時間以内であるか否かを判定する。現在時刻についても、前述した周知の計時部あるいは手段から取得する構成とすればよい。
 そして、現在時刻から所定時間以内であると判定した場合(ステップS114でYES)には、ステップS115に移る。一方、現在時刻から所定時間以内でないと判定した場合(ステップS114でNO)には、フローを終了する。つまり、発信を指示した操作は、車両用装置2側ではなく、携帯電話機1側で行われたものと判断して、ハンズフリー通話を行わないことになる。
 ステップS115では、携帯電話機1の呼状態を検出して、ステップS116に移る。ステップS116では、検出した呼状態が通話中であった場合(ステップS116でYES)には、ステップS119に移る。一方、通話中でなかった場合(ステップS116でNO)には、ステップS117に移る。
 ステップS117では、BT通信部21から携帯電話機1に前述のハンズフリー切替要求を送信させて、ステップS118に移る。ステップS118では、ステップS54と同様にして、車両用装置2における音声の入出力の経路を、ハンズフリー通話以外の用途からハンズフリー通話の用途へ変更する処理を行う。
 ステップS116において、検出した呼状態が通話中であった場合のステップS119では、携帯電話機1の呼状態を検出して、ステップS120に移る。ステップS120では、検出した呼状態が回線切断または待受けの状態であった場合(ステップS120でYES)、つまり、発信中および呼出中のいずれの状態でもなくなった場合には、フローを終了する。一方、回線切断および待受けのいずれの状態でもなかった場合(ステップS120でNO)には、ステップS115に戻ってフローを繰り返す。
 以上のステップS112~ステップS120までの一連の処理が、携帯電話機1の発信時または呼出時にハンズフリー通話を行うか否かを判断する前述の発信時処理となる。また、前述したように、発信時処理の途中で携帯電話機1の呼状態が回線切断または待受けの状態となった場合には、ハンズフリー通話への切り替えを行わずに発信時処理を終了することになる。
 ステップS112において、検出した呼状態が発信中および呼出中のいずれでもなかった場合のステップS121では、検出した呼状態が通話中であった場合(ステップS121でYES)には、ステップS122に移る。一方、通話中でなかった場合(ステップS121でNO)には、フローを終了する。つまり、発信中でも呼出中でも通話中でもない、例えば、着信中の場合には、一旦、フローを終了し、呼状態が、着信中から通話中へ変化した場合に本フローを再び実行することにより、ハンズフリー通話を行うことができる。
 ステップS122では、ステップS113と同様にして、最新タッチ時刻取得処理を行って、ステップS123に移る。ステップS123では、ステップS122で取得した最新タッチ時刻が現在時刻から所定時間以内であるか否かを判定する。
 そして、現在時刻から所定時間以内と判定した場合(ステップS123でYES)には、ステップS117に移り、ハンズフリー通話を行う。一方、現在時刻から所定時間以内でないと判定した場合(ステップS123でNO)には、フローを終了する。つまり、着信を指示した操作は、車両用装置2側ではなく、携帯電話機1側で行われたものと判断して、ハンズフリー通話を行わないことになる。
 以上のステップS121~ステップS123、続くステップS117~ステップS118の一連の処理が、携帯電話機1の通話時にハンズフリー通話を行うか否かを判断する前述の着信時処理となる。
 本実施形態の構成によれば、携帯電話機1が特定の呼状態の場合にだけハンズフリー通話を行うように判断するため、呼状態に関わらずハンズフリー通話を行うか否かを判断する構成に比べ、処理負荷を抑えることができる。
 なお、本実施形態において、実施形態6に説明したのと同様にして、携帯電話機1から通話音声データを受信したか否かも判断条件とする構成としてもよい。詳しくは、前述のステップS111の処理の前に、前述のステップS51と同様にして、携帯電話機1から音声データを受信したか否かを判定する。
 続いて、音声データを受信したと判定した場合には、前述のステップS53と同様にして、携帯電話機1から受信した音声データが通話音声データであるかを判定する。そして、通話音声データであると判定した場合には、ステップS54と同様にして、車両用装置2における音声の入出力の経路を、ハンズフリー通話以外の用途からハンズフリー通話の用途へ変更する処理を行って、ハンズフリー通話を開始する。一方、音声データを受信したと判定しなかった場合には、前述のステップS111に移って、前述した着信時処理や発信時処理を行う。
 前述の実施形態では、車両用装置2としてディスプレイと一体となった車載ナビゲーション装置を用いる構成を示したが、車両用装置2として車載のディスプレイ装置を用いる場合には、音声入力部と音声出力部(例えばマイクとスピーカ)とがセットになったハンズフリー通話用のヘッドセットなどのハンズフリー通話装置と組み合わせて用いる構成とすればよい。また、車両用装置2としてディスプレイオーディオを用いる場合には、音声入力用のマイクと組み合わせて用いる構成とすればよい。
 前述の実施形態に関わるハンズフリー通話切替関連処理は、車両用装置2と携帯電話機1とがターミナルモード接続している間、例えば周期的(例えば1秒毎)に実行される構成とすればよい。但し、前回の処理が継続中の場合は、前回の処理を継続する構成とすればよい。また、既にハンズフリー通話を行っている場合は、ハンズフリー通話切替関連処理を行わない構成とすればよい。
 他にも、携帯電話機1で実行中のアプリケーションの種類に関する情報を車両用装置2が取得できる場合には、携帯電話機1で実行中のアプリケーションの種類が、電話の受発信機能を含むアプリケーションである場合にだけ処理を行ってもよい。つまり、音楽再生アプリケーションの実行中などには処理を実行せず、電話アプリケーションの実行中だけ本処理を行ってもよい。これによれば、実行中のアプリケーションの種類に関係なく常に処理を実行する場合に比べて、車両用装置2での処理負荷を抑えることができる。
 本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。

Claims (76)

  1.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24、25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29)と、
     前記車両側表示部に対する押下操作を検出してから所定時間内に前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  2.  請求項1において、
     前記通話状態検出セクションは、
     前記携帯電話機から送信される当該携帯電話機で通話を開始したことを示す通話状態通知を受信したことをもとに、前記携帯電話機が通話状態となったことを検出することを特徴とする車両用装置。
  3.  請求項1において、
     前記通話状態検出セクションは、
     前記携帯電話機から送信される音声信号を受信したことをもとに、前記携帯電話機が通話状態となったことを検出することを特徴とする車両用装置。
  4.  請求項1において、
     前記タッチパネルの通話中の画面についての画像特徴を記憶している通話画面画像特徴記憶部(28)をさらに備え、
     前記通話状態検出セクションは、
     前記携帯電話機から取得した画素情報と前記通話画面画像特徴記憶部に記憶している画像特徴とをもとに、前記携帯電話機から取得した画素情報が示す画像特徴と前記通話画面画像特徴記憶部に記憶している画像特徴とが一致するかを判断し、一致すると判断した場合には、前記携帯電話機が通話状態となったことを検出することを特徴とする車両用装置。
  5.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24、25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記車両側表示部に対する押下操作が行われたことを検出するとともに、前記車両側表示部の画面上での押下操作が行われた画素領域を特定するタッチ操作検出セクション(29)と、
     前記タッチパネルの画面上の当該携帯電話機での通話を開始させるための通話開始表示領域についての画像特徴を記憶している通話領域画像特徴記憶部(28)と、
     前記携帯電話機から取得した画素情報と前記通話領域画像特徴記憶部に記憶している画像特徴と前記タッチ操作検出セクションで特定した画素領域とをもとに、前記通話開始表示領域の画像が表示された前記車両側表示部の画面上の当該通話開始表示領域の画像が表示された画素領域が押下操作されたか否かを判定する通話操作判定セクション(29)と、
     前記通話開始表示領域の画像が表示された画素領域が押下操作されたと前記通話操作判定セクションで判定した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  6.  請求項5において、
     前記通話操作判定セクションは、
     前記携帯電話機から取得した画素情報と前記通話領域画像特徴記憶部で記憶している画像特徴とをもとに、前記通話開始表示領域の画像が前記車両側表示部の画面上に表示される画素領域を特定して、特定した当該画素領域が前記タッチ操作検出セクションで特定した画素領域と一致するかを判断し、一致すると判断した場合には、前記通話開始表示領域の画像が表示された前記車両側表示部の画面上の画素領域が押下操作されたと判定することを特徴とする車両用装置。
  7.  請求項5において、
     前記通話操作判定セクションは、
     前記携帯電話機から取得した画素情報と前記タッチ操作検出セクションで特定した画素領域とをもとに、当該画素領域の画像特徴を決定して、決定した画像特徴と前記通話領域画像特徴記憶部で記憶している画像特徴とをもとに両者の画像特徴が一致するかを判断し、一致すると判断した場合には、前記通話開始表示領域の画像が表示された前記車両側表示部の画面上の画素領域が押下操作されたと判定することを特徴とする車両用装置。
  8.  請求項5~7のいずれか1項において、
     前記画像特徴は、色を指標とした特徴であることを特徴とする車両用装置。
  9.  請求項5~7のいずれか1項において、
     前記画像特徴は、形状を指標とした特徴であることを特徴とする車両用装置。
  10.  請求項5~7のいずれか1項において、
     前記画像特徴は、同一の画素に対する画素情報の時間的な変化周期を指標とした特徴であることを特徴とする車両用装置。
  11.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24、25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     ハンズフリー通話への切り替え、または通話の開始を指示する旨のユーザからの操作入力を受け付ける切替指示受付部(25)と、
     切替指示受付部で前記操作入力を受け付けた場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話へ切り替える車両側通話切替セクション(29)とを備え、
     前記切替指示受付部は、前記車両側表示部の表示領域内の、前記携帯画面を表示する携帯画面領域とは異なる、自装置で独自に生成した画面を表示する独自画面領域上の画像により生成されるタッチスイッチ、または当該タッチスイッチとは異なる操作入力装置から構成されることを特徴とする車両用装置(2)。
  12.  請求項11において、
     前記切替指示受付部は、ハンズフリー通話と前記携帯電話機単体で通話を行うハンドセット通話との切り替えを指示する操作入力を受け付けるものであって、
     前記車両側通話切替セクションは、切替指示受付部で前記操作入力を受け付けるごとに、ハンズフリー通話とハンドセット通話とを切り替えることを特徴とする車両用装置。
  13.  請求項12において、
     前記車両側通話切替セクションは、
     ハンズフリー通話を開始するときに、携帯電話機によるハンズフリー通話を実現するためのハンズフリー通話プロトコルで携帯電話機との間を接続するものであって、
     ハンズフリー通話からハンドセット通話に切り替える場合に、ハンズフリー通話プロトコルを終了させることなく、音声を入出力する経路を切り替えることでハンズフリー通話からハンドセット通話に切り替えることを特徴とする車両用装置。
  14.  請求項11~13のいずれか1項において、
     前記切替指示受付部で前記操作入力を受け付けた場合の対応動作が予め設定可能となっていることを特徴とする車両用装置。
  15.  請求項14において、
     前記対応動作は、ハンズフリー通話を開始するか否かをユーザに問い合わせる画面を前記車両側表示部に表示することなく、ハンズフリー通話へ切り替える動作であることを特徴とする車両用装置。
  16.  請求項14において、
     前記対応動作は、ハンズフリー通話へ切り替えるか否かをユーザに問い合わせる画面を前記車両側表示部に表示し、ハンズフリー通話への切り替えを要する旨のユーザからの操作入力を受け付けた場合に、ハンズフリー通話に切り替える動作であることを特徴とする車両用装置。
  17.  請求項11~16のいずれか1項において、
     前記車両側表示部に前記携帯画面を表示する場合には、車両側表示部の表示領域の一部に携帯画面を表示するものであって、
     前記独自画面領域上に、ハンズフリー通話への切替または通話の開始を指示するための切替ボタン画像を表示させる切替ボタン画像表示セクション(29a)を備え、
     前記切替指示受付部は、前記切替ボタン画像表示セクションによって表示される切替ボタン画像により生成されるタッチスイッチであることを特徴とする車両用装置。
  18.  請求項17において、
     前記切替ボタン画像は、前記独自画面領域上に常時表示されることを特徴とする車両用装置。
  19.  請求項17または18において、
     前記切替ボタン画像は、前記携帯画面上に表示される、前記携帯電話機でのハンドセット通話の開始を指示するための通話開始ボタン画像と区別可能となっていることを特徴とする車両用装置。
  20.  請求項19において、
     前記切替ボタン画像は、前記通話開始ボタン画像と、文字、色、および形状の少なくとも一つが異なっていることを特徴とする車両用装置。
  21.  請求項17~20のいずれか1項において、
     前記タッチスイッチで受け付ける前記操作入力は、前記携帯電話機でのハンドセット通話の開始を指示するための操作入力とは操作方法が異なっていることを特徴とする車両用装置。
  22.  請求項17~21のいずれか1項において、
     前記車両側表示部に前記タッチパネルに表示されている画面である携帯画面を表示する場合には、車両側表示部の表示領域の一部に携帯画面を表示するものであり、
     前記切替ボタン画像表示セクションは、
     車両側表示部の表示領域内、且つ、携帯画面の領域外に、ハンズフリー通話とハンドセット通話との切り替えを指示するための切替ボタン画像を表示させるものであって、
     接続されている携帯電話機が、通話中にハンズフリー通話とハンドセット通話とを切り替える機能を有しているか否かに関わらず、前記切替ボタン画像を表示させることを特徴とする車両用装置。
  23.  請求項17~22のいずれか1項において、
     前記携帯電話機が通話中であることを検出する通話中検出セクション(29a)を備え、
     前記切替ボタン画像表示セクションは、通話中検出セクションで携帯電話機が通話中であることを検出している間は、前記切替ボタン画像の表示を行わせ続けることを特徴とする車両用装置。
  24.  請求項17~23のいずれか1項において、
     複数の前記携帯電話機とハンズフリー通話を行うためのハンズフリー通信方法によって接続できるものであって、
     前記切替ボタン画像表示セクションは、複数の携帯電話機と前記ハンズフリー通信方法により接続される場合、前記車両側表示部に前記携帯画面が表示されている携帯電話機についてのみ、前記切替ボタン画像を表示させることを特徴とする車両用装置。
  25.  請求項17~23のいずれか1項において、
     複数の前記携帯電話機とハンズフリー通話を行うためのハンズフリー通信方法によって接続できるものであって、
     前記切替ボタン画像表示セクションは、複数の携帯電話機と前記ハンズフリー通信方法により接続される場合、前記車両側表示部に前記携帯画面が表示されている携帯電話機についてだけでなく、前記ハンズフリー通信方法により接続される他の携帯電話機についても、前記切替ボタン画像を各々表示させることを特徴とする車両用装置。
  26.  請求項11~16のいずれか1項において、
     前記切替指示受付部は機械的なスイッチであることを特徴とする車両用装置。
  27.  請求項11~16のいずれか1項において、
     前記切替指示受付部は、ユーザの発話した音声の音声認識を行うことによって前記操作入力を受け付けることを特徴とする車両用装置。
  28.  請求項11~16のいずれか1項において、
     前記切替指示受付部は、ユーザのジェスチャー操作の検出を行うことによって前記操作入力を受け付けることを特徴とする車両用装置。
  29.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24、25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が着信状態となったことを検出する着信状態検出セクション(29b)と、
     着信状態検出セクションで携帯電話機が着信状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話への切り替えを指示するためのハンズフリー切替ボタン画像を含むハンズフリー切替画面を、携帯画面とは別に独自に生成して表示させる車両側生成画面表示セクション(29b)と、
     前記ハンズフリー切替画面中のハンズフリー切替ボタン画像の領域に対するユーザの操作入力を検出するハンズフリー切替操作検出セクション(29b)と、
     ハンズフリー切替操作検出セクションで前記操作入力を検出した場合に、ハンズフリー通話へ切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  30.  請求項29において、
     ハンズフリー通話への切り替えが行われた場合に、前記携帯電話機単体で通話を行うハンドセット通話への切り替えを指示するためのハンドセット切替ボタン画像を前記ディスプレイ上の携帯画面もしくはハンズフリー切替画面に重畳表示させる重畳表示セクションと、
     重畳表示セクションで表示させたハンドセット切替ボタン画像の領域に対するユーザの操作入力を検出するハンドセット切替操作検出セクションとを備え、
     前記車両側通話切替セクションは、ハンドセット切替操作検出セクションで前記操作入力を検出した場合に、ハンドセット通話へ切り替えることを特徴とする車両用装置。
  31.  請求項29または30において、
     複数の前記携帯電話機とハンズフリー通話を行うためのハンズフリー通信方法によって接続されるものであって、
     前記車両側生成画面表示セクションは、複数の携帯電話機と前記ハンズフリー通信方法により接続される場合には、前記車両側表示部に前記携帯画面が表示されている携帯電話機が着信状態となったことを前記着信状態検出セクションで検出したときだけでなく、前記ハンズフリー通信方法により接続される他の携帯電話機が着信状態となったことを着信状態検出セクションで検出したときにも、前記ハンズフリー切替画面を表示させることを特徴とする車両用装置。
  32.  請求項29または30において、
     複数の前記携帯電話機とハンズフリー通話を行うためのハンズフリー通信方法によって接続されるものであって、
     前記車両側生成画面表示セクションは、
     複数の携帯電話機と前記ハンズフリー通信方法によって接続される場合、前記車両側表示部に前記携帯画面が表示されている携帯電話機が着信状態となったことを着信状態検出セクションで検出したときには、前記ハンズフリー切替画面を表示させる一方、前記ハンズフリー通信方法によって接続される他の携帯電話機が着信状態となったことを着信状態検出セクションで検出したときには、前記ハンズフリー切替画面を表示させないことを特徴とする車両用装置。
  33.  請求項31または32において、
     前記ハンズフリー通信方法により接続される複数の携帯電話機の各々を特定する特定セクションと、
     前記特定セクションでの特定結果をもとに、着信状態となったことを前記着信状態検出セクションで検出した携帯電話機が、前記ハンズフリー通信方法により接続される複数の携帯電話機のうちのいずれの携帯電話機であるのかを示す通知を行わせる通知セクションとを備えることを特徴とする車両用装置。
  34.  タッチパネルを備えた携帯電話機(1)と通信を行う通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、その画素情報に基づいて、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29b)と、
     通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話への切り替えを指示するためのハンズフリー切替ボタン画像を含むハンズフリー切替画面を、携帯画面とは別に独自に生成して表示させる車両側生成画面表示セクション(29b)と、
     前記ハンズフリー切替画面中のハンズフリー切替ボタン画像の領域に対するユーザの操作入力を検出するハンズフリー切替操作検出セクション(29b)と、
     ハンズフリー切替操作検出セクションで前記操作入力を検出した場合に、ハンズフリー通話へ切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  35.  請求項29~34のいずれか1項において、
     前記車両側生成画面表示セクションは、前記車両側表示部上の前記携帯画面を表示していた領域の少なくとも一部の領域にハンズフリー切替画面を表示させることを特徴とする車両用装置。
  36.  請求項35において、
     前記車両側生成画面表示セクションは、前記車両側表示部上の前記携帯画面を表示していた領域の少なくとも一部の所定の領域にハンズフリー切替画面を表示させることを特徴とする車両用装置。
  37.  請求項35または36において、
     前記車両側生成画面表示セクションは、前記携帯画面を消して前記ハンズフリー切替画面を表示させることを特徴とする車両用装置。
  38.  請求項29~37のいずれか1項において、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29)を備え、
     前記ハンズフリー切替画面を表示した後の所定時間以内に、携帯電話機が通話状態となったことを通話状態検出セクションで検出しなかった場合に、当該ハンズフリー切替画面を消去することを特徴とする車両用装置。
  39.  請求項37において、
     ハンズフリー通話への切り替えが行われた場合に、前記ハンズフリー切替画面に替えて前記携帯画面を表示させる携帯画面切替セクション(29b)を備えることを特徴とする車両用装置。
  40.  請求項35または36において、
     前記車両側生成画面表示セクションは、前記携帯画面の一部の領域に前記ハンズフリー切替画面を重畳表示させることを特徴とする車両用装置。
  41.  請求項40において、
     前記ハンズフリー切替画面は、ユーザの操作入力に従って移動および拡大縮小の少なくともいずれかが可能となっていることを特徴とする車両用装置。
  42.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29)と、
     通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話へ切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  43.  請求項42において、
     通話状態検出セクションで携帯電話機が通話状態となったことを検出した場合の対応動作が予め設定可能となっていることを特徴とする車両用装置。
  44.  請求項43において、
     前記対応動作は、ハンズフリー通話を開始するか否かをユーザに問い合わせる画面を前記車両側表示部に表示することなく、ハンズフリー通話へ切り替える動作であることを特徴とする車両用装置。
  45.  請求項43において、
     前記対応動作は、ハンズフリー通話へ切り替えるか否かをユーザに問い合わせる画面を前記車両側表示部に表示し、ハンズフリー通話への切り替えを要する旨のユーザからの操作入力を受け付けた場合に、ハンズフリー通話へ切り替える動作であることを特徴とする車両用装置。
  46.  請求項42~45のいずれか1項において、
     複数の前記携帯電話機とハンズフリー通話を行うためのハンズフリー通信方法によって接続できるものであって、
     前記車両側通話切替セクションは、複数の携帯電話機と前記ハンズフリー通信方法により接続される場合には、前記車両側表示部に前記携帯画面が表示されている携帯電話機と、通話状態となったことを前記通話状態検出セクションで検出した携帯電話機とが一致した場合にのみ、ハンズフリー通話へ切り替えることを特徴とする車両用装置。
  47.  請求項42において、
     複数の前記携帯電話機とハンズフリー通話を行うためのハンズフリー通信方法によって接続できるものであって、
     複数の携帯電話機と前記ハンズフリー通信方法により接続される場合には、前記車両側表示部に前記携帯画面が表示されている携帯電話機と、通話状態となったことを前記通話状態検出セクションで検出した携帯電話機とが一致していない場合に、ハンズフリー通話への切り替えの要否を問い合わせる問い合わせセクション(29c)と、
     前記問い合わせセクションでの問い合わせに対する、ハンズフリー通話への切り替えの要否を指示する旨のユーザからの操作入力を受け付ける要否指示受付部(25)とを備え、
     前記車両側通話切替セクションは、
     複数の携帯電話機と前記ハンズフリー通信方法により接続される場合には、
     前記車両側表示部に前記携帯画面が表示されている携帯電話機と、通話状態となったことを前記通話状態検出セクションで検出した携帯電話機とが一致した場合に、ハンズフリー通話へ切り替える一方、
     車両側表示部に携帯画面が表示されている携帯電話機と、通話状態となったことを前記通話状態検出セクションで検出した携帯電話機とが一致していない場合には、要否指示受付部で切り替えを必要とする旨を指示する操作入力を受け付けたときにハンズフリー通話へ切り替え、要否指示受付部で切り替えを不要とする旨を指示する操作入力を受け付けたときにハンズフリー通話へ切り替えないことを特徴とする車両用装置。
  48.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     携帯電話機から通話音声データを受信した場合には、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える一方、
     携帯電話機から通話音声データを受信していない場合には、携帯電話機が通話状態となった場合に前記ハンズフリー通話に切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  49.  請求項48において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信した場合には、自装置における音声を入出力する経路を、携帯電話機から入力された音声を車両用装置で出力するとともに、車両用装置に入力された音声を携帯電話機へ出力する経路に変更することで、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  50.  請求項48または49において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信していない場合には、前記車両側表示部に対する押下操作を検出してから所定時間内に前記携帯電話機が通話状態となった場合にハンズフリー通話に切り替えることを特徴とする車両用装置。
  51.  請求項48~50のいずれか1項において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信していない場合に、ハンズフリー通話に切り替えることとなったときには、ハンズフリー通話へ切り替えることを要求する信号を携帯電話機に送信するとともに、自装置における音声を入出力する経路を、携帯電話機から入力された音声を車両用装置で出力するとともに、車両用装置に入力された音声を携帯電話機へ出力する経路に変更することで、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  52.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面である携帯画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29)と、
     携帯電話機から通話音声データを受信した場合には、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える一方、
     携帯電話機から通話音声データを受信していない場合に、車両側表示部に表示された携帯画面中の当該携帯電話機での通話を開始させるための通話開始表示領域に対する押下操作である携帯画面操作の検出、または自装置で独自に生成した画面を表示するために車両側表示部の表示領域に設けた自画面領域上の前記ハンズフリー通話への切替または通話の開始を指示するための切替ボタン画像の領域に対する押下操作である独自画面操作の検出をもとに前記ハンズフリー通話に切り替える車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  53.  請求項51または52において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信した場合には、自装置における音声を入出力する経路を、携帯電話機から入力された音声を車両用装置で出力するとともに、車両用装置に入力された音声を携帯電話機へ出力する経路に変更することで、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  54.  請求項51~53のいずれか1項において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信していない場合であって、前記携帯画面操作を検出してから所定時間内に前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  55.  請求項51~54のいずれか1項において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信していない場合であって、前記独自画面操作を検出した場合には、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  56.  請求項51~55のいずれか1項において、
     前記携帯電話機が着信状態となったことを検出する着信状態検出セクション(29b)と、
     前記独自画面領域上に、ハンズフリー通話への切り替えの要否を指示するための要否指示ボタン画像を表示させる要否指示ボタン画像表示セクション(29e)と、をさらに備え、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信していないとともに、前記車両側表示部に対する押下操作を検出していない場合であって、且つ、着信状態検出セクションで携帯電話機が着信状態となったことを検出した場合には、要否指示ボタン画像表示セクションによって独自画面領域上に要否指示ボタン画像を表示させることを特徴とする車両用装置。
  57.  請求項56において、
     前記車両側通話切替セクションは、前記独自画面領域上の前記要否指示ボタン画像の領域に対する、ハンズフリー通話への切り替えを必要とする旨の操作入力を検出した場合に、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  58.  請求項51~57のいずれか1項において、
     前記車両側通話切替セクションは、前記携帯電話機から通話音声データを受信していない場合に、ハンズフリー通話に切り替えることとなったときには、ハンズフリー通話へ切り替えることを要求する信号を携帯電話機に送信するとともに、自装置における音声を入出力する経路を、携帯電話機から入力された音声を車両用装置で出力するとともに、車両用装置に入力された音声を携帯電話機へ出力する経路に変更することで、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  59.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が着信中であることを検出する着信中検出セクション(29f)と、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29)と、
     前記携帯電話機が着信中であると着信中検出セクションで検出している間に前記車両側表示部に対する押下操作を検出してから、所定時間内に前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える着信時処理を行う車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  60.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機が発信状態および呼出状態のいずれかの状態となったことを検出する発呼状態検出セクション(29f)と、
     前記携帯電話機が通話状態となったことを検出する通話状態検出セクション(29)と、
     前記車両側表示部に対する押下操作を検出してから所定時間内に前記発呼状態検出セクションで前記携帯電話機が発信状態および呼出状態のいずれかの状態となったことを検出した後に、前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える発信時処理を行う車両側通話切替セクション(29)とを備えることを特徴とする車両用装置(2)。
  61.  請求項59において、
     前記携帯電話機が発信状態および呼出状態のいずれかの状態となったことを検出する発呼状態検出セクション(29f)を備え、
     前記車両側通話切替セクションは、
     前記携帯電話機が着信中であると前記着信中検出セクションで検出している間に前記車両側表示部に対する押下操作を検出してから、所定時間内に前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話に切り替える着信時処理を行う一方、
     前記携帯電話機が着信中であると着信中検出セクションで検出していない場合であって、且つ、前記車両側表示部に対する押下操作を検出してから所定時間内に前記発呼状態検出セクションで前記携帯電話機が発信状態および呼出状態のいずれかの状態となったことを検出した後の所定時間内に、前記通話状態検出セクションで前記携帯電話機が通話状態となったことを検出した場合に、ハンズフリー通話に切り替える発信時処理を行うことを特徴とする車両用装置。
  62.  請求項59または61において、
     前記携帯電話機が回線切断状態および待受状態のいずれかの状態となったことを検出する切断状態検出セクション(29f)を備え、
     前記車両側通話切替セクションは、前記着信時処理の途中で前記携帯電話機が回線切断状態および待受状態のいずれかの状態となったことを前記切断状態検出セクションで検出した場合には、ハンズフリー通話への切り替えを行わないことを特徴とする車両用装置。
  63.  請求項60または61において、
     前記携帯電話機が回線切断状態および待受状態のいずれかの状態となったことを検出する切断状態検出セクション(29f)を備え、
     前記車両側通話切替セクションは、前記発信時処理の途中で前記携帯電話機が回線切断状態および待受状態のいずれかの状態となったことを前記切断状態検出セクションで検出した場合には、ハンズフリー通話への切り替えを行わないことを特徴とする車両用装置。
  64.  請求項61において、
     前記携帯電話機が回線切断状態および待受状態のいずれかの状態となったことを検出する切断状態検出セクション(29f)を備え、
     前記車両側通話切替セクションは、前記着信時処理および前記発信時処理の途中で前記携帯電話機が回線切断状態および待受状態のいずれかの状態となったことを前記切断状態検出セクションで検出した場合には、ハンズフリー通話への切り替えを行わないことを特徴とする車両用装置。
  65.  請求項59~64のいずれか1項において、
     前記車両側通話切替セクションは、
     携帯電話機から通話音声データを受信した場合に、ハンズフリー通話に切り替える一方、
     携帯電話機から通話音声データを受信していない場合には、前記着信時処理もしくは前記発信時処理によってハンズフリー通話に切り替えることを特徴とする車両用装置。
  66.  タッチパネルを備えた携帯電話機(1)と通信を行うための通信部(23)と、
     車両内で使用される車両側表示部(24,25)とを備え、
     前記通信部を介して前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を前記車両側表示部に表示する処理と、
     当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記通信部を介して前記携帯電話機に送信する処理とを実行する制御回路(29)を備える車両用装置であって、
     前記携帯電話機の呼制御における状態を示す呼状態が予め定められた複数の呼状態のうちのいずれであるかを検出する呼状態検出セクション(29g)と、
     前記車両用タッチパネルに対する最新の押下操作の時刻を記録する最新押下時刻記録セクション(29g)と、
     最新押下時刻記録セクションで記録した最新の押下操作の時刻と、呼状態検出セクションで検出した携帯電話機の呼状態とをもとに、自装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話に切り替える車両側通話切替セクション(29)とを備え、
     前記車両側通話切替セクションは、前記呼状態検出セクションで検出した携帯電話機が特定の呼状態の場合、且つ、前記最新押下時刻記録セクションで記録した最新の押下操作の時刻と現在時刻との差が所定時間以内である場合に、ハンズフリー通話に切り替えることを特徴とする車両用装置(2)。
  67.  請求項66において、
     前記車両側通話切替セクションは、前記呼状態検出セクションで検出した携帯電話機の呼状態が通話中の状態である場合、且つ、前記最新押下時刻記録セクションで記録した最新の押下操作の時刻と現在時刻との差が所定時間以内である場合に、ハンズフリー通話に切り替える着信時処理を行うことを特徴とする車両用装置。
  68.  請求項66または67において、
     前記車両側通話切替セクションは、前記呼状態検出セクションで検出した携帯電話機の呼状態が発信中および呼出中のいずれかの状態であって、且つ、前記最新押下時刻記録セクションで記録した最新の押下操作の時刻と現在時刻との差が所定時間以内であった場合の後に、前記呼状態検出セクションで携帯電話機の呼状態が通話中となったことを検出した場合に、ハンズフリー通話に切り替える発信時処理を行うことを特徴とする車両用装置。
  69.  請求項68において、
     前記呼状態検出セクションは、前記呼状態として、回線切断および待受けの状態も検出するものであって、
     前記車両側通話切替セクションは、前記発信時処理の途中で前記携帯電話機が回線切断および待受けのいずれかの状態となったことを前記呼状態検出セクションで検出した場合には、ハンズフリー通話への切り替えを行わないことを特徴とする車両用装置。
  70.  請求項66~69のいずれか1項において、
     前記車両側通話切替セクションは、
     携帯電話機から通話音声データを受信した場合に、ハンズフリー通話に切り替える一方、
     携帯電話機から通話音声データを受信していない場合には、前記最新押下時刻記録セクションで記録した最新の押下操作の時刻と、前記呼状態検出セクションで検出した携帯電話機の呼状態とをもとに、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  71.  請求項59~70のいずれか1項において、
     前記車両側通話切替セクションは、ハンズフリー通話に切り替えることとなったときには、ハンズフリー通話へ切り替えることを要求する信号を前記携帯電話機に送信するとともに、自装置における音声を入出力する経路を、携帯電話機から入力された音声を車両用装置で出力するとともに、車両用装置に入力された音声を携帯電話機へ出力する経路に変更することで、ハンズフリー通話に切り替えることを特徴とする車両用装置。
  72.  タッチパネルを備えた携帯電話機(1)と通信を行って、前記タッチパネルの画面の画素情報を取得し、当該タッチパネルに表示されている画面を車両内で使用される車両側表示部(24,25)に表示するとともに、当該車両側表示部に対してユーザからの押下操作が行われた場合に、押下操作が行われた当該車両側表示部の画面上の画素領域に対応する前記タッチパネルの画面上での画素領域を操作対象領域として特定して、当該操作対象領域を示す信号を前記携帯電話機に送信する車両用装置(2)と通信によって接続される、タッチパネルを備えた携帯電話機(1)であって、
     自機器が、自機器に対するユーザの操作入力によって通話状態となったのか、前記車両用装置の車両側表示部に対するユーザの押下操作をもとに通話状態となったのかを識別する識別セクション(19a)と、
     前記車両用装置の車両側表示部に対するユーザの押下操作をもとに自機器が通話状態となったと前記識別セクションで識別した場合に、前記車両用装置のスピーカおよびマイクを用いて通話を行うハンズフリー通話へ切り替える携帯側通話切替セクション(19a)とを備えることを特徴とする携帯電話機。
  73.  請求項72において、
     前記携帯側通話切替セクションは、ハンズフリー通話へ切り替えることを要求する信号を前記車両用装置へ送信することを特徴とする携帯電話機。
  74.  タッチパネルを備えた携帯電話機(1)と、
     請求項1~71のいずれか1項に記載の車両用装置(2)とを含み、
     前記車両用装置は、
     ハンズフリー通話に切り替える場合に、ハンズフリー通話への切り替えを要求する要求信号を前記携帯電話機に送信し、
     前記携帯電話機は、
     前記車両用装置から送信された前記要求信号を受信した場合には、公衆回線から受信する音声信号を前記車両用装置へ送信することを特徴とする機器連携システム(100)。
  75.  タッチパネルを備えた携帯電話機(1)と、
     請求項1に記載の車両用装置(2)とを含み、
     前記車両用装置は、
     前記携帯電話機から音声信号を受信した場合に、ハンズフリー通話に切り替えることを特徴とする機器連携システム(100)。
  76.  タッチパネルを備えた携帯電話機(1)と、
     請求項1~71のいずれか1項に記載の車両用装置(2)とを含み、
     前記携帯電話機は、
     前記車両用装置から送信された前記操作対象領域を示す信号を受信した場合に、前記タッチパネルの画面上の当該操作対象領域を操作した場合と同様の入力を行うことを特徴とする機器連携システム(100)。
PCT/JP2012/001394 2011-03-23 2012-03-01 車両用装置、携帯電話機、および機器連携システム WO2012127791A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US14/004,484 US9055158B2 (en) 2011-03-23 2012-03-01 Vehicular apparatus, mobile phone, and instrument coordination system
CN201280014695.8A CN103460680B (zh) 2011-03-23 2012-03-01 车辆装置、移动电话和仪器协调系统
EP12760346.2A EP2690846B1 (en) 2011-03-23 2012-03-01 Device for vehicle

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011064733 2011-03-23
JP2011-064733 2011-03-23
JP2012023313A JP5445599B2 (ja) 2011-03-23 2012-02-06 車両用装置、および機器連携システム
JP2012-023313 2012-02-06

Publications (1)

Publication Number Publication Date
WO2012127791A1 true WO2012127791A1 (ja) 2012-09-27

Family

ID=46878971

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/001394 WO2012127791A1 (ja) 2011-03-23 2012-03-01 車両用装置、携帯電話機、および機器連携システム

Country Status (5)

Country Link
US (1) US9055158B2 (ja)
EP (2) EP3076639A1 (ja)
JP (1) JP5445599B2 (ja)
CN (1) CN103460680B (ja)
WO (1) WO2012127791A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014061155A1 (ja) * 2012-10-19 2014-04-24 三菱電機株式会社 情報処理装置、情報端末、情報処理システムおよびキャリブレーション方法
US10764481B2 (en) 2013-05-21 2020-09-01 Semiconductor Energy Laboratory Co., Ltd. Light-emitting device and camera

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014024617A1 (ja) * 2012-08-10 2014-02-13 株式会社Jvcケンウッド 情報機器、情報端末、情報システム、画像合成方法及びプログラム
JP6043545B2 (ja) * 2012-08-24 2016-12-14 京セラ株式会社 携帯端末装置、プログラムおよび携帯端末装置の制御方法
WO2014050525A1 (ja) 2012-09-26 2014-04-03 株式会社クボタ 対地作業車両、対地作業車両管理システム、対地作業情報表示方法
JPWO2014109106A1 (ja) * 2013-01-08 2017-01-19 クラリオン株式会社 通話制御装置、サーバおよびプログラム
KR101379893B1 (ko) * 2013-01-08 2014-04-01 정한욱 어플리케이션 실행 중 전화를 수신하기 위한 이동통신 단말기 및 그 방법
JPWO2014112095A1 (ja) * 2013-01-18 2017-01-19 三菱電機株式会社 情報表示制御装置
JP6033335B2 (ja) * 2013-01-18 2016-11-30 三菱電機株式会社 情報表示制御装置
WO2014112093A1 (ja) * 2013-01-18 2014-07-24 三菱電機株式会社 情報表示制御装置
CN104182167A (zh) * 2013-05-27 2014-12-03 阿尔派株式会社 显示装置、显示装置的操作方法以及信息显示系统
DE102013012777A1 (de) * 2013-07-31 2015-02-05 Valeo Schalter Und Sensoren Gmbh Verfahren zum Nutzen eines Kommunikationsendgeräts in einm Kraftfahrzeug beim aktivierten Autopiloten und Kraftfahrzeug
JP6259225B2 (ja) * 2013-08-22 2018-01-10 アルパイン株式会社 電子機器およびこれに接続された携帯端末のジェスチャ認識操作方法、車載システム
KR102110579B1 (ko) * 2013-10-24 2020-05-13 현대모비스 주식회사 차량용 핸즈프리 장치 및 그 장치의 휴대용 단말 기기 연결 제어 방법
US10306043B2 (en) 2014-03-19 2019-05-28 Sony Corporation Information processing apparatus and method to control a process based on control information
EP3124330B1 (en) * 2014-03-25 2019-11-27 Clarion Co., Ltd. Apparatus for vehicle
DE102014209983B4 (de) * 2014-05-26 2023-05-04 Volkswagen Aktiengesellschaft Verfahren zum Koppeln einer Bedieneinrichtung mit einer mobilen Einheit, Bedieneinrichtung und mobile Einheit
US9992319B2 (en) 2015-02-08 2018-06-05 Lg Electronics Inc. Method of outputting screens from server and client devices in performing mirrorlink
CN106515612A (zh) * 2015-09-11 2017-03-22 阿尔派株式会社 车载设备及车载通信系统
US9866677B1 (en) 2015-10-14 2018-01-09 Michael K Maguire Mobile device monitoring system
DE102016112833A1 (de) * 2016-07-13 2018-01-18 Visteon Global Technologies, Inc. Verfahren zum Erkennen von Softwareanwendungen und Nutzereingaben
JP6508251B2 (ja) * 2017-04-27 2019-05-08 トヨタ自動車株式会社 音声対話システムおよび情報処理装置
GB2564699B (en) * 2017-07-21 2021-04-07 Jaguar Land Rover Ltd Apparatus and method for generating contact recommendations
KR102014263B1 (ko) * 2017-12-27 2019-10-21 엘지전자 주식회사 차량 제어 장치 및 그것을 포함하는 차량
US11064920B2 (en) * 2018-08-07 2021-07-20 Biosense Webster (Israel) Ltd. Brain clot characterization using optical signal analysis, and corresponding stent selection
US10990239B1 (en) * 2020-03-30 2021-04-27 Honda Motor Co., Ltd. Display control apparatus, vehicle, and display control method
US20210314768A1 (en) * 2020-04-01 2021-10-07 Google Llc Bluetooth multipoint algorithm and private notifications

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001339504A (ja) * 2000-05-26 2001-12-07 Sharp Corp 無線通信機
JP2002247183A (ja) * 2001-02-16 2002-08-30 Denso Corp 携帯電話機およびプログラム
JP2003244343A (ja) * 2002-02-21 2003-08-29 Toyota Motor Corp 表示装置、携帯端末及び情報表示システム
JP2004134977A (ja) * 2002-10-09 2004-04-30 Fujitsu Ten Ltd ハンズフリー装置
JP2004140666A (ja) * 2002-10-18 2004-05-13 Toyota Motor Corp データ送受信システム及び移動端末装置
JP2006303585A (ja) * 2005-04-15 2006-11-02 Denso Corp ハンズフリー通話装置
JP2007096572A (ja) * 2005-09-28 2007-04-12 Aruze Corp 携帯電話機及び携帯用ホルダー
JP2007143119A (ja) 2005-10-18 2007-06-07 Denso Corp 車載ハンズフリー装置
JP2009017331A (ja) * 2007-07-06 2009-01-22 Pioneer Electronic Corp 音声処理装置、音声処理方法、音声処理プログラム及びその記録媒体
JP2009140488A (ja) * 2007-11-14 2009-06-25 Fujitsu Ten Ltd 車載装置および表示制御システム
JP2009224984A (ja) * 2008-03-14 2009-10-01 Denso Corp 車載ハンズフリー装置
JP2010130553A (ja) 2008-11-28 2010-06-10 Fujitsu Ten Ltd 車載装置
JP2010127781A (ja) * 2008-11-27 2010-06-10 Fujitsu Ten Ltd 車載装置および同装置を有する車載システム
JP2010136076A (ja) * 2008-12-04 2010-06-17 Denso Corp ハンズフリー機能付き車載装置及び携帯電話機
JP2010522492A (ja) * 2007-03-26 2010-07-01 イデント テクノロジー アーゲー 移動通信装置及び該移動通信装置のための入力装置
JP2010250376A (ja) * 2009-04-10 2010-11-04 Fujitsu Ten Ltd 情報提供システム、車載装置、及び携帯端末

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0150098B1 (ko) * 1995-12-19 1998-11-02 김주용 반향제거 시스템
JP3048964B2 (ja) * 1997-06-24 2000-06-05 邦彦 小池 電話送受信ユニット及び移動体通信端末
EP1301015B1 (en) * 2001-10-05 2006-01-04 Matsushita Electric Industrial Co., Ltd. Hands-Free device for mobile communication in a vehicle
US7308289B2 (en) * 2003-01-30 2007-12-11 General Motors Corporation Method and system for managing in-vehicle telephony
JP2004282380A (ja) 2003-03-14 2004-10-07 Sumitomo Electric Ind Ltd 表示システム、表示装置、映像信号切替装置、及びハンズフリー電話システム
JP4183627B2 (ja) 2004-01-14 2008-11-19 アルパイン株式会社 ハンズフリーシステム及びその着信受付け方法
JP4591257B2 (ja) 2005-07-27 2010-12-01 株式会社デンソー ハンズフリー装置
US20080125186A1 (en) * 2006-06-30 2008-05-29 Heng-Hsin Chen Bluetooth earphone capable of switching between multiple connections
US8155709B2 (en) * 2008-02-19 2012-04-10 Denso Corporation In-vehicle handsfree apparatus
US20100293462A1 (en) * 2008-05-13 2010-11-18 Apple Inc. Pushing a user interface to a remote device
JP4687778B2 (ja) 2008-12-04 2011-05-25 株式会社デンソー ハンズフリー機能付き車載装置
US8238979B2 (en) * 2009-04-14 2012-08-07 Qualcomm Incorporated System and method for mobile device display power savings
JP5586331B2 (ja) 2010-06-02 2014-09-10 アルパイン株式会社 コンテンツ表示装置およびコンテンツ表示方法

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001339504A (ja) * 2000-05-26 2001-12-07 Sharp Corp 無線通信機
JP2002247183A (ja) * 2001-02-16 2002-08-30 Denso Corp 携帯電話機およびプログラム
JP2003244343A (ja) * 2002-02-21 2003-08-29 Toyota Motor Corp 表示装置、携帯端末及び情報表示システム
JP2004134977A (ja) * 2002-10-09 2004-04-30 Fujitsu Ten Ltd ハンズフリー装置
JP2004140666A (ja) * 2002-10-18 2004-05-13 Toyota Motor Corp データ送受信システム及び移動端末装置
JP2006303585A (ja) * 2005-04-15 2006-11-02 Denso Corp ハンズフリー通話装置
JP2007096572A (ja) * 2005-09-28 2007-04-12 Aruze Corp 携帯電話機及び携帯用ホルダー
JP2007143119A (ja) 2005-10-18 2007-06-07 Denso Corp 車載ハンズフリー装置
JP2010522492A (ja) * 2007-03-26 2010-07-01 イデント テクノロジー アーゲー 移動通信装置及び該移動通信装置のための入力装置
JP2009017331A (ja) * 2007-07-06 2009-01-22 Pioneer Electronic Corp 音声処理装置、音声処理方法、音声処理プログラム及びその記録媒体
JP2009140488A (ja) * 2007-11-14 2009-06-25 Fujitsu Ten Ltd 車載装置および表示制御システム
JP2009224984A (ja) * 2008-03-14 2009-10-01 Denso Corp 車載ハンズフリー装置
JP2010127781A (ja) * 2008-11-27 2010-06-10 Fujitsu Ten Ltd 車載装置および同装置を有する車載システム
JP2010130553A (ja) 2008-11-28 2010-06-10 Fujitsu Ten Ltd 車載装置
JP2010136076A (ja) * 2008-12-04 2010-06-17 Denso Corp ハンズフリー機能付き車載装置及び携帯電話機
JP2010250376A (ja) * 2009-04-10 2010-11-04 Fujitsu Ten Ltd 情報提供システム、車載装置、及び携帯端末

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2690846A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014061155A1 (ja) * 2012-10-19 2014-04-24 三菱電機株式会社 情報処理装置、情報端末、情報処理システムおよびキャリブレーション方法
US10764481B2 (en) 2013-05-21 2020-09-01 Semiconductor Energy Laboratory Co., Ltd. Light-emitting device and camera

Also Published As

Publication number Publication date
EP3076639A1 (en) 2016-10-05
EP2690846B1 (en) 2016-08-10
CN103460680A (zh) 2013-12-18
EP2690846A4 (en) 2014-08-27
JP2012213141A (ja) 2012-11-01
US9055158B2 (en) 2015-06-09
JP5445599B2 (ja) 2014-03-19
US20140018056A1 (en) 2014-01-16
EP2690846A1 (en) 2014-01-29
CN103460680B (zh) 2016-01-06

Similar Documents

Publication Publication Date Title
JP5445599B2 (ja) 車両用装置、および機器連携システム
JP4506778B2 (ja) 車載装置
US20120244814A1 (en) Handsfree apparatus
US20160150066A1 (en) Method and Apparatus for Providing In-Vehicle Bluetooth Pairing
JP2016509767A (ja) 車両用システム及び通信方法
JP6036862B2 (ja) 車両用装置
JP2007067724A (ja) 携帯端末装置及び表示方法
KR20040012562A (ko) 이동 통신 단말 장치
JP5854244B2 (ja) 車載情報システム
CN105068958A (zh) 切换控制方法及装置
CN105162982A (zh) 接听扩展功能显示方法及装置
CN111577010B (zh) 汽车的遥控控制方法、装置及存储介质
JP5849857B2 (ja) 近距離無線通信装置
JP2006303584A (ja) 携帯電話機から遠隔操作コマンドを受信する車載用受信装置、車載用受信装置用プログラム、携帯電話機、および携帯電話機用プログラム。
CN105227739A (zh) 车载蓝牙播报方法和装置
JP5726008B2 (ja) 接続機器一覧の表示制御装置および表示制御方法
JP2010130552A (ja) 遠隔操作システム及び遠隔操作方法
CN110087223B (zh) 通信连接方法、通信设备及存储介质
CN106210262A (zh) 图片分享方法、装置和移动设备
JP2012080333A (ja) 無線通信装置および通信相手探索結果表示方法
JP5573809B2 (ja) 制御装置
JP5316613B2 (ja) 近距離無線通信機能付きメール操作装置
US8825038B2 (en) Method for controlling mobile terminal having projection function by using headset
JP6331342B2 (ja) 無線lan通信端末、車両無線lan通信システム及び無線lan回線接続制御プログラム
JP7111553B2 (ja) ハンズフリー制御装置、ハンズフリー制御装置の制御方法、及びハンズフリーシステム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12760346

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2012760346

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2012760346

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 14004484

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE