WO2015033947A1 - 携帯型端末、車載装置、制御方法、及び制御プログラム - Google Patents

携帯型端末、車載装置、制御方法、及び制御プログラム Download PDF

Info

Publication number
WO2015033947A1
WO2015033947A1 PCT/JP2014/073131 JP2014073131W WO2015033947A1 WO 2015033947 A1 WO2015033947 A1 WO 2015033947A1 JP 2014073131 W JP2014073131 W JP 2014073131W WO 2015033947 A1 WO2015033947 A1 WO 2015033947A1
Authority
WO
WIPO (PCT)
Prior art keywords
application program
portable terminal
application
vehicle
foreground
Prior art date
Application number
PCT/JP2014/073131
Other languages
English (en)
French (fr)
Inventor
信一 赤間
直人 古山
善寛 三塩
裕二 横田
元博 久保
加藤 卓也
Original Assignee
本田技研工業株式会社
パイオニア株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 本田技研工業株式会社, パイオニア株式会社 filed Critical 本田技研工業株式会社
Priority to CN201480048465.2A priority Critical patent/CN105519083B/zh
Priority to US14/913,585 priority patent/US9648155B2/en
Priority to JP2015535487A priority patent/JP6133993B2/ja
Publication of WO2015033947A1 publication Critical patent/WO2015033947A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3688Systems comprising multiple parts or multiple output devices (not client-server), e.g. detachable faceplates, key fobs or multiple output screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface

Definitions

  • the present invention relates to a portable terminal, an in-vehicle device, a control method, and a control program.
  • This application claims priority based on Japanese Patent Application No. 2013-183416 for which it applied on September 4, 2013, and uses the content here.
  • multi-function mobile phones such as multi-function mobile phone terminals (smartphones) have become widespread.
  • the multifunctional mobile phone terminal realizes various functions by installing various applications. Many of such applications have functions that are conventionally incorporated in audio, such as radio and music data playback.
  • audio installed in the multifunctional mobile phone terminal in the in-vehicle device.
  • An aspect according to the present invention has been made in view of the above-described problems of the related art, and a portable terminal capable of smoothly switching an application program on a portable terminal side based on information acquired from the on-vehicle apparatus side.
  • An object is to provide an apparatus, a control method, and a control program.
  • One aspect of the present invention is a portable terminal that communicates with an in-vehicle device, and is information that instructs switching of a sound source transmitted from the in-vehicle device, and is executed by the own terminal that is the sound source
  • a communication control unit that controls reception of information including information indicating the application program being transmitted and transmission of audio reproduced by the application program operating in the foreground of the terminal to the in-vehicle device; and the reception
  • the switching unit that switches the application program that was running in the foreground until immediately before to the background and the application program that was running in the background until just before is based on the information that instructs to switch the sound source And was operating in the foreground until just before Playing the audio of the application program is stopped, after the stop, and a sound control section for starting playback of the audio of the application program was in operation in the background until the last minute.
  • the voice control unit stops the playback of the voice of the application program that has been operating in the foreground until immediately before the switching, after the switching unit is switched, and the stop Then, the playback of the sound of the application program that has been operating in the background until immediately before may be started.
  • the voice control unit may start playback of the voice by a dedicated API (Application Programming Interface).
  • a dedicated API Application Programming Interface
  • An aspect according to the present invention is a method for controlling a portable terminal that communicates with an in-vehicle device, which is information for instructing switching of a sound source transmitted from the in-vehicle device, Receiving information including information indicating an application program executed in the terminal, transmitting audio reproduced by the application program operating in the foreground of the terminal itself to the in-vehicle device, and the received sound source Switching the application program that was operating in the foreground until immediately before to the background, and switching the application program that was operating in the background until immediately before to the foreground based on the information that instructs switching It was running in the foreground until just before Playing the audio of the publication program is stopped, after the stop, including a possible to start playing the audio of the application program was in operation in the background until the last minute.
  • One aspect according to the present invention is information that instructs a portable terminal computer that communicates with an in-vehicle device to switch sound sources transmitted from the in-vehicle device, and is executed by the own terminal that is the sound source.
  • a procedure for receiving information including information indicating the application program being performed, a procedure for transmitting audio reproduced by an application program operating in the foreground of the terminal itself to the in-vehicle device, and switching of the received sound source
  • Was working in the foreground Playing the audio of the application program is stopped, after the stop, which is a control program for executing a procedure for starting the reproduction of the audio of the application program was in operation in the background until the last minute.
  • One aspect according to the present invention is an in-vehicle device that communicates with a portable terminal, the receiving means for receiving a sound reproduced by an application program operating in the foreground of the portable terminal, and the reception An output means for outputting the sound received by the means; an acquisition means for acquiring information indicating the switching of the sound source; and information executed by the portable terminal based on the information indicating the switching of the sound source acquired by the acquisition means.
  • the application program includes information indicating the application program that is running, and the application program that has been operating in the foreground until immediately before in the portable terminal is switched to the background, and the application that has been operating in the background until immediately before. To switch the program to the foreground The distribution, and transmission means for transmitting to said portable terminal.
  • the information processing apparatus further includes a communication unit that transmits information indicating at least one application program being executed on the terminal to the in-vehicle device. Also good.
  • the receiving means may receive information indicating at least one application program executed on the portable terminal from the portable terminal.
  • the portable terminal receives information instructing switching of the sound source transmitted from the in-vehicle device, and based on the received information instructing switching of the sound source.
  • the application program that was running in the foreground until immediately before is switched to the background, the application program that was running in the background until immediately before is switched to the foreground, and the voice of the application program that was running in the foreground until immediately before On the in-vehicle device side, without depending on the music application standard installed on the portable terminal. Based on information obtained from You can switch the portable terminal-side application program smoothly.
  • the portable terminal switches the application program that was operating in the foreground until immediately before to the background, and switches the application program that was operating in the background until immediately before to the foreground. To stop the playback of the sound of the application program that was operating in the foreground until immediately before, and to start the playback of the sound of the application program that was operating in the background until immediately before, it is possible to smoothly switch the application program for reproducing sound on the portable terminal side.
  • the portable terminal is specified for each portable terminal in order to start playing the audio of the application program that was running in the background until just before by a dedicated API (Application Programming Interface).
  • API Application Programming Interface
  • the in-vehicle device acquires information instructing switching of the sound source acquired in the vehicle, and operates on the mobile terminal in the foreground until just before based on the acquired information instructing switching of the sound source.
  • the application program that was running in the foreground is switched to the background, and information for switching the application program that was running in the background to the foreground is sent to the foreground.
  • Depends on the music application standard installed on the portable terminal by stopping the playback of the sound of the application program and starting the playback of the sound of the application program that was running in the background until just before This No, can be based on the information obtained from the in-vehicle apparatus, it switches the portable terminal-side application program smoothly.
  • FIG. 1 is a diagram illustrating an example of a functional configuration of an electronic communication system 1.
  • FIG. FIG. 3 is a diagram illustrating an example of a software structure of various application programs realized by a processor 330 of the portable terminal 300 illustrated in FIG. 2. It is a figure which shows the other example of the software structure of the various application programs which the processor 330 of the portable terminal 300 shown in FIG. 2 implement
  • FIG. 11 is a sequence diagram for explaining an example of the flow of operations of the in-vehicle display device 200 and the portable terminal 300 at the time of sound source switching when the foreground application of the portable terminal 300 is an app appN that is a music application with a built-in portable terminal. . It is a figure explaining the operation
  • FIG. It is a figure explaining the example of the operation
  • FIG. It is a conceptual diagram for explaining sound source switching operation by the in-vehicle switch 100, images displayed on the in-vehicle display device 200 before and after sound source switching, and reproduced sound.
  • FIG. 1 is a diagram illustrating an example of a usage situation of an electronic communication system 1 according to the first embodiment.
  • the electronic communication system 1 in the first embodiment includes, for example, a vehicle-mounted switch 100, a vehicle-mounted display device 200 (vehicle-mounted device), and a portable terminal 300.
  • the in-vehicle switch 100 is, for example, a steering switch mounted on the car Car.
  • the steering switch is a switch provided in the steering strg of the automobile shown in FIG.
  • the in-vehicle switch 100 is communicably connected to the in-vehicle display device 200 via a steering ECU (Electronic Control Unit), an in-vehicle bus BS, and the like. Wired communication via the in-vehicle bus BS is performed, for example, according to the CAN (Controller Area Network) standard.
  • CAN Controller Area Network
  • the in-vehicle switch 100 functions as a switch for switching the sound source of sound reproduced through the in-vehicle display device 200 when connected to the in-vehicle display device 200, and functions as, for example, an air conditioner switch when not connected.
  • the sound source reproduced through the in-vehicle display device 200 is, for example, FM (Frequency Modulation) radio, AM (Amplitude Modulation) radio, CD (Compact Disc, registered trademark), MD (MiniDisc, registered trademark), DVD (Digital Versatile Disc (registered trademark), BD (Blu-ray Disc, registered trademark), car navigation, and an application program that reproduces voice installed in a multi-function mobile phone terminal described later.
  • the in-vehicle display device 200 is, for example, an in-vehicle device mounted on an automobile Car, and includes a display unit and a speaker. Specifically, the in-vehicle display device 200 is an audio with display, a car navigation device, or the like, but an in-vehicle television receiver or the like may also be used.
  • the in-vehicle display device 200 is connected to the portable terminal 300 so as to be communicable with a plurality of communication specifications (for example, by wireless communication or wired communication via the cable Cbl).
  • Wireless communication is performed, for example, according to the Bluetooth (registered trademark) standard.
  • the wireless communication may be performed by a wireless LAN (Local Area Network), Wi-Fi Direct (registered trademark), or the like.
  • wired communication via the cable Cbl is performed according to standards such as HDMI (High-Definition Multimedia Interface, registered trademark) and USB (Universal Serial Bus).
  • the in-vehicle display device 200 When the in-vehicle display device 200 acquires information instructing switching of the sound source from the in-vehicle switch 100 through CAN communication from the car Car, the in-vehicle display device 200 transmits the acquired information to the portable terminal 300 through wireless communication described above. Moreover, the vehicle-mounted display apparatus 200 receives the input from a user by the input reception part mentioned later, and outputs the information showing the input from the received user to the portable terminal 300 via the cable Cbl.
  • the information representing the input from the user is, for example, information related to the coordinates touched on the touch panel, but may be information on pressing various buttons, information on turning on / off various switches different from the in-vehicle switch 100, or the like. Good.
  • the in-vehicle display device 200 acquires various images and sounds from the portable terminal 300, and outputs the acquired images and sounds to a display unit and a speaker of the device described later.
  • the portable terminal 300 is, for example, a multi-function mobile phone terminal (smart phone), but it can be portable, such as a mobile phone terminal, a tablet PC (Personal Computer), a notebook PC, an electronic book reader, or a PDA (Personal Digital Assistant).
  • the type of information terminal may be used.
  • the portable terminal 300 is installed with various application programs, and has various functions depending on the activated various application programs. As an example of such a function, there are an application program having an audio function for performing radio and music reproduction, and an application program having a car navigation function.
  • the portable terminal 300 acquires information instructing switching of the sound source from the in-vehicle display device 200 by, for example, wireless communication, switches the application program that is running in the foreground based on the acquired information, and starts up in the foreground. Play the audio of the switched application program. In addition, when the application program activated in the foreground is switched, the portable terminal 300 stops the sound reproduced by the application program activated in the foreground until immediately before. The portable terminal 300 transmits the audio reproduced by the application program running in the foreground to the in-vehicle display device 200 by, for example, wired communication performed via the cable Cbl.
  • the portable terminal 300 can acquire information instructing switching of a sound source by the in-vehicle switch 100 from the in-vehicle display device 200, and can switch a sound source for reproducing sound based on the acquired information.
  • information transmitted / received by wireless communication and wired communication may have an opposite relationship (for example, audio may be transmitted / received wirelessly, and information for switching sound sources may be transmitted / received by wired communication).
  • FIG. 2 is a diagram illustrating an example of a functional configuration of the electronic communication system 1.
  • the in-vehicle display device 200 includes, for example, a vehicle-side first communication unit 210 (transmission unit), a vehicle-side second communication unit 220 (reception unit), a processor 230, a vehicle-side storage unit 240, and a vehicle-side input reception unit. 250, a display unit 260, a speaker 270 (output means), and an in-vehicle switch input receiving unit 280.
  • the vehicle-side first communication unit 210 is a wireless communication module that includes, for example, a Bluetooth antenna and performs wireless communication based on the Bluetooth standard, and performs communication using a 2.4 GHz band ISM (Industry Science Medical band). .
  • ISM Industry Science Medical band
  • the wireless communication system of the Bluetooth standard spread spectrum communication of frequency hopping (FH: FrequencyFHopping) method is used.
  • the frequency band of 2.4 GHz band is divided into 79 frequency channels (hereinafter referred to as communication channels) at 1 MHz intervals, and switching of frequency channels to be used is performed in time division for each time slot based on the hopping pattern. Is performed (frequency hopping).
  • the wireless communication system of the Bluetooth standard is performed by a master / slave system, and the hopping pattern is managed by the master. Using the same hopping pattern, a wireless network called a piconet can be formed and communicated between one master and up to seven slaves.
  • the vehicle-side first communication unit 210 performs wireless communication with the mobile-side first communication unit 310 of the mobile terminal 300 based on the Bluetooth standard.
  • the vehicle-side second communication unit 220 includes, for example, hardware for performing communication based on the HDMI (registered trademark) standard.
  • the vehicle-side second communication unit 220 relates to, for example, an image signal, an audio signal, and an image format between an HDMI (registered trademark) terminal to which an HDMI (registered trademark) cable is connected and a device that outputs an image or sound.
  • an interface unit capable of transmitting and receiving various types of information. This interface unit has a plurality of channels, and various images or sounds are transmitted / received using TMDS (Transition Minimized Differential Signaling) channels.
  • TMDS Transition Minimized Differential Signaling
  • the vehicle-side second communication unit 220 further includes hardware for performing communication based on the USB standard.
  • the vehicle-side second communication unit 220 includes a USB connector and an interface unit capable of transmitting and receiving various types of information related to image signals, audio signals, and image formats between a device that outputs images and sounds.
  • the processor 230 is, for example, a CPU (Central Processing Unit) of the in-vehicle display device 200.
  • the processor 230 implements the following software function units by executing various programs stored in the vehicle-side storage unit 240 described later.
  • the processor 230 includes, for example, a vehicle-side input determination unit 231, a vehicle-side information providing unit 232, a vehicle-side first communication control unit 233, a vehicle-side second communication control unit 234, and an output control unit as software function units. 235.
  • the vehicle-side input determination unit 231 receives information representing the input from the user acquired by the processor 230 from the vehicle-side input reception unit 250 or the vehicle-mounted switch input reception unit 280, which will be described later, from the user acquired from the vehicle-side input reception unit 250. It is determined whether the information represents an input or information representing a user input acquired from the in-vehicle switch input reception unit 280. When the information indicating the input from the user acquired by the processor 230 is information acquired from the in-vehicle switch input receiving unit 280, the vehicle-side input determination unit 231 uses the information as information for instructing switching of the sound source, which will be described later. To the sound source switching unit 236.
  • the vehicle-side input determination unit 231 uses the information on the vehicle-side second communication control unit 234. Output to.
  • the information indicating the input from the user acquired from the vehicle-side input receiving unit 250 is information (for example, information on coordinates where the touch operation is performed) indicating the operation received by the vehicle-side input receiving unit 250 from the user.
  • Information indicating various application programs includes, for example, information indicating that communication with the vehicle-side first communication control unit 233 for each application program is possible, and information between the vehicle-side first communication control unit 233 for each application program.
  • Information related to communications performed in The sound source switching unit 236 generates a sound source switching destination candidate based on this information.
  • the sound source switching unit 236 acquires information instructing sound source switching from the vehicle-side input determination unit 231
  • the sound source switching unit 236 is based on the acquired information and information indicating various application programs stored in the vehicle-side storage unit 240.
  • the sound source of the in-vehicle display device 200 is switched based on the sound source switching destination candidate generated in this way.
  • the sound source switching unit 236 generates FM radio, AM radio, and various application programs of the portable terminal 300 as sound source switching destination candidates as sound source switching candidates.
  • the sound source switching unit 236 selects various application programs of the portable terminal 300 when switching sound sources
  • the sound source switching unit 236 displays information instructing switching of the sound source to the selected application program as the vehicle-side first communication control unit.
  • the information for instructing switching of the sound source to the selected application program includes, for example, information for identifying the selected application program, and is hereinafter referred to as selected application sound source switching information.
  • the vehicle-side information providing unit 232 is a functional unit for providing vehicle information to the portable terminal 300 by the vehicle-side first communication unit 210, for example, and can be acquired from the vehicle such as selected application sound source switching information through wireless communication. An operation based on a dedicated protocol for transmitting and receiving vehicle information is performed.
  • the vehicle side information providing unit 232 Upon acquiring the selected application sound source switching information from the sound source switching unit 236, the vehicle side information providing unit 232 outputs the acquired selected application sound source switching information to the portable terminal 300.
  • the vehicle-side information providing unit 232 outputs the acquired selected application sound source switching information to the vehicle-side first communication control unit 233 and converts it into a PDU (Protocol Data Unit) that can be transmitted by the vehicle-side first communication unit 210. Then, the data is transmitted to the portable terminal 300.
  • the vehicle side information provision part 232 and the vehicle side 1st communication control part 233 may be an integrated function part.
  • the vehicle-side first communication control unit 233 converts the selected application sound source switching information acquired from the vehicle-side information providing unit 232 into a PDU that can be transmitted by the vehicle-side first communication unit 210. Then, the vehicle-side first communication control unit 233 causes the vehicle-side first communication unit 210 to transmit the converted PDU to the portable terminal 300.
  • the vehicle-side second communication control unit 234 is information converted into PDUs that can be transmitted / received by the vehicle-side second communication unit 220, and information related to various images and sounds acquired from the portable terminal 300 is displayed on the vehicle-mounted display device 200. Convert to information in a format that can be handled by. In addition, the vehicle-side second communication control unit 234 converts information representing the input from the user acquired from the vehicle-side input receiving unit 250, which will be described later, into a PDU that can be transmitted and received by the vehicle-side first communication unit 210. The second communication unit 220 transmits the converted PDU to the portable terminal 300.
  • vehicle-side second communication control unit 234 receives the above-described launcher application of the portable terminal 300 from the portable second communication unit 320 (communication unit) of the portable terminal 300 via the vehicle-side second communication unit 220. Acquires information indicating various application programs visualized, and outputs the acquired information to the sound source switching unit 236.
  • the output control unit 235 outputs the image converted into a format that can be handled by the vehicle-side second communication control unit 234 to the display unit 260 for display, and outputs the converted sound to the speaker 270 for blowing.
  • the output control unit 235 acquires the AM radio or FM radio audio signal from the radio reception unit 290 and acquires the acquired audio signal. Based on the above, the sound is reproduced by the speaker 270.
  • the vehicle-side storage unit 240 includes, for example, a RAM, a register, an HDD (Hard Disk Drive), an SSD (Solid State Drive), or the like.
  • the vehicle side storage unit 240 stores various programs executed by the processor 230.
  • the vehicle-side input reception unit 250 is, for example, a touch panel, but may include various buttons and switches mounted on the in-vehicle display device 200.
  • the vehicle-side input reception unit 250 receives input from the user, and outputs information indicating the received operation (for example, information on coordinates where the touch operation has been performed) to the processor 230.
  • the display unit 260 is, for example, a liquid crystal display panel or an organic EL (ElectroLuminescence) display panel.
  • the display unit 260 displays the image acquired from the output control unit 235.
  • the speaker 270 sounds the sound acquired from the output control unit 235.
  • the in-vehicle switch input reception unit 280 receives input from the user from the in-vehicle switch 100 through CAN communication, and outputs information representing the input from the received user to the processor 230.
  • the radio reception unit 290 includes an antenna and an antenna circuit, a tuning circuit, a detection circuit, and an output circuit that receive radio signals of radio broadcasts such as AM radio broadcasts and FM radio broadcasts. Output to the processor 230.
  • the portable terminal 300 includes, for example, a portable first communication unit 310, a portable second communication unit 320, a processor 330, a portable storage unit 340, a portable input receiving unit 350, a display unit 360, A speaker 370 and an external communication unit 380 are provided.
  • the mobile-side first communication unit 310 is a wireless communication module that performs wireless communication based on the Bluetooth standard, and performs communication with the vehicle-side first communication unit 210.
  • the mobile-side second communication unit 320 includes hardware for performing communication based on the HDMI (registered trademark) standard and hardware for performing communication based on the USB standard. That is, the in-vehicle display device 200 and the portable terminal 300 are physically connected to the vehicle-side second communication unit 220 and the portable second communication unit 320 by an HDMI (registered trademark) cable or a USB cable. Thus, it is possible to transmit and receive various images, sounds, and information representing input from the user by communication based on the HDMI (registered trademark) standard or communication based on the USB standard.
  • the processor 330 is, for example, a CPU.
  • the processor 330 executes various programs stored in a portable storage unit 340 described later.
  • the program executed by the processor 330 includes, for example, various application programs executed by the processor 330 as the application function unit 331.
  • Application function unit 331 is various application programs executed by processor 330.
  • the application function unit 331 performs the following operations based on various information acquired from the mobile side first communication unit 310, the mobile side second communication unit 320, the mobile side input reception unit 350, and the like.
  • the application function unit 331 generates an image to be displayed on the display unit 170.
  • the application program 131 generates a sound to be emitted from the speaker 180.
  • the application function unit 331 reproduces the sound of the music data stored in the portable storage unit 340.
  • the application function unit 331 receives Internet radio broadcast data from the external communication unit 380 and reproduces the sound of the received data.
  • the application function unit 331 displays the generated image on the display unit 360 and outputs the reproduced sound to the speaker 180 to make it sound.
  • Application function unit 331 can simultaneously operate a plurality of application programs.
  • an application program that generates an image displayed on the foreground of the display unit 360 is referred to as a foreground application.
  • An application program that is not displayed on the display unit 360 but is executed by the processor 330 is referred to as a background application.
  • the application function unit 331 transmits the image and sound of the application program being operated as the foreground application to the vehicle-side second communication unit 220 of the in-vehicle display device 200 via the mobile-side second communication unit 320. Further, the application function unit 331 transmits information for identifying various application programs being executed by the processor 330 to the vehicle-side second communication unit 220 via the portable-side second communication unit 320.
  • the portable storage unit 340 includes, for example, a flash memory, a RAM (Random Access Memory), a register, and the like.
  • the portable storage unit 340 stores various programs executed by the processor 330.
  • the portable-side input receiving unit 350 is, for example, a touch panel, but may include various buttons and switches.
  • the portable-side input reception unit 350 receives input from the user and outputs information representing the received operation to the processor 330.
  • the display unit 360 is, for example, a liquid crystal display panel or an organic EL display panel.
  • the display unit 360 displays an image generated by the foreground application operating in the application function unit 331.
  • the portable-side input receiving unit 350 and the display unit 360 may be an integrated display with a touch panel.
  • the speaker 370 sounds the sound reproduced by the foreground application operating in the application function unit 331.
  • the external communication unit 380 includes an antenna, a modulation unit, an encoding / demodulation unit, an up / down converter, and the like.
  • the external communication unit 190 transmits and receives information to and from various servers existing on the Internet, for example, by performing communication via a mobile communication network or a wireless LAN.
  • FIG. 3 is a diagram illustrating an example of a software structure of various application programs realized by the processor 330 of the portable terminal 300 illustrated in FIG.
  • the apps app1 to appN can be operated by the processor 330 executing various application programs.
  • the app app1 is a launcher app and visualizes various application programs that can communicate with the in-vehicle display device 200 as a collection of links. That is, the app app1 causes the display unit 360 to display an image in which the link destination is represented by an icon or the like.
  • the app app2 is a music application program that transmits audio reproduced by the app app2 to the in-vehicle display device 200 via a mobile communication control unit APM described later included in the app app1, and is hereinafter referred to as a dedicated communication control compatible music app. .
  • the app app3 is a music application program that transmits the audio reproduced by the app app3 to the in-vehicle display device 200 via the portable second communication unit 320 directly without using the app app1. This is called a music application.
  • the app app3 communicates with the in-vehicle display device 200 via the portable second communication unit 320 by a unique protocol different from a dedicated protocol for defining communication performed by the portable communication control unit APM.
  • the app appN is a music application program built in the portable terminal 300, and transmits the audio reproduced by the app appN to the in-vehicle display device 200 via the portable communication control unit APM, similarly to the app app2.
  • the app appN when executed once by the processor 330, can be used to reproduce other sounds regardless of whether it is a foreground application or a background application.
  • the audio reproduced by the app appN is given priority over the reproduced audio and output to the speaker 370 or the in-vehicle display device 200.
  • this preferential audio output is referred to as the audio output priority of the app appN, and the app appN will be described as having the audio output priority.
  • the portable terminal 300 since the app appN has the voice output priority, the portable terminal 300 that has operated the app appN ends the operation of the app appN or stops the playback of the voice of the app appN (stops the stop). Unless it is included), the sound of an application program different from the app appN cannot be output to the speaker 370 or the in-vehicle display device 200.
  • the application function unit 331 is drawn so as to include only the music application program.
  • the application function unit 331 is not limited to this.
  • the application function unit 331 may include a car navigation application or an Internet radio application. Good.
  • the app app ⁇ b> 1 includes a mobile side information providing unit LPA, a mobile side communication control unit APM (communication control unit), a mobile side input determination unit 332, and an application switching unit 334 (switching unit). ) And an audio reproduction stop control unit 336 (audio control unit).
  • the mobile side information providing unit LPA is a functional unit for receiving the selected application sound source switching information by the mobile side first communication unit 310, and is configured by a dedicated protocol for transmitting and receiving vehicle information.
  • the portable side information providing unit LPA receives the selected application sound source switching information from the in-vehicle display device 200 via the portable side communication control unit APM.
  • the mobile side information providing unit LPA transmits not only the selected application sound source switching information but also other vehicle information such as the speed of the car Car, the rotational speed of the engine, the exhaust sound, etc. via the mobile side communication control unit APM. You may send and receive.
  • the mobile communication control unit APM receives the selected application sound source switching information converted into a PDU that can be transmitted and received by wireless communication. Further, the portable communication control unit APM is a PDU that can transmit and receive information for identifying various images, sounds, and various application programs transmitted to the vehicle second communication unit 220 by the portable second communication unit 320 that performs wired communication. And the converted PDU is transmitted to the vehicle-side second communication unit 220. Further, the mobile communication control unit APM receives information from the vehicle-side second communication unit 220 that is input from the user and converted into PDUs that can be transmitted and received by the mobile-side second communication unit 320. Via the second communication unit 320 on the side.
  • the application switching unit 334 switches the foreground application based on the selected application sound source switching information acquired by the mobile information providing unit LPA. Specifically, the application switching unit 334 changes the running apps app2 to appN from the foreground application to the background application or the background application based on the information for identifying the application included in the selected application sound source switching information. Control to switch to the foreground application.
  • the application switching unit 334 holds the foreground application when the information for identifying the application included in the selected application sound source switching information by the application switching unit 334 indicates an application program currently operating as the foreground application.
  • the portable terminal 300 Since the application switching unit 334 switches the foreground application based on the information for identifying the application included in the selected application sound source switching information, the portable terminal 300 temporarily uses the in-vehicle switch 100 as a sound source switching destination, like the app app3. Even when a dedicated music app that does not support dedicated communication control is selected as the foreground application, the foreground application can be switched to the music app that supports dedicated communication control by the next sound source switching operation.
  • the audio reproduction stop control unit 336 stops the reproduction of the application program that has been switched from the foreground application to the background application by the application switching unit 334, and reproduces the audio of the application program that has been switched from the background application to the foreground application. Let it begin.
  • the audio reproduction stop control unit 336 starts audio reproduction using, for example, a dedicated API (Application Programming Interface) that can control an audio reproduction start unit 338 (audio control unit) described later.
  • the apps app2 to appN have the function of the audio reproduction start unit 338.
  • the audio reproduction start unit 338 starts audio reproduction when a request for audio reproduction start by the dedicated API used by the audio reproduction stop control unit 336 is acquired from the audio reproduction stop control unit 336.
  • the portable terminal 300 Due to the functions of the audio reproduction stop control unit 336 (audio control unit) and the audio reproduction start unit 338 (audio control unit) described above, the portable terminal 300 once uses the app appN as a sound source switching destination by the in-vehicle switch 100. Even if a music application with a built-in portable terminal with such a voice output priority is selected as the foreground application, the sound of the music application with a built-in portable terminal with a voice output priority is Playback can be stopped. And the portable terminal 300 can reproduce
  • the application switching unit 334 of the application app1 that is the launcher application switches the foreground application based on the selected application sound source switching information acquired from the in-vehicle display device 200, and the sound reproduction stop control is performed.
  • the unit 336 stops the playback of the background application sound and starts to play the foreground application sound.
  • FIG. 4 is a diagram showing another example of the software structure of various application programs realized by the processor 330 of the portable terminal 300 shown in FIG.
  • the app app1 has the functions of the mobile side communication control unit APM and the mobile side information providing unit LPA, and the apps app2 to appN are the app switching unit 334, the audio playback stop control unit 336, and the audio playback. It has a function with the start part 338. Therefore, the app app1 acquires the selected application sound source switching information from the in-vehicle display device 200, and outputs the acquired selected application sound source switching information to the apps app2 to appN.
  • the apps app2 to appN perform switching from the foreground application to the background application or from the background application to the foreground application based on the acquired selected application sound source switching information. Then, the apps app2 to appN stop the playback of the audio of the application program that has been switched from the foreground application to the background application by the application switching unit 334, the audio reproduction stop control unit 336, and the audio reproduction start unit 338, and from the background application Start playing the audio of the application program that has switched to the foreground application.
  • the app app1 that is the launcher application acquires the selected app sound source switching information from the in-vehicle display device 200, but the foreground application switching or the playback of the background application sound is stopped.
  • the application program for each of the apps app2 to appN performs the reproduction of the sound of the foreground application.
  • FIG. 5 illustrates an example of the flow of operations of the in-vehicle display device 200 and the portable terminal 300 at the time of sound source switching when the foreground application of the portable terminal 300 is the app app3 that is a music application that does not support dedicated communication control.
  • FIG. 5 illustrates an example of the flow of operations of the in-vehicle display device 200 and the portable terminal 300 at the time of sound source switching when the foreground application of the portable terminal 300 is the app app3 that is a music application that does not support dedicated communication control.
  • Step S400 the in-vehicle display device 200 receives information instructing switching of the sound source from the user by the in-vehicle switch input reception unit 280.
  • the information received by the in-vehicle switch input receiving unit 280 in step S400 indicates the switching of the sound source to the FM radio.
  • Step S420 the in-vehicle display device 200 starts reproduction of the FM radio sound based on the received information for instructing switching of the sound source, and sounds the FM radio sound from the speaker 270.
  • Step S440 the in-vehicle display device 200 receives information instructing switching of the sound source from the user by the in-vehicle switch input receiving unit 280 again.
  • the information received by the in-vehicle switch input receiving unit 280 in step S440 indicates switching of the sound source to the app app3 that is a music application that does not support dedicated communication control.
  • Step S460 the sound source switching unit 236 of the in-vehicle display device 200 has acquired the information for instructing the sound source to be switched to the app app3 of the portable terminal 300 as the information for instructing the sound source switching. Is switched to the sound acquired from the portable terminal 300. Then, the sound source switching unit 236 of the in-vehicle display device 200 transmits the selected application sound source switching information including the information for identifying the app app3 acquired in step S460 to the portable terminal 300.
  • Step S480 Next, the application switching unit 334 of the portable terminal 300 acquires the received selected application sound source switching information. Since the application program currently operating as the foreground application is the app app3, Keep state. (Step S500) Next, the portable terminal 300 reproduces the sound of the app app3 operating as the foreground application, and transmits the reproduced sound to the in-vehicle display device 200.
  • Step S520 the in-vehicle display device 200 causes the speaker 270 to sound the sound reproduced by the app app3 received from the portable terminal 300.
  • Step S540 the in-vehicle display device 200 receives information instructing switching of the sound source from the user by the in-vehicle switch input receiving unit 280 again.
  • the information received by the in-vehicle switch input receiving unit 280 in step S540 indicates switching of the sound source to the app app2 that is a music application that supports dedicated communication control.
  • Step S560 the sound source switching unit 236 of the in-vehicle display device 200 has acquired the information that instructs the sound source to be switched to the app app2 of the portable terminal 300 as the information to instruct to switch the sound source. Is kept as the voice acquired from the portable terminal 300. Then, the sound source switching unit 236 of the in-vehicle display device 200 transmits the selected app sound source switching information including information for identifying the app app2 acquired in step S540 to the portable terminal 300.
  • Step S580 the application switching unit 334 of the portable terminal 300 switches the foreground application from the app app3 to the app app2 based on the information for identifying the app app2 included in the received selected application sound source switching information.
  • Step S600 the audio reproduction stop control unit 336 of the portable terminal 300 stops the audio reproduction of the app app3 switched from the foreground application to the background application. Then, the audio reproduction stop control unit 336 and the audio reproduction start unit 338 of the portable terminal 300 start audio reproduction of the app app2 switched from the background application to the foreground application.
  • Step S620 Next, the portable terminal 300 operates as a foreground application, and transmits the sound of the app app2 that is reproducing sound to the in-vehicle display device 200.
  • Step S640 Next, the in-vehicle display device 200 causes the speaker 270 to sound the sound reproduced by the app app2 received from the portable terminal 300.
  • the portable terminal 300 receives the selected application sound source switching information including the information for identifying the application program by the sound source switching operation from the user received by the in-vehicle display device 200, and the received selected application sound source switching information. Based on the above, the application switching unit 334 can switch the foreground application running on the portable terminal 300. Therefore, the portable terminal 300 can switch the foreground application to the dedicated communication control compatible music app even after the dedicated communication control incompatible music app has been selected as the sound source.
  • FIG. 6 illustrates an example of the operation flow of the in-vehicle display device 200 and the portable terminal 300 at the time of sound source switching when the foreground application of the portable terminal 300 is an app appN that is a music application with a built-in portable terminal. It is a sequence diagram.
  • Step S700 the vehicle-mounted display device 200 receives information instructing switching of a sound source from the user by the vehicle-mounted switch input receiving unit 280.
  • the information received by the in-vehicle switch input receiving unit 280 in step S400 indicates the switching of the sound source to the FM radio.
  • Step S720 the in-vehicle display device 200 starts reproduction of the FM radio sound based on the received information indicating the switching of the sound source, and sounds the FM radio sound from the speaker 270.
  • Step S740 the in-vehicle display device 200 receives information instructing switching of the sound source from the user by the in-vehicle switch input receiving unit 280 again.
  • the information received by the in-vehicle switch input receiving unit 280 in step S440 indicates that the sound source has been switched to the app appN, which is a portable terminal built-in application.
  • Step S760 the sound source switching unit 236 of the in-vehicle display device 200 has acquired the information for instructing the sound source to be switched to the app appN of the portable terminal 300 as the information for instructing the sound source switching. Is switched to the sound acquired from the portable terminal 300. Then, the sound source switching unit 236 of the in-vehicle display device 200 transmits the selected application sound source switching information including the information for identifying the app appN acquired in step S760 to the portable terminal 300.
  • Step S780 the application switching unit 334 of the portable terminal 300 acquires the received selected application sound source switching information, but since the application program currently operating as the foreground application is the app appN, Keep state.
  • Step S800 the portable terminal 300 reproduces the sound of the app appN operating as the foreground application, and transmits the reproduced sound to the in-vehicle display device 200.
  • Step S820 the in-vehicle display device 200 causes the speaker 270 to sound the sound reproduced by the app appN received from the portable terminal 300.
  • Step S840 the in-vehicle display device 200 receives information instructing switching of the sound source from the user by the in-vehicle switch input receiving unit 280 again.
  • the information received by the in-vehicle switch input receiving unit 280 in step S840 indicates switching of the sound source to the app app2 that is a music application that supports dedicated communication control.
  • Step S860 the sound source switching unit 236 of the in-vehicle display device 200 has acquired the information for instructing the sound source to be switched to the app app2 of the portable terminal 300 as the information for instructing the sound source switching. Is kept as the voice acquired from the portable terminal 300. Then, the sound source switching unit 236 of the in-vehicle display device 200 transmits the selected application sound source switching information including the information for identifying the app app2 acquired in step S840 to the portable terminal 300.
  • Step S880 the application switching unit 334 of the portable terminal 300 switches the foreground application from the app appN to the app app2 based on the information for identifying the app app2 included in the received selected application sound source switching information.
  • Step S900 the audio reproduction stop control unit 336 of the portable terminal 300 stops the audio reproduction of the app appN that has been switched from the foreground application to the background application. Then, the audio reproduction stop control unit 336 and the audio reproduction start unit 338 start reproduction of the audio of the app app2 switched from the background application to the foreground application.
  • Step S920 Next, the portable terminal 300 operates as a foreground application, and transmits the sound of the app app2 that reproduces the sound to the in-vehicle display device 200.
  • Step S940 Next, the in-vehicle display device 200 causes the speaker 270 to sound the sound reproduced by the app app2 received from the portable terminal 300.
  • the portable terminal 300 receives the selected application sound source switching information including information for identifying the application program by the sound source switching operation from the user received by the in-vehicle display device 200. Then, the portable terminal 300 can switch the foreground application that the application switching unit 334 is executing on the portable terminal 300 based on the received selected application sound source switching information.
  • the audio reproduction stop control unit 336 stops the audio reproduction of the application program switched from the foreground application to the background application. Also, in the portable terminal 300, the audio reproduction stop control unit 336 and the audio reproduction start unit 338 cause the audio reproduction of the application program switched from the background application to the foreground application.
  • the portable terminal 300 displays only the image of the music application with dedicated communication control. It can be displayed on the display unit 260 of the device 200 and the sound of the music application with a built-in portable terminal can be prevented from being reproduced from the speaker 270.
  • FIG. 7 is a diagram for explaining an operation that can be performed between a conventional general portable terminal to be compared and an in-vehicle display device, and an example of the problem.
  • the actions act1 to 4 represent the sound source switching operation performed by the user on the in-vehicle display device and the timing when the operation is performed. Since the foreground application is the launcher application immediately after the launcher application is activated, the display of the portable terminal is displayed.
  • the launcher application is switched to the background application and the foreground application is dedicated communication on the portable terminal. Since it is switched to the control-compatible music application, the display of the portable terminal is accompanied by an image of the dedicated communication control-compatible music application. At this time, the sound played by the in-vehicle display device is a sound reproduced by the music application compatible with dedicated communication control.
  • the sound source of the vehicle-mounted display device is switched to the FM radio of the vehicle-mounted display device. Since FM radio playback is performed by the function of the in-vehicle display device, the foreground application of the portable terminal is held as the dedicated communication control compatible music app, and the display of the portable terminal is also the image of the dedicated communication control compatible music app. Is retained. The background application is held as a launcher application. On the other hand, the sound of the in-vehicle display device is switched to the sound of FM radio.
  • the sound source of the on-vehicle display device is switched to the sound reproduced on the portable terminal.
  • the music application that supports dedicated communication control switches to the background application, and the foreground application switches to the music application that does not support dedicated communication control. It becomes an image.
  • the sound reproduced by the in-vehicle display device is sound reproduced by the music application that does not support dedicated communication control.
  • the music application that does not support dedicated communication control is switched to the foreground application as described above, the presence of the music application that supports dedicated communication control that has been operating as the foreground application until immediately before is switched to the conventional in-vehicle display device. Is caused by becoming unrecognizable.
  • FIG. 8 is a diagram for explaining an operation that can be performed between a conventional general portable terminal to be compared with an in-vehicle display device and another example of the problem.
  • the portable terminal is first activated after the mobile terminal is communicably connected to the in-vehicle display device. It is assumed that the flow of time proceeds to the right side in FIG.
  • the actions act1a to 4a represent the sound source switching operation performed by the user on the in-vehicle display device and the timing at which the operation is performed.
  • the example shown in FIG. 8 is the same as that shown in FIG. 7 until immediately before the timing indicated by the operation act3a, and thus detailed description thereof is omitted.
  • the sound source of the in-vehicle display device is switched to the sound reproduced on the portable terminal when the user performs an operation of switching the sound source to the mobile terminal built-in application at the timing of the operation act3a.
  • a music application with a built-in portable terminal is activated as a background application to reproduce sound.
  • a foreground application is hold
  • the sound played by the in-vehicle display device is a sound reproduced by the music application built in the portable terminal.
  • the foreground application When the user attempts to switch the sound source to the music app for exclusive communication control on the in-vehicle display device at the timing of the operation act4a, the foreground application performs dedicated communication control in the conventional portable terminal shown in FIG. Although it is retained as a compatible music app, the audio played back from the speaker of the in-vehicle display device will be retained as the music app built in the portable device because the music app built in the portable device has the audio output priority. .
  • FIG. 9 is a diagram illustrating an example of an operation performed between the portable terminal 300 and the in-vehicle display device 200 which is one embodiment of the present invention.
  • the portable terminal 300 is first activated by the launcher application after being connected to the in-vehicle display device 200 in a communicable manner. It is assumed that the flow of time proceeds to the right side in FIG.
  • the actions act1b to 4b represent the sound source switching operation performed by the user on the in-vehicle display device and the timing at which the operation is performed.
  • the example illustrated in FIG. 9 is the same as that illustrated in FIG. 7 until immediately before the timing illustrated in the operation act4b, and thus detailed description thereof is omitted.
  • the portable terminal 300 When the user tries to switch the sound source to the dedicated communication control compatible music application on the in-vehicle display device at the timing of the operation act4b, the portable terminal 300 operates as a background communication application dedicated music application for dedicated communication control. Is switched to the foreground application, and the music application that does not support dedicated communication control that was operating as the foreground application is switched to the background application. In addition, the portable terminal 300 stops the playback of the sound of the music application that does not support the dedicated communication control at the timing of the operation act4b, and after the playback of the sound of the music application that does not support the dedicated communication control stops, Start playing app audio.
  • the portable terminal 300 according to one embodiment of the present invention and the in-vehicle display device 200 connected to the portable terminal 300 can communicate with the foreground application in the conventional portable terminal illustrated in FIG.
  • the problem that it is not possible to switch to a control-compatible music application can be solved.
  • the music application built in the portable terminal has a voice output priority, so the sound played from the speaker of the in-vehicle display device is kept as the music application built in the portable terminal. It can solve the problem of being done.
  • FIG. 10 is a conceptual diagram for explaining the sound source switching operation by the in-vehicle switch 100 and the transition of the image displayed on the in-vehicle display device 200 and the reproduced sound before and after the sound source switching.
  • the state of the in-vehicle display device 200 before the sound source is switched is displayed on the screen of the display unit 260 as an image of navigation (in-vehicle navigation in FIG. 10) operating on the in-vehicle display device 200.
  • FM radio is reproduced from the speaker 270.
  • the foreground application of the portable terminal 300 at this time is a music application (for example, a music application that supports dedicated communication control).
  • the state of the in-vehicle display device 200 after the sound source is switched is maintained as the in-vehicle navigation image on the screen of the display unit 260.
  • the sound reproduced from the speaker 270 is switched from the FM radio to the music application operating as the foreground application of the portable terminal 300.
  • the state of the in-vehicle display device 200 before the sound source is switched is displayed on the screen of the display unit 260 as information on the FM radio operating on the in-vehicle display device 200 (FM source in FIG. 10).
  • the FM radio is reproduced from the speaker 270.
  • the foreground application of the portable terminal 300 at this time is a navigation application (navigation application in FIG. 10) operating on the portable terminal 300.
  • the in-vehicle display device 200 selects the sound source switching destination. Since the candidate does not include the sound reproduced by the portable terminal 300, the user cannot switch the sound source to the sound reproduced by the portable terminal 300. Such a phenomenon occurs because the foreground application of the portable terminal 300 is not a music application.
  • the portable terminal 300 receives information instructing switching of the sound source acquired by the in-vehicle display device 200 in the vehicle, and based on the received information instructing switching of the sound source.
  • the application program that was running in the foreground until immediately before is switched to the background
  • the application program that was running in the background until immediately before is switched to the foreground
  • the voice of the application program that was running in the foreground until immediately before is switched to the foreground
  • the playback of the application program that has been operating in the background until immediately before is started, so that the in-vehicle device is not dependent on the music application standard installed in the portable terminal 300. Based on the information obtained from the spray device 200 can switch the application program of the portable terminal 300 smoothly.
  • the portable terminal 300 switches the application program that was operating in the foreground until immediately before to the background, and the application program that was operating in the background until immediately before is switched to the foreground.
  • the portable terminal 300 The application program for reproducing sound on the portable terminal 300 can be switched smoothly.
  • the portable terminal 300 uses a dedicated API (Application Programming Interface) to start playback of the sound of the application program that was running in the background until immediately before, so that the API defined for each portable terminal 300 is used.
  • API Application Programming Interface
  • SYMBOLS 1 Electronic communication system 100 Vehicle-mounted switch, 200 Vehicle-mounted display apparatus, 210 Vehicle side 1st communication part, 220 Vehicle side 2nd communication part, 230 Processor, 231 Vehicle side input determination part, 232 Vehicle side information provision part, 233 Vehicle side 1st communication control part, 234 Vehicle side 2nd communication control part, 235 Output control part, 236 Sound source switching part, 240 Vehicle side storage part, 250 Vehicle side input reception part, 260 Display part, 270 Speaker, 280 Car switch input reception Unit, 290 radio reception unit, 300 portable terminal, 310 portable side first communication unit, 320 portable side second communication unit, 330 processor, 331 application function unit, 334 application switching unit, 336 audio reproduction stop control unit, 338 audio Playback start unit, 340 mobile storage unit, 350 mobile The input receiving unit, 360 display unit, 370 speaker, 380 external communication unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Telephone Function (AREA)
  • Navigation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

 車載装置と通信を行う携帯型端末であって、前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報の受信と、自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声の前記車載装置への送信と、を制御する通信制御部と、前記音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替え、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替える切替部と、前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させる音声制御部と、を備える。

Description

携帯型端末、車載装置、制御方法、及び制御プログラム
 本発明は、携帯型端末、車載装置、制御方法、及び制御プログラムに関する。
 本願は、2013年9月4日に出願された日本国特願2013-183416号に基づき優先権を主張し、その内容をここに援用する。
 近年、多機能携帯電話端末(スマートフォン)に代表されるような、多機能型の携帯電話機が普及している。多機能携帯電話端末は、各種アプリケーションがインストールされることで、様々な機能を実現する。そのようなアプリケーションの中には、ラジオや音楽データの再生等のような従来ではオーディオに組み込まれていた機能を有するものも多い。また、これに伴い、最近、多機能携帯電話端末に搭載されたこれらオーディオ等の機能を、車載装置において利用することを望む声が増えている。
 これに関連し、携帯機器と車載機器とを連携して使用する際、より少ない操作工数で、より短時間に所望のアプリケーションを起動させるシステムが知られている(例えば、特許文献1参照)。また、音出力制御装置と接続された携帯電話機が、音出力制御装置へオーディオデータをストリーミング転送し、転送されたオーディオデータを手動で選択することなく、自動で最適なアプリケーションによって処理する音出力制御装置が知られている(例えば、特許文献2参照)。
日本国特開2012-10287号公報 日本国特開2010-258956号公報
 しかしながら、従来のシステムや音出力制御装置等では、車載装置側から携帯型端末側に送信した情報に基づいて、車載装置で起動中の種々のアプリケーションプログラムが実現可能な処理が限定的である。例えば、あるプロトコルで規定された通信を行うアプリケーションプログラムが車載装置との間で通信を行うと、他のプロトコルで規定された通信を行うアプリケーションプログラムに対する動作の制御を車載装置側から行えなくなる場合がある。また、一方のアプリケーションプログラムに排他権が付与されており、そのアプリケーションプログラムの起動中には、他方のアプリケーションプログラムの動作を限定的にしか制御できない場合がある。
 本発明に係る態様は、上記従来技術の問題に鑑みてなされたものであり、車載装置側から取得した情報に基づいて、携帯型端末側のアプリケーションプログラムをスムーズに切り替え可能な携帯型端末、車載装置、制御方法、及び制御プログラムを提供することを目的とする。
 本発明に係る態様は、上記課題を解決するために以下の構成を採用した。
(1)本発明に係る一態様は、車載装置と通信を行う携帯型端末であって、前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報の受信と、自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声の前記車載装置への送信と、を制御する通信制御部と、前記受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えると共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替える切替部と、前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させる音声制御部と、を備える。
(2)上記(1)の態様において、前記音声制御部は、前記切替部により切り替えが行われた後、前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させてもよい。
(3)上記(1)または(2)の態様において、前記音声制御部は、専用のAPI(Application Programming Interface)によって、前記音声の再生を開始させてもよい。
(4)本発明に係る一態様は、車載装置と通信を行う携帯型端末の制御方法であって、前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報を受信することと、自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声を前記車載装置に送信することと、前記受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えると共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えることと、前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させることと、を含む。
(5)本発明に係る一態様は、車載装置と通信を行う携帯型端末のコンピュータに、前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報を受信させる手順と、自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声を前記車載装置に送信させる手順と、前記受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えさせ、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えさせる手順と、前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させる手順と、を実行させるための制御プログラムである。
(6)本発明に係る一態様は、携帯型端末と通信を行う車載装置であって、前記携帯型端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声を受信する受信手段と、前記受信手段が受信した音声を出力する出力手段と、 音源の切換を示す情報を取得する取得手段と 前記取得手段により取得された音源の切り替えを指示する情報に基づいて、前記携帯型端末で実行されているアプリケーションプログラムを示す情報を包含した情報であって、前記携帯型端末において直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えさせると共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えさせるための情報を、前記携帯型端末に送信する送信手段と、を備える。
(7)上記(1)から(3)いずれか1つの態様において、前記自端末で実行されている少なくとも1つ以上のアプリケーションプログラムを示す情報を前記車載装置に送信する通信部をさらに有してもよい。
(8)上記(6)の態様において、前記受信手段は前記携帯型端末で実行されている少なくとも1つ以上のアプリケーションプログラムを示す情報を前記携帯型端末から受信してもよい。
 上記(1)(4)(5)の態様によれば、携帯型端末は、車載装置から送信される音源の切り替えを指示する情報を受信し、受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替え、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替え、直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、さらに、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させるため、携帯型端末にインストールされている音楽アプリケーションの規格に依存することなく、車載装置側から取得した情報に基づいて、携帯型端末側のアプリケーションプログラムをスムーズに切り替えることができる。
 上記(2)の場合、携帯型端末は、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えを行うと共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えを行った後、直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させるため、携帯型端末側のアプリケーションプログラムをスムーズに切り替えるとともに、携帯型端末側で音声を再生するアプリケーションプログラムをスムーズに切り替えることができる。
 上記(3)の場合、携帯型端末は、専用のAPI(Application Programming Interface)によって、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させるため、携帯型端末ごとに規定されているAPIによる制御では、アプリケーションプログラムの音声の再生を開始させることができない状況であっても、当該アプリケーションプログラムの音声を再生させることができる。
 上記(6)の場合、車載装置は、車両内で取得した音源の切り替えを指示する情報を取得し、取得した音源の切り替えを指示する情報に基づいて、携帯端末に、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替え、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えさせるための情報を送信することにより、携帯端末において直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、さらに、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させることにより、携帯型端末にインストールされている音楽アプリケーションの規格に依存することなく、車載装置側から取得した情報に基づいて、携帯型端末側のアプリケーションプログラムをスムーズに切り替えることができる。
第1の実施形態における電子通信システム1の利用状況の一例を示す図である。 電子通信システム1の機能構成の一例を示す図である。 図2で示した携帯型端末300のプロセッサ330が実現する各種アプリケーションプログラムのソフトウェア構造の一例を示す図である。 図2で示した携帯型端末300のプロセッサ330が実現する各種アプリケーションプログラムのソフトウェア構造の他の例を示す図である。 携帯型端末300のフォアグラウンドアプリケーションが、専用通信制御非対応音楽アプリであるアプリapp3であった場合における音源切り替え時の車載ディスプレイ装置200と携帯型端末300の動作の流れの一例を説明するシーケンス図である。 携帯型端末300のフォアグラウンドアプリケーションが、携帯型端末内蔵音楽アプリであるアプリappNであった場合における音源切り替え時の車載ディスプレイ装置200と携帯型端末300の動作の流れの一例を説明するシーケンス図である。 比較対象となる従来の一般的な携帯型端末と車載ディスプレイ装置との間で行うことが可能であった動作と、その問題点の一例を説明する図である。 比較対象となる従来の一般的な携帯型端末と車載ディスプレイ装置との間で行うことが可能であった動作と、その問題点の他の例を説明する図である。 本発明の一態様である携帯型端末300と車載ディスプレイ装置200との間で行われる動作の例を説明する図である。 車載スイッチ100による音源の切り替え操作と、音源の切り替えの前後における車載ディスプレイ装置200で表示される画像及び再生される音声を説明するための概念図である。
 以下、本発明の実施形態について、図面を参照して詳細に説明する。図1は、第1の実施形態における電子通信システム1の利用状況の一例を示す図である。第1の実施形態における電子通信システム1は、例えば、車載スイッチ100と、車載ディスプレイ装置200(車載装置)と、携帯型端末300とを具備する。車載スイッチ100は、例えば、自動車Carに搭載されているステアリングスイッチ等である。ステアリングスイッチとは、図1に示した自動車のステアリングstrgが備えるスイッチである。車載スイッチ100は、ステアリングECU(Electronic Control Unit)や車両内バスBS等を介して車載ディスプレイ装置200と通信可能に接続されている。車両内バスBSを介した有線通信は、例えば、CAN(Controller Area Network)規格によって行われる。
 車載スイッチ100は、車載ディスプレイ装置200と接続されている場合、車載ディスプレイ装置200を通して再生される音声の音源を切り替えるスイッチとして機能し、接続されていない場合、例えば、エアコンのスイッチ等として機能する。車載ディスプレイ装置200を通して再生される音声の音源とは、例えば、FM(Frequency Modulation)ラジオやAM(Amplitude Modulation)ラジオ、CD(Compact Disc、登録商標)、MD(MiniDisc、登録商標)、DVD(Digital Versatile Disc、登録商標)、BD(Blu-ray Disc、登録商標)、カーナビゲーション、そして後述する多機能携帯電話端末などにインストールされた音声を再生するアプリケーションプログラム等である。
 車載ディスプレイ装置200は、例えば、自動車Carに搭載された車載装置であり、表示部やスピーカを備える。具体的には、車載ディスプレイ装置200は、ディスプレイ付オーディオやカーナビゲーション装置等であるが、車載用のテレビジョン受像機等が兼用されてもよい。車載ディスプレイ装置200は、携帯型端末300と複数の通信仕様で(例えば、無線通信や、ケーブルCblを介した有線通信で)通信可能に接続されている。無線通信は、例えば、ブルートゥース(登録商標)の規格により行われる。また、無線通信は、無線LAN(Local Area Network)やWi-Fi Direct(登録商標)などによって行われてもよい。一方、ケーブルCblを介した有線通信は、例えば、HDMI(High-Definition Multimedia Interface、登録商標)、USB(Universal Serial Bus)等の規格によって行われる。
 車載ディスプレイ装置200は、自動車CarからCAN通信によって、車載スイッチ100から音源の切り替えを指示する情報を取得すると、取得した情報を、上述した無線通信によって携帯型端末300へ送信する。また、車載ディスプレイ装置200は、後述する入力受付部によりユーザからの入力を受け付け、受け付けたユーザからの入力を表す情報を、ケーブルCblを介して携帯型端末300に出力する。ユーザからの入力を表す情報は、例えば、タッチパネルにタッチ操作された座標に関する情報であるが、各種ボタンを押下した情報や、車載スイッチ100とは別の各種スイッチをオン/オフにした情報などでもよい。また、車載ディスプレイ装置200は、携帯型端末300から、各種画像や音声を取得し、取得した画像や音声を、後述する自装置の表示部やスピーカに出力する。
 携帯型端末300は、例えば、多機能携帯電話端末(スマートフォン)であるが、携帯電話端末やタブレットPC(Personal Computer)、ノートPC、電子ブックリーダー、PDA(Personal Digital Assistant)など、携帯可能な他の種類の情報端末であってもよい。携帯型端末300は、各種アプリケーションプログラムをインストールされており、起動した各種アプリケーションプログラムによって様々な機能を有する。そのような機能の一例としては、ラジオや音楽再生を行うオーディオ機能を有したアプリケーションプログラムや、カーナビゲーションの機能を有したアプリケーションプログラムが挙げられる。
 携帯型端末300は、車載ディスプレイ装置200から、例えば無線通信によって、音源の切り替えを指示する情報を取得し、取得した情報に基づいて、フォアグラウンドで起動中のアプリケーションプログラムを切り替え、フォアグラウンドでの起動に切り替えられたアプリケーションプログラムの音声を再生する。また、携帯型端末300は、フォアグラウンドで起動中のアプリケーションプログラムが切り替わった場合、直前までフォアグラウンドで起動していたアプリケーションプログラムが再生する音声を停止させる。携帯型端末300は、フォアグラウンドで起動中のアプリケーションプログラムが再生する音声を、例えばケーブルCblを介して行う有線通信によって、車載ディスプレイ装置200へ送信する。このように、携帯型端末300は、車載ディスプレイ装置200から車載スイッチ100による音源の切り替えを指示する情報を取得し、取得した情報に基づいて、音声を再生する音源を切り替えることができる。なお、無線通信と有線通信で送受信される情報は、逆の関係でもよい(例えば音声が無線で送受信され、音源の切り替えを指示する情報が有線で送受信されてもよい)。
 図2は、電子通信システム1の機能構成の一例を示す図である。車載ディスプレイ装置200は、例えば、車両側第1通信部210(送信手段)と、車両側第2通信部220(受信手段)と、プロセッサ230と、車両側記憶部240と、車両側入力受付部250と、表示部260と、スピーカ270(出力手段)と、車載スイッチ入力受付部280とを備える。車両側第1通信部210は、例えば、ブルートゥースアンテナを備え、ブルートゥース規格に基づいた無線通信を行う無線通信モジュールであり、2.4GHz帯のISM(Industry Science Medical band)バンドを用いて通信を行う。ブルートゥース規格の無線通信システムでは、周波数ホッピング(FH:Frequency Hopping)方式のスペクトラム拡散通信が利用される。2.4GHz帯の周波数帯域は1MHz間隔で79個の周波数チャネル(以下、通信チャネルと云う)に分割されており、ホッピングパターンに基づいて1タイムスロット毎に時分割で、使用する周波数チャネルの切り替えが行われる(周波数ホッピング)。ブルートゥース規格の無線通信システムはマスタ・スレーブ方式で行われ、ホッピングパターンの管理はマスタによって行われる。同じホッピングパターンを用いて、1台のマスタと最大7台のスレーブとの間でピコネットと称される無線ネットワークを形成して通信することができる。車両側第1通信部210は、ブルートゥース規格に基づいて、携帯型端末300の携帯側第1通信部310との間で無線通信を行う。
 車両側第2通信部220は、例えば、HDMI(登録商標)規格に基づく通信を行うためのハードウェアを備える。車両側第2通信部220は、例えば、HDMI(登録商標)ケーブルが接続されるHDMI(登録商標)端子と、画像や音声を出力する装置との間で画像信号、音声信号、及び画像フォーマットに関する各種情報を送受信することが可能なインタフェース部とを備える。このインタフェース部は、複数のチャンネルを有しており、各種画像又は音声はTMDS(Transition Minimized Differential Signaling)チャンネルを使用して送受信される。
 また、車両側第2通信部220は、USB規格に基づく通信を行うためのハードウェアを更に備える。車両側第2通信部220は、USBコネクタと、画像や音声を出力する装置との間で画像信号、音声信号、及び画像フォーマットに関する各種情報を送受信することが可能なインタフェース部とを備える。
 プロセッサ230は、例えば、車載ディスプレイ装置200のCPU(Central Processing Unit)である。プロセッサ230は、後述する車両側記憶部240に格納された各種プログラムを実行することで、以下の各ソフトウェア機能部を実現する。プロセッサ230は、例えば、ソフトウェア機能部として、車両側入力判定部231と、車両側情報提供部232と、車両側第1通信制御部233と、車両側第2通信制御部234と、出力制御部235とを備える。
 車両側入力判定部231は、後述する車両側入力受付部250又は車載スイッチ入力受付部280からプロセッサ230が取得したユーザからの入力を表す情報を、車両側入力受付部250から取得したユーザからの入力を表す情報か、車載スイッチ入力受付部280から取得したユーザからの入力を表す情報かを判定する。車両側入力判定部231は、プロセッサ230が取得したユーザからの入力を表す情報が、車載スイッチ入力受付部280から取得した情報であった場合、その情報を音源の切り替えを指示する情報として、後述する音源切替部236へ出力する。また、車両側入力判定部231は、プロセッサ230が取得したユーザからの入力を表す情報が、車両側入力受付部250から取得した情報であった場合、その情報を車両側第2通信制御部234へ出力する。車両側入力受付部250から取得したユーザからの入力を表す情報とは、車両側入力受付部250がユーザから受け付けた操作を表す情報(例えばタッチ操作された座標の情報)である。
 音源切替部236は、車両側第2通信制御部234から、携帯型端末300のランチャーアプリが可視化している各種アプリケーションプログラムを示す情報を取得すると、取得した情報を、車両側記憶部240に記憶する。各種アプリケーションプログラムを示す情報とは、例えば、アプリケーションプログラムごとの車両側第1通信制御部233と通信が可能であることを示す情報や、アプリケーションプログラムごとに車両側第1通信制御部233との間で行われた通信に関する情報などである。音源切替部236は、この情報に基づいて、音源の切り替え先の候補を生成する。
 また、音源切替部236は、車両側入力判定部231から、音源の切り替えを指示する情報を取得すると、取得した情報と、車両側記憶部240に記憶されている各種アプリケーションプログラムを示す情報に基づいて生成された音源の切り替え先の候補とに基づいて、車載ディスプレイ装置200の音源を切り替える。音源切替部236は、例えば、音源の切り替えの候補として、FMラジオと、AMラジオと、携帯型端末300の各種アプリケーションプログラムとを音源の切り替え先の候補として生成する。また、音源切替部236は、音源を切り替える際、携帯型端末300の各種アプリケーションプログラムが選択されると、選択されたアプリケーションプログラムへの音源の切り替えを指示する情報を、車両側第1通信制御部233に出力する。選択されたアプリケーションプログラムへの音源の切り替えを指示する情報は、例えば、選択されたアプリケーションプログラムを識別する情報を含み、以下では、選択アプリ音源切替情報と称する。
 車両側情報提供部232は、例えば、車両側第1通信部210によって携帯型端末300に車両情報を提供するための機能部であり、無線通信によって選択アプリ音源切替情報等の車両から取得可能な車両情報を送受信するための専用プロトコルに基づいた動作を行う。車両側情報提供部232は、音源切替部236からの選択アプリ音源切替情報を取得すると、取得した選択アプリ音源切替情報を携帯型端末300へ出力する。この時、車両側情報提供部232は、取得した選択アプリ音源切替情報を車両側第1通信制御部233に出力し、車両側第1通信部210によって送信可能なPDU(Protocol Data Unit)に変換させてから携帯型端末300へ送信させる。なお、車両側情報提供部232と車両側第1通信制御部233とは、統合された機能部であってもよい。
 車両側第1通信制御部233は、車両側情報提供部232から取得した選択アプリ音源切替情報を、車両側第1通信部210によって送信可能なPDUに変換する。そして、車両側第1通信制御部233は、変換したPDUを、車両側第1通信部210に携帯型端末300へ送信させる。
 車両側第2通信制御部234は、車両側第2通信部220によって送受信可能なPDUに変換された情報であって、携帯型端末300から取得する各種画像や音声に関する情報を、車載ディスプレイ装置200で取り扱い可能な形式の情報に変換する。また、車両側第2通信制御部234は、後述する車両側入力受付部250から取得するユーザからの入力を表す情報を、車両側第1通信部210によって送受信可能なPDUに変換し、車両側第2通信部220に、変換したPDUを携帯型端末300へ送信させる。また、車両側第2通信制御部234は、車両側第2通信部220を介して、携帯型端末300の携帯側第2通信部320(通信部)から、上述した携帯型端末300のランチャーアプリが可視化している各種アプリケーションプログラムを示す情報を取得し、取得した情報を音源切替部236に出力する。
 出力制御部235は、車両側第2通信制御部234が取扱い可能な形式に変換した画像を表示部260に出力して表示させ、変換した音声をスピーカ270に出力して吹鳴させる。また、出力制御部235は、音源切替部236が、AMラジオ、又は、FMラジオに音源を切り替えた場合、ラジオ受信部290からAMラジオ、又はFMラジオの音声信号を取得し、取得した音声信号に基づいて、スピーカ270で音声を再生させる。
 車両側記憶部240は、例えば、RAMやレジスタ、あるいは、HDD(Hard Disk Drive)やSSD(Solid State Drive)等を含む。車両側記憶部240は、プロセッサ230が実行する各種プログラムを記憶する。
 車両側入力受付部250は、例えば、タッチパネルであるが、車載ディスプレイ装置200に搭載されている各種ボタンやスイッチなどを含んでもよい。車両側入力受付部250は、ユーザからの入力を受け付け、受け付けた操作を表す情報(例えばタッチ操作された座標の情報)を、プロセッサ230に出力する。
 表示部260は、例えば、液晶ディスプレイパネル、あるいは、有機EL(ElectroLuminescence)ディスプレイパネルである。表示部260は、出力制御部235から取得した画像を表示する。
 スピーカ270は、出力制御部235から取得した音声を吹鳴する。
 車載スイッチ入力受付部280は、CAN通信によって車載スイッチ100から、ユーザからの入力を受け付け、受け付けたユーザからの入力を表す情報を、プロセッサ230へ出力する。
 ラジオ受信部290は、AMラジオ放送や、FMラジオ放送等のラジオ放送の音声信号を受信するアンテナ及びアンテナ回路、同調回路、検波回路、出力回路を有し、受信したラジオ放送の音声信号を、プロセッサ230に出力する。
 携帯型端末300は、例えば、携帯側第1通信部310と、携帯側第2通信部320と、プロセッサ330と、携帯側記憶部340と、携帯側入力受付部350と、表示部360と、スピーカ370と、外部通信部380とを備える。携帯側第1通信部310は、車両側第1通信部210と同様、ブルートゥース規格に基づいた無線通信を行う無線通信モジュールであり、車両側第1通信部210との間で通信を行う。
 携帯側第2通信部320は、車両側第2通信部220と同様、HDMI(登録商標)規格に基づく通信を行うためのハードウェアと、USB規格に基づく通信を行うためのハードウェアを備える。すなわち、車載ディスプレイ装置200と携帯型端末300とは、車両側第2通信部220と携帯側第2通信部320とが、HDMI(登録商標)ケーブル、又はUSBケーブルによって物理的に接続されることで、HDMI(登録商標)規格に基づく通信、又はUSB規格に基づく通信によって各種画像や音声、ユーザからの入力を表す情報を送受信することができる。
 プロセッサ330は、例えば、CPUである。プロセッサ330は、後述する携帯側記憶部340に格納された各種プログラムを実行する。プロセッサ330が実行するプログラムは、例えば、アプリケーション機能部331として、プロセッサ330に実行された各種アプリケーションプログラムを含む。
 アプリケーション機能部331は、プロセッサ330が実行している各種アプリケーションプログラムである。アプリケーション機能部331は、携帯側第1通信部310、携帯側第2通信部320、携帯側入力受付部350などから取得した各種情報に基づいて、以下の動作を行う。アプリケーション機能部331は、表示部170に表示するための画像を生成する。また、アプリケーションプログラム131は、スピーカ180で発するための音声を生成する。そして、アプリケーション機能部331は、携帯側記憶部340に記憶されている音楽データの音声を再生する。さらに、アプリケーション機能部331は、インターネットラジオ放送のデータを外部通信部380から受信し、受信したデータの音声を再生する。アプリケーション機能部331は、生成した画像を表示部360に表示させ、再生した音声をスピーカ180に出力して吹鳴させる。
 アプリケーション機能部331は、複数のアプリケーションプログラムを同時に動作させることができる。ここで、表示部360の最前面に表示される画像を生成しているアプリケーションプログラムを、フォアグラウンドアプリケーションと称する。また、表示部360に表示されていないが、プロセッサ330で実行されて動作しているアプリケーションプログラムを、バックグラウンドアプリケーションと称する。アプリケーション機能部331は、フォアグラウンドアプリケーションとして動作中のアプリケーションプログラムの画像及び音声を、携帯側第2通信部320を介して、車載ディスプレイ装置200の車両側第2通信部220へ送信する。また、アプリケーション機能部331は、プロセッサ330が実行中の各種アプリケーションプログラムを識別する情報を、携帯側第2通信部320を介して、車両側第2通信部220へ送信する。
 携帯側記憶部340は、例えば、フラッシュメモリやRAM(Random Access Memory)、レジスタ等を含む。携帯側記憶部340は、プロセッサ330が実行する各種プログラムを記憶する。
 携帯側入力受付部350は、例えば、タッチパネルであるが、各種ボタンやスイッチなどを含んでもよい。携帯側入力受付部350は、ユーザからの入力を受け付け、受け付けた操作を表す情報を、プロセッサ330に出力する。
 表示部360は、例えば、液晶ディスプレイパネル、あるいは、有機ELディスプレイパネルである。表示部360は、アプリケーション機能部331で動作しているフォアグラウンドアプリケーションが生成した画像を表示する。なお、携帯側入力受付部350と、表示部360とは、一体化されたタッチパネル付ディスプレイであってもよい。
 スピーカ370は、アプリケーション機能部331で動作しているフォアグラウンドアプリケーションが再生した音声を吹鳴する。
 外部通信部380は、アンテナや変調部、符号化/復調部、アップ/ダウンコンバータなどを含む。外部通信部190は、移動体通信網や無線LANを介した通信を行うことで、例えば、インターネット上に存在する各種サーバとの間で情報の送受信を行う。
 次に、図3、4を参照することで、アプリケーション機能部331で動作している各種アプリケーションプログラムのソフトウェア構造を説明する。図3は、図2で示した携帯型端末300のプロセッサ330が実現する各種アプリケーションプログラムのソフトウェア構造の一例を示す図である。携帯型端末300では、プロセッサ330が各種アプリケーションプログラムを実行することで、アプリapp1~appNが稼働することができる。アプリapp1は、ランチャーアプリであり、車載ディスプレイ装置200と通信可能な各種アプリケーションプログラムをリンク集として可視化する。すなわち、アプリapp1は、リンク先をアイコン等で表現した画像を表示部360に表示させる。
 アプリapp2は、アプリapp1が備える後述する携帯側通信制御部APMを介して、アプリapp2が再生する音声を車載ディスプレイ装置200に送信する音楽アプリケーションプログラムであり、以下では専用通信制御対応音楽アプリと称する。アプリapp3は、アプリapp1を介さずに、直接携帯側第2通信部320を介してアプリapp3が再生する音声を車載ディスプレイ装置200に送信する音楽アプリケーションプログラムであり、以下では、専用通信制御非対応音楽アプリと称する。アプリapp3は、携帯側通信制御部APMによって行われる通信を規定するための専用プロトコルとは異なる独自のプロトコルによって、携帯側第2通信部320を介して車載ディスプレイ装置200との通信を行う。そのため、従来の車載ディスプレイ装置では、車載スイッチ100による音源の切り替え操作によって、携帯型端末300のアプリapp3を選択してしまうと、上述した独自のプロトコルによって通信が行われるアプリケーションプログラム以外のアプリケーションプログラムは、車載ディスプレイ装置で認識することができなくなり、その後、車載スイッチ100による音源の切り替え操作によって専用通信制御対応音楽アプリが選択候補から消えてしまい、選択することができなくってしまう。
 アプリappNは、携帯型端末300に内蔵されている音楽アプリケーションプログラムであり、アプリapp2と同様に、携帯側通信制御部APMを介してアプリappNが再生する音声を車載ディスプレイ装置200に送信する。また、アプリappNは、他の音声を再生するアプリケーションとは異なり、プロセッサ330に一度でも実行されると、フォアグラウンドアプリケーションであるかバックグラウンドアプリケーションであるかに関わらず、他の音声を再生するアプリケーションが再生する音声よりもアプリappNが再生する音声を優先してスピーカ370や車載ディスプレイ装置200へと出力する場合がある。以下では、この優先的な音声の出力を、アプリappNの音声出力優先権と称し、アプリappNは、音声出力優先権を有するものとして説明する。
 携帯型端末300は、アプリappNが音声出力優先権を持つため、アプリappNを動作させた携帯型端末300は、アプリappNの動作を終了させる、又は、アプリappNの音声の再生を停止(停止を含む)させない限り、アプリappNとは別のアプリケーションプログラムの音声を、スピーカ370や車載ディスプレイ装置200に出力することができない。
 なお、図3に示した例では、アプリケーション機能部331は、音楽アプリケーションプログラムのみを含んでいるように描いたが、これに限られず、例えば、カーナビゲーションアプリやインターネットラジオアプリケーション等を含んでいてもよい。
 また、図3に示した例では、アプリapp1は、携帯側情報提供部LPAと、携帯側通信制御部APM(通信制御部)と、携帯側入力判定部332と、アプリ切替部334(切替部)と、音声再生停止制御部336(音声制御部)とを備える。携帯側情報提供部LPAは、携帯側第1通信部310によって選択アプリ音源切替情報を受信するための機能部であり、車両情報を送受信するための専用プロトコルによって構成される。携帯側情報提供部LPAは、携帯側通信制御部APMを介して、車載ディスプレイ装置200から選択アプリ音源切替情報を受信する。なお、携帯側情報提供部LPAは、選択アプリ音源切替情報だけではなく、他の車両情報、例えば、自動車Carの速度やエンジンの回転速度、排気音等を、携帯側通信制御部APMを介して送受信してもよい。
 携帯側通信制御部APMは、無線通信によって送受信可能なPDUに変換された選択アプリ音源切替情報を受信する。また、携帯側通信制御部APMは、車両側第2通信部220に送信する各種画像や音声、各種アプリケーションプログラムを識別する情報を、有線通信を行う携帯側第2通信部320によって送受信可能なPDUに変換して、変換したPDUを車両側第2通信部220に送信する。また、携帯側通信制御部APMは、車両側第2通信部220から、ユーザからの入力を表す情報であって、携帯側第2通信部320によって送受信可能なPDUに変換された情報を、携帯側第2通信部320を介して取得する。
 アプリ切替部334は、携帯側情報提供部LPAが取得した選択アプリ音源切替情報に基づいて、フォアグラウンドアプリケーションを切り替える。具体的には、アプリ切替部334は、選択アプリ音源切替情報に含まれるアプリケーションを識別する情報に基づいて、動作中のアプリapp2~appNを、フォアグラウンドアプリケーションからバックグラウンドアプリケーション、又は、バックグラウンドアプリケーションからフォアグラウンドアプリケーションへと切り替える制御を行う。なお、アプリ切替部334は、アプリ切替部334が選択アプリ音源切替情報に含まれるアプリケーションを識別する情報が、現在フォアグラウンドアプリケーションとして動作しているアプリケーションプログラムを示している場合、フォアグラウンドアプリケーションを保持する。
 アプリ切替部334が、選択アプリ音源切替情報に含まれるアプリケーションを識別する情報に基づいてフォアグラウンドアプリケーションを切り替えるため、携帯型端末300は、車載スイッチ100によって音源の切り替え先として、一旦、アプリapp3のような専用通信制御非対応音楽アプリがフォアグラウンドアプリケーションとして選択された場合であっても、次の音源の切り替え操作によって、フォアグラウンドアプリケーションを専用通信制御対応音楽アプリに切り替えることができる。
 音声再生停止制御部336は、アプリ切替部334によってフォアグラウンドアプリケーションからバックグラウンドアプリケーションへと切り替わったアプリケーションプログラムの音声の再生を停止し、バックグラウンドアプリケーションからフォアグラウンドアプリケーションへと切り替わったアプリケーションプログラムの音声の再生を開始させる。ここで、音声再生停止制御部336は、例えば、後述する音声再生開始部338(音声制御部)を制御することができる専用のAPI(Application Programming Interface)を用いて、音声の再生を開始させる。
 アプリapp2~appNは、音声再生開始部338の機能を有する。音声再生開始部338は、音声再生停止制御部336が用いる専用のAPIによる音声再生開始の要求を、音声再生停止制御部336から取得した場合、音声の再生を開始する。
 上述した音声再生停止制御部336(音声制御部)と音声再生開始部338(音声制御部)との機能によって、携帯型端末300は、車載スイッチ100によって音源の切り替え先として、一旦、アプリappNのような音声出力優先権を持つ携帯型端末内蔵音楽アプリがフォアグラウンドアプリケーションとして選択された場合であっても、次の音源の切り替え操作によって、音声出力優先権を持つ携帯型端末内蔵音楽アプリの音声の再生を停止させることができる。そして、携帯型端末300は、フォアグラウンドアプリケーションの音声を再生することができる。
 このように、図3に示した例では、車載ディスプレイ装置200から取得した選択アプリ音源切替情報に基づいて、ランチャーアプリであるアプリapp1のアプリ切替部334が、フォアグラウンドアプリケーションを切り替え、音声再生停止制御部336がバックグラウンドアプリケーションの音声の再生を停止し、フォアグラウンドアプリケーションの音声の再生を開始する。
 図4は、図2で示した携帯型端末300のプロセッサ330が実現する各種アプリケーションプログラムのソフトウェア構造の他の例を示す図である。図4で示した例では、アプリapp1が携帯側通信制御部APMと携帯側情報提供部LPAとの機能を有し、アプリapp2~appNがアプリ切替部334と音声再生停止制御部336と音声再生開始部338との機能を有する。従って、アプリapp1は、車載ディスプレイ装置200から選択アプリ音源切替情報を取得し、取得した選択アプリ音源切替情報を、アプリapp2~appNへと出力する。
 アプリapp2~appNは、取得した選択アプリ音源切替情報に基づいて、フォアグラウンドアプリケーションからバックグラウンドアプリケーション、又は、バックグラウンドアプリケーションからフォアグラウンドアプリケーションへと切り替えを行う。そして、アプリapp2~appNは、アプリ切替部334、音声再生停止制御部336、音声再生開始部338によってフォアグラウンドアプリケーションからバックグラウンドアプリケーションへと切り替わったアプリケーションプログラムの音声の再生を停止し、バックグラウンドアプリケーションからフォアグラウンドアプリケーションへと切り替わったアプリケーションプログラムの音声の再生を開始させる。
 このように、図3に示した例では、ランチャーアプリであるアプリapp1が、車載ディスプレイ装置200から選択アプリ音源切替情報を取得するが、フォアグラウンドアプリケーションの切り替えや、バックグラウンドアプリケーションの音声の再生の停止、フォアグラウンドアプリケーションの音声の再生を開始については、アプリapp2~appNのそれぞれのアプリケーションプログラムが行う。
 次に、図5、6を参照することで、電子通信システム1における車載ディスプレイ装置200と携帯型端末300との間の音源切り替え時における動作の流れを説明する。図5は、携帯型端末300のフォアグラウンドアプリケーションが、専用通信制御非対応音楽アプリであるアプリapp3であった場合における音源切り替え時の車載ディスプレイ装置200と携帯型端末300の動作の流れの一例を説明するシーケンス図である。
(ステップS400)まず、車載ディスプレイ装置200は、車載スイッチ入力受付部280によりユーザから音源の切り替えを指示する情報を受け付ける。以下では、ステップS400において車載スイッチ入力受付部280が受け付けた情報は、FMラジオへの音源の切り替えを示していたものとして説明する。
(ステップS420)次に、車載ディスプレイ装置200は、受け付けた音源の切り替えを指示する情報に基づいて、FMラジオの音声の再生を開始し、スピーカ270からFMラジオの音声を吹鳴させる。
(ステップS440)次に、車載ディスプレイ装置200は、再び、車載スイッチ入力受付部280によりユーザから音源の切り替えを指示する情報を受け付ける。以下では、ステップS440において車載スイッチ入力受付部280が受け付けた情報は、専用通信制御非対応音楽アプリであるアプリapp3への音源の切り替えを示していたものとして説明する。
(ステップS460)次に、車載ディスプレイ装置200の音源切替部236は、音源の切り替えを指示する情報として、音源を携帯型端末300のアプリapp3への音源の切り替えを指示する情報を取得したため、音源を携帯型端末300から取得する音声に切り替える。
 そして、車載ディスプレイ装置200の音源切替部236は、ステップS460で取得したアプリapp3を識別する情報を含む選択アプリ音源切替情報を、携帯型端末300へと送信する。
(ステップS480)次に、携帯型端末300のアプリ切替部334は、受信した選択アプリ音源切替情報を取得するが、現在、フォアグラウンドアプリケーションとして動作しているアプリケーションプログラムがアプリapp3であったため、現在の状態を保持する。
(ステップS500)次に、携帯型端末300は、フォアグラウンドアプリケーションとして動作しているアプリapp3の音声を再生し、再生した音声を車載ディスプレイ装置200へと送信する。
(ステップS520)次に、車載ディスプレイ装置200は、携帯型端末300から受信したアプリapp3が再生している音声を、スピーカ270に吹鳴させる。
(ステップS540)次に、車載ディスプレイ装置200は、再び、車載スイッチ入力受付部280によりユーザから音源の切り替えを指示する情報を受け付ける。以下では、ステップS540において車載スイッチ入力受付部280が受け付けた情報は、専用通信制御対応音楽アプリであるアプリapp2への音源の切り替えを示していたものとして説明する。
(ステップS560)次に、車載ディスプレイ装置200の音源切替部236は、音源の切り替えを指示する情報として、音源を携帯型端末300のアプリapp2への音源の切り替えを指示する情報を取得したため、音源を携帯型端末300から取得する音声のまま保持する。そして、車載ディスプレイ装置200の音源切替部236は、ステップS540で取得したアプリapp2を識別する情報を含む選択アプリ音源切替情報を、携帯型端末300へと送信する。
(ステップS580)次に、携帯型端末300のアプリ切替部334は、受信した選択アプリ音源切替情報に含まれるアプリapp2を識別する情報に基づいて、フォアグラウンドアプリケーションをアプリapp3からアプリapp2へと切り替える。
(ステップS600)次に、携帯型端末300の音声再生停止制御部336は、フォアグラウンドアプリケーションからバックグラウンドアプリケーションへと切り替わったアプリapp3の音声の再生を停止させる。そして、携帯型端末300の音声再生停止制御部336と音声再生開始部338とは、バックグラウンドアプリケーションから、フォアグラウンドアプリケーションへと切り替わったアプリapp2の、音声の再生を開始させる。
(ステップS620)次に、携帯型端末300は、フォアグラウンドアプリケーションとして動作し、音声を再生しているアプリapp2の音声を、車載ディスプレイ装置200へと送信する。
(ステップS640)次に、車載ディスプレイ装置200は、携帯型端末300から受信したアプリapp2が再生している音声を、スピーカ270に吹鳴させる。
 このように、携帯型端末300は、車載ディスプレイ装置200が受け付けたユーザからの音源の切り替え操作によって、アプリケーションプログラムを識別する情報を含む選択アプリ音源切替情報を受信し、受信した選択アプリ音源切替情報に基づいて、アプリ切替部334が携帯型端末300で実行しているフォアグラウンドアプリケーションを切り替えることができる。従って、携帯型端末300は、専用通信制御非対応音楽アプリを音源として選択してしまった後であっても、フォアグラウンドアプリケーションを専用通信制御対応音楽アプリに切り替えることができる。
 図6は、携帯型端末300のフォアグラウンドアプリケーションが、携帯型端末内蔵音楽アプリであるアプリappNであった場合における音源切り替え時の車載ディスプレイ装置200と携帯型端末300の動作の流れの一例を説明するシーケンス図である。
(ステップS700)まず、車載ディスプレイ装置200は、車載スイッチ入力受付部280によりユーザから音源の切り替えを指示する情報を受け付ける。以下では、ステップS400において車載スイッチ入力受付部280が受け付けた情報は、FMラジオへの音源の切り替えを示していたものとして説明する。
(ステップS720)次に、車載ディスプレイ装置200は、受け付けた音源の切り替えを指示する情報に基づいて、FMラジオの音声の再生を開始し、スピーカ270からFMラジオの音声を吹鳴させる。
(ステップS740)次に、車載ディスプレイ装置200は、再び、車載スイッチ入力受付部280によりユーザから音源の切り替えを指示する情報を受け付ける。以下では、ステップS440において車載スイッチ入力受付部280が受け付けた情報は、携帯型端末内蔵アプリであるアプリappNへの音源の切り替えを示していたものとして説明する。
(ステップS760)次に、車載ディスプレイ装置200の音源切替部236は、音源の切り替えを指示する情報として、音源を携帯型端末300のアプリappNへの音源の切り替えを指示する情報を取得したため、音源を携帯型端末300から取得する音声に切り替える。
 そして、車載ディスプレイ装置200の音源切替部236は、ステップS760で取得したアプリappNを識別する情報を含む選択アプリ音源切替情報を、携帯型端末300へと送信する。
(ステップS780)次に、携帯型端末300のアプリ切替部334は、受信した選択アプリ音源切替情報を取得するが、現在、フォアグラウンドアプリケーションとして動作しているアプリケーションプログラムがアプリappNであったため、現在の状態を保持する。
(ステップS800)次に、携帯型端末300は、フォアグラウンドアプリケーションとして動作しているアプリappNの音声を再生し、再生した音声を車載ディスプレイ装置200へと送信する。
(ステップS820)次に、車載ディスプレイ装置200は、携帯型端末300から受信したアプリappNが再生している音声を、スピーカ270に吹鳴させる。
(ステップS840)次に、車載ディスプレイ装置200は、再び、車載スイッチ入力受付部280によりユーザから音源の切り替えを指示する情報を受け付ける。以下では、ステップS840において車載スイッチ入力受付部280が受け付けた情報は、専用通信制御対応音楽アプリであるアプリapp2への音源の切り替えを示していたものとして説明する。
(ステップS860)次に、車載ディスプレイ装置200の音源切替部236は、音源の切り替えを指示する情報として、音源を携帯型端末300のアプリapp2への音源の切り替えを指示する情報を取得したため、音源を携帯型端末300から取得する音声のまま保持する。そして、車載ディスプレイ装置200の音源切替部236は、ステップS840で取得したアプリapp2を識別する情報を含む選択アプリ音源切替情報を、携帯型端末300へと送信する。
(ステップS880)次に、携帯型端末300のアプリ切替部334は、受信した選択アプリ音源切替情報に含まれるアプリapp2を識別する情報に基づいて、フォアグラウンドアプリケーションをアプリappNからアプリapp2へと切り替える。
(ステップS900)次に、携帯型端末300の音声再生停止制御部336は、フォアグラウンドアプリケーションからバックグラウンドアプリケーションへと切り替わったアプリappNの音声の再生を停止させる。そして、音声再生停止制御部336と音声再生開始部338とは、バックグラウンドアプリケーションからフォアグラウンドアプリケーションへと切り替わったアプリapp2の音声の再生を開始させる。
(ステップS920)次に、携帯型端末300は、フォアグラウンドアプリケーションとして動作し、音声を再生しているアプリapp2の音声を、車載ディスプレイ装置200へと送信する。
(ステップS940)次に、車載ディスプレイ装置200は、携帯型端末300から受信したアプリapp2が再生している音声を、スピーカ270に吹鳴させる。
 このように、携帯型端末300は、車載ディスプレイ装置200が受け付けたユーザからの音源の切り替え操作によって、アプリケーションプログラムを識別する情報を含む選択アプリ音源切替情報を受信する。そして、携帯型端末300は、受信した選択アプリ音源切替情報に基づいて、アプリ切替部334が携帯型端末300で実行しているフォアグラウンドアプリケーションを、切り替えることができる。また、携帯型端末300は、音声再生停止制御部336が、フォアグラウンドアプリケーションから、バックグラウンドアプリケーションへと切り替わったアプリケーションプログラムの、音声の再生を停止させる。また、携帯型端末300は、音声再生停止制御部336と音声再生開始部338とが、バックグラウンドアプリケーションから、フォアグラウンドアプリケーションへと切り替わったアプリケーションプログラムの、音声の再生を開始させる。それ故、携帯型端末300は、音声出力優先権を持つような携帯型端末内蔵音楽アプリから、専用通信制御対応音楽アプリへの音源の切り替え時に、専用通信制御対応音楽アプリの画像のみを車載ディスプレイ装置200の表示部260に表示させ、スピーカ270から携帯型端末内蔵音楽アプリの音声を再生させてしまうことを防止することができる。
 次に、図7から図9を参照することで、従来の一般的な携帯型端末と車載ディスプレイ装置との間で行うことが可能であった動作と、本発明の一態様である携帯型端末300と車載ディスプレイ装置200との間で行うことが可能な動作を比較し、本発明によって得られる効果について説明する。図7は、比較対象となる従来の一般的な携帯型端末と車載ディスプレイ装置との間で行うことが可能であった動作と、その問題点の一例を説明する図である。
 以下では、携帯型端末は、車載ディスプレイ装置と通信可能に接続された後、まずランチャーアプリが起動したものとして説明する。なお、時間の流れは、図7において、向かって右側に進んでいるものとする。また、動作act1~4は、ユーザが車載ディスプレイ装置に対して行った音源の切り替え操作と、その操作が行われたタイミングを表している。携帯型端末の表示は、ランチャーアプリが起動された直後、フォアグラウンドアプリケーションがランチャーアプリであるため、ランチャーアプリが表示されている。
 その後、動作act1のタイミングで、ユーザが車載ディスプレイ装置に専用通信制御対応音楽アプリへと音源を切り替える操作を行った場合、携帯型端末では、ランチャーアプリがバックグラウンドアプリケーションに切り替わり、フォアグラウンドアプリケーションが専用通信制御対応音楽アプリに切り替わるので、携帯型端末の表示もそれに伴い、専用通信制御対応音楽アプリの画像となる。この時、車載ディスプレイ装置で吹鳴される音声は、専用通信制御対応音楽アプリが再生する音声である。
 次に、動作act2のタイミングで、ユーザが車載ディスプレイ装置にFMラジオへと音源を切り替える操作を行った場合、車載ディスプレイ装置の音源は、車載ディスプレイ装置のFMラジオに切り替わる。FMラジオの再生は、車載ディスプレイ装置の機能によって行われるので、携帯型端末のフォアグラウンドアプリケーションは、専用通信制御対応音楽アプリのまま保持され、携帯型端末の表示も専用通信制御対応音楽アプリの画像のまま保持される。また、バックグラウンドアプリケーションは、ランチャーアプリのまま保持される。一方、車載ディスプレイ装置の音声は、FMラジオの音声に切り替わる。
 次に、動作act3のタイミングで、ユーザが車載ディスプレイ装置に専用通信制御非対応音楽アプリへと音源を切り替える操作を行った場合、車載ディスプレイ装置の音源は、携帯型端末で再生される音声に切り替わる。携帯型端末では、専用通信制御対応音楽アプリがバックグラウンドアプリケーションへと切り替わり、フォアグラウンドアプリケーションが専用通信制御非対応音楽アプリに切り替わるので、携帯型端末の表示もそれに伴い、専用通信制御非対応音楽アプリの画像となる。この時、車載ディスプレイ装置で再生される音声は、専用通信制御非対応音楽アプリが再生する音声である。
 そして、動作act4のタイミングで、ユーザが車載ディスプレイ装置に専用通信制御対応音楽アプリへと音源を切り替える操作を行おうとした場合、図7で示した従来の携帯型端末では、フォアグラウンドアプリケーションを専用通信制御対応音楽アプリに切り替えることができない場合がある。このような現象は、前述したように、専用通信制御非対応音楽アプリが、フォアグラウンドアプリケーションに切り替わる際、直前までフォアグラウンドアプリケーションとして動作していた専用通信制御対応音楽アプリの存在を、従来の車載ディスプレイ装置が認識できなくなってしまうことによって生じる。
 図8は、比較対象となる従来の一般的な携帯型端末と車載ディスプレイ装置との間で行うことが可能であった動作と、その問題点の他の例を説明する図である。以下では、携帯型端末は、車載ディスプレイ装置と通信可能に接続された後、まずランチャーアプリが起動したものとして説明する。なお、時間の流れは、図8に向かって右側に進んでいるものとする。また、動作act1a~4aは、ユーザが車載ディスプレイ装置に対して行った音源の切り替え操作と、その操作が行われたタイミングを表している。ここで、図8に示した例は、動作act3aで示したタイミングの直前までは、図7と同様の説明となるので、詳細な説明を省略する。
 車載ディスプレイ装置の音源は、動作act3aのタイミングで、ユーザが車載ディスプレイ装置に携帯型端末内蔵アプリへと音源を切り替える操作を行った場合、携帯型端末で再生される音声に切り替わる。携帯型端末では、バックグラウンドアプリケーションとして携帯型端末内蔵音楽アプリが起動して音声の再生を行う。また、携帯型端末では、フォアグラウンドアプリケーションが保持され、携帯型端末の表示もそれに伴い保持される。この時、車載ディスプレイ装置で吹鳴される音声は、携帯型端末内蔵音楽アプリが再生する音声である。
 そして、動作act4aのタイミングで、ユーザが車載ディスプレイ装置に専用通信制御対応音楽アプリへと音源を切り替える操作を行おうとした場合、図8で示した従来の携帯型端末では、フォアグラウンドアプリケーションが専用通信制御対応音楽アプリのまま保持されているが、携帯型端末内蔵音楽アプリが音声出力優先権を持つため、車載ディスプレイ装置のスピーカから再生される音声は、携帯型端末内蔵音楽アプリのまま保持されてしまう。
 これに対し、図9は、本発明の一態様である携帯型端末300と車載ディスプレイ装置200との間で行われる動作の例を説明する図である。以下では、携帯型端末300は、車載ディスプレイ装置200と通信可能に接続された後、まずランチャーアプリが起動したものとして説明する。なお、時間の流れは、図9に向かって右側に進んでいるものとする。また、動作act1b~4bは、ユーザが車載ディスプレイ装置に対して行った音源の切り替え操作と、その操作が行われたタイミングを表している。ここで、図9に示した例は、動作act4bで示したタイミングの直前までは、図7と同様の説明となるので、詳細な説明を省略する。
 携帯型端末300は、動作act4bのタイミングで、ユーザが車載ディスプレイ装置に専用通信制御対応音楽アプリへと音源を切り替える操作を行おうとした場合、バックグラウンドアプリケーションとして動作していた専用通信制御対応音楽アプリをフォアグラウンドアプリケーションに切り替え、フォアグラウンドアプリケーションとして動作していた専用通信制御非対応音楽アプリをバックグラウンドアプリケーションに切り替える。
 また、携帯型端末300は、動作act4bのタイミングで、専用通信制御非対応音楽アプリの音声の再生を停止させ、専用通信制御非対応音楽アプリの音声の再生が停止した後、専用通信制御対応音楽アプリの音声の再生を開始させる。
 このようにして、本発明の一態様である携帯型端末300と、携帯型端末300と接続された車載ディスプレイ装置200とは、図7で示した従来の携帯型端末において、フォアグラウンドアプリケーションを専用通信制御対応音楽アプリに切り替えることができないという問題を解決することができる。また、図8で示した従来の携帯型端末において、携帯型端末内蔵音楽アプリが音声出力優先権を持つため、車載ディスプレイ装置のスピーカから再生される音声は、携帯型端末内蔵音楽アプリのまま保持されてしまうという問題を解決することができる。
 次に、図10を参照することで、車載スイッチ100による音源の切り替え操作と、音源の切り替えの前後における車載ディスプレイ装置200で表示される画像及び再生される音声の遷移について説明する。図10は、車載スイッチ100による音源の切り替え操作と、音源の切り替えの前後における車載ディスプレイ装置200で表示される画像及び再生される音声の遷移を説明するための概念図である。
 例えば、行rw1を参照すると、音源の切り替え前における車載ディスプレイ装置200の状態は、表示部260の画面に、車載ディスプレイ装置200で動作しているナビゲーション(図10における車載ナビゲーション)の画像が表示され、スピーカ270からFMラジオが再生されている。また、この時点での携帯型端末300のフォアグラウンドアプリケーションは、音楽アプリ(例えば、専用通信制御対応音楽アプリ)である。ここで、ユーザが車載スイッチ100によって、音源を携帯型端末300の音楽アプリへ切り替えると、音源の切り替え後における車載ディスプレイ装置200の状態は、表示部260の画面が車載ナビゲーションの画像のまま保持され、スピーカ270から再生する音声が、FMラジオから携帯型端末300のフォアグラウンドアプリケーションとして動作している音楽アプリへと切り替えられる。
 また、行rw2を参照すると、音源の切り替え前における車載ディスプレイ装置200の状態は、表示部260の画面に、車載ディスプレイ装置200で動作しているFMラジオの情報(図10におけるFMソース)が表示され、スピーカ270からFMラジオが再生されている。また、この時点での携帯型端末300のフォアグラウンドアプリケーションは、携帯型端末300で動作しているナビゲーションアプリ(図10におけるナビアプリ)である。ここで、ユーザが車載スイッチ100によって、車載ディスプレイ装置200の音源を、携帯型端末300から再生される音声に切り替えようとして車載スイッチ100を操作した場合、車載ディスプレイ装置200では、音源の切り替え先の候補に携帯型端末300が再生する音声が含まれないため、ユーザは音源を携帯型端末300が再生する音声に切り替えることができない。このような現象は、携帯型端末300のフォアグラウンドアプリケーションが、音楽アプリではないために生じる。
 このように、本発明の一態様である携帯型端末300は、車載ディスプレイ装置200が車両内で取得した音源の切り替えを指示する情報を受信し、受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替え、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替え、直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、さらに、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させるため、携帯型端末300にインストールされている音楽アプリケーションの規格に依存することなく、車載ディスプレイ装置200から取得した情報に基づいて、携帯型端末300のアプリケーションプログラムをスムーズに切り替えることができる。
 また、携帯型端末300は、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えを行うと共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えを行った、直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させるため、携帯型端末300のアプリケーションプログラムをスムーズに切り替えるとともに、携帯型端末300で音声を再生するアプリケーションプログラムをスムーズに切り替えることができる。
 また、携帯型端末300は、専用のAPI(Application Programming Interface)によって、直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させるため、携帯型端末300ごとに規定されているAPIによる制御では、アプリケーションプログラムの音声の再生を開始させることができない状況であっても、当該アプリケーションプログラムの音声を再生させることができる。
 以上、本発明の実施形態を、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない限り、変更、置換、削除等されてもよい。
1 電子通信システム、100 車載スイッチ、200 車載ディスプレイ装置、210 車両側第1通信部、220 車両側第2通信部、230 プロセッサ、231 車両側入力判定部、232 車両側情報提供部、233 車両側第1通信制御部、234 車両側第2通信制御部、235 出力制御部、236 音源切替部、240 車両側記憶部、250 車両側入力受付部、260 表示部、270 スピーカ、280 車載スイッチ入力受付部、290 ラジオ受信部、300 携帯型端末、310 携帯側第1通信部、320 携帯側第2通信部、330 プロセッサ、331 アプリケーション機能部、334 アプリ切替部、336 音声再生停止制御部、338 音声再生開始部、340 携帯側記憶部、350 携帯側入力受付部、360 表示部、370 スピーカ、380 外部通信部

Claims (8)

  1.  車載装置と通信を行う携帯型端末であって、
     前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報の受信と、自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声の前記車載装置への送信と、を制御する通信制御部と、
     前記受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えると共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替える切替部と、
     前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させる音声制御部と、
     を備える携帯型端末。
  2.  請求項1に記載の携帯型端末であって、
     前記音声制御部は、前記切替部により切り替えが行われた後、前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させる、
     携帯型端末。
  3.  請求項1または2に記載の携帯型端末であって、
     前記音声制御部は、専用のAPI(Application Programming Interface)によって、前記音声の再生を開始させる、
     携帯型端末。
  4.  車載装置と通信を行う携帯型端末の制御方法であって、
     前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報を受信することと、
     自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声を前記車載装置に送信することと、
     前記受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えると共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えることと、
     前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させることと、を含む
     制御方法。
  5.  車載装置と通信を行う携帯型端末のコンピュータに、
     前記車載装置から送信される音源の切り替えを指示する情報であって、前記音源となる自端末で実行されているアプリケーションプログラムを示す情報を包含した情報を受信させる手順と、
     自端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声を前記車載装置に送信させる手順と、
     前記受信した音源の切り替えを指示する情報に基づいて、直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えさせ、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えさせる手順と、
     前記直前までフォアグラウンドで動作中であったアプリケーションプログラムの音声の再生を停止させ、該停止させた後、前記直前までバックグラウンドで動作中であったアプリケーションプログラムの音声の再生を開始させる手順と、を実行させるための
     制御プログラム。
  6.  携帯型端末と通信を行う車載装置であって、
     前記携帯型端末のフォアグラウンドで動作しているアプリケーションプログラムが再生した音声を受信する受信手段と、
     前記受信手段が受信した音声を出力する出力手段と、
     音源の切換を示す情報を取得する取得手段と、
     前記取得手段により取得された音源の切り替えを指示する情報に基づいて、前記携帯型端末で実行されているアプリケーションプログラムを示す情報を包含した情報であって、前記携帯型端末において直前までフォアグラウンドで動作中であったアプリケーションプログラムをバックグラウンドへと切り替えさせると共に、直前までバックグラウンドで動作中であったアプリケーションプログラムをフォアグラウンドへと切り替えさせるための情報を、前記携帯型端末に送信する送信手段と、
     を備える車載装置。
  7.  請求項1から3のいずれか一項に記載の携帯型端末であって、
     前記自端末で実行されている少なくとも1つ以上のアプリケーションプログラムを示す情報を前記車載装置に送信する通信部をさらに有する
    携帯型端末。
  8.  請求項6に記載の車載装置であって、
     前記受信手段は前記携帯型端末で実行されている少なくとも1つ以上のアプリケーションプログラムを示す情報を前記携帯型端末から受信する
    車載装置。
PCT/JP2014/073131 2013-09-04 2014-09-03 携帯型端末、車載装置、制御方法、及び制御プログラム WO2015033947A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201480048465.2A CN105519083B (zh) 2013-09-04 2014-09-03 移动终端、车载装置、控制方法以及控制程序
US14/913,585 US9648155B2 (en) 2013-09-04 2014-09-03 Mobile terminal, onboard device, control method, and control program
JP2015535487A JP6133993B2 (ja) 2013-09-04 2014-09-03 携帯型端末、車載装置、制御方法、及び制御プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013183416 2013-09-04
JP2013-183416 2013-09-04

Publications (1)

Publication Number Publication Date
WO2015033947A1 true WO2015033947A1 (ja) 2015-03-12

Family

ID=52628418

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/073131 WO2015033947A1 (ja) 2013-09-04 2014-09-03 携帯型端末、車載装置、制御方法、及び制御プログラム

Country Status (4)

Country Link
US (1) US9648155B2 (ja)
JP (1) JP6133993B2 (ja)
CN (1) CN105519083B (ja)
WO (1) WO2015033947A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106790486A (zh) * 2016-12-13 2017-05-31 百度在线网络技术(北京)有限公司 显示方法和装置
JP2019033427A (ja) * 2017-08-09 2019-02-28 株式会社デンソーテン 携帯端末、車両用システム、通信接続方法、及び、プログラム

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10408632B2 (en) * 2012-12-27 2019-09-10 Harman International Industries, Inc. Vehicle navigation
DE102015204336B4 (de) * 2015-03-11 2019-01-31 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Integration von Fahrzeug-Applikationen
CN106767884A (zh) * 2016-12-19 2017-05-31 东风汽车公司 基于手机互联的汽车仪表导航方法
CN109933297B (zh) * 2017-12-15 2023-09-19 阿尔派株式会社 电子装置及其信号源的控制方法
CN110515322A (zh) * 2019-07-11 2019-11-29 上海蔚来汽车有限公司 汽车的声音播放方法
CN110830476B (zh) * 2019-11-11 2022-02-01 深圳市麦思美汽车电子有限公司 一种安卓车载影音系统的音频源切换控制方法
CN111447323B (zh) * 2020-03-20 2021-07-09 华为技术有限公司 一种应用显示接续方法及装置
CN112109631B (zh) * 2020-09-17 2022-08-16 广州小鹏汽车科技有限公司 一种车辆交互的方法和装置
CN112319377B (zh) * 2020-10-20 2021-11-26 广汽本田汽车有限公司 Avas系统的音源切换方法、运行控制装置、车载系统及汽车
CN112559044A (zh) * 2020-12-23 2021-03-26 Oppo广东移动通信有限公司 一种播放切换方法、装置及计算机可读存储介质
CN115550501A (zh) * 2021-06-30 2022-12-30 博泰车联网科技(上海)股份有限公司 音频控制方法、电子设备及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008236687A (ja) * 2007-03-23 2008-10-02 Toshiba Corp 情報処理装置
JP2013083607A (ja) * 2011-10-12 2013-05-09 Alpine Electronics Inc 電子装置、出力制御方法および出力制御プログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030032460A1 (en) * 2001-08-09 2003-02-13 Cannon Joseph M. Multi-user hands-free wireless telephone gateway
US20030063756A1 (en) * 2001-09-28 2003-04-03 Johnson Controls Technology Company Vehicle communication system
US20050064835A1 (en) * 2003-09-18 2005-03-24 International Business Machines Corporation Audio system responsive to incoming phone calls
JP4459105B2 (ja) * 2005-04-26 2010-04-28 株式会社東芝 携帯通信機器
JP4559909B2 (ja) * 2005-05-11 2010-10-13 株式会社東芝 携帯通信機器
US20070015537A1 (en) * 2005-07-14 2007-01-18 Scosche Industries, Inc. Wireless Hands-Free Audio Kit for Vehicle
EP1748636B1 (en) * 2005-07-28 2008-11-19 Harman Becker Automotive Systems GmbH Improved communication in passenger compartments
US8275307B2 (en) * 2006-07-24 2012-09-25 Qualcomm Incorporated Vehicle audio integrator
JP2010199716A (ja) * 2009-02-23 2010-09-09 Fujitsu Ten Ltd 車載装置及び通信制御方法
JP4883132B2 (ja) 2009-04-28 2012-02-22 株式会社デンソー 音出力制御装置
US8315617B2 (en) * 2009-10-31 2012-11-20 Btpatent Llc Controlling mobile device functions
JP2011147019A (ja) * 2010-01-15 2011-07-28 Kyocera Corp 携帯端末装置
JP2012010287A (ja) 2010-06-28 2012-01-12 Honda Motor Co Ltd 携帯機器と連携し、携帯機器のアプリケーションを自動的に起動する車載機器
WO2012036279A1 (ja) * 2010-09-17 2012-03-22 クラリオン株式会社 車載情報システム、車載装置、情報端末
JP2013114383A (ja) 2011-11-28 2013-06-10 Denso Corp プライバシー保護方法、車両用装置、車両用通信システムおよび携帯端末
US8731822B2 (en) * 2012-01-17 2014-05-20 Motorola Mobility Llc Systems and methods for interleaving navigational directions with additional audio in a mobile device
US8855557B2 (en) * 2012-01-27 2014-10-07 Blackberry Limited Mobile communications device providing enhanced near field communication (NFC) mode switching features and related methods
JP5944689B2 (ja) 2012-02-22 2016-07-05 クラリオン株式会社 車載機、および、車載機の表示制御システム
JP5849857B2 (ja) * 2012-05-29 2016-02-03 株式会社デンソー 近距離無線通信装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008236687A (ja) * 2007-03-23 2008-10-02 Toshiba Corp 情報処理装置
JP2013083607A (ja) * 2011-10-12 2013-05-09 Alpine Electronics Inc 電子装置、出力制御方法および出力制御プログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106790486A (zh) * 2016-12-13 2017-05-31 百度在线网络技术(北京)有限公司 显示方法和装置
WO2018107628A1 (zh) * 2016-12-13 2018-06-21 百度在线网络技术(北京)有限公司 显示方法和装置
US10860280B2 (en) 2016-12-13 2020-12-08 Baidu Online Network Technology (Beijing) Co., Ltd. Display method and device
JP2019033427A (ja) * 2017-08-09 2019-02-28 株式会社デンソーテン 携帯端末、車両用システム、通信接続方法、及び、プログラム

Also Published As

Publication number Publication date
JPWO2015033947A1 (ja) 2017-03-02
JP6133993B2 (ja) 2017-05-24
CN105519083A (zh) 2016-04-20
US20160212254A1 (en) 2016-07-21
US9648155B2 (en) 2017-05-09
CN105519083B (zh) 2018-03-20

Similar Documents

Publication Publication Date Title
JP6133993B2 (ja) 携帯型端末、車載装置、制御方法、及び制御プログラム
JP6122129B2 (ja) 電子通信システム、車載装置、及び制御方法
US11330059B2 (en) Head unit of a vehicle, a vehicle having same, and a method of controlling a vehicle
US9146900B2 (en) Method for activating application, handheld electronic apparatus and car system
JP6057504B2 (ja) 電子装置、出力制御方法および出力制御プログラム
CN102857805A (zh) 一种移动终端信号的处理方法及装置
JP4645318B2 (ja) 無線通信装置とその方法
KR101856930B1 (ko) 유에스비 액세서리의 유에스비 통신 제어 방법
CN107148649B (zh) 音频再生装置及音频再生系统
US20220256627A1 (en) Bluetooth communication system and related computer program product capable of reducing complexity of pairing bluetooth host device with bluetooth device set for user
KR20180024450A (ko) Usb 호스트의 usb 통신 제어 방법
EP2575331A1 (en) Electronic Apparatus and Media System Using Information Terminal
CN113225716A (zh) 一种车载k歌实现方法、系统、设备及存储介质
CN105246048B (zh) 车辆计算系统经由辅助端口与移动装置通信的方法和系统
JP2003196919A (ja) 再生システム、コンテンツデータ提供装置、携帯情報端末、コンテンツデータの送信方法およびコンテンツデータの再生方法
JP2013126092A (ja) 近距離無線通信システム
JP2008061080A (ja) 車載用通信装置及びアンテナ切替方法
CN203799656U (zh) 一种具有多媒体功能的车载导航系统
CN203799655U (zh) 一种带srs音效处理器的多媒体导航系统
KR20120108519A (ko) 스마트 카를 위한 차량내 네트워크 장치
JP2015216586A (ja) 電子システム、メディアの出力方法及び出力プログラム
CN115442779A (zh) 音频数据的播放方法及装置
JP2019185668A (ja) 電子装置およびシステム
JP2010060368A (ja) ナビゲーション装置
JP2006182309A (ja) 車載用オーディオシステム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14841934

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2015535487

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 14913585

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14841934

Country of ref document: EP

Kind code of ref document: A1