WO2023276293A1 - 音声案内装置、音声案内方法及びプログラム - Google Patents

音声案内装置、音声案内方法及びプログラム Download PDF

Info

Publication number
WO2023276293A1
WO2023276293A1 PCT/JP2022/010331 JP2022010331W WO2023276293A1 WO 2023276293 A1 WO2023276293 A1 WO 2023276293A1 JP 2022010331 W JP2022010331 W JP 2022010331W WO 2023276293 A1 WO2023276293 A1 WO 2023276293A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
mobile device
user
operations
voice guidance
Prior art date
Application number
PCT/JP2022/010331
Other languages
English (en)
French (fr)
Inventor
修 西岡
拓也 小山内
虎喜 岩丸
崚 武智
Original Assignee
本田技研工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 本田技研工業株式会社 filed Critical 本田技研工業株式会社
Priority to CN202280043824.XA priority Critical patent/CN117546126A/zh
Priority to JP2023531401A priority patent/JPWO2023276293A5/ja
Publication of WO2023276293A1 publication Critical patent/WO2023276293A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/08Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • G10L13/10Prosody rules derived from text; Stress or intonation

Definitions

  • the present invention relates to a voice guidance device, voice guidance method and program.
  • Patent Literature 1 sets the user's proficiency level based on the number of times the user presses the cancel switch during the output of voice operation guidance.
  • Patent Document 1 With the operation guidance device of Patent Document 1, the user's skill increases when the user understands the content of the operation guidance being output. However, even if the user understands the contents of the operation guidance, it does not mean that the user is accustomed to operating the device.
  • One aspect of the present invention provides a technique for appropriately setting the user's proficiency in operating a voice guidance device.
  • a voice guidance device comprising skill level management means for managing a user's skill level regarding operation of the voice guidance device, and a providing unit for providing a message to the user in a manner corresponding to the skill level. and the skill level management means changes the skill level based on the number of operations in a series of operations performed by the user for transitioning the voice guidance device from the first state to the second state.
  • a voice guidance device is provided.
  • FIG. 10 is a diagram illustrating a display screen of communication functions of some embodiments; It is a figure explaining the display screen of the route guidance function of some embodiment.
  • FIG. 10 is a diagram illustrating a display screen of the music playback function of some embodiments;
  • FIG. 12 illustrates a display screen of the messaging function of some embodiments; It is a figure explaining the display in the vehicle of some embodiments.
  • Figures 4A-4D illustrate the operation of a mobile device of some embodiments; It is a figure explaining operation
  • FIG. 1 is a front rear view of a vehicle 100.
  • FIG. 1 is a front rear view of a vehicle 100.
  • the vehicle 100 has a display device 101 in the center in the vehicle width direction.
  • the display device 101 displays information for the driver of the vehicle 100 (hereinafter simply referred to as the driver).
  • the display device 101 may be a dot-matrix display device such as a liquid crystal display or an organic EL (electro-luminescence) display, and notifies by extinguishing or lighting (or blinking) a predetermined mark. It may be a set of indicators.
  • the vehicle 100 has a left handle switch 102 inside the left handle grip in the vehicle width direction.
  • the appearance of the left handlebar switch 102 will be described with reference to FIG.
  • Left handle switch 102 includes a plurality of switches. At least some of these switches can be operated with the left thumb while the driver is holding the left steering wheel with the left hand.
  • switches used for a linking function (described later) between the vehicle 100 and the mobile device will be described.
  • Other switches that is, switches used for functions of vehicle 100 other than the linking function
  • left handle switch 102 may have the same configuration as the conventional one, and therefore description thereof will be omitted.
  • the left handle switch 102 includes an upper switch 200U, a lower switch 200D, and a left/right switch 200H.
  • the left/right switch 200H is arranged substantially in the center of the left handle switch 102 .
  • the left/right switch 200H is a tilting switch that can be tilted in each of the left and right directions.
  • the driver can input a left direction command by tilting the left/right switch 200H to the left, and can input a right direction command by tilting the left/right switch 200H to the right.
  • the upper switch 200U is arranged above the left/right switch 200H.
  • the upper switch 200U is a push-type switch.
  • the driver can input an upward direction command by pressing the up switch 200U.
  • the lower switch 200D is arranged below the left/right switch 200H.
  • the lower switch 200D is a push-type switch.
  • the driver can input a downward direction command by pressing the downward switch 200D.
  • the upper switch 200U, the lower switch 200D, and the left/right switch 200H are collectively referred to as direction switches 200.
  • the directional switch 200 is not limited to the configuration of FIG. 2, and may have any configuration that allows input of instructions in four directions.
  • This cooperation system has the above-described vehicle 100 , mobile device 310 , and headset 320 .
  • the vehicle 100 has a control section 301 , a display section 304 , a direction input section 305 and a communication section 306 .
  • Control unit 301 controls the entire vehicle 100 .
  • the control unit 301 is configured by a processor 302 and a memory 303, for example.
  • the operation by the control unit 301 is realized by the processor 302 executing the program stored in the memory 303 .
  • a part or all of the operation of the control unit 301 may be realized by a dedicated circuit such as ASIC (Application Specific Integrated Circuit) or FPGA (Field Programmable Gateway).
  • the display unit 304 displays information for the driver.
  • the display unit 304 is realized by the display device 101, for example.
  • a direction input unit 305 acquires four direction instructions from the driver.
  • the direction input unit 305 is implemented by, for example, an up switch 200U, a down switch 200D and a left/right switch 200H.
  • Communication unit 306 provides a function for vehicle 100 to communicate with the outside.
  • Communication unit 306 may support short-range wireless communication such as Bluetooth®.
  • the communication unit 306 may support cellular communication, road-to-vehicle communication, and the like.
  • the direction input unit 305 may use the direction switch 200 to accept two levels of input for each direction.
  • the direction input unit 305 may accept a short-press input (for example, an input with a duration of less than 1 second) and a long-press input (for example, an input with a duration of 1 second or more).
  • the directional input unit 305 supports single-tap input (for example, input with an interval of 1 second or longer before the next input) and double-tap input (for example, two consecutive inputs with an interval of less than 1 second). and may be accepted.
  • the mobile device 310 has a control unit 311 , a display unit 314 , an input unit 315 and a communication unit 316 .
  • Mobile device 310 may be, for example, a mobile telephony device such as a smart phone.
  • the user of mobile device 310 may be the same as the driver. A case where the driver uses the mobile device 310 will be described below.
  • Mobile device 310 may be held by a driver or housed in vehicle 100 .
  • a control unit 311 controls the entire mobile device 310 .
  • the control unit 311 is configured by a processor 312 and a memory 313, for example. In this case, the operation by the control unit 311 is realized by the processor 312 executing the program stored in the memory 313 .
  • a program may include an operating system and an application. A part or all of the operation of the control unit 311 may be realized by a dedicated circuit such as ASIC or FPGA.
  • the display unit 314 displays information for the driver.
  • the display unit 314 is implemented by a display device such as a liquid crystal display or an organic EL display.
  • the input unit 315 acquires input from the driver.
  • the input unit 315 is implemented by an input device such as a touch panel or buttons, for example.
  • the communication unit 316 provides functions for the mobile device 310 to communicate with the outside. Communication unit 316 may support short-range wireless communication such as Bluetooth. Furthermore, the communication unit 306 may support cellular communication, WiFi (registered trademark) communication, and the like.
  • the headset 320 has a microphone 321 , a speaker 322 and a communication section 323 .
  • Headset 320 is worn on the driver's head.
  • Microphone 321 acquires voice input from the driver.
  • a speaker 322 outputs audio to the driver.
  • Communication unit 323 may support short-range wireless communication such as Bluetooth.
  • vehicle 100 and mobile device 310 work together. Specifically, a communication link is established between the vehicle 100 and the mobile device 310, for example, by short-range wireless communication. Vehicle 100 and mobile device 310 exchange data over this communication link. A communication link is also established between the mobile device 310 and the headset 320, for example by short-range wireless communication. Mobile device 310 and headset 320 exchange data over this communication link.
  • At least some of the functions provided by the mobile device 310 can cooperate with the vehicle 100.
  • a function that can cooperate with the vehicle 100 will be referred to as a cooperation function.
  • the driver inputs a direction to the mobile device 310 through the direction input unit 305 of the vehicle 100 .
  • This directional input is transmitted from vehicle 100 to mobile device 310 .
  • the mobile device 310 performs the operation of the cooperative function according to the directional input from the driver, and generates an image showing the operation status.
  • Mobile device 310 transmits the generated image to vehicle 100 .
  • Vehicle 100 displays the received image on display unit 304 .
  • Mobile device 310 also transmits audio output to the driver to headset 320 .
  • Headset 320 outputs the received audio output from speaker 322 .
  • Audio output to the driver may include audio guidance. Since the mobile device 310 thus has a voice guidance function, the mobile device 310 can also be called a voice guidance device.
  • Headset 320 transmits voice input from the driver captured by microphone 321 to mobile device 310 . The mobile device 310 operates the cooperation function according to the voice input from the driver.
  • FIG. 4 illustrates a display example of the display unit 304 in cooperative operation between the vehicle 100 and the mobile device 310.
  • FIG. A screen 400 is an example of a screen displayed on the display device 101 .
  • the running speed is displayed in the center of the screen 400, and the remaining amount of fuel is displayed below it.
  • a speed tachometer is displayed on the left side of the screen 400 .
  • An area 401 on the right side of the screen 400 is an area for displaying images supplied from the mobile device 310 while the vehicle 100 is in cooperation with the mobile device 310 .
  • Such an image is hereinafter referred to as a linked image.
  • vehicle 100 displays other images in area 401, such as images not related to linked functions. good too.
  • the vehicle 100 displays an option image such as riding mode parameters (for example, information set in the vehicle 100 such as the operation status of the ABS (anti-lock braking system)) and level adjustment in the area 401. good too.
  • an image with a low importance degree may be displayed among images that are not related to the cooperation function (for example, an image related to running of the vehicle 100).
  • the space of the screen 400 can be effectively utilized by sharing the area 401 with images that are not related to the link function and have a low degree of importance and linked images.
  • An area 402 on the lower side of the screen 400 is an area for displaying images supplied from the mobile device 310 while the vehicle 100 is not in cooperation with the mobile device 310 .
  • Such an image is hereinafter referred to as an interrupt image. While no interrupt images are being provided by mobile device 310, vehicle 100 may display other images in area 402, such as images not associated with collaboration features.
  • Mobile device 310 provides a number of federation features.
  • the plurality of cooperative functions may include two or more of a weather information providing function, a calling function, a messaging function, a music playing function, and a route guidance function.
  • the weather information provision function is a function that provides weather information for a specific location. Weather may include at least one of weather and temperature.
  • a call function is a function of making a call with another person.
  • the messaging function is the ability to exchange text messages with others.
  • a music reproduction function is a function for reproducing music.
  • the route guidance function is a function of guiding a route to a designated destination.
  • the mobile device 310 receives two types of input for each of the four directions (up, down, left, and right) from the vehicle 100 .
  • the following example deals with the case where the two types of input are a short press and a long press. 5 to 9, a black triangle indicates a short press, and a black triangle with a " ⁇ " indicates a long press. 5 to 9, all images other than image 500 are linked images, that is, images that mobile device 310 transmits to vehicle 100 and displayed on display device 101 of vehicle 100 while the linked function is being executed. Therefore, in the following description of FIGS. 5 to 9, the process up to the transmission of the linked image will be described, and the description of the subsequent display of the linked image will be omitted.
  • the image 500 other than the cooperating function is displayed in the area 401 of the screen 400.
  • the mobile device 310 starts cooperation with the vehicle 100 when receiving a long left press input from the driver via the direction input unit 305 of the vehicle 100 while not in cooperation with the vehicle 100 . Since the direction input is similarly obtained from the driver via the direction input unit 305 of the vehicle 100 in the following description, only the input direction (up, down, left, right) and the input mode (short press/long press) will be described below. show.
  • Each of the multiple linked functions has a top image.
  • the top image is an image that the mobile device 310 transmits to the vehicle 100 immediately after one linked function is selected.
  • An image 501 is the top image of the weather information provision function.
  • the image 501 displays an image showing the weather at the current location of the vehicle 100 and the temperature at the current location. When a destination is set for the vehicle 100, the image 501 may display an image showing the weather at the destination and the temperature at the destination.
  • Image 502 is the top image of the call function.
  • Image 502 includes an image depicting call functionality.
  • Image 503 is the top image of the route guidance function.
  • Image 503 includes an image showing the route guidance function.
  • Image 504 is the top image of the music playback function.
  • Image 504 includes an image showing the music playback function.
  • Image 505 is the top image of the messaging function.
  • Image 505 includes an image that illustrates messaging functionality.
  • the mobile device 310 selects any one of the plurality of cooperation functions and transmits the top image of the selected cooperation function.
  • the linking function selected here may be a linking function set in advance as an initial function. Such a linking function is called an initial linking function.
  • the call function is set as the initial cooperation function. Therefore, the mobile device 310 transmits the image 502 immediately after starting cooperation.
  • the driver can also set another linked function as the initial linked function. Mobile device 310 may audibly notify that cooperation has started.
  • the mobile device 310 terminates cooperation with the vehicle 100 when receiving a right long press input while the top image (image 502 in this example) of the initial cooperation function is displayed. In this case, mobile device 310 transmits a notification to end cooperation to vehicle 100 , and vehicle 100 ends the cooperation operation based on the notification, and displays image 500 other than the cooperation function in area 401 . . The mobile device 310 may audibly notify that the collaboration has ended.
  • the linked image is displayed in the area 401 on the right side of the screen 400. Therefore, when the linked image is displayed in area 401 at the start of collaboration, the driver feels as if the linked image has entered area 401 from the outside of screen 400 beyond the right edge of screen 400 . Since the input direction (left direction) for starting the cooperative action matches the virtual moving direction of the cooperative image, the driver can intuitively start the cooperative function. In order to make this effect more conspicuous, the vehicle 100 may be displayed with animation such that the linked image enters the area 401 from the right side. Further, when the linked image in the area 401 is erased at the end of the linking, the driver feels as if the linked image has crossed the right end of the screen 400 to the outside of the screen 400 .
  • the vehicle 100 may be displayed with an animation such that the linked image appears from the area 401 to the right side. Furthermore, vehicle 100 may associate the input direction with the movement direction of the image also when displaying other linked images. That is, the vehicle 100 may display an image received in response to transmitting upward, downward, leftward, and downward directions to the mobile device 310 with an animation of movement in the directions of the directions.
  • the mobile device 310 When the mobile device 310 acquires an up short press input or a down short press input in a state in which the top image (any of the images 501 to 505) of any one of the plurality of linked functions is displayed, the mobile device 310 selects the linked function being selected. switch to another linkage function, and send the top image of the linked function after switching. For example, when the mobile device 310 acquires a short press input while the top image of the selected linkage function is displayed, the mobile device 310 performs the weather information provision function, call function, route guidance function, music playback function, and messaging function. The currently selected linkage function is switched in order, and the top image (one of the images 501 to 505) corresponding to the linked function after switching is transmitted.
  • mobile device 310 switches the currently selected link function in reverse order in response to acquiring the up short press input in a state where the top image of the link function being selected is displayed, and switches the selected link function in reverse order.
  • the top image (one of the images 501 to 505) is transmitted.
  • the mobile device 310 may notify the linked function after switching by voice when switching the linked function.
  • the mobile device 310 displays the top image (image 502 in this example) of the initial link function when the left long press input is acquired while any link image shown in FIGS. 5 to 9 is being displayed. Transition to transmission.
  • the mobile device 310 sets the volume of the sound output to the driver to zero (that is, mutes the sound) when the long-pressing input is acquired while any of the linked images shown in FIGS. 5 to 9 is being displayed.
  • the mobile device 310 cancels the mute state and restores the volume to the volume before the mute state.
  • the mobile device 310 may end the cooperative operation when receiving a right long press input even when any of the cooperative images shown in FIGS.
  • the mobile device 310 may accept an instruction to end the cooperation operation only when the top image of the initial cooperation function (the image 502 in this example) is displayed, or may accept an instruction to end the cooperation operation.
  • An instruction to end the cooperative operation may be accepted only when the top image is displayed.
  • a specific operation example of the call function will be described with reference to FIG.
  • the mobile device 310 acquires a short right press input while the image 502 is displayed, the mobile device 310 transitions to transmission of the image 602 .
  • An image 602 is an image for requesting the driver to designate a calling party. Along with sending image 602, mobile device 310 may audibly request the driver to designate a calling party.
  • the mobile device 310 acquires a short-down press input, a short-right press input, and a short left-press input while the image 602 is displayed, the mobile device 310 transitions to transmission of the image 603, transmission of the image 604, and transmission of the image 502, respectively. do.
  • the image 603 is an image containing the preset name of the other party.
  • Mobile device 310 reads the preset name of the calling party from memory 313 and includes it in image 603 when transitioning to transmission of image 603 .
  • Mobile device 310 may send image 603 and notify the driver of the read name of the other party by voice.
  • the mobile device 310 acquires an up short press input, a right short press input, and a left short press input while the image 603 is displayed, the mobile device 310 transitions to transmission of the image 602, transmission of the image 606, and transmission of the image 502, respectively. do.
  • An image 604 is an image indicating that the voice search is in a standby state.
  • Image 604 may include an image that indicates the input direction to end the voice search.
  • mobile device 310 may audibly notify the driver that voice search is awaiting.
  • mobile device 310 waits for voice input via headset 320 .
  • the mobile device 310 searches the contact list in the memory 313 for the called party based on the voice input.
  • the mobile device 310 transitions to transmission of the image 605 when the calling party can be identified, and does not transmit a new image when the calling party cannot be identified (that is, the vehicle 100 continues displaying the image 604). ). If the mobile device 310 cannot identify the caller, the mobile device 310 may notify the driver by voice.
  • the mobile device 310 acquires a short left press input while the image 604 is displayed, the mobile device 310 transitions to transmission of the image 602 .
  • An image 605 is an image containing the name of the caller specified by voice search.
  • mobile device 310 may notify the driver of the identified caller's name by voice.
  • the mobile device 310 acquires a right short press input and a left short press input while the image 605 is displayed, the mobile device 310 transitions to transmission of the image 606 and image 602 respectively.
  • An image 606 is an image showing the execution status of the call function.
  • the image 606 may include the caller and call status (ringing or calling (in which case, call duration)).
  • Image 606 may include an image indicating input directions for ending a call.
  • the mobile device 310 starts calling the other party, and updates the image 606 according to the call status. Audio of the call is input and output between mobile device 310 and the driver via headset 320 .
  • the mobile device 310 acquires a short left press input while the image 606 is displayed, the mobile device 310 ends the call and transitions to transmission of the image 502 .
  • the mobile device 310 increases or decreases the volume output from the headset 320 when receiving a short up-press input or a short down-press input while the image 606 is displayed.
  • the mobile device 310 acquires the left long press input while the image 606 is displayed, the mobile device 310 transitions to transmission of the image 601 while continuing the call.
  • An image 601 is the top image of the call function during execution of the call function.
  • the image 502 is the top image of the call function when the call function is not being executed. Executing the call function may mean that the other party is being called or is in the middle of a call with the other party.
  • the image 601 may include the caller and call status (calling, calling (in that case, call duration)). Since the image 601 is the top image, the mobile device 310 switches the call function to another cooperation function when receiving a short up or short down press while the image 601 is displayed. Mobile device 310 may maintain a call state if the call function switches to another collaboration function while the call function is running.
  • the mobile device 310 When the mobile device 310 acquires a short right press input while the image 601 is displayed, the mobile device 310 transitions to transmission of the image 606 while continuing the call. The mobile device 310 transitions to transmission of the image 502 when the call ends (the other party ends the call) while the image 601 is displayed. Mobile device 310 does not have to accept the call termination instruction from the driver while image 601 is displayed.
  • a specific operation example of the route guidance function will be described with reference to FIG.
  • the mobile device 310 acquires a short right press input while the image 503 is displayed, the mobile device 310 transitions to transmission of the image 702 .
  • An image 702 is an image for requesting the driver to designate a destination. Along with sending the image 702, the mobile device 310 may verbally request the driver to specify the destination.
  • the mobile device 310 acquires a short-down press input, a short-right press input, and a short left-press input while the image 702 is displayed, the mobile device 310 transitions to transmission of the image 703, transmission of the image 704, and transmission of the image 503, respectively. do.
  • An image 703 is an image containing a preset destination.
  • Mobile device 310 upon transitioning to sending image 703 , reads the pre-set destination location from memory 313 and includes it in image 703 .
  • Mobile device 310 may send image 703 and notify the driver of the retrieved destination by voice.
  • the mobile device 310 acquires an up short press input, a right short press input, and a left short press input while the image 703 is displayed, the mobile device 310 transitions to transmission of the image 702, transmission of the image 706, and transmission of the image 503, respectively. do.
  • An image 704 is an image indicating that the voice search is in a standby state.
  • Image 704 may include an image indicating the input direction to end the voice search.
  • mobile device 310 may audibly notify the driver that voice search is awaiting.
  • mobile device 310 waits for voice input via headset 320 .
  • the mobile device 310 identifies the destination based on the voice input, for example, from map information.
  • the mobile device 310 transitions to transmission of the image 705 when the destination is identified, and does not transmit a new image when the destination is not identified (that is, the vehicle 100 continues displaying the image 704). ). If the mobile device 310 fails to identify the destination, the mobile device 310 may notify the driver by voice.
  • the mobile device 310 acquires a short left press input while the image 704 is displayed, the mobile device 310 transitions to transmission of the image 702 .
  • An image 705 is an image containing the destination specified by voice search. Along with sending image 705, mobile device 310 may audibly notify the driver of the identified destination. When the mobile device 310 acquires a right short press input and a left short press input while the image 705 is displayed, the mobile device 310 transitions to transmission of the image 706 and image 702 respectively.
  • An image 706 is an image showing the execution status of the route guidance function.
  • Image 706 may include the distance and turn direction to where to turn.
  • Image 706 may include an image showing input directions for ending route guidance.
  • the mobile device 310 starts route guidance along with the transmission of the image 706, and updates the image 706 according to the guidance status. Audio for route guidance is output from mobile device 310 to the driver via headset 320 .
  • the mobile device 310 acquires a short left press input while the image 706 is displayed, the mobile device 310 transitions to transmission of the image 707 .
  • the mobile device 310 increases or decreases the volume output from the headset 320 when receiving a short up press input or a short down press input while the image 706 is displayed.
  • An image 707 is an image for confirming whether to end the route guidance.
  • Image 707 may include an image requesting confirmation and an image indicating input directions for responding to the confirmation.
  • the mobile device 310 acquires the short right press input while the image 707 is displayed, the mobile device 310 ends the route suggestion and transitions to the transmission of the image 503 .
  • the mobile device 310 acquires the right long press input while the image 707 is displayed, the mobile device 310 transitions to transmission of the image 706 while continuing the route suggestion.
  • An image 701 is the top image of the route guidance function during execution of the route guidance function.
  • an image 503 is the top image of the route guidance function when the route guidance function is not being executed.
  • the fact that the route guidance function is being executed may mean that the route is being guided to the driver.
  • Image 701 may include the distance and turn direction to where to turn.
  • the mobile device 310 receives a long left press input while the route guidance function is selected (that is, any of the images 503 and 701 to 707 is displayed), the initial cooperation Transition to sending the top image of the function.
  • the mobile device 310 transmits the image 701 as the top image of the route guidance function if route guidance was being executed at the time of the previous selection.
  • the mobile device 310 switches the route guidance function to another cooperative function when receiving a short up or short down press input while the image 701 is displayed.
  • the mobile device 310 acquires a short right press input while the image 701 is displayed, the mobile device 310 transitions to transmission of the image 706 while continuing the route guidance.
  • the mobile device 310 completes the route guidance (arrives at the destination) with the image 701 displayed, the mobile device 310 transitions to transmission of the image 503 .
  • the mobile device 310 does not have to accept an instruction to end route guidance while the image 701 is displayed.
  • a specific operation example of the music playback function will be described with reference to FIG.
  • the mobile device 310 acquires a short right press input while the image 504 is displayed, the mobile device 310 transitions to transmission of the image 802 .
  • An image 802 is an image for searching for music to be played.
  • Mobile device 310 selects one song from the playlist in memory 313 to include in image 802 along with sending image 802 .
  • Mobile device 310 may audibly notify the driver of the name of the selected song along with sending image 802 .
  • the mobile device 310 acquires a right short press input and a left short press input while the image 802 is displayed, the mobile device 310 transitions to the transmission of the image 803 and the image 504 respectively.
  • the mobile device 310 When the mobile device 310 acquires an up short press input while the image 802 is displayed, the mobile device 310 selects the previous song in the playlist and updates the image 802 accordingly. When the mobile device 310 receives a short downward press input while the image 802 is displayed, the mobile device 310 selects the next song in the playlist and updates the image 802 accordingly.
  • An image 803 is an image showing the execution status of the music playback function.
  • the image 803 may include the name of the song being played and the playback status (playback time).
  • the image 803 may include an image indicating the input direction to end playback and the input direction to skip the song that is playing.
  • the mobile device 310 transmits the image 803 and updates the image 803 according to the playback status of the song.
  • the song being played is output from mobile device 310 to the driver via headset 320 .
  • the mobile device 310 acquires a short left press input while the image 803 is displayed, the mobile device 310 ends playback and transitions to transmission of the image 802 .
  • the mobile device 310 When the mobile device 310 acquires a short right press input while the image 803 is displayed, the mobile device 310 selects the next song in the playlist and updates the image 803 accordingly.
  • the mobile device 310 increases or decreases the volume output from the headset 320 when receiving a short up-press input or a short down-press input while the image 803 is displayed.
  • the mobile device 310 acquires the left long press input while the image 806 is displayed, the mobile device 310 transitions to transmission of the top image (the image 502 in this example) of the initial cooperation function while continuing the reproduction.
  • An image 801 is the top image of the music playback function during execution of the music playback function.
  • an image 504 is a top image of the music playing function when the music playing function is not being executed. Execution of the music reproduction function may mean that music is being reproduced for the driver.
  • the image 801 may include the name of the song being played and the playback status (playback time).
  • the mobile device 310 receives a long left press input while the music playback function is selected (that is, any of the images 504 and 801-803 are displayed)
  • the mobile device 310 performs the initial association. Transition to sending the top image of the function.
  • the mobile device 310 transmits the image 801 as the top image of the music playback function if the music playback was in progress at the time of the previous selection.
  • the mobile device 310 switches the music playback function to another cooperation function when receiving a short up or short down press while the image 801 is displayed.
  • the mobile device 310 acquires a short right press input while the image 801 is displayed, the mobile device 310 transitions to transmission of the image 803 while continuing music reproduction.
  • the mobile device 310 transitions to transmission of the image 504 when music playback ends (playlist is completed) while the image 801 is displayed.
  • the mobile device 310 does not have to accept the music playback end instruction while the image 801 is displayed.
  • a specific operation example of the messaging function will be described with reference to FIG.
  • the mobile device 310 acquires a short right press input while the image 505 is displayed, the mobile device 310 transitions to transmission of the image 901 .
  • An image 901 is an image for requesting the driver to designate a destination.
  • the mobile device 310 may send the image 901 and request the driver to specify the destination by voice.
  • the mobile device 310 acquires a short-down press input, a short-right press input, and a short left-press input while the image 901 is displayed, the mobile device 310 transitions to transmission of the image 902, transmission of the image 903, and transmission of the image 505, respectively. do.
  • the image 902 is an image containing the preset destination name.
  • mobile device 310 When transitioning to sending image 902 , mobile device 310 reads the name preset as the destination from memory 313 and includes it in image 902 . Mobile device 310 may transmit image 902 and notify the driver of the read destination name by voice. When the mobile device 310 acquires an up short press input, a right short press input, and a left short press input while the image 902 is displayed, the mobile device 310 transitions to transmission of the image 901, transmission of the image 905, and transmission of the image 505, respectively. do.
  • An image 903 is an image indicating that the voice search is in a standby state.
  • Image 903 may include an image indicating the input direction to end the voice search.
  • mobile device 310 may audibly notify the driver that voice search is awaiting.
  • mobile device 310 waits for voice input via headset 320 .
  • the mobile device 310 searches the contact list in memory 313 for a destination based on the voice input.
  • the mobile device 310 transitions to transmission of the image 904 when the destination is identified, and does not transmit a new image when the destination is not identified (that is, the vehicle 100 continues displaying the image 903). ). If the mobile device 310 cannot identify the destination, the mobile device 310 may notify the driver by voice.
  • the mobile device 310 acquires a short left press input while the image 903 is displayed, the mobile device 310 transitions to transmission of the image 901 .
  • An image 904 is an image containing the name of the destination specified by voice search. Along with sending image 904, mobile device 310 may audibly notify the driver of the name of the identified destination. When the mobile device 310 acquires a right short press input and a left short press input while the image 904 is displayed, the mobile device 310 transitions to transmission of the image 905 and image 901 respectively.
  • An image 905 is an image indicating a standby state for voice input.
  • the image 905 may include an image indicating the input direction for ending voice input and the input direction for starting transmission.
  • mobile device 310 may audibly notify the driver that it is waiting for voice input.
  • mobile device 310 waits for voice input via headset 320 .
  • the mobile device 310 acquires the input voice as a message to be transmitted.
  • the mobile device 310 transitions to the transmission of the image 904, the image 907, and the image 906, respectively. do.
  • An image 906 is an image containing a pre-configured standard message.
  • Mobile device 310 upon transitioning to sending image 906 , reads a preset message template from memory 313 and includes it in image 906 .
  • Image 906 may further include an image showing the input direction to cancel transmission and the input direction to initiate transmission.
  • Mobile device 310 may send image 906 and notify the driver of the read fixed phrase by voice.
  • the mobile device 310 acquires an up short press input, a right short press input, and a left short press input while the image 906 is displayed, the mobile device 310 transitions to transmission of the image 905, transmission of the image 907, and transmission of the image 904, respectively. do.
  • An image 907 is an image showing the execution status of the messaging function.
  • Image 907 may include an image indicating that a message is being sent.
  • the mobile device 310 starts transmitting the message to the destination along with the transmission of the image 907, and transitions to transmission of the image 505 after completing the transmission.
  • the images (that is, linked images) transmitted by each linked function are classified into three layers: menu layer, target selection layer, and active layer.
  • the menu hierarchy includes the top image of the selected link function.
  • the object selection layer includes an image for selecting an execution object of the currently selected cooperation function.
  • the active layer includes an image showing the execution status of the selected linkage function.
  • each cooperation function that has a target selection hierarchy the transition from the menu hierarchy to the target selection hierarchy is performed based on a right short press input.
  • the transition from the target selection layer to the active layer is performed based on the right short press input.
  • the driver can intuitively transition between hierarchical levels. Also, switches other than direction switches such as decision switches are unnecessary.
  • transitions from the active hierarchy to the object selection hierarchy and transitions from the object selection hierarchy to the menu hierarchy are performed based on a left short press input in the opposite direction to a right short press input. Therefore, the driver can intuitively return to the hierarchy.
  • the mobile device 310 does not provide visual confirmation to the driver when transitioning from the menu hierarchy to the object selection hierarchy and transitioning from the object selection hierarchy to the active hierarchy. As a result, the amount of operations required to execute the process can be reduced.
  • Upper short-press input and lower short-press input in each layer are used for transition of processing within the same layer.
  • the left/right switch 200H is a tilt switch, and the upper switch 200U and the lower switch 200D are separate press switches. Therefore, the amount of movement of the driver's finger in the horizontal direction is smaller than that in the vertical direction. In the above-described embodiment, the amount of movement of the driver's finger can be reduced by transitioning between layers by inputting in the horizontal direction.
  • the transition to voice search is performed based on the short right press input. In this way, by enabling the transition to the voice search based on the input in the same direction as the transition to the deeper layer (right short press input), a unified operational feeling is provided.
  • the interrupt process is a process in which mobile device 310 requests vehicle 100 to start the cooperative function without depending on an instruction from the driver. For example, the mobile device 310 requests initiation of interrupt processing when receiving a call from another party or receiving a message from another party.
  • mobile device 310 When mobile device 310 receives an incoming call, mobile device 310 transmits an image (that is, an interrupt image) related to interrupt processing of the call function to vehicle 100, and vehicle 100 displays the interrupt image in area 402 of screen 400.
  • the interrupt image may include the name of the caller, the input direction for instructing to answer the incoming call, and the input direction for instructing not to answer the incoming call.
  • an image of the selected link function is displayed in area 401 .
  • the link function is not being executed at this time, an image other than the link function is displayed in the area 401 .
  • the mobile device 310 When the mobile device 310 acquires the right short press input while the interrupt image is displayed, the mobile device 310 responds to the incoming call and transitions to the transmission of the image 606 . At this point, a linked image (specifically, image 606) is displayed in area 401. FIG. At this point, vehicle 100 may remove the interrupt image from area 402 and display the image from the uncoordinated function. A similar process occurs when the mobile device 310 receives the message.
  • the method may begin when the mobile device 310 is powered up. Each step of the following operation is executed by the controller 311 of the mobile device 310 .
  • control unit 311 establishes a communication link with the vehicle 100 and the headset 320.
  • This communication link may be a short-range wireless communication such as Bluetooth, as described above.
  • Control unit 311 may establish a communication link with either vehicle 100 or headset 320 first, or may establish a communication link with both. Also, the communication link with headset 320 may be established at the time of audio output to headset 320 .
  • step S1102 the control unit 311 determines whether an instruction to start cooperation has been acquired. If this instruction is acquired (YES in S1102), the control unit 311 shifts the process to step S1103, otherwise (NO in S1102), the control unit 311 repeats step S1102. In the above example, the control unit 311 determines that an instruction to start cooperation has been obtained when a long left press input is received from the vehicle 100 .
  • step S ⁇ b>1103 the control unit 311 transmits the top image of the initial cooperation function (the image 502 in the above example) to the vehicle 100 .
  • the initial collaboration function (call function in the example above) is selected.
  • step S1104 the control unit 311 determines whether an instruction to change the currently selected cooperation function has been acquired. If this instruction is acquired (YES in S1104), the control unit 311 shifts the process to step S1105, otherwise (NO in S1104), the control unit 311 shifts the process to step S1106. In the above example, the control unit 311 determines that an instruction to change the cooperation function has been obtained when a short up-press input or a short down-press input is received from the vehicle 100 .
  • step S ⁇ b>1105 the control unit 311 changes the currently selected linked function and transmits the top image of the changed linked function to the vehicle 100 .
  • the control unit 311 may provide the user with a message that describes the linked function after the change by voice.
  • step S1106 the control unit 311 determines whether or not an instruction related to the currently selected cooperation function has been acquired. If this instruction is acquired (YES in S1106), the control unit 311 shifts the process to step S1107, otherwise (NO in S1106), the control unit 311 shifts the process to step S1108.
  • step S1107 the control unit 311 processes the currently selected cooperation function according to the acquired instruction. Since the processing of the cooperation function has been described in detail with reference to FIGS. 6 to 9, it will not be repeated here.
  • the control unit 311 may provide a voice message to the user in the processing of the cooperation function.
  • step S1108 the control unit 311 determines whether or not an instruction to end cooperation has been acquired. If this instruction is acquired (YES in S1108), the control unit 311 shifts the process to step S1102, otherwise (NO in S1108), the control unit 311 shifts the process to step S1104. In the above example, the control unit 311 determines that an instruction to end cooperation has been obtained when a right long press input is received from the vehicle 100 .
  • the mobile device 310 may have a function (that is, a skill level management function) of managing the user's skill level regarding the operation of the mobile device 310 . For example, if the mobile device 310 determines that the user is not accustomed to operating the mobile device 310, it sets the skill level of the user to a low level. Also, set the user proficiency to a high level. Mobile device 310 may provide messages to the user in a proficiency-based manner.
  • a skill level management function that is, a skill level management function of managing the user's skill level regarding the operation of the mobile device 310 . For example, if the mobile device 310 determines that the user is not accustomed to operating the mobile device 310, it sets the skill level of the user to a low level. Also, set the user proficiency to a high level. Mobile device 310 may provide messages to the user in a proficiency-based manner.
  • the mobile device 310 manages the user's proficiency in four levels from “0" to "3". The higher the proficiency value, the higher the proficiency (that is, the more accustomed to the operation). In the example of FIG. 12, the mobile device 310 provides different modes of providing messages for three items: "message content,” “message playback volume,” and “message playback speed.”
  • the mobile device 310 provides a detailed message (eg, "Mr. Taro Honda is calling. Would you like to answer?"). If the skill level is higher than this (eg, "2"), mobile device 310 provides a message with simplified content (eg, "Incoming call from Mr. Taro Honda.”). If the skill level is higher (eg, "3"), the mobile device 310 provides a message (eg, "Mr. Taro Honda") that omits the fixed form. Since a user with a high level of skill can understand the specific contents only with a simple message, the user's operational feeling is improved by varying the contents of the message in this way.
  • the mobile device 310 will provide the message at a high volume. If the mobile device 310 has a higher proficiency level (eg, '1' to '3'), the mobile device 310 will provide the message at a slightly louder volume. Since a user with a high skill level can grasp the contents of a message even at a low volume, the user's operational feeling is improved by varying the playback volume of the message in this way.
  • a low proficiency level eg, "0”
  • a higher proficiency level eg, '1' to '3'
  • the mobile device 310 will provide the message at a slightly louder volume. Since a user with a high skill level can grasp the contents of a message even at a low volume, the user's operational feeling is improved by varying the playback volume of the message in this way.
  • the mobile device 310 If the mobile device 310 has a low proficiency (eg, "0"), it will serve messages at a slow rate. The mobile device 310 speeds up message playback as it gains proficiency. Since a highly skilled user can grasp the contents of a message even at a high speed, by varying the playback speed of messages in this way, the user's operational feeling is improved.
  • a low proficiency eg, "0”
  • the mobile device 310 speeds up message playback as it gains proficiency. Since a highly skilled user can grasp the contents of a message even at a high speed, by varying the playback speed of messages in this way, the user's operational feeling is improved.
  • the mobile device 310 changes the proficiency level based on the number of operations in a series of operations performed by the user to transition the mobile device 310 from the start state to the end state.
  • a starting state is the state of the mobile device 310 when a series of operations is started.
  • An end state is a state of the mobile device 310 that transitions due to the end of a series of operations.
  • the user's operation on the mobile device 310 may be an operation performed on the input unit 315 of the mobile device 310, or may be an operation performed through the direction input unit 305 of the vehicle 100. The operation may be performed through the microphone 321 of the headset 320 .
  • the starting point of one operation is transition from a state in which the user is not performing any operation on the mobile device 310 to a state in which the user is performing some operation (for example, pressing a button) on the mobile device 310. It can be a point in time.
  • the end point of one operation is transition from a state in which the user is performing some operation (for example, pressing a button) on the mobile device 310 to a state in which the user is not performing any operation on the mobile device 310. It can be a point in time. Therefore, in the series of operations, a state in which the user is performing some operation (for example, pressing a button) on the mobile device 310 and a state in which the user is not performing any operation on the mobile device 310 alternately. occurs in
  • a user performs a series of operations on the mobile device 310 for some purpose (for example, to make a call).
  • a series of operations after a predetermined period of time (for example, one minute or more) has passed since the previous operation of the mobile device 310 by the user is initiated by the user for a new purpose different from the purpose of the previous operation. considered to be an operation. Therefore, the series of operations may start from the first operation after a predetermined period of time (for example, one minute or more) has passed since the previous operation of the mobile device 310 by the user.
  • the user may perform a series of operations for another purpose (e.g., to initiate route guidance).
  • a series of operations may be performed on the mobile device 310; Therefore, the series of operations may start from the first operation after the mobile device 310 performs specific processing (for example, making a call, starting route guidance, starting music playback, etc.) by user's operation.
  • specific processing for example, making a call, starting route guidance, starting music playback, etc.
  • a series of operations may end with the last operation performed by the mobile device 310 to execute a specific process (for example, making a call, starting route guidance, starting music playback, etc.) by user's operation. Also, the user may terminate a series of operations without performing specific processing. For example, there is a case where a series of operations is started with the intention of executing a specific process, but the series of operations ends without reaching the specific process. Therefore, the end point of the series of operations may be the last operation in which no subsequent operation is performed for a predetermined period of time (for example, one minute or longer).
  • the current state of the mobile device 310 is the state in which the music playback function menu is selected (the image 504 is displayed). Then, from this state, the user performs a series of operations on the mobile device 310 in order to execute the calling function.
  • the start state of the series of operations is the state in which the music playback function menu is selected (the image 504 is displayed)
  • the end state of the series of operations is the state in which a call is being made (the image 606 is displayed). displayed state).
  • a user who is sufficiently familiar with the operation of the mobile device 310 can transition the mobile device 310 from the start state to the end state without detouring as indicated by the path 1301 .
  • the user transitions the mobile device 310 to a state in which the call function menu is selected (a state in which the image 502 is displayed) by performing a short up-press input twice.
  • the user makes a short right press twice to cause the mobile device 310 to transition to a state of waiting for voice input for voice search (a state in which the image 604 is displayed).
  • the user makes a voice input to cause the mobile device 310 to transition to a state in which voice search results are displayed (a state in which the image 605 is displayed).
  • the user transitions the mobile device 310 to the outgoing call state by performing a short right press input once.
  • the user transitions the mobile device 310 from the start state to the end state by five press input operations and one voice input operation. This number of operations is the minimum number of operations for transitioning the mobile device 310 from the start state to the end state.
  • a user who is not sufficiently familiar with operating the mobile device 310 transitions the mobile device 310 from the start state to the end state, as indicated by path 1302, for example. Specifically, the user transitions the mobile device 310 to a state in which music search is possible (a state in which the image 802 is displayed) by performing a right short press input once. The user who notices the operation error returns the mobile device 310 to the state in which the menu of the music playback function is selected (the state in which the image 504 is displayed) by performing a short left press input once. The user then transitions the mobile device 310 to the calling state in a manner similar to path 1301 . In this example, the user transitions the mobile device 310 from the start state to the end state by seven press input operations and one voice input operation.
  • a user who is almost unfamiliar with operating the mobile device 310 transitions the mobile device 310 from the start state to the end state, as indicated by path 1303, for example. Specifically, the user transitions the mobile device 310 to a state in which the menu of the messaging function is selected (a state in which the image 505 is displayed) by performing a short downward press input once. The user then transitions between states within the messaging function. The user who notices the operation error returns the mobile device 310 to the state in which the menu of the messaging function is selected (the state in which the image 505 is displayed), and then performs a short-up input to transition to another menu. do.
  • the user does not stop at the call function menu, and shifts the mobile device 310 to the state in which the weather information provision function menu is selected (the image 501 is displayed). After that, the user transitions the mobile device 310 to the state in which the call function menu is selected (the state in which the image 502 is displayed), and transitions the mobile device 310 to the calling state in the same manner as the route 1301 . In this example, the user transitions the mobile device 310 from the start state to the end state with 13 press input operations and one voice input operation.
  • the mobile device 310 increases the skill level if the number of operations in such a series of operations is small, and decreases the skill level if the number of operations in such a series of operations is large.
  • the method may begin upon activation of mobile device 310 .
  • Each step of the following operation is executed by the controller 311 of the mobile device 310 .
  • the initial value of the skill level of the user may be the lowest level (“0” in the example of FIG. 12).
  • the user's proficiency level is stored in a storage device (eg, memory 313) of mobile device 310 and is updated by the following operations.
  • the user's proficiency level may be updateable to a user-specified value.
  • step S1401 the control unit 311 determines whether a series of operations has started. If a series of operations has started (“YES” in step S1401), the control unit 311 causes the process to proceed to step S1402, otherwise ("NO” in step S1401), repeats step S1401.
  • the control unit 311 causes the mobile device 310 to perform a specific process ( For example, it may be determined that a series of operations has started when an operation is performed after executing a call, route guidance start, music playback, etc.).
  • the control unit 311 starts counting the number of times the mobile device 310 is operated by the user.
  • the operations to be counted may be all operations on the mobile device 310 (for example, pressing input operations, voice input operations, etc.).
  • the operations to be counted may be partial operations on the mobile device 310 .
  • the operation to be counted may be an operation by a specific input method (for example, press input) or an operation by a specific input device (for example, direction input unit 305 of vehicle 100).
  • step S1403 the control unit 311 determines whether the series of operations has ended. If the series of operations has ended ("YES” in step S1403), the control unit 311 shifts the process to step S1404, otherwise ("NO” in step S1403), repeats step S1403.
  • the control unit 311 determines whether a new operation has not been performed for a predetermined time or longer (for example, 1 minute or longer) since the last operation of the mobile device 310 by the user, or when the mobile device 310 is in a specific state due to the last operation of the user. It may be determined that the series of operations has ended when processing (for example, making a call, starting route guidance, starting music playback, etc.) is executed.
  • the control unit 311 finishes counting the number of operations started at step S1402.
  • the control unit 311 stores this number of operations in a storage unit (for example, the memory 313) for subsequent processing.
  • a storage unit for example, the memory 313.
  • the number of operations is 6 (5 press input operations and 1 voice input operation).
  • the number of operations is 8 (7 press input operations and 1 voice input operation). and one voice input operation).
  • the operations to be counted in this example are all operations on the mobile device 310 .
  • the operations to be counted are only press input operations on the direction input unit 305
  • the number of operations on the paths 1301 to 1303 is 5, 7, and 13, respectively. A case will be described below where the operations to be counted are all operations on the mobile device 310 .
  • step S1405 the control unit 311 determines whether or not the user has passed through an unnecessary cooperation function through a series of operations.
  • the control unit 311 shifts the process to step S1412 if the series of operations has passed through an unnecessary link function ("YES” in step S1405), otherwise ("NO” in step S1405).
  • the process transitions to S1406.
  • An unnecessary link function is a function that does not need to be passed through in order to transition the mobile device 310 from the start state to the end state among the plurality of link functions. For example, in the example of FIG. 13, route 1303 goes through the messaging function and the weather information providing function. As indicated by a route 1301, the messaging function and the weather information providing function are unnecessary cooperative functions because the transition to the originating state can be made without going through these cooperative functions.
  • step S1406 the control unit 311 sets a reference range for determining whether to change the skill level based on the minimum number of operations required to transition the mobile device 310 from the start state to the end state. As will be described later, this reference range is compared with the number of operations in a series of user operations. In the example of FIG. 13, the minimum number of operations is six (five press input operations and one voice input operation). The minimum number of operations required to transition the mobile device 310 from the start state to the end state may be calculated by searching a state transition diagram representing the states of the mobile device 310 from the start state to the end state using a breadth-first search. .
  • the reference range is set to be the standard number of operations for each proficiency level. In other words, a user who transitions the mobile device 310 from the start state to the end state by operating the mobile device 310 less than the reference range is considered to be familiar with the operation, and the user moves the mobile device 310 from the start state to the end state by operating the mobile device 310 more times than the reference range. A user who has transitioned to is considered to be unfamiliar with the operation.
  • the control unit 311 may set the upper limit value and the lower limit value of the reference range based on the minimum number of operations required to transition the mobile device 310 from the start state to the end state.
  • control unit 311 may set the upper and lower limits of the reference range by applying the minimum number of operations to another function. At least one of the upper limit value and the lower limit value of the reference range may not be based on the minimum number of operations, and may be a value calculated according to another reference or a fixed value.
  • the upper limit of the reference range is twice the minimum number of operations
  • the lower limit of the reference range is 1.3 times the minimum number of operations.
  • the minimum number of operations is six. Therefore, the reference range is 7.8 times or more and 12 times or less. Since the number of operations in the series of operations on path 1301 is 6, this number of operations is below the reference range. Since the number of operations in the series of operations on path 1302 is 8, this number of operations is included in the reference range. Since the number of operations in the series of operations on path 1303 is 14, this number of operations exceeds the reference range.
  • the control unit 311 may set the reference range based on the user's current skill level. For example, each of the upper limit and lower limit of the reference range may be set to a lower value as the user's current skill level increases. As a result, a user with a low skill level increases his skill level when he gets used to operating the mobile device 310 a little, and a user with a medium skill level increases his skill level when he gets more used to operating the mobile device 310 . degree increases.
  • step S1407 the control unit 311 determines whether or not the number of operations in the series of operations exceeds the upper limit of the reference range. If the number of operations in the series of operations exceeds the upper limit of the reference range ("YES" in step S1407), the control unit 311 shifts the process to step S1412; otherwise ("NO” in step S1407). , the process transitions to step S1408.
  • step S1408 the control unit 311 determines whether or not the number of operations in the series of operations is below the lower limit of the reference range.
  • the control unit 311 shifts the process to step S1409 if the number of operations in the series of operations is below the lower limit of the reference range ("YES” in step S1408), otherwise ("NO” in step S1408). , the process transitions to step S1401.
  • a determination of "NO” is made in step S1408 when the user has not passed through unnecessary link functions due to a series of operations and the number of operations is within the reference range. In such a case, the control unit 311 determines that the current skill level is appropriate, and waits for the next series of operations without performing processing for changing the skill level.
  • step S1409 the control unit 311 increments the skill level change count value by one.
  • the initial value of this count value is, for example, 0, and is increased or decreased in step S1409 and step S1412 described later.
  • the control unit 311 resets the count value for changing the skill level to the initial value.
  • Step S ⁇ b>1409 is executed when the user does not go through an unnecessary link function by a series of operations and the number of operations falls below the lower limit of the reference range. In such a case, the control unit 311 determines that the user is accustomed to the operation with respect to the current skill level, and performs processing for increasing the skill level.
  • step S1410 the control unit 311 determines whether or not the count value for changing the skill level has reached the increase threshold. Control unit 311 shifts the process to step S1411 if the count value for changing skill level has reached the rising threshold ("YES" in step S1410), otherwise ("NO” in step S1410). to step S1401.
  • step S1411 the control unit 311 increases the skill level of the user. For example, the control unit 311 raises the user's proficiency level by one level. If the user's proficiency level is already at the highest level, the control unit 311 does not change the proficiency level.
  • the increase threshold used in step S1410 is a value for increasing the skill level, and may be "5", for example.
  • the increase threshold may be a different value for each skill level.
  • the increase threshold for increasing the skill level from “0" to “1” may be 10, and the increase threshold for increasing the skill level from "1" to “2" may be 5.
  • step S1412 the control unit 311 decrements the skill level change count value by one.
  • Step S1412 is executed when a series of operations by the user goes through an unnecessary link function, or when the number of operations exceeds the upper limit of the reference range. In such a case, the control unit 311 determines that the user is not accustomed to the operation with respect to the current skill level, and performs processing for decreasing the skill level.
  • control unit 311 determines whether or not the count value for changing the skill level has reached the decrease threshold. Control unit 311 shifts the process to step S1414 if the count value for changing skill level has reached the decrease threshold ("YES" in step S1413), otherwise ("NO” in step S1413). to step S1401. In step S1414, control unit 311 decreases the skill level of the user. For example, the control unit 311 decreases the user's proficiency level by one level. If the user's proficiency level is already at the lowest level, the control unit 311 does not change the proficiency level.
  • the decrease threshold used in step S1413 is a value for decreasing the skill level, and may be "-5", for example.
  • the decrease threshold may be a different value for each skill level.
  • the decrease threshold for decreasing the proficiency level from "3" to "2" may be -5
  • the decrease threshold for decreasing the proficiency level from "2" to "1" may be -10. .
  • the skill level is changed based on the number of operations performed by the user in a series of operations for transitioning the mobile device 310 from the start state to the end state, the skill level is adjusted appropriately according to the user's operation level. can be set to
  • both the skill level increase (step S1411) and the skill level decrease (step S1414) are performed.
  • the control unit 311 may perform only one of increasing the proficiency level and decreasing the proficiency level in the above-described method.
  • the control unit 311 may only decrease the skill level based on the number of operations in a series of operations as described above, and may increase the skill level based on other criteria. You don't have to.
  • one count value for changing the skill level is increased or decreased (steps S1409 and S1412).
  • the control unit 311 may separately manage the skill increase count value to be increased in step S1409 and the skill decrease count value to be decreased in step S1412.
  • the control unit 31 when at least one of the fact that the user has passed through an unnecessary link function by a series of operations and the fact that the number of operations exceeds the upper limit value of the reference range, determines whether to change the skill level. is decremented by one. Instead of this, the control unit 311, when both the fact that the user has passed through an unnecessary link function by a series of operations and the fact that the number of operations exceeds the upper limit value of the reference range, the control unit 311 The count value may be decremented by one.
  • the count value for skill level change is decremented by 1 based on the fact that the user has gone through an unnecessary linking function through a series of operations.
  • the control unit 311 may omit S1405 and change the proficiency level regardless of whether or not the user has passed through unnecessary cooperation functions in a series of operations.
  • the control unit 311 may be able to determine whether the user is driving the vehicle 100 or not. For example, the control unit 311 may query the vehicle 100 whether the user is driving the vehicle 100 and make this determination based on the response. The control unit 311 may determine that the user is not driving the vehicle 100 when the speed of the vehicle 100 is equal to or less than a threshold value (for example, 1 km/h or less or 0 km/h or less). The control unit 311 may acquire the speed of the vehicle 100 from the vehicle 100 or may regard the moving speed of the mobile device 310 as the speed of the vehicle 100 .
  • a threshold value for example, 1 km/h or less or 0 km/h or less.
  • the control unit 311 manages the skill level separately when the user is driving the vehicle 100 and when the user is not driving the vehicle 100 (for example, when the vehicle 100 is stopped). may Even if the user becomes accustomed to operating the mobile device 310 when not driving the vehicle 100, the user may not be able to operate the mobile device 310 with the same level of proficiency while driving. Therefore, by managing the skill level separately for the case of driving and the case of not driving, the user's operational feeling is improved.
  • the mobile device 310 stores, in its own storage device (for example, the memory 313), the skill level for operations while driving and the skill level for operations other than while driving.
  • the control unit 301 changes the skill level for the operation while driving in step S1411 or S1414.
  • the control unit 301 provides the message in a mode according to the skill level of the operation during driving.
  • the control unit 301 changes the skill level for operations other than driving in step S1411 or S1414.
  • control unit 301 when providing a message to a user other than driving, the control unit 301 provides the message in a mode according to the level of skill with respect to operations other than driving.
  • the counting started in step S1402 is also managed separately depending on whether the vehicle is in operation or not.
  • the skill level management function has been described in the context of the cooperation function between the vehicle 100 and the mobile device 310. Instead, the skill level management function of the present invention may be applied to the function of cooperation between the vehicle 100 and other devices, the function of the vehicle 100 alone, or a combination thereof. may be
  • the voice guidance device according to item 1, wherein the skill management means reduces the skill when the number of operations in the series of operations exceeds an upper limit value of a reference range. According to this item, it is possible to appropriately decrease the user's proficiency in operating the voice guidance device based on the number of operations.
  • the voice guidance device according to item 2, wherein the upper limit value of the reference range is based on a minimum number of operations required to transition the voice guidance device from the first state to the second state. According to this item, an appropriate upper limit value of the reference range can be set based on the state before and after the transition.
  • the voice guidance device wherein the upper limit value of the reference range is twice the minimum number of times of operation required to transition the voice guidance device from the first state to the second state. According to this item, an appropriate upper limit value of the reference range can be set based on the state before and after the transition. ⁇ Item 5> 5.
  • the voice guidance device according to any one of items 1 to 4, wherein the skill management means increases the skill when the number of operations in the series of operations falls below a lower limit value of a reference range. . 2.
  • the voice guidance device wherein the skill management means reduces the skill when the number of operations in the series of operations exceeds an upper limit value of a reference range.
  • the voice guidance device according to item 5 wherein the lower limit value of the reference range is based on the minimum number of operations required to transition the voice guidance device from the first state to the second state. According to this item, an appropriate lower limit value of the reference range can be set based on the state before and after the transition.
  • ⁇ Item 8> the providing means provides the user with messages regarding a plurality of functions;
  • the proficiency level management means determines that the user has passed through, by the series of operations, a function that does not need to be passed through in order to transition the voice guidance device from the first state to the second state among the plurality of functions.
  • the voice guidance device according to any one of items 1 to 7, wherein the proficiency level is decreased based on. According to this item, the skill level of the user can be set by a simple method.
  • ⁇ Item 9> 9. Any one of items 1 to 8, wherein the series of operations starts from the first operation after a predetermined time or more has passed since the previous operation, or the first operation after executing a specific process. Voice guidance device as described.
  • the start of a series of operations can be determined at appropriate timing.
  • ⁇ Item 10> 10.
  • ⁇ Item 11> further comprising driving determination means (311) for determining whether the user is driving the vehicle (100); 11.
  • ⁇ Item 13> A voice guidance method, A skill level management step (S1401 to S1414) for managing the skill level of the user's operation of the voice guidance device; a provision step (S1105, S1107) of providing a message to the user in a manner according to the skill level;
  • the voice guidance method wherein in the skill level management step, the skill level is changed based on the number of operations in a series of operations performed by the user in order to transition the voice guidance device from the first state to the second state. According to this item, it is possible to appropriately set the user's skill level regarding the operation of the voice guidance device based on the number of operations.
  • ⁇ Item 14> A program for causing a computer to function as each means of the voice guidance device according to any one of items 1 to 12. According to this item, a program for realizing the above-described voice guidance device is provided.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Navigation (AREA)

Abstract

音声案内装置は、ユーザによる音声案内装置の操作に関する熟練度を管理する熟練度管理部と、熟練度に応じた態様でユーザにメッセージを提供する提供部と、を備える。熟練度管理部は、音声案内装置を第1状態から第2状態に遷移するためにユーザが行った一連の操作における操作回数に基づいて熟練度を変更する。

Description

音声案内装置、音声案内方法及びプログラム
 本発明は、音声案内装置、音声案内方法及びプログラムに関する。
 ユーザに音声情報を提供する様々な装置が提案されている。特許文献1に記載された操作案内装置は、音声による操作案内を出力中にユーザがキャンセルスイッチを押した回数に基づいてユーザの熟練度を設定する。
特開2003-114794号公報
 特許文献1の操作案内装置では、出力中の操作案内の内容をユーザが把握している場合にユーザの熟練度が上昇する。しかし、操作案内の内容を把握しているからといって、ユーザが装置の操作に慣れているとは限らない。本発明の1つの側面は、ユーザによる音声案内装置の操作に関する熟練度を適切に設定するための技術を提供する。
 上記課題に鑑みて、音声案内装置であって、ユーザによる前記音声案内装置の操作に関する熟練度を管理する熟練度管理手段と、前記熟練度に応じた態様で前記ユーザにメッセージを提供する提供部と、を備え、前記熟練度管理手段は、前記音声案内装置を第1状態から第2状態に遷移するために前記ユーザが行った一連の操作における操作回数に基づいて前記熟練度を変更する、音声案内装置が提供される。
 上記手段により、ユーザによる音声案内装置の操作に関する熟練度を適切に設定できる。
 本発明のその他の特徴及び利点は、添付図面を参照とした以下の説明により明らかになるであろう。なお、添付図面においては、同じ若しくは同様の構成には、同じ参照番号を付す。
 添付図面は明細書に含まれ、その一部を構成し、本発明の実施の形態を示し、その記述と共に本発明の原理を説明するために用いられる。
一部の実施形態の車両の前側の外観を説明する図である。 一部の実施形態の車両の左側スイッチ群の外観を説明する図である。 一部の実施形態の連携システムの機能ブロック図である。 一部の実施形態の車両における表示を説明する図である。 一部の実施形態の連携機能のメニュー表示画面を説明する図である。 一部の実施形態の通信機能の表示画面を説明する図である。 一部の実施形態の経路案内機能の表示画面を説明する図である。 一部の実施形態の音楽再生機能の表示画面を説明する図である。 一部の実施形態のメッセージング機能の表示画面を説明する図である。 一部の実施形態の車両における表示を説明する図である。 一部の実施形態のモバイル装置の動作を説明する図である。 一部の実施形態の熟練度ごとの動作を説明する図である。 一部の実施形態の熟練度の変更条件を説明する図である。 一部の実施形態の熟練度の変更方法を説明する図である。
 以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態で説明されている特徴の組み合わせの全てが発明に必須のものとは限らない。実施形態で説明されている複数の特徴のうち二つ以上の特徴は任意に組み合わされてもよい。また、同一若しくは同様の構成には同一の参照番号を付し、重複した説明は省略する。
 図1を参照して、一部の実施形態に係る車両100の外観について説明する。車両100は、鞍乗型の自動二輪車である。これにかえて、本発明は、他の二輪車や他の車両、例えば四輪車や三輪車にも適用可能である。図1は、車両100の前方の背面図である。
 車両100は、車幅方向中央に表示装置101を有する。表示装置101は、車両100の運転者(以下、単に運転者と表す)へ向けた情報を表示する。表示装置101は、液晶ディスプレイや有機EL(electro-luminescence)ディスプレイのようなドットマトリクス型の表示装置であってもよいし、事前に規定されたマークの消灯又は点灯(若しくは点滅)によって通知を行うインジケータの集合であってもよい。
 車両100は、左側のハンドルグリップの車幅方向内側に、左側ハンドルスイッチ102を有する。図2を参照して、左側ハンドルスイッチ102の外観について説明する。左側ハンドルスイッチ102は、複数のスイッチを含む。これらの複数のスイッチのうちの少なくとも一部は、運転者が左側のハンドルを左手で把持した状態で、左手親指により操作可能である。以下では、車両100とモバイル装置との連携機能(後述)に使用されるスイッチについて説明する。左側ハンドルスイッチ102のうちのその他のスイッチ(すなわち、連携機能以外の車両100の機能に使用されるスイッチ)については従来と同様の構成を有してもよいため、その説明を省略する。
 左側ハンドルスイッチ102は、上スイッチ200Uと、下スイッチ200Dと、左右スイッチ200Hとを含む。左右スイッチ200Hは、左側ハンドルスイッチ102の略中央に配置されている。左右スイッチ200Hは、左右方向のそれぞれに傾斜可能な傾動式のスイッチである。運転者は、左右スイッチ200Hを左側に傾けることによって左方向指示を入力可能であり、左右スイッチ200Hを右側に傾けることによって右方向指示を入力可能である。上スイッチ200Uは、左右スイッチ200Hの上側に配置されている。上スイッチ200Uは、押圧式のスイッチである。運転者は、上スイッチ200Uを押し込むことによって、上方向指示を入力可能である。下スイッチ200Dは、左右スイッチ200Hの下側に配置されている。下スイッチ200Dは、押圧式のスイッチである。運転者は、下スイッチ200Dを押し込むことによって、下方向指示を入力可能である。上スイッチ200Uと、下スイッチ200Dと、左右スイッチ200Hを総称して方向スイッチ200と呼ぶ。方向スイッチ200は、図2の構成に限られず、4方向の指示を入力可能な任意の構成を有しうる。
 図3を参照して、本発明の一部の実施形態にかかる連携機能を提供する連携システムの機能構成について説明する。この連携システムは、上述の車両100と、モバイル装置310と、ヘッドセット320とを有する。
 車両100は、制御部301と、表示部304と、方向入力部305と、通信部306とを有する。制御部301は、車両100全体の制御を行う。制御部301は、例えばプロセッサ302及びメモリ303によって構成される。この場合に、制御部301による動作は、メモリ303に格納されたプログラムをプロセッサ302が実行することによって実現される。制御部301の動作の一部又は全部は、ASIC(特定用途向け集積回路)やFPGA(フィールドプログラマブルゲートウェイ)のような専用回路によって実現されてもよい。
 表示部304は、運転者へ向けた情報を表示する。表示部304は、例えば表示装置101によって実現される。方向入力部305は、運転者からの4方向の指示を取得する。方向入力部305は、例えば上スイッチ200U、下スイッチ200D及び左右スイッチ200Hによって実現される。通信部306は、車両100が外部と通信するための機能を提供する。通信部306は、Bluetooth(登録商標)のような短距離無線通信をサポートしてもよい。さらに、通信部306は、セルラー通信や路車間通信などをサポートしてもよい。
 方向入力部305は、方向スイッチ200を使用して、各方向について2段階の入力を受け付けてもよい。例えば、方向入力部305は、短押し入力(例えば、継続時間が1秒未満の入力)と長押し入力(例えば、継続時間が1秒以上の入力)とを受け付けてもよい。これにかえて、方向入力部305は、シングルタップ入力(例えば、後続の入力まで1秒以上の間隔がある入力)とダブルタップ入力(例えば、1秒未満の間隔の連続した2回の入力)とを受け付けてもよい。
 モバイル装置310は、制御部311と、表示部314と、入力部315と、通信部316とを有する。モバイル装置310は、例えばスマートフォンのようなモバイル電話装置であってもよい。モバイル装置310のユーザは、運転者と同一であってもよい。以下では、運転者がモバイル装置310を使用する場合について説明する。モバイル装置310は、運転者によって保持されてもよいし、車両100に収容されてもよい。制御部311は、モバイル装置310全体の制御を行う。制御部311は、例えばプロセッサ312及びメモリ313によって構成される。この場合に、制御部311による動作は、メモリ313に格納されたプログラムをプロセッサ312が実行することによって実現される。プログラムは、オペレーティングシステム及びアプリケーションを含んでもよい。制御部311の動作の一部又は全部は、ASICやFPGAのような専用回路によって実現されてもよい。
 表示部314は、運転者へ向けた情報を表示する。表示部314は、例えば液晶ディスプレイや有機ELディスプレイのような表示装置によって実現される。入力部315は、運転者からの入力を取得する。入力部315は、例えばタッチパネルやボタンのような入力装置によって実現される。通信部316は、モバイル装置310が外部と通信するための機能を提供する。通信部316は、Bluetoothのような短距離無線通信をサポートしてもよい。さらに、通信部306は、セルラー通信やWiFi(登録商標)通信などをサポートしてもよい。
 ヘッドセット320は、マイク321と、スピーカ322と、通信部323とを有する。ヘッドセット320は、運転者の頭部に装着される。マイク321は、運転者からの音声入力を取得する。スピーカ322は、運転者へ向けた音声出力を行う。通信部323は、Bluetoothのような短距離無線通信をサポートしてもよい。
 本発明の一部の実施形態において、車両100とモバイル装置310とは互いに連携する。具体的に、車両100とモバイル装置310との間に、例えば短距離無線通信による通信リンクが確立される。車両100とモバイル装置310とは、この通信リンクを介してデータを交換する。また、モバイル装置310とヘッドセット320との間に、例えば短距離無線通信による通信リンクが確立される。モバイル装置310とヘッドセット320とは、この通信リンクを介してデータを交換する。
 モバイル装置310が提供する複数の機能の少なくとも一部は、車両100と連携可能である。以下、モバイル装置310が提供する機能のうち、車両100と連携可能である機能を連携機能と呼ぶ。運転者は、車両100の方向入力部305を通じて、モバイル装置310への方向入力を行う。この方向入力は、車両100からモバイル装置310へ送信される。モバイル装置310は、運転者からの方向入力に応じて連携機能の動作を行うとともに、動作状況を示す画像を生成する。モバイル装置310は、生成した画像を車両100へ送信する。車両100は、受信した画像を表示部304に表示する。
 また、モバイル装置310は、運転者への音声出力をヘッドセット320へ送信する。ヘッドセット320は、受信した音声出力をスピーカ322から出力する。運転者への音声出力は、音声による案内を含みうる。このように、モバイル装置310は音声案内機能を有するため、モバイル装置310は音声案内装置とも呼ばれうる。ヘッドセット320は、マイク321で取得した運転者からの音声入力をモバイル装置310へ送信する。モバイル装置310は、運転者からの音声入力に応じた連携機能の動作を行う。
 表示装置101がドットマトリックス型である場合の実施形態について説明する。図4は、車両100とモバイル装置310との連携動作における表示部304の表示例について説明する。画面400は、表示装置101に表示される画面の一例である。画面400の中央に走行速度が表示され、その下に燃料残量が表示される。画面400の左側に速度回転計が表示される。
 画面400の右側にある領域401は、車両100がモバイル装置310と連携中にモバイル装置310から供給される画像を表示するための領域である。以下、このような画像を連携画像と呼ぶ。モバイル装置310から連携画像が供給されていない間(すなわち、車両100がモバイル装置310と連携していない間)、車両100は領域401にその他の画像、例えば連携機能に関連しない画像を表示してもよい。例えば、車両100は領域401にライディング・モード・パラメータ(例えば、ABS(アンチロック・ブレーキ・システム)の作動状況のような車両100に設定される情報)やレベル調整等のオプション画像を表示してもよい。領域401には、連携機能に関連しない画像(例えば、車両100の走行に関する画像)のうち、重要度の低い画像が表示されていてもよい。領域401を連携機能に関連せず重要度の低い画像と連携画像とによって共用することによって、画面400のスペースを有効活用できる。
 画面400の下側にある領域402は、車両100がモバイル装置310と連携中でない状態でモバイル装置310から供給される画像を表示するための領域である。以下、このような画像を割り込み画像と呼ぶ。モバイル装置310から割り込み画像が供給されていない間、車両100は領域402にその他の画像、例えば連携機能に関連しない画像を表示してもよい。
 図5~図9を参照して、連携機能の具体的な動作例について説明する。モバイル装置310は、複数の連携機能を提供する。複数の連携機能は、天候情報提供機能と、通話機能と、メッセージング機能と、音楽再生機能と、経路案内機能とのうちの2つ以上を含んでもよい。以下では、モバイル装置310がこの5つの連携機能のすべてを提供する場合について説明する。天候情報提供機能とは、特定の場所の天候の情報を提供する機能のことである。天候とは、天気と気温との少なくとも一方を含んでもよい。通話機能とは、他者との通話を行う機能のことである。メッセージング機能とは、他者とテキスト・メッセージを交換する機能のことである。音楽再生機能とは、音楽を再生する機能のことである。経路案内機能とは、指定された目的地への経路を案内する機能のことである。
 モバイル装置310は、車両100から、4方向(上下左右)のそれぞれについて2種類の入力を受信する。以下の例では、2種類の入力が短押し及び長押しである場合を扱う。図5~図9において、黒塗りの三角形で短押しを示し、「^」が付された黒塗りの三角形で長押しを示す。図5~図9において、画像500以外のすべての画像は連携画像、すなわち連携機能を実行中にモバイル装置310が車両100に送信し、車両100の表示装置101に表示される画像である。そこで、以下の図5~図9の説明において、連携画像の送信までを記載し、その後の連携画像の表示についての記載を省略する。
 車両100とモバイル装置310とが連携していない間(すなわち、モバイル装置310がいずれの連携機能も実行していない間)、画面400の領域401に、連携機能以外の画像500が表示されている。モバイル装置310は、車両100と連携していない状態で、車両100の方向入力部305を介して運転者から左長押し入力を取得した場合に、車両100との連携を開始する。方向入力は、以下の説明でも同様に、車両100の方向入力部305を介して運転者から取得されるため、以下では単に入力方向(上下左右)及び入力態様(短押し/長押し)のみを示す。
 複数の連携機能はそれぞれ、トップ画像を有する。トップ画像とは、1つの連携機能を選択直後に当該連携機能についてモバイル装置310が車両100に送信する画像のことである。画像501は、天候情報提供機能のトップ画像である。画像501には、車両100の現在地の天候を示す画像及び現在地の気温が表示される。車両100に目的地が設定されている場合に、画像501に目的地の天候を示す画像及び目的地の気温が表示されてもよい。画像502は、通話機能のトップ画像である。画像502は、通話機能を示す画像を含む。画像503は、経路案内機能のトップ画像である。画像503は、経路案内機能を示す画像を含む。画像504は、音楽再生機能のトップ画像である。画像504は、音楽再生機能を示す画像を含む。画像505は、メッセージング機能のトップ画像である。画像505は、メッセージング機能を示す画像を含む。
 連携が開始されると、モバイル装置310は、複数の連携機能の何れか1つを選択し、選択した連携機能のトップ画像を送信する。ここで選択される連携機能は、初期の機能として事前に設定された連携機能であってもよい。このような連携機能を初期連携機能と呼ぶ。以下の説明では、初期連携機能として通話機能が設定されているとする。そのため、モバイル装置310は、連携開始直後に画像502を送信する。運転者は、別の連携機能を初期連携機能として設定することも可能である。モバイル装置310は、連携を開始したことを音声で通知してもよい。
 モバイル装置310は、初期連携機能のトップ画像(この例では、画像502)が表示された状態で右長押し入力を取得した場合に、車両100との連携を終了する。この場合に、モバイル装置310は、連携を終了することの通知を車両100へ送信し、車両100は、その通知に基づいて連携動作を終了し、領域401に連携機能以外の画像500を表示する。モバイル装置310は、連携が終了したことを音声で通知してもよい。
 上述のように、連携画像は画面400の右側にある領域401に表示される。そのため、連携開始時に連携画像が領域401に表示されると、運転者は、連携画像が画面400の外側から画面400の右端を超えて領域401に入り込んだように感じる。この連携画像の仮想的な移動方向に、連携動作を開始するための入力方向(左方向)が一致するため、運転者は直感的に連携機能を開始できる。この効果を一層顕著にするため、車両100は、領域401へ右側から連携画像が入り込むようなアニメーションで表示してもよい。また、連携終了時に領域401の連携画像が消去されると、運転者は、連携画像が画面400の右端を超えて画面400の外側へ出たように感じる。この連携画像の仮想的な移動方向に、連携動作を終了するための入力方向(右方向)が一致するため、運転者は直感的に連携機能を終了できる。この効果を一層顕著にするため、車両100は、領域401から右側へ連携画像が出るようなアニメーションで表示してもよい。さらに、車両100は、他の連携画像の表示においても、入力方向と画像の移動方向を対応付けてもよい。すなわち、車両100は、上方向、下方向、左方向及び下方向の指示をモバイル装置310へ送信することの応答として受信した画像を、当該指示の方向へ移動するアニメーションで表示してもよい。
 続いて、複数の連携機能を切り替えについて説明する。モバイル装置310は、複数の連携機能の何れかのトップ画像(画像501~505の何れか)が表示された状態で上短押し入力又は下短押し入力を取得した場合に、選択中の連携機能を別の連携機能に切り替え、切り替え後の連携機能のトップ画像を送信する。例えば、モバイル装置310は、選択中の連携機能のトップ画像が表示された状態で下短押し入力を取得した場合に、天候情報提供機能、通話機能、経路案内機能、音楽再生機能及びメッセージング機能の順に選択中の連携機能を切り替え、切り替え後の連携機能に応じたトップ画像(画像501~505の何れか)を送信する。また、モバイル装置310は、選択中の連携機能のトップ画像が表示された状態で上短押し入力を取得したことに応じて、逆順に選択中の連携機能を切り替え、切り替え後の連携機能に応じたトップ画像(画像501~505の何れか)を送信する。図示していないが、天候情報提供機能からメッセージング機能への直接の切り替え及びその逆の切り替えが可能であってもよい。モバイル装置310は、連携機能の切り替えとともに、切り替え後の連携機能を音声で通知してもよい。
 モバイル装置310は、図5~図9に示される何れの連携画像を表示中であっても、左長押し入力を取得した場合に、初期連携機能のトップ画像(この例では、画像502)の送信に遷移する。モバイル装置310は、図5~図9に示される何れの連携画像を表示中であっても、下長押し入力を取得した場合に、運転者へ出力する音声の音量をゼロ(すなわち、消音)にする。一方、モバイル装置310は、消音状態で下長押し入力を取得した場合に、消音状態を解除し、消音前の音量に戻す。モバイル装置310は、図5~図9に示される何れの連携画像を表示中であっても、右長押し入力を取得した場合に、連携動作を終了してもよい。これに換えて、モバイル装置310は、初期連携機能のトップ画像(この例では、画像502)が表示された状態でのみ、連携動作の終了指示を受け付けてもよいし、何れかの連携機能のトップ画像が表示された状態でのみ、連携動作の終了指示を受け付けてもよい。
 図6を参照して、通話機能の具体的な動作例について説明する。モバイル装置310は、画像502が表示された状態で右短押し入力を取得した場合に、画像602の送信に遷移する。画像602は、通話相手の指定を運転者に要求するための画像である。モバイル装置310は、画像602の送信とともに、通話相手の指定を音声によって運転者に要求してもよい。モバイル装置310は、画像602が表示された状態で下短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像603の送信、画像604の送信及び画像502の送信にそれぞれ遷移する。
 画像603は、事前に設定された通話相手の名前を含む画像である。モバイル装置310は、画像603の送信への遷移の際に、通話相手として事前に設定されている名前をメモリ313から読み出し、画像603に含める。モバイル装置310は、画像603の送信とともに、読み出された通話相手の名前を音声によって運転者に通知してもよい。モバイル装置310は、画像603が表示された状態で上短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像602の送信、画像606の送信及び画像502の送信にそれぞれ遷移する。
 画像604は、音声検索の待機状態であることを示す画像である。画像604は、音声検索を終了するための入力方向を示す画像を含んでもよい。モバイル装置310は、画像603の送信とともに、音声検索を待機中であることを音声によって運転者に通知してもよい。モバイル装置310は、画像604の送信後、ヘッドセット320を介した音声入力を待機する。モバイル装置310は、音声入力を取得後、この音声入力に基づいて、メモリ313内の連絡先リストから通話相手を検索する。モバイル装置310は、通話相手を特定できた場合に画像605の送信に遷移し、通話相手を特定できなかった場合に新たな画像を送信しない(すなわち、車両100は、画像604の表示を継続する)。モバイル装置310は、通話相手を特定できなかった場合に、その旨を音声で運転者に通知してもよい。モバイル装置310は、画像604が表示された状態で左短押し入力を取得した場合に、画像602の送信に遷移する。
 画像605は、音声検索によって特定された通話相手の名前を含む画像である。モバイル装置310は、画像605の送信とともに、特定された通話相手の名前を音声によって運転者に通知してもよい。モバイル装置310は、画像605が表示された状態で右短押し入力及び左短押し入力を取得した場合に、画像606の送信及び画像602の送信にそれぞれ遷移する。
 画像606は、通話機能の実行状況を示す画像である。画像606は、通話相手及び通話状況(呼び出し中又は通話中(その場合に、通話時間))を含んでもよい。画像606は、通話を終了するための入力方向を示す画像を含んでもよい。モバイル装置310は、画像606の送信とともに、通話相手への発信を開始し、通話状況に応じて画像606を更新する。通話の音声は、ヘッドセット320を介してモバイル装置310と運転者との間で入出力される。モバイル装置310は、画像606が表示された状態で左短押し入力を取得した場合に、通話を終了し、画像502の送信に遷移する。モバイル装置310は、画像606が表示された状態で上短押し入力又は下短押し入力を取得した場合に、ヘッドセット320から出力される音量を増加又は減少する。モバイル装置310は、画像606が表示された状態で左長押し入力を取得した場合に、通話を継続したまま、画像601の送信に遷移する。
 画像601は、通話機能を実行中における通話機能のトップ画像である。一方、画像502は、通話機能を実行中以外における通話機能のトップ画像である。通話機能を実行中とは、通話相手を呼び出し中又は通話相手と通話中であることであってもよい。画像601は、通話相手及び通話状況(呼び出し中、通話中(その場合に、通話時間))を含んでもよい。画像601はトップ画像であるため、モバイル装置310は、画像601が表示された状態で上短押し入力又は下短押し入力を取得した場合に、通話機能を別の連携機能に切り替える。モバイル装置310は、通話機能が実行中である間に通話機能が他の連携機能に切り替わった場合に、通話状態を維持してもよい。モバイル装置310は、画像601が表示された状態で右短押し入力を取得した場合に、通話を継続したまま、画像606の送信に遷移する。モバイル装置310は、画像601が表示された状態で通話が終了した(通話相手が終話した)場合に、画像502の送信に遷移する。モバイル装置310は、画像601が表示された状態で運転者からの通話の終了指示を受け付けなくてもよい。
 図7を参照して、経路案内機能の具体的な動作例について説明する。モバイル装置310は、画像503が表示された状態で右短押し入力を取得した場合に、画像702の送信に遷移する。画像702は、目的地の指定を運転者に要求するための画像である。モバイル装置310は、画像702の送信とともに、目的地の指定を音声によって運転者に要求してもよい。モバイル装置310は、画像702が表示された状態で下短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像703の送信、画像704の送信及び画像503の送信にそれぞれ遷移する。
 画像703は、事前に設定された目的地を含む画像である。モバイル装置310は、画像703の送信への遷移の際に、目的地として事前に設定されている場所をメモリ313から読み出し、画像703に含める。モバイル装置310は、画像703の送信とともに、読み出された目的地を音声によって運転者に通知してもよい。モバイル装置310は、画像703が表示された状態で上短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像702の送信、画像706の送信及び画像503の送信にそれぞれ遷移する。
 画像704は、音声検索の待機状態であることを示す画像である。画像704は、音声検索を終了するための入力方向を示す画像を含んでもよい。モバイル装置310は、画像703の送信とともに、音声検索を待機中であることを音声によって運転者に通知してもよい。モバイル装置310は、画像704の送信後、ヘッドセット320を介した音声入力を待機する。モバイル装置310は、音声入力を取得後、この音声入力に基づいて、例えば地図情報から目的地を特定する。モバイル装置310は、目的地を特定できた場合に画像705の送信に遷移し、目的地を特定できなかった場合に新たな画像を送信しない(すなわち、車両100は、画像704の表示を継続する)。モバイル装置310は、目的地を特定できなかった場合に、その旨を音声で運転者に通知してもよい。モバイル装置310は、画像704が表示された状態で左短押し入力を取得した場合に、画像702の送信に遷移する。
 画像705は、音声検索によって特定された目的地を含む画像である。モバイル装置310は、画像705の送信とともに、特定された目的地を音声によって運転者に通知してもよい。モバイル装置310は、画像705が表示された状態で右短押し入力及び左短押し入力を取得した場合に、画像706の送信及び画像702の送信にそれぞれ遷移する。
 画像706は、経路案内機能の実行状況を示す画像である。画像706は、転回すべき場所までの距離及び転回方向を含んでもよい。画像706は、経路案内を終了するための入力方向を示す画像を含んでもよい。モバイル装置310は、画像706の送信とともに、経路案内を開始し、案内状況に応じて画像706を更新する。経路案内の音声は、ヘッドセット320を介してモバイル装置310から運転者へ出力される。モバイル装置310は、画像706が表示された状態で左短押し入力を取得した場合に、画像707の送信に遷移する。モバイル装置310は、画像706が表示された状態で上短押し入力又は下短押し入力を取得した場合に、ヘッドセット320から出力される音量を増加又は減少する。
 画像707は、経路案内を終了するかどうかを確認するための画像である。画像707は、確認を要求する画像と、この確認に応答するための入力方向を示す画像とを含んでもよい。モバイル装置310は、画像707が表示された状態で右短押し入力を取得した場合に、経路案相を終了し、画像503の送信に遷移する。モバイル装置310は、画像707が表示された状態で右長押し入力を取得した場合に、経路案相を継続したまま、画像706の送信に遷移する。
 画像701は、経路案内機能を実行中における経路案内機能のトップ画像である。一方、画像503は、経路案内機能を実行中以外における経路案内機能のトップ画像である。経路案内機能を実行中とは、経路を運転者に向けて案内中であることであってもよい。画像701は、転回すべき場所までの距離及び転回方向を含んでもよい。上述のように、モバイル装置310は、経路案内機能が選択されている(すなわち、画像503及び701~707の何れかが表示されている)状態で左長押し入力を取得した場合に、初期連携機能のトップ画像の送信に遷移する。モバイル装置310は、その後再び経路案内機能が選択された場合に、前回の選択時に経路案内を実行中であったならば、経路案内機能のトップ画像として画像701を送信する。
 画像701はトップ画像であるため、モバイル装置310は、画像701が表示された状態で上短押し入力又は下短押し入力を取得した場合に、経路案内機能を別の連携機能に切り替える。モバイル装置310は、画像701が表示された状態で右短押し入力を取得した場合に、経路案内を継続したまま、画像706の送信に遷移する。モバイル装置310は、画像701が表示された状態で経路案内が終了した(目的地に到着した)場合に、画像503の送信に遷移する。モバイル装置310は、画像701が表示された状態で経路案内の終了指示を受け付けなくてもよい。
 図8を参照して、音楽再生機能の具体的な動作例について説明する。モバイル装置310は、画像504が表示された状態で右短押し入力を取得した場合に、画像802の送信に遷移する。画像802は、再生する音楽を検索するための画像である。モバイル装置310は、画像802の送信とともに、メモリ313内のプレイリストのうちの1曲を選択し、画像802に含める。モバイル装置310は、画像802の送信とともに、選択された曲の名前を音声によって運転者に通知してもよい。モバイル装置310は、画像802が表示された状態で右短押し入力及び左短押し入力を取得した場合に、画像803の送信及び画像504の送信にそれぞれ遷移する。モバイル装置310は、画像802が表示された状態で上短押し入力を取得した場合に、プレイリスト内の前の曲を選択し、それに伴い画像802を更新する。モバイル装置310は、画像802が表示された状態で下短押し入力を取得した場合に、プレイリスト内の次の曲を選択し、それに伴い画像802を更新する。
 画像803は、音楽再生機能の実行状況を示す画像である。画像803は、再生中の曲の名前及び再生状況(再生時間)を含んでもよい。画像803は、再生を終了するための入力方向及び再生中の曲をスキップするための入力方向を示す画像を含んでもよい。モバイル装置310は、画像803の送信とともに、曲の再生を、再生状況に応じて画像803を更新する。再生中の曲は、ヘッドセット320を介してモバイル装置310から運転者へ出力される。モバイル装置310は、画像803が表示された状態で左短押し入力を取得した場合に、再生を終了し、画像802の送信に遷移する。モバイル装置310は、画像803が表示された状態で右短押し入力を取得した場合に、プレイリスト内の次の曲を選択し、それに伴い画像803を更新する。モバイル装置310は、画像803が表示された状態で上短押し入力又は下短押し入力を取得した場合に、ヘッドセット320から出力される音量を増加又は減少する。モバイル装置310は、画像806が表示された状態で左長押し入力を取得した場合に、再生を継続したまま、初期連携機能のトップ画像(この例では、画像502)の送信に遷移する。
 画像801は、音楽再生機能を実行中における音楽再生機能のトップ画像である。一方、画像504は、音楽再生機能を実行中以外における音楽再生機能のトップ画像である。音楽再生機能を実行中とは、音楽を運転者に向けて再生中であることであってもよい。画像801は、再生中の曲の名前及び再生状況(再生時間)を含んでもよい。上述のように、モバイル装置310は、音楽再生機能が選択されている(すなわち、画像504及び801~803の何れかが表示されている)状態で左長押し入力を取得した場合に、初期連携機能のトップ画像の送信に遷移する。モバイル装置310は、その後再び音楽再生機能が選択された場合に、前回の選択時に音楽再生を実行中であったならば、音楽再生機能のトップ画像として画像801を送信する。
 画像801はトップ画像であるため、モバイル装置310は、画像801が表示された状態で上短押し入力又は下短押し入力を取得した場合に、音楽再生機能を別の連携機能に切り替える。モバイル装置310は、画像801が表示された状態で右短押し入力を取得した場合に、音楽再生を継続したまま、画像803の送信に遷移する。モバイル装置310は、画像801が表示された状態で音楽再生が終了した(プレイリストが完了した)場合に、画像504の送信に遷移する。モバイル装置310は、画像801が表示された状態で音楽再生の終了指示を受け付けなくてもよい。
 図9を参照して、メッセージング機能の具体的な動作例について説明する。モバイル装置310は、画像505が表示された状態で右短押し入力を取得した場合に、画像901の送信に遷移する。画像901は、送信先の指定を運転者に要求するための画像である。モバイル装置310は、画像901の送信とともに、送信先の指定を音声によって運転者に要求してもよい。モバイル装置310は、画像901が表示された状態で下短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像902の送信、画像903の送信及び画像505の送信にそれぞれ遷移する。
 画像902は、事前に設定された送信先の名前を含む画像である。モバイル装置310は、画像902の送信への遷移の際に、送信先として事前に設定されている名前をメモリ313から読み出し、画像902に含める。モバイル装置310は、画像902の送信とともに、読み出された送信先の名前を音声によって運転者に通知してもよい。モバイル装置310は、画像902が表示された状態で上短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像901の送信、画像905の送信及び画像505の送信にそれぞれ遷移する。
 画像903は、音声検索の待機状態であることを示す画像である。画像903は、音声検索を終了するための入力方向を示す画像を含んでもよい。モバイル装置310は、画像902の送信とともに、音声検索を待機中であることを音声によって運転者に通知してもよい。モバイル装置310は、画像903の送信後、ヘッドセット320を介した音声入力を待機する。モバイル装置310は、音声入力を取得後、この音声入力に基づいて、メモリ313内の連絡先リストから送信先を検索する。モバイル装置310は、送信先を特定できた場合に画像904の送信に遷移し、送信先を特定できなかった場合に新たな画像を送信しない(すなわち、車両100は、画像903の表示を継続する)。モバイル装置310は、送信先を特定できなかった場合に、その旨を音声で運転者に通知してもよい。モバイル装置310は、画像903が表示された状態で左短押し入力を取得した場合に、画像901の送信に遷移する。
 画像904は、音声検索によって特定された送信先の名前を含む画像である。モバイル装置310は、画像904の送信とともに、特定された送信先の名前を音声によって運転者に通知してもよい。モバイル装置310は、画像904が表示された状態で右短押し入力及び左短押し入力を取得した場合に、画像905の送信及び画像901の送信にそれぞれ遷移する。
 画像905は、音声入力の待機状態であることを示す画像である。画像905は、音声入力を終了するための入力方向及び送信を開始するための入力方向を示す画像を含んでもよい。モバイル装置310は、画像905の送信とともに、音声入力を待機中であることを音声によって運転者に通知してもよい。モバイル装置310は、画像905の送信後、ヘッドセット320を介した音声入力を待機する。モバイル装置310は、入力された音声を送信対象のメッセージとして取得する。モバイル装置310は、画像903が表示された状態で左短押し入力、右短押し入力及び下短押し入力を取得した場合に、画像904の送信、画像907の送信及び画像906の送信にそれぞれ遷移する。
 画像906は、事前に設定されたメッセージの定型文を含む画像である。モバイル装置310は、画像906の送信への遷移の際に、事前に設定されているメッセージの定型文をメモリ313から読み出し、画像906に含める。画像906は、送信をキャンセルするための入力方向及び送信を開始するための入力方向を示す画像をさらに含んでもよい。モバイル装置310は、画像906の送信とともに、読み出された定型文を音声によって運転者に通知してもよい。モバイル装置310は、画像906が表示された状態で上短押し入力、右短押し入力及び左短押し入力を取得した場合に、画像905の送信、画像907の送信及び画像904の送信にそれぞれ遷移する。
 画像907は、メッセージング機能の実行状況を示す画像である。画像907は、メッセージを送信中であることを示す画像を含んでもよい。モバイル装置310は、画像907の送信とともに、送信先へのメッセージの送信を開始し、送信終了後に画像505の送信に遷移する。
 図6~図9に示すように、それぞれの連携機能で送信される画像(すなわち、連携画像)は、メニュー階層、対象選択階層及びアクティブ階層の3つの階層に分類される。メニュー階層には、選択中の連携機能のトップ画像が含まれる。対象選択階層には、選択中の連携機能の実行対象を選択するための画像が含まれる。アクティブ階層には、選択中の連携機能の実行状況を示す画像が含まれる。
 対象選択階層を有する各連携機能において、メニュー階層から対象選択階層への遷移は、右短押し入力に基づいて行われる。また、アクティブ階層を有する各連携機能において、対象選択階層からアクティブ階層への遷移は、右短押し入力に基づいて行われる。このように、何れの階層の遷移も右短押し入力に基づいて行われるため、運転者は直感的に階層を遷移できる。また、決定スイッチのような方向スイッチ以外のスイッチも不要である。さらに、アクティブ階層から対象選択階層への遷移及び対象選択階層からメニュー階層への遷移は、右短押し入力とは反対方向の左短押し入力に基づいて行われる。そのため、運転者は直感的に階層を戻ることができる。また、モバイル装置310は、メニュー階層から対象選択階層への遷移及び対象選択階層からアクティブ階層への遷移の際に、運転者に対する画像による確認を行わない。これによって、処理の実行までの操作量を低減できる。
 各階層において、上短押し入力及び下短押し入力は、同一の階層内における処理の遷移に用いられる。上述のように、左右スイッチ200Hは傾動型スイッチであり、上スイッチ200U及び下スイッチ200Dは別個の押圧型スイッチである。そのため、上下方向に比べて左右方向の方が運転者の指の移動量が少ない。上述の実施形態では、左右方向の入力によって階層間の遷移を行うことによって、運転者の指の移動量を低減できる。
 対象選択階層において、右短押し入力に基づいて音声検索への遷移が行われる。このように、深い階層への遷移と同じ方向への入力(右短押し入力)に基づいて音声検索への遷移を可能にすることによって、統一した操作感覚が提供される。
 図10を参照して、連携機能による割り込み処理の具体例について説明する。割り込み処理とは、運転者の指示によらず、モバイル装置310が車両100へ連携機能の開始を要求する処理のことである。例えば、モバイル装置310は、他者から着信があった場合又は他者からメッセージを受信した場合に割り込み処理の開始を要求する。
 モバイル装置310に着信があった場合に、モバイル装置310は、通話機能の割り込み処理に関する画像(すなわち、割り込み画像)を車両100に送信し、車両100は割り込み画像を画面400の領域402に表示する。割り込み画像は、発信者の名前と、着信に応答することを指示するための入力方向と、着信に応答しないことを指示するための入力方向とを含んでもよい。この時点で通話機能以外の連携機能を選択中である場合に、領域401には選択中の連携機能の画像が表示されている。一方、この時点で連携機能を実行中でない場合に、領域401には連携機能以外の画像が表示されている。モバイル装置310は、割り込み画像が表示された状態で右短押し入力を取得した場合に、着信に応答し、画像606の送信に遷移する。この時点で、領域401に連携画像(具体的に、画像606)が表示される。この時点で、車両100は、領域402から割り込み画像を削除し、非連携機能による画像を表示してもよい。モバイル装置310がメッセージを受信した場合も、同様の処理が行われる。
 図11を参照して、モバイル装置310の制御方法の動作例について説明する。この方法は、モバイル装置310が起動された場合に開始されてもよい。以下の動作の各ステップは、モバイル装置310の制御部311によって実行される。
 ステップS1101で、制御部311は、車両100及びヘッドセット320との通信リンクを確立する。この通信リンクは、上述の通り、Bluetoothのような短距離無線通信であってもよい。制御部311は、車両100及びヘッドセット320のどちらと先に通信リンクを確立してもよいし、同時に確立してもよい。また、ヘッドセット320との通信リンクは、ヘッドセット320への音声出力を行う時点で確立されてもよい。
 ステップS1102で、制御部311は、連携を開始する指示を取得したかどうかを判定する。この指示を取得した場合(S1102でYES)に制御部311は処理をステップS1103に遷移し、それ以外の場合(S1102でNO)に制御部311はステップS1102を繰り返す。上述の例で、制御部311は、車両100から左長押し入力を受信した場合に、連携を開始する指示を取得したと判定する。
 ステップS1103で、制御部311は、初期連携機能のトップ画像(上述の例で、画像502)を車両100へ送信する。この時点で、初期連携機能(上述の例で、通話機能)が選択される。
 ステップS1104で、制御部311は、選択中の連携機能を変更する指示を取得したどうかを判定する。この指示を取得した場合(S1104でYES)に制御部311は処理をステップS1105に遷移し、それ以外の場合(S1104でNO)に制御部311は処理をステップS1106に遷移する。上述の例で、制御部311は、車両100から上短押し入力又は下短押し入力を受信した場合に、連携機能を変更する指示を取得したと判定する。
 ステップS1105で、制御部311は、選択中の連携機能を変更し、変更後の連携機能のトップ画像を車両100へ送信する。制御部311は、変更後の連携機能を音声で説明するメッセージをユーザに提供してもよい。
 ステップS1106で、制御部311は、選択中の連携機能に関連する指示を取得したかどうかを判定する。この指示を取得した場合(S1106でYES)に制御部311は処理をステップS1107に遷移し、それ以外の場合(S1106でNO)に制御部311は処理をステップS1108に遷移する。
 ステップS1107で、制御部311は、取得した指示に従って選択中の連携機能の処理を行う。連携機能の処理については図6~図9で詳説したため、ここでは繰り返さない。制御部311は、連携機能の処理において、ユーザに対して音声によるメッセージを提供してもよい。
 ステップS1108で、制御部311は、連携を終了する指示を取得したかどうかを判定する。この指示を取得した場合(S1108でYES)に制御部311は処理をステップS1102に遷移し、それ以外の場合(S1108でNO)に制御部311は処理をステップS1104に遷移する。上述の例で、制御部311は、車両100から右長押し入力を受信した場合に、連携を終了する指示を取得したと判定する。
 続いて、モバイル装置310の熟練度管理機能について説明する。モバイル装置310は、ユーザによるモバイル装置310の操作に関する熟練度を管理する機能(すなわち、熟練度管理機能)を有していてもよい。例えば、モバイル装置310は、ユーザがモバイル装置310の操作に慣れていないと判断した場合に、ユーザの熟練度を低いレベルに設定し、ユーザがモバイル装置310の操作に慣れていると判断した場合に、ユーザの熟練度を高いレベルに設定する。モバイル装置310は、熟練度に応じた態様でユーザにメッセージを提供してもよい。
 図12を参照して、熟練度に応じた態様の具体例について説明する。図12の例で、モバイル装置310は、ユーザの熟練度を「0」~「3」の4段階のレベルで管理する。熟練度の数値が大きいほど熟練度が高い(すなわち、操作に慣れている)。図12の例で、モバイル装置310は、「メッセージ内容」、「メッセージ再生音量」及び「メッセージ再生速度」の3つの項目についてメッセージを提供する態様を異ならせる。
 「メッセージ内容」について説明する。モバイル装置310は、熟練度が低ければ(例えば、「0」又は「1」)、詳細な内容のメッセージ(例えば、「ホンダ タロウさんから着信中です。応答しますか?」)を提供する。モバイル装置310は、熟練度がこれよりも高ければ(例えば、「2」)、簡略化した内容のメッセージ(例えば、「ホンダ タロウさんから着信中。」)を提供する。モバイル装置310は、熟練度がさらに高ければ(例えば、「3」)、定型部分を省略したメッセージ(例えば、「ホンダ タロウさん」)を提供する。熟練度が高いユーザは簡潔なメッセージだけで具体的な内容を把握できるため、このようにメッセージの内容を異ならせることによって、ユーザの操作感が向上する。
 「メッセージ再生音量」について説明する。モバイル装置310は、熟練度が低ければ(例えば、「0」)、大きな音量でメッセージを提供する。モバイル装置310は、熟練度がこれよりも高ければ(例えば、「1」~「3」)、やや大きな音量でメッセージを提供する。熟練度が高いユーザは小さな音量でもメッセージの内容を把握できるため、このようにメッセージの再生音量を異ならせることによって、ユーザの操作感が向上する。
 「メッセージ再生速度」について説明する。モバイル装置310は、熟練度が低ければ(例えば、「0」)、低速でメッセージを提供する。モバイル装置310は、熟練度が上がるにつれて、メッセージの再生速度を上昇する。熟練度が高いユーザは速い速度でもメッセージの内容を把握できるため、このようにメッセージの再生速度を異ならせることによって、ユーザの操作感が向上する。
 続いて、図13を参照して、熟練度を変更するための条件について説明する。一部の実施形態において、モバイル装置310は、モバイル装置310を開始状態から終了状態に遷移するためにユーザが行った一連の操作における操作回数に基づいて熟練度を変更する。開始状態とは、一連の操作が開始された時点のモバイル装置310の状態のことである。終了状態とは、一連の操作が終了したことによって遷移するモバイル装置310の状態のことである。モバイル装置310へのユーザの操作は、モバイル装置310の入力部315に対して行われた操作であってもよいし、車両100の方向入力部305を通じて行われた操作であってもよいし、ヘッドセット320のマイク321を通じて行われた操作であってもよい。1つの操作の始点は、モバイル装置310に対してユーザが何も操作を行っていない状態から、モバイル装置310に対してユーザが何らかの操作(例えば、ボタンの押下)を行っている状態に遷移した時点であってもよい。1つの操作の終点は、モバイル装置310に対してユーザが何らかの操作(例えば、ボタンの押下)を行っている状態から、モバイル装置310に対してユーザが何も操作を行っていない状態に遷移した時点であってもよい。したがって、一連の操作では、モバイル装置310に対してユーザが何らかの操作(例えば、ボタンの押下)を行っている状態と、モバイル装置310に対してユーザが何も操作を行っていない状態とが交互に発生する。
 一般に、ユーザは、何らかの目的のために(例えば、電話を掛けるために)モバイル装置310に対して一連の操作を行う。ユーザによるモバイル装置310の前回の操作から所定の時間以上(例えば、1分以上)が経過した後の一連の操作は、前回での操作の目的とは異なる新たな目的のためにユーザが開始した操作であると考えられる。そこで、一連の操作は、ユーザによるモバイル装置310の前回の操作から所定の時間以上(例えば、1分以上)が経過した後の最初の操作を始点としてもよい。また、ユーザは、何らかの目的のために(例えば、音楽を再生するために)モバイル装置310に対して一連の操作を行った直後に、別の目的のために(例えば、経路案内を開始するために)モバイル装置310に対して一連の操作を行う場合もある。そこで、一連の操作は、ユーザの操作によってモバイル装置310が特定の処理(例えば、発信、経路案内開始、音楽再生開始、など)を実行した後の最初の操作を始点としてもよい。
 一連の操作は、ユーザの操作によってモバイル装置310が特定の処理(例えば、発信、経路案内開始、音楽再生開始、など)を実行するために行った最後の操作を終点としてもよい。また、ユーザは特定の処理を行うことなく一連の操作を終了することがある。例えば、特定の処理を実行しようとして一連の操作を始めたものの、特定の処理に辿りづけずに一連の操作を終わる場合がある。そこで、一連の操作は、所定の時間以上(例えば、1分以上)、後続の操作が行われなかった最後の操作を終点としてもよい。
 図13に示される例において、モバイル装置310の現在の状態が、音楽再生機能のメニューが選択された状態(画像504が表示された状態)であるとする。そして、ユーザは、この状態から、通話機能の発信を実行するためにモバイル装置310に対して一連の操作を行うとする。この場合に、一連の操作の開始状態は、音楽再生機能のメニューが選択された状態(画像504が表示された状態)であり、一連の操作の終了状態は、発信中の状態(画像606が表示された状態)である。
 モバイル装置310の操作に十分に慣れたユーザは、経路1301に示すように、遠回りすることなく、モバイル装置310を開始状態から終了状態に遷移できる。具体的に、ユーザは、上短押し入力を2回行うことによって、通話機能のメニューが選択された状態(画像502が表示された状態)にモバイル装置310を遷移する。その後、ユーザは、右短押し入力を2回行うことによって、音声検索のために音声入力を待機中の状態(画像604が表示された状態)にモバイル装置310を遷移する。その後、ユーザは、音声入力を行うことによって、音声検索結果が表示された状態(画像605が表示された状態)にモバイル装置310を遷移する。最後に、ユーザは、右短押し入力を1回行うことによって、発信中の状態にモバイル装置310を遷移する。この例で、ユーザは、5回の押圧入力操作及び1回の音声入力操作によってモバイル装置310を開始状態から終了状態に遷移する。この操作回数は、モバイル装置310を開始状態から終了状態に遷移するための最少操作回数である。
 モバイル装置310の操作に十分に慣れていないユーザは、例えば経路1302に示すようにモバイル装置310を開始状態から終了状態に遷移する。具体的に、ユーザは、右短押し入力を1回行うことによって、音楽検索が可能な状態(画像802が表示された状態)にモバイル装置310を遷移する。操作の誤りに気付いたユーザは、左短押し入力を1回行うことによって、音楽再生機能のメニューが選択された状態(画像504が表示された状態)にモバイル装置310を戻す。その後、ユーザは、経路1301と同様にして、発信中の状態にモバイル装置310を遷移する。この例で、ユーザは、7回の押圧入力操作及び1回の音声入力操作によってモバイル装置310を開始状態から終了状態に遷移する。
 モバイル装置310の操作にほとんど慣れていないユーザは、例えば経路1303に示すようにモバイル装置310を開始状態から終了状態に遷移する。具体的に、ユーザは、下短押し入力を1回行うことによって、メッセージング機能のメニューが選択された状態(画像505が表示された状態)にモバイル装置310を遷移する。その後、ユーザは、メッセージング機能内で状態を遷移する。操作の誤りに気付いたユーザは、メッセージング機能のメニューが選択された状態(画像505が表示された状態)にモバイル装置310を戻した後、上短押し入力を行うことによって、別のメニューに遷移する。しかし、ユーザは通話機能のメニューで止まらずに、天候情報提供機能のメニューが選択された状態(画像501が表示された状態)にモバイル装置310を遷移してしまう。その後、ユーザは、通話機能のメニューが選択された状態(画像502が表示された状態)にモバイル装置310を遷移し、経路1301と同様にして、発信中の状態にモバイル装置310を遷移する。この例で、ユーザは、13回の押圧入力操作及び1回の音声入力操作によってモバイル装置310を開始状態から終了状態に遷移する。
 図13の例で説明したように、モバイル装置310を開始状態から終了状態に遷移するためにユーザが行った一連の操作における操作回数は、ユーザの熟練度によって異なる。そこで、モバイル装置310は、このような一連の操作における操作回数が少なければ熟練度を上昇し、このような一連の操作における操作回数が多ければ熟練度を減少する。
 図14を参照して、モバイル装置310の熟練度管理機能を実行するための制御方法の動作例について説明する。この方法は、モバイル装置310の起動とともに開始されてもよい。以下の動作の各ステップは、モバイル装置310の制御部311によって実行される。ユーザの熟練度の初期値は最低レベル(図12の例では「0」)であってもよい。ユーザの熟練度は、モバイル装置310の記憶装置(例えばメモリ313)に記憶されており、以下の動作によって更新される。ユーザの熟練度は、ユーザが指定した値に更新可能であってもよい。
 ステップS1401で、制御部311は、一連の操作が開始されたかどうかを判定する。制御部311は、一連の操作が開始された場合(ステップS1401で「YES」)に処理をステップS1402に遷移し、それ以外の場合(ステップS1401で「NO」)にステップS1401を繰り返す。制御部311は、ユーザによるモバイル装置310の前回の操作から所定の時間以上(例えば、1分以上)が経過した後に操作が行われた場合、又はユーザの操作によってモバイル装置310が特定の処理(例えば、発信、経路案内開始、音楽再生開始、など)を実行した後に操作が行われた場合に、一連の操作が開始されたと判定してもよい。
 ステップS1402で、制御部311は、ユーザによるモバイル装置310の操作回数のカウントを開始する。カウント対象の操作は、モバイル装置310に対するすべての操作(例えば、押圧入力操作、音声入力操作など)であってもよい。これに代えて、カウント対象の操作は、モバイル装置310に対する一部の操作であってもよい。例えば、カウント対象の操作は、特定の入力方法(例えば、押圧入力)による操作であってもよいし、特定の入力装置(例えば、車両100の方向入力部305)による操作であってもよい。
 ステップS1403で、制御部311は、一連の操作が終了したかどうかを判定する。制御部311は、一連の操作が終了した場合(ステップS1403で「YES」)に処理をステップS1404に遷移し、それ以外の場合(ステップS1403で「NO」)にステップS1403を繰り返す。制御部311は、ユーザによるモバイル装置310の最後の操作から所定の時間以上(例えば、1分以上)、新たな操作が行われなかった場合、又はユーザの最後の操作によってモバイル装置310が特定の処理(例えば、発信、経路案内開始、音楽再生開始、など)を実行した場合に、一連の操作が終了したと判定してもよい。
 ステップS1404で、制御部311は、ステップS1402で開始した操作回数のカウントを終了する。制御部311は、後続の処理のために、この操作回数を記憶部(例えば、メモリ313)に記憶する。図13の例で、経路1301で一連の操作が行われた場合に操作回数は6回(5回の押圧入力操作及び1回の音声入力操作)であり、経路1301で一連の操作が行われた場合に操作回数は8回(7回の押圧入力操作及び1回の音声入力操作)であり、経路1301で一連の操作が行われた場合に操作回数は14回(13回の押圧入力操作及び1回の音声入力操作)である。この例におけるカウント対象の操作は、モバイル装置310に対するすべての操作である。これに代えて、カウント対象の操作が方向入力部305に対する押圧入力操作のみである場合に、経路1301~1303に対する操作回数はそれぞれ5回、7回、13回となる。以下では、カウント対象の操作が、モバイル装置310に対するすべての操作である場合について説明する。
 ステップS1405で、制御部311は、ユーザが一連の操作によって不要な連携機能を経由したかどうかを判定する。制御部311は、一連の操作が不要な連携機能を経由した場合(ステップS1405で「YES」)に処理をステップS1412に遷移し、それ以外の場合(ステップS1405で「NO」)に処理をステップS1406に遷移する。不要な連携機能とは、複数の連携機能のうちモバイル装置310を開始状態から終了状態に遷移するために経由する必要のない機能のことである。例えば、図13の例で、経路1303は、メッセージング機能及び天候情報提供機能を経由している。経路1301に示すようにこれらの連携機能を経由しなくても発信状態に遷移できるため、メッセージング機能及び天候情報提供機能は不要な連携機能である。
 ステップS1406で、制御部311は、モバイル装置310を開始状態から終了状態に遷移するために必要な最少操作回数に基づいて、熟練度を変更するかどうかを判定するための基準範囲を設定する。後述するように、この基準範囲は、ユーザによる一連の操作における操作回数と比較される。図13の例で、最少操作回数は6回(5回の押圧入力操作及び1回の音声入力操作)である。モバイル装置310を開始状態から終了状態に遷移するために必要な最少操作回数は、モバイル装置310の状態を表す状態遷移図を幅優先探索で開始状態から終了状態まで探索することによって算出されてもよい。
 基準範囲は、各熟練度における標準的な操作回数となるように設定される。すなわち、基準範囲を下回る回数の操作でモバイル装置310を開始状態から終了状態に遷移したユーザは操作に慣れているとみなされ、基準範囲を上回る回数の操作でモバイル装置310を開始状態から終了状態に遷移したユーザは操作に慣れていないとみなされる。制御部311は、基準範囲の上限値及び下限値のそれぞれを、モバイル装置310を開始状態から終了状態に遷移するために必要な最少操作回数に基づいて設定してもよい。例えば、制御部311は、基準範囲の上限値を、最少操作回数のa倍(aは1よりも大きい実数、例えばa=2、すなわち2倍)に設定し、基準範囲の下限値を、最少操作回数のb倍(bは1よりも大きく、aよりも小さい実数、例えばb=1.3、すなわち1.3倍)に設定してもよい。これにかえて、制御部311は、基準範囲の上限値を、最少操作回数にmを加えた値(mは0よりも大きい整数、例えばm=10)に設定し、基準範囲の下限値を、最少操作回数にnを加えた値(nは0よりも大きく、mよりも小さい整数、例えばn=5)に設定してもよい。これに代えて、制御部311は、基準範囲の上限値及び下限値のそれぞれを、最少操作回数を他の関数に適用することによって設定してもよい。基準範囲の上限値及び下限値の少なくとも一方は、最少操作回数に基づかなくてもよく、他の基準で算出された値や固定値であってもよい。
 例えば、基準範囲の上限値が最少操作回数の2倍であり、基準範囲の下限値が最少操作回数の1.3倍であるとする。図13の例で、最少操作回数は6回である。そのため、基準範囲は、7.8回以上12回以下となる。経路1301での一連の操作における操作回数は6回であるので、この操作回数は基準範囲を下回る。経路1302での一連の操作における操作回数は8回であるので、この操作回数は基準範囲に含まれる。経路1303での一連の操作における操作回数は14回であるので、この操作回数は基準範囲を上回る。
 制御部311は、ユーザの現在の熟練度に基づいて基準範囲を設定してもよい。例えば、基準範囲の上限値及び下限値のそれぞれは、ユーザの現在の熟練度が高いほど低い値となるように設定されてもよい。これによって、熟練度が低いユーザは、モバイル装置310の操作に少し慣れてきた時点で熟練度が上昇し、熟練度が中位のユーザは、モバイル装置310の操作にさらに慣れてきた時点で熟練度が上昇する。
 ステップS1407で、制御部311は、一連の操作における操作回数が基準範囲の上限値を上回ったかどうかを判定する。制御部311は、一連の操作における操作回数が基準範囲の上限値を上回った場合(ステップS1407で「YES」)に処理をステップS1412に遷移し、それ以外の場合(ステップS1407で「NO」)に処理をステップS1408に遷移する。
 ステップS1408で、制御部311は、一連の操作における操作回数が基準範囲の下限値を下回ったかどうかを判定する。制御部311は、一連の操作における操作回数が基準範囲の下限値を下回った場合(ステップS1408で「YES」)に処理をステップS1409に遷移し、それ以外の場合(ステップS1408で「NO」)に処理をステップS1401に遷移する。ステップS1408で「NO」と判定されるのは、ユーザが一連の操作によって不要な連携機能を経由しておらず、かつ操作回数が基準範囲内にある場合である。このような場合に、制御部311は、現在の熟練度が適切であると判断し、熟練度を変更するための処理を行わずに、次の一連の操作を待機する。
 ステップS1409で、制御部311は、熟練度変更用のカウント値を1だけ増やす。このカウント値の初期値は例えば0であり、ステップS1409及び後述のステップS1412で増減する。制御部311は、熟練度を変更すると、熟練度変更用のカウント値を初期値にリセットする。ステップS1409が実行されるのは、ユーザが一連の操作によって不要な連携機能を経由しておらず、かつ操作回数が基準範囲の下限値を下回った場合である。このような場合に、制御部311は、現在の熟練度に対してユーザが操作に慣れていると判断し、熟練度を上昇するための処理を行う。
 ステップS1410で、制御部311は、熟練度変更用のカウント値が上昇閾値に到達したかどうかを判定する。制御部311は、熟練度変更用のカウント値が上昇閾値に到達した場合(ステップS1410で「YES」)に処理をステップS1411に遷移し、それ以外の場合(ステップS1410で「NO」)に処理をステップS1401に遷移する。ステップS1411で、制御部311は、ユーザの熟練度を上昇する。例えば、制御部311は、ユーザの熟練度を1段階だけ上昇する。ユーザの熟練度がすでに最高レベルの場合に、制御部311は熟練度を変更しない。ステップS1410で使用される上昇閾値は、熟練度を上昇するための値であり、例えば「5」であってもよい。このように、熟練度を上昇するための条件を複数回満たした場合に熟練度を上昇することによって、ユーザが操作に慣れていないにも関わらずに熟練度を上昇するための条件を偶然満たしてしまった場合に熟練度が上昇してしまうことを抑制できる。上昇閾値は、熟練度ごとに異なる値であってもよい。例えば、熟練度を「0」から「1」に上昇するための上昇閾値が10であり、熟練度を「1」から「2」に上昇するための上昇閾値が5であってもよい。
 ステップS1412で、制御部311は、熟練度変更用のカウント値を1だけ減らす。ステップS1412が実行されるのは、ユーザが一連の操作によって不要な連携機能を経由した場合、又は操作回数が基準範囲の上限値を上回った場合である。このような場合に、制御部311は、現在の熟練度に対してユーザが操作に慣れていないと判断し、熟練度を減少するための処理を行う。
 ステップS1413で、制御部311は、熟練度変更用のカウント値が減少閾値に到達したかどうかを判定する。制御部311は、熟練度変更用のカウント値が減少閾値に到達した場合(ステップS1413で「YES」)に処理をステップS1414に遷移し、それ以外の場合(ステップS1413で「NO」)に処理をステップS1401に遷移する。ステップS1414で、制御部311は、ユーザの熟練度を減少する。例えば、制御部311は、ユーザの熟練度を1段階だけ減少する。ユーザの熟練度がすでに最低レベルの場合に、制御部311は熟練度を変更しない。ステップS1413で使用される減少閾値は、熟練度を減少するための値であり、例えば「-5」であってもよい。このように、熟練度を減少するための条件を複数回満たした場合に熟練度を減少することによって、ユーザが操作に慣れているにも関わらずに熟練度を減少するための条件を偶然満たしてしまった場合に熟練度が減少してしまうことを抑制できる。減少閾値は、熟練度ごとに異なる値であってもよい。例えば、熟練度を「3」から「2」に減少するための減少閾値が-5であり、熟練度を「2」から「1」に減少するための減少閾値が-10であってもよい。
 上述の方法では、モバイル装置310を開始状態から終了状態に遷移するためにユーザが行った一連の操作における操作回数に基づいて熟練度を変更するため、ユーザの操作レベルに応じた熟練度を適切に設定できる。
 上述の方法では、熟練度の上昇(ステップS1411)と熟練度の減少(ステップS1414)との両方を行った。これに代えて、制御部311は、上述の方法において、熟練度の上昇と熟練度の減少との一方のみを行ってもよい。例えば、制御部311は、熟練度の減少のみを上述のように一連の操作における操作回数に基づいて行い、熟練度の上昇を他の基準に基づいて行ってもよい。
しなくてもよい。
 上述の方法では、熟練度変更用の1つのカウント値を増減した(ステップS1409及びS1412)。これに代えて、制御部311は、ステップS1409で増やすための熟練度上昇用のカウント値と、ステップS1412で減らすための熟練度減少用のカウント値とを個別に管理してもよい。
 上述の方法では、制御部311は、ユーザが一連の操作によって不要な連携機能を経由したことと、操作回数が基準範囲の上限値を上回ったこととの少なくとも一方を満たす場合に熟練度変更用のカウント値を1だけ減らす。これに代えて、制御部311は、ユーザが一連の操作によって不要な連携機能を経由したことと、操作回数が基準範囲の上限値を上回ったこととの両方を満たす場合に熟練度変更用のカウント値を1だけ減らしてもよい。
 上述の方法では、ユーザが一連の操作によって不要な連携機能を経由したことに基づいて熟練度変更用のカウント値を1だけ減らした。これに代えて、制御部311は、S1405を省略し、ユーザが一連の操作によって不要な連携機能を経由したかどうかに基づかずに熟練度を変更してもよい。
 制御部311は、ユーザが車両100を運転中であるかどうかを判定可能であってもよい。例えば、制御部311は、車両100に対してユーザが車両100を運転中であるかどうかを問い合わせ、その応答に基づいてこの判定を行ってもよい。制御部311は、車両100の速度が閾値以下(例えば、時速1km以下や時速0km以下)である場合にユーザが車両100を運転中でないと判定してもよい。制御部311は、車両100の速度を車両100から取得してもよいし、モバイル装置310の移動速度を車両100の速度とみなしてもよい。
 制御部311は、ユーザが車両100を運転中である場合と、ユーザが車両100を運転中以外である場合(例えば、車両100を停止中である場合)とについて、個別に熟練度を管理してもよい。ユーザは、車両100を運転中以外である場合のモバイル装置310の操作に慣れてきたとしても、運転中に同様の熟練度でモバイル装置310を操作できるとは限らない。そのため、運転中である場合と運転中以外である場合とで個別に熟練度を管理することによって、ユーザの操作感が向上する。
 具体的に、モバイル装置310は、自身の記憶装置(例えば、メモリ313)に、運転中の操作に対する熟練度と、運転中以外の操作に対する熟練度とを個別に記憶する。図14の方法が運転中に提供されたメッセージについて実行される場合に、制御部301は、ステップS1411又はS1414で、運転中の操作に対する熟練度を変更する。また、制御部301は、運転中のユーザにメッセージを提供する場合に、運転中の操作に対する熟練度に応じた態様でメッセージを提供する。一方、図14の方法が運転中以外に提供されたメッセージについて実行される場合に、制御部301は、ステップS1411又はS1414で、運転中以外の操作に対する熟練度を変更する。また、制御部301は、運転中以外のユーザにメッセージを提供する場合に、運転中以外の操作に対する熟練度に応じた態様でメッセージを提供する。ステップS1402で開始されるカウントも、運転中である場合と運転中でない場合とで個別に管理される。
 上述の実施形態では、車両100とモバイル装置310との連携機能の文脈で熟練度管理機能について説明した。これにかえて、本発明の熟練度管理機能は、車両100と他の装置との連携機能に適用されてもよいし、車両100単独の機能に適用されてもよいし、これらの組み合わせに適用されてもよい。
 <実施形態のまとめ>
<項目1>
 音声案内装置(310)であって、
 ユーザによる前記音声案内装置の操作に関する熟練度を管理する熟練度管理手段(311)と、
 前記熟練度に応じた態様で前記ユーザにメッセージを提供する提供手段(311)と、を備え、
 前記熟練度管理手段は、前記音声案内装置を第1状態から第2状態に遷移するために前記ユーザが行った一連の操作における操作回数に基づいて前記熟練度を変更する、音声案内装置。
 この項目によれば、操作回数に基づいて、ユーザによる音声案内装置の操作に関する熟練度を適切に設定できる。
<項目2>
 前記熟練度管理手段は、前記一連の操作における前記操作回数が基準範囲の上限値を上回ったことに基づいて前記熟練度を減少する、項目1に記載の音声案内装置。
 この項目によれば、操作回数に基づいて、ユーザによる音声案内装置の操作に関する熟練度を適切に減少できる。
<項目3>
 前記基準範囲の上限値は、前記音声案内装置を前記第1状態から前記第2状態に遷移するために必要な最少操作回数に基づく、項目2に記載の音声案内装置。
 この項目によれば、遷移前後の状態に基づいて適切な基準範囲の上限値を設定できる。
<項目4>
 前記基準範囲の上限値は、前記音声案内装置を前記第1状態から前記第2状態に遷移するために必要な最少操作回数の2倍である、項目2に記載の音声案内装置。
 この項目によれば、遷移前後の状態に基づいて適切な基準範囲の上限値を設定できる。
<項目5>
 前記熟練度管理手段は、前記一連の操作における前記操作回数が基準範囲の下限値を下回ったことに基づいて前記熟練度を上昇する、項目1乃至4のいずれか1項に記載の音声案内装置。
 前記熟練度管理手段は、前記一連の操作における前記操作回数が基準範囲の上限値を上回ったことに基づいて前記熟練度を減少する、項目1に記載の音声案内装置。
 この項目によれば、操作回数に基づいて、ユーザによる音声案内装置の操作に関する熟練度を適切に上昇できる。
<項目6>
 前記基準範囲の下限値は、前記音声案内装置を前記第1状態から前記第2状態に遷移するために必要な最少操作回数に基づく、項目5に記載の音声案内装置。
 この項目によれば、遷移前後の状態に基づいて適切な基準範囲の下限値を設定できる。
<項目7>
 前記基準範囲は、前記ユーザの現在の熟練度に基づく、項目2乃至6のいずれか1項に記載の音声案内装置。
 この項目によれば、ユーザの現在の熟練度に基づいて適切な基準範囲を設定できる。
<項目8>
 前記提供手段は、複数の機能に関するメッセージを前記ユーザに提供し、
 前記熟練度管理手段は、前記複数の機能のうち前記音声案内装置を前記第1状態から前記第2状態に遷移するために経由する必要のない機能を前記ユーザが前記一連の操作によって経由したことに基づいて前記熟練度を減少する、項目1乃至7のいずれか1項に記載の音声案内装置。
 この項目によれば、簡易な手法によってユーザの熟練度を設定できる。
<項目9>
 前記一連の操作は、前回の操作から所定の時間以上が経過した後の最初の操作、又は特定の処理を実行した後の最初の操作を始点とする、項目1乃至8のいずれか1項に記載の音声案内装置。
 この項目によれば、適切なタイミングで一連の操作の開始を判定できる。
<項目10>
 前記熟練度管理手段は、前記熟練度を変更するための条件を満たした回数が閾値に到達した場合に前記熟練度を変更する、項目1乃至9のいずれか1項に記載の音声案内装置。
 この項目によれば、熟練度を変更するための条件をユーザが偶然満たした場合に熟練度が変更されることを抑制できる。
<項目11>
 前記ユーザが車両(100)の運転中であるかどうかを判定する運転判定手段(311)をさらに備え、
 前記熟練度管理手段は、前記ユーザが運転中である場合と、前記ユーザが運転中でない場合とについて個別に前記熟練度を管理する、項目1乃至10の何れか1項に記載の音声案内装置。
 この項目によれば、運転中以外の操作によって熟練度が上昇しても、運転中の操作の熟練度への影響を抑制できる。
<項目12>
 前記運転判定手段は、前記車両の速度が閾値以下である場合に前記ユーザが運転中でないと判定する、項目11に記載の音声案内装置。
 この項目によれば、簡易な手法によって運転中かどうかを判定できる。
<項目13>
 音声案内方法であって、
 ユーザによる音声案内装置の操作に関する熟練度を管理する熟練度管理工程(S1401~S1414)と、
 前記熟練度に応じた態様で前記ユーザにメッセージを提供する提供工程(S1105、S1107)と、を有し、
 前記熟練度管理工程において、前記音声案内装置を第1状態から第2状態に遷移するために前記ユーザが行った一連の操作における操作回数に基づいて前記熟練度を変更する、音声案内方法。
 この項目によれば、操作回数に基づいて、ユーザによる音声案内装置の操作に関する熟練度を適切に設定できる。
<項目14>
 コンピュータを項目1乃至12の何れか1項に記載の音声案内装置の各手段として機能させるためのプログラム。
 この項目によれば、上述の音声案内装置を実現するプログラムが提供される。
 発明は上記の実施形態に制限されるものではなく、発明の要旨の範囲内で、種々の変形・変更が可能である。
 本願は、2021年6月29日提出の日本国特許出願特願2021-107790を基礎として優先権を主張するものであり、その記載内容の全てを、ここに援用する。
100 車両、310 モバイル装置、320 ヘッドセット、1301~1303 経路

Claims (14)

  1.  音声案内装置であって、
     ユーザによる前記音声案内装置の操作に関する熟練度を管理する熟練度管理手段と、
     前記熟練度に応じた態様で前記ユーザにメッセージを提供する提供手段と、を備え、
     前記熟練度管理手段は、前記音声案内装置を第1状態から第2状態に遷移するために前記ユーザが行った一連の操作における操作回数に基づいて前記熟練度を変更する、音声案内装置。
  2.  前記熟練度管理手段は、前記一連の操作における前記操作回数が基準範囲の上限値を上回ったことに基づいて前記熟練度を減少する、請求項1に記載の音声案内装置。
  3.  前記基準範囲の上限値は、前記音声案内装置を前記第1状態から前記第2状態に遷移するために必要な最少操作回数に基づく、請求項2に記載の音声案内装置。
  4.  前記基準範囲の上限値は、前記音声案内装置を前記第1状態から前記第2状態に遷移するために必要な最少操作回数の2倍である、請求項2に記載の音声案内装置。
  5.  前記熟練度管理手段は、前記一連の操作における前記操作回数が基準範囲の下限値を下回ったことに基づいて前記熟練度を上昇する、請求項1乃至4のいずれか1項に記載の音声案内装置。
  6.  前記基準範囲の下限値は、前記音声案内装置を前記第1状態から前記第2状態に遷移するために必要な最少操作回数に基づく、請求項5に記載の音声案内装置。
  7.  前記基準範囲は、前記ユーザの現在の熟練度に基づく、請求項2乃至6のいずれか1項に記載の音声案内装置。
  8.  前記提供手段は、複数の機能に関するメッセージを前記ユーザに提供し、
     前記熟練度管理手段は、前記複数の機能のうち前記音声案内装置を前記第1状態から前記第2状態に遷移するために経由する必要のない機能を前記ユーザが前記一連の操作によって経由したことに基づいて前記熟練度を減少する、請求項1乃至7のいずれか1項に記載の音声案内装置。
  9.  前記一連の操作は、前回の操作から所定の時間以上が経過した後の最初の操作、又は特定の処理を実行した後の最初の操作を始点とする、請求項1乃至8のいずれか1項に記載の音声案内装置。
  10.  前記熟練度管理手段は、前記熟練度を変更するための条件を満たした回数が閾値に到達した場合に前記熟練度を変更する、請求項1乃至9のいずれか1項に記載の音声案内装置。
  11.  前記ユーザが車両の運転中であるかどうかを判定する運転判定手段をさらに備え、
     前記熟練度管理手段は、前記ユーザが運転中である場合と、前記ユーザが運転中でない場合とについて個別に前記熟練度を管理する、請求項1乃至10の何れか1項に記載の音声案内装置。
  12.  前記運転判定手段は、前記車両の速度が閾値以下である場合に前記ユーザが運転中でないと判定する、請求項11に記載の音声案内装置。
  13.  音声案内方法であって、
     ユーザによる音声案内装置の操作に関する熟練度を管理する熟練度管理工程と、
     前記熟練度に応じた態様で前記ユーザにメッセージを提供する提供工程と、を有し、
     前記熟練度管理工程において、前記音声案内装置を第1状態から第2状態に遷移するために前記ユーザが行った一連の操作における操作回数に基づいて前記熟練度を変更する、音声案内方法。
  14.  コンピュータを請求項1乃至12の何れか1項に記載の音声案内装置の各手段として機能させるためのプログラム。
PCT/JP2022/010331 2021-06-29 2022-03-09 音声案内装置、音声案内方法及びプログラム WO2023276293A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202280043824.XA CN117546126A (zh) 2021-06-29 2022-03-09 语音引导装置、语音引导方法以及程序
JP2023531401A JPWO2023276293A5 (ja) 2022-03-09 音声案内装置、音声案内方法及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021107790 2021-06-29
JP2021-107790 2021-06-29

Publications (1)

Publication Number Publication Date
WO2023276293A1 true WO2023276293A1 (ja) 2023-01-05

Family

ID=84691171

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/010331 WO2023276293A1 (ja) 2021-06-29 2022-03-09 音声案内装置、音声案内方法及びプログラム

Country Status (2)

Country Link
CN (1) CN117546126A (ja)
WO (1) WO2023276293A1 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003114794A (ja) * 2001-10-03 2003-04-18 Alpine Electronics Inc 操作案内装置及び操作案内方法
JP2004251756A (ja) * 2003-02-20 2004-09-09 Nissan Motor Co Ltd 車両用表示制御装置
JP2006197298A (ja) * 2005-01-14 2006-07-27 Hitachi Ltd 音声応答装置
JP2008065583A (ja) * 2006-09-07 2008-03-21 Denso Corp 画像表示制御装置および画像表示制御装置用プログラム
JP2008257345A (ja) * 2007-04-02 2008-10-23 Fuji Xerox Co Ltd 情報処理装置、情報処理プログラム、及び、画像処理システム
JP2014080029A (ja) * 2013-12-06 2014-05-08 Sharp Corp 画像形成装置
JP2017167199A (ja) * 2016-03-14 2017-09-21 三菱自動車工業株式会社 運転支援システム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003114794A (ja) * 2001-10-03 2003-04-18 Alpine Electronics Inc 操作案内装置及び操作案内方法
JP2004251756A (ja) * 2003-02-20 2004-09-09 Nissan Motor Co Ltd 車両用表示制御装置
JP2006197298A (ja) * 2005-01-14 2006-07-27 Hitachi Ltd 音声応答装置
JP2008065583A (ja) * 2006-09-07 2008-03-21 Denso Corp 画像表示制御装置および画像表示制御装置用プログラム
JP2008257345A (ja) * 2007-04-02 2008-10-23 Fuji Xerox Co Ltd 情報処理装置、情報処理プログラム、及び、画像処理システム
JP2014080029A (ja) * 2013-12-06 2014-05-08 Sharp Corp 画像形成装置
JP2017167199A (ja) * 2016-03-14 2017-09-21 三菱自動車工業株式会社 運転支援システム

Also Published As

Publication number Publication date
CN117546126A (zh) 2024-02-09
JPWO2023276293A1 (ja) 2023-01-05

Similar Documents

Publication Publication Date Title
CN104238874B (zh) 车辆用信息显示装置
US9307065B2 (en) Method and apparatus for processing E-mail and outgoing calls
JP7093181B2 (ja) 車両ベースのマルチモーダルインターフェース
US9571539B2 (en) Method and electronic device for performing exchange of messages
KR101549559B1 (ko) 핸들에 부착되는 입력 장치 및 이를 구비한 차량
US10029723B2 (en) Input system disposed in steering wheel and vehicle including the same
US9608956B2 (en) Method and electronic device for performing exchange of messages
KR20050077806A (ko) 음성 대화 실행 방법 및 음성 대화 시스템
KR20100078295A (ko) 이종의 터치영역을 이용한 휴대단말의 동작 제어 방법 및 장치
JP6119456B2 (ja) 車両用情報表示装置
CN112017667B (zh) 语音交互方法、车辆和计算机存储介质
WO2015194111A1 (ja) 2個のディスプレイを制御するディスプレイ制御装置およびディスプレイ制御装置用のプログラム
WO2023276293A1 (ja) 音声案内装置、音声案内方法及びプログラム
JP2003223447A (ja) 移動体用情報提示装置
WO2023276347A1 (ja) 音声案内装置、音声案内方法及びプログラム
JP7282208B2 (ja) 車両、モバイル装置及びその制御方法
JP5057061B2 (ja) 車両用操作画面表示装置
WO2023276348A1 (ja) 車両
CN114651226B (zh) 车辆、移动装置及其控制方法
WO2023276381A1 (ja) 車両
JP2016024555A (ja) メッセージの交換を行うプログラム、方法、及び電子機器
JP5187381B2 (ja) 操作情報入力装置
JP2016024556A (ja) メッセージの交換を行うプログラム、方法、及び電子機器
JP6325231B2 (ja) 情報表示システム、情報表示システムの制御方法およびプログラム
JP5965956B2 (ja) 通信端末装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22830376

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023531401

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 202280043824.X

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE