CN113971954A - 语音交互方法及装置、车辆及存储介质 - Google Patents

语音交互方法及装置、车辆及存储介质 Download PDF

Info

Publication number
CN113971954A
CN113971954A CN202111585509.3A CN202111585509A CN113971954A CN 113971954 A CN113971954 A CN 113971954A CN 202111585509 A CN202111585509 A CN 202111585509A CN 113971954 A CN113971954 A CN 113971954A
Authority
CN
China
Prior art keywords
feedback
frequency
user
instruction
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111585509.3A
Other languages
English (en)
Other versions
CN113971954B (zh
Inventor
王亭玉
赵群
潘晓彤
赵恒艺
宁洪珂
樊骏锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xiaopeng Motors Technology Co Ltd
Original Assignee
Guangzhou Xiaopeng Motors Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xiaopeng Motors Technology Co Ltd filed Critical Guangzhou Xiaopeng Motors Technology Co Ltd
Priority to CN202111585509.3A priority Critical patent/CN113971954B/zh
Publication of CN113971954A publication Critical patent/CN113971954A/zh
Application granted granted Critical
Publication of CN113971954B publication Critical patent/CN113971954B/zh
Priority to PCT/CN2022/138599 priority patent/WO2023116502A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/21—Voice
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Abstract

本发明公开了一种语音交互方法，包括：接收对车辆预设功能调节的语音请求；执行语音请求对应的操作；响应于根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在操作执行的同时，根据反馈指令中的反馈频次向用户进行反馈。本发明中对于用户针对车辆中可进行刻度调节的零部件的语音请求，能够根据语音请求和反馈频次的映射关系确定针对语音请求的反馈指令，车辆在执行语音请求中意图对应的操作的同时，会根据反馈指令中的反馈频次向用户进行反馈，使得用户可以通过反馈的频次生动直观地感知到车辆执行的操作与自己与零部件进行刻度调节语音请求相匹配，反馈简洁清晰。本发明还公开了一种语音交互装置、车辆和计算机可读存储介质。

Description

语音交互方法及装置、车辆及存储介质
技术领域
本发明涉及语音识别技术领域，特别涉及一种语音交互方法、语音交互装置、车辆及计算机可读存储介质。
背景技术
随着智能汽车的发展，语音交互能够为用户在驾驶车辆的过程中提供越来越多的便利。一般地，在语音交互场景中，在车辆执行与用户的语音请求对应的操作后，会通过tts播报操作完成的相关信息，为用户提供反馈。例如，用户发出语音请求：音量大大大，车辆在执行音量调大三个刻度后，通过tts语音播报“音量已调节到x刻度”进行反馈，然而该tts播报反馈的内容冗长并且用户在语音请求中的调节次数需求未能获得直观的反馈，用户体验较差。
发明内容
有鉴于此，本发明实施方式提供了一种语音交互方法，包括：
接收对车辆预设功能调节的语音请求，所述预设功能可通过所述车辆的零部件进行刻度调节；
执行所述语音请求对应的操作；
响应于根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈。
如此，本发明中对于用户对预设功能调节的语音请求，能够根据语音请求和反馈频次的映射关系确定针对语音请求的反馈指令，车辆在执行语音请求的意图对应的操作的同时，会根据反馈指令中的反馈频次向用户进行反馈，使得用户可以通过反馈的频次生动直观地感知到车辆执行的操作与进行刻度调节的语音请求相匹配，反馈简洁清晰。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述车辆零部件调节的速度和所述反馈指令中的反馈频次以对应的持续状态和持续时间向所述用户进行反馈。
如此，根据车辆零部件的调节速度和反馈频次，确认在对用户的反馈的持续状态和持续时间，使得用户获得直观清晰的反馈。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次以对应的反馈强度向所述用户进行反馈。
如此，在进行用户反馈时，不同的反馈频次以不同的反馈强度进行反馈，使得不同的反馈频次对应到用户可感知到不同程度的反馈强度。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次确定音效播放的次数；
根据确定的音效播放的次数向用户播放音效。
如此，通过听觉维度对用户进行反馈，并根据反馈频次确定音效播放的次数，用户对于车辆反馈执行频次的感知更为直接。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次确定震动的次数；
根据确定的震动的次数向用户进行震动反馈。
如此，通过触觉维度对用户进行反馈，并根据反馈频次确定震动发生的次数，用户对于车辆反馈执行频次的感知更为直接。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次确定释放香氛的味道数量；
根据确定的味道数量释放香氛进行反馈。
如此，通过嗅觉维度对用户进行反馈，并根据反馈频次确定香氛释放的味道数量，用户对于车辆反馈执行频次的感知更为直接。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次向用户进行界面显示反馈。
如此，通过UI界面中显示元素形成对用户视觉维度的反馈，丰富反馈方式。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
在所述操作针对预设车辆零部件的情况下，控制所述操作的目标向所述用户进行震动反馈。
如此，当语音请求的操作目标自身可产生震动时，则控制该目标对用户震动反馈，使得操作与反馈更具有一体性，提升用户感知度。
所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
获取所述用户的位置信息；
控制所述位置信息对应的座椅向所述用户进行震动反馈。
如此，结合对用户方位的确定，选择对应的座椅进行震动反馈，使得反馈对于用户而言更具有针对性，便于用户判断，提升用户感知。
本发明还提供了一种语音交互装置，包括：
接收模块，用于接收对车辆预设功能调节的语音请求，所述预设功能可通过所述车辆的零部件进行刻度调节；
执行模块，用于执行所述语音请求对应的操作；
反馈模块，用于响应根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈。
如此，本发明中对于用户针对车辆中可进行刻度调节的零部件的语音请求，能够根据语音请求和反馈频次的映射关系确定针对语音请求的反馈指令，车辆在执行语音请求中意图对应的操作的同时，会根据反馈指令中的反馈频次向用户进行反馈，使得用户可以通过反馈的频次生动直观地感知到车辆执行的操作与自己与零部件进行刻度调节语音请求相匹配，反馈简洁清晰。
本发明还提供了一种车辆，所述车辆包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，实现所述的语音交互方法。
如此，本发明中对于用户针对车辆中可进行刻度调节的零部件的语音请求，能够根据语音请求和反馈频次的映射关系确定针对语音请求的反馈指令，车辆在执行语音请求中意图对应的操作的同时，会根据反馈指令中的反馈频次向用户进行反馈，使得用户可以通过反馈的频次生动直观地感知到车辆执行的操作与自己与零部件进行刻度调节语音请求相匹配，反馈简洁清晰。
本发明还提供一种计算机程序的非易失性计算机可读存储介质，当所述计算机程序被一个或多个处理器执行时，实现所述的语音交互方法。
如此，本发明对于用户针对车辆中可进行刻度调节的零部件的语音请求，服务器或车辆能够根据语音请求和反馈频次的映射关系确定针对语音请求的反馈指令，车辆在执行语音请求中意图对应的操作的同时，会根据反馈指令中的反馈频次向用户进行反馈，使得用户可以通过反馈的频次生动直观地感知到车辆执行的操作与自己与零部件进行刻度调节语音请求相匹配，反馈简洁清晰。
本发明实施方式的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点可以从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：
图1是本发明的语音交互方法的流程示意图之一；
图2是本发明的语音交互装置的模块示意图；
图3是本发明的语音交互方法的流程示意图之二；
图4是本发明的语音交互方法的流程示意图之三；
图5是本发明的语音交互方法的流程示意图之四；
图6是本发明的语音交互方法的流程示意图之五；
图7是本发明的语音交互方法的流程示意图之六；
图8是本发明的语音交互方法的流程示意图之七；
图9是本发明的语音交互方法的场景示意图；
图10是本发明的语音交互方法的流程示意图之八；
图11是本发明的语音交互方法的流程示意图之九。
具体实施方式
下面详细描述本发明的实施方式，实施方式的示例在附图中示出，其中，相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的，仅用于解释本发明的实施方式，而不能理解为对本发明的实施方式的限制。
请参阅图1，本发明提供了一种语音交互方法，包括：
01：接收对车辆预设功能调节的语音请求，预设功能可通过车辆的零部件进行刻度调节；
02：执行语音请求对应的操作；
03：响应于根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在操作执行的同时，根据反馈指令中的反馈频次向用户进行反馈。
相应地，请参阅图2，本发明实施方式还提供了一种语音交互装置100，本发明实施方式的语音交互方法可以由语音交互装置100实现。语音交互装置100包括接收模块110、执行模块120和反馈模块130。步骤01可以由接收模块110实现，步骤02可以由执行模块120实现，步骤03可以由反馈模块130实现。或者说，接收模块110用于接收对车辆预设功能调节的语音请求。执行模块120用于执行语音请求对应的操作。反馈模块130用于响应根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在执行操作的同时，根据反馈指令中的反馈频次向用户进行反馈。
本发明实施方式还提供了一种车辆。车辆包括存储器和处理器。存储器中存储有计算机程序，处理器用于接收对车辆预设功能调节的语音请求；用于执行语音请求对应的操作；以及用于响应根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在执行操作的同时，根据反馈指令中的反馈频次向用户进行反馈。
在车辆中包括一些如按键、旋钮等可以用来进行刻度调节的车辆零部件。随着语音技术在车辆交互中的应用，在一些相关场景中，可以通过语音交互来模拟对上述的车辆零部件进行刻度调节，如语音请求“音量大大大”，可以实现模拟对音量调节旋钮进行刻度调节，将音量调大三个刻度。车辆执行完成相应的操作后会通过tts语音播报“音量已调节到x刻度”，以对用户进行提示。然而该语音播报形式单一，内容较为复杂冗长，并且对于语音请求中的调节次数反馈不明确，用户未能获得直观的反馈。
本发明中，对于用户对预设功能调节的语音请求，根据语音请求和反馈频次的映射关系确定针对语音请求的反馈指令，车辆在执行语音请求的意图对应的操作的同时，会根据反馈指令中的反馈频次向用户进行反馈，使得用户可以通过反馈的频次生动直观地感知到车辆执行的操作与进行刻度调节的语音请求相匹配，反馈简洁清晰。
本发明中，用户使用语音交互模拟对车辆零部件进行刻度调节的过程，对应的语音请求可以包括但不限于“屏幕亮亮亮”、“音量大大大”、“座椅后后后”。其中，预设功能是指通过车辆零部件完成刻度调节的功能，其中的车辆零部件可以指机械旋钮或按钮等实体部件，这些是可以进行调节刻度的零部件。
对于车辆接收到的语音请求，通过与车辆通信的服务器进行语音识别、语义识别等处理，识别出语音请求的意图与希望调节的刻度值，进而组合成控制指令进行下发，车辆执行服务器下发的控制指令完成与语音请求对应的操作。同时，服务器还根据预设的语音请求与反馈频次的映射关系下发反馈指令。
根据车辆处理器的负荷，也可以将语音请求和反馈频次的映射关系布置在车辆，也即是服务器下发控制指令，车辆根据语音请求和反馈频次的映射关系生成反馈指令。
建立语音请求与反馈频次的映射关系，即针对用户具有调节精度需求的语音请求与车辆进行反馈次数之间的对应关系。例如，对于“音量大大大”的语音请求，存在进行三次刻度调节的需求，将该语音请求与三次的反馈频次形成映射关系。
请参阅图3，03包括：
031：根据车辆零部件调节的速度和反馈指令中的反馈频次以对应的持续状态和持续时间向用户进行反馈。
步骤031可以由反馈模块130来实现。或者说，反馈模块130用于根据车辆零部件调节的速度和反馈指令中的反馈频次以对应的持续状态和持续时间向用户进行反馈。
处理器用于根据车辆零部件调节的速度和反馈指令中的反馈频次以对应的持续状态和持续时间向用户进行反馈。
持续状态和持续时间根据对应的车辆零部件的调节速度确定。例如，对于音量调节而言，调节速度较快，过程持续较短，对应的反馈可在调节完成后一次性进行反馈，对于“音量大大大”的语音请求，在音量增大三次的调节过程完成后，一次性对用户进行频次为3的反馈。
又如，对于座椅调节而言，调节速度相对较慢，过程持续较长，对应的反馈可在调节过程中进行，每完成一个刻度的调节，对用户进行一次反馈。对于“座椅前前前”的语音请求，将对用户频次为3的反馈在座椅向前调节的过程中进行，每完成一个刻度的调节，反馈1次。调节完成，反馈完成。
如此，根据车辆零部件的调节速度和反馈频次，确认在对用户的反馈的持续状态和持续时间，使得用户收到获得直观清晰的反馈。
请参阅图4，03包括：
032：根据反馈指令中的反馈频次以对应的反馈强度向用户进行反馈。
步骤032可以由反馈模块130来实现。或者说，反馈模块130用于根据反馈指令中的反馈频次以对应的反馈强度向用户进行反馈。
处理器用于根据反馈指令中的反馈频次以对应的反馈强度向用户进行反馈。
反馈频次与反馈强度相关联，不同的反馈频次以不同的强度进行反馈，使得不同的反馈频次对应到用户可感知到不同程度的反馈强度。也即是，对应相同的车辆零部件，不同的调节刻度，以不同程度的反馈强度进行反馈，让用户可以较为直观的感受到调节的刻度。
例如，对于“音量大大大”和“音量大大”两个语音请求，前者的反馈强度要强于后者，用户可以根据反馈强度，较为直接地感受到音量调大三次和音量调大两次的区别。
反馈强度可以与整体反馈频次相对应，即反馈频次中每一频次反馈的反馈强度相同，随着整体反馈频次的增加，其中每一频次的反馈强度增加。也即是，频次为3的反馈中的每一次反馈的反馈强度要高于频次为2的反馈中的每次反馈的反馈强度。
反馈强度还可以与每一频次相对应，即在每一次反馈中，随着整体反馈频次中的频次增加，每一频次的反馈强度增加，也即是对于“音量大大大”，在反馈中，三个“大”的反馈强度逐次增大。
可以理解地，反馈强度对应不同反馈方式的表现不同，对应于听觉维度的反馈方式，反馈强度为音量大小，对应于触觉维度的反馈方式，反馈方式为震动强度大小。
请参阅图5，03包括：
0331：根据反馈指令中的反馈频次确定音效播放的次数；
0332：根据确定的音效播放的次数向用户播放音效。
请参阅图5，步骤0331、0332可以由反馈模块130来实现。或者说，反馈模块130用于根据反馈指令中的反馈频次确定音效播放的次数，以及用于根据确定的音效播放的次数向用户播放音效。
处理器用于根据反馈指令中的反馈频次确定音效播放的次数以及用于根据确定的音效播放的次数向用户播放音效。
本发明中，可以通过听觉维度对用户进行反馈，并根据反馈频次确定音效播放的次数，用户对于车辆反馈执行频次的感知更为直接。
反馈频次与语音请求存在映射关系，根据语音请求则可以确定需要反馈的次数。
例如“音量大大大”的语音请求映射到频次为3的反馈，从而确定通过播放音效进行反馈的次数。
反馈内容可以是合成相对简单的音效向用户播放进行反馈。例如，对于音量调节，音效可以包括“梆”、“当”、“噔”等。对于调节屏幕亮度，可模拟灯泡开启的音效进行反馈，如“叮”、“咻”等。对于全部预设功能的反馈可采用同一音效，或根据车辆零部件区分不同的音效，在此不做限定。对于频次大于1的反馈，重复播放对应的音效。即对于“音量大大大”的语音请求，根据语音请求与反馈频次的映射关系确定进行频次为3的音效反馈，进而播放音效为“噔噔噔”的反馈。建立了音量增大的语音请求与音效反馈之间的联系。
请参阅图6，03包括：
0341：根据反馈指令中的反馈频次确定震动的次数；
0342：根据确定的震动的次数向用户进行震动反馈。
请参阅图5，步骤0341和0342可以由反馈模块130来实现。或者说，反馈模块130用于根据反馈指令中的反馈频次确定震动的次数，以及用于根据确定的震动的次数向用户进行震动反馈。
处理器用于根据反馈指令中的反馈频次确定震动的次数以及用于根据确定的震动的次数向用户进行震动反馈。
本发明中，可以通过触觉维度对用户进行反馈，并根据反馈频次确定震动发生的次数，用户对于车辆反馈执行频次的感知更为直接。
反馈频次与语音请求存在映射关系，根据语音请求则可以确定需要反馈的次数。
例如，“音量大大大”的语音请求映射到频次为3的反馈，从而确定通过震动进行反馈的次数。
为了简化反馈的形式，通过车辆某些硬件的震动来进行反馈提示。对于频次大于1的反馈，进行对应与频次相对应的震动。例如，对于“音量大大大”的语音请求，根据语音请求与反馈频次的映射关系确定进行频次为3的震动反馈，通过方向盘震动进行反馈，进而方向盘发生三次震动的反馈。建立了音量增大的语音请求与震动反馈之间的联系。
请参阅图7，03包括：
0351：根据反馈指令中的反馈频次确定释放香氛的味道数量；
0352：根据确定的味道数量释放香氛进行反馈。
请参阅图5，步骤0351和0352可以由反馈模块130来实现。或者说，反馈模块130用于根据反馈指令中的反馈频次确定释放香氛的味道数量根据反馈指令中的反馈频次确定释放香氛的味道数量，以及用于根据确定的味道数量释放香氛进行反馈。
处理器用于根据反馈指令中的反馈频次确定释放香氛的味道数量根据反馈指令中的反馈频次确定释放香氛的味道数量，以及用于根据确定的味道数量释放香氛进行反馈。
本发明中，可以通过嗅觉维度对用户进行反馈，并根据反馈频次确定香氛释放的味道数量，用户对于车辆反馈执行频次的感知更为直接。
反馈频次与语音请求存在映射关系，根据语音请求则可以确定需要反馈的次数。
例如，“音量大大大”的语音请求映射到频次为3的反馈，从而确定通过释放香氛反馈的味道数量。
为了简化反馈的形式，通过释放香氛来进行反馈提示。对于频次大于1的反馈，释放与频次相对应的味道数量的香氛。例如，对于“音量大大大”的语音请求，根据语音请求与反馈频次的映射关系确定进行频次为3的嗅觉反馈，进而释放三种味道的香氛进行反馈。建立了音量增大的语音请求与释放香氛反馈之间的联系。
可以理解地，嗅觉反馈相对于听觉反馈和触觉反馈不够明显和直接，并且反馈周期较长，且不同用户的嗅觉灵敏程度存在差异，因此，在实际交互中，嗅觉维度的反馈可以搭配触觉反馈、听觉反馈共同进行。
请参阅图8，03包括：
036：根据反馈指令中的反馈频次向用户进行界面显示反馈。
步骤036可以由反馈模块130来实现。或者说，反馈模块130用于根据反馈指令中的反馈频次向用户进行界面显示反馈。
处理器用于根据反馈指令中的反馈频次向用户进行界面显示反馈。
请参阅图9，本发明中，可以通过视觉维度对用户进行反馈，利用UI界面中的对应控件在视觉上的显示效果进行与反馈频次相应的反馈，用户对于车辆反馈执行频次的感知更为直接。
反馈频次与语音请求存在映射关系，根据语音请求则可以确定需要反馈的次数。
例如“音量大大大”的语音请求映射到频次为3的反馈，从而确定通过中控显示屏上的音量调节控件显示增大3个刻度。
对于频次大于1的反馈，相应的控件显示对应频次的界面变化。例如，对于“音量大大大”的语音请求，根据语音请求与反馈频次的映射关系确定进行频次为3的视觉反馈，进而音量调控件显示增大3个刻度进行反馈。建立了音量增大的语音请求与显示界面元素反馈之间的联系。
可以理解地，在行车过程中，用户需要集中注意力观察路况，而尽量避免将视线聚焦于别处，在这种情况下，视觉维度的反馈可以搭配触觉反馈、听觉反馈以及嗅觉反馈共同进行。
应当说明地，在实际交互中，并不限定于采用某一种维度的反馈方式进行反馈，根据实际需求以及用户的反馈，可以采用上述多种维度的反馈方式进行任意组合。
为了简化tts播报的内容，可以对播报的文本的内容进行精简处理，例如将播报内容简化为“已放大”、“已调节”等内容，同时辅以多种维度的反馈方式共同进行反馈，使用户可以充分感知到车辆进行了对应操作。
请参阅图10，03包括：
037：在操作针对预设车辆零部件的情况下，控制操作的目标向用户进行震动反馈。
步骤037可以由反馈模块130来实现。或者说，反馈模块130用于在操作针对预设车辆零部件的情况下，控制操作的目标向用户进行震动反馈。
处理器用于在操作针对预设车辆零部件的情况下，控制操作的目标向用户进行震动反馈。
可以理解地，一般而言，对于车辆所执行的控制指令，都可以通过听觉维度进行反馈，而对于某些目标，还可以通过触觉维度来进行反馈。或者在听觉维度的基础上，提供触觉维度的辅助反馈。
根据车辆的硬件信息，确认用户包含调节精度需求的语音请求下，确认其中哪些可以接收震动反馈指令，也即是，语音请求可以在对通过车辆零部件对哪些目标进行刻度调节的情况下可以通过该目标自身获得震动反馈。例如，在语音请求为调节座椅的情况的下，操作针对的是座椅调节旋钮，目标为座椅，用户可通过座椅接收震动反馈。由此，可在语音请求对应的操作目标自身可产生震动时，向用户进行震动反馈，操作与反馈更具有一体性，提升用户感知度。
例如，对于“座椅前前前”的语音请求，根据语音请求与反馈频次的映射关系确定进行频次为3的反馈，并且座椅可产生震动，控制座椅进行三次震动的反馈。震动反馈可以单独进行的，也可以是与其他维度的反馈共同进行。
请参阅图11，03包括：
0381：获取用户的位置信息；
0382：控制位置信息对应的座椅向用户进行震动反馈。
步骤0381、0382可以由反馈模块130来实现。或者说，反馈模块130用于获取用户的位置信息，以及用于控制位置信息对应的座椅向用户进行震动反馈。
处理器用于获取用户的位置信息，以及用于控制位置信息对应的座椅向用户进行震动反馈。
具体地，采用声源定位的方式，确定语音请求的发出方位，进而控制对应位置处的座椅对用户进行震动反馈，使得反馈对于用户而言更具有针对性，例如，对于由位于副驾驶位置的用户发出的语音请求，在副驾驶座位处进行震动反馈，便于用户判断，提升用户感知。定位后的震动反馈既可以作为单一的反馈方式，也可以与其他维度方式的提醒方式组合共同对用户进行反馈。
本发明实施方式还提供了一种计算机可读存储介质。一个或多个存储有计算机程序的非易失性计算机可读存储介质，当计算机程序被一个或多个处理器执行时，实现上述任一实施方式的语音交互方法。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的软件来完成。程序可存储于一非易失性计算机可读存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中存储介质可为磁碟、光盘、只读存储记忆体（Read-Only Memory，ROM）等。
在本说明书的描述中，参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。同时，参考术语“第一”、“第二”等的描述意在将同类或相似操作区别开来，“第一”与“第二”之间在中具有前后逻辑关系，在中并不一定具有逻辑或前后关系，需要根据实际实施例进行判定，不应该仅通过字面意思进行判定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
尽管上面已经示出和描述了本发明的实施方式，可以理解的是，上述实施方式是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施方式进行变化、修改、替换和变型。

Claims (12)

1.一种语音交互方法，其特征在于，包括：
接收对车辆预设功能调节的语音请求，所述预设功能指模拟对车辆零部件的操作进行刻度调节的功能；
执行所述语音请求对应的操作；
响应于根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈。
2.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述车辆零部件调节的速度和所述反馈指令中的反馈频次以对应的持续状态和持续时间向所述用户进行反馈。
3.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次以对应的反馈强度向所述用户进行反馈。
4.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次确定音效播放的次数；
根据确定的音效播放的次数向用户播放音效。
5.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次确定震动的次数；
根据确定的震动的次数向用户进行震动反馈。
6.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次确定释放香氛的味道数量；
根据确定的味道数量释放香氛进行反馈。
7.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
根据所述反馈指令中的反馈频次向用户进行界面显示反馈。
8.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
在所述操作针对预设车辆零部件的情况下，控制所述操作的目标向所述用户进行震动反馈。
9.根据权利要求1所述的语音交互方法，其特征在于，所述在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈，包括：
获取所述用户的位置信息；
控制所述位置信息对应的座椅向所述用户进行震动反馈。
10.一种语音交互装置，其特征在于，包括：
接收模块，用于接收对车辆预设功能调节的语音请求，所述预设功能指模拟对车辆零部件的操作进行刻度调节的功能；
执行模块，用于执行所述语音请求对应的操作；
反馈模块，用于响应根据预设的语音请求和反馈频次的映射关系确定的反馈指令，在所述操作执行的同时，根据所述反馈指令中的反馈频次向用户进行反馈。
11.一种车辆，其特征在于，所述车辆包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，实现权利要求1-9任一项所述的语音交互方法。
12.一种计算机程序的非易失性计算机可读存储介质，其特征在于，当所述计算机程序被一个或多个处理器执行时，实现权利要求1-9任一项所述的语音交互方法。
CN202111585509.3A 2021-12-23 2021-12-23 语音交互方法及装置、车辆及存储介质 Active CN113971954B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111585509.3A CN113971954B (zh) 2021-12-23 2021-12-23 语音交互方法及装置、车辆及存储介质
PCT/CN2022/138599 WO2023116502A1 (zh) 2021-12-23 2022-12-13 语音交互方法及装置、车辆及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111585509.3A CN113971954B (zh) 2021-12-23 2021-12-23 语音交互方法及装置、车辆及存储介质

Publications (2)

Publication Number Publication Date
CN113971954A true CN113971954A (zh) 2022-01-25
CN113971954B CN113971954B (zh) 2022-07-12

Family

ID=79590730

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111585509.3A Active CN113971954B (zh) 2021-12-23 2021-12-23 语音交互方法及装置、车辆及存储介质

Country Status (2)

Country Link
CN (1) CN113971954B (zh)
WO (1) WO2023116502A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023116502A1 (zh) * 2021-12-23 2023-06-29 广州小鹏汽车科技有限公司 语音交互方法及装置、车辆及存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009180914A (ja) * 2008-01-30 2009-08-13 Tokai Rika Co Ltd 音声認識機器操作装置
CN103137126A (zh) * 2011-11-30 2013-06-05 北京德信互动网络技术有限公司 基于声控的智能电子设备和声控方法
CN205320262U (zh) * 2015-12-04 2016-06-15 徐文波 具有可视化音量调节功能的音频设备
CN106506809A (zh) * 2016-10-11 2017-03-15 合网络技术（北京）有限公司 一种基于通话内容自动调节音量的方法、系统及设备
CN107368280A (zh) * 2017-07-06 2017-11-21 北京小米移动软件有限公司 语音交互的音量控制方法、装置和语音交互设备
CN108040171A (zh) * 2017-11-30 2018-05-15 北京小米移动软件有限公司 语音操作方法、装置及计算机可读存储介质
CN109278684A (zh) * 2018-10-18 2019-01-29 北京汽车股份有限公司 车辆座椅系统的控制方法、控制系统和车辆
CN109910748A (zh) * 2019-04-22 2019-06-21 宝能汽车有限公司 车载终端的反馈方法、装置和车辆
CN111696561A (zh) * 2020-05-27 2020-09-22 一汽奔腾轿车有限公司 一种基于听觉、视觉和嗅觉反馈的语音交互系统及方法
CN113031905A (zh) * 2020-06-28 2021-06-25 广州小鹏汽车科技有限公司 语音交互方法、车辆、服务器、系统和存储介质
CN113239178A (zh) * 2021-07-09 2021-08-10 肇庆小鹏新能源投资有限公司 意图生成方法、服务器、语音控制系统和可读存储介质
CN113625988A (zh) * 2021-08-06 2021-11-09 网易（杭州）网络有限公司 音量调整方法、装置、设备及存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8279052B2 (en) * 2009-11-04 2012-10-02 Immersion Corporation Systems and methods for haptic confirmation of commands
EP3154052A4 (en) * 2014-06-03 2018-01-10 Sony Corporation Information processing device, information processing method, and program
CN105761532B (zh) * 2014-12-19 2018-03-02 大陆汽车投资（上海）有限公司 动态语音提示方法及车载系统
US20160343370A1 (en) * 2015-05-19 2016-11-24 Dictionary.com Speech feedback system
US20180357040A1 (en) * 2017-06-09 2018-12-13 Mitsubishi Electric Automotive America, Inc. In-vehicle infotainment with multi-modal interface
DE102018009487A1 (de) * 2018-12-03 2020-06-04 Daimler Ag Verfahren und Vorrichtung zur Einstellung einer Fahrzeugkomponente
DE102020100062A1 (de) * 2020-01-03 2021-07-08 Faurecia Autositze Gmbh Bedieneinheit sowie Verfahren zur Einstellung eines Parameters einer Funktionseinheit eines Kraftfahrzeugs
CN111694433B (zh) * 2020-06-11 2023-06-20 阿波罗智联(北京)科技有限公司 语音交互的方法、装置、电子设备及存储介质
CN113971954B (zh) * 2021-12-23 2022-07-12 广州小鹏汽车科技有限公司 语音交互方法及装置、车辆及存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009180914A (ja) * 2008-01-30 2009-08-13 Tokai Rika Co Ltd 音声認識機器操作装置
CN103137126A (zh) * 2011-11-30 2013-06-05 北京德信互动网络技术有限公司 基于声控的智能电子设备和声控方法
CN205320262U (zh) * 2015-12-04 2016-06-15 徐文波 具有可视化音量调节功能的音频设备
CN106506809A (zh) * 2016-10-11 2017-03-15 合网络技术（北京）有限公司 一种基于通话内容自动调节音量的方法、系统及设备
CN107368280A (zh) * 2017-07-06 2017-11-21 北京小米移动软件有限公司 语音交互的音量控制方法、装置和语音交互设备
CN108040171A (zh) * 2017-11-30 2018-05-15 北京小米移动软件有限公司 语音操作方法、装置及计算机可读存储介质
CN109278684A (zh) * 2018-10-18 2019-01-29 北京汽车股份有限公司 车辆座椅系统的控制方法、控制系统和车辆
CN109910748A (zh) * 2019-04-22 2019-06-21 宝能汽车有限公司 车载终端的反馈方法、装置和车辆
CN111696561A (zh) * 2020-05-27 2020-09-22 一汽奔腾轿车有限公司 一种基于听觉、视觉和嗅觉反馈的语音交互系统及方法
CN113031905A (zh) * 2020-06-28 2021-06-25 广州小鹏汽车科技有限公司 语音交互方法、车辆、服务器、系统和存储介质
CN113239178A (zh) * 2021-07-09 2021-08-10 肇庆小鹏新能源投资有限公司 意图生成方法、服务器、语音控制系统和可读存储介质
CN113625988A (zh) * 2021-08-06 2021-11-09 网易（杭州）网络有限公司 音量调整方法、装置、设备及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023116502A1 (zh) * 2021-12-23 2023-06-29 广州小鹏汽车科技有限公司 语音交互方法及装置、车辆及存储介质

Also Published As

Publication number Publication date
CN113971954B (zh) 2022-07-12
WO2023116502A1 (zh) 2023-06-29

Similar Documents

Publication Publication Date Title
CN111002996A (zh) 车载语音交互方法、服务器、车辆和存储介质
EP2715935B1 (de) Kraftfahrzeugaudiosystem
JP5059829B2 (ja) 個人化されたコンテンツを備える車両インフォテインメントシステム
EP2741523B1 (en) Object based audio rendering using visual tracking of at least one listener
CN113971954B (zh) 语音交互方法及装置、车辆及存储介质
EP1535397A1 (en) Audio system with balance setting based on information addresses
US7920707B2 (en) Audio system
CN102662658A (zh) 一种在导航软件界面中嵌入音频应用的方法
CN112124231A (zh) 一种车辆交互的方法和装置
CN112046498A (zh) 一种驾驶模式的切换提示方法、装置、车辆和存储介质
EP3923271A2 (en) Voice control method, vehicle, server and storage medium
CN110789478A (zh) 车载音响参数辅助调节方法、装置以及音频处理器
CN112511123A (zh) 一种音效定制方法、装置、电子设备及存储介质
CN111316654A (zh) 内容信息分发服务器、终端装置、内容信息分发系统、内容信息分发方法、内容信息播放方法、内容信息分发程序以及内容信息播放程序
US20090195712A1 (en) Dvd menu representation via optical character recognition
CN113002449B (zh) 一种车载hmi设备的控制方法及装置
CN111768755A (zh) 信息处理方法、装置、车辆和计算机存储介质
US20200117287A1 (en) Systems using dual touch and sound control, and methods thereof
KR101938634B1 (ko) 운전자 맞춤형 차량정보 표시매체 배열위치 운영장치
CN110723087A (zh) 车载电子设备及其人机交互方式自适应调整方法
EP3007356A1 (en) Vehicle audio system with configurable maximum volume output power
DE102015206021B4 (de) Rechnersystem für ein Fahrzeug
CN116185330A (zh) 一种配置车辆音源音效的方法、装置和车辆
CN117116262A (zh) 一种车内声场播放控制方法及装置
US20230239520A1 (en) Communication method and system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant