CN110171372A - 车载终端的界面显示方法、装置及车辆 - Google Patents
车载终端的界面显示方法、装置及车辆 Download PDFInfo
- Publication number
- CN110171372A CN110171372A CN201910446320.2A CN201910446320A CN110171372A CN 110171372 A CN110171372 A CN 110171372A CN 201910446320 A CN201910446320 A CN 201910446320A CN 110171372 A CN110171372 A CN 110171372A
- Authority
- CN
- China
- Prior art keywords
- car
- mounted terminal
- locality
- sound source
- interactive
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000002452 interceptive effect Effects 0.000 claims abstract description 128
- 230000003993 interaction Effects 0.000 claims abstract description 42
- 230000000694 effects Effects 0.000 claims abstract description 26
- 230000001755 vocal effect Effects 0.000 claims description 17
- 238000012545 processing Methods 0.000 claims description 10
- 230000008859 change Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 23
- 238000007630 basic procedure Methods 0.000 description 9
- 210000003128 head Anatomy 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000006854 communication Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 210000001508 eye Anatomy 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001568 sexual effect Effects 0.000 description 2
- 230000002618 waking effect Effects 0.000 description 2
- 241000406668 Loxodonta cyclotis Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Computational Linguistics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种车载终端的界面显示方法、装置及车辆，包括下述步骤：获取声音源在语音交互中产生的语音信息；根据语音信息确定声音源相对于车载终端的位置方向；按照位置方向在车载终端上显示交互界面对象，以使交互界面对象在声音源的位置方向上呈现出交互的效果。该方法根据声音源在语音交互中发出的语音信息来确定声音源的位置方向，以及按照该位置方向在车载终端上显示交互界面对象，从而改变交互界面对象的显示状态使其呈现出与声音源用户交流的效果，不仅可以解决现有技术中图标显示过于单一的问题，还可以实现显示界面与用户的语音交互，增强交互效果。
Description
技术领域
本申请实施例涉及智能汽车技术领域，尤其是一种车载终端的界面显示方法、装置、车辆、计算机设备及存储介质。
背景技术
在智能汽车中，车载终端的智能化程度越来越高，与用户进行交互也日益人性化。目前车载终端一般都可以通过语音助手实现用户与终端之间的语音交互，即通过识别车主语音信息中的语音指令，来执行各类任务。
现有的车载终端的交互界面中，为了便于人机交互，其界面会设置多种交互界面对象，以通过交互界面对象实现与用户的交流，但传统的车载终端的界面显示中，交互界面对象显示形式单一，人机交互效果差。
发明内容
本申请实施例提供一种车载终端的界面显示方法、装置、计算机设备及存储介质。
为解决上述技术问题，本申请第一方面提供一种车载终端的界面显示方法，包括下述步骤：
获取声音源在语音交互中产生的语音信息；
根据所述语音信息确定所述声音源相对于所述车载终端的位置方向；
按照所述位置方向在所述车载终端上显示交互界面对象，以使所述交互界面对象在所述声音源的位置方向上呈现出交互的效果。
可选地，所述获取声音源在语音交互中产生的语音信息，包括：
在所述车载终端处于语音交互状态下，分别读取各个声音传感器采集到的语音信息；其中，所述声音传感器至少设置于相对于所述车载终端的主驾驶座和副驾驶座两个方向上。
可选地，所述根据所述语音信息确定所述声音源相对于所述车载终端的位置方向，包括：
将各个所述声音传感器采集到的语音信息的声音强度进行比对，并将声音强度最大的声音传感器确定为目标传感器；
根据所述目标声音传感器相对于所述终端的方向确定所述声音源相对于所述车载终端的位置方向。
可选地，所述交互界面对象为语音助手的交互虚拟图标；
所述按照所述位置方向在所述车载终端上显示交互界面对象，包括：
若所述声音源在相对于所述车载终端的主驾驶座位置方向上，将所述交互虚拟图标指向相对于所述车载终端的主驾驶座位置方向；
若所述声音源在相对于所述车载终端的副驾驶座位置方向上，将所述交互虚拟图标指向相对于所述车载终端的副驾驶座位置方向。
可选地，所述交互界面对象为语音助手的弹窗信息；
所述按照所述位置方向在所述车载终端上显示交互界面对象，包括：
若所述声音源在相对于所述车载终端的主驾驶座位置方向上，将所述弹窗信息靠近相对于所述车载终端的主驾驶座位置方向一侧进行显示；
若所述声音源在相对于所述车载终端的副驾驶座位置方向上，将所述弹窗信息靠近相对于所述车载终端的副驾驶座位置方向一侧进行显示。
可选地，还包括：
提取所述语音信息的声纹特征，根据所述声纹特征识别所述声音源的性别；
将所述交互界面对象的颜色切换为与所述性别预先匹配的颜色。
可选地，还包括：
将所述交互界面对象向所述位置方向上旋转预设角度形成3D效果后进行显示。
为解决上述技术问题，本申请第二方面还提供一种车载终端的界面显示装置，包括：
获取模块，用于获取声音源在语音交互中产生的语音信息；
处理模块，用于根据所述语音信息确定所述声音源相对于所述车载终端的位置方向；
执行模块，用于按照所述位置方向在所述车载终端上显示交互界面对象，以使所述交互界面对象在所述声音源的位置方向上呈现出交互的效果。
可选地，所述获取模块包括：
第一获取子模块，用于在所述车载终端处于语音交互状态下，分别读取各个声音传感器采集到的语音信息；其中，所述声音传感器至少设置于相对于所述车载终端的主驾驶座和副驾驶座两个方向上。
可选地，所述处理模块包括：
第一处理子模块，用于将各个所述声音传感器采集到的语音信息的声音强度进行比对，并将声音强度最大的声音传感器确定为目标传感器；
第一执行子模块，用于根据所述目标声音传感器相对于所述车载终端的方向确定所述声音源相对于所述车载终端的位置方向。
可选地，所述交互界面对象为语音助手的交互虚拟图标；
所述执行模块包括：
第三执行子模块，用于若所述声音源在相对于所述车载终端的主驾驶座位置方向上，将所述交互虚拟图标指向相对于所述车载终端的主驾驶座位置方向；
第四执行子模块，用于若所述声音源在相对于所述车载终端的副驾驶座位置方向上，将所述交互虚拟图标指向相对于所述车载终端的副驾驶座位置方向。
可选地，所述交互界面对象为语音助手的弹窗信息；
所述执行模块还包括：
第五执行子模块，用于若所述声音源在相对于所述车载终端的主驾驶座位置方向上，将所述弹窗信息靠近相对于所述车载终端的主驾驶座位置方向一侧进行显示；
第六执行子模块，用于若所述声音源在相对于所述车载终端的副驾驶座位置方向上，将所述弹窗信息靠近相对于所述车载终端的副驾驶座位置方向一侧进行显示。
可选地，还包括：
第二处理子模块，用于提取所述语音信息的声纹特征，根据所述声纹特征识别所述声音源的性别；
第七执行子模块，用于将所述交互界面对象的颜色切换为与所述性别预先匹配的颜色。
可选地，还包括：
第八执行模块，用于将所述交互界面对象向所述位置方向上旋转预设角度形成3D效果后进行显示。
为解决上述技术问题，本申请第三方面还提供一种车辆，该车辆的车载终端被配置为执行上述车载终端的界面显示方法的步骤。
为解决上述技术问题，本申请第四方面还提供一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述处理器执行上述所述车载终端的界面显示方法的步骤。
为解决上述技术问题，本申请第五方面还提供一种存储有计算机可读指令的存储介质，所述计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行上述所述车载终端的界面显示方法的步骤。
本申请实施例的有益效果是：根据声音源在语音交互中发出的语音信息来确定声音源的位置方向，以及按照该位置方向在车载终端上显示交互界面对象，从而改变交互界面对象的显示状态使其呈现出与声音源用户交流的效果，该方法不仅可以解决现有技术中图标显示过于单一的问题，还可以实现显示界面与用户的语音交互，增强交互效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种车载终端的界面显示方法的场景示意图；
图2为本申请实施例提供的一种车载终端的界面显示方法的基本流程示意图；
图3为本申请实施例提供的一种根据语音信息确定声音源相对于车载终端的位置方向的方法的基本流程示意图；
图4为本申请实施例提供的一种按照位置方向在车载终端上显示交互界面对象的方法的基本流程示意图；
图5为本申请实施例提供的一种显示交互界面对象的示意图；
图6为本申请实施例提供的另一种按照位置方向在车载终端上显示交互界面对象的方法的基本流程示意图；
图7为本申请实施例提供的另一种显示交互界面对象的示意图；
图8为本申请实施例提供的一种交互界面对象显示方法的基本流程示意图；
图9为本申请实施例提供的再一种显示交互界面对象的示意图；
图10为本申请实施例提供的一种车载终端的界面显示装置的基本结构框图；
图11为本申请实施例提供的一种计算机设备基本结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。
在本申请的说明书和权利要求书及上述附图中的描述的一些流程中，包含了按照特定顺序出现的多个操作，但是应该清楚了解，这些操作可以不按照其在本文中出现的顺序来执行或并行执行，操作的序号如101、102等，仅仅是用于区分开各个不同的操作，序号本身不代表任何的执行顺序。另外，这些流程可以包括更多或更少的操作，并且这些操作可以按顺序执行或并行执行。需要说明的是，本文中的“第一”、“第二”等描述，是用于区分不同的消息、设备、模块等，不代表先后顺序，也不限定“第一”和“第二”是不同的类型。
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
实施例
本技术领域技术人员可以理解，这里所使用的“车载终端”既包括无线信号接收器的设备，其仅具备无发射能力的无线信号接收器的设备，又包括接收和发射硬件的设备，其具有能够在双向通信链路上，执行双向通信的接收和发射硬件的设备。这种设备可以包括：蜂窝或其他通信设备，其具有单线路显示器或多线路显示器或没有多线路显示器的蜂窝或其他通信设备。
请参阅图1，图1为本申请实施例提供的一种车载终端的界面显示方法的场景示意图。如图1所示，本申请实施例主要应用于汽车内部，即包括具有语音交互功能的车载终端显示界面1、主驾驶座2和副驾驶座3，其中，车载终端具有语音交互功能，即乘坐于主驾驶座2或副驾驶座3的汽车用户发出语音(声音源)车载终端接收该语音信息并于显示界面中与汽车用户进行交互。
车载终端显示界面与汽车用户的交互过程，如以下实施例所述。请参照图2，图2为本申请实施例提供的一种车载终端的界面显示方法的基本流程示意图。
如图2所示，车载终端的界面显示方法包括下述步骤：
S1100、获取声音源在语音交互中产生的语音信息；
本申请实施例中，声音源用于在汽车内部发出语音信息，即乘坐于汽车内的用户在与车载终端进行语音交互时发出语音信息，其中，语音信息用于与车载终端进行交互，包括各种语音指令。
本申请实施例中，可以在汽车内部设置声音传感器，通过声音传感器来接收语音信息，并由车载终端从声音传感器中收集语音信息。实际应用中，汽车相对于车载终端包括主驾驶座或副驾驶座上，为了区分乘坐于主驾驶座上的声音源和乘坐于副驾驶座上的声音源，本申请实施例分别在车载终端显示界面的两侧分设有声音传感器，例如，可以设置于主驾驶座上和副驾驶座上，为了提高声音的清晰度还可以分别设置于面对主驾驶座或副驾驶座的位置。需要说明的是，声音传感器的个数不作限定。
S1200、根据语音信息确定声音源相对于车载终端的位置方向；
在实际应用中，为了方便确定声音源的位置方向，本申请实施例在语音交互状态下，分别读取设置于主驾驶座和右驾驶座上的声音传感器中的语音信息，如此，由于用户乘坐于主驾驶座并与车载终端的显示界面发出语音交互时，主驾驶座上的声音传感器与副驾驶座上的声音传感器均能接收到语音信息，通常主驾驶座上的声音传感器离声音源较近，该声音传感器接收到的语音的声音强度较大。因此，车载终端可以将主驾驶座和副驾驶座上的声音传感器接收到的语音的声音强度进行比对，并根据目标声音传感器相对于车载终端的方向确定为声音源的位置方向，例如，声音强度较大的语音信息所表示的声音传感器为目标传感器，由于目标传感器设置于主驾驶座上，则主驾驶座的位置方向为声音源的位置方向。
S1300、按照位置方向在车载终端上显示交互界面对象，以使交互界面对象在声音源的位置方向上呈现出交互的效果。
通常情况下，为了提高语音交互的效果，在车载终端的交互界面对象为用于表示语音交互的虚拟图标，其中，该交互虚拟图标可以用各类图像进行表示，例如，表示话筒的图标，卡通图像或者人物头像等等，具体可以自定义进行设置。
在一些应用场景中，为了现出交互的效果，当确定声音源在主驾驶座时，将所述交互虚拟图标指向相对于车载终端的主驾驶座位置方向；若声音源在相对于车载终端的副驾驶座位置方向上，将交互虚拟图标指向相对于车载终端的副驾驶座位置方向。如此，按照声音源的位置方向来调整交互虚拟图标的位置可以提高用户与车载终端显示界面的互动，增强交互效果。
在一些应用场景中，当声音源发出的语音信息为需要车载终端显示具体信息的语音指令时，交互界面对象为弹窗信息，其中，将弹窗信息中包括需要显示给用户的文本或图像信息。
在一些实施方式中，为了使交互界面对象呈现交互效果，可以改变交互虚拟图标显示状态，即，可以在显示界面中显示将交互虚拟图标向声音源的位置方向上旋转预设的角度后得到的二维图像，例如，当声音源在主驾驶座方向时，在显示界面中显示将交互虚拟图标向主驾驶座方向上旋转预设的角度后得到的二维图像；当声音源在副驾驶座方向时，在显示界面中显示将交互虚拟图标向副驾驶座方向上旋转预设的角度后得到的二维图像。如此，可以使交互虚拟图标显示出3D立体效果，增强交互效果。
在一些实施方式中，还可以对语音信息的内容的进行分析提取关键词，将关键词与预设的表示情绪的关键词进行比对，当比对一致时，改变图标的显示状态，例如，当语音信息表示开心时，可以改变表示头像的图表中表示嘴巴的图标使其呈现大笑的状态，或者将图标按照预设的轨迹进行移动呈现欢乐的状态，以此来增强用户情绪的表达。
在一些实施方式中，还可以提取语音信息的声纹特征，根据声纹特征确定声音源的性别，以及将交互虚拟图标显示为该性别对应的颜色，或者在与用户交流时采用与该性别匹配的声音。例如，当确定声音源的性别为男性时，将交互虚拟图标颜色更改为蓝色，或者在输出语音时采用预设的声调，例如男声。
上述实施方式中，根据声音源在语音交互中发出的语音信息来确定声音源的位置方向，以及按照该位置方向在车载终端上显示交互界面对象，从而改变交互界面对象的显示状态使其呈现出与声音源用户交流的效果，该方法不仅可以解决现有技术中图标显示过于单一的问题，还可以实现显示界面与用户的语音交互，增强交互效果。
在实际应用中，汽车包括主驾驶座和副驾驶座，为了准确确定声音源的位置方向，即乘坐于主驾驶座或副驾驶座上的用户的位置方向，可以在主驾驶座和副驾驶座上分别设置声音传感器，其中，声音传感器的数量不作限定。具体地，本申请实施例提供了一种获取声音源在语音交互中产生的语音信息的方法。
具体地，在车载终端处于语音交互状态下，分别读取各个声音传感器采集到的语音信息；其中，声音传感器至少设置于相对于车载终端的主驾驶座和副驾驶座两个方向上。
车载终端处于语音交互状态即为当乘坐于主驾驶座或者副驾驶座上的用户发出语音信息唤醒车载终端的交互界面对象，并与之进行语音交互的状态。车载终端分别读取设置于主驾驶座和副驾驶座上的声音传感器接收到的语音信息。
如图3所示，图3为本申请实施例提供的一种根据语音信息确定声音源相对于车载终端的位置方向的方法的基本流程示意图。具体地，步骤S1200包括下述步骤：
S1210、将各个声音传感器采集到的语音信息的声音强度进行比对，并将声音强度最大的声音传感器确定为目标传感器；
车载终端通过采用预设的声音处理软件分别对每个语音信息进行特征分析，计算其声音强度，以及将每个语音信息的声音强度进行比对，确定声音强度最大的语音信息。需要说明的是，车载终端在读取语音信息的同时获取声音传感器的识别码，以便使车载终端从声音强度最大的语音信息中提取声音传感器的标识码。
在一些实施方式中，为了剔除外界环境造成的干扰，例如车内用户较多或者背景声音较多时，车载终端可以通过声音分析软件截取包含有效信息的语音片段，并计算该语音片段的声音强度进行比对，以此来提高确定目标用户位置方向的准确度。
S1220、根据目标声音传感器相对于车载终端的方向确定声音源相对于车载终端的位置方向。
需要说明的是，车载终端中预设有信息表，其中，信息表中记载每个声音传感器的标识码所对应的座位的位置方向，即乘坐于该座位上的用户的位置方向。车载终端从信息表中查找与目标传感器的标识码具有映射关系的位置方向信息，并将该位置方向确定为目标用户的位置方向。当目标传感器为主驾驶座的方向，从信息表中查找与主驾驶座的识别码具有映射关系的位置方向信息，例如车载终端的左侧，并确定声音源的位置方向为主驾驶座方向，即车载终端的左侧。
为了解决现有技术中车载终端的界面显示过于单一，交互效果差的问题，本申请实施例提供一种按照位置方向在车载终端上显示交互界面对象的方法，如图4所示，图4为本申请实施例提供的一种按照位置方向在车载终端上显示交互界面对象的方法的基本流程示意图。
具体的，如图4所示，步骤S1300包括下述步骤：
S1311、若声音源在相对于车载终端的主驾驶座位置方向上，将交互虚拟图标指向相对于车载终端的主驾驶座位置方向；
S1312、若声音源在相对于车载终端的副驾驶座位置方向上，将交互虚拟图标指向相对于车载终端的副驾驶座位置方向。
本申请实施例中，交互界面对象为表示语音助手的交互虚拟图标，其中，语音助手仅仅为在交互面中显示的用于与声音源(用户)进行语音交互的图标。交互虚拟图标可以用各种图形表示，例如，可以为耳朵形状的图形，话筒形状的图形，还可以为用于表示交流的人物头像、卡通图像等等。
以下以一个场景实施例进行说明，用户在驾驶汽车行驶的过程中需要收听音乐，为了保证驾驶安全，用户发出唤醒语音助手的语音指令，例如“语音助手”，则当车载终端接收到唤醒语音后，表示语音助手的交互虚拟图标指向用户乘坐的主驾驶座的一侧，并与用户进行语音交互。
需要说明的是，交互虚拟图标指向主驾驶座或副驾驶座时，可以采用不同的表现方式，例如，交互虚拟图标可以由初始位置(例如，显示界面的中间)移动至主驾驶座或副驾驶座的一侧，并展示其移动轨迹；还可以为向主驾驶座或副驾驶座的一侧显示预设的动画。
本申请实施例提供一种交互虚拟对象指向位置方向的示意图，如图5所示，图5为本申请实施例提供的一种显示交互界面对象的示意图，其中，语音助手为拟人化的卡通头像，其中，当驾驶汽车的车主发出语音唤醒语后，该头像保持位置不变，头像内的眼睛图标移动至主驾驶座的一侧，呈现出语音助手望向驾驶员，与驾驶员交互的动态效果。该方法通过改变眼睛图标位置营造出眼球移动的3D效果，丰富了交互界面对象的显示方式，提高了交互效果。
在实际应用中，当声音源发出的语音信息为语音指令时，例如，需要车载终端按照语音指令显示具体的信息，此时，交互界面对象可以为语音助手的弹窗信息。本申请实施例提供一种按照位置方向在车载终端上显示交互界面对象的方法，如图6所示，图6为本申请实施例提供的另一种按照位置方向在车载终端上显示交互界面对象的方法的基本流程示意图。
具体地，如图6所示，还包括以下步骤：
S1321、若声音源在相对于车载终端的主驾驶座位置方向上，将弹窗信息靠近相对于车载终端的主驾驶座位置方向一侧进行显示；
S1322若声音源在相对于车载终端的副驾驶座位置方向上，将弹窗信息靠近相对于车载终端的副驾驶座位置方向一侧进行显示。
以下以一个场景实施例进行说明，如图7所示，图7为本申请实施例提供的另一种显示交互界面对象的示意图，用户在驾驶汽车行驶的过程中需要查看图像，用户发出语音指令，例如“调取XX的风景图像”，则当车载终端接收到语音指令后，以弹窗的形式显示与XX匹配的风景图像，并将其显示在主驾驶座的一侧，例如，再当接收到副驾驶座上用户的语音信息“播放XX音乐”，车载终端在副驾驶的一侧跳出XX音乐弹窗，并覆盖XX风景图像弹窗。
本申请实施例还提供一种交互界面显示的方法，如图8所示，图8为本申请实施例提供的一种交互界面对象显示方法的基本流程示意图。
具体地，包括以下步骤：
S1410、提取语音信息的声纹特征，根据所声纹特征识别声音源的性别；
声纹特征为用于表征性别的声音特征，例如，音色和音调。本申请实施例利用预设的性别判断模型对声音语音信息进行判断以确定该语音信息的声纹特征所属的性别。其中，性别判断模型可以为预先采用女性声音和男性声音的声纹特征对神经网络模型进行训练得到的计算模型。
S1420、将交互界面对象的颜色切换为与性别预先匹配的颜色。
本申请实施例中，当判定该声纹特征属于男性时，可以将图标的颜色改变为蓝色或绿色等自定义设置的颜色，当声音特征为女性时，可以将图标的颜色改变为红色或粉色等自定义设置的颜色。如此，可以按照声音源的性别显示对应的交互界面对象，进一步提高语音交互的效果。
需要说明的是，当交互界面对象为语音助手的交互虚拟图标时，在交互虚拟图标指向声音源方向的过程中，可以同时识别声音源的性别，并按照自定义设置的颜色对交互虚拟图标进行变换；当交互界面对象为语音助手的弹窗时，也可以在读取到声音源的语音信息后判定其性别，并将弹窗的边框显示为自定义的颜色。
本而申请实施例还提供一种交互界面对象的显示方法。
具体为：将交互界面对象向位置方向上旋转预设角度形成3D效果后进行显示。
需要说明的是，向位置方向上旋转即以垂直于车载终端的显示界面的方向向左或右旋转，例如，当主驾驶座相对于车载终端的显示界面在左侧时，交互界面对象沿垂直于交互界面的方向向左旋转，当主驾驶座相对于车载终端的显示界面在右侧时，交互界面对象沿垂直于交互界面的方向向右旋转。如图9所示，图9为本申请实施例提供的再一种显示交互界面对象的示意图，当车载终端将交互虚拟图标进行旋转使其成预设的角度显示于主驾驶座的一侧。
为解决上述技术问题本申请实施例还提供一种车载终端的界面显示装置。具体请参阅图10，图10为本实施例提供的一种车载终端的界面显示装置的基本结构框图。
如图10所示，一种车载终端的界面显示装置，包括：获取模块2100、处理模块2200和执行模块2300。其中，获取模块2100，用于获取声音源在语音交互中产生的语音信息；处理模块2200，用于根据所述语音信息确定所述声音源相对于车载终端的位置方向；执行模块2300，用于按照所述位置方向在车载终端上显示交互界面对象，以使所述交互界面对象在声音源的位置方向上呈现出交互的效果。
车载终端的界面显示装置，根据声音源在语音交互中发出的语音信息来确定声音源的位置方向，以及按照该位置方向在车载终端上显示交互界面对象，从而改变交互界面对象的显示状态使其呈现出与声音源用户交流的效果，该方法不仅可以解决现有技术中图标显示过于单一的问题，还可以实现显示界面与用户的语音交互，增强交互效果。
在一些实施方式中，所述获取模块包括：第一获取子模块，用于在车载终端处于语音交互状态下，分别读取各个声音传感器采集到的语音信息；其中，所述声音传感器至少设置于相对于车载终端的主驾驶座和副驾驶座两个方向上。
在一些实施方式中，所述处理模块包括：第一处理子模块，用于将各个所述声音传感器采集到的语音信息的声音强度进行比对，并将声音强度最大的声音传感器确定为目标传感器；第一执行子模块，用于根据所述目标声音传感器相对于车载终端的方向确定所述声音源相对于车载终端的位置方向。
在一些实施方式中，所述交互界面对象为语音助手的交互虚拟图标；所述执行模块包括：第三执行子模块，用于若所述声音源在相对于车载终端的主驾驶座位置方向上，将所述交互虚拟图标指向相对于车载终端的主驾驶座位置方向；第四执行子模块，用于若所述声音源在相对于车载终端的副驾驶座位置方向上，将所述交互虚拟图标指向相对于车载终端的副驾驶座位置方向。
在一些实施方式中，所述交互界面对象为语音助手的弹窗信息；所述执行模块还包括：第五执行子模块，用于若所述声音源在相对于车载终端的主驾驶座位置方向上，将所述弹窗信息靠近相对于车载终端的主驾驶座位置方向一侧进行显示；第六执行子模块，用于若所述声音源在相对于车载终端的副驾驶座位置方向上，将所述弹窗信息靠近相对于车载终端的副驾驶座位置方向一侧进行显示。
在一些实施方式中，还包括：第二处理子模块，用于提取所述语音信息的声纹特征，根据所述声纹特征识别声音源的性别；第七执行子模块，用于将所述交互界面对象的颜色切换为与所述性别预先匹配的颜色。
在一些实施方式中，还包括：第八执行模块，用于将交互界面对象向位置方向上旋转预设角度形成3D效果后进行显示。
为解决上述技术问题，本申请实施例还提供计算机设备。具体请参阅图11，图11为本实施例计算机设备基本结构框图。
如图11所示，计算机设备的内部结构示意图。如图11所示，该计算机设备包括通过系统总线连接的处理器、非易失性存储介质、存储器和网络接口。其中，该计算机设备的非易失性存储介质存储有操作系统、数据库和计算机可读指令，数据库中可存储有控件信息序列，该计算机可读指令被处理器执行时，可使得处理器实现一种车载终端的界面显示方法。该计算机设备的处理器用于提供计算和控制能力，支撑整个计算机设备的运行。该计算机设备的存储器中可存储有计算机可读指令，该计算机可读指令被处理器执行时，可使得处理器执行一种车载终端的界面显示方法。该计算机设备的网络接口用于与终端连接通信。本领域技术人员可以理解，图11中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
本实施方式中处理器用于执行图10中获取模块2100、处理模块2200和执行模块2300的具体内容，存储器存储有执行上述模块所需的程序代码和各类数据。网络接口用于向用户终端或服务器之间的数据传输。本实施方式中的存储器存储有车载终端的界面显示方法中执行所有子模块所需的程序代码及数据，服务器能够调用服务器的程序代码及数据执行所有子模块的功能。
计算机设备根据声音源在语音交互中发出的语音信息来确定声音源的位置方向，以及按照该位置方向在车载终端上显示交互界面对象，从而改变交互界面对象的显示状态使其呈现出与声音源用户交流的效果，该方法不仅可以解决现有技术中图标显示过于单一的问题，还可以实现显示界面与用户的语音交互，增强交互效果。
为解决上述问题，本申请还提供一种车辆，该车辆的车载终端被配置为执行上述任一实施例所述的车载终端的界面显示方法的步骤。
本实施例中的车辆可以为各种类型的汽车，例如，小型轿车、中型或大型车辆、燃油汽车、电动汽车等。需要说明的是，本实施例中的车辆包含但不限于上述列举的车辆，其它所有包含车载终端的汽车均包含于本实施车辆涉及的范围。
为解决上述问题，本申请还提供一种存储有计算机可读指令的存储介质，所述计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行上述任一实施例所述车载终端的界面显示方法的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random Access Memory，RAM)等。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。
Claims (11)
1.一种车载终端的界面显示方法，其特征在于，包括下述步骤：
获取声音源在语音交互中产生的语音信息；
根据所述语音信息确定所述声音源相对于所述车载终端的位置方向；
按照所述位置方向在所述车载终端上显示交互界面对象，以使所述交互界面对象在所述声音源的位置方向上呈现出交互的效果。
2.根据权利要求1所述的界面显示方法，其特征在于，所述获取声音源在语音交互中产生的语音信息，包括：
在所述车载终端处于语音交互状态下，分别读取各个声音传感器采集到的语音信息；其中，所述声音传感器至少设置于相对于所述车载终端的主驾驶座和副驾驶座两个方向上。
3.根据权利要求1所述的界面显示方法，其特征在于，所述根据所述语音信息确定所述声音源相对于所述车载终端的位置方向，包括：
将各个所述声音传感器采集到的语音信息的声音强度进行比对，并将声音强度最大的声音传感器确定为目标传感器；
根据所述目标声音传感器相对于所述车载终端的方向确定所述声音源相对于所述车载终端的位置方向。
4.根据权利要求2所述的界面显示方法，其特征在于，所述交互界面对象为语音助手的交互虚拟图标；
所述按照所述位置方向在所述车载终端上显示交互界面对象，包括：
若所述声音源在相对于所述车载终端的主驾驶座位置方向上，将所述交互虚拟图标指向相对于所述车载终端的主驾驶座位置方向；
若所述声音源在相对于所述车载终端的副驾驶座位置方向上，将所述交互虚拟图标指向相对于所述车载终端的副驾驶座位置方向。
5.根据权利要求2所述的界面显示方法，其特征在于，所述交互界面对象为语音助手的弹窗信息；
所述按照所述位置方向在所述车载终端上显示交互界面对象，包括：
若所述声音源在相对于所述车载终端的主驾驶座位置方向上，将所述弹窗信息靠近相对于所述车载终端的主驾驶座位置方向一侧进行显示；
若所述声音源在相对于所述车载终端的副驾驶座位置方向上，将所述弹窗信息靠近相对于所述车载终端的副驾驶座位置方向一侧进行显示。
6.根据权利要求1所述的界面显示方法，其特征在于，还包括：
提取所述语音信息的声纹特征，根据所述声纹特征识别所述声音源的性别；
将所述交互界面对象的颜色切换为与所述性别预先匹配的颜色。
7.根据权利要求1所述的界面显示方法，其特征在于，还包括：
将所述交互界面对象向所述位置方向上旋转预设角度形成3D效果后进行显示。
8.一种车载终端的界面显示装置，其特征在于，包括：
获取模块，用于获取声音源在语音交互中产生的语音信息；
处理模块，用于根据所述语音信息确定所述声音源相对于所述车载终端的位置方向；
执行模块，用于按照所述位置方向在所述车载终端上显示交互界面对象，以使所述交互界面对象在所述声音源的位置方向上呈现出交互的效果。
9.一种车辆，其特征在于，该车辆的车载终端被配置为执行如权利要求1至7中任一项权利要求所述车载终端的界面显示方法的步骤。
10.一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项权利要求所述车载终端的界面显示方法的步骤。
11.一种存储有计算机可读指令的存储介质，所述计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行如权利要求1至7中任一项权利要求所述车载终端的界面显示方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910446320.2A CN110171372B (zh) | 2019-05-27 | 2019-05-27 | 车载终端的界面显示方法、装置及车辆 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910446320.2A CN110171372B (zh) | 2019-05-27 | 2019-05-27 | 车载终端的界面显示方法、装置及车辆 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110171372A true CN110171372A (zh) | 2019-08-27 |
| CN110171372B CN110171372B (zh) | 2020-12-15 |
Family
ID=67695939
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910446320.2A Active CN110171372B (zh) | 2019-05-27 | 2019-05-27 | 车载终端的界面显示方法、装置及车辆 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110171372B (zh) |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110868635A (zh) * | 2019-12-04 | 2020-03-06 | 深圳追一科技有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN111640275A (zh) * | 2020-06-10 | 2020-09-08 | 河南天中消防制冷工程有限公司 | 一种消防报警系统 |
| CN111696548A (zh) * | 2020-05-13 | 2020-09-22 | 深圳追一科技有限公司 | 显示行车提示信息的方法、装置、电子设备以及存储介质 |
| CN111752390A (zh) * | 2020-06-27 | 2020-10-09 | 北京百度网讯科技有限公司 | 界面的视觉安全性检测方法、装置、设备以及存储介质 |
| CN111813491A (zh) * | 2020-08-19 | 2020-10-23 | 广州汽车集团股份有限公司 | 一种车载助手的拟人化交互方法、装置及汽车 |
| CN111880693A (zh) * | 2020-07-03 | 2020-11-03 | 芜湖雄狮汽车科技有限公司 | 一种汽车显示屏应用程序列表位置编辑方法和系统 |
| CN112365891A (zh) * | 2020-10-30 | 2021-02-12 | 东风汽车有限公司 | 汽车贯穿屏的车机虚拟语音助手交互方法、电子设备及存储介质 |
| CN112420045A (zh) * | 2020-12-11 | 2021-02-26 | 奇瑞汽车股份有限公司 | 一种汽车车载语音交互系统及方法 |
| CN113782020A (zh) * | 2021-09-14 | 2021-12-10 | 合众新能源汽车有限公司 | 车内语音交互方法和系统 |
| CN115061762A (zh) * | 2022-06-07 | 2022-09-16 | 阿波罗智联(北京)科技有限公司 | 页面的展示方法、装置、电子设备和介质 |
| WO2023019475A1 (zh) * | 2021-08-18 | 2023-02-23 | 阿波罗智联(北京)科技有限公司 | 虚拟个人助理的展示方法、装置、设备、介质及产品 |
| WO2023237079A1 (zh) * | 2022-06-10 | 2023-12-14 | 中国第一汽车股份有限公司 | 基于驾驶行为的交互显示方法、装置、设备及介质 |
| WO2024055566A1 (zh) * | 2022-09-15 | 2024-03-21 | 比亚迪股份有限公司 | 一种车载交互方法、系统、控制器和汽车 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106863300A (zh) * | 2017-02-20 | 2017-06-20 | 北京光年无限科技有限公司 | 一种用于智能机器人的数据处理方法及装置 |
| CN108319171A (zh) * | 2018-02-09 | 2018-07-24 | 广景视睿科技（深圳）有限公司 | 一种基于语音控制的动向投影方法、装置及动向投影系统 |
| CN109462768A (zh) * | 2018-10-25 | 2019-03-12 | 维沃移动通信有限公司 | 一种字幕显示方法及终端设备 |
| CN109493871A (zh) * | 2017-09-11 | 2019-03-19 | 上海博泰悦臻网络技术服务有限公司 | 车载系统的多屏语音交互方法及装置、存储介质和车机 |
| CN110231863A (zh) * | 2018-03-06 | 2019-09-13 | 阿里巴巴集团控股有限公司 | 语音交互方法和车载设备 |
-
2019
- 2019-05-27 CN CN201910446320.2A patent/CN110171372B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106863300A (zh) * | 2017-02-20 | 2017-06-20 | 北京光年无限科技有限公司 | 一种用于智能机器人的数据处理方法及装置 |
| CN109493871A (zh) * | 2017-09-11 | 2019-03-19 | 上海博泰悦臻网络技术服务有限公司 | 车载系统的多屏语音交互方法及装置、存储介质和车机 |
| CN108319171A (zh) * | 2018-02-09 | 2018-07-24 | 广景视睿科技（深圳）有限公司 | 一种基于语音控制的动向投影方法、装置及动向投影系统 |
| CN110231863A (zh) * | 2018-03-06 | 2019-09-13 | 阿里巴巴集团控股有限公司 | 语音交互方法和车载设备 |
| CN109462768A (zh) * | 2018-10-25 | 2019-03-12 | 维沃移动通信有限公司 | 一种字幕显示方法及终端设备 |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110868635B (zh) * | 2019-12-04 | 2021-01-12 | 深圳追一科技有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN110868635A (zh) * | 2019-12-04 | 2020-03-06 | 深圳追一科技有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN111696548A (zh) * | 2020-05-13 | 2020-09-22 | 深圳追一科技有限公司 | 显示行车提示信息的方法、装置、电子设备以及存储介质 |
| CN111640275A (zh) * | 2020-06-10 | 2020-09-08 | 河南天中消防制冷工程有限公司 | 一种消防报警系统 |
| CN111752390B (zh) * | 2020-06-27 | 2024-04-05 | 阿波罗智联(北京)科技有限公司 | 界面的视觉安全性检测方法、装置、设备以及存储介质 |
| CN111752390A (zh) * | 2020-06-27 | 2020-10-09 | 北京百度网讯科技有限公司 | 界面的视觉安全性检测方法、装置、设备以及存储介质 |
| CN111880693A (zh) * | 2020-07-03 | 2020-11-03 | 芜湖雄狮汽车科技有限公司 | 一种汽车显示屏应用程序列表位置编辑方法和系统 |
| CN111813491A (zh) * | 2020-08-19 | 2020-10-23 | 广州汽车集团股份有限公司 | 一种车载助手的拟人化交互方法、装置及汽车 |
| CN111813491B (zh) * | 2020-08-19 | 2020-12-18 | 广州汽车集团股份有限公司 | 一种车载助手的拟人化交互方法、装置及汽车 |
| CN112365891A (zh) * | 2020-10-30 | 2021-02-12 | 东风汽车有限公司 | 汽车贯穿屏的车机虚拟语音助手交互方法、电子设备及存储介质 |
| CN112420045A (zh) * | 2020-12-11 | 2021-02-26 | 奇瑞汽车股份有限公司 | 一种汽车车载语音交互系统及方法 |
| WO2023019475A1 (zh) * | 2021-08-18 | 2023-02-23 | 阿波罗智联(北京)科技有限公司 | 虚拟个人助理的展示方法、装置、设备、介质及产品 |
| CN113782020A (zh) * | 2021-09-14 | 2021-12-10 | 合众新能源汽车有限公司 | 车内语音交互方法和系统 |
| CN115061762A (zh) * | 2022-06-07 | 2022-09-16 | 阿波罗智联(北京)科技有限公司 | 页面的展示方法、装置、电子设备和介质 |
| WO2023237079A1 (zh) * | 2022-06-10 | 2023-12-14 | 中国第一汽车股份有限公司 | 基于驾驶行为的交互显示方法、装置、设备及介质 |
| WO2024055566A1 (zh) * | 2022-09-15 | 2024-03-21 | 比亚迪股份有限公司 | 一种车载交互方法、系统、控制器和汽车 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110171372B (zh) | 2020-12-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110171372A (zh) | 车载终端的界面显示方法、装置及车辆 | |
| US20230396704A1 (en) | Systems, devices, and methods for generating messages | |
| US10891969B2 (en) | Transforming audio content into images | |
| CN105333883B (zh) | 一种用于抬头显示器的导航路径轨迹显示方法和装置 | |
| CN109599113A (zh) | 用于处理信息的方法和装置 | |
| US20140313208A1 (en) | Emotive engine and method for generating a simulated emotion for an information system | |
| CN112750206A (zh) | 用于车辆乘员的增强现实可穿戴系统 | |
| CN107992188A (zh) | 虚拟现实交互方法、装置与系统 | |
| EP3966755A1 (en) | Methods, systems and computer program products for media processing and display | |
| WO2021016873A1 (zh) | 基于级联神经网络的注意力检测方法、计算机装置及计算机可读存储介质 | |
| JP2019511019A (ja) | オンデマンドサービス用に車両情報を表示するためのシステムおよび方法 | |
| CN108281138A (zh) | 年龄判别模型训练及智能语音交互方法、设备及存储介质 | |
| CN109840654A (zh) | 车辆驾驶行为的分析方法、装置、系统和计算机设备 | |
| CN110400254A (zh) | 一种口红试妆方法及装置 | |
| CN114043939B (zh) | 一种使用全息投影技术的车载中控系统及控制方法 | |
| CN115312061A (zh) | 驾驶场景中的语音问答方法、装置及车载终端 | |
| CN113782020A (zh) | 车内语音交互方法和系统 | |
| CN108566247A (zh) | 一种车载互联互通的交互方法、可读存储介质和车载终端 | |
| CN110362698A (zh) | 一种图片信息生成方法、装置、移动终端及存储介质 | |
| US20140168058A1 (en) | Apparatus and method for recognizing instruction using voice and gesture | |
| CN106599185A (zh) | 基于hsv的图像相似度识别方法 | |
| CN109828520A (zh) | 一种智能电动汽车hmi人机交互系统 | |
| CN115214696A (zh) | 一种车机虚拟形象交互方法、系统、车辆及存储介质 | |
| CN115410182A (zh) | 人体姿态估计方法、装置、存储介质及计算机设备 | |
| CN208630519U (zh) | 车载智能设备和车辆 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 510000 No.8 Songgang street, Cencun, Tianhe District, Guangzhou City, Guangdong Province Applicant after: GUANGZHOU XPENG AUTOMOBILE TECHNOLOGY Co.,Ltd. Address before: 510640 Room 245, 333 Jiufojian Road, Zhongxin Guangzhou Knowledge City, Guangzhou, Guangdong Province Applicant before: GUANGZHOU XPENG AUTOMOBILE TECHNOLOGY Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |