CN117565808A - 一种基于唱歌的车载人机交互方法、系统、介质及设备 - Google Patents

一种基于唱歌的车载人机交互方法、系统、介质及设备 Download PDF

Info

Publication number
CN117565808A
CN117565808A CN202311580299.8A CN202311580299A CN117565808A CN 117565808 A CN117565808 A CN 117565808A CN 202311580299 A CN202311580299 A CN 202311580299A CN 117565808 A CN117565808 A CN 117565808A
Authority
CN
China
Prior art keywords
vehicle
interaction
singing
action
singed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311580299.8A
Other languages
English (en)
Inventor
蔡森矗
刘俊峰
张莹
冉光伟
汪华锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xinghe Zhilian Automobile Technology Co Ltd
Original Assignee
Xinghe Zhilian Automobile Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xinghe Zhilian Automobile Technology Co Ltd filed Critical Xinghe Zhilian Automobile Technology Co Ltd
Priority to CN202311580299.8A priority Critical patent/CN117565808A/zh
Publication of CN117565808A publication Critical patent/CN117565808A/zh
Pending legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G06F16/90335—Query processing
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Computational Linguistics (AREA)
  • Transportation (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明公开了一种基于唱歌的车载人机交互方法、系统、介质及设备，所述方法包括：获取当前播放的待唱曲目；对所述待唱曲目进行识别，得到对应的歌词词意；根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库；基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作。本发明能够当在汽车座舱内唱歌时，使得车载显示屏所显示的虚拟智能助手能够基于所唱曲目、以及车内乘客的实时状态设置并调整其交互动作，并且还可以控制车内其他部件基于所唱曲目、以及车内乘客的实时状态设置并调整相关的交互，从而在汽车座舱上实现更丰富、更拟人化且交互体验更好的人机交互。

Description

一种基于唱歌的车载人机交互方法、系统、介质及设备
技术领域
本发明涉及人机交互领域，尤其涉及一种基于唱歌的车载人机交互方法、系统、介质及设备。
背景技术
随着汽车座舱的进一步升级，汽车座舱成为用户重要的出行生活空间，特别的，汽车座舱在一些特殊的用户场景下可以为用户提供唱歌应用，例如用户在驾车到野外露营并存在唱歌需求时，就会用到车载的唱歌系统。随着语音识别能力以及自然语言能力的技术提升，语音助理被更多的搭载在汽车座舱内，以作为车载人机交互方式的重要体现。而智能助理也经常结合有趣的人物形象出现在座舱内，但现有技术中，智能助理往往只能通过简单的语音或按键与用户进行交互，且智能助理所执行的交互动作比较呆板固定。
发明内容
本发明实施例提出了一种基于唱歌的车载人机交互方法、系统、介质及设备。
本发明实施例提供了一种基于唱歌的车载人机交互方法，包括：
获取当前播放的待唱曲目；
对所述待唱曲目进行识别，得到对应的歌词词意；
根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库；
基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作。
进一步的，在基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作之后，还包括：
获取车内乘客的状态信息；其中，所述车内乘客包括主唱人，或主唱人和听众，所述状态信息用于表征所述车内乘客在唱歌，或所述车内乘客在听唱歌时的状态；
对所述状态信息进行识别，并判断是否识别到所述车内乘客的情绪特征；
若是，则基于所述待唱曲目、所述交互动作库和所述情绪特征，控制所述车载显示屏显示虚拟智能助手执行的第二交互动作。
进一步的，所述对所述待唱曲目进行识别，得到对应的歌词词意，具体包括：
对所述待唱曲目进行词意识别，得到对应的主歌词意以及副歌词意。
进一步的，所述歌词词意包括特殊歌词词意；
则，所述基于唱歌的车载人机交互方法，还包括：
根据所述特殊歌词词意，控制车载执行部件执行定制动作；其中，所述定制动作包括车载天窗的开闭、车载氛围灯的打开与关闭，或远光灯的打开与关闭。
进一步的，所述歌词词意包括若干单词词意以及每一所述单词词意所对应的时间点；
则，所述根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，具体包括：
根据每一所述单词词意，从所述交互动作数据总库中匹配得到对应的交互动作；
基于每一所述单词词意、每一所述单词词意所对应的时间点以及每一所述单词词意所对应的交互动作，构建与所述歌词词意对应的交互动作库。
进一步的，所述交互动作库中包括通用交互、动作交互或互动背景交互。
本发明实施例还提供了一种基于唱歌的车载人机交互系统，包括：云端、车载控制端和车载显示屏；
所述车载控制端用于获取当前播放的待唱曲目，并上传至所述云端；
所述云端用于对所述待唱曲目进行识别，得到对应的歌词词意；根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，并将所述交互动作库发送至所述车载控制端；
所述车载控制端还用于基于所述待唱曲目和所述交互动作库，控制所述车载显示屏显示虚拟智能助手执行的第一交互动作。
进一步的，还包括车载执行部件；所述歌词词意包括特殊歌词词意；
则，所述车载控制端还用于：
根据所述特殊歌词词意，控制车载执行部件执行定制动作；其中，所述定制动作包括车载天窗的开闭、车载氛围灯的打开与关闭，或远光灯的打开与关闭。
本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一项所述的基于唱歌的车载人机交互方法的步骤。
本发明实施例还提供了一种计算机设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现上述任一项所述的基于唱歌的车载人机交互方法的步骤。
综上，本发明具有以下有益效果：
采用本发明实施例，能够当在汽车座舱内唱歌时，使得车载显示屏所显示的虚拟智能助手能够基于所唱曲目、以及车内乘客的实时状态设置并调整其交互动作，并且还可以控制车内其他部件基于所唱曲目、以及车内乘客的实时状态设置并调整相关的交互，从而在汽车座舱上实现更丰富、更拟人化且交互体验更好的人机交互。
附图说明
图1是本发明提供的一种基于唱歌的车载人机交互方法的一个实施例的流程示意图；
图2是本发明提供的一种基于唱歌的车载人机交互系统的一个实施例的结构示意图；
图3是本发明提供的一种基于唱歌的车载人机交互方法的一个具体实施例的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，是本发明提供的基于唱歌的车载人机交互方法的一个实施例的流程示意图，该方法包括步骤S1至S4，具体如下：
S1,获取当前播放的待唱曲目；
S2,对所述待唱曲目进行识别，得到对应的歌词词意；
S3,根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库；
S4,基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作。
示例性的，所述第一交互动作是指虚拟智能助手所执行的拟人化动作。
示例性的，对所述待唱曲目进行识别，具体包括：对所述待唱曲目的前奏进行识别。
优选地，在基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作之后，还包括：
获取车内乘客的状态信息；其中，所述车内乘客包括主唱人，或主唱人和听众，所述状态信息用于表征所述车内乘客在唱歌，或所述车内乘客在听唱歌时的状态；
对所述状态信息进行识别，并判断是否识别到所述车内乘客的情绪特征；
若是，则基于所述待唱曲目、所述交互动作库和所述情绪特征，控制所述车载显示屏显示虚拟智能助手执行的第二交互动作。
可以理解的是，在对车载显示屏进行控制的控制因素当中加入的情绪特征，主要用于调整交互动作库当中相应交互动作的强度。
需要说明的是，所述获取车内乘客的状态信息，可以是通过图像信息的方式获取，例如拍摄车内乘客的视频或图像等，也可以是通过语音信息的方式获取，例如对车内乘客的声音等进行实时录音，在此不作具体限定。
需要说明的是，所述对所述状态信息进行识别，可以是将所述状态信息输入至预先训练好的情绪特征提取模型，得到所述情绪特征提取模型输出的情绪特征，进而根据所述情绪特征提取模型输出的结果，判断是否识别到所述车内乘客的情绪特征。其中，所述情绪特征提取模型可根据所述状态信息的具体载体进行设置，示例性的，当所述状态信息为图像信息时，所述情绪特征提取模型为图像的特征提取模型；当所述状态信息为声音信息时，所述情绪特征提取模型为声音的特征提取模型。
优选地，所述对所述待唱曲目进行识别，得到对应的歌词词意，具体包括：
对所述待唱曲目进行词意识别，得到对应的主歌词意以及副歌词意。
可以理解的是，采用语音识别模型对所述待唱曲目进行识别，而不同于常用的语音识别的模型，对歌词进行词意识别需要将歌词分成主歌和副歌两个部分，且主歌和副歌分别对应不同类型的交互库，从而能够提高词意识别的准确率。
优选地，所述歌词词意包括特殊歌词词意；
则，所述基于唱歌的车载人机交互方法，还包括：
根据所述特殊歌词词意，控制车载执行部件执行定制动作；其中，所述定制动作包括车载天窗的开闭、车载氛围灯的打开与关闭，或远光灯的打开与关闭。
示例性的，可以定制“天”相关的语义，则触发语义时，控制车载天窗打开；定制“左”“右”相关的语义，则触发语义时，控制左右氛围灯相应进行响应；定义“远”相关的语义，则触发语义时，打开远光灯，从而给予用户更丰富的交互体验。
优选地，所述歌词词意包括若干单词词意以及每一所述单词词意所对应的时间点；
则，所述根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，具体包括：
根据每一所述单词词意，从所述交互动作数据总库中匹配得到对应的交互动作；
基于每一所述单词词意、每一所述单词词意所对应的时间点以及每一所述单词词意所对应的交互动作，构建与所述歌词词意对应的交互动作库。
需要说明的是，与所述歌词词意对应的交互动作库的构建具体为：将每一所述单词词意所对应的交互动作，分别一一对应设置到每一所述单词词意和每一所述单词词意所对应的时间点当中，以构建得到与所述歌词词意对应的交互动作库。
优选地，所述交互动作库中包括通用交互、动作交互或互动背景交互。
需要说明的是，所述通用交互执行的不是歌词里面的动作，示例性的，为鼓掌、欢呼、挥手、跳舞等等这一类K歌(唱歌)场景下的氛围交互动作。所述动作交互是指识别到歌词中的动词，虚拟智能助理执行歌词里面的动词对应的交互动作，示例性的，“我听见雨滴落在轻轻草地”这句歌词在识别之后、智能助理可以执行“听”这一动词所对应的动作，“我看见远方下课钟声想起”这句歌词在识别之后，智能助理可以执行“看”这一动词所对应的动作。所述互动背景交互是指智能助理的背景根据歌词中识别出来的歌词进行背景交互，示例性的，“我听见雨滴落在轻轻草地”这句歌词在识别之后，识别到“雨滴”、“草地”，则智能助理的背景中可以出现雨滴、草地。
实施例一，参见图3，为本发明提供的一种基于唱歌的车载人机交互方法的一个具体实施例的示意图。
参见图2，是本发明提供的基于唱歌的车载人机交互系统的一个实施例的结构示意图,包括：云端101、车载控制端102和车载显示屏103；
所述车载控制端102用于获取当前播放的待唱曲目，并上传至所述云端101；
所述云端101用于对所述待唱曲目进行识别，得到对应的歌词词意；根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，并将所述交互动作库发送至所述车载控制端102；
所述车载控制端102还用于基于所述待唱曲目和所述交互动作库，控制所述车载显示屏103显示虚拟智能助手执行的第一交互动作。
示例性的，对所述待唱曲目进行识别，具体包括：对所述待唱曲目的前奏进行识别。
示例性的，所述第一交互动作是指虚拟智能助手所执行的拟人化动作。
优选地，所述车载控制端102，在基于所述待唱曲目和所述交互动作库，控制车载显示屏103显示虚拟智能助手执行的第一交互动作之后，还用于
获取车内乘客的状态信息；其中，所述车内乘客包括主唱人，或主唱人和听众，所述状态信息用于表征所述车内乘客在唱歌，或所述车内乘客在听唱歌时的状态；
对所述状态信息进行识别，并判断是否识别到所述车内乘客的情绪特征；
若是，则基于所述待唱曲目、所述交互动作库和所述情绪特征，控制所述车载显示屏103显示虚拟智能助手执行的第二交互动作。
可以理解的是，在对车载显示屏103进行控制的控制因素当中加入的情绪特征，主要用于调整交互动作库当中相应交互动作的强度。
需要说明的是，所述获取车内乘客的状态信息，可以是通过图像信息的方式获取，例如拍摄车内乘客的视频或图像等，也可以是通过语音信息的方式获取，例如对车内乘客的声音等进行实时录音，在此不作具体限定。
需要说明的是，所述对所述状态信息进行识别，可以是将所述状态信息输入至预先训练好的情绪特征提取模型，得到所述情绪特征提取模型输出的情绪特征，进而根据所述情绪特征提取模型输出的结果，判断是否识别到所述车内乘客的情绪特征。其中，所述情绪特征提取模型可根据所述状态信息的具体载体进行设置，示例性的，当所述状态信息为图像信息时，所述情绪特征提取模型为图像的特征提取模型；当所述状态信息为声音信息时，所述情绪特征提取模型为声音的特征提取模型。
优选地，所述对所述待唱曲目进行识别，得到对应的歌词词意，具体包括：
对所述待唱曲目进行词意识别，得到对应的主歌词意以及副歌词意。
可以理解的是，采用语音识别模型对所述待唱曲目进行识别，而不同于常用的语音识别的模型，对歌词进行词意识别需要将歌词分成主歌和副歌两个部分，且主歌和副歌分别对应不同类型的交互库，从而能够提高词意识别的准确率。
优选地，还包括车载执行部件；所述歌词词意包括特殊歌词词意；
则，所述车载控制端102还用于：
根据所述特殊歌词词意，控制车载执行部件执行定制动作；其中，所述定制动作包括车载天窗的开闭、车载氛围灯的打开与关闭，或远光灯的打开与关闭。
示例性的，可以定制“天”相关的语义，则触发语义时，控制车载天窗打开；定制“左”“右”相关的语义，则触发语义时，控制左右氛围灯相应进行响应；定义“远”相关的语义，则触发语义时，打开远光灯，从而给予用户更丰富的交互体验。
优选地，所述歌词词意包括若干单词词意以及每一所述单词词意所对应的时间点；
则，所述根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，具体包括：
根据每一所述单词词意，从所述交互动作数据总库中匹配得到对应的交互动作；
基于每一所述单词词意、每一所述单词词意所对应的时间点以及每一所述单词词意所对应的交互动作，构建与所述歌词词意对应的交互动作库。
需要说明的是，与所述歌词词意对应的交互动作库的构建具体为：将每一所述单词词意所对应的交互动作，分别一一对应设置到每一所述单词词意和每一所述单词词意所对应的时间点当中，以构建得到与所述歌词词意对应的交互动作库。
优选地，所述交互动作库中包括通用交互、动作交互或互动背景交互。
需要说明的是，所述通用交互执行的不是歌词里面的动作，示例性的，为鼓掌、欢呼、挥手、跳舞等等这一类K歌(唱歌)场景下的氛围交互动作。所述动作交互是指识别到歌词中的动词，虚拟智能助理执行歌词里面的动词对应的交互动作，示例性的，“我听见雨滴落在轻轻草地”这句歌词在识别之后、智能助理可以执行“听”这一动词所对应的动作，“我看见远方下课钟声想起”这句歌词在识别之后，智能助理可以执行“看”这一动词所对应的动作。所述互动背景交互是指智能助理的背景根据歌词中识别出来的歌词进行背景交互，示例性的，“我听见雨滴落在轻轻草地”这句歌词在识别之后，识别到“雨滴”、“草地”，则智能助理的背景中可以出现雨滴、草地。
本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一项所述的基于唱歌的车载人机交互方法的步骤。
本发明实施例还提供了一种计算机设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现上述任一项所述的基于唱歌的车载人机交互方法的步骤。
该实施例的计算机设备包括：处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，例如基于唱歌的车载人机交互程序。所述处理器执行所述计算机程序时实现上述各个基于唱歌的车载人机交互方法实施例中的步骤，例如图1所示的步骤S1至S4。
示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述计算机设备中的执行过程。
所述计算机设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机设备可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，所述示意图仅仅是计算机设备的示例，并不构成对计算机设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述计算机设备还可以包括输入输出设备、网络接入设备、总线等。
所述处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述计算机设备的控制中心，利用各种接口和线路连接整个计算机设备的各个部分。
所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述计算机设备的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
其中，所述计算机设备集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。
综上，本发明具有以下有益效果：
采用本发明实施例，能够当在汽车座舱内唱歌时，使得车载显示屏所显示的虚拟智能助手能够基于所唱曲目、以及车内乘客的实时状态设置并调整其交互动作，并且还可以控制车内其他部件基于所唱曲目、以及车内乘客的实时状态设置并调整相关的交互，从而在汽车座舱上实现更丰富、更拟人化且交互体验更好的人机交互。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的硬件平台的方式来实现，当然也可以全部通过硬件来实施。基于这样的理解，本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (10)

1.一种基于唱歌的车载人机交互方法，其特征在于，包括：
获取当前播放的待唱曲目；
对所述待唱曲目进行识别，得到对应的歌词词意；
根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库；
基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作。
2.如权利要求1所述的基于唱歌的车载人机交互方法，其特征在于，在基于所述待唱曲目和所述交互动作库，控制车载显示屏显示虚拟智能助手执行的第一交互动作之后，还包括：
获取车内乘客的状态信息；其中，所述车内乘客包括主唱人，或主唱人和听众，所述状态信息用于表征所述车内乘客在唱歌，或所述车内乘客在听唱歌时的状态；
对所述状态信息进行识别，并判断是否识别到所述车内乘客的情绪特征；
若是，则基于所述待唱曲目、所述交互动作库和所述情绪特征，控制所述车载显示屏显示虚拟智能助手执行的第二交互动作。
3.如权利要求1所述的基于唱歌的车载人机交互方法，其特征在于，所述对所述待唱曲目进行识别，得到对应的歌词词意，具体包括：
对所述待唱曲目进行词意识别，得到对应的主歌词意以及副歌词意。
4.如权利要求1所述的基于唱歌的车载人机交互方法，其特征在于，所述歌词词意包括特殊歌词词意；
则，所述基于唱歌的车载人机交互方法，还包括：
根据所述特殊歌词词意，控制车载执行部件执行定制动作；其中，所述定制动作包括车载天窗的开闭、车载氛围灯的打开与关闭，或远光灯的打开与关闭。
5.如权利要求1所述的基于唱歌的车载人机交互方法，其特征在于，所述歌词词意包括若干单词词意以及每一所述单词词意所对应的时间点；
则，所述根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，具体包括：
根据每一所述单词词意，从所述交互动作数据总库中匹配得到对应的交互动作；
基于每一所述单词词意、每一所述单词词意所对应的时间点以及每一所述单词词意所对应的交互动作，构建与所述歌词词意对应的交互动作库。
6.如权利要求1所述的基于唱歌的车载人机交互方法，其特征在于，所述交互动作库中包括通用交互、动作交互或互动背景交互。
7.一种基于唱歌的车载人机交互系统，其特征在于，包括：云端、车载控制端和车载显示屏；
所述车载控制端用于获取当前播放的待唱曲目，并上传至所述云端；
所述云端用于对所述待唱曲目进行识别，得到对应的歌词词意；根据所述歌词词意从预设的交互动作数据总库中进行匹配，以构建对应的交互动作库，并将所述交互动作库发送至所述车载控制端；
所述车载控制端还用于基于所述待唱曲目和所述交互动作库，控制所述车载显示屏显示虚拟智能助手执行的第一交互动作。
8.如权利要求7所述的基于唱歌的车载人机交互系统，其特征在于，还包括车载执行部件；所述歌词词意包括特殊歌词词意；
则，所述车载控制端还用于：
根据所述特殊歌词词意，控制车载执行部件执行定制动作；其中，所述定制动作包括车载天窗的开闭、车载氛围灯的打开与关闭，或远光灯的打开与关闭。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1至6任一项所述的基于唱歌的车载人机交互方法。
10.一种计算机设备，其特征在于，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至6任一项所述的基于唱歌的车载人机交互方法。
CN202311580299.8A 2023-11-23 2023-11-23 一种基于唱歌的车载人机交互方法、系统、介质及设备 Pending CN117565808A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311580299.8A CN117565808A (zh) 2023-11-23 2023-11-23 一种基于唱歌的车载人机交互方法、系统、介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311580299.8A CN117565808A (zh) 2023-11-23 2023-11-23 一种基于唱歌的车载人机交互方法、系统、介质及设备

Publications (1)

Publication Number Publication Date
CN117565808A true CN117565808A (zh) 2024-02-20

Family

ID=89889602

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311580299.8A Pending CN117565808A (zh) 2023-11-23 2023-11-23 一种基于唱歌的车载人机交互方法、系统、介质及设备

Country Status (1)

Country Link
CN (1) CN117565808A (zh)

Similar Documents

Publication Publication Date Title
EP3496098B1 (en) Generating personalized audio content based on mood
US11514884B2 (en) Driving sound library, apparatus for generating driving sound library and vehicle comprising driving sound library
CN111916088B (zh) 一种语音语料的生成方法、设备及计算机可读存储介质
CN111192594B (zh) 人声和伴奏分离方法及相关产品
CN112017650B (zh) 电子设备的语音控制方法、装置、计算机设备和存储介质
CN112937432A (zh) 车辆发声装置的控制方法、装置、设备及存储介质
CN115079989A (zh) 车辆及其控制方法
CN115107672A (zh) 一种车辆控制方法及车辆
CN110737422B (zh) 一种声音信号采集方法及装置
CN117565808A (zh) 一种基于唱歌的车载人机交互方法、系统、介质及设备
CN116346900A (zh) 基于车内乘客情绪的媒体推荐方法、装置、车辆及介质
CN115938340A (zh) 基于车载语音ai的语音数据处理方法及相关设备
CN114734942A (zh) 调节车载音响音效的方法及装置
CN115145779A (zh) 一种车机测试方法、装置、电子设备和存储介质
CN113709954A (zh) 一种氛围灯的控制方法、装置、电子设备及存储介质
CN113035181A (zh) 语音数据处理方法、设备和系统
CN107967308B (zh) 一种智能交互的处理方法、装置、设备和计算机存储介质
EP4365888A1 (en) Method and apparatus for processing audio data
WO2022121617A1 (zh) 一种k歌方法、车载终端及汽车
WO2024001462A1 (zh) 歌曲播放方法、装置、计算机设备和计算机可读存储介质
CN117975958A (zh) 车辆语音交互方法、装置、电子设备、存储介质及车辆
CN117435704A (zh) 车载对话系统回复语生成方法、装置、车辆及存储介质
CN115237368A (zh) 一种基于个性化数据和多模态语音输入的车载音乐切换方法、系统及其车辆
CN116884387A (zh) 音频合成方法、装置、终端设备及存储介质
CN113257224A (zh) 用于多轮对话的tts优化方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination