CN110047487B - 车载语音设备的唤醒方法、装置、车辆以及机器可读介质 - Google Patents

车载语音设备的唤醒方法、装置、车辆以及机器可读介质 Download PDF

Info

Publication number
CN110047487B
CN110047487B CN201910485184.8A CN201910485184A CN110047487B CN 110047487 B CN110047487 B CN 110047487B CN 201910485184 A CN201910485184 A CN 201910485184A CN 110047487 B CN110047487 B CN 110047487B
Authority
CN
China
Prior art keywords
awakening
user
vehicle
wake
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910485184.8A
Other languages
English (en)
Other versions
CN110047487A (zh
Inventor
曾郁荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xiaopeng Motors Technology Co Ltd
Original Assignee
Guangzhou Xiaopeng Motors Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xiaopeng Motors Technology Co Ltd filed Critical Guangzhou Xiaopeng Motors Technology Co Ltd
Priority to CN201910485184.8A priority Critical patent/CN110047487B/zh
Publication of CN110047487A publication Critical patent/CN110047487A/zh
Application granted granted Critical
Publication of CN110047487B publication Critical patent/CN110047487B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明实施例提供了一种车载语音设备的唤醒方法、装置、车辆以及机器可读介质，所述方法包括：通过采集车内用户的图像数据，接着从图像数据中，确定与用户对应的用户场景，并根据用户场景，调节车载语音设备的唤醒阈值，然后根据唤醒阈值，对车载语音设备进行唤醒，从而通过实时监测与车内用户对应的用户场景，对车载语音设备的唤醒阈值进行实时调节，调节车载语音设备的语音识别的灵敏度，进而在不同情况的行车场景下，一方面能够使用户能够较为准确且方便地唤醒车载语音设备，提高了用户与语音设备的唤醒交互效率，另一方面通过调节唤醒阈值，可以有效地避免错误唤醒的概率。

Description

车载语音设备的唤醒方法、装置、车辆以及机器可读介质
技术领域
本发明涉及智能车辆技术领域，特别是涉及一种车载语音设备的唤醒方法、装置、车辆以及机器可读介质。
背景技术
当前车载智能语音设备的人机唤醒交互方式是通过用户输入语音“唤醒词”后，“语音识别”成功从而唤醒语音设备。然而，仅通过语音感知的交互方式，不仅对唤醒词的要求高(如需要预先设置字数为3-5个且避免口语化的唤醒词，同时要求唤醒词的音节覆盖尽量多)，其次还存在较难唤醒或者是较高的误唤醒率，同时用户在进行唤醒时，每次都需要语音输入同一个“唤醒词”，唤醒过程复杂。因此，需要一种能够简化车载智能语音设备的唤醒，以及降低错误唤醒概率的技术方案。
发明内容
鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种车载语音设备的唤醒方法、装置、车辆以及机器可读介质。
为了解决上述问题，一方面，提供了一种车载语音设备的唤醒方法，包括：
采集车内用户的图像数据；
从所述图像数据中，确定与所述用户对应的用户场景；
根据所述用户场景，调节车载语音设备的唤醒阈值；
根据所述唤醒阈值，对所述车载语音设备进行唤醒。
可选地，所述根据所述唤醒阈值，对所述车载语音设备进行唤醒，包括：
获取所述用户输入的语音信息，并计算与所述语音信息对应的唤醒值；
当所述唤醒值大于或等于所述唤醒阈值时，对所述车载语音设备进行唤醒。
可选地，所述用户场景包括单人场景，所述根据所述用户场景，调节车载语音设备的唤醒阈值，包括：
当识别到所述用户场景为单人场景时，从所述图像数据中获取所述用户的动作信息；
将所述用户的动作信息与预设的动作信息进行匹配；
根据匹配结果，调节所述车载语音设备的唤醒阈值。
可选地，所述用户场景还包括多人场景，所述根据所述用户场景，调节车载语音设备的唤醒阈值，还包括：
当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
可选地，多人场景包括多人娱乐场景以及多人对话场景，所述当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值，包括：
当识别到所述用户场景为多人娱乐场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值；
或，
当识别到所述用户场景为多人对话场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
可选地，所述唤醒阈值包括若干个不同唤醒等级的唤醒阈值，所述根据匹配结果，调节所述车载语音设备的唤醒阈值，包括：
获取所述唤醒阈值与预设的唤醒等级的映射关系；
确定所述匹配结果与所述唤醒等级匹配的目标唤醒等级；
采用所述映射关系，将所述唤醒阈值调节为与所述目标唤醒等级适配的目标唤醒阈值。
可选地，不同唤醒等级对应不同的预设唤醒条件，所述方法还包括：
当所述匹配结果满足预设第一唤醒条件时，采用所述映射关系，将当前的唤醒阈值调节为与所述第一唤醒条件对应的第一唤醒阈值；
当所述匹配结果满足预设第二唤醒条件时，采用所述映射关系，将当前的第一唤醒阈值调节为与所述第二唤醒条件对应的第二唤醒阈值；
其中，所述第一唤醒条件对应的唤醒等级，低于所述第二唤醒条件对应的唤醒等级一个等级。
可选地，所述根据匹配结果，调节所述车载语音设备的唤醒阈值，包括：
当所述用户当前的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值。
可选地，所述当所述用户的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值，包括：
当所述用户当前的手部动作信息与预设的手部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的面部动作信息与预设的面部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的唇部动作信息与预设的唇部动作信息匹配成功时，减小所述唤醒阈值。
另一方面，还提供了一种车载语音设备的唤醒装置，包括：
图像获取模块，用于采集车内用户的图像数据；
场景确定模块，用于从所述图像数据中，确定与所述用户对应的用户场景；
阈值调节模块，用于根据所述用户场景，调节车载语音设备的唤醒阈值；
唤醒模块，用于根据所述唤醒阈值，对所述车载语音设备进行唤醒。
可选地，所述唤醒模块包括：
唤醒值计算子模块，用于获取所述用户输入的语音信息，并计算与所述语音信息对应的唤醒值；
判断子模块，用于当所述唤醒值大于或等于所述唤醒阈值时，对所述车载语音设备进行唤醒。
可选地，所述用户场景包括单人场景，所述阈值调节模块包括：
动作信息获取子模块，用于当识别到所述用户场景为单人场景时，从所述图像数据中获取所述用户的动作信息；
动作信息匹配子模块，用于将所述用户的动作信息与预设的动作信息进行匹配；
第一调节子模块，用于根据匹配结果，调节所述车载语音设备的唤醒阈值。
可选地，所述用户场景还包括多人场景，所述阈值调节模块还包括：
第二调节子模块，用于当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
可选地，所述多人场景包括多人娱乐场景以及多人对话场景，所述第二调节子模块具体用于：
当识别到所述用户场景为多人娱乐场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值；
或，
当识别到所述用户场景为多人对话场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
可选地，所述唤醒阈值包括若干个不同唤醒等级的唤醒阈值，所述第一调节子模块包括：
映射关系获取单元，用于获取所述唤醒阈值与预设的唤醒等级的映射关系；
目标等级确定单元，用于确定所述匹配结果与所述唤醒等级匹配的目标唤醒等级；
目标阈值调节单元，用于采用所述映射关系，将所述唤醒阈值调节为与所述目标唤醒等级适配的目标唤醒阈值。
可选地，不同唤醒等级对应不同的预设唤醒条件，所述装置还包括：
第一阈值调节单元，用于当所述匹配结果满足预设第一唤醒条件时，采用所述映射关系，将当前的唤醒阈值调节为与所述第一唤醒条件对应的第一唤醒阈值；
第二阈值调节单元，用于当所述匹配结果满足预设第二唤醒条件时，采用所述映射关系，将当前的第一唤醒阈值调节为与所述第二唤醒条件对应的第二唤醒阈值；
其中，所述第一唤醒条件对应的唤醒等级，低于所述第二唤醒条件对应的唤醒等级一个等级。
可选地，所述第一调节子模块包括：
阈值减小单元，用于当所述用户当前的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值。
可选地，所述阈值减小单元具体用于：
当所述用户当前的手部动作信息与预设的手部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的面部动作信息与预设的面部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的唇部动作信息与预设的唇部动作信息匹配成功时，减小所述唤醒阈值。
另一方面，还提供了一种车辆，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述车辆执行如上所述的一个或多个的方法。
另一方面，还提供了一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行如上所述的一个或多个的方法。
本发明实施例包括以下优点：
在本发明实施例中，通过采集车内用户的图像数据，接着从图像数据中，确定与用户对应的用户场景，并根据用户场景，调节车载语音设备的唤醒阈值，然后根据唤醒阈值，对车载语音设备进行唤醒，从而通过实时监测与车内用户对应的用户场景，对车载语音设备的唤醒阈值进行实时调节，调节车载语音设备的语音识别的灵敏度，进而在不同情况的行车场景下，一方面能够使用户能够较为准确且方便地唤醒车载语音设备，提高了用户与语音设备的唤醒交互效率，另一方面通过调节唤醒阈值，可以有效地避免错误唤醒的概率。
附图说明
图1是本发明的一种车载语音设备的唤醒方法实施例一的步骤流程图；
图2是本发明的一种车载语音设备的唤醒方法实施例二的步骤流程图；
图3是本发明的一种车载语音设备的唤醒方法实施例二中唤醒手势示意图；
图4是本发明的一种车载语音设备的唤醒装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1，示出了本发明的一种车载语音设备的唤醒方法实施例一的步骤流程图，具体可以包括如下步骤：
步骤101，采集车内用户的图像数据；
作为一种示例，在智能车辆的车载语音设备的人机唤醒中，采用的是通过用户输入语音“唤醒词”，接着由车载语音设备进行语音识别，并唤醒语音设备。其中，在行车场景中，乘客可能在车内进行语音通话，在通话的过程中，车载语音设备可能会对乘客的语音内容进行语音识别，若识别成功，则会错误唤醒车载语音设备。
在本发明实施例中，可以通过设置于车辆车内的图像采集器或传感器获取车内用户的图像数据。如可以在车辆车内设置若干个摄像头，采集车内乘客的图像数据，具体的，可以在车辆的中控大屏上设置摄像头，采集主驾以及副驾的图像数据。还可以在车辆内设置红外设备，对车内乘客进行虹膜识别等。
在本发明实施例的一种示例中，在行车场景中，主驾可能进行语音通话，或与副驾进行交谈，在人机对话或用户间对话的过程中，车载语音系统可以采集到用户的语音信息，并进行识别，此时有可能实现唤醒，从而在用户未主动进行唤醒时，车载语音设备实现了误唤醒，浪费车载资源，影响用户体验。因此，在本发明实施例中，可以通过在车辆中预设的摄像头，采集车内乘客的图像数据，进而可以根据图像数据，对车载语音设备的语音识别进行调节。
需要说明的是，在本发明实施例中以摄像头采集车内用户的图像数据为例进行示例性说明，本领域技术人员在本发明的思想指导下，还可以采用红外设备等识别其他生物特征的方式，采集用户的动作信息，本发明对此不作限制。
步骤102，从图像数据中，确定与用户对应的用户场景；
在本发明实施例中，当采集了车内乘客的图像数据后，对图像数据进行图像识别，从而可以确定与当前车内用户对应的用户场景。
在具体实现中，用户场景可以包括单人场景以及多人场景，其中，单人场景为车内只有一名用户的场景，多人场景则为车内有至少两名以上用户的场景。当采集了车内乘客的图像数据后，可以从图像中识别出车内用户的人数，从而进行场景识别，确定当前的车内场景为单人场景，或是多人场景。
步骤103，根据用户场景，调节车载语音设备的唤醒阈值；
在本发明实施例中，当确定当前的用户场景后，可以根据用户场景，调节车载语音设备的唤醒阈值，从而能够使用户较为准确且方便地唤醒车载语音设备，以及避免错误唤醒。
在本发明实施例的一种可选实施例中，当识别到用户场景为单人场景时，可以从图像数据中获取用户的动作信息，接着将用户的动作信息与预设的动作信息进行匹配，然后可以根据匹配结果，调节车载语音设备的唤醒阈值。
在本发明实施例的另一种可选实施例中，当识别到用户场景为多人场景时，可以将车载语音设备的唤醒阈值调节为默认的唤醒阈值。其中，多人场景可以包括多人娱乐场景以及多人对话场景，则当识别到用户场景为多人娱乐场景时，可以将车载语音设备的唤醒阈值调节为默认的唤醒阈值，或当识别到用户场景为多人对话场景时，可以将车载语音设备的唤醒阈值调节为默认的唤醒阈值。
在具体实现中，车载系统可以根据采集的图像数据，从图像数据中识别出车内用户的人数，从而确定当前用户场景是否为多人场景，当为多人场景时，可以结合车载系统的监听功能，对用户场景进一步进行识别，当识别出车内场景为多人娱乐场景时，表示当前车内至少两名用户在进行车内娱乐活动，并不是进行车载语音设备的语音唤醒；或当识别出车内场景为多人对话场景时，表示当前车内至少两名用户在进行对话，并不是进行车载语音设备的语音唤醒，则可以不调整唤醒阈值，或将唤醒语音调节为默认的唤醒语音，用户输入的语音信息需要满足默认的唤醒阈值，才能对车载语音设备进行唤醒。
步骤104，根据唤醒阈值，对车载语音设备进行唤醒。
在本发明实施例中，对车载语音设备的唤醒阈值调节完毕后，可以根据调节后的唤醒阈值，对车载语音设备进行唤醒，从而当减小车载语音设备的唤醒阈值时，可以使用户能够较为准确地唤醒车载语音设备，提高了用户与语音设备的唤醒交互效率，当增大车载语音设备的唤醒阈值时，可以有效地避免错误唤醒的概率。
在具体实现中，用户通过语音输入的语音信息，需要满足唤醒阈值，才能对车载语音设备进行唤醒。具体的，可以通过获取用户输入的语音信息，并计算与语音信息对应的唤醒值，当唤醒值大于或等于唤醒阈值时，则可以对车载语音设备进行唤醒。其中，可以预先在车载系统中存储语音信息对应的唤醒值，当接收到用户输入的语音信息后，可以将该语音信息进行转换，得到对应的文本信息，接着可以进行语义识别，得到用户输入的唤醒词，并将该唤醒词与默认的唤醒词进行匹配，得到对应的唤醒值，其中，唤醒值可以为用户语音输入的唤醒词与默认的唤醒词之间的相似度，不同相似度的唤醒值数值大小不同，当唤醒值大于或等于唤醒阈值时，则对车载语音设备进行唤醒；当唤醒值小于唤醒阈值时，则不对车载语音设备进行唤醒。
在本发明实施例的一种示例中，在默认唤醒状态下，唤醒阈值为4，其可以对应于默认的唤醒词“你好小L”，对用户输入的语音信息进行语义识别后，可以得到用户输入的唤醒词，则用户输入的唤醒词需要包含“你好小L”，即要求用户输入的唤醒词与默认的唤醒词一一对应，才能对语音设备进行唤醒，从而当用户输入的语音信息满足默认的唤醒阈值，对车载语音设备进行唤醒，有效地避免了错误唤醒车载语音设备的概率。
在本发明实施例的另一种示例中，默认的唤醒词为“你好小L”，当减小车载语音设备的唤醒阈值时，当唤醒阈值由4调节为3时，则用户输入的唤醒词与默认的唤醒词的相似度(唤醒值)需要满足唤醒阈值3，即可对车载语音设备进行唤醒，用户可以输入默认的唤醒词进行唤醒，还可以输入与唤醒词近似的语音信息进行唤醒，如用户可以语音输入“你好小L，播放音乐”，也可以语音输入“你好小李，播放音乐”，对于后者，用户输入的唤醒词“你好小李”与默认的唤醒词“你好小L”相似度(唤醒值)满足唤醒阈值3，可以对车载语音设备进行唤醒；
当唤醒阈值由3调节为2时，则用户输入的唤醒词与默认的唤醒词的相似度(唤醒值)需要满足唤醒阈值2，如用户可以语音输入“你好小李，播放音乐”、“你好小L，播放音乐”、“小李，播放音乐”以及“你好，播放音乐”等，由于用户输入的唤醒词与默认的唤醒词相似度(唤醒值)大于或等于减小后的唤醒阈值2，可以对车载语音设备进行唤醒；
当唤醒阈值由2调节为1时，则用户输入的唤醒词与默认的唤醒词的相似度(唤醒值)需要满足唤醒阈值1，如用户可以语音输入“你好小李，播放音乐”、“你好小L，播放音乐”、“小李，播放音乐”、“你好，播放音乐”以及“HI，播放音乐”等，其中，“HI”与“你好”可以为相同语义的唤醒词，由于用户输入的唤醒词与默认的唤醒词相似度(唤醒值)大于或等于减小后的唤醒阈值1，可以对车载语音设备进行唤醒；
当唤醒阈值由1调节为0时，此时用户可以选择直接语音输入指令，或选择语音输入简单的语音信息，或输入满足默认唤醒阈值的语音信息，如可以输入“你好小李，播放音乐”、“你好小L，播放音乐”、“小李，播放音乐”、“你好，播放音乐”以及“播放音乐”等，即可对车载语音设备进行唤醒。
通过上述示例，本发明实施例可以通过调节唤醒阈值使得用户语音输入简化或近似的“唤醒词”、不需要输入“唤醒词”即可对车载语音设备进行唤醒，提高了用户与语音设备的唤醒交互效率。
此外，还可以对唤醒词的顺序进行设置，可以将唤醒词的顺序置于语音指令之前，用户需先语音输入唤醒词，再输入语音指令，如“你好小L，播放音乐”、“你好小李，播放音乐”、“小L，播放音乐”、“小李，播放音乐”、“你好，播放音乐”等等唤醒词在前、语音指令在后的语音信息，当唤醒阈值调节为0时，此时用户只需要输入语音指令，即可对车载语音设备进行唤醒，而不需要输入唤醒词，从而可以避免在唤醒阈值减小的过程中，车载语音设备对用户的语音信息进行误识别，进而避免了车载语音设备的误唤醒。
需要说明的是，在本发明实施例中以上述示例进行说明，可以理解的是，本发明实施例包括但不限于上述示例，本领域技术人员在本发明实施例的思想下，可以根据实际情况进行设置，本发明对此不作限制。
在本发明实施例中，通过采集车内用户的图像数据，接着从图像数据中，确定与用户对应的用户场景，并根据用户场景，调节车载语音设备的唤醒阈值，然后根据唤醒阈值，对车载语音设备进行唤醒，从而通过实时监测与车内用户对应的用户场景，对车载语音设备的唤醒阈值进行实时调节，调节车载语音设备的语音识别的灵敏度，进而在不同情况的行车场景下，一方面能够使用户能够较为准确且方便地唤醒车载语音设备，提高了用户与语音设备的唤醒交互效率，另一方面通过调节唤醒阈值，可以有效地避免错误唤醒的概率。
参考图2，示出了本发明的一种车载语音设备的唤醒方法实施例二的步骤流程图，具体可以包括如下步骤：
步骤201，采集车内用户的图像数据；
在具体实现中，可以通过设置于车内的若干个摄像头，采集车内用户的图像数据，进而可以根据图像数据，对车载语音设备的语音识别进行调节。
步骤202，从图像数据中，确定与用户对应的用户场景；
在具体实现中，用户场景可以包括单人场景以及多人场景，其中，单人场景为车内只有一名用户的场景，多人场景则为车内有至少两名以上用户的场景。当采集了车内乘客的图像数据后，可以从图像中识别出车内用户的人数，从而进行场景识别，确定当前的车内场景为单人场景，或是多人场景。
步骤203，当用户场景为单人场景时，从图像数据中获取用户的动作信息；
在具体实现中，用户的动作信息可以包括手部动作信息、面部动作信息以及唇部动作信息等，可以将采集的图像数据，输入至车载系统的MCU中央处理器，进行图像识别，从而得到与用户对应的动作信息。具体的，可以将图像数据输入图像识别模型中进行特征识别，从而确定用户的动作信息。
此外，还可以采集车内用户的图像数据，并根据至少一张图像数据，对用户的动作进行识别，从而可以根据用户连续的动作信息，对车载语音设备的唤醒阈值进行调节。
步骤204，将用户的动作信息与预设的动作信息进行匹配；
在具体实现中，用户的动作信息可以包括手部动作信息、面部动作信息以及唇部动作信息，预设的动作信息也可以包括手部唤醒动作信息、面部唤醒动作信息以及唇部唤醒动作信息。当得到用户的动作信息后，可以将用户的手部动作信息与预设的手部唤醒动作信息进行匹配；和/或，将用户的面部动作信息与预设的面部唤醒动作信息进行匹配；和/或，将用户的唇部动作信息与预设的唇部唤醒动作信息进行匹配，从而可以得到匹配结果，以根据匹配结果对唤醒阈值进行调节。
步骤205，根据匹配结果，调节车载语音设备的唤醒阈值；
在具体实现中，可以根据匹配结果，调节车载语音设备的唤醒阈值，从而根据不同的唤醒阈值对车载语音设备进行唤醒，可以使用户能够较为准确且方便地唤醒车载语音设备，提高用户与语音设备的唤醒交互效率。
在本发明实施例的一种可选实施例中，唤醒阈值可以包括若干个不同唤醒等级的唤醒阈值，则步骤205可以包括如下子步骤：
获取唤醒阈值与预设的唤醒等级的映射关系；确定匹配结果与唤醒等级匹配的目标唤醒等级；采用映射关系，将唤醒阈值调节为与目标唤醒等级适配的目标唤醒阈值。
在具体实现中，不同的唤醒阈值可以对应于不同的唤醒等级，不同的唤醒等级可以对应不同的唤醒灵敏度，唤醒灵敏度越高，越容易唤醒车载语音设备。当用户当前的动作信息与预设的唤醒动作信息匹配成功后，可以生成对应的匹配结果，接着可以根据匹配结果的匹配程度，匹配程度越高，匹配结果对应的唤醒等级越高，从而可以确定匹配结果与唤醒等级匹配的目标唤醒等级，然后可以采用唤醒阈值与唤醒等级的映射关系，将当前的唤醒阈值调节为与目标唤醒等级适配的目标唤醒阈值，从而可以根据用户输入的动作信息与预设的唤醒动作信息匹配程度，对唤醒阈值进行调节，使得用户能够准确且方便地唤醒车载语音设备。作为一种示例，匹配结果的匹配程度、唤醒阈值以及唤醒等级的映射关系可以如表1所示。
匹配结果的匹配程度 唤醒等级 唤醒阈值
匹配程度低 一级 2
匹配程度中 二级 1
匹配程度高 三级 0
表1
在本发明实施例的一种示例中，在车载系统中预设设置唤醒阈值包括0-1-2-3，其中，原始唤醒阈值为3。当用户凝视中控屏幕在3秒内，则此时用户的凝视动作与预设的凝视动作匹配成功，但由于凝视时间只有3秒，即匹配成功且匹配程度低，与匹配结果对应的目标唤醒等级为一级，则目标唤醒阈值为2，然后可以将原始唤醒阈值3调节为目标唤醒阈值2；当用户凝视中控屏幕达到5秒至10秒之间时，匹配成功且匹配程度中，与匹配结果对应的目标唤醒等级为二级，则目标唤醒阈值为1，然后可以将原始唤醒阈值3调节为目标唤醒阈值1；当用户凝视中控屏幕达10秒以上时，匹配成功且匹配程度高，与匹配结果对应的目标唤醒等级为三级，则目标唤醒阈值为0，可以将原始唤醒阈值3调节为目标唤醒阈值0。
需要说明的是，在本发明实施例中以上述示例为例进行示例性说明，可以理解的是，本发明实施例包括但不限于上述示例，本领域技术人员在本发明实施例的思想指导下，可以根据实际情况对唤醒等级、唤醒阈值等进行设置，本发明对此不作限制。
在本发明实施例的另一种可选实施例中，不同的唤醒等级可以对应不同的预设唤醒条件，可以根据不同的唤醒条件对唤醒阈值进行连续的调整。步骤205还可以包括如下子步骤：
当所述匹配结果满足预设第一唤醒条件时，采用所述映射关系，将当前的唤醒阈值调节为与所述第一唤醒条件对应的第一唤醒阈值；当所述匹配结果满足预设第二唤醒条件时，采用所述映射关系，将当前的第一唤醒阈值调节为与所述第二唤醒条件对应的第二唤醒阈值。其中，所述第一唤醒条件对应的唤醒等级，低于所述第二唤醒条件对应的唤醒等级一个等级。
在具体实现中，不同唤醒阈值可以对应于不同的唤醒等级，不同的唤醒等级可以对应于不同的唤醒条件。当用户当前的动作信息与预设的唤醒动作信息匹配成功后，可以根据用户在一定时间内输入的动作信息与预设的唤醒动作信息的匹配程度，对唤醒阈值进行连续调整，通过车载语音设备对唤醒阈值的连续调整，增强用户直接唤醒车载语音设备的意图，使得车载语音设备的唤醒更加贴合人类的语言习惯，提高了用户的乘车体验。
具体的，当用户的动作信息与预设的唤醒动作信息匹配成功后，可以生成匹配结果，其中，匹配结果可以为用户的动作信息与唤醒动作信息的匹配程度。不同唤醒等级对应的唤醒条件，可以对应于不同匹配程度的匹配结果，作为一种示例，唤醒等级、唤醒阈值以及唤醒条件的映射关系可以如表2所示。
Figure BDA0002085157640000131
Figure BDA0002085157640000141
表2
在本发明实施例的一种示例中，如表2所示，第一唤醒条件、第二唤醒条件以及第三唤醒条件可以为用户当前的动作信息与预设的唤醒动作信息的匹配度，第二唤醒条件对应的匹配度高于第一唤醒条件对应的匹配度，第三唤醒条件对应的匹配度高于第二唤醒条件对应的匹配度，且第一唤醒条件对应的唤醒等级低于第二唤醒条件对应的唤醒等级一个等级，第二唤醒条件对应的唤醒等级低于第三唤醒条件对应的唤醒等级一个等级。在本示例中，唤醒条件、唤醒等级以及唤醒阈值可以如表3所示。
唤醒条件 唤醒等级 唤醒阈值
凝视中控屏幕3秒 一级 2
凝视中控屏幕5-10秒 二级 1
凝视中控屏幕10秒以上 三级 0
表3
假设当前的唤醒阈值为3，当用户凝视中控屏幕3秒时(动作信息与唤醒动作信息匹配，匹配结果满足第一唤醒条件)，则车载语音设备可以采用映射关系，将当前的唤醒阈值3调节为与“凝视中控屏幕3秒”(第一唤醒条件)对应的唤醒阈值2；当用户继续凝视中控屏幕达到8秒时(动作信息与唤醒动作信息匹配，匹配结果满足第二唤醒条件)，则车载语音设备可以采用映射关系，将当前的唤醒阈值2调节为与“凝视中控屏幕5-10秒”(第二唤醒条件)对应的唤醒阈值1；当用户继续凝视中控屏幕达到10秒以上时(动作信息与唤醒动作信息匹配，匹配结果满足第三唤醒条件)，则车载语音设备可以采用映射关系，将当前的唤醒阈值1调节为与“凝视中控屏幕10秒以上”(第三唤醒条件)对应的唤醒阈值0，从而实现车载语音设备唤醒过程中，唤醒语音的连续调节，使得用户可以准确且方便地对车载语音设备进行唤醒。
需要说明的是，在本发明实施例中以上述示例为例进行示例性说明，可以理解的是，在本发明实施例的思想指导下，本领域技术人员还可以多个不同的唤醒等级、唤醒阈值以及唤醒条件等，本发明对此不作限制。
在本发明实施例的另一种可选实施例中，在车载系统中，可以预先设置一默认的唤醒阈值，当用户在车内语音输入的语音信息，满足该唤醒阈值，即可对车载语音设备进行唤醒，从而使车载系统执行相应的操作。具体的，当用户的动作信息与预设的唤醒动作信息匹配成功时，可以减小唤醒阈值；当用户的动作信息与预设的唤醒动作信息匹配失败时，不调整唤醒阈值，用户需要按照正常的唤醒阈值对车载语音设备进行唤醒。
在具体实现中，唤醒阈值可以由“唤醒词”以及“语音指令”组成。在默认唤醒状态下，用户在每一次唤醒语音设备时，需要语音输入“唤醒词”以及“语音指令”，当车载语音设备检测到用户输入的“唤醒词”满足预设的“唤醒词”时，进行语音设备的唤醒，并对语音指令进行语义识别，从而执行相应的操作。如在默认唤醒阈值下，用户对车载语音设备语音输入“你好！XX。播放音乐”，则在该语音信息中，唤醒词为“你好！XX”，语音指令为“播放音乐”，车载语音设备接收到该语音信息后，可以先进行语音设备的唤醒，接着对语音指令进行语义识别，并播放音乐。
在具体实现中，当用户的动作信息与预设的唤醒动作信息匹配成功时，减小唤醒阈值；当用户的动作信息与预设的唤醒动作信息匹配失败时，不调整唤醒阈值。其中，唤醒阈值越大，则车载语音设备的语音识别灵敏度越低，用户越难对车载语音设备进行唤醒；唤醒阈值越小，则车载语音设备的语音识别灵敏度越高，用户越容易对车载语音设备进行唤醒。
在具体实现中，预设的唤醒动作信息可以包括手部唤醒动作信息、面部唤醒动作信息以及唇部唤醒动作信息。当用户当前的手部动作信息与手部唤醒动作信息匹配成功时，减小唤醒阈值；和/或，当用户的面部动作信息与面部唤醒动作信息匹配成功时，减小唤醒阈值；和/或，当用户的唇部动作信息与唇部唤醒动作信息匹配成功时，减小唤醒阈值。
在本发明实施例的一种示例中，手部唤醒动作信息可以包括唤醒手势以及唤醒动作。其中，参考图3，示出了本发明的一种车载语音设备的唤醒方法实施例一中唤醒手势示意图，手势唤醒可以包括通过用户手掌比划预设的手势，当摄像头采集到用户的图像数据，并对图像数据进行特征提取，得到用户比划的手势后，将该手势与预设的唤醒手势进行匹配，当匹配成功后，可以减小车载语音设备的唤醒阈值。
唤醒动作可以包括向挥手动作、“勾引”动作等，当摄像头采集到用户的图像数据，并根据至少一帧图像确定用户当前的手部动作为挥手动作或“勾引”动作，具体可以为对车辆中控大屏的挥手动作或“勾引”动作，则用户的手部动作与预设的唤醒动作匹配，可以减小车载语音设备的唤醒阈值。
在本发明实施例的另一种示例中，面部唤醒动作信息可以包括人脸朝向车辆中控大屏达到预设时间、人脸朝向车辆中控大屏后连续点头若干次等等。如当摄像头采集到用户的面部动作信息后，确定此时用户的动作为人脸朝向中控大屏，且满足了预设时间，如人脸朝向中控大屏并保持3秒以上，则表示当前用户的面部动作信息与预设的面部唤醒动作信息匹配，可以减小车载语音设备的唤醒阈值；或当摄像头采集到用户的面部动作信息后，确定此时用户的动作为人脸朝向中控大屏，并点头了若干次，如连续点头3次，则表示当前用户的面部动作信息与预设的面部唤醒动作信息匹配，可以减小车载语音设备的唤醒阈值。
在本发明实施例的另一种示例中，唇部唤醒动作信息可以包括用户的唇部由合拢状态变换为张开状态，或由张开状态变换为合拢状态，两种状态均表示此时用户在进行讲话，则车载语音设备可以判定用户或存在唤醒车载语音设备的意图，可以减小车载语音设备的唤醒阈值。具体的，当摄像头采集到用户的唇部变换图像后，可以判断用户的唇部变换图像是否与预设的变化图像相匹配，当匹配时，可以减小车载语音设备的唤醒阈值。
需要说明的是，在本发明实施例中以用户的其中一种动作信息为例进行示例性说明，可以理解的是，在本发明实施例中，还可以将多个动作信息进行组合，并进行匹配，从而对车载语音设备的唤醒阈值进行调节。
在本发明实施例中的另一种示例中，可以同时获取用户的手部唤醒动作信息以及面部唤醒动作信息，对唤醒阈值进行调节。当通过摄像头采集车内用户的图像数据后，从图像数据中，确定用户当前人脸朝向车辆中控大屏，同时比划了唤醒手势或执行了唤醒动作，则车载语音设备同时监测到用户的面部动作信息与预设的面部唤醒动作信息，以及用户的手部动作信息与预设的手部唤醒动作信息相匹配，可以减小车载语音设备的唤醒阈值。
在本发明实施例中的另一种示例中，可以同时获取用户的手部唤醒动作信息、面部唤醒动作信息以及唇部唤醒动作信息，对唤醒阈值进行调节。当通过摄像头采集车内用户的图像数据后，从图像数据中，确定用户当前人脸朝向车辆中控大屏，同时唇部发生变化(如在说话)，且比划了唤醒手势或执行了唤醒动作等，则车载语音设备同时监测到用户的面部动作信息与预设的面部唤醒动作信息、用户的手部动作信息与预设的手部唤醒动作信息以及用户的唇部动作信息与预设的唇部唤醒动作信息相匹配，可以减小车载语音设备的唤醒阈值。
在本发明实施例的另一种示例中，当用户当前的手部动作与手部唤醒动作信息匹配失败时，不调整唤醒阈值；和/或，当用户当前的面部动作与面部唤醒动作信息匹配失败时，不调整唤醒阈值；和/或，当用户当前的唇部动作与唇部唤醒动作信息匹配失败时，不调整唤醒阈值。具体的，当用户的动作信息与预设的动作信息匹配失败时，不调整唤醒阈值，保持默认的唤醒阈值，用户输入的语音信息需要满足默认的唤醒阈值才能对车载语音设备进行唤醒。
需要说明的是，在本发明实施例中，用户的动作信息包括但不限于上述示例，预设的唤醒动作信息包括但不限于上述示例，本领域技术人员在本发明实施例的思想下，可以根据实际需要进行设置，本发明对此不作限制。
步骤206，根据唤醒阈值，对车载语音设备进行唤醒。
在具体实现中，用户通过语音输入的语音信息，需要满足唤醒阈值，才能对车载语音设备进行唤醒。具体的，可以通过获取用户输入的语音信息，并计算与语音信息对应的唤醒值，当唤醒值大于或等于唤醒阈值时，则可以对车载语音设备进行唤醒。其中，可以预先在车载系统中存储语音信息对应的唤醒值，当接收到用户输入的语音信息后，可以将该语音信息进行转换，得到对应的文本信息，接着可以进行语义识别，得到用户输入的唤醒词，并将该唤醒词与默认的唤醒词进行匹配，得到对应的唤醒值，其中，唤醒值可以为用户语音输入的唤醒词与默认的唤醒词之间的相似度，不同相似度的唤醒值数值大小不同，当唤醒值大于或等于唤醒阈值时，则对车载语音设备进行唤醒；当唤醒值小于唤醒阈值时，则不对车载语音设备进行唤醒。
在本发明实施例中，通过采集车内用户的图像数据，接着从图像数据中，确定与用户对应的用户场景，并根据用户场景，调节车载语音设备的唤醒阈值，然后根据唤醒阈值，对车载语音设备进行唤醒，从而通过实时监测与车内用户对应的用户场景，对车载语音设备的唤醒阈值进行实时调节，调节车载语音设备的语音识别的灵敏度，进而在不同情况的行车场景下，一方面能够使用户能够较为准确且方便地唤醒车载语音设备，提高了用户与语音设备的唤醒交互效率，另一方面通过调节唤醒阈值，可以有效地避免错误唤醒的概率。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图4，示出了本发明的一种车载语音设备的唤醒装置实施例的结构框图，具体可以包括如下模块：
图像获取模块401，用于采集车内用户的图像数据；
场景确定模块402，用于从所述图像数据中，确定与所述用户对应的用户场景；
阈值调节模块403，用于根据所述用户场景，调节车载语音设备的唤醒阈值；
唤醒模块404，用于根据所述唤醒阈值，对所述车载语音设备进行唤醒。
在本发明实施例的一种可选实施例中，所述唤醒模块404包括：
唤醒值计算子模块，用于获取所述用户输入的语音信息，并计算与所述语音信息对应的唤醒值；
判断子模块，用于当所述唤醒值大于或等于所述唤醒阈值时，对所述车载语音设备进行唤醒。
在本发明实施例的一种可选实施例中，所述用户场景包括单人场景，所述阈值调节模块403包括：
动作信息获取子模块，用于当识别到所述用户场景为单人场景时，从所述图像数据中获取所述用户的动作信息；
动作信息匹配子模块，用于将所述用户的动作信息与预设的动作信息进行匹配；
第一调节子模块，用于根据匹配结果，调节所述车载语音设备的唤醒阈值。
在本发明实施例的一种可选实施例中，所述用户场景还包括多人场景，所述阈值调节模块403还包括：
第二调节子模块，用于当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
在本发明实施例的一种可选实施例中，所述多人场景包括多人娱乐场景以及多人对话场景，所述第二调节子模块具体用于：
当识别到所述用户场景为多人娱乐场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值；
或，
当识别到所述用户场景为多人对话场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
在本发明实施例的一种可选实施例中，所述唤醒阈值包括若干个不同唤醒等级的唤醒阈值，所述第一调节子模块包括：
映射关系获取单元，用于获取所述唤醒阈值与预设的唤醒等级的映射关系；
目标等级确定单元，用于确定所述匹配结果与所述唤醒等级匹配的目标唤醒等级；
目标阈值调节单元，用于采用所述映射关系，将所述唤醒阈值调节为与所述目标唤醒等级适配的目标唤醒阈值。
在本发明实施例的一种可选实施例中，不同唤醒等级对应不同的预设唤醒条件，所述装置还包括：
第一阈值调节单元，用于当所述匹配结果满足预设第一唤醒条件时，采用所述映射关系，将当前的唤醒阈值调节为与所述第一唤醒条件对应的第一唤醒阈值；
第二阈值调节单元，用于当所述匹配结果满足预设第二唤醒条件时，采用所述映射关系，将当前的第一唤醒阈值调节为与所述第二唤醒条件对应的第二唤醒阈值；
其中，所述第一唤醒条件对应的唤醒等级，低于所述第二唤醒条件对应的唤醒等级一个等级。
在本发明实施例的一种可选实施例中，所述第一调节子模块包括：
阈值减小单元，用于当所述用户当前的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值。
在本发明实施例的一种可选实施例中，所述阈值减小单元具体用于：
当所述用户当前的手部动作信息与预设的手部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的面部动作信息与预设的面部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的唇部动作信息与预设的唇部动作信息匹配成功时，减小所述唤醒阈值。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种车辆，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述车辆执行本发明实施例所述的方法。
本发明实施例还提供了一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行本发明实施例所述的方法。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器、EEPROM、Flash以及eMMC等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种车载语音设备的唤醒方法和一种车载语音设备的唤醒装置，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (18)

1.一种车载语音设备的唤醒方法，其特征在于，包括：
在行车场景下，采集车内用户的图像数据；
从所述图像数据中，确定与所述用户对应的用户场景；
根据所述用户场景，调节车载语音设备的唤醒阈值；
根据所述唤醒阈值，对所述车载语音设备进行唤醒；
其中，所述用户场景包括单人场景以及多人场景，所述根据所述用户场景，调节车载语音设备的唤醒阈值，包括：
根据所述单人场景或所述多人场景，调节车载语音设备的唤醒阈值；
其中，所述根据所述用户场景，调节车载语音设备的唤醒阈值，包括：
当识别到所述用户场景为单人场景时，从所述图像数据中获取所述用户的动作信息；
将所述用户的动作信息与预设的动作信息进行匹配；
根据匹配结果，调节所述车载语音设备的唤醒阈值。
2.根据权利要求1所述的方法，其特征在于，所述根据所述唤醒阈值，对所述车载语音设备进行唤醒，包括：
获取所述用户输入的语音信息，并计算与所述语音信息对应的唤醒值；
当所述唤醒值大于或等于所述唤醒阈值时，对所述车载语音设备进行唤醒。
3.根据权利要求1所述的方法，其特征在于，所述根据所述用户场景，调节车载语音设备的唤醒阈值，还包括：
当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
4.根据权利要求3所述的方法，其特征在于，多人场景包括多人娱乐场景以及多人对话场景，所述当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值，包括：
当识别到所述用户场景为多人娱乐场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值；
或，
当识别到所述用户场景为多人对话场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
5.根据权利要求1所述的方法，其特征在于，所述唤醒阈值包括若干个不同唤醒等级的唤醒阈值，所述根据匹配结果，调节所述车载语音设备的唤醒阈值，包括：
获取所述唤醒阈值与预设的唤醒等级的映射关系；
确定所述匹配结果与所述唤醒等级匹配的目标唤醒等级；
采用所述映射关系，将所述唤醒阈值调节为与所述目标唤醒等级适配的目标唤醒阈值。
6.根据权利要求5所述的方法，其特征在于，不同唤醒等级对应不同的预设唤醒条件，所述方法还包括：
当所述匹配结果满足预设第一唤醒条件时，采用所述映射关系，将当前的唤醒阈值调节为与所述第一唤醒条件对应的第一唤醒阈值；
当所述匹配结果满足预设第二唤醒条件时，采用所述映射关系，将当前的第一唤醒阈值调节为与所述第二唤醒条件对应的第二唤醒阈值；
其中，所述第一唤醒条件对应的唤醒等级，低于所述第二唤醒条件对应的唤醒等级一个等级。
7.根据权利要求1所述的方法，其特征在于，所述根据匹配结果，调节所述车载语音设备的唤醒阈值，包括：
当所述用户当前的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值。
8.根据权利要求7所述的方法，其特征在于，所述当所述用户的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值，包括：
当所述用户当前的手部动作信息与预设的手部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的面部动作信息与预设的面部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的唇部动作信息与预设的唇部动作信息匹配成功时，减小所述唤醒阈值。
9.一种车载语音设备的唤醒装置，其特征在于，包括：
图像获取模块，用于在行车场景下，采集车内用户的图像数据；
场景确定模块，用于从所述图像数据中，确定与所述用户对应的用户场景；
阈值调节模块，用于根据所述用户场景，调节车载语音设备的唤醒阈值；
唤醒模块，用于根据所述唤醒阈值，对所述车载语音设备进行唤醒；
其中，所述用户场景包括单人场景以及多人场景，所述阈值调节模块具体用于：
根据所述单人场景或所述多人场景，调节车载语音设备的唤醒阈值；
其中，所述阈值调节模块包括：
动作信息获取子模块，用于当识别到所述用户场景为单人场景时，从所述图像数据中获取所述用户的动作信息；
动作信息匹配子模块，用于将所述用户的动作信息与预设的动作信息进行匹配；
第一调节子模块，用于根据匹配结果，调节所述车载语音设备的唤醒阈值。
10.根据权利要求9所述的装置，其特征在于，所述唤醒模块包括：
唤醒值计算子模块，用于获取所述用户输入的语音信息，并计算与所述语音信息对应的唤醒值；
判断子模块，用于当所述唤醒值大于或等于所述唤醒阈值时，对所述车载语音设备进行唤醒。
11.根据权利要求9所述的装置，其特征在于，所述阈值调节模块还包括：
第二调节子模块，用于当识别到所述用户场景为所述多人场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
12.根据权利要求11所述的装置，其特征在于，所述多人场景包括多人娱乐场景以及多人对话场景，所述第二调节子模块具体用于：
当识别到所述用户场景为多人娱乐场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值；
或，
当识别到所述用户场景为多人对话场景时，将所述车载语音设备的唤醒阈值调节为默认的唤醒阈值。
13.根据权利要求11所述的装置，其特征在于，所述唤醒阈值包括若干个不同唤醒等级的唤醒阈值，所述第一调节子模块包括：
映射关系获取单元，用于获取所述唤醒阈值与预设的唤醒等级的映射关系；
目标等级确定单元，用于确定所述匹配结果与所述唤醒等级匹配的目标唤醒等级；
目标阈值调节单元，用于采用所述映射关系，将所述唤醒阈值调节为与所述目标唤醒等级适配的目标唤醒阈值。
14.根据权利要求13所述的装置，其特征在于，不同唤醒等级对应不同的预设唤醒条件，所述装置还包括：
第一阈值调节单元，用于当所述匹配结果满足预设第一唤醒条件时，采用所述映射关系，将当前的唤醒阈值调节为与所述第一唤醒条件对应的第一唤醒阈值；
第二阈值调节单元，用于当所述匹配结果满足预设第二唤醒条件时，采用所述映射关系，将当前的第一唤醒阈值调节为与所述第二唤醒条件对应的第二唤醒阈值；
其中，所述第一唤醒条件对应的唤醒等级，低于所述第二唤醒条件对应的唤醒等级一个等级。
15.根据权利要求9所述的装置，其特征在于，所述第一调节子模块包括：
阈值减小单元，用于当所述用户当前的动作信息与预设的动作信息匹配成功时，减小所述唤醒阈值。
16.根据权利要求15所述的装置，其特征在于，所述阈值减小单元具体用于：
当所述用户当前的手部动作信息与预设的手部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的面部动作信息与预设的面部动作信息匹配成功时，减小所述唤醒阈值；
和/或，
当所述用户当前的唇部动作信息与预设的唇部动作信息匹配成功时，减小所述唤醒阈值。
17.一种车辆，其特征在于，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述车辆执行如权利要求1-8任一项所述的方法。
18.一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行如权利要求1-8任一项所述的方法。
CN201910485184.8A 2019-06-05 2019-06-05 车载语音设备的唤醒方法、装置、车辆以及机器可读介质 Active CN110047487B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910485184.8A CN110047487B (zh) 2019-06-05 2019-06-05 车载语音设备的唤醒方法、装置、车辆以及机器可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910485184.8A CN110047487B (zh) 2019-06-05 2019-06-05 车载语音设备的唤醒方法、装置、车辆以及机器可读介质

Publications (2)

Publication Number Publication Date
CN110047487A CN110047487A (zh) 2019-07-23
CN110047487B true CN110047487B (zh) 2022-03-18

Family

ID=67284579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910485184.8A Active CN110047487B (zh) 2019-06-05 2019-06-05 车载语音设备的唤醒方法、装置、车辆以及机器可读介质

Country Status (1)

Country Link
CN (1) CN110047487B (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110556107A (zh) * 2019-08-23 2019-12-10 宁波奥克斯电气股份有限公司 可自动调节语音识别灵敏度的控制方法、系统、空调器及可读存储介质
CN110544468B (zh) * 2019-08-23 2022-07-12 Oppo广东移动通信有限公司 应用唤醒方法、装置、存储介质及电子设备
CN110797051A (zh) * 2019-10-28 2020-02-14 星络智能科技有限公司 一种唤醒门限设置方法、装置、智能音箱及存储介质
CN111124507A (zh) * 2019-11-18 2020-05-08 珠海格力电器股份有限公司 一种语音设备及其唤醒方法、唤醒装置、存储介质
CN110942768A (zh) * 2019-11-20 2020-03-31 Oppo广东移动通信有限公司 设备唤醒的测试方法、装置、移动终端和存储介质
CN111128171A (zh) * 2019-12-31 2020-05-08 云知声智能科技股份有限公司 一种基于语音识别的设置方法及装置
CN111145750A (zh) * 2019-12-31 2020-05-12 威马智慧出行科技（上海）有限公司 车载智能语音设备的控制方法及装置
CN111028841B (zh) * 2020-03-10 2020-07-07 深圳市友杰智新科技有限公司 唤醒系统调节参数的方法、装置、计算机设备和存储介质
CN111223490A (zh) * 2020-03-12 2020-06-02 Oppo广东移动通信有限公司 声纹唤醒方法及装置、设备、存储介质
CN111429902B (zh) * 2020-03-17 2023-08-18 阿波罗智联(北京)科技有限公司 用于唤醒设备的方法和装置
CN111651135B (zh) * 2020-04-27 2021-05-25 珠海格力电器股份有限公司 一种声音唤醒方法、装置、存储介质及电器设备
CN111694433B (zh) * 2020-06-11 2023-06-20 阿波罗智联(北京)科技有限公司 语音交互的方法、装置、电子设备及存储介质
CN111816178A (zh) * 2020-07-07 2020-10-23 云知声智能科技股份有限公司 语音设备的控制方法、装置和设备
CN111880856B (zh) * 2020-07-31 2023-05-16 Oppo广东移动通信有限公司 语音唤醒方法、装置、电子设备及存储介质
CN112802468B (zh) * 2020-12-24 2023-07-11 合创汽车科技有限公司 汽车智能终端的交互方法、装置、计算机设备和存储介质
CN112908304B (zh) * 2021-01-29 2024-03-26 深圳通联金融网络科技服务有限公司 一种提高语音识别精准性的方法和装置
CN113038048B (zh) * 2021-03-02 2022-10-28 海信视像科技股份有限公司 一种远场语音唤醒方法和显示设备
CN112951216B (zh) * 2021-05-11 2021-08-27 宁波均联智行科技股份有限公司 一种车载语音处理方法及车载信息娱乐系统
CN113335205B (zh) * 2021-06-09 2022-06-03 东风柳州汽车有限公司 语音唤醒方法、装置、设备及存储介质
CN115273843B (zh) * 2022-07-18 2023-12-05 上海企创信息科技有限公司 场景自适应的车载语音交互系统及方法
CN117012206B (zh) * 2023-10-07 2024-01-16 山东省智能机器人应用技术研究院 一种人机语音交互系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10204625B2 (en) * 2010-06-07 2019-02-12 Affectiva, Inc. Audio analysis learning using video data
CN109410952A (zh) * 2018-10-26 2019-03-01 北京蓦然认知科技有限公司 一种语音唤醒方法、装置及系统
CN109448705A (zh) * 2018-10-17 2019-03-08 珠海格力电器股份有限公司 一种语音切分方法及装置、计算机装置和可读存储介质
CN109584873A (zh) * 2018-12-13 2019-04-05 北京极智感科技有限公司 一种车载语音系统的唤醒方法、装置、可读介质及设备

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030101052A1 (en) * 2001-10-05 2003-05-29 Chen Lang S. Voice recognition and activation system
US7646372B2 (en) * 2003-09-15 2010-01-12 Sony Computer Entertainment Inc. Methods and systems for enabling direction detection when interfacing with a computer program
EP1681670A1 (en) * 2005-01-14 2006-07-19 Dialog Semiconductor GmbH Voice activation
US9240182B2 (en) * 2013-09-17 2016-01-19 Qualcomm Incorporated Method and apparatus for adjusting detection threshold for activating voice assistant function
US10770075B2 (en) * 2014-04-21 2020-09-08 Qualcomm Incorporated Method and apparatus for activating application by speech input
US10095406B2 (en) * 2015-12-18 2018-10-09 Qualcomm Incorporated Cascaded touch to wake for split architecture
JPWO2017130486A1 (ja) * 2016-01-28 2018-11-22 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
EP3475942B1 (en) * 2016-06-27 2023-01-11 Amazon Technologies, Inc. Systems and methods for routing content to an associated output device
CN105959593B (zh) * 2016-06-30 2019-04-12 宇龙计算机通信科技(深圳)有限公司 一种拍照设备的曝光方法及拍照设备
CN108268882A (zh) * 2016-12-30 2018-07-10 南京烽火软件科技有限公司 一种互联网图片场景分类方法及其系统
US10664533B2 (en) * 2017-05-24 2020-05-26 Lenovo (Singapore) Pte. Ltd. Systems and methods to determine response cue for digital assistant based on context
CN108986801B (zh) * 2017-06-02 2020-06-05 腾讯科技（深圳）有限公司 一种人机交互方法、装置及人机交互终端
CN109243431A (zh) * 2017-07-04 2019-01-18 阿里巴巴集团控股有限公司 一种处理方法、控制方法、识别方法及其装置和电子设备
CN107610695B (zh) * 2017-08-08 2021-07-06 大众问问(北京)信息科技有限公司 驾驶人语音唤醒指令词权重的动态调整方法
CN109495637A (zh) * 2017-09-13 2019-03-19 珠海市魅族科技有限公司 一种语音控制功能开启方法及其终端设备
CN107490154A (zh) * 2017-09-19 2017-12-19 广东美的制冷设备有限公司 空调器及其控制方法、装置和计算机可读存储介质
CN107622770B (zh) * 2017-09-30 2021-03-16 百度在线网络技术（北京）有限公司 语音唤醒方法及装置
CN108347524B (zh) * 2018-01-10 2020-06-23 Oppo广东移动通信有限公司 电子设备及其控制方法和装置、计算机可读存储介质
CN108711430B (zh) * 2018-04-28 2020-08-14 广东美的制冷设备有限公司 语音识别方法、智能设备及存储介质
CN108847219B (zh) * 2018-05-25 2020-12-25 台州智奥通信设备有限公司 一种唤醒词预设置信度阈值调节方法及系统
CN108766423B (zh) * 2018-05-25 2021-07-09 三星电子（中国）研发中心 一种基于场景的主动唤醒方法和装置
CN108831462A (zh) * 2018-06-26 2018-11-16 北京奇虎科技有限公司 车载语音识别方法及装置
CN109286772B (zh) * 2018-09-04 2021-03-12 Oppo广东移动通信有限公司 音效调整方法、装置、电子设备以及存储介质
CN109346071A (zh) * 2018-09-26 2019-02-15 出门问问信息科技有限公司 唤醒处理方法、装置及电子设备
CN109410936A (zh) * 2018-11-14 2019-03-01 广东美的制冷设备有限公司 基于场景的空调设备语音控制方法和装置
CN109326289B (zh) * 2018-11-30 2021-10-22 深圳创维数字技术有限公司 免唤醒语音交互方法、装置、设备及存储介质
CN109285547B (zh) * 2018-12-04 2020-05-01 北京蓦然认知科技有限公司 一种语音唤醒方法、装置及系统
CN109360567B (zh) * 2018-12-12 2021-07-20 思必驰科技股份有限公司 可定制唤醒的方法和装置
CN109545215A (zh) * 2018-12-27 2019-03-29 广州亿宏信息科技有限公司 一种车载智能设备的唤醒方法及唤醒装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10204625B2 (en) * 2010-06-07 2019-02-12 Affectiva, Inc. Audio analysis learning using video data
CN109448705A (zh) * 2018-10-17 2019-03-08 珠海格力电器股份有限公司 一种语音切分方法及装置、计算机装置和可读存储介质
CN109410952A (zh) * 2018-10-26 2019-03-01 北京蓦然认知科技有限公司 一种语音唤醒方法、装置及系统
CN109584873A (zh) * 2018-12-13 2019-04-05 北京极智感科技有限公司 一种车载语音系统的唤醒方法、装置、可读介质及设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Object recognition and real-time spoken word recognition using two-fold dynamic time warping for autonomous arm manipulator;Irfan Al-Hussaini et al;《2017 IEEE International Conference on Signal and Image Processing Applications (ICSIPA)》;20171231;第236-240段 *

Also Published As

Publication number Publication date
CN110047487A (zh) 2019-07-23

Similar Documents

Publication Publication Date Title
CN110047487B (zh) 车载语音设备的唤醒方法、装置、车辆以及机器可读介质
CN106682602B (zh) 一种驾驶员行为识别方法及终端
CN107767863B (zh) 语音唤醒方法、系统及智能终端
CN110114825A (zh) 语音识别系统
CN110148405B (zh) 语音指令处理方法及装置、电子设备及存储介质
DE112020004504T5 (de) Kontoverbindung mit Gerät
CN105501121A (zh) 一种智能唤醒方法及系统
WO2021135685A1 (zh) 身份认证的方法以及装置
CN110070857B (zh) 语音唤醒模型的模型参数调整方法及装置、语音设备
CN112397065A (zh) 语音交互方法、装置、计算机可读存储介质及电子设备
CN111583937A (zh) 一种语音控制唤醒方法及存储介质、处理器、语音设备、智能家电
CN110936797A (zh) 一种汽车天窗控制方法及电子设备
CN111508493B (zh) 语音唤醒方法、装置、电子设备及存储介质
JP2018027731A (ja) 車載装置、車載装置の制御方法およびコンテンツ提供システム
US20220084529A1 (en) Method and apparatus for awakening wearable device
CN115206306A (zh) 语音交互方法、装置、设备及系统
CN111081244B (zh) 一种语音交互方法和装置
CN108875617A (zh) 辅助驾驶方法和装置、车辆
CN111477226B (zh) 控制方法、智能设备和存储介质
CN110491384B (zh) 一种语音数据处理方法及装置
KR102265874B1 (ko) 멀티모달 기반 사용자 구별 방법 및 장치
CN105989328A (zh) 检测人员使用手持装置的方法及装置
CN110705483A (zh) 驾驶提醒方法、装置、终端及存储介质
CN112506353A (zh) 车辆交互系统、方法、存储介质和车辆
KR20220014674A (ko) 차량용 감정 인식 기반 서비스 제공 장치 및 그 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant