CN106030697A - 车载控制装置及车载控制方法 - Google Patents

车载控制装置及车载控制方法 Download PDF

Info

Publication number
CN106030697A
CN106030697A CN201480076456.4A CN201480076456A CN106030697A CN 106030697 A CN106030697 A CN 106030697A CN 201480076456 A CN201480076456 A CN 201480076456A CN 106030697 A CN106030697 A CN 106030697A
Authority
CN
China
Prior art keywords
operated key
key
information
display
speech recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480076456.4A
Other languages
English (en)
Other versions
CN106030697B (zh
Inventor
武井匠
熊谷太郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN106030697A publication Critical patent/CN106030697A/zh
Application granted granted Critical
Publication of CN106030697B publication Critical patent/CN106030697B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373Voice control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/06Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148Instrument input by voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L2015/088Word spotting
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

根据本发明的车载控制装置,其接收显示在显示器上的多个操作键的信息,并基于该操作键信息根据对用户说话实施语音识别后得到的结果来确定对应的操作键,接收用户采用决定键发出的执行指示,执行分配给操作键的功能,因此无需直接接触显示在显示器上的多个操作键且无需复杂的按键操作,即可进行操作。此外,通过仅在方向盘上设置1个决定键,用户在驾驶过程中无需松开方向盘即可对显示在显示器上的操作键进行安全操作。

Description

车载控制装置及车载控制方法
【技术领域】
本发明涉及一种指示执行分配给操作键的功能的车载控制装置及车载控制方法,该操作键显示在与车载设备连接的显示器上。
【背景技术】
以往,一般的车载导航装置等车载信息机器中,为了执行分配给显示在与该机器连接的显示器上的操作键的功能,需通过触摸屏、与各操作键对应的物理键或者旋转开关和十字键等操作设备等,指定显示在显示器画面中的操作键,从而实施操作。
因此,例如利用触摸屏进行操作时,用户的手会松开方向盘,从而存有难以在驾驶中进行操作并且会妨碍驾驶的问题。
此外,在使用物理键时,物理键的数量会与操作键的数量成比例地增加,因此在操作键数量较多时,存有难以在方向盘上配置与所有操作键对应的物理键的问题。
此外,虽然并非不能在方向盘上配置旋转开关或十字键,但并不优选在有限的配置空间中配置这些较大的设备,随着显示在显示器上的操作键的数量增加,需要复杂的操作来指定各操作键,因此存有难以在驾驶中进行操作并且会妨碍驾驶的问题。
为了解决这些问题,例如在专利文献1中公开了提供一种在操作自动变速机的变速控制装置或车辆装备类机器时,驾驶者无需松开方向盘即可控制车载控制系统的车辆控制装置的技术。
【现有技术文献】
【专利文献】
【专利文献1】
日本专利特开平8-83093号公报
【发明内容】
【发明所要解决的技术问题】
但是,例如专利文献1那样现有技术中,在显示器上显示的多个操作键中,经常会出现该操作键的数量庞大或所能执行的操作键会相应随时状况和显示内容而有所不同的情况,对于用户来说,若仅是直接使用专利文献1的发明,有时会难以提供充分的操作性。
具体而言,存有以下问题,即在操作键的数量庞大时,用户难以记住与该所有操作键对应的控制指令,同时作为语音识别技术的问题,其取决于用户的说话状态和周围环境等,如果等待的控制指令的数量增加,则语音识别精度会随着数量的增加而降低。此外,随着控制对象的增加,可同时受理的控制指令的语音输入内容必须清晰可辨,因此一般还会存有用户必须记住更长的语句来作为控制指令的课题。
例如,音频型车载导航装置中,仅是“放大”这一控制指令时,可以表示[放大地图画面]和[放大音频音量]中的任一种,意思比较含糊,所以必须说“放大地图”或者“放大音量”等。此外,仅在特定条件下才能受理的操作中,可能造成用户的困惑,例如虽然用户记住了控制指令但不知道应在什么情况说指令。
本发明为解决上述问题开发而成,其目的在于提供一种车载控制装置及车载控制方法,在操作显示在与车载设备连接的显示器上的多个操作键时,易于在驾驶过程中进行操作且不会妨碍驾驶,并且能够根据显示内容将与可受理的操作对应的控制指令清楚明了地提供给用户。
【解决技术问题所采用的技术方案】
为了实现上述目的,本发明涉及一种车载控制装置,用来控制搭载在车辆上的车载设备,其特征在于,具有:按键信息接收部,其根据显示在与所述车载设备连接的显示器上的显示内容的变化,动态地接收显示在所述显示器上的多个操作键的信息;语音识别部,其使用语音识别字典,识别用户说话的语音;操作键确定部,其基于所述按键信息接收部所接收到的操作键信息及所述语音识别部的语音识别结果,确定与所述用户说话的语音相对应的操作键;以及控制部,其接收来自决定键的输出,以选择所述操作键确定部所确定的操作键,对所述车载设备发出指示,以执行分配给所确定的所述操作键的功能。
【发明效果】
根据本发明的车载控制装置,无需直接接触显示在显示器上的多个操作键且无需复杂的按键操作,即可进行操作。此外,通过仅在方向盘上设置1个决定键,用户即可在驾驶过程中对显示在显示器上的操作键进行安全操作而无需松开方向盘。
【附图说明】
图1是表示实施方式1的车载控制装置的一例的框图。
图2是表示实施方式1的车载控制装置的动作的流程图。
图3是实施方式1中在显示器的显示画面上显示着多个操作键的菜单画面的一例的图。
图4是表示图3时的操作键信息(与各操作键对应的识别关键词及执行指令)的一例的表格。
图5是表示车载导航装置(车载设备)的动作及显示器的显示内容、操作键信息以及用户操作的具体例的说明图。
图6是表示实施方式1的车载控制装置的另一例的框图。
图7是表示实施方式1的车载控制装置的其他另一例的框图。
图8是表示实施方式2的车载控制装置的一例的框图。
图9是表示实施方式2的车载控制装置的动作的流程图。
图10是表示实施方式2中从在显示器的显示画面上显示多个操作键的菜单画面进行转移的一例的图。
图11是表示实施方式2的车载控制装置的另一例的框图。
图12是表示实施方式3的车载控制装置的一例的框图。
图13是表示实施方式3的车载控制装置的动作的流程图。
图14是表示实施方式3的车载控制装置的动作的流程图的另一例。
图15是表示实施方式3的车载控制装置的另一例的框图。
图16是表示实施方式4的车载控制装置的一例的框图。
图17是表示实施方式4的车载控制装置的动作的流程图。
图18是表示实施方式5的车载控制装置的一例的框图。
图19是表示实施方式5的车载控制装置的动作的流程图。
图20是表示实施方式6的车载控制装置的一例的框图。
图21是表示实施方式6的车载控制装置的动作的流程图。
图22是表示实施方式6的操作键信息(与各操作键对应的识别关键词、执行指令及坐标信息)的一例的表格。
【具体实施方式】
以下参照附图,详细说明本发明的实施例。
本发明的车载控制装置,其通过用户操作对搭载在车辆上的各种车载设备进行控制,其中通过语音识别及1个决定键对显示在与车载设备连接的显示器上的多个操作键进行操作。
实施方式1
图1是表示本发明的实施方式1的车载控制装置的一例的框图。该车载控制装置10与作为控制对象的车载设备1连接,具有:按键信息接收部11、语音识别部12、语音识别字典13、操作键确定部14以及控制部15,通过联合运用车载设备1及车载控制装置10,对车载设备1实施操作控制。此外,该车载控制装置10上连接着话筒3及1个决定键4,车载设备1上连接着显示器2。
另外,作为与车载控制装置10连接的车载设备1,可以是例如车载导航装置或HUD(Head-Up Display,平视显示器)、仪表板等具有操作控制功能的显示器、具有显示器的机器或与显示器连接的机器等进行显示及操作的装置,该车载控制装置10自身也可组入这些机器中。作为连接方式,可以是有线,也可以是Bluetooth(注册商标)或Wi-Fi(注册商标)等无线,也可以构成为网络上的服务器。
此外,虽然此处说明中将决定键4设为设置在车辆的方向盘(把手)上的H/W开关,但设置的位置及开关的形态并无限定,只要是用来执行所决定的操作的开关即可。此外,虽然省略了图示,但作为车载设备1的操作控
制,可以并用触摸屏、H/W开关、旋转开关、十字键以及遥控器等现有的操作设备来进行操作,与车载控制装置10连接的车载设备可以是多个,话筒3及1个决定键4也可连接至车载设备1侧。以下实施方式中也相同。
车载设备1将显示在显示器2上的操作键的信息发送至车载控制装置10,并从车载控制装置10接收与各操作键对应的执行指令,执行与该操作键对应(被分配)的功能。与该操作键对应(被分配)的功能是指选择该操作键时会执行的功能,例如转移至预先规定的画面或重放音乐等。
此外,显示在显示器2上的操作键并非严格地仅限定为显示在显示器2上的操作键,也可包含由于未收入显示器2的显示区域等理由,可通过规定操作例如画面滚动、画面缩小或放大以及显示/隐藏的切换来进行显示的操作键。另外,以下实施方式中也相同。
操作键信息接收部11通过所连接的车载设备1,接收显示在与车载设备1连接的显示器2上的多个操作键的信息。操作键信息的具体例将在下文另述,其会相应显示在显示器2上的显示内容的变化,实施动态接收。也就是说,随着在显示器2中画面显示的显示内容进行动态变化,接收的操作键信息也会发生动态变化。
语音识别部12具有语音识别字典13,通过将利用话筒3等采集的声音(用户说话的语音)进行A/D转换,以例如PCM(Pulse Code Modulation,脉冲编码调制)方式进行获取,并对语音的特征量与语音识别字典13进行对照来实施语音识别处理。此处,作为语音识别处理,可使用例如HiddenMarkov Model(隐马尔可夫模型)等一般方法。此外,语音识别部12也可使用网络上的语音识别服务器。
此处,语音识别字典13构成为,可识别下述操作键确定部14的按键确定处理中使用的关键词等,语音识别部12输出说话中含有的关键词以作为语音识别结果(以下称为“识别关键词”)。
车载导航系统等中搭载的语音识别功能中,一般而言,用户会对系统明示(指示)开始说话等。因此,用来指示语音识别开始的按钮等(以下称为“语音识别开始指示部”)显示在触摸屏上或设置在方向盘上。然后,在由用户按下语音识别开始指示部后,识别说话的语音。也就是说,在语音识别开始指示部输出语音识别开始信号,并且语音识别部接收该信号后,会等待用户说话,实施上述识别处理。
但是,即使没有上述的用户的语音识别开始指示,该实施方式1的语音识别部12也会始终识别用户的说话内容。也就是说,语音识别部12即使未接收语音识别开始信号,也会重复实施以下处理:使用识别字典实施识别处理,并输出包含在语音识别结果中的关键词。此外,虽然如上所述始终识别用户的说话内容,但为了抑制CPU和存储器等的使用量,也可仅在基于输入语音的特征(例如输入音量等)能够判定出话筒输入的声音为语音时才进行识别处理。以下实施方式中也相同。
操作键确定部14基于通过按键信息接收部11接收的操作键信息及语音识别部12的语音识别结果,指定与用户说话的语音对应的操作键。具体而言,参照按键信息接收部11所获取到的操作键信息,来确定与从语音识别部12获取到的识别关键词对应的操作键的执行指令。
控制部15通过接收来自用来选择由操作键确定部14指定的各操作键的决定键4的输出,并将与所指定的操作键对应的执行指令发送至车载设备1,从而对车载设备1发出指示,执行分配给该操作键的功能。执行指令只要是能够按照预先规定的规则进行唯一指定操作键的指令即可,可以是任何形态,例如由数字串或字符串构成的ID、电信号图案或者操作键的名称等。以下实施方式中也相同。
接着,参照图2具体说明如此构成的实施方式1的车载控制装置10的动作。此处,假设连接的车载设备1是音频型车载导航装置。
首先,按键信息接收部11通过连接的车载导航装置(车载设备1)接收显示在显示器2上的操作键信息(步骤ST1)。例如,如图3所示,显示器2的显示画面中显示[重放]、[停止]、[下一首]、[上一首]这4个操作键时,如图4所示,作为操作键信息,是指与各操作键对应的至少1个识别关键词及执行指令的信息。
此处,图3是实施方式1中在显示器2的显示画面上显示有多个操作键的菜单画面的一例的图。此外,图4是表示图3时的操作键信息(与各操作键对应的识别关键词及执行指令)的一例的表格。此时,操作键[重放]的识别关键词为“重放”,执行指令代码为“0001”,操作键[停止]的识别关键词为“停止”,执行指令代码为“0010”,操作键[下一首]的识别关键词为“下一首”,执行指令代码为“0011”,操作键[上一首]的识别关键词为“上一首”,执行指令代码为“0100”。
其后,语音识别部12使用语音识别字典13,根据从话筒3输入的语音信号实施语音识别,并输出说话中含有的识别关键词(步骤ST2)。例如,语音识别字典13内事先将“重放”定义为识别关键词,在用户说“嗯,‘重放'”等时,会输出“识别关键词=‘重放'”。
接着,操作键确定部14使用从语音识别部12获取的识别关键词,参照从按键信息接收部11获取的操作键信息,判定有无与语音识别结果对应的操作键(步骤ST3)。具体地说,判断有无与语音识别结果即识别关键词一致的操作键。
然后,操作键信息中没有与语音识别结果(识别关键词)对应的操作键时(步骤ST3为否时),返回步骤ST2,再次利用语音识别部12实施语音识别处理。
另一方面,存有与语音识别结果对应的操作键时、即存有与识别关键词相一致的操作键时(步骤ST3为是时),确定与该识别关键词相一致的操作键(步骤ST4),并将与该操作键对应的执行指令发送至控制部15。例如,“识别关键词=‘重放'”时,确定“操作键=‘重放'”,将对应的“执行指令=‘0001'”发送至控制部15。
控制部15检测到与车载控制装置10连接的1个决定键4被按下后(步骤ST5为是时),将从操作键确定部14发送来的执行指令发送至与车载控制装置10连接的车载设备1(步骤ST6),由车载设备1实施相应的功能。例如,将与“操作键=重放”对应的“执行指令=‘0001'”从车载控制装置10发送至车载设备1,作为与“执行指令=‘0001'”对应的功能,车载设备1例如实施音乐重放。
此处,操作键信息接收部11相应显示器2的显示内容的变化,动态地接收操作键的信息。以下参照图5说明其详细内容。
图5是显示车载导航装置(车载设备1)的动作及显示器2的显示内容、操作键信息以及用户操作的具体例的说明图。
如图5(a)所示,显示器2中显示有具有[设定目的地][音频][编辑路线][帮助]以及[返回]这5个操作键的主菜单。此时,按键信息接收部11接收的操作键信息如图5(b)所示。
在此状态下,例如用户想要重放音乐时,如图5(c)所示,用户说“嗯,‘音频'”并按下决定键4后,如图5(d)所示,在显示器2上显示音频菜单画面(转移至音频菜单画面)。
在图5(d)所示的音频菜单画面中,显示有[艺术家][专辑][所有曲目][检索]以及[返回]这5个操作键。此时,按键信息接收部11接收的操作键信息如图5(e)所示。
在此状态下,例如图5(f)所示,用户说“所有曲目”并按下决定键4后,显示器2上会显示所有曲目列表画面(转移至所有曲目列表画面)。
以下,省略图示,此处进一步按照如下流程进行操作即可:用户继续说“XXXX”(列表中的乐曲名)并按下决定键4后,歌曲XXXX得以重放,并显示如上所述的音频操作画面。
另外,图5(c)及(f)所示的符号30表示用户说的话(说话内容)。
如上所述,根据该实施方式1,无需直接接触显示在显示器上的多个操作键且无需复杂的按键操作,即可进行操作。此外,通过仅在方向盘上设置1个决定键,用户在驾驶过程中无需松开方向盘即可对显示在显示器上的操作键进行安全操作。
此外,对于具有例如在层次化的画面间进行转移的UI(UserInterface,用户界面)的车载设备或者在显示区域内操作键存在局部重叠或添加的显示,也可动态地实施相应的操作,也就是说,可相应显示器的显示内容的变化,动态地接收操作键的信息,因此即使所显示的操作键发生变更,也能够实施动态跟踪,或者能对应弹出的通知进行操作。
此外,如图6所示,车载控制装置10还具有字典生成部16,其基于所显示的操作键的信息,根据至少与显示在显示器2上的操作键对应的语句(识别关键词)生成字典,语音识别部12也可使用通过字典生成部16生成的语音识别字典17,识别用户说出的语音。
在生成语音识别字典17时,为了识别语音而需要使用音素等读取信息,但该信息可与识别关键词对应地填入操作键信息中,也可通过形态分析处理等,根据操作键信息的操作键名称和识别关键词的信息等文本信息,添加或推测读取信息。此处的形态分析处理可使用一般方法,例如上述语音识别处理中也使用的Hidden Markov Model等。
如上所述,在显示内容发生动态变化时会相应地生成语音识别字典17,因此能够将语音识别对象词汇数抑制在所需最小限度。因此,能够防止误识别与操作无关的语句,或者能够缩短语音识别所需的时间,提高语音识别性能(精度、响应速度等),所以用户能够实施方便的操作。
此外,如图7所示,车载控制装置10除了决定键4以外还具有用来识别用户的身体动作的动作识别部18,控制部15也可在通过动作识别部18识别出用户打算执行的身体动作,例如点头或眨眼等时,发出指示,执行分配给所确定的操作键的功能。
作为动作识别部18的身体动作识别处理,采用使用摄像头5的一般的图案识别即可,点头的检测中,可以在头部安装加速度传感器,在规定方向上检测出规定强度时判断为点了头。
如此,不仅是决定键,连按下决定键的动作(操作)也不需要,因此无需任何按钮操作,手或手指完全无需松开方向盘,即使在行驶中也能够实施安全的操作。
另外,通过使用车载控制装置10的车载设备1的微型计算机运行与本发明特有的处理有关的程序,能够作为硬件与软件联动的具体单元,从而实现车载控制装置10。以下实施方式中也相同。
实施方式2
图8是表示本发明的实施方式2的车载控制装置的一例的框图。另外,与实施方式1中说明的结构相同时,标注相同符号并省略重复说明。
与实施方式1相比,以下所示的实施方式2的车载控制装置10还具有受理信息通知部19,其基于操作键确定部14的操作键确定结果,通过所连接的扬声器6、或车载设备1利用显示器2通知以下某种信息:开始受理该确定的操作键的执行指示、正在继续受理执行指示、或者所确定的操作键信息。另外,虽然省略了图示,但也可使用与车载设备1连接的扬声器。
以下,说明如此构成的实施方式2的车载控制装置10的动作。
图9是表示实施方式2的车载控制装置10的动作的流程图。此处,也与实施方式1同样地假设所连接的车载设备1是音频型导航装置。
到通过操作键确定部确定操作键为止的处理(步骤ST11~ST14)与实施方式1的图2所示的流程图的步骤ST1~ST4相同,因此省略说明。
此外,该实施方式2中,在步骤ST14中操作键确定部14确定操作键后,受理信息通知部19会通知通过操作键确定部14确定操作键后能受理该操作键的执行指示;或者所确定的操作键的信息等中至少如下的某种信息:确定操作键后开始受理该操作键的执行指示、正在继续受理执行指示、所指定的操作键的信息(步骤ST15)。
具体地说,例如接收确定为“操作键=‘重放'”的结果后,通过从所连接的扬声器6中鸣响音效或音乐,或者变更显示器2的显示画面的亮度、颜色等,通知操作键已被确定且能够受理该操作键的执行指示等。
并且,也可利用针对每个操作键准备的录音语音或语音合成的TTS(Textto Speech,从文字到语音)技术,读出操作键名称(例如“重放”等)等,以将所确定的操作键明确地传达给用户。此外,也可对显示在显示器2上的操作键施加视觉效果,例如图10(b)所示,使所确定的操作键的周围亮灯、在所选择的操作键附近显示表示确定的图形或图标、或者变更操作键部分的亮度、颜色、形状、大小等。
图10是表示实施方式2中从在显示器2的显示画面上显示多个操作键的菜单画面进行转移的一例的图。
如图10(a)所示,显示器2中显示有具有[设定目的地][音频][路线编辑][帮助]以及[返回]这5个操作键的主菜单。
在此状态下,例如用户想要重放音乐时,用户说“音频”后,会如图10(b)所示,通过仅[音频]这一操作键被附加用框围住等强调显示40,从而使用户能够视觉识别已可受理该操作键的执行指示。
然后,在此状态下,用户按下决定键4后,如图10(c)所示,在显示器2上显示[艺术家][专辑][所有曲目][检索]以及[返回]这5个操作键。以后的操作及画面转移予以省略。
如上所述,根据该实施方式2,能够在执行指示前确认可受理执行指示的定时或所确定的操作键中的至少一个,因此能够抑制在操作键被确定前即使按下决定键也无法受理执行指示的问题、或因确定了与意图不同的操作键而产生误操作(与用户的意图不同的操作)的问题。
此外,如图11所示,车载控制装置10还具有用来获取车辆的信息的车辆信息获取部20,受理信息通知部19也可以相应通过车辆信息获取部20从各种传感器7获取的车速或方向盘的转向角等车辆信息,变更对所确定的操作键进行通知的通知方法。
例如,如上所述要将所确定的操作键特别明确地传达给用户时,考虑如下方法,如果车辆的行驶速度小于预先决定的规定值,则判断为有查看画面的空闲,从而重视方便性,例如图10(b)所示,对显示器2发出指示,采用传递通知信息时无需花费时间的画面显示方式来进行通知,如果车辆的行驶速度为规定值以上,则重视安全性,对扬声器6发出指示,采用无需查看画面的声音方式来进行通知(语音向导等)。
然后,控制部15检测到与车载控制装置10连接的1个决定键4被按下后(步骤ST16为是时),将发送自操作键确定部14的执行指令发送至与车载控制装置10连接的车载设备1(步骤ST17),车载设备1实施相应的功能。
如此,例如在停车时采用画面显示方式进行通知,因此能够轻松操作,在行驶时采用语音输出方式进行通知,因此能够实现安全操作等,从而能够在用户的驾驶负荷较低时重视方便性,在用户的驾驶负荷较高时重视安全性,将所确定的操作键通知给用户,因此,用户能够相应驾驶状况进行安全且方便的操作,并能够改善操作的不便。
另外,此处的车辆信息含有车辆行驶的道路的道路宽度和弯曲程度(直线程度)等道路信息、行驶中的时刻信息等,不仅是停车时和行驶时的差异,还可根据车速来变化通知方法,或者根据行驶场所、道路信息、时刻等变更该车速的阈值并变化通知方法,因此对于用户来说,能够提供安全且方便的操作。
此外,虽然省略了图示,但也可根据所连接的导航装置(车载设备1)等的信息来获取行驶中的自车位置、道路宽度信息,从而根据行驶的难易度来变更行驶速度的规定值(阈值)。
实施方式3
图12是表示本发明的实施方式3的车载控制装置的一例的框图。另外,与实施方式1、2中说明的结构相同时,标注相同符号并省略重复说明。
与实施方式1相比,以下所示的实施方式3的车载控制装置10还具有受理期间设定部21,其设定可受理分配给由操作键确定部14确定的操作键的功能的执行指示期间(受理期间),控制部15仅在受理期间设定部21所设定的受理期间内受理执行指示。
以下,说明如此构成的实施方式3的车载控制装置10的动作。
图13是表示实施方式3的车载控制装置10的动作的流程图。此处,也与实施方式1、2同样地假设所连接的车载设备1是音频型车载导航装置。
到通过操作键确定部14确定操作键为止的处理(步骤ST21~ST24)与实施方式1的图2所示的流程图的步骤ST1~ST4相同,因此省略说明。
然后,该实施方式3中,在步骤ST24中由操作键确定部14确定操作键后,受理期间设定部21接收操作键确定部14的操作键确定结果,并设定预先决定的规定受理期间例如10秒钟(步骤ST25)。
如果在确定操作键后的规定受理期间(此处为10秒)以内(步骤ST26为否时),则控制部15与实施方式1同样地等待用户按下决定键。另一方面,如果操作键被确定后经过规定受理期间(10秒),仍未检测出用户按下决定键(步骤ST27为否且步骤ST26为是时),则返回步骤ST22,再次利用语音识别部12实施语音识别处理。
然后,控制部15检测到与车载控制装置10连接的1个决定键4被按下后(步骤ST27为是时),将发送自操作键确定部14的执行指令发送至与车载控制装置10连接的车载设备1(步骤ST28),车载设备1实施相应的功能。
如上所述,根据该实施方式3,若操作键被确定后到决定键被按下的期间内经过了受理期间,则识别出的语句会被取消,因此能够降低出现误识别时发生并非用户所意图的动作的可能性。此外,由于用户会将注意力集中在驾驶方面,所以在忘记所确定的操作键为何等时,也能够通过在经过受理期间后重新发声来重新从语音识别开始进行操作,因此能够改善用户的操作方便性。
此外,如图14所示,语音识别部12在步骤ST25中设定了规定受理期间后的该受理期间内也会运行,每次语音识别部12的语音识别结果发生变更时,操作键确定部14可基于该变更后的语音识别结果重新确定操作键。
也就是说,用户在操作键被确定后的规定受理期间(例如10秒)以内且用户未按下决定键的期间内说了话(用户重新说话)时(步骤ST26、ST27都为否且步骤ST29为是时),返回步骤ST22,再次利用语音识别部12实施语音识别处理。
如此,在操作键被确定但想要重新选择其他操作键或所确定的操作键不正确等时,只要未经过规定期间,就能够通过重新说话来方便地纠正误识别,因此能够改善用户的操作方便性。
此外,如图15所示,车载控制装置10还具有用来获取车辆的信息的车辆信息获取部20,受理期间设定部21也可以根据车辆信息获取部20从各种传感器(车速传感器等)7获取的车速或方向盘的转向角等车辆信息,变更受理期间(使其可变)。另外,此处的车辆信息中含有车辆行驶的道路的道路宽度及弯曲程度(直线程度)等道路信息等。
例如,高速行驶时或在路口左转/右转时,判断为驾驶负荷较高、用户难以按下决定键时,则延长设定受理期间,反之如果方向盘的操作频率较低,持续了一段时间的直线行驶,则判断为驾驶负荷较低、用户容易按下决定键,从而缩短设定受理期间。
如此,根据与驾驶负荷有关的用户空闲程度,来设定适当的受理期间,因此能够减轻操作中的问题,例如在忙碌时无法在受理期间内实施执行指示,为此必须再次实施语音识别才能进行操作,或者在发生误识别时可能出现并非用户所意图的动作。
此外,虽然省略了图示,但也可以根据所连接的导航装置(车载设备1)等的信息获取行驶中的自车位置及道路宽度信息,并相应行驶的难易度变更受理期间。
实施方式4
图16是表示本发明的实施方式4的车载控制装置的一例的框图。另外,与实施方式1~3中说明的结构相同时,标注相同符号并省略重复说明。
与实施方式1相比,以下所示的实施方式4的车载控制装置10还具有说话判定部22,其判定来自话筒3的输入语音(用户说话的语音)是否为意图进行操作的话语,仅在通过说话判定部22判定为输入语音(说话的语音)是意图进行操作的话语时,语音识别部12才对该话语进行语音识别。
说话判定部22的说话状态判定处理(判定是否为意图进行操作的话语的处理)中,使用例如语音识别中使用的上述Hidden Markov Model即可,例如如果作为并非意图进行操作的话语,预先学习笑声、咳嗽、喷嚏或多人对话中的至少1个语音特征,则能够识别出输入语音并非意图进行操作的话语,因此能够判定其是否为意图进行操作的话语。
或者,虽然省略了图示,但在车内使用时,乘客的位置不会频繁变动,因此通过配置多个话筒,从而能根据各话筒的输入信号的功率比或相位差的变动,来判断其是否为多人进行会话,因此在这种多人对话的情况下,能够判定为并非意图进行操作的话语。此外,仅以驾驶者为操作对象时,能够将来自驾驶座位置方向以外的语音判定为并非意图进行操作的话语。
以下,说明如此构成的实施方式4的车载控制装置10的动作。
图17是表示实施方式4的车载控制装置10的动作的流程图。此处,也与实施方式1~3同样地假设所连接的车载设备1是音频型车载导航装置。
首先,操作键信息接收部11通过所连接的车载导航装置(车载设备1)接收显示在显示器2上的操作键信息(步骤ST31)。
接着,说话判定部22通过例如上述方法判定来自话筒3的输入语音是否为意图进行操作的话语(步骤ST32)。
然后,在判定为来自话筒3的输入语音并非意图进行操作的话语时(步骤ST32为否时)进行等待,直至判定为意图进行操作的话语被输入。也就是说,在判定为并非意图进行操作的话语时,在实施语音识别处理前放弃该输入语音。
另一方面,在判定为是意图进行操作的话语时(步骤ST32为是时),语音识别部12接收说话判定部22对说话状态的判定结果,并实施语音识别处理(步骤ST33)。也就是说,仅在步骤ST32中判定为是意图进行操作的话语时,实施语音识别处理。
接着,操作键确定部14使用从语音识别部12获取的识别关键词,参照从按键信息接收部11获取的操作键信息,判定有无与语音识别结果对应的操作键(步骤ST34)。
然后,在操作键信息中没有与语音识别结果(识别关键词)对应的操作键且操作键未被确定时(步骤ST34为否时),返回步骤ST32,再次由说话判定部22实施说话状态判定处理。
另一方面,若存在与语音识别结果对应的操作键且操作键已被确定时,即、存在与识别关键词相一致的操作键(步骤ST34为是),则其后的处理(步骤ST35~ST37)与实施方式1的图2所示的流程图的步骤ST4~ST6相同,因此省略说明。
如上所述,根据该实施方式4,能够在语音识别前去除与操作无关的话语,因此能够在语音识别处理中抑制误识别的发生频率,抑制并非意图的操作键的执行,从而改善用户操作的方便性。
实施方式5
图18是表示本发明的实施方式5的车载控制装置的一例的框图。另外,与实施方式1~4中说明的结构相同时,标注相同符号并省略重复说明。
与实施方式1相比,以下所示的实施方式5的车载控制装置10还具有输出音去除部23,其获取从车载设备1输出至与车载设备1连接的扬声器8的扬声器输出音信号,并从输入音中去除该扬声器输出音的成分,通过该输出音去除部23去除扬声器输出音的成分后,由语音识别部12对语音实施语音识别。
作为输出音去除部23的输出音去除方法,例如可使用一般的扬声器输出音信号及话筒输入音信号,并利用通过学习辨识法(learningidentification method)求得滤波器系数的自适应滤波器等来实施去除。如此,能够推测在使用的声响环境下输入至话筒的扬声器输出音的声学回声成分,因此通过从输入至话筒的语音信号中减去该声学回声成分,能够抑制扬声器输出音信号对语音识别精度造成的影响。
以下,说明如此构成的实施方式5的车载控制装置10的动作。
图19是表示实施方式5的车载控制装置10的动作的流程图。此处,也与实施方式1~4同样地假设连接的车载设备1是音频型车载导航装置。
首先,操作键信息接收部11通过连接的车载导航装置(车载设备1)接收显示在显示器2上的操作键信息(步骤ST41)。
接着,输出音去除部23接收从车载设备1发送至扬声器8的扬声器输出音信号(步骤ST42),使用该扬声器输出音信号及从话筒输入的语音信号,通过例如上述方法,从话筒输入的语音中去除扬声器输出的语音的声学回声成分(输出音成分)(步骤ST43)。
然后,语音识别部12对通过输出音去除部23去除扬声器输出音后的输入语音实施语音识别处理(步骤ST44)。
该语音识别处理以后的处理(步骤ST45~ST48)与实施方式1的图2所示的流程图的步骤ST3~ST6相同,因此省略说明。
另外,上述实施方式5中,去除的是所连接的车载设备1的扬声器输出音信号,但也可以一同接收并去除从车载控制装置10本身及其他机器或搭载有车载控制装置10的车辆等输出的声音的信号。
如上所述,根据该实施方式5,即使在车载语音向导、音效播放过程中或音乐重放过程中,也能够从话筒输入的语音中去除扬声器输出音的声学回声成分,因此能够抑制误识别,实施更高精度的语音识别,并且能够改善用户操作的方便性。
实施方式6
图20是表示本发明的实施方式6的车载控制装置的一例的框图。另外,与实施方式1~5中说明的结构相同时,标注相同符号并省略重复说明。
与实施方式1相比,以下所示的实施方式6的车载控制装置10还具有用来检测用户视线的视线检测部24,操作键确定部14使用视线检测部24所检测出的视线信息及语音识别部12的识别结果,来确定操作键。
视线检测部24检测用户的视线,并将该视线的坐标信息发送至操作键确定部14。
视线检测部24的视线检测处理中,例如可基于通过摄像头5拍摄用户的脸部的图像,利用一般的图案识别,根据脸部方向大致推测视线,或者虽然省略了图示,但也可使用采用光源照射的角膜反射法等来检测视线。此外,如果事先获取显示器2与用户的肉眼的相对位置关系的信息,则可作为坐标值获取用户在查看显示器2的哪个部分。
以下,说明如此构成的实施方式6的车载控制装置10的动作。
图21是表示实施方式6的车载控制装置10的动作的流程图。此处,也与实施方式1~5同样地假设连接的车载设备1是音频型车载导航装置。
首先,按键信息接收部11通过连接的车载导航装置(车载设备1)接收显示在显示器2上的操作键信息(步骤ST51)。
此处接收的操作键信息如图22所示,除了与各操作键对应的识别关键词及执行指令以外,还包含显示各操作键的显示器2上的坐标信息例如(x,y)=(100,100)等。该坐标信息中只要是能够唯一识别例如操作键的左上坐标或中心坐标等显示位置的信息即可,也可一同添加知晓尺寸的信息。
接着,视线检测部24通过例如上述方法,根据通过摄像头5拍摄的摄像头图像检测用户的视线方向,获取用户视线所朝向的显示器2的显示画面上的对应坐标信息(以下称为“视线坐标”)例如(x,y)=(200,200),并发送至操作键确定部14(步骤ST52)。
此外,语音识别部12使用语音识别字典13,根据从话筒3输入的语音信号实施语音识别,并输出说话中含有的识别关键词(步骤ST53)。
然后,操作键确定部14基于步骤ST52中从视线检测部24接收的视线坐标、步骤ST53中识别出的语音识别结果以及步骤ST51中接收到的操作键信息,来判定有无与视线方向及识别结果对应的操作键(步骤ST54),若存在与视线方向及识别结果对应的操作键(步骤ST54为是时),则确定与语音识别结果对应的操作键(步骤ST55)。
具体而言,将从通过视线检测部24接收到的视线坐标(x,y)=(200,200)至预先决定的规定范围例如±100、即从坐标(x,y)=(100,100)至(x,y)=(300,300)为止的范围假设为可识别范围。
然后,根据添加至按键信息接收部11所接收到的操作键信息中的操作键的坐标信息,操作键处于上述可识别范围内即操作键信息是图22中所示的信息时,仅坐标(x,y)=(100,100)即[重放]及坐标(x,y)=(100,300)即[下一首]为可识别范围内的操作键,因此仅参照操作键[重放]及[下一首]的操作键信息,确定与语音识别结果对应的操作键。
另一方面,可识别范围内的操作键信息中没有与语音识别结果(识别关键词)对应的操作键时(步骤ST54为否时),返回步骤ST52,并再次实施视线检测部24的视线检测及语音识别部12的语音识别处理。
然后,步骤ST55的操作键确定以后的处理(步骤ST56~ST57)与实施方式1的图2所示流程图的步骤ST5~ST6相同,因此省略说明。
另外,要连接多个车载设备时,也可利用视线检测部24检测出的视线方向来限定操作对象机器。
此外,虽省略了图示,但与实施方式1同样,还具有字典生成部16(参照图6),可使用添加至操作键信息中的坐标位置及通过视线检测部24获取的视线坐标,生成语音识别字典,仅限定规定的可识别范围中含有的操作键实施语音识别。
如此,通过从显示画面中筛选出用户查看的附近位置,并限定在该筛选出的附近位置确定操作键,从而将语音识别的对象限定为与用户想要操作的按键对应的识别关键词,因此能够提高语音识别的精度或响应速度。在例如显示器2的显示画面较大的情况下,或有多个画面(多个显示器)等情况下,特别有效。
如上所述,根据该实施方式6,能够通过视线检测推测用户想要操作的按键,并且能够抑制对与说话不同的操作键的确定,因此能够抑制对并非意图的操作键的执行,改善用户的操作方便性。
另外,本申请发明可在本发明的范围内自由组合各实施方式,或者改善各实施方式的任意构成要素或在各实施方式中省略任意构成要素。
【工业上的实用性】
只要是例如车载导航装置或HUD(Head-Up Display,平视显示器)、仪表板等具有操作控制功能的显示器、具有显示器的机器或与显示器连接的机器等进行显示及操作的装置就可将本发明的车载控制装置适用于任何的车载设备。此外,该车载控制装置自身也可组装于这些机器中。
【符号说明】
1 车载设备
2 显示器
3 话筒
4 决定键
5 摄像头
6、8 扬声器
7 各种传感器
10 车载控制装置
11 按键信息接收部
12 语音识别部
13、17 语音识别字典
14 操作键确定部
15 控制部
16 字典生成部
18 动作识别部
19 受理信息通知部
20 车辆信息获取部
21 受理期间设定部
22 说话判定部
23 输出音去除部
24 视线检测部
30 说话(说话内容)
40 强调显示。

Claims (12)

1.一种车载控制装置,其用来对搭载于车辆的车载设备实施控制,其特征在于,具有:
按键信息接收部,其根据显示在与所述车载设备连接的显示器上的显示内容的变化,动态地接收显示在所述显示器上的多个操作键的信息;
语音识别部,其使用语音识别字典,识别用户说话的语音;
操作键确定部,其基于所述按键信息接收部所接收到的操作键信息及所述语音识别部的语音识别结果,来确定与所述用户说话的语音对应的操作键;以及
控制部,其接收来自决定键的输出,以选择由所述操作键确定部所确定的操作键,并对所述车载设备发出指示,以执行分配给所确定的所述操作键的功能。
2.根据权利要求1所述的车载控制装置,其特征在于,
还具有字典生成部,其基于所述操作键的信息,至少根据与显示在所述显示器上的操作键相对应的语句,生成所述语音识别字典,
所述语音识别部使用所述字典生成部所生成的语音识别字典,识别所述用户说话的语音。
3.根据权利要求1所述的车载控制装置,其特征在于,
还具有受理信息通知部,其基于所述操作键确定部的操作键确定结果,通知以下至少一项内容:开始受理所确定的所述操作键的执行指示的情况、正在继续受理所确定的所述操作键的执行指示的情况、或者所确定的所述操作键信息。
4.根据权利要求3所述的车载控制装置,其特征在于,
还具有车辆信息获取部,其用来获取所述车辆的信息,
所述受理信息通知部根据所述车辆信息获取部所获取的车辆信息,变更进行所述通知的方法。
5.根据权利要求1所述的车载控制装置,其特征在于,
还具有受理期间设定部,其设定能对分配给所述操作键确定部所确定的操作键的功能的执行指示进行受理的受理期间,
所述控制部仅在所述受理期间设定部所设定的所述受理期间内受理执行指示。
6.根据权利要求5所述的车载控制装置,其特征在于,
所述语音识别部在所述受理期间内也进行动作,
所述操作键确定部在每次所述语音识别部的语音识别结果发生变更时,基于该变更后的语音识别结果重新确定操作键。
7.根据权利要求5所述的车载控制装置,其特征在于,
还具有车辆信息获取部,其用来获取所述车辆的信息,
所述受理期间设定部根据所述车辆信息获取部所获取的车辆信息,来变更所述受理期间。
8.根据权利要求1所述的车载控制装置,其特征在于,
还具有说话判定部,其判定所述用户说话的语音是否为意图进行操作的话语,
所述语音识别部仅在所述说话判定部判定为所述说话的语音是意图进行操作的话语的情况下实施语音识别。
9.根据权利要求1所述的车载控制装置,其特征在于,
还具有动作识别部,其用来识别所述用户的身体动作,
所述控制部在所述动作识别部识别出所述用户意图执行功能的身体动作的情况下发出指示,以执行分配给所确定的所述操作键的功能。
10.根据权利要求1所述的车载控制装置,其特征在于,
还具有输出音去除部,其获取从所述车载设备输出的输出音信号,并从输入音去除该输出音的成分,
所述语音识别部对于经过所述输出音去除部去除所述输出音的成分后的语音实施所述语音识别。
11.根据权利要求1所述的车载控制装置,其特征在于,
还具有视线检测部,其检测所述用户的视线,并将该视线的坐标信息发送至所述操作键确定部,
所述按键信息接收部一同接收显示有各操作键的显示器上的坐标信息,以作为所述操作键信息,
所述操作键确定部基于从所述视线检测部接收到的所述视线的坐标信息、所述语音识别部的识别结果以及所述按键信息接收部所接收到的操作键信息,来确定所述操作键。
12.一种车载控制方法,其用来对搭载于车辆的车载设备实施控制,其特征在于,具有如下步骤:
按键信息接收部根据显示在与所述车载设备连接的显示器上的显示内容的变化,动态地接收显示在所述显示器上的多个操作键的信息的步骤;
语音识别部使用语音识别字典,识别用户说话的语音的步骤;
操作键确定部基于所述按键信息接收部所接收到的操作键信息及所述语音识别部的语音识别结果,确定与所述用户说话的语音相对应的操作键的步骤;以及
控制部接收来自决定键的输出,以选择所述操作键确定部所确定的操作键,并对所述车载设备发出指示,以执行分配给所确定的所述操作键的功能的步骤。
CN201480076456.4A 2014-02-26 2014-02-26 车载控制装置及车载控制方法 Expired - Fee Related CN106030697B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/054669 WO2015128960A1 (ja) 2014-02-26 2014-02-26 車載制御装置および車載制御方法

Publications (2)

Publication Number Publication Date
CN106030697A true CN106030697A (zh) 2016-10-12
CN106030697B CN106030697B (zh) 2019-10-25

Family

ID=54008332

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480076456.4A Expired - Fee Related CN106030697B (zh) 2014-02-26 2014-02-26 车载控制装置及车载控制方法

Country Status (5)

Country Link
US (1) US9881605B2 (zh)
JP (1) JPWO2015128960A1 (zh)
CN (1) CN106030697B (zh)
DE (1) DE112014006409T5 (zh)
WO (1) WO2015128960A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106828372A (zh) * 2017-01-22 2017-06-13 斑马信息科技有限公司 车载声音控制系统及方法
CN107517310A (zh) * 2017-08-09 2017-12-26 重庆长安汽车股份有限公司 语音交互引导系统及方法
CN107851437A (zh) * 2015-08-10 2018-03-27 歌乐株式会社 语音操作系统、服务器装置、车载设备和语音操作方法
CN110045830A (zh) * 2019-04-17 2019-07-23 努比亚技术有限公司 应用操作方法、装置及计算机可读存储介质
CN111199734A (zh) * 2018-11-20 2020-05-26 奥迪股份公司 移动终端的控制方法及装置、计算机设备和可读存储介质
CN111667822A (zh) * 2019-03-06 2020-09-15 夏普株式会社 语音处理装置、会议系统以及语音处理方法
CN111752169A (zh) * 2019-03-27 2020-10-09 广州汽车集团股份有限公司 一种车载终端控制方法、装置及系统

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105501225B (zh) * 2015-12-21 2018-06-15 东莞酷派软件技术有限公司 智能驾驶控制方法、智能驾驶控制装置和车载系统
US10399489B2 (en) * 2017-08-11 2019-09-03 Otnid Bellot Thompson Steering wheel horn assembly
US10562448B2 (en) 2017-08-11 2020-02-18 Otnid Bellot Thompson Steering wheel horn assembly
US10083006B1 (en) * 2017-09-12 2018-09-25 Google Llc Intercom-style communication using multiple computing devices
KR102348124B1 (ko) * 2017-11-07 2022-01-07 현대자동차주식회사 차량의 기능 추천 장치 및 방법
WO2020031241A1 (ja) * 2018-08-06 2020-02-13 日産自動車株式会社 音声対話装置、音声対話システム、及び音声対話装置の制御方法
CN110857067B (zh) * 2018-08-24 2023-04-07 上海汽车集团股份有限公司 一种人车交互装置和人车交互方法
US10997971B2 (en) * 2019-02-11 2021-05-04 Amazon Technologies, Inc. Wakeword detection using a secondary microphone
CN113302091A (zh) * 2019-02-28 2021-08-24 谷歌有限责任公司 用于在操作启用了自动化助理的车辆时授权访问的形态
JP2021131472A (ja) * 2020-02-20 2021-09-09 ソニーグループ株式会社 情報処理装置、および情報処理方法、並びにプログラム
CN113223521A (zh) * 2021-04-26 2021-08-06 上海电机学院 一种车载屏幕显示语音控制系统
WO2023042277A1 (ja) * 2021-09-14 2023-03-23 ファナック株式会社 操作訓練装置、操作訓練方法、およびコンピュータ読み取り可能な記憶媒体
CN115440212A (zh) * 2022-06-30 2022-12-06 北京罗克维尔斯科技有限公司 语音控制方法、装置、电子设备、车辆和存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000187553A (ja) * 1991-06-20 2000-07-04 Fuji Xerox Co Ltd 入力装置および入力装置用ヘッドマウントディスプレイ
US20020059067A1 (en) * 2000-10-11 2002-05-16 Nissan Motor Co., Ltd. Audio input device and method of controling the same
JP2003291750A (ja) * 2002-04-01 2003-10-15 Nissan Motor Co Ltd 車載機器制御装置
CN1463507A (zh) * 2001-05-22 2003-12-24 三菱电机株式会社 回波处理装置
JP2008145989A (ja) * 2006-12-13 2008-06-26 Fujitsu Ten Ltd 音声識別装置および音声識別方法
JP2013088535A (ja) * 2011-10-14 2013-05-13 Vri Inc 音声制御システム及びプログラム
CN103208283A (zh) * 2012-01-11 2013-07-17 三星电子株式会社 使用语音识别执行用户功能的方法及装置
US20130339027A1 (en) * 2012-06-15 2013-12-19 Tarek El Dokor Depth based context identification

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04372012A (ja) 1991-06-20 1992-12-25 Fuji Xerox Co Ltd 入力装置
JP3530591B2 (ja) 1994-09-14 2004-05-24 キヤノン株式会社 音声認識装置及びこれを用いた情報処理装置とそれらの方法
JPH1165592A (ja) 1997-08-12 1999-03-09 Fujitsu Ten Ltd 音声入力システム
JP3911835B2 (ja) 1998-03-30 2007-05-09 株式会社デンソー 音声認識装置及びナビゲーションシステム
US6728546B1 (en) * 1999-03-23 2004-04-27 Legerity, Inc. Computer peripheral base station for a cordless telephone
US6219645B1 (en) * 1999-12-02 2001-04-17 Lucent Technologies, Inc. Enhanced automatic speech recognition using multiple directional microphones
JP2002012100A (ja) 2000-06-29 2002-01-15 Jatco Transtechnology Ltd 車両制御装置
US8055910B2 (en) * 2003-07-07 2011-11-08 Rovi Solutions Corporation Reprogrammable security for controlling piracy and enabling interactive content
JP2005202014A (ja) * 2004-01-14 2005-07-28 Sony Corp 音声信号処理装置、音声信号処理方法および音声信号処理プログラム
CN1954303B (zh) * 2004-05-17 2010-05-05 智行科技有限公司 通过模式匹配的自适应学习方法
JP5259050B2 (ja) * 2005-03-30 2013-08-07 京セラ株式会社 音声合成機能付き文字情報表示装置、およびその音声合成方法、並びに音声合成プログラム
JP5119587B2 (ja) * 2005-10-31 2013-01-16 株式会社デンソー 車両用表示装置
JP4973722B2 (ja) * 2009-02-03 2012-07-11 株式会社デンソー 音声認識装置、音声認識方法、及びナビゲーション装置
JP2011002535A (ja) 2009-06-17 2011-01-06 Toyota Motor Corp 音声対話システム、音声対話方法、及びプログラム
US9053348B2 (en) * 2012-03-26 2015-06-09 Microsoft Technology Licensing, Llc Secure cloud computing platform
US9093072B2 (en) * 2012-07-20 2015-07-28 Microsoft Technology Licensing, Llc Speech and gesture recognition enhancement
US9230560B2 (en) * 2012-10-08 2016-01-05 Nant Holdings Ip, Llc Smart home automation systems and methods
WO2014063104A2 (en) * 2012-10-19 2014-04-24 Audience, Inc. Keyword voice activation in vehicles

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000187553A (ja) * 1991-06-20 2000-07-04 Fuji Xerox Co Ltd 入力装置および入力装置用ヘッドマウントディスプレイ
US20020059067A1 (en) * 2000-10-11 2002-05-16 Nissan Motor Co., Ltd. Audio input device and method of controling the same
CN1463507A (zh) * 2001-05-22 2003-12-24 三菱电机株式会社 回波处理装置
JP2003291750A (ja) * 2002-04-01 2003-10-15 Nissan Motor Co Ltd 車載機器制御装置
JP2008145989A (ja) * 2006-12-13 2008-06-26 Fujitsu Ten Ltd 音声識別装置および音声識別方法
JP2013088535A (ja) * 2011-10-14 2013-05-13 Vri Inc 音声制御システム及びプログラム
CN103208283A (zh) * 2012-01-11 2013-07-17 三星电子株式会社 使用语音识别执行用户功能的方法及装置
US20130339027A1 (en) * 2012-06-15 2013-12-19 Tarek El Dokor Depth based context identification

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107851437A (zh) * 2015-08-10 2018-03-27 歌乐株式会社 语音操作系统、服务器装置、车载设备和语音操作方法
CN107851437B (zh) * 2015-08-10 2021-08-10 歌乐株式会社 语音操作系统、服务器装置、车载设备和语音操作方法
CN106828372A (zh) * 2017-01-22 2017-06-13 斑马信息科技有限公司 车载声音控制系统及方法
CN107517310A (zh) * 2017-08-09 2017-12-26 重庆长安汽车股份有限公司 语音交互引导系统及方法
CN107517310B (zh) * 2017-08-09 2020-01-10 重庆长安汽车股份有限公司 语音交互引导系统及方法
CN111199734A (zh) * 2018-11-20 2020-05-26 奥迪股份公司 移动终端的控制方法及装置、计算机设备和可读存储介质
CN111199734B (zh) * 2018-11-20 2024-03-12 奥迪股份公司 移动终端的控制方法及装置、计算机设备和可读存储介质
CN111667822A (zh) * 2019-03-06 2020-09-15 夏普株式会社 语音处理装置、会议系统以及语音处理方法
CN111667822B (zh) * 2019-03-06 2023-10-24 夏普株式会社 语音处理装置、会议系统以及语音处理方法
CN111752169A (zh) * 2019-03-27 2020-10-09 广州汽车集团股份有限公司 一种车载终端控制方法、装置及系统
CN110045830A (zh) * 2019-04-17 2019-07-23 努比亚技术有限公司 应用操作方法、装置及计算机可读存储介质

Also Published As

Publication number Publication date
DE112014006409T5 (de) 2016-12-08
CN106030697B (zh) 2019-10-25
US20160336009A1 (en) 2016-11-17
US9881605B2 (en) 2018-01-30
WO2015128960A1 (ja) 2015-09-03
JPWO2015128960A1 (ja) 2017-03-30

Similar Documents

Publication Publication Date Title
CN106030697A (zh) 车载控制装置及车载控制方法
CN106796786B (zh) 语音识别系统
JP4805279B2 (ja) 移動体用入力装置、及び方法
Weng et al. Conversational in-vehicle dialog systems: The past, present, and future
CN108430819B (zh) 车载装置
CN104978015B (zh) 具有语种自适用功能的导航系统及其控制方法
CN109791767A (zh) 用于语音识别的系统和方法
JP2017090613A (ja) 音声認識制御システム
KR20160027728A (ko) 사용자 맞춤형 서비스를 위한 차량 기기 제어 장치 및 방법
JP2008014818A (ja) 作動制御装置、プログラム
WO2007145003A1 (ja) 車載情報装置
JP2006195576A (ja) 車載音声認識装置
CN105103087B (zh) 一种用于显示和/或输出帮助的方法和配置给车辆的装置
JP2011059676A (ja) 発話入力に基づいて複数の機能を有効にするためのシステム及び方法
JP2009251388A (ja) 母国語発話装置
US20200286479A1 (en) Agent device, method for controlling agent device, and storage medium
JP2015059811A (ja) ナビゲーション装置および方法
JP6522009B2 (ja) 音声認識システム
JP5986468B2 (ja) 表示制御装置、表示システム及び表示制御方法
JP2020060861A (ja) エージェントシステム、エージェント方法、およびプログラム
JP6387287B2 (ja) 不明事項解消処理システム
JP2007314014A (ja) 車載装置、プログラム、及び車載装置における使用データ決定方法
JP4938719B2 (ja) 車載情報システム
JP3705220B2 (ja) ナビゲーション装置、画像表示方法及び画像表示プログラム
KR100677711B1 (ko) 음성 인식 장치, 기억 매체 및 네비게이션 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20191025