CN111801249A - 操作限制控制装置以及操作限制控制方法 - Google Patents

操作限制控制装置以及操作限制控制方法 Download PDF

Info

Publication number
CN111801249A
CN111801249A CN201880089514.5A CN201880089514A CN111801249A CN 111801249 A CN111801249 A CN 111801249A CN 201880089514 A CN201880089514 A CN 201880089514A CN 111801249 A CN111801249 A CN 111801249A
Authority
CN
China
Prior art keywords
restriction
state
operation input
restriction control
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880089514.5A
Other languages
English (en)
Inventor
前田笃史
加藤真
武井匠
马场直哉
伊藤紫织
竹里尚嘉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN111801249A publication Critical patent/CN111801249A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143Touch sensitive instrument input devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148Instrument input by voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/167Vehicle dynamics information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/168Target or limit values
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/40Hardware adaptations for dashboards or instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/741Instruments adapted for user detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

操作限制控制装置(100)包括:在车辆(1)正在行驶的情况下,将手动操作输入的限制设定为有效状态的第1操作限制控制部(22);在由第1操作限制控制部(22)将手动操作输入的限制设定为有效状态的状态下,当由车辆(1)的乘客将与手动操作输入的限制的解除对应的声音指令输入到第1操作输入装置(6)时,将手动操作输入的限制设定为无效状态的第2操作限制控制部(33);以及在由第2操作限制控制部(33)将手动操作输入的限制设定为无效状态的状态下,当车辆(1)的驾驶员的视线朝向车载信息设备(2)的状态的持续时间超过了第1基准时间时,将手动操作输入的限制设定为有效状态的第3操作限制控制部(42)。

Description

操作限制控制装置以及操作限制控制方法
技术领域
本发明涉及操作限制控制装置以及操作限制控制方法。
背景技术
以往,开发了通过接受基于声音的操作输入(以下称为“声音操作输入”)的操作输入装置(以下称为“第1操作输入装置”)以及接受基于手动的操作输入(以下称为“手动操作输入”)的操作输入装置(以下称为“第2操作输入装置”)而自由操作的车载信息设备。
此外,开发了下述功能,即:对车辆是否正在行驶进行判定、并在判定出车辆正在行驶的情况下限制手动操作输入。由此,能够抑制在车辆正在行驶时进行驾驶员的手动操作输入。
并且,开发了下述功能,即:在限制了手动操作输入的状态下,当将规定的声音输入到第1操作输入装置时,对该规定的声音的发话者是驾驶员还是乘客进行判定,在判定出该规定的声音的发话者是乘客的情况下解除手动操作输入的限制。由此,可进行乘客的手动操作输入,能够提高车载信息设备的操作性(例如,参照专利文献1)。
现有技术文献
专利文献
专利文献1:
日本专利特开2012-78497号公报
发明内容
发明所要解决的技术问题
在以往的车载信息设备中,当规定的声音由乘客发出时,解除手动操作输入的限制,变成乘客可通过手动来操作车载信息设备的状态。然而,此时,变成驾驶员也可通过手动来操作车载信息设备的状态。因此,存在失去下述主旨的问题,即:限制手动操作输入的功能的主旨、即抑制在车辆正在行驶时进行驾驶员的手动操作输入这一主旨。
本发明是为了解决上述问题而完成的,其目的在于在规定的声音由乘客发出时可进行乘客的手动操作输入,并在此时抑制进行驾驶员的手动操作输入。
解决技术问题所采用的技术方案
本发明的操作限制控制装置是一种通过接受声音操作输入的第1操作输入装置以及接受手动操作输入的第2操作输入装置而自由操作的车载信息设备用的操作限制控制装置,包括:第1操作限制控制部,该第1操作限制控制部在车辆正在行驶的情况下,将手动操作输入的限制设定为有效状态;第2操作限制控制部,在由第1操作限制控制部将手动操作输入的限制设定为有效状态的状态下,当由车辆的乘客将与手动操作输入的限制的解除对应的声音指令输入到第1操作输入装置时,该第2操作限制控制部将手动操作输入的限制设定为无效状态;以及第3操作限制控制部,在由第2操作限制控制部将手动操作输入的限制设定为无效状态的状态下,当车辆的驾驶员的视线朝向车载信息设备的状态的持续时间超过了第1基准时间时,该第3操作限制控制部将手动操作输入的限制设定为有效状态。
发明效果
根据本发明,由于如上述那样构成,因此在规定的声音由乘客发出时可进行乘客的手动操作输入,并在此时抑制进行驾驶员的手动操作输入。
附图说明
图1是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的主要部分的框图。
图2A是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的硬件结构的框图。图2B是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的其它硬件结构的框图。
图3A是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的动作的流程图。
图3B是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的其它动作的流程图。
图3C是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的其它动作的流程图。
图3D是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的其它动作的流程图。
图3E是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的其它动作的流程图。
图3F是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的其它动作的流程图。
图4是表示包含实施方式1所涉及的其它操作限制控制装置在内的控制装置的主要部分的框图。
具体实施方式
以下,为了对本发明进行更加详细的说明,根据附图对用于实施本发明的方式进行说明。
实施方式1.
图1是表示包含实施方式1所涉及的操作限制控制装置在内的控制装置的主要部分的框图。参照图1,对实施方式1的操作限制控制装置100进行说明。
如图1所示,车辆1搭载有车载信息设备2。车载信息设备2例如配置于车辆1的仪表盘(更具体而言为中央仪表群)。车载信息设备2具有控制装置3、显示装置4、声音输出装置5、第1操作输入装置6以及第2操作输入装置7。
控制装置3具有车辆1用的车载导航所涉及的各种功能(以下称为“导航功能”)或车辆1用的车载娱乐所涉及的各种功能(以下称为“娱乐功能”)中的至少一个。图1中,与这些功能对应的模块省略图示。此外,由于这些功能的处理内容是公知的,因此省略详细说明。
导航功能例如包含下述功能等,即:计算车辆1的当前位置的功能、设定车辆1的目的地的功能、搜索从该计算出的当前位置到该设定好的目的地为止的路径的功能、选择成为该搜索到的路径中的引导对象的路径的功能以及引导该选择出的路径的功能。
娱乐功能例如包含下述功能,即:重放无线电广播的声音的功能以及重放CD(Compact Disc:压缩盘)等存储介质中存储的声音的功能(以下,总称为“声音重放功能”)。此外,例如,娱乐功能包含下述功能,即:重放电视广播的视频的功能以及重放DVD(DigitalVersatile Disc:数字通用盘)等存储介质中存储的视频的功能(以下,总称为“视频重放功能”)。
显示装置4在控制装置3具有导航功能的情况下,显示导航功能所涉及的各种图像。此外,显示装置4在控制装置3具有娱乐功能的情况下,显示娱乐功能所涉及的各种图像。显示装置4例如由LCD(Liquid Crystal Display:液晶显示器)或OLED(OrganicElectro Luminescence Display:有机电发光显示器)等显示器构成。
声音输出装置5在控制装置3具有导航功能的情况下,输出导航功能所涉及的各种声音。此外,声音输出装置5在控制装置3具有娱乐功能的情况下,输出娱乐功能所涉及的各种声音。声音输出装置5例如由扬声器构成。
第1操作输入装置6接受基于声音的操作输入、即声音操作输入。车载信息设备2通过第1操作输入装置6而自由操作。第1操作输入装置6例如由阵列麦克风构成。该阵列麦克风由多个麦克风构成。
第2操作输入装置7接受基于手动的操作输入、即手动操作输入。车载信息设备2通过第2操作输入装置7而自由操作。第2操作输入装置7例如由与显示装置4一体的触摸面板构成。或者,例如,第2操作输入装置7由与显示装置4相邻设置的硬件按键构成。
车载信息设备2与车辆1内的网络8相连接。网络8例如基于CAN(Controller AreaNetwork:控制器局域网)标准或LIN(Local Interconnect Network:局域互联网)标准。控制装置3具有经由网络8获取车辆1中的各种信号的功能。具体而言,例如,控制装置3获取车速信号、停车信号、辅助信号(以下记载为“ACC信号”)以及点火信号(以下记载为“IG信号”)等。
此外,车辆1具有车厢内拍摄用的摄像头9。摄像头9例如由可见光摄像头或红外线摄像头构成。摄像头9配置于车辆1的车厢内前方部,更具体而言配置于相对于车载信息设备2的附近的位置(例如中央仪表群)。摄像头9从前方拍摄包含车辆1的驾驶员(以下简称为“驾驶员”)的脸以及就座于车辆1的副驾驶座的乘客(以下称为“副驾驶座乘客”)的脸在内的范围。控制装置3具有从摄像头9获取表示摄像头9的拍摄图像的图像数据的功能。
以下,对控制装置3的主要部分进行说明。
视线检测部11通过执行针对摄像头9的拍摄图像的图像识别处理,从而检测驾驶员的视线以及副驾驶座乘客的视线。
第1持续时间计算部12使用视线检测部11所进行的视线检测的结果,来对驾驶员的视线是否朝向车载信息设备2进行判定。第1持续时间计算部12在判定出驾驶员的视线朝向车载信息设备2的情况下,计算驾驶员的视线朝向车载信息设备2的状态的持续时间(以下称为“第1持续时间”)。第1持续时间计算部12将表示该计算出的第1持续时间的信息输出至第1持续时间判定部41。
另外,在驾驶员的视线断续地(即短时间内多次)朝向车载信息设备2的情况下,第1持续时间计算部12可以计算这些时间的累计值以作为第1持续时间。
第2持续时间计算部13使用视线检测部11所进行的视线检测的结果,来对驾驶员的视线是否朝向车载信息设备2进行判定。第2持续时间计算部13在判定出驾驶员的视线没有朝向车载信息设备2的情况下,计算驾驶员的视线没有朝向车载信息设备2的状态的持续时间(以下称为“第2持续时间”)。第2持续时间计算部13将表示该计算出的第2持续时间的信息输出至第2持续时间判定部51。
第3持续时间计算部14使用视线检测部11所进行的视线检测的结果,来对副驾驶座乘客的视线是否朝向车载信息设备2进行判定。第3持续时间计算部14在判定出副驾驶座乘客的视线没有朝向车载信息设备2的情况下,计算副驾驶座乘客的视线没有朝向车载信息设备2的状态的持续时间(以下称为“第3持续时间”)。第3持续时间计算部14将表示该计算出的第3持续时间的信息输出至操作完成判定部61。
由视线检测部11、第1持续时间计算部12、第2持续时间计算部13以及第3持续时间计算部14来构成第1控制部10。
行驶状态判定部21使用车速信号、停车信号以及IG信号等,来对车辆1是否正在行驶进行判定。
第1操作限制控制部22在由行驶状态判定部21判定出车辆1正在行驶的情况下,将手动操作输入的限制设定为有效状态。另一方面,在由行驶状态判定部21判定出车辆1不是正在行驶的情况下,第1操作限制控制部22将手动操作输入的限制设定为无效状态。
在将手动操作输入的限制设定为无效状态的状态下,当进行了基于第2操作输入装置7的操作的输入时,控制装置3执行对应于该操作的控制。即,通过将手动操作输入的限制设定为无效状态,从而使得针对车载信息设备2的手动操作输入变成有效的状态。与此相对,在将手动操作输入的限制设定为有效状态的状态下,当进行了基于第2操作输入装置7的操作的输入时,控制装置3不执行对应于该操作的控制。即,通过将手动操作输入的限制设定为有效状态,从而使得针对车载信息设备2的手动操作输入变成无效的状态。
另外,在将手动操作输入的限制设定为有效状态的状态下,当进行了基于第2操作输入装置7的操作的输入时,控制装置3可以使显示装置4显示表示手动操作输入被限制这一情况的警告用的图像。或者,此时,控制装置3可以使声音输出装置5输出表示手动操作输入被限制这一情况的警告用的声音。
在由第1操作限制控制部22将手动操作输入设定为无效状态的状态下,当对第1操作输入装置6输入了声音时,发话者判定部31对该输入的声音(以下称为“输入声音”)的发话者是驾驶员还是副驾驶座乘客进行判定。图1中,对第1操作限制控制部22与发话者判定部31之间的连接线省略了其图示。
例如,在第1操作输入装置6由阵列麦克风构成的情况下,发话者判定部31通过执行针对多个麦克风的输出信号的声音信号处理,从而推测针对第1操作输入装置6的输入声音的到来方向。发话者判定部31基于该推测出的到来方向,对输入声音是在驾驶座上被发出的还是在副驾驶座被发出的进行判定。在判定出输入声音是在驾驶座被发出的情况下,发话者判定部31判定为输入声音的发话者是驾驶员。另一方面,在判定出输入声音是在副驾驶座被发出的情况下,发话者判定部31判定为输入声音的发话者是副驾驶座乘客。
在由发话者判定部31判定出输入声音的发话者是副驾驶座乘客的情况下,声音指令判定部32对输入声音是否是对应于手动操作输入的限制的解除的声音指令(以下称为“限制解除指令”)进行判定。
具体而言,例如,声音指令判定部32对规定的关键字(例如“开锁”这一关键字)是否包含于输入声音进行判定,该规定的关键字指示手动操作输入的限制的解除。在判定出该规定的关键字包含于输入声音的情况下,声音指令判定部32判定为输入声音是限制解除指令。另一方面,在该规定的关键字没有包含于输入声音的情况下,声音指令判定部32判定为输入声音不是限制解除指令。
或者,例如,声音指令判定部32对车载信息设备2的操作中使用的多个关键字中的任意的关键字、即可由声音指令判定部32判定的多个关键字中的任意的关键字是否包含于输入声音进行判定。在判定出该任意的关键字包含于输入声音的情况下,声音指令判定部32判定为输入声音是限制解除指令。另一方面,在判定出该任意的关键字没有包含于输入声音的情况下,声音指令判定部32判定为输入声音不是限制解除指令。
第2操作限制控制部33在由声音指令判定部32判定出输入声音是限制解除指令的情况下,将手动操作输入的限制设定为无效状态。即,在由第1操作限制控制部22将手动操作输入的限制设定为有效状态的状态下,当将限制解除指令由副驾驶座乘客输入到第1操作输入装置6时,第2操作限制控制部33将手动操作输入的限制从有效状态切换至无效状态。
在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,第1持续时间判定部41使用由第1持续时间计算部12输出的信息,对第1持续时间是否超过了规定的时间(以下称为“第1基准时间”)进行判定。由此,第1持续时间判定部41对驾驶员是否是通过手动来操作(或要操作)车载信息设备2进行判定。第1基准时间例如设定为几秒左右的值。图1中,对第2操作限制控制部33与第1持续时间判定部41之间的连接线省略了其图示。
在由第1持续时间判定部41判定出第1持续时间超过了第1基准时间的情况下,第3操作限制控制部42将手动操作输入的限制设定为有效状态。即,在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,当第1持续时间超过了第1基准时间时,第3操作限制控制部42将手动操作输入的限制从无效状态切换为有效状态。
在由第3操作限制控制部42将手动操作输入的限制设定为有效状态的状态下,第2持续时间判定部51使用由第2持续时间计算部13输出的信息,对第2持续时间是否超过了规定的时间(以下称为“第2基准时间”)进行判定。由此,第2持续时间判定部51对驾驶员是否停止(或放弃)了基于手动的车载信息设备2的操作进行判定。第2基准时间例如设定为几秒左右的值。图1中,对第3操作限制控制部42与第2持续时间判定部51之间的连接线省略了其图示。
在由第2持续时间判定部51判定出第2持续时间超过了第2基准时间的情况下,第4操作限制控制部52将手动操作输入的限制设定为无效状态。即,在由第3操作限制控制部42将手动操作输入的限制设定为有效状态的状态下,当第2持续时间超过了第2基准时间时,第4操作限制控制部52将手动操作输入的限制从有效状态切换为无效状态。
在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,操作完成判定部61使用由第3持续时间计算部14输出的信息,对第3持续时间是否超过了规定的时间(以下称为“第3基准时间”)进行判定。此外,在由第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,操作完成判定部61使用由第3持续时间计算部14输出的信息,对第3持续时间是否超过了第3基准时间进行判定。由此,操作完成判定部61对副驾驶座乘客所进行的车载信息设备2的操作是否完成进行判定。第3基准时间例如设定为几秒左右的值。图1中,对第2操作限制控制部33与操作完成判定部61之间的连接线以及第4操作限制控制部52与操作完成判定部61之间的连接线省略了其图示。
在由操作完成判定部61判定出第3持续时间超过了第3基准时间的情况下,第5操作限制控制部62将手动操作输入的限制设定为有效状态。即,在由第2操作限制控制部33或第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,当副驾驶座乘客所进行的车载信息设备2的操作完成时,第5操作限制控制部62将手动操作输入的限制从无效状态切换为有效状态。
在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,电源判定部71使用ACC信号等,对车辆1中的辅助电源(以下记载为“ACC电源”)是否被断开进行判定。此外,在由第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,电源判定部71使用ACC信号等,对ACC电源是否被断开进行判定。图1中,对第2操作限制控制部33与电源判定部71之间的连接线以及第4操作限制控制部52与电源判定部71之间的连接线省略了其图示。
在由电源判定部71判定出ACC电源被断开的情况下,第6操作限制控制部72将手动操作输入的限制设定为有效状态。即,在由第2操作限制控制部33或第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,当ACC电源被断开时,第6操作限制控制部72将手动操作输入的限制从无效状态切换为有效状态。
由行驶状态判定部21、第1操作限制控制部22、发话者判定部31、声音指令判定部32、第2操作限制控制部33、第1持续时间判定部41、第3操作限制控制部42、第2持续时间判定部51、第4操作限制控制部52、操作完成判定部61、第5操作限制控制部62、电源判定部71以及第6操作限制控制部72构成第2控制部20。
由第1操作限制控制部22、第2操作限制控制部33、第3操作限制控制部42、第4操作限制控制部52、第5操作限制控制部62以及第6操作限制控制部72构成操作限制控制装置100的主要部分。由第1控制部10和第2控制部20构成控制装置3的主要部分。
另外,在由声音指令判定部32判定出输入声音是限制解除指令的情况下,控制装置3保持该限制解除指令。由此,在副驾驶座乘客操作车载信息设备2的期间,能够保持该操作用的限制解除指令。之后,当由第5操作限制控制部62将手动操作输入的限制从无效状态切换为有效状态时(即第3持续时间超过了第3基准时间时),控制装置3放弃所保持的限制解除指令。由此,在副驾驶座乘客所进行的车载信息设备2的操作完成的定时,能够放弃不需要的限制解除指令。
此外,当由第6操作限制控制部72将手动操作输入的限制从无效状态切换为有效状态时(即断开了ACC电源时),控制装置3放弃所保持的限制解除指令。由此,例如,即使在第3持续时间因视线检测部11所进行的视线检测的错误等而未被正常计算出的状态下,也能够在ACC电源被断开的定时放弃限制解除指令。
接着,参照图2,对控制装置3的主要部分的硬件结构进行说明。
如图2A所示,控制装置3由计算机构成,该计算机具有处理器81和存储器82。存储器82存储用于使该计算机作为视线检测部11、第1持续时间计算部12、第2持续时间计算部13、第3持续时间计算部14、行驶状态判定部21、第1操作限制控制部22、发话者判定部31、声音指令判定部32、第2操作限制控制部33、第1持续时间判定部41、第3操作限制控制部42、第2持续时间判定部51、第4操作限制控制部52、操作完成判定部61、第5操作限制控制部62、电源判定部71以及第6操作限制控制部72而发挥作用的程序。通过处理器81读取存储器82中存储的程序并执行,从而实现视线检测部11、第1持续时间计算部12、第2持续时间计算部13、第3持续时间计算部14、行驶状态判定部21、第1操作限制控制部22、发话者判定部31、声音指令判定部32、第2操作限制控制部33、第1持续时间判定部41、第3操作限制控制部42、第2持续时间判定部51、第4操作限制控制部52、操作完成判定部61、第5操作限制控制部62、电源判定部71以及第6操作限制控制部72的功能。
处理器81例如使用CPU(Central Processing Unit:中央处理单元)、GPU(Graphics Processing Unit:图形处理器)、微处理器、微控制器或DSP(Digital SignalProcessor:数字信号处理器)等。存储器82例如使用RAM(Random Access Memory:随机存取存储器)、ROM(Read Only Memory:只读存储器)、闪存、EPROM(Erasable ProgrammableRead Only Memory:可擦除可编程只读存储器)或EEPROM(Electrically ErasableProgrammable Read-Only Memory:电可擦除可编程只读存储器)等半导体存储器、磁盘、光盘或光磁盘等。
或者,如图2B所示,视线检测部11、第1持续时间计算部12、第2持续时间计算部13、第3持续时间计算部14、行驶状态判定部21、第1操作限制控制部22、发话者判定部31、声音指令判定部32、第2操作限制控制部33、第1持续时间判定部41、第3操作限制控制部42、第2持续时间判定部51、第4操作限制控制部52、操作完成判定部61、第5操作限制控制部62、电源判定部71以及第6操作限制控制部72的功能可以由专用处理电路83来实现。处理电路83例如使用ASIC(Application Specific Integrated Circuit:专用集成电路)、PLD(Programmabel Logic Device:可编程逻辑器件)、FPGA(Field-Programmable GateArray:现场可编程门阵列)、SoC(System-on-a-Chip:片上系统)或系统LSI(Large-ScaleIntegration:大规模集成电路)等。
或者,控制装置3可以具有处理器81、存储器82以及处理电路83。该情况下,可以为视线检测部11、第1持续时间计算部12、第2持续时间计算部13、第3持续时间计算部14、行驶状态判定部21、第1操作限制控制部22、发话者判定部31、声音指令判定部32、第2操作限制控制部33、第1持续时间判定部41、第3操作限制控制部42、第2持续时间判定部51、第4操作限制控制部52、操作完成判定部61、第5操作限制控制部62、电源判定部71以及第6操作限制控制部72的功能中的一部分功能由处理器81以及存储器82来实现,剩余的功能由处理电路83来实现。
接着,参照图3的流程图,以第2控制部20的动作为中心对控制装置3的动作进行说明。
图3A示出了行驶状态判定部21和第1操作限制控制部22的动作。图3A所示的步骤ST1、ST2的处理在车载信息设备2的电源被导通的状态下,例如以规定的时间间隔而反复执行。
首先,在步骤ST1中,行驶状态判定部21对车辆1是否正在行驶进行判定。在判定出车辆1正在行驶的情况下(步骤ST1“是”),在步骤ST2中,第1操作限制控制部22将手动操作输入的限制设定为有效状态。
另外,在图3A中,对于在判定出车辆1并未正在行驶的情况下(步骤ST1“否”)执行的处理、即第1操作限制控制部22将手动操作输入的限制设定为无效状态的处理,省略其图示。
图3B示出了发话者判定部31、声音指令判定部32以及第2操作限制控制部33的动作。在由第1操作限制控制部22将手动操作输入的限制设定为有效状态的状态下,图3B所示的步骤ST11~ST13的处理例如在每次将声音输入至第1操作输入装置6时执行。
首先,在步骤ST11中,发话者判定部31对输入声音的发话者是驾驶员还是副驾驶座乘客进行判定。在判定出输入声音的发话者是副驾驶座乘客的情况下(步骤ST11“是”),在步骤ST12,声音指令判定部32对输入声音是否是限制解除指令进行判定。在判定出输入声音是限制解除指令的情况下(步骤ST12“是”),在步骤ST13中,第2操作限制控制部33将手动操作输入的限制设定为无效状态。即,第2操作限制控制部33将手动操作输入的限制从有效状态切换为无效状态。
另外,对于在判定出输入声音的发话者是驾驶员的情况下(步骤ST11“否”)执行的处理、以及在判定出输入声音不是限制解除指令的情况下(步骤ST12“否”)执行的处理,省略图示和说明。
图3C示出了第1持续时间判定部41和第3操作限制控制部42的动作。在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,图3C所示的步骤ST21、ST22的处理例如以规定的时间间隔而反复执行。
首先,在步骤ST21中,第1持续时间判定部41使用由第1持续时间计算部12输出的信息,对第1持续时间是否超过了第1基准时间进行判定。由此,第1持续时间判定部41对驾驶员是否是通过手动来操作(或要操作)车载信息设备2进行判定。
在判定出第1持续时间超过了第1基准时间的情况下(步骤ST21“是”),在步骤ST22中,第3操作限制控制部42将手动操作输入的限制设定为有效状态。即,第3操作限制控制部42将手动操作输入的限制从无效状态切换为有效状态。
图3D示出了第2持续时间判定部51和第4操作限制控制部52的动作。在由第3操作限制控制部42将手动操作输入的限制设定为有效状态的状态下,图3D所示的步骤ST31、ST32的处理例如以规定的时间间隔而反复执行。
首先,在步骤ST31中,第2持续时间判定部51使用由第2持续时间计算部13输出的信息,对第2持续时间是否超过了第2基准时间进行判定。由此,第2持续时间判定部51对驾驶员是否是停止(或放弃)了基于手动的车载信息设备2的操作进行判定。
在判定出第2持续时间超过了第2基准时间的情况下(步骤ST31“是”),在步骤ST32中,第4操作限制控制部52将手动操作输入的限制设定为无效状态。即,第4操作限制控制部52将手动操作输入的限制从有效状态切换为无效状态。
图3E示出了操作完成判定部61和第5操作限制控制部62的动作。在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,图3E所示的步骤ST41、ST42的处理例如以规定的时间间隔而反复执行。此外,在由第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,图3E所示的步骤ST41、ST42的处理例如以规定的时间间隔而反复执行。
首先,在步骤ST41中,操作完成判定部61使用由第3持续时间计算部14输出的信息,对第3持续时间是否超过了第3基准时间进行判定。由此,操作完成判定部61对副驾驶座乘客所进行的车载信息设备2的操作是否完成进行判定。
在判定出第3持续时间超过了第3基准时间的情况下(步骤ST41“是”),在步骤ST42中,第5操作限制控制部62将手动操作输入的限制设定为有效状态。即,第5操作限制控制部62将手动操作输入的限制从无效状态切换为有效状态。
另外,当第5操作限制控制部62将手动操作输入的限制从无效状态切换为有效状态时(即当判定出步骤ST41“是”时),控制装置3放弃所保持的限制解除指令。由此,在副驾驶座乘客所进行的车载信息设备2的操作完成的定时,能够放弃不需要的限制解除指令。
图3F示出了电源判定部71和第6操作限制控制部72的动作。在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,图3F所示的步骤ST51、ST52的处理例如以规定的时间间隔而反复执行。此外,在由第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,图3F所示的步骤ST51、ST52的处理例如以规定的时间间隔而反复执行。
首先,在步骤ST51中,电源判定部71对ACC电源是否被断开进行判定。在判定出ACC电源被断开的情况下(步骤ST51“是”),在步骤ST52中,第6操作限制控制部72将手动操作输入的限制设定为有效状态。即,第6操作限制控制部72将手动操作输入的限制从无效状态切换为有效状态。
另外,当第6操作限制控制部72将手动操作输入的限制从无效状态切换为有效状态时(即当判定出步骤ST51“是”时),控制装置3放弃所保持的限制解除指令。由此,例如,即使在第3持续时间因视线检测部11所进行的视线检测的错误等而未被正常计算出的状态下,也能够在ACC电源被断开的定时放弃限制解除指令。
接着,对操作限制控制装置100的效果进行说明。
以往的操作限制控制装置具有对应于第1操作限制控制部22的功能部和对应于第2操作限制控制部33的功能部。然而,以往的操作限制控制装置不具有对应于第3操作限制控制部42的功能部。因此,在由对应于第2操作限制控制部33的功能部将手动操作输入的限制设定为无效状态的状态下,存在下述问题,即:虽然变成副驾驶座乘客可通过手动来操作车载信息设备的状态,但也变成驾驶员也可通过手动来操作车载信息设备的状态。
例如,在导航功能中设为,首先,计算车辆的当前位置,接着,通过副驾驶座乘客所进行的手动的操作(以下称为“第1操作”)来设定车辆的目的地,接着,搜索从该计算出的当前位置到该设定好的目的地为止的路径,接着,通过副驾驶座乘客所进行的手动的操作(以下称为“第2操作”)来选择成为该搜索到的路径中的引导对象的路径,接着,开始该选择出的路径的引导。该情况下,在第1操作和第2操作之间的定时,可进行驾驶员的手动操作输入。
另外,例如,在声音重放功能(更具体而言重放存储介质中存储的声音的功能)中设为,首先通过副驾驶座乘客所进行的手动的操作(以下称为“第3操作”)来选择多个艺术家中的任一个艺术家,接着,通过副驾驶座乘客所进行的手动的操作(以下称为“第4操作”)来选择该选择出的艺术家的多个乐曲中的任一个乐曲,接着,开始该选择出的乐曲的重放。该情况下,在第3操作和第4操作之间的定时,可进行基于驾驶员的手动操作输入。
与此相对,实施方式1的操作限制控制装置100具有第3操作限制控制部42。由此,在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,当驾驶员通过手动来操作(或要操作)车载信息设备2时,将手动操作输入的限制从无效状态切换为有效状态。由此,由于手动操作输入变成无效的状态,因此能够抑制进行驾驶员的手动操作输入。
此外,实施方式1的操作限制控制装置100具有第4操作限制控制部52。因此,在由第3操作限制控制部42将手动操作输入的限制设定为有效状态的状态下,当驾驶员停止了(或放弃了)基于手动的车载信息设备2的操作时,将手动操作输入的限制从有效状态切换为无效状态。因此,由于手动操作输入变成有效的状态,因此能够提高副驾驶座乘客的车载信息设备2的操作性。
此外,实施方式1的操作限制控制装置100具有第5操作限制控制部62。因此,在由第2操作限制控制部33或第4操作限制控制部52将手动操作输入的限制设定为有效状态的状态下,当副驾驶座乘客所进行的车载信息设备2的操作完成时,将手动操作输入的限制从无效状态切换为有效状态。由此,由于手动操作输入变成无效的状态,因此能够抑制进行驾驶员的手动操作输入。
由此,实施方式1的操作限制控制装置100能够力图实现驾驶员的手动操作输入的抑制与副驾驶座乘客的操作性之间的平衡。
此外,以往的操作限制控制装置通过使用在车载信息设备的附近配置的摄像头或传感器来检测针对车载信息设备的手的接近方向,从而对操作(或要操作)车载信息设备的用户是驾驶员还是副驾驶座乘客进行判定,在判定出该用户是驾驶员的情况下将手动操作输入的限制设定为有效状态(例如,参照专利文献1的段落[0054]等)。
与此相对,实施方式1的操作限制控制装置100将视线检测部11所进行的视线检测的结果(更具体而言为第2持续时间)用于判定驾驶员是否通过手动来操作(或要操作)车载信息设备2。由此,与将手的接近方向的检测结果用于该判定的结构相比,能够提高该判定的精度。即,这是由于:在本申请的申请时的图像识别处理的技术领域中,通常视线检测的精度高于手的接近方向的检测精度。
另外,视线检测部11可以由检测驾驶员的视线的第1视线检测部(未图示)以及检测副驾驶座乘客的视线的第2视线检测部(未图示)构成。该情况下,第1持续时间计算部12可以使用第1视线检测部所进行的视线检测的结果来计算第1持续时间。第2持续时间计算部13可以使用第1视线检测部所进行的视线检测的结果来计算第2持续时间。第3持续时间计算部14可以使用第2视线检测部所进行的视线检测的结果来计算第3持续时间。
此外,发话者判定部31可以通过执行针对摄像头9的拍摄图像的图像识别处理,从而对输入声音的发话者是驾驶员还是副驾驶座乘客进行判定。例如,发话者判定部31通过执行在第1操作输入装置6中输入了声音的定时针对拍摄图像的图像识别处理,从而检测驾驶员的开口度和副驾驶座乘客的开口度。发话者判定部31基于该检测出的开口度,对输入声音的发话者是驾驶员还是副驾驶座乘客进行判定。
此外,可以在车辆1的各座位的座面部设置有压力传感器(所谓的“就座传感器”)。该情况下,发话者判定部31可以使用这些就座传感器的检测值,对输入声音的发话者是驾驶员还是副驾驶座乘客进行判定。例如,发话者判定部31使用在副驾驶座的座面部设置的就座传感器的检测值,对乘客是否就座于副驾驶座进行判定。发话者判定部31在判定出乘客没有就座于副驾驶座的情况下,判定为输入声音的发话者是驾驶员。
即,发话者判定部31可以使用针对多个麦克风的输出信号的声音信号处理的结果、针对摄像头9的拍摄图像的图像识别处理的结果、或就座传感器的检测值中的至少一个,对输入声音的发话者是驾驶员还是副驾驶座乘客进行判定。
此外,操作完成判定部61可以通过对基于第1操作输入装置6的操作的输入、基于第2操作输入装置7的操作的输入均未进行的状态下的持续时间(以下称为“第4持续时间”)是否超过了规定的时间(以下称为“第4基准时间”)进行判定以取代对第3持续时间是否超过了第3基准时间进行判定,从而对副驾驶座乘客所进行的车载信息设备2的操作是否完成进行判定。
此外,操作限制控制装置100可以对于如上所述将手动操作输入的限制选择性地设定为有效状态或无效状态的控制,取而代之或在其基础上,执行将车载信息设备2中的画面显示(即基于显示装置4的画面显示)的限制选择性地设定为有效状态或无效状态的控制。
具体而言,例如,操作限制控制装置100可以执行将基于视频重放功能的画面显示的限制选择性地设定为有效状态或无效状态的控制。即,第1操作限制控制部22可以在步骤ST2中将基于视频重放功能的画面显示的限制设定为有效状态。第2操作限制控制部33可以在步骤ST13中将基于视频重放功能的画面显示的限制设定为无效状态。第3操作限制控制部42可以在步骤ST22中将基于视频重放功能的画面显示的限制设定为有效状态。第4操作限制控制部52可以在步骤ST32中将基于视频重放功能的画面显示的限制设定为无效状态。第5操作限制控制部62可以在步骤ST42中将基于视频重放功能的画面显示的限制设定为有效状态。第6操作限制控制部72可以在步骤ST52中将基于视频重放功能的画面显示的限制设定为有效状态。
通常,收看通过视频重放功能而在画面中显示的视频的行为并不伴随手动操作输入。因此,如上所述虽然使用手的接近方向的检测结果的结构能够应用于将手动操作输入的限制选择性地设定为有效状态或无效状态的控制,但不能应用于将基于视频重放功能的画面显示的限制选择性地设定为有效状态或无效状态的控制。
与此相对,实施方式1的操作限制控制装置100如上所述使用视线检测部11所进行的视线检测的结果。因此,当然能够应用于将手动操作输入的限制选择性地设定为有效状态或无效状态的控制,并也能够应用于将基于视频重放功能的画面显示的限制选择性地设定为有效状态或无效状态的控制。
此外,如图4所示,可以由第1操作限制控制部22、第2操作限制控制部33以及第3操作限制控制部42构成操作限制控制装置100的主要部分。即,第4操作限制控制部52、第5操作限制控制部62以及第6操作限制控制部72各自可以如图1所示设置于操作限制控制装置100内,或者也可以如图4所示设置于操作限制控制装置100外。
如上所述,实施方式1的操作限制控制装置100是一种通过接受声音操作输入的第1操作输入装置6以及接受手动操作输入的第2操作输入装置7而自由操作的车载信息设备2用的操作限制控制装置100,包括:第1操作限制控制部22,该第1操作限制控制部22在车辆1正在行驶的情况下,将手动操作输入的限制设定为有效状态;第2操作限制控制部33,在由第1操作限制控制部22将手动操作输入的限制设定为有效状态的状态下,当由车辆1的乘客(副驾驶座乘客)将与手动操作输入的限制的解除对应的声音指令(限制解除指令)输入到第1操作输入装置6时,该第2操作限制控制部33将手动操作输入的限制设定为无效状态;以及第3操作限制控制部42,在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,当车辆1的驾驶员的视线朝向车载信息设备2的状态的持续时间(第1持续时间)超过了第1基准时间时,该第3操作限制控制部42将手动操作输入的限制设定为有效状态。由此,当驾驶员通过手动来操作(或要操作)车载信息设备2时,能够将手动操作输入的限制从无效状态切换为有效状态。其结果是,能够抑制进行驾驶员的手动操作输入。
此外,操作限制控制装置100包括第4操作限制控制部52,在由第3操作限制控制部42将手动操作输入的限制设定为有效状态的状态下,当驾驶员的视线没有朝向车载信息设备2的状态的持续时间(第2持续时间)超过了第2基准时间时,该第4操作限制控制部52将手动操作输入的限制设定为无效状态。由此,当驾驶员停止了(或放弃了)基于手动的车载信息设备2的操作时,能够将手动操作输入的限制从有效状态切换为无效状态。其结果是,能够提高副驾驶座乘客的车载信息设备2的操作性。
此外,操作限制控制装置100包括第5操作限制控制部62,在由第2操作限制控制部33或第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,当乘客(副驾驶座乘客)所进行的车载信息设备2的操作完成时,该第5操作限制控制部62将手动操作输入的限制设定为有效状态。由此,当副驾驶座乘客所进行的车载信息设备2的操作完成时,能够将手动操作输入的限制从无效状态切换为有效状态。此外,此时能够放弃限制解除指令。
此外,当乘客(副驾驶座乘客)的视线没有朝向车载信息设备2的状态的持续时间(第3持续时间)超过了第3基准时间时,判定为乘客(副驾驶座乘客)所进行的车载信息设备2的操作完成。由此,能够使用视线检测部11所进行的视线检测的结果,对副驾驶座乘客所进行的车载信息设备2的操作完成的定时进行判定。
此外,操作限制控制装置100包括第6操作限制控制部72,在由第2操作限制控制部33或第4操作限制控制部52将手动操作输入的限制设定为无效状态的状态下,当车辆1中的辅助电源(ACC电源)被断开时,该第6操作限制控制部72将手动操作输入的限制设定为有效状态。由此,当ACC电源被断开时,能够将手动操作输入的限制从无效状态切换为有效状态。此外,此时能够放弃限制解除指令。
此外,操作限制控制装置100在将手动操作输入的限制选择性地设定为有效状态或无效状态的控制的基础上,执行将车载信息设备2中的画面显示的限制选择性地设定为有效状态或无效状态的控制。通过使用视线检测部11所进行的视线检测的结果,从而能够将操作限制控制装置100应用于将基于视频重放功能的画面显示的限制选择性地设定为有效状态或无效状态的控制。
此外,实施方式1的操作限制控制方法是一种通过接受声音操作输入的第1操作输入装置6以及接受手动操作输入的第2操作输入装置7而自由操作的车载信息设备2用的操作限制控制方法,包括下述步骤:第1操作限制控制部22在车辆1正在行驶的情况下,将手动操作输入的限制设定为有效状态的步骤ST2;在由第1操作限制控制部22将手动操作输入的限制设定为有效状态的状态下,当由车辆1的乘客(副驾驶座乘客)将与手动操作输入的限制的解除对应的声音指令(限制解除指令)输入到第1操作输入装置6时,第2操作限制控制部33将手动操作输入的限制设定为无效状态的步骤ST13;以及在由第2操作限制控制部33将手动操作输入的限制设定为无效状态的状态下,当车辆1的驾驶员的视线朝向车载信息设备2的状态的持续时间(第1持续时间)超过了第1基准时间时,第3操作限制控制部42将手动操作输入的限制设定为有效状态的步骤ST22。由此,能获得与操作限制控制装置100的上述效果同样的效果。
另外,本申请发明在其发明范围内可以对实施方式的任意结构要素进行变形,或者在实施方式中省略任意的结构要素。
工业上的实用性
本发明的操作限制控制装置能够用于车载信息设备。
标号说明
1 车辆、
2 车载信息设备、
3 控制装置、
4 显示装置、
5 声音输出装置、
6 第1操作输入装置、
7 第2操作输入装置、
8 网络、
9 摄像头、
10 第1控制部、
11 视线检测部、
12 第1持续时间计算部、
13 第2持续时间计算部、
14 第3持续时间计算部、
20 第2控制部、
21 行驶状态判定部、
22 第1操作限制控制部、
31 发话者判定部、
32 声音指令判定部、
33 第2操作限制控制部、
41 第1持续时间判定部、
42 第3操作限制控制部、
51 第2持续时间判定部、
52 第4操作限制控制部、
61 操作完成判定部、
62 第5操作限制控制部、
71 电源判定部、
72 第6操作限制控制部、
81 处理器、
82 存储器、
83 处理电路、
100 操作限制控制装置。

Claims (7)

1.一种操作限制控制装置,
是通过接受声音操作输入的第1操作输入装置以及接受手动操作输入的第2操作输入装置而自由操作的车载信息设备用的操作限制控制装置,其特征在于,包括:
第1操作限制控制部,该第1操作限制控制部在车辆正在行驶的情况下,将所述手动操作输入的限制设定为有效状态;
第2操作限制控制部,在由所述第1操作限制控制部将所述手动操作输入的限制设定为有效状态的状态下,当由所述车辆的乘客将与所述手动操作输入的限制的解除对应的声音指令输入到所述第1操作输入装置时,该第2操作限制控制部将所述手动操作输入的限制设定为无效状态;以及
第3操作限制控制部,在由所述第2操作限制控制部将所述手动操作输入的限制设定为无效状态的状态下,当所述车辆的驾驶员的视线朝向所述车载信息设备的状态的持续时间超过了第1基准时间时,该第3操作限制控制部将所述手动操作输入的限制设定为有效状态。
2.如权利要求1所述的操作限制控制装置,其特征在于,
包括第4操作限制控制部,在由所述第3操作限制控制部将所述手动操作输入的限制设定为有效状态的状态下,当所述驾驶员的视线没有朝向所述车载信息设备的状态的持续时间超过了第2基准时间时,该第4操作限制控制部将所述手动操作输入的限制设定为无效状态。
3.如权利要求2所述的操作限制控制装置,其特征在于,
包括第5操作限制控制部,在由所述第2操作限制控制部或所述第4操作限制控制部将所述手动操作输入的限制设定为无效状态的状态下,当所述乘客所进行的所述车载信息设备的操作完成时,该第5操作限制控制部将所述手动操作输入的限制设定为有效状态。
4.如权利要求3所述的操作限制控制装置,其特征在于,
当所述乘客的视线没有朝向所述车载信息设备的状态的持续时间超过了第3基准时间时,判定为所述乘客所进行的所述车载信息设备的操作完成。
5.如权利要求2所述的操作限制控制装置,其特征在于,
包括第6操作限制控制部,在由所述第2操作限制控制部或所述第4操作限制控制部将所述手动操作输入的限制设定为无效状态的状态下,当所述车辆中的辅助电源被断开时,该第6操作限制控制部将所述手动操作输入的限制设定为有效状态。
6.如权利要求1至5中任一项所述的操作限制控制装置,其特征在于,
在将所述手动操作输入的限制选择性地设定为有效状态或无效状态的控制的基础上,执行将所述车载信息设备中的画面显示的限制选择性地设定为有效状态或无效状态的控制。
7.一种操作限制控制方法,
是通过接受声音操作输入的第1操作输入装置以及接受手动操作输入的第2操作输入装置而自由操作的车载信息设备用的操作限制控制方法,其特征在于,包括下述步骤:
第1操作限制控制部在车辆正在行驶的情况下,将所述手动操作输入的限制设定为有效状态的步骤;
在由所述第1操作限制控制部将所述手动操作输入的限制设定为有效状态的状态下,当由所述车辆的乘客将与所述手动操作输入的限制的解除对应的声音指令输入到所述第1操作输入装置时,第2操作限制控制部将所述手动操作输入的限制设定为无效状态的步骤;以及
在由所述第2操作限制控制部将所述手动操作输入的限制设定为无效状态的状态下,当所述车辆的驾驶员的视线朝向所述车载信息设备的状态的持续时间超过了第1基准时间时,第3操作限制控制部将所述手动操作输入的限制设定为有效状态的步骤。
CN201880089514.5A 2018-02-22 2018-02-22 操作限制控制装置以及操作限制控制方法 Pending CN111801249A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/006533 WO2019163060A1 (ja) 2018-02-22 2018-02-22 操作制限制御装置及び操作制限制御方法

Publications (1)

Publication Number Publication Date
CN111801249A true CN111801249A (zh) 2020-10-20

Family

ID=67688237

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880089514.5A Pending CN111801249A (zh) 2018-02-22 2018-02-22 操作限制控制装置以及操作限制控制方法

Country Status (5)

Country Link
US (1) US20210061102A1 (zh)
JP (1) JP6717537B2 (zh)
CN (1) CN111801249A (zh)
DE (1) DE112018006615T5 (zh)
WO (1) WO2019163060A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102022102504B9 (de) * 2022-02-03 2023-07-20 Audi Aktiengesellschaft Verfahren zum Betreiben einer Schnittstellenvorrichtung in einem Fahrzeug, sowie Schnittstellenvorrichtung und Fahrzeug

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006301652A (ja) * 2006-04-27 2006-11-02 Fujitsu Ten Ltd 機器制御システム、及び車載用機器
JP2007055356A (ja) * 2005-08-23 2007-03-08 Denso Corp 車載用電子機器の制御装置
US20070129864A1 (en) * 2005-11-28 2007-06-07 Fujitsu Ten Limited In-vehicle display apparatus and display control method therefor
CN101460919A (zh) * 2006-06-05 2009-06-17 三菱电机株式会社 显示装置及该装置的限制操作方法
JP2013159255A (ja) * 2012-02-07 2013-08-19 Jvc Kenwood Corp 車載機器、車載機器の制御方法、車載機器の制御装置
WO2013153583A1 (ja) * 2012-04-13 2013-10-17 三菱電機株式会社 車載用音声入力装置
CN104636061A (zh) * 2013-11-08 2015-05-20 现代自动车株式会社 用于执行车辆的特定任务的装置及其控制方法
US20160176372A1 (en) * 2014-12-22 2016-06-23 Lg Electronics Inc. Controlling a vehicle
CN106132779A (zh) * 2014-03-18 2016-11-16 株式会社电装 车辆用通知控制装置以及车辆用通知控制系统
CN107428295A (zh) * 2015-03-19 2017-12-01 三菱电机株式会社 未确认信息输出装置、未确认信息输出方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9652023B2 (en) * 2008-07-24 2017-05-16 Intelligent Mechatronic Systems Inc. Power management system
EP2615843A1 (en) * 2012-01-13 2013-07-17 Eldon Technology Limited Video vehicle entertainment device with driver safety mode
WO2014109104A1 (ja) * 2013-01-08 2014-07-17 クラリオン株式会社 音声認識装置、音声認識プログラム及び音声認識方法
US9619695B2 (en) * 2013-06-06 2017-04-11 Visteon Global Technologies, Inc. Gaze time indicator for a vehicle
JP6608137B2 (ja) * 2014-01-03 2019-11-20 ハーマン インターナショナル インダストリーズ インコーポレイテッド ディスプレイ上の両眼転導検出
JP6464869B2 (ja) * 2015-03-25 2019-02-06 株式会社デンソー 操作システム
KR20170002040A (ko) * 2015-06-29 2017-01-06 엘지전자 주식회사 이동 단말기 및 그 제어 방법

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007055356A (ja) * 2005-08-23 2007-03-08 Denso Corp 車載用電子機器の制御装置
US20070129864A1 (en) * 2005-11-28 2007-06-07 Fujitsu Ten Limited In-vehicle display apparatus and display control method therefor
JP2006301652A (ja) * 2006-04-27 2006-11-02 Fujitsu Ten Ltd 機器制御システム、及び車載用機器
CN101460919A (zh) * 2006-06-05 2009-06-17 三菱电机株式会社 显示装置及该装置的限制操作方法
JP2013159255A (ja) * 2012-02-07 2013-08-19 Jvc Kenwood Corp 車載機器、車載機器の制御方法、車載機器の制御装置
WO2013153583A1 (ja) * 2012-04-13 2013-10-17 三菱電機株式会社 車載用音声入力装置
CN104636061A (zh) * 2013-11-08 2015-05-20 现代自动车株式会社 用于执行车辆的特定任务的装置及其控制方法
CN106132779A (zh) * 2014-03-18 2016-11-16 株式会社电装 车辆用通知控制装置以及车辆用通知控制系统
US20160176372A1 (en) * 2014-12-22 2016-06-23 Lg Electronics Inc. Controlling a vehicle
CN107428295A (zh) * 2015-03-19 2017-12-01 三菱电机株式会社 未确认信息输出装置、未确认信息输出方法

Also Published As

Publication number Publication date
US20210061102A1 (en) 2021-03-04
JPWO2019163060A1 (ja) 2020-07-02
DE112018006615T5 (de) 2020-09-10
JP6717537B2 (ja) 2020-07-01
WO2019163060A1 (ja) 2019-08-29

Similar Documents

Publication Publication Date Title
US10160413B2 (en) Vehicle and control method thereof
JP6851482B2 (ja) 操作支援装置および操作支援方法
WO2017081960A1 (ja) 音声認識制御システム
JP6604151B2 (ja) 音声認識制御システム
KR101736109B1 (ko) 음성인식 장치, 이를 포함하는 차량, 및 그 제어방법
JP2017090613A (ja) 音声認識制御システム
JP2017090612A (ja) 音声認識制御システム
JP2009251388A (ja) 母国語発話装置
US11220180B2 (en) Autonomous driving apparatus and navigation apparatus
CN109976515B (zh) 一种信息处理方法、装置、车辆及计算机可读存储介质
KR101755308B1 (ko) 음성 인식 모듈, 그를 가지는 단말기 및 차량
JP2008094228A (ja) 車両用通話警告装置
CN111801249A (zh) 操作限制控制装置以及操作限制控制方法
JP2007101892A (ja) 音声認識装置
JP2019200125A (ja) 経路案内制御装置および経路案内制御方法
JP2004301875A (ja) 音声認識装置
JP2007263651A (ja) 車載用ナビゲーション装置及び車両信号検知方法
JP2019016276A (ja) 表示制御装置および表示制御方法
JP6358987B2 (ja) 車載情報機器
WO2023153314A1 (ja) 車内機器制御装置、車内機器制御方法
JP7303173B2 (ja) 情報処理装置、移動体、出力制御装置、端末、情報処理方法、出力制御方法、及びプログラム
JP7192561B2 (ja) 音声出力装置および音声出力方法
US10812924B2 (en) Control apparatus configured to control sound output apparatus, method for controlling sound output apparatus, and vehicle
WO2024070080A1 (ja) 情報処理装置、情報処理方法、及びプログラム
WO2023218554A1 (ja) ナビゲーション装置および立ち寄り地提案方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
AD01 Patent right deemed abandoned

Effective date of abandoning: 20231229