CN116061828A - 车载显示设备的控制方法、装置、车载显示设备以及车辆 - Google Patents

车载显示设备的控制方法、装置、车载显示设备以及车辆 Download PDF

Info

Publication number
CN116061828A
CN116061828A CN202210778466.9A CN202210778466A CN116061828A CN 116061828 A CN116061828 A CN 116061828A CN 202210778466 A CN202210778466 A CN 202210778466A CN 116061828 A CN116061828 A CN 116061828A
Authority
CN
China
Prior art keywords
vehicle
screen
mounted screen
target audio
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210778466.9A
Other languages
English (en)
Inventor
徐强洪
韩超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Express Jiangsu Technology Co Ltd
Original Assignee
China Express Jiangsu Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Express Jiangsu Technology Co Ltd filed Critical China Express Jiangsu Technology Co Ltd
Publication of CN116061828A publication Critical patent/CN116061828A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B60R11/0235Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes of flat type, e.g. LCD
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0042Arrangements for holding or mounting articles, not otherwise provided for characterised by mounting means
    • B60R2011/008Adjustable or movable supports
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • User Interface Of Digital Computer (AREA)
  • Manipulator (AREA)
  • Navigation (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Toys (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

本申请实施例提供了车载显示设备的控制方法、装置、车载显示设备以及车辆,其中,车载显示设备包括连接的车载机械臂和车载屏幕,车载机械臂用于驱动车载屏幕动作,该车载显示设备的控制方法包括:对目标音频进行特征提取处理,得到目标音频的音频特征,音频特征包括节奏特征、音调特征以及响度特征中的至少之一;基于目标音频的音频特征,控制车载机械臂驱动车载屏幕动作。根据本申请实施例的技术,实现了车载屏幕与影音娱乐系统的交互,在车辆的影音娱乐系统播放音乐的过程中,可以使车载屏幕在车载机械臂的驱动下,根据音乐的律动进行有节奏的动作,达到了烘托音乐氛围的效果,从而增强了与用户的互动体验,提高了用户驾乘车辆的娱乐性。

Description

车载显示设备的控制方法、装置、车载显示设备以及车辆
本申请要求于2021年11月1日提交中国专利局、申请号为202122647760.X、实用新型名称为“一种屏幕调整机构以及车载中控屏”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请涉及车辆技术领域,尤其涉及车载显示设备的控制方法、装置、车载显示设备以及车辆。
背景技术
车辆的车载屏幕作为高度集成化的车用多媒体娱乐信息中心,可以满足导航、娱乐、日常事物处理等各种需求。但是,相关技术中的车载屏幕的交互功能主要通过其屏幕显示以及触控点击的方式实现,无法通过自身的动作实现与其他车载组件的交互功能,用户的使用体验有待提高。
发明内容
本申请实施例提供了车载显示设备的控制方法、装置、车载显示设备以及车辆,以解决相关技术存在的问题,技术方案如下:
第一方面,本申请实施例提供了一种车载显示设备的控制方法,车载显示设备包括连接的车载机械臂和车载屏幕,车载机械臂用于驱动车载屏幕动作,该控制方法包括:
对目标音频进行特征提取处理,得到目标音频的音频特征,音频特征包括节奏特征、音调特征以及响度特征中的至少之一;
基于目标音频的音频特征,控制车载机械臂驱动车载屏幕动作。
在一种实施方式中,基于目标音频的音频特征,控制车载机械臂驱动车载屏幕动作,包括:
基于目标音频的音频特征,确定车载屏幕的动作模式,动作模式包括动作形式、动作幅度和动作频率;
控制车载机械臂驱动车载屏幕执行与动作模式对应的目标动作。
在一种实施方式中,基于目标音频的音频特征,确定车载屏幕的动作模式,包括:
基于目标音频的节奏特征,确定车载屏幕的动作形式;
基于车载屏幕的动作形式以及目标音频的节奏特征和响度特征,确定车载屏幕的动作幅度和/或动作频率。
在一种实施方式中,节奏特征包括目标音频在单位时间内的节拍数;
基于目标音频的节奏特征,确定车载屏幕的动作形式,包括:
在目标音频在单位时间内的节拍数符合第一阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Z轴往复转动;
在目标音频在单位时间内的节拍数符合第二阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动;
在目标音频在单位时间内的节拍数符合第三阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动以及沿车载屏幕的X轴往复运动。
在一种实施方式中,基于车载屏幕的动作形式以及目标音频的节奏特征和响度特征,确定车载屏幕的动作幅度和/或动作频率,包括:
在车载屏幕的动作形式为绕Z轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Z轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Z轴转动的频率;
在车载屏幕的动作形式为绕Y轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;
在车载屏幕的动作形式为绕Y轴往复转动以及沿X轴往复运动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;以及,根据目标音频的响度特征,确定车载屏幕沿X轴运动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕沿X轴往复运动的频率。
在一种实施方式中,该方法还包括:
基于目标音频的音频特征,控制车载屏幕显示目标内容。
在一种实施方式中,目标内容包括车辆模型和多个扬声器点位,扬声器点位用于表征扬声器在车辆上的设置位置;
基于目标音频的音频特征,控制车载屏幕显示目标内容,包括:
基于目标音频的音调特征,从多个扬声器点位中确定出目标扬声器点位;
基于目标音频的响度特征,在目标扬声器点位处显示与响度特征关联的声音标识。
第二方面,本申请实施例还提供了一种车载显示设备的控制装置,车载显示设备包括连接的车载机械臂和车载屏幕,车载机械臂用于驱动车载屏幕动作,该控制装置包括:
特征提取模块,用于对目标音频进行特征提取处理,得到目标音频的音频特征,音频特征包括节奏特征、音调特征以及响度特征中的至少之一;
车载机械臂控制模块,用于基于目标音频的音频特征,控制车载机械臂驱动车载屏幕动作。
在一种实施方式中,车载机械臂控制模块包括:
动作模式确定子模块,用于基于目标音频的音频特征,确定车载屏幕的动作模式,动作模式包括动作形式、动作幅度和动作频率;
车载机械臂控制子模块,用于控制车载机械臂驱动车载屏幕执行与动作模式对应的目标动作。
在一种实施方式中,动作模式确定子模块包括:
第一确定单元,用于基于目标音频的节奏特征,确定车载屏幕的动作形式;
第二确定单元,用于基于车载屏幕的动作形式以及目标音频的节奏特征和响度特征,确定车载屏幕的动作幅度和/或动作频率。
在一种实施方式中,节奏特征包括目标音频在单位时间内的节拍数;第一确定单元还用于:
在目标音频在单位时间内的节拍数符合第一阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Z轴往复转动;
在目标音频在单位时间内的节拍数符合第二阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动;
在目标音频在单位时间内的节拍数符合第三阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动以及沿车载屏幕的X轴往复运动。
在一种实施方式中,第二确定单元还用于:
在车载屏幕的动作形式为绕Z轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Z轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Z轴转动的频率;
在车载屏幕的动作形式为绕Y轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;
在车载屏幕的动作形式为绕Y轴往复转动以及沿X轴往复运动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;以及,根据目标音频的响度特征,确定车载屏幕沿X轴运动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕沿X轴往复运动的频率。
在一种实施方式中,该车载显示设备的控制装置还包括:
车载屏幕控制模块,用于基于目标音频的音频特征,控制车载屏幕显示目标内容。
在一种实施方式中,目标内容包括车辆模型和多个扬声器点位,扬声器点位用于表征扬声器在车辆上的设置位置;车载屏幕控制模块还用于:
基于目标音频的音调特征,从多个扬声器点位中确定出目标扬声器点位;
基于目标音频的响度特征,在目标扬声器点位处显示与响度特征关联的声音标识。
第三方面,本申请实施例还提供了一种车载显示设备,包括:
控制单元,用于执行本申请上述实施例的控制方法,或者包括本申请上述实施例的控制装置;以及,
车载屏幕和车载机械臂,车载机械臂与车载屏幕连接,用于驱动车载屏幕完成至少一种目标动作。
第四方面,本申请实施例还提供了一种车辆,包括根据本申请上述实施例的车载显示设备。
第五方面,本申请实施例提供了一种电子设备,该电子设备包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,以使至少一个处理器能够执行上述实施例的车载显示设备的控制方法。
第六方面,本申请实施例提供了一种计算机可读存储介质,计算机可读存储介质存储计算机指令,当计算机指令在计算机上运行时,上述各方面任一种实施方式中的控制方法被执行。
根据本申请实施例的车载显示设备的控制方法,能够根据目标音频的音频特征,控制车载机械臂驱动车载屏幕执行相应的动作。由此,实现了车载屏幕与影音娱乐系统的交互,在车辆的影音娱乐系统播放音乐的过程中,可以使车载屏幕在车载机械臂的驱动下,根据音乐的律动进行有节奏的动作,达到了烘托音乐氛围的效果,从而增强了与用户的互动体验,提高了用户驾乘车辆的娱乐性。
上述概述仅仅是为了说明书的目的,并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外,通过参考附图和以下的详细描述,本申请进一步的方面、实施方式和特征将会是容易明白的。
附图说明
在附图中,除非另外规定,否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解,这些附图仅描绘了根据本申请公开的一些实施方式,而不应将其视为是对本申请范围的限制。
图1示出本申请实施例的车载显示设备的控制方法的流程图;
图2示出本申请实施例的车载显示设备的控制方法的控制车载机械臂控制车载机械臂驱动车载屏幕动作的具体流程图;
图3示出本申请实施例的车载显示设备的控制方法的确定车载屏幕动作模式的具体流程图;
图4示出本申请实施例的车载显示设备的控制方法的控制车载屏幕显示目标内容的具体流程图;
图5示出采用本申请实施例的车载显示设备的控制方法的车辆影音娱乐系统的框架图;
图6示出根据本申请实施例的车载屏幕显示目标内容的示意图;
图7示出根据本申请实施例的车载显示设备的控制装置的方框图;
图8示出根据本申请实施例的电子设备的方框图;
图9示出本申请实施例的车载机械臂的整体示意图;
图10示出本申请实施例的车载机械臂的导轨示意图;
图11示出本申请实施例的车载机械臂的旋转机构示意图;
图12示出本申请实施例的车载机械臂的直线运动单元的另一种安装方式实施例的示意图;
图13示出本申请实施例的车载机械臂的车载屏幕翻转动作示意图;
图14示出本申请实施例的车载机械臂的车载屏幕平移动作示意图;
图15示出本申请实施例的车载机械臂的车载屏幕旋转动作示意图;
图16示出本申请实施例的车载机械臂的车载屏幕前后移动动作示意图;
图17示出本申请实施例的车载机械臂的旋转件动作示意图。
具体实施方式
在下文中,仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样,在不脱离本申请的精神或范围的情况下,可通过各种不同方式修改所描述的实施例。因此,附图和描述被认为本质上是示例性的而非限制性的。
下面参照图1至图6描述根据本申请实施例的车载显示设备的控制方法。
在本申请实施例中,车载显示设备包括连接的车载机械臂和车载屏幕,车载机械臂用于驱动车载屏幕动作。车载机械臂具体可以为多自由度车载数字机器人。其中,多自由度可以包括沿车载屏幕的X轴、Y轴和Z轴移动的三个平移自由度以及绕前述X轴、Y轴和Z轴转动的三个转动自由度中的至少两个。其中,车载屏幕的X轴方向与车辆的长度方向平行,即与车辆的X轴方向平行;车载屏幕的Y轴方向与车辆的宽度方向平行,即与车辆的Y轴方向平行;车载屏幕的Z轴方向与车辆的高度方向平行,即与车辆的Z轴方向平行。
在一个示例中,车载机械臂可以为四自由度机器人。响应于控制信号,车载机械臂控制单元控制车载机械臂驱动车载屏幕执行如下四个动作中的至少一个:沿车载屏幕的X轴方向移动、绕车载屏幕的X轴方向转动、绕车载屏幕的Y轴方向转动以及绕车载屏幕的Z轴方向转动。由此,实现了车载屏幕的前后平移动作、摆动动作、翻转动作以及旋转动作。并且,车载机械臂控制单元可以根据不同的控制信号控制车载机械臂驱动车载屏幕往复执行上述中的一个动作,或者同时驱动车载屏幕往复执行上述中的几个动作。
进一步地,车载机械臂可以配合车门或者座椅等其他车载组件的工作状态,结合手势识别、语音形象等软件能力智能化工作,以使车载机械臂与交互形象高度融合成数字生命体,从而为用户提供情感交互和智能化用车体验。
需要说明的是,本申请实施例对车载机械臂的电气性能、机械结构等内容不作具体限定,只要能够驱动车载屏幕按照预设的动作模式执行相应的动作即可。
图1示出根据本申请实施例的车载显示设备的控制方法的流程图。如图1所示,根据本申请实施例的控制方法具体包括如下步骤:
S101:对目标音频进行特征提取处理,得到目标音频的音频特征,音频特征包括节奏特征、音调特征以及响度特征中的至少之一;
S102:基于目标音频的音频特征,控制车载机械臂驱动车载屏幕动作。
在本申请实施例中,车载屏幕可以为设置在车辆上的任一显示屏,如中控屏(Center Informative Display,CID,也可以叫做中央信息显示器)、副驾屏、平视显示器(Head Up Display,HUD)或者后排屏等。优选地,本申请实施例的车载屏幕为中控屏。
示例性地,在步骤S101中,目标音频具体可以为车辆的影音娱乐系统播放的音乐音频数据。
更为具体地,如图5所示,影音娱乐系统包括音频应用(Audio APP)模块、管理传输(Audio Flinger)模块、节奏解析(Rytheme Analyze)模块以及数据生成(Generate Data)模块。音频应用模块在播放音乐时通过媒体播放器接口启动媒体播放器。媒体播放器接收待播放的音频文件,并对音频文件进行解压处理,然后将解压后的音频数据传输至解码器进行解码处理,得到目标音频文件,管理传输模块将目标音频文件发送至节奏解析模块进行解析处理,得到目标音频的参数信息并发送至数据生成模块。最终,数据生成模块根据目标音频的参数信息生成音频特征。进一步地,车载机械臂控制模块根据目标音频的音频特征,控制车载机械臂驱动车载屏幕执行动作;车载屏幕控制模块根据目标音频的音频特征,控制车载屏幕显示目标内容。
需要说明的是,在本申请实施例中,可以采用任意方式对音频数据进行特征提取处理,本申请实施例对此不作具体限定,只要能够提取到目标音频的音频特征即可。
在一个示例中,节奏特征具体可以为目标音频在单位时间内的节拍数,更为具体地,节奏特征可以为目标音频在每分钟内的节拍数(Beat Per Minute,BPM)。其中,节拍指的是强拍和弱拍的组合规律,具体是指在乐谱中每一小节的音符总长度。常见的有1/4、2/4、3/4、4/4拍等等,每小节的长度是固定的,目标音频可以是由若干种节拍相结合组成的。音调特征可以根据目标音频播放时声音的频率参数确定,且音调的大小与频率的大小成正比。响度特征可以根据目标音频播放时声音的振幅参数确定,且响度的大小与振幅的大小成正比。
示例性地,在步骤S102中,可以根据目标音频的节奏特征、音调特征以及响度特征中的至少一个,控制车载机械臂驱动车载屏幕动作。
其中,车载屏幕的动作方式包括但不限于沿车载屏幕的X轴做往复运动、绕车载屏幕的X轴往复转动、绕车载屏幕的Y轴往复转动以及绕车载屏幕的Z轴往复转动,从而使车载屏幕能够跟随音乐的节奏、音调或者响度执行拟人化的点头、摇头、摇摆等动作。
在一个具体示例中,可以针对目标音频在单位时间内不同的节拍数,预先设定车载屏幕对应的不同的动作形式。在提取出目标音频的节奏特征后,根据目标音频在单位时间内的节拍数,控制车载机械臂驱动车载屏幕按照对应的动作形式执行目标动作。
根据本申请实施例的车载显示设备的控制方法,能够根据目标音频的音频特征,控制车载机械臂驱动车载屏幕执行相应的动作。由此,实现了车载屏幕与影音娱乐系统的交互,在车辆的影音娱乐系统播放音乐的过程中,可以使车载屏幕在车载机械臂的驱动下,根据音乐的律动进行有节奏的动作,达到了烘托音乐氛围的效果,从而增强了与用户的互动体验,提高了用户驾乘车辆的娱乐性。
在一种实施方式中,如图2所示,步骤S102包括:
S201:基于目标音频的音频特征,确定车载屏幕的动作模式,动作模式包括动作形式、动作幅度和动作频率;
S202:控制车载机械臂驱动车载屏幕执行与动作模式对应的目标动作。
示例性地,动作模式可以包括不同种类的动作形式,每种动作形式可以具有不同的动作幅度以及动作频率。
可以理解的是,动作形式指的是车载屏幕的动作方式或者动作轨迹。其中,动作形式可以基于车载机械臂驱动车载屏幕沿X轴方向、Y轴方向和沿Z轴方向的往复运动以及绕X轴方向、绕Y轴方向和绕Z轴方向的往复转动这六种动作方式中的一种或几种的组合,形成相应的动作形式。
其中,动作幅度指的是车载屏幕做往复直线运动的最大行程,或者做往复转动的最大转动角度。动作频率指的是车载屏幕在单位时间做往复直线运动或者往复转动的次数。
在一个示例中,针对音频特征所包含的节奏特征、音调特征以及响度特征,可以针对其中的任一种特征,建立该特征的不同数值与不同的动作形式之间的映射关系。以及,针对其中的任一种动作形式,建立该动作形式下的动作幅度以及动作频率与其余特征的数值大小之间的映射关系。由此,根据前述的映射关系,能够根据目标音频的音频特征,确定出车载屏幕所要执行的动作模式。
通过上述实施方式,提高了车载机械臂驱动车载屏幕按照确定出的动作模式执行目标动作的精细度,从而使车载屏幕的动作随车辆所播放音乐的音频特征的变化而变化,进一步提高车载屏幕的互动效果。
在一种实施方式中,如图3所示,步骤S201包括:
S301:基于目标音频的节奏特征,确定车载屏幕的动作形式;
S302:基于车载屏幕的动作形式以及目标音频的节奏特征和响度特征,确定车载屏幕的动作幅度和/或动作频率。
示例性地,可以根据目标音频的节奏快慢程度,对应设置有不同的车载屏幕的动作形式。
在一个示例中,针对任一种动作形式,根据目标音频的节奏快慢程度,相应确定车载屏幕的动作频率的快慢程度;以及,根据目标音频的响度大小,相应确定车载屏幕的动作幅度的大小。其中,车载屏幕的动作频率的快慢程度与目标音频的节奏快慢程度成正比,车载屏幕的动作幅度的大小与目标音频的响度大小成正比。
在另一个示例中,针对任一种动作形式,根据目标音频的节奏快慢程度,相应确定车载屏幕的动作幅度的大小;以及,根据目标音频的响度大小,相应确定车载屏幕的动作频率的快慢程度。其中,目标音频的节奏越快,则车载屏幕的动作幅度越大,反之则车载屏幕的动作幅度越小;目标音频的响度越大,则车载屏幕的动作频率越快,反之则车载屏幕的动作频率越慢。
可选地,节奏特征包括目标音频在单位时间内的节拍数,步骤S301具体包括如下步骤:
(1)在目标音频在单位时间内的节拍数符合第一阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Z轴往复转动;
(2)在目标音频在单位时间内的节拍数符合第二阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动;
(3)在目标音频在单位时间内的节拍数符合第三阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动以及沿车载屏幕的X轴往复运动。
在一个具体示例中,节奏特征包括目标音频在每分钟内的节拍数(Beat PerMinute,BPM)。
在目标音频的BPM大于等于60且小于等于120的情况下,则确定符合第一阈值范围条件。车载屏幕的运动形式为绕车载屏幕的Z轴往复转动,以使车载屏幕在车载机械臂的驱动下执行摇摆的拟人化动作。
在目标音频的BPM大于120且小于等于180的情况下,则确定符合第二阈值范围条件。车载屏幕的运动形式为绕车载屏幕的Y轴往复转动,以使车载屏幕在车载机械臂的驱动下执行点头的拟人化动作。
在目标音频的BPM大于180的情况下,则确定符合第三阈值范围条件。车载屏幕的运动形式为绕车载屏幕的Y轴往复转动同时沿车载屏幕的X轴往复运动,以使车载屏幕在车载机械臂的驱动下同时执行点头以及前进后退的拟人化动作。
通过上述实施方式,能够使车载屏幕根据车辆播放音乐的节奏快慢,执行相应形式的目标动作,从而带给用户不同的交互体验。
进一步地,步骤S302具体包括如下步骤:
(1)在车载屏幕的动作形式为绕Z轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Z轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Z轴转动的频率;
(2)在车载屏幕的动作形式为绕Y轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;
(3)在车载屏幕的动作形式为绕Y轴往复转动以及沿X轴往复运动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;以及,根据目标音频的响度特征,确定车载屏幕沿X轴运动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕沿X轴往复运动的频率。
在一个具体示例中,在车载屏幕的动作形式为绕Z轴往复转动的摇摆拟人动作的情况下,车载屏幕的摇摆幅度为车载屏幕绕Z轴单次转动的最大角度,且车载屏幕的摇摆幅度的大小与目标音频的响度大小成正比。车载屏幕的摇摆频率即为在单位时间的摇摆次数,且与目标音频的BPM成正比。
在车载屏幕的动作形式为绕Y轴往复转动的点头拟人动作的情况下,车载屏幕的点头幅度即为车载屏幕绕Y轴单次转动的最大角度,且车载屏幕的点头幅度与目标音频的响度大小成正比。车载屏幕的点头频率即为在单位时间内的点头次数,且与目标音频的BPM成正比。
在车载屏幕的动作形式为同时执行点头以及前进后退的拟人动作的情况下,车载屏幕的点头幅度和点头频率的确定方式如前所述,车载屏幕的前进后退的幅度即为车载屏幕在X轴方向上的最大行程,且前进后退的幅度与目标音频的响度大小成正比。车载屏幕的前进后退的频率即为在单位时间内的次数,且与目标音频的BPM成正比。
通过上述实施方式,针对车载屏幕的任一种运动形式,可以根据目标音频的节奏特征以及响度特征,执行具有特定幅度以及特定频次的特定动作,进一步提升了车载屏幕动作的精细化程度,提高了车载屏幕的拟人化效果,从而更好的烘托音乐氛围。
在一种实施方式中,该方法还包括:
基于目标音频的音频特征,控制车载屏幕显示目标内容。
可以理解的是,目标内容可以为预设动画。针对不同的音频特征,预先设置有不同的预设动画,根据目标音频的音频特征的变化,控制车载屏幕显示变化的预设动画,以使目标内容根据音乐的律动性进行相应的变化,从而能够通过车载屏幕显示的目标内容,对车辆播放的音乐进行可视化呈现,进一步提高了用户的交互体验。
需要说明的是,本申请实施例对于目标内容的设置方式不作具体限定,只要能够实现根据目标音频的节奏特征、音调特征以及响度特征进行相应的显示,并按照一定规律根据前述的音频特征的变化而而变化即可。
在一种实施方式中,目标内容包括车辆模型和多个扬声器点位,扬声器点位用于表征扬声器在车辆上的设置位置。如图4所示,基于目标音频的音频特征,控制车载屏幕显示目标内容,具体包括如下步骤:
S401:基于目标音频的音调特征,从多个扬声器点位中确定出目标扬声器点位;
S402:基于目标音频的响度特征,在目标扬声器点位处显示与响度特征关联的声音标识。
在一个应用示例中,如图6所示,车辆模型可以为采用本申请实施例的车载显示设备的控制方法的实车的俯视图,多个扬声器点位与实车上设置的多个扬声器的位置一一对应。其中,实车上的多个扬声器用于分别播放目标音频不同频率的音频片段。例如,针对频率为小于等于300Hz的低频音频片段,实车上设置有与低频音频片段对应的第一组扬声器,第一组扬声器用于播放低频音频片段;针对频率为大于300Hz且小于等于4000Hz的中频音频片段,实车上设置有与中频音频片段对应的第二组扬声器,第二组扬声器用于播放中频音频片段;针对频率为大于4000Hz的高频音频片段,实车上设置有与高频音频片段对应的第三组扬声器,第三组扬声器用于播放高频音频片段。
在音乐播放过程中,根据目标音频当前的音调特征,即目标音频播放声音的频率大小,可以确定出对应的正在发声的扬声器组,并根据正在发声的扬声器组与扬声器点位的映射关系,从多个扬声器点位中确定出目标扬声器点位。
进一步地,声音标识可以为用于表征扬声器点位对应的扬声器正在发声的任意图案。例如,声音标识可以为水波纹图案,且水波纹图案中水波纹的数量与目标音频当前的响度特征相关联。
更为具体地,可以根据目标音频播放声音的振幅大小,对水波纹图案中水波纹的数量对应设置。例如,振幅的大小可以从小到大的设置为三档,相应地,水波纹图案中水波纹的数量分别为1、3和5。
根据上述实施方式,通过从多个扬声器点位中确定出目标扬声器点位,并在目标扬声器点位处显示与响度特征相关联的声音标识,由此,在音乐播放过程中,可以实时显示实车上正在播放目标音频的扬声器的位置,并且通过声音标识能够反映出任一正在发声的扬声器的音量大小,能够使用户通过视觉的角度感受声音的方位和响度,进一步提升了音乐氛围的烘托效果。
下面参照图7描述根据本申请实施例的车载显示设备的控制装置。在本申请实施例中,车载显示设备包括连接的车载机械臂和车载屏幕,车载机械臂用于驱动车载屏幕动作。
如图7所示,车载显示设备的控制装置包括:
特征提取模块701,用于对目标音频进行特征提取处理,得到目标音频的音频特征,音频特征包括节奏特征、音调特征以及响度特征中的至少之一;
车载机械臂控制模块702,用于基于目标音频的音频特征,控制车载机械臂驱动车载屏幕动作。
在一种实施方式中,车载机械臂控制模块702包括:
动作模式确定子模块,用于基于目标音频的音频特征,确定车载屏幕的动作模式,动作模式包括动作形式、动作幅度和动作频率;
车载机械臂控制子模块,用于控制车载机械臂驱动车载屏幕执行与动作模式对应的目标动作。
在一种实施方式中,动作模式确定子模块包括:
第一确定单元,用于基于目标音频的节奏特征,确定车载屏幕的动作形式;
第二确定单元,用于基于车载屏幕的动作形式以及目标音频的节奏特征和响度特征,确定车载屏幕的动作幅度和/或动作频率。
在一种实施方式中,节奏特征包括目标音频在单位时间内的节拍数;第一确定单元还用于:
在目标音频在单位时间内的节拍数符合第一阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Z轴往复转动;
在目标音频在单位时间内的节拍数符合第二阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动;
在目标音频在单位时间内的节拍数符合第三阈值范围的条件下,确定车载屏幕的动作形式为,绕车载屏幕的Y轴往复转动以及沿车载屏幕的X轴往复运动。
在一种实施方式中,第二确定单元还用于:
在车载屏幕的动作形式为绕Z轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Z轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Z轴转动的频率;
在车载屏幕的动作形式为绕Y轴往复转动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;
在车载屏幕的动作形式为绕Y轴往复转动以及沿X轴往复运动的情况下,根据目标音频的响度特征,确定车载屏幕绕Y轴转动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕绕Y轴转动的频率;以及,根据目标音频的响度特征,确定车载屏幕沿X轴运动的幅度,和/或,根据目标音频的节奏特征,确定车载屏幕沿X轴往复运动的频率。
在一种实施方式中,该车载显示设备的控制装置还包括:
车载屏幕控制模块,用于基于目标音频的音频特征,控制车载屏幕显示目标内容。
在一种实施方式中,目标内容包括车辆模型和多个扬声器点位,扬声器点位用于表征扬声器在车辆上的设置位置;车载屏幕控制模块还用于:
基于目标音频的音调特征,从多个扬声器点位中确定出目标扬声器点位;
基于目标音频的响度特征,在目标扬声器点位处显示与响度特征关联的声音标识。
图8示出根据本申请一实施例的电子设备的结构框图。如图8所示,该电子设备包括:存储器810和处理器820,存储器810内存储有可在处理器820上运行的指令。处理器820执行该指令时实现上述实施例中的车载显示设备的控制方法。存储器810和处理器820的数量可以为一个或多个。该电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本申请的实现。
该电子设备还可以包括通信接口830,用于与外界设备进行通信,进行数据交互传输。各个设备利用不同的总线互相连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器820可以对在电子设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个电子设备,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器系统)。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图8中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
可选的,在具体实现上,如果存储器810、处理器820及通信接口830集成在一块芯片上,则存储器810、处理器820及通信接口830可以通过内部接口完成相互间的通信。
应理解的是,上述处理器可以是中央处理器(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者是任何常规的处理器等。值得说明的是,处理器可以是支持进阶精简指令集机器(Advanced RISC Machines,ARM)架构的处理器。
本申请实施例提供了一种计算机可读存储介质(如上述的存储器810),其存储有计算机指令,该程序被处理器执行时实现本申请实施例中提供的方法。
可选的,存储器810可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器810可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中,存储器810可选包括相对于处理器820远程设置的存储器,这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
本申请实施例还提供了一种车载显示设备,包括控制单元、车载屏幕和车载机械臂。控制单元用于执行本申请上述实施例的控制方法,或者包括本申请上述实施例的控制装置。车载机械臂与车载屏幕连接,用于驱动车载屏幕完成至少一种目标动作。
具体地,车载机械臂包括固定于车载屏幕的背面的多自由度调整机构、以及安装于多自由度调整机构上的多个伸缩单元;其中,车载机械臂用于驱动车载屏幕完成下述四种动作中的任一个或多个,四种动作包括:屏幕平移动作、屏幕翻转动作、屏幕旋转动作和屏幕前后移动动作。伺服电机与控制单元通讯,用于在控制单元的控制下驱动车载机械臂运动。车载屏幕与车载机械臂连接。
下面参照图9至图17描述根据本申请实施例的车载机械臂。
图9示出一种可选实施例的车载机械臂,包括:固定于车载屏幕3的背面的多自由度调整机构、以及安装于多自由度调整机构上的多个伸缩单元;其中,车载机械臂用于驱动车载屏幕3完成下述四种动作中的任一个或多个,四种动作包括:车载屏幕平移动作、车载屏幕翻转动作、车载屏幕旋转动作和车载屏幕前后移动动作。进一步地,以车载屏幕3处于未发生任何动作的状态为初始状态,当车载屏幕3处于初始状态下,在空间中具有一初始轴线,该初始轴线与车载屏幕3于初始状态下所在平面垂直设置;则对于上述的四种动作具有如下的具体解释:车载屏幕平移动作:如图14所示,车载屏幕3的正面进行平移,车载屏幕3的正面在与初始轴线垂直的一平面内作任意角度的平移;车载屏幕翻转动作:如图13所示,车载屏幕3的正面进行翻转,车载屏幕3的正面在翻转完成后与初始轴线之间存在一夹角;车载屏幕旋转动作:如图15所示,车载屏幕3的正面绕初始轴线或一与初始轴线平行的轴线作转动;车载屏幕前后移动动作:如图16所示,车载屏幕3的正面进行前后方向作移动,车载屏幕3的正面的移动方向与初始轴线平行设置。换句话说,多个伸缩单元用于带动车载屏幕3进行上下左右的翻转,多自由度调整机构用于带动车载屏幕3进行旋转和平移,其中上下左右是指当上述的车载屏幕3处于面向使用者的竖直状态下,车载屏幕3相对于初始位置进行上部向后侧倾斜、下部向后侧倾斜、左部向后侧倾斜以及右部向后侧倾斜的动作。
本实施例中,“车载机械臂”也可以叫做屏幕调整机构,图示中的“2/5”表示旋转机构2和/或滑动机构5。
进一步,作为一种可选的实施例,本申请涉及的车载显示设备调整机构也可以不设置上述的多自由度调整机构,直接使得车载屏幕3与若干伸缩单元10连接,从而实现车载屏幕3可以根据使用需求只进行上、下、左、右的摆动。
进一步,作为一种可选的实施例,本申请涉及的车载显示设备调整机构也可以不设置上述的若干伸缩单元,直接使得车载屏幕3与多自由度调整机构连接,从而实现控制屏的自身旋转以及平移式的滑动。
在另一个可选的实施例中,每一伸缩单元的运动均与多自由度调整机构连接,每一伸缩单元的驱动端均与一驱动部连接。
进一步,作为一种可选的实施例,驱动部为车辆的内部的中控台。
进一步,作为一种可选的实施例,中控台内设置有相应的控制系统,控制系统用于控制若干伸缩单元的伸缩动作和多自由度调整机构的运动。
进一步,作为一种可选的实施例,伸缩单元也可为一具有球头结构的可弯曲杆件,该伸缩杆件通过球头与多自由度调整机构远离车载屏幕3的一侧进行过盈挤压的安装。进一步地,使用者可通过手动施力于车载屏幕3,使得多自由度调整机构作为传递力的部分施力于球头结构上,并当使得摆动至一定角度后,球头结构与多自由度调整机构之间产生足够的摩擦力使得车载屏幕3保持位姿参数。
进一步,作为一种可选的实施例,每一伸缩单元的运动端均包括:直线运动单元11和多自由度连接器,直线运动单元11的一端与多自由度连接器连接,多自由度连接器安装于多自由度调整机构上。
进一步,作为一种可选的实施例,多自由度连接器为球头接头结构或万向节接头结构。
进一步,如图10所示,作为一种可选的实施例,球头接头结构包括:球形接头12和球窝滑块13,球形接头12与直线运动单元11固定连接,每一球形接头12均安装于一球窝滑块13内,每一球窝滑块13均安装于多自由度调整机构上。
进一步,作为一种可选的实施例,每一球窝滑块13上均具有一与球形接头12相匹配的球形凹陷。
进一步,作为一种可选的实施例,万向节接头结构包括:第一转动部、第二转动部及连接第一、第二转动部的铰接部,所述第一转动部的一端与伸缩单元固定连接,第一转动部的另一端与铰接部一端连接,铰接部的另一端与第二转动部的一端可转动地连接,第二转动部的另一端与多自由度调整机构固定连接。
进一步,作为一种可选的实施例,直线运动单元11为电动推杆或手动推杆。进一步地,当直线运动单元11为手动推杆时,使用者可通过手动推动车载屏幕3以使得车载屏幕3做出相应的动作;当车载机械臂的电动推杆处于断电状态,电动推杆应允许使用者通过手动的方式驱使电动推杆进行相应的伸缩以完成车载屏幕3的动作。
进一步,作为一种可选的实施例,球头接头12、直线运动单元11、多自由度调整机构等本车载机械臂的可动部位均与相应的连接部位之间的接触面具有一定的摩擦阻力,所述摩擦阻力用于使得在车辆形式的过程中保持当前姿态的稳定。
进一步,作为一种可选的实施例,电动推杆或者车载屏幕3内设置有受力传感部,受力传感部用于获取对应位置处所受外力的信息,受力传感部通过该外力的信息对施力的目标进行判断:当施力的目标为乘客时,即乘客对车载屏幕3进行推动时,受力传感部将所述外力的信息分析为动作信息,并使得车载机械臂根据动作信息进行相应的动作,以形成对乘客推动车载屏幕过程中的助力,使得乘客能够轻松地驱使车载屏幕3完成相应的动作;当施力的目标为非乘客推动意愿的外力作用时,即车辆遇到颠簸或者乘客对车载屏幕进行触控操作时,车载机械臂不动或驱使相应的驱动部进行反向驱动以使得控制车载屏幕3保持当前的状态。
进一步,作为一种可选的实施例,还包括:车辆碰撞检测系统,车辆碰撞检测系统安装于车辆上,车辆碰撞系统用于实时检测车辆的行驶信息,当车辆即将发生或已经发生碰撞时,车载机械臂立即驱动车载屏幕3快速远离乘客,以避免乘客在碰撞时惯性的作用下与车载屏幕3相碰撞而造成伤害。
进一步,作为一种可选的实施例,直线运动单元11为无动力伸缩杆。
进一步,作为一种可选的实施例,直线运动单元11为液压推杆。
进一步,作为一种可选的实施例,还包括:若干导轨14,每一导轨14均安装于多自由度调整机构上,每一球窝滑块13均可滑动地安装于一导轨14上。
本申请在上述基础上还具有如下实施方式:
本申请的可选的实施例中,所述车载机械臂包括三个伸缩单元。
本申请的可选的实施例中,导轨14、球形接头12、球窝滑块13和直线运动单元11的数量均为三个。
本申请的可选的实施例中,三导轨14呈两两间隔120度夹角设置。进一步地,即三个导轨14的延长线相交后汇聚一点,并且相邻的两延长线之间间隔120度。
本申请的可选的实施例中,多自由度调整机构包括:滑动机构5和旋转机构2,旋转机构2与滑动机构5连接,旋转机构2和滑动机构5中的一个与车载屏幕3连接,旋转机构2和滑动机构5中的另一个与伸缩单元连接。
如图11所示,本申请的可选的实施例中,旋转机构2包括:支撑部、电机21、蜗杆22、涡轮23和扇形齿轮24,电机21、蜗杆22和涡轮23均安装于支撑部上,电机21与蜗杆22连接,蜗杆22与涡轮23传动连接,涡轮23与扇形齿轮24啮合连接,扇形齿轮24安装于车载屏幕3或滑动机构5上。进一步地,支撑部与若干伸缩单元连接或与滑动机构5连接。支撑部呈壳体式结构,上述的壳体式结构将电机21、蜗杆22、涡轮23和扇形齿轮24容置于支撑部内。扇形齿轮24的一端的外缘径向向外凸出形成有一弧形部,弧形部上设置有一弧形的齿条,齿条的齿尖径向向内设置,齿条与涡轮23传动连接。
本申请的可选的实施例中,还包括:两旋转止挡块25,两旋转止挡块25安装于支撑部上,且两旋转止挡块25分别可操作地与扇形齿轮24的两端相抵设置。
本申请的可选的实施例中,旋转机构2还包括:旋转轴,旋转轴的一端固定安装于支撑部上,旋转轴的另一端通过轴承等可转动地安装于车载屏幕3的背面或滑动机构5上。
本申请的可选的实施例中,滑动机构5包括:第一滑动部、第二滑动部和滑动驱动装置,所述第一滑动部与第二滑动可滑动的连接,且滑动方向与旋转机构2的旋转轴垂直设置,滑动驱动装置安装于第一滑动部和第二滑动部之间,所述滑动驱动装置用于驱动第一滑动部和第二滑动部之间的相对滑动。
本申请的可选的实施例中,还包括:视觉传感装置,视觉传感装置安装于车载屏幕3的正面,视觉传感装置用于检测使用者的眼睛的位置,且视觉传感装置与控制系统连接。进一步地,通过视觉传感装置以及控制系统使得在角度调整机构和多自由度调整机构的帮助下使得车载屏幕3的正面尽可能地朝向驾驶者设置,其中视觉传感装置为智能摄像头或人体位置传感器。在另一可选的实施例中,视觉传感装置包括若干视觉传感装置,若干视觉传感装置设置于车载屏幕3的正面和/或车辆的驾驶室的任意位置。在对视觉传感装置的具体应用中,作为本视觉传感装置的一种使用方法,视觉传感装置用于识别车辆的乘客的指定手势动,并且根据识别到的手势动作的不同,所述的车载机械臂根据视觉传感装置获得的手势动作信息控制车载屏幕3进行与之相匹配的动作。例如,手势控制车载屏幕前后移动,或随某个应用场景触发车载屏幕正对使用者。
本申请的可选的实施例中,还包括:机构控制器,机构控制器用于控制所述的车载机械臂,机构控制器可用于对车辆内的乘客的信息进行收集,该信息包括但不限定于相应的乘客的身高信息、体重信息或性别信息等个人信息,同时机构控制器还用于收集相应的成员的座椅的姿态信息,通过对乘客的个人信息以及座椅的姿态信息进行处理,自动控制车载机械臂或者座椅位姿调整机构使得车载屏幕3的正面朝向乘客。同时,机构控制器还时刻收集与车辆的方向盘的相对位置信息,通过计算车载屏幕3与方向盘之间的一安全距离对车载屏幕3的动作范围进行限制,即通过机构控制器对车载显示设备的控制保持车载屏幕3与方向盘之间的距离始终大于等于上述的安全距离。
本申请的技术方案中,所涉及的用户个人信息的获取、存储和应用等,均符合相关法律法规的规定,且不违背公序良俗。
本申请的可选的实施例中,还包括:声音传感装置,声音传感装置包括若干个声音接收器,若干声音接收器布置于车载屏幕3的外缘或者车辆的驾驶室内,声音传感装置与控制系统连接。进一步地,通过声音传感装置用于检测使用者的说话的位置,从而调整车载屏幕3的朝向位置。
如图12和图17所示,本申请的可选的实施例中,相区别于上述的利用球窝滑块13与滑轨的匹配来适应伸缩单元的端部的位移的技术方案,本申请还提供了另一种提供上述的位移的技术方案,具体如下:本申请的每一伸缩单元的驱动端还具有一旋转件4,每一旋转件4均安装于驱动部上,每一伸缩单元的运动端均均与一旋转件4可转动地连接。即将原本发生在导轨14上的适应性位移转移至伸缩单元自身的转动以匹配伸缩单元的球形接头12的位移。
本申请的可选的实施例中,对于上述采用旋转件4的实施例,对应的,伸缩单元的多自由度连接器不再与导轨14连接,而是直接与多自由度调整机构连接。
本申请的可选的实施例中,球窝滑块13直接固定于多自由度调整机构上,球形接头12可转动地安装于球窝滑块13上。
本申请的可选的实施例中,旋转件4与直线运动单元11的中部转动连接。
本申请的可选的实施例中,旋转件4呈轴状结构设置。
本申请的可选的实施例中,驱动部为壳体式结构,三旋转件4均固定安装于壳体上。
本申请的可选的实施例中,三旋转件4的轴线相交呈120度夹角间隔布置。
作为一种可选的实施例的车载显示设备,包括车载屏幕3以及上述中任意一项的车载机械臂,即相应的车载屏幕3为中控屏,中控屏设置于车辆的前舱的控制台处,若干个伸缩单元与多自由度调整机构共同参驱动中控屏在车内狭小空间内完成车载屏幕3平移动作、车载屏幕3翻转动作、车载屏幕3旋转动作和车载屏幕3前后移动动作。除上述已提及的应用场景举例之外,基于以上动作的单独实施或组合实施还可形成各种其他应用场景的呈现,例如通过翻转和/或旋转向使用者(驾驶员或车内乘客)打招呼、某些车机交互场景下的特定翻转动作(展现摇摆效果或摇头效果或歪头效果)、空中升级(OTA)成功时的特定翻转动作、随某一车机交互场景的触发面向使用者(如将车载屏幕作为化妆镜)、随手势操作或其他动作捕捉触发车载屏幕前后移动、随特定内容或动作捕捉触发车载屏幕旋转、随语音调整上述各单一动作或动作组合的运动量等。
本申请实施例还提供了一种车辆,包括根据本申请上述实施例的车载显示设备。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本申请的至少一个实施例或示例中。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或多个(两个或两个以上)用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分。并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。
应理解的是,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。上述实施例方法的全部或部分步骤是可以通过程序来指令相关的硬件完成,该程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。上述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读存储介质中。该存储介质可以是只读存储器,磁盘或光盘等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到其各种变化或替换,这些都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种车载显示设备的控制方法,其特征在于,所述车载显示设备包括连接的车载机械臂和车载屏幕,所述车载机械臂用于驱动所述车载屏幕动作,所述控制方法包括:
对目标音频进行特征提取处理,得到目标音频的音频特征,所述音频特征包括节奏特征、音调特征以及响度特征中的至少之一;
基于所述目标音频的音频特征,控制所述车载机械臂驱动所述车载屏幕动作。
2.根据权利要求1所述的方法,其特征在于,基于所述目标音频的音频特征,控制所述车载机械臂驱动所述车载屏幕动作,包括:
基于所述目标音频的音频特征,确定所述车载屏幕的动作模式,所述动作模式包括动作形式、动作幅度和动作频率;
控制所述车载机械臂驱动所述车载屏幕执行与所述动作模式对应的目标动作。
3.根据权利要求2所述的方法,其特征在于,基于所述目标音频的音频特征,确定所述车载屏幕的动作模式,包括:
基于所述目标音频的节奏特征,确定所述车载屏幕的动作形式;
基于所述车载屏幕的动作形式以及所述目标音频的节奏特征和响度特征,确定所述车载屏幕的动作幅度和/或动作频率。
4.根据权利要求3所述的方法,其特征在于,所述节奏特征包括所述目标音频在单位时间内的节拍数;
基于所述目标音频的节奏特征,确定所述车载屏幕的动作形式,包括:
在所述目标音频在单位时间内的节拍数符合第一阈值范围的条件下,确定所述车载屏幕的动作形式为,绕所述车载屏幕的Z轴往复转动;
在所述目标音频在单位时间内的节拍数符合第二阈值范围的条件下,确定所述车载屏幕的动作形式为,绕所述车载屏幕的Y轴往复转动;
在所述目标音频在单位时间内的节拍数符合第三阈值范围的条件下,确定所述车载屏幕的动作形式为,绕所述车载屏幕的Y轴往复转动以及沿所述车载屏幕的X轴往复运动。
5.根据权利要求4所述的方法,其特征在于,基于所述车载屏幕的动作形式以及所述目标音频的节奏特征和响度特征,确定所述车载屏幕的动作幅度和/或动作频率,包括:
在所述车载屏幕的动作形式为绕所述Z轴往复转动的情况下,根据所述目标音频的响度特征,确定所述车载屏幕绕所述Z轴转动的幅度,和/或,根据所述目标音频的节奏特征,确定所述车载屏幕绕所述Z轴转动的频率;
在所述车载屏幕的动作形式为绕所述Y轴往复转动的情况下,根据所述目标音频的响度特征,确定所述车载屏幕绕所述Y轴转动的幅度,和/或,根据所述目标音频的节奏特征,确定所述车载屏幕绕所述Y轴转动的频率;
在所述车载屏幕的动作形式为绕所述Y轴往复转动以及沿所述X轴往复运动的情况下,根据所述目标音频的响度特征,确定所述车载屏幕绕所述Y轴转动的幅度,和/或,根据所述目标音频的节奏特征,确定所述车载屏幕绕所述Y轴转动的频率;以及,根据所述目标音频的响度特征,确定所述车载屏幕沿所述X轴运动的幅度,和/或,根据所述目标音频的节奏特征,确定所述车载屏幕沿所述X轴往复运动的频率。
6.根据权利要求1至5任一项所述的方法,其特征在于,还包括:
基于所述目标音频的音频特征,控制所述车载屏幕显示目标内容。
7.根据权利要求6所述的方法,其特征在于,所述目标内容包括车辆模型和多个扬声器点位,所述扬声器点位用于表征扬声器在所述车辆上的设置位置;
基于所述目标音频的音频特征,控制所述车载屏幕显示目标内容,包括:
基于所述目标音频的音调特征,从多个所述扬声器点位中确定出目标扬声器点位;
基于所述目标音频的响度特征,在所述目标扬声器点位处显示与所述响度特征关联的声音标识。
8.一种车载显示设备的控制装置,其特征在于,所述车载显示设备包括连接的车载机械臂和车载屏幕,所述车载机械臂用于驱动所述车载屏幕动作,所述控制装置包括:
特征提取模块,用于对目标音频进行特征提取处理,得到目标音频的音频特征,所述音频特征包括节奏特征、音调特征以及响度特征中的至少之一;
车载机械臂控制模块,用于基于所述目标音频的音频特征,控制所述车载机械臂驱动所述车载屏幕动作。
9.一种车载显示设备,其特征在于,包括:
控制单元,用于执行权利要求1至7任一项所述的控制方法,或者包括权利要求8所述的控制装置;以及,
车载屏幕和车载机械臂,所述车载机械臂与所述车载屏幕连接,用于驱动所述车载屏幕完成至少一种目标动作。
10.一种车辆,其特征在于,包括根据权利要求9所述的车载显示设备。
CN202210778466.9A 2021-11-01 2022-06-30 车载显示设备的控制方法、装置、车载显示设备以及车辆 Pending CN116061828A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202122647760X 2021-11-01
CN202122647760 2021-11-01

Publications (1)

Publication Number Publication Date
CN116061828A true CN116061828A (zh) 2023-05-05

Family

ID=86168807

Family Applications (15)

Application Number Title Priority Date Filing Date
CN202210161801.0A Pending CN116061820A (zh) 2021-11-01 2022-02-22 车辆的控制方法、装置、系统、机械臂以及车辆
CN202210162663.8A Pending CN116061821A (zh) 2021-11-01 2022-02-22 车辆的控制方法、装置、系统、机械臂以及车辆
CN202210767362.8A Pending CN116061824A (zh) 2021-11-01 2022-06-30 车载屏幕的机械臂控制方法、装置、设备和车辆
CN202210767008.5A Pending CN116061170A (zh) 2021-11-01 2022-06-30 脚本序列的确定方法、装置、电子设备及车辆
CN202210765976.2A Pending CN116061167A (zh) 2021-11-01 2022-06-30 车载机械臂,及其控制的方法、装置
CN202210766469.0A Pending CN116061169A (zh) 2021-11-01 2022-06-30 脚本序列的处理方法、装置、电子设备及车辆
CN202210778466.9A Pending CN116061828A (zh) 2021-11-01 2022-06-30 车载显示设备的控制方法、装置、车载显示设备以及车辆
CN202210768779.6A Pending CN116061826A (zh) 2021-11-01 2022-06-30 车载屏幕的机械臂控制方法、装置、设备和车辆
CN202210766245.XA Pending CN116061168A (zh) 2021-11-01 2022-06-30 车载机械臂及其控制的方法、系统
CN202210767895.6A Pending CN116061825A (zh) 2021-11-01 2022-06-30 一种车辆控制方法、装置、电子设备及车辆
CN202210770121.9A Pending CN116061827A (zh) 2021-11-01 2022-06-30 车载机械臂的控制方法、装置、车载显示设备以及车辆
CN202210766060.9A Pending CN116061822A (zh) 2021-11-01 2022-06-30 车载机械臂的控制方法、装置、电子设备及车辆
CN202210782081.XA Pending CN116061829A (zh) 2021-11-01 2022-06-30 车载显示设备的控制方法、装置、车载显示设备以及车辆
CN202210766252.XA Pending CN116061823A (zh) 2021-11-01 2022-06-30 一种车辆控制系统、机械臂及车辆
CN202210766490.0A Pending CN116061819A (zh) 2021-11-01 2022-06-30 车载屏幕的机械臂控制方法、装置、设备和车辆

Family Applications Before (6)

Application Number Title Priority Date Filing Date
CN202210161801.0A Pending CN116061820A (zh) 2021-11-01 2022-02-22 车辆的控制方法、装置、系统、机械臂以及车辆
CN202210162663.8A Pending CN116061821A (zh) 2021-11-01 2022-02-22 车辆的控制方法、装置、系统、机械臂以及车辆
CN202210767362.8A Pending CN116061824A (zh) 2021-11-01 2022-06-30 车载屏幕的机械臂控制方法、装置、设备和车辆
CN202210767008.5A Pending CN116061170A (zh) 2021-11-01 2022-06-30 脚本序列的确定方法、装置、电子设备及车辆
CN202210765976.2A Pending CN116061167A (zh) 2021-11-01 2022-06-30 车载机械臂,及其控制的方法、装置
CN202210766469.0A Pending CN116061169A (zh) 2021-11-01 2022-06-30 脚本序列的处理方法、装置、电子设备及车辆

Family Applications After (8)

Application Number Title Priority Date Filing Date
CN202210768779.6A Pending CN116061826A (zh) 2021-11-01 2022-06-30 车载屏幕的机械臂控制方法、装置、设备和车辆
CN202210766245.XA Pending CN116061168A (zh) 2021-11-01 2022-06-30 车载机械臂及其控制的方法、系统
CN202210767895.6A Pending CN116061825A (zh) 2021-11-01 2022-06-30 一种车辆控制方法、装置、电子设备及车辆
CN202210770121.9A Pending CN116061827A (zh) 2021-11-01 2022-06-30 车载机械臂的控制方法、装置、车载显示设备以及车辆
CN202210766060.9A Pending CN116061822A (zh) 2021-11-01 2022-06-30 车载机械臂的控制方法、装置、电子设备及车辆
CN202210782081.XA Pending CN116061829A (zh) 2021-11-01 2022-06-30 车载显示设备的控制方法、装置、车载显示设备以及车辆
CN202210766252.XA Pending CN116061823A (zh) 2021-11-01 2022-06-30 一种车辆控制系统、机械臂及车辆
CN202210766490.0A Pending CN116061819A (zh) 2021-11-01 2022-06-30 车载屏幕的机械臂控制方法、装置、设备和车辆

Country Status (2)

Country Link
CN (15) CN116061820A (zh)
WO (4) WO2024002303A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116061820A (zh) * 2021-11-01 2023-05-05 华人运通(江苏)技术有限公司 车辆的控制方法、装置、系统、机械臂以及车辆
CN219351252U (zh) * 2022-12-09 2023-07-14 华人运通(江苏)技术有限公司 一种屏幕线束支架和车载屏幕

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3727078B2 (ja) * 1994-12-02 2005-12-14 富士通株式会社 表示装置
US10540976B2 (en) * 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
EP2839391A4 (en) * 2012-04-20 2016-01-27 Maluuba Inc CONVERSATION AGENT
CN103218289B (zh) * 2013-03-29 2015-07-08 北京控制工程研究所 一种星载软件测试自动执行方法
US20150088489A1 (en) * 2013-09-20 2015-03-26 Abdelhalim Abbas Systems and methods for providing man-machine communications with etiquette
CN104331547B (zh) * 2014-10-23 2017-05-10 北京控制工程研究所 一种基于可操作性的空间机械臂结构参数优化方法
JP6129927B2 (ja) * 2015-10-15 2017-05-17 クラリオン株式会社 情報処理装置、音声操作システム、および、情報処理装置の音声操作方法
US11141859B2 (en) * 2015-11-02 2021-10-12 Brainlab Ag Determining a configuration of a medical robotic arm
CN106873765B (zh) * 2016-12-27 2018-09-11 比亚迪股份有限公司 车载终端的屏幕状态的切换方法和装置
CN106803423B (zh) * 2016-12-27 2020-09-04 智车优行科技(北京)有限公司 基于用户情绪状态的人机交互语音控制方法、装置及车辆
CN108327649B (zh) * 2017-01-20 2020-11-20 比亚迪股份有限公司 车载显示终端的支撑装置和车辆
CN107499251B (zh) * 2017-04-01 2020-06-02 宝沃汽车(中国)有限公司 用于车载显示屏显示的方法、装置和车辆
CN107600075A (zh) * 2017-08-23 2018-01-19 深圳市沃特沃德股份有限公司 车载系统的控制方法和装置
KR102441067B1 (ko) * 2017-10-12 2022-09-06 현대자동차주식회사 차량의 사용자 입력 처리 장치 및 사용자 입력 처리 방법
CN107598929B (zh) * 2017-10-25 2020-04-21 北京邮电大学 一种单关节故障空间机械臂位姿可达空间求解方法
CN107877517B (zh) * 2017-11-16 2021-03-30 哈尔滨工业大学 基于CyberForce遥操作机械臂的运动映射方法
CN109017602B (zh) * 2018-07-13 2023-08-18 吉林大学 一种基于人体姿态识别的自适应中控台及其控制方法
CN109684223B (zh) * 2018-12-28 2022-03-15 河南思维轨道交通技术研究院有限公司 一种测试脚本自动化链接方法、存储介质
CN109766402A (zh) * 2019-01-16 2019-05-17 广东南方数码科技股份有限公司 空间数据处理方法、装置和计算机设备
DE102019102803B4 (de) * 2019-02-05 2022-02-17 Franka Emika Gmbh Ausrichten zweier Roboterarme zueinander
CN111002996B (zh) * 2019-12-10 2023-08-25 广州小鹏汽车科技有限公司 车载语音交互方法、服务器、车辆和存储介质
CN111890373A (zh) * 2020-09-29 2020-11-06 常州唯实智能物联创新中心有限公司 车载机械臂的感知定位方法
WO2022074448A1 (en) * 2020-10-06 2022-04-14 Mark Oleynik Robotic kitchen hub systems and methods for minimanipulation library adjustments and calibrations of multi-functional robotic platforms for commercial and residential environments with artificial intelligence and machine learning
CN112298059A (zh) * 2020-10-26 2021-02-02 武汉华星光电技术有限公司 车载显示屏调节装置及车辆
CN113669572A (zh) * 2021-07-01 2021-11-19 华人运通(江苏)技术有限公司 车载屏幕的调节装置、车载显示装置和车辆
CN113752265B (zh) * 2021-10-13 2024-01-05 国网山西省电力公司超高压变电分公司 一种机械臂避障路径规划方法、系统及装置
CN116061820A (zh) * 2021-11-01 2023-05-05 华人运通(江苏)技术有限公司 车辆的控制方法、装置、系统、机械臂以及车辆
CN113778416A (zh) * 2021-11-11 2021-12-10 深圳市越疆科技有限公司 基于图形化编程的机械臂搬运脚本生成方法和装置

Also Published As

Publication number Publication date
WO2024002297A1 (zh) 2024-01-04
CN116061826A (zh) 2023-05-05
CN116061824A (zh) 2023-05-05
CN116061169A (zh) 2023-05-05
CN116061825A (zh) 2023-05-05
CN116061170A (zh) 2023-05-05
WO2024002273A1 (zh) 2024-01-04
CN116061823A (zh) 2023-05-05
CN116061167A (zh) 2023-05-05
CN116061821A (zh) 2023-05-05
CN116061820A (zh) 2023-05-05
CN116061168A (zh) 2023-05-05
CN116061822A (zh) 2023-05-05
CN116061819A (zh) 2023-05-05
WO2024002303A1 (zh) 2024-01-04
CN116061829A (zh) 2023-05-05
CN116061827A (zh) 2023-05-05
WO2024002276A1 (zh) 2024-01-04

Similar Documents

Publication Publication Date Title
CN116061828A (zh) 车载显示设备的控制方法、装置、车载显示设备以及车辆
US10394375B2 (en) Systems and methods for controlling multiple displays of a motor vehicle
JP6820405B2 (ja) 拡張および/または仮想現実環境における6自由度コントローラを用いた仮想オブジェクトの操作
WO2018084082A1 (ja) ジェスチャ入力システム及びジェスチャ入力方法
US20080153591A1 (en) Teleportation Systems and Methods in a Virtual Environment
CN109968979A (zh) 车载投射处理方法、装置、车载设备及存储介质
CN108175368A (zh) 一种胶囊式内窥镜的控制系统
CN101612920B (zh) 倒车摄影系统
CN111195902B (zh) 一种基于模块化机器人的主控单元及模块化机器人
WO2024002307A1 (zh) 车辆控制系统、车载显示屏控制方法、机械臂及车辆
CN113601504A (zh) 机器人肢体动作的控制方法及装置、电子设备、存储介质
JP2015093364A (ja) 車載ロボット
JPWO2018167815A1 (ja) 表示制御装置及び表示制御方法
CN118106949A (zh) 一种机械臂的控制方法、车辆以及电子设备
CN117355395A (zh) 机器人模拟装置
CN116337472A (zh) 乘用车化妆镜布置校核方法及装置、设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination