CN114489543A - 智能座舱的多屏幕处理方法、装置、芯片、车辆及介质 - Google Patents
智能座舱的多屏幕处理方法、装置、芯片、车辆及介质 Download PDFInfo
- Publication number
- CN114489543A CN114489543A CN202210087501.2A CN202210087501A CN114489543A CN 114489543 A CN114489543 A CN 114489543A CN 202210087501 A CN202210087501 A CN 202210087501A CN 114489543 A CN114489543 A CN 114489543A
- Authority
- CN
- China
- Prior art keywords
- display
- virtual display
- virtual
- different
- application program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 230000002452 interceptive effect Effects 0.000 claims abstract description 36
- 238000012545 processing Methods 0.000 claims abstract description 33
- 238000000034 method Methods 0.000 claims abstract description 24
- 230000003993 interaction Effects 0.000 claims abstract description 21
- 238000004590 computer program Methods 0.000 claims description 18
- 238000003860 storage Methods 0.000 claims description 11
- 230000015572 biosynthetic process Effects 0.000 claims description 8
- 238000003786 synthesis reaction Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 7
- 230000002194 synthesizing effect Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 13
- 230000000694 effects Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 230000008901 benefit Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000004927 fusion Effects 0.000 description 6
- 230000009977 dual effect Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000008571 general function Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
- G06F3/1438—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/544—Buffers; Shared memory; Pipes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/545—Gui
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例提供了智能座舱的多屏幕处理方法、装置、芯片、车辆及介质,所述方法包括:响应用户作用于目标应用程序在多屏幕的交互操作,获取针对多屏幕的虚拟显示;虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,不同的硬件图层具有绑定的虚拟显卡;根据交互操作,将目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将目标应用程序按照显示数据进行显示。通过将物理的硬件显示持续抽象到软件图层,利用硬件的视频管道分离数据到不同的硬件显示端口输出,并且利用共享显示的方式,将所分离的数据绑定特定的硬件图层,实现跨屏幕与跨区域输出不同显示画面,实现物理多屏交互。
Description
技术领域
本发明涉及车辆技术领域,特别是涉及一种智能座舱的多屏幕处理方法、一种智能座舱的多屏幕处理装置、相应的一种处理芯片、相应的一种车辆和相应的一种计算机存储介质。
背景技术
随着车载娱乐系统开始向着数字化和网联化方向发展,如今蓝牙、导航、音乐播放等功能已成为车载的通用功能,以及可将这些通用功能的控制集成于屏幕,构成智能座舱的多屏或者多联屏。
目前智能座舱屏幕越来越多,对于多屏互动的需求越来越强烈,现有技术是利用Android原生的多屏显示方案,比如Android推出的AndroidAuto,集成包括移动互联、娱乐、导航及便携控制等功能,便于将手机上丰富的生态(成熟的软件服务)迁移至汽车的硬件屏幕中,以试图通过多屏融合实现人机交互,主要是以液晶仪表、中控(车载信息终端)、后排娱乐屏为载体,实现语音控制、手势操作等更智能化的交互方式,大大提升了车主整个用车环境的体验。
然而,这种利用Android原生的多屏显示方案,实现不同的显示内容切换至指定的硬件屏幕或者利用一些UI engine(UserInterface,界面引擎)实现特定同步的特效,导致约束条件较多,无法自由实现物理屏幕之间的任意效果。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种智能座舱的多屏幕处理方法、一种智能座舱的多屏幕处理装置、相应的一种处理芯片、相应的一种车辆和相应的一种计算机存储介质。
本发明实施例公开了一种智能座舱的多屏幕处理方法,所述方法包括:
响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
可选地,所述获取针对所述多屏幕的虚拟显示,包括:
将所述多屏幕的多个物理端口进行抽象合成,得到虚拟显示;
从所述虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡;所述虚拟显卡用于表示应用程序在所述虚拟显示上的显示区域。
可选地,所述将所述多屏幕的多个物理端口进行抽象合成,得到虚拟显示,包括:
分别获取所述多屏幕的显示参数,采用所述多屏幕的显示参数与屏幕数量配置所述虚拟显示的显示参数,以对所述多个物理端口进行抽象合成。
可选地,所述从所述虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡,包括:
将所述不同的硬件图层分别与所述虚拟显示中的主显示区域,以及所述虚拟显示中的不同显示区域进行绑定,以分配不同的硬件图层相应的不同虚拟显卡。
可选地,所述不同的硬件图层具有绑定的虚拟显卡;所述根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,包括:
获取用户作用于目标应用程序在多屏幕的交互操作的交互信息;所述目标程序的交互信息用于表示与所述目标应用程序相应硬件图层的位置信息;
根据所述目标应用程序相应硬件图层的位置信息,将与所述硬件图层相应的虚拟显卡配置为基于主显示区域的偏移位置显示,生成显示数据,以将所述显示数据进行传输。
可选地,所述将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,包括:
将所述目标应用程序相应硬件图层在虚拟显示上的显示数据,通过数据管道分别导向不同的硬件显示接口,以将所述目标应用程序按照所述显示数据进行显示。
本发明实施例还公开了一种智能座舱的多屏幕处理装置,所述装置包括:
虚拟显示获取模块,用于响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
程序显示模块,用于根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
可选地,所述装置还包括:
虚拟显示合并模块,用于合并针对所述多屏幕的虚拟显示;
所述虚拟显示合并模块包括:
虚拟显示合并子模块,用于将所述多屏幕的多个物理端口进行抽象合成,得到虚拟显示;
硬件图层虚拟子模块,用于从所述虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡;所述虚拟显卡用于表示应用程序在所述虚拟显示上的显示区域。
可选地,所述虚拟显示合并子模块包括:
虚拟显示合并单元,用于分别获取所述多屏幕的显示参数,采用所述多屏幕的显示参数与屏幕数量配置所述虚拟显示的显示参数,以对所述多个物理端口进行抽象合成。
可选地,所述硬件图层虚拟子模块包括:
硬件图层虚拟单元,用于将所述不同的硬件图层分别与所述虚拟显示中的主显示区域,以及所述虚拟显示中的不同显示区域进行绑定,以分配不同的硬件图层相应的不同虚拟显卡。
可选地,所述不同的硬件图层具有绑定的虚拟显卡;所述程序显示模块包括:
交互信息获取子模块,用于获取用户作用于目标应用程序在多屏幕的交互操作的交互信息;所述目标程序的交互信息用于表示与所述目标应用程序相应硬件图层的位置信息;
显示数据生成子模块,用于根据所述目标应用程序相应硬件图层的位置信息,将与所述硬件图层相应的虚拟显卡配置为基于主显示区域的偏移位置显示,生成显示数据,以将所述显示数据进行传输。
可选地,所述程序显示模块包括:
程序显示子模块,用于将所述目标应用程序相应硬件图层在虚拟显示上的显示数据,通过数据管道分别导向不同的硬件显示接口,以将所述目标应用程序按照所述显示数据进行显示。
本发明实施例还公开了一种处理芯片,包括:处理器;存储处理器可执行的存储器;其中,所述处理器耦合于所述存储器,用于读取所述存储器存储的程序指令,并作为响应,执行任一项所智能座舱的多屏幕处理方法的步骤。
本发明实施例还公开了一种车辆,包括:处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现任一项所述智能座舱的多屏幕处理方法的步骤。
本发明实施例还公开了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现任一项所述智能座舱的多屏幕处理方法的步骤。
本发明实施例包括以下优点:
在本发明实施例中,通过将物理的硬件显示持续抽象到软件图层,利用硬件的视频管道分离数据到不同的硬件显示端口输出,并且利用共享显示的方式,将所分离的数据绑定特定的硬件图层,实现跨屏幕与跨区域输出不同显示画面,充分利用硬件加速和软件抽象的双重优势,使得相当于在单独显示屏上开发各种效果,实现物理多屏交互。
附图说明
图1是本发明的一种智能座舱的多屏幕处理方法实施例的步骤流程图;
图2是本发明的另一种智能座舱的多屏幕处理方法实施例的步骤流程图;
图3是本发明实施例提供的多屏幕处理的框架示意图;
图4是本发明实施例提供的多屏幕处理的流程图;
图5是本发明的一种智能座舱的多屏幕处理装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
目前智能座舱屏幕越来越多,在存在当驾驶员侧不方便与查看来电通话,或者希望车辆内其他乘坐人员帮忙查看中控导航信息,或者需要将某个显示内容在多屏幕上进行切换显示,例如切换至同一屏幕的某个区域显示或切换至另一屏幕的某个区域显示等不便情况时,需要将相关的应用交互至其他大屏进行显示,即需要实现多个物理屏幕间任意效果的多屏交互,满足用户需求。
参照图1,示出了本发明的一种智能座舱的多屏幕处理方法实施例的步骤流程图,具体可以包括如下步骤:
步骤101,响应用户作用于目标应用程序在多屏幕的交互操作,获取针对多屏幕的虚拟显示;
在本发明的一种实施例中,在接收到用户作用于智能座舱任一屏幕上某个目标应用程序的交互操作,例如用户对目标应用程序从一屏幕的某个区域拖动到另一屏幕的某个区域,或者对目标应用程序从一屏幕的某个区域拖动至同一屏幕的另一区域时,此时可响应用户作用于多屏幕的交互操作,获取针对多屏幕的虚拟显示,以基于虚拟显示对用户针对目标应用程序的交互操作进行响应处理。
需要说明的是,所获取的多屏幕的虚拟显示对于用户而言属于系统设置,系统设置基于用于处理多屏融合的芯片实现,此芯片具有不同的通路,其可用于实现对通路数据进行合并后再将数据分流至智能座舱的多屏上进行相应显示,即所获取的多屏幕的虚拟显示对于用户而言是并无感知的。
用户所操作的多屏幕可以指的是智能座舱屏幕中的任一屏幕,用户所交互的目标应用程序可以指的是智能座舱屏幕中任一屏幕上所显示的任一应用程序,其智能座舱屏幕主要应用于车辆内饰,例如中控导航娱乐大屏、液晶仪表、HUD(HeadUp Display,抬头显示,又称为平视显示系统)、流媒体后视镜、后排娱乐大屏、副驾驶娱乐大屏等,其中仪表、中控、车辆控制屏等通常偏向驾驶员一侧,方便驾驶员实时观看诸如ADAS(Advanced DrivingAssistance System,高级驾驶辅助系统)、导航、电话、倒车影像等信息,副驾屏与后排屏则可以为乘客提供娱乐和周边信息等功能。对此,本发明实施例不加以限制。
为了实现对用户所作用的目标应用程序在多屏幕上的切换,可获取针对多屏幕的虚拟显示,所获取的虚拟显示可以为基于多屏幕的多个物理端口抽象合并得到,在虚拟显示中可以包括与不同应用程序相应的不同硬件图层,且各个硬件图层具有绑定的虚拟显卡。其中,硬件图层可以指的是与不同应用程序相应的数据,其虚拟显卡可用于确定硬件图层所显示的显示区域,将不同的硬件图层抽象虚拟化为不同的虚拟显示,即可以将实际座舱中的多个硬件屏幕抽象合并为一个屏幕,并通过对各个硬件图层的虚拟显卡的配置,实现对不同应用程序的控制,进而实现对多个应用程序中目标应用程序的交互响应。
步骤102,根据交互操作,将目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将目标应用程序按照显示数据进行显示。
在将多个物理端口抽象合并为软件的虚拟显示,即通过软件抽象为虚拟的显示,并抽象不同的硬件图层虚拟化为不同的虚拟显示后,可以通过将虚拟显示的数据差分到不同物理端口,实现对目标应用程序的交互响应。
在实际应用中,硬件图层在虚拟显示中具有绑定的虚拟显卡,虚拟显卡可用于确定硬件图层所显示的显示区域,用户在对目标应用程序在多屏幕上进行交互操作时,可通过对虚拟显示的处理实现对真实硬件所显示内容进行处理,具体的,目标应用程序相应硬件图层在虚拟显示上的显示数据,可以指的是此硬件图层与虚拟显卡的绑定关系,以及虚拟显卡的位置信息,即通过显示数据中对硬件图层的虚拟显卡的绑定,对硬件图层的显示区域进行确定,进而实现将显示数据传输至相应的物理端口,以将目标应用程序按照显示数据进行显示。
在本发明实施例中,通过将物理的硬件显示持续抽象到软件图层,利用硬件的视频管道分离数据到不同的硬件显示端口输出,并且利用共享显示的方式,将所分离的数据绑定特定的硬件图层,实现跨屏幕与跨区域输出不同显示画面,充分利用硬件加速和软件抽象的双重优势,使得相当于在单独显示屏上开发各种效果,实现物理多屏交互。
参照图2,示出了本发明的另一种智能座舱的多屏幕处理方法实施例的步骤流程图,具体可以包括如下步骤:
步骤201,将多屏幕的多个物理端口进行抽象合成,得到虚拟显示;
在本发明的一种实施例中,可以将物理的硬件显示持续抽象到软件图层,具体为将多屏幕的多个物理端口进行抽象合成得到虚拟显示,以基于对虚拟显示的处理实现对真实硬件所显示内容进行处理。
其中,对多个物理端口的抽象合成,可以通过虚拟显示的显示参数配置实现,具体的,可分别获取多屏幕的显示参数,采用多屏幕的显示参数与屏幕数量配置虚拟显示的显示参数,以对多个物理端口进行抽象合成。
示例性地,假设智能座舱的多屏幕具有双屏显示,其双屏的显示参数相同,在虚拟合并显示时,其显示参数可以为两个单屏合并后的显示参数,例如两个单屏的物理屏幕均为2400*1200*60分辨率,则虚拟合并的显示参数配置可以为2*2400*1200=4800*1200*60分辨率。
在具体实现中,所抽象虚拟合并的两个单屏需要具有同步的特性,以避免虚拟合并的虚拟显示由于时间不同步而造成的画面割裂现象,此时在进行屏幕的虚拟合并时,可将两个单屏的两个物理控制端口和两个物理PHY(Physical Layer,物理层)传输断开,仅使用其中第一个控制器的时钟作为两个控制器信号的同步。
步骤202,从虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡;
基于对虚拟显示的处理实现对真实硬件所显示内容进行处理,具体表现为基于所抽象合并的虚拟显示,即基于所合并的虚拟软件图层,对显示数据的合并与分流实现。
其中,不同的硬件图层具有绑定的虚拟显卡,虚拟显卡可用于表示不同应用程序在虚拟显示中的显示区域。
具体的,可将不同的硬件图层分别与虚拟显示中的主显示区域,以及虚拟显示中的不同显示区域进行绑定,以分配不同的硬件图层相应的不同虚拟显卡。
示例性地,假设存在多个应用程序,则存在与多个不同应用程序相应额的不同硬件图层,例如硬件图层0-9,此时可绑定所合并的虚拟显示中某个4800*1200作为主显示区域,其可用于绑定(0-7)硬件图层,即与(0-7)硬件图层相应的应用程序可显示在所绑定的主显示区域中,此时还可将硬件图层8与一显示区域(例如虚拟显示1)进行绑定,还可将硬件图层9与另一显示区域(例如虚拟显示2)进行绑定,此时可合理分配物理层面到不同的虚拟显卡,实现对不同硬件图层相应的不同虚拟显卡的抽象虚拟化。
步骤203,将目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口。
目标应用程序相应硬件图层在虚拟显示上的显示数据,可以指的是此硬件图层与虚拟显卡的绑定关系,以及虚拟显卡的位置信息,即通过显示数据中对硬件图层的虚拟显卡的绑定,对硬件图层的显示区域进行确定,进而实现将显示数据传输至相应的物理端口,以将目标应用程序按照显示数据进行显示。
具体的,不同的硬件图层具有绑定的虚拟显卡,此时可获取用户作用于目标应用程序在多屏幕的交互操作的交互信息,根据目标应用程序相应硬件图层的位置信息,将与硬件图层相应的虚拟显卡配置为基于主显示区域的偏移位置显示,生成显示数据,以将显示数据进行传输。
在本发明的一种实施例中,可将目标应用程序相应硬件图层在虚拟显示上的显示数据,通过数据管道(例如video pipe)分别导向不同的硬件显示接口,以将目标应用程序按照显示数据进行显示,以实现多屏的无缝融合和动画流转,基于显示数据中硬件图层所绑定虚拟显卡的偏移位置匹配实现任意显示区域内的,不同应用程序之间的直接切换。
其中,所获取的目标程序的交互信息,可以用于表示与目标应用程序相应硬件图层的位置信息,此交互信息可以指的是与业务需求相应的任意显示区域,具体区域可基于用户对目标应用程序所进行的交互操作确定,例如交互操作前目标应用程序所在的位置,以及交互操作后目标应用程序应当所在的位置等。
在实际应用中,对于显示数据的合并与分流,涉及到本发明实施例提供的多屏幕处理的框架示意图,如图3所示,在将目标应用程序相应硬件图层在虚拟显示上的显示数据,通过数据管道分别进行导向时,主要可通过CDCU(Communications Digital ControlUnit,通信数字控制装置)与显示屏Display之间通信数据的传输实现,所用于进行显示数据管道导向控制的芯片可以是SOC SA8155P(System on Chip,芯片级系统,SA8155P为高通的新一代数字座舱芯片)实现,其中所用于显示数据相关内容的显示屏可以包括PassengerDisplay&TP、IVI Display&TP(In-vehicle infotainment,车载娱乐系统)、ClusterDisplay等,主要可通过SerDes电路的不同外置编码芯片,例如SerMAX98789、SerMAX98745、DeserMAX96752等,与不同的接口,例如DSI接口(为用于显示技术的串行接口,其具体协议是MIPI DSI协议,是MIPI组织规定的一种专有的视频传输协议)、DP接口(Display Port,视频电子标准协会标准化的数字式视频接口标准)以及GSML接口(GigabitMultimedia Serial Links,一种高速串行接口,适用于音频,视频和控制信号的传输)实现显示数据的传输与分流。
示例性地,如图4所示,本发明实施例提供的多屏幕处理的流程图,对于显示数据的合并与分流,假设存在硬件图层(0-7)与作为主显示的显示区域(例如虚拟显示0,Display0)进行绑定,存在硬件图层8与另一显示区域(例如虚拟显示1,Display1)进行绑定,且存在将硬件图层9与另一显示区域(例如虚拟显示2,Display2)进行绑定,此时可按照业务需求配置Display1和Display12,相对于主显示的偏移位置,为业务层提供三个显卡,此时可将三个虚拟显示数据合成,例如偏移某个主显示的某个位置显示某个硬件图层的硬件数据,然后可通过不同数据管道(例如video pipe)输出到不同外置编码芯片传输到不同显示屏,达到软件融合但物理分离的效果。其在输出至不同显示屏时,例如将所合并的显示数据1,通过用于多屏融合的芯片的控制,将其分流为传输路径1:图形处理管道0-显示控制器0-DSI显示接口0至物理屏幕A,以及传输路径2:图形处理管道1-显示控制器1-DSI显示接口1至物理屏幕B进,即传输至不同的显示屏幕,实现用户对目标应用程序在多屏幕上的交互响应。
在实际应用中,用于多屏融合的芯片还可在底层提供虚拟显示解耦,以用于给上层框架渲染和显示,即对于合并的虚拟软件层而言,属于在单个显示上进行显示,而在实际显示屏幕上属于在某个实际屏幕上的实际位置进行显示。
在本发明实施例中,通过将物理的硬件显示持续抽象到软件图层,利用硬件的视频管道分离数据到不同的硬件显示端口输出,并且利用共享显示的方式,将所分离的数据绑定特定的硬件图层,实现跨屏幕与跨区域输出不同显示画面,充分利用硬件加速和软件抽象的双重优势,使得相当于在单独显示屏上开发各种效果,实现物理多屏交互。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图5,示出了本发明的一种智能座舱的多屏幕处理装置实施例的结构框图,具体可以包括如下模块:
虚拟显示获取模块501,用于响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
程序显示模块502,用于根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
可选地,所述装置还包括:
虚拟显示合并模块,用于合并针对所述多屏幕的虚拟显示;
所述虚拟显示合并模块包括:
虚拟显示合并子模块,用于将所述多屏幕的多个物理端口进行抽象合成,得到虚拟显示;
硬件图层虚拟子模块,用于从所述虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡;所述虚拟显卡用于表示应用程序在所述虚拟显示上的显示区域。
可选地,所述虚拟显示合并子模块包括:
虚拟显示合并单元,用于分别获取所述多屏幕的显示参数,采用所述多屏幕的显示参数与屏幕数量配置所述虚拟显示的显示参数,以对所述多个物理端口进行抽象合成。
可选地,所述硬件图层虚拟子模块包括:
硬件图层虚拟单元,用于将所述不同的硬件图层分别与所述虚拟显示中的主显示区域,以及所述虚拟显示中的不同显示区域进行绑定,以分配不同的硬件图层相应的不同虚拟显卡。
可选地,所述不同的硬件图层具有绑定的虚拟显卡;所述程序显示模块包括:
交互信息获取子模块,用于获取用户作用于目标应用程序在多屏幕的交互操作的交互信息;所述目标程序的交互信息用于表示与所述目标应用程序相应硬件图层的位置信息;
显示数据生成子模块,用于根据所述目标应用程序相应硬件图层的位置信息,将与所述硬件图层相应的虚拟显卡配置为基于主显示区域的偏移位置显示,生成显示数据,以将所述显示数据进行传输。
可选地,所述程序显示模块包括:
程序显示子模块,用于将所述目标应用程序相应硬件图层在虚拟显示上的显示数据,通过数据管道分别导向不同的硬件显示接口,以将所述目标应用程序按照所述显示数据进行显示。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种处理芯片,包括处理器;存储处理器可执行的存储器;其中,所述处理器耦合于所述存储器,用于读取所述存储器存储的程序指令,并作为响应,执行如下操作:
响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
在本发明实施例中,通过将物理的硬件显示持续抽象到软件图层,利用硬件的视频管道分离数据到不同的硬件显示端口输出,并且利用共享显示的方式,将所分离的数据绑定特定的硬件图层,实现跨屏幕与跨区域输出不同显示画面,充分利用硬件加速和软件抽象的双重优势,使得相当于在单独显示屏上开发各种效果,实现物理多屏交互。
本发明实施例还提供了一种车辆,包括:
包括上述智能座舱的多屏幕处理装置、处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,该计算机程序被处理器执行时实现上述智能座舱的多屏幕处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储计算机程序,计算机程序被处理器执行时实现上述智能座舱的多屏幕处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种智能座舱的多屏幕处理方法、一种智能座舱的多屏幕处理装置、相应的一种处理芯片、相应的一种车辆和相应的一种计算机存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种智能座舱的多屏幕处理方法,其特征在于,所述方法包括:
响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
2.根据权利要求1所述的方法,其特征在于,所述获取针对所述多屏幕的虚拟显示,还包括:
将所述多屏幕的多个物理端口进行抽象合成,得到虚拟显示;
从所述虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡;所述虚拟显卡用于表示应用程序在所述虚拟显示上的显示区域。
3.根据权利要求2所述的方法,其特征在于,所述将所述多屏幕的多个物理端口进行抽象合成,得到虚拟显示,包括:
分别获取所述多屏幕的显示参数,采用所述多屏幕的显示参数与屏幕数量配置所述虚拟显示的显示参数,以对所述多个物理端口进行抽象合成。
4.根据权利要求2或3所述的方法,其特征在于,所述从所述虚拟显示中抽象与不同应用程序对应的硬件图层,并将不同的硬件图层虚拟化为不同的虚拟显卡,包括:
将所述不同的硬件图层分别与所述虚拟显示中的主显示区域,以及所述虚拟显示中的不同显示区域进行绑定,以分配不同的硬件图层相应的不同虚拟显卡。
5.根据权利要求1所述的方法,其特征在于,所述不同的硬件图层具有绑定的虚拟显卡;所述根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,包括:
获取用户作用于目标应用程序在多屏幕的交互操作的交互信息;所述目标程序的交互信息用于表示与所述目标应用程序相应硬件图层的位置信息;
根据所述目标应用程序相应硬件图层的位置信息,将与所述硬件图层相应的虚拟显卡配置为基于主显示区域的偏移位置显示,生成显示数据,以将所述显示数据进行传输。
6.根据权利要求1或5所述的方法,其特征在于,所述将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,包括:
将所述目标应用程序相应硬件图层在虚拟显示上的显示数据,通过数据管道分别导向不同的硬件显示接口,以将所述目标应用程序按照所述显示数据进行显示。
7.一种智能座舱的多屏幕处理装置,其特征在于,所述装置包括:
虚拟显示获取模块,用于响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
程序显示模块,用于根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
8.一种处理芯片,其特征在于,所述芯片包括:
处理器;
存储处理器可执行的存储器;
其中,所述处理器耦合于所述存储器,用于读取所述存储器存储的程序指令,并作为响应,执行如下操作:
响应用户作用于目标应用程序在多屏幕的交互操作,获取针对所述多屏幕的虚拟显示;所述虚拟显示为基于多屏幕的多个物理端口抽象合并得到,包括与不同应用程序相应的不同硬件图层,所述不同的硬件图层具有绑定的虚拟显卡;
根据所述交互操作,将所述目标应用程序相应硬件图层在虚拟显示上的显示数据传输至相应的物理端口,以将所述目标应用程序按照所述显示数据进行显示。
9.一种车辆,其特征在于,包括:处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1-6中任一项所述智能座舱的多屏幕处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1-6中任一项所述智能座舱的多屏幕处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210087501.2A CN114489543A (zh) | 2022-01-25 | 2022-01-25 | 智能座舱的多屏幕处理方法、装置、芯片、车辆及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210087501.2A CN114489543A (zh) | 2022-01-25 | 2022-01-25 | 智能座舱的多屏幕处理方法、装置、芯片、车辆及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114489543A true CN114489543A (zh) | 2022-05-13 |
Family
ID=81475628
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210087501.2A Pending CN114489543A (zh) | 2022-01-25 | 2022-01-25 | 智能座舱的多屏幕处理方法、装置、芯片、车辆及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114489543A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106814666A (zh) * | 2017-01-25 | 2017-06-09 | 浙江航芯科技有限公司 | 一机多屏的智能座舱系统 |
CN109343929A (zh) * | 2018-09-05 | 2019-02-15 | 武汉光庭信息技术股份有限公司 | 一种基于虚拟化共享显存的多屏互动方法和系统 |
CN111240626A (zh) * | 2020-01-09 | 2020-06-05 | 中瓴智行(成都)科技有限公司 | 一种基于Hypervisor智能座舱操作系统双屏互动的方法和系统 |
CN111414094A (zh) * | 2020-03-11 | 2020-07-14 | 广州小鹏汽车科技有限公司 | 车载多屏显示系统及车辆 |
CN111976482A (zh) * | 2020-07-08 | 2020-11-24 | 南斗六星系统集成有限公司 | 一种车载仪表屏和中控娱乐屏的双屏交互系统及方法 |
CN112540716A (zh) * | 2020-12-04 | 2021-03-23 | 北斗星通智联科技有限责任公司 | 智能座舱应用程序多屏幕间穿越的方法、装置和电子设备 |
-
2022
- 2022-01-25 CN CN202210087501.2A patent/CN114489543A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106814666A (zh) * | 2017-01-25 | 2017-06-09 | 浙江航芯科技有限公司 | 一机多屏的智能座舱系统 |
CN109343929A (zh) * | 2018-09-05 | 2019-02-15 | 武汉光庭信息技术股份有限公司 | 一种基于虚拟化共享显存的多屏互动方法和系统 |
CN111240626A (zh) * | 2020-01-09 | 2020-06-05 | 中瓴智行(成都)科技有限公司 | 一种基于Hypervisor智能座舱操作系统双屏互动的方法和系统 |
CN111414094A (zh) * | 2020-03-11 | 2020-07-14 | 广州小鹏汽车科技有限公司 | 车载多屏显示系统及车辆 |
CN111976482A (zh) * | 2020-07-08 | 2020-11-24 | 南斗六星系统集成有限公司 | 一种车载仪表屏和中控娱乐屏的双屏交互系统及方法 |
CN112540716A (zh) * | 2020-12-04 | 2021-03-23 | 北斗星通智联科技有限责任公司 | 智能座舱应用程序多屏幕间穿越的方法、装置和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104050992B (zh) | 具有虚拟仪表和信息娱乐终端的车载智能系统 | |
CN114416000B (zh) | 一种应用于智能汽车的多屏互动方法、多屏互动系统 | |
CN103595896A (zh) | 超高清分辨率图像同步显示方法和系统 | |
US9877064B2 (en) | Systems and methods for efficient event-based synchronization in media file transfer and real-time display rendering between a peripheral system and a host device | |
CN102142265B (zh) | 多功能车载多媒体系统及实现方法 | |
CN103986961B (zh) | 一种基于qnx车载系统实现画中画的方法和装置 | |
CN112203130B (zh) | 一种车载信息娱乐终端及其多屏交互显示方法、汽车 | |
CN205239389U (zh) | 一种基于安卓系统的车载影音导航系统 | |
CN114461070A (zh) | 用于实现车载虚拟现实的系统、方法和车辆 | |
CN110569208A (zh) | 一种控制电路、信号控制装置、信号控制方法及系统 | |
US20240143374A1 (en) | Signal processing device and display apparatus for vehicle including the same | |
CN108196909A (zh) | 一种基于安卓车载系统内核倒车的实现方法 | |
CN101704353B (zh) | 一种车载多功能装置及其嵌入式操作系统制作方法 | |
CN114489543A (zh) | 智能座舱的多屏幕处理方法、装置、芯片、车辆及介质 | |
CN206678792U (zh) | 一种双cpu控制的车用仪表显示系统 | |
CN210627171U (zh) | 一种多屏显示系统 | |
CN101887702B (zh) | 基于fpga的车载多媒体双画面显示方法 | |
CN112040288A (zh) | 一种多媒体系统 | |
CN106371792A (zh) | Android车载终端、基于该车载终端的双屏显示方法及装置 | |
CN110641478A (zh) | 汽车域控制器显示方法、装置、汽车以及可读存储介质 | |
CN201984819U (zh) | 多功能车载多媒体系统 | |
Vasantharaj | State of the art technologies in automotive HMI | |
US10950203B2 (en) | Method and display system for displaying sensor data from a sensor device on a display device, and motor vehicle having a display system | |
WO2024082947A1 (zh) | 多屏多设备交互方法、电子设备及系统 | |
US20240140334A1 (en) | Vehicle communication device and display apparatus for vehicle including the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |