CN113879214A - 电子后视镜的显示方法、电子后视镜显示系统及相关设备 - Google Patents
电子后视镜的显示方法、电子后视镜显示系统及相关设备 Download PDFInfo
- Publication number
- CN113879214A CN113879214A CN202111362812.7A CN202111362812A CN113879214A CN 113879214 A CN113879214 A CN 113879214A CN 202111362812 A CN202111362812 A CN 202111362812A CN 113879214 A CN113879214 A CN 113879214A
- Authority
- CN
- China
- Prior art keywords
- image
- vehicle
- rearview mirror
- environment
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 63
- 238000010586 diagram Methods 0.000 description 25
- 206010039203 Road traffic accident Diseases 0.000 description 18
- 230000007613 environmental effect Effects 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
- B60R2300/8026—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明实施例涉及电子后视镜技术领域,公开了一种电子后视镜的显示方法、电子后视镜显示系统及相关设备,电子后视镜的显示方法包括:获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像;从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图;显示所述全景图。通过本发明技术方案显示的全景图与车辆外部的真实环境一致,便于驾驶员辨别车辆外部的环境信息。
Description
技术领域
本发明实施例涉及电子后视镜技术领域,具体涉及一种电子后视镜的显示方法、电子后视镜显示系统及相关设备。
背景技术
车辆驾驶员在驾驶车辆时存在视野盲区(如图1所示),视野盲区是威胁交通安全的主要因素之一。对于传统内后视镜和外后视镜而言,车辆侧后方视野盲区众多,导致在行车过程中会因为视野缺失而酿成交通事故。
电子后视镜技术旨在解决此类视野盲区问题。现有的电子后视镜呈现的影像与真实情况在方位上有一定差异,不便于驾驶员辨别车辆外部的真实情况。
发明内容
鉴于上述问题,本发明实施例提供了一种电子后视镜的显示方法,用于解决现有技术中存在的电子后视镜呈现的影像与真实情况在方位上有一定差异,不便于驾驶员辨别车辆外部的真实情况的问题,本申请提供的电子后视镜的显示方法,通过电子后视镜显示的全景图与车辆外部的真实环境一致,便于驾驶员辨别车辆外部的环境信息。本发明实施例还提供一种电子后视镜显示系统、车辆及计算机可读存储介质。
根据本发明实施例的一个方面,提供了一种电子后视镜的显示方法,所述显示方法包括:
获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像;
从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图;
显示所述全景图。
在一种可选的方式中,在形成所述全景图之后及显示所述全景图之前,所述显示方法还包括:在所述全景图的中部叠加车辆模型图作为参照物。
在一种可选的方式中,所述车辆模型图包括车辆后半段底盘模型图。
在一种可选的方式中,所述车辆模型图为透明色或半透明色。
在一种可选的方式中,在形成所述全景图之后及显示所述全景图之前,所述显示方法还包括:将所述全景图的虚拟视点设置在所述车辆的纵向中轴线上,且位于所述车辆内部,并朝向所述车辆的正后方。
根据本发明实施例的另一方面,提供了一种电子后视镜显示系统,所述显示系统包括摄像头、处理器和显示设备,所述处理器与所述摄像头和所述显示设备均电连接;
所述摄像头包括第一摄像头、第二摄像头和第三摄像头,所述第一摄像头用于采集第一图像,所述第二摄像头用于采集第二图像,所述第三摄像头用于采集第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像;
所述处理器用于获取所述第一图像、第二图像和第三图像,从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图,并控制所述显示设备用于显示所述全景图。
在一种可选的方式中,所述显示系统还包括存储器,所述存储器与所述处理器电连接,所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行前述任意一项所述的显示方法的操作。
在一种可选的方式中,所述处理器还用于在所述全景图的中部叠加车辆模型图作为参照物。
在一种可选的方式中,所述处理器还用于将所述全景图的虚拟视点设置在所述车辆的纵向中轴线上,且位于所述车辆内部,并朝向所述车辆的正后方。
根据本发明实施例的另一方面,提供了一种车辆。所述车辆包括车体和上述的电子后视镜显示系统,所述电子后视镜显示系统安装于所述车体。
根据本发明实施例的又一方面,提供了一种计算机可读存储介质。所述存储介质中存储有至少一可执行指令,所述可执行指令在电子后视镜显示系统上运行时,使得所述电子后视镜显示系统执行上述任意一项所述的显示方法的操作。
本申请提供的显示方法通过从左至右依次拼接第一图像、第二图像和第三图像形成全景图,使得车辆左后方的环境图像位于全景图的左侧,车辆正后方的环境图像位于全景图的中部,车辆右后方的环境图像位于全景度的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
上述说明仅是本发明实施例技术方案的概述,为了能够更清楚了解本发明实施例的技术手段,而可依照说明书的内容予以实施,并且为了让本发明实施例的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
附图仅用于示出实施方式,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了车辆的盲区示意图;
图2示出了现有的电子后视镜呈现的全景图;
图3示出了本申请一种电子后视镜的显示方法的第一实施例的流程图;
图4示出了车辆和摄像头的结构示意图;
图5示出了车辆和另一个摄像头的结构示意图;
图6示出了图3所示的电子后视镜的显示方法的操作步骤流程图;
图7示出了图6所述的具体操作步骤示意图;
图8示出了图6所述的具体操作步骤示意图;
图9示出了图3所示的电子后视镜的显示方法显示的全景图;
图10示出了本申请一种电子后视镜的显示方法的另一个实施例的流程图;
图11示出了图10所示的电子后视镜的显示方法的操作步骤流程图;
图12示出了叠加车辆模型图的全景图;
图13出了图10所示的电子后视镜的显示方法显示的全景图;
图14示出了本申请电子后视镜显示装置的实施例的结构示意图;
图15示出了本申请一种电子后视镜显示系统的实施例的结构示意图;
图16示出了本申请的车辆的后视图的结构示意图。
具体实施方式
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例,然而应当理解,可以以各种形式实现本发明而不应被这里阐述的实施例所限制。
电子后视镜通过呈现摄像头拍摄的车辆后方的环境,消除驾驶员的视野盲区,帮助驾驶员掌握车辆后方的环境信息,从而减少因视野盲区问题造成的交通事故。
现有的电子后视镜通过显示设置于车辆外部的三颗摄像头(分别设置于车辆的左侧、右侧及后侧)获取的图像的拼接图像,为驾驶员提供虚拟的车辆后向广角视野,借助拼接图像与周边车辆同屏显示的真实影像,营造出周围车辆与临近车辆之间真实的位置关系。但是,现有的电子后视镜呈现的拼接图像与真实情况在方位上有一定差异,如图2所示,电子后视镜显示有一辆临近车辆出现在本车左侧,然而实际上该车是在本车的右侧,与驾驶员传统的后视镜显示正好相反,不便于驾驶员辨别车辆外部的真实情况。
鉴于此,为了解决上述问题,本申请提供一种电子后视镜的显示方法,所述显示方法包括获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,所述第二图像为车辆正后方的环境图像,所述第三图像为车辆右后方的环境图像;从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图;显示所述全景图。本申请提供的电子后视镜的显示方法,通过电子后视镜显示的全景图与车辆外部的真实环境一致,便于驾驶员辨别车辆外部的环境信息。
图3示出了本申请一种电子后视镜的显示方法的第一实施例的流程图,该方法由电子后视镜显示系统执行。如图3所示,该方法包括以下步骤:
步骤110:获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,所述第二图像为车辆正后方的环境图像,所述第三图像为车辆右后方的环境图像。
具体的,如图4和图5,车辆外部设置有三个摄像头,三个摄像头分别为第一摄像头、第二摄像头和第三摄像头,第一摄像头设于车辆的左侧后视镜,以拍摄车辆左后方的环境图像,第二摄像头设于车辆的尾部,以拍摄车辆正后方的图像,第三摄像头设于车辆的右侧后视镜,以拍摄车辆右后方的图像。
当然,在其他实施例中,第一摄像头还可以设置于除车辆左侧后视镜以外的其他地方,第三摄像头还可以设置于除车辆右侧后视镜以外的其他地方。本实施例不限制第一摄像头、第二摄像头和第三摄像头设置的具体位置,只要三个摄像头拍摄的图像仅拼接后可以无缝衔接覆盖车辆侧后方及后方的环境信息即可。
车辆在行驶或停泊过程中,设置在车辆外部的三个摄像头周期性的拍摄车辆周围的环境,或者,用户通过设置在操作平台控制摄像头实时拍摄,如图6,获取第一图像、第二图像和第三图像。
步骤120:从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图。
可以理解的是,由于第一图像为车辆左后方的环境图像,所述第二图像为车辆正后方的环境图像,所述第三图像为车辆右后方的环境图像,在图像拼接时,将第一图像拼接于第二图像的左侧,将第三图像拼接于第二图像的右侧,形成的全景图为类似普通后视镜的画面呈现方式,也就是说,车辆左侧的环境图像位于全景图的左侧,车辆右侧的环境图像位于全景图的右侧。当全景图呈现于电子后视镜时,通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
示例的,第一图像、第二图像和第三图像的拼接的具体过程为,如图6和图7,先将第一图像拼接于第二图像的左侧,形成拼接图像,如图6和图8,再将第三图像拼接于拼接图像的右侧,形成全景图。一些实施方式中,拼接第一图像和第二图像时,对第一图像和第二图像进行分析,得到第一图像和第二图像的重叠部分,裁剪其中一个图像的重叠部分,然后处理后的图像和另一个图像拼接叠加形成拼接图像。
可以理解的是,拼接图像和第三图像的拼接过程与第一图像和第二图像拼接过程相似,不再赘述。当然,在其他实施例中,第一图像、第二图像和第三图像还可以同时拼接。或者,第一图像、第二图像和第三图像的具体拼接过程不限于上述描述,只要能保证第一图像、第二图像和第三图像无缝衔接,覆盖到车辆侧后方及后方的环境信息即可。
一些实施方式中,在拼接第一图像、第二图像和第三图像的过程中,还对第一图像、第二图像和第三图像中的畸变进行校正,使得形成的全景图没有畸变,提高驾驶员的视觉体验。
步骤130:显示所述全景图。
具体的,如图9,电子后视镜的显示面显示全景图,也就是说,车辆后方及后方两侧的环境信息显示在电子后视镜的显示面,驾驶员通过电子后视镜的全景图看到的车辆左后方的环境信息位于显示面的左侧,车辆正后方的环境信息位于显示面的中部,车辆右后方的环境信息位于显示面的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
本申请提供的显示方法通过从左至右依次拼接第一图像、第二图像和第三图像形成全景图,使得车辆左后方的环境图像位于全景图的左侧,车辆正后方的环境图像位于全景图的中部,车辆右后方的环境图像位于全景度的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
图10示出了本申请一种电子后视镜的显示方法的另一个实施例的流程图,该方法由电子后视镜显示系统执行。如图10所示,该方法包括以下步骤:
步骤210:获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,所述第二图像为车辆正后方的环境图像,所述第三图像为车辆右后方的环境图像。
具体的,如图4和图5,车辆外部设置有三个摄像头,三个摄像头分别为第一摄像头、第二摄像头和第三摄像头,第一摄像头设于车辆的左侧后视镜,以拍摄车辆左后方的环境图像,第二摄像头设于车辆的尾部,以拍摄车辆正后方的图像,第三摄像头设于车辆的右侧后视镜,以拍摄车辆右后方的图像。
当然,在其他实施例中,第一摄像头还可以设置于除车辆左侧后视镜以外的其他地方,第三摄像头还可以设置于除车辆右侧后视镜以外的其他地方。本实施例不限制第一摄像头、第二摄像头和第三摄像头设置的具体位置,只要三个摄像头拍摄的图像经拼接后可以无缝衔接覆盖车辆侧后方及后方的环境信息即可。
车辆在行驶或停泊过程中,设置在车辆外部的三个摄像头周期性的拍摄车辆周围的环境,或者,用户通过设置在操作平台控制摄像头实时拍摄,如图11,获取第一图像、第二图像和第三图像。
步骤220:从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图。
可以理解的是,由于第一图像为车辆左后方的环境图像,所述第二图像为车辆正后方的环境图像,所述第三图像为车辆右后方的环境图像,在图像拼接时,将第一图像拼接于第二图像的左侧,将第三图像拼接于第二图像的右侧,形成的全景图为类似普通后视镜的画面呈现方式,也就是说,车辆左侧的环境图像位于全景图的左侧,车辆右侧的环境图像位于全景图的右侧。当全景图呈现于电子后视镜时,通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
示例的,第一图像、第二图像和第三图像的拼接的具体过程为,如图11和图7,先将第一图像拼接于第二图像的左侧,形成拼接图像,如图11和图8,再将第三图像拼接于拼接图像的右侧,形成全景图。一些实施方式中,拼接第一图像和第二图像时,对第一图像和第二图像进行分析,得到第一图像和第二图像的重叠部分,裁剪其中一个图像的重叠部分,然后处理后的图像和另一个图像拼接叠加形成拼接图像。
可以理解的是,拼接图像和第三图像的拼接过程与第一图像和第二图像拼接过程相似,不再赘述。当然,在其他实施例中,第一图像、第二图像和第三图像还可以同时拼接。或者,第一图像、第二图像和第三图像的具体拼接过程不限于上述描述,只要能保证第一图像、第二图像和第三图像无缝衔接,覆盖到车辆侧后方及后方的环境信息即可。
一些实施方式中,在拼接第一图像、第二图像和第三图像的过程中,还对第一图像、第二图像和第三图像中的畸变进行校正,使得形成的全景图没有畸变,提高驾驶员的视觉体验。
步骤230:在所述全景图的中部叠加车辆模型图作为参照物。
可以理解的是,如图11和图12,通过在全景图的中部叠加车辆自身的模型图,以便于全景图能够清晰的表达车辆与邻近车辆之间的位置关系,便于驾驶员更加清楚的判断车辆和邻近车辆之间位置关系,避免驾驶员误判车辆和邻近车辆的位置关系,有效避免交通事故。
本实施方式中,所述车辆模型图包括车辆后半段模型图。在全景图中叠加车辆后半段模型图相比于在全景图中叠加整个车辆的模型图能够有效减少模型图对全景图中图像信息的遮挡,保证全景图的良好视野。当然,在其他实施例中,车辆模型图还可以包括整个车辆的模型图。
可以理解的是,车辆后半段模型图为车辆位于后侧部分的模型图,并不代表车辆后半段的长度必须与车辆前半段的长度相同。
示例的,车辆后半段模型图可以为车辆底盘的后半段叠加一对后轮胎,驾驶员能够通过这种简化的模型图清楚的判断车辆与邻近车辆之间的位置关系,且简化了模型图的结构,减少了模型图对全景图的遮挡。
本实施例中,所述车辆模型图为半透明色,从而车辆模型图在叠加与全景图上时,并不会覆盖全景图上的图像,保证全景图的良好视野。当然,在其他实施例中,车辆模型图的颜色也可以为全透明,或者介于全透明和半透明之间,或者介于半透明和不透明之间。或者,车辆模型图的颜色还可以为不透明色。
一些实施方式中,为了保持全景图的良好视线,全景图中除了车辆模型图之外,不再叠加其他元素。
步骤240:将所述全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方。
可以理解的是,现有电子后视镜呈现的全景图的虚拟视点设定在车头上前方,虚拟视角为斜向下俯视,而这个视角形成的全景图驾驶员并不常见,不方便快速判断全景图中的临近车辆与驾驶车辆之间的真实位置关系。本显示方法通过将全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方,使得驾驶员通过电子后视镜看到的全景图的效果更加真实,便于驾驶员判断车辆和邻近车辆的位置关系,提高用户体验。
步骤250:显示所述全景图。
具体的,如图13,电子后视镜的显示面显示全景图,也就是说,车辆后方及后方两侧的环境信息显示在电子后视镜的显示面,驾驶员通过电子后视镜的全景图看到的车辆左后方的环境信息位于显示面的左侧,车辆正后方的环境信息位于显示面的中部,车辆右后方的环境信息位于显示面的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
本申请提供的显示方法通过从左至右依次拼接第一图像、第二图像和第三图像形成全景图,使得车辆左后方的环境图像位于全景图的左侧,车辆正后方的环境图像位于全景图的中部,车辆右后方的环境图像位于全景度的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
同时,本申请通过在全景图的中部叠加车辆模型图作为参照物,便于驾驶员更加清楚的判断车辆和邻近车辆之间位置关系,避免驾驶员误判车辆和邻近车辆的位置关系,有效避免交通事故。本申请还将所述全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方,使得驾驶员通过电子后视镜看到的全景图的效果更加真实,便于驾驶员判断车辆和邻近车辆的位置关系,提高用户体验。
当然,在其他实施例中,本实施例提供的显示方法还可以不包括步骤S230和步骤S240中的一者。
图14示出了本申请电子后视镜显示装置的实施例的结构示意图。如图14所示,该电子后视镜显示装置300包括:图像采集模块310、图像处理模块320和图像显示模块330,图像处理模块320电连接图像采集模块310和图像显示模块330。
图像采集模块310用于获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像。
具体的,车辆在行驶或停泊过程中,图像采集模块310通过设置在车辆外部的三个摄像头周期性的拍摄车辆周围的环境,或者,用户通过设置在操作平台控制图像采集模块310驱动摄像头实时拍摄,获取第一图像、第二图像和第三图像。
图像处理模块320接收图像采集模块310的第一图像、第二图像和第三图像,并从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图。
可以理解的是,由于第一图像为车辆左后方的环境图像,所述第二图像为车辆正后方的环境图像,所述第三图像为车辆右后方的环境图像,图像拼接模块再拼接图像时,将第一图像拼接于第二图像的左侧,将第三图像拼接于第二图像的右侧,形成的全景图为类似普通后视镜的画面呈现方式,也就是说,车辆左侧的环境图像位于全景图的左侧,车辆右侧的环境图像位于全景图的右侧。当全景图呈现于电子后视镜时,通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
在一种可选的方式中,图像处理模块320还可以在拼接第一图像、第二图像和第三图像的过程中,对第一图像、第二图像和第三图像中的畸变进行校正,使得形成的全景图没有畸变,提高驾驶员的视觉体验。
在一种可选的方式中,图像处理模块320还用于将车辆模型图作为参照物叠加于全景图的中部。可以理解的是,通过在全景图的中部叠加车辆自身的模型图,以便于全景图能够清晰的表达车辆与邻近车辆之间的位置关系,便于驾驶员更加清楚的判断车辆和邻近车辆之间位置关系,避免驾驶员误判车辆和邻近车辆的位置关系,有效避免交通事故。
本实施方式中,所述车辆模型图包括车辆后半段模型图。在全景图中叠加车辆后半段模型图相比于在全景图中叠加整个车辆的模型图能够有效减少模型图对全景图中的图像信息的遮挡,保证全景图的良好视野。当然,在其他实施例中,车辆模型图还可以为整个车辆的模型图。
可以理解的是,车辆后半段模型图为车辆位于后侧部分的模型图,并不代表车辆后半段的长度必须与车辆前半段的长度相同。
示例的,车辆后半段模型图可以为车辆底盘的后半段叠加一对后轮胎,驾驶员能够通过这种简化的模型图清楚的判断车辆与邻近车辆之间的位置关系,且简化了模型图的结构,减少了模型图对全景图的遮挡。
本实施例中,所述车辆模型图为半透明色,从而车辆模型图在叠加与全景图上时,并不会覆盖全景图上的图像,保证全景图的良好视野。当然,在其他实施例中,车辆模型图的颜色也可以为全透明,或者介于全透明和半透明之间,或者介于半透明和不透明之间。或者,车辆模型图的颜色还可以为不透明色。
在一种可选的方式中,图像处理模块320还用于将述全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方。
可以理解的是,现有电子后视镜呈现的全景图的虚拟视点设定在车头上前方,虚拟视角为斜向下俯视,而这个视角形成的全景图驾驶员并不常见,不方便快速判断全景图中的临近车辆与驾驶车辆之间的真实位置关系。优化模块通过将全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方,使得驾驶员通过电子后视镜看到的全景图的效果更加真实,便于驾驶员判断车辆和邻近车辆的位置关系,提高用户体验。
图像显示模块330,用于显示来自图像处理模块320的全景图。也就是说,车辆后方及后方两侧的环境信息显示在电子后视镜的显示面,驾驶员通过电子后视镜的全景图看到的车辆左后方的环境信息位于显示面的左侧,车辆正后方的环境信息位于显示面的中部,车辆右后方的环境信息位于显示面的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
本申请提供的显示装置通过从左至右依次拼接第一图像、第二图像和第三图像形成全景图,使得车辆左后方的环境图像位于全景图的左侧,车辆正后方的环境图像位于全景图的中部,车辆右后方的环境图像位于全景度的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
图15示出了本申请一种电子后视镜显示系统的实施例的结构示意图。本电子后视镜显示系统为前述任一实施例的电子后视镜的显示方法的执行主体。当然,在其他实施例中,电子后视镜的显示方法的执行主体还可以为包含有核心处理芯片的鱼眼设备,也可以为具有视频处理合成功能的电子设备,实现电子后视镜的显示方法的方式可以为设置于执行主体中的软件、硬件电路和逻辑电路中的至少一种。
本申请具体实施例并不对后视镜显示系统的具体实现做限定。
如图15所示,电子后视镜显示系统100可以包括摄像头10、处理器20和显示设备30。所述处理器20与所述摄像头10和所述显示设备30均电连接。处理器20通过摄像头10获取图像,经过处理后发送给显示设备30进行显示。
所述摄像头10包括第一摄像头11、第二摄像头12和第三摄像头13,所述第一摄像头11用于采集第一图像,所述第二摄像头12用于采集第二图像,所述第三摄像头13用于采集第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像。
本实施例中,第一摄像头11、第二摄像头12和第三摄像头13均为鱼眼摄像头10,从而通过第一摄像头11、第二摄像头12和第三摄像头13拍摄到的图像的视角更广,驾驶员在显示设备30上即可掌握车辆后方及侧后方的全部临近车辆状况,避免了视线在显示设备30左右两侧切换,减少了视线未及时切换引发的安全风险。当然,在其他实施例中,第一摄像头11、第二摄像头12和第三摄像头13中的一者或两者为鱼眼摄像头10。或者,在其他实施例中,第一摄像头11、第二摄像头12和第三摄像头13还可以均不为鱼眼摄像头。
处理器20,用于执行可执行指令,具体可以执行上述用于电子后视镜的显示方法实施例中的相关步骤。
具体地,可执行指令可以包括程序代码,该程序代码包括计算机可执行指令。
处理器20可能是中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。电子后视镜显示系统100包括的一个或多个处理器,可以是同一类型的处理器,如一个或多个CPU;也可以是不同类型的处理器,如一个或多个CPU以及一个或多个ASIC。
在一些实施方式中,电子后视镜显示系统100还可以包括存储器,用于存放可执行指令。存储器可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。当然,在其他实施例中,电子后视镜显示系统100还可以不包括存储器,当电子后视镜显示系统100安装于车辆时,可以在车辆的存储器中存放程序。
可执行指令具体可以被处理器20调用使电子后视镜显示系统100执行以下操作:
分别获取来自第一摄像头11、第二摄像头12和第三摄像头13的第一图像、第二图像和第三图像;
从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图;
控制所述显示设备30显示所述全景图。
本申请提供的电子后视镜显示系统100从左至右依次拼接第一图像、第二图像和第三图像形成全景图,使得车辆左后方的环境图像位于全景图的左侧,车辆正后方的环境图像位于全景图的中部,车辆右后方的环境图像位于全景度的右侧。通过电子后视镜显示的全景图与车辆外部的真实环境一致,车辆位置关系是驾驶员相对熟悉的,便于驾驶员辨别车辆外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
在一种可选的方式中,可执行指令被处理器20调用使处理器20在所述全景图的中部叠加车辆模型图作为参照物。
可以理解的是,通过在全景图的中部叠加车辆自身的模型图,以便于全景图能够清晰的表达车辆与邻近车辆之间的位置关系,便于驾驶员更加清楚的判断车辆和邻近车辆之间位置关系,避免驾驶员误判车辆和邻近车辆的位置关系,有效避免交通事故。
本实施方式中,所述车辆模型图包括车辆后半段模型图。在全景图中叠加车辆后半段模型图相比于在全景图中叠加整个车辆的模型图能够有效减少模型图对全景图中的图像信息的遮挡,保证全景图的良好视野。当然,在其他实施例中,车辆模型图还可以包括整个车辆的模型图。
可以理解的是,车辆后半段模型图为车辆位于后侧部分的模型图,并不代表车辆后半段的长度必须与车辆前半段的长度相同。
示例的,车辆后半段模型图可以为车辆底盘的后半段叠加一对后轮胎,驾驶员能够通过这种简化的模型图清楚的判断车辆与邻近车辆之间的位置关系,且简化了模型图的结构,减少了模型图对全景图的遮挡。
本实施例中,所述车辆模型图为半透明色,从而车辆模型图在叠加与全景图上时,并不会覆盖全景图上的图像,保证全景图的良好视野。当然,在其他实施例中,车辆模型图的颜色也可以为全透明,或者介于全透明和半透明之间,或者介于半透明和不透明之间。或者,车辆模型图的颜色还可以为不透明色。
在一种可选的方式中,可执行指令被处理器20调用使处理器20将所述全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方。
可以理解的是,现有电子后视镜呈现的全景图的虚拟视点设定在车头上前方,虚拟视角为斜向下俯视,而这个视角形成的全景图驾驶员并不常见,不方便快速判断全景图中的临近车辆与驾驶车辆之间的真实位置关系。本电子后视镜显示系统100通过将全景图的虚拟视点设置在车辆的纵向中轴线上,且位于车辆内部,并朝向车辆的正后方,使得驾驶员通过电子后视镜看到的全景图的效果更加真实,便于驾驶员判断车辆和邻近车辆的位置关系,提高用户体验。
图16示出了本申请的车辆的后视图的结构示意图。
所述车辆200包括车体210和图15所示的电子后视镜显示系统100,所述电子后视镜显示系统100安装于所述车体210。具体的,车辆200还包括通讯接口,电子后视镜显示系统100电连接至通讯接口。电子后视镜显示系统100的第一摄像头11安装于车辆200的左侧后视镜的下方,第二摄像头12安装于车辆200尾部,第三摄像头13安装于车辆200的后侧后视镜的下方。处理器20和显示设备30安装于车体210内部。
具有上述电子后视镜显示系统100的车辆200驾驶员通过电子后视镜显示的全景图与车辆200外部的真实环境一致,便于驾驶员辨别车辆200外部的环境信息,提高用户体验,避免由于后视镜显示的内容与车辆200外部环境不一致而导致驾驶员辨别失误出现交通事故的问题。
本发明实施例提供了一种计算机可读存储介质,所述存储介质存储有至少一可执行指令,该可执行指令在电子后视镜显示系统100或者车辆上运行时,使得所述电子后视镜显示系统100或者车辆执行上述任意方法实施例中的电子后视镜的显示方法。
在此提供的算法或显示不与任何特定计算机、虚拟系统或者其它设备固有相关。此外,本发明实施例也不针对任何特定编程语言。
在此处所提供的说明书中,说明了大量具体细节。然而能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。类似地,为了精简本发明并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明实施例的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。其中,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。上述实施例中的步骤,除有特殊说明外,不应理解为对执行顺序的限定。
Claims (10)
1.一种电子后视镜的显示方法,其特征在于,所述显示方法包括:
获取第一图像,第二图像和第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像;
从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图;
显示所述全景图。
2.根据权利要求1所述的显示方法,其特征在于,在形成所述全景图之后及显示所述全景图之前,所述显示方法还包括:
在所述全景图的中部叠加车辆模型图作为参照物。
3.根据权利要求2所述的显示方法,其特征在于,所述车辆模型图包括车辆后半段底盘模型图。
4.根据权利要求1-3任一项所述的显示方法,其特征在于,所述车辆模型图为透明色或半透明色。
5.根据权利要求2所述的显示方法,其特征在于,在形成所述全景图之后及显示所述全景图之前,所述显示方法还包括:将所述全景图的虚拟视点设置在所述车辆的纵向中轴线上,且位于所述车辆内部,并朝向所述车辆的正后方。
6.一种电子后视镜显示系统,其特征在于,所述显示系统包括摄像头、处理器和显示设备,所述处理器与所述摄像头和所述显示设备均电连接;
所述摄像头包括第一摄像头、第二摄像头和第三摄像头,所述第一摄像头用于采集第一图像,所述第二摄像头用于采集第二图像,所述第三摄像头用于采集第三图像,其中,所述第一图像为车辆左后方的环境图像,第二图像为车辆正后方的环境图像,第三图像为车辆右后方的环境图像;
所述处理器用于获取所述第一图像、第二图像和第三图像,从左至右依次拼接所述第一图像、所述第二图像和所述第三图像,形成全景图,并控制所述显示设备用于显示所述全景图。
7.根据权利要求6所述的显示系统,其特征在于,所述处理器还用于在所述全景图的中部叠加车辆模型图作为参照物。
8.根据权利要求7所述的显示系统,其特征在于,所述处理器还用于将所述全景图的虚拟视点设置在所述车辆的纵向中轴线上,且位于所述车辆内部,并朝向所述车辆的正后方。
9.一种车辆,其特征在于,所述车辆包括车体和权利要求6-8任意一项所述的电子后视镜显示系统,所述电子后视镜显示系统安装于所述车体。
10.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一可执行指令,所述可执行指令在电子后视镜显示系统上运行时,使得所述电子后视镜显示系统执行如权利要求1-5任意一项所述的显示方法的操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111362812.7A CN113879214A (zh) | 2021-11-17 | 2021-11-17 | 电子后视镜的显示方法、电子后视镜显示系统及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111362812.7A CN113879214A (zh) | 2021-11-17 | 2021-11-17 | 电子后视镜的显示方法、电子后视镜显示系统及相关设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113879214A true CN113879214A (zh) | 2022-01-04 |
Family
ID=79018157
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111362812.7A Pending CN113879214A (zh) | 2021-11-17 | 2021-11-17 | 电子后视镜的显示方法、电子后视镜显示系统及相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113879214A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114495402A (zh) * | 2022-02-07 | 2022-05-13 | 阿维塔科技(重庆)有限公司 | 一种危险区域警示方法及磁力吸附设备 |
CN114821544A (zh) * | 2022-06-29 | 2022-07-29 | 小米汽车科技有限公司 | 感知信息生成方法、装置、车辆、电子设备及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090237268A1 (en) * | 2008-03-18 | 2009-09-24 | Hyundai Motor Company | Information display system for vehicle |
JP2010114618A (ja) * | 2008-11-06 | 2010-05-20 | Clarion Co Ltd | 車両周辺監視システム |
DE102012203491A1 (de) * | 2012-03-06 | 2013-09-12 | Bayerische Motoren Werke Aktiengesellschaft | Elektronisches Rückspiegel-System |
CN206926580U (zh) * | 2017-04-26 | 2018-01-26 | 长城汽车股份有限公司 | 机动车后视装置 |
CN112124201A (zh) * | 2020-10-10 | 2020-12-25 | 深圳道可视科技有限公司 | 一种画面盲区可见的全景泊车系统及其方法 |
CN112215917A (zh) * | 2019-07-09 | 2021-01-12 | 杭州海康威视数字技术股份有限公司 | 车载全景图生成方法、装置及系统 |
US20210206318A1 (en) * | 2020-01-08 | 2021-07-08 | Toyota Jidosha Kabushiki Kaisha | Electronic mirror system for vehicle |
JP2021153286A (ja) * | 2020-03-23 | 2021-09-30 | パナソニックIpマネジメント株式会社 | 画像合成装置、及び、画像合成方法 |
-
2021
- 2021-11-17 CN CN202111362812.7A patent/CN113879214A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090237268A1 (en) * | 2008-03-18 | 2009-09-24 | Hyundai Motor Company | Information display system for vehicle |
JP2010114618A (ja) * | 2008-11-06 | 2010-05-20 | Clarion Co Ltd | 車両周辺監視システム |
DE102012203491A1 (de) * | 2012-03-06 | 2013-09-12 | Bayerische Motoren Werke Aktiengesellschaft | Elektronisches Rückspiegel-System |
CN206926580U (zh) * | 2017-04-26 | 2018-01-26 | 长城汽车股份有限公司 | 机动车后视装置 |
CN112215917A (zh) * | 2019-07-09 | 2021-01-12 | 杭州海康威视数字技术股份有限公司 | 车载全景图生成方法、装置及系统 |
US20210206318A1 (en) * | 2020-01-08 | 2021-07-08 | Toyota Jidosha Kabushiki Kaisha | Electronic mirror system for vehicle |
JP2021153286A (ja) * | 2020-03-23 | 2021-09-30 | パナソニックIpマネジメント株式会社 | 画像合成装置、及び、画像合成方法 |
CN112124201A (zh) * | 2020-10-10 | 2020-12-25 | 深圳道可视科技有限公司 | 一种画面盲区可见的全景泊车系统及其方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114495402A (zh) * | 2022-02-07 | 2022-05-13 | 阿维塔科技(重庆)有限公司 | 一种危险区域警示方法及磁力吸附设备 |
CN114495402B (zh) * | 2022-02-07 | 2023-06-27 | 阿维塔科技(重庆)有限公司 | 一种危险区域警示方法及磁力吸附设备 |
CN114821544A (zh) * | 2022-06-29 | 2022-07-29 | 小米汽车科技有限公司 | 感知信息生成方法、装置、车辆、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101766077B1 (ko) | 차량 주변 영상 정보 제공 시스템 및 방법 | |
CN113879214A (zh) | 电子后视镜的显示方法、电子后视镜显示系统及相关设备 | |
US20180265002A1 (en) | Onboard display device, control method for onboard display device, and control program for onboard display device | |
US8130270B2 (en) | Vehicle-mounted image capturing apparatus | |
JP4248570B2 (ja) | 画像処理装置並びに視界支援装置及び方法 | |
EP2739050B1 (en) | Vehicle surroundings monitoring system | |
CN109948398B (zh) | 全景泊车的图像处理方法及全景泊车装置 | |
US20110063444A1 (en) | Vehicle surroundings monitoring device and vehicle surroundings monitoring method | |
US20080043113A1 (en) | Image processor and visual field support device | |
JP4315968B2 (ja) | 画像処理装置並びに視界支援装置及び方法 | |
US20090128630A1 (en) | Vehicle image display system and image display method | |
US10752177B2 (en) | Vehicular visual recognition device and vehicular visual recognition image display method | |
JP5697512B2 (ja) | 画像生成装置、画像表示システム及び画像表示装置 | |
JP2008033901A (ja) | 車両用画像表示システム | |
JP2003219413A (ja) | 車両後方モニタシステムおよびモニタ装置 | |
US10040353B2 (en) | Information display system | |
JP2009105660A (ja) | 車載用撮像装置 | |
WO2018159016A1 (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム | |
CN111959417A (zh) | 汽车全景影像显示控制方法、装置、设备及存储介质 | |
JP6293089B2 (ja) | 後方モニタ | |
US20200282909A1 (en) | Vehicle imaging system and method for a parking solution | |
JP7217090B2 (ja) | 情報提供装置及び情報提供方法 | |
JP4706896B2 (ja) | 広角画像の補正方法及び車両の周辺監視システム | |
WO2019227666A1 (zh) | 一种基于摄像头消除汽车盲区的高清智能装置及其方法 | |
JP7347330B2 (ja) | 車両周辺監視装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220104 |
|
RJ01 | Rejection of invention patent application after publication |