CN114827491B - 一种无线传输全景环视拼接技术 - Google Patents

一种无线传输全景环视拼接技术 Download PDF

Info

Publication number
CN114827491B
CN114827491B CN202210401494.9A CN202210401494A CN114827491B CN 114827491 B CN114827491 B CN 114827491B CN 202210401494 A CN202210401494 A CN 202210401494A CN 114827491 B CN114827491 B CN 114827491B
Authority
CN
China
Prior art keywords
video
vehicle
synchronous
panoramic
wide
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210401494.9A
Other languages
English (en)
Other versions
CN114827491A (zh
Inventor
郑智宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eagle Drive Technology Shenzhen Co Ltd
Original Assignee
Eagle Drive Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eagle Drive Technology Shenzhen Co Ltd filed Critical Eagle Drive Technology Shenzhen Co Ltd
Priority to CN202210401494.9A priority Critical patent/CN114827491B/zh
Publication of CN114827491A publication Critical patent/CN114827491A/zh
Application granted granted Critical
Publication of CN114827491B publication Critical patent/CN114827491B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12Mirror assemblies combined with other articles, e.g. clocks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/48Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1253Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens

Abstract

本发明公开了一种无线传输全景环视拼接技术,包括:在车身不同位置分别设置广角摄像头;在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。

Description

一种无线传输全景环视拼接技术
技术领域
本发明涉及无线传输技术领域,具体涉及一种无线传输全景环视拼接技术。
背景技术
随着时代的发展和科技的进步,生活水平逐渐提高,对车的需求量也逐渐增大,在安全装备的需求上也逐渐重视了起来,大型货车和客车,因为盲区更大,更加需要解决A柱及周边盲区问题。传统左右后视镜,普遍存在视野范围小,视线盲区大,雨雪天气容易模糊,和夜视效果不好等问题。因此,亟需一种具有低时延、高可靠、精同步、多并发、高速率、高安全获得全景环视视频的方法。
发明内容
本发明提供一种无线传输全景环视拼接技术,以解决现有技术中存在的上述问题。
本发明提供一种无线传输全景环视拼接技术,包括:
S100,在车身不同位置分别设置广角摄像头;
S200,在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;
S300,将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。
优选的,所述S100包括:
S101,所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;
S102,在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;
S103,在拖挂车的两侧设置至少两个广角摄像头。
优选的,所述S200包括:
S201,在所有广角摄像头中设置有车载无线短距离通信第一发送端口;
S202,在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
优选的,所述S300包括:
S301,所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;
S302,将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
优选的,所述S100还包括:在每个广角摄像头中设置第二同步时钟模块;
相应的,S200还包括:
S203,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;
S204,所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;
S205,所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;
S206,基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
优选的,所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
优选的,所述S200还包括:
S207,在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;
S208,所述车载智能控制系统对车载无线短距离通信技术的通信质量,进行定时监控,按照预设的间隔时间定时进行监控;一旦定时监控时检测到通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式;若在预设时间段内每次定时监控时通信质量均高于预设值,则所述车载智能控制系统自动调整定时监控的间隔时间,将间隔时间设定值增大;一旦再次检测通信质量低于预设值,重新将间隔时间调整为原来的间隔时间。
优选的,所述S100之后,包括:
S400,在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;
S500,若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
优选的,所述S300之后,包括:
S600,所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;
在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。
优选的,所述基于所述同步视频拼接为全景环视视频,包括:
将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;
基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;
检测出位置相邻的两个同步视频中的参照物;
基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;
基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
优选的,还包括视频筛选单元,用于采用下述方式对全景环视视频的拼接过程中的当前视频集中所有视频进行筛选:
步骤一:设置相似度阈值,通过该阈值判断两个视频之间的重叠区域是否过高;
步骤二:获得当前视频集中相似度最大的两个视频,分别为视频A和视频B,判断这两个视频的相似度至是否大于相似度阈值,如果大于,则代表视频集中存在重叠区域过高的局部区域,进入步骤三;否则说明视频集中所有相邻视频间没有过高的重叠区域;停止筛选,输出当前视频集;
步骤三:根据下述公式分析视频A和视频B与公共临界视频的相似度关系,根据分析结果将其中一个视频判定为冗余视频并移除当前视频集:
Figure BDA0003600258030000041
其中,T为视频A和视频B与公共临界图像的相似度值;A为视频A,B为视频B;p∈(A,B),其中视频A和视频B为当前视频集中相似度最大的两个视频;s(i,j)为视频i和视频j之间的相似度,n为公共临界视频的个数;s(i,p)为视频i与视频p之间的相似度,s(p,j)为视频p与视频j之间的相似度,视频i和视频j属于当前视频集。
将T值大的对应的视频作为冗余视频进行移除,通过该方式提升删选效率。
步骤四:更新当前视频集的相似度矩阵;并转入步骤二,再次重新获得视频集中相似度最大的两个视频A*和B*;并重复步骤三和步骤四。
与现有技术相比,本发明具有以下优点:
本发明提供一种无线传输全景环视拼接技术,包括:在车身不同位置分别设置广角摄像头;在车载智能控制系统设置第一同步时钟模块,基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种无线传输全景环视拼接技术的流程图;
图2为本发明实施例中在车身不同位置分别设置广角摄像头的方法流程图;
图3为本发明实施例中基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频的方法流程图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本发明实施例提供了一种无线传输全景环视拼接技术,请参照图1,该技术保护以下几个步骤:
S100,在车身不同位置分别设置广角摄像头;
S200,在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;
S300,将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。
上述技术方案的工作原理为:本实施例采用的方案是在车身不同位置分别设置广角摄像头;在车载智能控制系统设置第一同步时钟模块以及同步检测模块,通过同步检测模块检测各个广角摄像头传输的视频是否是同步的,若不同步,则通过第一同步时钟模块调整各个广角摄像头传输的视频以使所有视频保持同步状态,形成同步视频,因此,基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。通过对同步视频的拼接形成全景环视视频,保证该全景环视视频更接近真实的现场情况,若某个广角摄像头的视频有延迟,拼接后的全景环视视频必然不能完全代表真实场景,因此,通过同步检测模块以及第一同步时钟模块保证形成同步视频。
上述技术方案的有益效果为:采用本实施例提供的方案在车身不同位置分别设置广角摄像头;在车载智能控制系统设置第一同步时钟模块,基于车载无线短距离通信技术利用第一同步时钟模块获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,请参照图2,所述S100包括:
S101,所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;
S102,在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;
S103,在拖挂车的两侧设置至少两个广角摄像头。
上述技术方案的工作原理为:本实施例采用的方案是所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;在拖挂车的两侧设置至少两个广角摄像头。
上述技术方案的有益效果为:采用本实施例提供的方案所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;在拖挂车的两侧设置至少两个广角摄像头。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S200包括:
S201,在所有广角摄像头中设置有车载无线短距离通信第一发送端口;
S202,在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
上述技术方案的工作原理为:本实施例采用的方案是在所有广角摄像头中设置有车载无线短距离通信第一发送端口;在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
上述技术方案的有益效果为:采用本实施例提供的方案在所有广角摄像头中设置有车载无线短距离通信第一发送端口;在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S300包括:
S301,所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;
S302,将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
上述技术方案的工作原理为:本实施例采用的方案是所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
上述技术方案的有益效果为:采用本实施例提供的方案所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。适应驾驶者的驾驶习惯,并且可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,请参照图3,所述S100还包括:在每个广角摄像头中设置第二同步时钟模块;
相应的,S200还包括:
S203,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;
S204,所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;
S205,所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;
S206,基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
上述技术方案的工作原理为:本实施例采用的方案是在每个广角摄像头中设置第二同步时钟模块;相应的,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
上述技术方案的有益效果为:采用本实施例提供的方案在所述广角摄像头中设置第二同步时钟模块;相应的,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
上述技术方案的工作原理为:本实施例采用的方案是所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
上述技术方案的有益效果为:采用本实施例提供的方案所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S200还包括:
S207,在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;
S208,所述车载智能控制系统对车载无线短距离通信技术的通信质量,进行定时监控,按照预设的间隔时间定时进行监控;一旦定时监控时检测到通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式;若在预设时间段内每次定时监控时通信质量均高于预设值,则所述车载智能控制系统自动调整定时监控的间隔时间,将间隔时间设定值增大;一旦再次检测通信质量低于预设值,重新将间隔时间调整为原来的间隔时间。
上述技术方案的工作原理为:本实施例采用的方案是在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;所述车载智能控制系统检测车载无线短距离通信技术的通信质量,若通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式。通过设定间隔时间对通信质量进行定时监控,而不是实时监控,在实际应用中可能会遇到信号质量短暂波动造成通信方式切换的情况,这种情况下,若直接切换通信方式反而影响通信质量,造成视频传输延迟的问题,而通过设定间隔时间,每间隔一段时间进行检测一次,一方面实现对通信质量的定时检测,保证通信质量处于较优的状态,另一方面也避免可能出现频繁切换的状况。当一定时间后(该时间远远大于间隔时间),发现通信质量一直处于超过预设值的状态,则可以认定通信质量很好,可以暂时调整间隔时间,使间隔时间变长,即两次检测时间拉长,但一旦再次检测到通信质量低于预设值,则重新将间隔时间调整到原始设定的值,以上述方式重复调整间隔时间,该间隔时间是通过车载智能控制系统自动调整的。
上述技术方案的有益效果为:采用本实施例提供的方案在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;所述车载智能控制系统检测车载无线短距离通信技术的通信质量,若通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S100之后,包括:
S400,在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;
S500,若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
上述技术方案的工作原理为:本实施例采用的方案是在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
上述技术方案的有益效果为:采用本实施例提供的方案在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头的是否处于正常工作状态;若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述S300之后,包括:
S600,所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;
在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。
上述技术方案的工作原理为:本实施例采用的方案是所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。方便根据同步视频上标注的内容更好的找到需要的视频
上述技术方案的有益效果为:采用本实施例提供的方案所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
在另一实施例中,所述基于所述同步视频拼接为全景环视视频,包括:
将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;
基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;
检测出位置相邻的两个同步视频中的参照物;
基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;
基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
上述技术方案的工作原理为:本实施例采用的方案是所述基于所述同步视频拼接为全景环视视频,包括:将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;检测出位置相邻的两个同步视频中的参照物;基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
提升全景环视视频的质量,减少视频的畸变。
上述技术方案的有益效果为:采用本实施例提供的方案所述基于所述同步视频拼接为全景环视视频,包括:将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;检测出位置相邻的两个同步视频中的参照物;基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。本方案不但可以实现电子后视镜的全方位无盲区的设置,还可以通过无线传输方式实现低时延、高可靠、精同步、多并发、高速率、高安全的视频传输,保障时间同步,提升全景环视视频质量。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (9)

1.一种无线传输全景环视拼接方法,其特征在于,包括:
S100,在车身不同位置分别设置广角摄像头;
S200,在车载智能控制系统设置同步检测模块和第一同步时钟模块,当所述同步检测模块检测到多个广角摄像头与车载智能控制系统之间的通信不同步时,基于所述第一同步时钟模块采用车载无线短距离通信技术获取所有广角摄像头的同步视频,基于所述同步视频拼接为全景环视视频;
S300,将全景环视视频通过车载无线短距离通信技术传输至车载显示设备上显示;
所述S100还包括:在每个广角摄像头中设置第二同步时钟模块;
相应的,S200还包括:
S203,所述第一同步时钟模块向外广播时间信息,同时发送反馈指令,要求各个第二同步时钟模块向第一同步时钟模块反馈接收到反馈指令的信息;
S204,所有第二同步时钟模块基于所述时间信息校正每个广角摄像头的时间,同时,在接收到反馈指令后,向所述第一同步时钟模块发送接收到指令这一信息;
S205,所述第一同步时钟模块根据接收到的各个第二同步时钟模块反馈的信息的时间,调整各个第二同步时钟模块的传输时间差;
S206,基于所述传输时间差调整接收的每个广角摄像头的视频的时间序列,形成同步视频。
2.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S100包括:
S101,所述车身为拖挂车的车身,在拖挂车的左右后视镜位置设置左后视镜的高速高清流媒体摄像头和右后视镜的高速高清流媒体摄像头;
S102,在拖挂车的前后分别设置前侧广角摄像头和后侧广角摄像头;
S103,在拖挂车的两侧设置至少两个广角摄像头。
3.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S200包括:
S201,在所有广角摄像头中设置有车载无线短距离通信第一发送端口;
S202,在所述车载智能控制系统中设置视频处理模块、车载无线短距离通信第一接收端口和车载无线短距离通信第二发送端口,车载无线短距离通信第一接收端口用于接收广角摄像头的同步视频,并将所述同步视频传输至所述视频处理模块,所述视频处理模块将获取到的所有广角摄像头的同步视频进行视频拼接处理,形成全景环视视频,所述全景环视视频经过所述车载无线短距离通信第二发送端口向外发送。
4.根据权利要求3所述的无线传输全景环视拼接方法,其特征在于,所述S300包括:
S301,所述车载显示设备设置有车载无线短距离通信第二接收端口,用于接收所述视频处理模块发送的全景环视视频;
S302,将所述车载显示设备的显示屏划分为两个区域,一个区域展示左或右后视镜的高速高清流媒体摄像头拍摄的电子后视镜视频,另一个区域展示所述全景环视视频。
5.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述车载无线短距离通信技术是按照中国通信标准化协会制定的通信协议要求设定的通信带宽。
6.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S200还包括:
S207,在车载智能控制系统中设置5G通信模块,相应的,在广角摄像头和车载显示设备上均设置5G通信模块;
S208,所述车载智能控制系统对车载无线短距离通信技术的通信质量进行定时监控,按照预设的间隔时间定时进行监控;一旦定时监控时检测到通信质量低于预设值,则将车载智能控制系统的通信方式切换至采用5G通信模块的无线移动通信方式;若在预设时间段内每次定时监控时通信质量均高于预设值,则所述车载智能控制系统自动调整定时监控的间隔时间,将间隔时间设定值增大;一旦再次检测通信质量低于预设值,重新将间隔时间调整为原来的间隔时间。
7.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S100之后,包括:
S400,在每个广角摄像头上设置有检测装置,所述检测装置用于检测广角摄像头是否处于正常工作状态;
S500,若某一广角摄像头处于非正常工作状态,则通过车载无线短距离通信技术向车载智能控制系统发送警报,所述车载智能控制系统通过警报装置提醒驾驶者更换相应的广角摄像头或通过所述车载智能控制系统调整该广角摄像头的内外参数,以保证该广角摄像头处于正常工作状态。
8.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述S300之后,包括:
S600,所述车载智能控制系统将所有同步视频以及全景环视视频传输至云端服务器,将所述同步视频与全景环视视频按照时间对应关系存储于云数据库中;通过调用某个时间段的全景环视视频,获得与该全景环视视频对应的同步视频,该调用的全景环视视频和同步视频用于处理事故纠纷时的判断依据;
在存储时,在所述同步视频上标注有开始时间、结束时间、时长、拍摄视角、拼接位置;所述拼接位置是该同步视频拼接于全景环视视频的位置。
9.根据权利要求1所述的无线传输全景环视拼接方法,其特征在于,所述基于所述同步视频拼接为全景环视视频,包括:
将所有同步视频中需要剪切的部分进行预处理,获得剪切视频的若干个顶点,根据若干个顶点形成多边形,构成剪切多边形,基于所述剪切多边形形成畸形矫正转换矩阵;
基于所述畸形矫正转换矩阵形成同步视频与全景环视视频的映射关系;
检测出位置相邻的两个同步视频中的参照物;
基于所述参照物构建相邻的两个同步视频与全景环视视频的偏差映射表;所述偏差映射表包括参照物尺寸偏差和参照物角度偏差;
基于所述映射关系和所述偏差映射表,将所述同步视频构建为全景环视视频。
CN202210401494.9A 2022-04-18 2022-04-18 一种无线传输全景环视拼接技术 Active CN114827491B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210401494.9A CN114827491B (zh) 2022-04-18 2022-04-18 一种无线传输全景环视拼接技术

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210401494.9A CN114827491B (zh) 2022-04-18 2022-04-18 一种无线传输全景环视拼接技术

Publications (2)

Publication Number Publication Date
CN114827491A CN114827491A (zh) 2022-07-29
CN114827491B true CN114827491B (zh) 2023-02-14

Family

ID=82537559

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210401494.9A Active CN114827491B (zh) 2022-04-18 2022-04-18 一种无线传输全景环视拼接技术

Country Status (1)

Country Link
CN (1) CN114827491B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104301677A (zh) * 2014-10-16 2015-01-21 北京十方慧通科技有限公司 面向大场景的全景视频监控的方法及装置
US9251603B1 (en) * 2013-04-10 2016-02-02 Dmitry Kozko Integrating panoramic video from a historic event with a video game
CN105946714A (zh) * 2016-05-16 2016-09-21 乐视控股(北京)有限公司 一种汽车全景观测系统及全景环视观测汽车
CN106803878A (zh) * 2016-12-30 2017-06-06 智车优行科技(北京)有限公司 车载全景环视系统、用于实现全景环视的方法及装置
CN107396068A (zh) * 2017-08-30 2017-11-24 广州杰赛科技股份有限公司 全景视频同步拼接系统、方法及全景视频显示装置
CN110087032A (zh) * 2019-04-24 2019-08-02 招商局重庆公路工程检测中心有限公司 一种全景式隧道视频监视装置及方法
CN111179168A (zh) * 2019-12-12 2020-05-19 郑州嘉晨电器有限公司 一种车载360度全景环视监控系统及方法
CN111768332A (zh) * 2019-03-26 2020-10-13 深圳市航盛电子股份有限公司 一种车载环视实时3d全景图像的拼接方法及图形采集装置
CN112702576A (zh) * 2020-12-24 2021-04-23 浙江赫千电子科技有限公司 一种车载视频的数据采集推流显示方法
CN112738382A (zh) * 2021-01-25 2021-04-30 广州敏视数码科技有限公司 一种车辆车头与车身全景环视图像拼接方法
CN113689368A (zh) * 2020-05-18 2021-11-23 上海赫千电子科技有限公司 一种应用于车载环视图像的光照一致性自动调整方法
CN114500834A (zh) * 2022-01-19 2022-05-13 上汽通用五菱汽车股份有限公司 车载全景影像系统的复位方法、装置、设备和存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104512328B (zh) * 2013-09-27 2016-11-09 比亚迪股份有限公司 汽车环视图像生成方法及汽车环视系统
CN116867087A (zh) * 2018-09-27 2023-10-10 中兴通讯股份有限公司 业务传输方法及装置
CN111731190B (zh) * 2020-07-24 2022-12-30 展讯通信(天津)有限公司 车载avm的显示方法、系统、电子设备及存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9251603B1 (en) * 2013-04-10 2016-02-02 Dmitry Kozko Integrating panoramic video from a historic event with a video game
CN104301677A (zh) * 2014-10-16 2015-01-21 北京十方慧通科技有限公司 面向大场景的全景视频监控的方法及装置
CN105946714A (zh) * 2016-05-16 2016-09-21 乐视控股(北京)有限公司 一种汽车全景观测系统及全景环视观测汽车
CN106803878A (zh) * 2016-12-30 2017-06-06 智车优行科技(北京)有限公司 车载全景环视系统、用于实现全景环视的方法及装置
CN107396068A (zh) * 2017-08-30 2017-11-24 广州杰赛科技股份有限公司 全景视频同步拼接系统、方法及全景视频显示装置
CN111768332A (zh) * 2019-03-26 2020-10-13 深圳市航盛电子股份有限公司 一种车载环视实时3d全景图像的拼接方法及图形采集装置
CN110087032A (zh) * 2019-04-24 2019-08-02 招商局重庆公路工程检测中心有限公司 一种全景式隧道视频监视装置及方法
CN111179168A (zh) * 2019-12-12 2020-05-19 郑州嘉晨电器有限公司 一种车载360度全景环视监控系统及方法
CN113689368A (zh) * 2020-05-18 2021-11-23 上海赫千电子科技有限公司 一种应用于车载环视图像的光照一致性自动调整方法
CN112702576A (zh) * 2020-12-24 2021-04-23 浙江赫千电子科技有限公司 一种车载视频的数据采集推流显示方法
CN112738382A (zh) * 2021-01-25 2021-04-30 广州敏视数码科技有限公司 一种车辆车头与车身全景环视图像拼接方法
CN114500834A (zh) * 2022-01-19 2022-05-13 上汽通用五菱汽车股份有限公司 车载全景影像系统的复位方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN114827491A (zh) 2022-07-29

Similar Documents

Publication Publication Date Title
CN110381255B (zh) 应用360全景环视技术的车载视频监控系统及方法
US20190394427A1 (en) System for perceiving and co-processing intelligent connected vehicle-oriented scene image data
US8237589B2 (en) Adjusting system and method for traffic light
US20220353476A1 (en) Camera system, event recording system and event recording method
CN108650495B (zh) 一种车用全景环视系统及其自适应补光方法
CN103679838A (zh) 车辆监控系统及方法
CN113276774B (zh) 无人车远程驾驶过程中视频画面的处理方法、装置及设备
CN212305474U (zh) 一种大型车辆全景影像拼接系统及汽车
CN110278418B (zh) 视频数据的处理系统、方法和车辆
CN113525234A (zh) 一种辅助驾驶系统装置
CN110728770A (zh) 一种车辆行驶监控方法、装置、系统及电子设备
CN107680395A (zh) 一种无线路况车内警示系统及其方法
CN111311958A (zh) 基于v2x技术的转弯路况提醒方法、系统及v2x服务器
CN108322498A (zh) 一种车联网中的车辆远程查看系统及方法
CN109089086A (zh) 一种全景摄像系统
JP2015070350A (ja) 監視画像提示システム
CN208021321U (zh) 一种标清输入高清输出的车载环视系统
CN114827491B (zh) 一种无线传输全景环视拼接技术
CN111476975A (zh) 一种车辆智能后视镜的多信息融合展现系统
CN216331763U (zh) 一种集成全景功能和bsd功能的智能汽车电子后视镜设备
CN108608944A (zh) 一种智能夜视控制方法和系统
CN112019808A (zh) 一种基于MPSoC的车载实时视频信息智能识别装置
CN112078486A (zh) 一种基于hud显示的转向辅助装置及方法
CN105869437A (zh) 泊车辅助系统及泊车方法
CN216231964U (zh) 一种tbox+360环视系统的汽车智能安全系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant