CN114900610A - 一种基于zynq+fpga平台开发的车载双光摄像机 - Google Patents
一种基于zynq+fpga平台开发的车载双光摄像机 Download PDFInfo
- Publication number
- CN114900610A CN114900610A CN202210488128.1A CN202210488128A CN114900610A CN 114900610 A CN114900610 A CN 114900610A CN 202210488128 A CN202210488128 A CN 202210488128A CN 114900610 A CN114900610 A CN 114900610A
- Authority
- CN
- China
- Prior art keywords
- image processing
- module
- zynq
- processing module
- image sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001931 thermography Methods 0.000 claims abstract description 21
- 238000006243 chemical reaction Methods 0.000 claims abstract description 10
- 230000006835 compression Effects 0.000 claims description 11
- 238000007906 compression Methods 0.000 claims description 11
- 230000003287 optical effect Effects 0.000 claims 1
- 238000005286 illumination Methods 0.000 abstract description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/48—Thermography; Techniques using wholly visual means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种基于ZYNQ+FPGA平台开发的车载双光摄像机，其特征在于：包括微光图像传感器、热成像图像传感器、图像处理模块、输出单元和云台控制板，所述微光图像传感器、热成像图像传感器分别连接在所述图像处理模块的输入端，所述图像处理模块的输出端连接所述输出单元，所述图像处理模块还与云台控制板连接。本发明是使用微光传感器+热成像传感器，在ZYNQ+FPGA平台上实现双路输入，热成像传感器可以快速发现目标的同时，微光传感器优越的低照度能力，可以看清目标，而由于FPGA的并行处理能力，使得不需要通过Linux操作系统便能直接使用PL资源实现视频格式转换，输出高清视频，减少系统显示延时。
Description
技术领域
本发明属于摄像机技术领域，尤其涉及一种基于ZYNQ+FPGA平台开发的车载双光摄像机。
背景技术
目前，现有车载双光云台摄像机主要以可见光+热成像，可见光在微光情况下基本失明，要靠热成像寻找目标，但热成像难以区分目标细节。
发明内容
本发明的目的在于提供一种基于ZYNQ+FPGA平台开发的车载双光摄像机，旨在解决所述背景技术中存在的问题。为实现所述目的，本发明采用的技术方案是：
一种基于ZYNQ+FPGA平台开发的车载双光摄像机，包括微光图像传感器、热成像图像传感器、图像处理模块、输出单元和云台控制板，所述微光图像传感器、热成像图像传感器分别连接在所述图像处理模块的输入端，所述图像处理模块的输出端连接所述输出单元，所述图像处理模块还与云台控制板连接。
优选的，所述图像处理模块与云台控制板通过RS485总线连接。
优选的，所述图像处理单元还连接有存储单元、时钟单元、RS232总线和网络单元。
优选的，所述图像处理单元包括基于ZYNQ的处理模块，所述ZYNQ处理模块由图像处理IP模块、视频压缩IP模块、OSLinux模块和两个时序转换子模块组成，两个所述图像处理IP模块分别的输入端分别与所述微光图像传感器、热成像图像传感器连接，所述图像处理IP模块的输出端分别与时序转换子模块和视频压缩IP模块连接，所述视频压缩IP模块与所述OSLinux模块连接。
本发明的有益效果：本发明是使用微光传感器+热成像传感器，在ZYNQ+FPGA平台上实现双路输入，利用FPGA PL端资源进行图像处理与视频压缩，再通过PS端的双核处理器完成多任务的实时控制、网络传输功能及实时高清视频输出。
热成像传感器可以快速发现目标的同时，微光传感器优越的低照度能力，可以看清目标，而由于FPGA的并行处理能力，使得不需要通过Linux操作系统便能直接使用PL资源实现视频格式转换，输出高清视频，减少系统显示延时。
附图说明
图1为本发明实施例提供的整体示意图。
具体实施方式
为了便于理解本发明，下面将参照相关附图对本发明进行更全面的描述。附图中给出了本发明的较佳实施方式。但是，本发明可以以许多不同的形式来实现，并不限于本文所描述的实施方式。相反地，提供这些实施方式的目的是使对本发明的公开内容理解的更加透彻全面。
需要说明的是，当元件被称为“固定于”另一个元件，它可以直接在另一个元件上或者也可以存在居中的元件。当一个元件被认为是“连接”另一个元件，它可以是直接连接到另一个元件或者可能同时存在居中元件。相反，当元件被称作“直接在”另一元件“上”时，不存在中间元件。本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的，并不表示是唯一的实施方式，本文所使用的术语“上端”、“下端”、“左侧”、“右侧”、“前端”、“后端”以及类似的表达是参考附图的位置关系。
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施方式的目的，不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
下面结合具体实施方式对本专利的技术方案作进一步详细地说明。
如图1所示，本发明实施例提供了一种基于ZYNQ+FPGA平台开发的车载双光摄像机，包括微光图像传感器、热成像图像传感器、图像处理模块、输出单元和云台控制板，微光图像传感器、热成像图像传感器分别连接在图像处理模块的输入端，图像处理模块的输出端连接输出单元，图像处理模块还与云台控制板连接。
在本具体实施例中，图像处理模块与云台控制板通过RS485总线连接。
在本具体实施例中，图像处理单元还连接有存储单元、时钟单元、RS232总线和网络单元。
在本具体实施例中，图像处理单元包括基于ZYNQ的处理模块，ZYNQ处理模块由图像处理IP模块、视频压缩IP模块、OSLinux模块和两个时序转换子模块组成，两个图像处理IP模块分别的输入端分别与微光图像传感器、热成像图像传感器连接，图像处理IP模块的输出端分别与时序转换子模块和视频压缩IP模块连接，视频压缩IP模块与OSLinux模块连接。
在实际应用中，位于本摄像机内部的微光图像传感器、热成像图像传感器分别通过外部的光圈镜头模块获取视频图像信息，再通过搭载在ZYNQ+FPGA平台上实现双路输入，而ZYNQ上对应设置的两个图像处理IP模块对应用于接收微光图像传感器、热成像图像传感器获取的图像，同时利用FPGA的PL端资源进行图像处理与视频压缩，再通过FPGA的PS端的双核处理器完成多任务的实时控制、网络传输功能及实时高清视频输出，在时序转换子模块的配合下，实现同步输出。
通过本摄像机内部模块的设计，使得热成像传感器可以快速发现目标的同时，微光传感器优越的低照度能力，可以看清目标，再加上搭载用于处理视频图像的FPGA平台，利用FPGA的并行处理能力，使得不需要通过Linux操作系统便能直接使用PL资源实现视频格式转换，输出高清视频，减少系统显示延时。
以上实施方式仅用于说明本发明，而并非对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本发明的范畴，本发明的专利保护范围应由权利要求限定。
Claims (4)
1.一种基于ZYNQ+FPGA平台开发的车载双光摄像机，其特征在于：包括微光图像传感器、热成像图像传感器、图像处理模块、输出单元和云台控制板，所述微光图像传感器、热成像图像传感器分别连接在所述图像处理模块的输入端，所述图像处理模块的输出端连接所述输出单元，所述图像处理模块还与云台控制板连接。
2.根据权利要求1所述的一种基于ZYNQ+FPGA平台开发的车载双光摄像机，其特征在于：所述图像处理模块与云台控制板通过RS485总线连接。
3.根据权利要求2所述的一种基于ZYNQ+FPGA平台开发的车载双光摄像机，其特征在于：所述图像处理单元还连接有存储单元、时钟单元、RS232总线和网络单元。
4.根据权利要求3所述的一种基于ZYNQ+FPGA平台开发的车载双光摄像机，其特征在于：所述图像处理单元包括基于ZYNQ的处理模块，所述ZYNQ处理模块由图像处理IP模块、视频压缩IP模块、OSLinux模块和两个时序转换子模块组成，两个所述图像处理IP模块分别的输入端分别与所述微光图像传感器、热成像图像传感器连接，所述图像处理IP模块的输出端分别与时序转换子模块和视频压缩IP模块连接，所述视频压缩IP模块与所述OSLinux模块连接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210488128.1A CN114900610A (zh) | 2022-05-06 | 2022-05-06 | 一种基于zynq+fpga平台开发的车载双光摄像机 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210488128.1A CN114900610A (zh) | 2022-05-06 | 2022-05-06 | 一种基于zynq+fpga平台开发的车载双光摄像机 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114900610A true CN114900610A (zh) | 2022-08-12 |
Family
ID=82720295
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210488128.1A Pending CN114900610A (zh) | 2022-05-06 | 2022-05-06 | 一种基于zynq+fpga平台开发的车载双光摄像机 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114900610A (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107329720A (zh) * | 2017-06-30 | 2017-11-07 | 中国航空工业集团公司雷华电子技术研究所 | 一种基于zynq的雷达图像显示加速系统 |
| CN109714586A (zh) * | 2018-12-14 | 2019-05-03 | 上海物联网有限公司 | 基于zynq的实时双目立体视觉软硬件协同设计方法 |
| CN210129910U (zh) * | 2019-08-07 | 2020-03-06 | 深圳耐杰电子技术有限公司 | 一种双光谱一体机芯 |
| CN110865406A (zh) * | 2019-11-28 | 2020-03-06 | 湖南率为控制科技有限公司 | 基于车载gps授时系统的多传感器数据同步处理系统及方法 |
| CN211906310U (zh) * | 2018-10-19 | 2020-11-10 | 成都信息工程大学 | 基于Zynq的机器视觉检测系统 |
| CN112651903A (zh) * | 2020-11-12 | 2021-04-13 | 苏州长风航空电子有限公司 | 红外热像仪图像预处理系统及其预处理方法 |
| CN112995465A (zh) * | 2021-02-05 | 2021-06-18 | 中电海康集团有限公司 | 一种基于zynq的图像传输系统及方法 |
| CN114002897A (zh) * | 2021-10-26 | 2022-02-01 | 深圳中科壹芯科技有限公司 | 一种复合夜视仪 |
-
2022
- 2022-05-06 CN CN202210488128.1A patent/CN114900610A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107329720A (zh) * | 2017-06-30 | 2017-11-07 | 中国航空工业集团公司雷华电子技术研究所 | 一种基于zynq的雷达图像显示加速系统 |
| CN211906310U (zh) * | 2018-10-19 | 2020-11-10 | 成都信息工程大学 | 基于Zynq的机器视觉检测系统 |
| CN109714586A (zh) * | 2018-12-14 | 2019-05-03 | 上海物联网有限公司 | 基于zynq的实时双目立体视觉软硬件协同设计方法 |
| CN210129910U (zh) * | 2019-08-07 | 2020-03-06 | 深圳耐杰电子技术有限公司 | 一种双光谱一体机芯 |
| CN110865406A (zh) * | 2019-11-28 | 2020-03-06 | 湖南率为控制科技有限公司 | 基于车载gps授时系统的多传感器数据同步处理系统及方法 |
| CN112651903A (zh) * | 2020-11-12 | 2021-04-13 | 苏州长风航空电子有限公司 | 红外热像仪图像预处理系统及其预处理方法 |
| CN112995465A (zh) * | 2021-02-05 | 2021-06-18 | 中电海康集团有限公司 | 一种基于zynq的图像传输系统及方法 |
| CN114002897A (zh) * | 2021-10-26 | 2022-02-01 | 深圳中科壹芯科技有限公司 | 一种复合夜视仪 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN202395858U (zh) | 一种双目摄像装置 | |
| CN106303179A (zh) | 一种用于移动终端的全景镜头 | |
| EP3854069B1 (en) | Automated camera mode selection | |
| CN102970485A (zh) | 一种自动对焦方法及装置 | |
| CN208956216U (zh) | 基于低照度摄像头同步采集长距传输的大型车环视系统 | |
| CN1750593A (zh) | 具有图像拼接功能的数码相机 | |
| CN103888751A (zh) | 一种基于dsp的嵌入式全景立体球视觉图像采集系统 | |
| CN110620885B (zh) | 一种红外微光图像融合系统、方法及电子设备 | |
| CN104967783A (zh) | 面向微纳星的多路微图像采集系统 | |
| CN207910882U (zh) | 远程夜视全彩成像系统 | |
| CN203365786U (zh) | 一种具有摄远功能的双光路监控装置 | |
| CN205051781U (zh) | 一种双镜头光学摄像系统 | |
| CN108401551B (zh) | 双镜头微光立体全景成像装置及其超大视场测距方法 | |
| CN113989173A (zh) | 视频融合方法、装置、电子设备及存储介质 | |
| CN114900610A (zh) | 一种基于zynq+fpga平台开发的车载双光摄像机 | |
| CN105872328A (zh) | 一种拍摄系统 | |
| CN205726140U (zh) | 云台、含其的飞行器及云台系统 | |
| CN112004023A (zh) | 拍摄方法、多摄像头模组以及存储介质 | |
| CN109495694B (zh) | 一种基于rgb-d的环境感知方法及装置 | |
| CN207336910U (zh) | 一种全景镜头及全景摄像模组 | |
| CN106454236B (zh) | 一种提高多路视频采集前端处理效率的方法和系统 | |
| CN211557362U (zh) | 一种可自适应图像场景的前端图像的采集装置 | |
| CN109688314B (zh) | 低延时少缓存且数据输出方式可控的摄像头系统及方法 | |
| CN210070742U (zh) | 反射式白光热像二合一瞄准镜 | |
| CN202433589U (zh) | 一种新型大视场低畸变广角监控镜头 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |