CN115988161A - 一种视频传输设备及传输方法 - Google Patents

一种视频传输设备及传输方法 Download PDF

Info

Publication number
CN115988161A
CN115988161A CN202310257995.9A CN202310257995A CN115988161A CN 115988161 A CN115988161 A CN 115988161A CN 202310257995 A CN202310257995 A CN 202310257995A CN 115988161 A CN115988161 A CN 115988161A
Authority
CN
China
Prior art keywords
video transmission
host
pcie
video
application layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310257995.9A
Other languages
English (en)
Other versions
CN115988161B (zh
Inventor
徐征
刘军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Xinpu Technology Co ltd
Original Assignee
Shanghai Xinpu Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Xinpu Technology Co ltd filed Critical Shanghai Xinpu Technology Co ltd
Priority to CN202310257995.9A priority Critical patent/CN115988161B/zh
Publication of CN115988161A publication Critical patent/CN115988161A/zh
Application granted granted Critical
Publication of CN115988161B publication Critical patent/CN115988161B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Communication Control (AREA)

Abstract

本发明公开了一种视频传输设备及传输方法,包括摄像头、主机和视频传输芯片,摄像头通过视频传输芯片向主机传输信息;视频传输芯片设置PCIE接口,主机设置PCIE接口,采用PCIE接口取代传统的MIPI C/DPHY接口作为主机适配的接口,可以随机访问主机每帧的图像帧缓冲区。每接受到一行的视频数据流,根据虚拟通道在超级帧的摆放位置直接计算该行需要写到主机内存的地址空间,不用等待虚拟通道的其他行都接收到后才发送主机,同时本发明也适用于普通帧,普通帧与超级帧的唯一不同是帧缓存区的地址计算。

Description

一种视频传输设备及传输方法
技术领域
本发明涉及通信领域,具体涉及一种视频传输设备及传输方法。
背景技术
在视频数据传输过程中,视频数据流聚合的方式有两种,一种是并排聚合,将传入的视频数据流组合在一起,从而产生一个具有相同高度和最多四倍于单个传感器输出宽度的帧;另一种是行交错聚合,按用户指定的顺序在最多四个视频输入流中交替每一行;在两种情况下,聚合视频的数据速率都高达摄像头输入数据流的四倍。因为不同的数据流到达的时间略微有不同,通常会在视频流多路复用器后面放置一个很大的缓冲区VC0-3行缓冲区(LB)。
每个超级帧行只有等到各虚拟通道的图像行都接收到后才能发送到主机,这样每个虚拟通道需要至少两行的缓冲区,每行的数据量受摄像头的分辨率影响,缓冲区容量通常超过16KB,四个虚拟通道总共需要128KB容量的缓冲区,同时还存在其它不是超级帧的视频缓冲区,这也就导致桥片面积较大,成本较高。
发明内容
为解决上述技术问题,本发明提供一种视频传输设备,包括摄像头、主机和视频传输芯片,所述摄像头通过所述视频传输芯片向所述主机传输信息;所述视频传输芯片设置PCIE接口和其他物理端口,所述主机设置PCIE接口,所述摄像头设置物理端口。
优选的:所述摄像头物理端口和所述视频传输芯片物理端口连接,所述视频传输芯片PCIE接口和主机PCIE接口连接。
优选的:所述视频传输芯片物理端口连接内部视频数据链路层。
优选的:所述视频数据链路层连接缓冲区。
优选的:所述缓冲区设置两个。
优选的:所述缓冲区后设置PCIE应用层。
优选的:所述PCIE应用层连接所述视频传输芯片PCIE接口。
优选的:所述摄像头、所述视频传输芯片和所述主机之间通过物理介质连接。
优选的:所述物理介质可以是电缆和双绞线。
一种视频传输方法:
S1、PCIE应用层接收到一行视频数据流;
S2、PCIE应用层判断虚拟通道是否为超级帧;
S3、在第一状态下,虚拟通道是超级帧,PCIE应用层根据虚拟通道在超级帧的摆放位置计算该行需要写到主机内存的帧缓冲区地址空间;在第二状态下,虚拟通道是一般的视频数据流,PCIE应用层根据当前的帧缓冲区地址写入当前图像行的数据。
本发明的技术效果和优点:
及时把视频图像行数据从桥片写到主机帧缓冲区里,大大节省了桥片行缓冲区的硬件资源要求,减少了面积和成本;采用PCIE接口取代传统的MIPI C/DPHY接口作为主机适配的接口,可以随机访问主机每帧的图像帧缓冲区。
附图说明
图1是本申请实施例提供的数据传输示意图;
图2是本申请实施例提供的并排聚合和行交错聚合示意图;
图3是本申请实施例提供的传统的数据传输示意图。
具体实施方式
下面结合附图和具体实施方式对本发明作进一步详细的说明。本发明的实施例是为了示例和描述起见而给出的,而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显而易见的。选择和描述实施例是为了更好说明本发明的原理和实际应用,并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。
请参阅图1,在本实施例中提供一种视频传输设备及传输方法,包括物理端口、视频数据链路层和缓冲区;摄像头的输出端连接视频传输芯片的输入物理端口,物理端口与视频数据链路层连接,视频数据链路层连接缓冲区,缓冲区后设置PCIE应用层,连接PCIE接口,视频传输芯片通过PCIE接口连接外部主机系统芯片。
传统的视频传输芯片采用C/DPHY接口与外部主机系统芯片连接,这种接口方式容易收到外部主机系统芯片C/DPHY接口数量和接口带宽的限制,本发明采用PICE接口作为外部主机系统芯片的适配接口,不仅不受外部主机系统芯片C/DPHY接口数量和接口带宽的限制,而且还可以随机访问主机每帧的图像帧缓冲区。
摄像头通过物理信道给主机传输图像,物理信道可以为电缆和双绞线;通常图像是按行来传输的,不同虚拟通道的图像行交错物理信道上传输;另外视频数据流在传输时,通常是以多路输入视频数据流进行数据流聚合,按照并排或行交错输出格式相对应的特定序列聚合为输出大数据流,大数据流是超帧结构组成的单个视频数据流,例如环绕视图AWM相机;数据流聚合需要所有输入的视频数据流使用相同的分辨率和虚拟通道分配,并且所有输入的视频数据流需要保持同步传输。
请参阅图2-图3,输入为四路视频数据流,输出是由一个超帧结构组成的单个视频数据流,这个超帧结构组成的单个视频数据流保存来自所有彼此同步的聚合流的视频数据;并排聚合将传入的视频数据流组合在一起,从而产生一个具有相同高度和最多四倍于单个传感器输出宽度的帧;行交错聚合按用户指定的顺序在最多四个视频输入流中交替每一行;在两种情况下,聚合视频的数据速率都高达摄像头输入数据流的四倍。
此外因为不同的数据流到达的时间略微有不同,通常会在视频流多路复用器后放置一个很大的缓冲区VC0-3行缓冲区LB,每个超级帧行只有等到各虚拟通道的图像行都接收到后才能发送到主机;这样每个虚拟通道需要至少两行的缓冲区,每行的数据量受摄像头的分辨率影响,摄像头的分辨率高则数据容量大,摄像头的分辨率低则所需要的数据容量小,通常为超过16KB,这样四个虚拟通道总共需要128KB容量的缓冲区,同时还存在其它不是超级帧的视频缓冲区,这也就导致桥片面积较大,成本较高。
对此,本发明进行了改进,方法流程为:
S1、PCIE应用层接收到一行视频数据流;
S2、PCIE应用层判断虚拟通道是否为超级帧;
S3、在第一状态下,虚拟通道是超级帧,PCIE应用层根据虚拟通道在超级帧的摆放位置计算该行需要写到主机内存的帧缓冲区地址空间;在第二状态下,虚拟通道是一般的视频数据流,PCIE应用层根据当前的帧缓冲区地址写入当前图像行的数据。
在本实施例中,主机包括记录地址空间的表单,PCIE应用层与主机建立连接,访问并查看表单中可存入的地址空间后,将超级帧和视频数据流写入该地址空间。
每接受到一行的视频数据流,根据虚拟通道在超级帧的摆放位置直接计算该行需要写到主机内存的地址空间,而不用等待虚拟通道的其他行都接收到后才发送主机,这样只需要两个行缓冲区,总共需要32KB容量来为所有的虚拟通道服务;同时本发明也适用于普通帧,普通帧与超级帧的唯一不同是帧缓存区的地址计算;通过这个方法可以将缓冲区容量从128KB减少到32KB容量,节省了桥片行缓冲区的硬件资源要求,同时减少视频传输芯片的面积和成本。
显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域及相关领域的普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。本发明中未具体描述和解释说明的结构、装置以及操作方法,如无特别说明和限定,均按照本领域的常规手段进行实施。

Claims (10)

1.一种视频传输设备,其特征在于,包括摄像头、主机和视频传输芯片,所述摄像头通过所述视频传输芯片向所述主机传输信息;
所述视频传输芯片设置PCIE接口和其他物理端口,所述主机设置PCIE接口,所述摄像头设置物理端口;所述视频传输设备的传输方法包括:
S1、PCIE应用层接收到一行视频数据流;
S2、PCIE应用层判断虚拟通道是否为超级帧;
S3、在第一状态下,虚拟通道是超级帧,PCIE应用层根据虚拟通道在超级帧的摆放位置计算该行需要写到主机内存的帧缓冲区地址空间;在第二状态下,虚拟通道是一般的视频数据流,PCIE应用层根据当前的帧缓冲区地址写入当前图像行的数据。
2.根据权利要求1所述的一种视频传输设备,其特征在于,摄像头物理端口和视频传输芯片物理端口连接,所述视频传输芯片PCIE接口和主机PCIE接口连接。
3.根据权利要求1所述的一种视频传输设备,其特征在于,所述视频传输芯片物理端口连接内部视频数据链路层。
4.根据权利要求3所述的一种视频传输设备,其特征在于,所述视频数据链路层连接缓冲区。
5.根据权利要求4所述的一种视频传输设备,其特征在于,所述缓冲区设置两个。
6.根据权利要求4所述的一种视频传输设备,其特征在于,所述缓冲区后设置PCIE应用层。
7.根据权利要求5所述的一种视频传输设备,其特征在于,所述PCIE应用层连接所述视频传输芯片PCIE接口。
8.根据权利要求1所述的一种视频传输设备,其特征在于,所述摄像头、所述视频传输芯片和所述主机之间通过物理介质连接。
9.根据权利要求8所述的一种视频传输设备,其特征在于,所述物理介质可以是电缆和双绞线。
10.一种视频传输方法,其特征在于,该方法为:
S1、PCIE应用层接收到一行视频数据流;
S2、PCIE应用层判断虚拟通道是否为超级帧;
S3、在第一状态下,虚拟通道是超级帧,PCIE应用层根据虚拟通道在超级帧的摆放位置计算该行需要写到主机内存的帧缓冲区地址空间;在第二状态下,虚拟通道是一般的视频数据流,PCIE应用层根据当前的帧缓冲区地址写入当前图像行的数据。
CN202310257995.9A 2023-03-17 2023-03-17 一种视频传输设备及传输方法 Active CN115988161B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310257995.9A CN115988161B (zh) 2023-03-17 2023-03-17 一种视频传输设备及传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310257995.9A CN115988161B (zh) 2023-03-17 2023-03-17 一种视频传输设备及传输方法

Publications (2)

Publication Number Publication Date
CN115988161A true CN115988161A (zh) 2023-04-18
CN115988161B CN115988161B (zh) 2023-06-06

Family

ID=85968473

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310257995.9A Active CN115988161B (zh) 2023-03-17 2023-03-17 一种视频传输设备及传输方法

Country Status (1)

Country Link
CN (1) CN115988161B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101311915A (zh) * 2007-05-21 2008-11-26 国际商业机器公司 用于动态重分派虚拟通道资源的方法和系统
US20090006710A1 (en) * 2007-04-20 2009-01-01 Daniel David A Virtualization of a host computer's native I/O system architecture via the internet and LANs
US20100174988A1 (en) * 2007-06-26 2010-07-08 Chang Sun Moon System and method for providing virtual interface
CN102117342A (zh) * 2011-01-21 2011-07-06 中国科学院上海技术物理研究所 基于PCI Express总线的多波段红外图像实时采集系统及方法
US20150234632A1 (en) * 2011-12-16 2015-08-20 Enyi Shi Multi-processor video processing system and video image synchronous transmission and display method therein
US20170286140A1 (en) * 2016-03-31 2017-10-05 Ca, Inc. Java-based offload service in a mainframe environment
US20190057051A1 (en) * 2017-08-18 2019-02-21 Nxp Usa, Inc. Video device and method for embedded data capture on a virtual channel
CN109408424A (zh) * 2018-10-19 2019-03-01 北京航空航天大学 一种基于PCIe接口的SpaceFibre总线数据采集方法
CN110083461A (zh) * 2019-03-29 2019-08-02 郑州信大捷安信息技术股份有限公司 一种基于fpga的多任务处理系统及方法
CN113709495A (zh) * 2021-08-24 2021-11-26 天津津航计算技术研究所 一种基于pcie缓冲机制的同步解码方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090006710A1 (en) * 2007-04-20 2009-01-01 Daniel David A Virtualization of a host computer's native I/O system architecture via the internet and LANs
CN101311915A (zh) * 2007-05-21 2008-11-26 国际商业机器公司 用于动态重分派虚拟通道资源的方法和系统
US20100174988A1 (en) * 2007-06-26 2010-07-08 Chang Sun Moon System and method for providing virtual interface
CN102117342A (zh) * 2011-01-21 2011-07-06 中国科学院上海技术物理研究所 基于PCI Express总线的多波段红外图像实时采集系统及方法
US20150234632A1 (en) * 2011-12-16 2015-08-20 Enyi Shi Multi-processor video processing system and video image synchronous transmission and display method therein
US20170286140A1 (en) * 2016-03-31 2017-10-05 Ca, Inc. Java-based offload service in a mainframe environment
US20190057051A1 (en) * 2017-08-18 2019-02-21 Nxp Usa, Inc. Video device and method for embedded data capture on a virtual channel
CN109408424A (zh) * 2018-10-19 2019-03-01 北京航空航天大学 一种基于PCIe接口的SpaceFibre总线数据采集方法
CN110083461A (zh) * 2019-03-29 2019-08-02 郑州信大捷安信息技术股份有限公司 一种基于fpga的多任务处理系统及方法
CN113709495A (zh) * 2021-08-24 2021-11-26 天津津航计算技术研究所 一种基于pcie缓冲机制的同步解码方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
黄舒月: "基于 UVM 的 MIPI_CSI-2 接收端验证平台的设计与实现", 《中国优秀硕士学位论文全文数据库(电子期刊)信息科技辑》 *

Also Published As

Publication number Publication date
CN115988161B (zh) 2023-06-06

Similar Documents

Publication Publication Date Title
US8274502B2 (en) Video switch and method of sampling simultaneous video sources
CN108737689A (zh) 一种视频的拼接显示方法及显示控制设备
US10104332B2 (en) Semiconductor device and image processing method
CN107249107B (zh) 视频控制器和图像处理方法及装置
US20110289258A1 (en) Memory interface with reduced read-write turnaround delay
US20220345769A1 (en) Image data processing device and method, and display device
CN108712625B (zh) 多通道实时高清图像传输系统及传输方法
US20090070502A1 (en) Data Modification Module
CN113055675A (zh) 图像传输方法及装置以及视频处理设备
CN112055159B (zh) 画质处理装置和显示设备
CN116801051A (zh) 一种图像数据接口转换方法及装置
CN115988161B (zh) 一种视频传输设备及传输方法
US6683876B1 (en) Packet switched router architecture for providing multiple simultaneous communications
CN116016823B (zh) 一种视频注入装置及系统
CN101969552B (zh) 一种视频数据并行处理系统及其方法
US7298397B2 (en) Digital transmission system
CN113794849B (zh) 用于图像数据同步的装置、方法及图像采集系统
CN118075405B (zh) 解串器、包括其的串行/解串器及应用其的汽车通信系统
JP2017055217A (ja) 画像処理装置と画像処理方法及び撮像装置
CN114554126B (zh) 一种基板管理控制芯片、视频数据传输方法及服务器
WO2002041576A2 (en) Serial compressed bus interface having a reduced pin count
WO2024037251A1 (zh) 数据传输方法、装置、系统、设备及存储介质
CN111930327A (zh) 一种led镜子屏显示方法及装置
US9451338B2 (en) Line card with network processing device and data pump device
CN114500385A (zh) 一种通过fpga实现千兆以太网数据流量整形的方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant