CN112581575A - 一种外视频做纹理系统 - Google Patents

一种外视频做纹理系统 Download PDF

Info

Publication number
CN112581575A
CN112581575A CN202011404097.4A CN202011404097A CN112581575A CN 112581575 A CN112581575 A CN 112581575A CN 202011404097 A CN202011404097 A CN 202011404097A CN 112581575 A CN112581575 A CN 112581575A
Authority
CN
China
Prior art keywords
texture
unit
programming interface
application programming
array
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011404097.4A
Other languages
English (en)
Other versions
CN112581575B (zh
Inventor
韩立敏
田泽
张骏
郑新建
任向隆
吴晓成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Xiangteng Microelectronics Technology Co Ltd
Original Assignee
Xian Xiangteng Microelectronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Xiangteng Microelectronics Technology Co Ltd filed Critical Xian Xiangteng Microelectronics Technology Co Ltd
Priority to CN202011404097.4A priority Critical patent/CN112581575B/zh
Publication of CN112581575A publication Critical patent/CN112581575A/zh
Application granted granted Critical
Publication of CN112581575B publication Critical patent/CN112581575B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/40Filling a planar surface by adding surface attributes, e.g. colour or texture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/04Texture mapping

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Image Generation (AREA)

Abstract

本发明涉及一种外视频做纹理系统,本发明包括应用编程接口解析单元,外视频帧地址锁存单元,图形绘制单元,可编程着色阵列和纹理引擎,应用编程接口解析单元分别与外视频帧地址锁存单元,图形绘制单元和纹理引擎连接,图形绘制单元和可编程着色阵列连接,外视频帧地址锁存单元和可编程着色阵列分别与纹理引擎连接。本发明基于图形应用编程接口应用编程接口,通过增加少量的硬件功能单元,无需在GPU外部存储器中外视频存储区域与纹理对象存储区域之间执行数据搬移操作,即可实现外视频做纹理功能,提高了纹理贴图操作的灵活性。

Description

一种外视频做纹理系统
技术领域
本发明涉及计算机硬件技术领域,尤其涉及一种外视频做纹理系统。
背景技术
随着图形化应用的不断增加,早期单靠CPU进行图形绘制的解决方案已经难以满足成绩和技术增长的图形处理需求,图形处理器(Graphic Processing Unit,GPU)应运而生。从1999年Nvidia发布第一款GPU产品至今,GPU技术的发展主要经历了固定功能流水线阶段、分离着色器架构阶段、统一着色器架构阶段,其图形处理能力不断提升,应用领域也从最初的图形绘制逐步扩展到通用计算领域。GPU流水线高速、并行的特征和灵活的可编程能力,为图形处理和通用并行计算提供了良好的运行平台。
目前,在军用领域中,国外进口商用GPU芯片存在温度和环境适应性差、无法保证电路本身或配套软件没有“后门”、包含大量军用领域不需要的冗余功能单元,功耗指标无法满足要求、商用GPU芯片更新换代快,随时面临停产、断档,难以满足武器装备持续保障等缺陷,在安全性、可靠性、保障性等方面的存在重大隐患。而且,出于政治、军事、经济等原因,国外对我国实行技术“封锁”和产品“垄断”,难以获得GPU芯片的底层技术资料,如寄存器资料、详细的微架构、核心软件源码等,导致GPU功能、性能无法充分发挥,且移植性较差;上述问题严重制约了我国显示系统的独立研制和自主发展。突破3D引擎纹理贴图关键技术,研制高性能图形处理器芯片迫在眉睫。
发明内容
本发明为解决背景技术中存在的上述技术问题,而提供一种视频做纹理系统,基于图形应用编程接口应用编程接口,通过增加少量的硬件功能单元,无需在GPU外部存储器中外视频存储区域与纹理对象存储区域之间执行数据搬移操作,即可实现外视频做纹理功能,提高了纹理贴图操作的灵活性。
本发明的技术解决方案是:本发明为一种外视频做纹理系统,其特殊之处在于:所述外视频做纹理系统包括应用编程接口解析单元,外视频帧地址锁存单元,图形绘制单元,可编程着色阵列和纹理引擎,应用编程接口解析单元分别与外视频帧地址锁存单元,图形绘制单元和纹理引擎连接,图形绘制单元和可编程着色阵列连接,外视频帧地址锁存单元除了与应用编程接口解析单元相连,还与纹理引擎连接,纹理引擎与GPU外部存储器相连。
优选的,应用编程接口解析单元接收主控处理器输入的图形应用编程接口;根据图形应用编程接口的类型,将绘制类应用编程接口转发给图形绘制单元,将绘制状态更新和管理类应用编程接口,绑定纹理对象应用编程接口(glbindtexture)转发给外视频帧地址锁存单元,将纹理参数设置类应用编程接口转发给纹理引擎。
优选的,图形绘制单元执行顶点预处理操作,并将预处理后的顶点转发给可编程着色阵列,可编程着色阵列完成顶点着色操作后将顶点转发给图形绘制单元,图形绘制单元完成各种几何处理操作,包括图元组装、裁剪操作、视窗变换、光栅化操作,最终产生初级像素,将初级像素转发给可编程着色阵列。
优选的,初级像素包括屏幕坐标,颜色,纹理坐标信息。
优选的,外视频帧地址锁存单元根据绑定纹理对象应用编程接口(glbindtexture)所携带的纹理对象编号决定是否锁存外视频捕捉单元的外视频显示帧地址,当纹理对象编号代表当为所绑定的纹理对象是外视频源,则锁存外视频的显示帧地址,并将锁存地址输出给纹理引擎,外视频捕捉单元的解码逻辑避开被纹理引擎锁定的帧地址,向外视频的其余帧地址空间中写入新解码的视频图像数据。
优选的,可编程着色阵列同时执行顶点着色操作和像素着色操作,在执行像素着色操作期间,需将纹理请求转发给纹理引擎完成纹理贴图操作,纹理引擎完成纹理贴图操作后,将纹素数据返回给可编程着色阵列,可编程着色阵列接着完成后续像素着色操作,将最终产生的像素数据输出到光栅操作单元。
优选的,纹理引擎依据可编程着色阵列输入的纹理请求,应用编程接口解析单元输入的纹理参数,外视频帧地址锁存单元输入的锁存地址访问GPU外部存储器中的外视频存储区域获取纹素数据,对纹素数据执行格式转换操作和过滤操作后输出给可编程着色阵列。
本发明提供的一种外视频做纹理系统,包括依次连接的应用编程接口解析单元,外视频帧地址锁存单元,图形绘制单元,可编程着色阵列和纹理引擎。基于图形应用编程接口应用编程接口,通过增加少量的硬件功能单元,无需在GPU外部存储器中外视频存储区域与纹理对象存储区域之间执行数据搬移操作,无需不同存储区域之间的数据拷贝,即可实现外视频做纹理功能,提高了纹理贴图操作的灵活性,丰富了纹理图像的输入源,外视频图像贴到3D图形的表面能使3D图元具有动态视频,视觉效果更生动,更丰富。
附图说明
图1是本发明的系统示意图。
具体实施方式
本发明提供的一种外视频做纹理系统,其特殊之处在于:所述外视频做纹理系统包括应用编程接口解析单元,外视频帧地址锁存单元,图形绘制单元,可编程着色阵列和纹理引擎,应用编程接口解析单元分别与外视频帧地址锁存单元,图形绘制单元和纹理引擎连接,图形绘制单元和可编程着色阵列连接,外视频帧地址锁存单元除了与应用编程接口解析单元相连,还与纹理引擎连接,纹理引擎与GPU外部存储器相连。
其中,应用编程接口解析单元接收主控处理器输入的图形应用编程接口;根据图形应用编程接口的类型,将绘制类应用编程接口转发给图形绘制单元,将绘制状态更新和管理类应用编程接口,绑定纹理对象应用编程接口(glbindtexture)转发给外视频帧地址锁存单元,将纹理参数设置类应用编程接口转发给纹理引擎。
图形绘制单元执行顶点预处理操作,并将预处理后的顶点转发给可编程着色阵列,可编程着色阵列完成顶点着色操作后将顶点转发给图形绘制单元,图形绘制单元完成各种几何处理操作,包括图元组装、裁剪操作、视窗变换、光栅化操作,最终产生初级像素,将初级像素转发给可编程着色阵列。
初级像素包括屏幕坐标,颜色,纹理坐标信息。
外视频帧地址锁存单元根据绑定纹理对象应用编程接口(glbindtexture)所携带的纹理对象编号决定是否锁存外视频捕捉单元的外视频显示帧地址,当纹理对象编号代表当为所绑定的纹理对象是外视频源,则锁存外视频的显示帧地址,并将锁存地址输出给纹理引擎,外视频捕捉单元的解码逻辑避开被纹理引擎锁定的帧地址,向外视频的其余帧地址空间中写入新解码的视频图像数据。
可编程着色阵列同时执行顶点着色操作和像素着色操作,在执行像素着色操作期间,需将纹理请求转发给纹理引擎完成纹理贴图操作,纹理引擎完成纹理贴图操作后,将纹素数据返回给可编程着色阵列,可编程着色阵列接着完成后续像素着色操作,将最终产生的像素数据输出到光栅操作单元。
纹理引擎依据可编程着色阵列输入的纹理请求,应用编程接口解析单元输入的纹理参数,外视频帧地址锁存单元输入的锁存地址访问GPU外部存储器中的外视频存储区域获取纹素数据,对纹素数据执行格式转换操作和过滤操作后输出给可编程着色阵列。
下面结合附图和具体实施例对本发明的技术方案做进一步详细描述。
参见图1,本发明的较佳实施例中的外视频做纹理系统01包含应用编程接口解析单元002,外视频帧地址锁存单元001,图形绘制单元003,可编程着色阵列004和纹理引擎005,应用编程接口解析单元002分别与外视频帧地址锁存单元001,图形绘制单元003和纹理引擎005连接,图形绘制单元003和可编程着色阵列004连接,外视频帧地址锁存单元001和可编程着色阵列004分别与纹理引擎005连接。
应用编程接口解析单元002接收主控处理器输入的图形应用编程接口;根据图形应用编程接口的类型,将绘制类应用编程接口转发给图形绘制单元003,将绘制状态更新和管理类应用编程接口,比如绑定纹理对象应用编程接口(glbindtexture)转发给外视频帧地址锁存单元001,将纹理参数设置类应用编程接口转发给纹理引擎005;
图形绘制单元003执行顶点预处理操作,并将预处理后的顶点转发给可编程着色阵列004,可编程着色阵列004完成顶点着色操作后将顶点转发给图形绘制单元003,图形绘制单元003完成各种几何处理操作,包括图元组装、裁剪操作、视窗变换、光栅化操作,最终产生初级像素(包括屏幕坐标、颜色、纹理坐标等信息),将初级像素转发给可编程着色阵列004;
外视频帧地址锁存单元001根据绑定纹理对象应用编程接口(glbindtexture)所携带的纹理对象编号决定是否锁存外视频捕捉单元的外视频显示帧地址,当纹理对象编号代表当为所绑定的纹理对象是外视频源,则锁存外视频的显示帧地址,并将锁存地址输出给纹理引擎005,外视频捕捉单元的解码逻辑避开被纹理引擎锁定的帧地址,向外视频的其余帧地址空间中写入新解码的视频图像数据;
可编程着色阵列004同时执行顶点着色操作和像素着色操作,在执行像素着色操作期间,需将纹理请求转发给纹理引擎005完成纹理贴图操作,纹理引擎005完成纹理贴图操作后,将纹素数据返回给可编程着色阵列004,可编程着色阵列接着完成后续像素着色操作,将最终产生的像素数据输出到光栅操作单元;
纹理引擎005依据可编程着色阵列004输入的纹理请求(纹理坐标),应用编程接口解析单元002输入的纹理参数,外视频帧地址锁存单元001输入的锁存地址访问GPU外部存储器中的外视频存储区域获取纹素数据,对纹素数据执行格式转换操作和过滤操作后输出给可编程着色阵列004。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细地说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (7)

1.一种外视频做纹理系统,其特征在于:所述外视频做纹理系统包括应用编程接口解析单元,外视频帧地址锁存单元,图形绘制单元,可编程着色阵列和纹理引擎,所述应用编程接口解析单元分别与外视频帧地址锁存单元,图形绘制单元和纹理引擎连接,所述图形绘制单元和可编程着色阵列连接,所述外视频帧地址锁存单元除了与应用编程接口解析单元相连,还与纹理引擎连接,纹理引擎与GPU外部存储器相连。
2.根据权利要求1所述的外视频做纹理系统,其特征在于:所述应用编程接口解析单元接收主控处理器输入的图形应用编程接口;根据图形应用编程接口的类型,将绘制类应用编程接口转发给图形绘制单元,将绘制状态更新和管理类应用编程接口,绑定纹理对象应用编程接口转发给外视频帧地址锁存单元,将纹理参数设置类应用编程接口转发给纹理引擎。
3.根据权利要求2所述的外视频做纹理系统,其特征在于:所述图形绘制单元执行顶点预处理操作,并将预处理后的顶点转发给可编程着色阵列,可编程着色阵列完成顶点着色操作后将顶点转发给图形绘制单元,图形绘制单元完成各种几何处理操作,包括图元组装、裁剪操作、视窗变换、光栅化操作,最终产生初级像素,将初级像素转发给可编程着色阵列。
4.根据权利要求3所述的外视频做纹理系统,其特征在于:所述初级像素包括屏幕坐标,颜色,纹理坐标。
5.根据权利要求3所述的外视频做纹理系统,其特征在于:所述外视频帧地址锁存单元根据绑定纹理对象应用编程接口所携带的纹理对象编号决定是否锁存外视频捕捉单元的外视频显示帧地址,当纹理对象编号代表所绑定的纹理对象是外视频源,则锁存外视频的显示帧地址,并将锁存地址输出给纹理引擎,外视频捕捉单元的解码逻辑避开被纹理引擎锁定的帧地址,向外视频的其余帧地址空间中写入新解码的视频图像数据。
6.根据权利要求5所述的外视频做纹理系统,其特征在于:所述可编程着色阵列同时执行顶点着色操作和像素着色操作,在执行像素着色操作期间,需将纹理请求转发给纹理引擎完成纹理贴图操作,纹理引擎完成纹理贴图操作后,将纹素数据返回给可编程着色阵列,可编程着色阵列接着完成后续像素着色操作,将最终产生的像素数据输出到光栅操作单元。
7.根据权利要求6所述的外视频做纹理系统,其特征在于:所述纹理引擎依据可编程着色阵列输入的纹理请求,应用编程接口解析单元输入的纹理参数,外视频帧地址锁存单元输入的锁存地址访问GPU外部存储器中的外视频存储区域获取纹素数据,对纹素数据执行格式转换操作和过滤操作后输出给可编程着色阵列。
CN202011404097.4A 2020-12-05 2020-12-05 一种外视频做纹理系统 Active CN112581575B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011404097.4A CN112581575B (zh) 2020-12-05 2020-12-05 一种外视频做纹理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011404097.4A CN112581575B (zh) 2020-12-05 2020-12-05 一种外视频做纹理系统

Publications (2)

Publication Number Publication Date
CN112581575A true CN112581575A (zh) 2021-03-30
CN112581575B CN112581575B (zh) 2024-05-03

Family

ID=75127120

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011404097.4A Active CN112581575B (zh) 2020-12-05 2020-12-05 一种外视频做纹理系统

Country Status (1)

Country Link
CN (1) CN112581575B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023016014A1 (zh) * 2021-08-12 2023-02-16 荣耀终端有限公司 视频编辑方法和电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080024510A1 (en) * 2006-07-27 2008-01-31 Via Technologies, Inc. Texture engine, graphics processing unit and video processing method thereof
CN102047315A (zh) * 2008-05-30 2011-05-04 先进微装置公司 可扩展及整合的计算系统
CN105630441A (zh) * 2015-12-11 2016-06-01 中国航空工业集团公司西安航空计算技术研究所 一种基于统一染色技术的gpu体系架构
CN106534880A (zh) * 2016-11-28 2017-03-22 深圳Tcl数字技术有限公司 视频合成方法及装置
CN110992240A (zh) * 2019-11-18 2020-04-10 中国航空工业集团公司西安航空计算技术研究所 一种可编程纹理处理器系统
CN111242832A (zh) * 2019-12-31 2020-06-05 西安翔腾微电子科技有限公司 基于SystemC的GPU纹理贴图周期精确联合仿真模型及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080024510A1 (en) * 2006-07-27 2008-01-31 Via Technologies, Inc. Texture engine, graphics processing unit and video processing method thereof
CN102047315A (zh) * 2008-05-30 2011-05-04 先进微装置公司 可扩展及整合的计算系统
CN105630441A (zh) * 2015-12-11 2016-06-01 中国航空工业集团公司西安航空计算技术研究所 一种基于统一染色技术的gpu体系架构
CN106534880A (zh) * 2016-11-28 2017-03-22 深圳Tcl数字技术有限公司 视频合成方法及装置
CN110992240A (zh) * 2019-11-18 2020-04-10 中国航空工业集团公司西安航空计算技术研究所 一种可编程纹理处理器系统
CN111242832A (zh) * 2019-12-31 2020-06-05 西安翔腾微电子科技有限公司 基于SystemC的GPU纹理贴图周期精确联合仿真模型及方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
YUICHI TAGUCHI .ETAL: "TransCAIP: A Live 3D TV System Using a Camera Array and an Integral Photography Display with Interactive Control of Viewing Parameters", IEEE, vol. 15, no. 5, pages 841 - 852, XP011251821 *
任向隆 等: "面向 OpenGL 2.0 的图形处理器图像处理单元体系结构", 计算机辅助设计与图形学学报, vol. 31, no. 10 *
韩立敏 等: "多模式并行处理纹理引擎硬件体系结构设计", 无线电工程, no. 6 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023016014A1 (zh) * 2021-08-12 2023-02-16 荣耀终端有限公司 视频编辑方法和电子设备

Also Published As

Publication number Publication date
CN112581575B (zh) 2024-05-03

Similar Documents

Publication Publication Date Title
US20230033306A1 (en) Image rendering method and apparatus, computer device, and storage medium
US10719447B2 (en) Cache and compression interoperability in a graphics processor pipeline
US10008034B2 (en) System, method, and computer program product for computing indirect lighting in a cloud network
CN105630441B (zh) 一种基于统一染色技术的gpu系统
US20200043220A1 (en) Point cloud operations
US10796478B2 (en) Dynamic rendering for foveated rendering
KR102572583B1 (ko) 멀티 코어 컴퓨팅 아키텍처에서 그래픽 작업부하를 가속화하기 위한 메커니즘
EP2946364B1 (en) Rendering graphics data using visibility information
US9928637B1 (en) Managing rendering targets for graphics processing units
US20180061122A1 (en) Multi-resolution deferred shading using texel shaders in computing environments
US20110221743A1 (en) Method And System For Controlling A 3D Processor Using A Control List In Memory
TWI733808B (zh) 用於虛擬實境和多視角系統之交錯光柵化和像素著色的架構
CN108475440B (zh) 用于在计算装置处高效处理图形数据的光线压缩
US10403024B2 (en) Optimizing for rendering with clear color
US20220036632A1 (en) Post-processing in a memory-system efficient manner
EP3580726B1 (en) Buffer index format and compression
US20170263040A1 (en) Hybrid mechanism for efficient rendering of graphics images in computing environments
DE102019117495A1 (de) System und verfahren zur 3d-blob-klassifizierung und -übertragung
CN111080505B (zh) 一种提高图元装配效率的方法、装置及计算机存储介质
US9959590B2 (en) System and method of caching for pixel synchronization-based graphics techniques
US20220058872A1 (en) Compressed geometry rendering and streaming
CN112581575A (zh) 一种外视频做纹理系统
WO2023051590A1 (zh) 一种渲染格式选择方法及其相关设备
US20220245751A1 (en) Graphics processing systems
US20230196624A1 (en) Data processing systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant