CN108133453A - 一种基于OpenGL的图像处理器及其功能扩展方法 - Google Patents
一种基于OpenGL的图像处理器及其功能扩展方法 Download PDFInfo
- Publication number
- CN108133453A CN108133453A CN201711330735.0A CN201711330735A CN108133453A CN 108133453 A CN108133453 A CN 108133453A CN 201711330735 A CN201711330735 A CN 201711330735A CN 108133453 A CN108133453 A CN 108133453A
- Authority
- CN
- China
- Prior art keywords
- renderer
- image
- rendered
- buffer memory
- opengl
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Image Generation (AREA)
Abstract
本发明公开了一种基于OpenGL的图像处理器的功能扩展方法、基于OpenGL的图像处理器、电子设备和计算机可读存储介质。该方法包括：在基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器；令第一渲染器和第二渲染器共享渲染上下文；对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。这样，不需要进行图像渲染器的重新开发，实现新功能的扩展，省时省力，有利于提高功能扩展的效率。
Description
技术领域
本发明涉及计算机技术领域，具体涉及一种基于OpenGL的图像处理器的功能扩展方法、基于OpenGL的图像处理器、电子设备和计算机可读存储介质。
背景技术
OpenGL(Open Graphics Library)是指定义了一个跨编程语言、跨平台的编程接口规格的专业的图形程序接口，它用于二维或者三维图像，是一个功能强大，调用方便的底层图形库。在实际应用中，很多图像处理器都应用了OpenGL进行图像的渲染处理。随着用户对图像渲染处理的需求的不断增多，具有单一图像渲染功能的图像处理器已经无法满足用户的需求，因此，需要为图像处理器进行功能的扩展，在进行功能扩展时，由于有些功能需要独立执行，侵入性比较强，例如3D渲染功能，需要对整个图像处理渲染功能进行重新开发才能实现新扩展的功能。也就是说，每扩展一个新功能，都需要重新开发一次图像渲染器，这样就使得图形处理器的功能的扩展耗时耗力，影响功能扩展的效率。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的基于OpenGL的图像处理器的功能扩展方法、基于OpenGL的图像处理器、电子设备和计算机可读存储介质。
根据本发明的一个方面，提供了一种基于OpenGL的图像处理器的功能扩展方法，其中，该方法包括：
在所述基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器；
令第一渲染器和第二渲染器共享渲染上下文；
对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
可选地，所述令第一渲染器和第二渲染器共享渲染上下文包括：
构造所述第一渲染器和第二渲染器共享的OpenGL Context。
可选地，
所述第二渲染器的功能是为图像增加三维图像元素。
可选地，所述将经过第二渲染器渲染的图像输出给第一渲染器包括：
将经过第二渲染器渲染的图像输出到共享缓存中；
由第一渲染器从所述共享缓存中读取经过第二渲染器渲染的图像。
可选地，该方法进一步包括：
在所述共享缓存的访问接口处设置同步机制，使得第一渲染器和第二渲染器对同一图像的渲染结果图像被合并处理。
可选地，所述同步机制包括：
将经过第二渲染器渲染的图像输出到共享缓存之前，判断上一次输出到共享缓存中的图像是否已被第一渲染器读取，是则将经过第二渲染器渲染的图像输出到共享缓存并覆盖之前的图像，否则进行等待；
第一渲染器从所述共享缓存中读取经过第二渲染器渲染的图像之前，判断共享缓存中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
根据本发明的另一方面，提供了一种基于OpenGL的图像处理器，其中，该图像处理器包括：第一渲染器和实现图像处理扩展功能的第二渲染器；
第一渲染器和第二渲染器共享渲染上下文；
对于一个待渲染的指定图像：第一渲染器和第二渲染器分别接收该指定图像；第二渲染器对该指定图像进行渲染后输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
可选地，
所述第一渲染器和第二渲染器通过共享的OpenGL Context，共享渲染上下文。
可选地，
所述第二渲染器的功能是为图像增加三维图像元素。
可选地，该图像处理器进一步包括：共享缓存单元；
第二渲染器对指定图像进行渲染后输出到共享缓存单元中；
第一渲染器从所述共享缓存单元中读取经过第二渲染器渲染的图像。
可选地，
在所述共享缓存单元的访问接口处设置有同步机制，使得第一渲染器和第二渲染器对同一图像的渲染结果图像被合并处理。
可选地，
第二渲染器将渲染后的图像输出到共享缓存单元之前，判断上一次输出到共享缓存单元中的图像是否已被第一渲染器读取，是则将渲染的图像输出到共享缓存单元中并覆盖之前的图像，否则进行等待；
第一渲染器从所述共享缓存单元中读取经过第二渲染器渲染的图像之前，判断共享缓存单元中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
根据本发明的又一方面，提供了一种电子设备，其中，该电子设备包括：
处理器；以及
存储计算机可执行指令的存储器；所述可执行指令在被执行时使所述处理器执行根据前述的方法。
根据本发明的再一方面，提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现前述的方法。
根据本发明的技术方案，在基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器；令第一渲染器和第二渲染器共享渲染上下文；对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。这样，不需要进行图像渲染器的重新开发，增加实现扩展功能的第二渲染器，利用第一渲染器和第二渲染器共享渲染上下文的方式，将扩展的功能添加至图像处理器中，实现新功能的扩展，省时省力，有利于提高功能扩展的效率。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了根据本发明一个实施例的基于OpenGL的图像处理器的功能扩展方法的流程示意图；
图2示出了根据本发明另一个实施例的基于OpenGL的图像处理器的功能扩展方法的流程示意图；
图3示出了根据本发明一个实施例的基于OpenGL的图像处理器的结构示意图；
图4示出了根据本发明一个实施例的电子设备的结构示意图；
图5示出了根据本发明一个实施例的计算机可读存储介质的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的基于OpenGL的图像处理器的功能扩展方法的流程示意图。如图1所示，该方法包括：
步骤S110，在基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器。
在本实施例中，第一渲染器则是图像处理器中实现原有功能的渲染器，在图像处理器中进行功能扩展时，可以直接在原有的第一渲染器的基础上增加用于实现图像处理扩展功能的第二渲染器。
步骤S120，令第一渲染器和第二渲染器共享渲染上下文。
OpenGL的每种功能实现，都会有个方法，来创建渲染图形的上下文，从而可以管理OpenGL指定的状态。通过放置这些状态到上下文中，这样在多线程的情况下，就很容易的共享图像的硬件设备，从而互不影响各自的状态。这里的上下文，可以理解为一个OpenGL和当前图形系统交互的一个资源对象。
在第一渲染器和第二渲染器在对图像进行处理时，为了实现各自的功能，需要各自开启一个线程进行操作，但是如果创建两个独立的渲染线程，无法将渲染的效果同时显示在同一图像中，这时就需要使用OpenGL的共享渲染上下文的方案，即共享渲染环境，可以在两个线程中共享同一渲染资源。
步骤S130，对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
在本实施例中，当第一渲染器和第二渲染器分别对带渲染的指定图像进行渲染处理后，第一渲染器会将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出，这样，经过两个渲染器渲染后的效果就可以同时显示在同一图像中，在原有的图像处理器的功能基础上实现了图像处理扩展功能，且第一渲染器和第二渲染器之间处于低耦合的状态。
可见，通过本实施例，不需要进行图像渲染器的重新开发，增加实现扩展功能的第二渲染器，利用第一渲染器和第二渲染器共享渲染上下文的方式，将扩展的功能添加至图像处理器中，实现新功能的扩展，省时省力，有利于提高功能扩展的效率。且该第二渲染器经过首次开发后还可以多次利用，即当其他应用也需要扩展该功能时，也可以采用本方案进行扩展，具有普适性。
在本发明的一个实施例中，步骤S120中的令第一渲染器和第二渲染器共享渲染上下文包括：构造第一渲染器和第二渲染器共享的OpenGL Context。
这里为了实现第一渲染器和第二渲染器共享渲染上下文，需要构造两者共享的OpenGL Context。OpenGL Context封装了用于OpenGL渲染的场景。例如，在Android系统中，为了实现渲染上下文共享，需要在图像处理时调用eglCreateContext的时候将上一个已经创建好的Context传入即可。
在本发明的一个实施例中，上述的第二渲染器的功能是为图像增加三维图像元素。
在本实施例中，扩展功能可以是为图像增加三维图像元素。例如，当本实施例应用在具有相机功能的应用中时，原有的图像渲染功能是进行磨皮等处理效果的功能，为了满足用户的图像处理需求，需要增加3D图像处理，即给图像增加三维图像元素，来进一步增加用户的使用体验。
在一个例子中，用户使用花椒直播应用时，需要对摄像头采集的视频流中的人物图像进行磨皮处理，以及需要对视频流中的人物图像增加具有3D效果的南瓜头，这样视频中的人物在左右摆动的时候，增加的南瓜头可以从不同角度呈现出来，增加图像的真实性和趣味性。这时，就可以使用上述的技术方案，在原有花椒直播应用的磨皮功能的基础上扩展为图像增加三维图像元素的功能，开发过程较短，省时省力，可是使用户在短时间内就应用到该功能，增强用户的使用体验。
在本发明的一个实施例中，步骤S130中的将经过第二渲染器渲染的图像输出给第一渲染器包括：将经过第二渲染器渲染的图像输出到共享缓存中；由第一渲染器从共享缓存中读取经过第二渲染器渲染的图像。
在本实施例中，为了使得第一渲染器和第二渲染器之间的操作不相互影响，当第二渲染器将图像渲染好后，将渲染好的图像输出带共享缓存中，第一渲染器可以从共享缓存中读取经过第二渲染器渲染的图像，然后在由第一渲染器进行合并即可。
这里的共享缓存可以是OpenGL Texture(纹理)或者OpenGL Framebuffer，当第二渲染器渲染图像后，将渲染后的图像全部复制后，粘贴至共享缓存中，以便第一渲染器从共享缓存中复制经过第二渲染器渲染的图像。
进一步地，上述的方法进一步包括：在共享缓存的访问接口处设置同步机制，使得第一渲染器和第二渲染器对同一图像的渲染结果图像被合并处理。
上述实施例中，设置了共享缓存，以使得第一渲染器从共享缓存中读取经过第二渲染器渲染的图像，但是第一渲染器和第二渲染器的处理过程并非是严格同步的，例如，第一渲染器处理一张图像可能需要10ms，而第二渲染器处理一张图像可能需要20ms，但是不排除会出现第一渲染处理器合并后的图像显示的效果并非是第一渲染器和第二渲染器对同一图像的渲染结果，有可能是第一渲染器对第10帧图像的处理效果叠加了第二渲染器对第9帧的渲染效果。
因此，在本实施例中，为了保证第一渲染器合并后的图像是第一渲染器和第二渲染器对同一图像的渲染结果，在在共享缓存的访问接口处设置同步机制。
具体地，上述的同步机制包括：将经过第二渲染器渲染的图像输出到共享缓存之前，判断上一次输出到共享缓存中的图像是否已被第一渲染器读取，是则将经过第二渲染器渲染的图像输出到共享缓存并覆盖之前的图像，否则进行等待；第一渲染器从共享缓存中读取经过第二渲染器渲染的图像之前，判断共享缓存中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
这里的同步机制，可以保证合并后的图像是经过第一渲染器渲染和第二渲染器对该图像渲染的渲染结果的合并，防止出现非同一图像渲染结果的合并，例如，同步障机制。在本实施例的同步机制中，不管是第一渲染器从共享缓存中读取经过第二渲染器渲染的图像之前，还是第二渲染器将渲染的图像输出到共享缓存之前，都需要进行一次判断，以保证第一渲染器读取的，以及第二渲染器输出的均是对同一图像的渲染结果。
图2示出了根据本发明另一个实施例的基于OpenGL的图像处理器的功能扩展方法的流程示意图。如图2所示，对于一个待渲染的图像A，构造共享上下文的第一OpenGLContext和第二OpenGL Context，第一渲染器在第一OpenGL Context中对该待渲染的图像进行渲染，第二渲染器在第二OpenGL Context种对该待渲染的图像进行渲染；第二渲染器将渲染后的图像A输出到共享缓存中，第一渲染器将图像A渲染后，从共享缓存中读取经过第二渲染器渲染的图像A，然后将自身渲染后的图像A和经过第二渲染器渲染的图像A进行合并处理后输出进行显示；对于下一个待渲染的图像B，因为在共享缓存的接口处设置同步障(因为同步障是一个机制，这里用虚线表示)，第二渲染器将渲染后的图像B输出到共享缓存之前，判断上一次输出的渲染后的图像A是否被第一渲染器读取，若判断为是，则将渲染后的图像B输出至共享缓存中，并覆盖图像A；否则等待，直到第一渲染器将图像A读取。第一渲染器渲染图像B后，从共享缓存中读取经过第二渲染器渲染的图像B之前，先判断共享缓存中的图像是否是图像A，若不是，则读取该图像B，若是，则等到，直到共享缓存中的图像是渲染后的图像B，第一渲染器读取经过渲染后的图像B后，将自身渲染后的图像B和经过第二渲染器渲染的图像B进行合并处理后输出进行显示。
图3示出了根据本发明一个实施例的基于OpenGL的图像处理器的结构示意图。如图3所示，该图像处理器300包括：第一渲染器310和实现图像处理扩展功能的第二渲染器320。
在本实施例中，第一渲染器则是图像处理器中实现原有功能的渲染器，在图像处理器中进行功能扩展时，可以直接在原有的第一渲染器的基础上增加用于实现图像处理扩展功能的第二渲染器。
第一渲染310器和第二渲染器320共享渲染上下文。
OpenGL的每种功能实现，都会有个方法，来创建渲染图形的上下文，从而可以管理OpenGL指定的状态。通过放置这些状态到上下文中，这样在多线程的情况下，就很容易的共享图像的硬件设备，从而互不影响各自的状态。这里的上下文，可以理解为一个OpenGL和当前图形系统交互的一个资源对象。
在第一渲染器和第二渲染器在对图像进行处理时，为了实现各自的功能，需要各自开启一个线程进行操作，但是如果创建两个独立的渲染线程，无法将渲染的效果同时显示在同一图像中，这时就需要使用OpenGL的共享渲染上下文的方案，即共享渲染环境，可以在两个线程中共享同一渲染资源。
对于一个待渲染的指定图像：第一渲染器310和第二渲染器320分别接收该指定图像；第二渲染器320对该指定图像进行渲染后输出给第一渲染器310；第一渲染器310将自身渲染后的图像和经过第二渲染器320渲染的图像进行合并处理后输出。
在本实施例中，当第一渲染器和第二渲染器分别对带渲染的指定图像进行渲染处理后，第一渲染器会将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出，这样，经过两个渲染器渲染后的效果就可以同时显示在同一图像中，在原有的图像处理器的功能基础上实现了图像处理扩展功能，且第一渲染器和第二渲染器之间处于低耦合的状态。
可见，通过本实施例，不需要进行图像渲染器的重新开发，增加实现扩展功能的第二渲染器，利用第一渲染器和第二渲染器共享渲染上下文的方式，将扩展的功能添加至图像处理器中，实现新功能的扩展，省时省力，有利于提高功能扩展的效率。且该第二渲染器经过首次开发后还可以多次利用，即当其他应用也需要扩展该功能时，也可以采用本方案进行扩展，具有普适性。
在本发明的一个实施例中，第一渲染器310和第二渲染器320通过共享的OpenGLContext，共享渲染上下文。
这里为了实现第一渲染器和第二渲染器共享渲染上下文，需要构造两者共享的OpenGL Context。OpenGL Context封装了用于OpenGL渲染的场景。例如，在Android系统中，为了实现渲染上下文共享，需要在图像处理时调用eglCreateContext的时候将上一个已经创建好的Context传入即可。
在本发明的一个实施例中，第二渲染器320的功能是为图像增加三维图像元素。
在本实施例中，扩展功能可以是为图像增加三维图像元素。例如，当本实施例应用在具有相机功能的应用中时，原有的图像渲染功能是进行磨皮等处理效果的功能，为了满足用户的图像处理需求，需要增加3D图像处理，即给图像增加三维图像元素，来进一步增加用户的使用体验。
在一个例子中，用户使用花椒直播应用时，需要对摄像头采集的视频流中的人物图像进行磨皮处理，以及需要对视频流中的人物图像增加具有3D效果的南瓜头，这样视频中的人物在左右摆动的时候，增加的南瓜头可以从不同角度呈现出来，增加图像的真实性和趣味性。这时，就可以使用上述的技术方案，在原有花椒直播应用的磨皮功能的基础上扩展为图像增加三维图像元素的功能，开发过程较短，省时省力，可是使用户在短时间内就应用到该功能，增强用户的使用体验。
在本发明的一个实施例中，图3所示的图像处理器300进一步包括：共享缓存单元。
第二渲染器320对指定图像进行渲染后输出到共享缓存单元中；第一渲染器310从共享缓存单元中读取经过第二渲染器渲染的图像。
在本实施例中，为了使得第一渲染器和第二渲染器之间的操作不相互影响，当第二渲染器将图像渲染好后，将渲染好的图像输出带共享缓存中，第一渲染器可以从共享缓存中读取经过第二渲染器渲染的图像，然后在由第一渲染器进行合并即可。
这里的共享缓存也可以是OpenGL Texture(纹理)或者OpenGL Framebuffer，当第二渲染器渲染图像后，将渲染后的图像全部复制后，粘贴至共享缓存中，以便第一渲染器从共享缓存中复制经过第二渲染器渲染的图像。
进一步地，在共享缓存单元的访问接口处设置有同步机制，使得第一渲染器310和第二渲染器320对同一图像的渲染结果图像被合并处理。
上述实施例中，设置了共享缓存，以使得第一渲染器从共享缓存中读取经过第二渲染器渲染的图像，但是第一渲染器和第二渲染器的处理过程并非是严格同步的，例如，第一渲染器处理一张图像可能需要10ms，而第二渲染器处理一张图像可能需要20ms，但是不排除会出现第一渲染处理器合并后的图像显示的效果并非是第一渲染器和第二渲染器对同一图像的渲染结果，有可能是第一渲染器对第10帧图像的处理效果叠加了第二渲染器对第9帧的渲染效果。
因此，在本实施例中，为了保证第一渲染器合并后的图像是第一渲染器和第二渲染器对同一图像的渲染结果，在在共享缓存的访问接口处设置同步机制。
具体地，第二渲染器将渲染后的图像输出到共享缓存单元之前，判断上一次输出到共享缓存单元中的图像是否已被第一渲染器读取，是则将渲染的图像输出到共享缓存单元中并覆盖之前的图像，否则进行等待；
第一渲染器从共享缓存单元中读取经过第二渲染器渲染的图像之前，判断共享缓存单元中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
这里的同步机制，可以保证合并后的图像是经过第一渲染器渲染和第二渲染器对该图像渲染的渲染结果的合并，防止出现非同一图像渲染结果的合并，例如，同步障机制。在本实施例的同步机制中，不管是第一渲染器从共享缓存中读取经过第二渲染器渲染的图像之前，还是第二渲染器将渲染的图像输出到共享缓存之前，都需要进行一次判断，以保证第一渲染器读取的，以及第二渲染器输出的均是对同一图像的渲染结果。
本发明还提供了一种电子设备，其中，该电子设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，可执行指令在被执行时使处理器执行根据图1所示的及其各实施例中的应用开启画面的处理方法。
图4示出了根据本发明一个实施例的电子设备的功能结构示意图。如图4所示，该电子设备400包括：
处理器410；以及被安排成存储计算机可执行指令(程序代码)的存储器420，在存储器420中，有存储程序代码的存储空间430，用于执行根据本发明的方法步骤的程序代码440存储在存储空间430中，该程序代码在被执行时使处理器410执行根据图1所示的及其各实施例中的应用开启画面的处理方法。
图5示出了根据本发明一个实施例的一种计算机可读存储介质的结构示意图。如图5所示，该计算机可读存储介质500存储一个或多个程序(程序代码)510，一个或多个程序(程序代码)510当被处理器执行时，实现图1所示的及其各实施例中的应用开启画面的处理方法。
需要说明的是，图4所示的电子设备和图5所示的计算机可读存储介质的各实施例与图1所示的方法的各实施例对应相同，上文已有详细说明，在此不再赘述。
综上所述，根据本发明的技术方案，在基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器；令第一渲染器和第二渲染器共享渲染上下文；对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。这样，不需要进行图像渲染器的重新开发，增加实现扩展功能的第二渲染器，利用第一渲染器和第二渲染器共享渲染上下文的方式，将扩展的功能添加至图像处理器中，实现新功能的扩展，省时省力，有利于提高功能扩展的效率。
需要说明的是：
在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述，构造这类装置所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的基于OpenGL的图像处理器、电子设备和计算机可读存储介质中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
例如，图4示出了根据本发明一个实施例的电子设备的结构示意图。该电子设备400传统上包括处理器410和被安排成存储计算机可执行指令(程序代码)的存储器420。存储器420可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。存储器420具有存储用于执行图1所示的以及各实施例中的任何方法步骤的程序代码440的存储空间430。例如，用于程序代码的存储空间430可以包括分别用于实现上面的方法中的各种步骤的各个程序代码440。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。这些计算机程序产品包括诸如硬盘，紧致盘(CD)、存储卡或者软盘之类的程序代码载体。这样的计算机程序产品通常为例如图5所述的计算机可读存储介质500。该计算机可读存储介质500可以具有与图4的电子设备中的存储器420类似布置的存储段、存储空间等。程序代码可以例如以适当形式进行压缩。通常，存储单元存储有用于执行根据本发明的方法步骤的程序代码510，即可以由诸如410之类的处理器读取的程序代码，当这些程序代码由电子设备运行时，导致该电子设备执行上面所描述的方法中的各个步骤。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明公开了A1、一种基于OpenGL的图像处理器的功能扩展方法，其中，该方法包括：
在所述基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器；
令第一渲染器和第二渲染器共享渲染上下文；
对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
A2、如A1所述的方法，其中，所述令第一渲染器和第二渲染器共享渲染上下文包括：
构造所述第一渲染器和第二渲染器共享的OpenGL Context。
A3、如A1所述的方法，其中，
所述第二渲染器的功能是为图像增加三维图像元素。
A4、如A1所述的方法，其中，所述将经过第二渲染器渲染的图像输出给第一渲染器包括：
将经过第二渲染器渲染的图像输出到共享缓存中；
由第一渲染器从所述共享缓存中读取经过第二渲染器渲染的图像。
A5、如A4所述的方法，其中，该方法进一步包括：
在所述共享缓存的访问接口处设置同步机制，使得第一渲染器和第二渲染器对同一图像的渲染结果图像被合并处理。
A6、如A5所述的方法，其中，所述同步机制包括：
将经过第二渲染器渲染的图像输出到共享缓存之前，判断上一次输出到共享缓存中的图像是否已被第一渲染器读取，是则将经过第二渲染器渲染的图像输出到共享缓存并覆盖之前的图像，否则进行等待；
第一渲染器从所述共享缓存中读取经过第二渲染器渲染的图像之前，判断共享缓存中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
本发明还公开了B7、一种基于OpenGL的图像处理器，其中，该图像处理器包括：第一渲染器和实现图像处理扩展功能的第二渲染器；
第一渲染器和第二渲染器共享渲染上下文；
对于一个待渲染的指定图像：第一渲染器和第二渲染器分别接收该指定图像；第二渲染器对该指定图像进行渲染后输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
B8、如B7所述的图像处理器，其中，
所述第一渲染器和第二渲染器通过共享的OpenGL Context，共享渲染上下文。
B9、如B7所述的图像处理器，其中，
所述第二渲染器的功能是为图像增加三维图像元素。
B10、如B7所述的图像处理器，其中，该图像处理器进一步包括：共享缓存单元；
第二渲染器对指定图像进行渲染后输出到共享缓存单元中；
第一渲染器从所述共享缓存单元中读取经过第二渲染器渲染的图像。
B11、如B10所述的图像处理器，其中，
在所述共享缓存单元的访问接口处设置有同步机制，使得第一渲染器和第二渲染器对同一图像的渲染结果图像被合并处理。
B12、如B11所述的图像处理器，其中，
第二渲染器将渲染后的图像输出到共享缓存单元之前，判断上一次输出到共享缓存单元中的图像是否已被第一渲染器读取，是则将渲染的图像输出到共享缓存单元中并覆盖之前的图像，否则进行等待；
第一渲染器从所述共享缓存单元中读取经过第二渲染器渲染的图像之前，判断共享缓存单元中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
本发明还公开了C13、一种电子设备，其中，该电子设备包括：
处理器；以及
存储计算机可执行指令的存储器；所述可执行指令在被执行时使所述处理器执行根据A1～A6中任一项所述的方法。
本发明还公开了D14、一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现A1～A6中任一项所述的方法。
Claims (10)
1.一种基于OpenGL的图像处理器的功能扩展方法，其中，该方法包括：
在所述基于OpenGL的图像处理器原有的第一渲染器的基础上增加实现图像处理扩展功能的第二渲染器；
令第一渲染器和第二渲染器共享渲染上下文；
对于一个待渲染的指定图像：将该指定图像分别输入到第一渲染器和第二渲染器；将经过第二渲染器渲染的图像输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
2.如权利要求1所述的方法，其中，所述令第一渲染器和第二渲染器共享渲染上下文包括：
构造所述第一渲染器和第二渲染器共享的OpenGL Context。
3.如权利要求1所述的方法，其中，
所述第二渲染器的功能是为图像增加三维图像元素。
4.如权利要求1所述的方法，其中，所述将经过第二渲染器渲染的图像输出给第一渲染器包括：
将经过第二渲染器渲染的图像输出到共享缓存中；
由第一渲染器从所述共享缓存中读取经过第二渲染器渲染的图像。
5.如权利要求4所述的方法，其中，该方法进一步包括：
在所述共享缓存的访问接口处设置同步机制，使得第一渲染器和第二渲染器对同一图像的渲染结果图像被合并处理。
6.如权利要求5所述的方法，其中，所述同步机制包括：
将经过第二渲染器渲染的图像输出到共享缓存之前，判断上一次输出到共享缓存中的图像是否已被第一渲染器读取，是则将经过第二渲染器渲染的图像输出到共享缓存并覆盖之前的图像，否则进行等待；
第一渲染器从所述共享缓存中读取经过第二渲染器渲染的图像之前，判断共享缓存中的图像是否为上一次读取的图像，是则等待，否则读取该图像。
7.一种基于OpenGL的图像处理器，其中，该图像处理器包括：第一渲染器和实现图像处理扩展功能的第二渲染器；
第一渲染器和第二渲染器共享渲染上下文；
对于一个待渲染的指定图像：第一渲染器和第二渲染器分别接收该指定图像；第二渲染器对该指定图像进行渲染后输出给第一渲染器；第一渲染器将自身渲染后的图像和经过第二渲染器渲染的图像进行合并处理后输出。
8.如权利要求7所述的图像处理器，其中，
所述第一渲染器和第二渲染器通过共享的OpenGL Context，共享渲染上下文。
9.一种电子设备，其中，该电子设备包括：
处理器；以及
存储计算机可执行指令的存储器；所述可执行指令在被执行时使所述处理器执行根据权利要求1～6中任一项所述的方法。
10.一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现权利要求1～6中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711330735.0A CN108133453A (zh) | 2017-12-13 | 2017-12-13 | 一种基于OpenGL的图像处理器及其功能扩展方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711330735.0A CN108133453A (zh) | 2017-12-13 | 2017-12-13 | 一种基于OpenGL的图像处理器及其功能扩展方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108133453A true CN108133453A (zh) | 2018-06-08 |
Family
ID=62390363
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711330735.0A Pending CN108133453A (zh) | 2017-12-13 | 2017-12-13 | 一种基于OpenGL的图像处理器及其功能扩展方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108133453A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110796722A (zh) * | 2019-11-01 | 2020-02-14 | 广东三维家信息科技有限公司 | 三维渲染呈现方法及装置 |
| CN113360708A (zh) * | 2021-05-31 | 2021-09-07 | 北京达佳互联信息技术有限公司 | 视频播放方法、装置、电子设备及存储介质 |
| WO2021237736A1 (zh) * | 2020-05-29 | 2021-12-02 | 深圳市大疆创新科技有限公司 | 图像处理方法、装置和系统，计算机可读存储介质 |
| CN113838180A (zh) * | 2020-06-24 | 2021-12-24 | 华为技术有限公司 | 一种渲染指令处理方法及其相关设备 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101198988A (zh) * | 2005-05-27 | 2008-06-11 | Ati技术公司 | 在多个视频处理单元（vpu）的系统中的帧同步 |
| CN101918921A (zh) * | 2008-01-27 | 2010-12-15 | 思杰系统有限公司 | 用于远程提供三维图形的方法和系统 |
| CN102651142A (zh) * | 2012-04-16 | 2012-08-29 | 深圳超多维光电子有限公司 | 图像渲染方法和装置 |
| CN103329094A (zh) * | 2010-10-01 | 2013-09-25 | Flex Electronics ID Co.,Ltd. | 交叉环境重定向 |
| CN103617191A (zh) * | 2013-11-07 | 2014-03-05 | 北京奇虎科技有限公司 | 使用硬件加速实现浏览器渲染的方法和浏览器 |
| CN104091607A (zh) * | 2014-06-13 | 2014-10-08 | 北京奇艺世纪科技有限公司 | 一种基于ios设备的视频编辑方法及装置 |
| CN104424621A (zh) * | 2013-08-30 | 2015-03-18 | Arm有限公司 | 图形处理系统 |
| CN105741227A (zh) * | 2016-01-26 | 2016-07-06 | 网易（杭州）网络有限公司 | 渲染方法和装置 |
| EP3220356A1 (en) * | 2016-03-14 | 2017-09-20 | Imagination Technologies Limited | Methods and graphics processing units for determining differential data for rays of a ray bundle |
-
2017
- 2017-12-13 CN CN201711330735.0A patent/CN108133453A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101198988A (zh) * | 2005-05-27 | 2008-06-11 | Ati技术公司 | 在多个视频处理单元（vpu）的系统中的帧同步 |
| CN101918921A (zh) * | 2008-01-27 | 2010-12-15 | 思杰系统有限公司 | 用于远程提供三维图形的方法和系统 |
| CN103329094A (zh) * | 2010-10-01 | 2013-09-25 | Flex Electronics ID Co.,Ltd. | 交叉环境重定向 |
| CN102651142A (zh) * | 2012-04-16 | 2012-08-29 | 深圳超多维光电子有限公司 | 图像渲染方法和装置 |
| CN104424621A (zh) * | 2013-08-30 | 2015-03-18 | Arm有限公司 | 图形处理系统 |
| CN103617191A (zh) * | 2013-11-07 | 2014-03-05 | 北京奇虎科技有限公司 | 使用硬件加速实现浏览器渲染的方法和浏览器 |
| CN104091607A (zh) * | 2014-06-13 | 2014-10-08 | 北京奇艺世纪科技有限公司 | 一种基于ios设备的视频编辑方法及装置 |
| CN105741227A (zh) * | 2016-01-26 | 2016-07-06 | 网易（杭州）网络有限公司 | 渲染方法和装置 |
| EP3220356A1 (en) * | 2016-03-14 | 2017-09-20 | Imagination Technologies Limited | Methods and graphics processing units for determining differential data for rays of a ray bundle |
Non-Patent Citations (1)
| Title |
|---|
| （美）帕特里克•卡兹 等著: "《三维地球引擎设计》", 30 November 2017, 北京：国防工业出版社 * |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110796722A (zh) * | 2019-11-01 | 2020-02-14 | 广东三维家信息科技有限公司 | 三维渲染呈现方法及装置 |
| WO2021237736A1 (zh) * | 2020-05-29 | 2021-12-02 | 深圳市大疆创新科技有限公司 | 图像处理方法、装置和系统，计算机可读存储介质 |
| CN113838180A (zh) * | 2020-06-24 | 2021-12-24 | 华为技术有限公司 | 一种渲染指令处理方法及其相关设备 |
| CN113360708A (zh) * | 2021-05-31 | 2021-09-07 | 北京达佳互联信息技术有限公司 | 视频播放方法、装置、电子设备及存储介质 |
| CN113360708B (zh) * | 2021-05-31 | 2024-05-10 | 北京达佳互联信息技术有限公司 | 视频播放方法、装置、电子设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108133453A (zh) | 一种基于OpenGL的图像处理器及其功能扩展方法 | |
| CN105528207B (zh) | 一种虚拟现实系统及其中显示安卓应用图像的方法和装置 | |
| CN106997610B (zh) | 一种图像渲染方法、装置及电子设备 | |
| CN103617027B (zh) | 基于安卓系统的图像渲染引擎构建方法及系统 | |
| US11113876B2 (en) | Method for displaying a 3D scene graph on a screen | |
| US11222479B2 (en) | Object customization and accessorization in video content | |
| CN105072461B (zh) | 一种数据处理方法和装置 | |
| CN105518746B (zh) | 混合请求式图形转换表影子化 | |
| US20180167661A1 (en) | Object discovery and exploration in video content | |
| CN107315580A (zh) | 用户界面的组件处理方法、装置及设备、可读介质 | |
| US20180165876A1 (en) | Real-time exploration of video content | |
| CN104519339B (zh) | 图像处理设备和方法 | |
| CN110166810A (zh) | 视频渲染引擎切换方法、装置、设备及可读存储介质 | |
| CN111408138A (zh) | 基于游戏引擎的渲染方法、装置及电子设备 | |
| CN105303506B (zh) | 一种基于html5的数据并行处理方法及系统 | |
| CN107369188A (zh) | 图像的合成方法及装置 | |
| Eilemann et al. | Parallel rendering on hybrid multi-gpu clusters | |
| CN113168312A (zh) | 用于生成c/c++库与解释语言之间的绑定的方法，并且执行所述方法以转换三维（3d）模型 | |
| CN105844581B (zh) | 一种图像绘制方法、装置及设备 | |
| CN113076152A (zh) | 渲染方法及装置、电子设备和计算机可读存储介质 | |
| CN109558184A (zh) | 浏览器启动方法和装置 | |
| US10939175B2 (en) | Generating new video content from pre-recorded video | |
| CN104331277B (zh) | 一种可直接升级的图像素材的量产方法 | |
| CN110083231A (zh) | 一种面向安卓VR一体式头显的WebGL全景显示方法 | |
| Zábský | GeoGen-Scriptable generator of terrain height maps |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180608 |
|
| RJ01 | Rejection of invention patent application after publication |