CN107968923A - 一种图像处理方法、装置、计算设备及存储介质 - Google Patents

一种图像处理方法、装置、计算设备及存储介质 Download PDF

Info

Publication number
CN107968923A
CN107968923A CN201711239786.2A CN201711239786A CN107968923A CN 107968923 A CN107968923 A CN 107968923A CN 201711239786 A CN201711239786 A CN 201711239786A CN 107968923 A CN107968923 A CN 107968923A
Authority
CN
China
Prior art keywords
view data
data
video memory
memory
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711239786.2A
Other languages
English (en)
Inventor
梁宇轩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201711239786.2A priority Critical patent/CN107968923A/zh
Publication of CN107968923A publication Critical patent/CN107968923A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种图像处理方法、装置、计算设备及存储介质,在采集图像数据,并将采集到的图像数据存储在显存中之后,可从所述显存中提取任一图像数据,并将所述图像数据转换为BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中,之后,可将所述BGRA图像数据裁剪为BGR图像数据,并将所述BGR图像数据存储在所述显存中,最后,可将所述BGR图像数据转换为RGB图像数据,并将所述RGB图像数据存储在内存中。相比于现有技术,在本发明实施例中,对图像数据的通道转换和裁剪都是在显存中直接进行的,而不是先复制到内存,并在内存中进行的,因而能够降低内存的占用率以及CPU的负载,保证了图像数据处理的高效性以及流畅性。

Description

一种图像处理方法、装置、计算设备及存储介质
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像处理方法、装置、计算设备及存储介质。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
目前,很多终端设备,例如个人电脑、游戏机、手机、平板电脑或者照相机等,采集并存入到显存中的图像数据可为RGBA(Red-Green-Blue-Alpha,红色-绿色-蓝色-透明度)图像数据。在需要对存储到显存中的RGBA图像数据进行处理时,可直接将RGBA图像数据中的透明度参数A滤去,以得到BGR图像数据。具体地,常用的图像处理方式可为:
终端设备的CPU(Central Processing Unit,中央处理器)将显存中的RGBA图像数据复制到内存中,并按照一定顺序,遍历访问复制到内存区域的RGBA图像数据的每个像素点,以将每个像素点对应的RGBA图像数据进行通道裁剪后得到相应像素点对应的RGB(Red-Green-Blue,红色-绿色-蓝色)图像数据,之后,将得到的RGB图像数据存储在内存中。
但是,发明人发现,这种方式需要首先将图像数据存储在内存中,并通过CPU对各个像素点进行逐点访问才能实现,因而可能会存在由于对终端设备的内存空间占用较大所导致的CPU的负载较重以及图像处理的效率较低的问题。
发明内容
本发明提供一种图像处理方法、装置、计算设备及存储介质,用于解决现有技术中所存在的由于对终端设备的内存空间占用较大所导致的CPU的负载较重以及图像处理的效率较低的问题。
第一方面,本发明实施例提供了一种图像处理方法,包括:
采集图像数据,并将采集到的图像数据存储在显存中;
从所述显存中提取任一图像数据,并将所述图像数据转换为蓝-绿-红-透明度BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中;
将所述BGRA图像数据裁剪为蓝-绿-红BGR图像数据,并将所述BGR图像数据存储在所述显存中;
将所述BGR图像数据转换为红-绿-蓝RGB图像数据,并将所述RGB图像数据存储在内存中。
可选地,在将所述图像数据转换为BRGA数据之前,所述图像处理方法还包括:
对所述图像数据进行缩小处理。
可选地,将所述BGRA图像数据裁剪为BGR图像数据,包括:
剪除所述BGRA图像数据中的A图像数据,以得到所述BGR图像数据。
可选地,所述图像处理方法还包括:
建立所述显存与所述内存之间的映射关系,并对所述显存进行引用计数。
第二方面,本发明实施例提供了一种图像处理装置,包括图像采集模块、图像转换模块以及图像裁剪模块,其中:
所述图像采集模块,用于采集图像数据,并将采集到的图像数据存储在显存中;
所述图像转换模块,用于从所述显存中提取任一图像数据,并将所述图像数据转换为蓝-绿-红-透明度BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中;
所述图像裁剪模块,用于将所述BGRA图像数据裁剪为蓝-绿-红BGR图像数据,并将所述BGR图像数据存储在所述显存中;
所述图像转换模块,还用于将所述BGR图像数据转换为红-绿-蓝RGB图像数据,并将所述RGB图像数据存储在内存中。
可选地,所述图像转换模块,具体用于在将所述图像数据转换为BRGA数据之前,对所述图像数据进行缩小处理。
可选地,所述图像裁剪模块,具体用于剪除所述BGRA图像数据中的A图像数据,以得到所述BGR图像数据。
进一步地,所述图像转换模块,还用于建立所述显存与所述内存之间的映射关系,并对所述显存进行引用计数。
第三方面,本发明实施例提供了一种计算设备,包括存储器和处理器,其中:
所述存储器,用于存储程序指令;
所述处理器,用于调用所述存储器中存储的程序指令,并按照获得的程序执行本发明实施例中所述的图像处理方法。
第四方面,本发明实施例还提供了一种计算机存储介质,所述计算机存储介质存储有计算机可执行指令,所述计算机可执行指令用于使所述计算机执行本发明实施例中所述的图像处理方法。
本发明有益效果如下:
本发明实施例提供了一种图像处理方法、装置及存储介质,在采集图像数据,并将采集到的图像数据存储在显存中之后,可从所述显存中提取任一图像数据,并将所述图像数据转换为BGRA图像数据,并将所述BGRA图像数据存储在所述显存中,之后,可将所述BGRA图像数据裁剪为BGR图像数据,并将所述BGR图像数据转换为RGB图像数据,最后,可将所述RGB图像数据存储在内存中。相比于现有技术,在本发明实施例中,对图像数据的通道转换和裁剪都是在显存中直接进行的,而不是先复制到内存,并在内存中进行的,因而能够降低内存的占用率以及CPU的负载,保证了图像数据处理的高效性以及流畅性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图:
图1所示为本发明实施例一中提供的图像处理方法的流程示意图;
图2所示为本发明实施例一中提供的图像数据的通道转换示意图;
图3所示为本发明实施例一中提供的图像数据的通道裁剪示意图;
图4所示为本发明实施例一中提供的图像处理方法所使用的一种可能的系统构架图;
图5所示为本发明实施例一中提供的手机的内部结构示意图;
图6所示为本发明实施例二中提供的图像处理装置的结构示意图;
图7所示为本发明实施例三中提供的计算设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
实施例一:
为了解决现有的图像处理方法所存在的由于对终端设备的内存空间占用较大所导致的CPU的负载较重以及图像处理的效率较低的问题,本发明实施例提供了一种图像处理方法,如图1所示,其为本发明实施例一中所述的图像处理方法的流程示意图。具体地,由图1可知,本发明实施例一中所述的图像处理方法可包括以下步骤:
步骤101:采集图像数据,并将采集到的图像数据存储在显存中。
其中,对图像数据的采集通常可由相应的图像采集模块(元器件、芯片等)实现,如通过终端设备的摄像头实现等;其中,所述终端设备通常可为具备图像显示和处理功能的设备,如个人电脑、平板电脑、手机、照相机或者其他设备等,本发明实施例对此不作任何限定。
需要说明的是,在本发明实施例中,采集到的图像数据的格式通常可为RGBA格式,当然,也可为其它格式,如可为BGRA(Blue-Green-Red-Alpha,蓝色-绿色-红色-透明度)格式等;此处所述的显存通常可为终端设备等的显存空间的某一个(或多个)显存子空间,本发明实施例对此不作任何限定。
步骤102:从所述显存中提取任一图像数据,并将所述图像数据转换为BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中。
其中,对图像数据的通道转换通常可通过相应图像转换模块(元器件、芯片等)实现,如GPU(Graphics Processing Unit,图形处理器)等。当然,还可通过其它图像转换模块实现,如AP(Application Processor)、CPU、MCU(Microcontroller Unit,微控制单元)等,只要能够实现图像数据的通道转换即可,本发明实施例对此不作任何限定。
可选地,从所述显存中提取任一图像数据,可包括:
实时从所述显存中提取所述图像数据;或者,
每隔设定提取时长,从所述显存中提取所述图像数据。
需要说明的是,前面所说的实时提取通常可指在终端设备等采集到图像数据时,立即进行提取的方式。所述设定提取时长可根据实际情况灵活设定,如可设置为1s(秒)、1min(分钟)或者1h(小时)等,本发明实施例对此不作任何限定。
由于通过摄像头等拍摄到的图像数据的格式通常可为RGBA,但是,终端设备中的GPU等仅能处理BGRA图像数据,因而在进行图像数据的处理时,首先需要将图像数据的格式从RGBA转换为BGRA;当然,当通过摄像头等拍摄到的图像数据的格式为BGRA图像数据时,可省略本步骤,直至执行下一步骤。
需要说明的是,由于图像中的每一个像素点可对应一个RGBA图像数据,因此,在进行图像数据的转换时,可逐像素点将一个RGBA图像转换为一个BGRA图像,具体转换方式可采用现有的方式,对此不作赘述。
具体地,可通过下述公式1将RGBA图像数据转换为BGRA图像数据:
其中,所述可称为第一系数矩阵。
例如,如图2所示,其为本发明实施例一中所述的图像数据的通道转换示意图。具体地,由图2可知,用于存储采集到的RGBA图像数据和通道转换后的BGRA图像数据的显存子空间可设置为不同,如可将存储有采集到的RGBA图像数据的显存子空间称为第一显存子空间,可将存储有通道转换后的BGRA图像数据的显存子空间称为第二显存子空间。
当然,用于存储采集到的RGBA图像数据和通道转换后的BGRA图像数据的显存子空间还可设置为相同,如采用通道转换后的BGRA图像数据直接覆盖原先的RGBA图像数据等,本发明实施例对此不作赘述。
进一步地,为了降低运算量以及提高处理效率,在将所述图像数据转换为BRGA数据之前,所述图像处理方法还可包括:
对所述图像数据进行缩小处理。
可选地,对所述图像数据进行缩小处理,可包括:
将所述图像数据的分辨率降低至设定分辨率;或者,
将所述图像数据的尺寸降低至设定尺寸。
其中,所述设定分辨率以及所述设定尺寸均可根据实际情况灵活设定,如可设置为200PPI(分辨率)、3.5cm(厘米)*3.5cm等,本发明实施例对此不作赘述。
需要说明的是,通常情况下,可按照预设的缩小倍数,对获取到的RGBA图像数据进行缩小处理,对此不作赘述。
步骤103:将所述BGRA图像数据裁剪为BGR(Blue-Green-Red,红色-绿色-蓝色)图像数据,并将所述BGR图像数据存储在所述显存中。
其中,对所述BGRA图像数据的裁剪通常可通过相应的图像裁剪模块(元器件、芯片等)实现,如DSP(Digital Signal Processor,数字信号处理器)等,本发明实施例对此不作任何限定。
具体地,将所述BGRA图像数据裁剪为BGR图像数据,可包括:
剪除所述BGRA图像数据中的A图像数据,以得到所述BGR图像数据。
需要说明的是,所述BGRA图像数据通常可包括B、G、R以及A四个通道的图像数据,在进行通道裁剪时,可直接将对应通道的图像数据设置为0,对此不作赘述。
具体地,可通常下述公式2将所述BGRA图像数据裁剪为BGR图像数据:
其中,所述可称为第二系数矩阵。
例如,如图3所示,其为本发明实施例一中所述的图像数据的通道裁剪示意图。具体地,由图3可知,对BGRA图像数据的通道裁剪可直接在所述第二显存空间中进行,裁剪之后的第四通道所占用的显存子空间可直接释放或者之后一并释放;当然,通道裁剪之后的BGR图像数据还可另外被存储在第三显存子空间中,此时,第一显存子空间和第二显存子空间可直接被释放或者之后一并释放,对此不作赘述。
步骤104:将所述BGR图像数据转换为RGB图像数据,并将所述RGB图像数据存储在内存中。
其中,对所述RGB图像的通道转换通常可通过相应的图像转换模块(元器件、芯片)实现,如GPU等。当然,还可为AP、CPU、GPU或者MCU等
可选地,将所述RGB图像数据存储在内存中,可包括:
实时将所述RGB图像数据存储在内存中;或者,
每隔设定时长,将所述RGB图像数据存储在内存中。
其中,所述设定时长可根据实际情况灵活设置,如可设置为10s(秒)、1min(分钟)或者1h(小时)等,本发明实施例对此不作任何限定。
需要说明的是,在本发明实施例中,所述图像转换模块以及所述图像裁剪模块可并行处理,对此不作赘述。
进一步地,为了保证所述显存中的图像数据不被释放丢失,所述图像处理方法还可包括:
建立所述显存与所述内存之间的映射关系,并对所述显存进行引用计数。
具体地,建立所述显存与所述内存之间的映射关系,可包括:
当所述第一显存子空间、所述第二显存子空间以及所述第三显存子空间均相同时,所述显存为第一显存子空间、第二显存子空间或者第三显存子空间;
当所述第二显存子空间和所述第三显存子空间互不相同时,所述显存为所述第三显存子空间。
其中,当建立了显存与内存之间的映射关系时,所述显存的可访问性等同于所述内存;当然,由于此处还对所述显存设置了引用计数,因而当所述显存被引用一次,则引用计数加1,每解除一次对所述显存的引用,则引用计数减1,当所述显存对应的引用计数为0时,则释放所述显存中的显存空间,例如释放第三显存子空间等;具体地,引用计数的方式可参考objective-c语言中的内存管理机制,此处不作赘述。
需要说明的是,本发明实施例中所述的图像处理方法的执行主体通常可为相应的图像处理装置,所述图像处理装置可作为一个集成装置集成在相应的终端设备(如个人电脑、平板电脑、手机、智能相机等显示设备)之内,也可作为一个独立装置独立设置在相应的终端设备之外,对此不作任何限定。
另外,在本发明实施例中,所述图像处理装置通常可包括图像采集模块、图像转换模块以及图像裁剪模块。其中,所述图像采集模块、图像转换模块以及图像裁剪模块均可在图像控制模块(即CPU、AP、MCU等)的控制下执行相应的操作,对此不作赘述。
下面,如图4所示,其为本发明实施例中所述的图像处理方法所适用的一种可能的系统构架图。其中,图4中所示的CPU41中存储有相应的计算机程序,用于在满足条件时,指示所述GPU42以及所述DSP43执行相应的操作;GPU42和DSP43中也分别存储有相应的计算机程序,GPU42执行存储在该GPU42上的计算机程序时,可以实现本发明实施例中GPU42所具有的功能,例如通道转换、存储和渲染等;DSP43执行存储在DSP43中的计算机程序时,可以实现本发明实施例中DSP43所具有的功能,例如通道裁剪等。
需要说明的是,所述系统框架中还可包括相应的输入装置47和输出装置48,用于实现终端设备与其他设备或者外界的交互;其中,所述输入装置47可为相应的摄像头,输出装置45可为相应的输出端口等。
具体地,以任意终端设备为例,假设所述图像控制模块为CPU41、所述图像采集模块为输入装置47、所述图像转换模块为GPU42、所述图像裁剪模块为DSP43为例,对本发明实施例中所述的图像处理方法进行详细地介绍:
第一步、CPU41指示输入装置47进行拍摄操作;
第二步、输入装置47采集图像数据,并将采集到的RGBA图像数据存储在终端设备的第一显存子空间中44;
第三步、CPU41在确定其自身的负载较大时(也可随时),向GPU42发送第一处理指令,以指示GPU42进行相应的通道转换处理操作;
第四步、GPU42实时监听是否接收到CPU41发送的第一处理指令,若接收到该第一处理指令,则对相应的图像数据进行通道转换,并将转换后的BGRA图像数据存储在第二显存子空间45中;
第五步、CPU41在确定需要进行图像数据裁剪时(也可随时),向DSP43发送第二处理指令,以指示DSP43进行相应的通道裁剪操作;
第六步、DSP43实时监听是否接收到CPU41发送的第二处理指令,若接收到所述CPU41发送的第二处理指令,则从所述第二显存区域获取BGRA图像数据,并将获取的BGRA图像数据裁剪为BGR图像数据,以及,将裁剪之后的BGR图像数据存储在所述第三显存子空间(图4中第二显存子空间和第三显存子空间相同)中。
需要说明的是,本步骤中可利用具有图像数据处理功能的DSP43过滤BGRA图像数据中的透明度数据,即将BGRA图像数据中的A通道数据滤除,从而得到BGR图像数据并保存。
再者,DSP43的实现方式可以为:1、用软件实现;2、在显示终端的系统中加入专用的加速处理机实现;3、利用通用的单片机实现;4、使用通用的可编程DSP43实现;5,使用专用的DSP43实现。其中,专用的DSP43可以为专门针对图像处理的达芬奇(DaVinci)技术数字信号处理器芯片,比如DM648等。
第六步、GPU42从所述第三显存子空间(也可为第二显存子空间)中获取BGR图像数据,并将所述BGR图像数据转换为RGB图像数据,以及,将所述RGB图像数据存储在所述终端设备的内存46中。
由上述内容可知,在本发明实施例中,对图像数据的通道转换和裁剪都是在显存中实现的,因而不会占用较大的内存空间;且,对图像数据的通道转换可通过相应的GPU等实现,由于GPU处理图像数据的效率远高于CPU,因而能够提高图像数据转换的效率;再者,对图像数据的裁剪可通过相应的DSP等实现,由于DSP对图像数据的处理能力远高于的CPU,因而能够使得每帧图像数据处理的效率更高,计算速度更快。
也就是说,在本发明实施例中,图像数据处理过程中的大部分运算是基于显存实现的,不会占用内存空间,能够提升内存的使用率,降低CPU的负荷;且,大部分计算处理是基于GPU和DSP实现的,CPU只需下发相应的控制指令即可,自身无需进行任何计算,因而不仅能够进一步降低CPU的负载,提升CPU的处理效率,还能充分地利用终端设备的硬件计算资源,保证图像显示的流畅性。
可选地,所述GPU与DSP可并行工作,以进一步提高图像处理的速度和效率。
由上述内容可知,本发明实施例中所述的图像处理方法可适用于具备图像处理能力的终端设备,下面,以所述终端设备为手机为例,对本发明实施例中所述的图像处理方法进行详细介绍:
例如,如图5所示,其为本发明实施例中所述的手机的内部结构示意图。由图5可知,所述手机可包括AP、摄像头、显存1、GPU、显存2、DSP、显存3以及内存,具体地,所述AP、摄像头、GPU、DSP等之间的相互交互可为:
AP在接收到用户发送(或者自动触发)的指令时,如通过按键或者触摸屏接收到用户下发的按压指令或者触摸指令时,可调用唤醒所述摄像头的程序代码或者向所述摄像头的硬件电路下发控制信号(如高低电平等),以指示所述摄像头打开;
AP在确定摄像头中所映射出的物体为待拍摄物体时,可向摄像头发送拍摄指令;
摄像头在接收到AP发送的拍摄指令时,可执行拍摄动作,并可将拍摄到的图像数据存储在显存1中;
AP在接收到用户发送(或者自动触发)的转换指令时,可唤醒GPU,如控制GPU上电,并可向GPU发送针对任意图像数据的转换信号;AP确定的待处理图像为用户选择或者程序自动默认的;
GPU在接收到AP发送的转换信号时,从所述显存1中调出图像数据,并将图像数据的转换为BGRA图像数据,以及,将转换得到的BGRA图像数据存储在显存2中;
AP在接收到用户发送(或者自动触发)的裁剪指令时,可唤醒DSP,如控制DSP上电,并可向DSP发送针对任意图像数据的裁剪信号;
DSP在接收AP发送的裁剪信号时,从所述显存2中调出所述BGRA图像数据,并将所述BGRA图像数据中的A通道数据删除,得到BGR图像数据,以实现对图像数据的通道裁剪,以及,将BGR图像数据存储在显存3中;所述显存3可与所述显存2相同或者不同;
AP在接收到用户发送(或者自动触发)的存储指令时,可向GPU发送再次转换信号;
GPU在接收到AP发送的再次转换信号时,从所述显存3中调出所述BGR图像数据,并可将所述BGR图像数据转换为RGB图像数据,以及,将RGB图像数据存储在所述内存中。
其中,显存1、显存2以及显存3可相同或者不同,对此不作赘述。
综上所述,在本发明实施例中,对手机中的图像数据的通道转换和裁剪都是在显存中直接进行的,而不是先复制到内存,并在内存中进行的,因而能够降低内存的占用率以及AP的负载;且,对图像数据的通道转换和裁剪是基于GPU和DSP实现的,而不是基于AP实现的,因而进一步降低了AP的负载,提升了AP处理逻辑的效率。
本发明实施例一提供了一种图像处理方法,在采集图像数据,并将采集到的图像数据存储在显存中之后,可从所述显存中提取任一图像数据,并将所述图像数据转换为BGRA图像数据,并将所述BGRA图像数据存储在所述显存中,之后,可将所述BGRA图像数据裁剪为BGR图像数据,并将所述BGR图像数据转换为RGB图像数据,最后,可将所述RGB图像数据存储在内存中。相比于现有技术,在本发明实施例中,对图像数据的通道转换和裁剪都是在显存中直接进行的,而不是先复制到内存,并在内存中进行的,因而能够降低内存的占用率以及CPU的负载,保证了图像数据处理的高效性以及流畅性。
实施例二:
基于与本发明实施例一相同的发明构思,本发明实施例二提供了一种图像处理装置,如图6所示,其为本发明实施例二中所述的图像处理装置的结构示意图。具体地,由图6可知,本发明实施例中所述的图像处理装置可包括图像采集模块61、图像转换模块62以及图像裁剪模块63,其中:
所述图像采集模块61,可用于采集图像数据,并将采集到的图像数据存储在显存中;
所述图像转换模块62,可用于从所述显存中提取任一图像数据,并将所述图像数据转换为BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中;
所述图像裁剪模块63,可用于将所述BGRA图像数据裁剪为BGR图像数据,并将所述BGR图像数据存储在所述显存中;
所述图像转换模块62,可还用于将所述BGR图像数据转换为RGB图像数据,并将所述RGB图像数据存储在内存中。
也就是说,在本发明实施例中,可包括用于采集图像数据,并将采集到的图像数据存储在显存中的图像采集模块、用于从所述显存中提取任一图像数据,并将所述图像数据转换为BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中,并且将所述BGR图像数据转换为RGB图像数据,并将所述RGB图像数据存储在内存中的图像转换模块以及用于将所述BGRA图像数据裁剪为BGR图像数据,并将所述BGR图像数据存储在所述显存中的图像裁剪模块。相比于现有技术,在本发明实施例中,对图像数据的通道转换和裁剪都是在显存中直接进行的,而不是先复制到内存,并在内存中进行的,因而能够降低内存的占用率以及CPU的负载,保证了图像数据处理的高效性以及流畅性。
其中,所述图像采集模块61通常可为终端设备等中的摄像头、所述图像转换模块62通常可为终端设备中的GPU、所述图像裁剪模块63通常可为终端设备中的DSP,它们都存储有用于执行相应操作的计算机指令,并可在终端设备的AP、CPU或者MCU等的控制下执行相应的操作。
具体地,所述图像转换模块62,具体可用于在将所述图像数据转换为BRGA数据之前,对所述图像数据进行缩小处理。
具体地,所述图像裁剪模块63,具体可用于剪除所述BGRA图像数据中的A图像数据,以得到所述BGR图像数据。
需要说明的是,在本发明实施例中,所述图像转换模块62以及所述图像裁剪模块63可并行运行,对此不作赘述。
可选地,所述图像转换模块62,还可用于建立所述显存与所述内存之间的映射关系,并对所述显存进行引用计数,以保证存储在显存中的图像数据不丢失。
需要说明的是,本发明实施例中所述的图像处理装置可作为一个集成装置集成在相应的终端设备(如个人电脑、平板电脑、手机、智能相机等显示设备)之内,也可作为一个独立装置独立设置在相应的终端设备之外,对此不作任何限定。
本发明实施例二提供了一种图像处理装置,可包括用于采集图像数据,并将采集到的图像数据存储在显存中的图像采集模块、用于从所述显存中提取任一图像数据,并将所述图像数据转换为蓝-绿-红-透明度BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中,并且将所述BGR图像数据转换为红-绿-蓝RGB图像数据,并将所述RGB图像数据存储在内存中的图像转换模块以及用于将所述BGRA图像数据裁剪为蓝-绿-红BGR图像数据,并将所述BGR图像数据存储在所述显存中的图像裁剪模块。相比于现有技术,在本发明实施例中,对图像数据的通道转换和裁剪都是在显存中直接进行的,而不是先复制到内存,并在内存中进行的,因而能够降低内存的占用率以及CPU的负载,保证了图像数据处理的高效性以及流畅性。
实施例三:
本发明实施例三提供了一种计算机设备,如图7所示,其为本发明实施例中所述的计算机设备的结构示意图。该计算机设备具体可以为桌面计算机、便携式计算机、智能手机、平板电脑、个人数字助理(Personal Digital Assistant,PDA)等。具体地,本发明实施例中所述的计算机设备可以包括中央处理器(Center Processing Unit,CPU)701、存储器702、输入设备703以及输出设备704等,输入设备703可以包括键盘、鼠标、触摸屏等,输出设备704可以包括显示设备,如液晶显示器(Liquid Crystal Display,LCD)、阴极射线管(Cathode Ray Tube,CRT)等。
存储器702可以包括只读存储器(ROM)和随机存取存储器(RAM),并向中央处理器701提供存储器702中存储的程序指令和数据。在本发明实施例中,存储器702可以用于存储图像处理方法的程序。
中央处理器701通过调用存储器702存储的程序指令,中央处理器701可用于按照获得的程序指令执行:采集图像数据,并将采集到的图像数据存储在显存中;从所述显存中提取任一图像数据,并将所述图像数据转换为蓝-绿-红-透明度BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中;将所述BGRA图像数据裁剪为蓝-绿-红BGR图像数据,并将所述BGR图像数据存储在所述显存中;将所述BGR图像数据转换为红-绿-蓝RGB图像数据,并将所述RGB图像数据存储在内存中。
实施例四:
本发明实施例四提供了一种计算机存储介质,用于储存为上述计算机设备所用的计算机程序指令,其包含用于执行上述图像处理方法的程序。
所述计算机存储介质可以是计算机能够存取的任何可用介质或数据存储设备,包括但不限于磁性存储器(例如软盘、硬盘、磁带、磁光盘(MO)等)、光学存储器(例如CD、DVD、BD、HVD等)、以及半导体存储器(例如ROM、EPROM、EEPROM、非易失性存储器(NAND FLASH)、固态硬盘(SSD))等。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种图像处理方法,其特征在于,包括:
采集图像数据,并将采集到的图像数据存储在显存中;
从所述显存中提取任一图像数据,并将所述图像数据转换为蓝-绿-红-透明度BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中;
将所述BGRA图像数据裁剪为蓝-绿-红BGR图像数据,并将所述BGR图像数据存储在所述显存中;
将所述BGR图像数据转换为红-绿-蓝RGB图像数据,并将所述RGB图像数据存储在内存中。
2.如权利要求1所述的图像处理方法,其特征在于,在将所述图像数据转换为BRGA数据之前,所述图像处理方法还包括:
对所述图像数据进行缩小处理。
3.如权利要求1所述的图像处理方法,其特征在于,将所述BGRA图像数据裁剪为BGR图像数据,包括:
剪除所述BGRA图像数据中的A图像数据,以得到所述BGR图像数据。
4.如权利要求1~3任一项所述的图像处理方法,其特征在于,所述图像处理方法还包括:
建立所述显存与所述内存之间的映射关系,并对所述显存进行引用计数。
5.一种图像处理装置,其特征在于,包括图像采集模块、图像转换模块以及图像裁剪模块,其中:
所述图像采集模块,用于采集图像数据,并将采集到的图像数据存储在显存中;
所述图像转换模块,用于从所述显存中提取任一图像数据,并将所述图像数据转换为蓝-绿-红-透明度BGRA图像数据,以及,将所述BGRA图像数据存储在所述显存中;
所述图像裁剪模块,用于将所述BGRA图像数据裁剪为蓝-绿-红BGR图像数据,并将所述BGR图像数据存储在所述显存中;
所述图像转换模块,还用于将所述BGR图像数据转换为红-绿-蓝RGB图像数据,并将所述RGB图像数据存储在内存中。
6.如权利要求5所述的图像处理装置,其特征在于,
所述图像转换模块,具体用于在将所述图像数据转换为BRGA数据之前,对所述图像数据进行缩小处理。
7.如权利要求5所述的图像处理装置,其特征在于,
所述图像裁剪模块,具体用于剪除所述BGRA图像数据中的A图像数据,以得到所述BGR图像数据。
8.如权利要求5~7任一项所述的图像处理装置,其特征在于,
所述图像转换模块,还用于建立所述显存与所述内存之间的映射关系,并对所述显存进行引用计数。
9.一种计算设备,其特征在于,包括存储器和处理器,其中:
所述存储器,用于存储程序指令;
所述处理器,用于调用所述存储器中存储的程序指令,并按照获得的程序执行权利要求1~4任一项所述的图像处理方法。
10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机可执行指令,所述计算机可执行指令用于使所述计算机执行权利要求1~4任一项所述的图像处理方法。
CN201711239786.2A 2017-11-30 2017-11-30 一种图像处理方法、装置、计算设备及存储介质 Pending CN107968923A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711239786.2A CN107968923A (zh) 2017-11-30 2017-11-30 一种图像处理方法、装置、计算设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711239786.2A CN107968923A (zh) 2017-11-30 2017-11-30 一种图像处理方法、装置、计算设备及存储介质

Publications (1)

Publication Number Publication Date
CN107968923A true CN107968923A (zh) 2018-04-27

Family

ID=61998580

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711239786.2A Pending CN107968923A (zh) 2017-11-30 2017-11-30 一种图像处理方法、装置、计算设备及存储介质

Country Status (1)

Country Link
CN (1) CN107968923A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111147861A (zh) * 2020-01-02 2020-05-12 广州虎牙科技有限公司 图像压缩方法、装置、用户设备和计算机可读存储介质
CN112565771A (zh) * 2020-11-30 2021-03-26 上海博泰悦臻电子设备制造有限公司 图片压缩方法、装置、电子设备及介质
CN113873158A (zh) * 2021-09-30 2021-12-31 联想(北京)有限公司 一种电子设备及其控制方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008145663A (ja) * 2006-12-08 2008-06-26 Funai Electric Co Ltd 画像出力装置
CN101968776A (zh) * 2010-10-19 2011-02-09 广东威创视讯科技股份有限公司 一种图像采集输出方法及其系统
CN102426172A (zh) * 2011-09-05 2012-04-25 大连理工大学 解决x射线轮胎检测中周期性条纹滚动视频闪烁的方法
CN102800122A (zh) * 2012-06-20 2012-11-28 广东威创视讯科技股份有限公司 基于Direct3D技术的图像处理方法及其装置
CN105163128A (zh) * 2015-08-31 2015-12-16 华南理工大学 一种利用gpu并行加速图像转换的屏幕图像获取方法
CN105228000A (zh) * 2015-09-25 2016-01-06 网宿科技股份有限公司 一种基于gpu的完全硬件转码的方法和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008145663A (ja) * 2006-12-08 2008-06-26 Funai Electric Co Ltd 画像出力装置
CN101968776A (zh) * 2010-10-19 2011-02-09 广东威创视讯科技股份有限公司 一种图像采集输出方法及其系统
CN102426172A (zh) * 2011-09-05 2012-04-25 大连理工大学 解决x射线轮胎检测中周期性条纹滚动视频闪烁的方法
CN102800122A (zh) * 2012-06-20 2012-11-28 广东威创视讯科技股份有限公司 基于Direct3D技术的图像处理方法及其装置
CN105163128A (zh) * 2015-08-31 2015-12-16 华南理工大学 一种利用gpu并行加速图像转换的屏幕图像获取方法
CN105228000A (zh) * 2015-09-25 2016-01-06 网宿科技股份有限公司 一种基于gpu的完全硬件转码的方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
汪荣峰: "《空间态势可视化与分析技术》", 30 April 2017, 国防工业出版社 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111147861A (zh) * 2020-01-02 2020-05-12 广州虎牙科技有限公司 图像压缩方法、装置、用户设备和计算机可读存储介质
CN112565771A (zh) * 2020-11-30 2021-03-26 上海博泰悦臻电子设备制造有限公司 图片压缩方法、装置、电子设备及介质
CN113873158A (zh) * 2021-09-30 2021-12-31 联想(北京)有限公司 一种电子设备及其控制方法

Similar Documents

Publication Publication Date Title
CN109947569B (zh) 绑定核心的方法、装置、终端及存储介质
CN101179671B (zh) 图像缩放装置和图像缩放方法
CN107968923A (zh) 一种图像处理方法、装置、计算设备及存储介质
CN111045814B (zh) 资源调度方法和终端设备
CN103116872B (zh) 基于并行dsp的sar图像高速处理系统及其方法
CN104580908B (zh) 一种图像抓拍方法和移动终端
CN102509254B (zh) 一种基于数字信号处理器的图像处理平台及方法
CN107094249A (zh) 一种测试摄像头延时的方法及装置
CN109871949A (zh) 卷积神经网络加速器及加速方法
CN105025264A (zh) 基于fpga与usb2.0的便携式计算机视频监控系统
CN108737739A (zh) 一种预览画面采集方法、预览画面采集装置及电子设备
CN104793945A (zh) 防止内存溢出的大批量图片显示方法及其装置
CN107608731A (zh) 一种图片加载方法和装置
CN109634724A (zh) 数据采集方法、装置、设备和计算机存储介质
CN103645873B (zh) 一种在趋势曲线系统中实现高效数据缓存的方法
CN107302666A (zh) 拍照方法、移动终端及计算机可读存储介质
CN111984130A (zh) 快捷操作方法、装置及电子设备
CN108495043A (zh) 图像数据处理方法及相关装置
CN102566959B (zh) 一种基于sgdma的图像分割处理方法及装置
CN104811601B (zh) 一种显示预览图像的方法及设备
CN104049846A (zh) 一种信息处理方法及电子设备
CN106933702A (zh) 一种智能终端存储空间管理的方法、装置及智能终端
CN104853059B (zh) 超分辨率图像处理方法及其装置
CN109002885A (zh) 一种卷积神经网络池化单元及池化计算方法
CN202679478U (zh) 数字图像采集与处理平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180427