CN106341571A - 一种图像处理方法以及终端 - Google Patents
一种图像处理方法以及终端 Download PDFInfo
- Publication number
- CN106341571A CN106341571A CN201610685681.9A CN201610685681A CN106341571A CN 106341571 A CN106341571 A CN 106341571A CN 201610685681 A CN201610685681 A CN 201610685681A CN 106341571 A CN106341571 A CN 106341571A
- Authority
- CN
- China
- Prior art keywords
- image
- processor
- fusion
- multiframe
- processing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
Abstract
本发明实施例公开了一种图像处理方法以及终端,其中方法包括:第一处理器获取通过图像传感器采集的图像数据;所述第一处理器通过第一信号链路向第二处理器发送所述图像数据;所述第二处理器接收所述图像数据,并对所述图像数据进行处理;所述第二处理器将处理后的所述图像数据进行存储或者显示。本发明实施例还公开了一种终端,本发明实施例通过两个处理器实现图像的采集,以及预览或者显示,工作效率高。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像处理方法以及终端。
背景技术
目前,越来越多的终端具有拍照或摄像的功能,比如智能手机、平板电脑等都具有拍照或摄像功能,汽车等交通工具通过车上设置的摄像头记录行车的图片或录像。通常,终端中的处理器调用摄像头,需要通过摄像头采集图像,然后对该图像进行处理,再调用显示器进行处理后的图像的显示或者调用存储器进行处理后的图像的存储。此时,一个处理器如果需要同时进行多项工作,容易造成图像处理或者预览等工作的不流畅。
发明内容
本发明实施例提供一种图像处理方法以及终端,通过两个处理器实现图像的采集,以及预览或者显示,工作效率高。
第一方面,本发明实施例提供了一种终端,所述终端包括:图像传感器、第一处理器、第二处理器以及第一信号链路,其中
所述第一处理器用于获取通过图像传感器采集的图像数据,并通过第一信号链路向第二处理器发送所述图像数据;
所述第二处理器用于接收所述图像数据,并对所述图像数据进行处理,以及将处理后的所述图像数据进行存储或者显示。
另一方面,本发明实施例提供了一种图像处理方法,该方法包括:
第一处理器获取通过图像传感器采集的图像数据;
所述第一处理器通过第一信号链路向第二处理器发送所述图像数据;
所述第二处理器接收所述图像数据,并对所述图像数据进行处理;
所述第二处理器将处理后的所述图像数据进行存储或者显示。
本发明实施例通过第一处理器获取通过图像传感器采集的图像数据,通过第一信号链路向第二处理器发送所述图像数据;所述第二处理器接收所述图像数据,并对所述图像数据进行处理,并将处理后的所述图像数据进行存储或者显示,通过两个处理器实现图像的采集,以及预览或者显示,工作效率高。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供一种终端的示意性框图;
图2是本发明另一实施例提供一种终端的示意性框图;
图3是本发明又一实施例提供一种终端的示意性框图;
图4是本发明实施例提供的一种图像处理方法的示意流程图;
图5是本发明实施例提供的另一种图像处理方法的示意流程图;
图6是本发明实施例提供的一种终端的结构示意图;
图7是本发明另一实施例提供的一种终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
具体实现中,本发明实施例中描述的终端包括但不限于诸如具有触摸敏感表面(例如,触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是,在某些实施例中,所述设备并非便携式通信设备,而是具有触摸敏感表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
在接下来的讨论中,描述了包括显示器和触摸敏感表面的终端。然而,应当理解的是,终端可以包括诸如物理键盘、鼠标和/或控制杆的一个或多个其它物理用户接口设备。
终端支持各种应用程序,例如以下中的一个或多个:绘图应用程序、演示应用程序、文字处理应用程序、网站创建应用程序、盘刻录应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息收发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字摄影机应用程序、web浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
可以在终端上执行的各种应用程序可以使用诸如触摸敏感表面的至少一个公共物理用户接口设备。可以在应用程序之间和/或相应应用程序内调整和/或改变触摸敏感表面的一个或多个功能以及终端上显示的相应信息。这样,终端的公共物理架构(例如,触摸敏感表面)可以支持具有对用户而言直观且透明的用户界面的各种应用程序。
参见图1,图1是本发明实施例提供一种终端的示意性框图,如图1所示的终端可以包括:图像传感器11、第一处理器12、第二处理器13以及第一信号链路14,其中,
所述第一处理器用于获取通过图像传感器采集的图像数据,并通过第一信号链路向第二处理器发送所述图像数据;
所述第二处理器用于接收所述图像数据,并对所述图像数据进行处理,以及将处理后的所述图像数据进行存储或者显示。
具体地,终端中图像传感器实时采集当前场景的图像数据,并将该图像数据通过总线或用于第一处理器与图像传感器之间连接的用于传输图像数据的数据线发送至第一处理器。此时,第一处理器获取通过图像传感器采集的图像数据,第一处理器可以将该图像数据通过第一信号链路发送给第二处理器。第二处理器,接收到该图像数据后,对该图像数据进行处理,将处理后的图像数据通过存储器进行存储或者通过显示器进行显示。
可以理解,终端可以包括显示器和存储器,终端也可以外接显示器。存储器可以用于对处理后的图像进行保存,以及储存软件程序,第一处理器和第二处理器可以调用该软件程序,执行终端中各种功能应用以实现图像处理。
图像传感器采集的图像数据可以是拜耳图像,第二处理器对图像数据进行处理的方式可以是将图像数据通过图像信号处理流水线,即ISP(Image Signal Processing)流水线,进行处理。其中,ISP流水线可以包括,CFA(Color Filter Array)插值处理、白平衡、边缘增强、颜色校正、Gamma校正、灰度变换等中的一种或多种的组合。
可以理解,终端可以是具有摄像或拍照功能的设备,比如智能手机、平板电脑、相机、行车记录仪等。终端可以包括两个处理器,即第一处理器和第二处理器,其中,第一处理器和第二处理器可以集成在一个芯片上,也可以分别集成在两个芯片上。第一信号链路可以是终端中总线的分支,也可以单独设置,第一信号链路可以用于第一处理器和第二处理器间的数据传输,比如,传输图像数据。图像传感器可以是摄像头。
可选地,第一处理器为DSP(Digital Signal Processing)处理器。第二处理器可以是ARM(Acorn RISC Machine)处理器。
可以理解,本发明可基于现有的具有摄像或拍照功能的设备中的处理器硬件和软件平台实施,可以不对现有的第二处理器硬件修以及现有的拍照软件的框架进行修改。
本发明实施例通过第一处理器获取通过图像传感器采集的图像数据,通过第一信号链路向第二处理器发送所述图像数据;所述第二处理器接收所述图像数据,并对所述图像数据进行处理,并将处理后的所述图像数据进行存储或者显示,通过两个处理器实现图像的采集,以及预览或者显示,工作效率高。
参见图2,图2是本发明另一实施例提供另一种终端的示意性框图,如图2所示的终端除包括图1所示的终端中各个器件外,还可以包括:第二信号链路,其中,所述第一处理器还可以用于,接收到图像多帧融合指令,并根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像,通过所述第二信号链路将所述融合图像发送给所述第二处理器;所述第二处理器还可以用于,对所述融合图像进行处理,以及将处理后的所述融合图像进行存储或者显示。本发明实施例中,终端通过第一处理器进行图像多帧融合处理,通过第二处理器实时显示或预览通过图像传感器采集的图像,可以避免了现有技术中,单个处理器在进行图像融合处理时,图像显示或预览的中断,提高用户体验。
具体地,所述图像多帧融合指令可以是第二处理器通过第二控制信号链路发送的,也可以是根据接收的拍照指令或连拍指令生成的。该拍照指令或连拍指令可以是第二处理器通过第二控制信号链路发送的,也可以是接收用户在终端上通过按压拍照按键或在触摸显示屏上输入的拍照操作产生的。第二信号链路可以是终端中总线的分支,也可以单独设置,第二信号链路可以用于第一处理器和第二处理器间的数据传输,比如,传输融合图像。
可以理解,第一处理器将所述图像数据进行多帧融合处理,生成融合图像具体的方法可以是:通过图像融合算法对图像数据进行处理,生成融合图像;所述图像融合算法包括高动态光照渲染算法、超分辨率算法、多帧降噪算法或多焦距图像融合算法等中的一种。
可以理解,第一处理器也可以通过第一信号链路,将融合图像发送至第二处理器。
本发明实施例中,所述融合图像还包括标识信息;所述第二处理器还可以用于,根据所述标识信息判断接收的信息是否为多帧融合处理后的图像,如果是,则将所述融合图像进行存储或者显示。可以理解,第二处理器可以将融合图像进行处理后,保存该处理后的融合图像;而将处理后是图像数据进行显示预览。
本发明实施例中,所述第二处理器还可以用于,向所述第一处理器发送图像融合处理参数;所述第一处理器还可以用于,接收所述第二处理器发送的所述图像融合处理参数,并根据所述图像多帧融合指令、所述图像融合处理参数以及图像融合算法对所述图像数据进行多帧融合处理,生成融合图像。
本发明实施例中,所述第一处理器还可以用于,缓存M帧所述图像数据,并根据所述图像多帧融合指令,将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理,生成K帧融合图像;所述M、N、K为正整数,且M≥N。
具体地,该第一处理器可以包括缓存区域,该缓存区域可以包括多个缓存单元,所述缓存单元用于缓存一帧图像数据,所述缓存区域可以缓存M帧图像数据,第一处理器接收到多帧融合处理指令后,可以将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理,生成K帧融合图像。所述N帧图像数据可以是包括所述缓存区域中正在写入图像数据的缓存单元,和所述正在写入图像数据的缓存单元之前的N-1个缓存单元中的图像数据。其中,M为正整数,且M≥N。
本发明实施例通过第一处理器获取通过图像传感器采集的图像数据,通过第一信号链路向第二处理器发送图像数据;通过第一处理器接收到图像多帧融合指令,并根据该图像多帧融合指令,将图像数据进行多帧融合处理,生成融合图像;通过第二处理器接收图像数据以及融合图像,并对图像数据和融合图像进行处理,并将处理后的图像数据或融合图像进行存储或者显示,可以避免了现有技术中,单个处理器在进行图像融合处理时,图像显示或预览的中断,实现图像数据融合处理与图像数据预览的互不干扰,提高终端的工作效率,提升用户体验。
请参阅图3,图3是本发明又一实施例提供一种终端的示意性框图,如图3所示的终端除包括图2所示的终端中各个器件外,还可以包括:第一控制信号链路、第二控制信号链路和/或第三信号链路。
本发明实施例中,图像传感器和第二处理器可以通过第一控制信号链路连接,第一控制信号链路可以用于传输传感器控制参数,比如,曝光时间、增益等参数中的一种或多种的组合,以控制图像传感器。第二控制信号链路可以用于第一处理器和第二处理器间第一处理器控制参数的传输,第一处理器控制参数可以包括休眠/唤醒指令、拍照指令、连拍指令、图像多帧融合指令、图像多帧融合处理参数等中的一种或多种的组合。其中,休眠/唤醒指令可以用于指示第一处理器进入休眠状态/工作状态,避免不使用第一处理器时,第一处理器的耗电,以节约终端的能耗;拍照指令可以用于指示第一处理器对获取的图像数据进行处理,并将处理后的图像数据发送至第二处理器进行存储或显示;连拍指令可以用于指示第一处理器对获取的连续获取的多组图像数据分别进行处理,并将处理后的多组图像数据发送至第二处理器进行存储或显示;图像多帧融合处理指令可以用于指示第一处理器对获取的图像数据进行图像多帧融合处理。
可选地,终端中还可以包括第三信号链路,该第三信号链路用于图像传感器和第二处理器间传输数据,比如图像数据,第二处理器也可以根据接收到的拍照指令对通过第三信号链路获取图像传感器采集的图像数据,并对该图像数据进行处理,以及将处理后的图像数据通过存储器进行存储或者通过显示器进行显示,从而避免第一处理器在休眠时,图像预览的中断,实现第二处理器对图像传感器采集的图像数据的处理,以及显示或预览。
可以理解,终端中各个器件,如第一处理器、第二处理器、图像传感器、显示器以及存储器等可以通过总线连接,也可以通过其他数据线、控制线等连接。优选地,第一信号链路、第二信号链路以及第三信号链路可以采用MIPI-CSI(Mobile Industry ProcessorInterface-COMS Sensor Interface)、LVDS(Low-Voltage Differential Signaling)等图像传感器接口;第一控制信号链路、第二控制信号链路可以采用IIC(Inter-IntegratedCircuit)、USRT(Universal Asynchronous Receiver/Transmitter)、SPI(SerialPeripheral Interface)等数字通信接口;第二处理器和显示器间通信链路可以采用MIPI-CSI接口。
本发明实施例通过第一处理器获取通过图像传感器采集的图像数据,通过第一信号链路向第二处理器发送所述图像数据;所述第二处理器接收所述图像数据,并对所述图像数据进行处理,并将处理后的所述图像数据进行存储或者显示,通过两个处理器实现图像的采集,以及预览或者显示,工作效率高。
而且,该终端可以通过第一控制信号链路传输传感器控制参数,比如,曝光时间、增益等参数,以实现图像传感器的参数控制;还可以通过第二控制信号链路连接传输第一处理器控制参数,如,休眠/唤醒指令、拍照指令、连拍指令、图像多帧融合指令、图像多帧融合处理参数等,从而实现第二处理器对第一处理器的控制。
应当理解,在本发明各实施例中,第一处理器和第二处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。优选地,第一处理器为DSP(Digital SignalProcessing)处理器,第二处理器可以是ARM(Acorn RISC Machine)处理器。
在本发明各实施例中,终端可以包括输入设备以及输出设备,其中,输入设备可以包括图像传感器、触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等,输出设备可以包括显示器(LCD等)、扬声器等。
该存储器可以包括只读存储器和随机存取存储器,并向第一处理器以及第二处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
具体实现中,本发明实施例中所描述的第一处理器、第二处理器、图像传感器、存储器、显示器等可执行本发明实施例提供的图像处理方法的第一实施例以及第二实施例中所描述的实现方式,也可执行本发明实施例所描述的终端的实现方式,在此不再赘述。
参见图4,图4是本发明实施例提供的一种图像处理方法的示意流程图,图4所示的图像处理方法可以包括:
步骤S401:第一处理器获取通过图像传感器采集的图像数据。
具体地,终端中图像传感器实时采集当前场景的图像数据,并将该图像数据通过总线或用于第一处理器与图像传感器之间连接的用于传输图像数据的数据线发送至第一处理器,此时,第一处理器获取通过图像传感器采集的图像数据。
步骤S402:所述第一处理器通过第一信号链路向第二处理器发送所述图像数据。
其中,第一信号链路可以是终端中总线的分支,也可以单独设置,第一信号链路可以用于第一处理器和第二处理器间的数据传输,比如,传输图像数据。
步骤S403:所述第二处理器接收所述图像数据,并对所述图像数据进行处理。
可以理解,图像传感器采集的图像数据可以是拜耳图像,第二处理器对图像数据进行处理的方式可以是将图像数据通过图像信号处理流水线,即ISP(Image SignalProcessing)流水线,进行处理。其中,ISP流水线可以包括,CFA(Color Filter Array)插值处理、白平衡、边缘增强、颜色校正、Gamma校正、灰度变换等中的一种或多种的组合。
步骤S404:所述第二处理器将处理后的所述图像数据进行存储或者显示。
可以理解,本发明实施例中,终端可以是具有摄像或拍照功能的设备,比如智能手机、平板电脑、相机、行车记录仪等。终端可以包括两个处理器,即第一处理器和第二处理器,其中,第一处理器和第二处理器可以集成在一个芯片上,也可以分别集成在两个芯片上。图像传感器可以是摄像头。终端可以包括显示器和存储器,终端也可以外接显示器或存储器。
本发明实施例通过第一处理器获取通过图像传感器采集的图像数据,通过第一信号链路向第二处理器发送所述图像数据;所述第二处理器接收所述图像数据,并对所述图像数据进行处理,并将处理后的所述图像数据进行存储或者显示,通过两个处理器实现图像的采集,以及预览或者显示,工作效率高。
参见图5,图5是本发明另一实施例提供的一种图像处理方法的示意流程图,图4所示的图像处理方法可以包括:
步骤S501:第一处理器获取通过图像传感器采集的图像数据。
步骤S502:所述第一处理器通过第一信号链路向第二处理器发送所述图像数据。
步骤S503:所述第二处理器接收所述图像数据,并对所述图像数据进行处理。
步骤S504:所述第二处理器将处理后的所述图像数据进行存储或者显示。
具体地,步骤S501、S502、S503以及S504可以参见图4所示的图像处理方法中相关描述,本发明不在赘述。
步骤S505:所述第一处理器接收到图像多帧融合指令。
具体地,上述任一步骤之前或之后,可执行步骤S505。其中,所述图像多帧融合指令可以是第二处理器通过第二控制信号链路发送的,也可以是根据接收的拍照指令或连拍指令生成的。该拍照指令或连拍指令可以是第二处理器通过第二控制信号链路发送的,也可以是接收用户在终端上通过按压拍照按键或在触摸显示屏上输入的拍照操作产生的。所述图像多帧融合指令用于指示第一处理器对图像数据进行图像融合处理,以生成融合图像。
步骤S506:所述第一处理器根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像。
可以理解,第一处理器将所述图像数据进行多帧融合处理,生成融合图像具体的方法可以是:通过图像融合算法对图像数据进行处理,生成融合图像;所述图像融合算法包括高动态光照渲染算法、超分辨率算法、多帧降噪算法或多焦距图像融合算法等中的一种。
步骤S507:所述第一处理器通过第二信号链路将所述融合图像发送给所述第二处理器。
其中,第二信号链路可以是终端中总线的分支,也可以单独设置,第二信号链路可以用于第一处理器和第二处理器间的数据传输,比如,传输融合图像。
可以理解,第一处理器也可以通过第一信号链路,将融合图像发送至第二处理器。具体地,第一处理器可以将(交织传输)
步骤S508:所述第二处理器接收所述融合图像,对所述融合图像进行处理,以及将处理后的所述融合图像进行存储或者显示。
可以理解,融合图像可以是拜耳图像,第二处理器对图像数据进行处理的方式可以是将融合图像通过图像信号处理流水线,即ISP流水线,进行处理。其中,ISP流水线可以包括,CFA插值处理、白平衡、边缘增强、颜色校正、Gamma校正、灰度变换等中的一种或多种的组合。
本发明实施例中,所述融合图像还包括标识信息,步骤S508之前,所述方法还可以包括:所述第二处理器根据所述标识信息判断接收的信息是否为多帧融合处理后的图像,如果是,则执行所述将所述融合图像进行存储或者显示的步骤。可以理解,第二处理器可以将融合图像进行处理后,保存该处理后的融合图像;而将处理后是图像数据进行显示预览。
本发明实施例中,步骤S506之前,所述方法还可以包括:所述第二处理器向所述第一处理器发送图像融合处理参数;所述第一处理器接收所述第二处理器发送的所述图像融合处理参数。此时,步骤S506可以包括:所述第一处理器根据所述图像多帧融合指令、所述图像融合处理参数以及图像融合算法对所述图像数据进行多帧融合处理,生成融合图像,以实现第二处理器对第一处理器图像融合处理参数的设置。
本发明实施例中,步骤S501之后,所述方法还可以包括:所述第一处理器缓存M帧所述图像数据。步骤S506可以包括:所述第一处理器根据所述图像多帧融合指令,将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理,生成K帧融合图像;所述M、N、K为正整数,且M≥N。
具体地,该第一处理器可以包括缓冲存储器,该缓冲存储器可以包括M个缓存单元,用于缓存通过图像传感器采集的M帧图像数据。该缓冲存储器可以包括第一处理器接收到多帧融合处理指令后,可以将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理。该预设N帧图像数据可以是包括所述缓冲存储器中正在写入图像数据的缓存单元,和所述正在写入图像数据的缓存单元之前的N-1个缓存单元中中缓存的图像数据;也可以是不包括所述缓冲存储器中正在写入图像数据的缓存单元,所述正在写入图像数据的缓存单元之前的N个缓存单元中缓存的图像数据。
本发明实施例中,终端还可以包括:第一控制信号链路、第二控制信号链路和/或第三信号链路。第二处理器还可以通过第一控制信号链路向图像传感器发送传感器控制参数,比如,曝光时间、增益等参数中的一种或多种的组合,以控制图像传感器。第二处理器还可以通过第二控制信号链路向第一处理器发送第一处理器控制参数,第一处理器控制参数可以包括休眠/唤醒指令、拍照指令、连拍指令、图像多帧融合指令、图像多帧融合处理参数等中的一种或多种的组合。
其中,休眠/唤醒指令可以用于指示第一处理器进入休眠状态/工作状态,避免不使用第一处理器时,第一处理器的耗电,以节约终端的能耗;拍照指令可以用于指示第一处理器对获取的图像数据进行处理,并将处理后的图像数据发送至第二处理器进行存储或显示;连拍指令可以用于指示第一处理器对获取的连续获取的多组图像数据分别进行处理,并将处理后的多组图像数据发送至第二处理器进行存储或显示;图像多帧融合处理指令可以用于指示第一处理器对获取的图像数据进行图像多帧融合处理。第三信号链路用于图像传感器和第二处理器间传输数据,比如图像数据,第二处理器也可以根据接收到的拍照指令对通过第三信号链路获取图像传感器采集的图像数据,并对该图像数据进行处理,以及将处理后的图像数据通过存储器进行存储或者通过显示器进行显示,从而避免第一处理器在休眠时,图像预览的中断,实现第二处理器对图像传感器采集的图像数据的处理,以及显示或预览。
本发明实施例通过第一处理器获取通过图像传感器采集的图像数据,通过第一信号链路向第二处理器发送图像数据;通过第一处理器接收到图像多帧融合指令,并根据该图像多帧融合指令,将图像数据进行多帧融合处理,生成融合图像;通过第二处理器接收图像数据以及融合图像,并对图像数据和融合图像进行处理,并将处理后的图像数据或融合图像进行存储或者显示,可以避免了现有技术中,单个处理器在进行图像融合处理时,图像显示或预览的中断,实现图像数据融合处理与图像数据预览的互不干扰,提高终端的工作效率,提升用户体验。
而且,该终端可以通过第一控制信号链路传输传感器控制参数,比如,曝光时间、增益等参数,以实现图像传感器的参数控制;还可以通过第二控制信号链路连接传输第一处理器控制参数,如,休眠/唤醒指令、拍照指令、连拍指令、图像多帧融合指令、图像多帧融合处理参数等,从而实现第二处理器对第一处理器的控制。
请参阅图6,图6是本发明实施例提供的一种终端的结构示意图。该终端包括:图像传感器、第一处理器、第二处理器以及第一信号链路。所述第一处理器包括获取单元601以及第一发送单元602;所述第二处理器包括第一接收单元603、处理单元604以及执行单元604,其中,
获取单元601,用于获取通过图像传感器采集的图像数据;
第一发送单元602,用于通过第一信号链路向第二处理器发送所述图像数据;
第一接收单元603,用于接收所述图像数据;
处理单元604,用于对所述图像数据进行处理;
执行单元605,用于将处理后的所述图像数据进行存储或者显示。
需要说明的是,本发明各实施例中的终端中获取单元601、第一发送单元602、第一接收单元603、处理单元604以及执行单元604的功能可根据图像处理方法的第一实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
请参阅图7,图7是本发明另一实施例提供的一种终端的结构示意图。该终端包括图像传感器、第一处理器、第二处理器、第一信号链路以及第二信号链路。所述第一处理器除包括图6所示的各个单元外,还可以包括:第二接收单元606、融合处理单元607、第二发送单元608、第四接收单元613以及缓存单元。所述第二处理器除包括图6所示的各个单元外,还可以包括:第三接收单元609、判断单元610、触发单元611以及第三发送单元612。其中,
本发明实施例中,所述第一处理器还可以包括:第二接收单元606,用于接收到图像多帧融合指令;融合处理单元607,用于根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像;第二发送单元608,用于通过第二信号链路将所述融合图像发送给所述第二处理器。所述第二处理器还可以包括:第三接收单元609,用于接收所述融合图像;所述处理单元604还用于对所述融合图像进行处理;所述执行单元605还用于将处理后的所述融合图像进行存储或者显示。
本发明实施例中,所述融合图像还包括标识信息;所述第二处理器还可以包括判断单元610,用于根据所述标识信息判断接收的信息是否为多帧融合处理后的图像;触发单元611,用于当所述判断单元的判断结果为是时,触发所述执行单元执行所述将所述融合图像进行存储或者显示。
本发明实施例中,所述第二处理器还可以包括:第三发送单元612,用于向所述第一处理器发送图像融合处理参数;所述第一处理器还可以包括:第四接收单元613,用于接收所述第二处理器发送的所述图像融合处理参数;所述融合处理单元607具体用于,根据所述图像多帧融合指令、所述图像融合处理参数以及图像融合算法对所述图像数据进行多帧融合处理,生成融合图像。
本发明实施例中,所述第一处理器还可以包括缓存单元,用于缓存M帧所述图像数据;所述融合处理单元607具体用于,所述第一处理器根据所述图像多帧融合指令,将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理,生成K帧融合图像;所述M、N、K为正整数,且M≥N。
需要说明的是,本发明各实施例中的终端中获取单元601、第一发送单元602、第一接收单元603、处理单元604、执行单元604、第二接收单元606、融合处理单元607、第二发送单元608、第三接收单元609、判断单元610、触发单元611、第三发送单元612、第四接收单元613以及缓存单元的功能可根据图像处理方法的第二实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的终端和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的终端和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本发明实施例终端中的单元可以根据实际需要进行合并、划分和删减。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种终端,其特征在于,所述终端包括:图像传感器、第一处理器、第二处理器以及第一信号链路,其中
所述第一处理器用于获取通过图像传感器采集的图像数据,并通过第一信号链路向第二处理器发送所述图像数据;
所述第二处理器用于接收所述图像数据,并对所述图像数据进行处理,以及将处理后的所述图像数据进行存储或者显示。
2.根据权利要求1所述的终端,其特征在于,所述终端还包括第二信号链路;
所述第一处理器还用于接收到图像多帧融合指令,并根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像,通过所述第二信号链路将所述融合图像发送给所述第二处理器;
所述第二处理器还用于接收所述融合图像,对所述融合图像进行处理,以及将处理后的所述融合图像进行存储或者显示。
3.根据权利要求2所述的终端,其特征在于,所述融合图像还包括标识信息;
所述第二处理器还用于根据所述标识信息判断接收的信息是否为多帧融合处理后的图像,如果是,则将所述融合图像进行存储或者显示。
4.根据权利要求2所述的终端,其特征在于,
所述第二处理器还用于向所述第一处理器发送图像融合处理参数;
所述第一处理器还用于接收所述第二处理器发送的所述图像融合处理参数,根据所述图像多帧融合指令、所述图像融合处理参数以及图像融合算法对所述图像数据进行多帧融合处理,生成融合图像。
5.根据权利要求2所述的终端,其特征在于,所述第一处理器还用于缓存M帧所述图像数据,根据所述图像多帧融合指令,将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理,生成K帧融合图像;所述M、N、K为正整数,且M≥N。
6.一种图像处理方法,其特征在于,包括:
第一处理器获取通过图像传感器采集的图像数据;
所述第一处理器通过第一信号链路向第二处理器发送所述图像数据;
所述第二处理器接收所述图像数据,并对所述图像数据进行处理;
所述第二处理器将处理后的所述图像数据进行存储或者显示。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
所述第一处理器接收到图像多帧融合指令;
所述第一处理器根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像;
所述第一处理器通过第二信号链路将所述融合图像发送给所述第二处理器;
所述第二处理器接收所述融合图像,对所述融合图像进行处理,以及将处理后的所述融合图像进行存储或者显示。
8.根据权利要求7所述的方法,其特征在于,所述融合图像还包括标识信息,所述第二处理器将处理后的所述融合图像进行存储或者显示之前,所述方法还包括:
所述第二处理器根据所述标识信息判断接收的信息是否为多帧融合处理后的图像,如果是,则执行所述将所述融合图像进行存储或者显示的步骤。
9.根据权利要求7所述的方法,其特征在于,所述第一处理器根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像之前,所述方法还包括:
所述第二处理器向所述第一处理器发送图像融合处理参数;
所述第一处理器接收所述第二处理器发送的所述图像融合处理参数;
所述第一处理器根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像,包括:
所述第一处理器根据所述图像多帧融合指令、所述图像融合处理参数以及图像融合算法对所述图像数据进行多帧融合处理,生成融合图像。
10.根据权利要求7所述的方法,其特征在于,所述第一处理器获取通过图像传感器采集的图像数据之后,所述方法还包括:
所述第一处理器缓存M帧所述图像数据;
所述第一处理器根据所述图像多帧融合指令,将所述图像数据进行多帧融合处理,生成融合图像,包括:
所述第一处理器根据所述图像多帧融合指令,将所述第一处理器缓存的预设N帧图像数据进行多帧融合处理,生成K帧融合图像;所述M、N、K为正整数,且M≥N。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610685681.9A CN106341571A (zh) | 2016-08-18 | 2016-08-18 | 一种图像处理方法以及终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610685681.9A CN106341571A (zh) | 2016-08-18 | 2016-08-18 | 一种图像处理方法以及终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106341571A true CN106341571A (zh) | 2017-01-18 |
Family
ID=57825620
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610685681.9A Pending CN106341571A (zh) | 2016-08-18 | 2016-08-18 | 一种图像处理方法以及终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106341571A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107277353A (zh) * | 2017-06-30 | 2017-10-20 | 维沃移动通信有限公司 | 一种拍照的方法和移动终端 |
CN107909686A (zh) * | 2017-11-02 | 2018-04-13 | 广东欧珀移动通信有限公司 | 人脸解锁的方法、装置、计算机可读存储介质和电子设备 |
CN108153308A (zh) * | 2017-12-21 | 2018-06-12 | 李华 | 用于机器人车辆自动驾驶的复合视觉激光导航系统及其控制方法 |
CN108769522A (zh) * | 2018-06-06 | 2018-11-06 | 中科创达软件科技(深圳)有限公司 | 图像处理终端及图像处理方法 |
CN108958464A (zh) * | 2017-06-09 | 2018-12-07 | 北京猎户星空科技有限公司 | 图像数据处理方法、装置和电子设备 |
CN109417594A (zh) * | 2017-11-29 | 2019-03-01 | 深圳市大疆创新科技有限公司 | 图像处理方法、拍摄设备、无人机及地面端设备 |
CN109819139A (zh) * | 2017-11-22 | 2019-05-28 | 福州瑞芯微电子股份有限公司 | 一种智能电子设备和图像处理单元、装置、方法 |
CN110225258A (zh) * | 2018-04-28 | 2019-09-10 | Oppo广东移动通信有限公司 | 数据处理方法、装置、计算机可读存储介质和电子设备 |
WO2019192030A1 (zh) * | 2018-04-04 | 2019-10-10 | 华为技术有限公司 | 一种蓝牙播放方法及电子设备 |
CN111601019A (zh) * | 2020-02-28 | 2020-08-28 | 北京爱芯科技有限公司 | 图像数据处理模组及电子设备 |
CN112488027A (zh) * | 2020-12-10 | 2021-03-12 | Oppo(重庆)智能科技有限公司 | 一种降噪方法、电子设备及计算机存储介质 |
CN112565908A (zh) * | 2020-11-26 | 2021-03-26 | 北京百度网讯科技有限公司 | 用于图像的显示方法、装置、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102025979A (zh) * | 2010-12-14 | 2011-04-20 | 中国科学院长春光学精密机械与物理研究所 | 一种基于双dsp的红外视频实时增强显示装置 |
US20110298948A1 (en) * | 2010-06-07 | 2011-12-08 | Samsung Electronics Co., Ltd. | Apparatus and method for acquiring image in portable terminal |
CN102509254A (zh) * | 2011-10-25 | 2012-06-20 | 河海大学 | 一种基于数字信号处理器的图像处理平台及方法 |
CN103595924A (zh) * | 2013-06-18 | 2014-02-19 | 南京理工大学 | 一种基于Cameralink的图像融合系统及其方法 |
CN205486305U (zh) * | 2016-03-07 | 2016-08-17 | 四川九洲北斗导航与位置服务有限公司 | 基于Compact PCI 总线的多核心图像处理器系统 |
-
2016
- 2016-08-18 CN CN201610685681.9A patent/CN106341571A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110298948A1 (en) * | 2010-06-07 | 2011-12-08 | Samsung Electronics Co., Ltd. | Apparatus and method for acquiring image in portable terminal |
CN102025979A (zh) * | 2010-12-14 | 2011-04-20 | 中国科学院长春光学精密机械与物理研究所 | 一种基于双dsp的红外视频实时增强显示装置 |
CN102509254A (zh) * | 2011-10-25 | 2012-06-20 | 河海大学 | 一种基于数字信号处理器的图像处理平台及方法 |
CN103595924A (zh) * | 2013-06-18 | 2014-02-19 | 南京理工大学 | 一种基于Cameralink的图像融合系统及其方法 |
CN205486305U (zh) * | 2016-03-07 | 2016-08-17 | 四川九洲北斗导航与位置服务有限公司 | 基于Compact PCI 总线的多核心图像处理器系统 |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108958464A (zh) * | 2017-06-09 | 2018-12-07 | 北京猎户星空科技有限公司 | 图像数据处理方法、装置和电子设备 |
CN107277353B (zh) * | 2017-06-30 | 2019-02-15 | 维沃移动通信有限公司 | 一种拍照的方法和移动终端 |
CN107277353A (zh) * | 2017-06-30 | 2017-10-20 | 维沃移动通信有限公司 | 一种拍照的方法和移动终端 |
CN107909686A (zh) * | 2017-11-02 | 2018-04-13 | 广东欧珀移动通信有限公司 | 人脸解锁的方法、装置、计算机可读存储介质和电子设备 |
CN109819139A (zh) * | 2017-11-22 | 2019-05-28 | 福州瑞芯微电子股份有限公司 | 一种智能电子设备和图像处理单元、装置、方法 |
CN109417594A (zh) * | 2017-11-29 | 2019-03-01 | 深圳市大疆创新科技有限公司 | 图像处理方法、拍摄设备、无人机及地面端设备 |
CN108153308A (zh) * | 2017-12-21 | 2018-06-12 | 李华 | 用于机器人车辆自动驾驶的复合视觉激光导航系统及其控制方法 |
WO2019192030A1 (zh) * | 2018-04-04 | 2019-10-10 | 华为技术有限公司 | 一种蓝牙播放方法及电子设备 |
US11310646B2 (en) | 2018-04-04 | 2022-04-19 | Huawei Technologies Co., Ltd. | Bluetooth-based playback method and electronic device |
CN110225258A (zh) * | 2018-04-28 | 2019-09-10 | Oppo广东移动通信有限公司 | 数据处理方法、装置、计算机可读存储介质和电子设备 |
CN108769522B (zh) * | 2018-06-06 | 2021-03-26 | 中科创达软件科技(深圳)有限公司 | 图像处理终端及图像处理方法 |
CN108769522A (zh) * | 2018-06-06 | 2018-11-06 | 中科创达软件科技(深圳)有限公司 | 图像处理终端及图像处理方法 |
CN111601019A (zh) * | 2020-02-28 | 2020-08-28 | 北京爱芯科技有限公司 | 图像数据处理模组及电子设备 |
CN111601019B (zh) * | 2020-02-28 | 2021-11-16 | 北京爱芯科技有限公司 | 图像数据处理模组及电子设备 |
CN112565908A (zh) * | 2020-11-26 | 2021-03-26 | 北京百度网讯科技有限公司 | 用于图像的显示方法、装置、电子设备及存储介质 |
CN112565908B (zh) * | 2020-11-26 | 2023-04-11 | 北京百度网讯科技有限公司 | 用于图像的显示方法、装置、电子设备及存储介质 |
CN112488027A (zh) * | 2020-12-10 | 2021-03-12 | Oppo(重庆)智能科技有限公司 | 一种降噪方法、电子设备及计算机存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106341571A (zh) | 一种图像处理方法以及终端 | |
WO2020187157A1 (zh) | 一种控制方法和电子设备 | |
WO2021103981A1 (zh) | 分屏显示的处理方法、装置及电子设备 | |
US20230055623A1 (en) | Video shooting method and electronic device | |
WO2021036571A1 (zh) | 一种桌面的编辑方法及电子设备 | |
WO2021027725A1 (zh) | 显示页面元素的方法和电子设备 | |
AU2019351406B2 (en) | Method for generating screenshot, control method, and electronic device | |
WO2021000881A1 (zh) | 一种分屏方法及电子设备 | |
CN110231905A (zh) | 一种截屏方法及电子设备 | |
WO2020078026A1 (zh) | 一种图像处理方法、装置与设备 | |
CN104869320A (zh) | 电子设备和控制电子设备操作方法 | |
KR20210073568A (ko) | 이미지 처리 방법 및 장치, 및 디바이스 | |
CN108234875A (zh) | 拍摄显示方法、装置、移动终端以及存储介质 | |
WO2021135838A1 (zh) | 一种页面绘制方法及相关装置 | |
CN108737739A (zh) | 一种预览画面采集方法、预览画面采集装置及电子设备 | |
CN109471692A (zh) | 一种显示控制方法及终端设备 | |
CN113254120A (zh) | 数据处理方法和相关装置 | |
CN106251279A (zh) | 一种图像处理方法及终端 | |
CN108536504A (zh) | 页面显示方法、装置、移动终端以及存储介质 | |
CN110442277A (zh) | 显示预览窗口信息的方法及电子设备 | |
WO2021042878A1 (zh) | 一种拍摄方法及电子设备 | |
CN110046013A (zh) | 一种界面显示方法及终端设备 | |
CN117201930B (zh) | 一种拍照方法和电子设备 | |
CN108897475B (zh) | 一种图片处理方法及移动终端 | |
WO2024055797A9 (zh) | 一种录像中抓拍图像的方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170118 |
|
WD01 | Invention patent application deemed withdrawn after publication |