CN117217980A - 图像处理方法、装置、电路及芯片、主控芯片和电子设备 - Google Patents
图像处理方法、装置、电路及芯片、主控芯片和电子设备 Download PDFInfo
- Publication number
- CN117217980A CN117217980A CN202311263423.8A CN202311263423A CN117217980A CN 117217980 A CN117217980 A CN 117217980A CN 202311263423 A CN202311263423 A CN 202311263423A CN 117217980 A CN117217980 A CN 117217980A
- Authority
- CN
- China
- Prior art keywords
- image processing
- processed
- interface
- chip
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 28
- 238000012545 processing Methods 0.000 claims abstract description 453
- 238000000034 method Methods 0.000 claims description 61
- 230000005540 biological transmission Effects 0.000 claims description 27
- 238000004891 communication Methods 0.000 claims description 19
- 230000000694 effects Effects 0.000 description 21
- 238000005516 engineering process Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- VJTAZCKMHINUKO-UHFFFAOYSA-M chloro(2-methoxyethyl)mercury Chemical compound [Cl-].COCC[Hg+] VJTAZCKMHINUKO-UHFFFAOYSA-M 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Image Processing (AREA)
Abstract
本申请公开了一种图像处理方法、装置、电路及芯片、主控芯片和电子设备,属于图像处理技术领域。图像处理电路包括:主控芯片,主控芯片包括第一CPHY接口;主控芯片用于通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;图像处理芯片,图像处理芯片包括第二CPHY接口,第一CPHY接口与第二CPHY接口连接,图像处理芯片与至少两个显示单元连接;图像处理芯片用于通过第二CPHY接口,接收主控芯片发送的至少两路待处理数据流,并对至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,将至少两路待显示数据流分别发送至至少两个显示单元;其中,不同的显示单元用于显示不同的待显示数据流。
Description
技术领域
本申请属于图像处理技术领域,具体涉及一种图像处理方法、装置、电路及芯片、主控芯片和电子设备。
背景技术
随着电子技术的发展,更多用户使用电子设备观看视频,与此同时,随着用户需求的提升,对电子设备的视频显示效果的要求越来越高。相关技术中,主控芯片通过两个显示串行接口(Display Serial Interface,DSI)接口与两个显示单元连接,支持通过两个显示单元同时显示视频。主控芯片直接与显示单元连接,输出待显示内容至显示单元进行显示,然而,主控芯片并非专用于图像处理,受限于主控芯片的芯片能力,主控芯片的图像处理能力较差,导致显示单元的显示效果较差。
发明内容
本申请实施例的目的是提供一种图像处理方法、装置、电路及芯片、主控芯片和电子设备,能够提高显示单元的显示效果,且能够提高图像处理效率,有利于设备小型化,且能够节省成本。
第一方面,本申请实施例提供了一种图像处理电路,所述图像处理电路包括:
主控芯片,所述主控芯片包括第一统一物理层CPHY接口;所述主控芯片用于通过所述第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;
图像处理芯片,所述图像处理芯片包括第二CPHY接口,所述第一CPHY接口与所述第二CPHY接口连接,所述图像处理芯片与至少两个显示单元连接;所述图像处理芯片用于通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,将所述至少两路待显示数据流分别发送至所述至少两个显示单元;
其中,不同的显示单元用于显示不同的待显示数据流。
第二方面,本申请实施例提供了一种图像处理装置,包括第一方面所述的图像处理电路。
第三方面,本申请实施例提供了一种图像处理方法,应用于第二方面所述的图像处理装置,所述方法包括:
主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;
图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流;
图像处理芯片对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;
图像处理芯片将所述至少两路待显示数据流分别发送至所述至少两个显示单元;
其中,不同的显示单元用于显示不同的待显示数据流。
第四方面,本申请实施例提供了一种电子设备,包括第一方面所述的图像处理电路、处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第三方面所述的图像处理方法的步骤。
第五方面,本申请实施例提供了一种图像处理方法,应用于如第一方面所述的图像处理电路中的主控芯片,所述方法包括:
通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
第六方面,本申请实施例提供了一种图像处理方法,应用于如第一方面所述的图像处理电路中的图像处理芯片,所述方法包括:
通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;
将所述至少两路待显示数据流分别发送至所述至少两个显示单元,其中,不同的显示单元用于显示不同的待显示数据流。
第七方面,本申请实施例提供了一种图像处理芯片,所述图像处理芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如第六方面所述的图像处理方法中的图像处理芯片执行的步骤。
第八方面,本申请实施例提供了一种主控芯片,所述主控芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如第五方面所述的图像处理方法中的主控芯片执行的步骤。
第九方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第三方面或第五方面或第六方面所述的方法的步骤。
在本申请实施例中,所述主控芯片通过所述第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,所述图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,将所述至少两路待显示数据流分别发送至所述至少两个显示单元进行显示。这样,支持通过独立于主控芯片的图像处理芯片对待处理数据流进行图像处理,能够提高显示单元的显示效果;且由于图像处理芯片专用于图像处理,具有较强的图像处理能力,可以缩短处理待处理数据流的图像处理时间,提高图像处理效率;且图像处理芯片通过一个CPHY接口实现多路待处理数据流的接收,主控芯片通过一个CPHY接口实现多路待处理数据流的发送,不需额外增加接口实现多路数据的传输,有利于设备小型化,且能够节省成本。
附图说明
图1是本申请的一些实施例提供的图像处理电路的结构示意图;
图2是本申请的一些实施例提供的图像处理电路的结构示意图;
图3是本申请的一些实施例提供的图像处理方法的流程图;
图4是本申请的一些实施例提供的图像处理方法的流程图;
图5是本申请的一些实施例提供的图像处理方法的流程图;
图6是本申请的一些实施例提供的电子设备的结构示意图;
图7是本申请的一些实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面对本申请实施例涉及的部分术语进行解释说明:
外挂芯片:外挂在主控芯片上的芯片,该芯片独立于主控芯片设置。
统一物理层(Converged PHY,CPHY):一种高速串行接口技术,用于在芯片之间传输数据。CPHY是一种基于移动产业处理器接口(Mobile Industry Processor Interface,MIPI)的技术,旨在提供高速、低功耗和低成本的解决方案。
显示处理单元(Display Processing Unit,DPU):用于显示效果增强的硬件。
显示串行接口(Display Serial Interface,DSI)接口:一种用于连接处理器和显示屏的接口协议,DSI接口采用串行数据传输方式,可以轻易地实现高速、低功耗的数据传输。
图像信号处理(Image signal processing,ISP):对图像传感器输出的信号进行处理,实现有线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等。
MIPI:MIPI是MIPI Alliance制订接口标准。MIPI Alliance是一个联盟,制订各种接口的统一标准,方便上下游产品的开发,各自产品也便于融入市场。MIPI涉及的接口包括摄像头,显示屏等等。
视频插帧:在每两帧画面中增加一帧或多帧,缩短每帧之间的显示时间。
超分辨率增强:一种人工智能(Artificial Intelligence,AI)图像放大处理技术,可以智能锐化和强化特征以及边缘,消除一些假影。
时分复用:采用同一物理连接的不同时段来传输不同的信号,能达到多路传输的目的。
图像增强:增强图像中的有用信息,以改善图像的视觉效果。
人像背景虚化:将图像中的背景模糊化处理,使人像主体与背景形成明暗、清晰度等层次感的一种效果。
夜景降噪:在拍摄夜景图像时进行降噪处理。
应用处理器(Application Processor,AP):负责执行操作系统、用户界面和应用程序的处理器。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法、装置、电路及芯片、主控芯片和电子设备进行详细地说明。
如图1所示,本申请实施例提供一种图像处理电路,所述图像处理电路包括:
主控芯片11,所述主控芯片11包括第一统一物理层CPHY接口;所述主控芯片11用于通过所述第一CPHY接口,向图像处理芯片12发送至少两路待处理数据流;
图像处理芯片12,所述图像处理芯片12包括第二CPHY接口,所述第一CPHY接口与所述第二CPHY接口连接,所述图像处理芯片12与至少两个显示单元连接;所述图像处理芯片12用于通过所述第二CPHY接口,接收所述主控芯片11发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,将所述至少两路待显示数据流分别发送至所述至少两个显示单元;
其中,不同的显示单元用于显示不同的待显示数据流。
在本申请实施例中,所述主控芯片通过所述第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,所述图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,将所述至少两路待显示数据流分别发送至所述至少两个显示单元进行显示。这样,支持通过独立于主控芯片的图像处理芯片对待处理数据流进行图像处理,能够提高显示单元的显示效果;且由于图像处理芯片专用于图像处理,具有较强的图像处理能力,可以缩短处理待处理数据流的图像处理时间,提高图像处理效率;且图像处理芯片通过一个CPHY接口实现多路待处理数据流的接收,主控芯片通过一个CPHY接口实现多路待处理数据流的发送,不需额外增加接口实现多路数据的传输,有利于设备小型化,且能够节省成本。
可选地,如图2所示,所述图像处理芯片还包括显示处理单元,所述显示处理单元与所述第二CPHY连接,所述显示处理单元还与至少两个第一显示串行接口DSI接口连接,所述图像处理芯片通过所述至少两个第一DSI接口分别与所述至少两个显示单元连接,不同的第一DSI接口用于连接不同的显示单元。
可选地,如图2所示,所述图像处理芯片还包括图像信号处理ISP模块和第二DSI接口,所述ISP模块通过所述第二DSI接口与所述主控芯片连接;所述主控芯片还包括第三DSI接口,所述第三DSI接口与所述第二DSI接口连接。
其中,所述显示处理单元DPU和所述ISP模块可以均为硬件模块。
本申请实施例还提供一种图像处理装置,所述图像处理装置包括图1所示的图像处理电路。
参见图3,图3是本申请实施例提供的一种图像处理方法的流程图,该方法应用于图像处理装置,所述图像处理装置包括图1所示的图像处理电路,如图3所示,所述方法包括以下步骤:
步骤201、主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
其中,图像处理芯片可以为外挂芯片,图像处理芯片独立于主控芯片设置。示例地,图像处理芯片可以为外挂ISP芯片。
其中,主控芯片通过第一CPHY接口,可以向图像处理芯片发送两路待处理数据流;或,主控芯片通过第一CPHY接口,可以向图像处理芯片发送三路待处理数据流;或,主控芯片通过第一CPHY接口,可以向图像处理芯片发送四路待处理数据流;等等,本实施例对通过第一CPHY接口同时发送的待处理数据流的路数不进行限定。
其中,第一CPHY接口可以被分离(split)成至少两个独立的逻辑通路,该至少两个独立的逻辑通路可以用于独立传输视频图像数据。以主控芯片向图像处理芯片发送两路待处理数据流为例,第一CPHY接口可以被分离(split)成两个独立的逻辑通路tx0和tx1,tx0和tx1可以用于独立传输视频图像数据。以第一CPHY接口的带宽为4x为例,可以将4x的CPHY物理链路,split成两组,每组2x,这样一个CPHY就等效于两个独立的MIPI。示例的,1x带宽为1G带宽,则第一CPHY接口可以等效为2个2G带宽的MIPI。
步骤202、图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。
其中,第二CPHY接口可以被分离(split)成至少两个独立的逻辑通路,该至少两个独立的逻辑通路可以用于独立传输视频图像数据。以图像处理芯片接收主控芯片发送的两路待处理数据流为例,第二CPHY接口可以被分离(split)成两个独立的逻辑通路rx0和rx1,rx0和rx1可以用于独立传输视频图像数据。以第二CPHY接口的带宽为4x为例,可以将4x的CPHY物理链路,split成两组,每组2x,这样一个CPHY就等效于两个独立的MIPI。
需要说明的是,以第一CPHY接口被分离成两个独立的逻辑通路tx0和tx1为例,第二CPHY接口的rx0可以与第一CPHY接口的tx0连接,用于传输一路待处理数据流;第二CPHY接口的rx1可以与第一CPHY接口的tx1连接,用于传输另一路待处理数据流。
步骤203、图像处理芯片对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流。
其中,所述图像处理芯片对所述至少两路待处理数据流进行图像处理,可以是对所述至少两路待处理数据流进行用于实现显示增强的图像处理。另外,所述用于实现显示增强的图像处理可以包括但不限于:视频插帧处理,超分辨率增强处理,图像色彩增强等等。
另外,所述图像处理芯片可以采用不同的图像处理方式对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;或,所述图像处理芯片可以采用相同的图像处理方式对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流。
以所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流为例,所述图像处理芯片可以通过所述显示处理单元采用第一图像处理方式,对所述第一待处理数据流进行处理,得到第一待显示数据流;所述图像处理芯片可以通过所述显示处理单元采用第二图像处理方式,对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式;其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流;所述至少两个显示单元包括所述第一显示单元和所述第二显示单元。
以所述至少两路待处理数据流包括第一待处理数据流、第二待处理数据流及第三待处理数据流为例,所述图像处理芯片可以通过所述显示处理单元采用第一图像处理方式,对所述第一待处理数据流进行处理,得到第一待显示数据流;所述图像处理芯片可以通过所述显示处理单元采用第二图像处理方式,对所述第二待处理数据流进行处理,得到第二待显示数据流;所述图像处理芯片可以通过所述显示处理单元采用第三图像处理方式,对所述第三待处理数据流进行处理,得到第三待显示数据流;其中,所述至少两路待显示数据流包括所述第一待显示数据流、所述第二待显示数据流及所述第三待显示数据流;所述第一图像处理方式、所述第二图像处理方式及所述第三图像处理方式中至少存在两者为不同的图像处理方式。
步骤204、图像处理芯片将所述至少两路待显示数据流分别发送至所述至少两个显示单元;
其中,不同的显示单元用于显示不同的待显示数据流。
以所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流为例,所述图像处理芯片可以通过所述显示处理单元对所述第一待处理数据流进行处理,得到第一待显示数据流;所述图像处理芯片可以通过所述显示处理单元对所述第二待处理数据流进行处理,得到第二待显示数据流;所述图像处理芯片将所述第一待显示数据流发送至第一显示单元,并将所述第二待显示数据流发送至第二显示单元;其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流;所述至少两个显示单元包括所述第一显示单元和所述第二显示单元。
以所述至少两路待处理数据流包括第一待处理数据流、第二待处理数据流及第三待处理数据流为例,所述图像处理芯片可以通过所述显示处理单元对所述第一待处理数据流进行处理,得到第一待显示数据流;所述图像处理芯片可以通过所述显示处理单元对所述第二待处理数据流进行处理,得到第二待显示数据流;所述图像处理芯片可以通过所述显示处理单元对所述第三待处理数据流进行处理,得到第三待显示数据流;所述图像处理芯片将所述第一待显示数据流发送至第一显示单元,将所述第二待显示数据流发送至第二显示单元,并将所述第三待显示数据流发送至第三显示单元;其中,所述至少两路待显示数据流包括所述第一待显示数据流、所述第二待显示数据流及所述第三待显示数据流;所述至少两个显示单元包括所述第一显示单元、所述第二显示单元及所述第三显示单元。
一种实施方式中,所述图像处理芯片还包括ISP模块和第二DSI接口,所述ISP模块通过所述第二DSI接口与所述主控芯片连接;所述主控芯片还包括第三DSI接口,所述第三DSI接口与所述第二DSI接口连接。所述主控芯片可以通过所述第三DSI接口向所述图像处理芯片发送待处理图像数据,所述图像处理芯片可以通过所述第二DSI接口接收所述主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;所述图像处理芯片向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流;所述主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;所述主控芯片基于所述处理后的图像数据生成所述至少两路待处理数据流。
在本申请实施例中,主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流;图像处理芯片对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;图像处理芯片将所述至少两路待显示数据流分别发送至所述至少两个显示单元;其中,不同的显示单元用于显示不同的待显示数据流。这样,支持通过独立于主控芯片的图像处理芯片对待处理数据流进行图像处理,能够提高显示单元的显示效果;且由于图像处理芯片专用于图像处理,具有较强的图像处理能力,可以缩短处理待处理数据流的图像处理时间,提高图像处理效率;且图像处理芯片通过一个CPHY接口实现多路待处理数据流的接收,主控芯片通过一个CPHY接口实现多路待处理数据流的发送,不需额外增加接口实现多路数据的传输,有利于设备小型化,且能够节省成本。
可选地,所述主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,包括:
所述主控芯片采用时分复用模式,通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;
所述图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,包括:
所述图像处理芯片采用时分复用模式,通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。
其中,在时分复用模式下,该至少两路待处理数据流通过同一个传输通道在不同的时间进行传输,该同一个传输通道由第一CPHY接口和第二CPHY接口构成。
以所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流为例,主控芯片可以通过第一CPHY接口发送目标时长的第一待处理数据流,然后通过第一CPHY接口发送目标时长的第二待处理数据流;再通过第一CPHY接口发送目标时长的第一待处理数据流;等等,通过交替发送的方式实现时分复用发送。图像处理芯片可以通过第二CPHY接口接收目标时长的第一待处理数据流,然后通过第二CPHY接口接收目标时长的第二待处理数据流;再通过第二CPHY接口接收目标时长的第一待处理数据流;等等,通过交替接收的方式实现时分复用接收。目标时长可以为1s,或者2s,或者3s等等,本实施例对此不进行限定。
以所述至少两路待处理数据流包括第一待处理数据流、第二待处理数据流及第三待处理数据流为例,主控芯片可以通过第一CPHY接口发送目标时长的第一待处理数据流,然后通过第一CPHY接口发送目标时长的第二待处理数据流,然后通过第一CPHY接口发送目标时长的第三待处理数据流;再通过第一CPHY接口发送目标时长的第一待处理数据流,然后通过第一CPHY接口发送目标时长的第二待处理数据流,然后通过第一CPHY接口发送目标时长的第三待处理数据流;等等,通过交替发送的方式实现时分复用发送。图像处理芯片可以通过第二CPHY接口接收目标时长的第一待处理数据流,然后通过第二CPHY接口接收目标时长的第二待处理数据流,然后通过第二CPHY接口接收目标时长的第三待处理数据流;再通过第二CPHY接口接收目标时长的第一待处理数据流,然后通过第二CPHY接口接收目标时长的第二待处理数据流,然后通过第二CPHY接口接收目标时长的第三待处理数据流;等等,通过交替接收的方式实现时分复用接收。目标时长可以为1s,或者2s,或者3s等等,本实施例对此不进行限定。
该实施方式中,所述主控芯片采用时分复用模式,通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,所述图像处理芯片采用时分复用模式,通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。这样,从较长时间维度来看,通过第一CPHY接口和第二CPHY接口实现了多路待处理数据流的同时发送,能够支持通过图像处理芯片对多路待处理数据流进行同时处理,并传输至多个显示单元进行多屏同显,能够提高显示单元的显示效果;且通过图像处理芯片对多路待处理数据流进行并行处理,能够缩短处理待处理数据流的图像处理时间,提高图像处理效率。
需要说明的是,在显示单元显示的内容包括摄像头拍摄的视频画面的情况下,图像处理芯片可以通过所述第二CPHY接口接收所述主控芯片发送的待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,处理后的图像数据可以用于生成所述至少两路待处理数据流。该待处理图像数据可以为摄像头采集的图像数据。显示单元显示的内容包括摄像头拍摄的视频画面所对应的场景包括但不限于如下场景:
场景1:用户使用双屏终端拍摄视频,通过单摄像头进行拍摄。在该双屏终端的主屏和辅屏上均显示有拍摄的画面,主屏和辅屏上显示的拍摄画面相同,以该双屏终端为具有折叠屏的终端为例,用户通过折叠屏幕可以将主屏朝向拍摄者,辅屏朝向被拍摄者,使得被拍摄者可以看到拍摄内容。
场景2:用户使用双屏终端拍摄视频,通过单摄像头进行拍摄,在该双屏终端的主屏上显示有拍摄的画面;同时,在该双屏终端的辅屏上显示终端主界面,使得用户在拍摄视频时可以操作终端主界面。
需要说明的是,在本申请实施例中,双屏终端可以是指包括正面和背面分别设置有一个显示屏的直屏终端,或者可以是为折叠屏终端,通过向外翻折折叠屏终端形成相背设置的两个显示屏。
可选地,所述图像处理芯片包括ISP模块,在所述主控芯片用于与所述图像处理芯片传输的传输接口仅包括所述第一CPHY接口的情况下,所述主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流之前,所述方法包括:
所述主控芯片通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;
所述图像处理芯片通过所述第二CPHY接口接收所述主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;
所述图像处理芯片向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流;
所述主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;
所述主控芯片基于所述处理后的图像数据生成所述至少两路待处理数据流。
其中,通过所述ISP模块对所述待处理图像数据进行图像处理可以包括但不限于:白平衡处理,人像背景虚化处理,夜景降噪处理等等。
另外,在显示单元显示的内容包括摄像头拍摄的视频画面的情况下,该待处理图像数据可以为摄像头采集的图像数据。
以场景1为例,用户使用双屏终端拍摄视频,通过单摄像头进行拍摄,主控芯片获取摄像头采集的图像数据,将该摄像头采集的图像数据作为待处理图像数据;主控芯片通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;图像处理芯片通过所述第二CPHY接口接收主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;图像处理芯片向所述主控芯片发送所述处理后的图像数据;主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;主控芯片基于所述处理后的图像数据生成两路相同的待处理数据流,该待处理数据流为待处理视频流,通过所述第一CPHY接口向图像处理芯片发送该两路待处理数据流;图像处理芯片对该两路待处理数据流进行图像处理,得到两路待显示数据流,将该两路待显示数据流分别发送至主屏和辅屏进行显示。从而能够在该双屏终端的主屏和辅屏上均显示有拍摄的画面,用户通过折叠屏幕可以将主屏朝向拍摄者,辅屏朝向被拍摄者,使得被拍摄者可以看到拍摄内容。
以场景2为例,用户使用双屏终端拍摄视频,通过单摄像头进行拍摄,主控芯片获取摄像头采集的图像数据,将该摄像头采集的图像数据作为待处理图像数据;主控芯片通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;图像处理芯片通过所述第二CPHY接口接收主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;图像处理芯片向所述主控芯片发送所述处理后的图像数据;主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;主控芯片基于所述处理后的图像数据生成第一路待处理数据流,并获取与终端主界面对应的第二路待处理数据流,通过所述第一CPHY接口向图像处理芯片发送该第一路待处理数据流和第二路待处理数据流;图像处理芯片对第一路待处理数据流进行图像处理,得到第一路待显示数据流,并对第二路待处理数据流进行图像处理,得到第二路待显示数据流;图像处理芯片将第一路待显示数据流发送至主屏显示,将第二路待显示数据流发送至辅屏显示。从而能够在该双屏终端的主屏上显示有拍摄的画面;同时,在该双屏终端的辅屏上显示终端主界面,使得用户在拍摄视频时可以操作终端主界面。
该实施方式中,所述主控芯片通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;所述图像处理芯片通过所述第二CPHY接口接收所述主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;所述图像处理芯片向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流;所述主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;所述主控芯片基于所述处理后的图像数据生成所述至少两路待处理数据流。这样,支持图像处理芯片通过同一个CPHY接口接收所述主控芯片发送的待处理图像数据和待处理数据流,并且支持主控芯片通过同一个CPHY接口向图像处理芯片发送待处理图像数据和待处理数据流,不需要额外增加接口用于发送待处理图像数据,从而不需额外增加接口即可实现多种数据的传输,有利于设备小型化,且能够节省成本。
需要说明的是,所述至少两个显示单元可以显示不同显示增强效果的显示内容。适用于在至少两个显示单元显示不同显示增强效果的场景包括但不限于如下场景:
场景3:用户使用双屏终端拍摄视频,在该双屏终端的主屏和辅屏上均显示有拍摄的画面,主屏上显示的内容与辅屏上显示的内容相同,且主屏上显示的拍摄内容的显示效果优于辅屏上显示的拍摄内容的显示效果,能够降低辅屏显示内容的图像处理难度,缩短处理辅屏显示内容的图像处理时间,提高图像处理效率;
场景4:用户使用双屏终端拍摄视频,在该双屏终端的主屏上显示有拍摄的画面,同时,在该双屏终端的辅屏上显示终端主界面,使得用户在拍摄视频时可以操作终端主界面,主屏上显示的内容与辅屏上显示的内容不相同,主屏上显示的内容的显示效果优于辅屏上显示的内容的显示效果,能够降低辅屏显示内容的图像处理难度,缩短处理辅屏显示内容的图像处理时间,提高图像处理效率。
可选地,所述图像处理芯片包括显示处理单元,所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流,所述图像处理芯片对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,包括:
所述图像处理芯片通过所述显示处理单元采用第一图像处理方式,对所述第一待处理数据流进行处理,得到第一待显示数据流;
所述图像处理芯片通过所述显示处理单元采用第二图像处理方式,对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式;
所述图像处理芯片将所述至少两路待显示数据流分别发送至所述至少两个显示单元,包括:
所述图像处理芯片将所述第一待显示数据流发送至第一显示单元,并将所述第二待显示数据流发送至第二显示单元;
其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流;所述至少两个显示单元包括所述第一显示单元和所述第二显示单元。
其中,第一图像处理方式可以包括但不限于视频插帧处理,超分辨率增强处理,图像色彩增强处理等等。第二图像处理方式可以包括但不限于视频插帧处理,超分辨率增强处理,图像色彩增强处理等等。
以场景3为例,用户使用双屏终端拍摄视频,主控芯片获取摄像头采集的图像数据,将该摄像头采集的图像数据作为待处理图像数据;主控芯片通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;图像处理芯片通过所述第二CPHY接口接收主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;图像处理芯片向所述主控芯片发送所述处理后的图像数据;主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;主控芯片基于所述处理后的图像数据生成两路相同的待处理数据流,该待处理数据流为待处理视频流,通过所述第一CPHY接口向图像处理芯片发送该两路待处理数据流;图像处理芯片对第一路待处理数据流进行视频插帧处理、超分辨率增强处理及图像色彩增强处理,得到第一路待显示数据流;图像处理芯片对第二路待处理数据流仅进行图像色彩增强处理,得到第二路待显示数据流;将第一路待显示数据流发送至主屏进行显示,将第二路待显示数据流发送至辅屏进行显示。从而在该双屏终端的主屏和辅屏上均显示有拍摄的画面,主屏上显示的内容与辅屏上显示的内容相同,且主屏上显示的拍摄内容的显示效果优于辅屏上显示的拍摄内容的显示效果,能够降低辅屏显示内容的图像处理难度,缩短处理辅屏显示内容的图像处理时间,提高图像处理效率。
以场景4为例,主控芯片基于处理后的图像数据生成第一路待处理数据流,并获取与终端主界面对应的第二路待处理数据流,通过所述第一CPHY接口向图像处理芯片发送该第一路待处理数据流和第二路待处理数据流;图像处理芯片对第一路待处理数据流进行视频插帧处理、超分辨率增强处理及图像色彩增强处理,得到第一路待显示数据流;图像处理芯片对第二路待处理数据流仅进行超分辨率增强处理,得到第二路待显示数据流;将第一路待显示数据流发送至主屏进行显示,将第二路待显示数据流发送至辅屏进行显示。从而能够在该双屏终端的主屏上显示有拍摄的画面;同时,在该双屏终端的辅屏上显示终端主界面,主屏上显示的内容的显示效果优于辅屏上显示的内容的显示效果。
该实施方式中,所述图像处理芯片通过所述显示处理单元采用第一图像处理方式,对所述第一待处理数据流进行处理,得到第一待显示数据流;所述图像处理芯片通过所述显示处理单元采用第二图像处理方式,对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式。这样,支持在至少两个显示单元显示不同显示增强效果的显示内容,避免对全部显示单元的待处理数据流采用相同的图像处理方式,能够降低部分显示单元的显示内容的图像处理难度,缩短处理部分显示单元显示内容的图像处理时间,提高图像处理效率。
需要说明的是,以电子设备为手机为例,相关技术中手机功能和特性在同一AP芯片供应生态下同质化严重,如高通或者联发科(MTK)),手机影像作为智能手机核心卖点之一,是近年来各大厂商作为技术创新以及提升用户体验的关注重点,各大厂商为了提升图像处理算法的能效比,推出了外挂芯片的解决方案,即在手机的AP平台上外挂一个专用的ISP芯片,该芯片集成专用的神经网络(Neural Network,NN)单元,高性能降噪(NoiseReduce,NR)处理单元等,来提升手机整体的图像处理能力,例如夜景降噪,人像背景虚化等。
外挂芯片的关键技术之一就是互联和接口技术,如何设计和实现高性能的接口技术成为降低整体成本和提高性能的关键。
在本申请实施例中,可以在折叠屏智能终端上外挂(post)ISP芯片时,采用CPHY_SPLIT技术,将4x的CPHY物理链路,分离(split)成两组,每组2x,这样一个CPHY就等效于两个独立的MIPI,将单个物理的MIPI通道拆分成多个逻辑通路,等效于多个DSI接口来解决双屏同显时无法采用外挂ISP芯片对视频流进行处理的问题。
在本申请实施例中,AP平台将sensor输入的图像通过DSI0送给专用的外挂ISP芯片进行处理,同时AP通过专用的CPHY图像传输接口,将两路视频数据输出到外挂ISP芯片,外挂ISP芯片利用内部的显示处理单元(Display processing unit,DPU)单元进行显示增强,例如运动估计运动补偿(Motion Estimation Motion Compensation,MEMC),外挂ISP芯片处理后同时将两路视频数据传输给主屏和副屏进行显示处理,以实现双屏同显功能。
主控芯片可以为AP,AP平台通过DSI接口和外挂ISP芯片互连,同时将传感器(sensor)输入的图像数据送给外挂ISP进行图像增强处理,例如人像背景虚化,夜景降噪等;AP平台通过专用CPHY接口将用于主屏显示的视频流和用于副屏显示的视频流数据传输至外挂ISP芯片,外挂ISP芯片对用于主屏显示的视频流和用于副屏显示的视频流进行显示增强处理,并且将处理后的视频流传输至显示面板panel_0和panel_1实现双屏同显处理。
其中,AP平台采用高速的CPHY接口,实现将用于主屏显示的视频流和用于副屏显示的视频流通过一个物理接口时分复用传输到外挂ISP芯片。在CPHY_SPLIT模式下,CPHY接口被split成tx0和tx1,tx0和tx1可以独立传输视频图像数据;在AP平台,将用于主屏显示的视频流分发到tx0,将用于副屏显示的视频流分发到tx1,实现主副屏数据的同时传输。
另外,可以在外挂ISP芯片设置CPHY硬件单元和专用的时分复用数据解析和提取硬件单元,实现将2路视频流提取和分离。
另外,外挂ISP芯片将用于主屏显示的视频流和用于副屏显示的视频流提取分离后,可以将两路视频流传输至DPU单元进行显示增强处理,例如视频插帧处理,及超分辨率增强等。外挂ISP芯片将DPU处理后的用于主屏显示的视频流和用于副屏显示的视频流分别传输至panel_0和panel_1进行显示。
本申请实施例可以利用定制的CPHY,在不增加外部硬件接口和开关(swith)单元的情况下,实现通过外挂芯片处理双屏同显的视频流的需求,解决了相关技术中不支持双屏同显时采用外挂ISP芯片对双屏同显的视频流进行处理的问题。
需要说明的是,可以将所有的AP平台和外挂芯片的传输接口都采用一个物理通道,进一步减小物理接口数量。
参见图4,图4是本申请实施例提供的一种图像处理方法的流程图,该方法应用于图1所示的图像处理电路中的主控芯片,如图4所示,所述方法包括以下步骤:
步骤301、通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
可选地,所述通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,包括:
采用时分复用模式通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
可选地,在所述主控芯片用于与所述图像处理芯片传输的传输接口仅包括所述第一CPHY接口的情况下,所述通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流之前,所述方法还包括:
通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;
接收所述图像处理芯片发送的处理后的图像数据,所述处理后的图像数据为对所述待处理图像数据进行图像处理后得到的图像数据;
基于所述处理后的图像数据生成所述至少两路待处理数据流。
需要说明的是,本实施例作为与图3所示的实施例中对应的主控芯片的实施方式,其具体的实施方式可以参见图3所示的实施例的相关说明,为了避免重复说明,本实施例不再赘述,且还可以达到相同有益效果。
参见图5,图5是本申请实施例提供的一种图像处理方法的流程图,该方法应用于图1所示的图像处理电路中的图像处理芯片,如图5所示,所述方法包括以下步骤:
步骤401、通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;
步骤402、将所述至少两路待显示数据流分别发送至所述至少两个显示单元,其中,不同的显示单元用于显示不同的待显示数据流。
可选地,所述通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,包括:
采用时分复用模式通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。
可选地,所述图像处理芯片包括显示处理单元,所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流,所述对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,包括:
通过所述显示处理单元,采用第一图像处理方式对所述第一待处理数据流进行处理,得到第一待显示数据流;
通过所述显示处理单元,采用第二图像处理方式对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式;
其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流。
可选地,所述图像处理芯片包括图像信号处理ISP模块,在所述图像处理芯片用于与所述主控芯片传输的传输接口仅包括所述第二CPHY接口的情况下,所述通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流之前,所述方法还包括:
通过所述第二CPHY接口接收所述主控芯片发送的待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;
向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流。
需要说明的是,本实施例作为与图3所示的实施例中对应的图像处理芯片的实施方式,其具体的实施方式可以参见图3所示的实施例的相关说明,为了避免重复说明,本实施例不再赘述,且还可以达到相同有益效果。
可选地,如图6所示,本申请实施例还提供一种电子设备500,包括图1所示的图像处理电路501,处理器502和存储器503,所述存储器503存储可在所述处理器502上运行的程序或指令,所述程序或指令被所述处理器502执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图7为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于:射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、处理器610以及图像处理芯片611等部件,其中,所述处理器为主控芯片。
本领域技术人员可以理解,电子设备600还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图7中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器610,用于:
通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
可选地,所述处理器610具体用于:采用时分复用模式通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
可选地,在所述主控芯片用于与所述图像处理芯片传输的传输接口仅包括所述第一CPHY接口的情况下,所述处理器610还用于:
通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;
接收所述图像处理芯片发送的处理后的图像数据,所述处理后的图像数据为对所述待处理图像数据进行图像处理后得到的图像数据;
基于所述处理后的图像数据生成所述至少两路待处理数据流。
其中,所述图像处理芯片611用于:
通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;
将所述至少两路待显示数据流分别发送至所述至少两个显示单元,其中,不同的显示单元用于显示不同的待显示数据流。
可选地,所述图像处理芯片611具体用于:
采用时分复用模式通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。
可选地,所述图像处理芯片611包括显示处理单元,所述图像处理芯片具体用于:
通过所述显示处理单元,采用第一图像处理方式对所述第一待处理数据流进行处理,得到第一待显示数据流;
通过所述显示处理单元,采用第二图像处理方式对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式;
其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流。
可选地,所述图像处理芯片611包括图像信号处理ISP模块,在所述图像处理芯片用于与所述主控芯片传输的传输接口仅包括所述第二CPHY接口的情况下,所述图像处理芯片还用于:
通过所述第二CPHY接口接收所述主控芯片发送的待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;
向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流。
应理解的是,本申请实施例中,输入单元604可以包括图形处理器(GraphicsProcessing Unit,GPU)6041和麦克风6042,图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元606可包括显示面板,可以采用液晶显示器、有机发光二极管等形式来配置显示面板。用户输入单元607包括触控面板6071以及其他输入设备6072。触控面板6071,也称为触摸屏。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器609可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器610可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种图像处理芯片,所述图像处理芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现上述应用于图像处理芯片的图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本申请实施例另提供了一种主控芯片,所述主控芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现上述应用于主控芯片的图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (18)
1.一种图像处理电路,其特征在于,所述图像处理电路包括:
主控芯片,所述主控芯片包括第一统一物理层CPHY接口;所述主控芯片用于通过所述第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;
图像处理芯片,所述图像处理芯片包括第二CPHY接口,所述第一CPHY接口与所述第二CPHY接口连接,所述图像处理芯片与至少两个显示单元连接;所述图像处理芯片用于通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,将所述至少两路待显示数据流分别发送至所述至少两个显示单元;
其中,不同的显示单元用于显示不同的待显示数据流。
2.根据权利要求1所述的图像处理电路,其特征在于,所述图像处理芯片还包括显示处理单元,所述显示处理单元与所述第二CPHY连接,所述显示处理单元还与至少两个第一显示串行接口DSI接口连接,所述图像处理芯片通过所述至少两个第一DSI接口分别与所述至少两个显示单元连接,不同的第一DSI接口用于连接不同的显示单元。
3.根据权利要求1所述的图像处理电路,其特征在于,所述图像处理芯片还包括图像信号处理ISP模块和第二DSI接口,所述ISP模块通过所述第二DSI接口与所述主控芯片连接;所述主控芯片还包括第三DSI接口,所述第三DSI接口与所述第二DSI接口连接。
4.一种图像处理装置,其特征在于,包括权利要求1-3任一项所述的图像处理电路。
5.一种图像处理方法,应用于如权利要求4所述的图像处理装置,其特征在于,所述方法包括:
主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;
图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流;
图像处理芯片对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;
图像处理芯片将所述至少两路待显示数据流分别发送至所述至少两个显示单元;
其中,不同的显示单元用于显示不同的待显示数据流。
6.根据权利要求5所述的方法,其特征在于,所述主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,包括:
所述主控芯片采用时分复用模式,通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流;
所述图像处理芯片通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,包括:
所述图像处理芯片采用时分复用模式,通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。
7.根据权利要求5所述的方法,其特征在于,所述图像处理芯片包括ISP模块,在所述主控芯片用于与所述图像处理芯片传输的传输接口仅包括所述第一CPHY接口的情况下,所述主控芯片通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流之前,所述方法包括:
所述主控芯片通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;
所述图像处理芯片通过所述第二CPHY接口接收所述主控芯片发送的所述待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;
所述图像处理芯片向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流;
所述主控芯片接收所述图像处理芯片发送的所述处理后的图像数据;
所述主控芯片基于所述处理后的图像数据生成所述至少两路待处理数据流。
8.根据权利要求5所述的方法,其特征在于,所述图像处理芯片包括显示处理单元,所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流,所述图像处理芯片对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,包括:
所述图像处理芯片通过所述显示处理单元采用第一图像处理方式,对所述第一待处理数据流进行处理,得到第一待显示数据流;
所述图像处理芯片通过所述显示处理单元采用第二图像处理方式,对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式;
所述图像处理芯片将所述至少两路待显示数据流分别发送至所述至少两个显示单元,包括:
所述图像处理芯片将所述第一待显示数据流发送至第一显示单元,并将所述第二待显示数据流发送至第二显示单元;
其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流;所述至少两个显示单元包括所述第一显示单元和所述第二显示单元。
9.一种电子设备,其特征在于,包括权利要求1-3任一项所述的图像处理电路,处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求5-8任一项所述的图像处理方法的步骤。
10.一种图像处理方法,应用于如权利要求1-3任一项所述的图像处理电路中的主控芯片,其特征在于,所述方法包括:
通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
11.根据权利要求10所述的方法,其特征在于,所述通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流,包括:
采用时分复用模式通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流。
12.根据权利要求10所述的方法,其特征在于,在所述主控芯片用于与所述图像处理芯片传输的传输接口仅包括所述第一CPHY接口的情况下,所述通过第一CPHY接口,向图像处理芯片发送至少两路待处理数据流之前,所述方法还包括:
通过所述第一CPHY接口向所述图像处理芯片发送待处理图像数据;
接收所述图像处理芯片发送的处理后的图像数据,所述处理后的图像数据为对所述待处理图像数据进行图像处理后得到的图像数据;
基于所述处理后的图像数据生成所述至少两路待处理数据流。
13.一种图像处理方法,应用于如权利要求1-3任一项所述的图像处理电路中的图像处理芯片,其特征在于,所述方法包括:
通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,并对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流;
将所述至少两路待显示数据流分别发送至所述至少两个显示单元,其中,不同的显示单元用于显示不同的待显示数据流。
14.根据权利要求13所述的方法,其特征在于,所述通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流,包括:
采用时分复用模式通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流。
15.根据权利要求13所述的方法,其特征在于,所述图像处理芯片包括显示处理单元,所述至少两路待处理数据流包括第一待处理数据流和第二待处理数据流,所述对所述至少两路待处理数据流进行图像处理,得到至少两路待显示数据流,包括:
通过所述显示处理单元,采用第一图像处理方式对所述第一待处理数据流进行处理,得到第一待显示数据流;
通过所述显示处理单元,采用第二图像处理方式对所述第二待处理数据流进行处理,得到第二待显示数据流,所述第一图像处理方式与所述第二图像处理方式为不同的图像处理方式;
其中,所述至少两路待显示数据流包括所述第一待显示数据流和所述第二待显示数据流。
16.根据权利要求13所述的方法,其特征在于,所述图像处理芯片包括图像信号处理ISP模块,在所述图像处理芯片用于与所述主控芯片传输的传输接口仅包括所述第二CPHY接口的情况下,所述通过所述第二CPHY接口,接收所述主控芯片发送的至少两路待处理数据流之前,所述方法还包括:
通过所述第二CPHY接口接收所述主控芯片发送的待处理图像数据,并通过所述ISP模块对所述待处理图像数据进行图像处理,得到处理后的图像数据;
向所述主控芯片发送所述处理后的图像数据,其中,所述处理后的图像数据用于生成所述至少两路待处理数据流。
17.一种图像处理芯片,其特征在于,所述图像处理芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如权利要求13-16任一项所述的图像处理方法中的图像处理芯片执行的步骤。
18.一种主控芯片,其特征在于,所述主控芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如权利要求10-12任一项所述的图像处理方法中的主控芯片执行的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311263423.8A CN117217980A (zh) | 2023-09-27 | 2023-09-27 | 图像处理方法、装置、电路及芯片、主控芯片和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311263423.8A CN117217980A (zh) | 2023-09-27 | 2023-09-27 | 图像处理方法、装置、电路及芯片、主控芯片和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117217980A true CN117217980A (zh) | 2023-12-12 |
Family
ID=89048034
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311263423.8A Pending CN117217980A (zh) | 2023-09-27 | 2023-09-27 | 图像处理方法、装置、电路及芯片、主控芯片和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117217980A (zh) |
-
2023
- 2023-09-27 CN CN202311263423.8A patent/CN117217980A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6326411B2 (ja) | ビデオ通信方法、ビデオ通信装置、プログラム及び記録媒体 | |
CN106528025B (zh) | 多屏图像投屏方法、终端、服务器和系统 | |
CN1929538A (zh) | 图像捕捉及显示方法和系统 | |
CN113015007B (zh) | 视频插帧方法、装置及电子设备 | |
CN102098443A (zh) | 一种摄像设备、通信系统和相应的图像处理方法 | |
CN110996170A (zh) | 视频文件播放方法及相关设备 | |
CN107807777B (zh) | 多核嵌入式电视跟踪器人机交互装置及方法 | |
CN108235055A (zh) | Ar场景中透明视频实现方法及设备 | |
CN113596294A (zh) | 拍摄方法、装置和电子设备 | |
US11010879B2 (en) | Video image processing method and apparatus thereof, display device, computer readable storage medium and computer program product | |
CN113487524B (zh) | 图像格式转换方法、装置、设备、存储介质及程序产品 | |
CN112312161A (zh) | 用于生成视频的方法、装置、电子设备及可读存储介质 | |
CN114302092A (zh) | 独显插帧电路、方法、装置、芯片、电子设备及介质 | |
CN108345559B (zh) | 虚拟现实数据输入装置和虚拟现实设备 | |
CN116132608A (zh) | 图像处理电路、图像处理方法及电子设备 | |
CN117336425A (zh) | 图像处理电路、图像处理装置、方法、电子设备和芯片 | |
CN113835657A (zh) | 显示方法及电子设备 | |
CN114338874A (zh) | 电子设备的图像显示方法、图像处理电路和电子设备 | |
CN117217980A (zh) | 图像处理方法、装置、电路及芯片、主控芯片和电子设备 | |
CN112437237A (zh) | 拍摄方法及装置 | |
US8599240B2 (en) | Super-resolution from 3D (3D to 2D conversion) for high quality 2D playback | |
CN113852776B (zh) | 插帧方法及电子设备 | |
CN117711299A (zh) | 显示电路、显示方法和相关装置 | |
CN113393391B (zh) | 图像增强方法、图像增强装置、电子设备和存储介质 | |
CN113676674B (zh) | 图像处理方法、装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |