CN108551505B - 电子设备、图像处理方法和装置 - Google Patents
电子设备、图像处理方法和装置 Download PDFInfo
- Publication number
- CN108551505B CN108551505B CN201810564121.7A CN201810564121A CN108551505B CN 108551505 B CN108551505 B CN 108551505B CN 201810564121 A CN201810564121 A CN 201810564121A CN 108551505 B CN108551505 B CN 108551505B
- Authority
- CN
- China
- Prior art keywords
- image
- display
- camera
- projection
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 24
- 238000003384 imaging method Methods 0.000 claims abstract description 97
- 238000012545 processing Methods 0.000 claims abstract description 63
- 230000005540 biological transmission Effects 0.000 claims abstract description 61
- 238000004891 communication Methods 0.000 claims description 24
- 239000002184 metal Substances 0.000 claims description 19
- 230000001360 synchronised effect Effects 0.000 claims description 17
- 238000000034 method Methods 0.000 claims description 16
- 229920000620 organic polymer Polymers 0.000 claims description 10
- 239000000758 substrate Substances 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 14
- 238000007639 printing Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0272—Details of the structure or mounting of specific components for a projector or beamer module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本申请提出一种电子设备、图像处理方法和装置,其中,电子设备包括:处理单元、摄像头、以及覆盖摄像头的显示屏,其中,显示屏具有透光区域和非透光区域,用于在处理单元控制下通过非透光区域进行显示,摄像头设置于对应透光区域下方,包括分别与处理单元电性连接的投影组件和成像组件,用于在处理单元控制下利用投影组件向显示屏投影,以在显示屏的透光区域进行显示,以及在处理单元控制下利用成像组件透过显示屏的透光区域采集成像图像,处理单元,用于控制显示屏进行显示,以及用于控制摄像头在显示状态下投影显示,在成像状态下采集成像图像,实现了全面屏显示和图像采集功能的并存,进而,真正实现了电子设备中全面屏占比的最大化。
Description
技术领域
本申请涉及移动终端技术领域,尤其涉及电子设备、图像处理方法和装置。
背景技术
随着移动终端技术的发展,移动终端中都配置有前置摄像头,前置摄像头一般设置在移动终端的显示屏下方,而随着人们对屏幕尺寸的需求越来越大,在不增加移动终端尺寸的情况下,屏幕占比越来越高,目前已逐步进入移动终端全面屏显示时代。
相关技术中,对于使用全面屏进行显示的移动终端,为了同时实现前置摄像头的拍摄需求,采用的是将全面屏显示的部分位置挖空或进行透明处理,并将前置摄像头设置于挖空或透明处理位置的屏幕下方,而这种方案,使得全面屏显示需求和图像采集需求无法同时存在。
申请内容
本申请旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本申请提出一种电子设备,包括处理单元、摄像头以及覆盖摄像头的显示屏,摄像头中包括设置投影组件和成像组件,以使得摄像头在显示状况下在处理单元控制下投影显示,在成像状态下采集成像图像,实现了全面屏显示和图像采集功能的并存,进而,真正实现了电子设备中全面屏占比的最大化。
本申请提出一种图像处理方法。
本申请提出一种图像处理装置
本申请提出另一种电子设备。
本申请提出一种计算机可读存储介质。
本申请第一方面实施例提出了一种电子设备,包括:处理单元、摄像头、以及覆盖所述摄像头的显示屏;
其中,所述显示屏,与所述处理单元电性连接,所述显示屏具有透光区域和非透光区域,用于在所述处理单元控制下通过所述非透光区域进行显示;
所述摄像头,设置于对应所述透光区域下方,包括分别与所述处理单元电性连接的投影组件和成像组件,用于在所述处理单元控制下利用所述投影组件向所述显示屏投影,以在所述显示屏的透光区域进行显示;以及在所述处理单元控制下利用成像组件透过所述显示屏的透光区域采集成像图像;
所述处理单元,用于控制所述显示屏进行显示,以及用于控制所述摄像头在显示状态下投影显示,在成像状态下采集成像图像。
本申请第二方面实施例提出了一种图像处理方法,包括:
控制摄像头处于显示状态或者处理成像状态;
当所述摄像头处于显示状态时,控制所述摄像头进行投影显示;
当所述摄像头处于成像状态时,控制所述摄像头采集成像图像。
本申请第三方面实施例提出了一种图像处理装置,包括:
状态控制模块,用于控制摄像头处于显示状态或者处理成像状态;
投影控制模块,用于当所述摄像头处于显示状态时,控制所述摄像头进行投影显示;
成像控制模块,用于当所述摄像头处于成像状态时,控制所述摄像头采集成像图像。
本申请第四方面实施例提出了一种电子设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如第二方面实施例所述的图像处理方法。
本申请第五方面实施例提出了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时,实现如第二方面实施例所述的图像处理方法。
本申请实施例提供的技术方案可以包括如下的有益效果:
电子设备包括处理单元、摄像头、以及覆盖摄像头的显示屏,其中,显示屏,与处理单元电性连接,显示屏具有透光区域和非透光区域,用于在处理单元控制下通过所述非透光区域进行显示,摄像头,设置于对应透光区域下方,包括分别与处理单元电性连接的投影组件和成像组件,用于在处理单元控制下利用投影组件向显示屏投影,以在显示屏的透光区域进行显示,以及在处理单元控制下利用成像组件透过显示屏的透光区域采集成像图像,处理单元,用于控制显示屏进行显示,以及用于控制摄像头在显示状态下投影显示,在成像状态下采集成像图像。通过在摄像头中设置投影组件和成像组件,以使得摄像头在显示状况下在处理单元控制下投影显示,在成像状态下采集成像图像,实现了全面屏显示和图像采集功能的并存,进而,真正实现了电子设备中全面屏占比的最大化。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本申请实施例所提供的一种电子设备的结构示意图;
图2为本申请实施例提供的另一种电子设备的结构示意图;
图3为本发明实施例提供的图像缓存器中数据流向的示意图;
图4为本发明实施例提供的子图像划分的示意图之一;
图5为本发明实施例提供的子图像划分的示意图之二;
图6为本申请实施例所提供的又一种电子设备的的结构示意图;
图7为本申请实施例所提供的一种图像处理方法的流程示意图;
图8为本申请实施例所提供的另一种视频处理方法的流程示意图;以及
图9为本申请实施例提供的一种图像处理装置的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
全面屏技术越来越多的应用于电子设备上,目前对于搭载有前置摄像头的电子设备,其全面屏的解决方案为:
方案一:在全面屏上设置对应摄像头的透明区域,这种方案造成摄像头对应全面屏上的区域无法进行显示;
方案二:将全面屏做成异型,留出摄像头的对应位置,这种方案美观度差,摄像头周围的屏幕利用率较低,浪费了屏幕的尺寸,没有真正实现全面屏的高占比率。
为了解决上述问题,本申请提出了一种电子设备,以实现通过在电子设备的摄像头中设置投影组件和成像组件,实现了采用全面屏方案的电子设备,其摄像头对应区域的显示和图像采集功能并存,美观度高,真正实现了电子设备中全面屏占比的最大化。
下面参考附图描述本申请实施例的电子设备、图像处理方法和装置。
图1为本申请实施例所提供的一种电子设备的结构示意图,该电子设备包含移动终端和台式终端等,例如手机、ipad、掌上电脑、台式电脑等等。
如图1所示,该电子设备包括:处理单元10、摄像头20、以及覆盖摄像头20的显示屏30。
显示屏30,与处理单元10电性连接,显示屏30具有透光区域301和非透光区域302,用于在处理单元10控制下通过非透光区域302进行显示。其中,透光区域301的形状可以为矩形,也可以为圆形,也可以为其它形状,本实施例中对此不做限定。另外,透光区域301的位置本领域技术人员可根据产品的需求灵活设置其在显示屏30中的位置,本实施例中也不作限定。
摄像头20,设置于对应透光区域301下方,包括分别与处理单元10电性连接的投影组件202和成像组件201,用于在处理单元10控制下利用投影组件202向显示屏30投影,以在显示屏30的透光区域301进行显示,以及在处理单元10控制下利用成像组件201透过显示屏30的透光区域301采集成像图像。
处理单元10,用于控制显示屏30进行显示,以及用于控制摄像头20在显示状态下投影显示,在成像状态下采集成像图像。
本申请实施例的电子装置中,显示屏与处理单元电性连接,具有透光区域和非透光区域,摄像头设置于对应透光区域下方,包括分别与处理单元电性连接的投影组件和成像组件,用于在处理单元控制下利用投影组件向显示屏投影,以在显示屏的透光区域进行显示,以及在处理单元控制下利用成像组件透过显示屏的透光区域采集成像图像,处理单元,用于控制显示屏进行显示,以及用于控制摄像头在显示状态下投影显示,在成像状态下采集成像图像。通过在摄像头中设置投影组件和成像组件,使得在显示状态下,通过处理单元控制投影组件向显示屏投影,使得显示屏的透光区域也可以对应进行显示,实现了全面屏显示,在成像状态下,通过处理器控制成像组件采集成像图像,实现了图像采集功能,使得电子设备中全面屏显示和图像采集功能可以并存,真正实现了电子设备中全面屏占比的最大化。
基于上述实施例,本申请实施例提供了另一种电子设备的结构的可能的实现方式,图2为本申请实施例提供的另一种电子设备的结构示意图。
如图2所示,处理单元10,可以包括:图像缓存器101,处理器102,与摄像头20电性连接的第一通信接口103和与显示屏30电性连接的第二通信接口104。
图像缓存器101,用于对待显示的图像划分为的显示子图像和投影子图像分别进行缓存。
处理器102,与图像缓存器101电性连接,用于读取图像缓存器101得到显示子图像和投影子图像,并向第一通信接口103发送投影子图像和向第二通信接口104发送显示子图像。
第一通信接口103,与处理器102电性连接,用于将投影子图像发送至摄像头20。第二通信接口104,与处理器102电性连接,用于将显示子图像发送至显示屏30。作为一种可能的实现方式,第一通信接口103和第二通信接口104为同步传输的显示串行接口DSI(Display Serial Interface,DSI)。实现了在显示状态下,通过同步传输的显示串行接口DSI,使得通过第一通信接口103发送至摄像头20的投影子图像和通过第二通信接口104发送至显示屏30的显示子图像,可以同步发送,从而使得显示屏30显示的投影子图像和显示子图像同步显示。
作为一种可能的实现方式,图像缓存器101,可以包括第一缓存区1011和第二缓存区1012,其中,第一缓存区1011用于存储投影子图像,第二缓存区1012用于存储显示子图像。图3为本发明实施例提供的图像缓存器中数据流向的示意图,如图3所示,通过划分不同的缓存区域,第一缓存区1011中存储了和显示屏的非透光区对应的图像像素点对应的图像信息,即显示子图像,第二缓存区1012中存储了和显示屏的透光区域对应的图像像素点对应的图像信息,即投影子图像,从而建立了存储位置和显示屏显示区域需要显示的图像的对应关系,以使得当摄像头处于显示状态时,处理器102可以直接从图像缓存器101的第一缓存区1011中读取投影子图像,通过第一通信接口103发送给摄像头20进行投影显示,以及从第二缓存区1012中读取显示子图像,通过第二通信接口104发送给显示屏30进行显示,提高了显示屏全屏显示的效率。
对于图像缓存器101中存储的投影子图像和显示子图像,是根据待显示图像进行子图像划分得到的,而待显示图像进行子图像划分是根据显示屏30中非透光区域302的图像像素点对应的图像形状和透光区域301的图像像素点对应的图像形状进行划分的,作为一种可能的划分方式,图4为本发明实施例提供的子图像划分的示意图之一,如图4所示,显示屏30中透光区域301对应的图像像素点对应的图像为正方形,则将待显示图像根据显示屏30中透光区域301和非透光区域302图像像素点对应的图像形状进行划分,得到图4中右边的投影子图像和显示子图像。作为另一种可能的划分方式,图5为本发明实施例提供的子图像划分的示意图之二,如图5所示,显示屏30中透光区域301的图像像素点对应的图像为圆形,则将待显示图像,根据显示屏30中透光区域301和非透光区域302的图像像素点对应的图像形状进行划分,得到图5中右边的投影子图像和显示子图像。需要说明的是,图4和图5中仅示出了根据显示屏30的透光区域301和非透光区域302的图像像素点对应的图像进行显示子图像和投影子图像划分的2种形式,实际应用中,本领域技术人员可根据显示屏30中透光区域301和非透光区域302对应的图像像素点的图像形状,对待显示图像进行划分,划分原理相似,本实施例不一一列举。
本申请实施例的电子设备中,通过在摄像头中设置投影组件和成像组件,使得在显示状态下,通过处理单元控制投影组件向显示屏投影,使得显示屏的透光区域也可以对应进行显示,实现了电子设备的全面屏显示,在成像状态下,通过处理器控制成像组件采集成像图像,实现了图像采集功能,使得电子设备中全面屏显示和图像采集功能可以并存,真正实现了电子设备中全面屏占比的最大化。同时,在显示状态下,通过同步传输的显示串行接口DSI,使得通过第一通信接口发送至摄像头的投影子图像和通过第二通信接口发送至显示屏的显示子图像,可以同步发送,从而使得显示屏在显示状态下显示的投影子图像和显示子图像同步显示。
基于上述实施例,本申请实施例还提出了又一种电子设备的可能的实现方式,图6为本申请实施例所提供的又一种电子设备的结构示意图,如图6所示,在上一实施例的基础上,投影组件202,包括:彩膜层2021、金属走线层2022、发光元件2023和驱动元件2024。
驱动元件2024,设置于基板2025表面,用于驱动发光元件2023。
金属走线层2022,设置于驱动元件2024表面,与驱动元件2024和发光元件2023电性连接。
发光元件2023,设置于金属走线层2022表面,用于在驱动元件2024驱动下发光。
彩膜层2021,设置于发光元件2023表面,用于滤光。
作为一种可能的实现方式,发光元件2023,还可以包括:金属阳极20231、有机高分子发光层20232和透明阴极20233。
金属阳极20231,设置于金属走线层2022表面。
有机高分子发光层20232,设置于金属阳极20231表面。
透明阴极20233,设置于有机高分子发光层20232表面。
作为一种可能的实现方式,成像组件201和投影组件202共用同一基板2025,成像组件201包括感光元件2011,与投影组件202共用的金属走线层2022,以及与投影组件202共用的彩膜层2021。
感光元件2011,设置于基板2025表面,用于对彩膜层2021滤光得到的光线进行探测,并与金属走线层2022电性连接。
在一种可能的场景下,当电子设备在显示状态时,启动投影组件202进行投影显示,投影组件202可为多个,每一个投影组件202对应一个投影像素点,投影像素点是根据投影显示的图像确定的,为了便于说明,本实施例中以图像处理模块中包含一个投影组件为例,进行说明,具体地,如图6所示,投影组件202中,在驱动元件2024的驱动信号下,给发光元件2023施加电压,例如,发光元件2023可为有机发光二极管(Organic Light-EmittingDiode,OLED),电流会从透明阴极20233流向金属阳极20231,并经过有机高分子发光层20232,也就是说,透明阴极20233向有机高分子发光层20232输出电子,金属阳极20231向有机高分子发光层20232输出空穴,而在电子到达有机高分子发光层20232时,会和有机高分子发光层20232的空穴结合,电子和空穴分别带负电和正电,它们相互吸引,激发有机高分子发光层20232中的有机材料发光,从而实现了发光元件2023的发光,进而,光经过彩膜层2021进行滤光,可产生红、绿、蓝(Red、Green、Blue)三基色,并根据彩膜层2021的滤光片颜色的设置,实现不同的滤光需求,从而实现需投影显示的图像的显示。
在另一种可能的场景下,电子设备在成像状态时,启动成像组件201进行采集成像图像,成像组件201为多个,每一个成像组件201对应一个成像像素点,成像像素点用于生成成像图像,为了便于说明,本实施例中以图像处理模块中包含一个成像组件为例,进行说明,具体地,如图6所示,光线经过彩膜层2021进行滤光,感光元件2011用于对彩膜层2021滤光得到的光线进行探测,使得感光元件2011将探测到的光线从光信息转化为数字信号,从而确定该成像组件201对应成像像素点的R、G、B值,即确定了该像素点对应的成像图像,进而根据多个成像组件201对应的多个成像像素点,生成对应的成像图像。
本申请实施例的电子设备中,通过在摄像头中设置投影组件和成像组件,使得在显示状态下,通过处理单元控制投影组件向显示屏投影,使得显示屏的透光区域也可以对应进行显示,实现了全面屏显示,在成像状态下,通过处理器控制成像组件采集成像图像,实现了图像采集功能,使得电子设备中的全面屏显示和图像采集功能可以并存。同时,在显示状态下,通过同步传输的显示串行接口DSI,使得通过第一通信接口发送至摄像头的投影子图像和通过第二通信接口发送至显示屏的显示子图像,可以同步发送,从而使得显示屏在显示状态下显示的投影子图像和显示子图像同步显示。另外,通过在摄像头中设置投影组件和显示组件,并进行元件的共用,避免了摄像头尺寸的过大,从而降低电子设备的整体尺寸,同时降低了成本。
在上述实施例的基础上,本申请实施例还提出了一种图像处理方法,图7为本申请实施例所提供的一种图像处理方法的流程示意图,该方法具体可以由上述的电子设备的处理器执行,如图7所示,该方法包括如下步骤:
步骤701,控制摄像头处于显示状态或者处于成像状态。
具体地,显示屏需要进行显示时,处理单元控制摄像头处于显示状态;摄像头需要进行采集图像时,处理单元控制摄像头处于成像状态。
步骤702,当摄像头处于显示状态时,控制摄像头进行投影显示。
具体,当摄像头处于显示状态时,处理单元获取待显示的图像,对待显示的图像划分为显示子图像和投影子图像,并向显示屏发送显示子图像,以及向摄像头发送投影子图像。
步骤703,当摄像头处于成像状态时,控制摄像头采集成像图像。
本申请实施例的图像处理方法中,控制摄像头处于成像状态或显示状态,当摄像头处于投影状态时,控制摄像头进行投影显示,当摄像头处于成像状态时,控制摄像头采集成像图像,实现了电子设备的全面屏显示和图像采集功能的并存,真正实现了电子设备中全面屏占比的最大化。
基于上述实施例,本申请实施例还提出了一种图像处理方法的可能的实现方式,图8为本申请实施例所提供的另一种视频处理方法的流程示意图,如图8所示,基于上述实施例,步骤702还可以包括如下子步骤:
步骤7021,获取待显示图像。
具体地,处理器从图像缓存器中读取待显示的图像。
步骤7022,对待显现的图像划分为显示子图像和投影子图像。
具体地,图像缓存器划分为第一缓存区和第二缓存区,第一缓存区中用于存储投影子图像,第二缓存区中用于存储显示子图像,待显示的图像向图像缓存器中存储时,对待显示的图像划分为显示子图像和投影子图像分别在第二缓存区中和第一缓存区中进行缓存。当摄像头处于显示状态时,处理器根据显示屏的非透光区对应的图像像素点,从待显示的图像中确定显示子图像,以及,处理器根据显示屏的透光区域对应的图像像素点,从待显示的图像中确定投影子图像。
步骤7023,向显示屏发送显示子图像,以及向摄像头发送投影子图像。
具体地,显示子图像由第一传输信号承载,投影子图像由第二传输信号承载,处理器先将对显示屏的第一传输信号和对摄像头的第二传输信息进行信号同步,并在信号同步后,向显示屏发送同步后的第一传输信号,以及向摄像头发送同步后的第二传输信号。作为一种可能的实现方式,可通过同步传输的显示串行接口DSI,将第一传输信号和第二传输信号进行同步,并在信号同步后,向显示屏发送同步后的第一传输信号,以及向摄像头发送同步后的第二传输信号。
本申请实施例的图像处理方法中,在摄像头处于显示状态时,控制摄像头进行投影显示,在摄像头处于成像状态时,控制摄像头采集成像图像,实现了电子设备的全面屏显示和图像采集功能的并存。同时,在图像缓存器中划分显示子图像和投影子图像对应的存储单元,在摄像头处于显示状态时,将承载显示子图像的第一传输信号和承载投影子图像的第二传输信息进行同步,并在同步后发送至对应的显示屏和摄像头,实现了显示屏对应摄像头的透光区域和对应显示屏显示区域的非透光区域,显示的图像完全同步,避免了图像显示不同步造成的用户体验较差。
为了实现上述实施例,本申请还提出一种图像处理装置。
图9为本申请实施例提供的一种图像处理装置的结构示意图。
如图9所示,该装置包括:状态控制模块91、投影控制模块92和成像控制模块93。
状态控制模块91,用于控制摄像头处于显示状态或者处理成像状态.
投影控制模块92,用于当摄像头处于显示状态时,控制摄像头进行投影显示。
成像控制模块93,用于当摄像头处于成像状态时,控制摄像头采集成像图像。
进一步地,在本申请实施例的一种可能的实现方式中,投影控制模块92,还可以包括:获取单元、划分单元和发送单元。
获取单元,用于获取待显示的图像;
划分单元,用于对待显示的图像划分为显示子图像和投影子图像。
发送单元,用于向显示屏发送显示子图像,以及向摄像头发送投影子图像。
在一种可能的实现方式中,划分单元,具体用于:
根据显示屏的非透光区对应的图像像素点,从待显示的图像中确定显示子图像;
以及,根据摄像头投影的透光区对应的图像像素点,从待显示的图像中确定投影子图像。
在一种可能的实现方式中,发送单元,具体用于:
对显示屏的第一传输信号以及摄像头的第二传输信号进行信号同步,其中第一传输信号承载有显示子图像,第二传输信号承载有投影子图像;
向显示屏发送同步后的第一传输信号,以及向摄像头发送同步后的第二传输信号。
需要说明的是,前述对方法实施例的解释说明也适用于该实施例的装置,实现原理相似,此处不再赘述。
本申请实施例的图像处理装置中,在摄像头处于显示状态时,控制摄像头进行投影显示,在摄像头处于成像状态时,控制摄像头采集成像图像,实现了电子设备的全面屏显示和图像采集功能的并存,真正实现了电子设备中全面屏占比的最大化。同时,在图像缓存器中划分显示子图像和投影子图像对应的存储单元,在摄像头处于显示状态时,将承载显示子图像的第一传输信号和承载投影子图像的第二传输信息进行同步,并在同步后发送至对应的显示屏和摄像头,实现了显示屏对应摄像头的透光区域和对应显示屏显示区域的非透光区域,显示的图像完全同步,避免了图像显示不同步造成的用户体验较差。
为了实现上述实施例,本申请还提出了一种电子设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时,实现如前述方法实施例所述的图像处理方法。
为了实现上述实施例,本申请还提出一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时,实现如第二方面实施例的图像处理方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (15)
1.一种电子设备,其特征在于,所述电子设备包括处理单元、摄像头、以及覆盖所述摄像头的显示屏;
其中,所述显示屏,与所述处理单元电性连接,所述显示屏具有透光区域和非透光区域,用于在所述处理单元控制下通过所述非透光区域进行显示,所述非透光区域环绕所述透光区域;
所述摄像头,设置于对应所述透光区域下方,包括分别与所述处理单元电性连接的投影组件和成像组件,用于在所述处理单元控制下利用所述投影组件向所述显示屏投影,以在所述显示屏的透光区域进行显示;以及在所述处理单元控制下利用成像组件透过所述显示屏的透光区域采集成像图像;
所述处理单元,用于控制所述显示屏进行显示,以及用于控制所述摄像头在显示状态下投影显示,在成像状态下采集成像图像。
2.根据权利要求1所述的电子设备,其特征在于,所述处理单元,包括图像缓存器、处理器、与所述摄像头电性连接的第一通信接口和与所述显示屏电性连接的第二通信接口;
所述图像缓存器,用于对待显示的图像划分为显示子图像和投影子图像分别进行缓存;
所述处理器,与所述图像缓存器电性连接,用于读取所述图像缓存器得到所述显示子图像和所述投影子图像,向所述第一通信接口发送所述投影子图像和向所述第二通信接口发送所述显示子图像;
所述第一通信接口,与所述处理器电性连接,用于将所述投影子图像发送至所述摄像头;
所述第二通信接口,与所述处理器电性连接,用于将所述显示子图像发送至所述显示屏。
3.根据权利要求2所述的电子设备,其特征在于,所述图像缓存器包括第一缓存区和第二缓存区;
其中,所述第一缓存区,用于存储所述投影子图像;
所述第二缓存区,用于存储所述显示子图像。
4.根据权利要求2所述的电子设备,其特征在于,
所述第一通信接口和所述第二通信接口为同步传输的显示串行接口DSI。
5.根据权利要求1-4任一项所述的电子设备,其特征在于,所述投影组件和所述成像组件共用同一基板。
6.根据权利要求5所述的电子设备,其特征在于,所述投影组件包括彩膜层、金属走线层、发光元件和驱动元件;
所述驱动元件,设置于所述基板表面,用于驱动所述发光元件;
所述金属走线层,设置于所述驱动元件表面,与所述驱动元件和发光元件电性连接;
所述发光元件,设置于所述金属走线层表面,用于在所述驱动元件驱动下发光;
所述彩膜层,设置于所述发光元件表面,用于滤光。
7.根据权利要求6所述的电子设备,其特征在于,所述成像组件包括感光元件,与所述投影组件共用的金属走线层,以及与所述投影组件共用的彩膜层;
所述感光元件,设置于所述基板表面,用于对所述彩膜层滤光得到的光线进行探测;
所述金属走线层,还与所述感光元件电性连接。
8.根据权利要求6所述电子设备,其特征在于,所述发光元件包括:
金属阳极,设置于所述金属走线层表面;
有机高分子发光层,设置于所述金属阳极表面;
透明阴极,设置于所述有机高分子发光层表面。
9.一种权利要求1-8任意一项所述的电子设备的图像处理方法,其特征在于,所述方法包括:
控制摄像头处于显示状态或者处于成像状态;
当所述摄像头处于显示状态时,控制所述摄像头进行投影显示;
当所述摄像头处于成像状态时,控制所述摄像头采集成像图像。
10.根据权利要求9所述的图像处理方法,其特征在于,所述控制所述摄像头进行投影显示,包括:
获取待显示的图像;
对所述待显示的图像划分为显示子图像和投影子图像;
向显示屏发送所述显示子图像,以及向所述摄像头发送所述投影子图像。
11.根据权利要求10所述的图像处理方法,其特征在于,所述向显示屏发送所述显示子图像,以及向所述摄像头发送所述投影子图像,包括:
对所述显示屏的第一传输信号以及所述摄像头的第二传输信号进行信号同步,其中所述第一传输信号承载有所述显示子图像,所述第二传输信号承载有所述投影子图像;
向所述显示屏发送同步后的第一传输信号,以及向所述摄像头发送同步后的第二传输信号。
12.根据权利要求10所述的图像处理方法,其特征在于,所述对所述待显示的图像划分为显示子图像和投影子图像,包括:
根据所述显示屏的非透光区对应的图像像素点,从所述待显示的图像中确定所述显示子图像;
以及,根据所述摄像头投影的透光区对应的图像像素点,从所述待显示的图像中确定所述投影子图像。
13.一种权利要求1-8任意一项所述的电子设备的图像处理装置,其特征在于,所述装置包括:
状态控制模块,用于控制摄像头处于显示状态或者处理成像状态;
投影控制模块,用于当所述摄像头处于显示状态时,控制所述摄像头进行投影显示;
成像控制模块,用于当所述摄像头处于成像状态时,控制所述摄像头采集成像图像。
14.一种电子设备,其特征在于,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求9-12中任一所述的图像处理方法。
15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求9-12中任一所述的图像处理方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810564121.7A CN108551505B (zh) | 2018-06-04 | 2018-06-04 | 电子设备、图像处理方法和装置 |
US16/431,502 US10965921B2 (en) | 2018-06-04 | 2019-06-04 | Storage medium, electronic device and image processing method |
PCT/CN2019/090036 WO2019233424A1 (en) | 2018-06-04 | 2019-06-04 | Storage medium, electronic device and image processing method |
EP19178154.1A EP3579048B1 (en) | 2018-06-04 | 2019-06-04 | Storage medium, electronic device and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810564121.7A CN108551505B (zh) | 2018-06-04 | 2018-06-04 | 电子设备、图像处理方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108551505A CN108551505A (zh) | 2018-09-18 |
CN108551505B true CN108551505B (zh) | 2024-03-15 |
Family
ID=63492384
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810564121.7A Active CN108551505B (zh) | 2018-06-04 | 2018-06-04 | 电子设备、图像处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108551505B (zh) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019233236A1 (zh) * | 2018-06-04 | 2019-12-12 | Oppo广东移动通信有限公司 | 图像处理模块、摄像头和电子设备 |
EP3579048B1 (en) | 2018-06-04 | 2022-03-30 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Storage medium, electronic device and image processing method |
CN109143670B (zh) * | 2018-09-19 | 2021-11-30 | 北京小米移动软件有限公司 | 显示面板、移动终端及其控制方法 |
CN109274792A (zh) * | 2018-09-30 | 2019-01-25 | 联想(北京)有限公司 | 电子设备和显示方法 |
CN110971722B (zh) * | 2018-09-30 | 2021-07-13 | 北京小米移动软件有限公司 | 图像拍摄方法及装置 |
CN111107192A (zh) * | 2018-10-29 | 2020-05-05 | 印象认知(北京)科技有限公司 | 终端设备的显示屏以及终端设备 |
CN109192076B (zh) * | 2018-11-02 | 2021-01-26 | 京东方科技集团股份有限公司 | 一种显示面板和显示装置 |
CN109525722A (zh) * | 2018-11-06 | 2019-03-26 | Oppo广东移动通信有限公司 | 移动终端控制方法、装置及移动终端 |
KR102517734B1 (ko) | 2018-12-17 | 2023-04-03 | 엘지디스플레이 주식회사 | 센서패키지 모듈을 포함하는 유기발광 표시장치 |
CN111405084A (zh) * | 2019-01-02 | 2020-07-10 | 武汉华星光电半导体显示技术有限公司 | 显示面板和智能终端 |
CN110021611B (zh) * | 2019-03-29 | 2021-02-26 | 武汉华星光电半导体显示技术有限公司 | 柔性显示面板及显示装置 |
CN110071150B (zh) * | 2019-04-15 | 2021-01-15 | 武汉华星光电半导体显示技术有限公司 | Oled显示装置 |
CN110049163B (zh) * | 2019-05-28 | 2022-03-25 | 昆山龙腾光电股份有限公司 | 全面屏电子装置 |
CN110086976B (zh) * | 2019-05-30 | 2021-11-09 | 维沃移动通信(杭州)有限公司 | 一种终端设备 |
CN110519419A (zh) * | 2019-07-17 | 2019-11-29 | 华为技术有限公司 | 电子设备 |
CN110568649A (zh) * | 2019-09-10 | 2019-12-13 | 武汉华星光电技术有限公司 | 一种显示装置及其驱动方法 |
CN110599957B (zh) * | 2019-10-25 | 2020-10-02 | 武汉天马微电子有限公司 | 用于显示面板的伽马调试装置、伽马调试方法及显示方法 |
CN110769155B (zh) * | 2019-10-31 | 2021-11-23 | 维沃移动通信(杭州)有限公司 | 一种摄像头控制方法及电子设备 |
CN110969994B (zh) * | 2019-12-03 | 2021-10-08 | 武汉华星光电技术有限公司 | 一种显示装置及其驱动方法 |
CN111416898B (zh) * | 2020-04-15 | 2022-05-20 | Oppo(重庆)智能科技有限公司 | 一种电子设备、电子设备的显示控制方法及存储介质 |
CN112563314B (zh) * | 2020-12-14 | 2024-03-08 | 维沃移动通信有限公司 | 电子设备 |
CN114760399B (zh) * | 2022-03-31 | 2024-03-05 | 联想(北京)有限公司 | 一种电子设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103338282A (zh) * | 2013-06-07 | 2013-10-02 | 广东欧珀移动通信有限公司 | 一种移动设备及其控制方法 |
CN106817450A (zh) * | 2017-01-24 | 2017-06-09 | 北京小米移动软件有限公司 | 电子设备 |
CN106850897A (zh) * | 2017-03-07 | 2017-06-13 | 广东欧珀移动通信有限公司 | 终端 |
CN107241466A (zh) * | 2017-05-04 | 2017-10-10 | 广东欧珀移动通信有限公司 | 显示装置及移动终端 |
CN107277196A (zh) * | 2017-05-22 | 2017-10-20 | 广东欧珀移动通信有限公司 | 显示模组及其应用的移动终端 |
CN107580092A (zh) * | 2017-10-17 | 2018-01-12 | 黄河科技学院 | 具有透明屏幕下摄像头的全面屏手机及其操作方法 |
CN107682489A (zh) * | 2017-11-20 | 2018-02-09 | 珠海市魅族科技有限公司 | 一种移动终端和移动终端的显示屏控制方法 |
CN108063148A (zh) * | 2017-12-26 | 2018-05-22 | 广东欧珀移动通信有限公司 | 电子装置 |
CN208386639U (zh) * | 2018-06-04 | 2019-01-15 | Oppo广东移动通信有限公司 | 电子设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012026406A1 (ja) * | 2010-08-27 | 2012-03-01 | 京セラ株式会社 | 携帯電子機器及び携帯電子機器の使用方法 |
US8576325B2 (en) * | 2011-01-13 | 2013-11-05 | International Business Machines Corporation | Generating still images and video by capture of images projected by light passing through a display screen |
-
2018
- 2018-06-04 CN CN201810564121.7A patent/CN108551505B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103338282A (zh) * | 2013-06-07 | 2013-10-02 | 广东欧珀移动通信有限公司 | 一种移动设备及其控制方法 |
CN106817450A (zh) * | 2017-01-24 | 2017-06-09 | 北京小米移动软件有限公司 | 电子设备 |
CN106850897A (zh) * | 2017-03-07 | 2017-06-13 | 广东欧珀移动通信有限公司 | 终端 |
CN107241466A (zh) * | 2017-05-04 | 2017-10-10 | 广东欧珀移动通信有限公司 | 显示装置及移动终端 |
CN107277196A (zh) * | 2017-05-22 | 2017-10-20 | 广东欧珀移动通信有限公司 | 显示模组及其应用的移动终端 |
CN107580092A (zh) * | 2017-10-17 | 2018-01-12 | 黄河科技学院 | 具有透明屏幕下摄像头的全面屏手机及其操作方法 |
CN107682489A (zh) * | 2017-11-20 | 2018-02-09 | 珠海市魅族科技有限公司 | 一种移动终端和移动终端的显示屏控制方法 |
CN108063148A (zh) * | 2017-12-26 | 2018-05-22 | 广东欧珀移动通信有限公司 | 电子装置 |
CN208386639U (zh) * | 2018-06-04 | 2019-01-15 | Oppo广东移动通信有限公司 | 电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108551505A (zh) | 2018-09-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108551505B (zh) | 电子设备、图像处理方法和装置 | |
US10965921B2 (en) | Storage medium, electronic device and image processing method | |
CN110809878B (zh) | 一种环境光和接近检测方法、拍摄方法、终端及计算机存储介质 | |
CN208386728U (zh) | 图像处理模块、摄像头和电子设备 | |
CN104243822A (zh) | 拍摄图像的方法及装置 | |
CN105430359A (zh) | 成像方法、图像传感器、成像装置及电子装置 | |
JP2018523323A (ja) | 撮影方法、撮影装置、及び端末 | |
CA3046139A1 (en) | Camera assembly and mobile electronic device | |
CN110557529A (zh) | 图像处理模块、摄像头和电子设备 | |
CN105578072A (zh) | 成像方法、成像装置及电子装置 | |
CN105578078A (zh) | 图像传感器、成像装置、移动终端及成像方法 | |
CN105430361B (zh) | 成像方法、图像传感器、成像装置及电子装置 | |
US10447940B2 (en) | Photographing apparatus using multiple exposure sensor and photographing method thereof | |
CN107426471B (zh) | 相机模组和电子装置 | |
KR101981685B1 (ko) | 디스플레이 장치, 사용자 단말 장치, 외부 장치, 디스플레이 방법, 데이터 수신 방법 및 데이터 전송 방법 | |
CN105872393A (zh) | 高动态范围图像的生成方法和装置 | |
CN108650358B (zh) | 图像传感器、具有投影功能的摄像头及电子设备 | |
CN104346057B (zh) | 背景色的调节方法及装置 | |
CN105578080A (zh) | 成像方法、图像传感器、成像装置及电子装置 | |
CN105430362A (zh) | 成像方法、成像装置及电子装置 | |
CN108566506B (zh) | 图像处理模组、控制方法、电子设备及可读存储介质 | |
CN105578081A (zh) | 成像方法、图像传感器、成像装置及电子装置 | |
JP2008276301A (ja) | 画像処理装置、方法およびプログラム | |
CN105578066A (zh) | 成像方法、成像装置及电子装置 | |
EP3192248B1 (en) | Scanning laser projector and control method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |